TWI527467B - 儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法 - Google Patents

儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法 Download PDF

Info

Publication number
TWI527467B
TWI527467B TW097136134A TW97136134A TWI527467B TW I527467 B TWI527467 B TW I527467B TW 097136134 A TW097136134 A TW 097136134A TW 97136134 A TW97136134 A TW 97136134A TW I527467 B TWI527467 B TW I527467B
Authority
TW
Taiwan
Prior art keywords
sample
data
error
error information
box
Prior art date
Application number
TW097136134A
Other languages
English (en)
Other versions
TW200926834A (en
Inventor
福克斯 哈拉爾德
道爾拉 史蒂芬
Original Assignee
弗勞恩霍夫應用研究促進協會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 弗勞恩霍夫應用研究促進協會 filed Critical 弗勞恩霍夫應用研究促進協會
Publication of TW200926834A publication Critical patent/TW200926834A/zh
Application granted granted Critical
Publication of TWI527467B publication Critical patent/TWI527467B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0078Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0079Formats for control data
    • H04L1/0082Formats for control data fields explicitly indicating existence of error in data being transmitted, e.g. so that downstream stations can avoid decoding erroneous packet; relays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045Arrangements at the receiver end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Automatic Disk Changers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Description

儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法
本發明涉及媒體儲存、傳輸、接收和重播,本發明具體涉及在具有媒體資料容器和元資料容器的文件中的媒體儲存或從所述文件的媒體重播,所述文件例如是基於ISO(國際標準化組織)基礎媒體文件格式的文件。
各種電子設備能夠接收和呈現媒體資料流程。例如,可以根據例如DVB-H標準(數位視頻廣播-手持)或DVB-T標準(數位視頻廣播-地面),從廣播媒體流的數位視頻廣播網路上接收這樣的媒體資料流程。
DVB-T使用自包含的MPEG-2(MPEG=運動圖像專家組)傳輸流,該傳輸流包含根據國際標準ISO/IEC 13818(IEC=國際電子技術委員會)的基本MPEG-2視頻和音頻流。MPEG-2傳輸流是一種在當今的許多廣播系統中使用的複用流。它是一個或更多個流節目(典型地是音頻和視頻以及其他資料)的流複用。MPEG-2傳輸流在節目內的所有媒體流中共用每節目的公共時鐘,並使用加時間戳的媒體樣本(訪問單元AU)。這實現了發送方與接收方的時鐘同步,以及音頻與視頻流的口型同步。
對於DVB-H,以RTP(即時傳輸協定)、UDP(用戶資料報協定)、IP(網際網路協定)和MPE(多協議封裝)對基本音頻和視頻流進行封裝,以用於IP資料傳播。RTP用於多媒體資料在IP網路上的有效即時傳送。典型地,複用是通過將不同的網路埠與每個不同的媒體流相關聯來完成的,例如,一個網路埠用於視頻,而另一個用於音頻。
將流服務定義為以時間約束或無約束的方式傳送的、用於接收過程中立即消耗的同步媒體流的集合。每個流會話可以包括音頻、視頻和/或如定時文本之類的即時媒體資料。例如,通過移動電視接收電影的媒體資料的用戶可以觀看該電影和/或將其記錄到文件中。通常,為此目的,對接收到的媒體流的接收資料分組進行解分組,以將原始媒體資料儲存至文件。也就是說,首先對接收到的RTP分組或MPEG-2分組進行解分組,以獲得它們的以媒體資料樣本形式存在的有效載荷,如壓縮的視頻或音頻幀。接著,在解分組之後,重放所獲得的媒體資料樣本或將其儲存至文件。通常,通過如H.264/AVC(AVC=高級視頻編碼)視頻格式和/或MPEG-4HE-AACv2(HE-AACv2=高效高級音頻編碼第2版)音頻格式之類的格式,來對所獲得的媒體樣本進行壓縮。在要儲存具有這樣的視頻和/或音頻格式的媒體資料樣本時,可以以所謂的3GP文件格式(也稱為3GPP(第3代合作夥伴項目)文件格式)或MP4(MPEG-4)文件格式對其進行儲存。3GP和MP4都是從ISO/IEC國際標準14496-12:2005“Information technology-coding of audio-visual objects-part 12:ISO base media file format”中規定的ISO基礎媒體文件格式中導出的。該格式的文件包括媒體資料和元資料。為了可以操作這樣的文件,這些資料均必須存在。將媒體資料儲存在與文件相關的媒體資料容器(mdat)中,而將元資料儲存在文件的元資料容器(moov)中。傳統上,媒體資料容器包括實際媒體樣本。即,它可以包括例如隔行掃描的、按時間排序的視頻和/或音頻幀。因此,每個媒體在元資料容器moov中具有其自身的元資料軌道(trak),描述該媒體內容的屬性。元資料容器moov中的附加容器(也稱為箱)可以包括關於文件屬性、文件內容等的資訊。
近來,國際標準化組織定義了針對基於ISO基礎媒體文件格式的文件的、所謂的接收提示軌道。這些接收提示軌道可以用於儲存複用的和/或分組化的流,例如接收到的MPEG-2傳輸流或RTP分組。接收提示軌道可以用於用戶端側儲存和對接收到的資料分組的重播。在本說明書的後續章節中,這也將表示為資料樣本。因此,將一個流的接收到的MPEG-2TS或RTP分組直接儲存在接收提示軌道中作為例如預先計算的樣本或構造器。即,在接收提示軌道的情況下,將資料分組作為樣本儲存在基於ISO基礎媒體文件格式的文件的媒體資料容器中。可以通過模擬正常流的接收,並從接收提示軌道中讀取所儲存的資料分組,如同它們是通過IP接收的一樣,來完成從接收提示軌道的重播。
ISO/IEC國際標準14496-12:2005“Information technology-coding of audio-visual objects-part 12:ISO base media file format”將樣本組合(sample grouping)定義為:基於組合準則,將軌道中的每個樣本分配為一個樣本組的成員。由於軌道中的樣本可以有多於一種樣本組合,所以每種樣本組合都具有表示組合類型的類型欄位。
在兩個步驟中定義樣本組。首先,在樣本組描述箱(sgpd)中定義了組合的類型。在第二步驟中,將該描述分配給樣本-組箱(sample-to-group box,sbgp)中的樣本。樣本組機制是可擴展的,且當前用於AVC及SVC專用擴展和專有擴展。
以下給出了語法的非窮盡描述:
這裏給出了SampleGroupDescriptionBox的簡化版本。在ISO文件格式中,存在依賴於控制碼類型的專用版本。
在該箱的一個實例中,可以定義多個組,且每個樣本必須是一個組的成員。以下提供了SampleToGroup箱的語法。
以下抽象示例將示出樣本組如何工作:假定必須描述每個樣本的“顏色”。對於完整的樣本集合,將具有相同顏色的所有樣本組合在一起。
首先,必須指定哪些顏色可以出現。針對每種顏色,定義“SampleGroupDescriptionEntry”。定義grouping_type的值為“顏色”,並將所有的顏色描述條目儲存在grouping_type“顏色“的SampleGroupDescriptionBox中。
其次,“顏色”grouping_type的樣本-組箱描述了哪個樣本具有哪種顏色。這是以如下區分方式完成的:每個列表條目都描述了多少連續樣本具有相同顏色。這就允許針對極少的顏色變化進行非常緊湊的儲存,例如:首先,大量樣本具有顏色1,然後,多個樣本具有顏色2,等等。
對於三種顏色和含有50個樣本的文件,基於上述語法的表可以像這樣:
如上所述,樣本組非常適合於將樣本分類到不同類別中,但當在文件中需要描述與個別樣本相關的事件或個別樣本的屬性時,樣本組不很適合。其主要原因是:樣本組總是描述樣本的完整集合,不屬於組條目(group entry)的樣本必須是“不屬於任何組”這一組條目的成員。另一個原因是:對樣本所屬的樣本組的查找速度較慢。
事件或屬性應當理解為單個樣本或相對少量樣本的索引。事件或屬性出現在有索引的樣本上,但可以影響任意數量的隨後樣本,例如,可以將隨機存取點視作事件。
與以上示例對比的事件示例是“顏色改變”。如果不是必須對顏色本身進行索引,而是必須對從一個顏色到另一個的改變進行索引,則樣本組並不很適合,這是因為基於“樣本組”的索引必須還包括不想要的資訊“無顏色改變”。特別是在頻繁改變的情況下,這可能導致效率較低的索引表。解析文件結尾附近的事件往往是複雜的運算,這是因為必須將所有樣本計數(還有“非事件的”組樣本的計數)相加。
對於特技播放(trick-play)模式(例如快進、在文件中搜索等等),需要有效地識別與期望的入口點最接近的隨機存取點。因此,必須針對正確的入口點來檢查該事件適用的樣本表。隨機存取點可以存在於多個等級,即例如:首先在文件中需要視頻解碼器配置,然後需要視頻軌道的最接近的I-幀,其上是複用級的入口點(例如,MPEG-2 TS情況下的PAT)。
另外的問題是:樣本組不允許樣本與多個組描述相關聯。這在樣本組用於解決這種索引問題時,使事件的堆疊(stacking)變得複雜,且不能給出緊湊的表示。
因此,本發明的目的是提供一種概念,用於將與資料樣本相關的事件或屬性有效地關聯在具有媒體資料容器和元資料容器的文件中,以允許對所述樣本的有效查找。
這個目的通過申請專利範圍第1項所述的記錄文件的設備、申請專利範圍第17項所述的記錄文件的方法、申請專利範圍第19項所述的讀取文件的設備、以及申請專利範圍第26項所述的讀取文件的方法來實現的。
為了解決上述目的,本發明的實施例還提供了執行本發明方法的電腦程式。
本發明基於如下發現:可以通過將屬性資訊和相關的樣本號一起儲存在基於ISO基礎媒體文件格式的文件的元資料容器中,來提供與指定樣本或特定數量的後續樣本相關的事件或屬性。在具體實施例中,屬性資訊與特定樣本或樣本序列的差錯或與所述特定樣本或樣本序列的差錯相關。為了儲存與差錯相關的元資料,在文件的元資料容器(“moov”)中提供了專用容器或箱。因此,在兩個步驟中定義要儲存的差錯資訊。首先,在樣本屬性描述箱(sample-property-description box,“spdb”)中定義差錯類型。在第二步驟中,將該差錯類型描述分配給樣本-屬性箱(sample-to-property box,“stpb”)中的指定樣本。
根據本發明的優選實施例,樣本表(sample-table)箱(“stbl”)中包括與屬性或差錯相關的元資料箱spdb、stpb,該樣本表箱包括軌道中的樣本的時間和資料索引。使用樣本表箱stbl所包括的表,可以及時定位樣本,確定其類型、其大小、容器(在文件的媒體資料部分中)以及進入該容器的偏移。
利用本發明的實施例,可以有效地確定錯誤樣本或錯誤樣本附近的樣本。例如,錯誤樣本可能是:受損的樣本或丟失的樣本,其或者不儲存在媒體資料容器中,或者將其保存到文件之前,在從發射機到接收機的資料樣本先前傳輸期間丟失。
根據本發明的實施例,樣本是在流會話期間接收的,或者如在接收提示軌道的情況下已被儲存在基於ISO基礎媒體文件格式的文件的媒體資料容器中的資料分組,例如RTP或MPEG-2傳輸流資料分組。
根據本發明的實施例,元資料容器(moov)中所儲存的差錯資訊包括定性的差錯資訊,例如差錯類型以及相關聯的錯誤資料樣本的樣本號。另外,差錯資訊還可以包括定量的差錯資訊,例如差錯的詳細描述。
為了產生所述文件,本發明的實施例提供了一種設備,用於輸出具有媒體資料容器和元資料容器的文件,所述設備包括:差錯資訊提供器,用於提供與資料樣本相關的差錯資訊;以及記錄器,用於將差錯資訊和與資料樣本相關的樣本號一起儲存在元資料容器中。
此外,本發明的實施例提供了一種設備,用於讀取具有媒體資料容器和元資料容器的文件,其中,所述媒體資料容器儲存有資料樣本,所述元資料容器儲存有與所儲存的資料樣本相關的差錯資訊,所述設備包括:解析器,用於解析元資料容器,以找到與要處理的資料樣本相關的差錯資訊;以及處理器,用於在相關差錯資訊指示要處理的資料樣本錯誤的情況下,提供差錯專用的措施或動作。
例如,差錯專用的措施可以是差錯隱藏或差錯指示措施。可以執行差錯隱藏以在例如所儲存的資料樣本或分組的重播期間,對用戶隱藏錯誤的資料樣本或資料分組。例如,當重播音頻時,通過本領域公知的具體隱藏方法,來替換丟失的或受損的音頻幀。這同樣適用於丟失的或受損的視頻幀。
此外,所儲存的差錯資訊可以用於:在接收到完整傳輸的資料樣本並將其儲存到文件之後,確定地識別所有錯誤接收的資料樣本。本發明的實施例提供了一種設備,用於讀取和解析元資料容器,以識別媒體資料容器中所儲存的錯誤資料樣本,並以非即時的操作從資料伺服器(例如流伺服器)請求和接收這些錯誤資料樣本的新拷貝。使用新接收的無差錯資料樣本在文件中替換錯誤資料樣本,以將所儲存的包含差錯的文件轉換成無差錯的文件。
本發明的實施例提供了差錯的緊湊表示。樣本號可以用於快速查找表。這對於長文件(例如完整電影的記錄)而言是特別有益的。通過使差錯資訊與樣本號直接相關,可以在嘗試處理錯誤資料分組或資料樣本之前,“警告”或通知解分組器或解碼器,以便可以設計出適當的對策。
通過考慮以下詳述的實施例,並結合附圖,本發明的另外的目的和特徵將變得顯而易見。
為了解釋而非限制的目的,以下描述提出了具體細節,例如特定的實施例、過程、技術等等。但本領域技術人員應當理解,除這些具體細節之外,還可以採用其他實施例。例如,雖然使用對不同實施例的非限定性示例應用來便於以下描述,但該技術可以用於任何類型的系統。在某些示例中,省略了對公知的方法、介面、電路和設備的詳細描述,以避免以不必要的細節使該描述晦澀難懂。此外,在某些圖中示出了各個塊。本領域技術人員應當理解,這些塊的功能是以如下方式實現的:使用各硬體電路、使用各軟體程式和資料、結合合適編程的數位微處理器或通用電腦、使用專用積體電路(ASIC)和/或使用一個或更多個數位信號處理器(DSP)。
第一圖A示出了用於輸出具有媒體資料容器16和元資料容器14的文件12的設備10的示例性框圖。
設備10包括:差錯資訊提供器18,用於提供與輸入至差錯資訊提供器18的資料樣本20相關的差錯資訊19。此外,設備10包括記錄器22,用於將差錯資訊19和與資料樣本20相關的樣本號21一起儲存在文件12的元資料容器14中。
根據本發明的實施例,差錯資訊提供器18適於分析資料樣本20的序列,以提供與所分析的資料樣本序列中丟失的資料樣本相關的差錯資訊19。這可以用於識別例如在流會話期間丟失了的樣本。在檢測到丟失的資料樣本的情況下,記錄器22可以將指示丟失的資料樣本的差錯資訊19和與丟失的資料樣本或分組相鄰的或在其附近的現有資料樣本的樣本號21一起儲存。換言之,由於記錄器22不能儲存因丟失而不存在的資料樣本的樣本號,因此,記錄器22可以將與丟失樣本相關的差錯資訊與未丟失的附近的資料樣本相關聯。以下還將給出示意性示例。
另外或可選地,差錯資訊提供器18可以適於檢測是否資料樣本20的至少一部分包含受損的資訊。例如,由於在資料樣本從發送方到接收方的傳輸期間的特定效應(例如通道衰落或加性雜訊),由資料樣本攜帶的資訊可能被篡改或損壞,使得資料樣本的接收版本與資料樣本的發送版本不再對應。在這種情況下,例如,可以在接收端應用差錯校正或差錯隱藏方法。
第一圖B示出了根據本發明的另一實施例的設備10。
在第一圖B所示的實施例中,已經將資料樣本20-1、20-2、20-3儲存在基於ISO基礎媒體文件格式的文件12的媒體資料容器16(mdat)中。典型地,將媒體資料箱16內的樣本20-1、20-2、20-3組合為所謂的組塊(chunk)。組塊可以有不同的大小,且組塊內的樣本可以有不同的大小。在第一圖B的情況下,差錯資訊提供器18適於解析或分析媒體資料容器16中所儲存的資料樣本20-1、20-2、20-3,以檢測丟失的、受損的或總而言之錯誤的資料樣本。在資料樣本20-1、20-2、20-3是資料分組(例如RTP或MPEG-2傳輸流資料分組)的情況下,這些資料分組通常包括指示傳輸順序的序列號。差錯資訊提供器18可以檢驗所儲存的資料樣本20-1、20-2、20-3的序列號,從而檢測丟失的序列號。另外,可以解析所儲存的資料樣本20-1、20-2、20-3的序列或組塊,以找到受損的樣本。
第一圖C中大體示出了設備10的又一實施例。
該實施例包括用於接收流資料樣本20-1、20-2、20-3的接收機24,所述資料樣本可以是原始媒體資料樣本或包括分組化媒體資料樣本的資料分組。接收機24的輸出耦合至差錯資訊提供器18的輸入,使得差錯資訊提供器18可以檢驗接收到的資料樣本20-1、20-2、20-3,以檢測丟失的或受損的資料樣本,並提供相應的定性差錯資訊,以及可選地提供定量差錯資訊。在第一圖C給出的示例中,記錄器22適於將接收到的資料樣本20儲存在文件12的媒體資料容器16的組塊中,並將樣本號21同每個所儲存的資料樣本相關聯。
根據本發明的實施例,將所提供的差錯資訊19儲存在元資料容器14(moov)所包括的樣本表箱(stbl)的子箱中,該樣本表箱(stbl)允許在組塊中從資料樣本20-1、20-2、20-3的定時索引至與它們相關聯的樣本號21-1、21-2、21-3。這將參照第二圖更詳細地示出。
第二圖示出了基於ISO基礎媒體文件格式的文件的樣本表箱stbl 50,所述樣本表箱stbl 50包括傳統的媒體資料參考子箱,例如:樣本描述箱(stsd)、樣本大小箱(stsz)、樣本-組塊箱(stsc)和組塊偏移箱(stco),除此之外,所述樣本表箱stbl 50還包括本發明的子箱52和54。需要樣本描述箱(stsd),這是因為它包含資料參考索引欄位,該資料參考索引欄位指示哪個資料參考箱用於檢索媒體資料容器(mdat)中的樣本。在沒有樣本描述的情況下,不可能確定樣本被儲存在何處。同步樣本表(stss)是可選的。如果同步樣本表(stss)不存在,則所有樣本都是同步的樣本。除了本領域技術人員公知的傳統的子箱之外,樣本表箱stbl 50還包括兩個另外的子箱52和54,它們與由差錯資訊提供器18提供的差錯資訊19相關。以下,子箱52將示例性地表示為SamplePropertyDescriptionBox(樣本屬性描述箱)spdb,其中子箱54將示例性地表示為SampleToPropertyBox(樣本-屬性箱)stpb。根,據本發明的實施例,樣本的屬性是如下事實:樣本與差錯相關或樣本本身是錯誤的。
SampleTopropertyBox stpb 54將樣本映射到它們的屬性,即根據實施例的差錯。可以將屬性堆疊,即相同屬性類型(差錯)的多個屬性可以應用於一個樣本。具體屬性值的長度(property_length)是未指定的,且依賴於該屬性。不能理解property_type的文件讀取器可以丟棄整個箱stpb54。
SamplePropertyDescriptionBox spdb 52描述了一個property_length的屬性。樣本屬性描述條目未被具體定義,且可以是專有的。僅當讀取設備理解property_type或者將該property_type的SampleToPropertyBox stpb 54和SamplePropertyDescriptionBox spdb 52都丟棄時,該讀取設備才可以解析箱spdb 52。樣本屬性的示例性語法可以像這樣:
根據實施例,可以對差錯進行索引,即可以在接收提示軌道中標記傳輸差錯。由此,可以定義兩個不同的差錯類:
a)丟失的分組
b)受損的分組
因此,根據以上示例性命名法,可以針對根據以下代碼來對每一項定義SamplePropertyDescriptionEntry:
可以將SamplePropertyDescriptionEntry定義如下:
這裏,LostPacketEntry與第一定性差錯資訊相對應,並用於初始化SampleToPropertyBox stpb 54中的第一個property_desc_index的運行。CorruptedPacketEntry與第二定性差錯資訊相對應,並初始化第二個property_desc_index的運行。
如果有例如受傳輸差錯影響的對分組[1,n]的傳輸,其中n=1000,例如,分組310至367丟失,分組34至177受損,則SampleToPropertyBox條目可以是:
如果每個接收到的分組都產生樣本且分組310至367丟失,則樣本1至309包含分組1至309。樣本310至942包含分組378至1000。
在以上示例中,對於值為1的property_desc_index,丟失之後的下一個接收到的分組包含差錯指示或資訊。SampleProperty的值(即定量差錯資訊)是此前連續丟失的分組的數量,因此為58。
由property_desc_index=2的運行來標記標記受損的分組。因此,將樣本34至177標記為受損的。由於對於該property_desc_index,property_length的值為0,所以不對其賦值。
現在轉至第三圖,將概述一種用於輸出基於ISO基礎媒體文件格式的文件12的方法。
在第一步驟S1中,差錯資訊提供器18分析資料樣本或資料分組20,以確定與所分析的樣本20相關的差錯資訊19。在步驟S2中,在檢測到產生差錯資訊的差錯與所述樣本相關的情況下,將該差錯資訊19和與其相關聯的錯誤資料樣本的樣本號21一起儲存在元資料容器14中。步驟S2包括:將SamplePropertyDescriptionBox 52和SampleToPropertyBox 54儲存在文件12的元資料容器moov 14的樣本表stbl 50中。
如果接收到資料樣本20,例如,在接收到流資料樣本的情況下,將每個接收到的資料樣本與樣本號21相關聯。此外,在可選步驟S3中,可以將每個接收到的資料樣本儲存在媒體資料容器16的組塊中。
可見,本質上可以並行執行步驟S2和可選步驟S3,即,可以將差錯資訊19和樣本號21儲存在媒體資料容器14中,而同時將資料樣本儲存在媒體資料容器16中。
如上所述,樣本可以是資料分組,例如RTP或MPEG-2傳輸流資料分組,如同在該說明書的介紹部分中所述的儲存接收提示軌道的情況一樣。
在已將樣本儲存在媒體資料容器16,且已將差錯資訊儲存在基於ISO基礎媒體文件格式的文件12的元資料容器14中之後,可以在例如樣本重播期間,使用所儲存的差錯資訊。為此目的,如第四圖中示例性地示出的,本發明的實施例提供了設備60,用於讀取具有媒體資料容器16和元資料容器14的文件12。
設備60包括:解析器62,用於解析或分析元資料容器14,以找到與要處理的資料樣本20相關的差錯資訊19。在該相關的差錯資訊19指示要處理的資料樣本20錯誤的情況下,處理器64可以提供差錯專用的措施。
更具體地,解析器62可以解析文件12的元資料容器moov 14的樣本表stbl 50中的SamplePropertyDescriptionBox 52和SampleToPropertyBox 54。因此,解析器62可以查找樣本號21及其關聯的定性差錯資訊19(例如,在參考以上使用的命名法時是其property_desc_index)。另外,解析器62可以提取定量差錯資訊,例如:在具有關聯樣本號的分組之前或之後有多少資料分組丟失。
根據本發明的實施例,處理器64適於:回應於檢測到的差錯資訊,執行差錯隱藏措施作為差錯專用措施。例如,如果要處理的資料樣本受損或丟失,則處理器64可以通過在相鄰的、現有的資料樣本的頻譜值之間執行某種頻譜插值操作來合成樣本。這可以在例如資料樣本與音頻或視頻幀相關的情況下完成。
在樣本或資料分組受損的情況下,處理器64還可以適於發起某種差錯校正,例如通過採用通道解碼裝置。
在另一實施例中,處理器64還可以通過報告前述定性和定量差錯資訊,來將差錯指示給下游設備或指示給用戶介面。
此外,元資料容器14中所儲存的差錯資訊19可以用於:在接收到完整傳輸的資料樣本並將其儲存到文件12之後,確定地識別錯誤接收的資料樣本。出於這種原因,解析器62可以解析元資料容器14中所儲存的差錯資訊19,以識別媒體資料容器16中所儲存的錯誤資料樣本。處理器64可以以非即時的操作,從內容提供者的伺服器(例如流伺服器)請求和接收所識別的錯誤資料樣本的新拷貝或版本。即,所識別的資料樣本(可以是例如單個錯誤視頻幀)的重傳不需要即時協定。然後,可以以所請求和新接收的無差錯資料樣本在文件12中替換錯誤資料樣本,以便將所儲存的包含差錯的文件12轉換成無差錯的文件。
設備60可以得到外部請求,該外部請求創建差錯資訊形式的應答,例如:
-得到由應用於特定請求樣本的差錯資訊構成的應答;
-得到帶有特定請求差錯(例如丟失的樣本)所應用的最接近樣本號的應答。
以差錯資訊形式存在的所述事件或樣本屬性適用於例如接收提示軌道的索引。
本發明的實施例提供了如下優點:可以以可擴展的方式描述與樣本相關的差錯。可以將多個對應的差錯組合為差錯類型。定量差錯資訊不限於諸如SampleGroupDescriptionEntry的數量之類的情況。
此外,提供了一種簡單、有效的方式,以使用信號來指示文件中差錯出現的位置。這可以在重放該文件的媒體資料容器中所儲存的資料內容時,用於差錯校正、差錯隱藏和/或差錯指示方法。
根據情況,可以以硬體或軟體來實現本發明的方法。可以在數位儲存介質上完成本發明的實施方式,所述數位儲存介質特別是具有電子可讀控制信號的磁片、CD或DVD,它們可以與可編程電腦系統合作以執行本發明的方法。因此,一般地,本發明還包括一種電腦程式產品,具有機器可讀載體上儲存的程式碼,當所述電腦程式產品運行于電腦上時,用於執行本發明的方法。換言之,因此,本發明可以實現為具有程式碼的電腦程式,當該電腦程式運行于電腦上時,用於執行本發明的方法。
儘管根據多個優選實施例對本發明進行了描述,然而存在落入本發明的範圍內的改變、置換及等效物。也應注意,存在許多備選方式來實現本發明的方法和構造。因此,所附權利要求應被解釋為包括所有這樣的落入本發明的真實精神和範圍內的改變、置換及等效物。
10‧‧‧設備
12‧‧‧文件
14‧‧‧元資料容器
16‧‧‧媒體資料容器
18‧‧‧差錯資訊提供器
19‧‧‧差錯資訊
20‧‧‧資料樣本
20-1、20-2、20-3...資料樣本
21...樣本號
21-1、21-2、21-3...樣本號
22...記錄器
24...接收機
50...樣本表箱stbl
52、54...子箱
60...設備
62...解析器
64...處理器
第一圖A示出了根據本發明的實施例的用於輸出具有媒體資料容器和元資料容器的文件的設備的示意框圖;第一圖B示出了根據本發明的另一實施例的用於輸出具有媒體資料容器和元資料容器的文件的設備的示意框圖;第一圖C示出了根據本發明的又一實施例的用於輸出具有媒體資料容器和元資料容器的文件的設備的示意框圖;第二圖示出了根據本發明的實施例的樣本表箱的示意結構;第三圖示出了根據本發明的實施例的用於輸出所述文件的方法的流程圖;第四圖示出了根據本發明的實施例的用於讀取具有媒體資料容器和元資料容器的文件的設備的示意框圖。
10‧‧‧設備
12‧‧‧文件
14‧‧‧元資料容器
16‧‧‧媒體資料容器
18‧‧‧差錯資訊提供器
19‧‧‧差錯資訊
20‧‧‧資料樣本
21‧‧‧樣本號
22‧‧‧記錄器

Claims (21)

  1. 一種用於輸出具有媒體資料容器(16)和元資料容器(14)的文件(12)的設備(10),所述設備包括:差錯資訊提供器(18),用於提供與資料樣本(20)相關的差錯資訊(19),其中,所述差錯資訊提供器(18)適於將所提供的差錯資訊(19)與多個差錯類型中的至少一個相關聯,每個差錯類型指示不同類型的差錯;記錄器(22),用於將所述差錯資訊和與所述資料樣本相關的樣本號(21)一起儲存在所述元資料容器(14)中;其中該元資料容器(14)包含有一樣本表箱(50),該樣本表箱(50)包括有:一樣本屬性描述箱(52),係記載至少一個差錯類型以及一個聯合差錯描述索引;以及一樣本-屬性箱(54),係利用聯合差錯描述索引以及與丟失的或受損的資料樣本相關的樣本號,僅將該丟失的或受損的資料樣本映射至與之相對應的差錯類型;其中,所述記錄器(22)適於將所述至少一個差錯類型儲存在樣本表箱(stbl)所包括的樣本屬性描述箱(52;spdb)中,所述樣本表箱(stbl)允許從資料樣本的定時索引至與其相關聯的樣本號(21);其中,所述記錄器(22)適於將所提供的差錯資訊(19)和樣本號(21)一起儲存在樣本-屬性箱(54;stpb)中,所述樣本-屬性箱(54;stpb)允許在資料樣本與所提供的差錯資訊(19)之間進行分配,所述樣本-屬性箱(54;stpb)被包括在樣本表箱(stbl)中。
  2. 依據申請專利範圍第1項所述的設備,其中,所述差錯資訊提供器(18)適於分析資料樣本序列,以提供與資料樣本序列中丟失的資料樣本相關的差錯資訊(19)。
  3. 依據申請專利範圍第2項所述的設備,其中,所述記錄器(22)適於:在檢測到資料樣本序列中丟失的資料樣本的情況下,將指示丟失的資料樣本的差錯資訊(19)和與丟失的資料樣本相鄰的現有資料樣本的樣本號(21)一起儲存。
  4. 依據申請專利範圍第1項所述的設備,其中,所述差錯資訊提供器(18)適於檢測是否資料樣本(20)的至少一部分包含受損的資訊。
  5. 依據申請專利範圍第1項所述的設備,其中,將資料樣本(20)儲存在文件(12)的媒體資料容器(16)中,以及所述差錯資訊提供器(18)適於解析所儲存的資料樣本,以檢測丟失的或受損的資料樣本。
  6. 依據申請專利範圍第1項所述的設備,其中,所述設備包括用於接收流資料樣本的接收機(24),以及所述差錯資訊提供器(18)適於檢驗接收到的資料樣本,以檢測丟失的或受損的資料樣本。
  7. 依據申請專利範圍第6項所述的設備,其中,所述記錄器(22)適於將接收到的資料樣本儲存在文件(12)的媒體資料容器(16)的組塊中,並將樣本號(21)同每個所儲存的資料樣本相關聯。
  8. 依據申請專利範圍第7項所述的設備,其中,所述 記錄器(22)適於將所提供的差錯資訊(19)儲存在樣本表箱(stbl)中,所述樣本表箱(stbl)允許在組塊中從所儲存的資料樣本的定時索引至與其相關聯的樣本號(21)。
  9. 依據申請專利範圍第1項所述的設備,其中,所述記錄器適於儲存組塊偏移表(stco),所述組塊偏移表(stco)指示每個組塊進入文件(12)中的索引。
  10. 依據申請專利範圍第1項所述的設備,其中,所提供的差錯資訊(19)包括定性的和定量的差錯資訊,以及所述記錄器適於將定量差錯資訊與定性差錯資訊和樣本號(21)一起儲存,所述定量差錯資訊定量地表徵所述定性差錯資訊。
  11. 依據申請專利範圍第1項所述的設備,其中,所述文件(12)是基於ISO基礎媒體文件格式。
  12. 依據申請專利範圍第1項所述的設備,其中,所述資料樣本(20)是包括媒體資料樣本的流資料分組。
  13. 依據申請專利範圍第12項所述的設備,其中,所述流資料分組是流RTP分組、RTCP分組或MPEG-2傳輸流分組。
  14. 一種用於輸出具有媒體資料容器(16)和元資料容器(14)的文件(12)的方法,所述方法包括以下步驟:提供(S1)與資料樣本相關的差錯資訊(19),其中,所提供的差錯資訊(19)與多個差錯類型中的至少一個相關聯,每個差錯類型指示不同類型的差錯;將所述差錯資訊(19)和與所述資料樣本相關的樣本 號(21)一起儲存(S2)在所述元資料容器中;其中該元資料容器包含有一樣本表箱(50),該樣本表箱(50)包括有:一樣本屬性描述箱(52),係記載至少一個差錯類型以及一個聯合差錯描述索引;以及一樣本-屬性箱(54),係利用聯合差錯描述索引以及與丟失的或受損的資料樣本相關的樣本號,僅將該丟失的或受損的資料樣本映射至與之相對應的差錯類型;其中,所述儲存包括將所述至少一個差錯類型儲存在樣本表箱(stbl)所包括的樣本屬性描述箱(52;spdb)中,所述樣本表箱(stbl)允許從資料樣本的定時索引至與其相關聯的樣本號(21),以及其中,所提供的差錯資訊(19)和樣本號(21)一起儲存在樣本-屬性箱(54;stpb)中,所述樣本-屬性箱(54;stpb)允許在資料樣本與所提供的差錯資訊(19)之間進行分配,所述樣本-屬性箱(54;stpb)被包括在樣本表箱(stbl)中。
  15. 一種電腦可讀取媒體,包含有一具有一程式碼的電腦程式,當所述電腦可讀取媒體運行於電腦和/或微控制器上時,該程式碼會執行依據申請專利範圍第14項所述的方法。
  16. 一種用於讀取具有媒體資料容器(16)和元資料容器(14)的文件(12)的設備(60),所述媒體資料容器(16)儲存有資料樣本(20),所述元資料容器(14)儲存有與所儲存的資料樣本相關的差錯資訊(19)以及一樣本表箱 (50),該樣本表箱(50)包括有一樣本屬性描述箱(52),係記載至少一個差錯類型以及一個聯合差錯描述索引;以及一樣本-屬性箱(54),係利用聯合差錯描述索引以及與丟失的或受損的資料樣本相關的樣本號,僅將該丟失的或受損的資料樣本映射至與之相對應的差錯類型;其中,所述設備包括:解析器(62),用於解析元資料容器,以找到與要處理的資料樣本相關的差錯資訊;以及處理器(64),用於在所述相關的差錯資訊(19)指示要處理的資料樣本錯誤的情況下,提供差錯專用措施;其中,所述處理器(64)適於請求和新接收由所儲存之差錯資訊所決定之丟失的或受損的資料樣本的無差錯拷貝,以及所述處理器(64)適於將所請求和新接收的無差錯資料樣本置於文件(12)的媒體資料容器中,以便將所儲存的包括錯誤資料樣本的文件轉換成無差錯的文件。
  17. 依據申請專利範圍第16項所述的設備,其中,所述文件(12)是基於ISO基礎媒體文件格式。
  18. 依據申請專利範圍第16項所述的設備,其中,所述資料樣本是包括媒體資料樣本的流資料分組。
  19. 依據申請專利範圍第18項所述的設備,其中,所儲存的資料樣本是RTP分組、RTCP分組或MPEG-2傳輸流分組。
  20. 一種用於讀取具有媒體資料容器(16)和元資料容器(14)的文件(12)的方法,所述媒體資料容器(16) 儲存有資料樣本(20),所述元資料容器(14)儲存有與所儲存的資料樣本相關的差錯資訊(19)以及一樣本表箱(50),該樣本表箱(50)包括有一樣本屬性描述箱(52),係記載至少一個差錯類型以及一個聯合差錯描述索引;以及一樣本-屬性箱(54),係利用聯合差錯描述索引以及與丟失的或受損的資料樣本相關的樣本號,僅將該丟失的或受損的資料樣本映射至與之相對應的差錯類型;其中,所述方法包括以下步驟:解析元資料容器(14),以找到與要處理的資料樣本相關的差錯資訊(19);以及在所述相關的差錯資訊(19)指示要處理的資料樣本錯誤的情況下,提供差錯專用措施;所述提供差錯專用措施包括請求和新接收由所儲存之差錯資訊所決定之丟失的或受損的資料樣本的無差錯拷貝,以及將所請求和新接收的無差錯資料樣本置於文件(12)的媒體資料容器中,以便將所儲存的包括錯誤資料樣本的文件轉換成無差錯的文件。
  21. 一種電腦可讀取媒體,包含有一具有一程式碼的電腦程式,當所述電腦可讀取媒體運行於電腦和/或微控制器上時,該程式碼會執行申請專利範圍第20項所述的方法。
TW097136134A 2007-09-19 2008-09-19 儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法 TWI527467B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US97353607P 2007-09-19 2007-09-19
PCT/EP2008/007832 WO2009036980A2 (en) 2007-09-19 2008-09-18 Apparatus and method for storing and reading a file having a media data container and a metadata container

Publications (2)

Publication Number Publication Date
TW200926834A TW200926834A (en) 2009-06-16
TWI527467B true TWI527467B (zh) 2016-03-21

Family

ID=40377617

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097136134A TWI527467B (zh) 2007-09-19 2008-09-19 儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法

Country Status (17)

Country Link
US (1) US8849778B2 (zh)
EP (1) EP2195952B1 (zh)
JP (1) JP5587779B2 (zh)
KR (1) KR101170440B1 (zh)
CN (1) CN101828351B (zh)
AT (1) ATE503312T1 (zh)
AU (1) AU2008300895B2 (zh)
BR (1) BRPI0815968B1 (zh)
CA (1) CA2699102C (zh)
DE (1) DE602008005774D1 (zh)
ES (1) ES2362975T3 (zh)
HK (1) HK1145374A1 (zh)
MX (1) MX2010002775A (zh)
PL (1) PL2195952T3 (zh)
RU (1) RU2486679C2 (zh)
TW (1) TWI527467B (zh)
WO (1) WO2009036980A2 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2088789A3 (en) * 2008-02-05 2012-08-15 Samsung Electronics Co., Ltd. Apparatus and method for generating and displaying media files
US9262419B2 (en) * 2013-04-05 2016-02-16 Microsoft Technology Licensing, Llc Syntax-aware manipulation of media files in a container format
KR102210509B1 (ko) * 2013-06-24 2021-02-01 삼성전자주식회사 멀티미디어 시스템에서 컨텐츠를 변환하는 방법 및 장치
EP3155819A4 (en) * 2014-06-13 2018-01-10 Thomson Licensing Digital video broadcasting network system and method of obtaining program information in digital video broadcasting
US9645878B2 (en) * 2014-07-09 2017-05-09 Qualcomm Incorporated Error handling for files exchanged over a network
KR102271811B1 (ko) 2014-10-22 2021-07-01 삼성전자주식회사 전자장치 및 전자장치의 컨텐트 제어 방법
US9928297B2 (en) * 2015-02-11 2018-03-27 Qualcomm Incorporated Sample grouping signaling in file formats
WO2017122543A1 (ja) * 2016-01-13 2017-07-20 ソニー株式会社 情報処理装置および情報処理方法
JP6783325B2 (ja) 2016-04-28 2020-11-11 華為技術有限公司Huawei Technologies Co.,Ltd. ファイルセーブ方法及び電子機器
CN110545254B (zh) 2018-05-29 2021-05-04 北京字节跳动网络技术有限公司 一种元数据容器的解析方法、装置及存储介质

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100342120B1 (ko) * 1994-02-28 2002-11-30 소니 가부시끼 가이샤 데이터기록방법및장치,데이터기록매체,및데이터재생방법및장치
CA2398071A1 (en) 2000-01-28 2001-08-02 Diva Systems Corporation A system for preprocessing content for streaming server
JP3946965B2 (ja) * 2001-04-09 2007-07-18 ソニー株式会社 無体財産権を保護する情報を記録する記録装置、記録方法、記録媒体、およびプログラム
US7315894B2 (en) * 2001-07-17 2008-01-01 Mcafee, Inc. Network data retrieval and filter systems and methods
JP4565308B2 (ja) * 2001-09-13 2010-10-20 ソニー株式会社 エラー検出装置及びエラー検出方法並びに記録再生装置及び記録再生方法
EP1481553A1 (en) 2002-02-25 2004-12-01 Sony Electronics Inc. Method and apparatus for supporting avc in mp4
US20040199565A1 (en) * 2003-02-21 2004-10-07 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
EP1500002A1 (en) * 2002-04-29 2005-01-26 Sony Electronics Inc. Supporting advanced coding formats in media files
US20040006575A1 (en) * 2002-04-29 2004-01-08 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
JP2004038575A (ja) 2002-07-03 2004-02-05 Sony Corp データ送受信システム及びデータ送受信方法、情報提供装置及び情報提供方法、並びにデータ受信装置及びデータ受信方法
AU2003263792A1 (en) * 2002-07-20 2004-02-09 Chicago Climate Exchange, Inc. Emission reduction trading system and method
JPWO2005002231A1 (ja) * 2003-06-27 2006-08-17 株式会社日立製作所 映像編集装置
JP2005039577A (ja) * 2003-07-16 2005-02-10 Victor Co Of Japan Ltd ストリームデータ記録再生方法
KR101244308B1 (ko) * 2003-12-08 2013-03-18 삼성전자주식회사 동영상 파일의 암호화 방법 및 그를 이용한 디지털 저작권관리방법
US8472792B2 (en) * 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
US7567584B2 (en) * 2004-01-15 2009-07-28 Panasonic Corporation Multiplex scheme conversion apparatus
JP2005229587A (ja) * 2004-01-15 2005-08-25 Matsushita Electric Ind Co Ltd 多重化方式変換装置
JP2005348015A (ja) * 2004-06-02 2005-12-15 Fujitsu Ltd リアルタイム・ストリーミングデータ受信装置
CN101164335B (zh) * 2005-04-20 2010-05-19 松下电器产业株式会社 流数据记录装置、流数据编辑装置、流数据再现装置、流数据记录方法、以及流数据再现方法
GB2434496B (en) * 2005-07-14 2007-10-31 Snell & Wilcox Ltd Method and apparatus for analysing image data
CN101087438A (zh) 2006-06-06 2007-12-12 安捷伦科技有限公司 计算无参考视频质量评估的分组丢失度量的系统和方法
US20080124050A1 (en) * 2006-09-07 2008-05-29 Joseph Deschamp Method and Apparatus for Processing Digital Program Segments

Also Published As

Publication number Publication date
PL2195952T3 (pl) 2011-08-31
AU2008300895B2 (en) 2011-07-28
EP2195952A2 (en) 2010-06-16
DE602008005774D1 (de) 2011-05-05
JP5587779B2 (ja) 2014-09-10
AU2008300895A1 (en) 2009-03-26
BRPI0815968A2 (pt) 2023-02-28
KR101170440B1 (ko) 2012-08-09
ES2362975T3 (es) 2011-07-18
JP2010539834A (ja) 2010-12-16
CN101828351B (zh) 2014-05-07
US8849778B2 (en) 2014-09-30
RU2010116075A (ru) 2011-10-27
HK1145374A1 (en) 2011-04-15
CA2699102A1 (en) 2009-03-26
WO2009036980A3 (en) 2009-05-28
KR20100049648A (ko) 2010-05-12
US20100198798A1 (en) 2010-08-05
RU2486679C2 (ru) 2013-06-27
MX2010002775A (es) 2010-04-01
TW200926834A (en) 2009-06-16
EP2195952B1 (en) 2011-03-23
CA2699102C (en) 2014-07-22
BRPI0815968B1 (pt) 2023-11-28
CN101828351A (zh) 2010-09-08
ATE503312T1 (de) 2011-04-15
WO2009036980A2 (en) 2009-03-26

Similar Documents

Publication Publication Date Title
TWI527467B (zh) 儲存和讀取具有媒體資料容器和元資料容器的文件的設備和方法
KR101107815B1 (ko) 멀티미디어 컨테이너 파일의 수신 힌트 트랙으로의 미디어 스트림 기록 방법 및 장치, 컴퓨터 판독가능 매체
RU2459378C2 (ru) Устройство и способ для обработки и чтения файла, имеющего хранилище медиаданных и хранилище метаданных
CA2917290C (en) Method and apparatus for transmitting/receiving media broadcasting signal in real time transport protocol-based broadcasting system
US9852219B2 (en) Segmented metadata and indexes for streamed multimedia data
US9262419B2 (en) Syntax-aware manipulation of media files in a container format
US9883216B2 (en) Method and apparatus for carrying transport stream
US20080235401A1 (en) Method of storing media data delivered through a network
CN102857812B (zh) 一种支持ts流媒体文件的容错方法及系统