TWI591999B - 載運媒體內容品質資訊之技術 - Google Patents

載運媒體內容品質資訊之技術 Download PDF

Info

Publication number
TWI591999B
TWI591999B TW104129159A TW104129159A TWI591999B TW I591999 B TWI591999 B TW I591999B TW 104129159 A TW104129159 A TW 104129159A TW 104129159 A TW104129159 A TW 104129159A TW I591999 B TWI591999 B TW I591999B
Authority
TW
Taiwan
Prior art keywords
quality
media content
metadata
media
mpeg
Prior art date
Application number
TW104129159A
Other languages
English (en)
Other versions
TW201626774A (zh
Inventor
歐茲葛 歐依曼
Original Assignee
英特爾Ip公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 英特爾Ip公司 filed Critical 英特爾Ip公司
Publication of TW201626774A publication Critical patent/TW201626774A/zh
Application granted granted Critical
Publication of TWI591999B publication Critical patent/TWI591999B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors

Description

載運媒體內容品質資訊之技術
本發明係有關載運媒體內容品質資訊之技術。
發明背景
多媒體服務(包括串流和會話服務)的成長是進展至新的行動寬頻技術及標準的關鍵推手之一。在行動裝置中,對數位視訊內容的使用日增。在日常生活中,係有許多視訊應用程式廣泛用於行動裝置。例如,線上視訊串流包括像是YouTube和Hule等等的熱門服務。視訊錄影和視訊會議包括像是Skype和Google Hangout等等的服務。YouTube在2011年擁有多於1兆的全球觀看次數。這些觀看次數當中有百分之十是經由行動電話或平板電腦進行。隨著越來越多的行動電話、平板電腦和其他行動運算裝置受到購買,將其用於視訊錄影和視訊會議的使用量也會大幅增加。在這樣的對於與多媒體壓縮和無線網路設施之研發結合的多媒體服務的高消費者需求之下,值得增進針對未來的蜂巢式和行動寬頻系統的多媒體服務能力並給予消費者高體驗品質(quality of experience,QoE)以藉此確保從任何地點、在任何時間、使用任何裝置和技術都能夠普遍取用視訊內容和服務。
依據本發明之一實施例,係特地提出一種可受操作來傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊的網路元件,該網路元件包含一或多個處理器,該一或多個處理器受組配成可進行下列操作:產生數個品質取用單元,該等品質取用單元與在一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯,且該等品質取用單元指示出針對該媒體內容串流表示型態中之該等媒體取用單元的品質元資料;將該等品質取用單元封裝在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中;產生一個品質延伸描述符,該品質延伸描述符描述由該等品質取用單元所指示出的該品質元資料;依據一種預定週期性而將該品質延伸描述符傳播至一個使用者設備(UE);以及配合該媒體內容串流表示型態中之該等媒體取用單元而於該MPEG TS中將該等品質取用單元傳播至該UE,其中,該等品質取用單元會在該UE基於該品質延伸描述符而被解譯。
依據本發明之另一實施例,係特地提出一種可受操作來利用媒體內容品質資訊而進行媒體內容回放的使用者設備(UE),該UE包含一或多個處理器,該一或多個處理器受組配成可進行下列操作:於該UE,接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中 的一或多個媒體取用單元相關聯;配合該媒體內容串流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元;於該UE,基於該品質延伸描述符而從該MPEG-2 TS中之該等品質取用單元中識別出該品質元資料;以及提供該等媒體取用單元和該品質元資料給該UE的一個媒體內容播放器以起始該媒體內容回放,其中,該媒體內容播放器受組配成可基於該品質元資料而適於下列中之至少一者:媒體內容位元率、解析度、或訊框率。
依據本發明之又一實施例,係特地提出一種包含至少一個部件的非暫時性機器可讀取儲存媒體,其體現有指令在內,用以於一個使用者設備(UE)處接收動畫專家群標準第2版(MPEG-2)串流視訊品質資訊,該等指令在受到執行時會致使該UE進行下列操作:利用該UE的至少一個處理器,接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯;利用該UE的至少一個處理器,配合該媒體內容串流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元;以及利用該UE的至少一個處理器,基於該品質延伸描述符而從該MPEG-2 TS中之該等品 質取用單元中抽取出該品質元資料,其中,該品質元資料係在於該UE回放該等媒體取用單元之期間內受到使用。
105‧‧‧視訊編碼器
110‧‧‧音訊編碼器
115‧‧‧第一封包化器
120‧‧‧第二封包化器
125‧‧‧節目串流(PS)多工器
130‧‧‧傳輸串流(TS)多工器
210‧‧‧網路元件
220‧‧‧使用者設備(UE)
310‧‧‧MPEG-2節目
320‧‧‧節目地圖表(PMT)
322‧‧‧內容標示描述符
324‧‧‧品質元資料指標描述符
326‧‧‧品質元資料描述符
328‧‧‧元資料服務識別符(ID)
330‧‧‧內容標誌
340‧‧‧視訊
350‧‧‧音訊
355‧‧‧元資料串流
360‧‧‧元資料服務
410‧‧‧音訊和視訊(A/V)內容
810‧‧‧轉碼器
1000、1100、1200‧‧‧功能性
1010~1050、1110~1140、1210~1230‧‧‧方塊
從後面配合隨附圖式所作的詳細說明中,會可明顯看出本揭露內容之特徵和益處,其一起以示範方式例示出本揭露內容之特徵;並且其中:圖1依據一個範例,例示一個動畫專家群標準第2版(Moving Picture Experts Group-2,MPEG-2)傳輸串流(transport stream,TS)格式;圖2依據一個範例,例示在一個網路元件和一個使用者設備(user equipment,UE)之間的傳訊方式,用以傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊;圖3依據一個範例,例示經由動畫專家群標準第2版(MPEG-2)傳輸串流(TS)之對品質元資料之載運;圖4依據一個範例,例示在動畫專家群標準第2版(MPEG-2)傳輸串流(TS)格式中之對品質元資料之傳遞;圖5是依據一個範例的列出識別符(identifier,ID)指定數值的一個表格;圖6是依據一個範例的列出延伸描述符的一個表格;圖7是依據一個範例的列出延伸描述符標籤數值的一個表格;圖8依據一個範例而例示一個轉碼器,其受組配成可接收國際標準組織基礎媒體檔案格式(International Organization for Standardization base media file format, ISOBMFF)檔案或MPEG-2 TS檔案作為輸入,並提供用於MPEG-2 TS的品質元資料或用於ISOBMFFS的品質元資料作為輸出;圖9依據一個範例,例示一個經由超文件傳送協定之動態適應性串流(dynamic adaptive streaming over hypertext transfer protocol,DASH)媒體表現描述(media presentation description,MPD)檔案的一個抽象語法記法(abstract syntax notation,ASN)程式碼範例,在該檔案中,係透過一個編解碼器參數來基於一種動畫專家群標準第2版(MPEG-2)傳輸串流(TS)格式將對品質資訊之載運傳訊出去;圖10依據一個範例,描繪可受操作來傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊的一個網路元件之功能性;圖11依據一個範例,描繪可受操作來利用媒體內容品質資訊而進行媒體內容回放的一個使用者設備(UE)之功能性;圖12依據一個範例,描繪至少一個非暫時性機器可讀取儲存媒體的一個流程圖,該至少一個非暫時性機器可讀取儲存媒體體現有指令在內,用以於使用者設備(UE)處接收動畫專家群標準第2版(MPEG-2)串流視訊品質資訊;並且圖13依據一個範例,描繪出一個無線裝置(例如UE)之圖示。
現在將參考所例示之示範實施例,並且,於本文中將會使用具體的語言來描述這些示範實施例。然而,會可瞭解,並不欲使本發明之範疇因此受到任何限制。
詳細說明
在揭露和描述本發明之前,應瞭解,本發明並不受限於在本文中所揭露的特定結構、處理步驟或材料,而係可延伸至熟於相關技藝中之一般知識者所會認可的與其等效之疇。亦應瞭解,於本文中所運用的術語僅係為描述特定範例所用,而並未有限制之意。在不同圖式中之相同標號代表相同元件。在流程圖中所提供的號碼和處理程序係為了使例示步驟和操作明確所提供,其並不必然係指出特定順序或次序。
示範實施例
下文將提供對技術實施例的初步概覽,然後,接著將以進一步的細節來描述具體技術實施例。此初步總覽係用於幫助讀者以更為快速地理解本技術,但此初步總覽並非意欲要標明本技術的關鍵特徵或必要特徵,也並不意欲要限制所請求之主旨之範疇。
文中描述一種用於傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊的技術。一個網路元件能夠產生數個品質取用單元,該等品質取用單元與在一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯。媒體取用單元可係該媒體內容串流表示型態中的媒體內容訊 框(例如視訊訊框)。該等品質取用單元可指示出針對該媒體內容串流表示型態中之該等媒體取用單元的品質元資料(例如品質量度)。易言之,即,各個品質取用單元可指示出針對一或多個媒體取用單元(或媒體內容訊框)的品質元資料。該網路可將該等品質取用單元封裝在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中。該網路元件可產生一個品質延伸描述符,該品質延伸描述符描述由該等品質取用單元所指示出的該品質元資料。該網路元件可按照一種預定週期性(例如,約每100毫秒)而在一個節目地圖表(program map table,PMT)中將該品質延伸描述符傳播給一個使用者設備(UE)。此外,該網路元件亦可於該MPEG TS中將該等品質取用單元傳播給該UE。該等品質取用單元可係配合該媒體內容串流表示型態中之該等媒體取用單元而被傳播給該UE。該UE可利用該品質延伸描述符而剖析並解碼該MPEG TS,以抽取出該等品質取用單元(以及該品質元資料)。該UE可基於在該等品質取用單元中所含有的該品質元資料而經由正於該UE執行的媒體播放器來表現該等媒體取用單元。易言之,該UE可使用該MPEG-2 TS中的該品質元資料來智慧性地串流該媒體內容串流表示型態中之該等媒體取用單元。
已有多種多媒體標準受到研發以使得多媒體能夠被傳播給運算裝置、從運算裝置傳播出來、或在運算裝置之間傳播。例如,在串流視訊中,第三代合夥專案(the third generation partnership project,3GPP)已研發出第 26.234技術規範(technical specification 26.234,TS 26.234)(例如第11.0.0發表版(Release 11.0.0)),其描述基於實時串流協定(real-time streaming protocol,RTSP)的用於依需或即時內容之單播串流的交換封包串流服務(packet-switched streaming services,PSS)。此外,在3GPP TS 26.247規範(例如第11.0.0發表版)中係有描述超文件傳送協定(hyper-text transfer protocol,HTTP)式串流服務(包括累進式下載和經由HTTP之動態適應性串流(DASH))。以3GPP為基礎的多媒體廣播和多播服務(multimedia broadcast and multicast services,MBMS)規範TS 26.346(例如第11.0.0發表版)明確說明了用於多播或廣播內容散布的串流和下載技術。如此一來,以DASH或PSS或MBMS為基礎的行動運算裝置(例如使用者設備(UE))係在UE裝置處解碼和呈現經串流視訊。對於3GPP TS 26.244(例如第11.0.0發表版)中之3GPP檔案格式的支援係明定於所有這些規範中,以支援檔案下載和以HTTP為基礎的串流使用事例。
當網路狀況之波動(也就是網路變化性)使得與多媒體內容相關聯的通訊資料率減少時,在高移動性環境中進行多媒體串流可能會是很有挑戰性的。當網路過載使得通訊資料率減少時,末端使用者體驗品質(QoE)可能也會降低。例如,在經由過載的網路來提供多媒體內容時,在行動裝置處所接收到的此多媒體內容可能會具有較低的解析度或品質,並且(或者是)此多媒體內容可能會 週期性地受到中斷或暫停。
被串流至客戶端(例如使用者設備(UE))處的多媒體內容可含有多個多媒體內容節段。這些多媒體內容節段各可含有代表該多媒體內容之不同品質位準的不同的經編碼版本。這些不同的經編碼版本可讓使用者能夠無縫地適應變化中的網路狀況。例如,當網路狀況良好(即,網路狀況高於預定臨界標準)時,客戶端可請求具有較高視訊品質的多媒體內容節段。當網路狀況不佳(即,網路狀況低於預定臨界標準)時,客戶端可請求具有較低視訊品質的多媒體內容節段。如此一來,客戶端在網路狀況不佳時仍可接收多媒體內容節段(雖然品質較低),並且此適應性媒體串流受到中斷的可能性可獲減少。
一些媒體串流技術,像是DASH,目前支援對定時元資料的含納。這些定時元資料可係週期性地被含納在被提供給客戶端的媒體內容串流中。定時元資料之範例包括品質資訊和用於節電的指示符。定時元資料中的品質資訊可使客戶端能夠獲得品質更平順的串流並耗用較少帶寬。在一個範例中,客戶端可使用品質資訊(或品質元資料)來智慧性地選擇在此客戶端是該媒體內容的哪個經編碼版本要被接收,以使得串流品質和帶寬耗用最大化。品質元資料可係與正於客戶端接收的媒體內容節段相關聯。
品質元資料可動態地指示出媒體內容節段之品質位準。在一個範例中,若品質元資料指示出媒體內容節段之品質位準相當低(例如,影像呈顆粒狀),則客戶端 可請求具有較進階品質位準的媒體內容節段(雖然要用較高位元率)。在另一個範例中,若品質元資料指示出媒體內容節段之品質位準相當高,客戶端可請求具有稍微低一點的品質位準的媒體內容節段(這可降低位元率),以使得減少的品質位準對客戶端之使用者來說實際上不大明顯。換言之,若品質降低對使用者來說並不明顯,則可選擇具有較低品質位準的媒體內容節段以節省帶寬。如先前所述,被提供給客戶端的品質元資料可使客戶端能夠智慧性地請求媒體內容節段以作回放。
動畫專家群標準第2版(MPEG-2)傳輸串流(TS)是被佈署在許多系統(例如廣播系統),例如數位視訊廣播(digital video broadcasting,DVB)和高階電視系統委員會(Advanced Television Systems Committee,ATSC),中的一種媒體格式。在先前的解決方案中,MPEG2-TS格式並不支援對於視訊品質量度和相關元資料的載運。因此,傳統的以MPEG2-TS格式為基礎的系統(例如廣播)無法領略以品質驅動的適應性串流之益處。此外,在轉碼操作當中,因為在MPEG2-TS格式中缺乏支援,所以品質資訊從前是無法翻譯的。轉碼操作之範例可包括從國際標準組織(International Organization for Standardization,ISO)基礎媒體檔案格式(ISOBMFF)到MPEG2-TS檔案格式或反之的轉碼。
於本文中所說明的技術係有關在MPEG2-TS媒體檔案格式中之對視訊品質元資料之載運。如此,可將以 品質驅動的適應性串流之益處施於MPEG2-TS系統。此外,藉由本技術,可使得能夠在轉碼操作(例如從ISOBMFF到MPEG2-TS或反之)當中翻譯品質資訊。
圖1例示一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)格式。視訊資料可被提供給視訊編碼器105。視訊編碼器105可產生經編碼視訊資料,所產生的經編碼視訊資料可在之後被提供給第一封包化器115。第一封包化器115可利用經編碼視訊資料而產生視訊封包化基本串流(Packetized Elementary Stream,PES)封包。此外,音訊資料可被提供給音訊編碼器110。音訊編碼器110可產生經編碼音訊資料,所產生的經編碼音訊資料可在之後被提供給第二封包化器120。第二封包化器120可利用經編碼音訊資料而產生音訊封包化基本串流(PES)封包。在一個範例中,視訊PES封包和音訊PES封包可被提供給節目串流(program stream,PS)多工器125,PS多工器125可產生包含這些視訊PES封包和音訊PES封包的節目串流。在一個範例中,這些視訊PES封包和音訊PES封包可被提供給傳輸串流(TS)多工器130,TS多工器130可產生包含這些視訊PES封包和音訊PES封包的傳輸串流。
MPEG-2 TS是用於音訊、視訊及節目與系統資訊(Program and System Information,PSIP)資料之傳輸和儲存的一種標準容器格式。容器格式(或包裝格式)可描述資料和元資料之不同元件如何在一個電腦檔案中共存。在一個範例中,MPEG-2 TS可包含描述音訊或視訊的元資 料(例如品質元資料)。MPEG-2 TS可用於廣播系統中,例如DVB、ATSC和網際網路協定電視(Internet Protocol Television,IPTV)。MPEG-2 TS在MPEG2第1部:系統(MPEG-2 Part 1,Systems)(一般係稱之為ISO/IEC 13818-1標準(ISO/IEC standard 13818-1)或ITU-T H.222.0建議書(ITU-T Rec.H.222.0))中有進一步界定。IEC亦被稱為國際電工委員會(International Electrotechnical Commission)。MPEG-2 TS可述明用於封裝封包化基本串流(具備錯誤校正)的容器格式、以及用於在信號被降級時維持傳輸整體性的同步化特徵。傳輸串流可係在幾個方面上與節目串流不同。節目串流係針對可合理信賴媒體所設計的,例如碟片(例如DVD),而傳輸串流係針對較不可信賴傳輸所設計的,例如地面或衛星廣播。此外,傳輸串流可載運複數個節目。
MPEG-2傳輸串流可包含特定節目資訊(program-specific information,PSI),這是有關某個節目(或頻道)的元資料。PSI的一個範例是節目地圖表(PMT)。PMT可包含有關節目的資訊。例如,在數位電視當中所使用的傳輸串流可能包含用於代表三個電視頻道的三個節目。這三個節目(或頻道)可係藉由三個PMT來描述。各個頻道可包含一個視訊串流、一或兩個音訊串流以及元資料。PMT可提供有關在傳輸串流中所出現的各個節目的資訊,包括節目號碼,並可列出在所描述之MPEG-2節目中所包含的基本串流。
圖2例示在網路元件210和使用者設備(UE)220之間的傳訊方式,用以傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊。網路元件210可係位在一個內容遞送網路(content delivery network,CDN)或一個操作者網路當中。網路元件210可將媒體內容串流至UE 220。於本文中所使用的「媒體內容」一詞可係指音訊以及(或是)視訊。網路元件210可將視訊品質資訊與媒體內容一起傳送至UE 220。視訊品質資訊可針對在媒體內容中所含有的一或多個媒體內容訊框而描述其品質位準。此視訊品質資訊(例如品質元資料)可使得UE 220能夠基於視訊品質資訊而智慧性地請求來自網路元件210的媒體內容訊框。例如,UE 220可基於從網路元件210接收而來的視訊品質資訊而使媒體內容位元率、解析度以及(或是)訊框率適應。如此一來,UE 220在接收依據MPEG-2標準的媒體內容時係可察知品質。
在一個範例中,網路元件210可產生品質取用單元,這些品質取用單元係與一個媒體內容串流表示型態中的一或多個媒體取用單元(或視訊訊框)相關聯。媒體取用單元可係該媒體內容串流表示型態中之媒體內容訊框(例如視訊訊框)。品質取用單元可指示出針對該媒體內容串流表示型態中之該等媒體取用單元的品質元資料。品質元資料可包含針對該等媒體取用單元的品質量度。舉一個不具限制性的範例來說,一個特定品質取用單元(其具有品質元資料)可係與一連串的五個媒體取用單元(或五 個媒體內容訊框)相關聯。一般而言,品質取用單元可係適時地反映出在媒體取用單元之品質位準上之變動的動態資訊。換言之,由於可針對各個媒體取用單元而傳送品質取用單元,因此品質位準之變化係可在後續的品質取用單元中於改變過的元資料中被反映出來。
在一個範例中,品質取用單元可係與一個特定的媒體內容串流相關聯。網路元件210係可在某個給定時間廣播複數個媒體內容串流,因此,UE 220應該要知道哪個媒體內容串流對應於那些品質取用單元。此外,UE 220還要知道一個特定品質取用單元所描述的是哪個媒體取用單元(或媒體內容訊框)。這些資訊係可在品質取用格式中被指示出。
如於前文中所說明的,品質取用單元可包含品質元資料。在品質元資料中所含有的品質量度可以是用來判斷媒體內容訊框之品質位準的客觀或主觀條件。一般而言,媒體內容品質(或視訊品質)係指對於在原始媒體內容與經過媒體內容傳輸或處理系統(例如視訊編碼器)之後的媒體內容間之所察覺媒體內容降級的一種正式或不正式的衡量。換言之,品質量度可衡量在原始媒體內容訊號與經編碼(或以其他方式轉換過的)媒體內容訊號之間的差異,原始媒體內容訊號一般被認為是具有較高品質(因為原始的媒體內容訊號尚未受到壓縮)。在一個範例中,在品質元資料中所含有的品質量度可包括信號雜訊比(signal-to-noise ratio,SNR)、尖峰信號雜訊比(peak signal-to-noise ratio,PNSR)、結構相似性索引(structural similarity index,SSIM)、多標度結構相似性索引(multi-scale structural similarity index,MS-SSIM)、視訊品質量度(video quality metric,VQM)、視訊品質感知評估(perceptual evaluation of video quality,PEVQ)、平均意見分數(mean opinion score,MOS)、訊框重要性(frame significance,FSIG)、契卡淖斯基距離(Czenakowski Distance,CZD)等等。
在一種組態中,品質取用單元是含有動態品質元資料的取用單元,如於ISO/IEC 23001-10中所定義的。因此,動態品質元資料可被儲存在與一或多個媒體內容訊框(例如視訊訊框)相關聯的取用單元中。這些取用單元可被封裝在由為0x2C的串流類型數值所定義的MPEG片段(section)中。各個品質取用單元可含有組態和定時資訊以及一個品質量度數值陣列。品質數值可係與品質量度有一對一的對應關係。根據需要,係可藉由前置零值位元組來充填各個品質量度數值以達到由欄位大小位元組參數所指示出的位元組數量。品質取用單元可係根據下面的語法:
在品質取用單元之語法方面,欄位大小位元組(或field_size_bytes)參數可指示出一個品質量度樣本欄位的大小。量度計數(或metric_count)參數可指示出在各個 品質取用單元中的品質量度數值之數量。量度代碼(或metric_code)參數可指示出品質取用單元中之品質量度數值的代碼名稱。樣本計數(或sample_count)參數可指示出每品質量度數值之品質量度樣本數量。解碼時間戳記(decoding time stamp,DTS)參數,或media_DTS,可指示出由一個品質量度樣本描述的媒體取用單元。
在一個範例中,網路元件210可將品質取用單元封裝在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中。MPEG-2 TS是用於音訊、視訊及元資料之傳輸的一種標準容器格式。換言之,係可在MPEG片段中載運品質取用單元。各個品質取用單元可以各是一個隨機取用點(random access point)。此外,各個品質取用單元可以是被含納在單個傳輸串流(TS)封包中。
在一個範例中,網路元件210可產生品質延伸描述符,該品質延伸描述符描述由品質取用單元所指示出的品質元資料。品質延伸描述符可係每事件或每節目被傳送至UE 220一次。對品質延伸描述符之傳訊可係利用在節目地圖表(PMT)中的一個描述符。PMT是被週期性地從網路元件210傳送至UE 220的一個實體。PMT是通知UE 220要被發送至UE 220的媒體內容的一種電子服務導引。此描述符可係出現在所針對而提供品質資訊的封包識別符(packet identifier,PID)的一個基礎串流迴圈中。品質延伸描述符可描述存在於各個品質取用單元中的品質量度。品質延伸描述符可包括用於品質量度數值的一個常態欄位 大小。換言之,品質延伸描述符可使得UE 220能夠處理在品質取用單元中所含有的品質元資料。若沒有從網路元件210接收到品質延伸描述符,則UE 220可能會不知道要如何解譯品質元資料,因此,在這種情況中(亦即,當UE 220沒有接收到品質延伸描述符時),UE 220可能會漠視品質元資料。品質量度可係在ISO/IEC 23001-10有進一步描述。
在一個範例中,品質延伸描述符可係根據下面的語法:
在品質延伸描述符之語法方面,描述符標籤(或descriptor_tag)參數可指示出此品質延伸描述符的一個標籤。欄位大小位元組(或field_size_bytes)參數可指示出各個品質取用單元中之品質量度數值的一個常態大小(以位元組為單位)。量度計數(或metric_count)參數可指示出在各個品質取用單元中的品質量度數值之數量。量度代碼 (或metric_code)參數可指示出品質取用單元中之品質量度數值的代碼名稱。此品質延伸描述符之語法可選擇性地包括有一個串流識別符(或stream_id)參數,此參數指示出針對由該等品質取用單元所描述之該媒體內容串流表示型態的一個串流識別符。這些語法元素之語意係明述於ISO/IEC 23001-10中。
在一個範例中,網路元件210可在PMT中將品質延伸描述符傳播給UE 220。網路元件210可係依據一種被界定好的週期性而傳送此品質延伸描述符。在一個範例中,網路元件210可係以約每100毫秒(millisecond,ms)的頻率傳送此品質延伸描述符。一般而言,此品質延伸描述符可以是被傳送至UE 220的更為靜態的資訊。UE 220可基於此品質延伸描述符而解譯一群媒體取用單元(例如在一個100毫秒時框中所接收到的那些媒體取用單元)。UE 220可基於後續的一個品質延伸描述符而解譯後續的一群取用單元。品質延伸描述符可以是可能被應用在數百個品質取用單元上的一個通用描述符。另一方面,品質取用單元因為與一或數個媒體內容訊框(例如為數十毫秒的視訊之等級的媒體內容訊框)相關聯,所以可以是較為動態的。
網路元件210可係在MPEG TS中將品質取用單元傳播至UE 220。此外,網路元件210可係在媒體內容串流表示型態中將媒體取用單元傳播至UE 220。換言之,媒體取用單元可係伴隨著對應的品質取用單元而被傳播。MPEG標準描述應用於媒體取用單元(或視訊訊框)和品質 取用單元的一種封包化格式。這些媒體取用單元和品質取用單元係在帶內被發送至UE 220。另一方面,(被包含在PMT中的)品質延伸描述符是帶外資訊。品質延伸描述符可係與媒體取用單元和品質取用單元分開地被發送至UE 220。
在一個範例中,UE 220可接收來自網路元件210的品質延伸描述符、媒體取用單元和品質取用單元(被封裝在MPEG-2 TS中)。在一個範例中,UE 220可在單一個MPEG-2 TS中接收對應於複數個媒體內容串流表示型態的複數個品質延伸描述符和相關聯的品質取用單元。UE 220可剖析MPEG TS以抽取出該等品質取用單元。UE 220可解碼該等品質取用單元以識別在該等品質取用單元中所含有的品質元資料。在一個實施例中,UE 220可使用品質延伸描述符來剖析和解碼MPEG-2 TS以抽取出該等品質取用單元以及在該等品質取用單元中所含有的品質元資料。換言之,先前從網路元件210發送的品質延伸描述符可使得UE 220能夠取用品質元資料。若沒有先接收到來自網路元件210的品質延伸描述符,則UE 220可能無法取用品質元資料。在UE 220並不擁有品質延伸描述符的情境中,UE 220可直接漠視在MPEG-2 TS中所含有的品質元資料。為了維持向下相容性,舊有UE可漠視品質元資料,而較新的可察知品質的UE可在媒體內容回放之時利用品質元資料。
在一個範例中,UE 220可包含一個解多工器,用以處理MPEG-2 TS。由於MPEG-2 TS是一種經過多工的 格式,所以音訊、視訊、元資料(例如品質取用單元)等等可以被打包在一起。換言之,音訊、視訊和元資料受到多工和封包化、且經由媒體而從網路元件210被發送至UE 220。該解多工器可識別這些音訊、視訊和元資料。在這個時候,UE 220可利用品質延伸描述符而剖析和解碼元資料(例如,含有品質取用單元的元資料),以從這些元資料中抽取出品質元資料。
UE 220可將媒體取用單元和品質元資料提供給UE 220的一個媒體內容播放器。此媒體內容播放器可受組配成可起始媒體取用單元之回放。可將品質元資料提供給此媒體內容播放器(例如一個DASH MPEG-2媒體播放器)。此媒體播放器可使用媒體元資料來決定要讓哪些媒體內容訊框請求前進(go forward)、以及如何使前進的串流媒體內容適應。在一個範例中,此媒體播放器可基於品質元資料而適於媒體內容位元率、解析度或訊框率。
在一個實施例中,UE 220之媒體播放器可請求具有較進階品質位準的媒體內容訊框(雖然要用較高位元率)。在另一個範例中,若品質元資料指示出媒體內容訊框之品質位準相當高,那麼媒體播放器可請求具有稍微低一點的品質位準的媒體內容訊框(這可降低位元率),使得減少的品質位準對此UE之使用者來說實際上不大明顯。換言之,若品質降低對使用者來說並不明顯,則可選擇具有較低品質位準的媒體內容訊框以節省帶寬。如先前所述,在媒體播放器中使用元資料可使UE能夠智慧性地 請求媒體內容訊框以作回放。
在一種組態中,品質取用單元和媒體取用單元可係與一種界定好的時序關係一致。品質元資料可與相關聯的媒體取用單元共享相同的媒體時間軸。品質元資料可係與一或多個視訊訊框相關聯。品質取用單元可被解碼,並且係可使得解碼後的資訊能夠讓UE 220可在對應的媒體取用單元被從網路元件210提取之前取用。這樣的一種時序關係可藉由足夠的(與一個相關聯媒體取用單元之請求時間和表現時間戳記(presentation time stamp,PTS)有關的)前導時間而保證品質取用單元內的品質元資料對於UE 220來說是可以取用的。媒體取用單元的PTS和品質取用單元的PTS可以是一樣的。品質取用單元可配合足夠的前導時間而在傳輸串流中被發送,以使得可在相關聯的媒體取用單元之表現時間之前事先進行適當的媒體適應行為(例如位元率、解析度、訊框率)。
圖3例示經由動畫專家群標準第2版(MPEG-2)傳輸串流(TS)之對品質元資料之載運。圖3例示出具有相關聯元資料的一個MPEG-2節目310。MPEG-2 310節目可係與音訊322和視訊324相關聯。MPEG-2節目310可係由具有一個獨特封包識別符(PID)的一個節目地圖表(PMT)320描述。與MPEG-2節目310相關聯的基礎串流可具有被列在PMT 320中的PID。PMT 320可包含一個內容標示描述符322和一個品質元資料指標描述符324。內容標示描述符322可指向一個內容標誌330。內容標誌330可受元資料服 務360查詢。品質元資料指標描述符324可指向一個品質元資料描述符326。PMT 320中的品質元資料描述符326可亦被稱為品質延伸描述符。品質元資料描述符326可指向一個元資料服務ID 328。MPEG-2節目310可包含一個元資料串流355。元資料串流355可包含針對視訊340中之一或多個訊框的品質元資料。因此,視訊340、音訊350和元資料串流355(例如含有品質元資料者)可在MPEG-2節目310中被多工傳輸。
圖4例示在動畫專家群標準第2版(MPEG-2)傳輸串流(TS)格式中之對品質元資料之傳遞。MPEG-2 TS可包含音訊和視訊(audio and video,A/V)內容410。可從網路元件將A/V內容410提供至使用者設備(UE)。在將A/V內容410提供給UE的時候,係可配合A/V內容410而週期性地傳送元資料(例如品質元資料)。在一個範例中,A/V內容410可包含與一第一品質元資料相關聯的一第一封包時間戳記(first packet time stamp,PTS1)、與一第二品質元資料相關聯的一第二封包時間戳記(second packet time stamp,PTS2)、以及與一第三品質元資料相關聯的一第三封包時間戳記(third packet time stamp,PTS3)。換言之,封包時間戳記可以實質上係與一個對應品質元資料相同。UE可接收A/V內容410以及與此A/V內容410相關聯的品質元資料,並且可基於品質元資料而適應性地串流A/V內容410。例如,UE可基於在MEPG-2 TS中所接收到的品質元資料而請求更高的位元率或更低的位元率。
圖5是列出識別符(ID)指定數值的一個表格。用於MPEG2-TS格式的這些ID指定數值可係被含納在ISO/IEC 13818-1的表格2-31(Table 2-31)中。在一個範例中,此表可包括為0x0A的數值和為「ISO/IEC 23001-10(品質取用單元)片段」的相關描述。
在一個組態中,ISO/IEC 13818-1的表格2-34(Table 2-34)(未於圖5中示出)可包括為0x2C的數值和為「在片段中所載運的品質串流取用單元」的相關描述。此外,ISO/IEC 13818-1的表格2-34可包括為0x2D至0x7E的數值和為「ITU-T Rec.H.222.0 | ISO/IEC 13818-1保留」的相關描述。
在一個組態中,ISO/IEC 13818-1的表格T-1(Table T-1)(未於圖5中示出)可包括「編解碼器」參數值。例如,被識別為0x2C的串流類型可係與被識別為「Vqme」的元素有關。
圖6是列出延伸描述符的一個示範表格。這些延伸描述符可係被含納在ISO/IEC 13818-1之第2.6.90條款(Clause 2.6.90)中的表格2-103bis(Table 2-103bis)中。此表格可包括被註記為Quality_extension_descriptor()的一個品質延伸描述符。
圖7是列出延伸描述符標籤數值的一個示範表格。這些延伸描述符標籤數值可係被含納在ISO/IEC 13818-1之第2.6.91條款(Clause 2.6.91)中的表格2-103ter(Table 2-103ter)中。此表格可包括亦稱之為 Quality_extension_descriptor()的一個品質延伸描述符。此品質延伸描述符可係與為9的延伸描述符標籤數值相關聯。此品質延伸描述符可施用於傳輸串流(TS),而不可施用於封包串流(packet stream,PS)。此外,此品質延伸描述符之結構可係被定義在ISO/IEC 13818-1之第2.6.104條款(Clause 2.6.104)和第2.6.105條款(Clause 2.6.105)中。
圖8例示一個示範轉碼器810,其受組配成可接收國際標準組織基礎媒體檔案格式(ISOBMFF)檔案或MPEG-2 TS檔案作為輸入,並提供用於MPEG-2 TS的品質元資料或用於ISOBMFFS的品質元資料作為輸出。在一個範例中,轉碼器810可接收ISOBMFF檔案、解碼ISOBMFF檔案、並翻譯在ISOBMFF檔案中的品質元資料以產生用於MPEG-2 TS的品質元資料。換言之,從ISOBMFF檔案中所抽取出的品質元資料可用於MPEG-2 TS。在另一個範例中,轉碼器810可接收一個MPEG-2 TS檔案、解碼此MPEG-2 TS檔案、並翻譯在該MPEG-2 TS檔案中的品質元資料以產生要利用ISOBMFF檔案來傳播的品質元資料。換言之,從MPEG-2 TS檔案中所抽取出的品質元資料可用於ISOBMFF檔案。要經由ISOBMFF檔案來傳播的品質元資料可係與一個以MPEG-2 TS為基礎之媒體內容串流表示型態相關聯,其中,該品質元資料包括針對在該以MPEG-2 TS為基礎之媒體內容串流表示型態中的一或多個媒體內容訊框的數個品質量度數值。
圖9例示一個經由超文件傳送協定之動態適應性 串流(DASH)媒體表現描述(MPD)檔案的一個示範抽象語法記法(ASN)程式碼範例。對於基於一一種動畫專家群標準第2版(MPEG-2)傳輸串流(TS)格式的品質資訊之載運可係經由在DASH MPD檔案中的一個編解碼器參數(或@codecs參數)而傳訊出去。此編解碼器參數可指示出為「vqme.psnr」的一個數值。在這個範例中,視訊品質量度可係奠基於尖峰信號雜訊比(PSNR)。針對不同視訊品質量度和相關聯元資料的整組編解碼器名稱可見於ISO/IEC 23001-10中。
另一個範例如於圖10中之流程圖中所示出地提供可受操作來傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊的一個網路元件之功能性1000。係可以方法形式來實施此功能性,或者是,以指令形式在機器上執行此功能性,當中,這些指令是被含納在至少一個電腦可讀媒體或一個非暫時性機器可讀儲存媒體中。網路元件可包含一或多個處理器,此一或多個處理器受組配成可產生數個品質取用單元,該等品質取用單元與在一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯,該等品質取用單元指示出針對該媒體內容串流表示型態中之該等媒體取用單元的品質元資料,如於方塊1010中所示出的。該一或多個處理器可受組配成可將該等品質取用單元封裝在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中,如於方塊1020中所示出的。該一或多個處理器可受組配成可產生一個品質延伸描述符,該品質延伸描述符描述由該 等品質取用單元所指示出的該品質元資料,如於方塊1030中所示出的。該一或多個處理器可受組配成可依據一種預定週期性而將該品質延伸描述符傳播至一個使用者設備(UE),如於方塊1040中所示出的。該一或多個處理器可受組配成可配合該媒體內容串流表示型態中之該等媒體取用單元而於該MPEG TS中將該等品質取用單元傳播至該UE,其中,該等品質取用單元會在該UE基於該品質延伸描述符而被解譯,如於方塊1050中所示出的。
在一種組態中,一第一處理器可進行於方塊1010、1020以及(或是)1030中的操作。此第一處理器可係單一個處理器,或者是,此第一處理器可係包含有一或多個個別處理器。在一種組態中,一第二處理器可進行於方塊1040以及(或是)視訊編碼器1050中的操作。此第二處理器的一種範例可以是一個基帶處理器。
在一個範例中,在該MPEG TS中的該等品質取用單元以及該等媒體取用單元被傳播至該UE以使得該UE能夠利用該品質延伸描述符而剖析該MPEG TS以抽取出該等品質取用單元、解碼該等品質取用單元、以及基於該等品質取用單元而表現該等媒體取用單元。在另一個範例中,該品質元資料包括下列品質量度數值中之至少一者:尖峰信號雜訊比(PSNR);結構相似性索引(SSIM);多標度結構相似性索引(MS-SSIM);視訊品質量度(VQM);視訊品質感知評估(PEVQ);平均意見分數(MOS);或訊框重要性(FSIG)。
在一個範例中,該品質延伸描述符包括下列中之至少一者:在各個品質取用單元中的品質量度數值之數量;用於各個品質取用單元中之品質量度數值的常態大小;該等品質取用單元中之品質量度數值的代碼名稱;或針對由該等品質取用單元所描述之該媒體內容串流表示型態的一個串流識別符。在另一個範例中,該一或多個處理器進一步受組配成可進行下列操作:使用單一個MPEG-2 TS來傳送對應於複數個媒體內容串流表示型態的複數個品質延伸描述符以及數個相關聯品質取用單元。
在一個範例中,各個品質取用單元包括下列中之至少一者:品質量度數值之數量;一個品質量度樣本欄位的大小;品質量度數值的代碼名稱;每品質量度數值之品質量度樣本數量;或由一個品質量度樣本描述的該媒體取用單元之解碼時間戳記(DTS)。在另一個範例中,該一或多個處理器進一步受組配成可進行下列操作:使用一個轉碼器來剖析一個國際標準組織基礎媒體檔案格式(ISOBMFF)檔案、解碼該ISOBMFF檔案、以及翻譯在該ISOBMFF檔案中的品質元資料以產生用於該MPEG-2 TS的該品質元資料。
在一個範例中,該一或多個處理器進一步受組配成可進行下列操作:使用一個轉碼器來剖析一個MPEG-2 TS檔案、解碼該MPEG-2 TS檔案、以及翻譯在該MPEG-2 TS檔案中的品質元資料以產生要經由國際標準組織基礎媒體檔案格式(ISOBMFF)檔案而從該網路元件傳 播出去的品質元資料。在另一個範例中,要經由該ISOBMFF檔案來傳播的該品質元資料可係與一個以MPEG-2 TS為基礎之媒體內容串流表示型態相關聯,其中,該品質元資料包括針對在該以MPEG-2 TS為基礎之媒體內容串流表示型態中之一或多個媒體內容訊框的品質量度數值。
在一個範例中,該品質延伸描述符係被含容在一個節目地圖表(PMT)中,並以約每100毫秒(100ms)的頻率被傳播給該UE。在另一個範例中,該等媒體取用單元係該媒體內容串流表示型態中的媒體內容訊框(例如媒體內容訊框)。在另外一個範例中,該等品質取用單元的表示型態時間戳記實質上與該等媒體取用單元的表示型態時間戳記相同。
另一個範例如於圖11中之流程圖中所示出地提供可受操作來利用媒體內容品質資訊進行媒體內容回放的一個使用者設備(UE)之功能性1100。係可以方法形式來實施此功能性,或者是,以指令形式在機器上執行此功能性,當中,這些指令是被含納在至少一個電腦可讀媒體或一個非暫時性機器可讀儲存媒體中。該UE可包含一或多個處理器,此一或多個處理器受組配成可於該UE處接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯,如於方塊1110中 所示出的。該一或多個處理器可受組配成可配合該媒體內容串流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元,如於方塊1120中所示出的。該一或多個處理器可受組配成可於該UE基於該品質延伸描述符而從該MPEG-2 TS中之該等品質取用單元中識別出該品質元資料,如於方塊1130中所示出的。該一或多個處理器可受組配成可提供該等媒體取用單元和該品質元資料給該UE的一個媒體內容播放器以起始該媒體內容回放,其中,該媒體內容播放器受組配成可基於該品質元資料而適於下列中之至少一者:媒體內容位元率、解析度、或訊框率,如於方塊1140中所示出的。
在一種組態中,一第一處理器可進行於方塊1110以及(或是)1120中的操作。此第一處理器的一個範例可以是一個基帶處理器。在一種組態中,一第二處理器可進行於方塊1130以及(或是)1140中的操作。此第二處理器可係包含有一或多個個別處理器。
在一個範例中,該品質元資料包括下列品質量度數值中之至少一者:尖峰信號雜訊比(PSNR);結構相似性索引(SSIM);多標度結構相似性索引(MS-SSIM);視訊品質量度(VQM);視訊品質感知評估(PEVQ);平均意見分數(MOS);或訊框重要性(FSIG)。在另一個範例中,該品質延伸描述符包括下列中之至少一者:在各個品質取用單元中的品質量度數值之數量;用於各個品 質取用單元中之品質量度數值的常態大小;該等品質取用單元中之品質量度數值的代碼名稱;或針對由該等品質取用單元所描述之該媒體內容串流表示型態的一個串流識別符。
在一個範例中,該一或多個處理器進一步受組配成可進行下列操作:在單一個MPEG-2 TS中接收對應於複數個媒體內容串流表示型態的複數個品質延伸描述符和相關聯的品質取用單元。在另一個範例中,各個品質取用單元包括下列中之至少一者:品質量度數值之數量;一個品質量度樣本欄位的大小;品質量度數值的代碼名稱;每品質量度數值之品質量度樣本數量;或由一個品質量度樣本描述的該媒體取用單元之解碼時間戳記(DTS)。
另一個範例如於圖12中之流程圖中所示出地提供至少一個非暫時性機器可讀取儲存媒體之功能性1200,該非暫時性機器可讀取儲存媒體體現有指令在內,用以於一個使用者設備(UE)處接收動畫專家群標準第2版(MPEG-2)串流視訊品質資訊。該等指令在受到執行時可致使該UE進行如於方塊1210中所示出的下列步驟:利用該UE的至少一個處理器,接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯。該等指令在受到執行時可致使該UE進行如於方塊1220中所示出的下列步驟:利用該UE的至少 一個處理器,配合該媒體內容串流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元。該等指令在受到執行時可致使該UE進行如於方塊1230中所示出的下列步驟:利用該UE的至少一個處理器,基於該品質延伸描述符而從該MPEG-2 TS中之該等品質取用單元中抽取出該品質元資料,其中,該品質元資料係在於該UE回放該等媒體取用單元之期間內受到使用。
在一個範例中,該至少一個非暫時性機器可讀取儲存體可進一步包含在受到該UE之該至少一個處理器執行時會致使該UE進行下列步驟的指令:提供該等媒體取用單元和該品質元資料給該UE的一個媒體內容播放器以起始對該等媒體取用單元之回放,其中,該媒體內容播放器受組配成可基於該品質元資料而適於下列中之至少一者:媒體內容位元率、解析度、或訊框率。
在一個範例中,係於該UE以約每100毫秒(100ms)的頻率從該網路接收該品質延伸描述符,其中,該品質延伸描述符係被含容在一個節目地圖表(PMT)中。在另一個範例中,該至少一個非暫時性機器可讀取儲存媒體可進一步包含在受到該UE之該至少一個處理器執行時會致使該UE進行下列步驟的指令:於該UE,在與一個品質取用單元對應的一個媒體取用單元被從該網路元件提取之前解碼該品質取用單元
圖13提供對於該無線裝置(例如一個使用者設備 (UE)、一個行動站台(mobile station,MS)、一個行動無線裝置、一個行動通訊裝置、一個平板電腦、一個手機或其他類型的無線裝置)的一種示範例示。該無線裝置可包括一或多個天線,此一或多個天線受組配成可與一個節點或傳輸站台(例如基地台(base station,BS)、演進B節點(evolved Node B,eNB)、基帶單元(baseband unit,BBU)、中繼站台(relay station,RS)、無線電裝備(radio equipment,RE)、遠端無線電單元(remote radio unit,RRU)、中央處理模組(central processing module,CPM)、或其他類型的無線廣域網路(wireless wide area network,WWAN)進接點)通訊。該無線裝置可受組配成可利用包含3GPP LTE、WiMAX、高速封包接取(High Speed Packet Access,HSPA)、藍芽(Bluetooth)以及WiFi的至少一個無線通訊標準來通訊。該無線裝置可係利用針對各種無線通訊標準的個別天線或是用於複數種無線通訊標準的共享天線來通訊。該無線裝置可在無線區域網路(wireless local area network,WLAN)、無線個人區域網路(wireless personal area network,WPAN)以及(或是)WWAN中通訊。
圖13亦提供對於可用於自此無線裝置之音訊輸入和輸出的一個麥克風和一或多個喇叭的例示。此顯示螢幕可係一個液晶顯示器(liquid crystal display,LCD)螢幕,或其他類型的顯示器螢幕,例如一個有機發光二極體(organic light emitting diode,OLED)螢幕。此顯示螢幕可被組配成一個觸控式螢幕。此觸控式螢幕可係使用電容 性、電阻性或其他類型的觸控式螢幕技術。可有一個應用程式處理器和一個圖形處理器耦接至內部記憶體,以提供處理和顯示能力。可亦使用一個非依電性記憶體埠來對使用者提供資料輸入輸出選項。可亦使用此非依電性記憶體埠來控充此無線裝置的記憶體能力。可有一個鍵盤與此無線裝置整合在一起、或無線連接至此無線裝置,以提供額外的使用者輸入。亦可利用此觸控式螢幕來提供一個虛擬鍵盤。
許多技術或這些技術的某些面向或部份可係採取體現於有形媒體中的程式碼(即,指令)之形式,例如軟碟、光碟唯讀記憶體(compact disc-read-only memory,CD-ROM)、硬碟、非過渡性電腦可讀儲存媒體、或任何其他機器可讀儲存媒體,當中,當程式碼被載入到機器(例如,電腦)中並由此機器執行時,此機器會成為用於實行這許多技術的一個設備。電路可包括硬體、韌體、程式碼、可執行碼、電腦指令以及(或是)軟體。一個非過渡性電腦可讀儲存媒體可係並不包括有信號的一個電腦可讀儲存媒體。在於可規劃電腦上執行程式碼的事例中,此運算裝置可包括一個處理器、可由處理器讀取的一個儲存媒體(包括依電性和非依電性記憶體以及(或是)儲存元件)、至少一個輸入裝置、和至少一個輸出裝置。依電性和非依電性記憶體以及(或是)儲存元件可係隨機存取記憶體(random-access memory,RAM)、可抹除式可規劃唯讀記憶體(erasable programmable read only memory, EPROM)、隨身碟、光學驅動器、磁性硬碟、固態驅動器、或其他用於儲存電子資料的媒體。此節點和無線裝置可亦包括一個收發器模組(即,收發器)、一個計數器模組(即,計時器)、一個處理模組(即,處理器)、以及(或是)一個時鐘模組(即,時鐘)或計時器模組(即,計時器)。可實施或使用於本文中所描述的這許多技術的一或多個程式可係利用應用程式規劃介面(application programming interface,API)、可再用控制、及其他諸如此類者。係可將此等程式實施於高階程序或物件導向程式語言中以與電腦系統通訊。然而,若想要的話,這(些)程式亦可係實施於組合或機器語言中。在任何情況中,此語言可係經編譯或經解譯的語言,並與硬體實作組合。
於本文中使用的處理器一詞可包括一般用途處理器、專用處理器(例如VLSI、FPGA或其他類型的專用處理器)、以及用於收發器中以傳送、接收和處理無線通訊的基帶處理器。
應瞭解,係已將於本說明書中所描述的功能性單元中之許多者標示為模組,以更具體地強調其實施獨立性。例如,係可將一個模組實施為一個硬體電路,包含訂製超大型積體電路(very-large-scale integration,VLSI)電路或閘陣列、現成半導體(例如邏輯晶片)、電晶體、或其他離散部件。可亦將一個模組實施於可程式規劃硬體裝置中,例如現場可規劃閘陣列、可程式規劃陣列邏輯、可程式規劃邏輯裝置、或其他諸如此類者。
在一個範例中,係可使用複數個硬體電路來實施於本說明書中所描述的功能單元。例如,可係使用一第一硬體電路來進行處理操作,並可使用一第二硬體電路(例如一個收發器)來與其他實體通訊。該第一硬體電路和該第二硬體電路可被整合在單一個硬體電路中,或者是,該第一硬體電路和該第二硬體電路可係不同的硬體電路。
可亦將數個模組實施於軟體中以供由許多類型的處理器執行。可執行碼的一個經識別模組可,例如,包含電腦指令的一或多個實體或邏輯區塊,其可,例如,被組織成一個物件、程序或函式。無論如何,一個經識別模組的可執行部並不一定要實體性地處在一起,而是可包含當邏輯性地聯合在一起的時候會包含此模組並達到此模組之所表功能的儲存在不同位置中的離散指令。
確實,一個可執行碼模組可係單一個指令或許多指令,並且可甚至是分佈在幾個不同程式碼片段中、在不同的程式當中、和橫跨數個記憶體裝置。類似地,於本文中,操作性資料可係在模組中被識別和例示出,並且可係體現於任何適當形式中,並組織於任何適當類型的資料結構中。這些操作性資料可被集合成單一個資料集,或可係分佈在不同位置中,包括分佈在不同儲存裝置中,並且可至少部份地僅作為系統或網路上的電子信號而存在。這些模組可係被動或主動的,包括可操作來進行所欲功能的代理器。
於本說明書中通篇對「一個實施例」或「示範性」的指涉係指關聯於此範例所描述的一個特定特徵、結構、或特性係被包括在本發明的至少一個實施例中。因此,存在於本說明書通篇各處中的「在一個範例中」此語或「示範性」此語並不一定全係指同一個實施例。
當於本文中使用時,多個項目、結構性元件、創作元件以及(或是)材料可能係以一般列表來呈現以求便利。然而,應將這些列表解讀為此列表中的各個成員係被獨立地示別為各別且獨特的成員。因此,此等列表中沒有任何個別成員應在無任何相反指示的情況下僅由於其出現於共同群組中便被解讀為是同一個列表中之任何其他成員的事實等效。此外,於本文中,可能係連同當中之許多部件的替代例而指涉本發明的許多實施例和範例。會可瞭解,不應將此等實施例、範例和替代例解讀為彼此之事實等效,而應將其看作是本發明之不同且自主的呈現。
此外,係可在一或多個實施例中以任何適當方式組合所說明之特徵、結構或特性。在下面的說明中,係提供有許多特定細節,例如布局、距離、網路範例等等之範例,以提供對本發明之實施例的通透瞭解。然而,熟習相關技藝者會可識出,本發明係可在不具有這些具體細節中之一或多者的情況下實施、或以其他方法、部件、布局等等來實施。在其他情況中,並未詳細示出或描述習知的結構、材料或操作,以避免對本發明之面向的混淆。
雖然前面的這些範例係在一或多個特定應用中 例示出本發明的原理,對於熟習本技藝中之一般知識者而言,會可明顯看出,係可不運用發明能力且不悖離本發明之原理和概念,而作出在形式、用途和實施細節上的多種修改。因此,並不欲使本發明受到除了下面所提出的申請專利範圍以外的限制。
1000‧‧‧功能性
1010~1050‧‧‧方塊

Claims (21)

  1. 一種可受操作來傳播動畫專家群標準第2版(MPEG-2)串流視訊品質資訊的網路元件,該網路元件包含一或多個處理器,該一或多個處理器受組配成可進行下列操作:產生數個品質取用單元,該等品質取用單元與在一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯,且該等品質取用單元指示出針對該媒體內容串流表示型態中之該等媒體取用單元的品質元資料;將該等品質取用單元封裝在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中;產生一個品質延伸描述符,該品質延伸描述符描述由該等品質取用單元所指示出的該品質元資料;依據一種預定週期性而將該品質延伸描述符傳播至一個使用者設備(UE);以及配合該媒體內容串流表示型態中之該等媒體取用單元而於該MPEG-2 TS中將該等品質取用單元傳播至該UE,其中,該等品質取用單元會在該UE基於該品質延伸描述符而被解譯。
  2. 如請求項1之網路元件,其中:在該MPEG-2 TS中的該等品質取用單元以及該等媒體取用單元被傳播至該UE以使得該UE能夠利用該品質延伸描述符而剖析該MPEG-2 TS以抽取出該等品質取用單元、解碼該等品質 取用單元、以及基於該等品質取用單元而表現該等媒體取用單元。
  3. 如請求項1之網路元件,其中,該品質元資料包括下列品質量度數值中之至少一者:尖峰信號雜訊比(PSNR);結構相似性索引(SSIM);多標度結構相似性索引(MS-SSIM);視訊品質量度(VQM);視訊品質感知評估(PEVQ);平均意見分數(MOS);或訊框重要性(FSIG)。
  4. 如請求項1之網路元件,其中,該品質延伸描述符包括下列中之至少一者:在各個品質取用單元中的品質量度數值之數量;用於各個品質取用單元中之品質量度數值的常態大小;用於該等品質取用單元中之品質量度數值的代碼名稱;或針對由該等品質取用單元所描述之該媒體內容串流表示型態的一個串流識別符。
  5. 如請求項1之網路元件,其中,該一或多個處理器進一步受組配成可進行下列操作:使用單一個MPEG-2 TS來傳送對應於複數個媒體內容串流表示型態的複數個品質延伸描述符以及數個 相關聯品質取用單元。
  6. 如請求項1之網路元件,其中,各個品質取用單元包括下列中之至少一者:品質量度數值之數量;一個品質量度樣本欄位的大小;用於該品質量度數值的代碼名稱;每品質量度數值之品質量度樣本數量;或由一個品質量度樣本描述的該媒體取用單元之解碼時間戳記(DTS)。
  7. 如請求項1之網路元件,其中,該一或多個處理器進一步受組配成可進行下列操作:使用一個轉碼器來剖析一個國際標準組織基礎媒體檔案格式(ISOBMFF)檔案,解碼該ISOBMFF檔案,以及翻譯在該ISOBMFF檔案中的品質元資料以產生用於該MPEG-2 TS的該品質元資料。
  8. 如請求項1之網路元件,其中,該一或多個處理器進一步受組配成可進行下列操作:使用一個轉碼器來剖析一個MPEG-2 TS檔案,解碼該MPEG-2 TS檔案,以及翻譯在該MPEG-2 TS檔案中的品質元資料以產生要經由國際標準組織基礎媒體檔案格式(ISOBMFF)檔案而從該網路元件傳播出去的品質元資料。
  9. 如請求項8之網路元件,其中,要經由該ISOBMFF檔案 來傳播的該品質元資料可係與一個以MPEG-2 TS為基礎之媒體內容串流表示型態相關聯,其中,該品質元資料包括針對在該以MPEG-2 TS為基礎之媒體內容串流表示型態中之一或多個媒體內容訊框的品質量度數值。
  10. 如請求項1之網路元件,其中,該品質延伸描述符係被包括在一個節目地圖表(PMT)中,並以約每100毫秒(100ms)的頻率被傳播給該UE。
  11. 如請求項1之網路元件,其中,該等媒體取用單元是該媒體內容串流表示型態中之媒體內容訊框。
  12. 如請求項1之網路元件,其中,該等品質取用單元的表示型態時間戳記實質上與該等媒體取用單元的表示型態時間戳記相同。
  13. 一種可受操作來利用媒體內容品質資訊而進行媒體內容回放的使用者設備(UE),該UE包含一或多個處理器,該一或多個處理器受組配成可進行下列操作:於該UE,接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯;配合該媒體內容串流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元; 於該UE,基於該品質延伸描述符而從該MPEG-2 TS中之該等品質取用單元中識別出該品質元資料;以及提供該等媒體取用單元和該品質元資料給該UE的一個媒體內容播放器以起始該媒體內容回放,其中,該媒體內容播放器受組配成可基於該品質元資料而適於下列中之至少一者:媒體內容位元率、解析度、或訊框率。
  14. 如請求項13之UE,其中,該品質元資料包括下列品質量度數值中之至少一者:尖峰信號雜訊比(PSNR);結構相似性索引(SSIM);多標度結構相似性索引(MS-SSIM);視訊品質量度(VQM);視訊品質感知評估(PEVQ);平均意見分數(MOS);以及訊框重要性(FSIG)。
  15. 如請求項13之UE,其中,該品質延伸描述符包括下列中之至少一者:在各個品質取用單元中的品質量度數值之數量;用於各個品質取用單元中之品質量度數值的常態大小;用於該等品質取用單元中之品質量度數值的代碼名稱;或針對由該等品質取用單元所描述之該媒體內容串 流表示型態的一個串流識別符。
  16. 如請求項13之UE,其中,該一或多個處理器進一步受組配成可進行下列操作:在單一個MPEG-2 TS中接收對應於複數個媒體內容串流表示型態的複數個品質延伸描述符和相關聯的品質取用單元。
  17. 如請求項13之UE,其中,各個品質取用單元包括下列中之至少一者:品質量度數值之數量;一個品質量度樣本欄位的大小;用於品質量度數值的代碼名稱;每品質量度數值之品質量度樣本數量;或由一個品質量度樣本描述的該媒體取用單元之解碼時間戳記(DTS)。
  18. 一種具有指令體現在其內之至少一個非暫時性機器可讀取儲存媒體,用以於一個使用者設備(UE)處接收動畫專家群標準第2版(MPEG-2)串流視訊品質資訊,該等指令在受到執行時會致使該UE進行下列操作:利用該UE的至少一個處理器,接收來自一個網路元件的一個品質延伸描述符,該品質延伸描述符描述在數個品質取用單元中的品質元資料,且該等品質取用單元與在要於該UE接收的一個媒體內容串流表示型態中的一或多個媒體取用單元相關聯;利用該UE的至少一個處理器,配合該媒體內容串 流表示型態中之該等媒體取用單元而接收來自該網路元件的在一個動畫專家群標準第2版(MPEG-2)傳輸串流(TS)中的該等品質取用單元;以及利用該UE的至少一個處理器,基於該品質延伸描述符而從該MPEG-2 TS中之該等品質取用單元中抽取出該品質元資料,其中,該品質元資料係在於該UE回放該等媒體取用單元之期間內受到使用。
  19. 如請求項18之至少一個非暫時性機器可讀取儲存媒體,其進一步包含在受到該UE之該至少一個處理器執行時會致使該UE進行下列操作的指令:提供該等媒體取用單元和該品質元資料給該UE的一個媒體內容播放器以起始對該等媒體取用單元之回放,其中,該媒體內容播放器受組配成可基於該品質元資料而適於下列中之至少一者:媒體內容位元率、解析度、或訊框率。
  20. 如請求項18之至少一個非暫時性機器可讀取儲存媒體,其中,於該UE係以約每100毫秒(100ms)從該網路元件接收該品質延伸描述符,其中,該品質延伸描述符係被包括在一個節目地圖表(PMT)中。
  21. 如請求項18之至少一個非暫時性機器可讀取儲存媒體,其進一步包含在受到該UE之該至少一個處理器執行時會致使該UE進行下列操作的指令:於該UE,在與一個品質取用單元對應的一個媒體取用單元被從該網路元件提取之前解碼該品質取用單 元。
TW104129159A 2014-10-14 2015-09-03 載運媒體內容品質資訊之技術 TWI591999B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462063845P 2014-10-14 2014-10-14
US14/701,380 US10110652B2 (en) 2014-10-14 2015-04-30 Carriage of media content quality information

Publications (2)

Publication Number Publication Date
TW201626774A TW201626774A (zh) 2016-07-16
TWI591999B true TWI591999B (zh) 2017-07-11

Family

ID=55656287

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104129159A TWI591999B (zh) 2014-10-14 2015-09-03 載運媒體內容品質資訊之技術

Country Status (8)

Country Link
US (1) US10110652B2 (zh)
EP (1) EP3207713A1 (zh)
JP (1) JP6358638B2 (zh)
KR (1) KR20170044134A (zh)
CN (1) CN107079177B (zh)
BR (1) BR112017005189A2 (zh)
TW (1) TWI591999B (zh)
WO (1) WO2016060766A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3448044B1 (en) * 2016-05-20 2023-05-10 LG Electronics Inc. Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
WO2017208820A1 (ja) 2016-05-30 2017-12-07 ソニー株式会社 映像音響処理装置および方法、並びにプログラム
US20180357316A1 (en) * 2017-06-12 2018-12-13 BCaster Oy Arrangement and related method for provision of video items
CN110868373A (zh) * 2018-08-27 2020-03-06 浙江宇视科技有限公司 多媒体数据传输方法、装置及计算机可读存储介质
US11343567B1 (en) * 2019-08-07 2022-05-24 Meta Platforms, Inc. Systems and methods for providing a quality metric for media content
CN114205344B (zh) * 2020-08-31 2023-02-28 华为技术有限公司 媒体文件传输的方法及装置
US11895336B2 (en) 2021-04-02 2024-02-06 Qualcomm Incorporated Picture orientation and quality metrics supplemental enhancement information message for video coding
JP2024512602A (ja) * 2021-04-02 2024-03-19 クゥアルコム・インコーポレイテッド ビデオコーディングのためのピクチャ向きおよび品質メトリクス補足拡張情報メッセージ

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2772538B1 (fr) * 1997-12-17 2000-02-11 Telediffusion Fse Procede et systeme de mesure de la qualite de signaux de television numerique
EP1885083A1 (en) * 2006-08-03 2008-02-06 Acterna, LLC Triple play services tester
US20100135646A1 (en) * 2007-04-04 2010-06-03 Gun Bang Storage/playback method and apparatus for mpeg-2 transport stream based on iso base media file format
EP2093911A3 (en) 2007-11-28 2010-01-13 Lg Electronics Inc. Receiving system and audio data processing method thereof
KR20120034550A (ko) * 2010-07-20 2012-04-12 한국전자통신연구원 스트리밍 컨텐츠 제공 장치 및 방법
KR101206698B1 (ko) * 2010-10-06 2012-11-30 한국항공대학교산학협력단 스트리밍 콘텐츠 제공 장치 및 방법
US9253510B2 (en) * 2010-12-15 2016-02-02 Telefonaktiebolaget L M Ericsson (Publ) Methods, a client and a server for handling an MPEG transport stream
WO2014172654A1 (en) * 2013-04-19 2014-10-23 Huawei Technologies Co., Ltd. Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol
US20150026358A1 (en) 2013-07-19 2015-01-22 Futurewei Technologies, Inc. Metadata Information Signaling And Carriage In Dynamic Adaptive Streaming Over Hypertext Transfer Protocol

Also Published As

Publication number Publication date
WO2016060766A1 (en) 2016-04-21
TW201626774A (zh) 2016-07-16
US10110652B2 (en) 2018-10-23
EP3207713A1 (en) 2017-08-23
CN107079177A (zh) 2017-08-18
KR20170044134A (ko) 2017-04-24
US20160105478A1 (en) 2016-04-14
BR112017005189A2 (pt) 2017-12-12
JP6358638B2 (ja) 2018-07-18
JP2017535098A (ja) 2017-11-24
CN107079177B (zh) 2020-04-07

Similar Documents

Publication Publication Date Title
TWI591999B (zh) 載運媒體內容品質資訊之技術
JP6455741B2 (ja) ビデオの向きの調整(cvo)を伴うストリーミング
RU2750337C2 (ru) Способ и устройство для передачи медиаданных в мультимедийной транспортной системе
TWI568252B (zh) 具有視訊定向協調(cvo)之串流技術
KR101783579B1 (ko) 파일 포맷 기반의 적응적 스트림 생성, 재생 방법 및 장치와 그 기록 매체
CN106576182A (zh) 视频质量提升
US20150181003A1 (en) Method and apparatus for transmitting and receiving packets in hybrid transmission service of mmt
KR101947111B1 (ko) Mmt 전송 패킷의 설정 방법 및 전송 방법
KR102349451B1 (ko) 멀티미디어의 전송 또는 수신 방법 및 그 장치