TW201622393A - 視訊品質增強 - Google Patents
視訊品質增強 Download PDFInfo
- Publication number
- TW201622393A TW201622393A TW104126701A TW104126701A TW201622393A TW 201622393 A TW201622393 A TW 201622393A TW 104126701 A TW104126701 A TW 104126701A TW 104126701 A TW104126701 A TW 104126701A TW 201622393 A TW201622393 A TW 201622393A
- Authority
- TW
- Taiwan
- Prior art keywords
- media content
- quality
- network device
- mpd
- quality metric
- Prior art date
Links
- 238000013442 quality metrics Methods 0.000 claims abstract description 54
- 238000012546 transfer Methods 0.000 claims abstract description 21
- 230000003044 adaptive effect Effects 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 45
- 238000005516 engineering process Methods 0.000 abstract description 10
- 238000012545 processing Methods 0.000 description 16
- 230000006978 adaptation Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000012805 post-processing Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 239000000463 material Substances 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 3
- 230000000750 progressive effect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036316 preload Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 235000012431 wafers Nutrition 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
揭示支援超文件傳送協定上動態適應串流(DASH)之技術。在網路裝置處,決定用於媒體表現描述(MPD)檔案中說明的界定的表現中的眾多媒體內容區段中的各媒體內容區段之品質度量。在界定的表現中,辨識決定的品質度量是在選取的臨界值之下之媒體內容區段。以來自MPD檔案中說明之不同的表現之對應的媒體內容區段取代經過辨識的媒體內容區段,而形成修改的MPD檔案,其中,對應的媒體內容區段之品質度量大於選取的臨界值,以提供品質實質不變之界定的表現中的媒體內容區段回放。
Description
本發明係關於視訊品質增強。
包含串流及對話服務等多媒體服務的成長是新的行動寬頻技術及標準之演進的關鍵動力之一。在行動裝置中消耗愈來愈多的數位視訊內容。在日常生活中,在行動裝置上廣泛地使用很多視訊應用。舉例而言,線上視訊串流包含例如YouTube及Hulu等廣受歡迎的服務。視訊記錄及視訊會議包含例如Skype和Google Hangout等服務。在2011年,YouTube擁有百萬兆次觀看。百分之十的觀看是經由行動電話或平板電腦。隨著愈來愈多的智慧型電話、平板電腦、及其它行動計算裝置被購買,它們在視訊記錄及視訊會議的用途將會大幅地增加。根據與媒體壓縮及無線網路基礎設施開發相耦合之多媒體服務的此高度消費者需求,有用的是增強未來蜂巢式及行動寬頻系統的多媒體服務能力及遞送高品質感受(QoE)給消費者,藉以確保以任何裝置及技術、在任何時間、從任何位置地存取視
訊內容及服務。
212‧‧‧網頁/媒體伺服器
214‧‧‧媒體編碼器
216‧‧‧媒體分段器
218‧‧‧網頁伺服器
220‧‧‧客戶端
222‧‧‧網頁瀏覽器
224‧‧‧媒體解碼器/播放器
310‧‧‧HTTP伺服器
338‧‧‧3GPP客戶端
參考附圖,從下述詳細說明,將清楚本揭示的特點及優點,附圖及詳細說明一起以舉例方式顯示揭示的特點,其中:圖1顯示根據實例之媒體表現描述(MPD)詮釋資料檔案組態的方塊圖;圖2顯示根據實例之超文件傳送協定(HTTP)串流之方塊圖;圖3顯示根據實例之用於超文件傳送協定為基礎的(HTTP-based)視訊串流之能量特徵察覺無線電接取網路(RAN)架構之方塊圖;圖4是根據實例之超文件傳送協定上動態適應串流(DASH)媒體表現描述(MPD)檔案產生處理圖;圖5顯示根據實例之媒體內容區段的表現之內媒體內容區段之間的品質變異;圖6是根據實例之包含MPD後置處理技術之超文件傳送協定上動態適應串流(DASH)媒體表現描述(MPD)檔案產生處理圖;圖7是根據實例之可操作以支援超文件傳送協定上動態適應串流(DASH)之網路裝置的電路功能;圖8是根據實例之支援超文件傳送協定上動態適應串流(DASH)的方法之流程圖;
圖9是根據實例之支援超文件傳送協定上動態適應串流(DASH)的網路裝置之電路的功能;以及圖10顯示根據實例之無線裝置(例如UE)圖。
現在將參考所示的舉例說明的實施例,以及於此使用具體的語言來說明它們。然而,應瞭解,發明的範圍不因此而受限。
在揭示及說明本發明之前,須瞭解本發明不侷限於此處所揭示的特定結構、製程步驟、或是材料,而是如同習於相關技藝者所認知般,可以延伸至其等同物。也應瞭解,此處使用的術語僅為了說明特定實例而不是限定性的。在不同圖中相同的代號代表相同的元件。流程圖中及處理中提供的號數是在說明步驟及操作時為了清楚起見,並不一定表示特定次序或順序。
於下先提供實施例的技術概述,然後更詳細地說明特定技術實施例。此初始概述是要幫助讀者更快速地瞭解技術,而不是要鑑定技術的關鍵特徵或基本特點,也不是要限定主張的標的之範圍。
將說明媒體表現描述(MPD)檔案中媒體內容區段的表現之內類似品質的媒體內容區段分組之技術。舉例而言,MPD檔案可以說明第一表現中的第一組媒體內容檔案(例
如,以相當高位元率表現)。此外,MPD檔案可以說明第二表現中的第二組媒體內容檔案(例如,以相當低位元率表現)。表現意指以定義的品質程度及/或定義的位元率之媒體內容檔案組。可以對相同表現內眾多媒體內容區段(例如具有相當低位元率的媒體內容區段)中的各區段決定品質度量。可以辨識具有在選取的臨界值之下的品質度量之媒體內容區段。舉例而言,在表現中具有十個媒體內容區段之分組中,多個媒體內容區段中之一具有相對較低的品質(如同用於一媒體內容區段的品質度量低於選取的臨界值所示般)。品質度量低於選取的臨界值之表現中的媒體內容區段可以由其它媒體內容區段取代。舉例而言,品質度量低於選取的平均值之媒體內容區段可以由來自不同表現之對應的媒體內容區段取代。不同的表現包含相對較高的位元率之媒體內容檔案組。相較於被取代的媒體內容區段,對應的媒體內容區段是來自實質上相同的媒體時間範圍。結果,用於表現的媒體內容區段都具有相當類似的品質程度(雖然媒體內容區段之間,位元率會稍微變化)。可以產生修改的MPD以包含具有相當類似的品質程度之媒體內容區段。修改的MPD可以傳送給客戶端,其中,修改的MPD可以在客戶端提供品質實質不變的媒體內容區段回放。
在替代組態中,將品質度量低於選取的臨界值之表現之中的媒體內容區段再編碼。媒體內容區段再編碼會增進品質程度,以致於用於再編碼的媒體內容區段的品質度量
可以在選取的臨界值之上。修改的MPD可以產生成包含再編碼的媒體內容區段。結果,表現中的媒體內容區段(亦即,經過再編碼的媒體內容區段以及未被再編碼的媒體內容區段)具有相當類似的品質程度。
超文件傳送協定(HTTP)適應串流(HAS)可以作為網際網路視訊的多媒體遞送之形式。由於HTTP及包含傳送控制協定(TCP)/網際網路協定(IP)等HTTP之下的協定被廣泛採用,所以HTTP式的遞送可以提供可靠度及部署簡單性。HTTP式遞送因可避免網路位址轉譯(NAT)及防火牆穿越議題,而能容易及不費力地提供串流服務。HTTP式遞送或串流也能夠使用標準的HTTP伺服器及快取記憶體以取代專門的串流伺服器。由於在伺服器側上最小的或縮減的狀態資訊,所以,HTTP式遞送可以提供擴充性。
當使用HAS以遞送網際網路多媒體內容時,藉由使用HTTP GET或部份GET命令以從例如多媒體伺服器等指定資源取還資料,而從視訊伺服器選擇及請求適當的視訊表現程度,則在行動裝置上操作的視訊客戶端可以配置成在速率適應化中執行主要角色。在開始回放例如音訊或視訊等串流多媒體內容之前,視訊客戶端初始地累積緩衝器至某一程度。此階段被稱為啟動階段。在此之後,客戶端開始回放經過緩衝的多媒體內容。在客戶端裝置的多媒體回放之品質及解析度取決於可供利用的鏈路頻寬。視訊客戶端典型上僅根據例如HTTP級視訊串流輸貫量、或是傳送控制協定(TCP)輸貫量等更高層的輸貫量評估,以評
估可供利用的鏈路頻寬。
當網路條件波動(亦即網路變異)降低與多媒體內容相關連的通訊資料速率時,高行動性環境中的多媒體串流會面臨挑戰。當過載的網路造成通訊資料速率下降時,終端使用者的感受品質(QoE)也會下降。舉例而言,當在過載的網路上提供多媒體內容時,在行動裝置收到的多媒體內容具有較低的解析度或品質及/或多媒體內容會週期地中斷或暫停。
由於沒有效率的頻寬利用及不佳的終端使用者感受品質,所以,不希望在有限資源的行動網路中使用漸進下載式串流技術。如同下述將進一步說明般,可以使用例如HTTP上動態適應串流(DASH)等超文件傳送協定(HTTP)式串流服務以克服漸進下載式串流的弱點。
串流至例如使用者設備(UE)之客戶端的多媒體內容包含眾多多媒體內容區段。多媒體內容區段均含代表多媒體內容不同品質程度的不同編碼版本。不同的編碼版本允許客戶端無縫地適應變化的網路條件。舉例而言,當網路條件良好時(亦即,網路條件在預定臨界值之上時),客戶端可以請求具有更高視訊品質的多媒體內容區段。當網路條件不佳時(亦即,網路條件在預定臨界值之下時),客戶端可以請求具有較低視訊品質的多媒體內容區段。結果,當網路條件不佳時客戶端仍然能夠接收多媒體內容區段(雖然是較低的品質)以及可以降低適應媒體串流被中斷的可能性。
在DASH中,客戶端可以選取具有最高位元率的多媒體內容區段,以致於在客戶端可以即時地下載多媒體內容區段以用於媒體回放,而不會在媒體回放時造成重緩衝事故。換言之,客戶端不會選取太高而使適應媒體串流被週期地中斷的多媒體內容區段,以便在客戶端重新取得媒體回放之前快取或預載一部份媒體內容至客戶端。在一實例中,不利的網路條件會使媒體內容串流品質變差。不利的網路條件包含涵蓋率零、急遽的頻寬變化、分封遺失、實質延遲變異、等等。雖然當計算可供利用的輸貫量及根據可供利用的輸貫量而決定適當的串流位元速率時,適應串流技術會考慮目前的網路條件,但是,在急遽的網路變化及/或不利的網路條件期間,仍無法確保客戶端平順的媒體回放。
因此,為了維持客戶端對適應媒體串流之所需的感受品質,可以使用客戶端的計劃路由及沿著計劃的路由之目前的網路條件以在客戶端策略性地快取多媒體內容區段,因而造成客戶端更平順的媒體回放以及增強的感受品質。客戶端可以選取計劃的路由(亦即,客戶端將要進行的地理路由)。當正在計劃的路由行進時,客戶端可以一直串流媒體內容(例如電影)。在一實例中,客戶端包含位於移動的交通工具內的行動裝置或是交通工具的計算裝置。客戶端可以從通道資訊資料庫(CID)接收計劃路由的目前網路條件。目前網路條件包含具有在預定臨界值之下的對應網路條件之沿著計劃路由的某些位置(例如隧道、橋、
遠方區域)。客戶端會從媒體內容伺服器請求增加的媒體內容之媒體內容區段(例如電影的增加的區段),然後將增加的媒體內容區段儲存於快取記憶體中。當客戶端抵達具有預定臨界值之下的網路條件之沿著計劃路由的位置時,客戶端會回放儲存在快取記憶體中的媒體內容。結果,即使在沿著計劃路由的目前網路條件掉落至預定臨界值之下時的期間,仍然能夠在客戶端實質地提供連續的媒體回放。
已開發多種多媒體標準以便能夠將多媒體傳輸至、自或在行動計算裝置之間。舉例而言,在串流視訊時,第三代合作夥件專案(3GPP)已開發技術規範(TS)26.234(例如發行版11.0.0),其說明根據應求或實況內容之單播串流即時串流協定(RTSP)之分封切換串流服務(PSS)。此外,在3GPP TS 26.247(例如發行版11.0.0)中說明包含HTTP上漸進下載及動態適應串流(DASH)之超文件傳送協定(HTTP)式串流服務。3GPP式多媒體廣播及多播服務(MBMS)規格TS 26.346(例如發行版11.0.0)指明多播/廣播內容散佈之串流及下載技術。如此,例如使用者設備(UE)等DASH/PSS/MBMS式行動計算裝置可以在UE裝置處解碼及提供串流視訊。在所有這些規格中強制3GPP TS 26.244中的3GP檔案格式之支援(例如,發行版11.0.0),以支援檔案下載及HTTP式串流使用情形。
在3GPP TS 26.114(例如11.0.0)中,提供視訊會議等視訊會談通訊的標準之一實例。此標準說明在IMS上的多媒體電話服務(MTSI),其允許在網際網路協定(IP)多媒體子系統(IMS)式網路上遞送進階的多媒體會談服務及內容。在3GPP TS 26.140(例如發行版11.0.0)中,將IMS標準化。MTSI式傳送器UE終端可以捕捉及記錄視訊,然後在3GPP網路上將視訊傳送給MTSI式接收器UE終端。接收器UE終端接著解碼及提供視訊。3GPP TS 26.140也能夠使用提供3GP檔案格式支援之多媒體共享服務(MMS)來共享視訊。
提供上述標準作為用以對、自及/或在多媒體裝置之間傳輸多媒體檔案的無線多媒體標準的實例。這些實例不是限定性的。可以使用其它標準以提供串流視訊、對話視訊、或視訊共享。
在本發明的實施例之脈絡中,於此提供HTTP串流的更詳細說明,特別是DASH。詳細的說明不是限定性的。如同在後續說明中將進一步說明般,藉由使行動裝置、或是與行動裝置通訊的伺服器能夠選取及/或傳送具有所需的能量特徵之多媒體,本發明的實施例可以用以有效率地將媒體傳輸至、自及/或在行動裝置之間。使用標準化或非標準化的通訊設計,傳輸多媒體。
超文件傳送協定(HTTP)串流可以作為網際網路視訊的
多媒體遞送的形式。在HTTP串流中,使用HTTP協定,多媒體檔案可以分割成一或更多區段以及遞送給客戶端。由於HTTP及包含傳送控制協定(TCP)/網際網路協定(IP)等HTTP之下的協定被廣泛採用,所以HTTP式的遞送可以提供可靠度及部署簡單性。HTTP式遞送因可避免網路位址轉譯(NAT)及防火牆穿越議題,而能提供簡化的串流服務。HTTP式遞送或串流也能夠使用標準的HTTP伺服器及快取記憶體以取代專門的串流伺服器。由於在伺服器側上最小的或縮減的狀態資訊,所以,HTTP式遞送可以提供擴充性。HTTP串流技術的實例包含微軟公司的IIS平順串流(Smooth Streaming)、蘋果公司的HTTP實況串流、及Adobe的HTTP動態串流。
DASH是標準化的HTTP串流協定。如圖1中所示般,DASH可以指明用於提供儲存於伺服器中關於媒體內容表現的結構及不同版本的資訊之媒體表現描述(MPD)詮釋資料檔案102的不同格式、以及區段格式。MPD詮釋資料檔案含有關於初始化的資訊以及用於媒體播放器的媒體區段(例如,媒體回放者可以看著初始區段以決定容器格式及媒體時序資訊),來確定區段映射至媒體表現等時線中,以用於表現與其它表現切換及同步。DASH技術也已由例如動畫專家組(MPEG)、開放式IPTV論壇(OIPF)、及混合廣播廣頻TV(HbbTV)等其它組織標準化。
DASH客戶端可以經由一系列HTTP請求-回應交易而下載區段,以接收多媒體內容。當可供行動裝置利用的
頻寬改變時,DASH提供在媒體內容的不同位元率表現之間動態地切換之能力。因此,DASH允許快速適應變化的網路及無線鏈路條件、使用者偏好及裝置能力,例如顯示解析度、使用的中央處理單元(CPU)的類型、可供利用的記憶體資源、等等。DASH的動態適應可以提供使用者較佳的感受品質(QoE),比其它串流協定具有較短的啟動延遲及較少的再緩衝事件。
在DASH中,媒體表現描述(MPD)詮釋資料102可以提供關於儲存在如圖2所示之網頁/伺服器212中的媒體內容表現的結構及不同版本。在圖1中所示的實例中,MPD詮釋資料暫時地分割成多個具有預定長度(例如在本實例中為60秒)的時段。各時段包含眾多適應組104。各適應組提供關於具有多個編碼替代之一或更多媒體組件的資訊。舉例而言,在本實例中適應組0可以包含各式各樣不同編碼的音訊替代,例如不同的位元率、單聲道、立體聲、環繞音效、等等。除了在週期ID上提供用於多媒體表現之不同品質的音訊之外,適應組也包含不同語言的音訊。適應組中提供的不同替代被稱為表現106。
在圖1中,適應組1顯示為以例如每秒5百萬位元(Mbps)、2Mbps、每秒500仟位元(kbps)、或特技模式等不同的位元率供應視訊。特技模式可以用於在多媒體串流檔案中尋找、快速前轉、倒轉、或其它位置改變。此外,視訊也可以以不同格式取得,例如2維(2D)或3維(3D)視訊。各表現106包含區段資訊108。區段資訊包含初始化
資訊110及真實媒體區段資料112。在本實例中,MPEG 4(MP4)檔案從伺服器串流至行動裝置。雖然在本實例中使用MP4,但是,如先前所述般,可以使用各種不同的編解碼。
在適應集中的多媒體又可以分成更小的區段。在圖1的實例中,適應集1之60秒的視訊區段又分成四個各15秒的子區段112。這些實例不是限定性的。適應集及各媒體區段或子區段的真實長度取決於媒體型式、系統要求、可能的干擾型式、等等。真實的媒體區段或子區段具有小於一秒至數分鐘長的長度。
如圖2所示,MPD詮釋資料資訊傳送給例如行動裝置等客戶端220。行動裝置可為配置成接收及顯示串流媒體的無線裝置。在一實施例中,行動裝置僅執行此功能的部份,例如接收串流媒體,然後將其傳送給另一裝置或顯示裝置以用於顯現。行動裝置配置成運行客戶端220。客戶端使用HTTP GET 240訊息或部份GET訊息系列以請求區段。客戶端可以控制串流通訊期,例如管理準時請求以及使區段系列的演出平順、或是可能調整位元率或其它屬性以對無線鏈路、裝置狀態或使用者偏好的改變反應。
圖2顯示DASH式串流架構。在網頁/媒體伺服器212中的媒體編碼器214可以將來自音訊/視訊輸入210的輸入媒體編碼成用於儲存或串流的格式。媒體分段器216用以將輸入的媒體分裂成可提供給網頁伺服器218的一系列區段232。客戶端220使用傳送給網頁伺服器(例如HTTP
伺服器)的HTTP GET訊息234以請求區段中的新資料。
舉例而言,客戶端220的網頁瀏覽器222使用HTTP GET訊息240以請求多媒體內容。網頁伺服器218提供用於多媒體內容的MPD 242給客戶端。如同相關的詮釋資料資訊252中所示般,MPD可以用以載送各區段的索引及區段的對應位置。如236中所示般,網頁瀏覽器根據MPD 242,從伺服器逐段地拉出媒體。舉例而言,網頁瀏覽器使用HTTP GET URL(frag 1 req)244以請求第一區段。均勻資源定位器(URL)或是全球資源定位器可以用以告訴網頁伺服器客戶端請求哪些區段254。網頁伺服器提供第一分段(亦即區段1 246)。對於後續的區段,網頁瀏覽器會使用HTTP GET URL(frag i req)248來請求區段i,其中,i是區段的整數索引。結果,網頁伺服器提供區段i 250。經由媒體解碼器/播放器224,區段會表現給客戶端。
圖3顯示多媒體內容312在提供多媒體內容的HTTP伺服器310至例如UE 336等行動裝置上操作的3GPP客戶端338之間的流動。HTTP伺服器可以與公眾或私有網路322(或網際網路)接口,公眾或私有網路322(或網際網路)是與無線廣域網路(WWAN)的核心網路324相通訊。在一實施例中,WWAN可為3GPP LTE式網路或IEEE 802.16式網路(亦即,802.16-2009)。核心網路可以經由無線電接取網路(RAN)332而接取例如演進分封系統(EPS)等無線網路330。RAN 332可以經由節點(例如演進
節點B(eNB)334))而提供多媒體內容給在UE 336上操作的客戶端。
HTTP伺服器310可以耦合至通道資訊資料庫350。通道資訊資料庫350包含用於眾多地理位置的目前網路條件。眾多地理位置包含特定的路、街、鄰近地區、地理區、橋、隧道、等等。目前的網路條件是根據用於眾多地理位置的目前網路條件之即時監控。因此,通道資訊資料庫350會因目前網路條件的變化而動態地更新。替代地,可以根據用於眾多地理條件之歷史網路條件資訊而推論目前的網路條件。在又另一實例中,使用擁擠源網路條件資訊,決定目前的網路條件。
在DASH中,媒體內容可以儲存在不同的表現(例如對應於品質等級)。各表現可以包含客戶端(例如行動裝置)請求的媒體內容區段的清單。關於不同表現之資訊以及用於各表現的媒體內容區段的清單可以以MPD編譯及由客戶端下載,以及,根據MPD,客戶端可以向伺服器請求不同的媒體內容區段。
在一實例中,對DASH格式化內容及相關的MPD檔案(亦即清單檔案),執行各式各樣的後置處理操作,以處理編碼處理導入的品質變異。視訊內容特徵通常會根據內容本質而變同時,產生具有某些指定的位元率之位元串,視訊內容特徵通常會根據內容本質而變是編碼器總是無法產生一致的品質之原因。舉例而言,例如運動視訊剪輯等具有相當大量的移動之快速變化情境是難以一致的品
質編碼,因此,經過編碼的資料之品質會顯著波動。又舉例而言,情境之間的轉變會難以編碼而不導入某程度的品質變異。另一方面,編碼的緩慢變化情境由於相對較少數目的位元被用以表現這些情境,所以,可以以較少的品質變異被編碼。
眾多商用編碼器(或視訊編解碼器)會產生具有變化的品質程度之編碼的媒體內容區段。視訊碼是能夠壓縮或解壓縮數位視訊之裝置或軟體。某些視訊編解碼的實例包含H.265或動畫專家組(MPEG)-H高效率視訊碼化(HEVC)、H.264或MPEG-4進階視訊碼化(AVC)、或是H.263/MPEG-4 Part 2。
圖4是舉例說明之超文件傳送協定上動態適應串流(DASH)媒體表現描述(MPD)檔案產生處理的圖。在某些實施例中,DASH MPD檔案產生處理可以發生於內容遞送網路(CDN)或操作者網路中的伺服器(例如,邊緣伺服器)。在伺服器處接收輸入的視訊。輸入的視訊包含媒體內容,例如運動比賽或新聞廣播。在伺服器處接收的媒體內容包含單一檔案(例如,2小時的新聞事件檔案)。此外,輸入的視訊可為原始的、未經壓縮的視訊訊號。在區塊402中,對媒體內容執行視訊/音訊編碼處理。視訊編碼(或視訊轉碼)處理可以將媒體內容組織成與網頁播放器及行動裝置並容的數位格式。換言之,媒體內容可以進行視訊編碼處理,以將媒體內容轉換成可在不同裝置上觀看的格式。視訊編解碼的實例包含H.265、H.264、視窗媒體視
訊(WMV)、等等。音訊編解碼的實例包含MPEG-1或MPEG-2音訊層III(MP3)及視窗媒體音訊(WMA)。在區塊404,可以執行視訊多工化處理以使音訊內容與視訊內容彼此交錯。
在區塊406,媒體內容(具有交錯的視訊及音訊)會進行分段處理。換言之,媒體內容可以分段成眾多媒體內容區段。舉例而言,各媒體內容區段可為0.5秒長、1秒長、2秒長、等等。在步驟408,產生說明媒體內容區段之DASH MPD。對內容提供方指定的各位元率重複DASH MPD檔案產生處理。因此,MPD含有數個展示,各展示用於給定的位元率。從一展示至另一展示,位元率可以不同(例如,500、1000、1500仟位元/秒),以提供適應媒體內容串流。DASH MPD可以傳輸至客戶端,以及,客戶端可以使用DASH MPD以向伺服器請求某些媒體內容區段以用於在客戶端回放。
圖5顯示舉例說明的媒體內容區段的表現之內的媒體內容區段之間的品質變異。如同圖5所示,用於典型的表現之品質程度大致上維持不變,但是,在表現中包含更高品質及更低的品質之異常。導因於編碼、多工化、及分段處理(如圖4所述)之媒體內容區段在品質程度上會因為可變位元率編碼、被編碼的媒體內容、及視訊編碼處理採用的不同編碼技術的本質而變化(例如,某些媒體內容區段比其它媒體內容區段具有更大或更小的品質程度)。換言之,未壓縮之視訊訊號的編碼處理會造成品質變異。
在一實例中,使用相同的編碼技術,將視訊內容中快速移動的情境及視訊內容中慢速移動的情境編碼。但是,由於相對大數目的位元用於快速移動情境以及相對低數目的位元用於緩慢移動情境,所以,即使二情境是在相同的表現中,快速移動情境仍會比慢速移動情境具有更低的品質。對於具有不同的支援位元率之客戶端,從一媒體內容區段至另一媒體內容區段的品質變異會被客戶端注意到。換言之,客戶端的使用者會注意到不同情境或格之間的品質程度變異,因而可能造成不佳的使用者感受。
圖6是舉例說明之包含MPD後置處理技術之超文件傳送協定上動態適應串流(DASH)媒體表現描述(MDP)檔案產生處理圖。在某些實例中,具有MPD後置處理技術的DASH MPD檔案產生處理會發生於內容遞送網路(CDN)或是操作者網路中的伺服器(例如邊緣伺服器)。在伺服器處接收輸入的視訊。輸入的視訊包含媒體內容,例如運動比賽或新聞廣播。在區塊602中,對媒體內容執行視訊/音訊編碼處理。在區塊604,執行視訊多工化處理以使音訊內容與視訊內容彼此交錯。在區塊606,視訊及音訊內容(或媒體內容串流)會進行分段處理。換言之,媒體內容串流可以分段成眾多媒體內容區段。在步驟608,產生說明媒體內容區段之DASH MPD。在步驟610,對DASH MPD執行MPD後置處理技術。表現內具有類似品質的媒體內容區段被分組在一起以及被用以產生修改的MPD 620。在一實例中,在DASH編碼器處而非在視訊編
解碼器處,執行MPD後置處理技術。
舉例而言,使用品質測量工具614,比較各表現中各媒體內容區段的品質度量。品質度量是用以判斷媒體內容區段的品質程度之主觀或客觀的準則。一般而言,媒體內容品質(或是視訊品質)意指原始視訊內容及其通過視訊傳輸或處理系統(例如視訊編碼器)之後的視訊內容之間被感知到的視訊劣化之正式或非正式測量。換言之,品質度量可以測量通常被視為具有高品質的原始視訊訊號(由於原始視訊訊號未被壓縮)與經過編碼的(或是以其它方式轉換的)視訊訊號之間的差異。用於評估數位視訊處理系統(例如視訊編解碼器)的品質之一技術是計算訊號對雜訊比(SNR)以及原始視訊訊號與通過視訊處理系統的訊號之間的峰值訊號對雜訊比(PNSR)。PSNR是通常使用的客觀視訊品質度量。其它品質度量包含視訊品質的感知評估(PEVQ)、結構類似性(SSIM)、及曾納考斯基(Czenakowski)距離(CZD)。品質度量指派給各媒體內容區段,或者,各媒體內容區段分割成媒體內容子區段,以及,各媒體內容子區段被指派品質度量。
各媒體內容區段的品質度量與相同表現中的其它媒體內容區段相比較。假使在表現中的媒體內容區段與其表現中的其它媒體內容區段具有實質類似的品質時,則媒體內容區段不受影響。當各媒體內容區段的品質度量超過選取的品質臨界值612時,媒體內容區段不受影響。在某些實例中,由伺服器或是使用者設備(UE)決定選取的品質臨界
值612。
假使在表現中的媒體內容區段在選取的品質臨界值612之下時,則這些媒體內容區段會在表現由被替換。舉例而言,這些媒體內容區段會由來自MPD檔案中說明的不同表現之對應的媒體內容區段替換。在某些實例中,不同的表現包含相對較高位元率或相對較低位元率的的媒體內容檔案組。對應的媒體內容區段之品質度量大於選取的品質臨界值612。對應的媒體內容區段來自不同表現中實質相同的媒體時間範圍。結果,用於表現的媒體內容區段可以具有實質類似的品質。產生修改的MPD 620而包含媒體內容區段,各媒體內容區段具有相當類似的品質程度。修改的MPD 620傳送給客戶端,其中,修改的MPD提供在客戶端處品質實質上不變的媒體內容區段回放。客戶端被供給具有最小的暫時品質變異之媒體內容的表現。因此,客戶端可以存取給定的表現及在回放期間感受一致的品質及縮小的品質波動量。
關於非限定的實例,2秒的媒體內容區段相當於2:11:22(亦即,2小時11分22秒)至2:11:24的視訊時碼。2秒的媒體內容區段可以包含在每秒4.5佰萬位元(Mbps)的視訊串流中。2秒的媒體內容區段之品質度量被判定為在品質臨界值612之下。來自更高表現之對應的媒體內容區段(例如在5.3Mbps視訊串流中2:11:22至2:11:24的視訊時碼的2秒媒體內容區段)會取代具有降低的品質之2秒的媒體內容區段。因此,具有類似的品質
之媒體內容區段(雖然不同的位元率)會在表現中被分組在一起。多個媒體內容區段會被混合及匹配以取得全部都實質地具有相同的品質程度之表現中的媒體內容區段組。
在一實例中,被分組成在一起的媒體內容區段具有類似的品質程度但不同的位元率。舉例而言,具有相對較高位元率的媒體內容區段會與具有相對較低位元率的媒體內容區段相混合(即使品質程度實質上類似)。當媒體內容區段的位元率具有較小波動,客戶端可更有效率地操作。因此,客戶端期望最小量的位元率波動。另一方面,客戶端的使用者不期望具有變動的品質程度之區段。因此,在取得穩定的位元率與取得穩定的視訊品質之間可取達成妥協或平衡。
在替代配置中,品質度量在選取的品質臨界值612之下的表現中的媒體內容區段會被再編碼。舉例而言,使用不同的編碼器配置,將媒體內容區段再編碼。使用視訊編解碼器(例如H.264)或音訊編解碼器(例如MP3),將媒體內容區段再編碼。將媒體內容區段再編碼可以增進品質程度,以致於被再編碼的媒體內容區段之品質度量會在品質臨界值612之上。換言之,媒體內容區段被再編碼,以及,決定被再編碼的媒體內容區段之品質量度。假使品質量度現在在品質臨界值612之上,則再編碼的媒體內容區段被包含於MPD中。結果,表現中的媒體內容區段(亦即,再編碼的媒體內容區段及未再編碼的媒體內容區段)具有相當類似的品質程度。
在一實例中,由於品質臨界值612取決於使用者使用的裝置型式,所以,為特定的裝置型式(或是標的裝置)產生修改的MPD 612。舉例而言,高解析度的12吋顯示幕比6吋的顯示幕具有更大數目的像素,因此,在6吋的顯示幕上具有可接受的品質之視訊對於12吋的顯示幕是不可接受的。因此,對於具有已知能力(例如顯示幕尺寸、顯示幕解析度)之給定的標的裝置,對特定的標的裝置執行MPD後置處理。在用於各裝置型式的DASH級,將媒體內容再編碼。用於電視的媒體內容可以與用於智慧型電話或平板電腦之媒體內容不同地編碼。在一實施例中,訂購優惠訂購計算之客戶端能夠存取為該特定客戶端編碼的媒體內容。
在另一實例中,藉由使用現存的表現組合但以更適用於特定客戶端的新位元率值,使用MD後置處理以產生的媒體內容的表現。舉例而言,對於500Kbps表現的媒體內容區段及對於1000Kbps表現的媒體內容區段(亦即,具有相同的媒體內容)可以相結合而產生媒體內容的750Kbps表現,不必將媒體內容轉碼。
另一實例提供如圖7中的流程圖所示般之網路裝置的電路之功能700,功能700可操作以支援超文件傳送協定上動態適應串流(DASH)。功能可以實施成方法或是功能可以執行成機器上的指令,其中,指令包含在至少一電腦可讀取的媒體上或是一非暫時的機器可讀取的儲存媒體上。如區塊710所示般,電路可以配置成辨識媒體表現描
述(MPD)檔案中說明的界定的表現中眾多的媒體內容區段。如區塊720所示般,電路可以配置成決定用於MPD檔案中說明的界定的表現中眾多媒體內容區段中各媒體內容區段的品質度量。如區塊730所示般,電路可以配置成辨識決定的品質度量是在選取的臨界值之下之界定的表現中的媒體內容區段。此外,如區塊740所示般,電路可以配置成以來自MPD檔案中說明之不同的表現之對應的媒體內容區段取代經過辨識的媒體內容區段,而形成修改的MPD檔案,其中,對應的媒體內容區段之品質度量大於選取的臨界值,以提供品質實質不變之界定的表現中的媒體內容區段回放。
在一實例中,電路可以又配置成傳送修改的MPD檔案給支援DASH之客戶端裝置。在另一實例中,電路又配置成產生用於特定裝置型式的修改的MPD。在又另一實例中,網路裝置設於內容遞送網路(CDN)或操作者網路中。
在一態樣中,電路又配置成使用位元率參數或品質參數中至少之一以辨識媒體內容區段的品質度量。在另一態樣中,相較於界定的表現中媒體內容區段,對應的媒體內容區段是來自不同的表現中實質相同的媒體時間範圍。在又另一態樣中,電路又配置成將決定的品質度量是低於選取的臨界值之界定的表現中的媒體內容區段再編碼,以致於再編碼的媒體內容區段之決定的品質度量是在選取的臨界值之上。
如圖8中的流程圖所示,另一實例提供支援超文件傳送協定上動態適應串流(DASH)之方法800。方法可以執行為機器上的指令,其中,指令被包含在至少一電腦可讀取的媒體或是一非暫時的機器可讀取的儲存媒體。如區塊810所示般,方法包含:在網路裝置處,決定用於媒體表現描述(MPD)檔案中說明的界定的表現中眾多的媒體內容區段中的各媒體內容區段之品質度量之操作。如區塊820所示般,方法包含:辨識決定的品質度量是在選取的臨界值之下之界定的表現中的媒體內容區段之操作。如區塊830所示般,方法包含:以來自MPD檔案中說明之不同的表現之對應的媒體內容區段取代經過辨識的媒體內容區段,而形成修改的MPD檔案之操作,其中,對應的媒體內容區段之品質度量大於選取的臨界值,以提供品質實質不變之界定的表現中的媒體內容區段回放。
在一實例中,方法包含從網路裝置傳送修改的MPD檔案至支援DASH的客戶端裝置之操作。在另一實例中,方法包含:在網路裝置處從使用者設備(UE)接收用於品質度量的選取的臨界值之操作。在又另一實例中,方法包含產生用於特定裝置型式的修改的MPD之操作。
在一配置中,網路裝置設於內容遞送網路(CDN)或操作者網路中。在另一配置中,方法又包括:使用位元率參數或品質參數中至少之一以辨識媒體內容區段的品質度量。在另一配置中,相較於界定的表現中媒體內容區段,對應的媒體內容區段是來自不同的表現中實質相同的媒體
時間範圍。此外,方法包含:將決定的品質度量是低於選取的臨界值之界定的表現中之媒體內容區段再編碼,以致於再編碼的媒體內容區段之決定的品質度量是在選取的臨界值之上之操作。
另一實例提供網路裝置的電路之功能900,如圖9中的流程圖所示,功能900可操作以支援超文件傳送協定上動態適應串流(DASH)。功能可以實施成方法或是功能可以執行成機器上的指令,其中,指令包含在至少一電腦可讀取的媒體上或是一非暫時的機器可讀取的儲存媒體上。如區塊910所示般,電路配置成辨識媒體表現描述(MPD)檔案中說明的界定的表現中眾多的媒體內容區段。如區塊920所示般,電路可以配置成決定用於MPD檔案中說明的界定的表現中眾多媒體內容區段的各媒體內容區段之品質度量。如區塊930所示般,電路可以配置成辨識界定的表現中決定的品質度量是在選取的臨界值之下之的媒體內容區段。如區塊940所示般,電路又配置成將決定的品質度量是低於選取的臨界值之界定的表現中的媒體內容區段再編碼,以致於再編碼的媒體內容區段之決定的品質度量是在選取的臨界值之上。此外,如區塊950所示般,電路又配置成產生修改的MPD檔案而包含再編碼的媒體內容區段以提供品質實質不變之界定的表現中的媒體內容區段回放。
在一實例中,電路又配置成傳送修改的MPD檔案給支援DASH的客戶端裝置。在另一實例中,電路又配置成
產生用於特定裝置型式的修改的MPD。在又另一實例中,網路裝置設於內容遞送網路(CDN)或操作者網路中。
在一態樣中,電路又配置成:使用位元率參數或品質參數中至少之一以辨識媒體內容區段的品質度量。在另一態樣中,電路可以又配置成以來自MPD檔案中說明之不同的表現之對應的媒體內容區段取代經過辨識的媒體內容區段,而形成修改的MPD檔案,其中,對應的媒體內容區段之品質度量大於選取的臨界值。在又另一態樣中,相較於界定的表現中媒體內容區段,對應的媒體內容區段是來自不同的表現中實質相同的媒體時間範圍。
圖10提供例如使用者設備(UE)、行動台(MS)、行動無線裝置、行動通訊裝置、平板電腦、手機、或另一型式的無線通訊裝置等無線裝置之實例。無線裝置包含一或更多天線,配置成與例如基地台(BS)、演進節點B(eNB)、基頻帶單元(BBU)、遠端無線電頭(RRH)、遠端無線電設備(RRE)、中繼站(RS)、無線電設備(RE)、遠端無線電單元(RRU)、中央處理模組(CPM)、或其它型式的無線廣域網路(WWAN)接取點等節點或傳輸站通訊。無線裝置配置成使用包含3GPP LTE、WiMAX、高速分封接取(HSPA)、藍芽、及WiFi中至少之一無線通訊標準來通訊。無線裝置使用用於各別無線通訊標準的分別天線或用於多個無線通訊標準的共用天線來通訊。無線裝置在無線區域網路(WLAN)、無線個人區域網路(WPAN)、及/或WWAN中通訊。
圖10也提供可用於音頻輸入及來自無線裝置的輸出之麥克風和一或更多揚音器。顯示幕可為液晶顯示器(LCD)顯示幕、或例如有機發光二極體(OLED)顯示器等其它型式的顯示幕。顯示幕可配置成觸控顯示幕。觸控顯示幕可使用電容式、電阻式、或另一型式的觸控幕技術。應用處理器及圖形處理器耦合至內部記憶體以提供處理和顯示能力。非依電性記憶體埠也用以提供資料輸入/輸出選項給使用者。非依電性記憶體埠也用以擴充無線裝置的記憶體能力。鍵盤可與無線裝置整合或是無線地連接至無線裝置以提供額外的使用者輸入。使用觸控顯示幕也可提供虛擬鍵盤。
各式各樣的技術或是其某些態樣或部份可以採取具體實施於例如軟碟、光碟唯讀記憶體(CD-ROM)、硬碟、非暫時電腦可讀取的儲存媒體、或任何其它機器可讀取的儲存媒體等實體媒體中的程式碼(亦即,指令)的形式,其中,當程式碼由例如電腦等機器載入及執行時,機器成為用於實施各式各樣的技術之設備。電路包含硬體、韌體、程式碼、可執行碼、電腦指令、及/或軟體。非暫時電腦可讀取的儲存媒體可為未包含訊號之電腦可讀取的儲存媒體。在程式碼於可編程電腦上執行的情形中,計算裝置包含處理器、可由處理器讀取的儲存媒體(包含依電性及非依電性記憶體及/或儲存元件)、至少一輸入裝置、及至少一輸出裝置。依電性及非依電性記憶體及/或儲存元件可為隨機存取記憶體(RAM)、可抹拭可編程唯讀記憶體
(EPROM)、快閃驅動器、光學驅動器、磁碟機、固態硬碟或用於儲存電子資料的其它媒體。節點及無線裝置也包含收發器模組(亦即,收發器)、計數器模組(亦即,計數器)、處理模組(亦即處理器)、及/或時脈模組(亦即時脈)或計時模組(亦即計時)。可實施或利用此處所述的各式各樣的技術之一或更多程式可以使用應用程式介面(API)、可再使用的控制、等等。這些程式可以以高階程序或物件導向程式語言實施,以與電腦系統通訊。但是,假使需要時,程式可以以組合語言或機器語言實施。在任何情形中,語言可為編譯或解譯的語言、且與硬體實施相結合。
應瞭解,本說明書中所述的很多功能單元標示成模組,以更特別強調它們的實施獨立性。舉例而言,組件可實施成硬體電路,包括客製化超大型積體(VLSI)電路或閘陣列、例如邏輯晶片等現成半導體、電晶體、或其它離散的組件。模組也可由例如現場可編程閘陣列、可編程陣列邏輯、可編程邏輯裝置等等可編程硬體裝置來實施。
模組也可由各式處理器執行的軟體來實施。舉例而言,經過識別之可執行碼的模組包括一或更多可組織成物件、程序、或函數之電腦指令的實體或邏輯區。然而,經過識別的模組之可執行碼無需實體地設置在一起,但是可以包括儲存在不同位置中的相異指令,當它們邏輯上接合在一起時,包含模組及達成所述模組之目的。
事實上,可執行碼的模組可為單一指令、或是很多指
令、以及甚至分佈於數個不同的碼段中、不同的程式中、及遍及數個記憶體裝置。類似地,此處在模組內可以辨識及顯示操作資料,操作資料可以以任何適當形式具體實施及在任何適當型式的資料結構內組織。操作資料可以被收集成單一資料集,或是散佈於不同位置,包含在不同儲存裝置上,以及,操作資料至少部份地存在僅作為系統或網路上的電子訊號。模組可以是被動的或主動的,包含可操作以執行所需功能的代理器。
在本說明書中述及「實例」或是「舉例而言」是意指配合實例所述的特定特點、結構、或特徵包含在本發明的至少一實施例中。因此,在本說明書中不同處出現「在實例中」或是「舉例而言」等文字時,並非都意指相同實施例。
如此處所使用般,為了方便起見,在共同清單中表現眾多項目、結構元件、構成元件、及/或材料。但是,這些清單應被解釋為宛如清單的各構件被個別地識別為分別的及獨特的構件。因此,除非另外指明,否則此清單的個別構件不應僅根據它們表現在共同組中即被解釋為相同清單的任何其它構件的實質等同構件。此外,此處述明本發明的各式實施例及實例、與其各種組件的替代。須瞭解,這些實施例、實例、及替代不是要解釋為是彼此事實上相等的,而是被視為分別的及獨立自主的本發明之代表。
此外,在一或更多實施例中,所述的特點、結構、或特徵可以以任何適當的方式結合。在說明中,提供眾多具
體細節,例如佈局實例、距離、網路實例、等等,以助於完整瞭解本發明的實施例。但是,習於相關技藝者將瞭解,沒有這些具體細節之一或更多、或是以其它方法、組件、佈局、等等,仍可實施本發明。在其它情形中,未詳細地顯示或說明習知的結構、材料、或操作,以免模糊本發明的態樣。
雖然前述實例說明一或更多特定應用中本發明的原理,但是,在不悖離本發明的原理及概念之下以及沒有創新的機能下,習於此技藝者將清楚知道對實施的形式、使用及細節作出很多修改。因此,本發明的範圍僅由後附申請專利範圍限定。
102‧‧‧媒體表現描述
Claims (22)
- 一種網路裝置,可操作以支援超文件傳送協定上動態適應串流(DASH),該網路裝置具有配置成執行下述的電路:辨識媒體表現描述(MPD)檔案中說明的界定的表現中的眾多媒體內容區段;決定用於該MPD檔案中說明的該界定的表現中該眾多媒體內容區段中各媒體內容區段的品質度量;辨識該決定的品質度量是在選取的臨界值之下之該界定的表現中的媒體內容區段;以及,以來自該MPD檔案中說明之不同的表現之對應的媒體內容區段取代該經過辨識的媒體內容區段,以形成修改的MPD檔案,其中,該對應的媒體內容區段之品質度量大於該選取的臨界值,以為了提供實質不變品質之該界定的表現中的媒體內容區段回放。
- 如申請專利範圍第1項之網路裝置,又配置成傳送該修改的MPD檔案給支援DASH之客戶端裝置。
- 如申請專利範圍第1項之網路裝置,又配置成產生用於特定裝置型式的該修改的MPD。
- 如申請專利範圍第1項之網路裝置,其中,該網路裝置設於內容遞送網路(CDN)或操作者網路中。
- 如申請專利範圍第1項之網路裝置,又配置成使用位元率參數或品質參數中至少之一以辨識該媒體內容區段的品質度量。
- 如申請專利範圍第1項之網路裝置,其中,與該界定的表現中的媒體內容區段相比,該對應的媒體內容區段是來自該不同的表現中實質相同的媒體時間範圍。
- 如申請專利範圍第1項之網路裝置,又配置成將該決定的品質度量是低於選取的臨界值之該界定的表現中決定的媒體內容區段再編碼,以致於該再編碼的媒體內容區段之決定的品質度量是在選取的臨界值之上。
- 一種支援超文件傳送協定上之動態適應串流(DASH)方法,該方法包括:在網路裝置處,決定媒體表現描述(MPD)檔案中說明的界定的表現中的眾多媒體內容區段中的各媒體內容區段之品質度量;辨識該決定的品質度量是在選取的臨界值之下之該界定的表現中的媒體內容區段;以及以來自該MPD檔案中說明之不同的表現之對應的媒體內容區段取代該經過辨識的媒體內容區段,而形成修改的MPD檔案,其中,該對應的媒體內容區段之品質度量大於該選取的臨界值,以提供品質實質不變之該界定的表現中的媒體內容區段回放。
- 如申請專利範圍第8項之方法,又包括從該網路裝置傳送該修改的MPD檔案至支援DASH的客戶端裝置。
- 如申請專利範圍第8項之方法,又包括:在該網路裝置處從使用者設備(UE)接收用於品質度量的該選取的 臨界值。
- 如申請專利範圍第8項之方法,又包括產生用於特定裝置型式的該修改的MPD。
- 如申請專利範圍第8項之方法,其中,該網路裝置設於內容遞送網路(CDN)或操作者網路中。
- 如申請專利範圍第8項之方法,又包括:使用位元率參數或品質參數中至少之一以辨識該媒體內容區段的品質度量。
- 如申請專利範圍第8項之方法,其中,相較於該界定的表現中媒體內容區段,該對應的媒體內容區段是來自該不同的表現中實質相同的媒體時間範圍。
- 如申請專利範圍第8項之方法,又包括:將該決定的品質度量是低於該選取的臨界值之該界定的表現中的媒體內容區段再編碼,以致於該再編碼的媒體內容區段之決定的品質度量是在該選取的臨界值之上。
- 一種網路裝置,可操作以支援超文件傳送協定上動態適應串流(DASH),該網路裝置具有配置成執行下述的電路:辨識媒體表現描述(MPD)檔案中說明的界定的表現中的眾多媒體內容區段;決定用於該MPD檔案中說明的該界定的表現中該眾多媒體內容區段的各媒體內容區段之品質度量;辨識該決定的品質度量是在選取的臨界值之下之該界定的表現中的媒體內容區段; 將該決定的品質度量是低於該選取的臨界值之該界定的表現中的媒體內容區段再編碼,以致於該再編碼的媒體內容區段之決定的品質度量是在該選取的臨界值之上;以及,產生修改的MPD以包含該再編碼的媒體內容區段以提供品質實質不變之該界定的表現中的媒體內容區段回放。
- 如申請專利範圍第16項之網路裝置,又配置成傳送該修改的MPD檔案給支援DASH之客戶端裝置。
- 如申請專利範圍第16項之網路裝置,又配置成產生用於特定裝置型式的該修改的MPD。
- 如申請專利範圍第16項之網路裝置,其中,該網路裝置設於內容遞送網路(CDN)或操作者網路中。
- 如申請專利範圍第16項之網路裝置,又配置成使用位元率參數或品質參數中至少之一以辨識該媒體內容區段的品質度量。
- 如申請專利範圍第16項之網路裝置,又配置成以來自該MPD檔案中說明的不同表現之對應的媒體內容區段,取代該經過辨識的媒體內容區段用以形成修改的MPD檔案,其中,該對應的媒體內容區段之品質度量大於該選取的臨界值。
- 如申請專利範圍第21項之網路裝置,其中,與該界定的表現中的媒體內容區段相比,該對應的媒體內容區段是來自該不同的表現中實質相同的媒體時間範圍。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/494,192 US9894130B2 (en) | 2014-09-23 | 2014-09-23 | Video quality enhancement |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201622393A true TW201622393A (zh) | 2016-06-16 |
TWI590632B TWI590632B (zh) | 2017-07-01 |
Family
ID=54140652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW104126701A TWI590632B (zh) | 2014-09-23 | 2015-08-17 | 視訊品質增強 |
Country Status (10)
Country | Link |
---|---|
US (1) | US9894130B2 (zh) |
EP (1) | EP3198877A1 (zh) |
JP (1) | JP6337350B2 (zh) |
KR (1) | KR102266325B1 (zh) |
CN (1) | CN106576182B (zh) |
BR (1) | BR112017003469A2 (zh) |
CA (1) | CA2957215A1 (zh) |
RU (1) | RU2658642C1 (zh) |
TW (1) | TWI590632B (zh) |
WO (1) | WO2016048558A1 (zh) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015022434A1 (en) * | 2013-08-16 | 2015-02-19 | Bitmovin Gmbh | Apparatus and method for constant quality optimization for adaptive streaming |
EP3100464B1 (en) * | 2014-01-29 | 2020-11-18 | Koninklijke KPN N.V. | Establishing a streaming presentation of an event |
CN107079013B (zh) | 2014-10-14 | 2020-07-10 | 皇家Kpn公司 | 管理媒体流的并发流式传输 |
US10412132B2 (en) * | 2015-02-16 | 2019-09-10 | Lg Electronics Inc. | Broadcasting signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method |
US20160249092A1 (en) * | 2015-02-24 | 2016-08-25 | Layer3 TV, Inc. | System and method for digital video recording backfill |
FR3034943B1 (fr) * | 2015-04-07 | 2017-04-14 | Streamroot Inc | Procede de lecture en continu sur un equipement client d'un contenu diffuse au sein d'un reseau pair a pair |
US10567816B2 (en) | 2015-04-30 | 2020-02-18 | Comcast Cable Communications, Llc | Delivering content |
US11109101B1 (en) * | 2015-05-13 | 2021-08-31 | T-Mobile Usa, Inc. | Apparatus, system, and method for ABR segment pull DVR |
CN105306969A (zh) * | 2015-09-02 | 2016-02-03 | 越亮传奇科技股份有限公司 | 一种流媒体自适应处理系统及方法 |
WO2017100769A1 (en) | 2015-12-11 | 2017-06-15 | Vid Scale, Inc. | Scheduling multiple-layer video segments |
US10432690B1 (en) * | 2016-06-03 | 2019-10-01 | Amazon Technologies, Inc. | Manifest partitioning |
WO2018013815A1 (en) * | 2016-07-14 | 2018-01-18 | Arris Enterprises Llc | Quality tagging in adaptive bitrate technologies |
JP6891497B2 (ja) * | 2017-01-06 | 2021-06-18 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システム及びプログラム |
JPWO2018173876A1 (ja) * | 2017-03-24 | 2020-01-30 | ソニー株式会社 | コンテンツ処理装置およびコンテンツ処理方法、並びにプログラム |
US10484308B2 (en) | 2017-03-31 | 2019-11-19 | At&T Intellectual Property I, L.P. | Apparatus and method of managing resources for video services |
US10819763B2 (en) | 2017-03-31 | 2020-10-27 | At&T Intellectual Property I, L.P. | Apparatus and method of video streaming |
US10362080B2 (en) * | 2017-04-25 | 2019-07-23 | At&T Intellectual Property I, L.P. | Methods, systems, and devices for video streaming adaptation using control theoretic approach |
US20180343468A1 (en) * | 2017-05-26 | 2018-11-29 | Comcast Cable Communications, Llc | Dynamic Encoding Using Remote Encoding Profiles |
EP3451672A1 (en) * | 2017-08-29 | 2019-03-06 | Nokia Solutions and Networks Oy | Method and device for video content encoding optimisation in adaptive streaming systems |
US20190166170A1 (en) * | 2017-11-29 | 2019-05-30 | Comcast Cable Communications, Llc | Video Streaming Delivery |
US10728180B2 (en) | 2018-08-21 | 2020-07-28 | At&T Intellectual Property I, L.P. | Apparatus, storage medium and method for adaptive bitrate streaming adaptation of variable bitrate encodings |
JP7161103B2 (ja) * | 2018-10-25 | 2022-10-26 | 日本電信電話株式会社 | 通信システム、ネットワーク側装置、伝送機能変更方法及びプログラム |
US11044185B2 (en) | 2018-12-14 | 2021-06-22 | At&T Intellectual Property I, L.P. | Latency prediction and guidance in wireless communication systems |
US10887660B2 (en) | 2018-12-27 | 2021-01-05 | Comcast Cable Communications, Llc | Collaborative media quality determination |
WO2020150654A1 (en) * | 2019-01-17 | 2020-07-23 | Brightcove Inc. | Optimal multi-codec abr ladder design |
US11184648B2 (en) * | 2019-08-30 | 2021-11-23 | Rovi Guides, Inc. | Systems and methods for providing content during reduced streaming quality |
US11283635B2 (en) * | 2019-09-28 | 2022-03-22 | Intel Corporation | Dynamic sharing in secure memory environments using edge service sidecars |
US11973991B2 (en) * | 2019-10-11 | 2024-04-30 | International Business Machines Corporation | Partial loading of media based on context |
US11297364B2 (en) * | 2019-11-21 | 2022-04-05 | Synamedia Limited | Video content streaming bitrate selection using an edge computing system for improving user experience |
KR102193806B1 (ko) * | 2020-03-27 | 2020-12-22 | 연진선 | Ar 콘텐츠의 실시간 분산 송출시스템 |
KR20220012740A (ko) * | 2020-07-23 | 2022-02-04 | 삼성전자주식회사 | 통신 시스템에서 컨텐츠의 송수신을 제어하기 위한 방법 및 장치 |
US11483472B2 (en) * | 2021-03-22 | 2022-10-25 | International Business Machines Corporation | Enhancing quality of multimedia |
US11716531B2 (en) | 2021-03-22 | 2023-08-01 | International Business Machines Corporation | Quality of multimedia |
US11533427B2 (en) * | 2021-03-22 | 2022-12-20 | International Business Machines Corporation | Multimedia quality evaluation |
US11412283B1 (en) | 2021-04-27 | 2022-08-09 | City University Of Hong Kong | System and method for adaptively streaming video |
US11716214B2 (en) * | 2021-07-19 | 2023-08-01 | Verizon Patent And Licensing Inc. | Systems and methods for dynamic audiovisual conferencing in varying network conditions |
US11895173B2 (en) * | 2022-01-07 | 2024-02-06 | Avago Technologies International Sales Pte. Limited | Gapped and/or subsegmented adaptive bitrate streams |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1908303A4 (en) * | 2005-07-01 | 2011-04-06 | Sonic Solutions | METHOD, DEVICE AND SYSTEM FOR USE IN MULTIMEDIA SIGNAL CODING |
US20130290492A1 (en) * | 2009-06-12 | 2013-10-31 | Cygnus Broadband, Inc. | State management for video streaming quality of experience degradation control and recovery using a video quality metric |
DK2526671T3 (en) * | 2010-01-18 | 2017-02-27 | ERICSSON TELEFON AB L M (publ) | METHODS AND DEVICES FOR HTTP MEDIA FLOW DISTRIBUTION |
US9456015B2 (en) * | 2010-08-10 | 2016-09-27 | Qualcomm Incorporated | Representation groups for network streaming of coded multimedia data |
CN102130936B (zh) * | 2010-08-17 | 2013-10-09 | 华为技术有限公司 | 一种在动态http流传输方案中支持时移回看的方法和装置 |
US9160779B2 (en) * | 2011-06-30 | 2015-10-13 | Qualcomm Incorporated | Dynamic adaptive streaming proxy for unicast or broadcast/multicast services |
CN103650451B (zh) * | 2011-07-07 | 2016-10-19 | 瑞典爱立信有限公司 | 网络容量优化的自适应http流播 |
US9112942B2 (en) * | 2011-07-15 | 2015-08-18 | Shmuel Ur | Dynamic modification of media streams' quality |
US8924580B2 (en) | 2011-08-12 | 2014-12-30 | Cisco Technology, Inc. | Constant-quality rate-adaptive streaming |
US9438883B2 (en) * | 2012-04-09 | 2016-09-06 | Intel Corporation | Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content |
CN104429093B (zh) | 2012-07-09 | 2018-01-05 | 华为技术有限公司 | 超文本传输协议动态自适应流媒体客户端及其会话管理实施方法 |
KR20170083641A (ko) * | 2012-07-10 | 2017-07-18 | 브이아이디 스케일, 인크. | 품질 주도형 스트리밍 |
US9357272B2 (en) * | 2012-08-03 | 2016-05-31 | Intel Corporation | Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation |
US9125073B2 (en) | 2012-08-03 | 2015-09-01 | Intel Corporation | Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file |
WO2014113486A1 (en) * | 2013-01-15 | 2014-07-24 | Futurewei Technologies, Inc. | Using quality information for adaptive streaming of media content |
KR101693584B1 (ko) * | 2013-01-18 | 2017-01-06 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 미디어 콘텐츠에 대해 적응 스트리밍을 수행하는 방법 및 장치 |
CN103973662B (zh) * | 2013-02-06 | 2017-06-20 | 华为技术有限公司 | 流媒体请求方法及控制器 |
US20140254659A1 (en) * | 2013-03-11 | 2014-09-11 | Mediatek Inc. | Video coding method using at least evaluated visual quality and related video coding apparatus |
US20140281556A1 (en) * | 2013-03-14 | 2014-09-18 | Qualcomm Incorporated | Media presentation description verification |
US9402107B2 (en) * | 2013-03-15 | 2016-07-26 | Time Warner Cable Enterprises Llc | Apparatus and methods for delivery of multicast and unicast content in a content delivery network |
ES2728732T3 (es) | 2013-03-29 | 2019-10-28 | Intel Ip Corp | Técnicas de adaptación de tasa sensibles a la calidad para la difusión en flujo de tipo DASH |
CN104105012B (zh) * | 2013-04-03 | 2018-04-20 | 华为技术有限公司 | 流媒体的片段准备方法和装置 |
-
2014
- 2014-09-23 US US14/494,192 patent/US9894130B2/en not_active Expired - Fee Related
-
2015
- 2015-08-17 TW TW104126701A patent/TWI590632B/zh not_active IP Right Cessation
- 2015-08-26 EP EP15763695.2A patent/EP3198877A1/en not_active Ceased
- 2015-08-26 RU RU2017105402A patent/RU2658642C1/ru not_active IP Right Cessation
- 2015-08-26 CN CN201580044972.3A patent/CN106576182B/zh active Active
- 2015-08-26 BR BR112017003469A patent/BR112017003469A2/pt not_active Application Discontinuation
- 2015-08-26 KR KR1020177004485A patent/KR102266325B1/ko active IP Right Grant
- 2015-08-26 JP JP2017510324A patent/JP6337350B2/ja not_active Expired - Fee Related
- 2015-08-26 CA CA2957215A patent/CA2957215A1/en not_active Abandoned
- 2015-08-26 WO PCT/US2015/046947 patent/WO2016048558A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
EP3198877A1 (en) | 2017-08-02 |
CN106576182B (zh) | 2020-05-05 |
CN106576182A (zh) | 2017-04-19 |
US9894130B2 (en) | 2018-02-13 |
BR112017003469A2 (pt) | 2017-12-05 |
CA2957215A1 (en) | 2016-03-31 |
KR20170032431A (ko) | 2017-03-22 |
TWI590632B (zh) | 2017-07-01 |
RU2658642C1 (ru) | 2018-06-22 |
JP2017533607A (ja) | 2017-11-09 |
WO2016048558A1 (en) | 2016-03-31 |
US20160088054A1 (en) | 2016-03-24 |
KR102266325B1 (ko) | 2021-06-18 |
JP6337350B2 (ja) | 2018-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI590632B (zh) | 視訊品質增強 | |
US11038944B2 (en) | Client/server signaling commands for dash | |
US10455404B2 (en) | Quality of experience aware multimedia adaptive streaming | |
KR101900168B1 (ko) | 적응적 미디어 스트리밍 | |
KR20170101193A (ko) | 미디어 콘텐츠 스트리밍 | |
EP2962435A1 (en) | Link-aware streaming adaptation | |
Abdullah et al. | Survey of transportation of adaptive multimedia streaming service in internet |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |