TW201347552A - 用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統 - Google Patents

用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統 Download PDF

Info

Publication number
TW201347552A
TW201347552A TW102104861A TW102104861A TW201347552A TW 201347552 A TW201347552 A TW 201347552A TW 102104861 A TW102104861 A TW 102104861A TW 102104861 A TW102104861 A TW 102104861A TW 201347552 A TW201347552 A TW 201347552A
Authority
TW
Taiwan
Prior art keywords
video
pixel data
video quality
side information
blocks
Prior art date
Application number
TW102104861A
Other languages
English (en)
Other versions
TWI568238B (zh
Inventor
Yi-Ting Liao
Jeffrey R Foerster
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of TW201347552A publication Critical patent/TW201347552A/zh
Application granted granted Critical
Publication of TWI568238B publication Critical patent/TWI568238B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/66—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23406—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401—Monitoring of the client buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404—Monitoring of server processing errors or hardware failure

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種系統及方法，藉由一視訊編碼器產生相關於像素資料之多個區塊的旁側資訊，在像素資料的區塊遺失於一網際網路的情況下，該旁側資訊針對每一像素資料的區塊提供一視訊品質影響的一指示。

Description

用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統
本發明是關於一種區分封包資料之方法及系統，特別是指用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統。
發明背景
目前部分的視訊系統已發展為藉由網際網路傳輸視訊資料及多媒體資料。在某些情況下，所述網際網路可以是有線網路或無線網路，且可能包含電視廣播(television broadcast)網路、衛星網路、蜂巢式(cellular)網路及無線高保真(wireless fidelity，簡稱為Wi-Fi)網路。對使用者的視訊觀賞體驗來說，其接收及觀賞之視訊的品質是最重要的部分。若於一視訊傳送之接收終點處所接收之視訊的部分於資料的發送中遺失，則會因視訊品質的衰退而危害使用者的視訊體驗。
目前已有提出許多技術可藉由在視訊傳輸連結(link)的接收終點進行調整，以針對遺失的視訊資料補償。在許多方面，上述先前技術藉由考量針對透過於一 視訊傳輸通道中進行傳輸的視訊資料之一平均封包遺失率(average package loss rate)，並基於該視訊的平均封包遺失率針對該已傳輸資料而運作，以針對該平均封包遺失率進行補償。
然而，在一定程度上，所述考量針對一視訊傳輸通道之平均封包遺失率的技術，不一定能處理某些廣泛的視訊品質問題，此等的技術及系統通常不能自適應(adaptive)或響應於各種視訊的傳輸類型。因此，基於特定於所傳輸資料的資訊以提升視訊及其他資料傳輸的有效性及效率是非常重要的。
依據本發明之一實施例，係特地提出一種方法，包含以下步驟：藉由一視訊編碼器產生相關於像素資料之多個區塊的旁側資訊，該旁側資訊針對像素資料的每一區塊提供一視訊品質影響的一指示。
100‧‧‧處理程序
105‧‧‧運算步驟
110‧‧‧運算步驟
200‧‧‧處理程序
205‧‧‧運算步驟
210‧‧‧運算步驟
215‧‧‧運算步驟
220‧‧‧運算步驟
300‧‧‧視訊編碼器
305‧‧‧封包化模組
310‧‧‧錯誤隱蔽模組
315‧‧‧失真計算模組
320‧‧‧封包遺失影響估算模組
本揭露在此之態樣係以附圖為例進行說明，但不以附圖為限。為了例示之簡化與明確而非限制，下列圖式中所例示之態樣不必依據相同的比例尺繪製。此外，基於適當的考量，於圖式中的類似參考標記會重複使用，以指示對應或類似的元件。
圖1為根據在此之一實施例的一程序流程圖；圖2為根據一實施例的一程序流程圖；圖3為根據之一實施例的一系統之示意方塊 圖；及圖4a與圖4b為根據在此之若干實施例的一視訊場景的例示性描述。
詳細說明
以下詳細說明描述一種方法或系統，其藉由提供用以估算由於一視訊位元流之每一獨立封包的遺失之一機制，而可支援用以提升一視訊傳輸的有效性及效率的程序及運作。本揭露在此提供此種關於用以實施該等程序與運作的一系統之眾多特定的實施細節。然而，可以理解習於相關於本揭露之實施例之技藝者，可以不採用此等特定細節而實施。因此，為了避免模糊本揭露的其他實施態樣，在某些範例態樣中，諸如控制機制與完整軟體指令次序等特定技術細節未示出。本領域具有通常知識者當可依在此給定之隨附詳細說明實施適當的功能而不需過度地反覆試驗。
在本揭露中提及的「一個實施例」、「一些實施例」、「一實施例」、「一範例實施例」、「一例子」、「一些例子」指示所描述的實施例可包括特定特徵、結構或特性，但所有實施態樣可不一定包括該特定特徵、結構或特性。更甚者，此等片與不一定是指同一實施態樣。進一步地，當一特定特徵、結構或特性係有關於一實施例而描述時，不管有無明確地描述，在習於此技藝者的知識範圍內所能影響之有關於其他實施例的此等特徵結 構或特性，係受提交。
在此的一些實施例可於硬體、韌體、軟體或其等的任意組合之中實施。實施例也可如儲存於一機器可讀媒體上的可執行指令而實施，該等指令可由一個或多個處理器讀取與執行。一機器可讀儲存媒體可包括用以將資訊以藉由一機器(例如一電腦裝置)可讀的型式儲存資訊的任何實體非暫態機制。在一些態樣中，一機器可讀儲存媒體可包括僅讀記憶體(ROM)、隨機存取記憶體(RAM)、磁碟儲存媒體、光學儲存媒體、快閃記憶裝置以及電子與光學型式的訊號。雖然在此之韌體、軟體、慣用指令(routine)及指令可描述為用以執行特定動作，應可理解此等描述僅為了方便起見，且此等動作事實上係由由計算裝置、處理器、控制器及執行該等韌體、軟體、路由與指令的其他裝置所引起。
圖1為根據在此之一實施例的一處理程序100的之例示性流程圖。處理程序100可提供用於提供相關於一已編碼的視訊位元流(在此也可稱為「視訊」或「視訊位元流」)之旁側資訊的一機制或技術。如在此之使用，旁側資訊可相關於該已編碼的視訊位元流，且可包括任何附加資訊或資料。在一些態樣中，該旁側資訊可於一視訊編碼器處產生，且該旁側資訊與該已編碼的視訊位元流相關聯。在一些實施例中，由一視訊編碼器編碼的一視訊序列可具有由該視訊編碼器針對該已編碼的視訊位元流所產生的旁側資訊。
於運算步驟105，產生包含一已編碼之視訊位元流的像素資料的多個區塊。該等多個像素資料的區塊可由一視訊編碼器產生。該等被產生的像素資料的區塊可根據一或多種視訊傳輸協定而被組配為封包資料。該等封包的尺寸與結構可部分地基於所使用的視訊傳輸協定。該等多個像素資料的區塊通常可透過一傳輸通道傳輸至一視訊接收端。該視訊接收端可包括用以對該已編碼的視訊位元流進行解碼的一視訊解碼器。
由一視訊編碼器編碼的一視訊序列可具有由該視訊編碼器針對該視訊序列產生的旁側資訊。於運算步驟110，產生相關聯於該等多個像素資料之區塊的旁側資訊。在一些態樣中，該旁側資訊可至少部分為與其相關聯的視訊序列為描述性(descriptive)的。在一些態樣中，該旁側資訊可用於加強或處理該已編碼的視訊位元流，包括至少部分基於該旁側資訊中的資料而傳輸及處理該視訊。在一些態樣中，該視訊的處理程序可包括由在一傳輸連結之一接收端的一解碼器所執行的處理運算。在一些實施例中，該旁側資訊可包括或形成與該視訊相關聯之標頭的部分，亦可包括元資料或其他資料結構。
一般而言，在此的該旁側資訊可括除了該已編碼的視訊位元流以外的任意附加資訊。在一些態樣中，可以該視訊(例如：嵌入已傳輸之視訊的一標頭中)包封(encapsulated)該旁側資訊，或以一平台層級由分享 該旁側資訊而提供於在該平台上的其他功能或運作方塊。在一些態樣中，該旁側資訊可包括描述性的元資料，且該元資料相關聯於該已編碼之視訊位元流。
圖2為根據在此之一些實施例的一處理程序200的一流程圖。處理程序200相關於一些實施例中，用於區別來自於一已編碼之視訊位元流的個別封包之遺失的影響。透過一網路傳輸的一視訊位元流可能經歷由於視訊封包的一損失導致的品質衰退。要注意的是，不同型態的封包遺失可能對該視訊品質衰退具有不同的影響。在一些實施例中，本揭露包括在一視訊編碼器處產生用以鑑別該獨立封包損失的影響之旁側資訊。在一些態樣中，針對該等個別封包的估算結果可用於將該等視訊封包分類為一些不同的優先次序層級。不同的優先次序層級的分類可與諸如適應性通道選擇的跨層最佳化技術結合，以提升傳輸透過一有損網路的端點至端點的視訊品質。
根據在此的一些態樣，由參考一視訊編碼器的示意方塊圖而可理解圖2的流程圖。在一些實施例中，三個功能性元件可被包含於一視訊編碼器處，以估算每一個別封包遺失所造成的一視訊品質衰退。因此，圖2將可與如圖3所例示的一視訊編碼器300一併討論說明。系統300可實施為硬體、軟體、韌體及其等之組合。在一些實施例中，系統300包括一處理器及用以實施圖3中所描述的功能性模組之相關的記憶體(圖未示)。
於運算步驟205，視訊被接收。該視訊可由包括有用以實施處理程序200的運算步驟之多個功能性元件的視訊編碼器300所接收。要注意的是，一錯誤隱蔽方塊(error concealment block)通常會於一解碼器處實施，以在一已編碼視訊序列位元流的傳輸過程中隱蔽該等巨集區塊(macroblocks，MBs)的遺失。在一些實施例中，一錯誤隱蔽模組可被包括在該編碼器處，以估算如如運算步驟210所表示之在該編碼程序期間每一個巨集區塊的隱蔽像素值(concealed pixel value)。更精確地，視訊編碼器300可包括一錯誤隱蔽模組310，其係用以計算若一個別視訊封包在一視訊位元流的傳輸期間遺失，該視訊的一封包將如何被隱蔽。
作為一範例，若一畫格複製隱蔽(frame copy concealment)被用作用以隱蔽遺失像素的錯誤隱蔽方法，則該遺失像素可由複製自前一畫格對應(colocated)位置的像素而被隱蔽。也就是說，該隱蔽像素值(畫格n中的像素i)=，其中，為畫格n-1(前一畫格)中的像素i的壓縮像素值且可自一畫格緩衝器獲得。
於運算步驟215，判定一失真計算。在一些實施例中，基於運算步驟210估算出的隱蔽像素值及壓縮像素值，由在一像素層級(pixel level)的封包遺失計算失真所導致的一數值可而被。也就是說，做出一計算以判斷 若該(當下的)視訊封包遺失，將引入何種程度的失真。舉例來說，失真計算模組315可計算該隱蔽視訊封包及該正確接收視訊封包之間的失真。
舉例來說，在此可應用不同的失真度量來計算該視訊失真。在一些實施例中，一均方誤差(MSE)技術被應用於此。於該等實施例中，畫格n中的像素i的失真可表示為。亦可使用其他失真度量，包括多尺度結構相似度(MS-SSIM)與視訊品質度量(VQM)以及其他參考與非參考的度量。
於運算步驟215處，決定該當下的視訊封包遺失將如何影響未來視訊畫格品質的估算。參照圖3，可以看出自封包化模組305的輸出係由封包遺失影響估算模組320所接收。因此，該視訊編碼器可得知何哪些巨集區塊係編碼於一視訊封包中。據此，對於當下的視訊畫格的每一獨立封包遺失的失真，可例如由下列公式計算。其中，像素i表示編碼於封包p中的像素值，且封包p包含在畫格n中的巨集區塊。
在一些實施例中，一畫格n的畫格類型以及畫面索引亦於在該編碼器處為已知。因此，對於該視訊的圖像群組(GOP)，獨立封包損失可基於前述資訊及一錯誤傳播模式而估算出。舉例而言，針對一畫格I(intra-coded picture，亦即框內編碼圖像)或一畫格P(亦即，即預測圖像)，一畫面中的錯誤通常會傳播至圖像群組中的所有畫 格，同時，針對一畫格B(bi-predictive picture，亦即雙向預測圖像)，封包的遺失只會導致當下的畫格失真。在本揭露中，建構一模式以估算封包遺失對該圖像群組的影響。該模式假設，在一畫格中的錯誤會不斷傳播至一圖像群組中之後的畫格，且在一畫格P中的一封包遺失導致鄰近的畫格B的顯著失真。因此，封包p的封包損失對該圖像群組的影響可由下式估算：
其中，p type 是封包p的畫格類型，p index 是封包p的圖像群組中的畫格索引，k p 是受遺失封包p影響的畫格數量且可定義為：
且D offset 是用於擷取該鄰近畫格B之失真的一常數：
在一些實施例中，可改變在此用於判斷該封包遺失影響之估算值的特定演算法，以對應於，例如，由錯誤隱蔽模組315所使用之其他錯誤隱蔽技術。然而，在此揭露的通用架構可應用於跨多種使用方案。
要注意的是，該封包損失影響是針對每一封包計算或估算。因此，由該封包遺失影響估算模組320輸 出的旁側資訊基於該封包遺失能見度提供每一獨立視訊封包之重要性的一指示。
回到處理程序200處，該處理程序可繼續運行至運算步驟220。於運算步驟220處，在運算步驟215處判定的該獨立封包損失影響可在該視訊位元流的傳輸過程中被回報、儲存或使用。該獨立封包損失影響在某些例子中可用以動態地調整該視訊的傳輸，用以努力地減少或消除視訊封包遺失導致的視訊衰退。因此，一視訊傳輸方法可藉由在運算步驟205至215中所判定之視訊封包的優先次序，而顯著地影響接收端的視訊品質。
申請人針對三個視頻序列，藉由基於該等方法與估算效能評估判定，在不同位元率下已實施在此揭露之方法的效用，三個視訊序列包括公開可得的「Parkrun」、「Stockholm」、「Shields」。所使用之視訊序列的具有一影像解析度為1280x720，且一畫格率為30fps。一Vanguard H.264編解碼技術係用於以圖像群組尺寸為30將以IBPBP編碼結構的視訊進行編碼。於該估算方法中，峰值訊雜比(PSNR)以及MS-SSIM(多尺度結構相似度)係用作為在該估算方法中的視訊品質度量。針對在2.277Mbps的Stockholm已編碼視訊的一第一圖像群組，比較實際封包遺失影響以及估算封包遺失影響，該估算方法在此精確地符合該實際封包損失影響，在此該平均PSNR以及MS-SSIM的估算誤差分別為0.14及0.0008。
以下的表1a與表1b包括在不同位元率下，針 對於Stockholm、Shields與Parkrun視訊序列的平均估算誤差(亦即，實際與估算結果之間的平均絕對差值)。表1a使用PSNR為視訊品質度量，且表1b使用MS-SSIM為視訊品質度量。如表1a與表1b所展示，由在此揭露之方法及運算程序所判定之估算值，媲美實際觀測的遺失。
在一些態樣中，由在此揭露之一方法或運算步驟所判定之封包遺失影響估算可改良或提升一網路的視訊傳輸。在一些實施例中，例如，於320處之視訊編碼器300的一輸出可用於用以增進終端使用者的視訊體驗品質的一視訊適應策略，。
如展示本揭露之方法與系統的有效性的一範例，一使用案例係呈現為其在此以一適應性通道選擇併入該封包損失影響估算。在本範例中，假設三個通道為可用於視訊傳輸的，該等三個通道時具有0%、1%與5%的封包遺失率。於一基礎策略中，該等三個通道的每一者是隨機地選擇以用於傳輸該等視訊封包的三分之一。根據在此使用的封包損失影響估算(例如，可包含圖2之運算步驟220的一處理程序)的一適應性通道選擇策略，基於由在此之該封包損失影響技術所估算的封包損失影響之估算，該等視訊封包可被平均地區分為的三種優先次序層級。該適應性通道選擇程序藉由指定一封包為較具有一較少品質影響之一封包的一較高優先次序層級，以一較大品質影響優先化該封包，具有較少品質影響的一封包將會被優先化為一較低優先次序層級。在優先化該等視訊封包的優先次序層級後，該等視訊封包可基於其等之優先次序層級而透過該等三個不同的通道傳輸。在一些實施例中，較高優先次序層級的視訊封包可透過具有一較低封包遺失率的一通道傳輸。
在此使用案例中，一Stockholm(300個畫格)序列係受編碼且使用該基礎策略及該適應性通道選擇策略而透過該等三個通道傳輸。於20次的傳輸後，針對該基礎策略及該自適應通道選擇策略的平均PSNR分別是30.19dB與31.30dB。因此，可看出在此揭露的封包遺失影響估算可併入一通道適應方法，以提升端點至端點的 視訊傳輸品質。
圖4a與圖4b分別描繪出藉由該基礎策略及所提出的自適應通道選擇策略所產生的影像擷圖。該等影像擷圖展示出所提出的自適應通道選擇策略增進了使用者的視訊體驗品質，例如，相較於圖4a(未產生或使用該旁側資訊以增進影像傳輸品質)，使用該自適應通道選擇策略所獲得的圖4b(產生並使用該旁側資訊以增進影像傳輸品質)之視頻並未發生品質的衰退。
在此討論的所有系統及處理程序可於儲存在一或多個電腦可讀媒體的程式編碼而實施。此等媒體可包括，例如，軟碟、CD-ROM、DVD-ROM、一或多種類型的碟片、磁帶、記憶卡、快閃磁碟、固態磁碟、固態隨機存取記憶體、僅讀記憶體(ROM)儲存單元及其他非暫態儲存媒體。進一步來說，在此所揭露或提及的系統及裝置(例如，系統200)可包含硬體、軟體與韌體，包括通用、專用及分配式的計算裝置、處理器、處理核心與微處理器。在一些態樣中，在此揭露的處理程序及方法可如一服務而被交付並提供。實施例因而不受限於硬體與軟體的任何特定組合。
此處揭露的實施例單獨地用於例示的用途。本領域具有通常知識者將可從此詳細說明認知實施例不以已描述者為限，但可在僅由附加專利範圍的精神與範圍所限制之修改與變更而實行。
100‧‧‧處理程序
105、110‧‧‧運算步驟

Claims (19)

  1. 一種方法，包含以下步驟：藉由一視訊編碼器產生相關於像素資料之多個區塊的旁側資訊，該旁側資訊針對像素資料的每一區塊提供一視訊品質影響的一指示。
  2. 如申請專利範圍第1項所述之方法，其中一視訊品質影響的該指示鑑別由於該像素資料之相關區塊的遺失之一估算視訊品質衰退。
  3. 如申請專利範圍第2項所述之方法，其中該估算視訊品質衰退係藉由以下步驟決定：藉由該視訊編碼器針對在一編碼程序中的像素之該等多個區塊而估算隱蔽像素值；藉由像素的該等多個區塊之每一者的一遺失，計算將會造成的一失真；及基於包含有當下的圖像群組之像素的該等多個區塊的每一者之已計算失真，針對一當下的圖像群組計算一失真。
  4. 如申請專利範圍第3項所述之方法，其中該圖像群組係以一I畫格開始的連續視訊畫格的一群組。
  5. 如申請專利範圍第1項所述之方法，更包含基於針對像素資料之每一區塊在該旁側資訊中的一視訊品質影響的該指示，指派多個優先次序層級的其中之一者予該等多數區塊的每一者。
  6. 如申請專利範圍第5項所述之方法，其中相較於具有一較低視訊品質影響的像素資料的一區塊，具有一較高視訊品質影響之像素資料的一區塊會被指派一較高的優先次序層級。
  7. 如申請專利範圍第1項所述之方法，更包含至少部分基於針對像素資料的每一區塊在該旁側資訊中的一視訊品質影響的該指示，使用一適應性通道選擇程序傳輸一視訊位元流。
  8. 一種系統，其係包含：一旁側資訊產生器，用於產生相關於像素資料之多個區塊的旁側資訊，該旁側資訊針對像素資料的每一區塊提供一視訊品質影響的一指示。
  9. 如申請專利範圍第8項所述之系統，其中該視訊品質影響的該指示鑑別由於該像素資料之相關區塊之一遺失的一估算視訊品質衰退。
  10. 如申請專利範圍第9項所述之系統，其中該旁側資訊產生器包含：一錯誤隱蔽模組，用於藉由一視訊編碼器針對在一編碼程序中的像素之該等多個區塊，以估算隱蔽像素值；一失真計算模組，用於藉由像素的該等多個區塊之每一者的一遺失，計算將會造成的一失真；及一封包遺失影響估算模組，用於基於包含有當下的圖像群組之像素的該等多個區塊的每一者之已計算失 真，針對一當下的圖像群組計算一失真。
  11. 如申請專利範圍第10項所述之系統，其中該圖像群組係以一I畫格開始的連續視訊畫格的一群組。
  12. 如申請專利範圍第8項所述之系統，其中該旁側資訊產生器基於針對像素資料之每一區塊在該旁側資訊中的一視訊品質影響的該指示，指派多個優先次序層級的其中之一者予該等多數區塊的每一者。
  13. 如申請專利範圍第12項所述之系統，其中相較於具有一較低視訊品質影響的像素資料的一區塊，具有一較高視訊品質影響之像素資料的一區塊會被指派為一較高的優先次序層級。
  14. 如申請專利範圍第8項所述之系統，更包含至少部分基於針對像素資料的每一區塊在該旁側資訊中的一視訊品質影響的指示，使用一適應性通道選擇程序傳輸一視訊位元流。
  15. 一種具有處理器可執行之指令儲存於其上的非暫態儲存媒體，該媒體包含：用以產生相關於像素資料之多個區塊的旁側資訊的指令，該旁側資訊針對像素資料的每一區塊提供一視訊品質影響的一指示。
  16. 如申請專利範圍第15項所述之媒體，其中，該視訊品質影響的該指示鑑別由於該像素資料之相關區塊之一遺失的一估算視訊品質衰退。
  17. 如申請專利範圍第16項所述之媒體，其中該視訊品質衰 退之估算係藉由以下步驟決定：藉由該視訊編碼器針對在一編碼程序中的像素之該等多個區塊而估算隱蔽像素值；藉由像素的該等多個區塊之每一者的一遺失，計算將會造成的一失真；及基於包含有當下的圖像群組之像素的該等多個區塊的每一者之已計算失真，針對一當下的圖像群組計算一失真。
  18. 如申請專利範圍第15項所述之媒體，更包含基於針對像素資料之每一區塊在該旁側資訊中的一視訊品質影響的指示，指派多個優先次序層級的其中之一者予該等多數區塊的每一者。
  19. 如申請專利範圍第18項所述之媒體，其中相較於具有一較低視訊品質影像的像素資料的一區塊，具有一較高視訊品質影響的像素資料的一區塊會被指派為一較高的優先次序層級。
TW102104861A 2012-03-29 2013-02-07 用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統 TWI568238B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/433,821 US9661348B2 (en) 2012-03-29 2012-03-29 Method and system for generating side information at a video encoder to differentiate packet data

Publications (2)

Publication Number Publication Date
TW201347552A true TW201347552A (zh) 2013-11-16
TWI568238B TWI568238B (zh) 2017-01-21

Family

ID=49235011

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102104861A TWI568238B (zh) 2012-03-29 2013-02-07 用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統

Country Status (6)

Country Link
US (1) US9661348B2 (zh)
EP (1) EP2832097A4 (zh)
KR (1) KR101642212B1 (zh)
CN (1) CN104205833B (zh)
TW (1) TWI568238B (zh)
WO (1) WO2013147997A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9661348B2 (en) * 2012-03-29 2017-05-23 Intel Corporation Method and system for generating side information at a video encoder to differentiate packet data
CN103379360B (zh) * 2012-04-23 2015-05-27 华为技术有限公司 一种视频质量评估方法和装置
EP2936804A4 (en) * 2012-12-21 2016-06-01 Thomson Licensing VIDEO QUALITY MODEL, METHOD FOR DEVELOPING A VIDEO QUALITY MODEL AND METHOD FOR DETERMINING THE VIDEO QUALITY USING A VIDEO QUALITY MODEL

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5631920A (en) 1993-11-29 1997-05-20 Lexmark International, Inc. Spread spectrum clock generator
US6175259B1 (en) 1999-02-09 2001-01-16 Cypress Semiconductor Corp. Clock generator with programmable two-tone modulation for EMI reduction
JP2001189713A (ja) * 1999-12-28 2001-07-10 Toshiba Corp データ伝送装置およびデータ伝送方法
TW494636B (en) 2001-02-26 2002-07-11 Realtek Semiconductor Co Ltd Spread spectrum phase-locked loop circuit with adjustable spread bandwidth
US7639739B2 (en) * 2001-11-02 2009-12-29 The Regents Of The University Of California Technique to enable efficient adaptive streaming and transcoding of video and other signals
US7860005B2 (en) 2004-01-30 2010-12-28 Hewlett-Packard Development Company, L.P. Methods and systems that use information about a frame of video data to make a decision about sending the frame
US7042258B2 (en) 2004-04-29 2006-05-09 Agere Systems Inc. Signal generator with selectable mode control
US9154795B2 (en) * 2005-01-18 2015-10-06 Thomson Licensing Method and apparatus for estimating channel induced distortion
US20070030894A1 (en) 2005-08-03 2007-02-08 Nokia Corporation Method, device, and module for improved encoding mode control in video encoding
KR20080089633A (ko) 2006-01-09 2008-10-07 노키아 코포레이션 스케일러블 비디오 부호화에서 에러 회복 모드 결정
WO2007084475A2 (en) 2006-01-17 2007-07-26 Thomson Licensing Methods and apparatus for low complexity error resilient motion estimation and coding mode selection
US7894564B2 (en) 2006-11-07 2011-02-22 Via Technologies, Inc. Phase modulation method for spread spectrum clock generator
US20090103635A1 (en) * 2007-10-17 2009-04-23 Peshala Vishvajith Pahalawatta System and method of unequal error protection with hybrid arq/fec for video streaming over wireless local area networks
WO2010063881A1 (en) 2008-12-03 2010-06-10 Nokia Corporation Flexible interpolation filter structures for video coding
US9124874B2 (en) 2009-06-05 2015-09-01 Qualcomm Incorporated Encoding of three-dimensional conversion information with two-dimensional video sequence
US8477846B2 (en) 2009-10-07 2013-07-02 Ittiam Systems (P) Ltd. System and method for adaptive intra refresh rate setting in a video encoder
GB2481653A (en) 2010-07-02 2012-01-04 Xconnect Global Networks Ltd Telephone registry for routing a telephone call
EP2413604B1 (en) * 2010-07-30 2014-09-10 Deutsche Telekom AG Assessing the quality of a video signal during encoding or compressing of the video signal
EP2649801B1 (en) * 2010-12-10 2015-04-15 Deutsche Telekom AG Method and apparatus for objective video quality assessment based on continuous estimates of packet loss visibility
CN102346949B (zh) * 2011-07-18 2013-12-18 广东长实通信股份有限公司 一种通信设备安全服务系统
US9661348B2 (en) * 2012-03-29 2017-05-23 Intel Corporation Method and system for generating side information at a video encoder to differentiate packet data

Also Published As

Publication number Publication date
KR101642212B1 (ko) 2016-07-22
KR20140140052A (ko) 2014-12-08
TWI568238B (zh) 2017-01-21
EP2832097A4 (en) 2016-12-07
EP2832097A1 (en) 2015-02-04
US20130259136A1 (en) 2013-10-03
CN104205833B (zh) 2018-06-19
WO2013147997A1 (en) 2013-10-03
US9661348B2 (en) 2017-05-23
CN104205833A (zh) 2014-12-10

Similar Documents

Publication Publication Date Title
JP5100311B2 (ja) 動画像データ送信方法、通信装置、及びプログラム
JP5670551B2 (ja) ビデオストリームの品質を評価する方法と装置
US9723329B2 (en) Method and system for determining a quality value of a video stream
JP5758405B2 (ja) 映像品質推定技術
JP4644939B2 (ja) 動画像符号化装置および動画像符号化方法
JP5981561B2 (ja) シーンカットアーチファクトを考慮するビデオ品質評価
JP2020518174A (ja) ビデオフレーム符号化方法、端末、および記憶媒体
JP5164714B2 (ja) 送信装置及び方法、プログラム
CN111093083B (zh) 数据传输方法及装置
JP5178311B2 (ja) 送信装置、送信装置の制御方法、及びプログラム
GB2497915A (en) Estimating the quality of a video signal
CN110876066A (zh) 一种自适应前向纠错方法、装置、介质和设备
US20120106632A1 (en) Method and apparatus for error resilient long term referencing block refresh
TWI568238B (zh) 用於在一視訊編碼器產生旁側資訊以區分封包資料之方法及系統
CN112291566A (zh) H.264视频编码方法、装置、芯片、存储设备及电子设备
JP2014519735A (ja) ビットストリームレベルで動画品質を推定する方法及び装置
JP5902653B2 (ja) 動画配信システム、動画配信装置、端末装置、及びプログラム
WO2014198062A1 (en) Method and apparatus for video quality measurement
JP6061778B2 (ja) 映像品質評価装置、映像品質評価方法及びプログラム
Song et al. Improved H. 264 rate control over wireless channel

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees