TWI670964B - 用於減少於視訊之時間可適性層之假影之系統及方法 - Google Patents

用於減少於視訊之時間可適性層之假影之系統及方法 Download PDF

Info

Publication number
TWI670964B
TWI670964B TW106143320A TW106143320A TWI670964B TW I670964 B TWI670964 B TW I670964B TW 106143320 A TW106143320 A TW 106143320A TW 106143320 A TW106143320 A TW 106143320A TW I670964 B TWI670964 B TW I670964B
Authority
TW
Taiwan
Prior art keywords
frame
weight
video
equal
sequence
Prior art date
Application number
TW106143320A
Other languages
English (en)
Other versions
TW201826785A (zh
Inventor
強 亞瑟 費爾赫斯特
克里斯多夫 安德魯 塞蓋爾
賽欽 G 迪斯潘迪
Original Assignee
日商夏普股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商夏普股份有限公司 filed Critical 日商夏普股份有限公司
Publication of TW201826785A publication Critical patent/TW201826785A/zh
Application granted granted Critical
Publication of TWI670964B publication Critical patent/TWI670964B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一裝置可經組態以接收包含一序列圖框之視訊資料。該序列視訊圖框可具有一高圖框速率。一高圖框速率可包含120 Hz或更高之圖框速率。在一個實例中，該裝置可針對經包含於該序列圖框中之每隔一個圖框產生一修改之圖框。一修改之圖框可包含基於一當前圖框及一先前圖框之一加權平均值之一圖框。

Description

用於減少於視訊之時間可適性層之假影之系統及方法
本發明係關於視訊編碼，且更特定言之，本發明係關於時間可適性之技術。
數位視訊能力可併入至廣泛裝置內，包含數位電視機(包含所謂之智慧型電視機)、膝上型電腦或桌上型電腦、平板電腦、數位記錄裝置、數位媒體播放器、視訊遊戲裝置、蜂巢式電話(包含所謂之「智慧型」電話)、醫學成像裝置及類似者。可根據一視訊編碼標準來編碼數位視訊。視訊編碼標準之實例包含ISO/IEC MPEG-4 Visual及ITU-T H.264 (亦稱為ISO/IEC MPEG-4 AVC)及高效視訊編碼(HEVC)、ITU-T H.265及ISO/IEC 23008-2 MPEG-H。當前正發展用於HEVC之擴展及改良。例如，視訊編碼專家組(VCEG)將特定項目標示為關鍵技術領域(KTA)以用於進一步調查。回應於KTA調查而發展之技術可包含於未來視訊編碼標準(例如，「H.266」)中。視訊編碼標準可併入視訊壓縮技術。 視訊壓縮技術使得能夠減少儲存及傳輸視訊資料之資料需求。視訊壓縮技術可藉由利用一視訊序列中之固有冗餘減少資料需求。視訊壓縮技術可將一視訊序列再分為連續之更小部分(即，一視訊序列內之圖框群組、一圖框群組內之一圖框、一圖框內之圖塊、一圖塊內之編碼樹單元(或宏區塊)、一編碼樹單元內之編碼區塊、一編碼區塊內之編碼單元等等)。可使用空間技術(即，圖框內編碼)及/或時間技術(即，圖框間編碼)來產生待編碼之一編碼單元與一參考編碼單元之間之一差值。該差值可被稱為剩餘資料。剩餘資料可編碼為量化變換係數。語法元素(例如，參考圖像指數、運動向量及區塊向量)可係關於剩餘資料及一參考編碼單元。剩餘資料及語法元素可經熵編碼。 視訊編碼標準可支援時間可適性。即，視訊編碼標準可使得能夠以不同圖框(或圖像)速率(例如，60 Hz或120 Hz)解碼編碼之視訊資料之一位元流。例如，HEVC描述其中一序列編碼之視訊資料內之編碼之視訊圖框包含各自時間識別符使得可提取編碼之視訊圖框之一特定子集以用於解碼之一子位元流提取程序。提取之圖框可經解碼且用於提供具有比編碼之視訊資料原始序列之圖框速率更低之一圖框速率之輸出視訊。然而，具有一較低圖框速率之輸出視訊可包含基於運動之假影。
在一個實例中，一種修改視訊資料之方法，該方法包括：接收包含一序列圖框之視訊資料；針對包含於該序列圖框中之每N個圖框，藉由將一第一權值施加至該視訊序列中之一先前圖框且將一第二權值施加一N圖框且使得加權像素值相加而執行該視訊序列中之該N圖框及該先前圖框之一像素平均化操作；利用一對應修改之圖框代替包含於該序列圖框中之每N個圖框以產生一修改之序列圖框；且使用在一表示中呈現之一描述符用信號發送該第一權值及該第二權值，其中該描述符包含指示一2位元欄位(指示該第一權值之一值及該第二權值之一值)之一屬性值。 在一個實例中，一種重建修改之視訊資料之方法，該方法包括：接收包含一序列圖框之視訊資料，其中每N個圖框包含一修改之圖框；自指示一2位元欄位之一屬性值判定一第一權值之一值及一第二權值之一值，其中該屬性包含於一表示中呈現之一描述符中；針對包含於該序列圖框中之每N個圖框，藉由將該第一權值施加至一先前圖框之像素值、自該N圖框減去所得加權先前圖框、且使得所得差值除以該第二權值而產生一重建圖框；且利用一對應重建圖框代替包含於該序列圖框中之每N個圖框以產生一序列圖框。 在一個實例中，一種用於重建修改之視訊資料之裝置，該裝置包括一或多個處理器，該一或多個處理器經組態以：接收包含一序列圖框之視訊資料，其中每N個圖框包含一修改之圖框；自指示一2位元欄位之一屬性值判定一第一權值之一值及一第二權值之一值，其中該屬性包含於一表示中呈現之一描述符中；針對包含於該序列圖框中之每N個圖框，藉由將該第一權值施加至一先前圖框之像素值、自該N圖框減去所得加權先前圖框、且使得所得差值除以一第二權值而產生一重建圖框；且利用一對應重建圖框代替包含於該序列圖框中之每N個圖框以產生一序列圖框。
一般而言，本發明描述用於時間可適性之各種技術。特定言之，本發明描述用於修改具有一特定圖框速率(例如，120 Hz)之一序列視訊資料以改良一較低圖框速率(例如，60 Hz)提取之視訊資料序列之品質之技術。應注意，一圖框或圖像速率可指定為以赫茲(Hz)或每秒圖框(fps)為單位。可使用本文描述之技術來補償當自一較高圖框速率層提取一較低圖框速率子層時可在視訊中發生之基於運動之假影。應注意，儘管在一些實例中相對於ITU-T H.264 標準及 ITU-T H.265標準描述本發明之技術，但本發明之技術通常可應用於任何視訊編碼標準，包含當前正發展之視訊編碼標準(例如，「H.266」)。此外，應注意，文件以引用之方式併入本文中係為了描述目的且不應解譯為限制及/或產生相對於本文使用之術語之歧義。例如，在其中一個併入之參考提供一術語之不同於另一併入之參考之定義及/或不同於本文使用之術語之定義之情況中，應以廣義地包含各自定義之一方式及/或以包含替代例中之特定定義之各者之一方式解釋該術語。 在一個實例中，用於修改視訊資料之一裝置包括一或多個處理器，該一或多個處理器經組態以：接收包含一序列圖框之視訊資料；針對包含於該序列圖框中之每N個圖框產生一修改之圖框；利用一對應修改之圖框代替包含於該序列圖框中之每N個圖框以產生一修改之序列圖框；且輸出包含該修改之序列圖框之視訊資料。 在一個實例中，一非暫時性電腦可讀儲存媒體包括儲存於其上之指令，該等指令當執行時使得用於編碼視訊資料之一裝置之一或多個處理器：接收包含一序列圖框之視訊資料；針對包含於該序列圖框中之每N個圖框產生一修改之圖框；利用一對應修改之圖框代替包含於該序列圖框中之每N個圖框以產生一修改之序列圖框；且輸出包含該修改之序列圖框之視訊資料。 在一個實例中，用於修改視訊資料之一設備包括：用於接收包含一序列圖框之視訊資料之構件；針對包含於該序列圖框中之每N個圖框產生一修改之圖框之構件；利用一對應修改之圖框代替包含於該序列圖框中之每N個圖框以產生一修改之序列圖框之構件；及輸出包含該修改之序列圖框之視訊資料之構件。 在一個實例中，一非暫時性電腦可讀儲存媒體包括儲存於其上之指令，該等指令當執行時使得一裝置之一或多個處理器：接收包含一序列圖框之視訊資料，其中每N個圖框包含一修改之圖框；針對包含於該序列圖框中之每N個圖框產生一重建圖框；利用一對應重建圖框代替包含於該序列圖框中之每N個圖框以產生一序列圖框；且輸出包含該序列圖框之視訊資料。 在一個實例中，一設備包括：接收包含一序列圖框之視訊資料之構件，其中每N個圖框包含一修改之圖框；針對包含於該序列圖框中之每N個圖框產生一重建圖框之構件；利用一對應重建圖框代替包含於該序列圖框中之每N個圖框以產生一序列圖框之構件；及輸出包含該序列圖框之視訊資料之構件。 在附圖及以下描述中闡述一或多個實例之細節。將自描述及圖式且自申請專利範圍明白其他特徵、目的及優勢。 可根據一視訊編碼標準來編碼數位視訊。一個實例性視訊編碼標準包含在ITU-T，「High Efficiency Video Coding,」Recommendation ITU-T H.265 (10/2014)中描述之高效視訊編碼(HEVC)、ITU-T H.265及ISO/IEC 23008-2 MPEG-H，該文件之全文以引用之方式併入本文中。視訊內容通常包含視訊序列(包括一系列圖框)。一系列圖框亦可被稱為一圖像群組(GOP)。各視訊圖框或圖像可包含複數個圖塊，其中一圖塊包含複數個視訊區塊。一視訊區塊可定義為可預測編碼之最大像素值陣列(亦稱為樣本)。如本文所使用，術語視訊區塊可至少指可預測編碼之最大像素值陣列、其分部及/或對應結構。可根據一掃描圖案(例如，一光柵掃描)為視訊區塊定序。一視訊編碼器可對視訊區塊及其分部執行預測編碼。HEVC指定其中一圖像可分為相等尺寸之編碼樹單元(CTU)且各CTU可包含具有16 x 16、32 x 32或64 x 64亮度樣本之編碼樹區塊(CTB)之一CTU結構。在圖1中繪示將一圖像群組劃分為CTB之一實例。 如圖1中所繪示，一圖像群組(GOP)包含圖像Pic0至Pic3。在圖1中繪示之實例中，Pic3劃分為圖塊1及圖塊2，其中根據一左至右、上至下光柵掃描，圖塊1及圖塊2之各者包含連續CTU。在HEVC中，各圖塊可與一視訊編碼層(VCL)網路抽象層(NAL)單元(即，一VCL NAL單元)相關聯。在圖1繪示之實例中，圖塊1與NAL單元1相關聯且圖塊2與NAL單元2相關聯。HEVC支援多層擴展，包含格式範圍擴展(RExt)、可適性擴展(SHVC)及多視角擴展(MV-HEVC)。可適性擴展可包含時間可適性。在HEVC中，為了支援時間可適性，各VCL NAL單元可與一時間識別符(即，在HEVC中可變之一TemporalId)相關聯。HEVC定義其中將一位元流中之由一目標最高TemporalId及一目標層識別符列表判定不屬於一目標集合之NAL單元自該位元流移除之一子位元流提取程序，其中輸出之子位元流由該位元流中之屬於該目標集合之NAL單元組成。圖2係繪示一子位元流提取程序之一實例之一概念圖。 在圖2繪示之實例中，具有120 Hz之一圖框速率之視訊資料之一實例性編碼層包含Pic0至Pic7，其中Pic0、Pic2、Pic4及Pic6包含與為0之一TemporalId相關聯之VCL NAL單元(即圖塊)且其中Pic1、Pic3、Pic5及Pic7包含與為1之一TemporalId相關聯之VCL NAL單元(即圖塊)。在圖2繪示之實例中，將為0之一目標最高TemporalId提供至子位元流提取。即，在解碼之前提取Pic1、Pic3、Pic5及Pic7。依此方式，在解碼前將具有120 Hz之一圖框速率之視訊之一編碼之位元流減少至具有60 Hz視訊之一圖框速率之視訊之子位元流。一視訊解碼器可接收該子位元流且解碼及輸出具有60 Hz之一圖框速率之視訊。 通常，當以一特定圖框速率擷取一視訊序列時，基於該圖框速率選擇一快門間隔以提供具有可接受頻閃之清楚影像。即，無可感知之運動模糊或顫抖之影像。例如，以120 Hz擷取之視訊可經擷取具有一50% (即，180度)之快門間隔(即，針對一120 Hz圖框速率而言係1/240秒)。根據該視訊內之物體之運動，此快門間隔可提供具有可接收頻閃之清楚影像。在此實例中，若自擷取之視訊提取每隔一個圖框以產生具有一60 Hz圖框速率之視訊，則該快門間隔仍然為1/240秒且該60 Hz視訊將僅有效地具有一25% (90度)快門間隔。當該60 Hz視訊經解碼且輸出至一顯示器時，此有效快門間隔可引起基於運動之假影(例如，可見頻閃)。因此，HEVC中描述之子位元流提取程序以及其他習知時間可適性技術可不補償用於各可適性圖框速率之非理想快門間隔。如以下更詳細地描述，可使用本文描述之技術來補償一提取之較低圖框速率視訊之非理想快門間隔且藉此減少基於運動之假影。 應注意，針對以一特定圖框速率擷取之視訊而言，一快門間隔可經選擇以減少由子位元流提取產生之一視訊序列中之基於運動之假影，然而如以下所描述，此當未發生子位元流提取(例如，以最高可用圖框速率解碼且輸出視訊)時可導致視訊品質之一減少。例如，一視訊可以120 Hz之一圖框速率經擷取以具有一100% (即，360度)快門間隔(即，1/120秒)，以使得一60 Hz提取之視訊序列具有一有效50% (即，180度)快門間隔。在此情況中，該120 Hz視訊在較低圖框速率版本中可能無法獲得任何清楚度或清晰度。在另一實例中，一視訊可以一120 Hz經擷取而具有一75% (270度)快門間隔(1/160秒)。在此實例中，一60 Hz提取之視訊之有效快門角度將係37.5% (即，135度)。此實例表示視訊之兩個圖框速率版本之間之一折中且可稍微減輕一60 Hz視訊序列中之一頻閃效應及一120 Hz視訊序列中之任何過量運動模糊，但無一視訊序列將具有理想品質。如在下文中詳細描述，本文描述之技術可減輕使用子位元流提取產生之一較低圖框速率視訊序列中之運動假影(例如，頻閃效應)且同時保存一對應較高圖框速率視訊序列之品質。應注意，儘管相對於120 Hz及60 Hz之圖框速率描述本文描述之實例，但本文描述之技術通常可應用於各種可適性圖框速率(例如，24 Hz、30 Hz、40 Hz、48 Hz、60 Hz、120 Hz、240 Hz等等)。此外，一減少之圖框速率除了一1/2分率圖框速率外亦可包含其他分率圖框速率(1/4、1/3、2/3、3/4等等)。 圖3係繪示可經組態以根據本發明之一或多個技術處理且編碼(即，編碼及/或解碼)視訊資料之一系統之一實例之一方塊圖。系統100表示可根據本發明之一或多個技術減輕時間可適性視訊中之假影之一系統之一實例。如圖3中所繪示，系統100包含源裝置102、通信媒體110及目的地裝置120。在圖3繪示之實例中，源裝置102可包含經組態以處理及/或編碼視訊資料且將編碼之視訊資料傳輸至通信媒體110之任何裝置。目的地裝置120可包含經組態以經由通信媒體110接收編碼之視訊資料且解碼編碼之視訊資料之任何裝置。源裝置102及/或目的地裝置120可包含經配備用於有線及/或無線通信之運算裝置且可包含(例如)機上盒、數位視訊錄影機、電視機、桌上型電腦、膝上型電腦或平板電腦、遊戲機、行動裝置(包含(例如)「智慧型」電話、蜂巢式電話)、個人遊戲裝置及醫學成像裝置。 通信媒體110可包含無線及有線通信媒體之任何組合及/或儲存裝置。通信媒體110可包含共軸纜線、光纖纜線、雙絞線纜線、無線發射器及接收器、路由器、開關、中繼器、基地台或可用於促進各種裝置及點之間之通信之任何其他設備。通信媒體110可包含一或多個網路。例如，通信媒體110可包含經組態以使得能夠存取全球資訊網之一網路，例如網際網路。一網路可根據一或多個電信協定之一組合操作。電信協定可包含專屬態樣及/或可包含標準電信協定。標準電信協定之實例包含數位視訊廣播(DVB)標準、包含當前正發展之ATSC 3.0套標準之所謂先進電視系統委員會(ATSC)標準、整合服務數位廣播(ISDB)標準、纜線服務介面規格上資料(DOCSIS)標準、全球系統行動通信(GSM)標準、分碼多工存取(CDMA)標準、第三代合作夥伴計劃(3GPP)標準、歐洲電信標準協會(ETSI)標準、網際網路協定(IP)標準、無線應用協定(WAP)標準及IEEE標準。 儲存裝置可包含能夠儲存資料之任何類型之裝置或儲存媒體。一儲存媒體可包含有形或非暫時性電腦可讀媒體。一電腦可讀媒體可包含光碟、快閃記憶體、磁性記憶體或任何其他適合之數位儲存媒體。在一些實例中，一記憶體裝置或其之部分可描述為非揮發性記憶體，且在其他實例中記憶體裝置之部分可描述為揮發性記憶體。揮發性記憶體之實例可包含隨機存取記憶體(RAM)、動態隨機存取記憶體(DRAM)及靜態隨機存取記憶體(SRAM)。非揮發性記憶體之實例可包含磁性硬碟、光碟、軟碟、快閃記憶體或電可程式化記憶體(EPROM)或電可擦除及可程式化(EEPROM)記憶體之形式。(若干)儲存裝置可包含記憶體卡(例如，一安全數位(SD)記憶體卡)、內部/外部硬碟機及/或內部/外部固態磁碟機。資料可根據一界定檔案格式而儲存於一儲存裝置上，諸如(例如)由國際標準組織(ISO)界定之一標準媒體檔案格式。 再次參考圖3，源裝置102包含視訊源104、視訊處理單元105、視訊編碼器106及介面108。視訊源104可包含經組態以擷取及/或儲存視訊資料之任何裝置。例如，視訊源104可包含一視訊相機及可操作地耦合至該視訊相機之一儲存裝置。在一個實例中，視訊源104可包含能夠以本文描述之圖框速率之任何者擷取視訊且具有0至100%之一快門間隔之一視訊擷取裝置。視訊處理單元105可經組態以自視訊源接收視訊資料且將接收之視訊資料轉換為由視訊編碼器106支援之一格式(例如，可經編碼之一格式)。此外，視訊處理單元105可經組態以執行處理技術而最佳化視訊編碼。在一些實例中，此等處理技術可被稱為預先處理技術。 在一個實例中，視訊處理單元105可經組態以修改具有一特定圖框速率之一序列視訊資料而改良一較低圖框速率提取之視訊資料序列之品質。如以上所描述，習知時間可適性技術可不能針對各可適性圖框速率補償非理想快門間隔。圖4係繪示根據本發明之一或多個技術處理視訊資料之一實例之一概念圖。視訊處理單元105可經組態以根據相對於圖4描述之技術處理視訊資料。在一個實例中，相對於圖4描述之處理技術可被稱為多快門處理技術。在圖4繪示之實例中，視訊處理單元105自一視訊源(例如，視訊源104)接收視訊且將處理視訊輸出至一視訊編碼器(例如，視訊編碼器106)。 在圖4繪示之實例中，自一視訊源接收之源視訊具有一全圖框速率且由視訊處理單元105輸出之處理視訊保留該全圖框速率。如以上所描述，一視訊圖框速率可包含24 Hz、30 Hz、40 Hz、48 Hz、60 Hz、120 Hz、240 Hz等等之圖框速率。在圖4繪示之實例中，視訊處理包含利用一修改之圖框代替一源視訊序列中之每隔一個圖框。如圖4中所繪示，處理視訊甚至包含源視訊中之圖框Pic0、Pic2、Pic4及Pic6及修改之圖框Pic1*、Pic3*、Pic5*及Pic7*。應注意在一個實例中，可根據本文描述之技術編碼Pic0、Pic2、Pic4及Pic6且其等重建版本可包含於處理視訊中。此當由一視訊解碼器(例如，視訊解碼器124)重建圖框Pic0、Pic2、Pic4及Pic6時可最小化雜訊。 在圖4繪示之實例中，一修改之圖框係一原始視訊圖框及一先前圖框之像素值之一加權和。即： PicN * = (w2 x PicN ) + (w1 x PicN-1 )， 其中w1 及w2 係施加至一各自圖框中之像素值之各者之加權因子(即，權值)； PicN *係修改之圖框； PicN 係源視訊序列中之原始圖框；且 PicN-1 係源視訊序列中之先前圖框。 在一個實例中，w1及w2之值可自0.0至1.0的範圍。在一個實例中，w1之值可自0.0至0.5的範圍且w2之值可自0.5至1.0的範圍。在一個實例中，w1及w2之和可等於1.0 (例如，w2 = 1-w1)。在一個實例中，w1之值可等於0.25且w2之值可等於0.75。在一個實例中，w1及w2可係相等的(例如，w1 = 0.5且w2 = 0.5)。應注意在一些實例中，w1及w2可隨著一視訊圖框之區域而變化。例如，w1及w2在一圖框之一邊緣區域及在一圖框之一中心區域中可具有不同值。在一個實例中，像素值之一加權和可包含各自像素值之各分量(例如，Y、Cb、Cr)之一加權和。應注意，可將像素值之一加權和施加至各種像素表示，例如具有4:4:4取樣之RGB、具有4:4:4取樣之YCbCr、具有4:2:0取樣之YCbCr。在一個實例中，像素值之一加權和可包含像素值之亮度分量之一加權和。例如，針對具有4:2:0取樣之YcbCr，可僅將一加權和施加至亮度分量。在其中各像素包含一10位元亮度分量值且w1及w2等於0.5之情況中，一756亮度分量值及一892亮度分量值之平均化之結果將係824。如下文進一步詳細描述，根據一或多個技術可將加權因子w1及w2之值傳遞至一視訊解碼裝置以在一視訊解碼裝置處重建源視訊。此外，可用信號發送相對於像素表示之資訊，包含與其相關聯之特定加權技術。 如圖4中所進一步繪示，在處理之視訊中，Pic1*、Pic3*、Pic5*及Pic7*係與一第一時間子層(例如，一基礎層)相關聯，且Pic0、Pic2、Pic4及Pic6係與一第二時間層(例如，一增強層)相關聯。即，在HEVC之實例中，針對Pic1*、Pic3*、Pic5*及Pic7*，TemporalId等於0，且針對Pic0、Pic2、Pic4及Pic6，TemporalId等於1。應注意，在其他實例中，與Pic0、Pic2、Pic4及Pic6相關聯之一時間識別符可包含比與Pic1*、Pic3*、Pic5*及Pic7*相關聯之時間識別符更大的任何時間識別符。如以上所描述且在下文中相對於圖6進一步詳細描述，可根據一子位元流提取程序，在解碼之前提取Pic1*、Pic3*、Pic5*及Pic7*。依此方式，視訊處理單元105表示一裝置之一實例，該裝置經組態以：接收包含一序列圖框之視訊資料；針對經包含於該序列圖框中之每N個圖框產生一修改之圖框；利用一對應修改之圖框來代替經包含於該序列圖框中之每N個圖框，以產生一修改之序列圖框；且輸出包含該修改之序列圖框之視訊資料。 再次參考圖3，視訊編碼器106可包含經組態以接收視訊資料且產生表示該視訊資料之一適合位元流的任何裝置。一適合位元流可係指一視訊解碼器可接收且自其重現視訊資料之一位元流。可根據一視訊編碼標準來界定一適合位元流之態樣，諸如(例如)在Rec. ITU-T H.265 v2 (10/2014)及/或其擴展中描述之ITU-T H.265 (HEVC)。此外，可根據當前正發展之一視訊編碼標準來界定一適合位元流。當產生一適合位元流時，視訊編碼器106可壓縮視訊資料。壓縮可係有損失(可辨別或不可辨別)或無損失的。 如以上所描述，在HEVC中，各CTU可包含具有16 x 16、32 x 32或64 x 64亮度樣本之CTB。一CTU之CTB可根據一對應四叉樹資料結構被劃分為編碼區塊(CB)。根據HEVC，一個亮度CB以及兩個對應色度CB及相關聯之語法元素被稱為一編碼單元(CU)。一CU係與界定CU之一或多個預測單元(PU)之一預測單元(PU)結構相關聯，其中一PU係與對應參考樣本相關聯。例如，一CU之一PU可係根據一框內預測模式編碼之樣本之一陣列。特定框內預測模式資料(例如，框內預測語法元素)可使得PU與對應參考樣本相關聯。在HEVC中，一PU可包含其中針對內圖像預測支援方形PB且針對框間圖像預測支援矩形PB的亮度及色度預測區塊(PB)。經包含於一PU及相關聯之參考樣本中的樣本值之間的差異可被稱為剩餘資料。 剩餘資料可包含對應於視訊資料之各分量(例如，亮度(Y)及色度(Cb及Cr))的各自差值陣列。剩餘資料可係位於像素域中。可將一變換(諸如，一離散餘弦變換(DCT)、一離散正弦變換(DST)、一整數變換、一小波變換、重疊變換或一概念類似變換)應用於像素差值，以產生變換係數。應注意在HEVC中，PU可進一步再分為變換單元(TU)。即，一像素差值陣列可為產生變換係數之目的而經再分割(例如，可將四個8 x 8變換應用於剩餘值之一16 x 16陣列)，此等分部可被稱為變換區塊(TB)。變換係數可根據一量化參數(QP)被量化。量化之變換係數可根據一熵編碼技術(例如，內容自適應可變長度編碼(CAVLC)、內容自適應二進制算法編碼(CABAC)或概率區間劃分熵編碼(PIPE))而經熵編碼。此外，語法元素(諸如，界定一預測模式之一語法元素)亦可經熵編碼。熵編碼量化變換係數及對應熵編碼語法元素可形成可用於重現視訊資料之一適合位元流。 如以上所描述，預測語法元素可使得一視訊區塊及其PU與對應參考樣本相關聯。例如，針對框內預測編碼而言，一框內預測模式可指定參考樣本之位置。在HEVC中，一亮度分量之可能之框內預測模式包含一平坦預測模式(predMode: 0)、一DC預測(predMode: 1)及33角度預測模式(predMode: 2-34)。一或多個語法元素可識別35個框內預測模式之一者。針對框間預測編碼而言，一運動向量(MV)識別除待編碼之一視訊區塊之圖像外之一圖像中之參考樣本且藉此利用視訊中之時間冗餘。例如，可自位於一先前編碼之圖框中之一參考區塊預測一當前視訊區塊且可使用一運動向量來指示該參考區塊之位置。一運動向量及相關聯之資料可描述(例如)該運動向量之一水平分量、該運動向量之一垂直分量、該運動向量之一解析度(例如，四分之一像素精確度)、一預測方向及/或一參考圖像指數值。應注意，一參考圖像指數值可參考另一時間層中之一圖像。例如，一120 Hz圖框速率增強子層中之一圖框可參考一60 Hz圖框速率基礎層中之一圖框。此外，一編碼標準(諸如(例如) HEVC)可支援運動向量預測。運動向量預測使得能夠使用相鄰區塊之運動向量指定一運動向量。 圖5係繪示可實施用於編碼本文描述之視訊資料之技術之一視訊編碼器之一實例之一方塊圖。應注意，儘管實例性視訊編碼器400繪示為具有不同功能區塊，但此一繪示係為描述目的且不將視訊編碼器400及/或其之子組件限制為一特定硬體或軟體架構。可使用硬體、韌體及/或軟體實施方案之任何組合實現視訊編碼器400之功能。 視訊編碼器400可執行視訊圖塊內之視訊區塊之框內預測編碼及框間預測編碼，且因而在一些實例中可被稱為一混合視訊編碼器。在圖5繪示之實例中，視訊編碼器400接收已根據一編碼結構分割之源視訊區塊。例如，源視訊資料可包含宏區塊、CTU、CTU之分部及/或另一等效編碼單元。在一些實例中，視訊編碼器400可經組態以執行源視訊區塊之額外再分割。應注意，本文描述之技術通常可應用於視訊編碼，不論在編碼之前及/或編碼期間係如何劃分源視訊資料的。在圖5繪示之實例中，視訊編碼器400包含加法器402、變換係數產生器404、係數量化單元406、逆量化/變換處理單元408、加法器410、圖框內預測處理單元412、運動補償單元414、運動估計單元416、解塊濾波單元418、樣本自適應偏移(SAO)濾波單元419及熵編碼單元420。如圖5中所繪示，視訊編碼器400接收源視訊區塊且輸出一位元流。 在圖5繪示之實例中，視訊編碼器400可藉由自一源視訊區塊減去一預測視訊區塊而產生剩餘資料。在下文詳細描述一預測視訊區塊之選擇。加法器402表示經組態以執行此減法運算之一組件。在一個實例中，在像素域中發生視訊區塊之減法。變換係數產生器404將一變換(諸如，一離散餘弦變換(DCT)、一離散正弦變換(DST)或一概念類似變換)應用於剩餘區塊或其之分部(例如，可將四個8 x 8變換應用於剩餘值之一16 x 16陣列)以產生一組剩餘變換係數。變換係數產生器404可將剩餘變換係數輸出至係數量化單元406。 係數量化單元406可經組態以執行變換係數之量化。該量化程序可減少與該等係數之部分或全部相關聯之位元深度。量化程度可改變編碼之視訊資料之位元失真(即，位元率與視訊品質)。可藉由調整一量化參數(QP)而修改該量化程度。在HEVC中，可針對各CU更新量化參數且可針對亮度(Y)及色度(Cb及Cr)分量之各者導出一量化參數。將量化變換係數輸出至逆量化/變換處理單元408。逆量化/變換處理單元408可經組態以應用一逆量化及一逆變換產生重建之剩餘資料。如圖5中所繪示，在加法器410中，可將重建剩餘資料加入至一預測視訊區塊。依此方式，可重建一編碼之視訊區塊且可使用該所得重建視訊區塊評估一給定預測、變換及/或量化之編碼品質。視訊編碼器400可經組態以執行多個編碼過程(例如，執行編碼且同時改變一預測、變換參數及量化參數之一或多者)。可基於對重建視訊區塊之評估來最佳化一位元流之速率失真或其他系統參數。此外，重建視訊區塊可經儲存且用作為預測後續區塊之參考。 如以上所描述，可使用一內預測編碼一視訊區塊。圖框內預測處理單元412可經組態以選擇用於待編碼之一視訊區塊之一圖框內預測。圖框內預測處理單元412可經組態以評估一圖框且判定用於編碼一當前區塊之一內預測模式。如以上所描述，可能之內預測模式可包含一平坦預測模式、一DC預測模式及角度預測模式。此外，應注意在一些實例中，可自一亮度預測模式之一內預測模式推斷一色度分量之一預測模式。圖框內預測處理單元412可在執行一或多個編碼過程後選擇一圖框內預測模式。此外，在一個實例中，圖框內預測處理單元412可基於一速率失真分析選擇一預測模式。 再次參考圖5，運動補償單元414及運動估計單元416可經組態以執行一當前視訊區塊之框間預測編碼。應注意，儘管繪示為係不同的，但運動補償單元414及運動估計單元416可經高度整合。運動估計單元416可經組態以接收源視訊區塊且計算一視訊區塊之PU之一運動向量。一運動向量可指示相對於一參考圖框內之一預測區塊之一當前視訊圖框內之一視訊區塊之一PU之位移。框間預測編碼可使用一或多個參考圖框。此外，運動預測可為單向預測(使用一個運動向量)或雙向預測(使用兩個運動向量)。運動估計單元416可經組態以藉由計算由(例如)絕對差之和(SAD)、平方差之和(SSD)或其他差度量判定之一像素差而選擇一預測區塊。 如以上所描述，可根據運動向量預測判定且指定一運動向量。運動估計單元416可經組態以執行如以上描述之運動向量預測以及其他所謂之高級運動向量預測(AMVP)。例如，運動估計單元416可經組態以執行時間運動向量預測(TMVP)、支援「合併」模式、且支援「跳躍」及「引導」運動推斷。例如，時間運動向量預測(TMVP)可包含自一先前圖框繼承一運動向量。 如圖5中所繪示，運動估計單元416可將一計算之運動向量之運動預測資料輸出至運動補償單元414及熵編碼單元420。運動補償單元414可經組態以接收運動預測資料且使用該運動預測資料產生一預測區塊。例如，當自當前視訊區塊之PU之運動估計單元416接收一運動向量後，運動補償單元414即可將對應預測視訊區塊定位於一圖框緩衝器(圖5中未展示)內。應注意在一些實例中，運動估計單元416執行相對於亮度分量之運動估計，且運動補償單元414將基於亮度分量計算之運動向量用於色度分量及亮度分量兩者。應注意，運動補償單元414可進一步經組態以將一或多個內插濾波器應用於一重建剩餘區塊而計算在運動估計中使用之分段整數像素值。 如圖5中所繪示，運動補償單元414及運動估計單元416可經由解塊濾波單元418及SAO濾波單元419接收重建之視訊區塊。解塊濾波單元418可經組態以執行解塊技術。解塊係指使得重建視訊區塊之邊界光滑(例如，使得一觀看者更少感知邊界)之程序。SAO濾波單元419可經組態以執行SAO濾波。SAO濾波係可用於藉由將一偏移加入至重建視訊資料而改良重建之一非線性幅值映射。通常在應用解塊後應用SAO濾波。 再次參考圖5，熵編碼單元420接收量化變換係數及預測語法資料(即，內預測資料及運動預測資料)。應注意在一些實例中，係數量化單元406可執行包含量化變換係數之一矩陣之一掃描(在將該等係數輸出至熵編碼單元420之前)。在其他實例中，熵編碼單元420可執行一掃描。熵編碼單元420可經組態以根據本文描述之技術之一或多者執行熵編碼。熵編碼單元420可經組態以輸出一適合位元流，即一視訊解碼器可接收且自其重現視訊資料之一位元流。 如以上所描述，可根據一熵編碼技術對語法元素進行熵編碼。為了將CABAC編碼應用於一語法元素，一視訊編碼器可執行一語法元素之二進制化。二進制化係指將一語法值轉換為一系列一或多個位元之程序。此等位元可稱為「頻格」。例如，二進制化可包含使用一8位元固定長度技術將整數值5表示為00000101或使用一個一元編碼技術將整數值5表示為11110。二進制化係一無損失程序且可包含以下編碼技術之一者或一組合：固定長度編碼、一元編碼、截短一元編碼、截短Rice編碼、Golomb編碼、第k階指數Golomb編碼及Golomb-Rice編碼。如本文所使用，術語固定長度編碼、一元編碼、截短一元編碼、截短Rice編碼、Golomb編碼、第k階指數Golomb編碼及Golomb-Rice編碼之各者可係指此等技術之一般實施方案及/或此等編碼技術之更特定實施方案。例如，具體言之可根據一視訊編碼標準(例如，HEVC)界定一Golomb-Rice編碼實施方案。在一些實例中，通常可將本文描述之技術應用於使用任何二進制化編碼技術產生之頻格值。在二進制化後，一CABAC熵編碼器可選擇一內文模型。針對一特定頻格而言，可自與該頻格相關聯之一組可用內文模型選擇一內文模型。應注意在HEVC中，可基於一先前頻格及/或語法元素選擇一內文模型。一內文模型可識別一頻格係一特定值之概率。例如，一內文模型可指示編碼一0值頻格之一0.7概率及編碼一1值頻格之一0.3概率。在選擇一可用內文模型後，一CABAC熵編碼器可基於該識別之內文模型而用算術方法編碼一頻格。 再次參考圖3，介面108可包含經組態以接收一適合視訊位元流且將該適合視訊位元流傳輸至一通信媒體及/或儲存該適合視訊位元流之任何裝置。此外，介面108可包含經組態以傳輸及/或儲存與該適合視訊位元流相關聯之資料之任何裝置。介面108可包含一網路介面卡(諸如一乙太網路卡)且可包含一光學收發器、一射頻收發器或可發送及/或接收資訊之任何其他類型之裝置。此外，介面108可包含可使得一適合視訊位元流及與一適合視訊位元流相關聯之資料能夠儲存於一儲存裝置上之一電腦系統介面。例如，介面108可包含支援PCI及PCIe匯流排協定、周邊匯流排協定、通用串列匯流排(USB)協定、I2C之一晶片組或可用於互連同級裝置之任何其他邏輯及實體結構。 如圖3中所繪示，目的地裝置120包含介面122、視訊解碼器124、視訊處理單元125及顯示器126。介面122可包含經組態以自一通信媒體接收一適合視訊位元流及相關聯資料之任何裝置。介面122可包含一網路介面卡(諸如一乙太網路卡)且可包含一光學收發器、一射頻收發器或可接收及/或發送資訊之任何其他類型之裝置。介面122可包含使得能夠自一儲存裝置取回一適合視訊位元流之一電腦系統介面。例如，介面122可包含支援PCI及PCIe匯流排協定、周邊匯流排協定、通用串列匯流排(USB)協定、I2C之一晶片組或可用於互連同級裝置之任何其他邏輯及實體結構。視訊解碼器124可包含經組態以接收一適合位元流及/或其之可接受變動且自其重現視訊資料之任何裝置。 如以上所描述，HEVC定義其中在解碼之前將一位元流中不屬於一目標集合之NAL單元自該位元流移除之一子位元流提取程序。在一個實例中，視訊解碼器124可經組態以在解碼一位元流中之圖框之前移除該等圖框。圖6係繪示根據本發明之一或多個技術之一子位元流提取程序之一實例之一概念圖。在圖6繪示之實例中，視訊解碼器124自一介面(例如，介面122)接收編碼之視訊資料。在圖6繪示之實例中，視訊資料包含相對於圖4描述之已由一視訊編碼器編碼之處理視訊。如圖6中所繪示，視訊資料之一實例性編碼層包含與一第一時間子層(例如，TemporalId等於0)相關聯之Pic1*、Pic3*、Pic5*及Pic7*且Pic0、Pic2、Pic4及Pic6與一第二時間層(例如，TemporalId等於1)相關聯。在圖6繪示之實例中，將為0之一目標最高TemporalId提供至子位元流提取且在解碼之前提取Pic1*、Pic3*、Pic5*及Pic7*。依此方式，具有一全圖框速率(例如，240 Hz、120 Hz、60 Hz等等)之一編碼之視訊位元流在解碼前減少至具有一半圖框速率(例如，120 Hz、60 Hz、30 Hz等等)之視訊之子位元流。視訊解碼器124解碼提取之編碼視訊且將該解碼視訊輸出至一視訊處理單元(例如，視訊處理單元125)。應注意在其他實例中，可出現其他分率圖框速率減少(例如，1/4、1/3、2/3、3/4等等)。 如以上所描述，一子位元流提取程序可不補償各可適性圖框速率之非理想快門間隔。然而，在圖6繪示之其中提取之圖框包含已根據本文描述之技術之一或多者(例如，以上相對於圖4描述之技術)處理之視訊資料之實例中，在一解碼之視訊序列中可減少基於運動之假影。此外，如以下詳細描述，在其中視訊解碼器124不執行子位元流提取之情況中，視訊處理單元125可經組態以重建以上相對於圖4描述之源視訊。如以下所描述，可用信號發送視訊資料是否包含處理視訊之一指示。依此方式，視訊解碼器124可基於與一第一時間子層相關聯之視訊資料之一編碼層是否包含修改之圖框而判定是否執行子位元流提取。例如，視訊解碼器124可判定包含修改圖框之一第一時間子層提供一足夠品質等級(例如，相較於不包含修改圖框之一第一時間子層)且在此情況中可執行子位元流提取。此外，在一些情況中，若一第一時間子層包含修改圖框、若一視訊解碼器不能夠以一有效方式重建源視訊、能夠重建源視訊或若一顯示裝置不能夠以較高圖框速率顯示視訊內容，則該視訊解碼器可執行子位元流提取。 再次參考圖3，如以上所描述，視訊解碼器124經組態以解碼視訊資料之一合適位元流(包含子位元流)。圖7係繪示可經組態以根據本發明之一或多個技術解碼視訊資料之一視訊解碼器之一實例之一方塊圖。視訊解碼器500可經組態以執行框內預測解碼及框間預測解碼，且因而可被稱為一混合解碼器。在圖7中繪示之實例中，視訊解碼器500包含一熵解碼單元502、逆量化單元504、逆變換處理單元506、圖框內預測處理單元508、運動補償單元510、加法器512、解塊濾波單元514、SAO濾波單元515及參考緩衝器516。視訊解碼器500可經組態而以與一視訊編碼標準一致之方式解碼視訊資料。視訊解碼器500可經組態以接收包含在其中用信號發送之變量之一位元流。應注意，儘管實例性視訊解碼器500繪示為具有不同功能區塊，但此一繪示係為描述目的且不將視訊解碼器500及/或其之子組件限制於一特定硬體或軟體架構。可使用硬體、韌體及/或軟體實施方案之任何組合實現視訊解碼器500之功能。 如圖5中所繪示，熵解碼單元502接收一熵編碼位元流。熵解碼單元502可經組態以根據與一熵編碼程序相反之一程序自位元流解碼量化之語法元素及量化係數。熵解碼單元502可經組態以根據以上描述之熵編碼技術之任何者執行熵解碼。熵解碼單元502可以與一視訊編碼標準一致之一方式解析一編碼之位元流。如圖5中所繪示，逆量化單元504自熵解碼單元502接收量化變換係數。逆量化單元504可經組態以應用一逆量化。逆變換處理單元506可經組態以執行一逆變換而產生重建剩餘資料。分別由逆量化單元504及逆變換處理單元506執行之技術可類似於由以上描述之逆量化/變換處理單元408執行之技術。如圖5中所繪示，可將重建剩餘資料提供至加法器512。加法器512可將重建剩餘資料加入至一預測視訊區塊且產生重建視訊資料。可根據一預測視訊技術(即，圖框內預測及圖框間預測)判定一預測視訊區塊。 圖框內預測處理單元508可經組態以接收圖框內預測語法元素，且自參考緩衝器516接收一預測視訊區塊。參考緩衝器516可包含經組態以儲存視訊資料之一或多個圖框之一記憶體裝置。圖框內預測語法元素可識別一框內預測模式，諸如以上描述之框內預測模式。運動補償單元510可接收框間預測語法元素且產生運動向量，以識別經儲存於參考緩衝器516中之一或多個參考圖框中之一預測區塊。運動補償單元510可產生可能基於內插濾波器執行內插之運動補償區塊。用於具有子像素精確度之運動估計之內插濾波器的識別符可係包含於語法元素中。運動補償單元510可使用內插濾波器來計算一參考區塊之子整數像素之內插值。解塊濾波單元514可經組態以對重建視訊資料執行濾波。例如，解塊濾波單元514可經組態以執行如以上相對於解塊濾波單元418所描述之解塊。SAO濾波單元515可經組態以對重建視訊資料執行濾波。例如，SAO濾波單元515可經組態以執行如以上相對於SAO濾波單元419描述之SAO濾波。如圖7中所繪示，可由視訊解碼器500輸出一視訊區塊。依此方式，視訊解碼器500可經組態以產生重建視訊資料。 再次參考圖3，視訊處理單元125可經組態以接收視訊資料，且將接收之視訊資料轉換為由顯示器支援之一格式(例如，可生成之一格式)。顯示器126可包含經組態以顯示視訊資料之任何裝置。顯示器126可包括各種顯示裝置之一者，諸如一液晶顯示器(LCD)、一電漿顯示器、一有機發光二極體(OLED)顯示器，或另一類型之顯示器。顯示器126可包含一高解析度顯示器或一超高解析度顯示器。在一個實例中，顯示器126可包含能夠以240 Hz或更高之一速率生成視訊資料之一視訊生成裝置。此外，在一些實例中，顯示器126可包含能夠以小於240 Hz (例如，60 Hz或120 Hz)之一速率生成視訊資料之一視訊生成裝置。視訊處理單元125可進一步經組態以根據本文描述之一或多個技術來重建源視訊。圖8係繪示根據本發明之一或多個技術來處理視訊資料之一實例之一概念圖。視訊處理單元125可經組態以根據相對於圖8描述之技術來處理視訊資料。在圖8繪示之實例中，視訊處理單元125自一視訊解碼器(例如，視訊解碼器124)接收視訊，且將經處理之視訊輸出至一顯示器(例如，顯示器126)。應注意，該視訊處理單元可將處理視訊資料輸出至除顯示器126外之裝置(例如，儲存裝置、接收裝置等等)。 在圖8繪示之實例中，解碼之視訊資料具有一全圖框速率，且由視訊處理單元125輸出之處理視訊保留該全圖框速率。在圖8繪示之實例中，視訊處理包含對一解碼之視訊序列中之每隔一個圖框執行一逆修改操作。如圖8中所繪示，解碼之視訊甚至包含圖框Pic0、Pic2、Pic4及Pic6，及修改圖框Pic1*、Pic3*、Pic5*及Pic7*。應注意，在圖8繪示之實例中，未對Pic0、Pic2、Pic4及Pic6執行一逆修改。在一些實例中，是否執行一逆修改之一判定可係基於一時間識別符值。在圖8繪示之實例中，一修改圖框係一原始視訊圖框及一先前圖框之像素值之一加權和。即，在圖8繪示之實例中，解碼視訊包含以上相對於圖4描述之一修改圖框。依此方式，可藉由對修改圖框之各者執行一逆修改操作來重建源視訊。即， PicN = ((PicN *) - (w1 x PicN-1 ))/w2 , 其中w1 及w2 係經施加至一各自圖框中之像素值之各者的加權因子； PicN *係修改之圖框； PicN 係源視訊序列中之原始圖框；且 PicN-1 係解碼之視訊序列中之先前圖框。 應注意，在其中(例如)歸因於使用一有限位元深度執行編碼而不存在量化雜訊且無編碼雜訊之一最佳情況中，可完全恢復原始源圖框。應注意在一些實例中，一逆修改操作可產生一原始源圖框之一可接受變動。例如，如以下進一步詳細描述，加權因子w1及w2之值可傳遞至一視訊解碼裝置。然而，在一些情況中，w1及w2可不能供視訊處理單元125使用。在此等情況中，視訊處理單元125可經組態以使用w1及w2之預設值及/或基於解碼之視訊資料之性質導出權值。以一類似方式，視訊處理單元105可經組態以基於視訊資料之性質導出權值。應注意在一些實例中，可不存在權值之一清楚界定之關係(例如，可獨立地基於視訊性質導出權值)。依此方式，視訊處理單元125表示經組態以接收包含一序列圖框之視訊資料之一裝置之一實例，其中每N個圖框包含一修改圖框，針對包含於該序列圖框中之每N個圖框產生一重建圖框、利用一對應重建圖框代替包含於該序列圖框中之每N個圖框以產生一序列圖框、且輸出包含該序列圖框之視訊資料。 在一個實例中，可使用在一視訊編碼標準中界定之一機制將w1及w2傳遞至一視訊解碼裝置。例如，HEVC包含可用於用信號發送色彩空間、動態範圍及其他視訊資料性質之視訊可用性資訊(VUI)。在HEVC中，VUI及其他資訊可經包含作為一補充增強資訊(SEI)訊息之一部分。在一個實例中，可使用包含視訊可用性資訊及包含於未來視訊編碼標準中之類似結構之視訊可用性資訊傳遞w1及w2。此外，HEVC界定一圖塊標頭、一序列參數集(SPS)、一圖像參數集(PPS)及一視訊參數集(VPS)結構。在一個實例中，可在一圖塊標頭、一序列參數集(SPS)、一圖像參數集(PPS)及一視訊參數集(VPS)結構或包含未來視訊編碼標準中之類似結構之任何其他適合位置中用信號發送w1及w2。 再次參考圖3，如以上所描述，通信媒體110可根據當前正發展之所謂ATSC 3.0套標準操作。在此實例中，源裝置102可包含一服務分佈引擎且目的地裝置120可包含為一接收器裝置之一部分。此外，在此實例中，源裝置102、通信媒體110及目的地裝置120可基於包含一或多個抽象層之一模型而操作，其中根據特定結構(例如，封包結構、調變方案等等)表示各抽象層處之資料。包含界定之抽象層之一模型之一實例係在圖9中繪示之所謂開放系統互連(OSI)模型。該OSI模型界定一7層堆疊模型，包含一應用層、一表示層、一對話層、一傳輸層、一網路層、一資料鏈接層及一實體層。一實體層通常可係指電信號在其上形成數位資料之一層。例如，一實體層可係指界定調變之射頻(RF)符號係如何形成數位資料之一圖框之一層。亦可被稱為鏈接層之一資料鏈接層可係指在一發送側處之實體層處理之前且在一接收側處之實體層接收之後使用之一提取。應注意，一發送側及一接收側係邏輯角色且一單一裝置在一個例項中可充當為一發送側且在另一例項中可充當為一接收側。一應用層、一表示層、一對話層、一傳輸層及一網路層之各者可界定資料係如何經傳遞以由一使用者應用使用的。 2015年5月6日The ATSC Candidate Standard: System Discovery and Signaling (Doc. A/321 Part 1), Doc. S32-231r4 (在下文中稱為「A/321」)(該案之全文以引用之方式併入本文中)描述一ATSC 3.0單向實體層實施方案之特定提出之態樣。此外，ATSC 3.0單向實體層實施方案之一對應鏈接層處於當前正發展中。提出之鏈接層將囊封於特定封包類型(例如，MPEG-TS封包、IPv4 封包等等)中之各種類型之資料提取為用於由一實體層處理之一單一通用格式。另外，提出之鏈接層支援將一單一上層封包切分為多個鏈接層封包且將多個上層封包連結成一單一鏈接層封包。該單向實體層實施方案支援所謂之服務通告。應注意，服務通告具體言之可係指根據一電信協定界定之特定服務通告或更一般而言可係指一源裝置與一目的地裝置之間之一通信。 提出之ATSC 3.0套標準亦支援所謂之寬頻實體層及資料鏈接層以實現對混合視訊服務之支援。較高層協定可描述包含於一混合視訊服務中之多個視訊服務係如何可經同步以表示的。應注意，儘管ATSC 3.0使用術語「廣播」來指一單向無線傳輸實體層，但所謂之ATSC 3.0廣播實體層支援通過串流或檔案下載之視訊傳遞。因而，本文使用之術語廣播不應用於限制其中可根據本發明之一或多個技術傳輸視訊及相關資料之方式。 再次參考圖9，其繪示一實例性內容傳遞協定模型。在圖9中繪示之實例中，內容傳遞協定模型900為繪示目的而與7層OSI模型「對準」。然而應注意，此一繪示不應解譯為限制內容傳遞協定模型900之實施方案或本文描述之技術。內容傳遞協定模型900通常可對應於針對ATSC 3.0套標準提出之當前內容傳遞協定模型。內容傳遞協定模型900包含用於支援通過ATSC廣播實體層之串流及/或檔案下載之兩個選項：(1)用戶資料報協定(UDP)及網際網路協定(IP)上之MPEG媒體傳輸協定(MMTP)及(2) UDP及IP上之單向傳輸上之即時對象傳遞(ROUTE)。在ISO/IEC: ISO/IEC 23008-1，「Information technology-High efficiency coding and media delivery in heterogeneous environments-Part 1: MPEG media transport (MMT), 」中描述MMTP，該案之全文以引用之方式併入本文中。在其中MMTP用於串流視訊資料之情況中，視訊資料可囊封於一媒體處理單元(MPU)中。MMTP將一MPU定義為「一種可由一MMT實體處理且由獨立於其他MPU之表示引擎消耗之媒體資料品項」。MPU之一邏輯群組可形成一MMT資產，其中MMTP將一資產定義為「用於建立一多媒體表示之任何多媒體資料」。一資產係共用攜帶編碼之媒體資料之相同資產識別符之MPU之一邏輯群組。一或多個資產可形成一MMT封包，其中一MMT封包係多媒體內容之一邏輯集合。 ATSC 3.0套標準力求支援包含擁有時間可適性視訊表示(例如，一基礎圖框速率視訊表示及增強圖框速率視訊表示)之多個視訊元素之多媒體表示。因此，可使用相對於ATSC 3.0套標準描述之資料結構用信號發送w1及w2。如以上所描述，ATSC 3.0套標準可支援服務通告。在一個實例中，可界定包含用於高圖框速率(HFR)視訊(例如，120 Hz或更大)內容之能力編碼之服務通告。在一個實例中，可如表1中提供之界定能力編碼，其中以下描述包含用於對應能力編碼之定義之實例性區段A.2.v2及A.2.v3。 表1 以下提供一區段A.2.v2之一實例： A.2.v2能力編碼0x051B：ATSC 3.0 HEVC HFR視訊1 capability_code值0x051B應表示支援利用符合ATSC規格之多快門處理編碼之HEVC高圖框速率視訊之接收器能力。 多快門處理可係指本文描述之處理技術之任何組合，包含(例如)相對於圖4及圖8描述之處理技術。 以下提供一區段A.2.v3之一實例： A.2.v3能力編碼0x051C：ATSC 3.0 SHVC HFR視訊1 capability_code值0x051B應表示支援利用符合ATSC規格之多快門處理編碼之SHVC高圖框速率視訊之接收器能力。 SHVC可係指根據HEVC界定之可適性擴展(SHVC)及/或其之未來變體。 在一個實例中，可使用各種語法元素達成高圖框速率視訊內容之服務發訊。以下表2及表3提供可用於用信號發送高圖框速率視訊內容之各種元素及語義。 表2 在表2中，bslbf係指位元串左位元第一資料類型。在一個實例中，包含於表2中之hfr_info_present語法元素可係基於以下實例性定義： hfr_info_present-此1位元布爾(Boolean)旗標當設定為「1」時應指示hfr_info()結構中之元素係存在的。當設定為「0」時，該旗標應指示hfr_info()結構中之元素係不存在的。 如表2中所繪示，表3中提供hfr_info()語義之一實例。 表3 在表3中，uimsbf係指一未標記整數最重要位元第一資料類型且bslbf係指位元串左位元第一資料類型。在一個實例中，表3中包含之hfr_info_present 、multishutter_indicator、num_weights_minus2及ms_weight 語法元素可係基於以下實例性定義： multishutter_indicator-當設定為「1」時應指示經由多快門處理來處理第二最高時間子層處之視訊圖框。當設定為「0」時應指示未經由多快門處理來處理第二最高時間子層處之視訊圖框。 num_weights_minus2-加2指定經信號發送以用於該第二最高時間子層處之視訊圖框之多快門處理之權值數目。 ms_weight[ i ]-指定施加至時間上係先前第(i-1)個原始視訊圖框之多快門權值。權值係如下：「00」= .25、「01」=0.5、「10」=0.75、「11」=1.0。可要求ms_weight[ i ]值(i在0至(num_weights_minus2+1)之範圍中，包含0及(num_weights_minus2+1))之和應等於1.0。 應注意，基於multishutter_indicator、num_weights_minus2及ms_weight之實例性定義，可用信號發送兩個(例如，w1及w2)或三個權值，其中可能之權值包含值0.25、0.5、0.75及1.0。應注意在其他實例中，可用信號發送權值之其他數目及/或可使用其他可能之權值。例如，在一個實例中，ms_weight可係基於以下實例性定義： ms_weight[ i ]-指定施加至時間上係先前第i個原始視訊圖框之多快門權值。權值係如下：「00」= 1.0、「01」=0.8、「10」=0.667、「11」=0.5。 此外 ms_weight[num_weight_minus2+1]可計算為如下：在另一實例中，ms_weight可係基於以下實例性定義： ms_weight[ i ]-指定施加至時間上係先前第i個接收之視訊圖框之多快門權值。權值係如下：「00」= 1.0、「01」=0.8、「10」=0.667、「11」=0.5… 此外應注意，在一平均化操作中使用之w1及w2或其他權值可自用信號發送之權值導出。即，可使用使得用信號發送之權值作為輸入之一功能產生w1及w2。在一個實例中，該功能可係基於視訊資料之性質。 如表2中所繪示，在表4中提供hfr_info()語義之一實例。 表4 在表4中，uimsbf係指一未標記整數最重要位元第一資料類型且bslbf係指位元串左位元第一資料類型。在一個實例中，表4中包含之語法元素multishutter_indicator及ms_weight可係基於以下實例性定義： multishutter_indicator-當設定為「1」時應指示經由多快門處理來處理最高時間子層處之視訊圖框。當設定為「0」時應指示未經由多快門處理來處理最高時間子層處之視訊圖框。 msweight-指定施加至當前原始視訊圖框之多快門權值。權值係如下：「00」= 1.0、「01」=0.8、「10」=0.667、「11」=0.5。施加至時間上係先前原始視訊圖框之多快門權值計算為(1.0- msweight)。 此外，在另一實例中，可使用2位元以上之位元數來用信號發送msweight語法元素以用信號發送更多候選權值。例如，可將3位元而非2位元用於語法元素msweight。 在另一實例中，msweight可係基於以下實例性定義： msweight-指定施加至時間上係先前接收之視訊圖框及接收之視訊圖框之多快門權值。在表A中界定權值。 在以下表5及表6中提供與msweight之實例性定義相關聯之一表A之實例： 表5 表6 如圖9中所繪示，ATSC 3.0套標準可支援HTTP上之動態自適應串流(DASH)協定。在一個實例中，可使用包含(例如)正由DASH產業論壇(DASH-IF)發展之DASH發訊機制來用信號發送權值。附錄A提供使用DASH用信號發送權值之一實例及一接收器裝置之實例性表現。此外，在一個實例中，為了支援MMT及DASH共同之發訊，包含於hfr_info()中之語法元素可囊封於一SEI訊息中。依此方式，源裝置表示經組態以用信號發送作為一服務通告之一部分之一第一權值及一第二權值之一裝置之一實例。應注意，儘管相對於ATSC描述權值之實例性發訊，但用信號發送本文描述之權值之技術通常可應用於其他電信協定，包含DVB標準、ISDB標準、無線電產業會(ARIB)標準等等。 在一或多個實例中，描述之功能可在硬體、軟體、韌體或其等之任何組合中實施。若在軟體中實施，則功能可儲存於一電腦可讀媒體上或作為一或多個指令或編碼通過一電腦可讀媒體傳輸且由一基於硬體之處理單元執行。電腦可讀媒體可包含：電腦可讀儲存媒體，其對應於諸如資料儲存媒體之一有形媒體；或通信媒體，其包含促進一電腦程式(例如)根據一通信協定自一個地方傳送至另一地方之任何媒體。依此方式，電腦可讀媒體通常可對應於(1)為非暫時性之有形電腦可讀儲存媒體或(2)一通信媒體，諸如一信號或載波。資料儲存媒體可為可由一或多個電腦或一或多個處理器存取以取回用於實施本發明描述之技術之指令、編碼及/或資料結構之任何可用媒體。一電腦程式產品可包含一電腦可讀媒體。 舉例而言且不具有限制性，此電腦可讀儲存媒體可包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存裝置、快閃記憶體或可用於以指令或資料結構之形式儲存所要程式碼且可由一電腦存取之任何其他媒體。再者，適當地將任何連接稱為一電腦可讀媒體。例如，若使用一共軸纜線、光纖纜線、雙絞線、數位用戶線(DSL)或諸如紅外線、無線電及微波之無線技術自一網站、伺服器或其他遠端源傳輸指令，則接著共軸纜線、光纖纜線、雙絞線、DSL或諸如紅外線、無線電及微波之無線技術包含於媒體之定義中。然而應瞭解，電腦可讀儲存媒體及資料儲存媒體不包含連接、載波、信號或其他暫時性媒體，反之係關於非暫時性有形儲存媒體。如本文所使用之磁碟及光碟包含光碟(CD)、雷射光碟、光碟、數位多功能光碟(DVD)、軟碟及其中磁碟通常磁性重現資料而光碟利用雷射光學地重現資料之藍光光碟。以上組合亦應包含於電腦可讀媒體之範疇內。 可由一或多個處理器執行指令，諸如一或多個數位信號處理器(DSP)、通用微處理器、特定應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效積體或離散邏輯電路。據此，本文所使用之術語「處理器」可係指以上結構之任何者或適合用於實施本文描述之技術之任何其他結構。另外，在一些態樣中，本文描述之功能可在專屬硬體及/或經組態以編碼及解碼之軟體模組內提供，或併入至一組合編碼解碼器中。再者，該等技術可完全在一或多個電路或邏輯元件中實施。 本發明之技術可在各種裝置或設備中實施，包含一無線手機、一積體電路(IC)或一組IC (例如，一晶片組)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示之技術之裝置之功能態樣，但不必要求由不同硬體單元實現。確切而言，如以上所描述，各種單元可在一編碼解碼器硬體單元中組合或由間操作硬體單元(包含一或多個處理器)之一集合結合適合軟體及/或韌體提供。 再者，在上述實施例之各者中使用之基地台裝置及終端裝置(視訊解碼器及視訊編碼器)之各功能區塊或各種特徵可由一電路(通常係一積體電路或複數個積體電路)實施或執行。經設計以執行本說明書中描述之功能之電路可包括一通用處理器、一數位信號處理器(DSP)、一特定應用或通用應用積體電路(ASIC)、一場可程式化閘極陣列(FPGA)或其他可程式化邏輯裝置、離散閘或電晶體邏輯或一離散硬體組件或其等之一組合。該通用處理器可為一微處理器或替代地，該處理器可為一習知處理器、一控制器、一微控制器或一狀態機。該通用處理器或以上描述之各電路可由一數位電路組態或可由一類比電路組態。此外，當目前歸因於一半導體技術之發展而出現將替代積體電路製作成一積體電路之一技術時，亦能夠藉由此技術使用該積體電路。 已描述各種實例。此等及其他實例係在以下申請專利範圍之範疇內的。
100‧‧‧系統
102‧‧‧源裝置
104‧‧‧視訊源
105‧‧‧視訊處理單元
106‧‧‧視訊編碼器
108‧‧‧介面
110‧‧‧通信媒體
120‧‧‧目的地裝置
122‧‧‧介面
124‧‧‧視訊解碼器
125‧‧‧視訊處理單元
126‧‧‧顯示器
400‧‧‧視訊編碼器
402‧‧‧加法器
404‧‧‧變換係數產生器
406‧‧‧係數量化單元
408‧‧‧逆量化/變換處理單元
410‧‧‧加法器
412‧‧‧圖框內預測處理單元
414‧‧‧運動補償單元
416‧‧‧運動估計單元
418‧‧‧解塊濾波單元
419‧‧‧樣本自適應偏移(SAO)濾波單元
420‧‧‧熵編碼單元
500‧‧‧視訊解碼器
502‧‧‧熵解碼單元
504‧‧‧逆量化單元
506‧‧‧逆變換處理單元
508‧‧‧圖框內預測處理單元
510‧‧‧運動補償單元
512‧‧‧加法器
514‧‧‧解塊濾波單元
515‧‧‧樣本自適應偏移(SAO)濾波單元
516‧‧‧參考緩衝器
900‧‧‧內容傳遞協定模型
圖1係繪示根據預測視訊編碼技術編碼之一圖像群組之一實例之一概念圖。 圖2係繪示根據預測視訊編碼技術之一子位元流提取程序之一實例之一概念圖。 圖3係繪示可經組態以根據本發明之一或多個技術編碼及解碼視訊資料之一系統之一實例之一方塊圖。 圖4係繪示根據本發明之一或多個技術處理視訊資料之一實例之一概念圖。 圖5係繪示可經組態以根據本發明之一或多個技術編碼視訊資料之一視訊編碼器之一實例之一方塊圖。 圖6係繪示根據本發明之一或多個技術之一子位元流提取程序之一實例之一概念圖。 圖7係繪示可經組態以根據本發明之一或多個技術解碼視訊資料之一視訊解碼器之一實例之一方塊圖。 圖8係繪示根據本發明之一或多個技術處理視訊資料之一實例之一概念圖。 圖9係繪示根據本發明之一或多個技術之內容傳遞協定模型之一實例之一概念圖。

Claims (20)

  1. 一種修改視訊資料之方法，該方法包括：接收包含一序列圖框之視訊資料；針對包含於該序列圖框中之每N個圖框，藉由將一第一權值施加至該視訊序列中之一先前圖框且將一第二權值施加一N圖框且使得加權像素值相加來執行該視訊序列中之該N圖框及該先前圖框之一像素平均化操作；該N圖框係由一單一封包切分為多個封包或係由多個封包連結成一單一封包；利用一對應修改之圖框代替經包含於該序列圖框中之每N個圖框以產生一修改之序列圖框；且使用在一表示中呈現之一描述符用信號來發送該第一權值及該第二權值，其中該描述符包含指示一2位元欄位之一屬性值，該2位元欄位指示該第一權值之一值及該第二權值之一值。
  2. 如請求項1之方法，其中該2位元欄位經表達為表示2個二進制位元之一2字元串。
  3. 如請求項1之方法，其中一屬性值00指示該第一權值等於1/5且該第二權值等於4/5。
  4. 如請求項3之方法，其中一屬性值01指示該第一權值等於1/3，且該第二權值等於2/3。
  5. 如請求項4之方法，其中一屬性值10指示該第一權值等於3/7，且該第二權值等於4/7。
  6. 如請求項5之方法，其中一屬性值11指示該第一權值等於1/2，且該第二權值等於1/2。
  7. 如請求項1之方法，其中該描述符包含等於統一資源定位符(Uniform Resource Locator)之一識別符集合。
  8. 一種藉由執行逆修改操作而重建修改之視訊資料之方法，該方法包括：接收包含一序列圖框之視訊資料，其中每N個圖框包含一修改之圖框，且每N個圖框係由一單一封包切分為多個封包或係由多個封包連結成一單一封包；自指示一2位元欄位之一屬性值判定一第一權值之一值及一第二權值之一值，其中該屬性係包含在呈現於一表示中之一描述符中；針對經包含於該序列圖框中之每N個圖框，藉由將該第一權值施加至一先前圖框之像素值、自該N圖框減去所得加權先前圖框，且使得所得差值除以該第二權值，來產生一重建圖框；且利用一對應重建圖框代替經包含於該序列圖框中之每N個圖框以產生一序列圖框。
  9. 如請求項8之方法，其中該2位元欄位經表達為表示2個二進制位元之一2字元串。
  10. 如請求項8之方法，其中一屬性值00指示該第一權值等於1/5，且該第二權值等於4/5。
  11. 如請求項10之方法，其中一屬性值01指示該第一權值等於1/3，且該第二權值等於2/3。
  12. 如請求項11之方法，其中一屬性值10指示該第一權值等於3/7，且該第二權值等於4/7。
  13. 如請求項12之方法，其中一屬性值11指示該第一權值等於1/2，且該第二權值等於1/2。
  14. 如請求項8之方法，其中該描述符包含等於統一資源定位符(Uniform Resource Locator)之一識別符集合。
  15. 一種用於藉由執行逆修改操作而重建修改之視訊資料之裝置，該裝置包括一或多個處理器，該一或多個處理器經組態以：接收包含一序列圖框之視訊資料，其中每N個圖框包含一修改之圖框，且每N個圖框係由一單一封包切分為多個封包或係由多個封包連結成一單一封包；自指示一2位元欄位之一屬性值判定一第一權值之一值及一第二權值之一值，其中該屬性係包含在呈現於一表示中之一描述符中；針對包含於該序列圖框中之每N個圖框，藉由將該第一權值施加至一先前圖框之像素值、自該N圖框減去所得加權先前圖框，且使得所得差值除以一第二權值，來產生一重建圖框；且利用一對應重建圖框代替經包含於該序列圖框中之每N個圖框以產生一序列圖框。
  16. 如請求項15之裝置，其中該2位元欄位表達為表示2個二進制位元之一2字元串。
  17. 如請求項15之裝置，其中一屬性值00指示該第一權值等於1/5，且該第二權值等於4/5。
  18. 如請求項17之裝置，其中一屬性值01指示該第一權值等於1/3，且該第二權值等於2/3。
  19. 如請求項18之裝置，其中一屬性值10指示該第一權值等於3/7，且該第二權值等於4/7。
  20. 如請求項19之裝置，其中一屬性值11指示該第一權值等於1/2，且該第二權值等於1/2。
TW106143320A 2016-12-13 2017-12-11 用於減少於視訊之時間可適性層之假影之系統及方法 TWI670964B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201662433397P 2016-12-13 2016-12-13
US62/433,397 2016-12-13

Publications (2)

Publication Number Publication Date
TW201826785A TW201826785A (zh) 2018-07-16
TWI670964B true TWI670964B (zh) 2019-09-01

Family

ID=62559492

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106143320A TWI670964B (zh) 2016-12-13 2017-12-11 用於減少於視訊之時間可適性層之假影之系統及方法

Country Status (5)

Country Link
US (1) US20200092603A1 (zh)
CN (1) CN110063055A (zh)
CA (1) CA3046598A1 (zh)
TW (1) TWI670964B (zh)
WO (1) WO2018110583A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102311046B1 (ko) 2019-03-11 2021-10-12 돌비 레버러토리즈 라이쎈싱 코오포레이션 프레임 레이트 스케일러블 비디오 코딩
US11588876B2 (en) * 2020-06-16 2023-02-21 T-Mobile Usa, Inc. Device-side playback restrictions on high throughput networks

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040036800A1 (en) * 2002-08-23 2004-02-26 Mitsuharu Ohki Picture processing apparatus, picture processing method, picture data storage medium and computer program
JP2006333071A (ja) * 2005-05-26 2006-12-07 Sony Corp 情報処理システム、情報処理装置および方法、プログラム、並びにデータ構造
US20160234500A1 (en) * 2013-11-22 2016-08-11 Sony Corporation Transmission device, transmission method, reception device, and reception method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7266150B2 (en) * 2001-07-11 2007-09-04 Dolby Laboratories, Inc. Interpolation of video compression frames
CN102088608B (zh) * 2011-02-28 2012-05-09 浙江大学 一种基于部分重建的可伸缩视频编码质量优化方法
CN106254722A (zh) * 2016-07-15 2016-12-21 北京邮电大学 一种视频超分辨率重建方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040036800A1 (en) * 2002-08-23 2004-02-26 Mitsuharu Ohki Picture processing apparatus, picture processing method, picture data storage medium and computer program
JP2006333071A (ja) * 2005-05-26 2006-12-07 Sony Corp 情報処理システム、情報処理装置および方法、プログラム、並びにデータ構造
US20160234500A1 (en) * 2013-11-22 2016-08-11 Sony Corporation Transmission device, transmission method, reception device, and reception method

Also Published As

Publication number Publication date
US20200092603A1 (en) 2020-03-19
WO2018110583A1 (en) 2018-06-21
CN110063055A (zh) 2019-07-26
TW201826785A (zh) 2018-07-16
CA3046598A1 (en) 2018-06-21

Similar Documents

Publication Publication Date Title
CN110506421B (zh) 用于以媒体应用程序格式发信号通知可伸缩视频的系统和方法
JP7018447B2 (ja) 仮想現実アプリケーション用の、動き制約タイルセットのシグナリングのためのシステム及び方法
WO2020059688A1 (en) Systems and methods for signaling parameters in video coding
CN113170201B (zh) 用于对视频数据进行解码的方法和设备
TW201742464A (zh) 用於產生用於視訊圖像之區域嵌套訊息之方法及系統
TW201931853A (zh) 具有聯合像素/變換為基礎之量化之視頻寫碼之量化參數控制
TW202046722A (zh) 用於框內預測模式推導之基於區塊之量化剩餘域脈碼調變指派
US10313690B2 (en) Systems and methods for reducing artifacts in temporal scalable layers of video
CN113632489A (zh) 在视频编码中用于发送信号通知图块组信息的系统和方法
WO2020009044A1 (en) Systems and methods for signaling picture order count values for pictures included in coded video
JP2019534631A (ja) ピークサンプル適応オフセット
WO2017204109A1 (en) Systems and methods for signaling scalable video in a media application format
WO2018123542A1 (en) Systems and methods for reducing artifacts in temporal scalable layers of video
WO2019103126A1 (en) Systems and methods for signaling tile structures for pictures of coded video
TWI670964B (zh) 用於減少於視訊之時間可適性層之假影之系統及方法
WO2020004420A1 (en) Systems and methods for signaling picture types of pictures included in coded video
WO2024004811A1 (en) Systems and methods for signaling neural network post-filter parameter information in video coding
WO2024004978A1 (en) Systems and methods for signaling neural network post-filter parameter information in video coding
WO2023100781A1 (en) Systems and methods for reducing latency in decoding of coded video data
WO2020235552A1 (en) Systems and methods for signaling picture property information in video coding
WO2020009124A1 (en) Systems and methods for high-level syntax signaling in video coding
WO2019124226A1 (en) Systems and methods for applying deblocking filters to reconstructed video data at picture partition boundaries
CN117857789A (zh) 更新视频数据的神经网络环路后滤波器信息的方法和设备
CN117651132A (zh) 发送信号通知神经网络环路后滤波器信息的方法和设备
CN118118693A (zh) 用于对视频数据进行解码或编码的方法和设备