TWI492635B - Encoding method and coding device - Google Patents

Encoding method and coding device Download PDF

Info

Publication number
TWI492635B
TWI492635B TW101101751A TW101101751A TWI492635B TW I492635 B TWI492635 B TW I492635B TW 101101751 A TW101101751 A TW 101101751A TW 101101751 A TW101101751 A TW 101101751A TW I492635 B TWI492635 B TW I492635B
Authority
TW
Taiwan
Prior art keywords
value
image
weight
weight coefficient
unit
Prior art date
Application number
TW101101751A
Other languages
English (en)
Other versions
TW201318435A (zh
Inventor
Akiyuki Tanizawa
Takeshi Chujoh
Original Assignee
Toshiba Kk
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Kk filed Critical Toshiba Kk
Publication of TW201318435A publication Critical patent/TW201318435A/zh
Application granted granted Critical
Publication of TWI492635B publication Critical patent/TWI492635B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H04N19/45Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder performing compensation of the inverse transform mismatch, e.g. Inverse Discrete Cosine Transform [IDCT] mismatch
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Error Detection And Correction (AREA)
  • Color Television Systems (AREA)

Description

編碼方法及編碼裝置
本發明之實施形態係關於編碼方法及解碼方法。
近年來,大幅提升編碼效率的影像編碼方法,係由ITU-T(International Telecommunication Union Telecommunication Standardization Sector)與ISO(International Organization for Standardization)/IEC(International Electrotechnical Commission)所共同提出的ITU-T REC.H.264及ISO/IEC 14496-10(以下,稱為「H.264」)。
於H.264係揭示:以編碼完成之影像使用作為參照影像,進行分數精確度之動態補償預測,如此而消除時間域上之冗長性,實現高編碼效率的幀間預測編碼(inter-frame predicted coding)方式。
另外,相較於ISO/IEC MPEG(Moving Picture Experts Group)-1,2,4之幀間預測編碼方式(inter prediction coding),可以高效率針對包含Fade(淡)或Dissolve(溶)效果的動態影像進行編碼的方式亦被提案。於該方式,作為時間域上之明暗度變化之預測用的機制,係針對具有的亮度及2個色差的輸入動態影像進行分數精確度之動態補償預測。之後,使用索引(index)將預測影像和權重係數相乘,再加上(加算)偏移值(offset ),該索引為用於表示包含參照影像、亮度及2個色差之每一個之權重係數、亮度及2個色差之每一個之偏移值的組合者。
〔習知技術文獻〕 〔專利文獻〕
[專利文獻1]特開2004-7377號公報
但是,於上述習知技術,係對索引之即值(immediate value)直接進行編碼,會導致編碼效率降低。本發明欲解決之課題為提供可提升編碼效率的編碼方法及解碼方法。
實施形態之編碼方法,係包含:索引設定步驟,預測步驟,及編碼步驟。於索引設定步驟係針對索引加以設定,該索引係用於表示權重係數與參照影像之資訊。於預測步驟,係以上述權重係數之基準值作為預測值予以導出,該權重係數係表示至少1個參照影像與編碼對象之對象影像之間之畫素值變化成為特定基準以下者。於編碼步驟,係對上述權重係數與上述預測值之差分值進行編碼。
〔發明之實施形態〕
以下,依據圖面詳細說明實施形態。以下之各實施形態之編碼裝置及解碼裝置,可以藉由LSI(Large-Scale Integration)晶片,DSP(Digital Signal Processor),或FPGA(Field Programmable Gate Array)等之硬體來實現。另外,以下之各實施形態之編碼裝置及解碼裝置,可以藉由電腦之執行程式,亦即,藉由軟體來實現。另外,之後之說明中,「影像」之用語可以適當解讀為「映像」、「畫素」、「影像信號」、「繪畫」或「影像資料」等之用語。
(第1實施形態)
於第1實施形態係針對進行動態影像之編碼的編碼裝置加以說明。
圖1係表示第1實施形態之編碼裝置100之構成之一例之方塊圖。
編碼裝置100,係將構成輸入影像的各幀(frame)或各場(field)分割成為複數個畫素區塊,使用由編碼控制部111輸入之編碼參數,對分割之畫素區塊進行預測編碼,產生預測影像。之後,編碼裝置100,係對分割成為複數個畫素區塊的輸入影像與預測影像進行減算而產生預測誤差,對產生之預測誤差進行正交轉換(orthogonal transform)及量化處理,更進一步進行亂度編碼(entropy coding)而產生編碼資料予以輸出。
編碼裝置100,係使畫素區塊之區塊尺寸及預測影像之產生方法之其中至少之一選擇性適用不同的複數個預測模態而進行預測編碼。預測影像之產生方法可以大別為,於編碼對象幀內進行預測的幀內預測(intra-prediction),及使用時間上不同的1個以上之參照幀進行動態補償預測的幀間預測(inter-prediction)之2種類。另外,幀內預測亦稱為畫面內預測等,幀間預測亦稱為畫面間預測,或動態補償預測等。
圖2表示第1實施形態之中畫素區塊之預測編碼順序序之一例之說明圖。於圖2所示例,編碼裝置100,係由畫素區塊之左上朝右下進行預測編碼,於編碼處理對象之幀f,編碼完成畫素區塊p係位於編碼對象畫素區塊c之更左側及上側。以下為求說明之簡單化,編碼裝置100,係設為依據圖2之順序進行預測編碼,但預測編碼之順序不限定於此。
畫素區塊,係表示影像處理之單位,相當於例如M×N尺寸之區塊(M及N為自然數),編碼樹狀區塊,巨集區塊(macro block),子區塊(sub-block),或1畫素等。於之後之說明基本的以畫素區塊作為編碼樹狀區塊之意義加以使用,但亦有以其他之意義予以使用之情況。例如預測單元(prediction unit)之說明中有將畫素區塊使用作為預測單元之畫素區塊之意義。另外,區塊亦有稱為單元等之名稱。例如亦有將編碼區塊稱為編碼單元。
圖3A係表示第1實施形態之編碼樹狀區塊之區塊尺 寸之一例之圖。編碼樹狀區塊典型為圖3A所示之64×64之畫素區塊。但是不限定於此,亦可為32×32之畫素區塊,16×16之畫素區塊,8×8之畫素區塊,或4×4之畫素區塊等。另外,編碼樹狀區塊可以為非正方形,例如可為M×N尺寸(M≠N)之畫素區塊。
圖3B~圖3D係表示第1實施形態之編碼樹狀區塊之具體例之圖。圖3B係表示區塊尺寸為64×64(N=32)之編碼樹狀區塊。N係表示成為基準的編碼樹狀區塊之尺寸,分割時之尺寸被定義為N,未分割時之尺寸係定義為2N。圖3C係表示將圖3B之編碼樹狀區塊實施四等分分割而成的編碼樹狀區塊。編碼樹狀區塊,如圖3C所示,係具有的四等分構造。編碼樹狀區塊被實施分割時,針對分割後之4個畫素區塊,如圖3C所示,係依據Z掃描順序被附加編號。
另外,編碼樹狀區塊可於1個四等分之編號內更進一步實施四等分分割。如此則,可對編碼樹狀區塊實施階層分割。此情況下,分割之深度係以Depth加以定義。圖3D係表示將圖3B之編碼樹狀區塊實施四等分分割後的編碼樹狀區塊之1個,區塊尺寸成為32×32(N=16)。圖3B所示編碼樹狀區塊之Depth為0,圖3D所示編碼樹狀區塊之Depth為1。另外,將單元最大的編碼樹狀區塊稱為最大編碼樹狀區塊,於該單位內使輸入影像信號依據光柵掃描順序實施編碼。
於之後之說明中,亦有將輸入影像之編碼對象區塊或 編碼樹狀區塊稱為預測對象區塊或預測畫素區塊。另外,編碼單位不限定於畫素區塊,可使用幀,場(field),片段,線(line)及畫素之其中至少之一。
編碼裝置100,如圖1所示,係具備:減算部101,正交轉換部102,量化部103,逆量化部104,逆正交轉換部105,加算部106,預測影像產生部107,索引設定部108,動態評估部109及編碼部110。另外,圖1所示編碼控制部111,係進行編碼裝置100之控制者,可由例如CPU(Central Processing Unit)等來實現。
減算部101,係由被分割為畫素區塊的輸入影像減算所對應之預測影像而獲得預測誤差。減算部101,係輸出預測誤差,將其輸入至正交轉換部102。
正交轉換部102,係對由減算部101被輸入之預測誤差,進行例如離散餘弦轉換(DCT)或離散正弦轉換(DST)等之正交轉換,獲得轉換係數。正交轉換部102係輸出轉換係數,並輸入至量化部103。
量化部103,係對由正交轉換部102輸入之轉換係數進行量化處理,獲得量化轉換係數。具體言之為,量化部103係依據編碼控制部111指定之量化參數或量化矩陣等之量化資訊進行量化。更詳言之為,量化部103,係以量化資訊所導出之量化步驟尺寸對轉換係數進行除算,而獲得量化轉換係數。量化參數係表示量化之細化程度。量化矩陣,係針對轉換係數之每一成分實施量化之細化程度之權重附加時被使用。量化部103,係將量化轉換係數予以 輸出,並輸入至逆量化部104及編碼部110。
逆量化部104,係對由量化部103輸入之量化轉換係數進行逆量化處理,獲得復原轉換係數。具體言之為,逆量化部104,係依據量化部103使用的量化資訊進行逆量化。更詳言之為,逆量化部104,係針對量化轉換係數進行量化資訊所導出之量化步驟尺寸之乗算處理,而獲得復原轉換係數。另外,量化部103使用之量化資訊,可由編碼控制部111之未圖示之內部記憶體下載予以利用。逆量化部104,係輸出復原轉換係數,並將其輸入至逆正交轉換部105。
逆正交轉換部105,係對由逆量化部104輸入之復原轉換係數,進行例如逆離散餘弦轉換(IDCT)或逆離散正弦轉換(IDST)等之逆正交轉換,而獲得復原預測誤差。另外,逆正交轉換部105所進行之逆正交轉換,係對應於正交轉換部102進行之正交轉換。逆正交轉換部105,係輸出復原預測誤差,並將其輸入至加算部106。
加算部106,係對逆正交轉換部105所輸入之復原預測誤差和對應之預測影像進行加算,產生局部解碼影像。加算部106,係輸出局部解碼影像,並將其輸入至預測影像產生部107。
於預測影像產生部107,係以由加算部106輸入之局部解碼影像作為參照影像而儲存於記憶體(於圖1被省略圖示),將記憶體所儲存之參照影像予以輸出,而輸入至動態評估部109。另外,預測影像產生部107,係依據由 動態評估部109輸入之動態資訊及WP參數資訊進行附加權重之動態補償預測,而產生預測影像。預測影像產生部107,係輸出預測影像,並輸入至減算部101及加算部106。
圖4係表示第1實施形態之預測影像產生部107之構成之一例之方塊圖。預測影像產生部107,如圖4所示,係具備複數幀動態補償部201,記憶體202,單向動態補償部203,預測參數控制部204,參照影像選擇器205,幀記憶體206,及參照影像控制部207。
幀記憶體206,係於參照影像控制部207之控制之下,以由加算部106輸入之局部解碼影像作為參照影像予以儲存。幀記憶體206,係具備將參照影像暫時保持之複數個記憶體群組FM1~FMN(N≧2)。
預測參數控制部204,係依據由動態評估部109輸入之動態資訊,準備參照影像編號與預測參數之複數個組合作為表格。於此,動態資訊,係指動態補償預測所使用之動態之變動量之表示用的動態向量或參照影像編號、單向/雙向預測等之預測模態相關的資訊等。預測參數,係指動態向量及預測模態相關的資訊。預測參數控制部204,係依據輸入影像來選擇預測影像之產生用的參照影像編號與預測參數之組合並輸出之,將參照影像編號輸入至參照影像選擇器205,將預測參數輸入至單向動態補償部203。
參照影像選擇器205,係依據由預測參數控制部204 輸入之參照影像編號,針對是否將幀記憶體206所具有的的幀記憶體FM1~FMN之其一之輸出端予以連接,進行切換的開關。參照影像選擇器205,例如當參照影像編號為0時,係使FM1之輸出端連接於參照影像選擇器205之輸出端,當參照影像編號為N-1時,使FMN之輸出端連接於參照影像選擇器205之輸出端。參照影像選擇器205,係將幀記憶體206所具有的的幀記憶體FM1~FMN之中,連接於輸出端的幀記憶體所儲存之參照影像予以輸出,並輸入至單向動態補償部203及動態評估部109。
單向預測動態補償部203,係依據由預測參數控制部204輸入之預測參數及由參照影像選擇器205輸入之參照影像,進行動態補償預測處理,而產生單向預測影像。
圖5表示第1實施形態之雙向預測之中之動態補償預測之動態向量之關係之一例。於動態補償預測,係使用參照影像進行細化(thin)處理,根據作成的細化影像與輸入影像間之編碼對象位置對於畫素區塊之動態變動量,而產生單向預測影像。於此,變動量為動態向量。如圖5所示,於雙向預測slice(B-slice),係使用2種類之參照影像及動態向量之群組來產生預測影像。細化處理,係可以使用1/2畫素精確度之細化處理,或1/4畫素精確度之細化處理等,藉由對參照影像進行濾波(filtering)處理而產生細化影像之值。例如在對於亮度信號可進行至1/4畫素精確度之細化處理的H.264,變動量係以整數畫素精確度之4倍來表現。
單向預測動態補償部203,係輸出單向預測影像,並暫時儲存於記憶體202。於此,當動態資訊(預測參數)表示雙向預測之情況,複數幀動態補償部201係使用2種類之單向預測影像進行附加權重之預測,因此單向預測動態補償部203係將第1個對應之單向預測影像儲存於記憶體202,將第2個對應之單向預測影像直接輸出於複數幀動態補償部201。於此,將第1個對應之單向預測影像定義為第一預測影像,將第2個對應之單向預測影像定義為第二預測影像。
另外,準備2個單向動態補償部203,而分別產生2個單向預測影像亦可。此情況下,當動態資訊(預測參數)表示單向預測時,單向動態補償部203係將第1個單向預測影像定義為第一預測影像而直接輸出至複數幀動態補償部201即可。
複數幀動態補償部201,係使用由記憶體202輸入的第一預測影像,由單向預測動態補償部203輸入的第二預測影像及由動態評估部109輸入的WP參數資訊,進行附加權重之預測而產生預測影像。複數幀動態補償部201,係將預測影像予以輸出,而輸入至減算部101及加算部106。
圖6表示第1實施形態之複數幀動態補償部201之構成之一例之方塊圖。複數幀動態補償部201,如圖6所示,係具備:預設動態補償部301,附加權重之動態補償部302,WP參數控制部303,及WP選擇器304,305。
WP參數控制部303,係依據由動態評估部109輸入的WP參數資訊而輸出WP適用旗標及權重資訊,而將WP適用旗標輸入至WP選擇器304,305,將權重資訊輸入至附加權重之動態補償部302。
於此,WP參數資訊,係包含:權重係數之固定小數點精確度,第一預測影像所對應之第一WP適用旗標,第一權重係數及第一偏移值,以及第二預測影像所對應之第二WP適應旗標,第二權重係數及第二偏移值之資訊。WP適用旗標,係對應於該參照影像及信號成分之各個而可以設定的參數,用於表示是否進行附加權重之動態補償預測。權重資訊係包含權重係數之固定小數點精確度,第一權重係數,第一偏移值,第二權重係數及第二偏移值之資訊。
詳言之為,WP參數控制部303,當由動態評估部109被輸入WP參數資訊時,係將WP參數資訊由第一WP適用旗標,第二WP適用旗標及權重資訊予以分離並輸出之,將第一WP適用旗標輸入至WP選擇器304,將第二WP適用旗標輸入至WP選擇器305,將權重資訊輸入至附加權重之動態補償部302。
WP選擇器304,305,係依據由WP參數控制部303輸入之WP適用旗標,進行各個預測影像之連接端之切換。WP選擇器304,305,當各個WP適用旗標為0時,係使各個輸出端連接於預設動態補償部301。之後,WP選擇器304,305,係輸出第一預測影像及第二預測影像,而 輸入至預設動態補償部301。另外,WP選擇器304,305,在各個WP適用旗標為1時,係使各個輸出端連接於附加權重之動態補償部302。WP選擇器304,305,係輸出第一預測影像及第二預測影像,而輸入至附加權重之動態補償部302。
預設動態補償部301,係依據由WP選擇器304,305輸入之2個單向預測影像(第一預測影像及第二預測影像)進行平均值處理,而產生預測影像。具體言之為,預設動態補償部301,在第一WP適用旗標及第二WP適用旗標為0時,係依據數式(1)進行平均值處理。
P[x,y]=Clip1((PL0[x,y]+PL1[x,y]+offset2)>>(shift2))………(1)
其中,P[x,y]為預測影像,PL0[x,y]為第一預測影像,PL1[x,y]為第二預測影像。offset2及shift2為平均值處理之中被實施捨入處理(round off)之參數,係由第一預測影像及第二預測影像之內部運算精確度而決定。假設預測影像之位元精確度為L,第一預測影像及第二預測影像之位元精確度為M(L≦M),則shift2可由數式(2)定義,offset2可由數式(3)定義。
shift2=(M-L+1)………(2)
offset2=(1<<(shift2-1)………(3)
例如預測影像之位元精確度為8,第一預測影像及第 二預測影像之位元精確度為14,藉由數式(2)可得shift2=7,由數式(3)可得offset2=(1<<6)。
另外,動態資訊(預測參數)所表示之預測模態為單向預測時,預設動態補償部301係僅使用第一預測影像,依據數式(4)而算出最終的預測影像。
P[x,y]=Clip1((PLX[x,y]+offset1)>> (shift1))………(4)
於此,PLX[x,y]為單向預測影像(第一預測影像),X為識別子用於表示參照清單之0或1之其中之一。例如參照清單為0時成為PL0[x,y],參照清單為1時成為PL1[x,y]。offset1及shift1為捨入處理之參數,係由第一預測影像之內部運算精確度來決定。假設預測影像之位元精確度為L,第一預測影像之位元精確度為M,則shift1可由數式(5)決定,offset1可由數式(6)決定。
shift1=(M-L)………(5)
offset1=(1<<(shift1-1)………(6)
例如預測影像之位元精確度為8,第一預測影像之位元精確度為14時,由數式(5)可得shift1=6,由數式(6)可得offset1=(1<<5)。
附加權重之動態補償部302,係依據由WP選擇器304,305輸入之2個單向預測影像(第一預測影像及第二預測影像)以及由WP參數控制部303輸入之權重資訊, 進行附加權重之動態補償。具體言之為,附加權重之動態補償部302,在第一WP適用旗標及第二WP適用旗標為1時,係依據數式(7)進行附加權重之處理。
P[x,y]=Clip1(((PL0[x,y]* w0C +PL1[x,y]* w1C +(1<<logWDC ))>>(logWDC +1))+((o0C +o1C +1)>>1))………(7)
於此,w0C 為第一預測影像對應之權重係數,w1C 為第二預測影像對應之權重係數,o0C 為第一預測影像對應之偏移值,o1C 為第二預測影像對應之偏移值。以下分別稱為第一權重係數,第二權重係數,第一偏移值,第二偏移值。logWDC 為個別之權重係數之固定小數點精確度之表示用參數。變數C表示信號成分。例如YUV空間信號時,亮度信號設為C=Y,Cr色差信號設為C=Cr,Cb色差成分設為C=Cb而予以表示。
另外,附加權重之動態補償部302,在第一預測影像及第二預測影像和預測影像間之運算精確度不同時,係以使固定小數點精確度之logWDC 控制成為數式(8)而實現捨入處理。
logWD’C =logWDC +offset1………(8)
捨入處理,可以將數式(7)之logWDC 替換為數式(8)之logWD’C 而實現。例如預測影像之位元精確度為8 ,第一預測影像及第二預測影像之位元精確度為14時,藉由再度設定logWDC ,可實現和數式(1)之shift2同樣之運算精確度的整批捨入處理。
另外,動態資訊(預測參數)所示之預測模態為單向預測時,附加權重之動態補償部302,係僅使用第一預測影像,依據數式(9)而算出最終的預測影像。
P[x,y]=Clip1((PLX[x,y]* wXC +(1<<logWDC -1))>>(logWDC ))………(9)
於此,PLX[x,y]表示單向預測影像(第一預測影像),wXC 表示單向預測對應之權重係數,X為識別子用於表示參照清單之0或1之其中之一。例如參照清單為0時成為PL0[x,y],w0C ,參照清單為1時成為PL1[x,y],w1C
另外,附加權重之動態補償部302,在第一預測影像及第二預測影像和預測影像之間之運算精確度不同時,係和雙向預測時同樣以使固定小數點精確度之logWDC 成為數式(8)的方式進行控制而實現捨入處理。
捨入處理,係將數式(7)之logWDC 替換為數式(8)之logWD’C 而可以實現。例如預測影像之位元精確度為8,第一預測影像之位元精確度為14時,藉由logWDC 之再設定,可以實現和數式(4)之shift1同樣之運算精確度之整批捨入處理。
圖7表示第1實施形態之權重係數之固定小數點精確 度之一例之說明圖,係表示存在著時間域上之明暗度變化的動態影像與灰階值之間之變化之一例。於圖7所示例,假設編碼對象幀為Frame(t),時間域上1個前之幀設為Frame(t-1),時間域上1個後之幀設為Frame(t+1)。如圖7所示,由白變化為黑之Fade影像之中,影像之明暗度(灰階值)隨時間呈減少。權重係數係表示圖7之中變化之程度,由數式(7)及數式(9)可知,明暗度變化不存在時係取1.0之值。固定小數點精確度,係用於控制權重係數之小數點所對應之變動幅的參數,不存在明暗度變化時之權重係數成為1<<logWDC
另外,單向預測時,第二預測影像對應之各種參數(第二WP適應旗標,第二權重係數,及第二偏移值之資訊)未被利用,因此可以設定為預定之初期值。
回至圖1,動態評估部109,係依據輸入影像及由預測影像產生部107輸入之參照影像進行複數幀間之動態評估,而輸出動態資訊及WP參數資訊,將動態資訊輸入至預測影像產生部107及編碼部110,將WP參數資訊輸入至預測影像產生部107及索引設定部108。
動態評估部109,係藉由例如以和預測對象畫素區塊之輸入影像同一位置所對應之複數個參照影像為起點而計算差分值,算出誤差,於分數精確度範圍內實施該位置之位移,探詢出誤差最小之區塊的區塊匹配等之手法,來算出最適當之動態資訊。動態評估部109,在雙向預測時,係使用單向預測所導出之動態資訊,進行數式(1)及數 式(4)所示包含預設動態補償預測的區塊匹配,而算出雙向預測之動態資訊。
此時,動態評估部109,係藉由進行數式(7)及數式(9)所示包含附加權重之動態補償預測的區塊匹配,而可以算出WP參數資訊。另外,於WP參數資訊之算出時亦可利用,使用輸入影像之明暗度梯度來算出權重係數或偏移值的方法,或藉由編碼時之預測誤差之累積而進行權重係數或偏移值之算出方法等。另外,WP參數資訊可以使用對應於各編碼裝置事先設定之固定值。
於此,參照圖7說明,由時間域上呈明暗度變化的動態影像算出權重係數,權重係數之固定小數點精確度及偏移值的方法。如上述說明,如圖7所示在由白變化為黑的Fade影像中,影像之明暗度(灰階值)係隨時間呈減少。動態評估部109係藉由計算該梯度而可以算出權重係數。
另外,權重係數之固定小數點精確度係表示該梯度之精確度的資訊,動態評估部109,可由參照影像之時間域上之距離以及影像明暗度之變化度,算出最適當之值。例如於圖7,Frame(t-1)~Frame(t+1)間之權重係數以小數點精確度表示為0.75時,在1/4精確度下可表現3/4,動態評估部109,係將固定小數點精確度設為2(1<<2)。固定小數點精確度之值,係進行權重係數之編碼時對編碼量帶來影響,因此在考慮編碼量與預測精確度之情況下選擇最適當之值即可。另外,固定小數點精確度之值亦可設為事先設定之固定值。
另外,動態評估部109,係在梯度不一致時,藉由算出一次函數之切片對應之補正值(變動量),而可算出偏移值。例如於圖7,Frame(t-1)~Frame(t+1)間之權重係數以小數點精確度表示為0.60,固定小數點精確度為1(1<<1)時,權重係數設為1(亦即,相當於權重係數之小數點精確度0.50)之可能性變高。此情況下,權重係數之小數點精確度,係由最適當之值之0.60偏移至0.10,因此,動態評估部109,係由畫素之最大值計算出該部分之補正值,作為偏移值予以設定。畫素之最大值為255時,動態評估部109設定25(255×0.1)等之值即可。
另外,於第1實施形態係說明動態評估部109作為編碼裝置100之一機能,但動態評估部109不一定為編碼裝置100之必須之構成,例如亦可將動態評估部109設為編碼裝置100外之裝置。此情況下,將動態評估部109算出之動態資訊及WP參數資訊載入編碼裝置100即可。
索引設定部108,係受取由動態評估部109輸入之WP參數資訊,進行參照清單(清單編號)及參照影像(參照編號)之確認,將索引資訊予以輸出,而輸入至編碼部110。索引設定部108,係將由動態評估部109輸入的WP參數資訊映射至後述之語法要素而產生索引資訊。
圖8A及圖8B表示第1實施形態之WP參數資訊之一例之圖。P-slice時之WP參數資訊之一例係如圖8A所示,B-slice時之WP參數資訊之一例係如圖8A及圖8B所示。清單編號為表示預測方向之識別子,單向預測時取0 之值,雙向預測時可使用2種類之預測,因此取0與1之2個值。參照編號為和幀記憶體206所示之1~N對應之值。WP參數資訊,係依據每一參照清單及參照影像被保持,B-slice時因為參照影像設為N個,因此必要之資訊成為2N個。
回至圖1,編碼部110,係針對由量化部103輸入之量化轉換係數,由動態評估部109輸入之動態資訊,由索引設定部108輸入之索引資訊,及編碼控制部111所指定之量化資訊等之各種編碼參數,進行編碼處理而產生編碼資料。編碼處理例如可為霍夫曼編碼(Huffman coding)或算術編碼等。
編碼參數係指預測方法等之表示用的預測資訊,量化轉換係數相關的資訊,及量化相關的資訊等之解碼所必要之參數。例如編碼控制部111可以具有的未圖示之內部記憶體,於該內部記憶體將編碼參數予以保持,在進行畫素區塊之編碼時可使用鄰接之已編碼完成之畫素區塊之編碼參數。例如於H.264之幀內預測,可由編碼完成之鄰接區塊之預測資訊導出畫素區塊之預測資訊。
編碼部110,係依據編碼控制部111所管理之適當之輸出時序將產生之編碼資料予以輸出。輸出之編碼資料,例如係於未圖示之多重化部等實施各種資訊之多重化處理,而暫時儲存於未圖示之輸出緩衝器等之後,被輸出至例如未圖示之儲存系(儲存媒體)或傳送系(通信線路)。
編碼部110係具備:亂度編碼部110A,及索引再構 成部110B。
亂度編碼部110A,係對輸入之資訊進行可變長編碼或算術編碼等之編碼處理。例如,於H.264係使用內容適應性之可變長編碼(CAVLC:Context based Adaptive Variable Length Coding)或內容適應性之二進制算術編碼(CABAC:Context based Adaptive Binary Arithmetic Coding)等。
索引再構成部110B,係為削減由索引設定部108輸入的索引資訊之語法要素之編碼長度,而對應於語法要素之參數之特徵進行預測處理,算出語法要素即值與預測值之間的差分值,而輸出至亂度編碼部110A。預測處理之具體例如後述。
圖9表示第1實施形態之編碼裝置100使用的語法500之一例之圖。語法500,係表示編碼裝置100進行輸入影像(動態影像資料)之編碼而產生的編碼資料之構造。對編碼資料進行解碼時,後述之解碼裝置,係參照和語法500為同一之語法構造進行動態影像之語法解釋。
語法500,係包含高階語法(high level syntax)501,片段層級語法(slice level syntax)502及編碼樹狀層級語法(code tree level syntax)503之3個部分(part)。高階語法501,係包含較片段更上位之層(layer)之語法資訊。片段係指包含於幀或場的矩形區域或連續區域。片段層級語法502,係包含對各片段進行解碼化之必要資訊。編碼樹狀層級語法503,係包含對各編碼樹狀(亦即 ,各編碼樹狀區塊)進行解碼之必要的資訊。彼等各部位係包含更詳細之語法。
高階語法501,係包含序列參數群組語法(sequence parameter set syytax)504,映像參數群組語法(picture parameter set syytax)505,及適應參數群組語法(adaptation parameter set syntax)506等之序列及映像層級之語法。
片段層級語法502,係包含片段標頭語法(slice header syntax)507,pred weight table syntax508,及片段資料語法(slice data syntax)509等。pred weight table syntax508係由片段標頭語法507被叫出。
編碼樹狀層級語法503,係包含編碼樹狀單元語法510,轉換單元語法(transform unit syntax)511,及預測單元語法(prediction unit syntax)512等。編碼樹狀單元語法510可以具有的四等分構造。具體言之為,作為編碼樹狀單元語法510之語法要素,更進一步可以再度叫出編碼樹狀單元語法510。亦即,可將1個編碼樹狀區塊予以四等分細分化。另外,於編碼樹狀單元語法510內包含轉換單元語法511。轉換單元語法511,係於四等分之最末端之各編碼樹狀單元語法510被叫出。轉換單元語法511,係記述和逆正交轉換及量化等相關之資訊。於彼等之語法亦可記述附加權重之動態補償預測相關的資訊。
圖10表示第1實施形態之映像參數群組語法505之一例之圖。weighted_pred_flag,例如係用於表示P-slice 相關的第1實施形態之附加權重之補償預測之有效或無效之語法要素。weighted_pred_flag為0時,P-slice內之第1實施形態之附加權重之動態補償預測成為無效。因此,包含於WP參數資訊的WP適用旗標常時被設為0,WP選擇器304,305,係將各個輸出端連接於預設動態補償部301。另外,weighted_pred_flag為1時,P-slice內之第1實施形態之附加權重之動態補償預測為有效。
另外,作為其他之例,在weighted_pred_flag為1時,可於更下位之層級(片段標頭,編碼樹狀區塊,轉換單元,及預測單元等)之語法,依據片段內部之局部區域之每一區域來規定第1實施形態之附加權重之動態補償預測之有效或無效。
weighted_bipred_idc,例如係表示B-slice相關的第1實施形態之附加權重之補償預測之有效或無效之語法要素。weighted_bipred_idc為0時,B-slice內之第1實施形態之附加權重之動態補償預測為無效。因此,包含於WP參數資訊的WP適用旗標被常時設為0,WP選擇器304,305,係將各個輸出端連接於預設動態補償部301。另外,weighted_bipred_idc為1時,B-slice內之第1實施形態之附加權重之動態補償預測為有效。
另外,作為其他之例,於weighted_bipred_idc為1時,可於更下位之層級(片段標頭,編碼樹狀區塊,及轉換單元等)之語法,對應於片段內部之局部區域之每一區域針對第1實施形態之附加權重之動態補償預測之有效或無 效實施規定。
圖11係表示第1實施形態之片段標頭語法507之一例。slice_type係表示片段(slice)之片段形式(slice-type)(I-slice,P-slice,B-slice等)。pic_parameter_set_id,係表示參照其中任一映像參數群組語法505之識別子。num_ref_idx_active_override_flag,係表示有效之參照影像之數更新與否之旗標,本旗標為1時,係表示用於定義參照清單之參照影像數的num_ref_idx_l0_active_minus1及num_ref_idx_l1_active_minus1被使用。pred_weight_table( ),係表示附加權重之動態補償預測所使用的pred weight table syntax之函數,前述之weighted_pred_flag為1而且P-slice時,及weighted_bipred_idc為1而且B-slice時,本函數被叫出。
圖12係表示第1實施形態之pred weight table syntax508之一例之圖。luma_log2_weight_denom,係表示片段中之亮度信號之權重係數之固定小數點精確度,為數式(7)或數式(9)之logWDC 所對應之值。chroma_log2_weight_denom,係表示片段之中色差信號之權重係數之固定小數點精確度,為數式(7)或數式(9)之logWDC 所對應之值。chroma_format_idc,係表示色空間用的識別子,MONO_IDX為黑白映像之表示用值。num_ref_common_active_minus1,係表示由包含於片段之中之共通清單的參照影像之數減去1之值。
luma_weight_l0_flag及luma_weight_l1_flag係表示 清單0及清單1個別所對應之亮度信號之中之WP適應旗標。本旗標為1時,於片段內全域第1實施形態之亮度信號之附加權重之動態補償預測成為有效。chroma_weight_l0_flag及chroma_weight_l1_flag係表示清單0及清單1個別所對應之色差信號之中之WP適應旗標。本旗標為1時,於片斷內全域第1實施形態之色差信號之附加權重之動態補償預測成為有效。luma_weight_l0[i]及luma_weight_l1[i],係清單0及清單1個別所管理的第i編號對應之亮度信號之權重係數。luma_offset_l0[i]及luma_offset_l1[i],係清單0及清單1個別管理的第i編號所對應之亮度信號之偏移值。彼等係分別為對應於數式(7)或數式(9)之w0C ,w1C ,o0C ,o1C 之值。但是,設為C=Y。
chroma_weight_l0[i][j]及chroma_weight_l1[i][j],係清單0及清單1個別所管理的第i編號對應之色差信號之權重係數。chroma_offset_l0[i][j]及chroma_offset_l1[i][j],係清單0及清單1個別所管理第i編號所對應之色差信號之偏移值。彼等係分別對應於數式(7)或數式(9)之w0C 、w1C 、o0C 、o1C 之值。但是,設為C=Cr或Cb。j係表示色差成分之組成分,例如YUV4:2:0信號時,j=0係表示Cr成分,j=1係表示Cb成分。
於此,詳細說明語法構成中之附加權重之預測相關連之個別之語法要素之預測方法。語法要素之預測係由索引再構成部110B進行。圖13係表示第1實施形態之預測方 法之顯模式(explicit mode)的語法構成一例之圖。於圖13所示例,係將導入預測的語法要素附加delta之接頭語,彼等之語法構成基本的係具有和圖12所示語法構成同一之構成要素。
首先,針對權重係數之固定小數點精確度之表示用的luma_log2_weight_denom及chroma_log2_weight_denom之信號間之預測方法加以說明。索引再構成部110B,係使用數式(10)進行luma_log2_weight_denom及chroma_log2_weight_denom之信號間之預測處理,使用數式(11)進行復原處理。於此,如圖12及圖13所示,luma_log2_weight_denom先行被定義,因此由luma_log2_weight_denom之值進行chroma_log2_weight_denom之預測。
delta_chroma_log2_weight_denom=(chroma_log2_weight_denom-luma_log2_weight_denom)………(10)
chroma_log2_weight_denom=(luma_log2_weight_denom+delta_chroma_log2_weight_denom)………(11)
圖14係表示第1實施形態之chroma_log2_weight_denom之預測處理之一例之流程。
首先,索引再構成部110B,係以設定於索引資訊的luma_log2_weight_denom作為預測值予以導出(步驟S101)。
接著,索引再構成部110B,係由chroma_log2_ weight_denom減去luma_log2_weight_denom(步驟S102),以差分值作為delta_chroma_log2_weight_denom而設定於索引資訊(步驟S103)。
圖15係表示第1實施形態之chroma_log2_weight_denom之復原處理之一例之流程。
首先,索引再構成部110B,係以已設定於索引資訊的luma_log2_weight_denom作為預測值予以導出(步驟S201)。
接著,索引再構成部110B,係將luma_log2_weight_denom相加於delta_chroma_log2_weight_denom(步驟S202),以加算值作為chroma_log2_weight_denom而設定於索引資訊(步驟S203)。
Fade(淡)效果,一般而言在色空間別上較使呈現不同的時間域上之變化狀況,因此每一信號成分之固定小數點精確度,在亮度成分與色差成分上具有強烈相關性。因此,藉由在色空間內進行預測,可以削減固定小數點精確度之表示用資訊量。
另外,於數式(10),雖由色差成分減算亮度成分,但亦可由亮度成分減算色差成分。此情況下,對應於數式(10)亦將數式(11)之式予以變形即可。
接著,針對亮度及色差信號之權重係數個別之表示用的luma_weight_lx[i]及chroma_weight_lx[i][j]之預測方法加以說明。於此,x係表示0或1之識別子。luma_weight_lx[i]及chroma_weight_lx[i][j]之值,係分別對應 於luma_log2_weight_denom及chroma_log2_weight_denom之值而增減。例如,luma_log2_weight_denom之值為3時,假設為較少明暗度變化時之luma_weight_lx[i],係成為(1<<3)。另外,luma_log2_weight_denom之值為5時,假設為較少明暗度變化時之luma_weight_lx[i],係成為(1<<5)。
因此,索引再構成部110B,係以明暗度變化不存在時之權重係數作為基準係數(預設值)進行預測處理。具體言之為,索引再構成部110B,係使用數式(12)~(13)進行luma_weight_lx[i]之預測處理,使用數式(14)進行復原處理。同樣,索引再構成部110B,係使用數式(15)~(16)進行chroma_weight_lx[i]之預測處理,使用數式(17)進行復原處理。
delta_luma_weight_lx[i]=(luma_weight_lx[i]-default_luma_weight_lx)………(12)
default_luma_weight_lx=(1<<luma_log2_weight_denom)………(13)
luma_weight_lx[i]=(default_luma_weight_lx+delta_luma_weight_lx[i])………(14)
delta_chroma_weight_lx[i][j]=(chroma_weight_lx[i][j]-default_chroma_weight_lx)………(15)
default_chroma_weight_lx=(1<<chroma_log2_weight_denom)………(16)
chroma_weight_lx[i][j]=(default_chroma_weight_lx+delta_chroma_weight_lx[i][j])………(17)
於此,default_luma_weight_lx,default_chroma_weight_lx分別為亮度成分、色差成分中之明暗度變化不存在時之預設值。
圖16係表示第1實施形態之luma_weight_lx[i]之預測處理之一例之流程。
首先,索引再構成部110B,係將設定於索引資訊的luma_log2_weight_denom導出(步驟S301),以default_luma_weight_lx作為預測值而算出(步驟S302)。
接著,索引再構成部110B,係由luma_weight_lx[i]減去default_luma_weight_lx(步驟S303),以差分值作為delta_luma_weight_lx[i]而設定於索引資訊(步驟S304)。
另外,對應於參照影像張數分而重複本處理,以使luma_weight_lx[i]適用於預測處理。
圖17係表示第1實施形態之luma_weight_lx[i]之復原處理之一例之流程。
首先,索引再構成部110B,係將已設定於索引資訊的delta_luma_weight_lx[i]予以導出(步驟S401),以default_luma_weight_lx作為預測值予以算出(步驟S402)。
接著,索引再構成部110B,係將delta_luma_weight_lx[i]相加於default_luma_weight_lx(步驟S403),以加算值作為luma_weight_lx[i]而設定於索引資訊(步驟S404)。
另外,於此係表示對亮度成分之流程,但對色差成分(chroma_weight_lx[i][j])亦可以同樣實現預測處理及復原處理。
包含Fade(淡)效果的影像,大多數之情況下係對某一特定之Fade(淡)變化點進行Fade(淡)處理,其以外之影像為通常之自然影像或不具Fade(淡)效果之影像。此時大多數情況下,權重係數係取無明暗度變化。其中,無明暗度變化時之初期值可由固定小數點精確度導出,以此作為預測值使用而可以削減權重係數之編碼量。
另外,亮度及色差信號之權重係數(luma_weight_lx[i]及chroma_weight_lx[i][j])之預測值,亦可由不同的參照編號或不同的POC編號來導出。此情況下,將最接近編碼對象片段之距離之參照編號設為base_idx,則索引再構成部110B使用數式(18)進行luma_weight_lx[i]之預測處理,使用數式(19)進行復原處理。同樣,索引再構成部110B,係使用數式(20)進行chroma_weight_lx[i][j]之預測處理,使用數式(21)進行復原處理。
delta_luma_weight_lx[i]=(luma_weight_lx[i]-luma_weight_lx[base_idx])………(18)
luma_weight_lx[i]=(delta_luma_weight_lx[i]+luma_weight_lx[base_idx])………(19)
delta_chroma_weight_lx[i][j]=(chroma_weight_lx[i][j]-chroma_weight_lx[base_idx][j])………(20)
chroma_weight_lx[i][j]=(delta_chroma_weight_lx[i][j]+chroma_weight_lx[base_idx][j])………(21)
於此,於數式(18)及(20),係成為i≠base_idx。base_idx所示之參照編號之權重係數,因為無法利用數式(18)及(20),因此利用數式(12)~(13)及(15)~(16)即可。
圖18係表示第1實施形態之luma_weight_lx[i]之預測處理之另一例之流程。
首先,索引再構成部110B,係將成為基準的參照編號之表示用之baseidx予以設定(步驟S501)。於此,baseidx之值假設設為0。
接著,索引再構成部110B,係依據baseidx由索引資訊導出luma_weight_lx[baseidx]而作為預測值(步驟S502)。另外,baseidx所示之索引資訊之luma_weight_lx[baseidx],係例如不進行預測而以即值進行編碼。
接著,索引再構成部110B,係由luma_weight_lx[i]減掉luma_weight_lx[baseidx](步驟S503),以差分值作為delta_luma_weight_lx[i]而設定於索引資訊(步驟S504)。
另外,對應於參照影像張數分重複進行本處理,可使baseidx以外之luma_weight_lx[i]適用預測處理。
圖19係表示第1實施形態之luma_weight_lx[i]之復原處理之另一例之流程。
首先,索引再構成部110B,係針對成為基準的參照 編號之表示用baseidx進行設定(步驟S601)。於此,baseidx之值假設係設為0。
接著,索引再構成部110B,係依據baseidx而由索引資訊導出luma_weight_lx[baseidx]作為預測值(步驟S602)。另外,baseidx所示之索引資訊之luma_weight_lx[baseidx],例如係不進行預測而以即值進行編碼或解碼。
接著,索引再構成部110B,係將delta_luma_weight_lx[i]相加於luma_weight_lx[baseidx](步驟S603),以加算值作為luma_weight_lx[i]而設定於索引資訊(步驟S604)。
另外,於此雖表示對於亮度成分之流程,但對於色差成分(chroma_weight_lx[i][j])亦同樣可實現預測處理及復原處理。另外,於此,係說明luma_weight_lx[i]之預測方法及復原方法,針對luma_offset_lx[i]亦可同樣進行預測、復原。
又,亮度及色差信號之權重係數(luma_weight_lx[i]及chroma_weight_lx[i][j])之預測值,亦可使用和編碼對象之參照片段之間之距離來導出。此情況下,索引再構成部110B,係使用數式(22)進行luma_weight_lx[i]之預測處理,使用數式(23)進行復原處理。同樣,索引再構成部110B,係使用數式(24)進行chroma_weight_lx[i][j]之預測處理,使用數式(25)進行復原處理。
delta_luma_weight_lx[i]=(luma_weight_lx[i]-luma_weight_lx[i-1])………(22)
luma_weight_lx[i]=(delta_luma_weight_lx[i]+luma_weight_lx[i-1])………(23)
delta_chroma_weight_lx[i][j]=(chroma_weight_lx[i][j]-chroma_weight_lx[i-1][j])………(24)
chroma_weight_lx[i][j]=(delta_chroma_weight_lx[i][j]+chroma_weight_lx[i-1][j])………(25)
於此,於數式(22)及(24)成為i≠0。
另外,本預測處理及解碼處理,於圖18及圖19之流程,係等同於對baseidx導入第i-1編號之值(i≠0),因此省略說明。另外,於此雖表示對亮度成分之流程,但關於色差成分(chroma_weight_lx[i][j])亦可同樣實現預測處理及復原處理。又,於此例雖說明luma_weight_lx[i]之預測方法及復原方法,針對luma_offset_lx[i]亦可同樣進行預測,復原。
可以被編碼對象片段參照的參照片段,基於編碼效率之觀點考量,大多數之情況係被設定成為時間域上距離或空間距離上接近編碼對象片段的片段。其中,時間域上距離上呈連續的片段之亮度變化之相關性高,因此權重係數及偏移值之時間域上距離上之相關性亦高。因此,使用成為基準的參照片段之權重係數及偏移值,針對時間域上不同的參照片段之權重係數及偏移值進行預測,則可以有效削減編碼量。另外,空間域上同一之參照片段,大多取同 一權重係數及偏移值,因此基於同樣之理由藉由預測之導入可以實現編碼量之削減。
接著,說明色差信號之偏移值之表示用的chroma_offset_lx[i][j]之預測方法。於YUV之色空間,色差成分係以相對於中央值之變化量來表現色彩。因此,可以使用權重係數,而將中央值納入考慮後之明暗度變化引起之變化量設為預測值。具體言之為,索引再構成部110B,係使用數式(26)~(27)進行chroma_offset_lx[i][j]之預測處理,使用數式(28)進行復原處理。
delta_chroma_offset_lx[i][j]=(chroma_offset_lx[i][j]+((MED * chroma_weight_lx[i][j])>>chroma_log2_weight_denom)-MED)………(26)
MED=(MaxChromaValue>>1)………(27)
於此,MaxChromaValue係表示獲得的色差信號之最大亮度。例如,8位元之信號時,MaxChromaValue為255,MED為128。
chroma_offset_lx[i][j]=(delta_chroma_offset_lx[i][j]-((MED * chroma_weight_lx[i][j])>>chroma_log2_weight_denom)+MED)………(28)
圖20係表示第1實施形態之chroma_offset_lx[i][j]之預測處理之一例之流程。
首先,索引再構成部110B,係將設定於索引資訊的 chroma_log2_weight_denom予以導出(步驟S701)。
接著,索引再構成部110B,係將設定於索引資訊的chroma_offset_lx[i][j]予以導出(步驟S702)。
接著,索引再構成部110B,係將色差信號之最大值(最大信號)之中間值予以導出(步驟S703)。
接著,索引再構成部110B,係導出delta_chroma_offsett_lx[i][j],將其設定於索引資訊(步驟S704)。
圖21係表示第1實施形態之chroma_offset_lx[i][j]之復原處理之一例之流程。
首先,索引再構成部110B,係將已設定於索引資訊的chroma_log2_weight_denom予以導出(步驟S801)。
接著,索引再構成部110B,係將設定於索引資訊的chroma_offset_lx[i][j]予以導出(步驟S802)。
接著,索引再構成部110B,係將色差信號之最大值(最大信號)之中間值予以導出(步驟S803)。
接著,索引再構成部110B,係導出chroma_offsett_lx[i][j],將其設定於索引資訊(步驟S804)。
利用色差信號之信號特性,針對納入對於中央值之變化量之考慮後的預測值予以導入,如此則,和直接對偏移值進行編碼時比較,可削減色差信號之偏移值之編碼量。
接著,針對被定義於H.264的利用附加權重預測之隱模式(implicit mode)附加權重預測之WP參數導出方法,進行權重係數及固定小數點精確度之預測值之導出的手法加以說明。於H.264之隱模式附加權重之預測,係 對應於參照片段間之時間域上距離(POC編號之時間比率),來導出權重係數(偏移值成為0)。參照片段間之時間域上距離,係依據POC編號,將編碼對象片段與參照片段間之距離予以導出,對應於該距離比來決定權重係數。此時,固定小數點精確度設為固定值5。
例如於H.264,係依據數式(29)所示虛擬碼來導出權重係數。
td=Clip3(-128,127,POCA-POCB) tb=Clip3(-128,127,POCT-POCA) tx=(td!=0)?((16384+abs(td/2))/td):(0) DistScaleFactor=Clip3(-1024,1023,(tb * tx+32)>>6) implicit_luma_weight_l0[i]=64-(DistScaleFactor>>2) implicit_luma_weight_l1[i]=DistScaleFactor>>2………(29)
於此,POCA係表示清單1所對應之參照影像A之POC編號,POCB係表示清單0所對應之參照影像B之POC編號,POCT係表示預測對象影像之POC編號。Clip3(L,M,N)為用於進行限幅(clip)處理的函數,用於使最後之引數N不超出最初之2個所表示之最小值L與最大值M之範囲。abs( )函數係將引數之絶對值予以送回的函數。td及tb係表示時間比,td表示清單1所對應之參照影像之POC編號與清單0所對應之參照影像之POC編號之差,tb係表示預測對象影像之POC編號與清單0所 對應之參照影像之POC編號之差。藉由彼等之值導出權重係數之距離中之縮尺(scaling)變數DistScaleFactor。依據DistScaleFactor,導出清單0及清單1所對應之權重係數(implicit_luma_weight_l0[i],implicit_luma_weight_l1[i])。另外,關於色差信號亦同樣設定。索引再構成部110B,係使用被導出的固定小數點精確度implicit_log2_weight_denom,使用數式(30)進行固定小數點精確度之預測。
delta_luma_log2_weight_denom=(luma_log2_weight_denom-implicit_log2_weight_denom)………(30)
另外,色差信號之固定小數點精確度亦可使用數式(30)來預測。該值係以數式(31)進行復原。
luma_log2_weight_denom=(delta_luma_log2_weight_denom+implicit_log2_weight_denom)………(31)
另外,色差信號之固定小數點精確度,亦藉由和數式(31)同樣之方法予以復原。
接著,說明權重係數之預測式。將隱模式權重係數設為implicit_luma_weight_lx[i],則索引再構成部110B依據數式(32)進行權重係數luma_weight_lx[i]之預測,使用數式(33)進行復原。
if(luma_log2_weight_denom>=implicit_log2_weight_denom){ norm_denom=(luma_log2_weight_denom-implicit_log2_weight_denom) delta_luma_weight_lx[i]=(luma_weight_lx[i]-(implicit_luma_weight_lx[i]<<norm_denom)) } else{ norm_denom=(implicit_log2_weight_denom-luma_log2_weight_denom) delta_luma_weight_lx[i]=(luma_weight_lx[i]-(implicit_luma_weight_lx[i]>>norm_denom)) }………(32)
於此,索引再構成部110B,係由隱模式附加權重之預測之固定小數點精確度判斷大或小,針對權重係數進行補正而利用於預測。
if(luma_log2_weight_denom>=implicit_log2_weight_denom){ norm_denom=(luma_log2_weight_denom-implicit_log2_weight_denom) luma_weight_lx[i]=(delta_luma_weight_lx[i]+(implicit_luma_weight_lx[i]<<norm_denom)) } else{ norm_denom=(implicit_log2_weight_denom-luma_log2_weight_denom) luma_weight_lx[i]=(delta_luma_weight_lx[i]+(implicit_luma_weight_lx[i]>>norm_denom)) }………(33)
另外,數式(32)係表示亮度成分之權重係數之例,色差成分亦可使用同樣方法導出預測值。
圖22係表示第1實施形態之luma_weight_lx[i]之預測處理之另一例之流程。
首先,索引再構成部110B,係將設定於索引資訊的luma_log2_weight_denom予以導出(步驟S901)。
接著,索引再構成部110B,係依據H.264之隱模式附加權重之預測之導出方法,將implicit_log2_weight_denom及implicit_luma_weight_lx[i]予以導出(步驟S902,S903)。
接著,索引再構成部110B,係判斷luma_log2_weight_denom是否為implicit_log2_weight_denom以上(步驟S904)。
luma_log2_weight_denom為implicit_log2_weight_denom以上時(步驟S904為是),索引再構成部110B,係由luma_log2_weight_denom減去implicit_log2_weight_denom(步驟S905),使implicit_luma_weight_lx[i]朝左移位減算值分,而導出預測值(步驟S906)。
另外,luma_log2_weight_denom不在implicit_log2_weight_denom以上時(步驟S904為否),索引再構成部110B,係由implicit_log2_weight_denom減去luma_log2_weight_denom(步驟S907),使implicit_luma_weight_lx[i]朝右移位減算值分而導出預測值(步驟S908)。
接著,索引再構成部110B,係由luma_weight_lx[i] 減去所導出之預測值(步驟S909),將減算後之值(差分值)設定於索引資訊(步驟S910)。
圖23係表示第1實施形態之luma_weight_lx[i]之復原處理之另一例之流程。
首先,索引再構成部110B,係將已設定於索引資訊的luma_log2_weight_denom予以導出(步驟S1001)。
接著,索引再構成部110B,係依據H.264之隱模式附加權重之預測之導出方法,將implicit_log2_weight_denom及implicit_luma_weight_lx[i]予以導出(步驟S1002,S1003)。
接著,索引再構成部110B,係判斷luma_log2_weight_denom是否為implicit_log2_weight_denom以上(步驟S1004)。
luma_log2_weight_denom為implicit_log2_weight_denom以上時(步驟S1004為是),索引再構成部110B,係由luma_log2_weight_denom減去implicit_log2_weight_denom(步驟S1005),使implicit_luma_weight_lx[i]朝左移位減算值分而導出預測值(步驟S1006)。
另外,luma_log2_weight_denom非為implicit_log2_weight_denom以上時(步驟S1004為否),索引再構成部110B,係由implicit_log2_weight_denom減去luma_log2_weight_denom(步驟S1007),使implicit_luma_weight_lx[i]朝右移位減算值分而導出預測值(步驟S1008)。
接著,索引再構成部110B,係於delta_luma_ weight_lx[i]加上所導出之預測值(步驟S1009),以加算值作為索引資訊而設定(步驟S1010)。
另外,上述說明之複數個預測手法不僅可以單獨使用,亦可組合而利用。例如,藉由將數式(10),數式(12)~(13),數式(15)~(16),及數式(26)~(27)予以組合等,可以有效削減索引資訊中之語法要素之編碼量。
如上述說明,於第1實施形態,索引設定部108,係將WP參數資訊映射至所對應之語法構成,依此而輸出索引資訊,索引再構成部110B,係依據該片段內被編碼的資訊,來預測語法要素之冗長表現。因此,依據第1實施形態,和針對語法要素就其即值直接進行編碼時比較,可以削減編碼量。
於此,依據編碼對象片段利用的語法要素之定義順序(編碼順序),由已編碼完成之語法要素導出畫面內相關性而作為預測值,或由假設無明暗度變化的預設值,來導出預測值,如此則,可以實現能活用語法要素特徵的預測,結果,語法要素之編碼必要的負擔(overhead)可以有效削減。
另外,可於第1實施形態之圖10~圖13例示之語法表格之行間,插入本實施形態未被規定的語法要素,亦可包含其他之條件分岐相關的記述。又,可將語法表格分割為複數個表格,將複數個語法表格予以統合。又,例示之各語法要素之用語可以任意變更。
如上述說明,第1實施形態之編碼裝置100,係利用編碼資訊之參數之相關性來刪除空間冗長性,可以迴避編碼效率降低之問題。和附加權重之動態補償預測所使用的針對語法要素其即值直接進行編碼的習知構成比較,編碼裝置100可以削減編碼量。
(第2實施形態)
第2實施形態係說明針對第1實施形態之編碼裝置編碼完成的編碼資料進行解碼的解碼裝置。
圖24係表示第2實施形態之解碼裝置800之構成之一例之方塊圖。
解碼裝置800,係將未圖示之輸入緩衝器等所儲存的編碼資料解碼成為解碼影像,作為輸出影像而輸出至未圖示之輸出緩衝器。編碼資料,係例如由圖1之編碼裝置100等被輸出,經由未圖示之儲存系,傳送系,或緩衝器等,而輸入至解碼裝置800。
解碼裝置800,如圖24所示,係具備解碼部801,逆量化部802,逆正交轉換部803,加算部804,預測影像產生部805,及索引設定部806。逆量化部802,逆正交轉換部803,加算部804,預測影像產生部805實質上分別為和圖1之逆量化部104,逆正交轉換部105,加算部106,預測影像產生部107同一或類似之要素。另外,圖24所示解碼控制部807,係控制解碼裝置800者,例如可由CPU等實現。
解碼部801,為進行編碼資料之解碼,係對應於每一幀或每一場(field)依據語法進行解讀。解碼部801係具備亂度解碼部801A,及索引再構成部801B。
亂度解碼部801A,係對各語法之編碼列依順進行亂度解碼,將包含預測模態、動態向量及參照編號等的動態資訊,附加權重之動態補償預測用之索引資訊,以及量化轉換係數等之編碼對象區塊之編碼參數予以再生。其中,編碼參數係指上述以外之轉換係數相關的資訊或量化相關的資訊等解碼所必要的全部參數。
具體言之為,亂度解碼部801A,係具有針對輸入的編碼資料進行可變長解碼處理或算術解碼處理等之解碼處理的機能。例如,於H.264係使用內容適應性之可變長編碼(CAVLC:Context based Adaptive Variable Length Coding)或內容適應性之二進制算術編碼(CABAC:Context based Adaptive Binary Arithmetic Coding)等。彼等之處理亦被稱為解讀處理。
索引再構成部801B,係對解讀後之索引資訊進行復原,而再構成索引資訊。具體言之為,索引再構成部801B,為削減解讀後之索引資訊之語法要素之編碼長度,而對應於語法要素之參數之特徵進行預測處理,實施語法要素之復原,而再構成索引資訊。預測處理之具體例如後述。
解碼部801,係將動態資訊、索引資訊及量化轉換係數予以輸出,將量化轉換係數輸入至逆量化部802,將索 引資訊輸入至索引設定部806,將動態資訊輸入至預測影像產生部805。
逆量化部802,係對由解碼部801輸入之量化轉換係數進行逆量化處理,獲得復原轉換係數。具體言之為,逆量化部802,係依據解碼部801使用的量化資訊進行逆量化。更詳言之為,逆量化部802,係將由量化資訊所導出的量化間距尺寸(quantization step size)和量化轉換係數予以相乘,而獲得復原轉換係數。逆量化部802,係將復原轉換係數輸出,而輸入至逆正交轉換部803。
逆正交轉換部803,係對由逆量化部802輸入之復原轉換係數,進行和編碼側進行的正交轉換所對應之逆正交轉換,獲得復原預測誤差。逆正交轉換部803,係使用復原預測誤差,而輸入至加算部804。
加算部804,係將逆正交轉換部803所輸入之復原預測誤差,和對應之預測影像予以相加,產生解碼影像。加算部804,係將解碼影像予以輸出,而輸入至預測影像產生部805。另外,加算部804,係以解碼影像作為輸出影像輸出至外部。輸出影像,之後係於未圖示之外部之輸出緩衝器等暫時被儲存,例如依據解碼控制部807管理的輸出時序,被輸出至未圖示之顯示器或監控器等之表示裝置系或映像裝置系。
索引設定部806,係受取由解碼部801輸入之索引資訊,轉換為WP參數資訊並輸出,而輸入至預測影像產生部805。具體言之為,索引設定部806,係於亂度解碼部 801A進行解碼處理,於索引再構成部801B受取再構成之索引資訊。索引設定部806,係對參照影像之清單與參照編號進行確認,轉換為WP參數資訊,並將轉換後之WP參數資訊輸出至預測影像產生部805。關於WP參數資訊,已如參照圖8A及圖8B之說明,於此省略說明。
預測影像產生部805,係使用由解碼部801輸入之動態資訊,由索引設定部806輸入之WP參數資訊,及由加算部804輸入之解碼影像,來產生預測影像815。
於此,參照圖4之同時,詳細說明預測影像產生部805。預測影像產生部805,係和預測影像產生部107同樣,具備複數幀動態補償部201,記憶體202,單向動態補償部203,預測參數控制部204,參照影像選擇器205,幀記憶體206,及參照影像控制部207。
幀記憶體206,係於參照影像控制部207之控制之下,以由加算部106輸入之解碼影像作為參照影像予以儲存。幀記憶體206,係具有的用於暫時保存參照影像的複數個記憶體群組FM1~FMN(N≧2)。
預測參數控制部204,係依據由解碼部801輸入的動態資訊,而準備參照影像編號與預測參數之複數個組合之表格。於此,動態資訊,係指用於表示動態補償預測使用之動態之變化量的動態向量或參照影像編號,單向/雙向預測等之預測模態相關的資訊等。預測參數係指動態向量及預測模態相關的資訊。預測參數控制部204,係依據動態資訊,來選擇預測影像之產生所使用之參照影像編號預 測參數之組合並輸出之,將參照影像編號輸入至參照影像選擇器205,將預測參數輸入至單向動態補償部203。
參照影像選擇器205為切換開關,其依據由預測參數控制部204輸入之參照影像編號,針對幀記憶體206具有的幀記憶體FM1~FMN之其中之一輸出端之連接進行切換。參照影像選擇器205,例如參照影像編號為0,則將FM1之輸出端連接於參照影像選擇器205之輸出端,參照影像編號為N-1時,將FMN之輸出端連接於參照影像選擇器205之輸出端。參照影像選擇器205,係將幀記憶體206具有的幀記憶體FM1~FMN之中,輸出端被連的幀記憶體所儲存之參照影像予以輸出,而輸入至單向動態補償部203。另外,於解碼裝置800,除預測影像產生部805以外,參照影像並未被利用,因而無須將參照影像輸出至預測影像產生部805之外部。
單向預測動態補償部203,係依據由預測參數控制部204輸入之預測參數及由參照影像選擇器205輸入之參照影像,進行動態補償預測處理,產生單向預測影像。關於動態補償預測已如參照圖5之說明,於此省略其說明。
單向預測動態補償部203,係輸出單向預測影像,暫時儲存於記憶體202。於此,當動態資訊(預測參數)表示雙向預測時,複數幀動態補償部201係使用2種類之單向預測影像進行附加權重之預測,因此單向預測動態補償部203,係將第1個對應之單向預測影像儲存於記憶體202,將第2個對應之單向預測影像直接輸出至複數幀動 態補償部201。於此,係以第1個對應之單向預測影像作為第一預測影像,以第2個對應之單向預測影像作為第二預測影像。
另外,亦可準備2個單向動態補償部203,分別產生2個單向預測影像。此情況下,當動態資訊(預測參數)表示單向預測時,單向動態補償部203可以第1個之單向預測影像作為第一預測影像而直接輸出至複數幀動態補償部201。
複數幀動態補償部201,係使用由記憶體202輸入的第一預測影像,由單向預測動態補償部203輸入的第二預測影像,及由動態評估部109輸入的WP參數資訊,進行附加權重之預測而產生預測影像。複數幀動態補償部201,係使用預測影像,而輸入至加算部804。
於此,參照圖6詳細說明複數幀動態補償部201。複數幀動態補償部201,係和預測影像產生部107同樣,具備:預設動態補償部301,附加權重之動態補償部302,WP參數控制部303,及WP選擇器304,305。
WP參數控制部303,係依據由索引設定部806輸入的WP參數資訊,將WP適用旗標及權重資訊予以輸出,將WP適用旗標輸入至WP選擇器304,305,將權重資訊輸入至附加權重之動態補償部302。
於此,WP參數資訊,係包含:權重係數之固定小數點精確度,第一預測影像所對應之第一WP適用旗標,第一權重係數,第一偏移值,第二預測影像所對應之第二 WP適應旗標,第二權重係數,及第二偏移值之資訊。WP適用旗標,係可對應於該參照影像及信號成分之每一個予以設定的參數,用來表示是否進行附加權重之動態補償預測。權重資訊,係包含:權重係數之固定小數點精確度,第一權重係數,第一偏移值,第二權重係數,及第二偏移值之資訊。另外,WP參數資訊,係表示和第1實施形態同樣之資訊。
詳言之為,WP參數控制部303,當由索引設定部806被輸入WP參數資訊時,係由WP參數資訊將第一WP適用旗標,第二WP適用旗標及權重資訊予以分離輸出之,將第一WP適用旗標輸入至WP選擇器304,將第二WP適用旗標輸入至WP選擇器305,將權重資訊輸入至附加權重之動態補償部302。
WP選擇器304,305,係依據由WP參數控制部303輸入之WP適用旗標,對各個預測影像之連接端進行切換。WP選擇器304,305,當各個WP適用旗標為0時,係將各個輸出端連接於預設動態補償部301。WP選擇器304,305,係將第一預測影像及第二預測影像予以輸出,而輸入至預設動態補償部301。另外,WP選擇器304,305,當各個WP適用旗標為1時,係將各個輸出端連接於附加權重之動態補償部302。WP選擇器304,305,係第一預測影像及第二預測影像予以輸出,而輸入至附加權重之動態補償部302。
預設動態補償部301,係依據由WP選擇器304,305 輸入之2個單向預測影像(第一預測影像及第二預測影像)進行平均值處理,產生預測影像。具體言之為,預設動態補償部301,當第一WP適用旗標及第二WP適用旗標為0時,係依據數式(1)進行平均值處理。
另外,動態資訊(預測參數)所示之預測模態為單向預測時,預設動態補償部301,係僅使用第一預測影像,依據數式(4)算出最終的預測影像。
附加權重之動態補償部302,係依據由WP選擇器304,305輸入之2個單向預測影像(第一預測影像及第二預測影像)及由WP參數控制部303輸入之權重資訊進行附加權重之動態補償。具體言之為,附加權重之動態補償部302,當第一WP適用旗標及第二WP適用旗標為1時,係依據數式(7)進行附加權重之處理。
另外,附加權重之動態補償部302,當第一預測影像及第二預測影像和預測影像間之運算精確度不同時,係使固定小數點精確度之logWDC 控制成為數式(8)的方式而實現捨入處理。
另外,動態資訊(預測參數)所示之預測模態為單向預測時,附加權重之動態補償部302,係僅使用第一預測影像,依據數式(9)算出最終的預測影像。
另外,附加權重之動態補償部302,在第一預測影像及第二預測影像和預測影像間之運算精確度不同時,係以使固定小數點精確度之logWDC 和雙向預測時同樣控制成為數式(8)而實現捨入處理。
關於權重係數之固定小數點精確度,已參照圖7加以說明,因此於此省略說明。另外,單向預測時,第二預測影像所對應之各種參數(第二WP適應旗標,第二權重係數,及第二偏移值之資訊)未被利用,因此設定為事先設定之初期值即可。
解碼部801,係利用圖9所示語法500。語法500,係表示解碼部801之解碼對象之編碼資料之構造。語法500已如參照圖9加以說明,因此於此省略說明。另外,關於映像參數群組語法505,除編碼改為解碼以外,已如參照圖10加以說明,因此於此省略說明。另外,關於片段標頭語法507,除編碼改為解碼以外,已如參照圖11加以說明,因此於此省略說明。另外,關於pred weight table syntax508,除編碼改為解碼以外,已如參照圖12加以說明,因此於此省略說明。
於此,係說明和語法構成中之附加權重之預測相關連的個別語法要素之預測方法之詳細。語法要素之預測,係藉由索引再構成部801B進行。第2實施形態之預測方法以顯模式呈現的語法構成,係和第2實施形態同樣,如圖13所示。
關於用於指定權重係數之固定小數點精確度的luma_log2_weight_denom及chroma_log2_weight_denom之信號間之預測方法,係使用數式(11)進行復原處理。復原處理之詳細如圖15所示。
關於亮度及色差信號之權重係數之表示用的 luma_weight_lx[i]及chroma_weight_lx[i][j]之預測方法,係使用數式(14)及(17)進行復原處理。復原處理之詳細如圖17所示。
關於藉由不同的參照編號或不同的POC編號,針對亮度及色差信號之權重係數(luma_weight_lx[i]及chroma_weight_lx[i][j])之預測值予以導出的預測方法,係使用數式(19)及(21)進行復原處理。復原處理之詳細係如圖19所示。
關於使用編碼對象之參照片段之距離,將亮度及色差信號之權重係數(luma_weight_lx[i]及chroma_weight_lx[i][j])之預測值予以導出的預測方法,係使用數式(23)及(25)進行復原處理。復原處理之詳細,於圖19之流程係等同於對baseidx導入第i-1編號之值(i≠0)。
關於利用H.264等所定義的附加權重預測之隱模式附加權重預測之WP參數導出方法,針對權重係數及固定小數點精確度之預測值予以導出的手法,係使用數式(31)及(33)進行復原處理。復原處理之詳細如圖23所示。
另外,上述說明之複數個預測手法不僅可以單獨使用,亦可組合而利用。例如,藉由將數式(11),數式(14),數式(17),及數式(28)予以組合等,可以有效削減索引資訊中之語法要素之編碼量。
如上述說明,於第2實施形態,解碼裝置800係利用編碼資訊之參數之相關性來刪除空間冗長性,而迴避編碼 效率降低之問題。解碼裝置800,和針對附加權重之動態補償預測所使用之語法要素直接(針對即值)進行編碼的習知構成比較,可以削減編碼量。
(變形例)
於上述第1~第2實施形態,係將幀分割為16×16畫素尺寸等之矩形區塊,由畫面左上之區塊朝右下依序進行編碼/解碼之例之說明(參照圖2A)。但是,編碼順序及解碼順序不限定於此例。例如由右下朝左上依序進行編碼及解碼亦可,由畫面中央朝畫面端以描繪渦卷方式進行編碼及解碼亦可。另外,由右上朝左下依序進行編碼及解碼亦可,由畫面端朝畫面中央以描繪渦卷方式進行編碼及解碼亦可。此情況下,對應於編碼順序而變化可以參照的鄰接畫素區塊之位置,因此只需適當變更為可利用之位置即可。
於上述第1~第2實施形態,係針對4×4畫素區塊,8×8畫素區塊,16×16畫素區塊等之預測對象區塊尺寸之例進行說明,但是預測對象區塊只要是均勻的區塊形状即可。例如預測對象區塊尺寸,可為16×8畫素區塊,8×16畫素區塊,8×4畫素區塊,4×8畫素區塊等。另外,無須於1個編碼樹狀區塊內統合全部區塊尺寸,複數個不同的區塊尺寸混在亦可。1個編碼樹狀區塊內混合複數個不同的區塊尺寸時,伴隨著分割數之增加,對分割資訊進行編碼或解碼之編碼量亦增加。因此,考慮分割資訊之編碼量 與局部解碼影像或解碼影像之品質之間之平衡,而選擇區塊尺寸為較好。
於上述第1~第2實施形態,為求簡單化,並未對亮度信號與色差信號之中之預測處理予以區別,關於色信號成分僅描述總括性說明。但是,預測處理在亮度信號與色差信號之間不同時,可以使用同一或不同的預測處理。亮度信號與色差信號之間使用不同的預測處理,則針對色差信號之選擇性預測處理,可以藉由和亮度信號同樣之方法來進行編碼或解碼。
於上述第1~第2實施形態,為求簡單化,並未對亮度信號與色差信號之中之附加權重之動態補償預測處理予以區別,關於色信號成分僅描述總括性說明。但是,附加權重之動態補償預測處理在亮度信號與色差信號之間不同時,可以使用同一或不同的附加權重之動態補償預測處理。亮度信號與色差信號之間使用不同的附加權重之動態補償預測處理,則針對色差信號之選擇性附加權重之動態補償預測處理,可以藉由和亮度信號同樣之方法來進行編碼或解碼。
於上述第1~第2實施形態,亦可於語法構成所示表之行間,插入本實施形態未規定的語法要素,亦可包含其以外之條件分岐相關的記述。或者,可將語法表格分割為複數個表格,予以統合。另外,無須使用同一之用語,可依利用形態任意變更。
如上述說明,各實施形態可以解消在進行附加權重之 動態補償預測時對語法構成之冗長資訊進行編碼之問題之同時,可實現高效率的附加權重之動態補償預測處理。因此,依據各實施形態,可提升編碼效率,換言之,亦可提升主觀畫質。
以上說明本發明幾個實施形態,但是彼等實施形態僅為例示,並非用來限定本發明。彼等新穎實施形態可以其他各種形態來實施,在不脫離發明要旨之範圍內可做各種省略,取代或變更。彼等實施形態或其變形,亦包含於發明之範圍或要旨之同時,亦包含於申請專利範圍記載之發明以及其之均等範疇內。
例如實現上述各實施形態之處理之程式,可以儲存於電腦可讀取之記憶媒體予以提供。記憶媒體,只要是磁碟,光碟(CD-ROM,CD-R,DVD等),光磁碟(MO等),半導體記憶體等可以記憶程式,而且,電腦可讀取的記憶媒體,則其記憶形式可為任意之形態。
另外,實現上述各實施形態之處理的程式,可以儲存於網際網路等之網路所連接的電腦(伺服器)上,經由網路下載至電腦(用戶端)亦可。
100‧‧‧編碼裝置
101‧‧‧減算部
102‧‧‧正交轉換部
103‧‧‧量化部
104‧‧‧逆量化部
105‧‧‧逆正交轉換部
106‧‧‧加算部
107‧‧‧預測影像產生部
108‧‧‧索引設定部
109‧‧‧動態評估部
110‧‧‧編碼部
110A‧‧‧亂度編碼部
110B‧‧‧索引再構成部
111‧‧‧編碼控制部
201‧‧‧複數幀動態補償部
202‧‧‧記憶體
203‧‧‧單向動態補償部
204‧‧‧預測參數控制部
205‧‧‧參照影像選擇器
206‧‧‧幀記憶體
207‧‧‧參照影像控制部
301‧‧‧預設動態補償部
302‧‧‧附加權重之動態補償部
303‧‧‧WP參數控制部
304,305‧‧‧WP選擇器
800‧‧‧解碼裝置
801‧‧‧解碼部
801A‧‧‧亂度解碼部
801B‧‧‧索引再構成部
802‧‧‧逆量化部
803‧‧‧逆正交轉換部
804‧‧‧加算部
805‧‧‧預測影像產生部
806‧‧‧索引設定部
807‧‧‧解碼控制部
[圖1]第1實施形態之編碼裝置之例之表示用之方塊圖。
[圖2]第1實施形態之畫素區塊之預測編碼順序序例之表示用之說明圖。
[圖3A]第1實施形態之編碼樹狀區塊(coding tree block)之區塊尺寸例之表示圖。
[圖3B]第1實施形態之編碼樹狀區塊的具體例之表示圖。
[圖3C]第1實施形態之編碼樹狀區塊之具體例之表示圖。
[圖3D]第1實施形態之編碼樹狀區塊之具體例之表示圖。
[圖4]第1實施形態之預測影像產生部之例之表示用之方塊圖。
[圖5]第1實施形態之雙向預測之中動態補償預測之動態向量之關係之例之表示圖。
[圖6]第1實施形態之複數幀動態補償部之例之表示用之方塊圖。
[圖7]第1實施形態之權重係數之固定小數點精確度之例之說明圖。
[圖8A]第1實施形態之WP參數資訊例之表示圖。
[圖8B]第1實施形態之WP參數資訊例之表示圖。
[圖9]第1實施形態之語法(Syntax)之例之表示圖。
[圖10]第1實施形態之映像參數群組語法(picture parameter set syntax)之例之表示圖。
[圖11]第1實施形態之片段標頭語法(slice header syntax)之例之表示圖。
[圖12]第1實施形態之pred weight table syntax(預測權重表格語法)之例之表示圖。
[圖13]第1實施形態之預測方法明確表示的語法構成之例之圖。
[圖14]第1實施形態之固定小數點精確度之預測處理例之表示用流程。
[圖15]第1實施形態之固定小數點精確度之復原處理例之表示用流程。
[圖16]第1實施形態之權重係數之預測處理例之表示用流程。
[圖17]第1實施形態之權重係數之復原處理例之表示用流程。
[圖18]第1實施形態之權重係數之預測處理之另一例之表示用流程。
[圖19]第1實施形態之權重係數之復原處理之另一例之表示用流程。
[圖20]第1實施形態之色差信號之預測處理例之表示用流程。
[圖21]第1實施形態之色差信號之復原處理例之表示用流程。
[圖22]第1實施形態之權重係數之預測處理例之另一例之表示用流程。
[圖23]第1實施形態之權重係數之復原處理例之另一例之表示用流程。
[圖24]第2實施形態之解碼裝置之構成例之表示用方塊圖。
100‧‧‧編碼裝置
101‧‧‧減算部
102‧‧‧正交轉換部
103‧‧‧量化部
104‧‧‧逆量化部
105‧‧‧逆正交轉換部
106‧‧‧加算部
107‧‧‧預測影像產生部
108‧‧‧索引設定部
109‧‧‧動態評估部
110‧‧‧編碼部
111‧‧‧編碼控制部
110A‧‧‧亂度編碼部
110B‧‧‧索引再構成部

Claims (16)

  1. 一種編碼方法,其特徵在於包含:索引設定步驟,係針對索引加以設定,該索引為用於表示權重係數與參照影像之資訊者;預測步驟,係將上述權重係數之基準值予以導出而作為預測值,該權重係數係表示至少1個參照影像與編碼對象之對象影像之間之畫素值變化成為特定基準以下者;及編碼步驟,係對上述權重係數與上述預測值之間之差分值進行編碼。
  2. 如申請專利範圍第1項之編碼方法,其中上述索引,係表示包含上述權重係數與上述權重係數之固定小數點精確度的組合;於上述預測步驟,係依據上述固定小數點精確度,來導出和上述對象影像之間之畫素值變化不存在時的上述權重係數之基準值,而以其作為預測值。
  3. 如申請專利範圍第2項之編碼方法,其中上述索引,係包含上述參照影像;另外包含:預測影像產生步驟,係在針對輸入影像分割而成的複數個區塊之中之對象區塊所參照的上述參照影像以及動態向量,進行動態補償預測而獲得的值,乘上上述權重係數,據以產生上述對象區塊之預測影像;及量化轉換係數產生步驟,係依據上述輸入影像與上述預測影像,來產生上述對象區塊之量化轉換係數; 於上述編碼步驟,係更進一步對上述量化轉換係數及上述動態向量進行編碼。
  4. 如申請專利範圍第3項之編碼方法,其中,上述索引,係包含偏移值(offset);於上述預測影像產生步驟,係針對輸入影像分割而成的複數個區塊之中之對象區塊所參照的上述參照影像及動態向量,進行動態補償預測而產生動態補償預測影像,於所產生的上述動態補償預測影像乘上上述權重係數,並加上上述偏移值,據以產生上述對象區塊之預測影像。
  5. 如申請專利範圍第4項之編碼方法,其中上述索引,係包含:亮度之權重係數、該亮度之權重係數之第1固定小數點精確度、色差之權重係數,及該色差之權重係數之第2固定小數點精確度;於上述預測步驟,係導出上述第1固定小數點精確度與上述第2固定小數點精確度之間的差分值作為預測值;於上述編碼步驟,係針對上述第1固定小數點精確度及上述第2固定小數點精確度之其中之一與上述預測值之間的差分值進行編碼。
  6. 如申請專利範圍第4項之編碼方法,其中上述索引,係包含:色差之權重係數,及該色差之偏移值;於上述預測步驟,係藉由在上述色差之最大亮度值之中間值,乘上上述色差之權重係數,而將減去上述色差之上述中間值後的值作為預測值予以導出; 於上述編碼步驟,係對上述色差之偏移值與上述預測值之間的差分值進行編碼。
  7. 如申請專利範圍第6項之編碼方法,其中於上述預測步驟,係針對上述色差之權重係數及上述色差之偏移值,將和上述對象區塊與上述參照影像之時間域上距離比呈對應而被設定的基準權重係數及基準偏移值、和上述基準權重係數及上述基準偏移值不同的用來表示時間域上距離的上述色差之權重係數、以及上述差分值予以導出而作為預測值;於上述編碼步驟,係針對上述色差之權重係數及上述色差之偏移值與上述預測值個別之間的差分值進行編碼。
  8. 如申請專利範圍第7項之編碼方法,其中於上述預測步驟,針對使用上述對象區塊與上述參照影像之時間域上距離比而以隱模式(implicit mode)導出的權重係數,藉由上述色差之權重係數之固定小數精確度以成為同一精確度的方式進行補正,將補正後的上述權重係數與上述色差之權重係數之間的差分值予以導出而作為預測值;於上述編碼步驟,係對補正後的上述權重係數與上述預測值之間的差分值進行編碼。
  9. 一種編碼裝置,其特徵在於包含:索引設定部,係針對索引加以設定,該索引為用於表示權重係數與參照影像之資訊者;索引再構成部,係將上述權重係數之基準值予以導出 而作為預測值,該權重係數係表示至少1個參照影像與編碼對象之對象影像之間之畫素值變化成為特定基準以下者;及亂度編碼部,係對上述權重係數與上述預測值之間之差分值進行編碼。
  10. 如申請專利範圍第9項之編碼裝置,其中上述索引,係表示包含上述權重係數與上述權重係數之固定小數點精確度的組合;於上述索引再構成部,係依據上述固定小數點精確度,來導出和上述對象影像之間之畫素值變化不存在時的上述權重係數之基準值,而以其作為預測值。
  11. 如申請專利範圍第10項之編碼裝置,其中上述索引,係包含上述參照影像;另外包含:預測影像產生部,係在針對輸入影像分割而成的複數個區塊之中之對象區塊所參照的上述參照影像以及動態向量,進行動態補償預測而獲得的值,乘上上述權重係數,據以產生上述對象區塊之預測影像;及量化部,係依據上述輸入影像與上述預測影像,來產生上述對象區塊之量化轉換係數;於上述亂度編碼部,係更進一步對上述量化轉換係數及上述動態向量進行編碼。
  12. 如申請專利範圍第11項之編碼裝置,其中,上述索引,係包含偏移值; 於上述預測影像產生部,係針對輸入影像分割而成的複數個區塊之中之對象區塊所參照的上述參照影像及動態向量,進行動態補償預測而產生動態補償預測影像,於所產生的上述動態補償預測影像乘上上述權重係數,並加上上述偏移值,據以產生上述對象區塊之預測影像。
  13. 如申請專利範圍第12項之編碼裝置,其中上述索引,係包含:亮度之權重係數、該亮度之權重係數之第1固定小數點精確度、色差之權重係數,及該色差之權重係數之第2固定小數點精確度;上述索引再構成部,係導出上述第1固定小數點精確度與上述第2固定小數點精確度之間的差分值作為預測值;上述亂度編碼部,係針對上述第1固定小數點精確度及上述第2固定小數點精確度之其中之一與上述預測值之間的差分值進行編碼。
  14. 如申請專利範圍第12項之編碼裝置,其中上述索引,係包含:色差之權重係數,及該色差之偏移值;上述索引再構成部,係藉由在上述色差之最大亮度值之中間值,乘上上述色差之權重係數,而將減去上述色差之上述中間值後的值作為預測值予以導出;上述亂度編碼部,係對上述色差之偏移值與上述預測值之間的差分值進行編碼。
  15. 如申請專利範圍第14項之編碼裝置,其中 上述索引再構成部,係針對上述色差之權重係數及上述色差之偏移值,將和上述對象區塊與上述參照影像之時間域上距離比呈對應而被設定的基準權重係數及基準偏移值、和上述基準權重係數及上述基準偏移值不同的用來表示時間域上距離的上述色差之權重係數、以及上述差分值予以導出而作為預測值;上述亂度編碼部,係針對上述色差之權重係數及上述色差之偏移值與上述預測值個別之間的差分值進行編碼。
  16. 如申請專利範圍第15項之編碼裝置,其中上述索引再構成部,針對使用上述對象區塊與上述參照影像之時間域上距離比而以隱模式(implicit mode)導出的權重係數,藉由上述色差之權重係數之固定小數精確度以成為同一精確度的方式進行補正,將補正後的上述權重係數與上述色差之權重係數之間的差分值予以導出而作為預測值;上述亂度編碼部,係對補正後的上述權重係數與上述預測值之間的差分值進行編碼。
TW101101751A 2011-10-17 2012-01-17 Encoding method and coding device TWI492635B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/073852 WO2013057783A1 (ja) 2011-10-17 2011-10-17 符号化方法及び復号方法

Publications (2)

Publication Number Publication Date
TW201318435A TW201318435A (zh) 2013-05-01
TWI492635B true TWI492635B (zh) 2015-07-11

Family

ID=48140461

Family Applications (2)

Application Number Title Priority Date Filing Date
TW101101751A TWI492635B (zh) 2011-10-17 2012-01-17 Encoding method and coding device
TW104113292A TWI569630B (zh) 2011-10-17 2012-01-17 Encoding, decoding method and coding, decoding device

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW104113292A TWI569630B (zh) 2011-10-17 2012-01-17 Encoding, decoding method and coding, decoding device

Country Status (23)

Country Link
US (7) US9521422B2 (zh)
EP (6) EP3675499B1 (zh)
KR (6) KR101624058B1 (zh)
CN (5) CN107027026B (zh)
AU (5) AU2011379259B2 (zh)
BR (5) BR122020003041B1 (zh)
CA (1) CA2847299C (zh)
CY (2) CY1123691T1 (zh)
DK (2) DK3217667T3 (zh)
ES (2) ES2848525T3 (zh)
HR (2) HRP20201778T1 (zh)
HU (2) HUE053615T2 (zh)
LT (2) LT3197164T (zh)
MX (3) MX2014002392A (zh)
PL (2) PL3197164T3 (zh)
PT (2) PT3217667T (zh)
RS (2) RS61015B1 (zh)
RU (3) RU2586876C2 (zh)
SG (1) SG11201400294SA (zh)
SI (2) SI3217667T1 (zh)
TW (2) TWI492635B (zh)
WO (1) WO2013057783A1 (zh)
ZA (1) ZA201401563B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101753551B1 (ko) * 2011-06-20 2017-07-03 가부시키가이샤 제이브이씨 켄우드 화상 부호화 장치, 화상 부호화 방법 및 화상 부호화 프로그램을 저장한 기록매체
LT3197164T (lt) 2011-10-17 2021-02-10 Kabushiki Kaisha Toshiba Dekodavimo aparatas ir dekodavimo būdas
CN103765897B (zh) 2012-06-27 2017-09-26 株式会社东芝 编码设备、解码设备、编码方法以及解码方法
US10368072B2 (en) 2015-05-29 2019-07-30 Qualcomm Incorporated Advanced arithmetic coder
KR20170058838A (ko) * 2015-11-19 2017-05-29 한국전자통신연구원 화면간 예측 향상을 위한 부호화/복호화 방법 및 장치
WO2017086738A1 (ko) * 2015-11-19 2017-05-26 한국전자통신연구원 영상 부호화/복호화 방법 및 장치
KR102383106B1 (ko) * 2016-07-05 2022-04-06 주식회사 케이티 비디오 신호 처리 방법 및 장치
US10805631B2 (en) 2016-09-23 2020-10-13 Lg Electronics Inc. Method and apparatus for performing prediction using template-based weight
JP6700489B2 (ja) 2016-09-30 2020-05-27 華為技術有限公司Huawei Technologies Co.,Ltd. インター予測を介する画像符号化および復号のための方法および装置
CA3041856A1 (en) * 2016-12-28 2018-07-05 Sony Corporation Image processing apparatus and method
CN107995490A (zh) * 2017-12-14 2018-05-04 清华大学 信号获取方法及装置
TWI789986B (zh) * 2018-02-28 2023-01-11 弗勞恩霍夫爾協會 合成式預測及限制性合併技術
CN108366242B (zh) * 2018-03-07 2019-12-31 绍兴文理学院 按视频内容自适应调整色度失真权重因子的视频压缩方法
EP3550834A1 (en) * 2018-04-06 2019-10-09 Comcast Cable Communications LLC Encoding of video cross-fades using weighted inter-prediction
CN108614778B (zh) * 2018-05-10 2022-08-16 天津大学 基于高斯过程回归的安卓App程序演化变更预测方法
US11689731B2 (en) 2018-09-21 2023-06-27 Sharp Kabushiki Kaisha Image decoding apparatus and image coding apparatus that involves bi-prediction
USD944065S1 (en) * 2019-08-30 2022-02-22 American Torch Tip, Co. Push button for releasing a gooseneck in a welding torch
CA3167535A1 (en) * 2020-01-12 2021-03-11 Huawei Technologies Co., Ltd. Method and apparatus of harmonizing weighted prediction with non-rectangular merge modes

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100074332A1 (en) * 2008-09-23 2010-03-25 Qualcomm Incorporated Offset calculation in switched interpolation filters
US20100118943A1 (en) * 2007-01-09 2010-05-13 Kabushiki Kaisha Toshiba Method and apparatus for encoding and decoding image
TW201318437A (zh) * 2011-10-17 2013-05-01 Toshiba Kk 編碼方法及解碼方法

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR9702270A (pt) * 1996-05-17 1999-07-20 Matsushita Electric Ind Co Ltd Aparelho de codificacão de imagem aparelho de codificacão de imagem método de codificacão de imagem meio de gravacao do programa de codificacão de imagem
DE19952982B4 (de) 1999-11-03 2004-01-29 Acgt Progenomics Ag Verfahren zur gerichteten Verpackung von molekularen Substanzen in Proteinhüllen
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
JP4015934B2 (ja) 2002-04-18 2007-11-28 株式会社東芝 動画像符号化方法及び装置
BR0302719A (pt) 2002-01-18 2004-03-09 Toshiba Kk Toshiba Corp Método e aparelho de codificação de vìdeo e método e aparelho de decodificação de vìdeo
MXPA05003464A (es) 2002-10-01 2005-07-05 Thomson Licensing Sa Ponderacion implicita de imagenes de referencia en un codificador de video.
JP2004179687A (ja) 2002-11-22 2004-06-24 Toshiba Corp 動画像符号化/復号化方法及び装置
CN100403793C (zh) 2002-12-04 2008-07-16 汤姆森许可贸易公司 利用加权预测对视频交叉衰落进行编码
WO2005004492A2 (en) 2003-06-25 2005-01-13 Thomson Licensing S.A. Method and apparatus for weighted prediction estimation using a displaced frame differential
JP2005318297A (ja) 2004-04-28 2005-11-10 Toshiba Corp 動画像符号化・復号方法及び装置
US8731054B2 (en) * 2004-05-04 2014-05-20 Qualcomm Incorporated Method and apparatus for weighted prediction in predictive frames
US8284837B2 (en) * 2004-09-16 2012-10-09 Thomson Licensing Video codec with weighted prediction utilizing local brightness variation
TW200612385A (en) * 2004-10-08 2006-04-16 Mstar Semiconductor Inc Image contrast enhancing device and method thereof
US8638862B2 (en) 2005-03-18 2014-01-28 Sharp Laboratories Of America, Inc. Methods and systems for upsampling filter design
US8457203B2 (en) * 2005-05-26 2013-06-04 Ntt Docomo, Inc. Method and apparatus for coding motion and prediction weighting parameters
US20060293038A1 (en) 2005-06-23 2006-12-28 Sbc Knowledge Ventures L.P. Home cellular system
JP2007043651A (ja) 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
JP2007081518A (ja) * 2005-09-12 2007-03-29 Victor Co Of Japan Ltd 動画像符号化装置および動画像符号化方法
AU2006320064B2 (en) * 2005-11-30 2010-09-09 Kabushiki Kaisha Toshiba Image encoding/image decoding method and image encoding/image decoding apparatus
US7831434B2 (en) 2006-01-20 2010-11-09 Microsoft Corporation Complex-transform channel coding with extended-band frequency coding
JP5249784B2 (ja) * 2006-01-23 2013-07-31 マックス−プランク−ゲゼルシャフト・ツア・フェルデルング・デア・ヴィッセンシャフテン・エー・ファオ 高ダイナミックレンジコーデック
WO2007092215A2 (en) 2006-02-02 2007-08-16 Thomson Licensing Method and apparatus for adaptive weight selection for motion compensated prediction
CN101072355B (zh) * 2006-05-12 2010-07-28 中国科学院计算技术研究所 一种加权预测运动补偿方法
US8488668B2 (en) * 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
CN101335902B (zh) * 2007-06-25 2010-06-02 华为技术有限公司 视频编解码中的加权预测方法和装置
US20110007893A1 (en) 2009-07-08 2011-01-13 Berk Sunar Method and apparatus for fingerprinting and copy protecting optical recording media
EP2302933A1 (en) 2009-09-17 2011-03-30 Mitsubishi Electric R&D Centre Europe B.V. Weighted motion compensation of video
US9083984B2 (en) 2010-03-19 2015-07-14 Texas Instruments Incorporated Adaptive coding structure and adaptive FCode determination in video coding
WO2011126288A2 (en) 2010-04-05 2011-10-13 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding image and method and apparatus for decoding image using adaptive coefficient scan order
EP2375754A1 (en) * 2010-04-09 2011-10-12 Mitsubishi Electric R&D Centre Europe B.V. Weighted motion compensation of video
US20110261885A1 (en) 2010-04-27 2011-10-27 De Rivaz Peter Francis Chevalley Method and system for bandwidth reduction through integration of motion estimation and macroblock encoding
LT3197164T (lt) 2011-10-17 2021-02-10 Kabushiki Kaisha Toshiba Dekodavimo aparatas ir dekodavimo būdas
CN103765897B (zh) 2012-06-27 2017-09-26 株式会社东芝 编码设备、解码设备、编码方法以及解码方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100118943A1 (en) * 2007-01-09 2010-05-13 Kabushiki Kaisha Toshiba Method and apparatus for encoding and decoding image
US20100074332A1 (en) * 2008-09-23 2010-03-25 Qualcomm Incorporated Offset calculation in switched interpolation filters
TW201318437A (zh) * 2011-10-17 2013-05-01 Toshiba Kk 編碼方法及解碼方法

Also Published As

Publication number Publication date
KR101829179B1 (ko) 2018-03-29
PL3217667T3 (pl) 2020-12-14
AU2011379259A1 (en) 2014-03-27
CA2847299C (en) 2016-10-11
ES2828048T3 (es) 2021-05-25
EP3197164B1 (en) 2020-12-09
EP3675497A1 (en) 2020-07-01
CN107071415A (zh) 2017-08-18
US20200177905A1 (en) 2020-06-04
KR20140059218A (ko) 2014-05-15
US20200177903A1 (en) 2020-06-04
US9826247B2 (en) 2017-11-21
EP3217667A1 (en) 2017-09-13
RU2014107490A (ru) 2015-11-27
BR122020003032B1 (pt) 2021-11-09
KR20170051549A (ko) 2017-05-11
SG11201400294SA (en) 2014-09-26
AU2017202582B2 (en) 2018-09-27
US20170164006A1 (en) 2017-06-08
AU2018286602B2 (en) 2020-05-07
LT3217667T (lt) 2020-11-10
MX2014002392A (es) 2014-06-05
ZA201401563B (en) 2015-08-26
US20190191175A1 (en) 2019-06-20
KR101624058B1 (ko) 2016-05-24
AU2011379259B2 (en) 2015-07-16
BR112014004805A2 (pt) 2017-03-28
US11153593B2 (en) 2021-10-19
EP2770736B1 (en) 2019-06-19
AU2017202570B2 (en) 2018-09-27
CN106791832B (zh) 2020-06-09
PT3217667T (pt) 2020-11-03
HUE052527T2 (hu) 2021-05-28
KR20170046197A (ko) 2017-04-28
HRP20210129T1 (hr) 2021-03-19
CA2847299A1 (en) 2013-04-25
MX348004B (es) 2017-05-23
TW201540051A (zh) 2015-10-16
CN107027026B (zh) 2020-04-24
EP2770736A1 (en) 2014-08-27
BR122020003071B1 (pt) 2021-11-09
CN103843345A (zh) 2014-06-04
RU2681379C1 (ru) 2019-03-06
EP3217667B1 (en) 2020-08-12
DK3217667T3 (da) 2020-11-16
KR101822346B1 (ko) 2018-01-25
BR122020003041B1 (pt) 2021-11-09
KR101920601B1 (ko) 2018-11-20
US20200177904A1 (en) 2020-06-04
US11140405B2 (en) 2021-10-05
AU2017202570A1 (en) 2017-06-01
ES2848525T3 (es) 2021-08-10
KR102003180B1 (ko) 2019-07-23
US20140056357A1 (en) 2014-02-27
RU2681359C1 (ru) 2019-03-06
DK3197164T3 (da) 2021-01-25
KR20180017225A (ko) 2018-02-20
PT3197164T (pt) 2021-02-03
TWI569630B (zh) 2017-02-01
EP3675499B1 (en) 2021-12-29
LT3197164T (lt) 2021-02-10
US10602173B2 (en) 2020-03-24
CY1123691T1 (el) 2022-03-24
SI3217667T1 (sl) 2020-12-31
EP3675498A1 (en) 2020-07-01
KR20180124162A (ko) 2018-11-20
BR122020003031B1 (pt) 2021-11-09
CN106791832A (zh) 2017-05-31
RU2586876C2 (ru) 2016-06-10
RS61338B1 (sr) 2021-02-26
WO2013057783A1 (ja) 2013-04-25
AU2018286602A1 (en) 2019-02-21
SI3197164T1 (sl) 2021-03-31
TW201318435A (zh) 2013-05-01
CY1123835T1 (el) 2022-05-27
US11039159B2 (en) 2021-06-15
RS61015B1 (sr) 2020-11-30
CN106899847A (zh) 2017-06-27
US9521422B2 (en) 2016-12-13
AU2015243067B2 (en) 2017-06-08
AU2017202582A1 (en) 2017-05-11
PL3197164T3 (pl) 2021-04-19
BR112014004805B1 (pt) 2022-05-17
US10271061B2 (en) 2019-04-23
KR20150123970A (ko) 2015-11-04
EP2770736A4 (en) 2015-06-03
EP3675499A1 (en) 2020-07-01
CN103843345B (zh) 2017-05-10
AU2015243067A1 (en) 2015-11-05
HRP20201778T1 (hr) 2021-02-05
CN106899847B (zh) 2019-12-27
EP3675497B1 (en) 2021-12-29
EP3197164A1 (en) 2017-07-26
US20160050428A1 (en) 2016-02-18
KR101738289B1 (ko) 2017-05-19
CN107027026A (zh) 2017-08-08
MX336659B (es) 2016-01-27
CN107071415B (zh) 2020-07-07
HUE053615T2 (hu) 2021-07-28

Similar Documents

Publication Publication Date Title
TWI492635B (zh) Encoding method and coding device
JP5925801B2 (ja) 符号化方法、復号方法、符号化装置、及び復号装置
TW202147852A (zh) 解碼方法及解碼裝置
JP6088036B2 (ja) 復号方法、復号装置及びプログラム
JP5702011B2 (ja) 符号化方法、符号化装置及びプログラム
JP6744507B2 (ja) 符号化方法および復号方法
JP7000498B2 (ja) 記憶装置、送信装置および符号化方法
JP6396566B2 (ja) 電子機器、符号化方法及びプログラム
JP6235745B2 (ja) 電子機器、復号方法及びプログラム
JP6235742B2 (ja) 電子機器、復号方法及びプログラム
JP5869160B2 (ja) 復号方法、復号装置及びプログラム
JP6262380B2 (ja) 電子機器、復号方法及びプログラム
JP6132950B2 (ja) 符号化方法、復号方法、符号化装置、及び復号装置
JP2019009792A (ja) 符号化方法、復号方法及び符号化データ
JP5916906B2 (ja) 符号化方法、復号方法、符号化装置、及び復号装置
JP2019017103A (ja) 符号化方法、復号方法及び符号化データ
JPWO2013057783A1 (ja) 符号化方法及び復号方法