TW202106014A - 影像處理裝置及影像處理方法 - Google Patents
影像處理裝置及影像處理方法 Download PDFInfo
- Publication number
- TW202106014A TW202106014A TW109119823A TW109119823A TW202106014A TW 202106014 A TW202106014 A TW 202106014A TW 109119823 A TW109119823 A TW 109119823A TW 109119823 A TW109119823 A TW 109119823A TW 202106014 A TW202106014 A TW 202106014A
- Authority
- TW
- Taiwan
- Prior art keywords
- unit
- image
- filter
- image processing
- adaptive loop
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
- H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本揭露係有關於,可以達成影像處理所必須的實作負荷之降低的影像處理裝置及影像處理方法。
解碼部,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像。濾波器部,係參照已被解碼部所解碼之參數集,而對已被解碼部所生成之解碼影像,適用適應迴圈濾波器。本技術係可適用於例如,利用適應迴圈濾波器來進行影像處理的影像處理系統。
Description
本揭露係有關於影像處理裝置及影像處理方法,特別是有關於,能夠達成影像處理所必須的實作負荷之降低的影像處理裝置及影像處理方法。
先前,如非專利文獻1所揭露,使得適應迴圈濾波器(ALF:Adaptive Loop Filter)的參數集(每1集合,最大25class),以CTU(Coding Tree Unit)單位做切換這件事情,成為可能。
例如,所被切換的參數集係最大有22種類,係數是被規格所決定的固定濾波器(Fixed filter)係為16種類,讓使用者以APS(Adaptation parameter set)做傳輸的使用者指定濾波器係為6種類。又,在參數的傳輸時,是使用APS。
[先前技術文獻]
[非專利文獻]
[非專利文獻1] Benjamin Bross, Jianle Chen, Shan Liu, Versatile Video Coding (Draft 5), JVET-N1001-v7 (version 7 - date 2019-05-29)
[發明所欲解決之課題]
順便一提,在目前的APS的規格中,由於自由度過高(也包含模糊點),因此若不對使用方法設下限制,則在解碼器側,必須總是將APS ID之最大數(=32)進行解碼。因此,先前一直都有實作負荷變高的疑慮。
本揭露係有鑑於此種狀況而研發,目的在於能夠達成影像處理所必須的實作負荷之降低。
[用以解決課題之手段]
本揭露之第1側面的影像處理裝置,係具備:解碼部,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和濾波器部,係參照已被前記解碼部所解碼之參數集,而對已被前記解碼部所生成之解碼影像,適用前記適應迴圈濾波器。
本揭露之第1側面的影像處理方法,係含有:解碼工程,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和參照前記解碼工程中所被解碼之參數集,對已被前記解碼部所生成之解碼影像,適用前記適應迴圈濾波器。
於本揭露之第1側面中,含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流會被解碼,解碼影像會被生成,參照已被解碼之參數集,對已被生成之解碼影像,適應迴圈濾波器會被適用。
本揭露之第2側面的影像處理裝置,係具備:設定部,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和編碼部,係將影像予以編碼,而生成含有已被前記設定部所設定之參數集的位元串流。
本揭露之第2側面的影像處理方法,係含有:設定工程,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和編碼工程,係將影像予以編碼,而生成含有在前記設定工程中所被設定之參數集的位元串流。
於本揭露之第2側面中,作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,會被設定;影像會被編碼,含有已被設定之參數集的位元串流會被生成。
<支持技術內容、技術用語的文獻等>
本說明書中所揭露的範圍,係不限定於實施例的內容,於申請當時所公知的以下之參考文獻REF1~REF6的內容,也是藉由參照而被納入在本說明書中。亦即,參考文獻REF1~REF6中所記載之內容也是作為在判斷支持要件之際的根據。又,例如,關於剖析(Parsing)、語法(Syntax)、語意(Semantics)等之技術用語也是同樣地,即使在發明的詳細說明中未被直接定義的情況下,仍是屬於本揭露之範圍內,而滿足申請專利範圍的支持要件。
REF1: Recommendation ITU-T H.264 (04/2017) “Advanced video coding for generic audiovisual services”, April 2017
REF2: Recommendation ITU-T H.265 (02/2018) “High efficiency video coding”, February 2018
REF3: Benjamin Bross, Jianle Chen, Shan Liu, Versatile Video Coding (Draft 5), JVET-N1001-v7 (version 7 - date 2019-05-29)
REF4: Jianle Chen, Yan Ye, Seung Hwan Kim, Algorithm description for Versatile Video Coding and Test Model 5 (VTM 5), JVETN1002-v1
REF5: Ye-Kui Wang, Hendry, Jianle Chen, Peng Yin, Taoran Lu, Fangjun Pu, Sean McCarthy, AHG17: Signalling of reshaper parameters in APS, JVET-N0117-v1 (version 1 - date 2019-03-12)
REF6: Nael Ouedraogo, Eric Nassor, Jonathan Taquet, Gerald Kergourlay, Frederic Maze, [AHG17/AHG12] On APS id for bitstream merging for VVC, JVET-N0191-v1 (version 1 - date 2019-03-12)
<用語>
在本案中,以下的用語,是定義如下。
<區塊>
作為影像(圖像)之部分領域或處理單位而用於說明的「區塊」(並非表示處理部的區塊),係在沒有特別言及的情況下,是表示圖像內的任意之部分領域,其大小、形狀、及特性等並無限定。例如,「區塊」中係可包含有:TB(Transform Block)、TU(Transform Unit)、PB(Prediction Block)、PU(Prediction Unit)、SCU(Smallest Coding Unit)、CU(Coding Unit)、LCU(Largest Coding Unit)、CTB(Coding TreeBlock)、CTU(Coding Tree Unit)、轉換區塊、子區塊、巨集區塊、瓷磚、或切片等,任意之部分領域(處理單位)。
<區塊尺寸的指定>
又,在指定此種區塊的尺寸時,不只可直接地指定區塊尺寸,亦可間接地指定區塊尺寸。例如亦可使用用來識別尺寸的識別資訊,來指定區塊尺寸。又,例如,亦可藉由與作為基準之區塊(例如LCU或SCU等)之尺寸的比或差分,來指定區塊尺寸。例如,作為語法要素等而將用來指定區塊尺寸的資訊予以傳輸的情況下,作為該資訊,亦可使用如上述的間接指定尺寸的資訊。藉由如此設計,可降低該資訊的資訊量,有時候可以提升編碼效率。又,該區塊尺寸之指定中係包含有,區塊尺寸之範圍之指定(例如所被容許之區塊尺寸之範圍之指定等)。
<資訊、處理的單位>
各種資訊所被設定的資料單位、或各種處理之對象的資料單位,係分別為任意,並非限定於上述的例子。例如,這些資訊或處理係亦可分別對每一TU(Transform Unit)、TB(Transform Block)、PU(Prediction Unit)、PB(Prediction Block)、CU(Coding Unit)、LCU(Largest Coding Unit)、子區塊、區塊、瓷磚、切片、圖像、序列、或組件而被設定,亦可以這些資料單位之資料為對象。當然,該資料單位,係可按照每一資訊或處理而被設定,並不一定要所有的資訊或處理之資料單位都是統一的。此外,這些資訊的儲存場所係為任意,亦可被儲存在上述的資料單位之標頭或參數集等。又,亦可被儲存在複數地點。
<控制資訊>
關於本技術的控制資訊,亦可從編碼側傳輸至解碼側。例如,亦可將用來控制是否許可(或禁止)適用上述本技術的控制資訊(例如enabled_flag),予以傳輸。又,例如,亦可將表示上述的本技術之適用對象(或非適用對象)的控制資訊,予以傳輸。例如,亦可將用來指定適用本技術(或者是許可或禁止適用)的區塊尺寸(上限或下限、或其雙方)、畫格、分量、或層等的控制資訊,予以傳輸。
<旗標>
此外,於本說明書中所謂「旗標」,係為用來識別複數狀態所需之資訊,不只包含在用來識別真(1)或偽(0)之2種狀態之際所使用的資訊,亦包含可以識別3種以上之狀態的資訊。因此,該「旗標」所能採取的值,係可為例如1/0之2值,亦可為3值以上。亦即,構成該「旗標」的bit數係為任意,可為1bit亦可為複數bit。又,識別資訊(亦包含旗標),係不只將該識別資訊含入至位元串流的形式,也想定了將識別資訊相對於某個作為基準之資訊的差分資訊含入至位元串流的形式,因此於本說明書中,「旗標」或「識別資訊」,係不只包含該資訊,也還包含了相對於作為基準之資訊的差分資訊。
<將後設資料建立關連>
又,編碼資料(位元串流)的相關之各種資訊(後設資料等),係只要與編碼資料建立關連,則無論是以哪種形態而被傳輸或記錄皆可。此處,「建立關連」此一用語係意味著例如:使得在一方之資料進行處理之際可能利用到他方之資料的情況(可建立連結)。亦即,被彼此建立關連的資料,係亦可整體視為1個資料,也可分別視為個別之資料。例如,與編碼資料(影像)建立關連的資訊,係亦可在有別於該編碼資料(影像)的其他傳輸路上被傳輸。又,例如,與編碼資料(影像)建立關連的資訊,係亦可在有別於該編碼資料(影像)的其他記錄媒體(或是同一記錄媒體的其他記錄區域)中被記錄。此外,該「建立關連」,係亦可不是資料全體,而是資料的一部分。例如,影像與對應於該影像的資訊,係亦可使用複數畫格、1畫格、或畫格內之一部分等之任意之單位,而被彼此建立關連。
此外,於本說明書中,「合成」、「多工化」、「附加」、「一體化」、「含入」、「儲存」、「放入」、「插進」、「插入」等之用語,係意味著例如將編碼資料與後設資料總結成1個資料,把複數個物綁成1個的意思,是意味著上述的「建立關連」的1種方法。又,於本說明書中,所謂編碼,係不只包含將影像轉換成位元串流的全體之處理,也包含部分之處理。例如,不只包含將預測處理、正交轉換、量化、算術編碼等予以包括的處理,也包含將量化與算術編碼予以總稱的處理、將預測處理與量化與算術編碼予以包括的處理等。同樣地,所謂解碼,係不只包含將位元串流轉換成影像的全體之處理,也包含部分之處理。例如,不只包含將逆算術解碼、逆量化、逆正交轉換、預測處理等予以包括的處理,也包含將逆算術解碼與逆量化予以包括的處理、將逆算術解碼與逆量化與預測處理予以包括的處理等。
以下針對適用了本技術的具體之實施形態,參照圖式而詳細說明。
<影像處理系統之構成例>
圖1係適用了本技術之影像處理系統的一實施形態之構成例的區塊圖。
如圖1所示,影像處理系統11,係具備影像編碼裝置12及影像解碼裝置13而被構成。例如,在影像處理系統11中,已被輸入至影像編碼裝置12的影像會被編碼,藉由該編碼所得的位元串流會被傳輸至影像解碼裝置13,於影像解碼裝置13中會將從位元串流所被解碼出來的解碼影像,予以輸出。
影像編碼裝置12係具有:設定部21、編碼部22、濾波器部23、及資料庫24;影像解碼裝置13係具有:解碼部25、濾波器部26、及資料庫27。
設定部21,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定。
編碼部22,係將影像予以編碼,而生成含有已被設定部21所設定之參數集的位元串流。此時,編碼部22,係使用已被濾波器部23適用了適應迴圈濾波器的濾波器影像,而將影像予以編碼。
濾波器部23,係對在編碼部22中被進行編碼之際的本地編碼影像,適用適應迴圈濾波器。
資料庫24中係被儲存有,在編碼部22將影像進行編碼之際所必須的濾波器係數等之各種參數。
解碼部25,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像。
濾波器部26,係參照已被解碼部25所解碼之參數集,而對已被解碼部25所生成之解碼影像,適用適應迴圈濾波器。
資料庫27中係被儲存有,在解碼部25將影像進行解碼之際所必須的濾波器係數等之各種參數。
此處,於濾波器部23及濾波器部26中所被適用的適應迴圈濾波器中,針對1切片,藉由目前濾波器係數與時間方向之濾波器係數,最大可將6組濾波器係數,儲存在APS中。這個設計係想定為,時間階層(temporal_id)係有0~4的5個階層,針對這些階層而分別將1組濾波器係數,與目前的1組濾波器係數的合計6組濾波器係數,儲存在APS中。
另一方面,1切片是以複數個瓷磚群組(tile_of_group)而被分割的情況下,係變成要發送(6組×複數瓷磚群組)份的資料,導致會隨著瓷磚群組之數量,APS ID之數量會呈比例而增加。因此,於影像解碼裝置13中不只剖析APS的處理量會增加,用來儲存從APS所被剖析出來之參數所需之資料庫27的緩衝區大小也必須變大。
參照圖2,說明ALF_APS的使用例。
如圖2的A所示,在適應迴圈濾波器中,是以切片單位,最大可參照6個APS。相對於此,在切片是被分割成複數個瓷磚的情況下,則變成可以用瓷磚單位,而最大參照6個APS。
因此,如圖2的B所示,在切片是被分割成6瓷磚的情況下,係變成6 APSs×6 tiles=36 APSs,APS之數量就會有超過APS ID之最大數(=32)的情況。
又,隨著使用案例(例如8K vs. HD,2D vs. 全天球影像等)的不同,適合於使用的適當的APS ID之數量也會有所不同。因此,若不設下任何使用限制,則影像解碼裝置13,係必須一直準備能夠將APS ID之最大數予以隨時展開的緩衝區大小的資料庫27,導致影像處理所必須的實作負荷會變高。
於是,在影像處理系統11中,為了達成影像處理所必須的實作負荷之降低,而將作為適應迴圈濾波器而進行參照的參數集(例如APS)之數量之最大數(以下稱作最大APS數),規定作為固定值。
首先,在第1規定例中,是按照將APS parameters之類型加以指定的每一aps_params_type,來規定最大APS數。
例如,作為aps_params_type,係如圖3所示,0及1是已經被使用於用來指定types of APS parameters,而2~7係被預留。然後,在ALF parameters會被使用的aps_params_type的情況(aps_params_type=0)下,係將最大APS數規定成6。
亦即,無論tile_of_group數為何,作為適應迴圈濾波器而可參照的APS ID之最大數,都是設成固定值。亦即,最大APS數係被規定成,不依存於瓷磚數的固定值。但是,在各tile_of_group中所參照的APS ID,係亦可分別不同。藉此,將適應迴圈濾波器的APS ID之最大數予以規定。換言之,在第1規定例中,是按照每一aps_params_type,而規定所使用的APS ID之最大數。
接著,在第2規定例中係規定成,會隨著等級而將最大APS數進行位元對齊。像這樣,藉由按照每一等級而規定最大APS數,就可設計成符合使用案例的APS之規格。
圖4中係圖示,會隨著等級而進行位元對齊的方式來規定最大APS數的第2規定例之一例。
在圖4所示的例子中係被規定成,等級1到4.1的最大APS數係為8(3bit),等級5到5.2的最大APS數係為16(4bit),等級6到6.2的最大APS數係為32(5bit),是以位元組單位而被規定。
又,對於全天球影像(每種投影格式),也是同樣地規定最大APS數。
再者,作為將第1規定例與第2規定例做組合而成的第3規定例,亦可隨著等級,以按照每一aps_params_type所設定的單位使用數之倍數,來規定最大APS數。亦即,最大APS數,係為按照每一aps_params_type而被規定,且為隨著每一等級而不同的固定值。藉此,可使得每一aps_params_type所能夠使用的APS ID之最大數,是隨著等級而變化。亦即,藉由「工具(功能)」×「平行化需要度 (Level)」,來規定APS ID之最大數。
圖5中係圖示了,將第1規定例與第2規定例做組合而成的第3規定例之一例。
在圖5所示的例子中,等級1到4.1的最大APS數係被規定成,按照每一aps_params_type所設定的單位使用數之1倍。又,等級5到5.2的最大APS數係被規定成,按照每一aps_params_type所設定的單位使用數之2倍,等級6到6.2的最大APS數係被規定成,按照每一aps_params_type所設定的單位使用數之3倍。
具體而言,如圖6所示,相對於HD影像(level=4.x)時的最大APS數,4K影像(level=5.x)時的最大APS數係被規定成,會變成按照每一aps_params_type所設定的單位使用數之2倍。
如以上所述,在影像處理系統11中,在影像的編碼及解碼之際,可以使用作為適應迴圈濾波器而進行參照的最大APS數是已被規定成為固定值之參數集。如此,藉由將最大APS數設成固定值,例如,在影像解碼裝置13中,可避免將用來儲存從APS所被剖析出來之參數所需之資料庫27的緩衝區大小加大至需要的程度以上,相較於先前,可降低影像處理所必須的實作負荷。
此處,在本說明書中,所謂影像係意味著進行編碼之前的原始之影像,所謂解碼影像係意味著被進行了解碼處理之後所被輸出的影像。所謂本地解碼影像係為,在將影像進行編碼之際,已被本地解碼之後所被輸出的影像。所謂編碼資料係意味著影像(紋理)被編碼後的資料,所謂位元串流(或編碼位元串流、編碼串流)係意味著,除了含有編碼資料以外,還含有在進行編碼或解碼之際所必須之參數所被編碼而成之資料的資料。
又,所謂參數(編碼參數),係為在進行編碼或解碼之際所必須之資料的總稱,典型而言係指位元串流的語法或參數集等。再者,參數(編碼參數)中係以還包含有,在導出過程中會被使用的變數等。於本揭露中,亦可將用來識別複數模態的辨識資料,以位元串流之語法的方式來做設定,而在此情況下,在解碼器中,藉由將識別資料予以剖析並進行參照,就可較有效率地進行處理。
<基於電腦的系統之構成例>
圖7係適用了本技術的基於電腦的系統的一實施形態之構成例的區塊圖。
圖7係為1或複數台電腦或伺服器等透過網路而被連接的網路系統之構成例的區塊圖。此外,在圖7的實施形態中所被圖示的硬體及軟體環境,係作為能夠提供用來實作本揭露所致之軟體及/或方法所需之平台之一例而被圖示。
如圖7所示,網路系統31係具備:電腦32、網路33、遠端電腦34、網頁伺服器35、雲端儲存伺服器36、及電腦伺服器37而被構成。此處,在本實施形態中,藉由圖1所示的功能區塊之中的1或複數個,而可執行複數個事例。
又,在圖7中係圖示了電腦32的詳細構成。此外,在電腦32內所被圖示的功能區塊,係為了建立例示性的功能而被圖示,並非限定於如此的構成。又,遠端電腦34、網頁伺服器35、雲端儲存伺服器36、及電腦伺服器37之詳細構成雖然未被圖示,但它們係含有與在電腦32內所被圖示的功能區塊相同的構成。
作為電腦32係可使用:個人電腦、桌上型電腦、膝上型電腦、平板電腦、小筆記電腦、攜帶型資訊終端、智慧型手機、或能夠與網路上的其他裝置進行通訊的其他可程式化的電子裝置。
然後,電腦32係具備:匯流排41、處理器42、記憶體43、非揮發性儲存體44、網路介面46、周邊機器介面47、及顯示器介面48而被構成。這些功能之各者,係在某個實施形態中,是被實作於各個電子子系統(積體電路晶片或晶片與關連裝置之組合)中,或者,在其他實施形態中,則是亦可將數個功能做組合而實作於單一晶片(單晶片系統或SoC(System on Chip))中。
匯流排41係可採用各種的自訂規格或業界標準的高速平行或序列式周邊相互連接匯流排。
處理器42係可採用1或複數個以單一或多晶片微處理器方式而被設計及/或製造者。
記憶體43及非揮發性儲存體44,係為可藉由電腦32進行讀取的儲存媒體。例如,記憶體43係可採用DRAM(Dynamic Random Access Memory)或SRAM(Static RAM)等這類任意的適切之揮發性儲存裝置。非揮發性儲存體44係可採用軟碟片、硬碟、SSD(Solid State Drive)、ROM(Read Only Memory)、EPROM(Erasable and Programmable Read Only Memory)、快閃記憶體、Compact Disc(CD或CD-ROM)、DVD(Digital Versatile Disc)、卡片型記憶體、或棒狀型記憶體之其中至少1者以上。
又,非揮發性儲存體44中係被儲存有程式45。程式45係為,例如,為了作成、管理、及控制特定之軟體功能所被使用的機械可讀命令及/或資料的集合。此外,在記憶體43是遠比非揮發性儲存體44還要高速的構成中,程式45係在被處理器42執行之前,可先從非揮發性儲存體44傳輸至記憶體43。
電腦32係可透過網路介面46,而與透過網路33之其他電腦進行通訊及相互作用。網路33係可採用例如:LAN(Local Area Network)、網際網路等之WAN(Wide Area Network)、或LAN及WAN之組合而包含有線、無線、或光纖連接之構成。一般而言,網路33係由支援2個以上之電腦與關連裝置間之通訊的連接及協定的任意之組合所成。
周邊機器介面47,係可和能夠與電腦32做本地連接的其他裝置,進行資料的輸出入。例如,周邊機器介面47,係提供對外部裝置51之連接。外部裝置51係可使用:鍵盤、滑鼠、數字鍵盤、觸控螢幕、及/或其他適切的輸入裝置。外部裝置51係還可包含有例如:隨身碟、可攜式光碟或磁碟、及記憶卡等之可攜式電腦可讀記憶媒體。
在本揭露的實施形態中,例如,為了實施程式45而被使用的軟體及資料,係亦可被記憶在如此的可攜式電腦可讀記憶媒體中。在如此的實施形態中,軟體係亦可在非揮發性儲存體44中,或透過周邊機器介面47而直接被載入至記憶體43中。周邊機器介面47,係在與外部裝置51的連接上,亦可使用例如RS-232或USB(Universal Serial Bus)等之業界標準。
顯示器介面48,係可將電腦32連接至顯示器52,可使用顯示器52,而將命令列或圖形使用者介面,提示給電腦32的使用者。例如,顯示器介面48係可採用VGA(Video Graphics Array)、或DVI(Digital Visual Interface)、DisplayPort、HDMI(High-Definition Multimedia Interface) (註冊商標)等之業界標準。
<影像編碼裝置之構成例>
圖8係表示作為適用了本揭露之影像處理裝置的影像編碼裝置之一實施形態的構成。
圖8所示的影像編碼裝置60,係使用預測處理來將影像資料予以編碼。此處,作為編碼方式,係使用例如HEVC(High Efficiency Video Coding)方式等。
圖8的影像編碼裝置60係具有:A/D轉換部61、畫面排序緩衝區62、演算部63、正交轉換部64、量化部65、可逆編碼部66、及積存緩衝區67。又,影像編碼裝置60係具有:逆量化部68、逆正交轉換部69、演算部70、去區塊濾波器71、適應偏置濾波器72、適應迴圈濾波器73、畫格記憶體74、選擇部75、畫面內預測部76、運動預測補償部77、預測影像選擇部78、及速率控制部79。
A/D轉換部61,係將已被輸入之影像資料(Picture(s))進行A/D轉換然後供給至畫面排序緩衝區62。此外,亦可不設置A/D轉換部61,而設計成讓數位資料之影像被輸入之構成。
畫面排序緩衝區62,係將從A/D轉換部61所被供給之影像資料加以記憶,將已記憶之顯示順序的畫格之影像,隨應於GOP(Group of Picture)構造,排序成編碼所需的畫格之順序。畫面排序緩衝區62,係將畫格順序排序過的影像,輸出至演算部63、畫面內預測部76、及運動預測補償部77。
演算部63,係將從畫面排序緩衝區62所被輸出之影像,減去透過預測影像選擇部78而從畫面內預測部76或運動預測補償部77所供給之預測影像,將其差分資訊,輸出至正交轉換部64。
例如,若是進行畫面內編碼的影像,則演算部63係從畫面排序緩衝區62所被輸出之影像,減去從畫面內預測部76所供給之預測影像。又,例如,若是進行畫面間編碼的影像,則演算部63係由從畫面排序緩衝區62所被輸出之影像,減去從運動預測補償部77所供給之預測影像。
正交轉換部64,係對從演算部63所供給的差分資訊,實施離散餘弦轉換、卡忽南-拉維轉換等之正交轉換,將其轉換係數供給至量化部65。
量化部65,係將正交轉換部64所輸出的轉換係數,進行量化。量化部65係將已被量化之轉換係數,供給至可逆編碼部66。
可逆編碼部66,係對該已被量化之轉換係數,實施可變長度編碼、算術編碼等之可逆編碼。
可逆編碼部66係從畫面內預測部76取得表示畫面內預測模式之資訊的參數,從運動預測補償部77取得表示畫面間預測模式之資訊或運動向量資訊等之參數。
可逆編碼部66係將已被量化之轉換係數予以編碼,並且將所取得之各參數(語法要素)予以編碼,當成編碼資料的標頭資訊的一部分(進行多工化)。可逆編碼部66,係將編碼所得到之編碼資料,供給至積存緩衝區67而積存之。
例如,在可逆編碼部66中,會進行可變長度編碼或算術編碼等之可逆編碼處理。作為可變長度編碼,係可舉例CAVLC(Context-Adaptive Variable Length Coding)等。作為算術編碼,係可舉例CABAC(Context-Adaptive Binary Arithmetic Coding)等。
積存緩衝區67係將從可逆編碼部66所供給之編碼串流(Encoded Data)予以暫時保持,在所定之時序上,當作編碼過的編碼影像,輸出至例如後段未圖示的記錄裝置或傳輸路等。亦即,積存緩衝區67係亦為將編碼串流予以傳輸的傳輸部。
又,於量化部65中被量化過的轉換係數,係也被供給至逆量化部68。逆量化部68係將該已被量化之轉換係數,以對應於量化部65所做之量化的方法,進行逆量化。逆量化部68,係將所得到之轉換係數,供給至逆正交轉換部69。
逆正交轉換部69,係將所被供給之轉換係數,以正交轉換部64所做之正交轉換處理所對應的方法,進行逆正交轉換。已被逆正交轉換之輸出(已被復原之差分資訊),係被供給至演算部70。
演算部70,係對逆正交轉換部69所供給之逆正交轉換結果、亦即已被復原之差分資訊,加算上透過預測影像選擇部78而從畫面內預測部76或運動預測補償部77所供給的預測影像,獲得局部性解碼之影像(解碼影像)。
例如,若差分資訊是對應於進行畫面內編碼的影像,則演算部70係對該差分資訊,加算上從畫面內預測部76所供給之預測影像。又,例如,若差分資訊是對應於進行畫面間編碼的影像,則演算部70係對該差分資訊,加算上從運動預測補償部77所供給之預測影像。
該加算結果之解碼影像,係被供給至去區塊濾波器71及畫格記憶體74。
去區塊濾波器71,係對來自演算部70的影像,藉由適宜進行去區塊濾波器處理以抑制解碼影像的區塊失真,將其濾波器處理結果,供給至適應偏置濾波器72。去區塊濾波器71,係具有根據量化參數QP所求出的參數β及Tc。參數β及Tc,係為關於去區塊濾波器之判定中所被使用的閾值(參數)。
此外,去區塊濾波器71所具有的參數β及Tc,係從HEVC方式所規定之β與Tc所擴充而來。參數β及Tc之各偏置,係作為去區塊濾波器之參數,於可逆編碼部66中被編碼,並被發送至後述的圖10的影像解碼裝置80。
適應偏置濾波器72,係對去區塊濾波器71所致之濾波後的影像,進行主要用來抑制漣波現象的偏置濾波器(SAO:Sample adaptive offset)處理。
偏置濾波器的種類,係有頻帶偏置2種、邊緣偏置6種、無偏置,總計9種。適應偏置濾波器72,係使用對每一分割領域決定偏置濾波器之種類的quad-tree結構與每一分割領域的偏置值,來對去區塊濾波器71所致之濾波後的影像,實施濾波處理。適應偏置濾波器72,係將濾波處理後之影像,供給至適應迴圈濾波器73。
此外,於影像編碼裝置60中,quad-tree結構與每一分割領域之偏置值,係藉由適應偏置濾波器72而被算出而使用。已被算出的quad-tree結構與每一分割領域之偏置值,係作為適應偏置參數,在可逆編碼部66中被編碼,被發送至後述圖10的影像解碼裝置80。
適應迴圈濾波器73,係對適應偏置濾波器72所致之濾波後的影像,使用濾波器係數,每一處理單位地,進行適應迴圈濾波器(ALF:Adaptive Loop Filter)處理。於適應迴圈濾波器73中,作為濾波器係可使用例如2維的維納濾波器(Wiener Filter)。當然,也可使用維納濾波器以外的濾波器。適應迴圈濾波器73,係將濾波處理結果,供給至畫格記憶體74。
此外,雖然在圖8的例子中沒有圖示,但於影像編碼裝置60中,濾波器係數係每一處理單位地,以使得與來自畫面排序緩衝區62之原影像的殘差呈最小的方式,藉由適應迴圈濾波器73而被算出而使用。已被算出之濾波器係數,係作為適應迴圈濾波器參數,而在可逆編碼部66中被編碼,被發送至後述圖10的影像解碼裝置80。
畫格記憶體74係於所定之時序上,將所累積的參照影像,透過選擇部75而輸出至畫面內預測部76或運動預測補償部77。
例如,若是進行畫面內編碼的影像,則畫格記憶體74係將參照影像,透過選擇部75而供給至畫面內預測部76。又,例如,若畫面間編碼有被進行的情況下,畫格記憶體74係將參照影像,透過選擇部75而供給至運動預測補償部77。
選擇部75係當從畫格記憶體74所供給之參照影像,是將進行畫面內編碼之影像,則將該參照影像供給至畫面內預測部76。又,選擇部75係當從畫格記憶體74所供給之參照影像,是將進行畫面間編碼之影像,則將該參照影像,供給至運動預測補償部77。
畫面內預測部76,係進行畫面內預測(Intra預測),使用畫面內的像素值來生成預測影像。畫面內預測部76,係藉由複數模式(畫面內預測模式)來進行畫面內預測。
畫面內預測部76,係以所有的畫面內預測模式來生成預測影像,並評估各預測影像,選擇出最佳模式。畫面內預測部76,係一旦選擇了最佳的畫面內預測模式,就將該最佳模式所生成之預測影像,透過預測影像選擇部78而供給至演算部63或演算部70。
又,如上述,畫面內預測部76係亦可將表示所採用之畫面內預測模式的畫面內預測模式資訊等之參數,適宜地供給至可逆編碼部66。
運動預測補償部77,係針對被進行畫面間編碼的影像,使用從畫面排序緩衝區62所供給之輸入影像、和透過選擇部75而從畫格記憶體74所供給之參照影像,來進行運動預測。又,運動預測補償部77,係隨應於藉由運動預測而被偵測出來的運動向量來進行運動補償處理,生成預測影像(畫面間預測影像資訊)。
運動預測補償部77,係進行所有候補之畫面間預測模式的畫面間預測處理,生成預測影像。運動預測補償部77,係將已被生成之預測影像,透過預測影像選擇部78而供給至演算部63或演算部70。又,運動預測補償部77,係將表示已被採用之畫面間預測模式的畫面間預測模式資訊、或表示已算出之運動向量的運動向量資訊等之參數,供給至可逆編碼部66。
預測影像選擇部78係若是進行畫面內編碼之影像時,則將畫面內預測部76之輸出,供給至演算部63或演算部70;若是進行畫面間編碼之影像時,則將運動預測補償部77之輸出,供給至演算部63或演算部70。
速率控制部79,係基於積存緩衝區67中所積存之壓縮影像,以不會發生溢位或下溢之方式,控制量化部65的量化動作之速率。
如此影像編碼裝置60係被構成,可逆編碼部66,係對應於圖1的編碼部22,適應迴圈濾波器73,係對應於圖1的濾波器部23並且具備作為設定部21之功能。因此,影像編碼裝置60係如上述,可降低影像處理所必須的實作負荷。
<影像編碼裝置的動作>
參照圖9,說明如以上之影像編碼裝置60所執行的編碼裝置之流程。
於步驟S31中,A/D轉換部61係將所輸入之影像進行A/D轉換。
於步驟S32中,畫面排序緩衝區62係將已被A/D轉換部61進行A/D轉換之影像加以記憶,進行從各圖像之顯示順序往編碼之順序的排序。
若從畫面排序緩衝區62所供給之處理對象的影像是被畫面內處理之區塊的影像,則所被參照之已解碼影像會從畫格記憶體74中被讀出,透過選擇部75而供給至畫面內預測部76。
基於這些影像,於步驟S33中,畫面內預測部76係將處理對象之區塊的像素,以身為候補之所有畫面內預測模式來進行畫面內預測。此外,作為所被參照之已解碼像素,係使用了未被去區塊濾波器71進行濾波的像素。
藉由此處理,會以身為候補之所有畫面內預測模式來進行畫面內預測,對身為候補之所有畫面內預測模式,算出成本函數值。然後,基於已被算出之成本函數值,來選擇最佳畫面內預測模式,最佳畫面內預測模式的畫面內預測所生成之預測影像和其成本函數值,會被供給至預測影像選擇部78。
若從畫面排序緩衝區62所供給之處理對象的影像是被畫面間處理之區塊的影像,則所被參照之影像會從畫格記憶體74中被讀出,透過選擇部75而供給至運動預測補償部77。基於這些影像,於步驟S34中,運動預測補償部77係進行運動預測.補償處理。
藉由此處理,會以身為候補之所有畫面間預測模式來進行運動預測處理,對於身為候補之所有畫面間預測模式,會算出成本函數值,基於已算出之成本函數值,來決定最佳畫面間預測模式。然後,藉由最佳畫面間預測模式而被生成之預測影像和其成本函數值,會被供給至預測影像選擇部78。
於步驟S35中,預測影像選擇部78係基於畫面內預測部76及運動預測補償部77所輸出的各成本函數值,而將最佳畫面內預測模式與最佳畫面間預測模式的其中一方,決定成最佳預測模式。然後,預測影像選擇部78係將已決定之最佳預測模式的預測影像予以選擇,供給至演算部63、70。此預測影像,係在後述的步驟S36、S41之演算中,會被利用。
此外,該預測影像的選擇資訊,係被供給至畫面內預測部76或運動預測補償部77。當最佳畫面內預測模式的預測影像被選擇時,畫面內預測部76係將表示畫面內預測模式之資訊(亦即畫面內預測之相關參數),供給至可逆編碼部66。
當最佳畫面間預測模式的預測影像被選擇時,運動預測補償部77,係將表示最佳畫面間預測模式之資訊,和相應於最佳畫面間預測模式之資訊(亦即運動預測之相關參數),輸出至可逆編碼部66。作為相應於最佳畫面間預測模式之資訊,係可舉例如運動向量資訊、參照畫格資訊等。
於步驟S36中,演算部63係演算出步驟S32中被排序過之影像、與步驟S35中所選擇之預測影像之間的差分。預測影像,係若進行畫面間預測時則從運動預測補償部77、若進行畫面內預測時則從畫面內預測部76,分別透過預測影像選擇部78而供給至演算部63。
差分資料係相較於原始的影像資料,資料量較小。因此,相較於把影像直接進行編碼的情形,可壓縮資料量。
於步驟S37中,正交轉換部64係將從演算部63所供給之差分資訊,進行正交轉換。具體而言,會進行離散餘弦轉換、卡忽南-拉維轉換等之正交轉換,而輸出轉換係數。
於步驟S38中,量化部65係將轉換係數予以量化。此量化之際,如後述的步驟S49之處理所說明,速率會被控制。
如以上所述,已被量化之差分資訊,係如下述般地被局部性解碼。亦即,於步驟S39中,逆量化部68係將已被量化部65所量化之轉換係數,以量化部65之特性所對應之特性,進行逆量化。於步驟S40中,逆正交轉換部69係將已被逆量化部68所逆量化之轉換係數,以正交轉換部64之特性所對應之特性,進行逆正交轉換。
於步驟S41中,演算部70係將透過預測影像選擇部78所輸入之預測影像,加算至已被局部性解碼的差分資訊,生成已被局部性解碼(亦即已被本地解碼)之影像(對應於往演算部63輸入的影像)。
於步驟S42中,去區塊濾波器71,係對演算部70所輸出的影像,進行去區塊濾波處理。此時,作為去區塊濾波器之相關判定的閾值,是使用從HEVC方式所規定之β與Tc所被擴充而來的參數β及Tc。來自去區塊濾波器71的濾波後的影像,係被輸出至適應偏置濾波器72。
此外,藉由使用者操作了操作部而被輸入,去區塊濾波器71上所被使用的參數β及Tc的各偏置,係作為去區塊濾波器的參數,而被供給至可逆編碼部66。
於步驟S43中,適應偏置濾波器72係進行適應偏置濾波處理。藉由此處理,使用對每一分割領域決定偏置濾波器之種類的quad-tree結構與每一分割領域的偏置值,來對去區塊濾波器71所致之濾波後的影像,實施濾波處理。濾波後的影像,係被供給至適應迴圈濾波器73。
此外,已被決定之quad-tree結構和每一分割領域之偏置值,係被當成適應偏置參數,供給至可逆編碼部66。
於步驟S44中,適應迴圈濾波器73,係對適應偏置濾波器72所致之濾波後的影像,進行適應迴圈濾波處理。例如,對適應偏置濾波器72所致之濾波後的影像,使用濾波器係數,每一處理單位地,對影像進行濾波處理,濾波處理結果會被供給至畫格記憶體74。
於步驟S45中,畫格記憶體74係將已被過濾之影像,加以記憶。此外,對畫格記憶體74,係還會有未被去區塊濾波器71、適應偏置濾波器72、及適應迴圈濾波器73進行濾波之影像,從演算部70被供給,而被記憶。
另一方面,在上述的步驟S38中被量化之轉換係數,係也被供給至可逆編碼部66。於步驟S46中,可逆編碼部66係將量化部65所輸出之已被量化之轉換係數、和所被供給之各參數,加以編碼。亦即,差分影像係被可變長度編碼、算術編碼等之可逆編碼,而被壓縮。此處,作為已被編碼之各參數,係可舉例如:去區塊濾波器的參數、適應偏置濾波器的參數、適應迴圈濾波器的參數、量化參數、運動向量資訊或參照畫格資訊、預測模式資訊等。
於步驟S47中,積存緩衝區67係將已被編碼之差分影像(亦即編碼串流),當成壓縮影像而予以積存。積存緩衝區67所積存之壓縮影像,係被適宜讀出,透過傳輸路而傳輸至解碼側。
於步驟S48中,速率控制部79係基於積存緩衝區67中所積存之壓縮影像,以不會發生溢位或下溢之方式,控制量化部65的量化動作之速率。
一旦步驟S48的處理結束,則編碼處理就會結束。
如以上的編碼處理中,在進行步驟S44的適應迴圈濾波器處理之際,作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集會被設定,在步驟S46,含有該已被設定之參數集的位元串流會被生成。
<影像解碼裝置之構成例>
圖10係表示作為適用了本揭露之影像處理裝置的影像解碼裝置之一實施形態的構成。如圖10所示的影像解碼裝置80,係為對應於圖8之影像編碼裝置60的解碼裝置。
已被影像編碼裝置60所編碼之編碼串流(Encoded Data),係透過所定之傳輸路,被傳輸至該對應於影像編碼裝置60的影像解碼裝置80,而被解碼。
如圖10所示,影像解碼裝置80係具有:積存緩衝區81、可逆解碼部82、逆量化部83、逆正交轉換部84、演算部85、去區塊濾波器86、適應偏置濾波器87、適應迴圈濾波器88、畫面排序緩衝區89、D/A轉換部90、畫格記憶體91、選擇部92、畫面內預測部93、運動預測補償部94、及選擇部95。
積存緩衝區81,係將所被傳輸過來的編碼資料加以收取的收取部。積存緩衝區81,係將所被傳輸過來的編碼資料,加以收取並積存。該編碼資料係被影像編碼裝置60所編碼而成。可逆解碼部82,係將在所定之時序上從積存緩衝區81所讀出之編碼資料,以圖8之可逆編碼部66之編碼方式所對應之方式,進行解碼。
可逆解碼部82,係將已被解碼之表示畫面內預測模式之資訊等參數,供給至畫面內預測部93,並將表示畫面間預測模式之資訊或運動向量資訊等參數,供給至運動預測補償部94。又,可逆解碼部82係將已被解碼之去區塊濾波器的參數,供給至去區塊濾波器86,將已被解碼之適應偏置參數,供給至適應偏置濾波器87。
逆量化部83,係將可逆解碼部82解碼所得之係數資料(量化係數),以圖8之量化部65的量化方式所對應之方式,進行逆量化。亦即,逆量化部83,係使用從影像編碼裝置60所供給之量化參數,以和圖8之逆量化部68同樣的方法,進行量化係數的逆量化。
逆量化部83係將已被逆量化之係數資料、亦即正交轉換係數,供給至逆正交轉換部84。逆正交轉換部84,係以圖8的正交轉換部64的正交轉換方式所對應之方式,將該正交轉換係數進行逆正交轉換,獲得在影像編碼裝置60中被正交轉換前的殘差資料所對應之解碼殘差資料。
逆正交轉換所得到的解碼殘差資料,係被供給至演算部85。又,對演算部85,係透過選擇部95,而從畫面內預測部93或是運動預測補償部94,供給著預測影像。
演算部85,係將該解碼殘差資料與預測影像進行加算,獲得影像編碼裝置60之演算部63進行預測影像減算前的影像資料所對應之解碼影像資料。演算部85,係將該解碼影像資料,供給至去區塊濾波器86。
去區塊濾波器86,係對來自演算部85的影像,藉由適宜進行去區塊濾波器處理以抑制解碼影像的區塊失真,將其濾波器處理結果,供給至適應偏置濾波器87。去區塊濾波器86,係和圖8的去區塊濾波器71基本上同樣地被構成。亦即,去區塊濾波器86,係具有根據量化參數所求出的參數β及Tc。參數β及Tc,係為關於去區塊濾波器之判定中所被使用的閾值。
此外,去區塊濾波器86所具有的參數β及Tc,係從HEVC方式所規定之β與Tc所擴充而來。已被影像編碼裝置60所編碼之去區塊濾波器的參數β及Tc的各偏置,係作為去區塊濾波器的參數,而於影像解碼裝置80中被接收,被可逆解碼部82所解碼,然後被去區塊濾波器86所使用。
適應偏置濾波器87,係對去區塊濾波器86所致之濾波後的影像,進行主要用來抑制漣波現象的偏置濾波(SAO)處理。
適應偏置濾波器87,係使用對每一分割領域決定偏置濾波器之種類的quad-tree結構與每一分割領域的偏置值,來對去區塊濾波器86所致之濾波後的影像,實施濾波處理。適應偏置濾波器87,係將濾波處理後之影像,供給至適應迴圈濾波器88。
此外,此quad-tree結構與每一分割領域之偏置值,係被影像編碼裝置60的適應偏置濾波器72所算出,被當成適應偏置參數,而被編碼然後發送。然後,已被影像編碼裝置60所編碼之quad-tree結構與每一分割領域之偏置值,係作為適應偏置參數,於影像解碼裝置80中被接收,被可逆解碼部82所解碼,然後被適應偏置濾波器87所使用。
適應迴圈濾波器88,係對適應偏置濾波器87所致之濾波後的影像,使用濾波器係數,每一處理單位地進行濾波處理,將濾波處理結果,供給至畫格記憶體91及畫面排序緩衝區89。
此外,雖然在圖10的例子中沒有圖示,但於影像解碼裝置80中,濾波器係數,係被影像編碼裝置60的適應迴圈濾波器73而每LUC地算出,作為適應迴圈濾波器參數,而被編碼而送來者,係被可逆解碼部82所解碼然後使用。
畫面排序緩衝區89,係進行影像的排序,並供給至D/A轉換部90。亦即,藉由圖8的畫面排序緩衝區62而被排序成編碼所需之順序的畫格之順序,係被排序成原本的顯示順序。
D/A轉換部90,係將從畫面排序緩衝區89所供給之影像(Decoded Picture(s))進行D/A轉換,輸出至未圖示之顯示器而顯示之。此外,亦可不設置D/A轉換部90,而設計成直接以數位資料的方式輸出影像之構成。
適應迴圈濾波器88的輸出,係還會被供給至畫格記憶體91。
畫格記憶體91、選擇部92、畫面內預測部93、運動預測補償部94、及選擇部95,係、分別對應於影像編碼裝置60的畫格記憶體74、選擇部75、畫面內預測部76、運動預測補償部77、及預測影像選擇部78。
選擇部92,係將被畫面間處理之影像與被參照之影像,從畫格記憶體91中讀出,供給至運動預測補償部94。又,選擇部92,係將畫面內預測時所使用的影像,從畫格記憶體91中讀出,供給至畫面內預測部93。
對畫面內預測部93係從可逆解碼部82適宜供給著,將標頭資訊解碼所得之表示畫面內預測模式的資訊等。畫面內預測部93係基於該資訊,而根據從畫格記憶體91所取得之參照影像,生成預測影像,將所生成之預測影像供給至選擇部95。
對運動預測補償部94,係有將標頭資訊解碼所得到的資訊(預測模式資訊、運動向量資訊、參照畫格資訊、旗標、及各種參數等),會從可逆解碼部82被供給。
運動預測補償部94,係基於從可逆解碼部82所供給之這些資訊,根據從畫格記憶體91所取得之參照影像,生成預測影像,將所生成之預測影像供給至選擇部95。
選擇部95,係將運動預測補償部94或畫面內預測部93所生成之預測影像加以選擇,供給至演算部85。
如此影像解碼裝置80係被構成,可逆解碼部82,係對應於圖1的解碼部25,適應迴圈濾波器88,係對應於圖1的濾波器部26。因此,影像解碼裝置80係如上述,可降低影像處理所必須的實作負荷。
<影像解碼裝置的動作>
參照圖11,說明如以上之影像解碼裝置80所執行的解碼處理的流程例。
解碼處理一旦開始,則於步驟S51中,積存緩衝區81係將所被傳輸過來的荊碼串流(資料),加以收取、積存。於步驟S52中,可逆解碼部82係將從積存緩衝區81所供給之編碼資料,加以解碼。已被圖8之可逆編碼部66所編碼的I圖像、P圖像、以及B圖像,會被解碼。
在早於圖像之解碼前,運動向量資訊、參照畫格資訊、預測模式資訊(畫面內預測模式、或畫面間預測模式)等之參數的資訊,也被解碼。
預測模式資訊是畫面內預測模式資訊的情況下,預測模式資訊係被供給至畫面內預測部93。當預測模式資訊是畫面間預測模式資訊時,與預測模式資訊對應的運動向量資訊等,係被供給至運動預測補償部94。又,去區塊濾波器的參數及適應偏置參數也被解碼,分別被供給至去區塊濾波器86及適應偏置濾波器87。
於步驟S53中,畫面內預測部93或運動預測補償部94,係對應於從可逆解碼部82所供給之預測模式資訊,而分別進行預測影像生成處理。
亦即,從可逆解碼部82供給了畫面內預測模式資訊時,畫面內預測部93係生成畫面內預測模式的畫面內預測影像。從可逆解碼部82供給了畫面間預測模式資訊時,運動預測補償部94,係進行畫面間預測模式的運動預測.補償處理,生成畫面間預測影像。
藉由此處理,畫面內預測部93所生成之預測影像(畫面內預測影像)、或運動預測補償部94所生成之預測影像(畫面間預測影像),係被供給至選擇部95。
於步驟S54中,選擇部95係選擇預測影像。亦即,畫面內預測部93所生成之預測影像、或運動預測補償部94所生成之預測影像,會被供給。因此,已被供給之預測影像會被選擇然後供給至演算部85,於後述的步驟S57中,與逆正交轉換部84之輸出進行加算。
於上述的步驟S52中,已被可逆解碼部82所解碼之轉換係數,係也被供給至逆量化部83。於步驟S55中,逆量化部83係將已被可逆解碼部82所解碼之轉換係數,以圖8之量化部65之特性所對應之特性,進行逆量化。
於步驟S56中,逆正交轉換部84係將已被逆量化部83所逆量化之轉換係數,以圖8之正交轉換部64之特性所對應之特性,進行逆正交轉換。藉此,圖8之正交轉換部64之輸入(演算部63之輸出)所對應的差分資訊,就被解碼。
於步驟S57中,演算部85係將上述步驟S54之處理中所被選擇,透過選擇部95而被輸入的預測影像,與差分資訊進行加算。藉此,原本的影像就被解碼。
於步驟S58中,去區塊濾波器86,係對演算部85所輸出的影像,進行去區塊濾波處理。此時,作為去區塊濾波器之相關判定的閾值,是使用從HEVC方式所規定之β與Tc所被擴充而來的參數β及Tc。來自去區塊濾波器86的濾波後的影像,係被輸出至適應偏置濾波器87。此外,於去區塊濾波處理中,從可逆解碼部82所供給之去區塊濾波器的參數β及Tc的各偏置,也會被使用。
於步驟S59中,適應偏置濾波器87係進行適應偏置濾波處理。藉由此處理,使用對每一分割領域決定偏置濾波器之種類的quad-tree結構與每一分割領域的偏置值,來對去區塊濾波器86所致之濾波後的影像,實施濾波處理。濾波後的影像,係被供給至適應迴圈濾波器88。
於步驟S60中,適應迴圈濾波器88,係對適應偏置濾波器87所致之濾波後的影像,進行適應迴圈濾波處理。適應迴圈濾波器88,係使用每一處理單位所被計算出來的濾波器係數,對輸入影像,每一處理單位地進行濾波處理,將濾波處理結果,供給至畫面排序緩衝區89及畫格記憶體91。
於步驟S61中,畫格記憶體91係將已被過濾之影像,加以記憶。
於步驟S62中,畫面排序緩衝區89係進行了適應迴圈濾波器88後的影像之排序之後,供給至D/A轉換部90。亦即,已被影像編碼裝置60的畫面排序緩衝區62為了進行編碼而排序過的畫格之順序,會被排序成原本的顯示順序。
於步驟S63中,D/A轉換部90,係將已被畫面排序緩衝區89所排序過的影像進行D/A轉換而輸出至未圖示的顯示器,影像就被顯示。
一旦步驟S63的處理結束,則解碼處理就會結束。
於如以上的解碼處理中,在步驟S52中,含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定作為固定值之參數集的位元串流會被解碼,在步驟S60的適應迴圈濾波處理進行之際,參照該已被解碼之參數集,而對解碼影像,適應迴圈濾波器會被適用。
<電腦之構成例>
其次,上述一連串處理(影像處理方法),係可藉由的硬體來進行,也可藉由軟體來進行。在以軟體來進行一連串之處理時,構成該軟體的程式,係可安裝至通用的電腦等。
圖12係為執行上述一連串處理的程式所被安裝之電腦的一實施形態之構成例的區塊圖。
程式是可預先被記錄在內建於電腦中的做為記錄媒體之硬碟105或ROM103。
又或者,程式係亦可先儲存(記錄)在藉由驅動機109而被驅動的可移除式記錄媒體111中。此種可移除式記錄媒體111,係可以所謂套裝軟體的方式來提供。此處,作為可移除式記錄媒體111係例如有軟碟片、CD-ROM(Compact Disc Read Only Memory)、MO(Magneto Optical)碟、DVD(Digital Versatile Disc)、磁碟、半導體記憶體等。
此外,程式除了可從如上述的可移除式記錄媒體111安裝至電腦,還可透過通訊網或播送網而下載至電腦中,安裝至內建的硬碟105。亦即,程式係可例如從下載網站,透過數位衛星播送用的人造衛星,以無線而傳輸至電腦、或透過LAN(Local Area Network)、網際網路這類網路,以有線方式而傳輸至電腦。
電腦係內藏有CPU(Central Processing Unit)102,對CPU102係透過匯流排101而連接有輸出入介面110。
CPU102係一旦透過輸出入介面110藉由使用者操作輸入部107等而進行了指令輸入,則會聽從之而執行ROM(Read Only Memory)103中所儲存的程式。或者,CPU102係將硬碟105中所儲存的程式,載入至RAM(Random Access Memory)104中而加以執行。
藉此,CPU102係會進行依照上述流程圖之處理,或是由上述區塊圖之構成所進行之處理。然後,CPU102係將其處理結果,因應需要,例如,透過輸出入介面110而從輸出部106加以輸出,或者從通訊部108進行送訊,或甚至記錄在硬碟105中等。
此外,輸入部107係由鍵盤、滑鼠、麥克風等所構成。又,輸出部106係由LCD(Liquid Crystal Display)或揚聲器等所構成。
此處,於本說明書中,電腦依照程式而進行之處理,係並不一定依照流程圖方式所記載之順序而時間序列性地進行。亦即,電腦依照程式所進行的處理,係包含可平行地或個別地執行之處理(例如平行處理或是物件所致之處理)。
又,程式係可被1個電腦(處理器)所處理,也可被複數電腦分散處理。甚至,程式係亦可被傳輸至遠方的電腦而執行之。
再者,於本說明書中,所謂的系統,係意味著複數構成要素(裝置、模組(零件)等)的集合,所有構成要素是否位於同一框體內則在所不問。因此,被收納在個別的框體中,透過網路而連接的複數台裝置、及在1個框體中收納有複數模組的1台裝置,均為系統。
又,例如,亦可將以1個裝置(或處理部)做說明的構成加以分割,成為複數裝置(或處理部)而構成之。反之,亦可將以上說明中以複數裝置(或處理部)做說明的構成總結成1個裝置(或處理部)而構成之。又,對各裝置(或各處理部)之構成,當然亦可附加上述以外之構成。再者,若系統全體的構成或動作是實質相同,則亦可使某個裝置(或處理部)之構成的一部分被包含在其他裝置(或其他處理部)之構成中。
又,例如,本技術係亦可將1個功能,透過網路而分擔給複數台裝置,採取共通進行處理的雲端運算之構成。
又,例如,上述的程式,係可於任意的裝置中執行。此情況下,只要讓該裝置,具有必要的功能(功能區塊等),能夠獲得必要的資訊即可。
又,例如,上述的流程圖中所說明的各步驟,係可由1台裝置來執行以外,亦可由複數台裝置來分擔執行。甚至,若1個步驟中含有複數處理的情況下,該1個步驟中所含之複數處理,係可由1台裝置來執行以外,也可由複數台裝置來分擔執行。換言之,亦可將1個步驟中所含之複數個處理,以複數個步驟之處理的方式而執行之。反之,亦可將以複數個步驟的方式做說明的處理,整合成1個步驟而執行之。
此外,電腦所執行的程式,描述程式的步驟之處理,係可為依照本說明書所說明之順序而在時間序列上被執行,也可平行地,或可在進行呼叫時等必要之時序上,而被個別地執行。亦即,只要不產生矛盾,各步驟之處理係亦可以和上述之順序不同的順序而被執行。甚至,描述該程式的步驟之處理,亦可與其他程式之處理平行地執行,也可和其他程式之處理組合而執行。
此外,本說明書中所複數說明的本技術,係只要不產生矛盾的況下,都可分別獨立以單體而加以實施。當然,亦可將任意的複數個本技術加以併用而實施。例如,可以將任一實施形態中所說明的本技術的部分或全部,與其他實施形態中所說明的本技術的部分或全部,加以組合而實施。又,亦可將上述的任意之本技術的部分或全部,與未上述的其他技術加以併用而實施。
<構成之組合例>
此外,本技術係亦可採取如以下之構成。
(1)
一種影像處理裝置,係具備:
解碼部,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和
濾波器部,係參照已被前記解碼部所解碼之參數集,而對已被前記解碼部所生成之解碼影像,適用前記適應迴圈濾波器。
(2)
如上記(1)所記載之影像處理裝置,其中,
前記最大數,係為不依存於將切片做分割的瓷磚之數量的固定值。
(3)
如上記(1)或(2)所記載之影像處理裝置,其中,
前記最大數,係為按照每一等級而被規定之固定值。
(4)
如上記(1)至(3)之任一項所記載之影像處理裝置,其中,
前記參數集,係為APS(Adaptation parameter set)。
(5)
如上記(1)至(4)之任一項所記載之影像處理裝置,其中,
前記最大數,係為按照每一aps_params_type而被規定之固定值。
(6)
如上記(1)至(5)之任一項所記載之影像處理裝置,其中,
前記最大數,係為按照每一aps_params_type而被規定,且為隨著每一等級而不同的固定值。
(7)
一種影像處理方法,係含有:
解碼工程,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和
參照前記解碼工程中所被解碼之參數集,對前記解碼工程中所被生成之解碼影像,適用前記適應迴圈濾波器。
(8)
一種影像處理裝置,係具備:
設定部,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和
編碼部,係將影像予以編碼,而生成含有已被前記設定部所設定之參數集的位元串流。
(9)
如上記(8)所記載之影像處理裝置,其中,
還具備:濾波器部,係對在前記編碼部中被進行編碼之際的本地編碼影像,適用前記適應迴圈濾波器;
前記編碼部,係使用已被前記濾波器部適用了前記適應迴圈濾波器的濾波器影像,而將前記影像予以編碼。
(10)
一種影像處理方法,係含有:
設定工程,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和
編碼工程,係將影像予以編碼,而生成含有在前記設定工程中所被設定之參數集的位元串流。
此外,本實施形態係不限定於上述實施形態,在不脫離本揭露主旨的範圍內可做各種變更。又,本說明書中所記載之效果僅為例示並非限定,亦可還有其他的效果。
11:影像處理系統
12:影像編碼裝置
13:影像解碼裝置
21:設定部
22:編碼部
23:濾波器部
24:資料庫
25:解碼部
26:濾波器部
27:資料庫
31:網路系統
32:電腦
33:網路
34:遠端電腦
35:網頁伺服器
36:雲端儲存伺服器
37:電腦伺服器
41:匯流排
42:處理器
43:記憶體
44:非揮發性儲存體
45:程式
46:網路介面
47:周邊機器介面
48:顯示器介面
51:外部裝置
52:顯示器
60:影像編碼裝置
61:A/D轉換部
62:畫面排序緩衝區
63:演算部
64:正交轉換部
65:量化部
66:可逆編碼部
67:積存緩衝區
68:逆量化部
69:逆正交轉換部
70:演算部
71:去區塊濾波器
72:適應偏置濾波器
73:適應迴圈濾波器
74:畫格記憶體
75:選擇部
76:畫面內預測部
77:運動預測補償部
78:預測影像選擇部
79:速率控制部
80:影像解碼裝置
81:積存緩衝區
82:可逆解碼部
83:逆量化部
84:逆正交轉換部
85:演算部
86:去區塊濾波器
87:適應偏置濾波器
88:適應迴圈濾波器
89:畫面排序緩衝區
90:D/A轉換部
91:畫格記憶體
92:選擇部
93:畫面內預測部
94:運動預測補償部
95:選擇部
101:匯流排
102:CPU
103:ROM
104:RAM
105:硬碟
106:輸出部
107:輸入部
108:通訊部
109:驅動機
110:輸出入介面
111:可移除式記錄媒體
[圖1]適用了本技術的影像處理系統之一實施形態之構成例的區塊圖。
[圖2]ALF_APS之使用例的說明圖。
[圖3]APS parameters type codes之一例的圖示。
[圖4]被規定成會隨著等級而進行位元對齊的最大APS數之一例的圖示。
[圖5]按照每一aps_params_type,隨著等級而被規定的最大APS數之一例的圖示。
[圖6]按照每一aps_params_type,隨著等級而被規定的最大APS數之具體例的說明圖。
[圖7]適用了本技術的基於電腦的一實施形態之構成例的區塊圖。
[圖8]影像編碼裝置的一實施形態之構成例的區塊圖。
[圖9]說明編碼處理的流程圖。
[圖10]影像解碼裝置的一實施形態之構成例的區塊圖。
[圖11]說明解碼處理的流程圖。
[圖12]適用了本技術之電腦的一實施形態之構成例的區塊圖。
Claims (10)
- 一種影像處理裝置,係具備: 解碼部,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和 濾波器部,係參照已被前記解碼部所解碼之參數集,而對已被前記解碼部所生成之解碼影像,適用前記適應迴圈濾波器。
- 如請求項1所記載之影像處理裝置,其中, 前記最大數,係為不依存於將切片做分割的瓷磚之數量的固定值。
- 如請求項1所記載之影像處理裝置,其中, 前記最大數,係為按照每一等級而被規定之固定值。
- 如請求項1所記載之影像處理裝置,其中, 前記參數集,係為APS(Adaptation parameter set)。
- 如請求項1所記載之影像處理裝置,其中, 前記最大數,係為按照每一aps_params_type而被規定之固定值。
- 如請求項1所記載之影像處理裝置,其中, 前記最大數,係為按照每一aps_params_type而被規定,且為隨著每一等級而不同的固定值。
- 一種影像處理方法,係含有: 解碼工程,係將含有作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集的位元串流予以解碼,而生成解碼影像;和 參照前記解碼工程中所被解碼之參數集,對前記解碼工程中所被生成之解碼影像,適用前記適應迴圈濾波器。
- 一種影像處理裝置,係具備: 設定部,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和 編碼部,係將影像予以編碼,而生成含有已被前記設定部所設定之參數集的位元串流。
- 如請求項8所記載之影像處理裝置,其中, 還具備:濾波器部,係對在前記編碼部中被進行編碼之際的本地編碼影像,適用前記適應迴圈濾波器; 前記編碼部,係使用已被前記濾波器部適用了前記適應迴圈濾波器的濾波器影像,而將前記影像予以編碼。
- 一種影像處理方法,係含有: 設定工程,係將作為適應迴圈濾波器而進行參照的參數集之數量之最大數是已被規定成為固定值之參數集,加以設定;和 編碼工程,係將影像予以編碼,而生成含有在前記設定工程中所被設定之參數集的位元串流。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962864189P | 2019-06-20 | 2019-06-20 | |
US62/864,189 | 2019-06-20 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202106014A true TW202106014A (zh) | 2021-02-01 |
Family
ID=74040449
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW109119823A TW202106014A (zh) | 2019-06-20 | 2020-06-12 | 影像處理裝置及影像處理方法 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20220166975A1 (zh) |
EP (1) | EP3975567A4 (zh) |
JP (2) | JP7509143B2 (zh) |
KR (1) | KR20220022482A (zh) |
CN (1) | CN113950833A (zh) |
TW (1) | TW202106014A (zh) |
WO (1) | WO2020255940A1 (zh) |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8325796B2 (en) * | 2008-09-11 | 2012-12-04 | Google Inc. | System and method for video coding using adaptive segmentation |
GB2488830B (en) * | 2011-03-10 | 2015-07-29 | Canon Kk | Method and device for encoding image data and method and device for decoding image data |
CN103096047B (zh) * | 2011-11-01 | 2018-06-19 | 中兴通讯股份有限公司 | 一种分片层参数集解码及编码方法和装置 |
US20130114694A1 (en) * | 2011-11-08 | 2013-05-09 | Qualcomm Incorporated | Parameter set groups for coded video data |
JP2014197723A (ja) * | 2012-01-06 | 2014-10-16 | ソニー株式会社 | 画像処理装置および方法 |
WO2013105458A1 (ja) * | 2012-01-12 | 2013-07-18 | ソニー株式会社 | 画像処理装置および方法 |
US9538200B2 (en) * | 2012-01-19 | 2017-01-03 | Qualcomm Incorporated | Signaling of deblocking filter parameters in video coding |
CN104221383B (zh) * | 2012-04-13 | 2018-09-11 | 三菱电机株式会社 | 图像编码装置、图像解码装置、图像编码方法以及图像解码方法 |
WO2016199330A1 (ja) * | 2015-06-12 | 2016-12-15 | パナソニックIpマネジメント株式会社 | 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置 |
JP6115968B2 (ja) * | 2015-08-04 | 2017-04-19 | 日本電信電話株式会社 | 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム及び画像復号プログラム |
KR102545728B1 (ko) * | 2018-07-16 | 2023-06-20 | 엘지전자 주식회사 | 서브블록 단위의 시간적 움직임 정보 예측을 위한 인터 예측 방법 및 그 장치 |
CN113508583B (zh) * | 2019-03-04 | 2024-08-27 | Lg电子株式会社 | 基于帧内块编译的视频或图像编译 |
CN113574898B (zh) * | 2019-03-08 | 2024-01-23 | 佳能株式会社 | 自适应环路滤波器 |
CN113661714B (zh) * | 2019-03-11 | 2024-10-01 | 交互数字Vc控股公司 | 子画面比特流提取和重新定位 |
US11683487B2 (en) * | 2019-03-26 | 2023-06-20 | Qualcomm Incorporated | Block-based adaptive loop filter (ALF) with adaptive parameter set (APS) in video coding |
US11368684B2 (en) * | 2019-04-23 | 2022-06-21 | Qualcomm Incorporated | Adaptation parameter sets (APS) for adaptive loop filter (ALF) parameters |
US11284114B2 (en) * | 2019-04-23 | 2022-03-22 | Qualcomm Incorporated | Adaptive loop filter set index signaling |
WO2020228762A1 (en) * | 2019-05-14 | 2020-11-19 | Beijing Bytedance Network Technology Co., Ltd. | Context modeling for residual coding |
US11856231B2 (en) * | 2019-05-30 | 2023-12-26 | Sharp Kabushiki Kaisha | Systems and methods for signaling hypothetical reference decoder parameters in video coding |
WO2020256613A1 (en) * | 2019-06-19 | 2020-12-24 | Telefonaktiebolaget Lm Ericsson (Publ) | Compact network abstraction layer (nal) unit header |
CN114175651A (zh) * | 2019-06-20 | 2022-03-11 | Lg电子株式会社 | 基于亮度映射和色度缩放的视频或图像编码 |
CN114128273B (zh) * | 2019-06-20 | 2023-11-17 | Lg电子株式会社 | 图像解码和编码方法及用于图像的数据的发送方法 |
CN118018729A (zh) * | 2019-06-20 | 2024-05-10 | Lg电子株式会社 | 图像解码和编码方法、数据的发送方法及存储介质 |
WO2021204063A1 (en) * | 2020-04-07 | 2021-10-14 | FG Innovation Company Limited | Device and method for coding video data |
-
2020
- 2020-06-12 TW TW109119823A patent/TW202106014A/zh unknown
- 2020-06-16 KR KR1020217039204A patent/KR20220022482A/ko unknown
- 2020-06-16 EP EP20826524.9A patent/EP3975567A4/en active Pending
- 2020-06-16 JP JP2021528243A patent/JP7509143B2/ja active Active
- 2020-06-16 US US17/617,004 patent/US20220166975A1/en active Pending
- 2020-06-16 WO PCT/JP2020/023504 patent/WO2020255940A1/ja unknown
- 2020-06-16 CN CN202080043358.6A patent/CN113950833A/zh active Pending
-
2024
- 2024-05-31 JP JP2024088704A patent/JP2024103663A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
JP7509143B2 (ja) | 2024-07-02 |
EP3975567A1 (en) | 2022-03-30 |
JP2024103663A (ja) | 2024-08-01 |
CN113950833A (zh) | 2022-01-18 |
WO2020255940A1 (ja) | 2020-12-24 |
EP3975567A4 (en) | 2022-08-10 |
US20220166975A1 (en) | 2022-05-26 |
JPWO2020255940A1 (zh) | 2020-12-24 |
KR20220022482A (ko) | 2022-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10750177B2 (en) | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program | |
CN107277539B (zh) | 减少用于上下文自适应熵解码中的行缓存的方法及装置 | |
TW202135530A (zh) | 用於編碼和解碼視訊樣本區塊的方法、設備及系統 | |
CN113597757A (zh) | 具有区域数自适应的几何划分的形状自适应离散余弦变换 | |
US20080310739A1 (en) | Moving picture compression coding apparatus | |
JP6469277B2 (ja) | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム | |
JP2007306370A (ja) | 画像符号化記録装置 | |
WO2020262370A1 (ja) | 画像処理装置および画像処理方法 | |
WO2021054437A1 (ja) | 画像処理装置および画像処理方法 | |
WO2021060262A1 (ja) | 画像処理装置および画像処理方法 | |
TW202106014A (zh) | 影像處理裝置及影像處理方法 | |
TW202130178A (zh) | 影像處理裝置及影像處理方法 | |
CN102215384A (zh) | 图像压缩方法和系统 | |
US20140334552A1 (en) | Image decoding device | |
JP4105676B2 (ja) | メディアストリームを非ブロック化しコード変換する方法 | |
WO2023127940A1 (ja) | 画像処理装置および画像処理方法 | |
WO2020184715A1 (ja) | 画像処理装置および画像処理方法 | |
TW202130170A (zh) | 影像處理裝置及影像處理方法 | |
WO2021054438A1 (ja) | 画像処理装置および画像処理方法 | |
WO2024031691A1 (zh) | 一种视频编解码方法、装置和系统 | |
WO2021060484A1 (ja) | 画像処理装置および画像処理方法 | |
WO2022217417A1 (zh) | 编解码方法、编码器、解码器以及存储介质 | |
JP2022548685A (ja) | 画像データの符号化及び復号化 | |
US20200162756A1 (en) | Image processing device and method, and program | |
CN116074531A (zh) | 解码方法、编码方法及装置 |