TWI606720B - 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體 - Google Patents

畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體 Download PDF

Info

Publication number
TWI606720B
TWI606720B TW105123731A TW105123731A TWI606720B TW I606720 B TWI606720 B TW I606720B TW 105123731 A TW105123731 A TW 105123731A TW 105123731 A TW105123731 A TW 105123731A TW I606720 B TWI606720 B TW I606720B
Authority
TW
Taiwan
Prior art keywords
intra prediction
image
prediction
block
unit
Prior art date
Application number
TW105123731A
Other languages
English (en)
Other versions
TW201640900A (zh
Inventor
峯澤彰
關口俊一
杉本和夫
Original Assignee
三菱電機股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=45892218&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TWI606720(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 三菱電機股份有限公司 filed Critical 三菱電機股份有限公司
Publication of TW201640900A publication Critical patent/TW201640900A/zh
Application granted granted Critical
Publication of TWI606720B publication Critical patent/TWI606720B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體
本發明係有關於以高效率將動畫像編碼的動畫像編碼裝置及動畫像編碼方法，與將以高效率編碼之動畫像解碼的動畫像解碼裝置及動畫像解碼方法。
例如為MPEG(Moving Picture Experts Group)或「ITU-T H.26×」等國際標準影像編碼方式時，係採用了將輸入影像幀分割成矩形的區塊(編碼對象區塊)，而對該編碼對象區塊實施利用已編碼完的畫像信號的預測處理以產生預測畫像，並於區塊單位將屬於該編碼對象區塊與預測畫像之差分的預測誤差信號實施正交變換或量化處理，以進行資訊壓縮。
例如若為國際標準化方式之AVC/H.264(ISO/IEC 14496-10｜ITU-T H.264)，則進行從已編碼完之附近像素開始的幀內預測處理或在接近幀間的移動補償預測處理(例如，參考非專利文獻1)。
於MPEG-4 AVC/H.264中，亮度的幀內預測模式能於區塊單位從複數個預測模式之中選擇一個預測模式。
第10圖係顯示亮度的區塊尺寸為4×4像素的場合之幀內預測模式的說明圖。
第10圖中，白色圓圈係編碼對象之區塊內的像素。黑色圓圈係使用於預測的像素，且係已編碼完之鄰接區塊內的像素。
第10圖中製備了9個之模式0至模式8作為幀內預測模式，模式2係進行平均值預測的模式，以上面與左邊的區塊之鄰接像素的平均值預測編碼對象區塊內的像素。
模式2以外的模式係進行方向性預測的模式。模式0為垂直方向預測，以將上面的區塊之鄰接像素朝垂直方向反覆而產生預測畫像。例如，直條紋時選擇模式0。
模式1為水平方向預測，以將左邊的區塊之鄰接像素朝水平方向反覆而產生預測畫像。例如，橫條紋時選擇模式1。
模式3至模式8使用上面或左邊的區塊之鄰接像素，於預定的方向(箭頭所示的方向)產生內插像素以產生預測畫像。
應用幀內預測之亮度的區塊尺寸係可從4×4像素、8×8像素、16×16像素之中選擇，8×8像素的場合與4×4像素的場合同樣限定了9個幀內預測模式。
16×16像素的場合，限定了4個幀內預測模式(平均值預測、垂直方向預測、水平方向預測、平面預測)。
平面預測係將上面區塊之鄰接像素與左邊區塊之鄰接像素朝斜方向內插插補並將所產生的像素作為預測值的模式。
區塊尺寸為4×4像素或8×8像素的場合之方向性預測模式，係以例如45度等依據模式所預先決定的方向來產生預測值，所以在區塊內的目標之交界(邊緣)的方向與預測模式所示的方向一致的場合，預測效率變高而能削減碼量。
但是，僅邊緣的方向與預測模式所示的方向之間僅發生些微的錯開，或是即使是方向一致而編碼對象區塊內的邊緣僅有一些歪斜(搖擺、彎曲等)，都會發生局部性大的預測誤差，而會有預測效率極端降低的情況。
為了防止如此的預測效率的降低，若是8×8像素的方向性預測，將對於已編碼完的鄰接像素施予了平滑化濾波的畫像作為產生預測畫像時使用的參考畫像，以產生平滑化的預測畫像，降低在預測方向之些微的錯開或邊緣僅發生些微的歪斜時所發生的預測誤差。
先前技術文獻 非專利文獻
非特許文獻1：MPEG-4 AVC(ISO/IEC 14496-10)/ITU-T H. 264規格
發明概要
習知的畫像編碼裝置如以上的方式構成，所以若是實施濾波處理之後產生業經平滑化的預測畫像，則即使在預 測方向之些微的錯開或邊緣僅發生些微的歪斜，也能降低所發生的預測誤差。但是，非專利文獻1除了8×8像素之區塊以外未實施濾波處理，使用於8×8像素之區塊的濾波器也僅是一種而已。實際上在8×8像素以外尺寸之區塊也同樣，即使預測畫像與編碼對象畫像的構圖相似，也會因邊緣僅些微的不匹配而於局部發生大的預測誤差，而存在有會發生大幅降低預測效率的課題。
又，即使於相同尺寸的區塊，一旦將預測誤差信號量化時使用的量化參數或區塊內的像素的位置等不同，則適用於降低局部的預測誤差的濾波器不同，但是僅準備了一種的濾波器，而存在有無法充分降低預測誤差的課題。
本發明係用以解決上述的課題而完成的發明，以獲得可降低局部地發生的預測誤差而可提高畫像品實之動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法及動畫像解碼方法為目的。
本發明之動畫像編碼裝置，係幀內預測手段使用幀內已編碼完的畫像信號，以實施幀內預測處理而產生預測畫像時，從預先製備的一個以上濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器實施對預測畫像的濾波處理，而將濾波處理後的預測畫像輸出至差分畫像產生手段。
依據本發明，由於係建構成幀內預測手段使用幀內已 編碼完的畫像信號，以實施幀內預測處理而產生預測畫像時，從預先製備的一個以上濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器實施對預測畫像的濾波處理，而將濾波處理後的預測畫像輸出至差分畫像產生手段，所以具有降低局部發生的預測誤差而能提高畫像品質的效果。
1‧‧‧編碼控制部(編碼控制手段)
2‧‧‧區塊分割部(區塊分割手段)
3‧‧‧切換開關(幀內預測手段、移動補償預測手段)
4‧‧‧幀內預測部(幀內預測手段)
5‧‧‧移動補償預測部(移動補償預測手段)
6‧‧‧減法部(差分畫像產生手段)
7‧‧‧變換或量化部(畫像壓縮手段)
8‧‧‧反量化或反變換部
9‧‧‧加法部
10‧‧‧幀內預測用記憶體
11‧‧‧迴路濾波部
12‧‧‧移動補償預測幀記憶體
13‧‧‧可變長度編碼部(可變長度編碼手段)
51‧‧‧可變長度解碼部(可變長度解碼手段)
52‧‧‧切換開關(幀內預測手段、移動補償預測手段)
53‧‧‧幀內預測部(幀內預測手段)
54‧‧‧移動補償預測部(移動補償預測手段)
55‧‧‧反量化或反變換部(差分畫像產生手段)
56‧‧‧加法部(解碼畫像產生手段)
57‧‧‧幀內預測用記憶體
58‧‧‧迴路濾波部
59‧‧‧移動補償預測幀記憶體
第1圖係顯示依據本發明之實施形態1所構成之動畫像編碼裝置的構造圖。
第2圖係顯示依據本發明之實施形態1所構成之動畫像解碼裝置的構造圖。
第3圖係顯示依據本發明之實施形態1所構成之動畫像編碼裝置之處理內容的流程圖。
第4圖係顯示依據本發明之實施形態1所構成之動畫像解碼裝置之處理內容的流程圖。
第5圖係顯示最大尺寸之編碼區塊階層地分割成複數個編碼區塊的情形的說明圖。
第6圖(a)係顯示分割後之分區的分布，第6圖(b)係顯示以四分樹曲線圖顯示於階層分割後之分區分配編碼模式m(Bn)之狀況的說明圖。
第7圖係顯示於編碼區塊Bn內之各分區Pi n中可選擇的幀內預測參數(幀內預測模式)之一例的說明圖。
第8圖係顯示li m=mi n=4時，於產生分區Pi n內之像素的預測值之際使用的像素之一例的說明圖。
第9圖係顯示N=5時之參考像素配置之一例的說明圖。
第10圖係顯示亮度的區塊尺寸為4×4像素時之幀內預測模式的說明圖。
以下為了更詳細說明本發明，參照所附的圖式來說明用以實施本發明的實施形態。
實施形態1
本實施形態1說明輸入影像之各幀畫像，實施從已編碼完之附近像素的幀內預測處理或在接近幀間實施移動補償預測處理以產生預測畫像，對其預測畫像與幀畫像之作為差分畫像的預測誤差信號施予正交變換或量化所為之壓縮處理後，進行可變長度編碼以產生位元流的動畫像編碼裝置、與將從該動畫像編碼裝置輸出的位元流解碼的動畫像解碼裝置。
本實施形態1之動畫像編碼裝置，係以適應影像信號的空間或時間方向的局部變化，而將影像信號分割成多種多樣尺寸的區域以進行幀內或幀間適應編碼為特徵。
一般，影像信號具有在空間或時間性信號的複雜度會局部性地變化的特性。從空間性來看，在某特定的影像幀上若是在天空或壁等較寬廣的畫像區域中也具有擁有著均一的信號特性的構圖，則在擁有人物或細的紋理的繪畫等小畫像區域內亦會有混雜著具有複雜的紋理圖案的構圖。
以時間性來看，天空或壁在局部時間方向之構圖的變 化小，但是移動的人物或物體其輪廓會時間性地進行剛體或非剛體的運動，所以時間性的變化大。
編碼處理係以依據時間或空間性的預測而產生信號電力或熵(entropy)小的預測差分信號的狀態，可削減整體的碼量，而若是能將用以預測的參數儘量地均一地應用於大的畫像信號區域，則能減少其參數的編碼量。
相對於此，對於時間性或空間性變化大的畫像信號圖案，當運用相同的預測參數時，則預測的誤差增加，因此，無法刪減預測差分信號的碼量。
因此，對於時間性或空間性變化大的畫像信號圖案，以即使減少預測對象的區域而增加預測用之參數的資料量也會減少預測誤差信號的電力或熵的方式較宜。
為了進行如此影像信號之適應一般性質的編碼，本實施形態1之動畫像編碼裝置，係建構成從預定的最大區塊尺寸階層地分割影像信號的區域，而對每一分割區域實施預測處理或預測差分的編碼處理。
本實施形態1之動畫像編碼裝置之作為處理對象的影像信號，係除了由亮度信號與兩個色差信號所構成的YUV信號及從數位攝像元件輸出的RGB信號等任意的色空間的彩色影像信號之外，有黑白畫像信號或紅外線畫像信號等影像幀為由水平或垂直二維的數位樣本(像素)列所構成之任意的影像信號。
各像素的位階可為8位元、也可為10位元、12位元等位階。
其中於以下的說明中，除非特別聲明，否則輸入的影像信號係設為YUV信號。又，兩個色差成分U、V相對於亮度成分Y係設為業經子樣本處理的4：2：0格式化信號。
又，將與影像之各幀對應的處理資料單位稱為「圖像(picture)」，本實施形態1說明「圖像」係作為經順序掃描(循序掃描)之影像幀的信號。其中，影像信號為交錯信號時，「圖像」也可為構成影像幀之單位即場(field)畫像信號。
第1圖係顯示依據本發明之實施形態1所構成之動畫像編碼裝置的構造圖。
第1圖中，編碼控制部1決定實施幀內預測處理(幀之內預測處理)或移動補償預測處理(幀間預測處理)時成為處理單位的編碼區塊的最大尺寸，且實施決定最大尺寸之編碼區塊被階層地分割時之上限階層數的處理。
又，編碼控制部1實施從可利用的一個以上的編碼模式(一個以上的幀內編碼模式、一個以上的幀間編碼模式)之中，選擇適合於階層地分割之個別的編碼區塊之編碼模式的處理。
又，編碼控制部1按每一個編碼區塊實施決定壓縮差分畫像時使用的量化參數及變換區塊尺寸，且決定實施預測處理時使用的幀內預測參數或幀間預測參數的處理。量化參數及變換區塊尺寸包含於預測誤差編碼參數，且被輸出至變換或量化部7、反量化或反變換部8及可變長度編碼部13等。
又，編碼控制部1構成編碼控制手段。
區塊分割部2當輸入顯示輸入畫像的影像信號時，實施將該影像信號所顯示的輸入畫像分割成由編碼控制部1所決定之最大尺寸的編碼區塊，且將該編碼區塊階層地分割至由編碼控制部1所決定之上限的階層數之處理。又，區塊分割部2構成區塊分割手段。
切換開關3實施當由編碼控制部1所選擇的編碼模式為幀內編碼模式時，將由區塊分割部2所分割的編碼區塊輸出至幀內預測部4；當由編碼控制部1所選擇的編碼模式為幀間編碼模式時，將由區塊分割部2所分割的編碼區塊輸出至移動補償預測部5。
幀內預測部4當從切換開關3接受由區塊分割部2所分割的編碼區塊時，實施使用幀內已編碼完的畫像信號，並依據從編碼控制部1輸出的幀內預測參數以實施對該編碼區塊之幀內預測處理而產生預測畫像的處理。
其中，幀內預測部4產生上述的預測畫像之後，從預先準備的一個以上的濾波器之中，因應相關濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器實施對上述預測畫像的濾波處理，而將濾波處理後的預測畫像輸出至減法部6及加法部9。
上述的濾波器係考量以下4個參數之中至少一個以上的參數而選擇。
‧參數(1)
上述的預測畫像的區塊尺寸
‧參數(2)
由編碼控制部1所決定的量化參數
‧參數(3)
產生預測畫像時使用的幀內已編碼完的畫像信號與濾波處理對象像素的距離
‧參數(4)
由編碼控制部1所決定的幀內預測參數
又，由切換開關3及幀內預測部4構成幀內預測手段。
移動補償預測部5在由編碼控制部1選擇了幀間編碼模式作為適合於由區塊分割部2所分割之編碼區塊之編碼模式的情況下，實施使用由移動補償預測幀記憶體12所儲存的一幀以上的參考畫像，並依據由編碼控制部1輸出的幀間預測參數，實施對該編碼區塊的移動補償預測處理以產生預測畫像的處理。
又，由切換開關3及移動補償預測部5構成移動補償預測手段。
減法部6實施從由區塊分割部2所分割的編碼區塊，減去由幀內預測部4或移動補償預測部5所產生的預測畫像，而產生差分畫像(=編碼區塊-預測畫像)的處理。又，減法部6構成差分畫像產生手段。
變換或量化部7以從編碼控制部1輸出的預測誤差編碼參數所包含之變換區塊尺寸單位，實施藉著減算部6所產生的差分畫像的變換處理(例如，DCT(離散餘弦變換)或預先對特定的學習系列進行基底設計的KL變換等正交變 換處理)，且使用該預測誤差編碼參數所包含的量化參數而將該差分畫像的變換係數予以量化，以實施將量化後的變換係數作為差分畫像之壓縮資料並輸出的處理。又，變換或量化部7構成畫像壓縮手段。
反量化或反變化部8使用從編碼控制部1輸出的預測誤差編碼參數所包含的量化參數，而將從變換或量化部7所輸出的壓縮資料反量化，並以該預測誤差編碼參數所包含的變換區塊尺寸單位實施反量化的壓縮資料的反變換處理(例如，反DCT(反離散餘弦變換)或反KL變換等反變換處理)，而將反變換處理後的壓縮資料作為局部解碼預測誤差信號並輸出的處理。
加法部9將從反量化或反變化部8輸出的局部解碼預測誤差信號與藉著顯示由幀內預測部4或移動補償預測部5所產生的預測畫像的預測信號予以加算，以產生其顯示局部解碼畫像之局部解碼畫像信號的處理。
幀內預測用記憶體10係儲存由加法部9所產生的局部解碼畫像信號所顯示的局部解碼畫像的RAM等記錄媒體，而該局部解碼畫像係作為由幀內預測部4在下一次的幀內預測處理所使用的畫像。
迴路濾波部11實施將由加法部9所產生的局部解碼畫像信號所包含的編碼失真予以補償，並將編碼失真補償後的局部解碼畫像信號所顯示的局部解碼畫像作為參考畫像而輸出至移動補償預測幀記憶體12的處理。
移動補償預測幀記憶體12係儲存由迴路濾波部11所 為之濾波處理後的局部解碼畫像之RAM等記錄媒體，而該局部解碼畫像係作為由移動補償預測部5在下一次的移動補償預測處理所使用的參考畫像。
可變長度編碼部13實施將從變換或量化部7輸出的壓縮資料、從編碼控制部1輸出的編碼模式及預測誤差編碼參數、以及從幀內預測部4輸出的幀內預測參數或從移動補償預測部5輸出的幀間預測參數予以可變長度編碼，以產生其壓縮資料、編碼模式、預測誤差編碼參數、幀內預測參數/幀間預測參數的編碼資料經多工之位元流的處理。又，可變長度編碼部13構成可變長度編碼手段。
第2圖係顯示依據本發明之實施形態1所構成之動畫像解碼裝置的構造圖。
於第2圖中，可變長度解碼部51實施將從已多工成位元流的編碼資料階層地分割之分別的編碼區塊有關的壓縮資料、編碼模式、預測誤差編碼參數、幀內預測參數/幀間預測參數予以可變長度解碼，並將該壓縮資料及預測誤差編碼參數輸出至反量化或反變換部55，且將該編碼模式及幀內預測參數/幀間預測參數輸出至切換開關52的處理。又，可變長度解碼部51構成可變長度解碼機構。
切換開關52實施在從可變長度解碼部51輸出的編碼區塊有關的編碼模式為幀內編碼模式時，將從可變長度解碼部51輸出的幀內預測參數輸出至幀內預測部53；而在其編碼模式為幀間編碼模式時，將從可變長度解碼部51輸出的幀間預測參數輸出至移動補償預測部54的處理。
幀內預測部53實施使用幀內已解碼完的畫像信號，並依據從切換開關52輸出的幀內預測參數，而對編碼區塊實施幀內預測處理以產生預測畫像的處理。
其中，幀內預測部53產生上述的預測畫像之後，從預先準備的一個以上的濾波器之中，因應相關濾波處理對象區塊的解碼之各種參數的狀態而選擇濾波器，並使用該濾波器實施對上述預測畫像的濾波處理，而將濾波處理後的預測畫像輸出至加法部56。
上述的濾波器係考量以下4個參數之中至少一個以上的參數而選擇。
‧參數(1)
上述的預測畫像的區塊尺寸
‧參數(2)
由可變長度解碼部51所可變長度解碼的量化參數
‧參數(3)
產生預測畫像時使用的幀內已編碼完的畫像信號與濾波處理對象像素的距離
‧參數(4)
由可變長度解碼部51所可變長度解碼的的幀內預測參數
又，由切換開關52及幀內預測部53構成幀內預測手段。
移動補償預測部54使用由移動補償預測幀記憶體59所儲存之一幀以上的參考畫像，並依據由切換開關52輸出 的幀間預測參數，實施對編碼區塊的移動補償預測處理，以實施產生預測畫像的處理。
又，由切換開關52及移動補償預測部54構成移動補償預測手段。
反量化或反變換部55使用從可變長度解碼部51輸出的預測誤差編碼參數所包含的量化參數，而將由可變長度解碼部51輸出之編碼區塊的壓縮資料反量化，並以其預測誤差編碼參數所包含的變換區塊尺寸單位，實施反量化壓縮資料的反變換處理(例如，反DCT(反離散餘弦變換)或反KL變換等反變換處理，而實施將反變換處理後之壓縮資料作為解碼預測誤差信號(顯示壓縮前之差分畫像的信號)來輸出的處理。又，反量化或反變換部55構成差分畫像產生手段。
加法部56實施將由反量化或反變換部55所輸出的解碼預測誤差信號，加算於顯示由幀內預測部53或移動補償預測部54所產生之預測畫像的預測信號，以產生顯示解碼畫像的解碼畫像信號之處理。又，加法部56構成解碼畫像產生手段。
幀內預測用記憶體57係儲存由加法部56所產生的解碼畫線信號所顯示的解碼畫像之RAM等記錄媒體，而該解碼畫像作為由幀內預測部53在下一次幀內預測處理所使用的畫像。
迴路濾波器58實施將由加法器56所產生的解碼畫像信號所包含的編碼失真予以補償，並將編碼失真補償後的 解碼畫像信號所顯示的解碼畫像作為參考畫像並輸出至移動補償預測幀記憶體59的處理。
移動補償預測幀記憶體59係儲存迴路濾波器58所為之濾波處理後的解碼畫像的RAM等記錄媒體，而該解碼畫像作為由移動補償預測部54在下一次移動補償預測處理所使用的參考畫像。
第1圖中設想有作為動畫像編碼裝置之構成要素的編碼控制部1、區塊分割部2、切換開關3、幀內預測部4、移動補償預測部5、減法部6、變換或量化部7、反量化或反變換部8、加法部9、迴路濾波部11及可變長度編碼部13分別以專用的硬體(例如，安裝有CPU的半導體積體電路或單晶微電腦等)所構成者，然而，在動畫像編碼裝置係以電腦來構成時，也可建構成將記述有編碼控制部1、區塊分割部2、切換開關3、幀內預測部4、移動補償預測部5、減法部6、變換或量化部7、反量化或反變換部8、加法部9、迴路濾波部11及可變長度編碼部13的處理內容的程式儲存於該電腦的記憶體，而該電腦的CPU執行已儲存於該記憶體的程式。
第3圖係顯示依據本發明之實施形態1所構成之動畫像編碼裝置之處理內容的流程圖。
第2圖中設想有作為動畫像解碼裝置之構成要素的可變長度解碼部51、切換開關52、幀內預測部53、移動補償預測部54、反量化或反變換部55、加法部56及迴路濾波部58分別以專用的硬體(例如，安裝有CPU的半導體積 體電路或單晶微電腦等)所構成者，然而，在動畫像解碼裝置係以電腦來構成時，也可建構成將記述有可變長度解碼部51、切換開關52、幀內預測部53、移動補償預測部54、反量化或反變換部55、加法部56及迴路濾波部58之處理內容的程式儲存於該電腦的記憶體，而該電腦的CPU執行已儲存於該記憶體的程式。
第4圖係顯示依據本發明之實施形態1所構成之動畫像解碼裝置之處理內容的流程圖。
接著說明動作。
最先，說明第1圖之動畫像編碼裝置的處理內容。
首先，編碼控制部1決定在實施幀內預測處理(幀內的預測處理)或移動補償預測處理(幀間的預測處理)時成為處理單位之編碼區塊的最大尺寸，且決定最大尺寸之編碼區塊階層地分割時之上限的階層數(第3圖的步驟ST1)。
在作為編碼區塊之最大尺寸的決定方法上，可考量有例如對全部的圖像決定與輸入畫像的解析度對應的尺寸之方法。
又，可考量將輸入畫像之局部移動之複雜度的不同作為參數而先予以定量化，移動激烈的圖像則將最大尺寸決定為小值，而移動少的圖像則將最大尺寸決定為大值的方法。
關於上限的階層數，例如設定成輸入畫像的移動愈激烈則將階層數設得深而能檢測出更細微的移動，若是輸入畫像的移動少，則以抑制階層數的方式來設定的方法。
又，編碼控制部1從可利用的一個以上編碼模式(M種類的幀內編碼模式、N種類的幀間編碼模式)之中，選擇適合於階層地分割之各個編碼區塊的編碼模式(步驟ST2)。
利用編碼控制部1所為之編碼模式的選擇方法為眾所周知的技術，因此省略詳細的說明，惟例如有使用可利用之任意的編碼模式，對編碼區塊實施編碼處理以驗證編碼效率，並在可利用之複數種編碼模式中選擇編碼效率最好的編碼模式的方法。
又，編碼控制部1於每一個編碼區塊決定壓縮差分畫像時使用的量化參數及變換區塊尺寸，且決定實施預測處理時使用的幀內預測參數或幀間預測參數。
編碼控制部1將包含量化參數及變換區塊尺寸的預測誤差編碼參數輸出至變換或量化部7、反量化或反變換部8及可變長度編碼部13。又，因應必要而將預測誤差編碼參數輸出至幀內預測部4。
區塊分割部2當輸入顯示輸入畫像的影像信號時，則將該影像信號所示的輸入畫像分割成由編碼控制部1所決定之最大尺寸的編碼區塊，且將該編碼區塊階層地分割直到由編碼控制部1所決定之上限的階層數。
在此，第5圖係顯示最大尺寸的編碼區塊被階層地分割成複數個編碼區塊之情形的說明圖。
第5圖的例子係最大尺寸的編碼區塊為第0階層的編碼區塊B0，具有亮度成分(L0、M0)的尺寸。
又，第5圖的例子係以最大尺寸的編碼區塊B0作為出 發點，以四元樹(quadtree)構造階層地進行分割直到另外決定的預定深度為止，以獲得編碼區塊Bn。
於深度n的編碼區塊Bn係在尺寸(Ln、Mn)的畫像區域。
其中，Ln與Mn可為相同也可為不同，而於第5圖的例子顯示Ln=Mn的情況。
以下將編碼區塊Bn的尺寸定義為編碼區塊Bn之亮度成分下的尺寸(Ln、Mn)。
由於區塊分割部2進行四元樹分割，所以(Ln+1、Mn+1)=((Ln/2、Mn/2)總是成立。
其中，如RGB信號等的情況，若是全部的色成分具有相同抽樣數的彩色影像信號(4：4：4規格)，則全部的色成分的尺寸為(Ln、Mn)，而在處理4：2：0規格的情況下，所對應之色差成分之編碼區塊的尺寸為(Ln/2、Mn/2)。
以下，將在第n階層的編碼區塊Bn可選擇的編碼模式記載為m(Bn)。
也可建構成由複數個色成分所構成的彩色影像信號的情況下，編碼模式m(Bn)於每一色成分分別使用個別的模式，以下除非有特別聲明否則係指對於YUV信號、4：2：0規格之編碼區塊的亮度成分的編碼模式進行說明。
關於編碼模式m(Bn)，有一種至複數種幀內編碼模式(總稱「INTRA」)、一種至複數種幀間編碼模式(總稱「INTER」)、編碼控制部1如以上所述在其圖像可利用之全部的編碼模式，甚至是從其副組之中選擇對於編碼區塊Bn編碼效率最佳的編碼模式。
如第5圖所示，編碼區塊Bn更分割成一個至複數個預測處理單位(分區(partition))。
以下將屬於編碼區塊Bn的分區標記成Pi n(i：第n階層的分區編號)。
屬於編碼區塊Bn的分區Pi n的分割是如何地進行，乃係於編碼模式m(Bn)包含資訊。
分區Pi n係全部依照編碼模式m(Bn)進行預測處理，惟也可對每一個分區Pi n選擇個別的預測參數。
編碼控制部1對最大尺寸的編碼區塊產生例如第6圖所示區塊分割狀態，並特定編碼區塊Bn。
第6圖(a)的標加斜線部分顯示分割後之分區的分布，又，第6圖(b)係以四分樹曲線圖顯示於階層分割後之分區分配編碼模式m(Bn)的狀況。
於第6圖(b)中，以□所包圍的節點(node)顯示分配有編碼模式m(Bn)的節點(編碼區塊Bn)。
當切換開關3於編碼控制部1對各個編碼區塊Bn的分區Pi n選擇最適當的編碼模式m(Bn)時，若是該編碼模式m(Bn)為幀內編碼模式(步驟ST3)，將由區塊分割部2所分割的編碼區塊Bn的分區Pi n輸出至幀內預測部4。
相對於此，若是該編碼模式m(Bn)為幀間編碼模式(步驟ST3)，將由區塊分割部2所分割的編碼區塊Bn的分區Pi n輸出至移動補償預測部5。
當幀內預測部4從切換開關3接受編碼區塊Bn的分區Pi n時，使用幀內已編碼完的畫像信號，並依據從編碼控制 部1所輸出的的幀內預測參數，而對該編碼區塊Bn的分區Pi n實施幀內預測處理，以產生幀內預測畫像Pi n(步驟ST4)。
惟，當幀內預測部4產生上述幀內預測畫像Pi n之後，從預先準備的一個以上的濾波器之中，因應濾波處理對象區塊之編碼相關的各種參數的狀態而選擇濾波器，並使用該濾波器對該幀內預測畫像Pi n實施濾波處理。
當幀內預測部4對幀內預測畫像Pi n實施濾波處理，則將濾波處理後的幀內預測畫像Pi n輸出至減法部6及加法部9，惟第2圖的動畫像解碼裝置也同樣設成能產生幀內預測畫像Pi n，所以將該幀內預測參數輸出至可變長度編碼部13。
幀內預測部4的處理內容之概略如以上所述，惟詳細的處理內容將於後述。
當移動補償預測部5從切換開關3接受編碼區塊Bn的分區Pi n時，使用藉著移動補償預測幀記憶體12所儲存的1幀以上的參考畫像，並依據從編碼控制部1所輸出的幀間編碼參數，對該編碼區塊Bn的分區Pi n實施移動補償預測處理，以產生幀間預測畫像Pi n(步驟ST5)。
又，以實施移動補償預測處理來產生預測畫像的技術為眾所周知的技術，故省略詳細的說明。
當幀內預測部4或移動補償部5產生預測畫像(幀內預測畫像Pi n、幀間預測畫像Pi n)時，減法部6從由區塊分割部2所分割的編碼區塊Bn的分區Pi n減去由幀內預測部4或移動補償預測部5所產生的預測畫像(幀內預測畫像 Pi n、幀間預測畫像Pi n)以產生差分畫像，並將顯示該差分畫像的預測誤差信號ei n輸出至變換或量化部7(步驟ST6)。
變換或量化部7一旦從減法部6接受顯示差分畫像的預測誤差信號ei n，則以從編碼控制部1輸出的預測誤差編碼參數所包含的變換區塊尺寸單位，實施該差分畫像的變換處理(例如，DCT(離散餘弦變換)或對預先特定的學習系列所進行之基底設計的KL變換等正交變換處理)，且使用該預測誤差編碼參數所包含的量化參數，而將該差分畫像的變換係數予以量化，以將量化後的變換係數作為差分畫像的壓縮資料而輸出至反量化或反變換部8及可變長度編碼部13(步驟ST7)。
反量化或反變換部8一旦從變換或量化部7接受差分畫像的壓縮資料，則使用從編碼控制部1輸出的預測誤差編碼參數所包含的量化參數，而將該差分畫像的壓縮資料予以反量化，並以該預測誤差編碼參數所包含的變換區塊尺寸單位，實施反量化的壓縮資料的反變換處理(例如，DCT(反離散餘弦變換)或反KL變換等反變換處理)，以將反變換處理後的壓縮資料作為局部解碼預測誤差信號ei n(電子申請的關係，將附加於字母文字的「^」標記為帽號(hat))並輸出至加法部9(步驟ST8)。
加法部9一旦從反量化或反變換部8接受局部解碼預測誤差信號ei n帽號，則將該局部解碼預測差分信號ei n帽號加算於顯示由幀內預測部4或移動補償預測部5所產生的預測畫像(幀內預測畫像Pi n、幀間預測畫像Pi n)的預測信 號，而產生局部編碼分區畫像Pi n帽號或作為其集合之局部解碼編碼區塊畫像的局部解碼畫像(步驟ST9)。
加法部9一旦產生局部解碼畫像，則將顯示該局部解碼畫像的局部解碼畫像信號儲存於幀內預測用記憶體10，且將該局部解碼畫像信號輸出迴路濾波部11。
步驟ST3至ST9的處理係反覆處理直至對於階層地分割之全部的編碼區塊Bn的處理結束，當對於全部的編碼區塊Bn的處理結束，則轉移至步驟ST12的處理(步驟ST10、ST11)。
可變長度編碼部13將從變換或量化部7所輸出的壓縮資料、從編碼控制部1所輸出的編碼模式(包含顯示編碼區塊的分割狀態的資訊)及預測誤差編碼參數、及從幀內預測部4所輸出的幀內預測參數或從移動補償預測部5所輸出的幀間預測參數予以熵(entropy)編碼。
可變長度編碼部13將屬於熵編碼之編碼結果的壓縮資料、編碼模式、預測誤差編碼參數、幀內預測參數/幀間預測參數之編碼資料予以多工而產生位元流(步驟ST12)。
迴路濾波部11一旦從加法部接受局部解碼畫像信號，則將該局部解碼畫像信號所包含的編碼失真予以補償，並將編碼失真補償後的局部解碼畫像信號所顯示的局部解碼畫像作為參考畫像儲存於移動補償預測幀記憶體12(步驟ST13)。
依據迴路濾波部11所為之濾波處理能以從加法部9 輸出的局部解碼畫像信號的最大編碼區塊或各個編碼區塊單位來進行，能以總合了複數個最大編碼區塊所得的單位來進行，也能在輸出相當於一畫面份之局部解碼畫像信號後，進行彙整一整個畫面份量之處理。
其次詳細說明幀內預測部4的處理內容。
第7圖係顯示於編碼區塊Bn內之各分區Pi n中可選擇的幀內預測參數(幀內預測模式)之一例的說明圖。
第7圖的例子係表示幀內預測模式與該幀內預測模式所示之預測方向向量，且設計成隨著可選擇的幀內預測模式個數的增加，各預測方向向量間的相對角度變小。
幀內預測部4依據對分區Pi n的幀內預測參數或用以產生幀內預測畫像Pi n所使用之濾波器的選擇參數，實施對分區Pi n的幀內預測處理。
以下說明依據相對於分區Pi n的亮度信號之幀內預測參數(幀內預測模式)而產生亮度信號之幀內預測信號的幀內處理。
在此，將分區Pi n的尺寸設為li n×mi n像素。
第8圖係顯示li m=mi n=4時，於產生分區Pi n內之像素的預測值之際使用的像素之一例的說明圖。
第8圖中係將鄰接於分區Pi n的已編碼完上分區的像素(2×li n+1)個與左分區的像素(2×mi n)個設為使用於預測的像素，惟使用於預測的像素可比第8圖所示的像素還多也可以還少。
又，第8圖中係將鄰接的1列或1行份的像素使用於 預測，惟也可將兩列或兩行或是其等以上的像素使用於預測。
相對於分區Pi n之幀內預測模式的索引值為2(平均預測值)的場合，將上分區的鄰接像素與左分區的鄰接像素的平均值作為分區Pi n內的像素的預測值來產生中間預測畫像。
幀內預測模式之索引值為2(平均預測值)以外的場合，則依據索引值所示之預測方向向量υp=(dx、dy)來產生分區Pi n內的像素的預測值。
其中，將產生預測值之像素(預測對象像素)之分區Pi n內的相對座標(以分區之左上像素為原點)設為(x、y)。
使用於預測的參考像素的位置為以下記載所示A與鄰接像素的交點。
其中，k為正的純量值。
當參考像素在整數像素位置的場合，將該整數像素作為預測象素的預測值。
相對於此，當參考像素不在整數像素位置的場合，將從鄰接於參考像素之整數像素產生的內插像素作為預測值。
第8圖的例子由於參考像素不在整數像素位置，所以從鄰接於參考像素的兩個像素內插以算出預測值。惟預測值非限定於鄰接的兩個像素者，而是也可從鄰接的兩個像 素以上的像素產生的內插像素作為預測值。
其次，對依據上述的順序所產生的中間預測畫像(預測值)進行濾波處理以取得最後的預測畫像。
以下說明具體的濾波處理。
從預先製備的至少一個以上的濾波器之中，以將於後述的手法來選擇要使用的濾波器，依照以下記載的算式(1)而對中間預測畫像的各像素進行濾波處理。
於算式(1)中，an(n=0、1、…、N)係由參考像素相關的係數(a0、a1、…、aN-1)與偏離常數(offset coefficient)aN所構成的濾波器係數(filter coefficient)。
Pn(n=0、1、…、N-1)表示包含濾波處理對象像素P0的濾波器的參考像素。
S(Pn)表示各參考像素的亮度值，s帽號(p0)表示濾波處理對象像素P0的濾波處理後的亮度值。
其中，濾波器係數可構成為無偏離常數aN者。又，N為任意的參考像素數。
第9圖係顯示N=5時之參考像素配置之一例的說明圖。
進行上述濾波處理時，分區Pi n之尺寸(li n×mi n)愈大，則輸入畫像上愈容易存在非直線的邊緣等，易發生與中間預測畫像的預測方向之偏移，所以以將中間預測畫像平滑化的方式為佳。
而且，預測誤差的量化值愈大，則於解碼畫像產生的量化失真愈大，而從鄰接於分區Pi n之已編碼完像素所產生的中間預測畫像的預測精度愈低，所以以製備大略地顯現分區Pi n之平滑化的預測畫像的方式為佳。
再者，即使是相同的分區Pi n內的像素也是距鄰接於使用於產生中間預測畫像之分區Pi n的已編碼完像素愈遠的像素，其於中間預測畫像與輸入畫像之間愈易發生邊緣等偏移，所以以將預測畫像平滑化以控制於產生偏移時急劇增加之預測誤差的方式為佳。
又，不僅濾波器的強度，對於濾波器之參考像素配置也必須因應中間預測畫像之預測方向而適切地配置參考像素，以不使中間預測畫像之邊緣等構圖不自然地偏斜。
所以，濾波器選擇處理上，建構成考量以下記載之4種參數(1)至(4)來選擇濾波器。
(1)分區Pi n的尺寸(li n×mi n)
(2)預測誤差編碼參數所包含的量化參數
(3)產生中間預測畫像時使用的已編碼完像素(第8圖所示“使用於預測的像素”)群與濾波處理對象像素的距離
(4)產生中間預測畫像時之幀內預測模式的索引值
具體上，建構成分區Pi n的尺寸(li n×mi n)愈大，依據量化參數而決定的量化值愈大，濾波處理對象像素與產生位於分區Pi n之左及上之中間預測畫像時使用的已編碼完像素群的距離愈大，則使用平滑化強度強的濾波器，又，建 構成考量了幀內預測模式之預測方向的濾波器強度及參考像素配置。即，相對於上述參數的各種組合，從預先製備之濾波器群之中賦予適切的濾波器的對應關係，以實現因應上述的參數之濾波器的適應選擇。
其中，只要是濾波器強度的種類在兩種類以上，則不論多少皆可，以作為濾波器的強度表現而言可將最弱的濾波器作為無濾波處理而定義為等效的處理。所以，也可建構成僅中間預測畫像內特定的像素進行濾波處理，其以外的像素作為最弱的濾波處理，亦即，作為無濾波處理的濾波處理。
此外，上述的說明中，說明了以預先製備必要數量的濾波器為前提，惟也可以因應上述濾波器選擇參數之值算出濾波器的方式，將濾波器作為上述濾波器選擇參數的函數來定義使用。
而且，上述的說明中，表示了建構成考量4種參數(1)至(4)而選擇濾波器，惟也可建構成在4種參數(1)至(4)之中，考量至少一項以上的參數來選擇濾波器。舉其一例，當考量上述4種參數之中的(3)與(4)的場合，因應幀內預測模式之預測方向，距各濾波處理對象像素之預測所使用的像素的距離(第8圖的例子係與鄰接於區塊的上端之“參考像素”的距離)愈遠，則選擇強度強的濾波器。
又，4種參數(1)至(4)在動畫像解碼裝置側也為已知的參數，所以完全不產生因進行上述濾波處理而導致用以編碼的附加資訊。
以同樣的程序相對於分區Pi n內的亮度信號之全部的像素產生預測像素，並輸出已產生的幀內預測像素Pi n。
使用於產生幀內預測像素Pi n的幀內預測參數為了多工成位元流而輸出至可變長度編碼部13。
對於分區Pi n內的色差信號也以與亮度信號同樣的程序，實施依據幀內預測參數(幀內預測模式)的幀內預測處理，並將使用於產生幀內預測畫像的幀內預測參數輸出至可變長度編碼部13。
其中，對於色差信號之幀內預測，也可構成為將已在上述說明的濾波處理作為與亮度信號同樣地進行的處理，也可設為不進行。
其次，說明第2圖之動畫像解碼裝置的處理內容。
可變長度解碼部51一旦輸入從第1圖之動畫像編碼裝置所輸出的位元流，則對該位元流實施可變長度解碼處理，於1幀以1上的圖像所構成的序列單位或圖像單位將幀尺寸的資訊解碼(第4圖的步驟ST21)。
可變長度解碼部51以與第1圖之編碼控制部1同樣的程序，決定在實施幀內預測處理(幀之內預測模式)或移動補償預測處理(幀間預測處理)時成為處理單位之編碼區塊的最大尺寸，且決定最大尺寸之編碼區塊被階層地分割時之上限的階層數(步驟ST22)。
例如於動畫像編碼裝置，編碼區塊的最大尺寸係因應輸入畫像的解析度來決定的場合，依據已先解碼之幀尺寸資訊來決定編碼區塊的最大尺寸。
再者，顯示編碼區塊之最大尺寸及上限的階層數的資訊多工成位元流的場合，參考從該位元流解碼的資訊。
多工成位元流之最大尺寸的編碼區塊B0的編碼模式m(B0)包含有顯示最大尺寸的編碼區塊B0之分割狀態的資訊，所以可變長度解碼部51將多工成位元流之最大尺寸的編碼區塊B0的編碼模式m(B0)解碼，並特定階層地分割之各個編碼區塊Bn(步驟ST23)。
可變長度解碼部51一旦特定各個編碼區塊Bn，則將該編碼區塊B0的編碼模式m(Bn)解碼，並依據屬於該編碼模式m(Bn)之分區Pi n的資訊，特定屬於編碼區塊Bn的分區Pi n。
可變長度解碼部51一旦特定屬於編碼區塊Bn的分區Pi n，則於每一分區Pi n將壓縮資料、編碼模式、預測誤差編碼參數、幀內預測參數/幀間預測參數予以解碼(步驟ST24)。
亦即，在編碼區塊Bn所被分配的編碼模式m(Bn)為幀內編碼模式的場合，於每一個屬於編碼區塊的分區Pi n將幀內預測參數予以解碼。
在編碼區塊Bn所被分配的編碼模式m(Bn)為幀間編碼模式的場合，於每一個屬於編碼區塊的分區Pi n將幀間預測參數予以解碼。
成為預測處理單位的分區更依據預測誤差編碼參數所包含的變換區塊尺寸資訊，而分割成作為變換處理單位的一個或是複數個分區，而對成為變換處理單位的每一個分 區將壓縮資料解碼(變換或反量化後的變換係數)。
切換開關52在從可變長度解碼部51起屬於編碼區塊Bn之分區Pi n的編碼模式m(Bn)為幀內編碼模式的場合(步驟ST25)，將由可變長度解碼部51輸出的幀內預測參數輸出至幀內預測部53。
相對於此，在分區Pi n的編碼模式m(Bn)為幀間編碼模式的場合(步驟ST25)，將由可變長度解碼部51輸出的幀間預測參數輸出至移動補償預測部54。
幀內預測部53一旦由切換開關52接受到幀內預測參數，則與第1圖的幀內預測部4同樣地使用幀內已解碼完的畫像信號，並依據該幀內預測參數對編碼區塊Bn之分區Pi n實施幀內預測處理以產生幀內預測畫像Pi n(步驟ST26)。
其中，幀內預測部53於產生幀內預測畫像Pi n時，利用與第1圖之幀內預測部4相同的手法而從預先製備的一個以上的濾波器之中，因應濾波處理對象區塊之解碼相關的各種參數的狀態來選擇濾波器，並使用該濾波器對該幀內預測畫像Pi n實施濾波處理，且將濾波處理後的幀內預測畫像Pi n作為最後的幀內預測畫像。
又，在上記載的說明係以預先製備必要數量的濾波器作為前提來進行說明，惟也可建構成在以第1圖之幀內預測部4因應使用於濾波器選擇之參數的狀態而算出濾波器的方式將濾波器作為上述參數的函數來定義的場合，幀內預測部53也同樣因應上述濾波處理對象區塊之解碼相關的各種參數的狀態，以算出濾波器的方式將濾波器作為上 述參數的函數來定義。
移動補償預測部54一旦從切換開關52接受到幀間預測參數，則使用移動補償預測幀記憶體59所儲存的一幀以上的參考像素，並依據該幀間預測參數對編碼區塊Bn之分區Pi n實施移動補償預測處理以產生幀間預測畫像Pi n(步驟ST27)。
反量化或反變換部55使用從可變長度解碼部51輸出的預測誤差編碼參數所包含的量化參數，而將由可變長度解碼部51輸出的編碼區塊相關的壓鍺資料予以反量化，並以該預測誤差編碼參數所包含的變換區塊尺寸單位，實施反量化之壓縮資料的反變換處理(例如，反DCT(反離散餘弦變換)或反KL變換等反變換處理)，而將反變換處理後的壓縮資料作為解碼預測誤差信號(顯示壓縮前之差分畫像的信號)並輸出至加法部56(步驟ST28)。
加法部56一旦從反量化或反變換部55接受到解碼預測誤差信號，則將該解碼預測誤差信號加上顯示由幀內預測部53或移動補償預測部54所產生的預測畫像之預測信號而產生解碼畫像，並將顯示該解碼畫像之解碼畫像信號儲存於幀內預測用記憶體57，且將該解碼畫像信號輸出至迴路濾波部58(步驟ST29)。
步驟ST23至ST29的處理係反覆實施至對階層地分割之所有的編碼區塊Bn的處理結束為止(步驟ST30)。
迴路濾波部58一旦從加法部56接受到解碼畫像信號，則將該解碼畫像信號所包含的編碼失真予以補償，並 將編碼失真補償後的解碼畫像信號所顯示的解碼畫像作為參考畫像而儲存至移動補償預測幀記憶體59(步驟ST31)。
以迴路濾波部58所為的濾波處理係可利用從加法部56輸出之解碼畫像信號的最大編碼區塊或各個編碼區塊單位來進行，也可於輸出相當於一畫面份之巨集區塊的解碼畫像信號之後總合一畫面來進行。
從以上的說明可清楚明白，依據本實施形態1，建構成動畫像編碼裝置之幀內預測部4使用幀內已編碼完的畫像信號，以實施幀內預測處理而產生幀內預測畫像時，從預先製備的一個以上的濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器對預測畫像實施濾波處理，所以能降低局部發生的預測誤差而能達成提高畫像品質的效果。
再者，依據本實施形態1，建構成幀內預測部4在(1)分區Pi n的尺寸(li n×mi n)、(2)預測誤差編碼參數所包含的量化參數、(3)產生中間預測畫像時使用的已編碼完像素群與濾波處理對象像素的距離、(4)產生中間預測畫像時之幀內預測模式的索引值之中，至少考量一項以上的參數以選擇濾波器，所以對於與編碼對象畫像相關性高的中間預測畫像，可獲得在編碼對象畫像之邊緣的方向與預測方向之間產生些微的偏移、或於邊緣存在有些微的偏斜的場合時將產生的局部預測誤差予以抑制的效果，可達成改善預測效率的效果。
依據本實施形態1，建構成動畫像解碼裝置之幀內預 測部53使用幀內已解碼完的畫像信號實施幀內預測處理而產生幀內預測畫像時，從預先製備的一個以上的濾波器之中，因應濾波處理對象區塊的解碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器對預測畫像實施濾波處理，所以可降低局部發生的預測誤差，可達成在動畫像解碼裝置側也可產生與在動畫像編碼裝置側產生的幀內預測畫像相同的幀內預測畫像的效果。
再者，依據本實施形態1，建構成幀內預測部53在(1)分區Pi n的尺寸(li n×mi n)、(2)預測誤差編碼參數所包含的量化參數、(3)產生中間預測畫像時使用的已編碼完像素群與濾波處理對象像素的距離、(4)產生中間預測畫像時之幀內預測模式的索引值之中，至少考量一項以上的參數以選擇濾波器，所以對於與編碼對象畫像相關性高的中間預測畫像，可獲得在編碼對象畫像之邊緣的方向與預測方向之間產生些微的偏移、或於邊緣存在有些微的偏斜的場合時將產生的局部預測誤差予以抑制的效果，可達成在動畫像解碼裝置側也可產生與在動畫像編碼裝置側產生的幀內預測畫像相同的幀內預測畫像的效果。
實施形態2
上述實施形態1中，係顯示了幀內預測部4使用幀內已編碼完的畫像信號實施幀內預測處理而產生幀內預測畫像時，從預先製備的一個以上的濾波器之中，因應濾波處理對象區塊的解碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器對預測畫像實施濾波處理，惟建構成設計 編碼對象之區塊與預測畫像間的二次方誤差和為最小的維納濾波器(Wiener filter)，而在使用上述維納濾波器的方式之預測誤差的降低程度比使用從預先製備之一個以上的濾波器之中選擇的濾波器還高的場合，使用上述維納濾波器以取代該所選擇的濾波器也可對預測畫像實施濾波處理。
以下具體地說明處理內容。
上述實施形態1，係建構成幀內預測部4、53從預先製備之一個以上的濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器。但是，考量4種參數(1)至(4)來選擇濾波器的場合，雖然可從選擇候選之中選擇適切的濾波器，然而在選擇候選以外存在有最適當的濾波器的場合就無法進行“最適當的濾波處理”。
本實施形態2中，其特徵在於對於圖像單位，在動畫像編碼裝置側計設最適當的濾波器以實施濾波處理，並且將該濾波器的濾波係數等編碼，而在動畫像解碼裝置側以將該濾波係數等解碼而實施使用了該濾波器的濾波處理。
動畫像編碼裝置之幀內預測部4與上述實施形態1同樣對編碼區塊Bn之分區Pi n實施幀內預測處理，以產生幀內預測畫像Pi n。
又，幀內預測部4以與上述實施形態1同樣的方法從預先製備之一個以上的濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器，並使用此濾波器對幀內預測畫像Pi n進行濾波處理。
幀內預測部4在圖像內之所有的編碼區塊Bn決定幀內 預測參數之後，對圖像內使用相同濾波器的每一個區域(具有相同的濾波器索引的區域)，設計該區域內之輸入畫像與幀內預測畫像的二次方誤差和(對象區域內的平均二次方誤差)為最小的維納濾波器。
維納濾波器依據中間預測畫像信號S’之自身相關行列RS’S’、和輸入畫像S與中間預測畫像信號S’之相互相關行RSS’，而能從以下記載的算式(4)求得濾波係數w。行列RS’S’、RSS’的大小與要求得之濾波分接點數目對應。
一旦設計維納濾波器，則幀內預測部4將使用該維納濾波器實施濾波處理時之濾波設計對象區域內的二次方誤差和設為D1、將該維納濾波器相關的資訊(例如濾波係數)編碼時之碼量設為R1、使用以與上述實施形態1同樣的方法選擇之濾波器實施濾波處理時之濾波設計對象區域內的二次方誤差和設為D2，而確認以下記載之算式(5)是否成立。
D1+λ．R1<D2 (5)
其中，λ為常數。
幀內預測部4於算式(5)成立的場合，使用該維納濾波器以取代以與上述實施形態1同樣的方法選擇的濾波器來實施濾波處理。
相對於此，當算式(5)不成立的場合，使用以與上述實施形態1同樣的方法選擇的濾波器來實施濾波處理。
在此說明，雖然是使用二次方誤差和D1、D2來評價， 但是並不限定於此，也可取代二次方誤差和D1、D2改以使用表示誤差之絕對值和等其他預測之偏斜的尺度來評價。
幀內預測部4使用維納濾波器實施濾波處理的場合，必須有可顯示將該維納濾波器之濾波係數或將哪一個索引的濾波器置換成維納濾波器的濾波器更新資訊。
具體上，將依據使用濾波器選擇參數之濾波處理而可選擇的濾波器的數目設為L，對各濾波器分配0至L-1的索引的場合，有必要對於各個索引，以使用已設計的維納濾波器的場合為“1”，而使用預先製備的濾波器的場合為“0”的值作為濾波器更新資訊而予以編碼。
可變長度編碼部13將由幀內預測部4輸出的濾波器更新資訊予以可變長度編碼並將該濾波器更新資訊的編碼資料多工成位元流。
在此說明，已顯示了在圖像內使用相同濾波器的每一區域，設計其區域內之輸入畫像與預測畫像之平均二次方誤差呈最小的維納濾波器，惟也可建構成在非圖像單位之其他特定的的區域單位，對使用相同濾波器的每一區域設計其區域內之輸入畫像與預測畫像之平均二次方誤差呈最小的維納濾波器，而限於僅某特定的圖像進行濾波器設計、或符合特定條件的場合(例如附加場景變換(scene change)檢測功能，且檢測出場景變換之圖像的場合)，進行上述濾波器設計。
動畫像編碼裝置之可變長度解碼部51從已多工成位 元流之編碼資料將濾波器更新資訊予以可變長度解碼。
幀內預測部53與上述實施形態1同樣以對編碼區塊Bn的分區Pi n實施幀內預測處理，以產生幀內預測畫像Pi n。
幀內預測部53一旦從可變長度解碼部51接受濾波器更新資訊，則參考該濾波器更新資訊以確認在符合的索引之濾波器有無更新。
其確認的結合為某區域之濾波器被置換成維納濾波器的場合，幀內預測部53讀出該濾波器更新資訊所包含之維納濾波器的濾波係數，並特定該維納濾波器，且使用該維納濾波器而實施幀內預測畫像Pi n的濾波處理。
相對於此，未被置換成維納濾波器的區域則以與上述實施形態1同樣的方法選擇濾波器，並使用該濾波器以實施幀內預測畫像Pi n的濾波處理。
由以上說明可清楚明瞭，依據本實施形態2，係建構成設計編碼對象之區塊與預測畫像間之二次方誤差和呈最小的維納濾波器，而比使用從預先製備之一個以上濾波器之中選擇的濾波器，於使用該維納濾波器的方式之預測誤差的降低情形變高的場合，取代該選擇的濾波器而改以使用該維納濾波器來對預測畫像實施濾波處理，因此可達成比實施形態1更能降低局部發生的預測誤差的效果。
此外，本申請案之發明於其發明的範圍內可自由地組合各實施形態，或是各實施形態之任意的構成要素之變形，或是於各實施形態省略任意的構成要素。
產業上的可利用性
如以上所述，本發明之動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法及動畫像解碼方法，係建構成幀內預測手段使用幀內之已編碼完的畫像信號實施幀內預測處理以產生預測畫像時，從預先準備的一個以上的濾波器之中，因應濾波處理對象區塊的編碼相關之各種參數的狀態而選擇濾波器，並使用該濾波器實施對預測畫像的濾波處理，以將濾波處理後的預測畫像輸出至差分畫像產生手段，因此適合於以高效率將動畫像進行編碼的動畫像編碼裝置及動畫像編碼方法、與以高效率將已被編碼的動畫像解碼的動畫像解碼裝置及動畫像解碼方法等。
1‧‧‧編碼控制部(編碼控制手段)
2‧‧‧區塊分割部(區塊分割手段)
3‧‧‧切換開關(幀內預測手段、移動補償預測手段)
4‧‧‧幀內預測部(幀內預測手段)
5‧‧‧移動補償預測部(移動補償預測手段)
6‧‧‧減法部(差分畫像產生手段)
7‧‧‧變換或量化部(畫像壓縮手段)
8‧‧‧反量化或反變換部
9‧‧‧加法部
10‧‧‧幀內預測用記憶體
11‧‧‧迴路濾波部
12‧‧‧移動補償預測幀記憶體
13‧‧‧可變長度編碼部(可變長度編碼手段)

Claims (5)

  1. 一種畫像解碼裝置，其具備：幀內預測手段，當成為預測處理的單位之區塊所對應之編碼模式為幀內編碼模式之情況時，對於每個上述區塊，實施幀內預測處理而產生幀內預測畫像，上述幀內預測手段係進行下述處理：對應於用以表示幀內預測的種類之幀內預測參數，從參考像素算出預測值，藉此產生上述區塊之幀內預測畫像，且對應於色成分之種類，對該幀內預測畫像之至少其中任一像素進行對該區塊之幀內預測畫像的濾波處理。
  2. 一種畫像解碼方法，其具備：幀內預測處理步驟，當成為預測處理的單位之區塊所對應之編碼模式為幀內編碼模式之情況時，對於每個上述區塊，實施幀內預測處理而產生幀內預測畫像，上述幀內預測處理步驟中，係進行下述處理：對應於用以表示幀內預測的種類之幀內預測參數，從參考像素算出預測值，藉此產生上述區塊之幀內預測畫像，且對應於色成分之種類，對該幀內預測畫像之至少其中任一像素進行對該區塊之幀內預測畫像的濾波處理。
  3. 一種畫像編碼裝置，其具備：幀內預測手段，當成為預測處理的單位之區塊所對應之編碼模式為幀內編碼模式之情況時，對於每個 上述區塊，實施幀內預測處理而產生幀內預測畫像，上述幀內預測手段係進行下述處理：對應於用以表示幀內預測的種類之幀內預測參數，從參考像素算出預測值，藉此產生上述區塊之幀內預測畫像，且對應於色成分之種類，對該幀內預測畫像之至少其中任一像素進行對該區塊之幀內預測畫像的濾波處理。
  4. 一種畫像編碼方法，其具備：幀內預測處理步驟，當成為預測處理的單位之區塊所對應之編碼模式為幀內編碼模式之情況時，對於每個上述區塊，實施幀內預測處理而產生幀內預測畫像，上述幀內預測處理步驟中，係進行下述處理：對應於用以表示幀內預測的種類之幀內預測參數，從參考像素算出預測值，藉此產生上述區塊之幀內預測畫像，且對應於色成分之種類，對該幀內預測畫像之至少其中任一像素進行對該區塊之幀內預測畫像的濾波處理。
  5. 一種記錄有編碼資料之資料結構之記錄媒體，該編碼資料之資料結構係對每一個成為預測處理的單位之區塊實施預測處理而產生者，上述編碼資料係具有：幀內預測參數，係上述區塊所對應之編碼模式為幀內編碼模式之情況時，顯示幀內預測的種類；及壓縮資料，係對上述區塊的畫像與對該區塊實施 預測處理而產生的預測畫像的差分進行壓縮處理而產生者；上述預測畫像係藉由下述處理而產生：對應於上述幀內預測參數，從參考像素算出預測值，藉此產生上述區塊之幀內預測畫像，且對應於色成分之種類而對該幀內預測畫像之至少其中任一像素進行對該區塊之幀內預測畫像的濾波處理。
TW105123731A 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體 TWI606720B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010221471 2010-09-30
PCT/JP2011/004122 WO2012042720A1 (ja) 2010-09-30 2011-07-21 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法

Publications (2)

Publication Number Publication Date
TW201640900A TW201640900A (zh) 2016-11-16
TWI606720B true TWI606720B (zh) 2017-11-21

Family

ID=45892218

Family Applications (5)

Application Number Title Priority Date Filing Date
TW103145688A TWI566588B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及資料結構
TW100132970A TWI472229B (zh) 2010-09-30 2011-09-14 動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法及動畫像解碼方法
TW105123731A TWI606720B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體
TW105123725A TWI603612B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及資料結構
TW105123734A TWI606721B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體

Family Applications Before (2)

Application Number Title Priority Date Filing Date
TW103145688A TWI566588B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及資料結構
TW100132970A TWI472229B (zh) 2010-09-30 2011-09-14 動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法及動畫像解碼方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
TW105123725A TWI603612B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及資料結構
TW105123734A TWI606721B (zh) 2010-09-30 2011-09-14 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體

Country Status (13)

Country Link
US (5) US10291939B2 (zh)
EP (2) EP2624563A4 (zh)
JP (5) JP5503747B2 (zh)
KR (6) KR101580021B1 (zh)
CN (5) CN105516723B (zh)
BR (1) BR112013006501B1 (zh)
CA (5) CA3105771C (zh)
HK (3) HK1219593A1 (zh)
MX (2) MX2013003696A (zh)
RU (5) RU2608674C2 (zh)
SG (5) SG10201912003RA (zh)
TW (5) TWI566588B (zh)
WO (1) WO2012042720A1 (zh)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105516723B (zh) * 2010-09-30 2018-07-27 三菱电机株式会社 运动图像编码装置及方法、运动图像解码装置及方法
SG10202008690XA (en) 2011-01-12 2020-10-29 Mitsubishi Electric Corp Moving image encoding device, moving image decoding device, moving image encoding method, and moving image decoding method
SG10201902274SA (en) 2011-06-24 2019-04-29 Mitsubishi Electric Corp Moving image encoding device, moving image decoding device, moving image encoding method, and moving image decoding method
JP2013012895A (ja) * 2011-06-29 2013-01-17 Nippon Telegr & Teleph Corp <Ntt> 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム及び画像復号プログラム
CN107968945B (zh) * 2011-09-14 2021-09-14 三星电子株式会社 对视频进行解码的方法和对视频进行编码的方法
US9635359B2 (en) * 2011-11-28 2017-04-25 Canon Kabushiki Kaisha Method and apparatus for determining deblocking filter intensity
WO2015115644A1 (ja) * 2014-02-03 2015-08-06 三菱電機株式会社 画像符号化装置、画像復号装置、符号化ストリーム変換装置、画像符号化方法、及び画像復号方法
JP6221820B2 (ja) * 2014-02-25 2017-11-01 株式会社Ｊｖｃケンウッド 符号化装置、符号化方法および符号化プログラム
JP2016146572A (ja) * 2015-02-09 2016-08-12 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像処理システム、動画像符号化方法、動画像復号方法、およびプログラム
EP3276958A4 (en) * 2015-03-23 2018-08-29 LG Electronics Inc. Method for processing image on basis of intra prediction mode and apparatus therefor
JP6357133B2 (ja) * 2015-06-10 2018-07-11 日本電信電話株式会社 イントラ予測処理装置、イントラ予測処理方法、イントラ予測処理プログラム、画像符号化装置及び画像復号装置
CN105049846B (zh) * 2015-08-14 2019-05-21 广东中星微电子有限公司 图像和视频编解码的方法和设备
CN116760977A (zh) * 2015-08-20 2023-09-15 日本放送协会 图像编码装置、图像解码装置、和其程序
CN105872538B (zh) * 2016-04-18 2020-12-29 广东中星微电子有限公司 时域滤波方法和时域滤波装置
CN115037949A (zh) * 2016-05-27 2022-09-09 松下电器（美国）知识产权公司 编码方法、解码方法、及编码和解码方法
EP3509299B1 (en) * 2016-09-05 2024-05-01 Rosedale Dynamics LLC Image encoding/decoding method and device therefor
CA3227652A1 (en) 2016-10-04 2018-04-12 Kt Corporation Method and apparatus for processing video signal
US10681354B2 (en) * 2016-12-05 2020-06-09 Lg Electronics Inc. Image encoding/decoding method and apparatus therefor
CN110290384A (zh) * 2018-03-19 2019-09-27 华为技术有限公司 图像滤波方法、装置及视频编解码器
CN110650349B (zh) 2018-06-26 2024-02-13 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质
CN113994671B (zh) 2019-06-14 2024-05-10 北京字节跳动网络技术有限公司 基于颜色格式处理视频单元边界和虚拟边界
KR20220020268A (ko) 2019-06-14 2022-02-18 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 유닛 경계들 및 가상 경계들의 처리
JP7291846B2 (ja) 2019-07-09 2023-06-15 北京字節跳動網絡技術有限公司 適応ループフィルタリングのためのサンプル決定
WO2021004542A1 (en) 2019-07-11 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Sample padding in adaptive loop filtering
EP3984219A4 (en) 2019-07-15 2022-08-17 Beijing Bytedance Network Technology Co., Ltd. CLASSIFICATION IN AN ADAPTIVE LOOP FILTERING
CN114430902B (zh) 2019-09-22 2023-11-10 北京字节跳动网络技术有限公司 自适应环路滤波中的填充过程
JP7326600B2 (ja) 2019-09-27 2023-08-15 北京字節跳動網絡技術有限公司 異なるビデオユニット間の適応ループフィルタリング
JP7454042B2 (ja) 2019-10-10 2024-03-21 北京字節跳動網絡技術有限公司 適応ループ・フィルタリングにおける利用可能でないサンプル位置でのパディング・プロセス
JP7524906B2 (ja) * 2019-10-31 2024-07-30 株式会社ソシオネクスト 動画像符号化方法、符号化処理方法、動画像符号化装置および符号化処理装置
US20220060702A1 (en) * 2020-08-21 2022-02-24 Alibaba Group Holding Limited Systems and methods for intra prediction smoothing filter

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US103475A (en) * 1870-05-24 Improvement in water-wheels
DE10158658A1 (de) * 2001-11-30 2003-06-12 Bosch Gmbh Robert Verfahren zur gerichteten Prädiktion eines Bildblockes
US7167522B2 (en) * 2003-02-27 2007-01-23 Texas Instruments Incorporated Video deblocking filter
US20040202921A1 (en) 2003-04-14 2004-10-14 Gencell Corporation Apparatus and method for addition of electrolyte to fuel cells
JP4617644B2 (ja) * 2003-07-18 2011-01-26 ソニー株式会社 符号化装置及び方法
JP4699685B2 (ja) * 2003-08-21 2011-06-15 パナソニック株式会社 信号処理装置及びそれを用いた電子機器
US7412955B2 (en) * 2004-02-27 2008-08-19 Yamaha Hatsudoki Kabushiki Kaisha Engine component part and method for producing the same
KR100616164B1 (ko) 2004-05-12 2006-08-25 주식회사 대우일렉트로닉스 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치및 그 방법
KR100813958B1 (ko) * 2004-06-07 2008-03-14 세종대학교산학협력단 동영상의 무손실 인코딩 및 디코딩 방법, 그 장치
EP1765020A4 (en) * 2004-06-14 2010-10-06 Jbf Partners Inc METHOD FOR ENCODING MOVING IMAGES AND METHOD FOR DECODING MOVING IMAGES
JP2006032999A (ja) * 2004-07-12 2006-02-02 Sharp Corp 画像復号装置及び画像復号方法
US7283634B2 (en) 2004-08-31 2007-10-16 Dts, Inc. Method of mixing audio channels using correlated outputs
JP2006157481A (ja) * 2004-11-30 2006-06-15 Canon Inc 画像符号化装置及びその方法
JP2006229411A (ja) * 2005-02-16 2006-08-31 Matsushita Electric Ind Co Ltd 画像復号化装置及び画像復号化方法
JP2006254232A (ja) * 2005-03-11 2006-09-21 Toshiba Corp 情報処理装置およびプログラム
CN101213843B (zh) * 2005-06-30 2010-09-29 法国电信公司 视频编码方法和设备
US20090123066A1 (en) * 2005-07-22 2009-05-14 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein,
WO2007055445A1 (en) 2005-11-11 2007-05-18 Daegu Gyeongbuk Institute Of Science And Technology A pre-viewing method of multiple movies or movie-clips in multimedia apparatus
CA2631336A1 (en) * 2005-11-30 2007-06-07 Kabushiki Kaisha Toshiba Image encoding/image decoding method, image encoding/image decoding apparatus
BRPI0621935A2 (pt) * 2006-07-28 2016-09-13 Toshiba Kk Toshiba Corp método e aparelho para codificar e decodificar imagem
TW200808067A (en) * 2006-07-31 2008-02-01 Univ Nat Cheng Kung Prediction module
US9001899B2 (en) 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
KR101566557B1 (ko) 2006-10-18 2015-11-05 톰슨 라이센싱 예측 데이터 리파인먼트를 이용한 비디오 코딩 방법 및 장치
JP4571955B2 (ja) * 2007-02-07 2010-10-27 日本電信電話株式会社 適応デブロッキング処理方法，装置および適応デブロッキング処理プログラム並びにコンピュータ読み取り可能な記録媒体
US8345968B2 (en) * 2007-06-28 2013-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
WO2009035149A1 (ja) * 2007-09-12 2009-03-19 Sony Corporation 画像処理装置及び画像処理方法
EP2048886A1 (en) * 2007-10-11 2009-04-15 Panasonic Corporation Coding of adaptive interpolation filter coefficients
KR101460608B1 (ko) 2008-03-04 2014-11-14 삼성전자주식회사 필터링된 예측 블록을 이용한 영상 부호화, 복호화 방법 및장치
KR101591825B1 (ko) * 2008-03-27 2016-02-18 엘지전자 주식회사 비디오 신호의 인코딩 또는 디코딩 방법 및 장치
KR101596829B1 (ko) 2008-05-07 2016-02-23 엘지전자 주식회사 비디오 신호의 디코딩 방법 및 장치
JP5137687B2 (ja) * 2008-05-23 2013-02-06 キヤノン株式会社 復号装置及び復号方法、プログラム
JP2009284298A (ja) * 2008-05-23 2009-12-03 Hitachi Ltd 動画像符号化装置、動画像復号化装置、動画像符号化方法及び動画像復号化方法
KR101517768B1 (ko) * 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
EP2141927A1 (en) * 2008-07-03 2010-01-06 Panasonic Corporation Filters for video coding
US20100008603A1 (en) * 2008-07-09 2010-01-14 Julie Rossing Smith Sealable repulpable valve bag and method of assembling
US8326075B2 (en) 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
WO2010041858A2 (en) * 2008-10-06 2010-04-15 Lg Electronics Inc. A method and an apparatus for decoding a video signal
KR101590500B1 (ko) 2008-10-23 2016-02-01 에스케이텔레콤 주식회사 동영상 부호화/복호화 장치, 이를 위한 인트라 예측 방향에기반한 디블록킹 필터링 장치 및 필터링 방법, 및 기록 매체
JPWO2010064675A1 (ja) 2008-12-03 2012-05-10 ソニー株式会社 画像処理装置および画像処理方法、並びにプログラム
JP2010183162A (ja) * 2009-02-03 2010-08-19 Mitsubishi Electric Corp 動画像符号化装置
WO2010095916A1 (ru) 2009-02-20 2010-08-26 Bogamedov Gazimagomed Abulovich Изоляционный материал «pизoлин»
KR20100095992A (ko) 2009-02-23 2010-09-01 한국과학기술원 비디오 부호화에서의 분할 블록 부호화 방법, 비디오 복호화에서의 분할 블록 복호화 방법 및 이를 구현하는 기록매체
WO2010096916A1 (en) 2009-02-27 2010-09-02 Andre Boulet Parallel passage fluid contactor structure
JP5326828B2 (ja) * 2009-06-03 2013-10-30 富士通株式会社 動画像符号化装置及び動画像符号化方法
KR101510108B1 (ko) * 2009-08-17 2015-04-10 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
CN101715135B (zh) * 2009-09-30 2013-01-09 武汉大学 基于匹配模板的自适应帧内预测滤波编码方法
EP2499829B1 (en) * 2009-10-14 2019-04-17 Dolby International AB Methods and devices for depth map processing
KR101457418B1 (ko) 2009-10-23 2014-11-04 삼성전자주식회사 계층적 부호화 단위의 크기에 따른 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
JP4983908B2 (ja) 2009-12-28 2012-07-25 ソニー株式会社 復号装置及び方法
JP2011166326A (ja) * 2010-02-05 2011-08-25 Sony Corp 画像処理装置および方法
KR20110113561A (ko) * 2010-04-09 2011-10-17 한국전자통신연구원 적응적인 필터를 이용한 인트라 예측 부호화/복호화 방법 및 그 장치
JP5871906B2 (ja) * 2010-04-26 2016-03-01 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 復号方法、プログラムおよび復号装置
CN101848394B (zh) * 2010-05-25 2012-01-18 宁波中科集成电路设计中心有限公司 一种无线视频传感器的avs编码功耗模型优化方法
KR20120012385A (ko) * 2010-07-31 2012-02-09 오수미 인트라 예측 부호화 장치
CN105516723B (zh) * 2010-09-30 2018-07-27 三菱电机株式会社 运动图像编码装置及方法、运动图像解码装置及方法
US9258573B2 (en) * 2010-12-07 2016-02-09 Panasonic Intellectual Property Corporation Of America Pixel adaptive intra smoothing
US9162957B2 (en) * 2011-07-19 2015-10-20 Edison Pharmaceuticals, Inc. Methods for oxidation of alpha tocotrienol in the presence of non-alpha tocotrienols

Also Published As

Publication number Publication date
KR101669388B1 (ko) 2016-10-25
KR101580021B1 (ko) 2015-12-23
CA3052614A1 (en) 2012-04-05
KR20140106742A (ko) 2014-09-03
CN105516723B (zh) 2018-07-27
US10244233B2 (en) 2019-03-26
SG10201911999WA (en) 2020-02-27
CN105657423B (zh) 2019-02-01
CN105516722A (zh) 2016-04-20
CN105744274A (zh) 2016-07-06
RU2674306C1 (ru) 2018-12-06
CA3000366A1 (en) 2012-04-05
JP2017017736A (ja) 2017-01-19
BR112013006501A2 (pt) 2016-07-12
HK1182244A1 (zh) 2013-11-22
SG10201912001PA (en) 2020-02-27
WO2012042720A1 (ja) 2012-04-05
US20130188706A1 (en) 2013-07-25
US20150245022A1 (en) 2015-08-27
CN103141106A (zh) 2013-06-05
US10291939B2 (en) 2019-05-14
SG10201912003RA (en) 2020-02-27
RU2013119934A (ru) 2014-11-10
KR20130101070A (ko) 2013-09-12
KR20140102324A (ko) 2014-08-21
MX2013003696A (es) 2013-05-20
CN105516723A (zh) 2016-04-20
JP2018117379A (ja) 2018-07-26
KR101563833B1 (ko) 2015-10-27
CA3105771C (en) 2023-04-25
US20150172724A1 (en) 2015-06-18
US20150245023A1 (en) 2015-08-27
KR101563834B1 (ko) 2015-10-27
RU2015102755A (ru) 2015-06-10
RU2608674C2 (ru) 2017-01-23
RU2642356C1 (ru) 2018-01-24
JP2014123988A (ja) 2014-07-03
EP3661213A1 (en) 2020-06-03
CN105516722B (zh) 2018-12-07
TWI603612B (zh) 2017-10-21
KR20140102323A (ko) 2014-08-21
CA3188026A1 (en) 2012-04-05
TW201515447A (zh) 2015-04-16
JP5503747B2 (ja) 2014-05-28
TW201223288A (en) 2012-06-01
KR20140102325A (ko) 2014-08-21
TWI606721B (zh) 2017-11-21
JP6851429B2 (ja) 2021-03-31
CA3105771A1 (en) 2012-04-05
RU2693910C1 (ru) 2019-07-05
TW201640899A (zh) 2016-11-16
CA2812201A1 (en) 2012-04-05
TW201639372A (zh) 2016-11-01
CN105744274B (zh) 2019-02-01
KR20160003876A (ko) 2016-01-11
KR101578318B1 (ko) 2015-12-16
EP2624563A1 (en) 2013-08-07
MX338462B (es) 2016-04-15
TWI472229B (zh) 2015-02-01
CA3052614C (en) 2021-03-09
SG10201507816SA (en) 2015-10-29
HK1219593A1 (zh) 2017-04-07
CA2812201C (en) 2020-06-23
US10237550B2 (en) 2019-03-19
JP2019149847A (ja) 2019-09-05
TW201640900A (zh) 2016-11-16
JP6775539B2 (ja) 2020-10-28
US20150237379A1 (en) 2015-08-20
RU2544799C2 (ru) 2015-03-20
JPWO2012042720A1 (ja) 2014-02-03
JP6675289B2 (ja) 2020-04-01
TWI566588B (zh) 2017-01-11
CA3000366C (en) 2019-11-19
CN105657423A (zh) 2016-06-08
EP2624563A4 (en) 2016-03-16
KR101563835B1 (ko) 2015-10-27
HK1219594A1 (zh) 2017-04-07
US10237551B2 (en) 2019-03-19
SG189076A1 (en) 2013-05-31
BR112013006501B1 (pt) 2022-10-18
CN103141106B (zh) 2016-03-16
JP6005087B2 (ja) 2016-10-12
US10244264B2 (en) 2019-03-26

Similar Documents

Publication Publication Date Title
TWI606720B (zh) 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記錄媒體
JP6091583B2 (ja) 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法および符号化データ
JP6807987B2 (ja) 画像符号化装置、動画像復号装置、動画像符号化データ及び記録媒体
TWI608728B (zh) Image decoding device, image decoding method, image coding device, image coding method, coding data
JP2013098713A (ja) 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法