TWI673687B - 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體 - Google Patents

畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體 Download PDF

Info

Publication number
TWI673687B
TWI673687B TW107106370A TW107106370A TWI673687B TW I673687 B TWI673687 B TW I673687B TW 107106370 A TW107106370 A TW 107106370A TW 107106370 A TW107106370 A TW 107106370A TW I673687 B TWI673687 B TW I673687B
Authority
TW
Taiwan
Prior art keywords
prediction
block
image
unit
filter
Prior art date
Application number
TW107106370A
Other languages
English (en)
Other versions
TW201820269A (zh
Inventor
峯澤彰
杉本和夫
關口俊一
Original Assignee
日商三菱電機股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=46507059&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TWI673687(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 日商三菱電機股份有限公司 filed Critical 日商三菱電機股份有限公司
Publication of TW201820269A publication Critical patent/TW201820269A/zh
Application granted granted Critical
Publication of TWI673687B publication Critical patent/TWI673687B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/004—Predictors, e.g. intraframe, interframe coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明係關於畫像編碼裝置、畫像解碼裝置，其內部預測部4使用訊框內之已編碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，藉由參考濾波器選擇用的表格，自預先準備的1個以上的濾波器之中，因應濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器而對預測畫像實施濾波處理。據此，即可減低局部性所產生的預測誤差而提高畫像品質。

Description

畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
本發明係關於以高效率而將動畫像進行編碼之動畫像編碼裝置和動畫像編碼方法、以及以高效率將編碼過之動畫像進行解碼之動畫像解碼裝置和動畫像解碼方法。
例如，就MPEG(Moving Picture Experts Group)或「ITU-T H.26x」等之國際標準影像編碼方式而言，係將輸入影像訊框(frame)予以分割成長方形的區塊(編碼對象區塊)，並對該編碼對象區塊，藉由實施使用已編碼完成的畫像訊號之預測處理而產生預測畫像，且以區塊為單位將該編碼對象區塊和預測畫像的差分之預測誤差訊號進行正交變換或量子化處理，藉此而得以進行資訊壓縮。
例如，就屬於國際標準方式之MPEG-4 AVC/H.264(ISO/IEC 14496-10 | ITU-T H.264)而言，係進行來自已編碼完成的近傍畫素之內部預測處理(intra prediction processing)或接近訊框間之動向補償預測處理(例如，參考 非專利文獻1)。
在MPEG-4 AVC/H.264當中，就亮度的內部預測模式(intra prediction mode)而言，係能以區塊(block)單位為單位，自複數的預測模式之中選擇1個預測模式。
第10圖係表示亮度的區塊尺寸為4×4畫素之情形時的內部預測模式之說明圖。
在第10圖中，白色圓形係編碼對象的區塊內之畫素。黑色圓形係預測用之畫素，且為已編碼完成的鄰接區塊內之畫素。
就第10圖而言，雖係準備9個之模式0至模式8而作為內部預測模式，惟模式2係進行平均值預測之模式，以上側和左側之區塊的鄰接畫素之平均值而預測編碼對象區塊內之畫素。
模式2以外之模式係進行方向性預測之模式。模式0係垂直方向預測之模式，係以垂直方向重覆上側之區塊的鄰接畫素而產生預測畫像。例如，於豎條紋情形時則選擇模式0。
模式1係水平方向預測，係以水平方向重覆左側之區塊的鄰接畫素而產生預測畫像。例如，於橫條紋情形時則選擇模式1。
模式3至模式8係使用上側或左側之區塊的鄰接畫素，朝預定的方向產生內插畫素(箭頭所表示的方向)而產生預測畫像。
適用內部預測之亮度的區塊尺寸係能自4×4畫素、8× 8畫素、16×16畫素之中作選擇，而8×8畫素之情形時和4×4畫素之情形時係同樣地規定有9個之內部預測模式。
16×16畫素之情形時係規定有4個之內部預測模式(平均值預測、垂直方向預測、水平方向預測、以及平面預測)。
平面預測係將上側之區塊的鄰接畫素和左側之區塊的鄰接畫素朝傾斜的方向予以內插而產生的畫素作為預測值之模式。
進行方向性預測之內部預測模式係例如45度等，由於根據模式而以預定的方向產生預測值，故區塊內的物件(object)之境界(邊緣)的方向和預測模式所表示的方向為一致時，則能提高預測效率而削減編碼量。
然而，邊緣的方向和預測模式所表示的方向之間產生些微的偏移，而即使方向為一致，編碼對象區塊內之邊緣亦僅些微失真(搖動、彎曲等)，而有局部性地產生大的預測誤差，而使預測效率極端降低之情形。
為了防止如此之預測效率的降低情形，就8×8畫素的方向性預測而言，係對已編碼完成的鄰接畫素，使用施行平滑化處理者而進行預測處理，藉此而產生平滑化之預測畫像，從而減低預測方向之些微偏移、或於邊緣產生些微失真時所產生之預測誤差。
[先前技術文獻] <非專利文獻>
非專利文獻1：MPEG-4 AVC(ISO/IEC 14496-10)/ITU-T H. 264規格
由於習知之動畫像編碼裝置係以上述之方式構成，故若產生平滑化之預測畫像，則即使預測方向產生些微偏移、或邊緣產生些微失真，亦能減低所產生之預測誤差。然而，非專利文獻1中，8×8畫素的區塊以外並不實施平滑化處理，而即使在8×8畫素的區塊當中，亦僅實施一套的平滑化處理。
實際上，8×8畫素以外的尺寸之區塊亦同樣地，即使預測畫像和編碼對象畫像的圖樣相似，而由於邊緣產生些微不匹配(mismatch)，而有局部性地產生大的預測誤差，導致預測效率大幅降低之情形的課題。再者，即使在相同尺寸的區塊當中，將預測誤差訊號進行量子化時所使用的量子化參數(parameter)、或區塊內之畫素的位置、預測模式等若不相同時，則符合於減低局部性的預測誤差之處理亦不相同，惟亦僅準備一套的平滑化處理，而有無法充分減低預測誤差之課題。
此外，在進行平均值預測時，為了將區塊內的預測值全部設成鄰接於區塊的畫素之平均值，而使位於區塊境界的畫素之預測訊號其對周圍的已編碼完成的畫素易於成為不連續的訊號，另一方面，由於畫像訊號一般而言係空間方向相關性高之訊號，故有因為上述之不連續性而有易於產生預測誤差於區塊的境界部分之課題。
本發明係為了解決上述之課題而創作者，其目的係取 得動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法及動畫像解碼方法，其係能減低局部性所產生的預測誤差而提高畫像品質。
本發明之動畫像編碼裝置係內部預測手段使用訊框內之已編碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，自預先準備的1個以上的濾波器(filter)之中，因應於濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器而對預測畫像實施濾波處理，即可將濾波處理後的預測畫像輸出為差分畫像產生手段。
根據本發明，則由於係構成為內部預測手段使用訊框內之已編碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，則自預先準備的1個以上的濾波器之中，因應於濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器而實施相對於預測畫像之濾波處理，而將濾波處理後的預測畫像輸出於差分畫像產生手段，故具有能減低局部性所產生的預測誤差而提高畫像品質之功效。
1‧‧‧編碼控制部(編碼控制手段)
2‧‧‧區塊分割部(區塊分割手段)
3、52‧‧‧切換開關(內部預測手段、動向補償預測手段)
4、53‧‧‧內部預測部(內部預測手段)
5、54‧‧‧動向補償預測部(動向補償預測手段)
6‧‧‧減算部(差分畫像產生手段)
7‧‧‧變換/量子化部(畫像壓縮手段)
8‧‧‧逆量子化/逆變換部
9‧‧‧加算部
10、57‧‧‧內部預測用記憶體
11、58‧‧‧迴路濾波器部
12、59‧‧‧動向補償預測訊框記憶體
13‧‧‧可變長編碼部(可變長編碼手段)
13a‧‧‧內部預測參數可變長編碼部
51‧‧‧可變長解碼部(可變長解碼手段)
51a‧‧‧內部預測參數可變長解碼部
55‧‧‧逆量子化．逆變換部(差分畫像產生手段)
56‧‧‧加算部(解碼畫像產生手段)
100‧‧‧濾波器選擇表格指標
ST1至ST13、ST21至ST31‧‧‧步驟
第1圖係為表示本發明之實施形態1的動畫像編碼裝置之構成圖。
第2圖係為表示本發明之實施形態1的動畫像解碼裝 置之構成圖。
第3圖係為表示本發明之實施形態1的動畫像編碼裝置的處理內容之流程圖。
第4圖係為表示本發明之實施形態1的動畫像解碼裝置的處理內容之流程圖。
第5圖係為表示最大尺寸的編碼區塊為階層性地分割成複數的編碼區塊的態樣之說明圖。
第6圖(a)係為係表示分割後之區分的分布，(b)係以4分樹狀圖而表示分配編碼模式m(Bn)於階層分割後之區分的狀況之說明圖。
第7圖係為表示在編碼區塊Bn內的各區分Pi n當中，可選擇之內部預測參數(內部預測模式)之一例的說明圖。
第8圖係為表示li n=mi n=4時，產生區分Pi n內的畫素之預測值時所使用的畫素之一例的說明圖。
第9圖係為表示N=5時的參考畫素配置之一例的說明圖。
第10圖係為表示亮度的區塊尺寸為4×4畫素之情形時之非專利文獻1的內部預測模式之說明圖。
第11圖係為表示產生預測畫像時所使用之訊框內之已編碼完成的畫像和濾波處理對象畫素的距離之一例的說明圖。
第12圖係為表示具體的濾波器之參考畫素配置的說明圖。
第13圖係為表示按每個內部預測模式指標和區分尺 寸的組合而決定使用何種濾波器的表格之一例的說明圖。
第14圖係為表示進行平均值預測時，進行濾波處理的簡化之一例的說明圖。
第15圖係為表示將濾波器選擇表格指標加入於程序位階標頭時的位元訊流之一例的說明圖。
第16圖係為表示將濾波器選擇表格指標加入於畫像位階標頭時的位元訊流之一例的說明圖。
第17圖係為表示將濾波器選擇表格指標加入於截波標頭時的位元訊流之一例的說明圖。
第18圖係為表示將濾波器選擇表格指標加入於基準區塊標頭時的位元訊流之一例的說明圖。
第19圖係為表示按每個各內部預測模式指標和區分尺寸的組合而決定使用何種濾波器的表格之與第13圖不同之例的說明圖。
第20圖係為表示按每個內部預測模式指標和區分尺寸的組合決定是否進行相對於產生中間預測畫像時的參考畫素之平滑化處理之表格之例的說明圖。
以下，為了更詳細地說明本發明，茲根據附加之圖式而說明用以實施本發明之形態。
實施形態1.
本實施形態1係說明關於輸入影像的各訊框畫像，藉由實施來自已編碼完成的近傍畫素之內部預測處理或於接近訊框間實施動向補償預測處理，藉此而產生預測畫像， 並對屬於該預測畫像和訊框畫像的差分畫像之預測誤差訊號實施正交變換/量子化的壓縮處理之後，進行可變長編碼而產生位元訊流之動畫像編碼裝置、以及將該動畫像編碼裝置所輸出之位元訊流進行解碼之動畫像解碼裝置。
本實施形態1之動畫像編碼裝置之特徵在於：順應影像訊號的空間/時間方向之局部的改變，並將影像訊號分割成多樣的尺寸之區域而進行順應於訊框內/訊框間之編碼。
一般而言，影像訊號係具有在空間/時間方面其訊號的複雜性為局部的改變之特性。就空間方面而言，某特定的影像訊框上，係有在如天空或牆壁等之比較寬廣的畫像區域中具有均一的訊號特性之圖樣，亦有在具有人物或細微紋路(texture)之繪畫等之小的畫像區域內，亦混合著具有複雜的紋路圖案之圖樣。
就時間方面而言，天空或牆壁雖係局部在時間方向之圖樣的改變較小，惟由於動態人物或物體其輪廓在時間上係進行剛體/非剛體的運動，故時間性的改變較大。
編碼處理雖係根據時間/空間的預測而產生訊號電力或熵值(entropy)較小的預測誤差訊號，藉而削減整體的編碼量，惟如能將預測用的參數盡量均一地使用於大的畫像訊號區域，則能減少該參數的編碼量。
另一方面，對時間/空間方面改變較大的畫像訊號圖案使用相同的預測參數時，由於預測誤差的增加，故無法削減預測誤差訊號的編碼量。
因此，對時間/空間方面改變較大的畫像訊號圖案，無 論縮小預測對象的區域，抑或增加預測用的參數之資料(data)量，均以減低預測誤差訊號的電力/熵值為佳。
為了進行適應於如此之影像訊號之一般的性質之編碼，本實施形態1之動畫像編碼裝置係根據預定的最大區塊尺寸而階層性將影像訊號的區域予以分割，而得以按每個分割區域實施預測處理、及預測誤差的編碼處理。
本實施形態1之動畫像編碼裝置之處理對象的影像訊號，係除了由亮度訊號和2個的色差訊號所組成之YUV訊號、或數位(digital)攝影元件所輸出之RGB訊號等之任意的顏色空間之彩色(color)影像訊號之外，尚有單色(monochrome)畫像訊號或紅外線畫像訊號等，影像訊框係由水平/垂直2次元的數位樣本(digital sample)(畫素)列所構成之任意的影像訊號。
各畫素的階調(gradation，有稱為色階之情形)可為8位元，而10位元、12位元等之階調亦可。
但，在以下的說明當中，如無特別限制，則輸入之影像訊號係設為YUV訊號。此外，2個的色差成分U、V相對於亮度成分Y，係設為副樣本之4：2：0格式(formate)的訊號。
並且，將對應於影像的各訊框之處理資料單位稱為「畫像(picture)」，就本實施形態1而言，「畫像」係作為逐次掃描(progressive scan)之影像訊框的訊號而進行說明。然而，影像訊號為交錯(interlace)訊號時，則「畫像」亦可為屬於構成影像訊框的單位之場景(field)畫像訊號。
第1圖係表示本發明之實施形態1的動畫像編碼裝置之構成圖。
在第1圖當中，編碼控制部1係於決定實施內部預測處理(訊框內預測處理)或動向補償預測處理(訊框間預測處理)時成為處理單位之編碼區塊的最大尺寸的同時，亦實施決定階層性地分割最大尺寸的編碼區塊時之上限的階層數之處理。
再者，編碼控制部1係實施自可利用的1個以上的編碼模式(1個以上的內部編碼模式、1個以上的中間(inter)編碼模式)之中，選擇適合於經過階層性地分割的各編碼區塊的編碼模式之處理。
再者，編碼控制部1係按每個各編碼區塊，決定壓縮差分畫像時所使用的量子化參數、以及變換區塊尺寸，並實施決定實施預測處理時所使用之內部預測參數或中間預測參數之處理。量子化參數、以及變換區塊尺寸係包含於預測誤差編碼參數，並輸出於變換/量子化部7、逆量子化/逆變換部8、以及可變長編碼部13等。
並且，編碼控制部1係構成編碼控制手段。
區塊分割部2當輸入表示輸入畫像的影像訊號時，將該影像訊號所示之輸入畫像分割成由編碼控制部1所決定之最大尺寸的編碼區塊，並實施將該編碼區塊階層性地分割之處理，至達於由編碼控制部1所決定之上限的階層數為止。並且，區塊分割部2係構成區塊分割手段。
切換開關3在由編碼控制部1所選擇之編碼模式若為 內部編碼模式時，則實施將由區塊分割部2所分割之編碼區塊輸出於內部預測部4之處理，而由編碼控制部1所選擇之編碼模式若為中間編碼模式時，則實施將由區塊分割部2所分割之編碼區塊輸出於動向補償預測部5之處理。
內部預測部4在自切換開關3接收由區塊分割部2所分割之編碼區塊時，使用訊框內之已編碼完成的畫像訊號，並根據編碼控制部1所輸出之內部預測參數，而對該編碼區塊實施訊框內預測處理，藉此而實施產生預測畫像之處理。
然而，內部預測部4係於產生上述的預測畫像之後，自預先準備的1個以上的濾波器之中，因應於在動畫像解碼裝置當中產生和上述預測畫像相同的預測畫像之時點上為已知的各種參數之狀態而選擇濾波器，並使用該濾波器，實施相對上述之預測畫像之濾波處理，再將濾波處理後的預測畫像輸出於減算部6、以及加算部9。
具體而言，係因應於作為上述各種參數之如下之4個的參數之中之至少1個以上的參數之狀態而統一地決定濾波器。
．參數(1)
上述之預測畫像的區塊尺寸
．參數(2)
由編碼控制部1所決定之量子化參數
．參數(3)
產生預測畫像時所使用之訊框內之已編碼完成的畫 像訊號和濾波處理對象畫素的距離
．參數(4)
由編碼控制部1所決定之內部預測參數
又，由切換開關3和內部預測部4而構成內部預測手段。
動向補償預測部5係當由編碼控制部1而選擇中間編碼模式時，則使用由動向補償預測訊框記憶體12所儲存之1個訊框以上的參考畫像，並根據編碼控制部1所輸出之中間預測參數，對該編碼區塊實施動向補償預測處理，藉此而實施產生預測畫像之處理，以作為適合於由區塊分割部2所分割之編碼區塊的編碼模式。並且，由切換開關3和動向補償預測部5而構成動向補償預測手段。
減算部6係由區塊分割部2所分割之編碼區塊，減去由內部預測部4或動向補償預測部5所產生之預測畫像，藉此而實施產生差分畫像(=編碼區塊-預測畫像)之處理。並且，減算部6係構差分畫像產生手段。
變換/量子化部7係藉由包含於編碼控制部1所輸出之預測誤差編碼參數的變換區塊尺寸單位，而實施由減算部6所產生之差分畫像的變換處理(例如，DCT(離散餘弦(cosine)變換)、或預先對特定的學習系列施行基礎設計之KL變換等之正交變換處理)，並使用包含於該預測誤差編碼參數的量子化參數，將該差分畫像的變換係數進行量子化，藉此實施將量子化後之變換係數作為差分畫像的壓縮資料而予以輸出之處理。並且，變換/量子化部7係構成畫 像壓縮手段。
逆量子化/逆變換部8係使用包含於編碼控制部1所輸出之預測誤差編碼參數的量子化參數，將變換/量子化部7所輸出的壓縮資料進行逆量子化，並以包含於該預測誤差編碼參數的變換區塊尺寸單位，實施逆量子化之壓縮資料的逆變換處理(例如，逆DCT(逆離散餘弦變換)、或逆KL變換等之逆變換處理)，藉此實施將逆變換處理後之壓縮資料作為局部解碼預測誤差訊號而予以輸出之處理。
加算部9係將逆量子化/逆變換部8所輸出之局部解碼預測誤差訊號，加上表示由內部預測部4或動向補償預測部5所產生之預測畫像的預測訊號，藉此實施產生表示局部解碼畫像之局部解碼畫像訊號之處理。
內部預測用記憶體10係將作為因應內部預測部4而於下次的內部預測處理所使用之畫像之，由加算部9所產生之局部解碼畫像訊號所示之局部解碼畫像予以儲存之RAM等之記錄媒體。
迴路濾波(Loop Filter)部11係將包含於加算部9所產生之局部解碼畫像訊號的編碼失真予以補償，並實施將編碼失真補償後之局部解碼畫像訊號所示之局部解碼畫像輸出於動向補償預測訊框記憶體12作為參考畫像之處理。
動向補償預測訊框記憶體12係將作為因應動向補償預測部5而於下次的動向補償預測處理所使用之參考畫像之，由迴路濾波器部11之過濾處理後之局部解碼畫像予以儲存之RAM等之記錄媒體。
可變長編碼部13係實施將變換/量子化部7所輸出的壓縮資料、編碼控制部1所輸出之編碼模式和預測誤差編碼參數、以及內部預測部4所輸出的內部預測參數或動向補償預測部5所輸出的中間預測參數進行可變長編碼，而產生使該壓縮資料、編碼模式、預測誤差編碼參數、內部預測參數/中間預測參數的編碼資料被多重化之位元訊流之處理。並且，可變長編碼部13係構成可變長編碼手段。
第2圖係表示本發明之實施形態1的動畫像解碼裝置之構成圖。
在第2圖當中，可變長解碼部51係自多重化為位元訊流的編碼資料中，將經過階層性地分割之各編碼區塊之壓縮資料、編碼模式、預測誤差編碼參數、內部預測參數/中間預測參數進行可變長解碼，且於將該壓縮資料、以及預測誤差編碼參數輸出於逆量子化/逆變換部55，並實施將該編碼模式、以及內部預測參數/中間預測參數輸出於切換開關52之處理。並且，可變長解碼部51係構成可變長解碼手段。
切換開關52係在可變長解碼部51所輸出之編碼區塊的編碼模式為內部編碼模式時，則實施將可變長解碼部51所輸出之內部預測參數輸出於內部預測部53之處理，而在該編碼模式為中間編碼模式時，則實施將可變長解碼部51所輸出之中間預測參數輸出於動向補償預測部54之處理。
內部預測部53係使用訊框內之已解碼完成的畫像訊號，並根據切換開關52所輸出之內部預測參數，對該編碼 區塊實施訊框內預測處理，藉此而實施產生預測畫像之處理。
然而，內部預測部53係於產生上述的預測畫像之後，自預先準備的1個以上的濾波器之中，因應於在產生上述預測畫像之時點上為已知的各種參數之狀態而選擇濾波器，並使用該濾波器，實施相對上述之預測畫像之濾波處理，再將濾波處理後的預測畫像輸出於加算部56。
具體而言，係因應於作為上述各種參數之如下之4個的參數之中之至少1個以上的參數之狀態而統一地決定濾波器。然而，所使用的參數係預先決定為和前述的動畫像編碼裝置相同的參數。亦即，在動畫像編碼裝置側內部預測部4使用參數(1)和(4)而進行濾波處理之情形時，則動畫像解碼裝置側亦同樣地，內部預測部53使用參數(1)和(4)而進行濾波處理，即可將動畫像編碼裝置和動畫像解碼裝置所使用的參數予以統一。
．參數(1)
上述之預測畫像的區塊尺寸
．參數(2)
由可變長解碼部51予以可變長解碼之量子化參數
．參數(3)
產生預測畫像時所使用之訊框內之已解碼完成的畫像訊號和濾波處理對象畫素的距離
．參數(4)
由可變長解碼部51予以可變長解碼之內部預測參數
並且，由切換開關52和內部預測部53而構成內部預測手段。
動向補償預測部54係使用由動向補償預測訊框記憶體59所儲存之1個訊框以上的參考畫像，並根據切換開關52所輸出之中間預測參數，對編碼區塊實施動向補償預測處理，藉此而實施產生預測畫像之處理。並且，由切換開關52和動向補償預測部54而構成動向補償預測手段。
逆量子化/逆變換部55係使用包含於可變長解碼部51所輸出之預測誤差編碼參數的量子化參數，將可變長解碼部51所輸出之編碼區塊的壓縮資料進行逆量子化，並以包含於該預測誤差編碼參數的變換區塊尺寸為單位，實施逆量子化之壓縮資料的逆變換處理(例如，逆DCT(逆離散餘弦變換)、或逆KL變換等之逆變換處理)，藉此而實施將逆變換處理後之壓縮資料作為解碼預測誤差訊號(表示壓縮前的差分畫像的訊號)而予以輸出之處理。並且，逆量子化．逆變換部55係構成差分畫像產生手段。
加算部56係實施將逆量子化．逆變換部55所輸出之解碼預測誤差訊號，加上表示由內部預測部53或動向補償預測部54所產生之預測畫像的預測訊號，藉此而實施產生表示解碼畫像之解碼畫像訊號之處理。又，加算部56係構成解碼畫像產生手段。
內部預測用記憶體57係將作為因應內部預測部53而於下次的內部預測處理所使用之畫像之，由加算部56所產生之解碼畫像訊號所示之解碼畫像予以儲存之RAM等之 記錄媒體。
迴路濾波部58係將包含於加算部56所產生之解碼畫像訊號的編碼失真予以補償，並實施將編碼失真補償後之解碼畫像訊號所示之解碼畫像作為參考畫像而輸出於動向補償預測訊框記憶體59之處理。
動向補償預測訊框記憶體59係將作為因應動向補償預測部54而於下次的動向補償預測處理所使用之參考畫像之，由迴路濾波部58之濾波處理後之解碼畫像予以儲存之RAM等之記錄媒體。
就第1圖而言，雖係假定為屬於動畫像編碼裝置之構成要素的編碼控制部1、區塊分割部2、切換開關3、內部預測部4、動向補償預測部5、減算部6、變換/量子化部7、逆量子化/逆變換部8、加算部9、迴路濾波部11、以及可變長編碼部13之各者由專用的硬體(例如，安裝CPU之半導體積體電路、或單晶片微電腦(one chip micro computer)等)所構成，惟動畫像編碼裝置由電腦所構成時，則亦可將記述編碼控制部1、區塊分割部2、切換開關3、內部預測部4、動向補償預測部5、減算部6、變換/量子化部7、逆量子化/逆變換部8、加算部9、迴路濾波部11、以及可變長編碼部13的處理內容之程式(program)儲存於該電腦的記憶體，而由該電腦的CPU執行儲存於該記憶體的程式。
第3圖係表示本發明之實施形態1的動畫像編碼裝置的處理內容之流程圖。
就第2圖而言雖係假定為屬於動畫像解碼裝置之構成 要素的可變長解碼部51、切換開關52、內部預測部53、動向補償預測部54、逆量子化/逆變換部55、加算部56、以及迴路濾波部58之各者由專用的硬體(例如，安裝CPU之半導體積體電路、或單晶片微電腦等)所構成，惟動畫像解碼裝置由電腦所構成時，則亦可將記述可變長解碼部51、切換開關52、內部預測部53、動向補償預測部54、逆量子化/逆變換部55、加算部56、以及迴路濾波部58的處理內容之程式儲存於該電腦的記憶體，而該電腦的CPU則執行儲存於該記憶體的程式。
第4圖係表示本發明之實施形態1的動畫像解碼裝置的處理內容之流程圖。
繼而說明其動作如下。
最初，說明第1圖之動畫像編碼裝置的處理內容。
首先，編碼控制部1係於決定成為實施內部預測處理(訊框內預測處理)或動向補償預測處理(訊框間預測處理)時的處理單位之編碼區塊的最大尺寸，並決定階層性地分割最大尺寸的編碼區塊時之上限的階層數(第3圖之步驟(step)ST1)。
可想到例如對全部的畫像而決定因應於輸入畫像的解像度的尺寸之方法，以作為編碼區塊的最大尺寸之決定方法。
再者，亦可想到將輸入畫像之局部的動向之複雜度的不同作為參數而予以定量化，動向激烈的畫像係將最大尺寸決定為較小值，而動向較少的畫像則將最大尺寸決定為 較大值之方法等。
有關於上限的階層數，其係考量例如若輸入畫像的動向愈激烈，則設定成將階層數予以加深，而能檢測更細微的動向，若輸入畫像的動向較少，則以抑制階層數之方式進行設定。
此外，編碼控制部1係自可利用之1個以上的編碼模式(M種類的內部編碼模式、N種類的中間編碼模式)之中，選擇適合於經過階層性地分割之各編碼區塊的編碼模式(步驟ST2)。
由於編碼控制部1的編碼模式之選擇方法為眾所皆知之技術，故省略其詳細說明，惟例如有使用可利用之任意的編碼模式，對編碼區塊實施編碼處理並檢驗其編碼效率，而在可利用之複數的編碼模式之中，選擇編碼效率最佳的編碼模式之方法等。
再者，編碼控制部1係按每個各個編碼區塊決定差分畫像被壓縮時所使用之量子化參數和變換區塊尺寸，並決定實施預測處理時所使用之內部預測參數或中間預測參數。
編碼控制部1係將含有量子化參數和變換區塊尺寸的預測誤差編碼參數輸出於變換/量子化部7、逆量子化/逆變換部8、以及可變長編碼部13。再者，因應於需求而將預測誤差編碼參數輸出於內部預測部4。
區塊分割部2係於輸入表示輸入畫像的影像訊號時，將表示該影像訊號的輸入畫像分割成由編碼控制部1所決 定的最大尺寸之編碼區塊，並將該編碼區塊階層性地予以分割，直至達於由編碼控制部1所決定的上限的階層數為止。
此處，第5圖係表示最大尺寸的編碼區塊為階層性地分割成複數的編碼區塊的態樣之說明圖。
第5圖之例中，最大尺寸之編碼區塊係第0階層之編碼區塊B0，且具有亮度成分(L0,M0)之尺寸。
此外，第5圖之例係以最大尺寸之編碼區塊B0為出發點，以4分樹狀構造而階層性地進行分割至另行決定之預定的深度為止，藉此而取得編碼區塊Bn。
在深度n當中，編碼區塊Bn係尺寸(Ln,Mn)之畫像區域。
然而，Ln和Mn雖不論其為相不相同均可，惟第5圖之例係表示Ln=Mn之情形。
於下述，編碼區塊Bn的尺寸係定義為編碼區塊Bn的亮度成分之尺寸(Ln,Mn)。
區塊分割部2為了進行4分樹狀分割，(Ln+1,Mn+1)=(Ln/2,Mn/2)係恆常地成立。
然而，就如RGB訊號等，全部的顏色成分為具有相同樣本數之彩色影像訊號(4：4：4格式化)而言，其全部的顏色成分之尺寸雖成為(Ln,Mn)，惟處理4：2：0格式時，其對應的色差成分之編碼區塊的尺寸則為(Ln/2,Mn/2)。
於下述，將以第n階層的編碼區塊Bn所選擇之編碼模式記述為m(Bn)。
於複數的顏色成分所組成的彩色影像訊號之情形時，編碼模式m(Bn)雖亦可以按每個顏色成分分別使用個別的模式之方式構成，惟於下述，若無特別限制，則意指為對YUV訊號、4：2：0格式的編碼區塊之亮度成分的編碼模式而進行說明。
於編碼模式m(Bn)係具有1個乃至複數個內部編碼模式(總稱為「INTRA」)、1個乃至複數個中間編碼模式(總稱為「INTER」)，編碼控制部1係如上述，自該畫像可利用之全部的編碼模式，或自該子集合(subset)之中，對編碼區塊Bn而選擇編碼效率最佳之編碼模式。
編碼區塊Bn為如第5圖所示，更分割成1個乃至複數個預測處理單位(區分)。
於下述，將屬於編碼區塊Bn的區分(partition)予以表記為Pi n(i：第n階層之區分編號)。
如何進行屬於編碼區塊Bn的區分Pi n之分割，其係作為資訊包含於編碼模式m(Bn)之中。
區分Pi n雖全部係根據編碼模式m(Bn)而進行預測處理，惟可按每個區分Pi n而選擇個別的預測參數。
編碼控制部1係對最大尺寸的編碼區塊，產生例如第6圖所示之區塊分割狀態，並具體指定編碼區塊Bn。
第6圖(a)之網狀部分係表示分割後之區分的分布，此外，第6圖(b)係以4分樹狀圖而表示分配編碼模式m(Bn)於階層分割後之區分的狀況。
在第6圖(b)當中，以四角所圍繞的節點(node)係表示 分配編碼模式m(Bn)的節點(編碼區塊Bn)。
切換開關3係編碼控制部1對各編碼區塊Bn的區分Pi n而選擇最佳編碼模式m(Bn)時，其編碼模式m(Bn)為內部編碼模式時((步驟ST3)，則將由區塊分割部2所分割的編碼區塊Bn的區分Pi n輸出於內部預測部4。
另一方面，該編碼模式m(Bn)為中間編碼模式時(步驟ST3)，則將由區塊分割部2所分割的編碼區塊Bn的區分Pi n輸出於動向補償預測部5。
內部預測部4係於自切換開關3接收編碼區塊Bn的區分Pi n時，則使用訊框內之已編碼完成的畫像訊號，並根據編碼控制部1所輸出之內部預測參數，實施相對該編碼區塊Bn的區分Pi n之訊框內預測處理，藉此而產生內部預測畫像Pi n(步驟ST4)。
然而，內部預測部4係於產生上述的內部預測畫像Pi n之後，自預先準備的1個以上的濾波器之中，因應於在動畫像解碼裝置當中產生和上述內部預測畫像Pi n相同的預測畫像之時點上為已知的各種參數之狀態而選擇濾波器，並使用該濾波器對該內部預測畫像Pi n實施濾波處理。
內部預測部4雖係於對內部預測畫像Pi n實施濾波處理時，則將濾波處理後之內部預測畫像Pi n輸出於減算部6以及加算部9，惟為了使第2圖之動畫像解碼裝置亦能產生相同的內部預測畫像Pi n，係將該內部預測參數輸出於可變長編碼部13。
內部預測部4之處理內容的概略雖如上述，惟詳細的 處理內容則容於後述。
動向補償預測部5係於自切換開關3接收編碼區塊Bn的區分Pi n時，使用由動向補償預測訊框記憶體12所儲存之1訊框以上的參考畫像，並根據編碼控制部1所輸出之中間預測參數，實施相對該編碼區塊Bn的區分Pi n之動向補償預測處理，藉此而產生中間預測畫像Pi n(步驟ST5)。
並且，由於實施動向補償預測處理而產生預測畫像之技術為眾所皆知之技術，故省略其詳細的說明。
減算部6係於內部預測部4或動向補償預測部5產生預測畫像(內部預測畫像Pi n、中間預測畫像Pi n)時，根據由區塊分割部2所分割之編碼區塊Bn的區分Pi n，減去由內部預測部4或動向補償預測部5所產生之預測畫像(內部預測畫像Pi n、中間預測畫像Pi n)，藉此而產生差分畫像，並將表示該差分畫像之預測誤差訊號ei n輸出於變換/量子化部7(步驟ST6)。
變換/量子化部7係於自減算部6接收表示差分畫像之預測誤差訊號ei n時，以包含於編碼控制部1所輸出之預測誤差編碼參數的變換區塊尺寸為單位，實施該差分畫像的變換處理(例如，DCT(離散餘弦變換)、或預先對特定的學習系列實施基礎設計之KL變換等之正交變換處理)，並使用包含於該預測誤差編碼參數的量子化參數，將該差分畫像的變換係數進行量子化，藉此而將量子化後之變換係數作為差分畫像的壓縮資料而輸出於逆量子化/逆變換部8、以及可變長編碼部13(步驟ST7)。
逆量子化/逆變換部8係於自變換/量子化部7而接收差分畫像的壓縮資料時，使用包含於編碼控制部1所輸出之預測誤差編碼參數的量子化參數，將該差分畫像的壓縮資料進行逆量子化，並以包含於該預測誤差編碼參數的變換區塊尺寸為單位，實施逆量子化之壓縮資料的逆變換處理(例如，逆DCT(逆離散餘弦變換)、或逆KL變換等之逆變換處理)，藉此而將逆變換處理後之壓縮資料作為局部解碼預測誤差訊號ei n hat(電子申請的關係，將附加於字母文字的「^」表記為hat)而輸出於加算部9(步驟ST8)。
加算部9係於自逆量子化/逆變換部8接收局部解碼預測誤差訊號ei n hat時，將該局部解碼預測誤差訊號ei n hat，加上表示由內部預測部4或動向補償預測部5所產生之預測畫像(內部預測畫像Pi n、中間預測畫像Pi n)的預測訊號，藉此而產生局部解碼區分畫像Pi n hat乃至作為其集合的局部解碼編碼區塊畫像之局部解碼畫像(步驟ST9)。
加算部9係於產生局部解碼畫像時，將表示該局部解碼畫像的局部解碼畫像訊號儲存於內部預測用記憶體10，並將該局部解碼畫像訊號輸出於迴路濾波器部11。
步驟ST3至ST9之處理係重覆實施，直至結束對階層性地分割之全部的編碼區塊Bn的處理為止，當結束對全部的編碼區塊Bn的處理時，則推移於步驟ST12的處理(步驟ST10、ST11)。
可變長編碼部13係將變換/量子化部7所輸出的壓縮資料、自編碼控制部1所輸出之編碼模式(包含表示編碼區 塊的分割狀態之資訊)和預測誤差編碼參數、以及內部預測部4所輸出的內部預測參數或自動向補償預測部5所輸出的中間預測參數進行熵值編碼。
可變長編碼部13係將屬於熵值編碼的編碼結果之壓縮資料、編碼模式、預測誤差編碼參數、內部預測參數/中間預測參數的編碼資料予以多重化而產生位元訊流(步驟ST12)。
迴路濾波部11係於自加算部9而接收局部解碼畫像訊號時，將包含於由該局部解碼畫像訊號的編碼失真予以補償，並將編碼失真補償後之局部解碼畫像訊號所示之局部解碼畫像作為參考畫像而輸出於動向補償預測訊框記憶體12(步驟ST13)。
迴路濾波部11之過濾處理係可以加算部9所輸出之局部解碼畫像訊號的最大編碼區塊或各編碼區塊單位而進行，亦可以集合複數的最大編碼區塊之單位進行，或者於輸出1畫像份的局部解碼畫像訊號之後，一併進行1畫像份之處理。
繼而詳細說明內部預測部4之處理內容。
第7圖係表示在編碼區塊Bn內的各區分Pi n當中，可選擇之內部預測參數(內部預測模式)之一例的說明圖。
就第7圖之例而言，為表示內部預測模式、以及該內部預測模式所示之預測方向向量(vector)，並設計成隨著可選擇之內部預測模式之數量的增加，而能縮小預測方向向量彼此之間的相對角度。
內部預測部4係根據對區分Pi n之內部預測參數、或內部預測畫像Pi n的產生所使用之濾波器的選擇參數，而實施相對於區分Pi n之內部預測處理。
以下，根據相對於區分Pi n之亮度訊號的內部預測參數(內部預測模式)，說明關於產生亮度訊號的內部預測訊號之內部處理。
於此，將區分Pi n之尺寸設為li n×mi n畫素。
第8圖係表示li n=mi n=4時，產生區分Pi n內的畫素之預測值時所使用的畫素之一例的說明圖。
第8圖雖係將鄰接於區分Pi n的已編碼完成之上區分的畫素(2×li n+1)個、以及左區分的畫素(2×mi n)個作為預測用的畫素，惟預測用的畫素亦可多或少於第8圖所示的畫素。
再者，第8圖雖係將鄰接的1行或1列分的畫素作為預測用，惟亦可將2行或2列、或更多的畫素作為預測用。
對區分Pi n之內部預測模式的指標值為2(平均值預測)時，則將上區分的鄰接畫素和左區分的鄰接畫素之平均值作為區分Pi n內的全部畫素之預測值而產生中間預測畫像。
內部預測模式的指標值為2(平均值預測)以外時，則根據指標值所示之預測方向向量vp=(dx,dy)而產生區分Pi n內的畫素之預測值。
然而，將產生預測值的畫素(預測對象畫素)之區分Pi n內的相對座標(以區分的左上畫素作為原點)設為(x,y)。
預測用的參考畫素之位置係形成下列所示之A和鄰接畫素的交點。
其中，k為負的純量(scalar)值。
參考畫素位於整數畫素位置時，則將該整數畫素作成預測對象畫素的預測值。
另一方面，參考畫素並非位於整數畫素位置時，則將由鄰接於參考畫素的整數畫素所產生的內插畫素設為預測值。
就第8圖之例而言，由於其參考畫素並非位於整數畫素位置，故由鄰接於參考畫素的2畫素予以內插而算出預測值。然而，預測值並不限定於鄰接的2畫素，亦可由鄰接的2畫素以上的畫素產生內插畫素而作為預測值。
並且，對於以根據上述的程序而產生之區分Pi n內的預測值所構成的中間預測畫像進行後述之濾波處理，藉此而取得最後的內部預測畫像Pi n，並將該內部預測畫像Pi n輸出於減算部6、以及加算部9。
再者，內部預測畫像Pi n的產生所使用之內部預測參數，其係為了多重化為位元訊流而輸出於可變長編碼部13。
以下，說明關於具體的濾波處理。
自預先準備之至少1個以上的濾波器之中，以後述的方法而選擇所使用之濾波器，且對中間預測畫像的各畫素，根據下述之式(1)而進行濾波處理。
在式(1)當中，an(n=0,1,…,N)為參考畫素的係數(a0,a1,…,an-1)和偏移(offset)係數aN所構成之濾波係數。
pn(n=0,1,…,N-1)係表示含有濾波處理對象畫素p0之濾波器的參考畫素。N為任意的參考畫素數量。
s(pn)係各參考畫素的亮度值，s hat(p0)係表示濾波處理對象畫素p0之濾波處理後的亮度值。
然而，亦可設為濾波器係數為無偏移係數aN之構成。再者，關於區分Pi n內的各參考畫素的亮度值s(pn)係可設為中間預測畫像之各畫素的亮度值，亦可僅將完成濾波處理的畫素位置設為濾波處理後的亮度值。
關於區分Pi n之外的各參考畫素的亮度值s(pn)，若為已編碼完成之區域，則選擇編碼後的亮度值(被解碼之亮度值)，若為尚未進行編碼之區域，則自上述所定義之區分Pi n內的各參考畫素的亮度值s(pn)、以及已編碼完成之區域之編碼後的亮度值之中，依預定的手續而選擇代用的訊號值(例如，在候補的畫素之中，選擇最近之位置的訊號值等)。
第9圖係表示N=5時的參考畫素配置之一例的說明圖。
進行上述之濾波處理時，區分Pi n的尺寸(li n×mi n)愈大，則輸入畫像愈容易存在非直線的邊緣等，而容易產生和中間預測畫像的預測方向偏離之情形，故以將中間預測畫像實施平滑化為佳。
再者，預測誤差的量子化值愈大，則解碼畫像所產生 的量子化失真之情形愈大，而自鄰接於區分Pi n的已編碼完成之畫素所產生的中間預測畫像的預測精度變低，故以準備能粗略地顯示區分Pi n的經過平滑化之預測畫像為佳。
再者，即使相同的區分Pi n內的畫素，由於距離鄰接於產生中間預測畫像所使用之區分Pi n的已編碼完成之畫素愈遠的畫素，係愈容易產生中間預測畫像和輸入畫像之間之邊緣等之偏離情形，故以將預測畫像平滑化，從而抑制產生偏離時之劇烈的預測誤差之增加為佳。
再者，產生中間預測畫像時之內部預測，其係根據預測區塊內的預測值成為全部相同之值的平均值預測、以及使用預測方向向量vp之預測的2種不同的方法之中之任意一種方法而進行預測之構成，再者，即使在使用預測方向向量vp之預測時，亦產生將位於整數畫素位置之參考畫素之值直接作為預測值的畫素、以及自至少2畫素以上的參考畫素予以內插而於整數畫素位置所沒有的畫素，且將該畫素值作為預測值的畫素之預測區塊內的配置係因應預測方向向量vp之方向而不同。因此，由於因內部預測模式而預測畫像的性質為不同，且最適合之濾波器亦不同，故以根據內部預測模式的指標值而變更濾波器的強度、或濾波器的參考畫素數量、以及參考畫素配置等為佳。
因此，濾波器選擇處理係以考量下述之4個的參數(1)至(4)從而選擇濾波器之方式予以構成。
(1)區分Pi n的尺寸(li n×mi n)
(2)包含於預測誤差編碼參數之量子化參數
(3)產生中間預測畫像時所使用之已編碼完成畫素(第8圖所示之“預測用的畫素”)群和濾波處理對象畫素的距離
(4)產生中間預測畫像時之內部預測模式之指標值
具體而言，其係區分Pi n的尺寸(li n×mi n)愈大、根據量子化參數而決定之量子化值愈大、濾波處理對象畫素和區分Pi n的左側和上方之已編碼完成畫素群的距離愈遠，則以使用平滑化的強度較強之濾波器、或參考畫素數量較多之濾波器之方式予以構成。濾波處理對象畫素和位於區分Pi n的左側和上方之已編碼完成畫素群的距離之一例係例舉如第11圖。再者，亦可以根據內部預測模式之指標值而切換濾波器的強度、或濾波器的參考畫素數量、以及參考畫素配置等之方式予以構成。
亦即，對於上述的參數的組合之各者，自預先準備的濾波器群之中與適當的濾波器賦予對應關係，藉此而實現因應於上述的參數之濾波器的適當選擇。再者，例如將參數(3)和(4)予以組合時，亦可因應於參數(4)的“內部預測模式”而適當地變更參數(3)的“和已編碼完成之畫素群的距離”之定義。亦即，並非如第11圖之將和已編碼完成之畫素群的距離之定義予以固定化，亦可設為依存於第8圖所示之如來自“參考畫素”的距離之預測方向的距離。藉由如此之處理，即能實現亦考量所謂參數(3)和(4)之複數個參數的關係之適當的濾波處理。
再者，在此等參數的組合之中，亦可與“未進行濾波 處理”賦予對應關係，而準備不實施濾波處理之組合。再者，亦可將最弱的濾波器定義為“未進行濾波處理”作為濾波器的強度之定義。
再者，由於4個的參數(1)至(4)在動畫像解碼裝置側亦為已知的參數，故完全不會產生為了進行上述的濾波處理所必需之應編碼之附加資訊。
並且，就上述之說明而言，雖係預先準備必需數量的濾波器並予以適當選擇，藉此而進行濾波器的切換，惟亦可以因應於上述濾波器選擇參數之值而算出濾波器之方式，將濾波器作為上述濾波器選擇參數的函數而予以定義，藉此而能實現濾波器的切換。
此外，上述之說明雖係表示以考量4個的參數(1)至(4)而選擇濾波器之方式予以構成者，惟亦可為以考量4個的參數(1)至(4)之中之至少1個以上的參數而選擇濾波器之方式予以構成。
於下述，以使用參數(1)和(4)之情形為例，表示對於參數之組合之各者，自預先準備的濾波器群之中與適當的濾波器賦予對應關係，藉此而進行濾波器的適當選擇之濾波處理之構成例。
將上述濾波處理例所使用之濾波器以下述方式予以定義。
濾波指標(filter index)1的濾波器(參考畫素數量N=3)：a0=3/4，a1=1/8，a2=1/8
濾波指標(filter index)2的濾波器(參考畫素數量N=3)： a0=1/2，a1=1/4，a2=1/4
濾波指標(filter index)3的濾波器(參考畫素數量N=3)：a0=1/4，a1=3/8，a2=3/8
濾波指標(filter index)4的濾波器(參考畫素數量N=5)：a0=1/4，a1=3/16，a2=3/16，a3=3/16，a4=3/16
其中，濾波處理係設為根據將偏移係數aN設為不存在者(aN=0)之情形時的式(1)，本次所使用之濾波器的種類設為3種類，濾波器的參考畫素配置則如第12圖所示。
接著，第13圖係表示以按每個區分Pi n的尺寸之各內部預測模式而使用之濾波器的表格之一例的說明圖。其中，所取得之Pi n的尺寸係設為4×4畫素、8×8畫素、16×16畫素、32×32畫素、64×64畫素，內部預測模式之指標值和內部預測方向之對應則如同第7圖。
此外，濾波指標值0係表示不進行濾波處理。一般而言，使用方向性預測或平均值預測時，由於具有如下述之傾向，故如第13圖所示之表格，考量內部預測之畫像的特性，按每個參數(1)及參數(4)的組合，藉由表格與使用何種濾波器賦予對應關係，藉此而能實現由表格參考而來之適當的濾波器切換。
．由於通常建物等之人工物多數存在之水平/垂直方向的邊緣大多以線形而清楚呈現，故大多根據水平/垂直方向預測而進行高精度的預測。因此，水平/垂直方向預測時，以不進行平滑化處理為佳。
．由於通常畫像訊號係在空間方向上連續性高之訊號，故 在使用有損和鄰接於區分Pi n的已編碼完成畫素之連續性的平均值預測時，以對區分Pi n的左側和上方之區塊境界部周邊的畫素進行平滑化處理而提高連續性為佳。
．由於具有傾斜方向的方向性之區域，係在其面積愈大時，則邊緣等會失真且具有非線形的形狀之情形愈多，故使用傾斜方向預測時，以若區分尺寸愈大，則使用平滑化強度愈強，參考畫素數量愈多之濾波器為佳。
．一般而言，當區分尺寸過於大時，則區分內的訊號值之空間性變化變得多樣化，且就方向性預測或平均值預測而言僅能進行極粗略之預測，而增加難以高精度的預測之區域。就如此之區域而言，係進行平滑化處理而僅將畫像弄模糊亦無法期望預測效率的改善功效，故如此之區分尺寸以不實施濾波處理之方式進行係不會增加不需要的演算量因而較佳(例如，第13圖中，32×32畫素以上的區分尺寸係以不進行濾波處理之方式進行設定)。
再者，在濾波處理時的參考畫素為屬於區分Pi n內的畫素時係將中間預測畫像的亮度值當作參考畫素的亮度值而使用之情形時，則有能將濾波處理予以簡化之情形。例如，內部預測模式為平均值預測時，則相對於區分Pi n的濾波處理可按每個第14圖所示之區域，將下述之濾波處理予以簡化。
．區域A(區分P i n的左上方之畫素)
濾波指標1的濾波器(未變更)：a0=3/4，a1=1/8，a2=1/8(參考畫素數量N=3)
濾波指標2的濾波器(未變更)：a0=1/2，a1=1/4，a2=1/4(參考畫素數量N=3)
濾波指標3的濾波器(未變更)：a0=1/4，a1=3/8，a2=3/8(參考畫素數量N=3)
濾波指標4的濾波器：a0=5/8，a1=3/16，a2=3/16(參考畫素數量N=3)
．區域B(區域A以外之區分P i n的上端之畫素)
濾波指標1的濾波器：a0=7/8，a2=1/8(參考畫素數量N=2)
濾波指標2的濾波器：a0=3/4，a2=1/4(參考畫素數量N=2)
濾波指標3的濾波器：a0=5/8，a2=3/8(參考畫素數量N=2)
濾波指標4的濾波器：a0=13/16，a2=3/16(參考畫素數量N=2)
．區域C(區域A以外之區分P i n的左端之畫素)
濾波指標1的濾波器：a0=7/8，a1=1/8(參考畫素數量N=2)
濾波指標2的濾波器：a0=3/4，a1=1/4(參考畫素數量N=2)
濾波指標3的濾波器：a0=5/8，a1=3/8(參考畫素數量N=2)
濾波指標4的濾波器：a0=13/16，a1=3/16(參考畫素數量N=2)
．區域D(區域A、B、C以外之區分P i n之畫素)
全部的濾波指標的濾波器：未實施濾波處理
如上述，即使將濾波處理予以簡化，而和簡化前之濾波處理結果亦相同。
如此，藉由去除實際處理的冗長部分，即可達成濾波處理的高速化。
就上述之例而言，雖使用第13圖的表格，但，使用另外的表格亦可。例如，重視能抑制處理量更甚於編碼性能的改善功效的大小時，亦可考量使用第19圖的表格以取代第13圖的表格。在該表格之情形時，由於以僅於區分Pi n的尺寸為4×4畫素、8×8畫素、16×16畫素之平均值預測進行濾波處理之方式施行，故進行濾波處理之預測模式係少於使用第13圖的表格之情形，而能抑制伴隨著濾波處理的演算量之增加。此時，由於亦可利用上述之內部預測模式為屬於平均值預測時之濾波處理的簡化，藉此可實現處理負荷極低之濾波處理。
再者，同時亦重視安裝的容易性時，可和上述濾波處理同樣地設為僅在平均值預測時進行濾波處理，且不隨著區分Pi n的尺寸而切換所使用之濾波器，而恆常地使用相同之濾波器(例如，濾波指標值2之濾波器)。此時，雖由於不進行因應區分Pi n的尺寸之處理，而使濾波器之編碼性能的改善功效下降，惟係可抑制安裝時之電路規模(軟體之情形時為程式碼(code)的行數)。本濾波處理係為在4個的參 數(1)至(4)之中，僅考量參數(4)之濾波器。
就濾波處理之安裝形態而言，係即使不以選擇根據表格參考而進行對應之濾波指標之濾波器之方式予以安裝，亦可為直接安裝按每個區分Pi n的尺寸而執行之濾波處理、或直接安裝按每個區分Pi n的各尺寸的畫素位置而執行之濾波處理等，所謂直接安裝濾波器的形態。如此，即使以非參考表格之方式，只要進行濾波處理的結果所取得之預測畫像為等價時，則任何安裝形態皆可。
再者，就前述之例而言，雖說明僅使用一個切換濾波器用的表格之方法，惟亦可作成準備複數的上述表格，並以第15圖至第18圖之中之任意的方式，且以將濾波器選擇表格指標100作為標頭資訊而進行編碼之方式構成，藉此而以預定的單位切換濾波器選擇表格。
例如，如第15圖所示，藉由將濾波器選擇表格指標100加入於程序位階標頭，則相較於僅使用單一的表格，更能進行因應於程序的特性之濾波處理。
再者，與前述所說明之MPEG-4 AVC/H.264之8×8畫素的區塊之內部預測時，對參考畫像實施平滑化處理相同地，即使以作成在內部預測部4當中將產生區分Pi n的中間預測畫像時之參考畫素設成僅將鄰接於區分Pi n的已編碼完成畫素進行平滑化處理的畫素之方式予以構成時，亦能進行相對於和上述之例相同的中間預測畫像之濾波處理。
另一方面，由於相對於產生中間預測畫像時之參考畫素的平滑化處理、以及相對於中間預測畫像之濾波處理的 功效具有重覆的部分，故即使同時使用兩個處理，其相較於進行其中任意一方的處理時，僅能獲得些微的性能改善功效。因此，在重視抑制演算量之情形時，亦可以對於進行對產生中間預測畫像時之相對於參考畫素的平滑化處理之區分Pi n，係不進行相對於中間預測畫像之濾波處理之方式予以構成。例如，相對於中間預測畫像之濾波處理係如第19圖的表格，僅以平均值預測進行濾波處理，而相對於產生中間預測畫像時之參考畫像的平滑化處理，其係考量參考僅以如第20圖之特定的方向性預測進行平滑化處理之表格而進行。其中，在第20圖當中，‘1’係表示進行平滑化處理，‘0’係表示不進行平滑化處理。
內部預測畫像Pi n的產生所使用之內部預測參數，其係為了多重化為位元訊流而輸出於可變長編碼部13。
對於區分Pi n內的色差訊號亦以和亮度訊號相同的手續，根據內部預測參數(內部預測模式)而實施內部預測處理，並將內部預測畫像的產生所使用之內部預測參數輸出於可變長編碼部13。
然而，關於色差訊號的內部預測係可設為和亮度訊號相同的進行上述所說明之濾波處理之構成，而亦可設為不進行之構成。
繼而說明第2圖之動畫像解碼裝置的處理內容。
可變長解碼部51係於輸入第1圖的動畫像編碼裝置所輸出之位元訊流時，實施相對於該位元訊流之可變長解碼處理，並按由1訊框以上的畫像所構成的程序單位或畫像 單位，將訊框尺寸的資訊進行解碼(第4圖之步驟ST21)。
可變長解碼部51係依和第1圖的編碼控制部1相同的手續，決定成為實施內部預測處理(訊框內預測處理)或動向補償預測處理(訊框間預測處理)時的處理單位之編碼區塊的最大尺寸，並決定階層性地分割最大尺寸的編碼區塊時之上限的階層數(步驟ST22)。
例如，在畫像編碼裝置當中，編碼區塊的最大尺寸係因應於輸入畫像的解像度而決定時，係根據先前所解碼之訊框尺寸資訊而決定編碼區塊的最大尺寸。
並且，表示將編碼區塊的最大尺寸和上限的階層數的資訊多重化為位元訊流時，則參考解碼自該位元訊流的資訊。
多重化為位元訊流之最大尺寸的編碼區塊B0的編碼模式m(B0)雖係含有表示最大尺寸的編碼區塊B0的分割狀態之資訊，故可變長解碼部51係將多重化為位元訊流之最大尺寸的編碼區塊B0的編碼模式m(B0)進行解碼，並將經過階層性地分割之各編碼區塊Bn予以具體指定(步驟ST23)。
可變長解碼部51係於將各編碼區塊Bn予以具體指定時，將該編碼區塊Bn的編碼模式m(Bn)進行解碼，並根據屬於該編碼模式m(Bn)的區分Pi n的資訊，將屬於該編碼區塊Bn的區分Pi n予以具體指定。
可變長解碼部51係於將屬於該編碼區塊Bn的區分Pi n予以具體指定時，按每個區分Pi n將壓縮資料、編碼模式、 預測誤差編碼參數、內部預測參數/中間預測參數進行解碼(步驟ST24)。
亦即，分配於編碼區塊Bn的編碼模式m(Bn)為內部編碼模式時，按每個屬於編碼區塊的區分Pi n，將內部預測參數進行解碼。
分配於編碼區塊Bn的編碼模式m(Bn)為中間編碼模式時，按每個屬於編碼區塊的區分Pi n，將中間預測參數進行解碼。
成為預測處理單位之區分復根據包含於預測誤差編碼參數之變換區塊尺寸資訊，而分割成成為變換處理單位之1乃至複數區分，且按每個成為變換處理單位之區分將壓縮資料(變換/量子化後之變換係數)進行解碼。
切換開關52係來自可變長解碼部51之屬於編碼區塊Bn的區分Pi n的編碼模式m(Bn)為內部編碼模式時(步驟ST25)，則將可變長解碼部51所輸出的內部預測參數輸出於內部預測部53。
另一方面，區分Pi n的編碼模式m(Bn)為中間編碼模式時(步驟ST25)，則將可變長解碼部51所輸出的中間預測參數輸出於動向補償預測部54。
內部預測部53係於自切換開關52接收內部預測參數時，和第1圖之內部預測部4同樣地，使用訊框內之已解碼完成的畫像訊號，並根據該內部預測參數，實施相對於該編碼區塊Bn的區分Pi n之訊框內預測處理，藉此而產生內部預測畫像Pi n(步驟ST26)。
然而，內部預測部53係於產生上述的內部預測畫像Pi n之後，以和第1圖之內部預測部4相同的方法，自預先準備的1個以上的濾波器之中，因應於在產生上述內部預測畫像Pi n之時點上為已知的各種參數之狀態而選擇濾波器，並使用該濾波器，實施相對於該內部預測畫像Pi n之濾波處理，且將濾波處理後的內部預測畫像Pi n設為最後的內部預測畫像。
亦即，使用和內部預測部4之濾波器選擇所使用的參數相同的參數，並使用和內部預測部4之濾波器選擇方法相同的方法而進行濾波處理。
例如，內部預測部4係以於不進行濾波處理之情形時，定義為濾波指標0，而於分別將預先準備的4個濾波器與濾波指標值1至4賦予對應關係，且參考第13圖的表格而進行濾波處理之情形時，則內部預測部53亦定義和內部預測部4相同之濾波器和濾波指標，並藉由參考第13圖的表格而進行屬於區分Pi n的尺寸和內部預測參數之內部預測模式的指標值之濾波器選擇，進而能進行濾波處理之方式予以構成。
再者，如上述之例，亦可以準備將按參數的組合單位所使用的濾波器予以定義的表格，並藉由參考該表格而實現濾波器的切換時，以第15圖至第18圖之中之任意的形態將濾波器選擇表格指標100作為標頭資訊而進行解碼，且自和預先準備的畫像編碼裝置相同的表格群之中，選擇已解碼之濾波器選擇表格指標100所示的表格，並參考該 表格而進行濾波器選擇之方式予以構成。
動向補償預測部54係於自切換開關52接收內部預測參數時，使用由動向補償預測訊框記憶體59所儲存之1訊框以上的參考畫像，並根據該中間預測參數，實施相對於編碼區塊Bn的區分Pi n之動向補償預測處理，藉此而產生中間預測畫像Pi n(步驟ST27)。
逆量子化/逆變換部55係使用包含於可變長解碼部51所輸出之預測誤差編碼參數的量子化參數，將可變長解碼部51所輸出之編碼區塊的壓縮資料進行逆量子化，並以包含於該預測誤差編碼參數的變換區塊尺寸單位，實施逆量子化之壓縮資料的逆變換處理(例如，逆DCT(逆離散餘弦變換)、或逆KL變換等之逆變換處理)，藉此而將逆變換處理後之壓縮資料作為解碼預測誤差訊號(表示壓縮前的差分畫像之訊號)而輸出於加算部56(步驟ST28)。
加算部56係於自逆量子化/逆變換部55接收解碼預測誤差訊號時，將該解碼預測誤差訊號，加上表示由內部預測部53或動向補償預測部54所產生之預測畫像的預測訊號，藉此而產生解碼畫像，且將表示該解碼畫像的解碼畫像訊號儲存於內部預測用記憶體57，並將該解碼畫像訊號輸出於迴路濾波部58(步驟ST29)。
步驟ST23至ST29之處理係重覆實施，直至結束相對於階層性地分割之全部的編碼區塊Bn的處理為止(步驟ST30)。
迴路濾波部58係於自加算部56接收解碼畫像訊號 時，則將包含於由該解碼畫像訊號的編碼失真予以補償，並將編碼失真補償後之解碼畫像訊號所示之解碼畫像作為參考畫像而儲存於動向補償預測訊框記憶體59(步驟ST31)。
迴路濾波部58之過濾處理係以加算部56所輸出之解碼畫像訊號的最大編碼區塊或各編碼區塊為單位而進行，亦可於輸出相當於1畫面分之巨集區塊的解碼畫像訊號之後，再一併以1畫面分而進行。
如上述之係明確地，根據本實施形態1，由於係以動畫像編碼裝置的內部預測部4使用訊框內之已編碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，自預先準備的1個以上的濾波器之中，因應於濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器而對預測畫像實施濾波處理之方式予以構成，故能達成減低局部性所產生的預測誤差而提高畫像品質之功效。
再者，根據本實施形態1，由於係以內部預測部4自(1)區分Pi n的尺寸(li n×mi n)、(2)包含於預測誤差編碼參數之量子化參數、(3)產生中間預測畫像時所使用之已編碼完成之畫素群和濾波處理對象畫素的距離、以及(4)產生中間預測畫像時之內部預測模式的指標值之中，考量至少1個以上的參數而選擇濾波器之方式予以構成，故獲得能抑制在進行方向性預測時因其編碼對象畫像的邊緣些微地以非線形的失真，或角度偏離而產生之局部的預測誤差、或因進 行平均值預測時喪失和鄰接的已編碼完成訊號的連續性而產生之區塊的境界部分的預測誤差之功效，而可達成改善預測效率之功效。
根據本實施形態1，由於係以動畫像解碼裝置的內部預測部53使用訊框內已解碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，自預先準備的1個以上的濾波器之中，因應於濾波處理對象區塊的解碼之各種參數的狀態而選擇濾波器，並使用該濾波器，實施相對於預測畫像之濾波處理之方式予以構成，故可達成能減低局部性所產生的預測誤差，且於動畫像解碼裝置側亦能產生和動畫像編碼裝置側所產生的內部預測畫像相同的內部預測畫像之功效。
再者，根據本實施形態1，由於係以內部預測部53自(1)區分Pi n的尺寸(li n×mi n)、(2)包含於預測誤差編碼參數之量子化參數、(3)中間預測畫像的產生時所使用之已編碼完成之畫素群和濾波處理對象畫素的距離、以及(4)產生中間預測畫像時之內部預測模式之指標值之中，考量至少1個以上的參數而選擇濾波器之方式予以構成，故獲得能抑制在進行方向性預測時因其編碼對象畫像的邊緣些微地非線形的失真，或因角度偏離而產生之局部的預測誤差、或因進行平均值預測時喪失和鄰接的已編碼完成訊號的連續性而產生之區塊的境界部分的預測誤差之功效，且可達成於動畫像解碼裝置側亦能產生和動畫像編碼裝置側所產生的內部預測畫像相同的內部預測畫像之功效。
實施形態2.
上述之實施形態1，雖係表示關於內部預測部4使用訊框內之已編碼完成的畫像訊號而實施訊框內預測處理，藉此而產生內部預測畫像時，自預先準備的1個以上的濾波器之中，因應於濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器，實施相對於預測畫像之濾波處理，惟相較於設計編碼對象的區塊和預測畫像之間的平方誤差成為最小的維納濾波器(wiener．filter)，並使用自預先準備的1個以上的濾波器之中所選擇之濾波器，當使用上述維納濾波器其預測誤差的減低程度較高時，則使用上述維納濾波器以取代該選擇之濾波器而實施相對於預測畫像之濾波處理。
於下述，具體說明其處理內容。
就上述之實施形態1而言，係內部預測部4、53自預先準備的1個以上的濾波器之中，因應濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器。然而，考量4個的參數(1)至(4)而選擇濾波器時，雖可自選擇候補之中選擇適當的濾波器，惟當選擇候補以外尚存在著最佳濾波器時，則無法進行“最佳之濾波處理”。
本實施形態2之特徵，在於以畫像為單位而在動畫像編碼裝置側設計最佳之濾波器而實施濾波處理，並將該濾波器的濾波器係數等進行編碼，而在動畫像解碼裝置側將該濾波器係數等進行解碼，藉此而實施使用該濾波器的濾波處理。
動畫像編碼裝置的內部預測部4和上述之實施形態1為同樣地，藉由實施相對於編碼區塊Bn的區分Pi n之訊框內預測處理，藉此而產生內部預測畫像Pi n。
再者，內部預測部4係以和上述之實施形態1相同的方法，自預先準備的1個以上的濾波器之中，因應於濾波處理對象區塊的編碼之各種參數的狀態而選擇濾波器，並使用該濾波器而對內部預測畫像Pi n進行濾波處理。
內部預測部4係於以畫像內之全部的編碼區塊Bn而決定內部預測參數之後，按每個畫像內使用相同之濾波器的區域(具有相同的濾波指標值的區域)，設計該區域內的輸人畫像和內部預測畫像的平方誤差和(對象區域內的平均平方誤差)成為最小的維納濾波器。
維納濾波器係可根據中間預測畫像訊號s'的本身相關行列Rs's'、以及輸入畫像訊號s和中間預測畫像訊號s'的相互相關行列Rss'，自下述之式(4)而求得濾波器係數w。行列Rs's'、Rss'的大小係對應於所求得之濾波器分支點(tap)數量。
內部預測部4係於設計維納濾波器時，將使用該維納濾波器實施濾波處理時之濾波器設計對象區域內的平方誤差和設為D1，將該維納濾波器的資訊(例如，濾波器係數)進行編碼時之編碼量設為R1，將使用以和上述之實施形態1相同的方法所選擇之濾波器而實施濾波處理時之濾波器設計對象區域內的平方誤差和設為D2，並確認下述之式(5) 是否成立。
D1+λ．R1<D2 (5)
其中，λ為常數。
內部預測部4係於式(5)成立時，使用該維納濾波器而實施濾波處理，以取代和上述之實施形態1相同的方法所選擇之濾波器。
另一方面，若式(5)為不成立時，則使用和上述之實施形態1相同的方法所選擇之濾波器而實施濾波處理。
於此，雖係使用平方誤差和D1、D2而進行評估，惟並不自限於此，亦可使用表示誤差的絕對值和等之另外的預測失真之尺度，以取代平方誤差和D1、D2而進行評估。
內部預測部4係於使用維納濾波器而實施濾波處理時，需要該維納濾波器之濾波器係數、或表示將何種指標之濾波器置換為維納濾波器之濾波器更新資訊。
具體而言，將根據使用濾波器選擇參數之濾波處理而可選擇之濾波器的數量設為L，且將0至L-1之指標分配於各濾波器時，必須對各指標，於使用所設計之維納濾波器時為將“1”之值，而使用預先準備之濾波器時，則將“0”之值作為濾波器更新資訊而進行編碼。
可變長編碼部13係將內部預測部4所輸出之濾波器更新資訊進行可變長編碼，並將該濾波器更新資訊的編碼資料多重化為位元訊流。
於此，雖係表示按每個於畫像內使用相同之濾波器的區域，設計該區域內的輸人畫像和預測畫像的平均平方誤 差和成為最小的維納濾波器，惟亦可以並非畫像單位之另外之特定的區域為單位，按每個使用相同之濾波器的區域，設計該區域內的輸人畫像和預測畫像的平均平方誤差和成為最小的維納濾波器之方式構成，亦可限於僅某特定的畫像而進行濾波器設計，且在符合特定的條件時(例如，附加場景切換(scene change)檢測功能，且在檢測出場景切換之畫像時)，而能進行上述的濾波器設計。
動畫像解碼裝置之可變長解碼部51係根據多重化為位元訊流的編碼資料而將濾波器更新資訊進行可變長解碼。
內部預測部53和上述之實施形態1為同樣地，實施相對於編碼區塊Bn的區分Pi n之訊框內預測處理，藉此而產生內部預測畫像Pi n。
內部預測部53係自可變長解碼部51而接收濾波器更新資訊時，參考該濾波器更新資訊，且在確認該指標值的濾波器有無更新。
內部預測部53係於其確認的結果為某個區域的濾波器置換為維納濾波器時，則讀取包含於該濾波器更新資訊之維納濾波器的濾波器係數，並將該維納濾波器予以具體指定，並使用該維納濾波器而實施內部預測畫像Pi n之濾波處理。
另一方面，就未置換為維納濾波器之區域而言，其係以和上述之實施形態1相同的方法選擇濾波器，並使用該濾波器而實施內部預測畫像Pi n之濾波處理。
依據上述係明顯地，根據本實施形態2，由於相較於設計編碼對象的區塊和預測畫像之間的平均平方誤差和成為最小的維納濾波器，並使用自預先準備的1個以上的濾波器之中所選擇之濾波器，以在使用該維納濾波器之預測誤差的減低程度較高時，則使用該維納濾波器以取代所選擇之濾波器而對預測畫像實施濾波處理之方式構成，故可達成較上述之實施形態1更能減低局部性所產生的預測誤差之功效。
再者，本案所請發明係在其發明的範圍內，可自由組合各實施形態、或可變化各實施形態之任意的構成要素、或者可省略各實施形態當中任意的構成要素。
(產業上之利用可能性)
本發明係適合於必須以高效率將動畫像進行編碼之動畫像編碼裝置，再者，亦適合於必須以高效率將已編碼之動畫像進行解碼之動畫像解碼裝置。

Claims (5)

  1. 一種畫像編碼裝置，係包含：內部預測手段，係在與將輸入畫像予以分割之編碼區塊對應之編碼模式為內部編碼模式時，對成為上述編碼區塊的預測處理的單位之區塊實施訊框內預測處理，從而產生預測畫像；上述內部預測手段係在進行平均值預測時，使用被規定為成為上述預測處理的單位之區塊的複數個鄰接畫素的平均值之中間預測值，以及預測對象畫素的鄰接畫素，而對於位於成為上述編碼區塊的預測處理的單位之區塊內的上端及左端之上述預測對象畫素實施濾波處理時，於上述預測對象畫素是位於上述區塊內的左上的畫素以外之左端的畫素時，將有關上述中間預測值之係數設為3/4，並將有關與上述預測對象畫素的左方鄰接之畫素之係數設為1/4。
  2. 一種畫像解碼裝置，係具備：內部預測手段，係在編碼區塊之編碼模式為內部編碼模式時，對成為上述編碼區塊的預測處理的單位之區塊實施訊框內預測處理，從而產生預測畫像；上述內部預測手段係在內部預測參數顯示出平均值預測時，使用被規定為成為上述預測處理的單位之區塊的複數個鄰接畫素的平均值之中間預測值，以及預測對象畫素的鄰接畫素，而對於位於成為上述編碼區塊的 預測處理的單位之區塊內的上端及左端之上述預測對象畫素實施濾波處理時，於上述預測對象畫素是位於上述區塊內的左上的畫素以外之左端的畫素時，將有關上述中間預測值之係數設為3/4，並將有關與上述預測對象畫素的左方鄰接之畫素之係數設為1/4。
  3. 一種畫像編碼方法，係包含：內部預測處理步驟，係在與將輸入畫像予以分割之編碼區塊對應之編碼模式為內部編碼模式時，對成為上述編碼區塊的預測處理的單位之區塊實施訊框內預測處理，從而產生預測畫像；在上述內部預測處理步驟中，係在進行平均值預測時，使用被規定為成為上述預測處理的單位之區塊的複數個鄰接畫素的平均值之中間預測值，以及預測對象畫素的鄰接畫素，而對於位於成為上述編碼區塊的預測處理的單位之區塊內的上端及左端之上述預測對象畫素實施濾波處理時，於上述預測對象畫素是位於上述區塊內的左上的畫素以外之左端的畫素時，將有關上述中間預測值之係數設為3/4，並將有關與上述預測對象畫素的左方鄰接之畫素之係數設為1/4。
  4. 一種畫像解碼方法，係具備：內部預測處理步驟，係在編碼區塊之編碼模式為內部編碼模式時，對成為上述編碼區塊的預測處理的單位 之區塊實施訊框內預測處理，從而產生預測畫像；在上述內部預測處理步驟中，係在內部預測參數顯示出平均值預測時，使用被規定為成為上述預測處理的單位之區塊的複數個鄰接畫素的平均值之中間預測值，以及預測對象畫素的鄰接畫素，而對於位於成為上述編碼區塊的預測處理的單位之區塊內的上端及左端之上述預測對象畫素實施濾波處理時，於上述預測對象畫素是位於上述區塊內的左上的畫素以外之左端的畫素時，將有關上述中間預測值之係數設為3/4，並將有關與上述預測對象畫素的左方鄰接之畫素之係數設為1/4。
  5. 一種記憶媒體，係記憶有依據將輸入畫像分割並予以編碼之編碼區塊而得之位元訊流，其中，前述位元訊流係包括：編碼模式資訊，係用以決定對上述編碼區塊進行中間預測處理還是進行內部預測處理；以及內部預測參數，係在上述編碼模式資訊顯示為內部預測時，顯示內部預測之種類；在上述內部預測參數顯示為平均值預測時，使用被規定為成為上述預測處理的單位之區塊的複數個鄰接畫素的平均值之中間預測值，以及預測對象畫素的鄰接畫素，而對於位於成為上述編碼區塊的預測處理的單位之區塊內的上端及左端之上述預測對象畫素實施濾波處理時， 於上述預測對象畫素是位於上述區塊內的左上的畫素以外之左端的畫素時，上述內部預測參數係顯示要實施上述濾波處理，而上述濾波處理中，有關上述中間預測值之係數為3/4，有關與上述預測對象畫素的左方鄰接之畫素之係數為1/4。
TW107106370A 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體 TWI673687B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011-004038 2011-01-12
JP2011004038 2011-01-12
PCT/JP2012/000061 WO2012096150A1 (ja) 2011-01-12 2012-01-06 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法
??PCT/JP2012/000061 2012-01-06

Publications (2)

Publication Number Publication Date
TW201820269A TW201820269A (zh) 2018-06-01
TWI673687B true TWI673687B (zh) 2019-10-01

Family

ID=46507059

Family Applications (6)

Application Number Title Priority Date Filing Date
TW105105865A TWI579803B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW106106816A TWI620150B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW101101051A TWI529664B (zh) 2011-01-12 2012-01-11 畫像編碼裝置及畫像解碼裝置
TW109135515A TWI792075B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW108131065A TWI711296B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW107106370A TWI673687B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體

Family Applications Before (5)

Application Number Title Priority Date Filing Date
TW105105865A TWI579803B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW106106816A TWI620150B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW101101051A TWI529664B (zh) 2011-01-12 2012-01-11 畫像編碼裝置及畫像解碼裝置
TW109135515A TWI792075B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
TW108131065A TWI711296B (zh) 2011-01-12 2012-01-11 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體

Country Status (13)

Country Link
US (7) US9299133B2 (zh)
EP (1) EP2665274B1 (zh)
JP (8) JP5478740B2 (zh)
KR (6) KR101643121B1 (zh)
CN (5) CN105872566B (zh)
BR (1) BR112013016961B1 (zh)
CA (5) CA3017317C (zh)
HK (5) HK1224112A1 (zh)
MX (1) MX2013008119A (zh)
RU (5) RU2610294C1 (zh)
SG (4) SG10202008690XA (zh)
TW (6) TWI579803B (zh)
WO (1) WO2012096150A1 (zh)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101373814B1 (ko) * 2010-07-31 2014-03-18 엠앤케이홀딩스 주식회사 예측 블록 생성 장치
KR20120012385A (ko) * 2010-07-31 2012-02-09 오수미 인트라 예측 부호화 장치
US9008175B2 (en) 2010-10-01 2015-04-14 Qualcomm Incorporated Intra smoothing filter for video coding
SG10202008690XA (en) * 2011-01-12 2020-10-29 Mitsubishi Electric Corp Moving image encoding device, moving image decoding device, moving image encoding method, and moving image decoding method
WO2012120582A1 (ja) * 2011-03-07 2012-09-13 パナソニック株式会社 動き補償装置、動画像符号化装置、動画像復号装置、動き補償方法、プログラム、及び集積回路
KR20120140181A (ko) * 2011-06-20 2012-12-28 한국전자통신연구원 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
EP3678373A1 (en) * 2011-06-20 2020-07-08 HFI Innovation Inc. Method and apparatus of directional intra prediction
SG10201902274SA (en) 2011-06-24 2019-04-29 Mitsubishi Electric Corp Moving image encoding device, moving image decoding device, moving image encoding method, and moving image decoding method
JP5972687B2 (ja) * 2012-07-02 2016-08-17 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
JP5798539B2 (ja) * 2012-09-24 2015-10-21 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測復号装置及び動画像予測復号方法
JPWO2014049981A1 (ja) * 2012-09-28 2016-08-22 三菱電機株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法
JP6324016B2 (ja) 2012-12-28 2018-05-16 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US9621902B2 (en) * 2013-02-28 2017-04-11 Google Inc. Multi-stream optimization
WO2015115644A1 (ja) * 2014-02-03 2015-08-06 三菱電機株式会社 画像符号化装置、画像復号装置、符号化ストリーム変換装置、画像符号化方法、及び画像復号方法
US9210662B1 (en) * 2014-05-29 2015-12-08 Apple Inc. Adaptive battery life extension
JP5933086B2 (ja) * 2015-08-21 2016-06-08 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測復号装置及び動画像予測復号方法
FR3040578A1 (fr) 2015-08-31 2017-03-03 Orange Procede de codage et de decodage d'images, dispositif de codage et de decodage d'images et programmes d'ordinateur correspondants
US10602141B2 (en) 2015-10-16 2020-03-24 Lg Electronics Inc. Filtering method and apparatus for improving prediction in image coding system
WO2017142327A1 (ko) * 2016-02-16 2017-08-24 삼성전자 주식회사 인트라 예측오차의 감소를 위한 인트라 예측 방법 및 그 장치
KR102684942B1 (ko) * 2016-03-17 2024-07-12 세종대학교산학협력단 인트라 예측 기반의 비디오 신호 처리 방법 및 장치
KR102715635B1 (ko) 2016-03-28 2024-10-11 로즈데일 다이나믹스 엘엘씨 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
JP6088689B2 (ja) * 2016-04-28 2017-03-01 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測復号装置及び動画像予測復号方法
EP3509299B1 (en) 2016-09-05 2024-05-01 Rosedale Dynamics LLC Image encoding/decoding method and device therefor
CN117156143A (zh) 2016-10-10 2023-12-01 三星电子株式会社 对画面轮廓线的编码单元进行编码或解码的方法和装置
CN116320493A (zh) * 2016-11-28 2023-06-23 韩国电子通信研究院 用于滤波的方法和装置
KR102387909B1 (ko) * 2016-11-29 2022-04-18 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
JP6242517B2 (ja) * 2017-02-03 2017-12-06 株式会社Ｎｔｔドコモ 動画像予測復号装置及び動画像予測復号方法
US10728548B2 (en) * 2017-04-04 2020-07-28 Futurewei Technologies, Inc. Processing reference samples used for intra-prediction of a picture block
US10992939B2 (en) 2017-10-23 2021-04-27 Google Llc Directional intra-prediction coding
US10225578B2 (en) 2017-05-09 2019-03-05 Google Llc Intra-prediction edge filtering
KR20200019127A (ko) 2017-06-16 2020-02-21 에자이 알앤드디 매니지먼트 가부시키가이샤 변형 핵산 단량체 화합물 및 올리고핵산 유사체
JP6408681B2 (ja) * 2017-11-07 2018-10-17 株式会社Ｎｔｔドコモ 動画像予測復号方法
EP3738306A1 (en) * 2018-01-11 2020-11-18 Telefonaktiebolaget LM Ericsson (publ) Multiple boundary filtering
KR20190090731A (ko) 2018-01-25 2019-08-02 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 장치
WO2019157717A1 (zh) * 2018-02-14 2019-08-22 北京大学 运动补偿的方法、装置和计算机系统
CN110290384A (zh) * 2018-03-19 2019-09-27 华为技术有限公司 图像滤波方法、装置及视频编解码器
JPWO2019189904A1 (ja) * 2018-03-30 2021-02-12 日本放送協会 イントラ予測装置、画像符号化装置、画像復号装置、及びプログラム
JPWO2019225459A1 (ja) * 2018-05-23 2021-04-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 符号化装置、復号装置、符号化方法及び復号方法
BR112020026048A2 (pt) * 2018-06-21 2021-03-23 Interdigital Vc Holdings, Inc. processamento de modo de refinamento em codificação e decodificação de vídeo
EP3800883A4 (en) 2018-06-25 2021-07-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. INTRAFRAME PREDICTION PROCESS AND DEVICE
US10701376B2 (en) * 2018-07-05 2020-06-30 Awecom, Inc. Resilient image compression and decompression
JP6602931B2 (ja) * 2018-09-20 2019-11-06 株式会社Ｎｔｔドコモ 動画像予測復号方法
WO2020096368A1 (en) 2018-11-09 2020-05-14 Samsung Electronics Co., Ltd. Image resynthesis using forward warping, gap discriminators, and coordinate-based inpainting
RU2726160C1 (ru) * 2019-04-29 2020-07-09 Самсунг Электроникс Ко., Лтд. Повторный синтез изображения, использующий прямое деформирование изображения, дискриминаторы пропусков и основанное на координатах реконструирование
JP7314281B2 (ja) * 2019-01-10 2023-07-25 ホアウェイ・テクノロジーズ・カンパニー・リミテッド イントラ・サブパーティション・コーディング・ツールによって引き起こされるサブパーティション境界のためのデブロッキングフィルタ
US10778972B1 (en) 2019-02-27 2020-09-15 Google Llc Adaptive filter intra prediction modes in image/video compression
WO2021018084A1 (en) * 2019-07-26 2021-02-04 Beijing Bytedance Network Technology Co., Ltd. Interdependence of transform size and coding tree unit size in video coding
MX2022000716A (es) 2019-07-26 2022-02-23 Beijing Bytedance Network Tech Co Ltd Determinación del modo de particionado de imagen con base en el tamaño de bloque.
CN116385414B (zh) * 2023-04-10 2023-11-07 哈尔滨耐是智能科技有限公司 零部件多尺度缺陷特征提取方法、计算设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060227863A1 (en) * 2005-04-11 2006-10-12 Andrew Adams Method and system for spatial prediction in a video encoder
US20060245497A1 (en) * 2005-04-14 2006-11-02 Tourapis Alexis M Device and method for fast block-matching motion estimation in video encoders
US20070098067A1 (en) * 2005-11-02 2007-05-03 Samsung Electronics Co., Ltd. Method and apparatus for video encoding/decoding
WO2010002214A2 (ko) * 2008-07-02 2010-01-07 삼성전자 주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
TW201036452A (en) * 2009-02-19 2010-10-01 Sony Corp Image processing device and method
CN101889449A (zh) * 2007-06-28 2010-11-17 三菱电机株式会社 图像编码装置以及图像解码装置
TW201043043A (en) * 2009-04-24 2010-12-01 Sony Corp Image processing apparatus and method

Family Cites Families (99)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08237669A (ja) * 1995-02-28 1996-09-13 Sony Corp 画像信号処理装置、画像信号処理方法および画像信号復号化装置
JP3392307B2 (ja) * 1995-11-02 2003-03-31 松下電器産業株式会社 画像信号平滑化装置および画像信号平滑化方法
US6041145A (en) 1995-11-02 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device and method for smoothing picture signal, device and method for encoding picture and device and method for decoding picture
JPH10224790A (ja) * 1997-02-07 1998-08-21 Matsushita Electric Ind Co Ltd 圧縮伸張された画像中のブロック状ノイズを除去するフィルタおよびフィルタ方法
US6188799B1 (en) 1997-02-07 2001-02-13 Matsushita Electric Industrial Co., Ltd. Method and apparatus for removing noise in still and moving pictures
JP3095140B2 (ja) * 1997-03-10 2000-10-03 三星電子株式会社 ブロック化効果の低減のための一次元信号適応フィルター及びフィルタリング方法
US6181382B1 (en) * 1998-04-03 2001-01-30 Miranda Technologies Inc. HDTV up converter
US6122321A (en) * 1998-05-12 2000-09-19 Hitachi America, Ltd. Methods and apparatus for reducing the complexity of inverse quantization operations
US6584154B1 (en) 1998-11-26 2003-06-24 Oki Electric Industry Co., Ltd. Moving-picture coding and decoding method and apparatus with reduced computational cost
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
US7289672B2 (en) * 2002-05-28 2007-10-30 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode estimation
US7386048B2 (en) * 2002-05-28 2008-06-10 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode organization
US20060256867A1 (en) * 2002-09-06 2006-11-16 Turaga Deepak S Content-adaptive multiple description motion compensation for improved efficiency and error resilience
AU2003279015A1 (en) * 2002-09-27 2004-04-19 Videosoft, Inc. Real-time video coding/decoding
CN1232126C (zh) * 2002-09-30 2005-12-14 三星电子株式会社 图像编码方法和装置以及图像解码方法和装置
US7010044B2 (en) * 2003-07-18 2006-03-07 Lsi Logic Corporation Intra 4×4 modes 3, 7 and 8 availability determination intra estimation and compensation
US7426308B2 (en) * 2003-07-18 2008-09-16 Microsoft Corporation Intraframe and interframe interlace coding and decoding
WO2005022919A1 (en) * 2003-08-26 2005-03-10 Thomson Licensing S.A. Method and apparatus for decoding hybrid intra-inter coded blocks
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7369707B2 (en) * 2003-10-28 2008-05-06 Matsushita Electric Industrial Co., Ltd. Intra-picture prediction coding method
EP1551184A3 (en) 2003-12-27 2006-06-28 Samsung Electronics Co., Ltd. Residue image downsampling and encoding method
CN100536573C (zh) * 2004-01-16 2009-09-02 北京工业大学 基于方向的dc预测方法及用于视频编码的帧内预测方法
JP2006032999A (ja) 2004-07-12 2006-02-02 Sharp Corp 画像復号装置及び画像復号方法
US8085846B2 (en) * 2004-08-24 2011-12-27 Thomson Licensing Method and apparatus for decoding hybrid intra-inter coded blocks
JP4495580B2 (ja) * 2004-12-13 2010-07-07 パナソニック株式会社 面内予測装置および面内予測方法
CN1819657A (zh) * 2005-02-07 2006-08-16 松下电器产业株式会社 图像编码装置和图像编码方法
JP2006246431A (ja) * 2005-02-07 2006-09-14 Matsushita Electric Ind Co Ltd 画像符号化装置および画像符号化方法
US8885707B2 (en) * 2005-04-01 2014-11-11 Panasonic Corporation Image decoding apparatus and image decoding method
KR100703200B1 (ko) * 2005-06-29 2007-04-06 한국산업기술대학교산학협력단 인트라 부호화 장치 및 방법
JP2007043651A (ja) * 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
US20090123066A1 (en) * 2005-07-22 2009-05-14 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein,
JP4650173B2 (ja) * 2005-09-05 2011-03-16 ソニー株式会社 符号化装置、符号化方法、符号化方法のプログラム及び符号化方法のプログラムを記録した記録媒体
KR100727972B1 (ko) * 2005-09-06 2007-06-14 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
KR100750128B1 (ko) * 2005-09-06 2007-08-21 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
CA2631336A1 (en) * 2005-11-30 2007-06-07 Kabushiki Kaisha Toshiba Image encoding/image decoding method, image encoding/image decoding apparatus
JP4530288B2 (ja) * 2006-02-15 2010-08-25 Ｋｄｄｉ株式会社 画像処理装置およびプリフィルタ制御装置
KR101246294B1 (ko) * 2006-03-03 2013-03-21 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
CN101496406B (zh) * 2006-03-23 2012-02-01 三星电子株式会社 图像编码/解码方法和设备
JP4417919B2 (ja) * 2006-03-31 2010-02-17 株式会社東芝 画像符号化装置及び画像復号化装置
KR100745765B1 (ko) * 2006-04-13 2007-08-02 삼성전자주식회사 화상 데이터의 공간상 예측 장치 및 방법과 그를 이용한부호화 장치 및 방법, 화상 데이터의 공간상 예측 보상장치 및 방법과 그를 이용한 복호화 장치 및 방법
BRPI0621935A2 (pt) * 2006-07-28 2016-09-13 Toshiba Kk Toshiba Corp método e aparelho para codificar e decodificar imagem
JP4789200B2 (ja) * 2006-08-07 2011-10-12 ルネサスエレクトロニクス株式会社 動画符号化と動画復号とのいずれかを実行する機能モジュールおよびそれを含む半導体集積回路
WO2008084817A1 (ja) * 2007-01-09 2008-07-17 Kabushiki Kaisha Toshiba 画像符号化と復号化の方法及び装置
JP5026092B2 (ja) * 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
KR101369746B1 (ko) * 2007-01-22 2014-03-07 삼성전자주식회사 적응적 보간 필터를 이용한 영상 부호화, 복호화 방법 및장치
KR101403338B1 (ko) * 2007-03-23 2014-06-09 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
JP4707118B2 (ja) * 2007-03-28 2011-06-22 株式会社Ｋｄｄｉ研究所 動画像符号化装置および動画像復号装置のイントラ予測方式
WO2008120577A1 (ja) * 2007-03-29 2008-10-09 Kabushiki Kaisha Toshiba 画像符号化及び復号化の方法及び装置
JP4799477B2 (ja) * 2007-05-08 2011-10-26 キヤノン株式会社 画像符号化装置及び画像符号化方法
JP4650461B2 (ja) * 2007-07-13 2011-03-16 ソニー株式会社 符号化装置、符号化方法、プログラム、及び記録媒体
RU2479940C2 (ru) * 2007-10-15 2013-04-20 Ниппон Телеграф Энд Телефон Корпорейшн Устройство кодирования и декодирования изображения, способы кодирования и декодирования изображения, их программы и носитель записи, записанный программами
KR101375664B1 (ko) * 2007-10-29 2014-03-20 삼성전자주식회사 영상의 디퓨전 특성을 이용한 영상 부호화/복호화 방법 및장치
CN101163249B (zh) * 2007-11-20 2010-07-21 北京工业大学 直流模式预测方法
US8576906B2 (en) * 2008-01-08 2013-11-05 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filtering
JP5035029B2 (ja) 2008-03-03 2012-09-26 ソニー株式会社 信号処理装置および方法、並びにプログラム
KR101591825B1 (ko) * 2008-03-27 2016-02-18 엘지전자 주식회사 비디오 신호의 인코딩 또는 디코딩 방법 및 장치
WO2009126299A1 (en) * 2008-04-11 2009-10-15 Thomson Licensing Deblocking filtering for displaced intra prediction and template matching
WO2009131688A2 (en) * 2008-04-25 2009-10-29 Thomson Licensing Inter-view skip modes with depth
WO2009131703A2 (en) * 2008-04-25 2009-10-29 Thomson Licensing Coding of depth signal
JP2009302776A (ja) * 2008-06-11 2009-12-24 Canon Inc 画像符号化装置、その制御方法、及びコンピュータプログラム
KR101028387B1 (ko) 2008-07-01 2011-04-13 이정호 노반용 블럭 및 이를 이용한 도로포장공법
KR101432775B1 (ko) * 2008-09-08 2014-08-22 에스케이텔레콤 주식회사 서브블록 내 임의 화소를 이용한 영상 부호화/복호화 방법 및 장치
JP5240530B2 (ja) * 2008-10-02 2013-07-17 ソニー株式会社 画像処理装置および方法
CN101437239A (zh) * 2008-12-11 2009-05-20 吉林大学 基于线性预测滤波的实时传感器信号网络传输方法
JP2010141632A (ja) * 2008-12-12 2010-06-24 Hitachi Ltd 映像再生装置、映像システム及び映像の再生速度変換方法
KR20110117075A (ko) * 2009-01-29 2011-10-26 엘지전자 주식회사 경계 인트라 코딩을 이용한 비디오 신호 처리 방법 및 장치
CN101820546A (zh) * 2009-02-27 2010-09-01 源见科技（苏州）有限公司 帧内预测方法
TW201041405A (en) 2009-03-06 2010-11-16 Sony Corp Image processing device and method
JP4833309B2 (ja) * 2009-03-06 2011-12-07 株式会社東芝 動画像圧縮符号化装置
CN101505425B (zh) * 2009-03-11 2011-11-23 北京中星微电子有限公司 一种宏块滤波方法及装置
JP5158003B2 (ja) * 2009-04-14 2013-03-06 ソニー株式会社 画像符号化装置と画像符号化方法およびコンピュータ・プログラム
WO2010131903A2 (en) * 2009-05-12 2010-11-18 Lg Electronics Inc. Method and apparatus for processing a video signal
KR20100132429A (ko) * 2009-06-09 2010-12-17 삼성전자주식회사 대용량의 영상을 효율적으로 전송하는 영상 부호화 장치 및 영상 복호화 장치
EP2262267A1 (en) 2009-06-10 2010-12-15 Panasonic Corporation Filter coefficient coding scheme for video coding
US20110002386A1 (en) * 2009-07-06 2011-01-06 Mediatek Singapore Pte. Ltd. Video encoder and method for performing intra-prediction and video data compression
US9516341B2 (en) * 2010-01-19 2016-12-06 Thomson Licensing Methods and apparatus for reduced complexity template matching prediction for video encoding and decoding
US9736486B2 (en) * 2010-02-08 2017-08-15 Nokia Technologies Oy Apparatus, a method and a computer program for video coding
US8879632B2 (en) * 2010-02-18 2014-11-04 Qualcomm Incorporated Fixed point implementation for geometric motion partitioning
KR101432771B1 (ko) * 2010-03-05 2014-08-26 에스케이텔레콤 주식회사 영상 부호화 장치, 그 영상 부호화 방법, 영상 복호화 장치 및 그 영상 복호화 방법
SG184528A1 (en) * 2010-04-09 2012-11-29 Mitsubishi Electric Corp Moving image encoding device and moving image decoding device
KR20110113561A (ko) * 2010-04-09 2011-10-17 한국전자통신연구원 적응적인 필터를 이용한 인트라 예측 부호화/복호화 방법 및 그 장치
EP2559239A2 (en) * 2010-04-13 2013-02-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for intra predicting a block, apparatus for reconstructing a block of a picture, apparatus for reconstructing a block of a picture by intra prediction
US8837592B2 (en) * 2010-04-14 2014-09-16 Mediatek Inc. Method for performing local motion vector derivation during video coding of a coding unit, and associated apparatus
WO2011132400A1 (ja) * 2010-04-22 2011-10-27 パナソニック株式会社 画像符号化方法及び画像復号化方法
WO2011136896A1 (en) * 2010-04-27 2011-11-03 Sony Corporation Boundary adaptive intra prediction for improving subjective video quality
KR101690253B1 (ko) * 2010-05-06 2016-12-27 삼성전자주식회사 영상 처리 장치 및 그 방법
CN106067973B (zh) * 2010-05-19 2019-06-18 Sk电信有限公司 视频解码设备
EP2595386A4 (en) * 2010-07-15 2015-02-18 Mitsubishi Electric Corp VIDEO ENCODING DEVICE, VIDEO DECODING DEVICE, VIDEO ENCODING METHOD, AND VIDEO DECODING METHOD
US20120014445A1 (en) * 2010-07-16 2012-01-19 Sharp Laboratories Of America, Inc. System for low resolution power reduction using low resolution data
US8538177B2 (en) * 2010-07-30 2013-09-17 Microsoft Corporation Line and pixel based methods for intra frame coding
JP2012034213A (ja) * 2010-07-30 2012-02-16 Toshiba Corp 画像処理装置、画像処理システムおよび画像処理方法
US8503528B2 (en) * 2010-09-15 2013-08-06 Google Inc. System and method for encoding video using temporal filter
CN105516723B (zh) 2010-09-30 2018-07-27 三菱电机株式会社 运动图像编码装置及方法、运动图像解码装置及方法
US8654860B2 (en) * 2010-11-01 2014-02-18 Mediatek Inc. Apparatus and method for high efficiency video coding using flexible slice structure
KR101772046B1 (ko) * 2010-11-04 2017-08-29 에스케이텔레콤 주식회사 예측모드에 따라 필터링된 화소값으로 인트라예측을 수행하는 영상 부호화/복호화 방법 및 장치
PL4124034T3 (pl) * 2010-12-22 2024-01-03 Lg Electronics Inc. Predykcja wewnątrzramkowa w kodowaniu wideo
SG10202008690XA (en) * 2011-01-12 2020-10-29 Mitsubishi Electric Corp Moving image encoding device, moving image decoding device, moving image encoding method, and moving image decoding method
KR20120140181A (ko) * 2011-06-20 2012-12-28 한국전자통신연구원 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
CN107801024B (zh) * 2017-11-09 2019-07-12 北京大学深圳研究生院 一种用于帧内预测的边界滤波方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060227863A1 (en) * 2005-04-11 2006-10-12 Andrew Adams Method and system for spatial prediction in a video encoder
US20060245497A1 (en) * 2005-04-14 2006-11-02 Tourapis Alexis M Device and method for fast block-matching motion estimation in video encoders
US20070098067A1 (en) * 2005-11-02 2007-05-03 Samsung Electronics Co., Ltd. Method and apparatus for video encoding/decoding
CN101889449A (zh) * 2007-06-28 2010-11-17 三菱电机株式会社 图像编码装置以及图像解码装置
WO2010002214A2 (ko) * 2008-07-02 2010-01-07 삼성전자 주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
TW201036452A (en) * 2009-02-19 2010-10-01 Sony Corp Image processing device and method
TW201043043A (en) * 2009-04-24 2010-12-01 Sony Corp Image processing apparatus and method

Also Published As

Publication number Publication date
CA3000998C (en) 2018-10-30
TW202106007A (zh) 2021-02-01
RU2013137436A (ru) 2015-02-20
KR20130124539A (ko) 2013-11-14
US9299133B2 (en) 2016-03-29
US20160309147A1 (en) 2016-10-20
CN105915926B (zh) 2019-05-21
SG10201810141WA (en) 2018-12-28
US20160156929A1 (en) 2016-06-02
CN103299637A (zh) 2013-09-11
US10205944B2 (en) 2019-02-12
KR20160087925A (ko) 2016-07-22
JP2017118572A (ja) 2017-06-29
HK1224114A1 (zh) 2017-08-11
MX2013008119A (es) 2013-08-12
HK1224113A1 (zh) 2017-08-11
JP5478740B2 (ja) 2014-04-23
CA2961824A1 (en) 2012-07-19
KR101678351B1 (ko) 2016-11-21
JP6091584B2 (ja) 2017-03-08
TW201820269A (zh) 2018-06-01
US20160156931A1 (en) 2016-06-02
US20160112706A1 (en) 2016-04-21
CN105872566A (zh) 2016-08-17
US9736478B2 (en) 2017-08-15
HK1186323A1 (zh) 2014-03-07
RU2610294C1 (ru) 2017-02-08
CN103299637B (zh) 2016-06-29
KR20140074397A (ko) 2014-06-17
TW201946456A (zh) 2019-12-01
JP2014132766A (ja) 2014-07-17
JP2015084573A (ja) 2015-04-30
JP2017077036A (ja) 2017-04-20
KR101547041B1 (ko) 2015-08-24
CA2823503C (en) 2019-03-19
BR112013016961B1 (pt) 2022-05-31
KR101604959B1 (ko) 2016-03-18
EP2665274A4 (en) 2017-04-12
US20130287312A1 (en) 2013-10-31
HK1225541A1 (zh) 2017-09-08
HK1224112A1 (zh) 2017-08-11
BR112013016961A2 (pt) 2020-06-30
JP2016042732A (ja) 2016-03-31
SG191845A1 (en) 2013-08-30
US9609326B2 (en) 2017-03-28
JP6091583B2 (ja) 2017-03-08
KR20160038082A (ko) 2016-04-06
RU2648578C1 (ru) 2018-03-26
CA2823503A1 (en) 2012-07-19
TW201624420A (zh) 2016-07-01
WO2012096150A1 (ja) 2012-07-19
KR101643121B1 (ko) 2016-07-26
TW201724023A (zh) 2017-07-01
CA2979455C (en) 2018-09-04
SG10201403553XA (en) 2014-08-28
TW201243773A (en) 2012-11-01
CN105959706B (zh) 2021-01-08
TWI620150B (zh) 2018-04-01
SG10202008690XA (en) 2020-10-29
JP5674972B2 (ja) 2015-02-25
US10931946B2 (en) 2021-02-23
US20160156930A1 (en) 2016-06-02
CN105872565B (zh) 2019-03-08
US9414073B2 (en) 2016-08-09
CN105959706A (zh) 2016-09-21
EP2665274A1 (en) 2013-11-20
JPWO2012096150A1 (ja) 2014-06-09
CA3000998A1 (en) 2012-07-19
CN105915926A (zh) 2016-08-31
RU2654153C1 (ru) 2018-05-16
KR101609490B1 (ko) 2016-04-05
JP2016042731A (ja) 2016-03-31
US9628797B2 (en) 2017-04-18
KR101643528B1 (ko) 2016-07-27
TWI529664B (zh) 2016-04-11
EP2665274B1 (en) 2024-10-16
CA2979455A1 (en) 2012-07-19
KR20160038081A (ko) 2016-04-06
TWI792075B (zh) 2023-02-11
CN105872566B (zh) 2019-03-01
CA3017317A1 (en) 2012-07-19
RU2648575C1 (ru) 2018-03-26
RU2565038C2 (ru) 2015-10-10
CA3017317C (en) 2019-11-05
KR20150029001A (ko) 2015-03-17
JP5840285B2 (ja) 2016-01-06
US20190124328A1 (en) 2019-04-25
TWI579803B (zh) 2017-04-21
CA2961824C (en) 2019-07-23
JP2017118571A (ja) 2017-06-29
CN105872565A (zh) 2016-08-17
TWI711296B (zh) 2020-11-21

Similar Documents

Publication Publication Date Title
TWI673687B (zh) 畫像編碼裝置、畫像解碼裝置、畫像編碼方法、畫像解碼方法及記憶媒體
JP6851429B2 (ja) 画像復号装置、画像復号方法、画像符号化装置及び画像符号化方法
TWI533676B (zh) 動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法、動畫像解碼方法及記憶媒體
TWI643494B (zh) 畫像解碼裝置、畫像解碼方法、畫像編碼裝置、畫像編碼方法以及編碼資料的資料構造
TWI665908B (zh) 畫像解碼裝置、畫像解碼方法、畫像編碼裝置、畫像編碼方法、電腦可讀取記錄媒體