TWI535222B - Image processing apparatus and method - Google Patents

Image processing apparatus and method Download PDF

Info

Publication number
TWI535222B
TWI535222B TW102119937A TW102119937A TWI535222B TW I535222 B TWI535222 B TW I535222B TW 102119937 A TW102119937 A TW 102119937A TW 102119937 A TW102119937 A TW 102119937A TW I535222 B TWI535222 B TW I535222B
Authority
TW
Taiwan
Prior art keywords
unit
processing
image
video
quantization
Prior art date
Application number
TW102119937A
Other languages
English (en)
Other versions
TW201404169A (zh
Inventor
Kazushi Sato
Yoshitaka Morigami
Shuo Lu
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201404169A publication Critical patent/TW201404169A/zh
Application granted granted Critical
Publication of TWI535222B publication Critical patent/TWI535222B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

影像處理裝置及方法
本揭露係有關於影像處理裝置及方法，尤其是有關於可抑制影像劣化的影像處理裝置及方法。
近年來，將影像資訊以數位方式加以處理，此時，為了高效率的資訊傳輸、積存之目的，利用影像資訊特有的冗長性，採用藉由離散餘弦轉換等之正交轉換和運動補償而進行壓縮的編碼方式，來將影像予以壓縮編碼的裝置，正逐漸普及。該編碼方式中係例如有MPEG(Moving Picture Experts Group)等。
尤其是，MPEG2(ISO/IEC 13818-2)，係被定義來作為通用影像編碼方式，係為網羅了跳躍掃描影像及依序掃描影像之雙方、以及標準解析度影像及高精細影像的標準。例如，MPEG2係目前正被廣泛使用於專業用途及商業用途之廣泛應用。藉由使用MPEG2壓縮方式，例如，若為具有720×480像素的標準解析度之跳躍掃描影像，則指派了4至8Mbps的編碼量(位元速率)。又，藉由使用MPEG2壓縮方式，例如，若為具有1920×1088像素 的高解析度之跳躍掃描影像，則指派了18至22Mbps的編碼量(位元速率)。藉此，可實現高壓縮率和良好的畫質。
雖然MPEG2係主要是以適合播送用之高畫質編碼為對象，但並不支援比MPEG1還低之編碼量(位元速率)、亦即高壓縮率的編碼方式。隨著攜帶型終端的普及，今後此類編碼方式的需求會逐漸增加，對應於此而進行了MPEG4編碼方式的標準化。關於影像編碼方式，在1998年12月成為ISO/IEC 14496-2而其規格已被承認為國際標準。
再者，近年來，當初作為電視會議用的影像編碼為目的，而有所謂的H.26L(ITU-T(International Telecommunication Union Telecommunication Standardization Sector)Q6/16 VCEG(Video Coding Expert Group))標準，正朝規格化邁進。H.26L係相較於MPEG2或MPEG4這些先前的編碼方式，其編碼、解碼上要求較多的演算量，但可實現更高的編碼效率，係為人所知。又，目前作為MPEG4的活動之一環，以此H.26L為基礎，還加進了H.26L中未支援的機能，以實現更高編碼效率的標準化，係以Joint Model of Enhanced-Compression Video Coding的名義而被進行。
作為標準化的時程，在2003年3月係有H.264及MPEG-4 Part10(Advanced Video Coding，以下記作AVC)的名下，成為國際標準。
然後，作為該H.264/AVC的擴充，包含有RGB或4：2：2、4：4：4這類，業務用所必須之編碼工具、或MPEG-2所規定之8x8DCT或量化矩陣的FRExt(Fidelity Range Extension)之標準化，已經在2005年2月完成。藉此，成為了使用H.264/AVC而連電影中所包含之底片雜訊都能良好呈現的編碼方式，逐漸被使用於Blu-Ray Disc(商標)等廣泛之應用。
然而，最近，欲壓縮高解析度電視(Hi-Vision)影像的4倍也就是4000×2000像素左右的影像，或者，欲在網際網路這類受限的傳輸容量之環境下配送高解析度電視影像，對更高壓縮率編碼的需求日益增高。因此，在前述的ITU-T旗下的VCEG中，持續進行有關改善編碼效率之檢討。
於是，目前為了比AVC更加提升編碼效率，由ITU-T、和ISO/IEC之共同標準化團體亦即JCTVC(Joint Collaboration Team-Video Coding)，正在進行一種稱作HEVC(High Efficiency Video Coding)的編碼方式的標準化(例如參照非專利文獻1)。
順便一提，非專利文獻1中所記載之HEVC規格中，係採用“Intra Transform Skipping”此一手法(例如參照非專利文獻2)。
亦即，首先，在SPS(Sequence Parameter Set：序列參數集)中，將關於是否能把Transform Skip(轉形略過；亦稱作正交轉換略過)對該當序列做適用的旗標 (flag)，加以傳輸。
其值為1時，表示可將TransformSkip，適用於4x4亮度及色差正交轉換區塊。
會針對該每一區塊，傳輸有關TransformSkip之開/關(on/off)的旗標(flag)。
針對被適用TransformSkip的區塊，熵編碼、量化、迴圈濾波器等之處理係沒有變更。
[先前技術文獻] [非專利文獻]
[非專利文獻1]Benjamin Bross, Woo-Jin Han, Jens-Rainer Ohm, Gary J. Sullivan, Thomas Wiegand, “Working Draft 4 of High-Efficiency Video Coding”, JCTVC-F803_d2, Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 6th Meeting: Torino, IT, 14-22 July, 2011
[非專利文獻2]Cuiling Lan, Jizheng Xu, Gary J. Sullivan, Feng Wu, “Intra transform skipping”, JCTVC-I0408, Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 119th Meeting: Geneva, CH, 27 April-7 May 2012
然而，TransformSkip所被適用之區塊的係數係為有關空間領域之值，若非如此時區塊的係數係為有關頻率帶域之值，兩者的特性係互異。
因此，不考慮此種特性的差異，對於TransformSkip所被適用之區塊和非如此之區塊雙方都同樣地進行編碼處理，有可能導致編碼效率降低。
本揭露係有鑑於此種狀況而研發，目的在於能夠抑制編碼．解碼處理所造成的畫質之降低。
本揭露之一側面，係為一種影像處理裝置，其係具備：解碼部，係將編碼資料予以解碼，生成已被量化之係數；和逆量化部，使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將前記解碼部所生成之前記正交轉換略過區塊的已被量化之係數，進行逆量化。
前記逆量化部，係可將空間領域之值，當作前記權重係數來使用。
前記逆量化部，係可使用1個前記權重係數。
前記逆量化部，係可將有進行過正交轉換處理的非正交轉換略過區塊的已被量化之係數進行逆量化之際所使用的量化矩陣之直流成分，當作前記1個權重係數來使用。
前記逆量化部，係可使用將前記量化矩陣之直流成分進行了矩陣化而成的權重係數矩陣，以將前記正交轉換略過區塊的已被量化之係數，進行逆量化。
前記逆量化部，係可將區塊尺寸是4×4的正交轉換略過區塊的已被量化之係數，使用前記權重係數來進行逆量化。
前記逆量化部，係可將有進行過正交轉換處理的非正交轉換略過區塊的已被量化之係數，使用與前記權重係數進行了矩陣化而成之權重係數矩陣不同的量化矩陣，來進行逆量化。
還具備：收取部，係可將作為圖像參數集而被傳輸的、表示是否許可前記正交轉換處理之略過的略過許可資訊，予以收取。
前記收取部係可還將所被傳輸之前記權重係數予以收取；前記逆量化部，係可使用前記收取部所收取到的前記權重係數，來將前記正交轉換略過區塊的已被量化之係數，進行逆量化。
本揭露之一側面，係亦為一種影像處理方法，其係將編碼資料予以解碼，生成已被量化之係數；使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將已被生成之前記正交轉換略過區塊的已被量化之係數，進行逆量化。
於本揭露之一側面中，編碼資料會被解碼，生成已被量化之係數，使用對正交轉換處理已被略過的正 交轉換略過區塊所適用的權重係數，將所生成之正交轉換略過區塊的已被量化之係數，進行逆量化。
此外，上述的影像處理裝置，係可為獨立的裝置，也可為構成1台影像編碼裝置或影像解碼裝置的內部區塊。
若依據本揭露，則可將影像進行編碼．解碼。尤其是，可抑制編碼．解碼所致之畫質的降低。
100‧‧‧影像編碼裝置
101‧‧‧A/D轉換部
102‧‧‧畫面排序緩衝區
103‧‧‧演算部
104‧‧‧正交轉換部
105‧‧‧量化部
106‧‧‧可逆編碼部
107‧‧‧積存緩衝區
108‧‧‧逆量化部
109‧‧‧逆正交轉換部
110‧‧‧演算部
111‧‧‧去區塊濾波器
112‧‧‧畫格記憶體
113‧‧‧選擇部
114‧‧‧畫面內預測部
115‧‧‧運動預測．補償部
116‧‧‧預測影像選擇部
117‧‧‧速率控制部
121‧‧‧正交轉換略過部
131‧‧‧略過編碼部
132‧‧‧略過決定部
141‧‧‧量化矩陣設定部
142‧‧‧權重係數生成部
143‧‧‧量化處理部
151‧‧‧交界判定部
152‧‧‧強度調整部
153‧‧‧濾波部
200‧‧‧影像解碼裝置
201‧‧‧積存緩衝區
202‧‧‧可逆解碼部
203‧‧‧逆量化部
204‧‧‧逆正交轉換部
205‧‧‧演算部
206‧‧‧去區塊濾波器
207‧‧‧畫面排序緩衝區
208‧‧‧D/A轉換部
209‧‧‧畫格記憶體
210‧‧‧選擇部
211‧‧‧畫面內預測部
212‧‧‧運動預測．補償部
213‧‧‧選擇部
221‧‧‧逆正交轉換略過部
231‧‧‧TransformSkipFlag緩衝區
232‧‧‧控制訊號產生部
241‧‧‧量化矩陣緩衝區
242‧‧‧權重係數生成部
243‧‧‧量化參數緩衝區
244‧‧‧逆量化部
251‧‧‧交界判定部
252‧‧‧強度調整部
253‧‧‧濾波部
600‧‧‧多視點影像編碼裝置
601‧‧‧編碼部
602‧‧‧編碼部
603‧‧‧多工化部
610‧‧‧多視點影像解碼裝置
611‧‧‧逆多工部
612‧‧‧解碼部
613‧‧‧解碼部
620‧‧‧階層影像編碼裝置
621‧‧‧編碼部
622‧‧‧編碼部
623‧‧‧多工化部
630‧‧‧階層影像解碼裝置
631‧‧‧逆多工部
632‧‧‧解碼部
633‧‧‧解碼部
800‧‧‧電腦
801‧‧‧CPU
802‧‧‧ROM
803‧‧‧RAM
804‧‧‧匯流排
810‧‧‧輸出入介面
811‧‧‧輸入部
812‧‧‧輸出部
813‧‧‧記憶部
814‧‧‧通訊部
815‧‧‧驅動機
821‧‧‧可移除式媒體
900‧‧‧電視裝置
901‧‧‧天線
902‧‧‧選台器
903‧‧‧解多工器
904‧‧‧解碼器
905‧‧‧映像訊號處理部
906‧‧‧顯示部
907‧‧‧聲音訊號處理部
908‧‧‧揚聲器
909‧‧‧外部介面
910‧‧‧控制部
911‧‧‧使用者介面
912‧‧‧匯流排
920‧‧‧行動電話機
921‧‧‧天線
922‧‧‧通訊部
923‧‧‧聲音編解碼器
924‧‧‧揚聲器
925‧‧‧麥克風
926‧‧‧攝影機部
927‧‧‧影像處理部
928‧‧‧多工分離部
929‧‧‧記錄再生部
930‧‧‧顯示部
931‧‧‧控制部
932‧‧‧操作部
933‧‧‧匯流排
940‧‧‧記錄再生裝置
941‧‧‧選台器
942‧‧‧外部介面
943‧‧‧編碼器
944‧‧‧HDD(Hard Disk Drive)
945‧‧‧碟片驅動機
946‧‧‧選擇器
947‧‧‧解碼器
948‧‧‧OSD(On-Screen Display)
949‧‧‧控制部
950‧‧‧使用者介面
960‧‧‧攝像裝置
961‧‧‧光學區塊
962‧‧‧攝像部
963‧‧‧訊號處理部
964‧‧‧影像處理部
965‧‧‧顯示部
966‧‧‧外部介面
967‧‧‧記憶體
968‧‧‧媒體驅動機
969‧‧‧OSD
970‧‧‧控制部
971‧‧‧使用者介面
972‧‧‧匯流排
[圖1]影像編碼裝置的主要構成例的區塊圖。
[圖2]編碼單元之構成例的說明圖。
[圖3]量化矩陣傳輸之例子的圖示。
[圖4]序列參數集之例子的圖示。
[圖5]序列參數集之例子的接續於圖4的圖。
[圖6]圖像參數集之例子的圖示。
[圖7]圖像參數集之例子的接續於圖6的圖。
[圖8]量化之樣子之例子的說明圖。
[圖9]序列參數集之例子的圖示。
[圖10]序列參數集之例子的接續於圖9的圖。
[圖11]圖像參數集之例子的圖示。
[圖12]圖像參數集之例子的接續於圖11的圖。
[圖13]正交轉換略過等的主要構成例的區塊圖。
[圖14]編碼處理之流程例的說明用流程圖。
[圖15]正交轉換略過控制處理之流程例的說明用流程圖。
[圖16]正交轉換處理之流程例的說明用流程圖。
[圖17]量化處理之流程例的說明用流程圖。
[圖18]去區塊濾波器處理之流程例的說明用流程圖。
[圖19]影像解碼裝置的主要構成例的區塊圖。
[圖20]逆正交轉換略過部等之主要構成例的區塊圖。
[圖21]解碼處理之流程例的說明用流程圖。
[圖22]逆量化處理之流程例的說明用流程圖。
[圖23]逆正交轉換處理之流程例的說明用流程圖。
[圖24]序列參數集之另一例的圖示。
[圖25]圖像參數集之例子的圖示。
[圖26]略過許可資訊生成處理之流程例的說明用流程圖。
[圖27]略過許可資訊收訊處理之流程例的說明用流程圖。
[圖28]多視點影像編碼方式之例子的圖示。
[圖29]適用了本技術的多視點影像編碼裝置的主要構成例之區塊圖。
[圖30]適用了本技術的多視點影像解碼裝置的主要構成例之區塊圖。
[圖31]階層影像編碼方式之例子的圖示。
[圖32]適用了本技術的階層影像編碼裝置的主要構成例之區塊圖。
[圖33]適用了本技術的階層影像解碼裝置的主要構成例之區塊圖。
[圖34]電腦的主要構成例的區塊圖。
[圖35]電視裝置之概略構成之一例的區塊圖。
[圖36]行動電話機之概略構成之一例的區塊圖。
[圖37]記錄再生裝置之概略構成之一例的區塊圖。
[圖38]攝像裝置之概略構成之一例的區塊圖。
以下，說明用以實施本揭露的形態(以下稱作實施形態)。此外，說明係用以下順序來進行。
1.第1實施形態(影像編碼裝置)
2.第2實施形態(影像解碼裝置)
3.第3實施形態(略過許可資訊的傳輸控制)
4.第4實施形態(多視點影像編碼．多視點影像解碼裝置)
5.第5實施形態(階層影像編碼．階層影像解碼裝置)
6.第6實施形態(電腦)
7.應用例
<1.第1實施形態>
[影像編碼裝置]
圖1係影像編碼裝置的主要構成例的區塊圖。
圖1所示的影像編碼裝置100，係例如使用依照HEVC(High Efficiency Video Coding)方式的預測處理、或是以其為基礎之方式的預測處理，來將影像資料予以編碼。
如圖1所示，影像編碼裝置100係具有：A/D轉換部101、畫面排序緩衝區102、演算部103、正交轉換部104、量化部105、可逆編碼部106、積存緩衝區107、逆量化部108、及逆正交轉換部109。又，影像編碼裝置100係具有：演算部110、去區塊濾波器111、畫格記憶體112、選擇部113、畫面內預測部114、運動預測．補償部115、預測影像選擇部116、及速率控制部117。
影像編碼裝置100係還具有正交轉換略過部121。
A/D轉換部101，係將所被輸入之影像資料進行A/D轉換，將轉換後的影像資料(數位資料)，供給至畫面排序緩衝區102而記憶之。畫面排序緩衝區102係將已記憶之顯示順序的畫格的影像，隨應於GOP(Group Of Picture)，排序成編碼所需之畫格順序，將已排列畫格順序的影像，供給至演算部103。又，畫面排序緩衝區102，係也將畫格順序排序過的影像，供給至畫面內預測部114及運動預測．補償部115。
演算部103，係將從畫面排序緩衝區102所讀出之影像，減去透過預測影像選擇部116而從畫面內預測 部114或運動預測．補償部115所供給之預測影像，將其差分資訊，輸出至正交轉換部104。例如，若是進行畫面內編碼的影像，則演算部103係從畫面排序緩衝區102所讀出之影像，減去從畫面內預測部114所供給之預測影像。又，例如，若是進行畫面間編碼的影像，則演算部103係由從畫面排序緩衝區102所讀出之影像，減去從運動預測．補償部115所供給之預測影像。
正交轉換部104，係對從演算部103所供給之差分資訊，實施離散餘弦轉換或卡忽南-拉維轉換等之正交轉換。正交轉換部104，係將該轉換係數，供給至量化部105。
量化部105，係將從正交轉換部104所供給之轉換係數，進行量化。量化部105，係基於從速率控制部117所供給之編碼量的目標值之相關資訊，來設定量化參數，進行其量化。量化部105係將已被量化之轉換係數，供給至可逆編碼部106。
可逆編碼部106，係於量化部105中將已被量化之轉換係數以任意之編碼方式進行編碼。係數資料，係在速率控制部117的控制之下而被量化，因此該編碼量係會成為速率控制部117所設定的目標值(或是近似於目標值)。
又，可逆編碼部106係將表示畫面內預測之模式的資訊等，從畫面內預測部114加以取得，並將表示畫面間預測之模式的資訊或差分運動向量資訊等，從運動 預測．補償部115加以取得。
可逆編碼部106，係將這些各種資訊以任意之編碼方式進行編碼，成為編碼資料(亦稱為編碼串流)的標頭資訊的一部分(進行多工化)。可逆編碼部106，係將編碼所得到之編碼資料，供給至積存緩衝區107而積存之。
作為可逆編碼部106的編碼方式，可舉例如可變長度編碼或算術編碼等。作為可變長度編碼，係可舉出例如H.264/AVC方式所制定的CAVLC(Context-Adaptive Variable Length Coding)等。作為算術編碼，係可舉出例如CABAC(Context-Adaptive Binary Arithmetic Coding)等。
積存緩衝區107，係將從可逆編碼部106所供給之編碼資料，予以暫時保持。積存緩衝區107，係在所定之時序上，將所保持的編碼資料，而輸出至例如後段未圖示的記錄裝置(記錄媒體)或傳輸路等。亦即，積存緩衝區107係亦為將編碼資料予以傳輸的傳輸部。
又，於量化部105中被被量化過的轉換係數，係也被供給至逆量化部108。逆量化部108係將該已被量化之轉換係數，以對應於量化部105所做之量化的方法，進行逆量化。逆量化部108，係將所得到之轉換係數，供給至逆正交轉換部109。
逆正交轉換部109，係將從逆量化部108所供給之轉換係數，以正交轉換部104所做之正交轉換處理所對應的方法，進行逆正交轉換。已被逆正交轉換之輸出 (已被復原之差分資訊)，係被供給至演算部110。
演算部110係對從逆正交轉換部109所供給之逆正交轉換結果亦即已被復原之差分資訊，加算上透過預測影像選擇部116而從畫面內預測部114或運動預測．補償部115所送來的預測影像，獲得局部性解碼之影像(解碼影像)。該解碼影像，係被供給至去區塊濾波器111或畫格記憶體112。
去區塊濾波器111，係對從演算部110所供給之解碼影像，適宜進行去區塊濾波器處理。例如，去區塊濾波器111，係藉由對解碼影像進行去區塊濾波器處理，以去除解碼影像的區塊失真。
去區塊濾波器111，係將濾波器處理結果(濾波器處理後之解碼影像)，供給至畫格記憶體112。此外，如上述，從演算部110所輸出的解碼影像，係可不透過去區塊濾波器111就供給至畫格記憶體112。亦即，去區塊濾波器111所做的濾波器處理係可省略。
畫格記憶體112，係將所被供給之解碼影像加以記憶，在所定之時序上，將所記憶之解碼影像當作參照影像，供給至選擇部113。
選擇部113係選擇從畫格記憶體112所供給之參照影像的供給目標。例如，若為畫面間預測，則選擇部113係將從畫格記憶體112所供給之參照影像，供給至運動預測．補償部115。
畫面內預測部114係使用透過選擇部113而 從畫格記憶體112所供給之參照畫格亦即處理對象圖像內的像素值，進行生成預測影像的Intra預測(畫面內預測)。畫面內預測部114，係以事前準備的複數畫面內預測模式，來進行該畫面內預測。
畫面內預測部114係以身為候補之所有畫面內預測模式來生成預測影像，使用從畫面排序緩衝區102所供給之輸入影像來評估各預測影像的成本函數值，選擇最佳模式。畫面內預測部114，係一旦選擇了最佳的畫面內預測模式，就將該最佳模式所生成之預測影像，供給至預測影像選擇部116。
又，如上述，畫面內預測部114係亦可將表示已被採用之畫面內預測模式的畫面內預測模式資訊等，適宜地供給至可逆編碼部106，令其被編碼。
運動預測．補償部115，係使用從畫面排序緩衝區102所供給之輸入影像、和透過選擇部113而從畫格記憶體112所供給之參照影像，來進行運動預測(畫面間預測)。運動預測．補償部115，係隨應於所被偵測出來的運動向量而進行運動補償處理，生成預測影像(畫面間預測影像資訊)。運動預測．補償部115，係以事前準備的複數畫面間預測模式，來進行此種畫面間預測。
運動預測．補償部115，係以候補之所有畫面間預測模式，來生成預測影像。運動預測．補償部115，係使用從畫面排序緩衝區102所供給之輸入影像、和已生成之差分運動向量之資訊等，來評估各預測影像的成本函 數值，選擇最佳模式。運動預測．補償部115，係一旦選擇了最佳的畫面間預測模式，就將該最佳模式所生成之預測影像，供給至預測影像選擇部116。
運動預測．補償部115，係在將表示已被採用之畫面間預測模式的資訊、或編碼資料予以解碼之際，將以該畫面間預測模式來進行處理所必需的資訊等，供給至可逆編碼部106而編碼之。作為必要之資訊係例如，已被生成之差分運動向量的資訊、或作為預測運動向量資訊的表示預測運動向量之索引的旗標等。
預測影像選擇部116，係選擇對演算部103或演算部110供給預測影像的供給來源。例如，若為畫面內編碼時，則預測影像選擇部116係選擇畫面內預測部114作為預測影像之供給來源，將從該畫面內預測部114所供給之預測影像，供給至演算部103或演算部110。又，若為畫面間編碼時，則預測影像選擇部116係選擇運動預測．補償部115作為預測影像之供給來源，將從該運動預測．補償部115所供給之預測影像，供給至演算部103或演算部110。
速率控制部117，係基於積存緩衝區107中所積存之編碼資料的編碼量，以不會發生溢位或下溢之方式，控制量化部105的量化動作之速率。
正交轉換略過部121，係控制正交轉換部104中的正交轉換處理之執行。又，正交轉換略過部121，係隨應於該控制，來控制量化部105所進行之量化處理、逆 量化部108所進行之逆量化處理、逆正交轉換部109所進行的逆正交轉換處理、以及去區塊濾波器111所進行的去區塊濾波器處理。然後，正交轉換略過部121，係將正交轉換處理之略過的相關資訊、以及量化或去區塊濾波器的相關資訊且必要者，供給至可逆編碼部106，從積存緩衝區107傳輸至解碼側。
[編碼單元]
順便一提，在AVC方式中，規定有巨集區塊與子巨集區塊所構成的階層構造。然而，在16像素×16像素的巨集區塊中，對次世代編碼方式之對象的像是UHD(Ultra High Definition；4000像素×2000像素)這類大畫面而言，並非最佳。
於是，例如，在HEVC方式中，係如圖2所示，規定有編碼單元(CU(Coding Unit))。
CU係亦稱作Coding Tree Block(CTB)，是擔任和AVC方式中的巨集區塊同樣的角色，係為圖像單位的影像之部分領域。相對於後者係被固定成16×16像素之大小，前者的大小並非固定，而是在各個序列中，在影像壓縮資訊中做指定。
例如，在輸出的編碼資料中所含之序列參數集(SPS(Sequence Parameter Set))裡頭，規定了CU的最大尺寸(LCU(Largest Coding Unit))與最小尺寸((SCU(Smallest Coding Unit))。
在各個LCU內，係在不低於SCU之尺寸的範圍內，藉由設成split-flag=1，就可分割成更小尺寸的CU。在圖2的例子中，LCU的大小係為128，最大階層深度係為5。2N×2N之大小的CU，係當split_flag之值為「1」時，就被分割成下1個階層的N×N之大小的CU。
甚至，CU係還會被分割成，作為畫面內或是畫面間預測之處理單位的領域(圖像單位之影像的部分領域)亦即預測單元(Prediction Unit(PU))，又還可以被分割成，作為正交轉換之處理單位的領域(圖像單位之影像的部分領域)亦即變形單元(Transform Unit(TU))。目前，在HEVC方式中，除了4×4及8×8以外，還可使用16×16及32×32正交轉換。
如以上的HEVC方式，定義CU，以該CU為單位來進行各種處理的此種編碼方式的情況下，可以想成AVC方式的巨集區塊係相當於LCU，區塊(子區塊)係相當於CU。又，AVC方式中的運動補償區塊，係可想成相當於PU。只不過，CU係具有階層構造，其最上位階層的LCU的尺寸，係例如128×128像素，一般是被設定成比AVC方式的巨集區塊還大。
因此，以下假設LCU係也包含了AVC方式之巨集區塊，CU係也包含了AVC方式之區塊(子區塊)。亦即，以下說明中所使用的「區塊」，係表示圖像內的任意之部分領域，其大小、形狀、及特性等，並無限定。亦即，「區塊」係包含了：TU、PU、SCU、CU、LCU、子 區塊、巨集區塊、或切片等任意之領域(處理單位)。當然，也包含這些以外的部分領域(處理單位)。在必須限定尺寸或處理單位等的情況下，會適宜說明。
接下來，說明本技術所關連之基本的技術要素。
[量化矩陣]
在HEVC中，是和AVC同樣地，每正交轉換處理單位地，進行正交轉換係數的量化。在該量化中係會使用到量化矩陣，但該量化矩陣係針對正交轉換處理單位的各尺寸而準備。然而，若傳輸例如16×16或32×32這類較大的量化矩陣，則恐怕會導致編碼效率降低。
於是，例如16×16或32×32這類較大的量化矩陣(或是比所定尺寸還大的量化矩陣)，係如圖3所示，是以8×8之尺寸而被傳輸，藉由零階保值而被升級取樣，對各個正交轉換尺寸做適用。此外，關於這些適用了升級取樣的矩陣，直流成分係被另行傳輸。
在HEVC中，係如圖4至圖7所示，量化矩陣(比例縮放清單(Scaling List)的相關資訊，係放在序列參數集(SPS(Sequence Parameter Set))或圖像參數集(PPS(Picture Parameter Set))中而被傳輸。圖4及圖5係序列參數集之例子的圖示。圖6及圖7係圖像參數集之例子的圖示。
[去區塊濾波器]
又，於HEVC中，係和AVC同樣地，去區塊濾波器是被規定在運動補償迴圈內。去區塊濾波器，係用來降低區塊交界上所產生之區塊失真用的濾波處理。
亦即，在去區塊濾波器處理中，區塊交界會被測出，基於該區塊交界上的量化參數等，而決定濾波器之種類或強度、偏置等，進行濾波處理。
[模式選擇]
順便一提，AVC還有HEVC編碼方式中，為了達成較高編碼效率，適切的預測模式之選擇係很重要。
作為所述之選擇方式的例子，可舉出一種稱作JM(Joint Model)的H.264/MPEG-4 AVC之參照軟體(被公開在http：//iphome.hhi.de/suehring/tml/index.htm)中所實作的方法。
在JM中，係可選擇以下所述的High Complexity Mode與、Low Complexity Mode之2種類的模式判定方法。兩者皆是分別算出關於預測模式Mode的成本函數值，將使其呈最小的預測模式，選擇成為對該當區塊乃至巨集區塊的最佳模式。
High Complexity Mode下的成本函數，係如以下式(1)所示。
此處，Ω係為用來將該當區塊乃至巨集區塊進行編碼所需之候補模式的全體集合，D係為以該當預測模式進行編碼時，解碼影像與輸入影像的差分能量。λ係為作為量化參數之函數而被給予之Lagrange未定乘數。R係為，包含正交轉換係數，以該當模式進行編碼時的總編碼量。
亦即，以High Complexity Mode進行編碼時，為了算出上記參數D及R，必須要以所有的候補模式，先一度進行試行編碼處理，需要較高的演算量。
Low Complexity Mode下的成本函數，係如以下式(2)所示。
此處，D係和High Complexity Mode的情況不同，係為預測影像與輸入影像的差分能量。QP2Quant(QP)係作為量化參數QP之函數而被給予，HeaderBit係為，不包含正交轉換係數，而是運動向量、模式這類屬於Header中之資訊的相關之編碼量。
亦即，在Low Complexity Mode下，雖然關於各個候補模式需要進行預測處理，但不需要用到解碼影像，因此不必進行到編碼處理。因此，可以比High Complexity Mode低的演算量來實現。
[正交轉換略過]
順便一提，在HEVC規格中係採用了非專利文獻2中所提議的“Intra Transform Skipping”之手法。所謂正交轉換略過(Transform Skip)，係為省略(略過)正交轉換處理的手法。
一般而言，對影像資料(差分影像資料)，每一區塊地進行正交轉換處理，將區塊內的空間領域之資訊轉換成頻率領域之資訊，藉此可使區塊內的係數集中至低頻，可增大偏頗。藉此，可提升編碼效率。
然而，隨著區塊內的花紋，有時候這種偏頗會難以產生。例如，CG畫面或字幕等人工的影像的情況下，相較於自然畫面，較容易發生漸層或較強的邊緣。因此，容易產生高頻成分，即使進行正交轉換處理也能以產生偏頗。於是，對這類區塊，認可其正交轉換處理之略過，藉此可謀求更進一步的編碼效率之提升。
此外，於以下說明中，將略過正交轉換處理稱作正交轉換略過(Transform Skip)，將正交轉換略過(Transform Skip)所被適用之區塊，稱作正交轉換略過區塊。又，正交轉換略過未被適用(會進行正交轉換)的區塊，稱作非正交轉換略過區塊。
在此手法中，首先，是在序列參數集(SPS(Sequence Parameter Set))中，將關於是否能把正交轉換略過(Transform Skip)對該當序列做適用的旗標(flag)，予以 傳輸。
表示是否許可正交轉換略過(TransformSkip)(enable/disable)的略過許可資訊亦即旗標(transform_skip_enabled_flag)，係如圖5所示，是被放在序列參數集(SPS(Sequence Parameter Set))中而傳輸。
此略過許可資訊(transform_skip_enabled_flag)，係例如藉由使用者等而被設定。其值為1時，可將正交轉換略過(TransformSkip)，對4×4的亮度正交轉換區塊或4×4的色差正交轉換區塊做適用。
然後，每一區塊地，判斷正交轉換略過(TransformSkip)的開/關(on/off)，關於該開/關(on/off)之旗標(flag)，會被傳輸。
[編碼效率]
無關於此種正交轉換之略過控制，熵編碼、量化、迴圈濾波器等之處理，係照舊進行。亦即，即使對於正交轉換略過區塊，也是和對非正交轉換略過區塊之情形同樣地，進行熵編碼、量化、迴圈濾波器等之處理。
然而，量化矩陣係為有關於頻率帶域之權重係數。亦即，量化矩陣係被設計成，會適用於正交轉換係數之區塊。因此，若將此種量化矩陣適用於空間領域之值(差分影像資料)的區塊，則恐怕會導致編碼效率降低。亦即，恐怕導致畫質降低。
又，如上述，正交轉換略過，係被適用於容 易產生高頻成分的影像。因此，正交轉換略過區塊，相對於非正交轉換略過區塊，其影像內容有較大差異的可能性是較高的。亦即，正交轉換略過區塊與非正交轉換略過區塊之交界，係容易產生區塊失真。
因此，對於此種正交轉換略過區塊與非正交轉換略過區塊之交界，若和其他交界同樣地進行去區塊濾波器處理，則恐怕會導致編碼效率降低。亦即，恐怕導致畫質降低。
[相應於正交轉換略過之控制]
於是，會隨著處理對象之目前區塊是否為正交轉換略過(TransformSkip)區塊，來控制編碼處理。更具體而言，係控制著編碼處理的量化處理(逆量化處理)，及去區塊處理。
[量化處理之控制]
例如，在量化處理的情況下，對於進行過正交轉換的非正交轉換略過區塊，係使用量化矩陣來進行量化處理，對於正交轉換被略過的正交轉換略過區塊，係不是用量化矩陣，而是改用1個權重係數來進行量化處理。亦即，使用此1個權重係數，來對目前區塊的正交轉換略過區塊的所有係數，進行量化。
圖8中圖示了其樣子。例如，對於非正交轉換略過區塊(正交轉換係數之矩陣)，係如圖8的上方所 示，和先前同樣地使用量化矩陣來進行量化。
相對於此，對於4×4的正交轉換略過區塊(正交轉換前差分值之矩陣)，係使用1個權重係數被矩陣化而成之權重係數矩陣，來進行量化。當然，實際的演算方法係為任意，但基本上是進行與該使用了權重係數矩陣之演算相同的演算。
該權重係數係為任意。例如，亦可由純量值所成。例如，亦可將量化矩陣之直流成分(DC)，當作權重係數。雖然量化矩陣係為有關於頻率帶域之權重係數，但其直流成分係為有關頻率帶域之值，也是有關空間領域之值。若是只有具有如此特徵之量化矩陣之直流成分，則即使對於屬於有關空間領域之值的正交轉換略過區塊的各係數來做適用，仍難以牽涉到編碼效率的降低。
此情況下，如圖8所示，是從量化矩陣抽出其直流成分(DC)，將其排列成4×4而生成權重係數矩陣，使用該權重係數矩陣，來進行4×4的正交轉換略過區塊(正交轉換前差分值之矩陣)的量化。
又，權重係數係亦可有別於量化矩陣，而另外任意生成。其生成方法係為任意。此情況下也是如圖8所示般地，將該權重係數排列成4×4而生成權重係數矩陣，使用該權重係數矩陣，來進行4×4的正交轉換略過區塊(正交轉換前差分值之矩陣)的量化。如此，藉由使用與量化矩陣獨立的權重係數，例如，僅對正交轉換略過區塊所被適用之部分(例如CG畫面等)，可比其他部分更容易 進行促使畫質提升等之控制。
此外，此情況下，權重係數係可在編碼側與解碼側上以同樣的方法算出同樣的值，也可從編碼側被傳輸至解碼側。
在將權重係數予以傳輸的情況下，當略過許可資訊(transform_skip_enabled_flag)之時是許可正交轉換略過的值(例如1)時，對正交轉換略過區塊所適用的量化純量值(權重係數)就會被傳輸。因此，對參照圖4乃至圖7所說明之序列參數集與圖像參數集，係進行如下之變更。
第一變更係為，將略過許可資訊 (transform_skip_enabled_flag)，比量化矩陣(scaling_list)先行傳輸。
第二變更係為，將略過許可資訊 (transform_skip_enabled_flag)，也放在PPS中來傳輸。這是因為，在SPS與PPS之間，並不具有剖析(parsing)之依存關係。
亦即，將SPS設計成如圖9及圖10所示之構成，將PPS設計成如圖11及圖12所示之構成。
甚至，權重係數係例如，使用位於目前區塊之周邊的周邊區塊的量化時所被適用之量化矩陣之直流成分，藉由平均值等之演算，即可生成。此演算方法係為任意，亦可為平均以外。
此情況下也是如圖8所示般地，將該權重係 數排列成4×4而生成權重係數矩陣，使用該權重係數矩陣，來進行4×4的正交轉換略過區塊(正交轉換前差分值之矩陣)的量化。如此，藉由使用周邊區塊之量化矩陣來算出權重係數，在解碼側上也可容易地用和編碼列同樣的方法來算出權重係數。亦即，可省略權重係數的傳輸，而可換來編碼效率的提升。
[去區塊濾波器的控制]
接著，說明去區塊濾波器的控制。正交轉換略過(TransformSkip)，係為了提升含有CG畫面或字幕(Caption)之區域的編碼效率，一般認為會在正交轉換略過區塊與非正交轉換略過區塊之交界，容易產生區塊失真。
於是，偵測正交轉換略過區塊與非正交轉換略過區塊是否夾著區塊交界而銜接，對正交轉換略過區塊與非正交轉換略過區塊之交界，係進行如下的去區塊濾波器之強度調整，施加較弱的去區塊濾波器。
例如，對正交轉換略過區塊及非正交轉換略過區塊之交界進行去區塊濾波器處理時，將區塊交界強度bS(Boundary Strength)值予以+1。藉由如此加大bs值，就可控制成會施加較強的濾波。亦即，可對正交轉換略過區塊及非正交轉換略過區塊之交界，施加較強的去區塊濾波器。此外，亦可不是將bs值+1，而是將bs值固定成例如2等較大的值。
又，例如，亦可為，根據bs值或α、β等之 參數來進行濾波器強度之調整，但無論此種濾波器強度之控制結果為何，對於正交轉換略過區塊及非正交轉換略過區塊之交界，都是用Strongfilter。藉由如此設計，可更直接地，對於正交轉換略過區塊及非正交轉換略過區塊之交界，施加較強的去區塊濾波器。
甚至，例如，相對於針對正交轉換略過區塊及非正交轉換略過區塊之交界的β及tc，設成較小的偏置(offset)。藉此，對於正交轉換略過區塊及非正交轉換略過區塊之交界，就可施加較弱的去區塊濾波器。
藉由適用如以上之去區塊濾波器之強度調整，於正交轉換略過區塊及非正交轉換略過區塊之交界，就可施加較弱的去區塊濾波器，可提升輸出的影像壓縮資訊之效率。
此外，使去區塊濾波器減弱的方法，雖然想到如上述的數種，但亦可將這些複數方法加以組合使用。當然，該方法係亦可包含上述以外的方法。
[正交轉換略過等之構成例]
圖13係正交轉換略過部121等之主要構成例的區塊圖。
如圖12所示，正交轉換略過部121係含有略過編碼部131及略過決定部132而構成。
略過編碼部131，係在目前區塊是4×4的情況下，從正交轉換部104取得目前區塊的正交轉換係數及正 交轉換前差分值。略過編碼部131，係使用所被供給的正交轉換係數，進行不適用正交轉換略過的編碼處理，生成其成本函數值。又，略過編碼部131係使用所被供給的正交轉換前差分值，進行會適用正交轉換略過的編碼處理，生成其成本函數值。略過編碼部131，係將這些成本函數值，供給至略過決定部132。
此外，若目前區塊比4×4還大，則略過編碼部131係省略此處理。此時，略過決定部132係將指示要進行正交轉換的控制訊號，供給至正交轉換部104。基於此控制，正交轉換部104係進行目前區塊的正交轉換。
略過決定部132，係從可逆編碼部106，取得表示是否許可正交轉換處理之略過的略過許可資訊(transform_skip_enabled_flag)。此略過許可資訊(transform_skip_enabled_flag)，係例如藉由使用者等而被預先設定，儲存在可逆編碼部106中。略過決定部132，係隨應於該略過許可資訊(transform_skip_enabled_flag)，而將指示是否許可正交轉換略過的控制訊號，供給至正交轉換部104。
例如，在略過許可資訊(transform_skip_enabled_flag)中許可了正交轉換略過(例如值為1)時，略過決定部132係將許可正交轉換略過之控制訊號，供給至正交轉換部104。又，在略過許可資訊(transform_skip_enabled_flag)中不許可正交轉換略過(例如值為0)時，略過決定部132係將禁止正交轉換略過之控 制訊號，供給至正交轉換部104。
又，略過決定部132，係基於從略過編碼部131所供給之成本函數值，來決定最佳模式。亦即，會決定是否對目前區塊適用正交轉換略過(TransformSkip)。略過決定部132，係將該決定結果(表示所決定之最佳模式的資訊)，當作控制訊號，供給至正交轉換部104、量化部105、去區塊濾波器111、逆量化部108、及逆正交轉換部109。
又，略過決定部132，係生成用來識別決定結果(對目前區塊是否適用正交轉換略過)的略過識別資訊(TransformSkipFlag)，將其供給至可逆編碼部106而傳輸之。
正交轉換部104，係針對從演算部103所取得到的正交轉換前差分值，以未被從略過編碼部131所供給之控制訊號所禁止的所有模式，生成目前區塊的正交轉換係數及正交轉換前差分值。正交轉換部104，係將已生成之目前區塊的正交轉換係數及正交轉換前差分值，供給至略過編碼部131。此外，當未被控制訊號禁止正交轉換略過時，則正交轉換部104係僅會將目前區塊的正交轉換係數，供給至略過編碼部131。
如上述，一旦於正交轉換略過部121中決定了模式，則正交轉換部104係取得從略過決定部132所供給之控制訊號，依照其控制，進行所被指定之模式的處理。亦即，正交轉換部104係執行或略過正交轉換處理， 若執行時則將正交轉換係數、若略過時則將正交轉換前差分值，供給至量化部105。
藉由如此設計，正交轉換部104係可因應需要而適切地進行正交轉換，可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
此外，正交轉換部104係亦可將供給至略過編碼部131的所有模式之目前區塊的正交轉換係數及正交轉換前差分值先予以保持，隨應於從略過決定部132而來的控制訊號而從其中選擇出符合的模式的正交轉換係數或是正交轉換前差分值，供給至量化部105。藉由如此設計，可省略處理，可減輕負荷。
如圖13所示，量化部105係含有量化矩陣設定部141、權重係數生成部142、及量化處理部143所構成。
量化矩陣設定部141，係將使用者等所設定的量化矩陣，供給至權重係數生成部142。
權重係數生成部142，係將從略過決定部132所供給之控制訊號，加以取得。權重係數生成部142，係基於該控制訊號之控制，將量化矩陣或是權重係數，供給至量化處理部143。
例如，若正交轉換略過未被適用時，則權重係數生成部142係控制訊號所指定之模式的從量化矩陣設定部141所供給之量化矩陣，供給至量化處理部143。
又，例如，若正交轉換略過被適用時，則權 重係數生成部142係生成權重係數，將所生成之權重係數，供給至量化處理部143。如上述，權重係數的生成方法係為任意。例如，亦可將從量化矩陣設定部141所供給之量化矩陣之直流成分予以抽出，將其當作權重係數，亦可有別於從量化矩陣設定部141所供給之量化矩陣而另外設定權重係數，亦可從周邊區塊之量化矩陣的直流成分算出權重係數。
量化處理部143係使用從權重係數生成部142所供給之量化矩陣或是權重係數、以及從速率控制部117所供給之量化參數等，而將從正交轉換部104所供給之正交轉換係數或是正交轉換前差分值，予以量化。
亦即，量化處理部143係若從正交轉換部104供給了正交轉換係數時，則使用量化矩陣或量化參數等，來將該目前區塊的正交轉換係數予以量化。又，量化處理部143係若從正交轉換部104供給了正交轉換前差分值時，則使用權重係數或量化參數等，來將該目前區塊的正交轉換前差分值予以量化。
量化處理部143，係將已被量化之係數，供給至可逆編碼部106及逆量化部108。又，量化處理部143係在必要時，例如將權重係數等之量化的有關之參數，供給至可逆編碼部106而傳輸之。
藉由如此設計，量化處理部143係可適切地進行量化而抑制畫質之降低。因此，影像編碼裝置100係可抑制編碼．解碼所致之畫質的降低。換言之，影像編碼 裝置100係可提升編碼效率。
此外，量化處理部143係將量化處理中所被適用之量化矩陣或是權重係數，例如連同已被量化之係數，一起供給至逆量化部108。
此外，與逆量化部108和逆正交轉換部109同樣的處理部，是在後述的影像解碼裝置中也有被形成，因此其說明是參照逆量化部108與逆正交轉換部109，關於逆量化部108和逆正交轉換部109的詳細說明係省略。
如圖13所示，去區塊濾波器111係含有交界判定部151、強度調整部152、及濾波部153所構成。
交界判定部151，係針對目前區塊，從略過決定部132取得控制訊號。又，交界判定部151係針對該目前區塊的周邊區塊，取得用來識別是否適用正交轉換略過的略過識別資訊(TransformSkipFlag)。交界判定部151係基於這些資訊，判定處理對象之區塊交界是否為正交轉換略過區塊及非正交轉換略過區塊之交界，將表示該判定結果的控制訊號，供給至強度調整部152。
強度調整部152係生成Bs值、α、β、及tc等之各種參數，基於這些值、和從交界判定部151所供給之控制訊號，來決定去區塊濾波器的強度。亦即，強度調整部152係若處理對象之區塊交界不是正交轉換略過區塊及非正交轉換略過區塊之交界時，則基於已生成之Bs值、α、β、及tc等之各種參數的值，來決定去區塊濾波器的強度。又，若處理對象之區塊交界是正交轉換略過 區塊及非正交轉換略過區塊之交界時，則強度調整部152係還會基於控制訊號，用例如上述之任意方法，來加強濾波器強度。
強度調整部152，係將如此所設定的濾波器強度，通知給濾波部153。
濾波部153，係以從強度調整部152所供給之濾波器強度，對從演算部110所供給之區塊交界的去區塊濾波前像素值，進行去區塊濾波器處理處理。濾波部153，係將去區塊濾波後像素值，供給至畫格記憶體112而記憶之。該資訊係被使用於畫面內或畫面間的預測處理。
藉由如此設計，去區塊濾波器111，係可對正交轉換略過區塊及非正交轉換略過區塊之交界，進行會施加較強去區塊濾波器的濾波處理。因此，可更加抑制畫質的降低。亦即，影像編碼裝置100係可抑制編碼．解碼所致之畫質的降低。換言之，影像編碼裝置100係可提升編碼效率。
[編碼處理之流程]
接著說明如以上之影像編碼裝置100所執行的各處理的流程。首先，參照圖14的流程圖，說明編碼處理的流程例。
於步驟S101中，可逆編碼部106係將表示是否許可正交轉換處理之略過的略過許可資訊 (transform_skip_enabled_flag)，例如基於使用者指示等而予以生成。此略過許可資訊(transform_skip_enabled_flag)，係例如放在SPS中而被傳輸。
於步驟S102中，A/D轉換部101係將所輸入之影像進行A/D轉換。於步驟S103中，畫面排序緩衝區102係將已被A/D轉換之影像加以記憶，進行從各圖像之顯示順序往編碼之順序的排序。於步驟S104中，畫面內預測部114係進行畫面內預測模式的畫面內預測處理。
於步驟S105中，運動預測．補償部115係進行，以畫面間預測模式來進行運動預測或運動補償的畫面間運動預測處理。
於步驟S106中，預測影像選擇部116係基於從畫面內預測部114及運動預測．補償部115所輸出之各成本函數值，來決定最佳模式。亦即，預測影像選擇部116係選擇畫面內預測部114所生成之預測影像、和運動預測．補償部115所生成之預測影像的任一方。
於步驟S107中，演算部103係演算被步驟S103之處理所排序過的影像、與被步驟S106之處理所選擇之預測影像的差分。差分資料係相較於原始的影像資料，資料量是較為減少。因此，相較於把影像直接進行編碼的情形，可壓縮資料量。
於步驟S108中，正交轉換略過部121係進行正交轉換略過控制處理。
於步驟S109中，正交轉換部104係依照步驟 S108之處理結果，而對步驟S107之處理所生成之差分資訊，進行正交轉換處理。
於步驟S110中，量化部105係依照步驟S108之處理結果，而使用來自速率控制部117的量化參數，將步驟S109之處理所得到的正交轉換係數或是正交轉換前差分值，進行量化。
被步驟S110之處理所量化之差分資訊，係如以下所述般地被局部性解碼。亦即，於步驟S111中，逆量化部108，係將步驟S111之處理所生成之已被量化之係數(亦稱為量化係數)，依照步驟S108之處理結果，而以對應於量化部105之特性的特性，進行逆量化。於步驟S112中，逆正交轉換部109係對步驟S111之處理所得到的正交轉換係數或是正交轉換前差分值，依照步驟S108之處理結果而進行逆正交轉換處理。
針對步驟S111及步驟S112之各處理的詳細說明，係可準用解碼處理中所被執行的同樣之處理的說明，因此省略。
於步驟S113中，演算部110係將預測影像，加算至已被局部性解碼的差分資訊，生成已被局部性解碼之影像(對應於往演算部103輸入的影像)。
於步驟S114中，去區塊濾波器111係依照步驟S108之處理結果，對步驟S113之處理所得到的局部性解碼影像，適宜進行去區塊濾波器處理。
於步驟S115中，畫格記憶體112係將藉由步 驟S114之處理而施行過去區塊濾波器處理的解碼影像，加以記憶。此外，畫格記憶體112中係還有未被去區塊濾波器111進行濾波器處理之影像，從演算部110進行供給並記憶之。
於步驟S116中，可逆編碼部106係將藉由步驟S110之處理而被量化之係數，進行編碼。亦即，對於對應於差分影像之資料，進行可變長度編碼或算術編碼等之可逆編碼。
又，此時，可逆編碼部106係將已被步驟S106之處理所選擇的預測影像之關於預測模式的資訊，加以編碼，附加至差分影像編碼所得之編碼資料。亦即，可逆編碼部106係亦將從畫面內預測部114所供以之最佳畫面內預測模式資訊、或從運動預測．補償部115所供給之相應於最佳畫面間預測模式之資訊等，加以編碼，附加至編碼資料。
此外，可逆編碼部106係還將有關正交轉換或量化之相關資訊，適宜進行編碼，附加至編碼資料。
於步驟S117中，積存緩衝區107係將步驟S116之處理所得到的編碼資料，加以積存。積存緩衝區107所積存之編碼資料，係被適宜讀出，透過傳輸路或記錄媒體而傳輸至解碼側。
於步驟S118中，速率控制部117係基於被步驟S117之處理而積存在積存緩衝區107中的編碼資料的編碼量(發生編碼量)，控制量化部105的量化動作之速 率，使其不會發生溢位或下溢。又，速率控制部117，係將量化參數的相關資訊，供給至量化部105。
一旦步驟S118的處理結束，則編碼處理就會結束。
[正交轉換略過控制處理的流程]
接著，將圖14之步驟S108中所執行的正交轉換略過控制處理的流程例，參照圖15的流程圖而加以說明。
一旦正交轉換略過控制處理被開始，則略過決定部132係於步驟S131中，基於略過許可資訊(transform_skip_enabled_flag)來判定進行正交轉換略過的TransformSkip模式是否被許可。
若判定為TransformSkip模式是被許可，則處理係前進至步驟S132。於步驟S132中，略過決定部132係將TransformSkip模式包含在候補模式中。一旦步驟S132之處理結束，則處理係前進至步驟S134。
又，於步驟S132中，若判定為TransformSkip模式未被許可，則處理係前進至步驟S133。於步驟S133中，略過決定部132係將TransformSkip模式從候補模式中移除。一旦步驟S133之處理結束，則處理係前進至步驟S134。
於步驟S134中，略過編碼部131係選擇未處理的候補模式。於步驟S135中，略過編碼部131判定該已選擇之模式是否為正交轉換(TransformSkip)模式。
若判定為正交轉換(TransformSkip)模式，則處理係前進至步驟S136。於步驟S136中，略過編碼部131係生成權重係數。一旦步驟S136之處理結束，則處理係前進至步驟S139。
於步驟S135中，若判定為已選擇之模式不是正交轉換(TransformSkip)模式，則處理係前進至步驟S137。於步驟S137中，略過編碼部131係將目前區塊進行正交轉換。
於步驟S138中，略過編碼部131係取得量化矩陣。
於步驟S139中，略過編碼部131係使用由正交轉換部104所得到之正交轉換係數、或是正交轉換前差分值，來進行編碼，針對目前模式而生成成本函數值。
於步驟S140中，略過編碼部131係判定是否所有的候補模式都已處理。若有未處理之候補模式存在，則處理係回到步驟S134，重複其之後的處理。亦即，直到對全部的模式都生成成本函數值為止，會一直重複執行步驟S134至步驟S140的各處理。
於步驟S140中，若判定為全部的候補模式都已處理時，則處理係前進至步驟S141。於步驟S141中，略過決定部132係基於成本函數值，來判定最佳模式。
於步驟S142中，略過決定部132係基於最佳模式，來生成略過識別資訊(TransformSkipFlag)。
一旦步驟S142的處理結束，則正交轉換略過 控制處理就結束，處理係回到圖14。
[正交轉換處理之流程]
接著，將圖14之步驟S108中所執行的正交轉換處理的流程例，參照圖16的流程圖而加以說明。
一旦正交轉換處理開始，則正交轉換部104係於步驟S151中，判定略過決定部132所選擇的最佳模式，是否為正交轉換略過(TransformSkip模式)。若判定為正交轉換略過(TransformSkip模式)，則處理係前進至步驟S152。
於步驟S152中，正交轉換部104係略過正交轉換處理，將目前區塊的正交轉換前差分值予以輸出。一旦步驟S152之處理結束，則處理係回到圖14。
又，於圖16的步驟S151中，若判定為不是正交轉換略過(TransformSkip模式)，則處理係前進至步驟S153。
於步驟S153中，正交轉換部104係將目前區塊的正交轉換前差分值，進行正交轉換。於步驟S154中，正交轉換部104係將所得到之正交轉換係數，予以輸出。一旦步驟S154之處理結束，則處理係回到圖14。
[量化處理之流程]
接著，將圖14之步驟S110中所執行的量化處理的流程例，參照圖17的流程圖而加以說明。
一旦量化係數開始，則於步驟S161中，權重係數生成部142係判定略過決定部132所選擇的最佳模式，是否為正交轉換略過(TransformSkip模式)。若判定為正交轉換略過(TransformSkip模式)，則處理係前進至步驟S162。
於步驟S162中，權重係數生成部142係生成權重係數。一旦步驟S162之處理結束，則處理係前進至步驟S164。
又，於步驟S161中，若判定為不是正交轉換略過(TransformSkip模式)，則處理係前進至步驟S163。
於步驟S163中，權重係數生成部142係取得量化矩陣。一旦步驟S163之處理結束，則處理係前進至步驟S164。
於步驟S164中，量化處理部143係使用步驟S162中所生成之權重係數、或是步驟S163中所取得之量化矩陣，來進行目前區塊的正交轉換係數或是正交轉換前差分值的量化。於步驟S165中，量化處理部143係將量化矩陣以及已被適用之權重係數，供給至可逆編碼部106而傳輸之。一旦步驟S165的處理結束，則量化處理就結束，處理係回到圖14。
[去區塊濾波器處理之流程]
接著，將圖14之步驟S114中所執行的去區塊濾波器處理的流程例，參照圖18的流程圖而加以說明。
一旦去區塊濾波器處理開始，則於步驟S171中，強度調整部152係取得模式資訊、運動向量、參照畫格資訊等。
於步驟S172中，強度調整部152係偵測出TU或PU等之區塊交界。於步驟S173中，強度調整部152係根據這些資訊來決定Bs值。於步驟S174中，強度調整部152係將區塊交界上的量化參數(交界QP)，將兩區塊的量化參數令作QP_P及QP_Q，如下式(3)而予以算出。
QP=(QP_P+QP_Q+1)>>1．．．(3)
於步驟S175中，強度調整部152係使用如以上所被算出的交界QP，來決定β及tc偏置。於步驟S176中，強度調整部152係藉由所被算出之偏置處理，來決定濾波器(強、弱、off)。
於步驟S177中，交界判定部151係從略過決定部132取得目前區塊的控制訊號，從可逆編碼部106取得周邊區塊的略過識別資訊(TransformSkipFlag)。
於步驟S178中，交界判定部151係判定處理對象之區塊交界是否為正交轉換略過區塊及非正交轉換略過區塊之交界。
若判定為，處理對象之區塊交界是正交轉換略過區塊及非正交轉換略過區塊之交界，則處理係前進至步驟S179。於步驟S179中，強度調整部152係調整去區 塊濾波器強度。一旦步驟S179之處理結束，則處理係前進至步驟S180。
又，於步驟S178中，若判定為，處理對象之區塊交界不是正交轉換略過區塊及非正交轉換略過區塊之交界，則處理係前進至步驟S180。
於步驟S180中，濾波部153係進行去區塊濾波器處理處理。一旦步驟S180的處理結束，則去區塊濾波器處理就結束，處理係回到圖14。
藉由如以上所述般地執行各處理，影像編碼裝置100係可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
<2.第2實施形態>
[影像解碼裝置]
接著，說明如以上所被編碼而成之編碼資料(編碼串流)的解碼。圖19係對應於圖1的影像編碼裝置100的影像解碼裝置的主要構成例的區塊圖。
圖19所示的影像解碼裝置200，係將影像編碼裝置100所生成的編碼資料，以對應於其編碼方法的解碼方法而進行解碼。
如圖19所示的影像解碼裝置200，係具有：積存緩衝區201、可逆解碼部202、逆量化部203、逆正交轉換部204、演算部205、去區塊濾波器206、畫面排序緩衝區207、及D/A轉換部208。又，影像解碼裝置 200係具有：畫格記憶體209、選擇部210、畫面內預測部211、運動預測．補償部212、及選擇部213。
再者，影像解碼裝置200係還具有逆正交轉換略過部221。
積存緩衝區201，係將所被傳輸過來的編碼資料加以收取的收取部。積存緩衝區201，係將所被傳輸過來的編碼資料加以收取、積存，在所定之時序上將該編碼資料供給至可逆解碼部202。對編碼資料係附加有預測模式資訊等之解碼上所必需的資訊。可逆解碼部202，係將從積存緩衝區201所供給的、已被圖1之可逆編碼部106所編碼的資訊，以對應於可逆編碼部106之編碼方式的方式，進行解碼。可逆解碼部202，係將解碼所得之差分影像的已被量化之係數資料，供給至逆量化部203。
又，可逆解碼部202係在最佳預測模式中判定是畫面內預測模式被選擇還是畫面間預測模式被選擇，將該最佳預測模式之相關資訊，在畫面內預測部211及運動預測．補償部212之內，供給至判定為已被選擇的模式的那一方。亦即，例如，在影像編碼裝置100若選擇畫面內預測模式來作為最佳預測模式，則其最佳預測模式之相關資訊會被供給至畫面內預測部211。又，例如，在影像編碼裝置100若選擇畫面間預測模式來作為最佳預測模式，則其最佳預測模式之相關資訊會被供給至運動預測．補償部212。
再者，可逆解碼部202係還將例如量化矩陣 或量化參數等，在逆量化上所必須之資訊，供給至逆量化部203。再者，可逆解碼部202係還將例如，略過許可資訊(transform_skip_enabled_flag)或略過識別資訊(TransformSkipFlag)等逆正交轉換上所必須之資訊，供給至逆正交轉換略過部221。
逆量化部203，係基於逆正交轉換略過部221之控制，將由可逆解碼部202解碼所得到的已被量化之係數資料，以圖1之量化部105之量化方式所對應之方式，進行逆量化。此外，此逆量化部203，係為和圖1的影像編碼裝置100的逆量化部108相同的處理部。亦即，逆量化部203之說明係亦可準用逆量化部108。只不過，資料的輸出入目標等，是隨著裝置而必須要適宜地改讀。
逆量化部203係將所取得之係數資料，供給至逆正交轉換部204。
逆正交轉換部204係基於逆正交轉換略過部221之控制，將從逆量化部203所供給之係數資料(正交轉換係數或是正交轉換前的差分值)，因應需要，以對應於圖1之正交轉換部104之正交轉換方式的方式進行逆正交轉換。此外，此逆正交轉換部204，係為和圖1的影像編碼裝置100的逆正交轉換部109相同的處理部。亦即，逆正交轉換部204之說明係亦可準用逆正交轉換部109。只不過，資料的輸出入目標等，是隨著裝置而必須要適宜地改讀。
逆正交轉換部204係藉由此逆正交轉換處 理，獲得影像編碼裝置100中被正交轉換前之殘差資料所對應的解碼殘差資料。逆正交轉換所得到的解碼殘差資料，係被供給至演算部205。又，對演算部205，係透過選擇部213，而從畫面內預測部211或是運動預測．補償部212，供給著預測影像。
演算部205，係將該解碼殘差資料與預測影像進行加算，獲得影像編碼裝置100之演算部103進行預測影像減算前的影像資料所對應之解碼影像資料。演算部205，係將該解碼影像資料，供給至去區塊濾波器206。
去區塊濾波器206，係對所被供給之解碼影像，適宜實施去區塊濾波器處理，將其供給至畫面排序緩衝區207。去區塊濾波器206，係藉由對解碼影像進行去區塊濾波器處理，以去除解碼影像的區塊失真。此外，此去區塊濾波器206，係為和圖1的影像編碼裝置100的去區塊濾波器111相同的處理部。
去區塊濾波器206，係將濾波器處理結果(濾波器處理後之解碼影像)，供給至畫面排序緩衝區207及畫格記憶體209。此外，從演算部205所輸出的解碼影像，係可不透過去區塊濾波器206就供給至畫面排序緩衝區207或畫格記憶體209。亦即，去區塊濾波器206所做的濾波器處理係可省略。
畫面排序緩衝區207，係進行影像的排序。亦即，藉由圖1的畫面排序緩衝區102而被排序成編碼所需之順序的畫格之順序，係被排序成原本的顯示順序。D/A 轉換部208，係將從畫面排序緩衝區207所供給之影像進行D/A轉換，輸出至未圖示之顯示器而顯示之。
畫格記憶體209，係將所被供給之解碼影像加以記憶，在所定之時序上，或是基於畫面內預測部211或運動預測．補償部212等之外部的要求，將所記憶之解碼影像當作參照影像，供給至選擇部210。
選擇部210係選擇從畫格記憶體209所供給之參照影像的供給目標。選擇部210係當將已被畫面內編碼之影像進行解碼時，將從畫格記憶體209所供給之參照影像，供給至畫面內預測部211。又，選擇部210係當將已被畫面間編碼之影像進行解碼時，將從畫格記憶體209所供給之參照影像，供給至運動預測．補償部212。
對畫面內預測部211係從可逆解碼部202適宜供給著，將標頭資訊解碼所得之表示畫面內預測模式的資訊等。畫面內預測部211係以圖1之畫面內預測部114中所使用的畫面內預測模式，使用從畫格記憶體209所取得之參照影像來進行畫面內預測，生成預測影像。畫面內預測部211，係將已生成之預測影像，供給至選擇部213。
運動預測．補償部212，係將標頭資訊解碼所得之資訊(最佳預測模式資訊、參照影像資訊等)，從可逆解碼部202加以取得。
運動預測．補償部212，係以從可逆解碼部202所取得之最佳預測模式資訊所示的畫面間預測模式， 使用從畫格記憶體209所取得之參照影像來進行畫面間預測，生成預測影像。
選擇部213，係將來自畫面內預測部211的預測影像或來自運動預測．補償部212的預測影像，供給至演算部205。然後，在演算部205中，使用運動向量而被生成之預測影像與來自逆正交轉換部204的解碼殘差資料(差分影像資訊)會被加算，而解碼出原始的影像。亦即，運動預測．補償部212、可逆解碼部202、逆量化部203、逆正交轉換部204、演算部205係亦為，使用運動向量，將編碼資料予以解碼，生成原始影像的解碼部。
逆正交轉換略過部221，係將從編碼側所供給之資訊，透過可逆解碼部202而加以取得，基於該資訊，來控制逆正交轉換部204中的逆正交轉換處理之執行。又，逆正交轉換略過部221，係控制逆量化部203所進行之逆量化處理、以及去區塊濾波器206所進行之去區塊濾波器處理。
藉由如此設計，影像解碼裝置200係可將編碼資料予以適切地解碼。因此，影像解碼裝置200係可實現抑制編碼效率之降低，可實現編碼．解碼所致之畫質降低的抑制。
[逆正交轉換略過部之構成例]
圖20係逆正交轉換略過部221等之主要構成例的區塊圖。
如圖20所示，逆正交轉換略過部221係含有TransformSkipFlag緩衝區231及控制訊號產生部232所構成。
TransformSkipFlag緩衝區231，係將可逆解碼部202中從編碼資料(位元串流)所抽出的略過許可資訊(transform_skip_enabled_flag)或略過識別資訊(TransformSkipFlag)加以取得，並保持之。TransformSkipFlag緩衝區231，係於所定之時序上，或基於要求，而所保持的略過許可資訊(transform_skip_enabled_flag)或略過識別資訊(TransformSkipFlag)，供給至控制訊號產生部232。
控制訊號產生部232，係相應於從TransformSkipFlag緩衝區231所供給之略過許可資訊(transform_skip_enabled_flag)或略過識別資訊(TransformSkipFlag)而生成控制訊號，將其供給至逆量化部203、逆正交轉換部204、及去區塊濾波器206。
例如，當藉由略過許可資訊(transform_skip_enabled_flag)而禁止了正交轉換略過時，則控制訊號產生部232，係如以下般地供給控制訊號。亦即，控制訊號產生部232係對逆量化部203供給控制訊號，其係指示要使用量化矩陣來進行逆量化。又，控制訊號產生部232係對逆正交轉換部204供給控制訊號，其係指示要進行逆正交轉換。然後，控制訊號產生部232係還對去區塊濾波器206供給控制訊號，其係通知並非正交轉換略過區塊之事實。
又，例如，藉由略過許可資訊 (transform_skip_enabled_flag)而許可了正交轉換略過，且藉由略過識別資訊(TransformSkipFlag)，識別了在目前區塊的編碼之際，不適用正交轉換略過時，則控制訊號產生部232，係如以下般地供給控制訊號。亦即，控制訊號產生部232係對逆量化部203供給控制訊號，其係指示要使用量化矩陣來進行逆量化。又，控制訊號產生部232係對逆正交轉換部204供給控制訊號，其係指示要進行逆正交轉換。然後，控制訊號產生部232係還對去區塊濾波器206供給控制訊號，其係通知並非正交轉換略過區塊之事實。亦即，控制訊號產生部232係亦可對去區塊濾波器206，將略過識別資訊(TransformSkipFlag)當作控制訊號而供給。
再者，例如，藉由略過許可資訊(transform_skip_enabled_flag)而許可了正交轉換略過，且藉由略過識別資訊(TransformSkipFlag)，識別了在目前區塊的編碼之際，會適用正交轉換略過時，則控制訊號產生部232，係如以下般地供給控制訊號。亦即，控制訊號產生部232係對逆量化部203供給控制訊號，其係指示要使用權重係數來進行逆量化。又，控制訊號產生部232係對逆正交轉換部204供給控制訊號，其係指示不要進行逆正交轉換。然後，控制訊號產生部232係還對去區塊濾波器206供給控制訊號，其係用來通知目前區塊係為正交轉換略過區塊之事實。亦即，控制訊號產生部232係亦可對去區塊濾波器206，將略過識別資訊(TransformSkipFlag)當 作控制訊號而供給。
如圖20所示，逆量化部203係含有量化矩陣緩衝區241、權重係數生成部242、量化參數緩衝區243、及逆量化部244所構成。
量化矩陣緩衝區241，係取得藉由可逆解碼部202而從編碼資料之SPS等所抽出之量化矩陣，並加以保持。此量化矩陣係為從編碼列所傳輸而來，是在編碼之際曾經被使用過的。量化矩陣緩衝區241，係於所定之時序上，或是因應要求，而將所保持的量化矩陣，供給至權重係數生成部242。此外，當從編碼側有傳輸了編碼之際曾被適用的權重係數時，則量化矩陣緩衝區241，係與量化矩陣同樣地，取得該權重係數，供給至權重係數生成部242。
權重係數生成部242，係將從控制訊號產生部232所供給之控制訊號，加以取得。權重係數生成部242係基於該控制訊號的控制，掌握在編碼之際是否對目前區塊適用過正交轉換略過，據此而將量化矩陣或是權重係數供給至逆量化部244。
例如，若在編碼之際對目前區塊沒有適用過正交轉換略過，則權重係數生成部242係將控制訊號所指定之模式的從量化矩陣緩衝區241所供給之量化矩陣，供給至逆量化部244。
又，例如，若在編碼之際對目前區塊有適用過正交轉換略過，則權重係數生成部242係生成權重係 數，將所生成之權重係數，供給至逆量化部244。
此外，該權重係數的生成方法，係只要是和編碼側相同的方法，則可為任意。亦即，例如，於影像編碼裝置100中，權重係數生成部142係將從量化矩陣設定部141所供給之量化矩陣之直流成分予以抽出，將其當作權重係數的情況下，則權重係數生成部242也同樣地，將從量化矩陣緩衝區241所供給之量化矩陣之直流成分予以抽出，將其當作權重係數。
又，於影像編碼裝置100中，權重係數生成部142是有別於從量化矩陣設定部141所供給之量化矩陣而另外設定了權重係數時，則權重係數生成部242也同樣地，有別於從量化矩陣緩衝區241所供給之量化矩陣而另外設定權重係數。此時，若從編碼側供給了編碼之際曾被適用的權重係數時，則適用該權重係數。
甚至，於影像編碼裝置100中，當權重係數生成部142是從周邊區塊之量化矩陣的直流成分算出權重係數時，權重係數生成部242也同樣地，從周邊區塊之量化矩陣的直流成分算出權重係數。
量化參數緩衝區243，係取得藉由可逆解碼部202而從編碼資料之SPS等所抽出之量化參數，並加以保持。此量化參數係為從編碼側所供給而來，是在編碼之際曾經被使用過的。量化參數緩衝區243，係於所定之時序上，或是因應要求，而將所保持的量化參數，供給至逆量化部244。
逆量化部244，係取得藉由可逆解碼部202而從編碼資料所抽出之已被量化之係數。逆量化部244，係還會從量化參數緩衝區243取得量化參數，從權重係數生成部242取得量化矩陣或是權重係數。逆量化部244係使用這些，來將已被量化之係數，進行逆量化。該逆量化之方法，係對應於影像編碼裝置100的量化處理部143所進行的量化方法。
亦即，例如，若在編碼之際對目前區塊沒有適用過正交轉換略過，則逆量化部係使用量化矩陣與量化參數而將已被量化之係數進行逆量化，將所得到之正交轉換係數，供給至逆正交轉換部204。
又，例如，若在編碼之際對目前區塊有適用過正交轉換略過，則逆量化部係使用權重係數與量化參數而將已被量化之係數進行逆量化，將所得到之正交轉換前差分值，供給至逆正交轉換部204。
藉由如此設計，逆量化部203，係可用對應於編碼之際之量化的方法，來適切地進行逆量化。亦即，逆量化部203係可將影像編碼裝置100的量化部105所量化而成之係數，適切地進行逆量化。因此，逆量化部203係可適切地進行逆量化而抑制畫質之降低。因此，影像解碼裝置200係可實現抑制編碼．解碼所致之畫質的降低。換言之，影像解碼裝置200係可提升編碼效率。
逆正交轉換部204係基於從控制訊號產生部232所供給之控制訊號，將從逆量化部244所供給之已被 逆量化之係數，適宜地進行逆正交轉換。
例如，若目前區塊是在編碼之際沒有適用過正交轉換略過的區塊，則逆正交轉換部204係基於控制訊號，而掌握從逆量化部244所供給之已被逆量化之係數係為正交轉換係數之事實。亦即，逆正交轉換部204係將該正交轉換係數，以對應於影像編碼裝置100之正交轉換部104之正交轉換的方法，進行逆正交轉換。藉此，曾是頻率領域之值的已被逆量化之係數，係被轉換成空間領域之值的正交轉換前差分值(解碼殘差資料)。逆正交轉換部204，係將該解碼殘差資料，供給至演算部205。
又，例如，若目前區塊是在編碼之際有適用過正交轉換略過的區塊，則逆正交轉換部204係基於控制訊號，而掌握從逆量化部244所供給之已被逆量化之係數係為正交轉換前差分值之事實。逆正交轉換部204，係將該空間領域之值的正交轉換前差分值，當作解碼殘差資料而供給至演算部205。
藉由如此設計，逆正交轉換部204，係可用對應於編碼之際之正交轉換的方法，來適切地進行逆正交轉換。亦即，逆正交轉換部204係可將例如影像編碼裝置100的正交轉換部104所生成的係數，適切地處理。因此，逆正交轉換部204係為了抑制畫質的降低，因應需要而可適切地進行逆正交轉換。因此，影像解碼裝置200係可實現抑制編碼．解碼所致之畫質的降低。換言之，影像解碼裝置200係可提升編碼效率。
如圖20所示，去區塊濾波器206係含有交界判定部251、強度調整部252、及濾波部253所構成。
交界判定部251係為與影像編碼裝置100的交界判定部151相同的處理部。對交界判定部251係供給著，表示在編碼之際是否曾對目前區塊適用過正交轉換略過的控制訊號(例如略過識別資訊(TransformSkipFlag))。交界判定部251係將這些資訊加以保持，判定處理對象之區塊交界是否為正交轉換略過區塊及非正交轉換略過區塊之交界，將表示該判定結果的控制訊號，供給至強度調整部252。
強度調整部252係為與影像編碼裝置100的強度調整部152相同的處理部。強度調整部252係生成Bs值、α、β、及tc等之各種參數，基於這些值、和從交界判定部251所供給之控制訊號，來決定去區塊濾波器的強度。亦即，強度調整部252係若處理對象之區塊交界不是正交轉換略過區塊及非正交轉換略過區塊之交界時，則基於已生成之Bs值、α、β、及tc等之各種參數的值，來決定去區塊濾波器的強度。又，若處理對象之區塊交界是正交轉換略過區塊及非正交轉換略過區塊之交界時，則強度調整部252係還會基於控制訊號，用例如上述之任意方法，來加強濾波器強度。該濾波器強度之決定及調整，係使用和強度調整部152相同的方法。亦即，編碼之際所被適用的濾波器強度，會被重現。
強度調整部252，係將如此所設定的濾波器強 度，通知給濾波部253。
濾波部253，係為與影像編碼裝置100的濾波部253相同的處理部。濾波部253，係以從強度調整部252所供給之濾波器強度，對從演算部205所供給之區塊交界的解碼殘差資料(去區塊濾波前像素值)，進行去區塊濾波器處理處理。濾波部253，係將實施去區塊濾波器處理所得到之去區塊濾波後像素值，供給至畫面排序緩衝區207或畫格記憶體209。
藉由如此設計，去區塊濾波器206，係可對正交轉換略過區塊及非正交轉換略過區塊之交界，進行會施加較強去區塊濾波器的濾波處理。因此，可更加抑制畫質的降低。亦即，影像解碼裝置200係可實現抑制編碼．解碼所致之畫質的降低。換言之，影像解碼裝置200係可實現編碼效率的提升。
[解碼處理之流程]
接著說明如以上之影像解碼裝置200所執行的各處理的流程。首先，參照圖21的流程圖，說明解碼處理的流程例。
解碼處理一旦開始，則於步驟S201中，積存緩衝區201係將所被傳輸過來的位元串流，加以積存。於步驟S202中，可逆解碼部202係將從積存緩衝區201所供給之位元串流(已被編碼之差分影像資訊)，加以解碼。亦即，已被圖1之可逆編碼部106所編碼的I圖像、P圖 像、以及B圖像，會被解碼。
此時，標頭資訊等之位元串流中所含有的差分影像資訊以外的各種資訊，也被解碼。於步驟S203中，逆正交轉換略過部221的TransformSkipFlag緩衝區231，係取得可逆解碼部202中所抽出的略過識別資訊(TransformSkipFlag)。逆正交轉換略過部221的控制訊號產生部232，係基於此略過識別資訊(TransformSkipFlag)，來生成控制訊號，並將該控制訊號，供給至權重係數生成部242、逆正交轉換部204、及交界判定部251。
於步驟S204中，逆量化部203係將藉由步驟S202之處理所得到的已被量化之係數，進行逆量化。於步驟S205中，逆正交轉換部204係將步驟S204中已被逆量化之係數，因應需要而進行逆正交轉換。
於步驟S206中，畫面內預測部211或是運動預測．補償部212，係進行預測處理，生成預測影像。亦即，以可逆解碼部202中所判定的，編碼之際所適用過的預測模式，來進行預測處理。更具體而言，例如，編碼之際適用了畫面內預測時，畫面內預測部211係以編碼之際被認為最佳的畫面內預測模式，來生成預測影像。又，例如，編碼之際適用了畫面間預測時，運動預測．補償部212係以編碼之際被認為最佳的畫面間預測模式，來生成預測影像。
於步驟S207中，演算部205係對步驟S205中被逆正交轉換所得到之差分影像資訊，加算至步驟 S206中所生成的預測影像。藉此，原本的影像就被解碼。
於步驟S208中，去區塊濾波器206，係對步驟S205中所得到之解碼影像，適宜進行去區塊濾波器處理。此外，此去區塊濾波器處理，係和編碼之際的去區塊濾波器處理同樣地進行。亦即，係和參照圖18的流程圖所說明的情況同樣地進行，因此該去區塊濾波器處理的細節的說明係省略。換言之，參照圖18之流程圖而上述的說明，係可準用成為此去區塊濾波器處理之說明。
於步驟S209中，畫面排序緩衝區207係進行，已在步驟S208中被濾波器處理的影像之排序。亦即，已被影像編碼裝置100的畫面排序緩衝區102為了進行編碼而排序過的畫格之順序，會被排序成原本的顯示順序。
於步驟S210中，D/A轉換部208係將步驟S209中將畫格之順序予以排序過的影像，進行D/A轉換。該影像係被輸出至未圖示的顯示器，而顯示出影像。
於步驟S211中，畫格記憶體209係將已在步驟S209中被濾波器處理的影像，加以記憶。
一旦步驟S211的處理結束，則解碼處理就會結束。
[逆量化處理之流程]
接著，將圖21之步驟S204中所執行的逆量化處理的 流程例，參照圖22的流程圖而加以說明。
一旦逆量化處理開始，則權重係數生成部242係於步驟S231中，判定目前區塊是否為正交轉換略過(TransformSkip)模式。
若判定為目前區塊是正交轉換略過(TransformSkip)模式，則處理係前進至步驟S232。於步驟S232中，權重係數生成部242係生成權重係數。一旦步驟S232之處理結束，則處理係前進至步驟S234。
又，於步驟S231中，若判定為目前區塊不是正交轉換略過(TransformSkip)模式，則處理係前進至步驟S233。於步驟S233中，權重係數生成部242係透過TransformSkipFlag緩衝區231而取得量化矩陣。一旦步驟S233之處理結束，則處理係前進至步驟S234。
於步驟S234中，逆量化部244係使用步驟S232中所生成之權重係數、或是步驟S233中所生成之量化矩陣，來進行逆量化。
一旦步驟S234的處理結束，則逆量化處理就結束，處理係回到圖21。
[逆正交轉換處理之流程]
接著，將圖21之步驟S205中所執行的逆正交轉換處理的流程例，參照圖23的流程圖而加以說明。
一旦逆正交轉換處理開始，則逆正交轉換部204係於步驟S251中，判定目前區塊是否為正交轉換略 過(TransformSkip)模式。
若判定為目前區塊是正交轉換略過(TransformSkip)模式，則結束逆正交轉換處理，處理係返回圖21。
又，於圖23的步驟S251中，若判定為目前區塊不是正交轉換略過(TransformSkip)模式，則處理係前進至步驟S252。於步驟S252中，逆正交轉換部204係將已被逆量化之係數，進行逆正交轉換。
一旦步驟S252的處理結束，則逆正交轉換處理就結束，處理係回到圖21。
藉由如以上所述般地執行各處理，影像解碼裝置200係可正確地將編碼資料予以解碼，可實現抑制編碼效率之降低，可實現抑制編碼．解碼所致之畫質的降低。
此外，於以上說明中，雖然說明了把略過許可資訊(transform_skip_enabled_flag)放在SPS中來傳輸，但傳輸略過許可資訊的方法係不限於此。
例如自然影像這類正交轉換略過(TransformSkip)並非有效的圖像、和含有字幕之影像這類含有會適用正交轉換略過(TransformSkip)之區塊的圖像，是存在於1個序列之中時，若以序列單位來許可正交轉換略過，則針對序列內的所有圖像的所有區塊，都必須要傳輸略過識別資訊(TransformSkipFlag)，是很沒效率的。若正交轉換略過是被禁止，則沒有必要傳輸略過識別資訊(TransformSkipFlag)。因此，尤其在正交轉換略過(TransformSkip)會被適用之區 塊在圖像中的含有比率越少的情況下，越有可能造成無謂的編碼效率之降低。
因此，正交轉換略過的許可，係不限於序列單位，亦可用比序列單位各細緻的單位來加以指定，較為理想。因此，略過許可資訊係亦可除了放在SPS以外，還可例如放在PPS或切片標頭(Slice Header)等位元串流的任意位置中來傳輸。當然，亦可有別於位元串流而另外傳輸。
此外，於以上說明中，雖然說明了由使用者等來設定略過許可資訊(transform_skip_enabled_flag)的設計，但此略過許可資訊(transform_skip_enabled_flag)的設定方法(正交轉換略過的許可．禁止的控制方法)係為任意。例如，亦可隨著編碼對象影像的內容來設定。
例如，亦可設計成，在初期狀態下是禁止正交轉換略過，以EPG(Electronic Program Guide)等，偵測出節目的類型，若其係為卡通動畫，則設定會許可正交轉換略過的略過許可資訊(transform_skip_enabled_flag)。如此，亦可基於動態影像以外的資訊，來進行正交轉換略過的許可、禁止之控制。
又，亦可設計成，例如，在正交轉換略過是被許可之狀態(例如節目是卡通動畫時)下，會進行CM(廣告播送)之偵測，在CM播送中係禁止正交轉換略過，在節目播送中則許可正交轉換略過。如此，亦可解析動態影像之內容，基於該解析結果，來進行正交轉換略過的許 可、禁止之控制。
當然，進行如此控制之對象的內容(動態影像)係不限於播送內容。例如，亦可為硬碟或Blu-ray(註冊商標)碟片等之記錄媒體中所記錄的內容，亦可為透過網際網路等之電氣通訊線路而從外部下載(或是串流再生)的內容。
<3.第3實施形態>
[略過許可資訊之傳輸控制]
順便一提，如上述，正交轉換略過係可對4×4的亮度正交轉換區塊(亮度成分之TU)或4×4的色差正交轉換區塊(色差成分之TU)做適用。
相對於此，例如在HEVC等中，是藉由log2_min_transform_block_size_minus2此一語法(syntax)來指定TU的最小尺寸。例如，在圖4所示的序列參數集(SPS)中，是藉由從下數來第6行所示的log2_min_transform_block_size_minus2，來指定TU的最小尺寸。
若被此log2_min_transform_block_size_minus2所指定之TU的最小尺寸是大於4×4，則4×4的正交轉換區塊(TU)就會變成不存在。亦即，此時，正交轉換略過(TransformSkip)就不會被適用。因此，沒有必要傳輸用來表示是否許可正交轉換略過(TransformSkip)(enable/disable)的略過許可資訊(transform_skip_enabled_flag)。換言之， 明明TU的最小尺寸是大於4×4，但若傳輸略過許可資訊，則恐怕會導致資訊量無謂地增大，編碼效率無謂地降低。
於是，如此，當TU的最小尺寸大於4×4時，設計成亦可省略略過許可資訊之傳輸。換言之，只有當TU的最小尺寸是4×4(以下)時(僅當尺寸4×4的TU存在時)，才傳輸略過許可資訊。
[利用序列參數集的傳輸]
略過許可資訊(transform_skip_enabled_flag)的傳輸方法係為任意。例如，亦可放在序列參數集(SPS)中來傳輸。此時的SPS的語法之例子的一部分，示於圖24。
如圖24所示，在圖24中從上數來第5行中，設定有表示正交轉換區塊(TU)之最小尺寸的log2_min_transform_block_size_minus2。此log2_min_transform_block_size_minus2，係為對應於該SPS的序列中的表示正交轉換區塊(TU)之最小尺寸的語法(syntax)。
相對於此，如圖24中從下數來第5行所示，會確認TU的最小尺寸是否為4×4(if(log2_min_transform_block_size_minus2==0))，只有當TU的最小尺寸是4×4時，才如圖24中從下數來第4行所示，設定略過許可資訊(transform_skip_enabled_flag)。亦即，略過許可資訊係被控制成只有當TU的最小尺寸 是4×4時才會被傳輸，若非如此時則不被傳輸。此外，此時，略過許可資訊(transform_skip_enabled_flag)，係僅放在SPS中而被傳輸。又，當略過許可資訊(transform_skip_enabled_flag)被設定時，其值係基於例如使用者指示等任意的資訊，而被設定。
此外，此略過許可資訊的傳輸控制，係由可逆編碼部106所進行。藉由如此設計，影像編碼裝置100，係可僅在需要略過許可資訊時才傳輸，可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
[利用圖像參數集的傳輸]
又，略過許可資訊(transform_skip_enabled_flag)係亦可放在例如圖像參數集(PPS)中來傳輸。此時的PPS的語法之例子的一部分，示於圖25。
如圖25所示，在圖25中從上數來第3行中，設定有表示正交轉換區塊(TU)之最小尺寸的pps_log2_min_transform_block_size_minus2。此pps_log2_min_transform_block_size_minus2，係為對應於該PPS的圖像中的表示正交轉換區塊(TU)之最小尺寸的語法(syntax)。亦即，值使在SPS中有設定上述的log2_min_transform_block_size_minus2，在PPS中仍可設定此pps_log2_min_transform_block_size_minus2。但是，此時，略過許可資訊(transform_skip_enabled_flag)，係僅放在PPS中而被傳輸。
相對於此，如圖25中從上數來第4行所示，會確認TU的最小尺寸是否為4×4(if(pps_log2_min_transform_block_size_minus2==0))，只有當TU的最小尺寸是4×4時，才如圖25中從上數來第5行所示，設定略過許可資訊(transform_skip_enabled_flag)。亦即，此時也是，略過許可資訊係被控制成只有當TU的最小尺寸是4×4時才會被傳輸，若非如此時則不被傳輸。當略過許可資訊(transform_skip_enabled_flag)被設定時，其值係基於例如使用者指示等任意的資訊，而被設定。
此時也是，略過許可資訊的傳輸控制，係由可逆編碼部106所進行。藉由如此設計，影像編碼裝置100，係可僅在需要略過許可資訊時才傳輸，可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
此外，PPS中的pps_log2_min_transform_block_size_minus2的語法的位置，係不限於圖25的例子。
pps_log2_min_transform_block_size_minus2，係只要被設定在比略過許可資訊(transform_skip_enabled_flag)還要前面的位置上即可。藉由如此設計，就可使得SPS與PPS之間不具有剖析(parsing)之依存關係，可彼此獨立地解碼。
[利用切片標頭的傳輸]
甚至，雖然省略圖示，但略過許可資訊(transform_skip_enabled_flag)係亦可放在例如切片標頭(Slice Header)中來傳輸。
在切片標頭(Slice Header)中，不會被設定有log2_min_transform_block_size_minus2。在切片中，係適用該切片所屬之圖像的設定。亦即，PPS的pps_log2_min_transform_block_size_minus2會被參照。
在切片標頭(Slice Header)中，略過許可資訊係被設定如下。
if(pps_log2_min_transform_block_size_minus2==0){transcorm_skip_enabled_flag }
亦即，此時，略過許可資訊(transform_skip_enabled_flag)係和PPS同樣地被設定。但是，此時，略過許可資訊(transform_skip_enabled_flag)，係僅放在切片標頭中而被傳輸。
此時也是，略過許可資訊係被控制成只有當TU的最小尺寸是4×4時才會被傳輸，若非如此時則不被傳輸。又，當略過許可資訊(transform_skip_enabled_flag)被設定時，其值係基於例如使用者指示等任意的資訊，而被設定。甚至，略過許可資訊的傳輸控制，係由可逆編碼部106所進行。
藉由如此設計，影像編碼裝置100，係可僅在 需要略過許可資訊時才傳輸，可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
如以上所述，略過許可資訊的傳輸控制，係可用任意的單位來進行。當然，亦可為上述例子以外的單位。
[略過許可資訊生成處理的流程]
接著，將如以上的控制略過許可資訊之傳輸的略過許可資訊生成處理的流程例，參照圖26的流程圖來說明之。
此處理係只要是在正交轉換處理之前則無論在哪種時序上進行皆可，但例如，亦可在圖14的編碼處理的步驟S101中進行。
一旦開始略過許可資訊生成處理，則可逆編碼部106係於步驟S301中，設定log2_min_transform_block_size_minus2。
於步驟S302中，可逆編碼部106係判定最小的正交轉換區塊(TU)之尺寸是否為4×4(以下)。
若藉由步驟S301之處理而判定為log2_min_transform_block_size_minus2之值中被設定「0」、最小的正交轉換區塊(TU)之尺寸是4×4(以下)的情況下，則處理係前進至步驟S303。
於步驟S303中，可逆編碼部106係設定略過許可資訊(transform_skip_enabled_flag)。一旦步驟S303 的處理結束，則略過許可資訊生成處理就結束，處理係回到例如圖14的編碼處理。
又，於圖26的步驟S302中，若藉由步驟S301之處理而判定為log2_min_transform_block_size_minus2之值中被設定「1」以上、最小的正交轉換區塊(TU)之尺寸是大於4×4的情況下，則步驟S303之處理(略過許可資訊(transform_skip_enabled_flag)之設定)會被省略，略過許可資訊生成處理就結束，處理係回到例如圖14的編碼處理。
藉由如以上所述般地進行略過許可資訊生成處理，影像編碼裝置100係可抑制編碼效率的降低，可抑制編碼．解碼所致之畫質的降低。
此外，於圖26中，係雖然說明了在SPS中傳輸略過許可資訊時的略過許可資訊生成處理之流程，但即使在PPS或切片標頭中傳輸略過許可資訊的情況下，除了步驟S301中所設定的語法是PPS的pps_log2_min_transform_block_size_minus2這點以外，其餘基本上是和參照圖26所說明之情形相同，因此省略這些的說明。
[影像解碼裝置上的略過許可資訊之收訊]
在影像編碼裝置100中如以上所述般地控制略過許可資訊之傳輸的情況下，就會有略過許可資訊被傳輸的情形和不被傳輸的情形存在。因此，影像解碼裝置200亦可同 樣地，根據正交轉換區塊(TU)的最小尺寸之設定，來控制是否收取(是否接收)略過許可資訊。藉由如此設計，影像解碼裝置200係可抑制持續等待不被傳輸之略過許可資訊等之無謂的待機時間之增加。
亦即，影像解碼裝置200係和影像編碼裝置100的情形同樣地，參照放在SPS中而被傳輸的log2_min_transform_block_size_minus2、或放在PPS中而被傳輸的pps_log2_min_transform_block_size_minus2，基於其值(隨著TU的最小尺寸是否為4×4)，來控制是否接收略過許可資訊。此控制係例如，藉由影像解碼裝置200的可逆解碼部202所進行。
[略過許可資訊收訊處理的流程]
接著，將如以上的控制略過許可資訊之傳輸的略過許可資訊生成處理的流程例，參照圖27的流程圖來說明之。此處理係在取得略過識別資訊(TransformSkipFlag)之前(例如圖21的步驟S203之前)被進行即可。
一旦略過許可資訊收訊處理開始，則可逆解碼部202係於步驟S321中，可逆解碼部202係接收log2_min_transform_block_size_minus2。於步驟S322中，可逆解碼部202係基於該值，判定TU的最小尺寸是否為4×4(以下)。
若判定為log2_min_transform_block_size_minus2之值是「0」、TU的最小尺寸是4×4(以下)的情況下，則 處理係前進至步驟S323。於步驟S323中，可逆解碼部202係進行略過許可資訊(transform_skip_enabled_flag)之收訊。一旦步驟S323的處理結束，則略過許可資訊收訊處理就結束，處理係回到例如圖21的解碼處理。
又，於圖27的步驟S322中，若判定為log2_min_transform_block_size_minus2之值是「1」以上、TU的最小尺寸是大於4×4的情況下，則略過許可資訊收訊處理就結束，處理係回到例如圖21的解碼處理。
藉由如以上所述般地進行略過許可資訊收訊處理，影像解碼裝置200係可抑制編碼效率的降低，可實現抑制編碼．解碼所致之畫質的降低。
此外，於圖27中，係雖然說明了在SPS中傳輸略過許可資訊時的略過許可資訊生成處理之流程，但即使在PPS或切片標頭中傳輸略過許可資訊的情況下，除了步驟S321中所接收的語法是PPS的pps_log2_min_transform_block_size_minus2這點以外，其餘基本上是和參照圖27所說明之情形相同，因此省略這些的說明。
於以上說明中，雖然以HEVC編碼方式為基礎來說明，但本技術的適用範圍係不限於此，可適用於像是文獻2所提議的使用了正交轉換略過(TransformSkip)之編碼方式為基礎的任何影像資訊編碼裝置及解碼裝置。
<4.第4實施形態>
[對多視點影像編碼．多視點影像解碼之適用]
上述一連串處理，係可適用於多視點影像編碼．多視點影像解碼。圖28係圖示多視點影像編碼方式之一例。
如圖28所示，多視點影像，係含有複數視點之影像，該複數視點當中的所定1個視點之影像，係被指定成基礎視點的影像。基礎視點之影像以外的各視點之影像，係被當成非基礎視點之影像。
在進行如圖28所示的多視點影像編碼時，在各視點(同一視點)中，可求取量化參數的差分。
(1)base-view:
(1-1) dQP(base view)=Current_CU_QP(base view)-LCU_QP(base view)
(1-2) dQP(base view)=Current_CU_QP(base view)-Previsous_CU_QP(base view)
(1-3) dQP(base view)=Current_CU_QP(base view)-Slice_QP(base view)
(2)non-base-view:
(2-1) dQP(non-base view)=Current_CU_QP(non-base view)-LCU_QP(non-base view)
(2-2) dQP(non-base view)=CurrentQP(non-base view)-PrevisousQP(non-base view)
(2-3) dQP(non-base view)=Current_CU_QP(non-base view)-Slice_QP(non-base view)
在進行多視點影像編碼時，在各視點(不同視點)中，可求取量化參數的差分。
(3)base-view/ non-base view:
(3-1) dQP(inter-view)=Slice_QP(base view)-Slice_QP(non-base view)
(3-2) dQP(inter-view)=LCU_QP(base view)-LCU_QP(non-base view)
(4)non-base view / non-base view:
(4-1) dQP(inter-view)=Slice_QP(non-base view i)-Slice_QP(non-base view j)
(4-2) dQP(inter-view)=LCU_QP(non-base view i)-LCU_QP(non-base view j)
此時，亦可將上記(1)至(4)加以組合來使用。例如，在非基礎視點中係考慮，在基礎視點與非基礎視點之間是在切片層級上求取量化參數之差分的手法(將3-1與2-3做組合)、在基礎視點與非基礎視點之間是在LCU 層級上求取量化參數之差分的手法(將3-2與2-1做組合)。如此，藉由重複適用差分，在進行多視點編碼的情況下，也可提升編碼效率。
亦可和上述手法同樣地，對上記各dQP，設置用來識別值非0之dQP是否存在的旗標。
[多視點影像編碼裝置]
圖29係上述進行多視點影像編碼的多視點影像編碼裝置的圖示。如圖29所示，多視點影像編碼裝置600係具有：編碼部601、編碼部602、及多工化部603。
編碼部601，係將基礎視點影像予以編碼，生成基礎視點影像編碼串流。編碼部602，係將非基礎視點影像予以編碼，生成非基礎視點影像編碼串流。多工化部603，係將編碼部601中所生成之基礎視點影像編碼串流，和編碼部602中所生成之非基礎視點影像編碼串流，進行多工化，生成多視點影像編碼串流。
對該多視點影像編碼裝置600的編碼部601及編碼部602，可適用影像編碼裝置100(圖1)。此情況下，多視點影像編碼裝置600係將編碼部601所設定之量化參數與編碼部602所設定之量化參數的差分值加以設定，並傳輸之。
又，關於正交轉換處理之略過的處理，係亦可設計成在編碼部601及編碼部602之各者中，每視點地彼此獨立進行。又，關於量化或去區塊濾波器等之處理也 是，亦可設計成在編碼部601及編碼部602之各者中，每視點地彼此獨立進行。此情況下，量化矩陣、各種旗標、權重係數等之資訊，係例如，被含在每視點的編碼串流中，從編碼部601及編碼部602供給至多工化部603，在多工化部603中被多工化，被含在多視點影像編碼串流中而被傳輸至解碼側。
此外，亦可設計成，在編碼部601及編碼部602中，關於正交轉換處理之略過的處理、關於量化之處理、及關於去區塊濾波器之處理的部分或全部，其中一方會反映給另一方。又，於編碼部601及編碼部602中，略過許可資訊或略過識別資訊等關於正交轉換處理之略過的資訊、關於量化之資訊、關於去區塊濾波器之資訊的一部分或全部，係亦可共用。例如，亦可將編碼部601中所進行之對基礎視點影像的正交轉換略過之相關處理、量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)的部分或全部，供給至編碼部602，使其反映至編碼部602中所進行之對非基礎視點影像的這些處理。當然，亦可反之，將編碼部602中所進行之對非基礎視點影像的正交轉換略過之相關處理、量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)，供給至編碼部601，使其反映至編碼部601中所進行之對基礎視點影像的這些處理。
[多視點影像解碼裝置]
圖30係上述進行多視點影像解碼的多視點影像解碼裝置的圖示。如圖30所示，多視點影像解碼裝置610係具有：逆多工化部611、解碼部612、及解碼部613。
逆多工化部611，係將基礎視點影像編碼串流與非基礎視點影像編碼串流所多工化而成的多視點影像編碼串流，進行逆多工化，抽出基礎視點影像編碼串流、和非基礎視點影像編碼串流。解碼部612，係將已被逆多工化部611所抽出的基礎視點影像編碼串流予以解碼，獲得基礎視點影像。解碼部613，係將已被逆多工化部611所抽出的非基礎視點影像編碼串流予以解碼，獲得非基礎視點影像。
對該多視點影像解碼裝置610的解碼部612及解碼部613，可適用影像解碼裝置200(圖19)。此情況下，多視點影像解碼裝置610的解碼部612及解碼部613，係根據多視點影像編碼裝置600的編碼部601所設定之量化參數與編碼部602所設定之量化參數的差分值，來設定量化參數，進行逆量化。
又，關於正交轉換處理之略過的處理，係亦可設計成在解碼部612及解碼部613之各者中，彼此獨立進行。又，關於逆量化或去區塊濾波器等之處理也是，亦可設計成在解碼部612及解碼部613之各者中，彼此獨立進行。此情況下，被含在多視點影像編碼串流中而從編碼側傳輸過來的量化矩陣、各種旗標、權重係數等之資訊，係在逆多工部611中被每一視點地分離，被含在每視點的 編碼串流中而供給至解碼部612及解碼部613。
此外，亦可設計成，在解碼部612及解碼部613中，關於逆正交轉換處理之略過的處理、關於逆量化之處理、及關於去區塊濾波器之處理的部分或全部，其中一方會反映給另一方。又，於解碼部612及解碼部613中，略過許可資訊或略過識別資訊等關於逆正交轉換處理之略過的資訊、關於逆量化之資訊、關於逆去區塊濾波器之資訊的一部分或全部，係亦可共用。例如，亦可將解碼部612中所進行之對基礎視點影像編碼串流的逆正交轉換略過之相關處理、逆量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)的部分或全部，供給至解碼部613，使其反映至解碼部613中所進行之對非基礎視點影像編碼串流的這些處理(例如省略重複之處理等)。當然，亦可反之，亦可將解碼部613中所進行之對非基礎視點影像編碼串流的逆正交轉換略過之相關處理、逆量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)，供給至解碼部612，使其反映至解碼部612中所進行之對基礎視點影像編碼串流的這些處理(例如省略重複之處理等)。
<5.第5實施形態>
[階層影像編碼．階層影像解碼之適用]
上述一連串處理，係可適用於階層影像編碼．階層影像解碼。圖31係圖示多視點影像編碼方式之一例。
如圖31所示，階層影像，係含有複數階層(解析度)之影像，該複數解析度之中的所定1個階層的影像，係被指定成基礎圖層之影像。基礎圖層影像以外的各階層之影像，係被當成非基礎圖層之影像。
在進行如圖31所示的階層影像編碼(空間可調性)的情況下，於各圖層(同一圖層)中，亦可求取量化參數之差分。
(1)base-layer:
(1-1)dQP(base layer)=Current_CU_QP(base layer)-LCU_QP(base layer)
(1-2)dQP(base layer)=Current_CU_QP(base layer)-Previsous_CU_QP(base layer)
(1-3)dQP(base layer)=Current_CU_QP(base layer)-Slice_QP(base layer)
(2)non-base-layer:
(2-1)dQP(non-base layer)=Current_CU_QP(non-base layer)-LCU_QP(non-base layer)
(2-2)dQP(non-base layer)=CurrentQP(non-base layer)-PrevisousQP(non-base layer)
(2-3)dQP(non-base layer)=Current_CU_QP(non-base layer)-Slice_QP(non-base layer)
在進行階層編碼時，在各圖層(不同圖層)中，可求取量化參數的差分。
(3)base-layer/ non-base layer:
(3-1)dQP(inter-layer)=Slice_QP(base layer)-Slice_QP(non-base layer)
(3-2)dQP(inter-layer)=LCU_QP(base layer)-LCU_QP(non-base layer)
(4)non-base layer / non-base layer:
(4-1)dQP(inter-layer)=Slice_QP(non-base layer i)-Slice_QP(non-base layer j)
(4-2)dQP(inter-layer)=LCU_QP(non-base layer i)-LCU_QP(non-base layer j)
此時，亦可將上記(1)至(4)加以組合來使用。例如，在非基礎圖層中係考慮，在基礎圖層與非基礎圖層之間是在切片層級上求取量化參數之差分的手法(將3-1與2-3做組合)、在基礎圖層與非基礎圖層之間是在LCU層級上求取量化參數之差分的手法(將3-2與2-1做組合)。如此，藉由重複適用差分，在進行階層編碼的情況下，也可提升編碼效率。
亦可和上述手法同樣地，對上記各dQP，設置用來識別值非0之dQP是否存在的旗標。
[階層影像編碼裝置]
圖32係上述進行階層影像編碼的階層影像編碼裝置的圖示。如圖32所示，階層影像編碼裝置620係具有：編碼部621、編碼部622、及多工化部623。
編碼部621，係將基礎圖層影像予以編碼，生成基礎圖層影像編碼串流。編碼部622，係將非基礎圖層影像予以編碼，生成非基礎圖層影像編碼串流。多工化部623，係將編碼部621中所生成之基礎圖層影像編碼串流，和編碼部622中所生成之非基礎圖層影像編碼串流，進行多工化，生成階層影像編碼串流。
對該階層影像編碼裝置620的編碼部621及編碼部622，可適用影像編碼裝置100(圖1)。此情況下，階層影像編碼裝置620係將編碼部621所設定之量化參數與編碼部622所設定之量化參數的差分值加以設定，並傳輸之。
又，關於正交轉換處理之略過的處理，係亦可設計成在編碼部621及編碼部622之各者中，每圖層地彼此獨立進行。又，關於量化或去區塊濾波器等之處理也是，亦可設計成在編碼部621及編碼部622之各者中，每圖層地彼此獨立進行。此情況下，量化矩陣、各種旗標、權重係數等之資訊，係例如，被含在每圖層的編碼串流 中，從編碼部621及編碼部622供給至多工化部623，在多工化部623中被多工化，被含在階層影像編碼串流中而被傳輸至解碼側。
此外，亦可設計成，在編碼部621及編碼部622中，關於正交轉換處理之略過的處理、關於量化之處理、及關於去區塊濾波器之處理的部分或全部，其中一方會反映給另一方。又，於編碼部621及編碼部622中，略過許可資訊或略過識別資訊等關於正交轉換處理之略過的資訊、關於量化之資訊、關於去區塊濾波器之資訊的一部分或全部，係亦可共用。例如，亦可將編碼部621中所進行之對基礎圖層影像的正交轉換略過之相關處理、量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)的部分或全部，供給至編碼部622，使其反映至編碼部622中所進行之對非基礎圖層影像的這些處理(例如省略重複之處理等)。當然，亦可反之，將編碼部622中所進行之對非基礎圖層影像的正交轉換略過之相關處理、量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)，供給至編碼部621，使其反映至編碼部621中所進行之對基礎圖層影像的這些處理(例如省略重複之處理等)。
[階層影像解碼裝置]
圖33係上述進行階層影像解碼的階層影像解碼裝置的圖示。如圖33所示，階層影像解碼裝置630係具有：逆多工化部631、解碼部632、及解碼部633。
逆多工化部631，係將基礎圖層影像編碼串流與非基礎圖層影像編碼串流所多工化而成的階層影像編碼串流，進行逆多工化，抽出基礎圖層影像編碼串流、和非基礎圖層影像編碼串流。解碼部632，係將已被逆多工化部631所抽出的基礎圖層影像編碼串流予以解碼，獲得基礎圖層影像。解碼部633，係將已被逆多工化部631所抽出的非基礎圖層影像編碼串流予以解碼，獲得非基礎圖層影像。
對該階層影像解碼裝置630的解碼部632及解碼部633，可適用影像解碼裝置200(圖19)。此情況下，階層影像解碼裝置630的解碼部632及解碼部633，係根據階層影像編碼裝置620的編碼部621所設定之量化參數與編碼部622所設定之量化參數的差分值，來設定量化參數，進行逆量化。
又，關於正交轉換處理之略過的處理，係亦可設計成在解碼部632及解碼部633之各者中，彼此獨立進行。又，關於逆量化或去區塊濾波器等之處理也是，亦可設計成在解碼部632及解碼部633之各者中，彼此獨立進行。此情況下，被含在階層影像編碼串流中而從編碼側傳輸過來的量化矩陣、各種旗標、權重係數等之資訊，係在逆多工部631中被每一圖層地分離，被含在每圖層的編碼串流中而供給至解碼部632及解碼部633。
此外，亦可設計成，在解碼部632及解碼部633中，關於逆正交轉換處理之略過的處理、關於逆量化 之處理、及關於去區塊濾波器之處理的部分或全部，其中一方會反映給另一方。又，於解碼部632及解碼部633中，略過許可資訊或略過識別資訊等關於逆正交轉換處理之略過的資訊、關於逆量化之資訊、關於逆去區塊濾波器之資訊的一部分或全部，係亦可共用。例如，亦可將解碼部632中所進行之對基礎圖層影像編碼串流的逆正交轉換略過之相關處理、逆量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)的部分或全部，供給至解碼部633，使其反映至解碼部633中所進行之對非基礎圖層影像編碼串流的這些處理(例如省略重複之處理等)。當然，亦可反之，亦可將解碼部633中所進行之對非基礎圖層影像編碼串流的逆正交轉換略過之相關處理、逆量化處理、及去區塊濾波器處理等之處理結果(或所得到之資訊等)，供給至解碼部632，使其反映至解碼部632中所進行之對基礎視點影像編碼串流的這些處理(例如省略重複之處理等)。
又，本技術係可適用於，例如，將像是MPEG、H.26x等這類藉由離散餘弦轉換等之正交轉換與運動補償所壓縮而成的影像資訊(位元串流)，透過衛星播送、有線電視、網際網路、或行動電話機等之網路媒介而收訊時所使用的影像編碼裝置及影像解碼裝置。又，本技術係可適用於，在光、磁碟、及快閃記憶體這類記憶媒體上進行處理之際所使用的影像編碼裝置及影像解碼裝置。再者，本技術係亦可適用於，這些影像編碼裝置及影像解碼裝置等 中所含有的量化裝置或是逆量化裝置。
<6.第6實施形態>
[電腦]
上述之一連串之處理，係可藉由硬體來執行，亦可藉由軟體來執行。在以軟體來執行一連串之處理時，構成該軟體的程式，係可安裝至電腦。此處，電腦係包含：被組裝在專用硬體中的電腦、或藉由安裝各種程式而可執行各種機能的例如通用之個人電腦等。
圖34係以程式來執行上述一連串處理的電腦的硬體之構成例的區塊圖。
於圖34所示的電腦800中，CPU(Central Processing Unit)801、ROM(Read Only Memory)802、RAM(Random Access Memory)803，係透過匯流排804而被彼此連接。
匯流排804，係還連接著輸出入介面810。輸出入介面810上係連接有：輸入部811、輸出部812、記憶部813、通訊部814、及驅動機815。
輸入部811，係例如由鍵盤、滑鼠、麥克風、觸控面板、輸入端子等所成。輸出部812係由例如顯示器、揚聲器、輸出端子等所成。記憶部813，係由例如硬碟、RAM碟、非揮發性記憶體等所成。通訊部814係由例如網路介面所成。驅動機815係驅動：磁碟、光碟、光磁碟、或半導體記憶體等之可移除式媒體821。
在如以上構成的電腦中，藉由CPU801而例如將記憶部813中所記憶之程式透過輸出入介面810及匯流排804，而載入至RAM803裡並加以執行，就可進行上述一連串處理。RAM803中，還適宜地記憶著CPU801在執行各種處理時所必需的資料等。
電腦(CPU801)所執行的程式，係可記錄在例如封裝媒體等之可移除式媒體821中而適用。又，程式係可透過區域網路、網際網路、數位衛星播送這類有線或無線的傳輸媒介而提供。
在電腦中，程式係藉由將可移除式媒體821裝著至驅動機815，就可透過輸出入介面810，安裝至記憶部813。又，程式係可透過有線或無線之傳輸媒體，以通訊部814接收之，安裝至記憶部813。除此以外，程式係可事前安裝在ROM802或記憶部813中。
此外，電腦所執行的程式，係可為依照本說明書所說明之順序而在時間序列上進行處理的程式，也可平行地、或呼叫進行時等必要之時序上進行處理的程式。
此外，在本說明書中，雖然記述記錄媒體中所記錄之程式的步驟，是按照記載的順序而在時間序列上順序進行之處理，但當然並不一定要是時間序列上的處理，亦包含平行或個別執行之處理。
又，於本說明書中，所謂的系統，係意味著複數構成要素(裝置、模組(零件)等)的集合，所有構成要素是否位於同一框體內則在所不問。因此，被收納在個別 的框體中，透過網路而連接的複數台裝置、及在1個框體中收納有複數模組的1台裝置，均為系統。
又，於以上說明中，亦可將以1個裝置(或處理部)做說明的構成加以分割，成為複數裝置(或處理部)而構成之。反之，亦可將以上說明中以複數裝置(或處理部)做說明的構成總結成1個裝置(或處理部)而構成之。又，對各裝置(或各處理部)之構成，當然亦可附加上述以外之構成。再者，若系統全體的構成或動作是實質上相同，則亦可使某個裝置(或處理部)之構成的一部分被包含在其他裝置(或其他處理部)之構成中。
以上雖然一面參照添附圖面一面詳細說明了本揭露的理想實施形態，但本揭露之技術範圍並非限定於所述例子。只要是本揭露之技術領域中具有通常知識者，自然可於申請專利範圍中所記載之技術思想的範疇內，想到各種變更例或修正例，而這些當然也都屬於本揭露的技術範圍。
例如，本技術係亦可將1個機能，透過網路而分擔給複數台裝置，採取共通進行處理的雲端運算之構成。
又，上述的流程圖中所說明的各步驟，係可由1台裝置來執行以外，亦可由複數台裝置來分擔執行。
甚至，若1個步驟中含有複數處理的情況下，該1個步驟中所含之複數處理，係可由1台裝置來執行以外，也可由複數台裝置來分擔執行。
上述實施形態所述之影像編碼裝置及影像解碼裝置，係可應用於衛星播送、有線TV等之有線播送、網際網路上的配送、及藉由蜂巢基地台通訊而對終端支配送等的送訊機或是收訊機，在光碟、磁碟及快閃記憶體等之媒體中記錄影像的記錄裝置、或從這些記憶媒體中再生出影像的再生裝置等各式各樣的電子機器。以下說明4個應用例。
<7.應用例>
[第1應用例：電視受像機]
圖35係圖示了適用上述實施形態的電視裝置的概略構成之一例。電視裝置900係具備：天線901、選台器902、解多工器903、解碼器904、映像訊號處理部905、顯示部906、聲音訊號處理部907、揚聲器908、外部介面部909、控制部910、使用者介面911、及匯流排912。
選台器902，係從透過天線901所接收之播送訊號中，抽出所望頻道之訊號，並將所抽出之訊號予以解調。然後，選台器902係將解調所得到之編碼位元串流，輸出至解多工器903。亦即，選台器902係將影像所被編碼而成的編碼串流予以接收，具有電視裝置900中的傳輸部之功能。
解多工器903係從編碼位元串流中分離出視聽對象之節目的映像串流及聲音串流，將所分離之各串流，輸出至解碼器904。又，解多工器903，係從編碼位 元串流中抽出EPG(Electronic Program Guide)等輔助性資料，將所抽出的資料，供給至控制部910。此外，解多工器903係當編碼位元串流是有被擾頻時，則亦可進行去擾頻。
解碼器904，係將從解多工器903所輸入的映像串流及聲音串流，予以解碼。然後，解碼器904係將解碼處理所生成之映像資料，輸出至映像訊號處理部905。又，解碼器904係將解碼處理所生成之聲音資料，輸出至聲音訊號處理部907。
映像訊號處理部905，係將從解碼器904所輸入之映像資料予以再生，在顯示部906上顯示出映像。又，映像訊號處理部905，係亦可將透過網路而供給之應用程式畫面，顯示在顯示部906。又，映像訊號處理部905，係亦可針對映像資料，隨應於設定，而進行例如雜訊去除等之追加的處理。甚至，映像訊號處理部905係亦可生成例如選單、按鈕或游標等之GUI(Graphical User Interface)的影像，將所生成之影像重疊至輸出影像。
顯示部906，係受從映像訊號處理部905所供給之驅動訊號所驅動，在顯示裝置(例如液晶顯示器、電漿顯示器或OELD(Organic ElectroLuminescence Display)(有機EL顯示器)等)之映像面上，顯示出映像或影像。
聲音訊號處理部907，係針對從解碼器904所輸入的聲音資料，進行D/A轉換及增幅等之再生處理，使聲音從揚聲器908輸出。又，聲音訊號處理部907，係亦 可針對聲音資料，進行雜訊去除等之追加的處理。
外部介面909，係為用來連接電視裝置900與外部機器或網路所需的介面。例如，透過外部介面909所接收之映像串流或聲音串流，係亦可被解碼器904所解碼。亦即，外部介面909係亦為將影像所被編碼而成的編碼串流予以接收，具有電視裝置900中的傳輸部之功能。
控制部910係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著，被CPU所執行之程式、程式資料、EPG資料、及透過網路所取得之資料等。被記憶體所記憶的程式，係例如在電視裝置900啟動時被CPU讀取、執行。CPU係藉由執行程式，而隨應於從例如使用者介面911所輸入的操作訊號，來控制電視裝置900的動作。
使用者介面911，係和控制部910連接。使用者介面911係具有例如，用來讓使用者操作電視裝置900所需的按鈕及開關、以及遙控訊號的收訊部等。使用者介面911，係偵測透過這些構成要素而由使用者所做之操作，生成操作訊號，將所生成之操作訊號，輸出至控制部910。
匯流排912，係將選台器902、解多工器903、解碼器904、映像訊號處理部905、聲音訊號處理部907、外部介面909及控制部910，彼此連接。
在如此構成的電視裝置900中，解碼器904係具有上述實施形態所述之影像解碼裝置的機能。藉此， 電視裝置900上的影像的解碼之際，可實現抑制編碼效率之降低，可實現編碼．解碼所致之畫質降低的抑制。
[第2應用例：行動電話機]
圖36係圖示了適用上述實施形態的行動電話機的概略構成之一例。行動電話機920係具備：天線921、通訊部922、聲音編解碼器923、揚聲器924、麥克風925、攝影機部926、影像處理部927、多工分離部928、記錄再生部929、顯示部930、控制部931、操作部932、及匯流排933。
天線921係被連接至通訊部922。揚聲器924及麥克風925係被連接至聲音編解碼器923。操作部932，係被連接至控制部931。匯流排933係將通訊部922、聲音編解碼器923、攝影機部926、影像處理部927、多工分離部928、記錄再生部929、顯示部930、及控制部931，彼此連接。
行動電話機920，係在包含語音通話模式、資料通訊模式、攝影模式及電視電話模式的各種動作模式下，進行聲音訊號之收送訊、電子郵件或影像資料之收送訊、影像之攝影、及資料之記錄等動作。
於語音通話模式中，由麥克風925所生成的類比聲音訊號，係被供給至聲音編解碼器923。聲音編解碼器923，係將類比聲音訊號轉換成聲音資料，將已被轉換之聲音資料，進行A/D轉換並壓縮。然後，聲音編解碼 器923係將壓縮後的聲音資料，輸出至通訊部922。通訊部922，係將聲音資料進行編碼及調變，生成送訊訊號。然後，通訊部922係將已生成之送訊訊號，透過天線921而發送至基地台(未圖示)。又，通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換，取得收訊訊號。然後，通訊部922，係將收訊訊號進行解調及解碼而生成聲音資料，將已生成之聲音資料，輸出至聲音編解碼器923。聲音編解碼器923，係將聲音資料進行解壓縮及D/A轉換，生成類比聲音訊號。然後，聲音編解碼器923係將已生成之聲音訊號，供給至揚聲器924而輸出聲音。
又，在資料通訊模式下，例如，控制部931係隨應於使用者透過操作部932所做的操作，來生成構成電子郵件的文字資料。又，控制部931係將文字顯示在顯示部930。又，控制部931，係隨應於透過操作部932而從使用者下達的送訊指示而生成電子郵件資料，將已生成之電子郵件資料，輸出至通訊部922。通訊部922，係將電子郵件資料進行編碼及調變，生成送訊訊號。然後，通訊部922係將已生成之送訊訊號，透過天線921而發送至基地台(未圖示)。又，通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換，取得收訊訊號。然後，通訊部922係將收訊訊號進行解調及解碼以復原出電子郵件資料，將已復原之電子郵件資料，輸出至控制部931。控制部931，係令顯示部930顯示出電子郵件的內容，同時，令電子郵件資料被記憶至記錄再生部929的記 憶媒體。
記錄再生部929，係具有可任意讀寫的記憶媒體。例如，記憶媒體係可為RAM或快閃記憶體等之內建型的記憶媒體，亦可為硬碟、磁碟、光磁碟、光碟、USB(Unallocated Space Bitmap)記憶體、或記憶卡等之外部裝著型的記憶媒體。
又，於攝影模式中，例如，攝影機部926係拍攝被攝體而生成影像資料，將已生成之影像資料，輸出至影像處理部927。影像處理部927，係將從攝影機部926所輸入之影像資料予以編碼，使編碼串流被記憶至記憶再生部929的記憶媒體中。
又，於電視電話模式中，例如，多工分離部928係將已被影像處理部927所編碼之映像串流、和從聲音編解碼器923所輸入之聲音串流，進行多工化，將已多工化之串流，輸出至通訊部922。通訊部922，係將串流進行編碼及調變，生成送訊訊號。然後，通訊部922係將已生成之送訊訊號，透過天線921而發送至基地台(未圖示)。又，通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換，取得收訊訊號。這些送訊訊號及收訊訊號中係可含有編碼位元串流。然後，通訊部922係將收訊訊號進行解調及解碼以復原出串流，將已復原之串流，輸出至多工分離部928。多工分離部928係從所被輸入之串流中，分離出映像串流及聲音串流，將映像串流輸出至影像處理部927、將聲音串流輸出至聲音編解碼器 923。影像處理部927，係將映像串流予以解碼，生成映像資料。映像資料係被供給至顯示部930，藉由顯示部930而顯示出一連串之影像。聲音編解碼器923，係將聲音串流進行解壓縮及D/A轉換，生成類比聲音訊號。然後，聲音編解碼器923係將已生成之聲音訊號，供給至揚聲器924而輸出聲音。
在如此構成的行動電話機920中，影像處理部927係具有上述實施形態所述之影像編碼裝置及影像解碼裝置的機能。藉此，在行動電話機920上的影像的編碼及解碼之際，可抑制編碼效率之降低，可抑制編碼．解碼所致之畫質降低。
[第3應用例：記錄再生裝置]
圖37係圖示了適用上述實施形態的記錄再生裝置的概略構成之一例。記錄再生裝置940係例如，將所接收之播送節目的聲音資料及映像資料進行編碼，而記錄至記錄媒體。又，記錄再生裝置940係亦可，例如，將從其他裝置所取得之聲音資料及映像資料進行編碼，而記錄至記錄媒體。又，記錄再生裝置940係例如，隨應於使用者之指示，將記錄媒體中所記錄之資料，在監視器及揚聲器上進行再生。此時，記錄再生裝置940，係將聲音資料及映像資料予以解碼。
記錄再生裝置940係具備：選台器941、外部介面942、編碼器943、HDD(Hard Disk Drive)944、碟片 驅動機945、選擇器946、解碼器947、OSD(On-Screen Display)948、控制部949、及使用者介面950。
選台器941，係從透過天線(未圖示)所接收之播送訊號中，抽出所望頻道之訊號，並將所抽出之訊號予以解調。然後，選台器941係將解調所得到之編碼位元串流，輸出至選擇器946。亦即，選台器941係具有記錄再生裝置940中的傳輸部之功能。
外部介面942，係為用來連接記錄再生裝置940與外部機器或網路所需的介面。外部介面942係可為例如IEEE1394介面、網路介面、USB介面、或快閃記憶體介面等。例如，透過外部介面942所接收之映像資料及聲音資料，係被輸入至編碼器943。亦即，外部介面942係具有記錄再生裝置940中的傳輸部之功能。
編碼器943，係當從外部介面942所輸入之映像資料及聲音資料是未被編碼的情況下，則將映像資料及聲音資料予以編碼。然後，編碼器943係將編碼位元串流，輸出至選擇器946。
HDD944，係將映像及聲音等之內容資料所被壓縮而成的編碼位元串流、各種程式及其他資料，記錄在內部的硬碟裡。又，HDD944係在映像及聲音之再生時，將這些資料從硬碟中讀出。
碟片驅動機945，係對所裝著之記錄媒體，進行資料記錄及讀出。被裝著在碟片驅動機945的記錄媒體，係可為例如DVD碟片(DVD-Video、DVD-RAM、 DVD-R、DVD-RW、DVD+R、DVD+RW等)或Blu-ray(註冊商標)碟片等。
選擇器946，係在映像及聲音之記錄時，係選擇從選台器941或編碼器943所輸入的編碼位元串流，將已選擇之編碼位元串流，輸出至HDD944或碟片驅動機945。又，選擇器946，係在映像及聲音之再生時，將從HDD944或碟片驅動機945所輸入之編碼位元串流，輸出至解碼器947。
解碼器947，係將編碼位元串流予以解碼，生成映像資料及聲音資料。然後，解碼器947係將已生成之映像資料，輸出至OSD948。又，解碼器904係將已生成之聲音資料，輸出至外部的揚聲器。
OSD948，係將從解碼器947所輸入之映像資料予以再生，顯示出映像。又，OSD948係亦可對所顯示之映像，重疊上例如選單、按鈕或游標等之GUI的影像。
控制部949係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著CPU所執行的程式、及程式資料等。被記憶體所記憶的程式，係例如在記錄再生裝置940啟動時被CPU讀取、執行。CPU係藉由執行程式，而隨應於從例如使用者介面950所輸入的操作訊號，來控制記錄再生裝置940的動作。
使用者介面950，係和控制部949連接。使用者介面950係具有例如，用來讓使用者操作記錄再生裝置 940所需的按鈕及開關、以及遙控訊號的收訊部等。使用者介面950，係偵測透過這些構成要素而由使用者所做之操作，生成操作訊號，將所生成之操作訊號，輸出至控制部949。
在如此構成的記錄再生裝置940中，編碼器943係具有上述實施形態所述之影像編碼裝置的機能。又，解碼器947係具有上述實施形態所述之影像解碼裝置的機能。藉此，在記錄再生裝置940上的影像的編碼及解碼之際，可抑制編碼效率之降低，可抑制編碼．解碼所致之畫質降低。
[第4應用例：攝像裝置]
圖38係圖示了適用上述實施形態的攝像裝置的概略構成之一例。攝像裝置960係拍攝被攝體而生成影像，將影像資料進行編碼，而記錄至記錄媒體。
攝像裝置960係具備：光學區塊961、攝像部962、訊號處理部963、影像處理部964、顯示部965、外部介面966、記憶體967、媒體驅動機968、OSD969、控制部970、使用者介面971、及匯流排972。
光學區塊961係被連接至攝像部962。攝像部962係被連接至訊號處理部963。顯示部965係被連接至影像處理部964。使用者介面971係被連接至控制部970。匯流排972係將影像處理部964、外部介面966、記憶體967、媒體驅動機968、OSD969、及控制部970，彼 此連接。
光學區塊961，係具有對焦透鏡及光圈機構等。光學區塊961，係使被攝體的光學像，成像在攝像部962的攝像面。攝像部962，係具有CCD(Charge Coupled Device)或CMOS(Complementary Metal Oxide Semiconductor)等之影像感測器，將成像在攝像面的光學像，藉由光電轉換而轉換成電氣訊號的影像訊號。然後，攝像部962係將影像訊號，輸出至訊號處理部963。
訊號處理部963，係對從攝像部962所輸入的影像訊號進行KNEE補正、γ補正、色彩補正等各種相機訊號處理。訊號處理部963，係將攝影機訊號處理後的影像資料，輸出至影像處理部964。
影像處理部964，係將從訊號處理部963所輸入的影像資料予以編碼，生成編碼資料。然後，影像處理部964，係將已生成之編碼資料，輸出至外部介面966或媒體驅動機968。又，影像處理部964，係將從外部介面966或媒體驅動機968所輸入之編碼資料予以解碼，生成影像資料。然後，影像處理部964係將已生成之影像資料，輸出至顯示部965。又，影像處理部964，係亦可將從訊號處理部963所輸入的影像資料，輸出至顯示部965而顯示出影像。又，影像處理部964，係亦可將從OSD969所取得之顯示用資料，重疊至對顯示部965輸出的影像上。
OSD969係生成例如選單、按鈕或游標等之 GUI的影像，將所生成之影像，輸出至影像處理部964。
外部介面966，係被構成為例如USB輸出入端子。外部介面966，係例如在影像的列印時，將攝像裝置960與印表機做連接。又，外部介面966上係因應需要而連接有驅動機。驅動機上係裝著有例如磁碟或光碟等之可移除式媒體，從可移除式媒體所讀出的程式，係可被安裝至攝像裝置960。甚至，外部介面966係還可被構成為連接LAN或網際網路等之網路的網路介面。亦即，外部介面966係具有攝像裝置960中的傳輸部之功能。
被裝著至媒體驅動機968的記錄媒體，係可為例如磁碟、光磁碟、光碟、或半導體記憶體等之可任意讀寫之可移除式媒體。又，亦可被構成為，記錄媒體是對媒體驅動機968固定裝著，例如，內建型硬碟機或SSD(Solid State Drive)這類非可移除式的記憶部。
控制部970係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著CPU所執行的程式、及程式資料等。被記憶體所記憶的程式，係例如在攝像裝置960啟動時被CPU讀取、執行。CPU係藉由執行程式，而隨應於從例如使用者介面971所輸入的操作訊號，來控制攝像裝置960的動作。
使用者介面971，係和控制部970連接。使用者介面971係具有例如，用來讓使用者操作攝像裝置960所需的按鈕及開關等。使用者介面971，係偵測透過這些構成要素而由使用者所做之操作，生成操作訊號，將所生 成之操作訊號，輸出至控制部970。
在如此構成的攝像裝置960中，影像處理部964係具有上述實施形態所述之影像編碼裝置及影像解碼裝置的機能。藉此，在攝像裝置960上的影像的編碼及解碼之際，可抑制編碼效率之降低，可抑制編碼．解碼所致之畫質降低。
此外，在本說明書中係說明了，略過許可資訊或略過識別資訊等之各種資訊，係被多工化至編碼串流，從編碼列被傳輸至解碼側的例子。然而，這些資訊的傳輸手法係不限定於所述例子。例如，這些資訊係亦可不被多工化至編碼位元串流，而是以與編碼位元串流建立關連之個別資料的方式而被傳輸或記錄。此處，「建立關連」之用語係意味著，位元串流中所含之影像(切片或區塊等，亦可為影像之一部分)和該當影像所對應之資訊進行解碼時使其能夠彼此連結的意思。亦即，資訊係可有別於影像(或位元串流)而在另外的傳輸路上進行傳輸。又，資訊係亦可有別於影像(或位元串流)而被記錄在另外的記錄媒體(或是同一記錄媒體的其他記錄區域)。甚至，資訊和影像(或位元串流)，係亦可以例如複數畫格、1畫格、或畫格內之一部分等之任意單位，而彼此關連。
以上雖然一面參照添附圖面一面詳細說明了本揭露的理想實施形態，但本揭露並非限定於所述例子。只要是本揭露所屬技術領域中具有通常知識者，自然可於申請專利範圍中所記載之技術思想的範疇內，想到各種變 更例或修正例，而這些當然也都屬於本揭露的技術範圍。
此外，本技術係亦可採取如下之構成。
(1)
一種影像處理裝置，其係具備：量化部，係使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將前記正交轉換略過區塊，進行量化；和編碼部，係將已被前記量化部所量化之前記正交轉換略過區塊的係數，予以編碼。
(2)
如(1)所記載之影像處理裝置，其中，前記量化部，係將空間領域之值，當作前記權重係數來使用。
(3)
如(2)所記載之影像處理裝置，其中，前記量化部，係使用1個前記權重係數。
(4)
如(2)所記載之影像處理裝置，其中，前記量化部，係將已進行過正交轉換處理之正交轉換區塊予以量化之際所使用的量化矩陣之直流成分，當作前記權重係數來使用。
(5)
如(2)所記載之影像處理裝置，其中，前記量化部，係使用將量化矩陣之直流成分進行了矩 陣化而成的權重係數矩陣，以將前記正交轉換略過區塊，進行量化。
(6)
如(1)所記載之影像處理裝置，其中，前記量化部，係使用將前記權重係數進行了矩陣化而成的權重係數矩陣，以將前記正交轉換略過區塊，進行量化。
(7)
如(1)所記載之影像處理裝置，其中，還具備：傳輸部，係將前記權重係數，以序列參數集或圖像參數集而予以傳輸。
(8)
如(1)所記載之影像處理裝置，其中，還具備：傳輸部，係將表示是否許可前記正交轉換處理之略過的略過許可資訊，以圖像參數集或切片標頭而予以傳輸。
(9)
如(8)所記載之影像處理裝置，其中，前記傳輸部，係只有在進行正交轉換之際的最小之區塊尺寸是4×4的情況下，才會傳輸前記略過許可資訊。
(10)
如(1)所記載之影像處理裝置，其中，還具備：傳輸部，係只有在進行正交轉換之際的最小之區塊尺寸是4×4的情況下，才會將前記略過許可資訊， 以序列參數集而予以傳輸。
(11)
如(10)所記載之影像處理裝置，其中，前記傳輸部，係若前記略過許可資訊是許可前記正交轉換處理之略過的值，則在前記略過許可資訊之後，傳輸前記權重係數。
(12)
一種影像處理方法，係屬於影像處理裝置的影像處理方法，其特徵為，由前記影像處理裝置，使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將前記正交轉換略過區塊，進行量化；將已被量化之前記正交轉換略過區塊的係數，予以編碼。
(13)
一種影像處理裝置，其係具備：濾波部，係把影像進行編碼處理之際曾經被本地解碼過之影像為對象，進行去區塊濾波；和控制部，係對正交轉換處理已被略過的正交轉換略過區塊與正交轉換處理有被進行過的正交轉換區塊之交界，控制前記濾波部所進行之去區塊濾波，以使去區塊濾波的強度提升；和編碼部，係使用被前記濾波部進行過去區塊濾波的 影像，而將前記影像予以編碼。
(14)
一種影像處理方法，係屬於影像處理裝置的影像處理方法，其特徵為，由前記影像處理裝置，把影像進行編碼處理之際曾經被本地解碼過之影像為對象，進行去區塊濾波；對正交轉換處理已被略過的正交轉換略過區塊與正交轉換處理有被進行過的正交轉換區塊之交界，控制去區塊濾波以使去區塊濾波的強度提升；使用進行過去區塊濾波的影像，而將前記影像予以編碼。
(15)
一種影像處理裝置，其係具備：解碼部，係將位元串流進行解碼處理以生成影像；和濾波部，係對前記解碼部所生成之影像，進行去區塊濾波；和控制部，係對正交轉換處理已被略過的正交轉換略過區塊與正交轉換處理有被進行過的正交轉換區塊之交界，控制前記濾波部所進行之去區塊濾波，以使去區塊濾波的強度提升。
(16)
一種影像處理方法，係屬於影像處理裝置的影像處理方法，其特徵為， 由前記影像處理裝置，將位元串流進行解碼處理而生成影像；對所生成之影像進行去區塊濾波；對正交轉換處理已被略過的正交轉換略過區塊與正交轉換處理有被進行過的正交轉換區塊之交界，控制去區塊濾波以使去區塊濾波的強度提升。
(21)
一種影像處理裝置，其係具備：解碼部，係將編碼資料予以解碼，生成已被量化之係數；和逆量化部，使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將前記解碼部所生成之前記正交轉換略過區塊的已被量化之係數，進行逆量化。
(22)
如(21)所記載之影像處理裝置，其中，前記逆量化部，係將空間領域之值，當作前記權重係數來使用。
(23)
如(22)所記載之影像處理裝置，其中，前記逆量化部，係使用1個前記權重係數。
(24)
如(23)所記載之影像處理裝置，其中，前記逆量化部，係將有進行過正交轉換處理的非正交轉換略過區塊的已被量化之係數進行逆量化之際所使用的 量化矩陣之直流成分，當作前記1個權重係數來使用。
(25)
如(24)所記載之影像處理裝置，其中，前記逆量化部，係使用將前記量化矩陣之直流成分進行了矩陣化而成的權重係數矩陣，以將前記正交轉換略過區塊的已被量化之係數，進行逆量化。
(26)
如(21)所記載之影像處理裝置，其中，前記逆量化部，係將區塊尺寸是4×4的正交轉換略過區塊的已被量化之係數，使用前記權重係數來進行逆量化。
(27)
如(21)所記載之影像處理裝置，其中，前記逆量化部，係將有進行過正交轉換處理的非正交轉換略過區塊的已被量化之係數，使用與前記權重係數進行了矩陣化而成之權重係數矩陣不同的量化矩陣，來進行逆量化。
(28)
如(21)所記載之影像處理裝置，其中，還具備：收取部，係將作為圖像參數集而被傳輸的、表示是否許可前記正交轉換處理之略過的略過許可資訊，予以收取。
(29)
如(28)所記載之影像處理裝置，其中， 前記收取部係還將所被傳輸之前記權重係數予以收取；前記逆量化部，係使用前記收取部所收取到的前記權重係數，來將前記正交轉換略過區塊的已被量化之係數，進行逆量化。
(30)
一種影像處理方法，係將編碼資料予以解碼，生成已被量化之係數；使用對正交轉換處理已被略過的正交轉換略過區塊所適用的權重係數，將已被生成之前記正交轉換略過區塊的已被量化之係數，進行逆量化。

Claims (9)

  1. 一種影像處理裝置，其係具備：解碼部，係將編碼資料予以解碼，生成已被量化之係數；和逆量化部，在對目前區塊的正交轉換處理是被略過的情況下，將前記解碼部所生成之前記目前區塊的所有已被量化之係數，使用相同的權重係數來進行逆量化。
  2. 如請求項1所記載之影像處理裝置，其中，前記逆量化部，係將空間領域之值，當作前記權重係數來使用。
  3. 如請求項1所記載之影像處理裝置，其中，前記逆量化部，係將有進行過正交轉換處理的非目前區塊的已被量化之係數進行逆量化之際所使用的量化矩陣之直流成分，當作前記1個權重係數來使用。
  4. 如請求項3所記載之影像處理裝置，其中，前記逆量化部，係使用將前記量化矩陣之直流成分進行了矩陣化而成的權重係數矩陣，以將前記目前區塊的已被量化之係數，進行逆量化。
  5. 如請求項1所記載之影像處理裝置，其中，前記逆量化部，係將區塊尺寸是4×4的目前區塊的已被量化之係數，使用前記權重係數來進行逆量化。
  6. 如請求項1所記載之影像處理裝置，其中，前記逆量化部，係將有進行過正交轉換處理的非目前區塊的已被量化之係數，使用與前記權重係數進行了矩陣 化而成之權重係數矩陣不同的量化矩陣，來進行逆量化。
  7. 如請求項1所記載之影像處理裝置，其中，還具備：收取部，係將作為圖像參數集而被傳輸的、表示是否許可前記正交轉換處理之略過的略過許可資訊，予以收取。
  8. 如請求項7所記載之影像處理裝置，其中，前記收取部係還將所被傳輸之前記權重係數予以收取；前記逆量化部，係使用前記收取部所收取到的前記權重係數，來將前記目前區塊的已被量化之係數，進行逆量化。
  9. 一種影像處理方法，係將編碼資料予以解碼，生成已被量化之係數；在對目前區塊的正交轉換處理是被略過的情況下，將已被生成之前記目前區塊的所有已被量化之係數，使用相同的權重係數來進行逆量化。
TW102119937A 2012-06-29 2013-06-05 Image processing apparatus and method TWI535222B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012147877 2012-06-29
JP2012153112 2012-07-06

Publications (2)

Publication Number Publication Date
TW201404169A TW201404169A (zh) 2014-01-16
TWI535222B true TWI535222B (zh) 2016-05-21

Family

ID=49783050

Family Applications (3)

Application Number Title Priority Date Filing Date
TW106112388A TWI627857B (zh) 2012-06-29 2013-06-05 Image processing device and method
TW102119937A TWI535222B (zh) 2012-06-29 2013-06-05 Image processing apparatus and method
TW105105467A TWI592011B (zh) 2012-06-29 2013-06-05 Image processing device and method

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW106112388A TWI627857B (zh) 2012-06-29 2013-06-05 Image processing device and method

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW105105467A TWI592011B (zh) 2012-06-29 2013-06-05 Image processing device and method

Country Status (14)

Country Link
US (3) US9894362B2 (zh)
EP (2) EP2879377A4 (zh)
JP (2) JPWO2014002897A1 (zh)
KR (2) KR20150034130A (zh)
CN (2) CN104380732B (zh)
AU (2) AU2013281945B2 (zh)
BR (2) BR112014032225B1 (zh)
CA (2) CA2874719A1 (zh)
MX (3) MX339913B (zh)
MY (2) MY172520A (zh)
RU (3) RU2641259C2 (zh)
TW (3) TWI627857B (zh)
WO (2) WO2014002895A1 (zh)
ZA (2) ZA201409423B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8625914B2 (en) * 2013-02-04 2014-01-07 Sony Corporation Image processing system, image processing method and program
TWI627857B (zh) * 2012-06-29 2018-06-21 Sony Corp Image processing device and method
CN115052155A (zh) * 2012-07-02 2022-09-13 韩国电子通信研究院 图像编码/解码方法和非暂时性计算机可读记录介质
GB2518823A (en) * 2013-09-25 2015-04-08 Sony Corp Data encoding and decoding
MY183347A (en) * 2013-09-30 2021-02-18 Japan Broadcasting Corp Image encoding device, image decoding device, and the programs thereof
KR102294016B1 (ko) * 2014-12-05 2021-08-25 성균관대학교산학협력단 변환생략을 참조하는 디블록킹 필터링을 이용한 영상의 부호화/복호화 방법 및 이를 이용하는 장치
KR20180006411A (ko) * 2015-06-07 2018-01-17 엘지전자 주식회사 디블록킹 필터링을 수행하는 방법 및 장치
US10139480B2 (en) * 2016-02-19 2018-11-27 Fujifilm Sonosite, Inc. Ultrasound transducer with data compression
WO2018123444A1 (ja) * 2016-12-28 2018-07-05 ソニー株式会社 画像処理装置及び画像処理方法
CA3237826A1 (en) * 2017-01-03 2018-07-12 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus therefor
EP3349455A1 (en) 2017-01-11 2018-07-18 Thomson Licensing Method and device for coding a block of video data, method and device for decoding a block of video data
CN110800296A (zh) * 2017-06-29 2020-02-14 索尼公司 图像处理装置、图像处理方法和程序
CN109410558B (zh) * 2018-06-20 2023-12-12 深圳市宏芯达科技有限公司 一种红外码智能压缩芯片
JP2022016726A (ja) * 2018-11-16 2022-01-25 ソニーグループ株式会社 画像処理装置および方法
JP2020098984A (ja) 2018-12-17 2020-06-25 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
JP2021513755A (ja) * 2019-01-15 2021-05-27 エルジー エレクトロニクス インコーポレイティド 変換スキップフラグを利用した映像コーディング方法及び装置
BR112021011019A2 (pt) * 2019-02-15 2021-08-31 Panasonic Intellectual Property Corporation Of America Codificador, decodificador, método de codificação e método de decodificação
EP3993415A4 (en) 2019-06-25 2023-05-31 Nippon Hoso Kyokai ENCODING DEVICE, DECODING DEVICE, AND PROGRAM
CA3149873A1 (en) * 2019-09-06 2021-03-11 Takeshi Tsukuba Image processing device and method
WO2021125309A1 (ja) * 2019-12-18 2021-06-24 ソニーグループ株式会社 画像処理装置および方法
KR20220152299A (ko) * 2020-03-12 2022-11-15 인터디지털 브이씨 홀딩스 프랑스 비디오 인코딩 및 디코딩을 위한 방법 및 장치
CN111800633B (zh) * 2020-06-23 2024-06-25 西安万像电子科技有限公司 图像处理方法及装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6483947B1 (en) * 1998-03-17 2002-11-19 Matsushita Electric Industrial Co., Ltd. Video signal processing apparatus
KR100683380B1 (ko) 2000-02-21 2007-02-15 주식회사 팬택앤큐리텔 영상 압축 부호화를 위한 변환 및 역변환 방법 및 장치
EP1665133A4 (en) * 2004-01-20 2009-05-13 Panasonic Corp IMAGE ENCODING METHOD, IMAGE DECODING METHOD, IMAGE ENCODING APPARATUS, IMAGE DECODING APPARATUS, AND CORRESPONDING PROGRAM
US7630435B2 (en) * 2004-01-30 2009-12-08 Panasonic Corporation Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof
US7428342B2 (en) * 2004-12-17 2008-09-23 Microsoft Corporation Reversible overlap operator for efficient lossless data compression
JP2006254230A (ja) * 2005-03-11 2006-09-21 Toshiba Corp 情報処理装置およびプログラム
EP2051524A1 (en) * 2007-10-15 2009-04-22 Panasonic Corporation Image enhancement considering the prediction error
JP5102122B2 (ja) * 2008-06-11 2012-12-19 キヤノン株式会社 復号化装置及び復号化方法
US8300696B2 (en) * 2008-07-25 2012-10-30 Cisco Technology, Inc. Transcoding for systems operating under plural video coding specifications
KR101377660B1 (ko) 2008-09-30 2014-03-26 에스케이텔레콤 주식회사 복수 개의 움직임 벡터 추정을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US8611435B2 (en) * 2008-12-22 2013-12-17 Qualcomm, Incorporated Combined scheme for interpolation filtering, in-loop filtering and post-loop filtering in video coding
JPWO2011016250A1 (ja) 2009-08-06 2013-01-10 パナソニック株式会社 符号化方法、復号方法、符号化装置及び復号装置
KR101474756B1 (ko) * 2009-08-13 2014-12-19 삼성전자주식회사 큰 크기의 변환 단위를 이용한 영상 부호화, 복호화 방법 및 장치
JP5299328B2 (ja) * 2010-03-17 2013-09-25 富士通株式会社 画像処理装置および画像処理方法
PL3232666T3 (pl) * 2010-07-14 2019-08-30 Ntt Docomo, Inc. Predykcja wewnątrzramkowa o niskiej złożoności dla kodowania wideo
WO2012011859A1 (en) * 2010-07-21 2012-01-26 Telefonaktiebolaget L M Ericsson (Publ) Picture coding and decoding
CN102457726A (zh) 2010-10-18 2012-05-16 曜鹏科技股份有限公司 影像编码集成电路及其影像编码资料传输方法
US9854275B2 (en) * 2011-06-25 2017-12-26 Qualcomm Incorporated Quantization in video coding
WO2013187060A1 (ja) * 2012-06-12 2013-12-19 パナソニック株式会社 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置
US9426466B2 (en) * 2012-06-22 2016-08-23 Qualcomm Incorporated Transform skip mode
US10257520B2 (en) * 2012-06-26 2019-04-09 Velos Media, Llc Modified coding for transform skipping
TWI627857B (zh) * 2012-06-29 2018-06-21 Sony Corp Image processing device and method
MY183347A (en) * 2013-09-30 2021-02-18 Japan Broadcasting Corp Image encoding device, image decoding device, and the programs thereof

Also Published As

Publication number Publication date
CA2874719A1 (en) 2014-01-03
TW201620308A (zh) 2016-06-01
KR20150034131A (ko) 2015-04-02
EP2879378A1 (en) 2015-06-03
MX339913B (es) 2016-06-17
BR112014032226A2 (pt) 2017-06-27
AU2013281943B2 (en) 2017-03-02
BR112014032225A2 (pt) 2017-06-27
CA2874723A1 (en) 2014-01-03
MY168865A (en) 2018-12-04
MX353549B (es) 2018-01-18
US20150139304A1 (en) 2015-05-21
CA2874723C (en) 2022-03-29
BR112014032225B1 (pt) 2022-12-13
TW201728179A (zh) 2017-08-01
JPWO2014002897A1 (ja) 2016-05-30
US10142634B2 (en) 2018-11-27
MX339914B (es) 2016-06-17
WO2014002895A1 (ja) 2014-01-03
CN104429068A (zh) 2015-03-18
BR112014032226B1 (pt) 2022-12-13
ZA201409423B (en) 2015-08-26
TWI592011B (zh) 2017-07-11
EP2879378A4 (en) 2016-04-06
MX2014016001A (es) 2015-04-13
RU2014152111A (ru) 2016-07-10
WO2014002897A1 (ja) 2014-01-03
RU2641261C2 (ru) 2018-01-16
TW201404169A (zh) 2014-01-16
CN104429068B (zh) 2019-01-18
EP2879377A1 (en) 2015-06-03
AU2013281945A1 (en) 2014-12-04
US20150139305A1 (en) 2015-05-21
CN104380732A (zh) 2015-02-25
RU2641259C2 (ru) 2018-01-16
AU2013281943A1 (en) 2014-12-11
US9794563B2 (en) 2017-10-17
US20180124406A1 (en) 2018-05-03
CN104380732B (zh) 2018-11-09
RU2017137313A (ru) 2019-02-12
MY172520A (en) 2019-11-28
EP2879377A4 (en) 2016-04-06
TWI627857B (zh) 2018-06-21
MX2014015998A (es) 2015-03-20
RU2014152112A (ru) 2016-07-10
RU2740164C2 (ru) 2021-01-12
US9894362B2 (en) 2018-02-13
JPWO2014002895A1 (ja) 2016-05-30
RU2017137313A3 (zh) 2020-11-02
KR20150034130A (ko) 2015-04-02
ZA201409424B (en) 2015-08-26
AU2013281945B2 (en) 2017-03-02

Similar Documents

Publication Publication Date Title
TWI535222B (zh) Image processing apparatus and method
JP6780761B2 (ja) 画像符号化装置および方法
JP5954587B2 (ja) 画像処理装置および方法
TWI581623B (zh) Image processing apparatus and method, program, and recording medium
US9591329B2 (en) Image processing device and method for encoding and decoding image
JP6451999B2 (ja) 画像処理装置および方法
US20140092979A1 (en) Image processing apparatus and method
KR20150099743A (ko) 화상 처리 장치 및 방법
WO2014156708A1 (ja) 画像復号装置および方法
EP2763412A1 (en) Image processing device and method
WO2012105406A1 (ja) 画像処理装置および方法
WO2012157539A1 (ja) 画像処理装置および方法
WO2014156705A1 (ja) 復号装置および復号方法、並びに、符号化装置および符号化方法
WO2014024723A1 (ja) 画像処理装置および方法