TW201408077A - 圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置 - Google Patents
圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置 Download PDFInfo
- Publication number
- TW201408077A TW201408077A TW102123528A TW102123528A TW201408077A TW 201408077 A TW201408077 A TW 201408077A TW 102123528 A TW102123528 A TW 102123528A TW 102123528 A TW102123528 A TW 102123528A TW 201408077 A TW201408077 A TW 201408077A
- Authority
- TW
- Taiwan
- Prior art keywords
- slice
- processing
- boundary
- control flag
- encoding
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 202
- 238000012545 processing Methods 0.000 claims abstract description 492
- 230000003044 adaptive effect Effects 0.000 claims abstract description 69
- 230000008569 process Effects 0.000 claims description 54
- 230000006978 adaptation Effects 0.000 claims description 25
- 238000001914 filtration Methods 0.000 claims description 4
- 239000000523 sample Substances 0.000 claims 36
- 239000013068 control sample Substances 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 40
- 230000004048 modification Effects 0.000 description 33
- 238000012986 modification Methods 0.000 description 33
- 230000005236 sound signal Effects 0.000 description 28
- 238000013139 quantization Methods 0.000 description 22
- 238000006243 chemical reaction Methods 0.000 description 18
- 239000000872 buffer Substances 0.000 description 15
- 230000005540 biological transmission Effects 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 11
- 238000010276 construction Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 8
- 239000000463 material Substances 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 239000000470 constituent Substances 0.000 description 6
- 230000002452 interceptive effect Effects 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 239000004065 semiconductor Substances 0.000 description 5
- 238000009825 accumulation Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 238000009792 diffusion process Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 230000008521 reorganization Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 208000028167 Southeast Asian ovalocytosis Diseases 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000010410 layer Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000008929 regeneration Effects 0.000 description 2
- 238000011069 regeneration method Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 235000012431 wafers Nutrition 0.000 description 2
- 108091026890 Coding region Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006798 recombination Effects 0.000 description 1
- 238000005215 recombination Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
在可減輕處理負擔之圖像解碼方法中,包含以下步驟:取得邊界控制旗標,該邊界控制旗標是用以共通地控制針對編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理;將解碼對象切片解碼;根據邊界控制旗標,在已解碼之解碼對象切片之全部切片邊界中,只對上方及左方切片邊界進行解塊過濾器處理;在已解碼之解碼對象切片之全部切片邊界中,只對上方及左方切片邊界進行對應邊界控制旗標之樣本適應偏移處理。
Description
本發明是有關於可將已編碼之動態圖像解碼的圖像解碼方法、及可將動態圖像編碼之圖像編碼方法等。
目前有提案一圖像解碼方法及圖像編碼方法,可在進行動態圖像之編碼或解碼時,對於位在切片之邊界(切片邊界)周邊的像素進行環路過濾器(loop filter)處理(內環路過濾器(in loop filter)處理)(參考非專利文獻1)。
【非專利文獻1】
Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 9th Meeting: Geneva, CH, 27 April - 7 May 2012, Title: High efficiency video coding (HEVC) text specification draft 7, Document: JCTVC-I1003_d5
惟,上述非專利文獻1之圖像解碼方法及圖像編碼方法中,有處理負擔大的問題。
故,本發明可提供可減輕處理負擔之圖像解碼方法及圖像編碼方法。
本發明其中一態樣之圖像解碼方法可將編碼圖片解碼,包含以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以共通地控制針對前述編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述解碼對象切片解碼;根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及,在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
而,這些概括性或具體之態樣,可用系統、方法、集積電路、電腦程式或電腦可讀取之CD-ROM等記錄媒體來實現,亦可用系統、方法、集積電路、電腦程式及記錄媒體之任意組合來實現。
本發明之圖像解碼方法及圖像編碼方法可減輕處理負擔。
10,20‧‧‧圖像解碼裝置
30,40‧‧‧圖像編碼裝置
11,21‧‧‧旗標取得部
12,22‧‧‧解碼部
13,34‧‧‧解塊過濾器
14,23,35,44‧‧‧SAO部
31,41‧‧‧旗標編碼部
32,42‧‧‧編碼部
33,43‧‧‧重組部
100‧‧‧圖像編碼裝置
101‧‧‧減法器
102‧‧‧轉換部
103‧‧‧量化部
104‧‧‧熵編碼部
105‧‧‧反量化部
106‧‧‧反轉換部
107‧‧‧加法器
109‧‧‧解塊過濾器
110‧‧‧SAO部
111‧‧‧境界控制部
112‧‧‧預測部
200‧‧‧圖像解碼裝置
204‧‧‧熵解碼部
205‧‧‧反量化部
206‧‧‧反轉換部
207‧‧‧加算器
209‧‧‧解塊過濾器
210‧‧‧SAO部
211‧‧‧境界控制部
212‧‧‧預測部
ex100‧‧‧內容供給系統
ex101‧‧‧網際網路
ex102‧‧‧網際網路服務提供者
ex103‧‧‧串流伺服器
ex104‧‧‧電話網
ex106~ex110‧‧‧基地台
ex111‧‧‧電腦
ex112‧‧‧PDA
ex113‧‧‧攝像機
ex114‧‧‧行動電話
ex115‧‧‧遊戲機
ex116‧‧‧攝像機
ex500‧‧‧LSI
ex200‧‧‧數位廣播用系統
ex201‧‧‧廣播台
ex202‧‧‧衛星
ex203‧‧‧纜線
ex204、ex205‧‧‧天線
ex210‧‧‧汽車
ex211‧‧‧汽車導航
ex212‧‧‧再生裝置
ex213‧‧‧螢幕
ex215‧‧‧記錄媒體(光碟等)
ex216‧‧‧記錄媒體(SD卡等)
ex217‧‧‧機上盒(STB)
ex218‧‧‧讀取器/記錄器
ex219‧‧‧螢幕
ex230‧‧‧資訊軌
ex231‧‧‧記錄塊
ex232‧‧‧內周區域
ex233‧‧‧資料記錄區域
ex234‧‧‧外周區域
ex300‧‧‧電視(接收機)
ex301‧‧‧調諧器
ex302‧‧‧調變/解調部
ex303‧‧‧多工/解多工部
ex304‧‧‧聲音訊號處理部
ex305‧‧‧影像訊號處理部
ex306‧‧‧訊號處理部
ex307‧‧‧揚聲器
ex308‧‧‧顯示部
ex309‧‧‧輸出部
ex310‧‧‧控制部
ex311‧‧‧電源電路部
ex312‧‧‧操作輸入部
ex313‧‧‧橋接器
ex314‧‧‧插槽部
ex315‧‧‧驅動器
ex316‧‧‧數據機
ex317‧‧‧介面部
ex318、ex319、ex320、ex321‧‧‧緩衝器
ex350‧‧‧天線
ex351‧‧‧傳送/接收部
ex352‧‧‧調變/解調部
ex353‧‧‧多工/解多工部
ex354‧‧‧聲音訊號處理部
ex355‧‧‧影像訊號處理部
ex356‧‧‧聲音輸入部
ex357‧‧‧聲音輸出部
ex358‧‧‧顯示部
ex359‧‧‧LCD控制部
ex360‧‧‧主控制部
ex361‧‧‧電源電路部
ex362‧‧‧操作輸入控制部
ex363‧‧‧攝像機介面部
ex364‧‧‧插槽部
ex365‧‧‧攝像機部
ex366‧‧‧操作鍵部
ex370‧‧‧匯流排
ex400‧‧‧資訊再生/記錄部
ex401‧‧‧光學頭
ex402‧‧‧調變記錄部
ex403‧‧‧再生解調部
ex404‧‧‧緩衝器
ex405‧‧‧碟片馬達
ex406‧‧‧伺服控制部
ex407‧‧‧系統控制部
ex500‧‧‧LSI
ex501‧‧‧控制部
ex502‧‧‧CPU
ex503‧‧‧記憶體控制器
ex504‧‧‧串流控制器
ex505‧‧‧電源電路部
ex506‧‧‧串流I/O
ex507‧‧‧訊號處理部
ex508‧‧‧緩衝器
ex509‧‧‧AV I/O
ex510‧‧‧匯流排
ex511‧‧‧記憶體
ex512‧‧‧驅動頻率控制部
ex800‧‧‧實施形態5之構成
ex801‧‧‧本發明之解碼處理部
ex802‧‧‧依據習知規格之解碼處理部
ex803‧‧‧驅動頻率切換部
ex901‧‧‧本發明專用之解碼處理部
ex 902‧‧‧本發明及習知規格共有之解碼處理部
ex 1001‧‧‧本發明專用之解碼處
理部
ex 1002‧‧‧習知規格專用之解碼處理部
ex 1003‧‧‧本發明及習知規格共有之解碼處理
圖1A是顯示圖片構成的圖。
圖1B是顯示可藉由邊界控制旗標控制之解塊過濾器處理之範圍的圖。
圖1C是顯示可藉由邊界控制旗標控制之SAO之範圍的圖。
圖2是用以說明GDR的圖。
圖3是顯示伴隨GDR之圖像編碼方法的圖。
圖4是顯示藉由GDR再新之切片的圖。
圖5是顯示各切片之邊界控制旗標與切片邊界之環路過濾器處理之關係的圖。
圖6是顯示實施形態1之圖像編碼裝置構成的方塊圖。
圖7A是用以說明實施形態1之切片邊界控制的圖。
圖7B是用以說明實施形態1之切片邊界控制的圖。
圖7C是用以說明實施形態1之切片邊界控制的圖。
圖8是用以進一步說明實施形態1之切片邊界控制的圖。
圖9是顯示實施形態1之圖像編碼裝置之處理動作的流程圖。
圖10是顯示實施形態1之圖像解碼裝置構成的方塊圖。
圖11是顯示實施形態1之圖像解碼裝置之處理動作的流程圖。
圖12是用以說明實施形態1之變形例1中,對切片邊界之SAO控制的圖。
圖13是顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之例子的圖。
圖14是顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之其它例子的圖。
圖15A顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖15B顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖15C顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖15D顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖15E顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖15F顯示實施形態1之變形例2中,切片角周邊之SAO遮罩之又一例子的圖。
圖16是顯示實施形態1之變形例2中,適用SAO之中央像素與其周邊像素之位置關係的圖。
圖17是顯示實施形態1之變形例2中,切片角周邊之45°之SAO遮罩之例子的圖。
圖18是顯示實施形態1之變形例2中,切片角周邊之135°之SAO遮罩之例子的圖。
圖19A是顯示本發明其中一態樣之圖像解碼方法的流程圖。
圖19B是顯示本發明其中一態樣之圖像解碼裝置構成的方塊圖。
圖20A是顯示本發明其它態樣之圖像解碼方法的流程圖。
圖20B是顯示本發明其它態樣之圖像解碼裝置構成的方塊圖。
圖21A是顯示本發明其中一態樣之圖像編碼方法的流程圖。
圖21B是顯示本發明其中一態樣之圖像編碼裝置構成的方塊圖。
圖22A是顯示本發明其它態樣之圖像編碼方法的流程圖。
圖22B是顯示本發明其它態樣之圖像編碼裝置構成的方塊圖。
圖23係實現內容發佈服務之內容供給系統之全體構成圖。
圖24係數位廣播用系統之全體構成圖。
圖25係顯示電視構成例的方塊圖。
圖26係顯示對光碟之記錄媒體進行資訊讀寫之資訊再生/記錄部之構成例的方塊圖。
圖27係顯示光碟之記錄媒體之構造例的圖。
圖28A係顯示行動電話例之圖。
圖28B係顯示行動電話之構成例之方塊圖。
圖29係顯示多工資料構成之圖。
圖30係顯示各串流在多工資料如何多工之示意圖。
圖31係更詳細顯示PES封包列如何儲存視訊流之圖。
圖32係顯示多工資料之TS封包與源封包之構造之圖。
圖33係顯示PMT之資料構成之圖。
圖34係顯示多工資料資訊之內部構成之圖。
圖35係顯示串流屬性資訊之內部構成之圖。
圖36係顯示識別影像資料之步驟之圖。
圖37係顯示實現各實施形態之動態圖像編碼方法及動態圖像解碼方法之積體電路構成例之方塊圖。
圖38係顯示切換驅動頻率之構成之圖。
圖39係顯示識別影像資料並切換驅動頻率之步驟之圖。
圖40係顯示使影像資料規格與驅動頻率對應之查找表之例子之圖。
圖41A係顯示共有訊號處理部之模組之構成例之圖。
圖41B係顯示共有訊號處理部之模組的其他構成例之圖。
(作為本發明基礎之見解)
對於「背景技術」欄所記載之非專利文獻1之圖像解碼方法及圖像編碼方法等,本發明人發現了會發生以下問題。
圖1A是顯示圖片構成的圖。
圖片由至少1個切片構成,如圖1A所示,具有例如3個切片s1、s2、s3。而,圖片與訊框是以同一個意思來使用。切片是由至少1個最大編碼單位(LCU)構成。
各切片具有邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)。該邊界控制旗標是用以控制針對切片之邊界(切片邊界)的解塊過濾器處理及樣本適應偏移處理(SAO)等的環路過濾器處理(內環路過濾器處理)的旗標。該環路過濾器處理是在用於生成預測圖像之重組圖像顯示之前、或在該重組圖像儲存於訊框緩衝器之前進行。解塊過濾器處理是用於抑制動態圖像因各區塊編碼或解碼所產生之區塊變形的處理。藉由該解塊過濾器處理,主觀畫質會提昇。SAO是對重組圖像所含的各像素之像素值加上偏移值之處理,該SAO有頻帶偏移與邊緣偏移。又,藉由該SAO,主觀畫質及客觀畫質會提昇。而,利用邊界控制旗標控制之環路過濾器處理之對象是切片邊界,而具體來說是位於該切片邊界之周邊的至少1個像素。
圖1B是顯示視為邊界控制旗標所控制之解塊過濾器處理對象之範圍的圖。
例如,利用切片s2之邊界控制旗標,可控制針對位於切片s2上方的切片邊界sb1、與位於切片s2左方的切片邊界sb2的解塊過濾器處理。換言之,當邊界控制旗標=0時,不會對分別位於切片邊界sb1、sb2之周邊的各像素(樣本)進行解塊過濾器處理。另一方面,當邊界控制旗標=1時,會對分別位於切片邊界sb1及切片邊界sb2之周邊的各
像素進行解塊過濾器處理。如此,藉由邊界控制旗標,可將解塊過濾器處理切換成開啟與關閉。
圖1C是顯示視為邊界控制旗標所控制之SAO對象之範圍的圖。
切片s2之邊界控制旗標可控制上述解塊過濾器處理、以及針對位於切片s2上方、左方、下方及右方之切片邊界sb1、sb2、sb3、sb4、sb5的SAO。換言之,當邊界控制旗標=0時,藉由不使用位於其它切片(切片s1、s3)之像素的處理模式(填補或填補模式),對位於該等切片邊界之周邊切片s2內的各像素進行SAO。另一方面,邊界控制旗標=1時,藉由可使用位於其它切片(切片s1,s3)之像素的處理模式(通常處理或通常處理模式),對位於該等切片邊界周邊之切片s2內的各像素進行SAO。如此,可藉由邊界控制旗標來切換SAO之處理模式。
換言之,各切片可設定分別顯示不同值的邊界控制旗標,藉由將邊界控制旗標設定為0,可抑制因環路過濾器處理而產生於解塊過濾器處理或SAO等的切片間之依存關係。上述邊界控制旗標可抑制切片間之依存關係,因此可用於功能性地進行圖像編碼或解碼之並列處理、或GDR(Gradual decoder refresh:逐步解碼器再新)之再新處理。
在此,GDR之目的在於,例如當進行參考雖已編碼但未在圖像解碼裝置接收之資料等隨機存取時,使動態圖像經過複數圖片後逐漸地恢復成漂亮的圖像。
圖2是用以說明GDR之圖。
圖片p1開始GDR後,圖片p1之前頭切片s1只用內預測編碼。換言之,該切片s1是用再新模式編碼。故,可在不需參考編碼順序上早於圖片p1之圖片下,將切片s1編碼。上述切片s1是再新之區域(以下稱再新區域)。又,圖片p1之切片s1以外之區域為不再新之區域(以下稱非再新區域)。
圖片p2之前頭切片s1是以只能參考圖片p1之切片s1的移動補償來編碼,或是以內預測來編碼。換言之,該圖片p2之切片s1也是以再新模式編碼。該圖片p2之切片s1也是再新區域,圖片p2中,再新區域會擴大。
圖片p3之前頭切片s1與第二個切片s2是以只能參考圖片p1之切片s1與圖片p2之切片s1的移動補償來編碼、或是以內預測來編碼。換言之,該圖片p3之切片s1及切片s2也是以再新模式編碼。該圖片p3之切片s1、s2也是再新區域,圖片p3中,再新區域會更擴大。換言之,當開始GDR後,各個圖片所含的再新區域會按照圖片之編碼順序而逐漸變大。。
GDR之最後會將圖片之全部區域再新。故,GDR所花的時間是用以將圖片之全部區域再新所需的時間。該時間會作為包含於SEI(Supplemental Enhancement Information:輔助加強資訊)之資訊而發送至圖像解碼裝置。
圖3是顯示伴隨GDR之圖像編碼方法的流程圖。
圖像編碼裝置在開始伴隨GDR之編碼後,首先,將第1控制參數(refreshed_LCUs_in_current_frame)設定為
0(步驟S901)。接著,圖像編碼裝置以再新模式將處理對象(編碼對象)切片編碼(步驟S902)。而,伴隨GDR之編碼開始時,會選擇圖片內之前頭切片作為處理對象切片。接著,圖像編碼裝置將處理對象切片內之LCU數加以計數(number_of_LCUs_in_current_slice)(步驟S903)。
接著,圖像編碼裝置將該LCU數加到第1控制參數(步驟S904)。在此,圖像編碼裝置判定該第1控制參數是否小於顯示前一個圖片中以再新模式編碼之LCU數的第2控制參數(refreshed_LCUs_in_prev_frame)與字母D之和(步驟S905)。字母D是用於控制GDR所需時間之參數。若該字母D之值大,則用於將1個圖片之全部區域再新所需的圖片數少,若字母D之值小,則其圖片數多。
圖像編碼裝置在判定第1控制參數不小於上述和時(步驟S905之No),將圖片內之其餘區域以非再新模式編碼(步驟S906)。另一方面,圖像編碼裝置在判定第1控制參數小於上述和時(步驟S905之Yes),判定圖片內是否有尚未編碼之切片(步驟S907)。在此,圖像編碼裝置在判定有尚未編碼之切片時(步驟S907之Yes),選擇該尚未編碼之切片作為處理對象切片(步驟S908),並重複執行自步驟S902起的處理。
如此,圖像編碼裝置在開始切片之編碼時,必須判定是否應以再新模式將處理對象切片編碼。惟,圖像編碼裝置可只對處理對象切片,亦即只在處理對象切片之編碼開始時進行該判斷。換言之,圖像編碼裝置在將處理對
象切片編碼時,無法判斷是否以再新模式將下一切片編碼。該判斷只有在開始下一切片之編碼時可進行。
又,對GDR而言,再新區域與非再新區域之間無法避免資料有依存關係。故,為了使非再新區域之資料不混入再新區域,會使用位於切片標頭之上述邊界控制旗標來控制具有該切片標頭之切片的各切片邊界的環路過濾器處理。
在此,在SAO之邊緣偏移,會將視為偏移對象之像素分別與鄰接於該像素之2個像素比較,藉此分類為其中一個級。各級是以邊緣索引來定義。
故,對位於處理對象切片之切片邊界周邊的像素(處理對象像素)進行SAO時,有時會將位於處理對象切片外之像素作為鄰接於處理對象像素之像素來與處理對象像素比較。在這種情況下,當必須避免與位於處理對象切片外之像素比較時,會將邊界控制旗標設定為0。藉此,對於位於處理對象切片之切片邊界周邊的像素(處理對象像素)不進行上述比較,而將邊緣索引設定為0。
例如,如圖1C所示,對位於切片s2內之切片邊界周邊的像素(處理對象像素)進行之SAO,會有以位於切片s2外之像素(切片s1內或切片s3內之像素)作為比較對象的情形。在此情況下,當必須避免以位於切片s2外之像素作為比較對象時,會將切片s2之邊界控制旗標設定為0。結果,對位於切片s2內之切片邊界周邊的像素(處理對象像素),便不會將位於切片s2外之像素作為比較對象,而將邊緣索引
設定為0。
在SAO,當處理對象像素之邊緣索引為0時,對該處理對象像素之像素值會加上「0」作為偏移值。如此,在SAO,不進行與鄰接於處理對象像素之2個像素之比較而將「0」作為偏移值加到處理對象像素之像素值的處理,稱為填補(填補模式:padding mode)。換言之,該填補是SAO處理模式中的一種,是不使用位於處理對象切片以外之其它切片的像素的處理模式。在SAO,藉由該填補,可防止非再新區域之資料混入再新區域。而,在SAO,將處理對象像素與鄰接於該處理對象像素之2個像素加以比較,並設定該處理對象像素之邊緣索引的處理模式稱為通常處理(通常處理模式)。
圖4是顯示藉由GDR再新之切片的圖。
如圖4所示,切片s1及切片s2會再新,切片s3及切片s4不會再新。
此時,會要求不產生非再新區域之切片s3對再新區域之切片s2的資料依存關係。換言之,在對切片s2之環路過濾器處理,會要求不參考切片s3之像素。藉此,可防止資料從非再新區域之切片s3混入再新區域之切片s2。
圖5是顯示各切片之邊界控制旗標與切片邊界之環路過濾器處理之關係的圖。而,圖5中之BD表示解塊過濾器處理。
為了滿足不會產生圖4所示之切片s3對切片s2之資料依存關係的要求,必須將切片s3之邊界控制旗標設為
0,使切片s2與切片s3間之切片邊界的解塊過濾器處理關閉。且,必須將切片s2之邊界控制旗標設為0,使切片s2之SAO不會參考切片s3之像素。藉此,可避免因環路過濾器處理產生切片s3對切片s2之資料依存關係。
惟,如用圖3所說明,將切片s2編碼時,無法判斷是否以非再新模式來將切片s3編碼。
換言之,若非在將處理對象切片之切片標頭編碼,且該處理對象切片之全部編碼完畢後,無法判斷下一切片要以再新模式及非再新模式中的哪一個模式編碼。故,當將處理對象切片之切片標頭編碼,且對該處理對象切片之全部編碼完畢後,判斷出下一切片(例如切片s3)要以非再新模式編碼時,有時必須修正位於該處理對象切片之切片標頭的邊界控制旗標。這表示,切片標頭之編碼需要2個編碼之程序,有安裝成本增加,且處理負擔變大的問題。換言之,為了之後修正切片標頭,必須將已處理之切片全部保存於記憶體,結果,記憶體之安裝成本會增加。
又,在例如視訊會議系統般要求低延遲之應用程式,為了抑制傳送延遲,切片會分割為更小的封包。上述應用程式中,切片會分割為較小的分割單位,在全部切片編碼完畢前將該等分割單位分別傳送至圖像解碼裝置。
惟,如上所述,在全部切片編碼後,有時必須修正邊界控制旗標。故,無法將包含有可能之後修正的切片標頭的最初分割單位早點傳送,因此即使將切片分割為較小的單位也無法抑制傳送延遲。
再者,在並列地進行複數切片之解碼的多切片處理中,為了進行處理對象切片之SAO,有必須等待下一切片之解碼,處理負擔變高的問題。例如,處理對象切片之邊界控制旗標顯示1時,對於位於該處理對象切片之下方及右方之切片邊界周邊的該處理對象切片內的各像素,必須以通常處理進行SAO。惟,為了進行該SAO,包夾上述下方及右方之切片邊界而位於與處理對象切片相反側之下一切片之像素是必要的。故,無論下一切片之邊界控制旗標顯示何值(0或1),為了進行對處理對象切片之SAO,都必須等待下一切片之解碼。
如此一來,非專利文獻1之圖像解碼方法及圖像編碼方法會有處理負擔大的問題。
為了解決上述問題,本發明其中一態樣之圖像解碼方法可將編碼圖片解碼,包含以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以共通地控制針對前述編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述解碼對象切片解碼;根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及,在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
藉此,被視為可藉由解碼對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)控制之樣本
適應偏移處理(SAO)之對象的切片邊界,與解塊過濾器處理相同地,可只限定於解碼對象切片之全部切片邊界中,上方及左方的至少其中一切片邊界。故,即使解碼對象切片之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之解碼,便可對該解碼對象切片進行環路過濾器處理(解塊過濾器處理及SAO),並輸出或顯示該解碼對象切片。藉此,可減輕處理負擔。
又,在圖像編碼方法中,可進行與使用了本發明其中一態樣之圖像解碼方法之邊界控制旗標的環路過濾器處理相同之處理。此時,藉由編碼對象切片之邊界控制旗標,不控制針對編碼對象切片與下一切片間之切片邊界(編碼對象切片下方及右方之切片邊界)的環路過濾器處理。故,進行伴隨GDR之圖像編碼時,當編碼對象切片之編碼結束後,即使得知下一切片為非再新區域時,也不需特意將已較編碼對象切片先編碼之邊界控制旗標加以修正。藉此,可減輕處理負擔。
為了解決上述問題,本發明其中一態樣之圖像解碼方法可將編碼圖片解碼,包含以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以控制針對前述編碼圖片所含的解碼對象切片之切片邊界的樣本適應偏移處理;將前述解碼對象切片解碼;及,根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已解碼之前述解碼對象切片之上方及左方的至少其中一切片邊界周邊的前述解碼對象切片內的至少1個像素、與已
解碼之其它切片內的至少1個像素。
藉此,可藉由解碼對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)控制的樣本適應偏移處理(SAO),與解塊過濾器處理相同地,可不僅對位於解碼對象切片上方及左方的至少其中一切片邊界周邊的解碼對象切片內之像素進行,也對其它切片內之像素共通地進行。故,即使解碼對象切片之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之解碼,便可對該解碼對象切片進行環路過濾器處理(解塊過濾器處理及SAO),並輸出或顯示該解碼對象切片。藉此,可減輕處理負擔。
又,在圖像編碼方法中,可進行與使用了本發明其中一態樣圖像解碼方法之邊界控制旗標的環路過濾器處理相同之處理。換言之,藉由編碼對象切片之邊界控制旗標,不控制針對編碼對象切片與下一切片間之切片邊界(編碼對象切片下方及右方之切片邊界)之環路過濾器處理。故,進行伴隨GDR之圖像編碼時,當編碼對象切片之編碼結束後,即使得知下一切片為非再新區域時,也不需特意將編碼對象切片之邊界控制旗標加以修正。藉此,可減輕處理負擔。
又,在進行前述樣本適應偏移處理之際,可根據前述邊界控制旗標來切換前述樣本適應偏移處理之處理模式,並依照藉由切換所選擇之處理模式來進行前述樣本適應偏移處理。例如,在進行前述樣本適應偏移處理之際,
當前述邊界控制旗標顯示0時,將前述樣本適應偏移處理之處理模式切換成對視為偏移對象之像素加上0作為偏移值之填補模式,並依照前述填補模式來進行前述樣本適應偏移處理。更具體而言,前述樣本適應偏移處理有複數處理模式,前述複數處理模式是根據視為偏移對象之像素之邊緣內的特徴而分類,且前述複數處理模式分別分配有邊緣索引,在進行前述樣本適應偏移處理之際,當前述邊界控制旗標顯示0時,可藉由將邊緣索引設定為0,將前述樣本適應偏移處理之處理模式切換成前述填補模式。
藉此,當邊界控制旗標為0時,利用填補模式,可使樣本適應偏移處理實質上不作用。結果,對於解碼對象切片上方及左方的至少其中一切片邊界(亦即位於該切片邊界周邊之像素)實質上不進行樣本適應偏移處理,因此可抑制包夾該切片邊界而位於與解碼對象切片相反側之其它切片和解碼對象切片間的資料依存關係。藉此,可輕易地進行並列地進行複數切片之解碼的多切片處理。
又,可根據前述邊界控制旗標將解塊過濾器處理切換為開啟與關閉,且只有在切換為開啟時,進行前述解塊過濾器處理。
藉此,例如邊界控制旗標為0時,藉由將解塊過濾器處理切換為關閉,可使解塊過濾器處理不作用。結果,對於解碼對象切片上方及左方的至少其中一切片邊界不進行解塊過濾器處理,因此可抑制包夾該切片邊界而位於與解碼對象切片相反側之其它切片和解碼對象切片間的資料
依存關係。藉此,可輕易地進行並列地進行複數切片之解碼的多切片處理。
又,當前述邊界控制旗標顯示0時,可藉由將前述解塊過濾器處理切換為關閉,不進行前述解塊過濾器處理,在進行前述樣本適應偏移處理之際,將前述樣本適應偏移處理之處理模式,切換成將0作為偏移值加到像素值之填補模式,並依照前述填補模式來進行前述樣本適應偏移處理。
藉此,當邊界控制旗標為0時,可對於解碼對象切片上方及左方的至少其中一切片邊界不進行解塊過濾器處理,且,實質上不進行樣本適應偏移處理,因此可更抑制包夾該切片邊界而位於與解碼對象切片相反側之其它切片和解碼對象切片間的資料依存關係。藉此,可更輕易地進行並列地進行複數切片之解碼的多切片處理。
又,當被視為與前述邊界控制旗標對應之前述樣本適應偏移處理之對象的像素,是也被視為與其它切片之其它邊界控制旗標對應之樣本適應偏移處理之對象的特定像素時,在進行前述樣本適應偏移處理之際,當前述邊界控制旗標與前述其它邊界控制旗標中的至少其中一者顯示0時,將前述樣本適應偏移處理之處理模式切換成前述填補模式,並依照前述填補模式,進行針對前述特定像素之前述樣本適應偏移處理。
藉此,當例如針對1個像素(特定像素)之複數邊界控制旗標進行的樣本適應偏移處理之控制產生競合時,
該等邊界控制旗標中顯示0之邊界控制旗標進行的控制會優先。結果,可適切地進行對該特定像素之樣本適應偏移處理。
為了解決上述問題,本發明其中一態樣之圖像編碼方法可將圖片編碼,包含以下步驟:將邊界控制旗標編碼,前述邊界控制旗標是用以共通地控制針對前述圖片所含的編碼對象切片的切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;根據前述邊界控制旗標,在已重組之前述編碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及,在已重組之前述編碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
藉此,被視為可藉由編碼對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)控制之樣本適應偏移處理(SAO)之對象的切片邊界,與解塊過濾器處理相同地,可只限定於已重組之編碼對象切片之全部切片邊界中,上方及左方的至少其中一切片邊界。故,即使編碼對象切片之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之重組,便可對已重組之編碼對象切片進行環路過濾器處理(解塊過濾器處理及SAO),將該已重組之編碼對象切片用於預測圖像之生成。
藉此,可減輕處理負擔。
又,藉由編碼對象切片之邊界控制旗標,不控制針對已重組之編碼對象切片與已重組之下一切片間的切片邊界(編碼對象切片下方及右方之切片邊界)的環路過濾器處理。故,當進行伴隨GDR之圖像編碼時,在編碼對象切片之編碼結束後,即使得知下一切片為非再新區域時,也不需特意將已較編碼對象切片先編碼之邊界控制旗標加以修正。藉此,可減輕處理負擔。
為了解決上述問題,本發明其中一態樣之圖像編碼方法可將圖片編碼,包含以下步驟:將邊界控制旗標編碼,前述邊界控制旗標編是用以控制針對前述圖片所含的編碼對象切片之切片邊界的樣本適應偏移處理;將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;及,根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已重組之前述編碼對象切片之上方及左方的至少其中一切片邊界周邊的前述編碼對象切片內的至少1個像素、與已重組之其它切片內的至少1個像素。
藉此,可藉由編碼對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)控制的樣本適應偏移處理(SAO),與解塊過濾器處理相同地,不僅對位於已重組之編碼對象切片上方及左方的至少其中一切片邊界周邊的已重組之編碼對象切片內的像素進行,也對已重組之其它切片內的像素共通地進行。故,即使編碼對象切片
之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之重組,便可對該已重組之編碼對象切片進行環路過濾器處理(解塊過濾器處理及SAO),並將該已重組之編碼對象切片用於預測圖像之生成。
又,藉由編碼對象切片之邊界控制旗標,不控制針對已重組之編碼對象切片與已重組之下一切片間的切片邊界(編碼對象切片下方及右方之切片邊界)周邊的像素的環路過濾器處理。故,當進行伴隨GDR之圖像編碼時,在編碼對象切片之編碼結束後,即使得知下一切片是非再新區域時,也不需特意將已較編碼對象切片先編碼之邊界控制旗標加以修正。藉此,可減輕處理負擔。
而,這些概括性或具體之態樣,可用系統、方法、集積電路、電腦程式或電腦可讀取之CD-ROM等記錄媒體來實現,亦可用系統、方法、集積電路、電腦程式或記錄媒體之任意組合來實現。
以下,一面參考圖式一面具體說明實施形態。
而,以下說明之實施形態皆為顯示概括性或具體之例。以下實施形態所示之數值、形狀、材料、構成要件、構成要件之配置位置及連結形態、步驟、步驟之順序等皆為例子,用意並非限定本發明。又,以下實施形態之構成要件中,對於未記載於表示最上位概念之獨立請求項的構成要件,會以任意之構成要件來說明。又,下述記載中,編碼(coding)有時也會以encoding之意思來使用。
(實施形態1)
圖6是顯示本實施形態之圖像編碼裝置構成的方塊圖。
圖像編碼裝置100具有減法器101、轉換部102、量化部103、熵編碼部104、反量化部105、反轉換部106、加法器107、解塊過濾器109、SAO部110、邊界控制部111及預測部112。
減法器101按照動態圖像所含的每一區塊,算出該區塊與預測部112所生成之預測圖像之差分來作為差分圖像。
轉換部102對差分圖像進行離散餘弦轉換等正交轉換,藉此生成包含至少1個頻率係數之係數區塊。
量化部103根據量化參數(QP)將係數區塊所含的各頻率係數量化,藉此生成包含至少1個量化值之量化區塊。
熵編碼部104將量化區塊所含的各量化值、上述量化參數、及邊界控制旗標熵編碼,藉此生成位元流。
反量化部105對上述量化區塊進行反量化,藉此將包含至少1個頻率係數之係數區塊復原。而,該係數區塊與轉換部102所生成之係數區塊不同,包含量化誤差。
反轉換部106對反量化部105所復原之係數區塊進行逆離散餘弦轉換等逆正交轉換,藉此生成解碼差分圖像。
加法器107將解碼差分圖像與預測部112所生成之預測圖像相加,藉此生成重組圖像。
解塊過濾器109從加法器107取得至少1個重組圖像,並對該等重組圖像之預定邊界進行解塊過濾器處理。在此,解塊過濾器109會根據邊界控制部111之控制,對處理對象切片之預定切片邊界進行解塊過濾器處理。
SAO部110從解塊過濾器109取得至少1個重組圖像後,對該等重組圖像進行SAO。在此,SAO部110會根據邊界控制部111之控制,對由該等重組圖像構成之處理對象切片之預定切片邊界進行SAO。
預測部112使用已進行SAO之處理對象切片來生成編碼對象區塊之預測圖像,並將該預測圖像輸出至減法器101與加法器107。
圖7A~圖7C是用以說明本實施形態之邊界控制的圖。
邊界控制部111設定針對處理對象(編碼對象)切片之邊界控制旗標。
邊界控制旗標(slice_loop_filter_across_slices_enable_flag)是用以共通地控制解塊過濾器處理與SAO之各個環路過濾器處理的旗標。換言之,邊界控制旗標是用於將解塊過濾器處理切換為開啟與關閉,且用於將SAO之處理模式切換為通常處理(通常處理模式)與填補(填補模式)。
如圖7A所示,被視為可藉由本實施形態之邊界控制旗標來控制之解塊過濾器處理之對象的切片邊界,是與該邊界控制旗標對應之處理對象切片之全部切片邊界中,上方及左方的至少其中一切片邊界。具體而言,處理
對象切片為切片s2時,根據切片s2之邊界控制旗標,在切片s2之全部切片邊界sb1~sb5中,只對上方及左方之各切片邊界sb1及sb2進行解塊過濾器處理。而,處理對象切片中有上方切片邊界及左方切片邊界時,該等切片邊界會成為解塊過濾器處理之對象,而當只有其中一個切片邊界時,則該其中一個切片邊界會成為解塊過濾器處理之對象。又,解塊過濾器處理是對位於該切片邊界周邊之處理對象切片內的至少1個像素、及位於該切片邊界周邊之其它切片內的至少1個像素進行。
如圖7B所示,被視為可藉由本實施形態之邊界控制旗標來控制之SAO之對象的切片邊界,與被視為解塊過濾器處理之對象的切片邊界相同。換言之,被視為SAO之對象的切片邊界,是與該邊界控制旗標對應之處理對象切片之全部切片邊界中,上方及左方的至少其中一切片邊界。具體而言,處理對象切片為切片s2時,在切片s2之全部切片邊界sb1~sb5中,只對上方及左方之各切片邊界sb1及sb2進行與切片s2之邊界控制旗標對應之SAO。而,處理對象切片中有上方切片邊界及左方切片邊界時,該等切片邊界會成為SAO之對象,而當只有其中一個切片邊界時,則該其中一個切片邊界會成為SAO之對象。又,SAO與解塊過濾器處理相同地,是對位於該切片邊界周邊之處理對象切片內的至少1個像素、與位於該切片邊界周邊之其它切片內的至少1個像素共通地進行。
如圖7C所示,藉由切片s2之邊界控制旗標,可控
制針對位於切片s1與切片s2之切片邊界周邊(亦即位於切片s2之上方與左方切片邊界周邊)之像素的解塊過濾器處理與SAO。例如,當邊界控制旗標=1時,解塊過濾器109之解塊過濾器處理是設定為開啟,SAO部110之SAO之處理模式是設定為通常處理。換言之,解塊過濾器109會對位於切片s2之上方與左方切片邊界周邊之切片s2內的各像素與切片s1內的各像素,進行解塊過濾器處理,且SAO部110會以通常處理進行SAO。
又,藉由切片s3之邊界控制旗標,可控制針對位於切片s2與切片s3之切片邊界周邊(亦即位於切片s3之上方與左方切片邊界周邊)的切片s3內的各像素與切片s2內的各像素的解塊過濾器處理與SAO。例如,當邊界控制旗標=0時,解塊過濾器109之解塊過濾器處理是設定為關閉,且SAO部110之SAO之處理模式是設定為填補。換言之,解塊過濾器109對位於切片s3之上方與左方切片邊界周邊的切片s3內的各像素、與切片s2內的各像素,不進行解塊過濾器處理,且SAO部110以填補進行SAO。
具體而言,SAO部110對於位於上述切片邊界周邊之切片s3內的各像素與切片s2內的像素,設定邊緣索引=0,藉此進行上述填補。而,SAO部110在針對位於上述切片邊界周邊之切片s2之像素的SAO中,有可能參考切片s3之像素,因此會以填補來進行對該切片s2之像素的SAO。
又,SAO部110與切片s2之像素相同地,在針對位於上述切片邊界周邊之切片s3之像素的SAO中,有可能會參考切片s2
之像素,因此會以填補來進行對該切片s3之像素的SAO。
如此,本實施形態中,SAO部110與被視為解塊過濾器處理之對象的切片邊界相同地,在該處理對象切片之切片邊界中,只對上方與左方之切片邊界進行與該處理對象切片之邊界控制旗標對應的SAO。結果,圖像編碼裝置100在將切片所含的全部LCU編碼後,不需修正切片標頭,便可進行伴隨GDR之編碼。
又,在切片s1與切片s2之切片邊界、及切片s3與切片s4之切片邊界中,由於不進行環路過濾器處理之切換,因此可提高該等切片邊界之畫質。
圖8是用以更詳細說明本實施形態之邊界控制的圖。
例如,藉由GDR,如圖8所示,將切片s1及切片s2分別作為再新區域,切片s3及切片s4分別作為非再新區域。
此時,本實施形態中,只要將切片s3之邊界控制旗標設定為0,即使將其它3個切片之邊界控制旗標設定為1,亦可避免再新區域與非再新區域間產生資料依存關係。
結果,切片s1與切片s2之切片邊界、及切片s3與切片s4之切片邊界中,不需使環路過濾器處理不作用而將解塊過濾器處理設為關閉或以填補來進行SAO。
如此,本實施形態中,處理對象切片之邊界控制旗標可共通地使用於只針對處理對象切片之切片邊界中的上方切片邊界與左方切片邊界的解塊過濾器處理與SAO之
控制。
圖9是顯示本實施形態之圖像編碼裝置100之處理動作的流程圖。
首先,圖像編碼裝置100之邊界控制部111決定處理對象切片之邊界控制旗標,熵編碼部104將該邊界控制旗標熵編碼(步驟S101)。接著,圖像編碼裝置100將處理對象切片編碼,並從藉由該編碼所生成之資料生成處理對象切片之重組圖像(步驟S102)。接著,邊界控制部111判定在步驟S101所決定之邊界控制旗標是否為0(步驟S103)。在此,當判定邊界控制旗標為0時(步驟S103之Yes),邊界控制部111控制解塊過濾器109,藉此將針對處理對象切片上方與左方之切片邊界的解塊過濾器處理設定為關閉。又,邊界控制部111控制SAO部110,藉此將針對該等切片邊界之SAO之處理模式設定為填補(步驟S104)。另一方面,當判定邊界控制旗標為1時(步驟S103之No),邊界控制部111控制解塊過濾器109,針對上述上方與左方之切片邊界,將解塊過濾器處理設定為開啟(步驟S105)。接著,解塊過濾器109對上述上方與左方之切片邊界進行解塊過濾器處理(步驟S106)。
接著,在執行步驟S104或步驟S106之處理後,SAO部110對上述上方與左方之切片邊界進行SAO(步驟S107)。而,此時,當已在步驟S104將SAO之處理模式設定為填補時,會進行與該填補對應之SAO。
接著,圖像編碼裝置100判定編碼對象圖片中是
否有尚未編碼之切片(步驟S108)。在此,當判定有尚未編碼之切片時(步驟S108之Yes),圖像編碼裝置100會選擇該尚未編碼之切片來作為新的處理對象切片(步驟S109),並重複執行自步驟S101起的處理。
而,在處理對象切片之全部切片邊界中,只針對上述上方與左方之切片邊界來控制環路過濾器處理。又,若沒有上方與左方之切片邊界中的其中一切片邊界,則只針對另一切片邊界來控制環路過濾器處理。又,在作為環路過濾器處理之對象的切片邊界,對位於該切片邊界之周邊且位於包夾該切片邊界之位置的像素進行環路過濾器處理。
如此,本實施形態之圖像編碼方法中,被視為可藉由處理對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)來控制之樣本適應偏移處理(SAO)之對象的切片邊界,與解塊過濾器處理相同地,在重組之處理對象切片之全部切片邊界中,可只限定於上方及左方的至少其中一切片邊界。又,可藉由處理對象切片之邊界控制旗標來控制之樣本適應偏移處理(SAO),與解塊過濾器處理相同地,不僅對位於已重組之處理對象切片上方及左方的至少其中一切片邊界周邊的已重組之處理對象切片內的像素,也會對已重組之其它切片內的像素共通地進行。
故,即使處理對象切片之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之
重組,便可對已重組之處理對象切片進行環路過濾器處理(解塊過濾器處理及SAO),並將該已重組之處理對象切片用於預測圖像之生成。藉此,可減輕處理負擔。
又,藉由處理對象切片之邊界控制旗標,不控制針對已重組之處理對象切片與已重組之下一切片間的切片邊界(處理對象切片下方及右方之切片邊界)的環路過濾器處理。故,當進行伴隨GDR之圖像編碼時,在處理對象切片之編碼結束後,即使得知下一切片是非再新區域時,也不須特意將已較處理對象切片先編碼之邊界控制旗標加以修正。藉此,可減輕處理負擔。
圖10是顯示本實施形態之圖像解碼裝置構成的方塊圖。
圖像解碼裝置200具有熵解碼部204、反量化部205、反轉換部206、加法器207、解塊過濾器209、SAO部210、邊界控制部211及預測部212。
熵解碼部204取得顯示已編碼之動態圖像的位元流,並對該位元流進行熵解碼。藉此,熵解碼部204會輸出包含至少1個量化值之量化區塊、量化參數(QP)、邊界控制旗標。
反量化部205取得從熵解碼部204輸出之量化參數與量化區塊,並用該量化參數來進行對量化區塊之反量化,藉此將包含至少1個頻率係數之係數區塊復原。
反轉換部206對已藉由反量化部205復原之係數區塊進行逆離散餘弦轉換等逆正交轉換,藉此生成解碼差
分圖像。
加法器207將解碼差分圖像與預測部212所生成之預測圖像相加,藉此生成重組圖像。藉由依序生成上述重組圖像,可將位元流中之編碼圖片所含的處理對象(解碼對象)切片解碼。
解塊過濾器209從加法器207取得至少1個重組圖像,並對該等重組圖像之預定邊界進行解塊過濾器處理。在此,解塊過濾器209會根據邊界控制部211之控制,對處理對象切片之預定切片邊界進行解塊過濾器處理。
SAO部210從解塊過濾器209取得至少1個重組圖像後,對該等重組圖像進行SAO。在此,SAO部110會根據邊界控制部211之控制,對由該等重組圖像構成之處理對象切片的預定切片邊界進行SAO。
預測部212使用已進行SAO之處理對象切片來生成編碼對象區塊之預測圖像,並將該預測圖像輸出至加法器207。
圖11是顯示本實施形態之圖像解碼裝置200之處理動作的流程圖。
首先,圖像解碼裝置200之熵解碼部204從位元流抽出處理對象(解碼對象)切片之邊界控制旗標,並將該邊界控制旗標熵解碼(步驟S201)。接著,圖像解碼裝置200將處理對象切片解碼(步驟S202)。接著,邊界控制部211判定在步驟S201熵解碼之邊界控制旗標是否為0(步驟S203)。在此,當判定邊界控制旗標為0時(步驟S203之Yes),邊界控制
部211會控制解塊過濾器209,藉此將針對處理對象切片上方與左方之切片邊界的解塊過濾器處理設定為關閉。又,邊界控制部211控制SAO部210,藉此將對切片邊界之SAO之處理模式設定為填補(步驟S204)。另一方面,當判定邊界控制旗標為1時(步驟S203之No),邊界控制部211會控制解塊過濾器209,藉此將對上述上方與左方之切片邊界的解塊過濾器處理設定為開啟(步驟S205)。接著,解塊過濾器209對上述上方與左方之切片邊界進行解塊過濾器處理(步驟S206)。
接著,在執行了步驟S204或步驟S206之處理後,SAO部210對上述上方與左方之切片邊界進行SAO(步驟S207)。而,此時,當已在步驟S204將SAO之處理模式設定為填補時,進行與該填補對應之SAO。
接著,圖像解碼裝置200判定解碼對象圖片中是否有尚未解碼之切片(步驟S208)。在此,當判定有尚未解碼之切片時(步驟S208之Yes),圖像解碼裝置200會選擇該尚未解碼之切片來作為新的處理對象切片(步驟S209),並重複執行自步驟S201起的處理。
而,在處理對象切片之全部切片邊界中,只針對上述上方與左方之切片邊界來控制環路過濾器處理。又,若上方與左方之切片邊界中沒有其中一切片邊界,則只針對另一切片邊界來控制環路過濾器處理。又,在作為環路過濾器處理之對象的切片邊界,對位於該切片邊界之周邊且位於包夾該切片邊界之位置的像素進行環路過濾器處
理。
如此,本實施形態之圖像解碼方法及圖像解碼裝置200與上述圖像編碼方法及圖像編碼裝置100相同地,根據邊界控制旗標來控制針對處理對象切片之切片邊界的環路過濾器處理。換言之,本實施形態之圖像解碼方法及圖像解碼裝置200會根據用圖7A~圖8所說明之處理動作,進行針對處理對象切片之切片邊界的解塊過濾器處理與SAO。而,圖像解碼方法及圖像解碼裝置200中所用的處理對象切片為解碼對象切片,圖像編碼方法及圖像編碼裝置100中所用的處理對象切片為編碼對象切片。
換言之,本實施形態之圖像解碼方法中,被視為可藉由處理對象切片之邊界控制旗標(slice_loop_filter_across_slices_enabled_flag)控制之樣本適應偏移處理(SAO)之對象的切片邊界,與解塊過濾器處理相同地,在處理對象切片之全部切片邊界中,只限定於上方及左方的至少其中一切片邊界。又,可藉由處理對象切片之邊界控制旗標控制的樣本適應偏移處理(SAO),與解塊過濾器處理相同地,不僅對位於處理對象切片上方及左方的至少其中一切片邊界周邊的處理對象切片內之像素,也對其它切片內之像素共通地進行。
故,即使處理對象切片之邊界控制旗標顯示1,若下一切片之邊界控制旗標顯示0,則不需等待下一切片之解碼,便可對該處理對象切片進行環路過濾器處理(解塊過濾器處理及SAO),並輸出或顯示該處理對象切片。藉此,
可減輕處理負擔。
又,本實施形態中,當邊界控制旗標為0時,可藉由填補模式使樣本適應偏移處理實質上不作用。結果,由於對處理對象切片上方及左方的至少其中一切片邊界,亦即位於該切片邊界周邊的像素,實質上不進行樣本適應偏移處理,因此可抑制包夾該切片邊界而位於與處理對象切片相反側的其它切片、與處理對象切片間的資料依存關係。藉此,可輕易地進行並列地進行複數切片之處理的多切片處理。
又,本實施形態中,當邊界控制旗標為0時,將解塊過濾器處理切換為關閉,藉此可使解塊過濾器處理不作用。結果,由於對處理對象切片上方及左方的至少其中一切片邊界不進行解塊過濾器處理,因此可抑制包夾該切片邊界而位於與處理對象切片相反側之其它切片與處理對象切片間的資料依存關係。藉此,可輕易地進行並列地進行複數切片之處理的多切片處理。
(變形例1)
上述實施形態之圖像編碼方法及圖像解碼方法中,是根據邊界控制旗標來將SAO之處理模式切換成通常處理與填補,但亦可與解塊過濾器處理相同地,將SAO切換成開啟與關閉。
圖12是用以說明本變形例中對切片邊界之SAO控制的圖。
如該圖12所示,藉由切片s3之邊界控制旗標,與
解塊過濾器處理相同地,將針對位於切片s2與切片s3之切片邊界周邊,亦即切片s3上方與左方之切片邊界周邊之像素的SAO切換為開啟與關閉。
例如,當邊界控制旗標=0時,本變形例中,解塊過濾器處理雖與上述實施形態1相同地設定為關閉,但SAO也設定為關閉。換言之,針對位於切片s3上方與左方之切片邊界周邊,切片s3內之各像素與切片s2內之各像素,解塊過濾器109、209不進行解塊過濾器處理,且SAO部110、210也不進行SAO。
換言之,由於SAO部110、210在針對位於上述切片邊界周邊之切片s2之像素的SAO,有可能會參考切片s3之像素,因此不會進行針對該切片s2之像素的SAO。又,SAO部110、210與切片s2之像素相同地,在針對位於上述切片邊界周邊之切片s3之像素的SAO,有可能參考切片s2之像素,因此不會進行針對該切片s3之像素的SAO。
如此,本變形例中將SAO切換為開啟與關閉,藉此可達到與上述實施形態相同之效果。
(變形例2)
上述實施形態之圖像編碼方法及圖像解碼方法中,1個像素有時會成為與複數邊界控制旗標對應之環路過濾器處理之對象。本變形例之特徵在於,即使在此情形下,亦可適切地進行針對該像素之環路過濾器處理。
圖13是顯示切片角周邊之SAO之遮罩例的圖。
上述實施形態之邊界控制旗標,有時要如何進行
針對位於切片角周邊之像素的SAO會不明確。適用SAO之之像素,是包含於圖13所示遮罩之3個像素(圖13中之3個黒色點)中的中央像素。針對該像素之SAO,可藉由切片s2與切片s3之各邊界控制旗標同時地控制。
圖14是顯示切片角周邊之SAO之其它遮罩例的圖。
適用SAO之像素,是包含於圖14所示遮罩之3個像素中的中央像素。針對該像素之SAO,與圖13所示之例相同地,可藉由切片s2與切片s3之各邊界控制旗標同時地控制。
圖15A~圖15F是顯示切片角周邊之SAO之又一遮罩例的圖。
即使是該等圖15A~圖15F所示之例,與上述相同地,針對中央像素之SAO,是否應藉由其中一切片(切片s2或切片s3)之邊界控制旗標來控制是不明確的。且,這些例子中,必須適切地進行該控制。
圖16是顯示可適用SAO之中央像素與其周邊像素之位置關係的圖。本變形例是使用規則1與規則2。
規則1中,當滿足以下條件(1)~(3)時,在針對該中央像素之SAO,是將邊緣索引設定為0。條件(1)為,中央像素是位於處理對象切片(切片s1)內,且位於其它切片(切片s2)內之像素是該中央像素之SAO所必要的。條件(2)為,位於其它切片(切片s2)內之像素是位於中央像素之右、上、下、右上或左下。條件(3)為,其它切片(切片s2)之邊界控
制旗標為0。
規則2中,當滿足以下條件(1)~(3)時,在針對該中央像素之SAO,是將邊緣索引設定為0。條件(1)為,中央像素是位於處理對象切片(切片s1)內,且位於其它切片(切片s2)內之像素是該中央像素之SAO所必要的。條件(2)為,位於其它切片(切片s2)內之像素是位於中央像素之左、上、左上、右上或左下。條件(3)為,處理對象切片(切片s1)之邊界控制旗標為0。
圖17是顯示切片角周邊之45°SAO之遮罩例的圖。
針對圖17所示之3個像素中的中央像素,可適用使用45°之遮罩的SAO。此時,中央像素是位於代表處理對象切片之切片s3內,且位於其它切片s2內之像素是該中央像素之SAO所必要的。故,若切片s2及切片s3之其中一邊界控制旗標顯示0,則在對該中央像素之SAO,會將邊緣索引設定為0。
圖18是顯示切片角周邊之135°SAO之遮罩例的圖。
對於圖18所示之3個像素中的中央像素,可適用使用了135°遮罩的SAO。此時,中央像素是位於代表處理對象切片之切片s2內,且位於其它切片s1內之像素與位於切片s3內之像素是該中央像素之SAO所必要的。故,若切片s2及切片s3之其中一者的邊界控制旗標顯示0,在對該中央像素之SAO中,會將邊緣索引設定為0。
如此,在本變形例,切片角周邊中填補有優先度。藉此,不需為了位於切片角周邊之1個像素而在切片之全部切片邊界進行填補,因此可對切片邊界周邊之各像素進行適切之環路過濾器處理。
換言之,在本變形例,當被視為與邊界控制旗標對應之SAO之對象的像素,是也被視為與其它切片之其它邊界控制旗標對應之SAO之對象的特定像素,且該邊界控制旗標與其它邊界控制旗標之至少一者顯示0時,SAO之處理模式會切換成填補。接著,根據填補進行對該特定像素之SAO。藉此,當對1個像素(特定像素)之複數邊界控制旗標之SAO控制產生競合時,該等邊界控制旗標中顯示0之邊界控制旗標之控制會優先。結果,可適切對進行對該特定像素之SAO。
以上,已根據實施形態及其變形例說明了1個或複數態樣之圖像解碼方法及圖像編碼方法,但本發明不限於該實施形態及變形例。在不背離本發明要旨之情形下,將熟悉此項技藝者可思及之各種變形施加於本實施形態及變形例、或是組合各變形例之構成要件而構築之形態也可包含於一個或複數態樣之範圍內。又,本發明其中一態樣或其它態樣之圖像解碼方法及圖像解碼裝置亦可為以下記載者。
圖19A是顯示本發明其中一態樣之圖像解碼方法的流程圖。
將編碼圖片解碼之圖像解碼方法包含以下步驟
S11~S14。在步驟S11,取得邊界控制旗標,該邊界控制旗標是用以共通地控制針對編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理。接著,在步驟S12,將前述解碼對象切片解碼。接著,在步驟S13,根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理。接著,在步驟S14,在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行與前述邊界控制旗標對應之樣本適應偏移處理。
圖19B是顯示本發明其中一態樣之圖像解碼裝置構成的方塊圖。
可將編碼圖片解碼之圖像解碼裝置10具有旗標取得部11、解碼部12、解塊過濾器13及SAO部14。旗標取得部11取得邊界控制旗標,該邊界控制旗標是用以共通地控制針對編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理。接著,解碼部12將前述解碼對象切片解碼。接著,解塊過濾器13根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理。接著,SAO部14在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行與前述邊界控制旗標對應之樣本適應偏移處理。
上述本發明其中一態樣之圖像解碼方法及圖像解碼裝置亦可達到與上述實施形態及其變形例相同之效果。
圖20A是顯示本發明其它態樣之圖像解碼方法的流程圖。
將編碼圖片解碼之圖像解碼方法包含以下步驟S21~S23。在步驟S21,取得邊界控制旗標,該邊界控制旗標是用以控制針對編碼圖片所含的解碼對象切片之切片邊界的樣本適應偏移處理。接著,在步驟S22,將前述解碼對象切片解碼。接著,在步驟S23,根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已解碼之前述解碼對象切片之上方及左方的至少其中一切片邊界周邊的前述解碼對象切片內的至少1個像素、與已解碼之其它切片內的至少1個像素。
圖20B是顯示本發明其它態樣之圖像解碼裝置構成的方塊圖。
可將編碼圖片解碼之圖像解碼裝置20具有旗標取得部21、解碼部22及SAO部23。旗標取得部21取得邊界控制旗標,前述邊界控制旗標是用以控制針對編碼圖片所含的解碼對象切片之切片邊界的樣本適應偏移處理。接著,解碼部22將前述解碼對象切片解碼。接著,SAO部23根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已解碼之前述解碼對象切片之上方及左方的至少其中一切片邊界周邊的前述解碼對
象切片內的至少1個像素、與已解碼之其它切片內的至少1個像素。
上述本發明其它態樣之圖像解碼方法及圖像解碼裝置也可達到與上述實施形態及其變形例相同之效果。
圖21A是顯示本發明其中一態樣之圖像編碼方法的流程圖。
可將圖片編碼之圖像編碼方法包含以下步驟S31~S35。在步驟S31,將邊界控制旗標編碼,前述邊界控制旗標是用以共通地控制針對前述圖片所含的編碼對象切片的切片邊界的解塊過濾器處理與樣本適應偏移處理。接著,在步驟S32,將前述編碼對象切片編碼。接著,在步驟S33,從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片。接著,在步驟S34,根據前述邊界控制旗標,在已重組之前述編碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理。接著,在步驟S35,在已重組之前述編碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
圖21B是顯示本發明其中一態樣之圖像編碼裝置構成的方塊圖。
可將圖片編碼之圖像編碼裝置30具有旗標編碼部31、編碼部32、重組部33、解塊過濾器34及SAO部35。
換言之,旗標編碼部31將邊界控制旗標編碼,前述邊界控制旗標是用以共通地控制針對前述圖片所含的編碼對象切
片的切片邊界的解塊過濾器處理與樣本適應偏移處理。接著,編碼部32將前述編碼對象切片編碼。接著,重組部33從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片。接著,解塊過濾器34根據前述邊界控制旗標,在已重組之前述編碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理。接著,SAO部35在已重組之前述編碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
上述本發明其中一態樣之圖像編碼方法及圖像編碼裝置也可達到與上述實施形態及其變形例相同之效果。
圖22A是顯示本發明其它態樣之圖像編碼方法的流程圖。
可將圖片編碼之圖像編碼方法包含以下步驟S41~S44。在步驟S41,將邊界控制旗標編碼,前述邊界控制旗標編是用以控制針對前述圖片所含的編碼對象切片之切片邊界的樣本適應偏移處理。接著,在步驟S42,將前述編碼對象切片編碼。接著,在步驟S43,從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片。接著,在步驟S44,根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已重組之前述編碼對象切片之上方及左方的至少其中一切片邊界周邊的前述編碼對象切片內的至少1個像素、與已重組之其它
切片內的至少1個像素。。
圖22B是顯示本發明其它態樣之圖像編碼裝置構成的方塊圖。
可將圖片編碼之圖像編碼裝置40具有旗標編碼部41、編碼部42、重組部43及SAO部44。換言之,旗標編碼部41可將邊界控制旗標編碼,前述邊界控制旗標編是用以控制針對前述圖片所含的編碼對象切片之切片邊界的樣本適應偏移處理。接著,編碼部42將前述編碼對象切片編碼。接著,重組部43從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片。接著,SAO部44根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已重組之前述編碼對象切片之上方及左方的至少其中一切片邊界周邊的前述編碼對象切片內的至少1個像素、與已重組之其它切片內的至少1個像素。
上述本發明其它態樣之圖像編碼方法及圖像編碼裝置也可達到與上述實施形態及其變形例相同之效果。
而,上述各實施形態中,各構成要件是由專用的硬體來構成,但亦可藉由執行適於各構成要件之軟體程式來實現。各構成要件亦可藉由CPU或處理器等程式執行部讀取並執行硬碟或半導體記憶體等記錄媒體所記錄之軟體程式來實現。換言之,圖像編碼裝置及圖像解碼裝置具有處理電路(processing circuitry)與電連接於該處理電路之(可從該處理電路存取之)記憶裝置(storage)。處理電路包含專
用的硬體及程式執行部的至少一者。又,當記憶裝置包含處理電路程式執行部時,會記憶該程式執行部可執行之軟體程式。在此,實現上述實施形態之圖像解碼裝置的軟體是使電腦執行圖19A或圖20A所示之各步驟的程式。又,實現上述實施形態之圖像編碼裝置的軟體是使電腦執行圖21A或圖22A所示之各步驟的程式。
而,在本實施形態及其變形例,雖是對代表處理對象切片與其它切片間之邊界的切片邊界進行了環路過濾器處理,但不限於上述切片邊界,只要是處理對象切片之邊界亦可對任一邊界進行環路過濾器處理。又,在本實施形態及其變形例,雖是根據邊界控制旗標來控制對切片邊界之環路過濾器處理,但在切片之內部亦可如一般進行環路過濾器處理。
(實施形態2)
藉由將用以實現上述各實施形態所示之動態圖像編碼方法(圖像編碼方法)或動態圖像解碼方法(圖像解碼方法)之構成的程式記錄於記憶媒體,可在獨立之電腦系統上輕易地實施上述各實施形態所示之處理。記憶媒體只要是磁碟、光碟、光磁碟、IC卡、半導體記憶體等可記錄程式者即可。
接著在此,說明上述各實施形態所示之動態圖像編碼方法(圖像編碼方法)或動態圖像解碼方法(圖像解碼方法)之應用例及使用其之系統。該系統之特徵在於具有由使用了圖像編碼方法之圖像編碼裝置、及使用了圖像解碼方
法之圖像解碼裝置所構成之圖像編碼解碼裝置。系統之其它構成可視情形適當地變更。
圖23為顯示實現內容發佈服務之內容供給系統ex100之全體構成的圖。將通訊服務之提供區域分割為期望之大小,並於各細胞(cell)內分別設有代表固定無線台之基地台ex106、ex107、ex108、ex109、ex110。
該內容供給系統ex100是透過網際網路服務提供者ex102、電話網ex104、及基地台ex106至ex110,將電腦ex111、PDA(Personal Digital Assistant)ex112、攝像機ex113、行動電話ex114、遊戲機ex115等各機器連接於網際網路ex101。
惟,ex100不限於圖23之構成,亦可組合其中的元件來連接。又,亦可不透過代表固定無線台之基地台ex106至ex110,而將各機器直接連接於電話網ex104。又,各機器亦可透過近距離無線等直接相互連接。
攝像機ex113為數位攝影機等可進行動態影像撮影之機器,攝像機ex116為數位相機等可進行靜止圖像撮影、動態影像撮影之機器。又,行動電話ex114為GSM(登錄商標)(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W-CDMA(Wideband-Code Division Multiple Access)方式、或LTE(Long Term Evolution)方式、HSPA(High Speed Packet Access)之行動電話機、或是PHS(Personal Handyphone System)等皆可。
在內容供給系統ex100,攝像機ex113等透過基地台ex109、電話網ex104連接於串流伺服器ex103,藉此可進行實況發佈等。在實況發佈中,對使用者以攝像機ex113拍攝之內容(例如,音樂實況之影像等),如上述各實施形態所說明地進行編碼處理(即,作為本發明其中一態樣之圖像編碼裝置),並傳送至串流伺服器ex103。另一方面,串流伺服器ex103串流發佈對有要求之用戶端傳送之內容資料。用戶端有可將上述編碼處理之資料解碼的電腦ex111、PDAex112、攝像機ex113、行動電話ex114、遊戲機ex115等。收到所發佈之資料的各機器會將收到的資料進行解碼處理並再生(即,作為本發明其中一態樣之圖像解碼裝置)。
而,所拍攝之資料的編碼處理可在攝像機ex113進行,亦可在傳送處理資料之串流伺服器ex103進行,亦可互相分擔進行。同樣地,所發送之資料的解碼處理可在用戶端進行,亦可在串流伺服器ex103進行,亦可互相分擔進行。又,不限於攝像機ex113,攝像機ex116所拍攝之静止圖像及/或動態圖像資料亦可透過電腦ex111傳送至串流伺服器ex103。此時之編碼處理可在攝像機ex116、電腦ex111、串流伺服器ex103的其中一者進行,亦可互相分擔進行。
又,這些編碼/解碼處理一般是在電腦ex111或各機器所具有的LSIex500處理。LSIex500可為由單晶片或複數晶片組成之構成。而,亦可將動態圖像編碼/解碼用之軟體組入電腦ex111等可讀取之其中一記錄媒體(CD-ROM、軟碟、硬碟等),並以該軟體進行編碼/解碼處理。再者,行動
電話ex114具有攝像機時,亦可傳送該攝像機所取得之動態影像資料。此時之動態影像資料為以行動電話ex114所具有的LSIex500進行編碼處理之資料。
又,串流伺服器ex103可為複數伺服器或複數電腦,而將資料分散處理、記錄或發佈。
如此一來,內容供給系統ex100可由用戶端接收經編碼之資料並再生。如此,內容供給系統ex100中,用戶端可即時地接收使用者所傳送之資訊並加以解碼、再生,即使是不具特別權利或設備之使用者亦可實現個人廣播。
而,不限於內容供給系統ex100的例子,如圖24所示,數位廣播用系統ex200亦可組入上述各實施形態之至少動態圖像編碼裝置(圖像編碼裝置)或動態圖像解碼裝置(圖像解碼裝置)的其中一者。具體而言,廣播台ex201透過電波將已於影像資料多工音樂資料等的多工資料傳送至通訊或衛星ex202。該影像資料為已藉由上述各實施形態所說明之動態圖像編碼方法編碼之資料(即,本發明其中一態樣之圖像編碼裝置所編碼之資料)。收到資料之廣播衛星ex202會發出廣播用電波,並由可接收衛星廣播之家庭之天線ex204來接收該電波。收到的多工資料會由電視(接收機)ex300或機上盒(STB)ex217等裝置解碼並再生(即,作為本發明其中一態樣之圖像解碼裝置)。
又,讀取並解碼DVD、BD等記錄媒體ex215所記錄之多工資料、或於記錄媒體ex215編碼影像訊號、甚至視情形與音樂訊號多工並寫入的讀取器/記錄器ex218,亦可安
裝上述各實施形態所示之動態圖像解碼裝置或動態圖像編碼裝置。此時,再生之影像訊號會顯示於螢幕ex219,可藉由記錄有多工資料之記錄媒體ex215於其它裝置或系統中再生影像訊號。又,亦可於與有線電視用之纜線ex203或衛星/地面廣播之天線ex204連接之機上盒ex217內安裝動態圖像解碼裝置,並將此以電視之螢幕ex219來顯示。此時亦可不於機上盒,而是於電視內組入動態圖像解碼裝置。
圖25為顯示使用了上述各實施形態所說明之動態圖像解碼方法及動態圖像編碼方法之電視(接收機)ex300之圖。電視ex300具有:調諧器ex301,透過接收上述廣播之天線ex204或纜線ex203等來取得或輸出已於影像資料多工有聲音資料之多工資料;調變/解調部ex302,將收到之多工資料解調、或調變成傳送至外部之多工資料;以及多工/解多工部ex303,將解調之多工資料解多工為影像資料與聲音資料、或將訊號處理部ex306所編碼之影像資料、聲音資料多工。
又,電視ex300包含:訊號處理部ex306,具有將聲音資料、影像資料分別解碼或將各資訊編碼的聲音訊號處理部ex304與影像訊號處理部ex305(作為本發明其中一態樣之圖像編碼裝置或圖像解碼裝置);以及輸出部ex309,具有輸出已解碼之聲音訊號的揚聲器ex307,及顯示已解碼之影像訊號的顯示器等顯示部ex308。再者,電視ex300具有介面部ex317,該介面部ex317具有接受使用者操作輸入之操作輸入部ex312等。再者,電視ex300具有可整合控制
各部之控制部ex310、及對各部供給電力之電源電路部ex311。介面部ex317除了操作輸入部ex312以外,亦可具有與讀取器/記錄器ex218等外部機器連接的橋接器ex313、用以安裝SD卡等記錄媒體ex216的插槽部ex314、用以連接硬碟等外部記錄媒體的驅動器ex315、以及與電話網連接的數據機ex316等。而,記錄媒體ex216為可藉由收容之非依電性/依電性半導體記憶體元件來電性進行資訊記錄者。電視ex300之各部透過同步匯流排相互連接。
首先,說明電視ex300將藉由天線ex204等從外部取得的多工資料解碼並再生的構成。電視ex300接受來自遙控器ex220等之使用者操作,根據具有CPU等的控制部ex310之控制,將調變/解調部ex302所解調之多工資料以多工/解多工部ex303解多工。再者,電視ex300用聲音訊號處理部ex304將已解多工之聲音資料解碼,並用影像訊號處理部ex305將已解多工之影像資料用上述各實施形態所說明之解碼方法來解碼。解碼之聲音訊號、影像訊號會分別從輸出部ex309輸出至外部。輸出時,可將這些訊號暫時儲存於緩衝器ex318、ex319等,以使聲音訊號與影像訊號同步再生。又,電視ex300亦可不是從廣播等,而是從磁/光碟、SD卡等記錄媒體ex215、ex216讀出多工資料。接著,說明電視ex300將聲音訊號或影像訊號編碼,並傳送至外部或寫入至記錄媒體等之構成。電視ex300接受來自遙控器ex220等之使用者操作,根據控制部ex310之控制,以聲音訊號處理部ex304將聲音訊號編碼,並以影像訊號處理部ex305將
影像訊號用上述各實施形態所說明之編碼方法編碼。經編碼之聲音訊號、影像訊號會在多工/解多工部ex303多工並輸出至外部。多工時,可將這些訊號暫時儲存於緩衝器ex320、ex321等,以使聲音訊號與影像訊號同步。而,緩衝器ex318、ex319、ex320、ex321可如圖所示具有複數個、亦可為共有1個以上緩衝器之構成。再者,如圖所示外,例如調變/解調部ex302或多工/解多工部ex303之間等,亦可於緩衝器儲存資料來作為避免系統溢位(over flow)、虧位(under flow)之緩衝方式。
又,電視ex300除了從廣播等或記錄媒體等取得聲音資料、影像資料外,亦可具有接受麥克風或攝像機之AV輸入的構成,而對從該等取得之資料進行編碼處理。
而,在此雖說明了電視ex300可進行上述編碼處理、多工、及外部輸出之構成,但亦可為無法進行這些處理,而僅可進行上述接收、解碼處理、外部輸出之構成。
又,以讀取器/記錄器ex218從記錄媒體取出或寫入多工資料時,上述解碼處理或編碼處理可在電視ex300或讀取器/記錄器ex218的其中一者進行,亦可由電視ex300與讀取器/記錄器ex218互相分擔進行。
舉例言之,圖26顯示從光碟讀取或寫入資料時之資訊再生/記錄部ex400的構成。資訊再生/記錄部ex400具有以下說明之元件ex401、ex402、ex403、ex404、ex405、ex406、ex407。光學頭ex401對代表光碟之記錄媒體ex215的記錄面照射雷射光點來寫入資訊,並檢測來自記錄媒體ex215之記
錄面的反射光來讀取資訊。調變記錄部ex402電性驅動光學頭ex401所內藏之半導體雷射而根據記錄資料進行雷射光之調變。再生解調部ex403將藉由光學頭ex401所內藏之光檢測器而電性檢測出來自記錄面之反射光的再生訊號加以放大,並將記錄於記錄媒體ex215之訊號分量分離、解調,以再生必要之資訊。緩衝器ex404暫時保存用以記錄於記錄媒體ex215之資訊及從記錄媒體ex215再生之資訊。碟片馬達ex405使記錄媒體ex215旋轉。伺服控制部ex406一面控制碟片馬達ex405之旋轉驅動一面使光學頭ex401移動至預定之資訊軌,進行雷射光點之追蹤處理。系統控制部ex407進行資訊再生/記錄部ex400全體之控制。上述讀取或寫入處理係藉由系統控制部ex407利用緩衝器ex404所保存之各種資訊,或視需要進行新的資訊的生成/追加,使調變記錄部ex402、再生解調部ex403、伺服控制部ex406進行協調動作,並透過光學頭ex401進行資訊之記錄再生而實現。系統控制部ex407係以例如微處理器構成,並執行讀取寫入之程式來執行這些處理。
以上說明了光學頭ex401照射雷射光點,但亦可為用近接場光來進行高密度之記錄的構成。
圖27顯示代表光碟之記錄媒體ex215的示意圖。記錄媒體ex215之記錄面螺旋狀地形成有引導溝(凹溝),資訊軌ex230藉由凹溝形狀之變化而預先記錄有顯示光碟上之絶對位置的位址資訊。該位址資訊包含用以特定代表記錄資料之單位之記錄塊ex231的位置資訊,可在進行記錄或
再生之裝置再生資訊軌ex230並讀取位址資訊來特定記錄塊。又,記錄媒體ex215包含資料記錄區域ex233、內周區域ex232、外周區域ex234。用於記錄使用者資料之區域為資料記錄區域ex233,配置於資料記錄區域ex233內周或外周的內周區域ex232與外周區域ex234則用於使用者資料之記錄以外的特定用途。資訊再生/記錄部ex400對上述記錄媒體ex215之資料記錄區域ex233,進行已編碼之聲音資料、影像資料或已將該等資料多工之多工資料的讀取。
以上係以1層的DVD、BD等光碟為例來說明,但不限於此,亦可為多層構造而表面以外亦可記錄之光碟。又,亦可為於光碟之相同處以各自不同波長之顏色的光來記錄資訊、或從各個角度記錄不同資訊之層等,進行多維記錄/再生之構造的光碟。
又,數位廣播用系統ex200中,亦可在具有天線ex205之汽車ex210從衛星ex202等接收資料,並於汽車ex210所具有之汽車導航ex211等顯示裝置再生動態影像。而,汽車導航ex211之構成可例如於圖25所示之構成中,加上GPS接收部之構成,而在電腦ex111或行動電話ex114等亦可考慮相同作法。
圖28A為顯示使用了上述實施形態所說明之動態圖像解碼方法及動態圖像編碼方法的行動電話ex114之圖。行動電話ex114具有用以在與基地台ex110之間傳送接收電波之天線ex350、可拍攝影像、靜止圖像之攝像機部ex365、以及顯示攝像機部ex365所拍攝之影像與天線ex350
所接收之影像等已解碼資料之液晶顯示器等的顯示部ex358。行動電話ex114更包含具有操作鍵部ex366之本體部、代表用以輸出聲音之揚聲器等的聲音輸出部ex357、代表用以輸入聲音之麥克風等的聲音輸入部ex356、保存所拍攝之影像、靜止圖像、所錄音之聲音或收到的影像、靜止圖像、郵件等已編碼資料或已解碼資料的記憶體部ex367、或代表與同樣地保存資料之記錄媒體間的介面部的插槽部ex364。
接著,以圖28B說明行動電話ex114之構成例。行動電話ex114是透過匯流排ex370,於整合地控制具有顯示部ex358及操作鍵部ex366之本體部各部的主控制部ex360,互相連接電源電路部ex361、操作輸入控制部ex362、影像訊號處理部ex355、攝像機介面部ex363、LCD(Liquid Crystal Display)控制部ex359、調變/解調部ex352、多工/解多工部ex353、聲音訊號處理部ex354、插槽部ex364、記憶體部ex367。
當藉由使用者之操作來結束通話及使電源鍵呈開啟狀態時,電源電路部ex361會從電池組對各部供給電力來將行動電話ex114啟動至可動作狀態。
行動電話ex114根據具有CPU、ROM、RAM等之主控制部ex360的控制,以聲音訊號處理部ex354將聲音通話模式時聲音輸入部ex356所收音之聲音訊號轉換為數位聲音訊號,將該數位聲音訊號以調變/解調部ex352進行頻譜擴散處理,並於施以數位類比轉換處理及頻率轉換處理後
以傳送/接收部ex351透過天線ex350加以傳送。又,行動電話ex114將聲音通話模式時透過天線ex350接收之接收資料放大並施以頻率轉換處理及類比數位轉換處理,且於以調變/解調部ex352進行頻譜反擴散處理、以聲音訊號處理部ex354轉換為類比聲音訊號後,將該類比聲音訊號從聲音輸出部ex357加以輸出。
又,在資料通訊模式下傳送電子郵件時,藉由本體部之操作鍵部ex366等操作所輸入之電子郵件的本文資料,會透過操作輸入控制部ex362送出到主控制部ex360。主控制部ex360將本文資料以調變/解調部ex352進行頻譜擴散處理,並以傳送/接收部ex351施以數位類比轉換處理及頻率轉換處理後,透過天線ex350傳送至基地台ex110。接收電子郵件時,則對收到的資料進行大致相反的處理,並輸出至顯示部ex358。
在資料通訊模式下傳送影像、靜止圖像、或影像與聲音時,影像訊號處理部ex355將從攝像機部ex365供給之影像訊號以上述各實施形態所示之動態圖像編碼方法進行壓縮編碼(即,作為本發明其中一態樣之圖像編碼裝置),並將經編碼之影像資料送出至多工/解多工部ex353。又,聲音訊號處理部ex354將以攝像機部ex365拍攝影像、靜止圖像時聲音輸入部ex356所收音之聲音訊號編碼,並將經編碼之聲音資料送出至多工/解多工部ex353。
多工/解多工部ex353將從影像訊號處理部ex355供給之經編碼影像資料與從聲音訊號處理部ex354供給之
經編碼聲音資料以預定方式加以多工,並將結果所得之多工資料以調變/解調部(調變/解調電路部)ex352進行頻譜擴散處理,在以傳送/接收部ex351施以數位類比轉換處理及頻率轉換處理後透過天線ex350加以傳送。
在資料通訊模式下接收連結於首頁等之動態圖像檔案之資料時、或接收附加有影像及/或聲音之電子郵件時,為了將透過天線ex350接收之多工資料解碼,多工/解多工部ex353會將多工資料解多工來分為影像資料之位元流與聲音資料之位元流,並透過同步匯流排ex370將經編碼之影像資料供給至影像訊號處理部ex355,且將經編碼之聲音資料供給至聲音訊號處理部ex354。影像訊號處理部ex355利用與上述各實施形態所示之動態圖像編碼方法對應的動態圖像解碼方法解碼來將影像訊號解碼(即,作為本發明其中一態樣之圖像解碼裝置),並透過LCD控制部ex359從顯示部ex358顯示例如連結於首頁之動態圖像檔案所含的影像、靜止圖像。又,聲音訊號處理部ex354會將聲音訊號解碼,並從聲音輸出部ex357輸出聲音。
又,上述行動電話ex114等終端與電視ex300相同地,除了具有編碼器/解碼器兩者之傳送接收型終端外,還有只有編碼器之傳送終端、只有解碼器之接收終端等3種安裝形式。再者,數位廣播用系統ex200已說明了接收、傳送影像資料中多工有音樂資料等的多工資料,但除了聲音資料外多工有與影像相關之文字資料等的資料亦可,且不是多工資料而是影像資料本身亦可。
如此,可將上述各實施形態所示之動態圖像編碼方法或動態圖像解碼方法用於上述任一機器/系統,藉此,可獲得上述各實施形態所說明之效果。
又,本發明不限於上述實施形態,在不脫離本發明範圍下可進行各種變形或修正。
(實施形態3)
亦可視需要將上述各實施形態所示之動態圖像編碼方法或裝置、與依據MPEG-2、MPEG4-AVC、VC-1等不同規格之動態圖像編碼方法或裝置適當地切換,藉此生成影像資料。
在此,生成各個分別依據不同規格之複數影像資料時,在解碼之際,必須選擇對應各個規格之解碼方法。惟,由於無法識別解碼之影像資料是依據哪個規格,因此會產生無法選擇適當之解碼方法的課題。
為了解決該課題,可將影像資料中多工有聲音資料等的多工資料構造成包含一顯示影像資料是依據哪個規格的識別資訊。以下說明包含藉由上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料的多工資料之具體構成。多工資料為MPEG-2傳輸串流形式之數位串流。
圖29為顯示多工資料之構成的圖。如圖29所示,多工資料可藉由從視訊流、音訊流、演示圖形流(PG)、互動圖形流中多工1個以上而獲得。視訊流表示電影之主影像及副影像,音訊流(IG)表示電影之主聲音部分及與該主聲音混合之副聲音,演示圖形流表示電影之字幕。在此,主影
像表示顯示於畫面之一般影像,副影像表示在主影像中以小畫面顯示之影像。又,互動圖形流表示於畫面上配置GUI零件而作成之對話畫面。視訊流係以上述各實施形態所示之動態圖像編碼方法或裝置、或依據習知MPEG-2、MPEG4-AVC、VC-1等規格之動態圖像編碼方法或裝置來編碼。音訊流係以杜比AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或LPCM等方式來編碼。
多工資料所含的各串流係以PID來識別。例如,用於電影之影像的視訊流分配有0x1011,音訊流分配有0x1100至0x111F,演示圖形分配有0x1200至0x121F,互動圖形流分配有0x1400至0x141F,用於電影之副影像的視訊流分配有0x1B00至0x1B1F,用於與主聲音混合之副聲音的音訊流分配有0x1A00至0x1A1F。
圖30為顯示多工資料是如何多工之示意圖。首先,將由複數視訊框構成之視訊流ex235、由複數音訊框構成之音訊流ex238分別轉換為PES封包列ex236及ex239,並轉換為TS封包ex237及ex240。同樣地將演示圖形流ex241及互動圖形ex244之資料分別轉換為PES封包列ex242及ex245,再轉換為TS封包ex243及ex246。多工資料ex247是將這些TS封包多工為1條串流而構成。
圖31更詳細地顯示PES封包列中是如何儲存視訊流。圖31之第1段顯示視訊流之視訊框列。第2段顯示PES封包列。如圖31之箭頭yy1、yy2、yy3、yy4所示,代表視訊流之複數Video Presentation Unit的I圖片、B圖片、P圖片
會依照每一圖片分割,並儲存於PES封包之酬載。各PES封包具有PES標頭,PES標頭可儲存代表圖片顯示時刻之PTS(Presentation Time-Stamp)或代表圖片解碼時刻之DTS(Decoding Time-Stamp)。
圖32顯示最後寫入多工資料之TS封包的形式。TS封包為188Byte固定長之封包,由具有識別串流之PID等資訊的4Byte之TS標頭、及儲存資料的184Byte之TS酬載構成,上述PES封包會分割並儲存於TS酬載。以BD-ROM而言,TS封包會附加4Byte之TP_Extra_Header,構成192Byte之源封包而寫入至多工資料。TP_Extra_Header可記載ATS(Arrival_Time_Stamp)等資訊。ATS顯示該TS封包對解碼器之PID過濾器的傳送開始時刻。多工資料係如圖32下段所示排列源封包,從多工資料之前頭遞增之編號稱為SPN(源封包號碼)。
又,多工資料所含的TS封包中,除了影像/聲音/字幕等各串流以外,尚有PAT(Program Association Table)、PMT(Program Map Table)、PCR(Program Clock Reference)等。PAT顯示用於多工資料中之PMT的PID為何,PAT本身之PID係登錄為0。PMT具有多工資料中所含的影像/聲音/字幕等各串流之PID及與各PID對應之串流的屬性資訊,且具有與多工資料相關之各種描述符。描述符中有指示許可/不許可多工資料之複製的複製控制資訊等。PCR為了取得代表ATS之時間軸的ATC(Arrival Time Clock)與代表PTS/DTS之時間軸的STC(System Time Clock)之同步,具有
與將PCR封包傳送至解碼器之ATS對應的STC時間之資訊。
圖33為詳細說明PMT之資料構造之圖。於PMT之前頭配置記載了包含於該PMT之資料長度等的PMT標頭。在PMT標頭之後,配置複數與多工資料相關之描述符。上述複製控制資訊等係作為描述符記載。於描述符之後配置複數與包含於多工資料之各串流相關的串流資訊。串流資訊由記載了串流類型、串流之PID、串流之屬性資訊(畫面更新率、寬高比等)之串流描述符構成,以識別串流之壓縮編解碼器等。串流描述符的數量與存在於多工資料之串流的數量相當。
記錄於記錄媒體等時,上述多工資料會與多工資料資訊檔案一起記錄。
如圖34所示,多工資料資訊檔案為多工資料之管理資訊,與多工資料1對1地對應,由多工資料資訊、串流屬性資訊與登錄圖構成。
如圖34所示,多工資料資訊由系統率、再生開始時刻、再生結束時刻構成。系統率顯示多工資料之傳送到後述系統目標解碼器之PID過濾器的最大傳送率。包含於多工資料中的ATS之間隔係設定為低於系統率。再生開始時刻為多工資料前頭之視訊框的PTS,再生結束時刻可設定為將多工資料末端之視訊框的PTS加上1訊框分的再生間隔。
如圖35所示,串流屬性資訊是將關於多工資料所含的各串流之屬性資訊登錄於每一PID。屬性資訊按照每一視訊流、音訊流、演示圖形流、互動圖形流而具有不同資
訊。視訊流屬性資訊具有視訊流是以何種壓縮編解碼器壓縮、構成視訊流之各個圖片資料的解析度為何、寬高比為何、畫面更新率為何等資訊。音訊流屬性資訊具有音訊流是以何種壓縮編解碼器壓縮、音訊流所含的頻道數為何、對應於什麼語言、取樣頻率為何等資訊。這些資訊可用於播放器再生前之解碼器的初始化等。
本實施形態是利用上述多工資料中,包含於PMT之串流類型。又,記錄媒體記錄有多工資料時,則利用包含於多工資料資訊之視訊流屬性資訊。具體而言,上述各實施形態所示之動態圖像編碼方法或裝置中,是設置一對包含於PMT之串流類型、或視訊流屬性資訊設定固有資訊之步驟或機構,該固有資訊表示是藉由上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料。藉由該構成,可識別藉由上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料及依據其它規格之影像資料。
又,圖36顯示本實施形態之動態圖像解碼方法的步驟。步驟exS100中,從多工資料取得包含於PMT之串流類型、或包含於多工資料資訊之視訊流屬性資訊。接著,步驟exS101中,判斷是否顯示串流類型或視訊流屬性資訊為上述各實施形態所示之動態圖像編碼方法或裝置所生成之多工資料。接著,當判斷串流類型或視訊流屬性資訊是上述各實施形態所示之動態圖像編碼方法或裝置所生成的時,在步驟exS102中,利用上述各實施形態所示之動態圖像解碼方法來進行解碼。又,當顯示串流類型或視訊流屬
性資訊為依據習知MPEG-2、MPEG4-AVC、VC-1等規格時,在步驟exS103中,利用依據習知規格之動態圖像解碼方法來進行解碼。
如此,藉由於串流類型或視訊流屬性資訊設定新的固有值,在解碼時,便可判斷是否可用上述各實施形態所示之動態圖像解碼方法或裝置來解碼。故,即使輸入了依據不同規格之多工資料時,亦可選擇適當之解碼方法或裝置,因此可在不產生錯誤下進行解碼。又,亦可將本實施形態所示之動態圖像編碼方法或裝置、或是動態圖像解碼方法或裝置,用於上述任一機器/系統。
(實施形態4)
上述各實施形態所示之動態圖像編碼方法及裝置、動態圖像解碼方法及裝置在典型上可用積體電路之LSI來實現。舉例言之,圖37顯示單晶片化之LSIex500的構成。LSIex500具有以下說明之元件ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509,各元件透過匯流排ex510連接。電源電路部ex505在電源為開啟狀態時,對各部供給電力而啟動至可動作之狀態。
進行例如編碼處理時,LSIex500根據具有CPUex502、記憶體控制器ex503、串流控制器ex504、驅動頻率控制部ex512等的控制部ex501之控制,藉由AV I/Oex509從麥克風ex117或攝像機ex113等輸入AV訊號。輸入之AV訊號會暫時儲存於SDRAM等外部記憶體ex511。根據控制部ex501之控制,已儲存之資料會依照處理量或處理
速度適當地分為複數次並送到訊號處理部ex507,在訊號處理部ex507進行聲音訊號之編碼及/或影像訊號之編碼。在此,影像訊號之編碼處理為上述各實施形態所說明之編碼處理。在訊號處理部ex507,進而視情況進行將已編碼之聲音資料與已編碼之影像資料多工之處理,從串流I/Oex506輸出至外部。該輸出之多工資料會傳送至基地台ex107,或寫入至記錄媒體ex215。而,多工時可暫時於緩衝器ex508儲存資料以進行同步。
而,上述已說明記憶體ex511為LSIex500之外部構成,但亦可為包含於LSIex500內部之構成。緩衝器ex508也不限於1個,亦可具有複數緩衝器。又,LSIex500可單晶片化,亦可複數晶片化。
又,上述中,控制部ex501具有CPUex502、記憶體控制器ex503、串流控制器ex504、驅動頻率控制部ex512等,但控制部ex501之構成不限於該構成。例如,訊號處理部ex507亦可為更具有CPU之構成。藉由於訊號處理部ex507之內部也設置CPU,可更提高處理速度。又,其它例子可為CPUex502具有訊號處理部ex507、或訊號處理部ex507之一部份的例如聲音訊號處理部之構成。此時,控制部ex501之構成為包含訊號處理部ex507、或具有其一部分之CPUex502。
而,在此雖為LSI,但根據積體度之差異,有時亦可稱為IC、系統LSI、Super LSI、Ultra LSI。
又,積體電路化之手法不限於LSI,亦可用專用
電路或通用處理器來實現。亦可利用可在LSI製造後編程之FPGA(Field Programmable Gate Array(現場可編程閘級陣列))、或可再構築LSI內部之電路元件之連接或設定的可重組態處理器。上述可編程邏輯元件典型上可載入構成軟體或韌體之程式或從記憶體等讀取,藉此執行上述各實施形態所示之動態圖像編碼方法或動態圖像解碼方法。
再者,若因半導體技術之進步或衍生之其它技術而出現替代LSI之積體電路技術,當然亦可利用該技術來進行功能區塊之積體化。也有生物技術之應用等的可能性。
(實施形態5)
將上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料解碼時,相較於依據習知MPEG-2、MPEG4-AVC、VC-1等規格之影像資料解碼時,處理量會增加。故,在LSIex500,必須設定為較將依據習知規格之影像資料解碼時的CPUex502之驅動頻率高的驅動頻率。惟,若提高驅動頻率,會產生消耗電力增加的課題。
為了解決該課題,電視ex300、LSIex500等動態圖像解碼裝置會構造成識別影像資料是依據何種規格,並依據規格來切換驅動頻率。圖38顯示本實施形態之構成ex800。驅動頻率切換部ex803在影像資料是由上述各實施形態所示之動態圖像編碼方法或裝置所生成者時,會將驅動頻率設定的較高。且,對執行上述各實施形態所示之動態圖像解碼方法之解碼處理部ex801,指示將影像資料解碼。另一方面,當影像資料為依據習知規格之影像資料時,
相較於影像資料為上述各實施形態所示之動態圖像編碼方法或裝置所生成者時,會將驅動頻率設定的較低。且,對依據習知規格之解碼處理部ex802,指示將影像資料解碼。
更具體而言,驅動頻率切換部ex803係由圖37之CPUex502與驅動頻率控制部ex512構成。又,執行上述各實施形態所示之動態圖像解碼方法的解碼處理部ex801、及依據習知規格的解碼處理部ex802,相當於圖37之訊號處理部ex507。CPUex502可識別影像資料是依據何種規格。且,驅動頻率控制部ex512根據來自CPUex502之訊號來設定驅動頻率。又,訊號處理部ex507根據來自CPUex502之訊號來進行影像資料之解碼。在此,影像資料之識別可利用例如實施形態3所記載之識別資訊。識別資訊不限於實施形態3所記載者,只要是可識別影像資料是依據何種規格之資訊即可。例如,當可根據可識別影像資料是用於電視、或是用於光碟等的外部訊號來識別影像資料是依據何種規格時,亦可根據該外部訊號來進行識別。又,CPUex502之驅動頻率選擇可根據例如圖40之影像資料規格與驅動頻率對應之查找表來進行。將查找表預先儲存於緩衝器ex508或LSI之內部記憶體,並由CPUex502參考該查找表,藉此可選擇驅動頻率。
圖39顯示實施本實施形態之方法的步驟。首先,在步驟exS200,訊號處理部ex507從多工資料取得識別資訊。接著,在步驟exS201,CPUex502根據識別資訊來識別影像資料是否為上述各實施形態所示之編碼方法或裝置所
生成者。影像資料為上述各實施形態所示之編碼方法或裝置所生成者時,在步驟exS202,CPUex502會將驅動頻率設定的較高的訊號送到驅動頻率控制部ex512。且,於驅動頻率控制部ex512,設定為較高的驅動頻率。另一方面,當顯示是依據習知MPEG-2、MPEG4-AVC、VC-1等規格的影像資料時,在步驟exS203,CPUex502會將驅動頻率設定的較低的訊號送到驅動頻率控制部ex512。且,於驅動頻率控制部ex512,設定為相較於影像資料為上述各實施形態所示之編碼方法或裝置所生成者時較低的驅動頻率。
再者,藉由與驅動頻率之切換連動地來變更施加於LSIex500或包含LSIex500之裝置的電壓,可更提高省電效果。例如,將驅動頻率設定的較低時,相較於將驅動頻率設定的較高的情形,可將施於LSIex500或包含LSIex500之裝置的電壓設定的較低。
又,驅動頻率之設定方法在解碼時之處理量大的情況下,可將驅動頻率設定的較高,而在解碼時之處理量小的情況下,則可將驅動頻率設定的較低,並不限於上述設定方法。例如,若將依據MPEG4-AVC規格之影像資料解碼的處理量,大於將上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料解碼的處理量時,可使驅動頻率之設定與上述情況相反。
再者,驅動頻率之設定方法不限於將驅動頻率設定的較低之構成。例如,識別資訊顯示是上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料時,亦
可將施加於LSIex500或包含LSIex500之裝置的電壓設定的較高,而當顯示是依據習知MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,則將施加於LSIex500或包含LSIex500之裝置的電壓設定的較低。又,舉例言之,當識別資訊顯示是上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料時,不使CPUex502之驅動停止,而當顯示是依據習知MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,由於處理上有餘力,因此亦可考慮使CPUex502之驅動暫時停止。即使當識別資訊顯示是上述各實施形態所示之動態圖像編碼方法或裝置所生成之影像資料時,若處理上有餘力,亦可使CPUex502之驅動暫時停止。此時,相較於顯示是依據習知MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,可將停止時間設定的較短。
如此,藉由按照影像資料所依據之規格來切換驅動頻率,可謀求省電化。又,以電池來驅動LSIex500或包含LSIex500之裝置時,隨著省電化,可增長電池之壽命。
(實施形態6)
有時對於電視或行動電話等上述機器/系統會輸入依據不同規格之複數影像資料。如此,為了在輸入了依據不同規格之複數影像資料時亦可解碼,LSIex500之訊號處理部ex507必須對應複數規格。惟,若個別地使用對應各個規格之訊號處理部ex507,會產生LSIex500之電路規模變大,且成本增加之課題。
為了解決該課題,可構造成將用以執行上述各實
施形態所示之動態圖像解碼方法的解碼處理部、與依據習知MPEG-2、MPEG4-AVC、VC-1等規格的解碼處理部一部份共有化。將該構成例顯示於圖41A之ex900。例如,上述各實施形態所示之動態圖像解碼方法與依據MPEG4-AVC規格之動態圖像解碼方法,在熵編碼、反量化、解塊/過濾、動態補償等處理上,處理內容為一部份共通。共通之處理內容可共有對應MPEG4-AVC規格之解碼處理部ex902,而不對應MPEG4-AVC規格之本發明其中一態樣所特有的其它處理內容則使用專用的解碼處理部ex901。解碼處理部之共有化亦可構造成共通之處理內容是共有用以執行上述各實施形態所示之動態圖像解碼方法的解碼處理部,而MPEG4-AVC規格所特有的處理內容則使用專用的解碼處理部。
又,將處理一部份共有化之其它例子顯示於圖41B之ex1000。該例中,構造成使用與本發明其中一態樣所特有的處理內容對應的專用解碼處理部ex1001、與其它習知規格所特有的處理內容對應的專用解碼處理部ex1002、以及與本發明其中一態樣之動態圖像解碼方法和其它習知規格之動態圖像解碼方法共通的處理內容對應的共用解碼處理部ex1003。在此,專用解碼處理部ex1001、ex1002不一定是特別針對本發明其中一態樣或其它習知規格所特有的處理內容者,而是可執行其它通用處理者亦可。又,本實施形態之構成亦可用LSIex500安裝。
如此,對於在本發明其中一態樣之動態圖像解碼
方法與習知規格之動態圖像解碼方法上共通之處理內容共有解碼處理部,藉此可縮小LSI之電路規模,且可降低成本。
產業上之可利用性
本發明之圖像解碼方法及圖像編碼方法可達到減輕處理負擔之效果,可利用於例如儲存、傳送、通訊等各種用途。舉例言之,本發明可用於電視、數位錄放影機、汽車導航、行動電話、數位相機、數位錄影機等資訊顯示機器或拍攝機器。
S‧‧‧步驟
Claims (15)
- 一種圖像解碼方法,可將編碼圖片解碼,包含以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以共通地控制針對前述編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述解碼對象切片解碼;根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
- 一種圖像解碼方法,可將編碼圖片解碼,包含有以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以控制針對前述編碼圖片所含的解碼對象切片之切片邊界的樣本適應偏移處理;將前述解碼對象切片解碼;及根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已解碼之前述解碼對象切片之上方及左方的至少其中一切片邊界周邊的前述解碼對象切片內的至少1個像素、與已解碼之其它切片內的至少1個像素。
- 如請求項1之圖像解碼方法,其中在進行前述樣本適應偏移處理之際,根據前述邊界控制旗標來切換前述樣本適應偏移處理之處理模式,並依照藉由切換所選擇之處理模式來進行前述樣本適應偏移處理。
- 如請求項3之圖像解碼方法,其中在進行前述樣本適應偏移處理之際,當前述邊界控制旗標顯示0時,將前述樣本適應偏移處理之處理模式切換成對視為偏移對象之像素加上0作為偏移值之填補模式,並依照前述填補(padding)模式來進行前述樣本適應偏移處理。
- 如請求項4之圖像解碼方法,其中前述樣本適應偏移處理有複數處理模式,前述複數處理模式是根據視為偏移對象之像素之邊緣內的特徴而分類,且前述複數處理模式分別分配有邊緣索引,在進行前述樣本適應偏移處理之際,當前述邊界控制旗標顯示0時,藉由將邊緣索引設定為0,將前述樣本適應偏移處理之處理模式切換成前述填補模式。
- 如請求項1之圖像解碼方法,其中根據前述邊界控制旗標將解塊過濾器處理切換為開啟與關閉,且只有在切換為開啟時,進行前述解塊過濾器處理。
- 如請求項1之圖像解碼方法,其中當前述邊界控制旗標顯示0時, 藉由將前述解塊過濾器處理切換為關閉,不進行前述解塊過濾器處理,在進行前述樣本適應偏移處理之際,將前述樣本適應偏移處理之處理模式,切換成將0作為偏移值加到像素值之填補模式,並依照前述填補模式來進行前述樣本適應偏移處理。
- 如請求項4或5之圖像解碼方法,其中當被視為與前述邊界控制旗標對應之前述樣本適應偏移處理之對象的像素,是也被視為與其它切片之其它邊界控制旗標對應之樣本適應偏移處理之對象的特定像素時,在進行前述樣本適應偏移處理之際,當前述邊界控制旗標與前述其它邊界控制旗標中的至少其中一者顯示0時,將前述樣本適應偏移處理之處理模式切換成前述填補模式,並依照前述填補模式,進行針對前述特定像素之前述樣本適應偏移處理。
- 一種圖像編碼方法,可將圖片編碼,包含以下步驟:將邊界控制旗標編碼,前述邊界控制旗標是用以共通地控制針對前述圖片所含的編碼對象切片的切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;根據前述邊界控制旗標,在已重組之前述編碼對象 切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及在已重組之前述編碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
- 一種圖像編碼方法,可將圖片編碼,包含以下步驟:將邊界控制旗標編碼,前述邊界控制旗標編是用以控制針對前述圖片所含的編碼對象切片之切片邊界的樣本適應偏移處理;將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;及根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已重組之前述編碼對象切片之上方及左方的至少其中一切片邊界周邊的前述編碼對象切片內的至少1個像素、與已重組之其它切片內的至少1個像素。
- 一種圖像解碼裝置,具有處理電路與電連接於前述處理電路之記憶裝置,可將編碼圖片解碼,前述處理電路可進行以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以共通地控制針對前述編碼圖片所含的解碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理;將前述解碼對象切片解碼; 根據前述邊界控制旗標,在已解碼之前述解碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及在已解碼之前述解碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
- 一種圖像解碼裝置,具有處理電路與電連接於前述處理電路之記憶裝置,可將編碼圖片解碼,前述處理電路可進行以下步驟:取得邊界控制旗標,前述邊界控制旗標是用以控制針對前述編碼圖片所含的解碼對象切片之切片邊界的樣本適應偏移處理;將前述解碼對象切片解碼;及根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已解碼之前述解碼對象切片之上方及左方的至少其中一切片邊界周邊的前述解碼對象切片內的至少1個像素、與已解碼之其它切片內的至少1個像素。
- 一種圖像編碼裝置,具有處理電路與電連接於前述處理電路之記憶裝置,可將圖片編碼,前述處理電路可進行以下步驟:將邊界控制旗標編碼,前述邊界控制旗標是用以共通地控制針對前述圖片所含的編碼對象切片之切片邊界的解塊過濾器處理與樣本適應偏移處理; 將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;根據前述邊界控制旗標,在已重組之前述編碼對象切片之全部切片邊界中,只對上方及左方的至少其中一切片邊界進行前述解塊過濾器處理;及在已重組之前述編碼對象切片之全部切片邊界中,只對前述上方及左方的至少其中一切片邊界進行對應前述邊界控制旗標之樣本適應偏移處理。
- 一種圖像編碼裝置,具有處理電路與電連接於前述處理電路之記憶裝置,可將圖片編碼,前述處理電路可進行以下步驟:將邊界控制旗標編碼,前述邊界控制旗標編是用以控制針對前述圖片所含的編碼對象切片之切片邊界的樣本適應偏移處理;將前述編碼對象切片編碼;從藉由前述編碼對象切片之編碼所生成之資料來重組前述編碼對象切片;及根據前述邊界控制旗標共通地進行樣本適應偏移處理,前述樣本適應偏移處理是針對位於已重組之前述編碼對象切片之上方及左方的至少其中一切片邊界周邊的前述編碼對象切片內的至少1個像素、與已重組之其它切片內的至少1個像素。
- 一種圖像編碼解碼裝置,包含有: 請求項11之圖像解碼裝置;及請求項13之圖像編碼裝置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261667157P | 2012-07-02 | 2012-07-02 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201408077A true TW201408077A (zh) | 2014-02-16 |
TWI587707B TWI587707B (zh) | 2017-06-11 |
Family
ID=49881636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW102123528A TWI587707B (zh) | 2012-07-02 | 2013-07-01 | An image decoding method, an image coding method, an image decoding apparatus, an image coding apparatus, and an image coding / decoding apparatus |
Country Status (14)
Country | Link |
---|---|
US (1) | US20140153636A1 (zh) |
EP (1) | EP2869564A4 (zh) |
JP (1) | JP5572811B2 (zh) |
KR (1) | KR102124141B1 (zh) |
CN (3) | CN104429070B (zh) |
AU (1) | AU2013284866B2 (zh) |
BR (1) | BR112014032182A2 (zh) |
CA (1) | CA2876567C (zh) |
MX (1) | MX338938B (zh) |
MY (1) | MY167991A (zh) |
RU (1) | RU2625534C2 (zh) |
TW (1) | TWI587707B (zh) |
WO (1) | WO2014006860A1 (zh) |
ZA (1) | ZA201409531B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI565302B (zh) * | 2014-10-01 | 2017-01-01 | 財團法人工業技術研究院 | 解碼器、編碼器、解碼方法、編碼方法與編解碼系統 |
TWI846005B (zh) * | 2022-08-10 | 2024-06-21 | 圓展科技股份有限公司 | 視訊會議裝置及調整攝影機拍攝方向的方法 |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9491457B2 (en) * | 2012-09-28 | 2016-11-08 | Qualcomm Incorporated | Signaling of regions of interest and gradual decoding refresh in video coding |
WO2014097596A1 (ja) * | 2012-12-19 | 2014-06-26 | パナソニック株式会社 | 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置 |
US9571847B2 (en) * | 2013-01-07 | 2017-02-14 | Qualcomm Incorporated | Gradual decoding refresh with temporal scalability support in video coding |
FR3018417B1 (fr) * | 2014-03-04 | 2017-07-28 | Sagemcom Broadband Sas | Procede de modification d'un flux video binaire. |
US10645393B2 (en) | 2015-05-12 | 2020-05-05 | Samsung Electronics Co., Ltd. | Image encoding method and device for sample value compensation and image decoding method and device for sample value compensation |
US9872026B2 (en) * | 2015-06-12 | 2018-01-16 | Intel Corporation | Sample adaptive offset coding |
US10999602B2 (en) | 2016-12-23 | 2021-05-04 | Apple Inc. | Sphere projected motion estimation/compensation and mode decision |
US11259046B2 (en) | 2017-02-15 | 2022-02-22 | Apple Inc. | Processing of equirectangular object data to compensate for distortion by spherical projections |
US10924747B2 (en) | 2017-02-27 | 2021-02-16 | Apple Inc. | Video coding techniques for multi-view video |
US11093752B2 (en) | 2017-06-02 | 2021-08-17 | Apple Inc. | Object tracking in multi-view video |
US20190005709A1 (en) * | 2017-06-30 | 2019-01-03 | Apple Inc. | Techniques for Correction of Visual Artifacts in Multi-View Images |
US10754242B2 (en) | 2017-06-30 | 2020-08-25 | Apple Inc. | Adaptive resolution and projection format in multi-direction video |
US11317085B2 (en) * | 2018-03-30 | 2022-04-26 | Vid Scale, Inc. | Template-based inter prediction techniques based on encoding and decoding latency reduction |
WO2020032049A1 (ja) * | 2018-08-06 | 2020-02-13 | シャープ株式会社 | 動画像復号装置、および動画像符号化装置 |
US20220417506A1 (en) * | 2019-06-23 | 2022-12-29 | Lg Electronics Inc. | Deblocking filtering method and apparatus in video/image coding system |
WO2021044974A1 (ja) * | 2019-09-06 | 2021-03-11 | 株式会社ソニー・インタラクティブエンタテインメント | 送信装置、受信装置、送信方法、受信方法及びプログラム |
CN114747223B (zh) | 2019-10-07 | 2023-11-14 | Lg电子株式会社 | 基于子画面结构执行环路内滤波的图像编码/解码方法和装置及发送比特流的方法 |
CN116506635B (zh) * | 2019-12-27 | 2024-01-12 | 阿里巴巴(中国)有限公司 | 用于对图像执行逐步解码刷新处理的方法和系统 |
SE545443C2 (en) | 2021-12-22 | 2023-09-12 | Vattenfall Ab | A cable protection arrangement |
EP4389940A1 (fr) | 2022-12-21 | 2024-06-26 | John Cockerill SA | Dispositif pour une electrodeposition anti-dendrites |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1288915C (zh) * | 2002-01-23 | 2006-12-06 | 诺基亚有限公司 | 视频序列的编码和解码方法及相关的视频编码器和解码器 |
KR100703776B1 (ko) * | 2005-04-19 | 2007-04-06 | 삼성전자주식회사 | 향상된 코딩 효율을 갖는 컨텍스트 기반 적응적 산술 코딩및 디코딩 방법과 이를 위한 장치, 이를 포함하는 비디오코딩 및 디코딩 방법과 이를 위한 장치 |
US7889790B2 (en) * | 2005-12-20 | 2011-02-15 | Sharp Laboratories Of America, Inc. | Method and apparatus for dynamically adjusting quantization offset values |
WO2007148906A1 (en) * | 2006-06-19 | 2007-12-27 | Lg Electronics, Inc. | Method and apparatus for processing a vedeo signal |
US7991236B2 (en) * | 2006-10-16 | 2011-08-02 | Nokia Corporation | Discardable lower layer adaptations in scalable video coding |
IN2014MN01853A (zh) * | 2006-11-14 | 2015-07-03 | Qualcomm Inc | |
US8619874B2 (en) * | 2007-04-13 | 2013-12-31 | Apple Inc. | Method and system for video encoding and decoding |
US9313515B2 (en) * | 2007-05-16 | 2016-04-12 | Thomson Licensing | Methods and apparatus for the use of slice groups in encoding multi-view video coding (MVC) information |
KR101647376B1 (ko) * | 2009-03-30 | 2016-08-10 | 엘지전자 주식회사 | 비디오 신호 처리 방법 및 장치 |
JP5344238B2 (ja) * | 2009-07-31 | 2013-11-20 | ソニー株式会社 | 画像符号化装置および方法、記録媒体、並びにプログラム |
JP5233897B2 (ja) * | 2009-07-31 | 2013-07-10 | ソニー株式会社 | 画像処理装置および方法 |
CN102104777B (zh) * | 2009-12-16 | 2016-10-05 | 晨星软件研发(深圳)有限公司 | 区块边界侦测方法及区块边界侦测装置 |
WO2012025215A1 (en) * | 2010-08-23 | 2012-03-01 | Panasonic Corporation | Adaptive golomb codes to code filter coefficients |
US9525884B2 (en) * | 2010-11-02 | 2016-12-20 | Hfi Innovation Inc. | Method and apparatus of slice boundary filtering for high efficiency video coding |
US20130294705A1 (en) * | 2010-11-10 | 2013-11-07 | Sony Corporation | Image processing device, and image processing method |
US20120294353A1 (en) * | 2011-05-16 | 2012-11-22 | Mediatek Inc. | Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components |
-
2013
- 2013-06-28 KR KR1020147033433A patent/KR102124141B1/ko active IP Right Grant
- 2013-06-28 CA CA2876567A patent/CA2876567C/en active Active
- 2013-06-28 CN CN201380033102.7A patent/CN104429070B/zh active Active
- 2013-06-28 RU RU2014152262A patent/RU2625534C2/ru active
- 2013-06-28 EP EP13813818.5A patent/EP2869564A4/en not_active Withdrawn
- 2013-06-28 AU AU2013284866A patent/AU2013284866B2/en active Active
- 2013-06-28 MX MX2014015881A patent/MX338938B/es active IP Right Grant
- 2013-06-28 WO PCT/JP2013/004035 patent/WO2014006860A1/ja active Application Filing
- 2013-06-28 US US13/930,450 patent/US20140153636A1/en not_active Abandoned
- 2013-06-28 MY MYPI2014003513A patent/MY167991A/en unknown
- 2013-06-28 BR BR112014032182A patent/BR112014032182A2/pt not_active Application Discontinuation
- 2013-06-28 CN CN201810855977.XA patent/CN108683911B/zh active Active
- 2013-06-28 JP JP2014511352A patent/JP5572811B2/ja active Active
- 2013-06-28 CN CN201810855918.2A patent/CN108933943B/zh active Active
- 2013-07-01 TW TW102123528A patent/TWI587707B/zh active
-
2014
- 2014-12-23 ZA ZA2014/09531A patent/ZA201409531B/en unknown
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI565302B (zh) * | 2014-10-01 | 2017-01-01 | 財團法人工業技術研究院 | 解碼器、編碼器、解碼方法、編碼方法與編解碼系統 |
TWI846005B (zh) * | 2022-08-10 | 2024-06-21 | 圓展科技股份有限公司 | 視訊會議裝置及調整攝影機拍攝方向的方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20150034683A (ko) | 2015-04-03 |
RU2625534C2 (ru) | 2017-07-14 |
CN108683911A (zh) | 2018-10-19 |
AU2013284866A1 (en) | 2015-01-22 |
CA2876567C (en) | 2020-03-24 |
CN108933943B (zh) | 2020-12-25 |
CA2876567A1 (en) | 2014-01-09 |
US20140153636A1 (en) | 2014-06-05 |
EP2869564A4 (en) | 2015-09-23 |
TWI587707B (zh) | 2017-06-11 |
KR102124141B1 (ko) | 2020-06-18 |
JP5572811B2 (ja) | 2014-08-20 |
BR112014032182A2 (pt) | 2017-06-27 |
RU2014152262A (ru) | 2016-07-10 |
WO2014006860A1 (ja) | 2014-01-09 |
CN108683911B (zh) | 2021-02-02 |
AU2013284866B2 (en) | 2017-09-07 |
JPWO2014006860A1 (ja) | 2016-06-02 |
CN108933943A (zh) | 2018-12-04 |
CN104429070A (zh) | 2015-03-18 |
EP2869564A1 (en) | 2015-05-06 |
MX338938B (es) | 2016-05-06 |
CN104429070B (zh) | 2018-08-21 |
MY167991A (en) | 2018-10-10 |
MX2014015881A (es) | 2015-03-19 |
ZA201409531B (en) | 2016-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI587707B (zh) | An image decoding method, an image coding method, an image decoding apparatus, an image coding apparatus, and an image coding / decoding apparatus | |
JP6473982B2 (ja) | 画像復号方法および画像復号装置 | |
JP6305590B2 (ja) | 画像復号方法及び画像復号装置 | |
WO2013111593A1 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置 | |
JP2014030234A (ja) | 画像符号化復号装置 | |
WO2016103542A1 (ja) | 符号化方法、復号方法、符号化装置および復号装置 | |
WO2013161203A1 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、及び画像符号化復号装置 | |
CA2841107A1 (en) | Image encoding and decoding using context adaptive binary arithmetic coding with a bypass mode | |
WO2013118485A1 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置 | |
JP6483028B2 (ja) | 画像符号化方法及び画像符号化装置 | |
WO2011132400A1 (ja) | 画像符号化方法及び画像復号化方法 | |
WO2015059880A1 (ja) | 動き補償方法、画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置 | |
WO2013014884A1 (ja) | 動画像符号化方法、動画像符号化装置、動画像復号化方法、および動画像復号化装置 | |
WO2013136678A1 (ja) | 画像復号装置および画像復号方法 | |
WO2012095930A1 (ja) | 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置 | |
WO2013046616A1 (ja) | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |