TWI595776B - Image processing device and method - Google Patents

Image processing device and method Download PDF

Info

Publication number
TWI595776B
TWI595776B TW102121376A TW102121376A TWI595776B TW I595776 B TWI595776 B TW I595776B TW 102121376 A TW102121376 A TW 102121376A TW 102121376 A TW102121376 A TW 102121376A TW I595776 B TWI595776 B TW I595776B
Authority
TW
Taiwan
Prior art keywords
unit
image
filter
offset
type
Prior art date
Application number
TW102121376A
Other languages
English (en)
Other versions
TW201414317A (zh
Inventor
Ohji Nakagami
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201414317A publication Critical patent/TW201414317A/zh
Application granted granted Critical
Publication of TWI595776B publication Critical patent/TWI595776B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)
  • Color Television Systems (AREA)

Description

影像處理裝置及方法
本揭露係有關於影像處理裝置及方法,尤其是有關於,可以削減適應偏置濾波器之控制上所需要之編碼量的影像處理裝置及方法。
近年來,將影像資訊以數位方式加以處理,此時,為了高效率的資訊傳輸、積存之目的,利用影像資訊特有的冗長性,採用藉由離散餘弦轉換等之正交轉換和運動補償而進行壓縮的編碼方式,來將影像予以壓縮編碼的裝置,正逐漸普及。在此編碼方式中,係有例如MPEG(Moving Picture Experts Group)或H.264及MPEG-4 Part10(Advanced Video Coding,以下記作H.264/AVC)等。
而目前為了比H.264/AVC更加提升編碼效率,由ITU-T和ISO/IEC之共同標準化團體亦即JCTVC(Joint Collaboration Team-Video Coding),正在進行一種稱作HEVC(High Efficiency Video Coding)的編碼方式的標準化(例如參照非專利文獻1)。
在現時點的HEVC的草案中,係採用了適應偏置濾波器(Sample Adaptive Offset:SAO)。在適應偏置濾波器中,Y,Cb,Cr之分量間的控制訊號,係完全獨立而被傳輸。
相對於此,於非專利文獻2中則是提出了,將分量間的ON/OFF控制訊號置換成1個語法而傳輸,針對濾波器之類型或係數,係在分量間獨立傳輸。
[先前技術文獻]
[非專利文獻]
[非專利文獻1]Benjamin Bross, Woo-Jin Han, Jens-Rainer Ohm, Gary J. Sullivan, Thomas Wiegand," High efficiency video coding (HEVC) text specification draft 7 ", JCTVC-I1003 ver3, 2012.6.1
[非專利文獻2]Woo-Shik Kim,Do-Kyoung Kwon,In Suk Chong,Marta Karczewicz,”LCU SAO Enable Flag Coding”,JCTVC-I0193,Joint Collaborative Team on Video Coding (JCT-VC)of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 9th Meeting: Geneva, CH,27 April-7 May,2012
然而,於上述提議中,由於是在Y,Cb,Cr之分量間獨立地傳輸類型資訊,因此適應偏置濾波器之控制上所需要之編碼量係較多。
本揭露係有鑑於此種狀況而研發,目的在於能夠削減適應偏置濾波器之控制上所需要之編碼量。
本揭露之第1側面的影像處理裝置,係具備:解碼部,將編碼串流進行解碼處理,生成影像;和適應偏置濾波器部,係依照前記影像之分量間共通的適應偏置濾波器之類型,來對前記解碼部所生成之影像,施行適應偏置濾波器。
前記適應偏置濾波器之類型,係在前記影像之亮度成分與色差成分上為共通。
前記適應偏置濾波器之類型,係在前記影像之色差成分間為共通。
前記偏置濾波器之類型,係在第1色差成分與第2色差成分上為共通。
在對前記第1色差成分的適應偏置濾波器之類型是頻帶偏置的情況下,對前記第2色差成分的適應偏置濾波器之類型係為頻帶偏置。
在對前記第1色差成分的適應偏置濾波器之類型是邊緣偏置的情況下,對前記第2色差成分的適應偏置濾波器之類型係為邊緣偏置。
在前記適應偏置濾波器之類型是邊緣偏置的情況下,邊緣偏置的圖案規則係在前記影像之色差成分間為共通。
在對前記第1色差成分的偏置濾波器之類型是邊緣偏置之1維圖案的情況下,對前記第2色差成分的偏置濾波器之類型係為邊緣偏置之1維圖案。
在對前記第1色差成分的偏置濾波器之類型是邊緣偏置之2維圖案的情況下,對前記第2色差成分的偏置濾波器之類型係為邊緣偏置之2維圖案。
在對前記第1色差成分的偏置濾波器之類型是不適用偏置之類型的情況下,對前記第2色差成分的偏置濾波器之類型係為不適用偏置之類型。
前記影像之色彩空間係為Y/Cb/Cr格式。
還具備:收取部,係將前記編碼串流、和表示前記影像之分量間共通之適應偏置濾波器之類型的類型資訊,加以收取;前記解碼部,係可使用已被前記收取部所收取的類型資訊,來將已被前記收取部所收取的編碼串流,進行解碼處理。
還具備:去區塊濾波器部,係對前記解碼部所生成之影像,施行去區塊濾波器;前記適應偏置濾波器部係可對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
前記收取部,係將表示與Current編碼單位所相鄰之相鄰編碼單位相同之偏置的合併旗標,予以收取; 前記適應偏置濾波器部,係可使用已被前記收取部所收取到的合併旗標,來對已被前記解碼部所生成之影像,施行適應偏置濾波器。
本揭露之第1側面的影像處理方法,係由影像處理裝置,將編碼串流進行解碼處理,生成影像,依照在前記影像之分量間共通的適應偏置濾波器之類型,對已被生成之影像,施行適應偏置濾波器。
本揭露之第2側面的影像處理裝置,係具備:設定部,係將適應偏置濾波器之類型,在影像之分量間做共通地設定;和適應偏置濾波器部,係依照已被前記設定部所設定之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;和編碼部,係使用已被前記適應偏置濾波器部施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流。
前記設定部,係可將前記適應偏置濾波器之類型,在前記影像之亮度成分與色差成分上做共通地設定。
前記設定部,係可將前記適應偏置濾波器之類型,在前記影像之色差成分間做共通地設定。
前記設定部,係可將前記適應偏置濾波器之類型,在第1色差成分與第2色差成分上做共通地設定。
前記設定部,係可在將對前記第1色差成分的適應偏置濾波器之類型設定成頻帶偏置的情況下,將對 前記第2色差成分的適應偏置濾波器之類型設定成頻帶偏置。
前記設定部,係可在將對前記第1色差成分的適應偏置濾波器之類型設定成邊緣偏置的情況下,將對前記第2色差成分的適應偏置濾波器之類型設定成邊緣偏置。
前記設定部,係可在將前記適應偏置濾波器之類型設定成邊緣偏置的情況下,將邊緣偏置之圖案規則,在前記影像之色差成分間做共通地設定。
前記設定部,係可在將前記適應偏置濾波器之類型設定成邊緣偏置的情況下,將邊緣偏置之圖案規則,在前記影像之色差成分間做共通地設定。
前記設定部,係在將對前記第1色差成分的偏置濾波器之類型設定成不適用偏置之類型的情況下,將對前記第2色差成分的偏置濾波器之類型設定成不適用偏置之類型。
還具備:去區塊濾波器部,係對已被本地解碼處理之影像,施行去區塊濾波器;前記適應偏置濾波器部係可對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
前記設定部,係可在與Current編碼單位所相鄰之相鄰編碼單位相同之偏置的情況下,將前記相鄰編碼單位之偏置,設定成為Current編碼單位。
本揭露之第2側面的影像處理方法,係由影 像處理裝置,將適應偏置濾波器之類型,在影像之分量間做共通地設定;依照已被設定之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;使用已被施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流。
本揭露之第3側面的影像處理裝置,係具備:設定部,係將用來表示在影像之分量間共通之適應偏置濾波器之類型的類型資訊,予以設定;和適應偏置濾波器部,係依照在影像之分量間共通之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;和編碼部,係使用已被前記適應偏置濾波器部施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流;和傳輸部,係將前記設定部所設定之類型資訊、和前記編碼部所生成之編碼串流,予以傳輸。
前記適應偏置濾波器之類型,係在前記影像之色差成分間為共通。
前記適應偏置濾波器之類型,係在第1色差成分與第2色差成分上為共通。
前記設定部,係可每最大編碼單位地,設定前記類型資訊。
還具備:去區塊濾波器部,係對已被本地解碼處理之影像,施行去區塊濾波器;前記適應偏置濾波器部係可對已被前記去區塊濾波器部施行過去區塊濾波器的 影像,施行適應偏置濾波器。
本揭露之第3側面的影像處理方法,係由影像處理裝置,將用來表示在影像之分量間共通之適應偏置濾波器之類型的類型資訊,予以設定;依照在影像之分量間共通之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;使用已被施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流;將含有已被設定之類型資訊、和已被生成之編碼串流,予以傳輸。
於本揭露之第1側面中,係將編碼串流進行解碼處理,生成影像。然後,依照前記影像之分量間共通的適應偏置濾波器之類型,來對已被生成之影像,施行適應偏置濾波器。
於本揭露之第2側面中,適應偏置濾波器之類型係在影像之分量間被共通地設定,依照已被設定之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器。然後,使用已被施行過適應偏置濾波器的影像,將前記影像進行編碼處理,生成編碼串流。
於本揭露之第3側面中,用來表示在影像之分量間共通之適應偏置濾波器之類型的類型資訊會被設定,依照在影像之分量間共通之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器。然後,使用已被施行過適應偏置 濾波器的影像,將前記影像進行編碼處理,生成編碼串流,含有已被設定之類型資訊、和已被生成之編碼串流,會被傳輸。
此外,上述的影像處理裝置,係可為獨立的裝置,也可為構成1台影像編碼裝置或影像解碼裝置的內部區塊。
若依據本揭露之第1側面,則可將影像予以解碼。尤其是,可削減編碼量。
若依據本揭露之第2側面,則可將影像予以編碼。尤其是,可削減編碼量。
若依據本揭露之第3側面,則可將影像予以編碼、傳輸。尤其是,可削減編碼量。
11‧‧‧影像編碼裝置
12‧‧‧畫面排序緩衝區
21‧‧‧A/D轉換部
22‧‧‧畫面排序緩衝區
23‧‧‧演算部
24‧‧‧正交轉換部
25‧‧‧量化部
26‧‧‧可逆編碼部
27‧‧‧積存緩衝區
28‧‧‧逆量化部
29‧‧‧逆正交轉換部
30‧‧‧演算部
31‧‧‧去區塊濾波器
32‧‧‧畫格記憶體
33‧‧‧選擇部
34‧‧‧畫面內預測部
35‧‧‧運動預測.補償部
36‧‧‧預測影像選擇部
37‧‧‧速率控制部
41‧‧‧適應偏置濾波器
42‧‧‧適應迴圈濾波器
51‧‧‧影像解碼裝置
61‧‧‧積存緩衝區
62‧‧‧可逆解碼部
63‧‧‧逆量化部
64‧‧‧逆正交轉換部
65‧‧‧演算部
66‧‧‧去區塊濾波器
67‧‧‧畫面排序緩衝區
68‧‧‧D/A轉換部
69‧‧‧畫格記憶體
70‧‧‧選擇部
71‧‧‧畫面內預測部
72‧‧‧運動預測.補償部
73‧‧‧選擇部
81‧‧‧適應偏置濾波器
82‧‧‧適應迴圈濾波器
111‧‧‧SAO旗標設定部
112‧‧‧類型設定部
113‧‧‧偏置設定部
114‧‧‧SAO控制資訊設定部
115‧‧‧偏置緩衝區
116‧‧‧濾波處理部
117‧‧‧影像緩衝區
121‧‧‧語法寫入部
141‧‧‧類型設定部
151‧‧‧Y類型設定部
152‧‧‧Cm類型設定部
161‧‧‧語法寫入部
211‧‧‧語法取得部
221‧‧‧SAO旗標收取部
222‧‧‧類型收取部
223‧‧‧合併旗標收取部
224‧‧‧偏置緩衝區
225‧‧‧偏置收取部
226‧‧‧濾波處理部
227‧‧‧影像緩衝區
241‧‧‧語法取得部
251‧‧‧類型收取部
261‧‧‧Y類型收取部
262‧‧‧Cm類型收取部
600‧‧‧多視點影像編碼裝置
601‧‧‧編碼部
602‧‧‧編碼部
603‧‧‧多工化部
610‧‧‧多視點影像解碼裝置
611‧‧‧逆多工部
612‧‧‧解碼部
613‧‧‧解碼部
620‧‧‧階層影像編碼裝置
621‧‧‧編碼部
622‧‧‧編碼部
623‧‧‧多工化部
630‧‧‧階層影像解碼裝置
631‧‧‧逆多工部
632‧‧‧解碼部
633‧‧‧解碼部
800‧‧‧電腦
801‧‧‧CPU
802‧‧‧ROM
803‧‧‧RAM
804‧‧‧匯流排
810‧‧‧輸出入介面
811‧‧‧輸入部
812‧‧‧輸出部
813‧‧‧記憶部
814‧‧‧通訊部
815‧‧‧驅動機
821‧‧‧可移除式媒體
900‧‧‧電視裝置
901‧‧‧天線
902‧‧‧選台器
903‧‧‧解多工器
904‧‧‧解碼器
905‧‧‧映像訊號處理部
906‧‧‧顯示部
907‧‧‧聲音訊號處理部
908‧‧‧揚聲器
909‧‧‧外部介面
910‧‧‧控制部
911‧‧‧使用者介面
912‧‧‧匯流排
920‧‧‧行動電話機
921‧‧‧天線
922‧‧‧通訊部
923‧‧‧聲音編解碼器
924‧‧‧揚聲器
925‧‧‧麥克風
926‧‧‧攝影機部
927‧‧‧影像處理部
928‧‧‧多工分離部
929‧‧‧記錄再生部
930‧‧‧顯示部
931‧‧‧控制部
932‧‧‧操作部
933‧‧‧匯流排
940‧‧‧記錄再生裝置
941‧‧‧選台器
942‧‧‧外部介面
943‧‧‧編碼器
944‧‧‧HDD(Hard Disk Drive)
945‧‧‧碟片驅動機
946‧‧‧選擇器
947‧‧‧解碼器
948‧‧‧OSD(On-Screen Display)
949‧‧‧控制部
950‧‧‧使用者介面
960‧‧‧攝像裝置
961‧‧‧光學區塊
962‧‧‧攝像部
963‧‧‧訊號處理部
964‧‧‧影像處理部
965‧‧‧顯示部
966‧‧‧外部介面
967‧‧‧記憶體
968‧‧‧媒體驅動機
969‧‧‧OSD
970‧‧‧控制部
971‧‧‧使用者介面
972‧‧‧匯流排
[圖1]影像編碼裝置的主要構成例的區塊圖。
[圖2]編碼處理之流程例的說明用流程圖。
[圖3]影像解碼裝置的主要構成例的區塊圖。
[圖4]解碼處理之流程例的說明用流程圖。
[圖5]頻帶偏置的說明圖。
[圖6]邊緣偏置的說明圖。
[圖7]邊緣偏置之規則一覽表的圖示。
[圖8]先前之SAO控制資訊傳輸處理的說明用流程圖。
[圖9]適用了本揭露的適應偏置濾波器之構成例的區塊圖。
[圖10]適應偏置濾波處理的說明用流程圖。
[圖11]SAO控制資訊設定處理的說明用流程圖。
[圖12]SAO控制資訊傳輸處理的說明用流程圖。
[圖13]適用了本揭露的適應偏置濾波器之另一構成例的區塊圖。
[圖14]適應偏置濾波處理的說明用流程圖。
[圖15]SAO控制資訊傳輸處理的說明用流程圖。
[圖16]適用了本揭露的適應偏置濾波器之構成例的區塊圖。
[圖17]適應偏置濾波處理的說明用流程圖。
[圖18]SAO控制資訊收取處理的說明用流程圖。
[圖19]適用了本揭露的適應偏置濾波器之另一構成例的區塊圖。
[圖20]適應偏置濾波處理的說明用流程圖。
[圖21]多視點影像編碼方式之例子的圖示。
[圖22]適用了本揭露的多視點影像編碼裝置的主要構成例之區塊圖。
[圖23]適用了本揭露的多視點影像解碼裝置的主要構成例之區塊圖。
[圖24]階層影像編碼方式之例子的圖示。
[圖25]適用了本揭露的階層影像編碼裝置的主要構成例之區塊圖。
[圖26]適用了本揭露的階層影像解碼裝置的主要構成例之區塊圖。
[圖27]電腦的主要構成例的區塊圖。
[圖28]電視裝置之概略構成之一例的區塊圖。
[圖29]行動電話機之概略構成之一例的區塊圖。
[圖30]記錄再生裝置之概略構成之一例的區塊圖。
[圖31]攝像裝置之概略構成之一例的區塊圖。
以下,說明用以實施本揭露的形態(以下稱作實施形態)。此外,說明係用以下順序來進行。
1.裝置及動作之概要
2.先前手法之說明
3.第1實施形態(影像處理裝置(編碼側))
4.第2實施形態(影像處理裝置(解碼側))
5.第3實施形態(多視點影像編碼.多視點影像解碼裝置)
6.第4實施形態(階層影像編碼.階層影像解碼裝置)
7.第5實施形態(電腦)
8.應用例
<1.裝置及動作之概要>
[影像編碼裝置的構成例]
圖1係表示作為適用了本揭露之影像處理裝置的影像編碼裝置之一實施形態的構成。
圖1所示的影像編碼裝置11,係使用預測處理來將影像資料予以編碼。此處,作為編碼方式,係使用例如HEVC(High Efficiency Video Coding)方式等。
此外,於HEVC方式中,係被規定有編碼單元(CU(Coding Unit))。CU係亦稱作Coding Tree Block(CTB),是擔任和H.264/AVC方式中的巨集區塊同樣的角色,係為圖像單位的影像之部分領域。相對於後者係被固定成16×16像素之大小,前者的大小並非固定,而是在各個序列中,在影像壓縮資訊中做指定。
例如,在輸出的編碼資料中所含之序列參數集(SPS(Sequence Parameter Set))裡頭,規定了CU的最大尺寸(LCU(Largest Coding Unit))與最小尺寸((SCU(Smallest Coding Unit))。
在各個LCU內,係在不低於SCU之尺寸的範圍內,藉由設成split-flag=1,就可分割成更小尺寸的CU。2N×2N之大小的CU,係當split_flag之值為「1」時,就被分割成下1個階層的N×N之大小的CU。
甚至,CU係還會被分割成,作為畫面內或是畫面間預測處理之對象的領域(圖像單位之影像的部分領域)亦即預測單元(Prediction Unit(PU)),又還可以被分割成,作為正交轉換處理之對象的領域(圖像單位之影像的 部分領域)亦即變形單元(Transform Unit(TU))。目前,在HEVC方式中,除了4×4及8×8以外,還可使用16×16及32×32正交轉換。
於圖1的例子中,影像編碼裝置11係具有:A/D(Analog/Digital)轉換部21、畫面排序緩衝區22、演算部23、正交轉換部24、量化部25、可逆編碼部26、及積存緩衝區27。又,影像編碼裝置11係具有:逆量化部28、逆正交轉換部29、演算部30、去區塊濾波器31、畫格記憶體32、選擇部33、畫面內預測部34、運動預測.補償部35、預測影像選擇部36、及速率控制部37。
再者,影像編碼裝置11,係在去區塊濾波器31與畫格記憶體32之間,具有適應偏置濾波器41及適應迴圈濾波器42。
A/D轉換部21,係將所被輸入之影像資料進行A/D轉換,輸出至畫面排序緩衝區22而記憶之。
畫面排序緩衝區22,係將已記憶之顯示順序的畫格之影像,隨應於GOP(Group of Picture)構造,排序成編碼所需的畫格之順序。畫面排序緩衝區22,係將畫格順序排序過的影像,供給至演算部23。又,畫面排序緩衝區22,係也將畫格順序排序過的影像,供給至畫面內預測部34及運動預測.補償部35。
演算部23,係將從畫面排序緩衝區22所讀出之影像,減去透過預測影像選擇部36而從畫面內預測部34或運動預測.補償部35所供給之預測影像,將其差分 資訊,輸出至正交轉換部24。
例如,若是進行畫面內編碼的影像,則演算部23係從畫面排序緩衝區22所讀出之影像,減去從畫面內預測部34所供給之預測影像。又,例如,若是進行畫面間編碼的影像,則演算部23係由從畫面排序緩衝區22所讀出之影像,減去從運動預測.補償部35所供給之預測影像。
正交轉換部24,係對從演算部23所供給的差分資訊,實施離散餘弦轉換、卡忽南-拉維轉換等之正交轉換,將其轉換係數供給至量化部25。
量化部25,係將正交轉換部24所輸出的轉換係數,進行量化。量化部25係將已被量化之轉換係數,供給至可逆編碼部26。
可逆編碼部26,係對該已被量化之轉換係數,實施可變長度編碼、算術編碼等之可逆編碼。
可逆編碼部26係從畫面內預測部34取得表示畫面內預測模式之資訊的參數,從運動預測.補償部35取得表示畫面間預測模式之資訊或運動向量資訊等之參數。
可逆編碼部26係將已被量化之轉換係數予以編碼,並且將所取得之各參數(語法要素)予以編碼,當成編碼資料的標頭資訊的一部分(進行多工化)。可逆編碼部26,係將編碼所得到之編碼資料,供給至積存緩衝區27而積存之。
例如,在可逆編碼部26中,會進行可變長度編碼或算術編碼等之可逆編碼處理。作為可變長度編碼,係可舉例CAVLC(Context-Adaptive Variable Length Coding)等。作為算術編碼,係可舉例CABAC(Context-Adaptive Binary Arithmetic Coding)等。
積存緩衝區27係將從可逆編碼部26所供給之編碼串流(資料)予以暫時保持,在所定之時序上,當作編碼過的編碼影像,輸出至例如後段未圖示的記錄裝置或傳輸路等。亦即,積存緩衝區27係亦為將編碼串流予以傳輸的傳輸部。
又,於量化部25中被被量化過的轉換係數,係也被供給至逆量化部28。逆量化部28係將該已被量化之轉換係數,以對應於量化部25所做之量化的方法,進行逆量化。逆量化部28,係將所得到之轉換係數,供給至逆正交轉換部29。
逆正交轉換部29,係將所被供給之轉換係數,以正交轉換部24所做之正交轉換處理所對應的方法,進行逆正交轉換。已被逆正交轉換之輸出(已被復原之差分資訊),係被供給至演算部30。
演算部30,係對逆正交轉換部29所供給之逆正交轉換結果、亦即已被復原之差分資訊,加算上透過預測影像選擇部36而從畫面內預測部34或運動預測.補償部35所供給的預測影像,獲得局部性解碼之影像(解碼影像)。
例如,若差分資訊是對應於進行畫面內編碼的影像,則演算部30係對該差分資訊,加算上從畫面內預測部34所供給之預測影像。又,例如,若差分資訊是對應於進行畫面間編碼的影像,則演算部30係對該差分資訊,加算上從運動預測.補償部35所供給之預測影像。
該加算結果之解碼影像,係被供給至去區塊濾波器31及畫格記憶體32。
去區塊濾波器31,係藉由適宜地進行去區塊濾波處理,以去除解碼影像的區塊失真。去區塊濾波器31,係將其濾波處理結果,供給至適應偏置濾波器41。
適應偏置濾波器41,係對去區塊濾波器31所致之濾波後的影像,進行主要用來去除漣波現象的偏置濾波器(SAO:Sample adaptive offset)處理。適應偏置濾波器41,係將濾波處理後之影像,供給至適應迴圈濾波器42。
偏置濾波器之種類,係有頻帶偏置2種、邊緣偏置6種、無偏置,總計9種。適應偏置濾波器41,係每一切片地設定表示各分量之ON/OFF的資訊、每最大編碼單位亦即LCU的偏置濾波器之種類(類型)與偏置(值)。此外,其中,濾波器之類型,係在Y,Cb,Cr的分量(成分)間被共通地設定。適應偏置濾波器41,係使用已設定之類型與偏置,對去區塊濾波器31所致之濾波後的影像,施行濾波處理。此外,以下,以亮度訊號為Y、色差訊號為Cb,Cr的色彩空間為例子來說明。亦即,雖然簡單 記載為Y,Cb,Cr,但Y係表示亮度成分,Cb係表示Cb色差成分,Cr係表示Cr色差成分。
又,適應偏置濾波器41,係將表示已設定之類型的資訊,供給至可逆編碼部26,令其被編碼。適應偏置濾波器41中,上述的偏置係為濾波器之係數。以下,有時也會適宜地將偏置稱為係數。此外,適應偏置濾波器41的細節,將在圖9中後述。
適應迴圈濾波器42係例如,每最大編碼單位LCU地,進行適應迴圈濾波器(ALF:AdaptiveLoop Filter)處理。於適應迴圈濾波器42中,作為濾波器係可使用例如2維的維納濾波器(Wiener Filter)。當然,也可使用維納濾波器以外的濾波器。
適應迴圈濾波器42,係對適應偏置濾波器41所致之濾波後的影像,使用濾波器係數,每LCU地進行濾波處理,將濾波處理結果,供給至畫格記憶體32。
此外,於本說明書中雖然省略詳細說明,但於影像編碼裝置11中,濾波器係數,係每LCU地,以使得與來自畫面排序緩衝區12之原影像的殘差呈最小的方式,藉由適應迴圈濾波器42而被算出並使用。已被算出之濾波器係數,係在可逆編碼部26中被編碼,被發送至後述圖3的影像解碼裝置51。又,在本說明書中,雖然記載每LUC進行處理的例子,但適應迴圈濾波器42的處理單位並非限定於此。
畫格記憶體32係於所定之時序上,將所累積 的參照影像,透過選擇部33而輸出至畫面內預測部34或運動預測.補償部35。
例如,若是進行畫面內編碼的影像,則畫格記憶體32係將參照影像,透過選擇部33而供給至畫面內預測部34。又,例如,若畫面間編碼有被進行的情況下,畫格記憶體32係將參照影像,透過選擇部33而供給至運動預測.補償部35。
選擇部33係當從畫格記憶體32所供給之參照影像,是將進行畫面內編碼之影像,則將該參照影像供給至畫面內預測部34。又,選擇部33係當從畫格記憶體32所供給之參照影像,是將進行畫面間編碼之影像,則將該參照影像,供給至運動預測.補償部35。
畫面內預測部34,係進行畫面內預測(Inter預測),使用畫面內的像素值來生成預測影像。畫面內預測部34,係藉由複數模式(畫面內預測模式)來進行畫面內預測。
畫面內預測部34,係以所有的畫面內預測模式來生成預測影像,並評估各預測影像,選擇出最佳模式。畫面內預測部34,係一旦選擇了最佳的畫面內預測模式,就將該最佳模式所生成之預測影像,透過預測影像選擇部36而供給至演算部23或演算部30。
又,如上述,畫面內預測部34係亦可將表示所採用之畫面內預測模式的畫面內預測模式資訊等之參數,適宜地供給至可逆編碼部26。
運動預測.補償部35,係針對被進行畫面間編碼的影像,使用從畫面排序緩衝區22所供給之輸入影像、和透過選擇部33而從畫格記憶體32所供給之參照影像,來進行運動預測。又,運動預測.補償部35,係隨應於藉由運動預測而被偵測出來的運動向量來進行運動補償處理,生成預測影像(畫面間預測影像資訊)。
運動預測.補償部35,係進行所有候補之畫面間預測模式的畫面間預測處理,生成預測影像。運動預測.補償部35,係將已被生成之預測影像,透過預測影像選擇部36而供給至演算部23或演算部30。
又,運動預測.補償部35,係將表示已被採用之畫面間預測模式的畫面間預測模式資訊、或表示已算出之運動向量的運動向量資訊等之參數,供給至可逆編碼部26。
預測影像選擇部36係若是進行畫面內編碼之影像時,則將畫面內預測部34之輸出,供給至演算部23或演算部30;若是進行畫面間編碼之影像時,則將運動預測.補償部35之輸出,供給至演算部23或演算部30。
速率控制部37,係基於積存緩衝區27中所積存之壓縮影像,以不會發生溢位或下溢之方式,控制量化部25的量化動作之速率。
[影像編碼裝置之動作]
參照圖2,說明如以上之影像編碼裝置11所執行的 編碼裝置之流程。
於步驟S11中,A/D轉換部21係將所輸入之影像進行A/D轉換。於步驟S12中,畫面排序緩衝區22係將已被A/D轉換之影像加以記憶,進行從各圖像之顯示順序往編碼之順序的排序。
若從畫面排序緩衝區22所供給之處理對象的影像是被畫面內處理之區塊的影像,則所被參照之已解碼影像會從畫格記憶體32中被讀出,透過選擇部33而供給至畫面內預測部34。
基於這些影像,於步驟S13中,畫面內預測部34係將處理對象之區塊的像素,以身為候補之所有畫面內預測模式來進行畫面內預測。此外,作為所被參照之已解碼像素,係使用了未被去區塊濾波器31進行濾波的像素。
藉由此處理,會以身為候補之所有畫面內預測模式來進行畫面內預測,對身為候補之所有畫面內預測模式,算出成本函數值。然後,基於已被算出之成本函數值,來選擇最佳畫面內預測模式,最佳畫面內預測模式的畫面內預測所生成之預測影像和其成本函數值,會被供給至預測影像選擇部36。
若從畫面排序緩衝區22所供給之處理對象的影像是被畫面間處理之區塊的影像,則所被參照之影像會從畫格記憶體32中被讀出,透過選擇部33而供給至運動預測.補償部35。基於這些影像,於步驟S14中,運動 預測.補償部35係進行運動預測.補償處理。
藉由此處理,會以身為候補之所有畫面間預測模式來進行運動預測處理,對於身為候補之所有畫面間預測模式,會算出成本函數值,基於已算出之成本函數值,來決定最佳畫面間預測模式。然後,藉由最佳畫面間預測模式而被生成之預測影像和其成本函數值,會被供給至預測影像選擇部36。
於步驟S15中,預測影像選擇部36係基於畫面內預測部34及運動預測.補償部35所輸出的各成本函數值,而將最佳畫面內預測模式與最佳畫面間預測模式的其中一方,決定成最佳預測模式。然後,預測影像選擇部36係將已決定之最佳預測模式的預測影像予以選擇,供給至演算部23、30。此預測影像,係在後述的步驟S16、S21之演算中,會被利用。
此外,該預測影像的選擇資訊,係被供給至畫面內預測部34或運動預測.補償部35。當最佳畫面內預測模式的預測影像被選擇時,畫面內預測部34係將表示最佳畫面內預測模式之資訊(亦即畫面內預測之相關參數),供給至可逆編碼部26。
當最佳畫面間預測模式的預測影像被選擇時,運動預測.補償部35,係將表示最佳畫面間預測模式之資訊,和相應於最佳畫面間預測模式之資訊(亦即運動預測之相關參數),輸出至可逆編碼部26。作為相應於最佳畫面間預測模式之資訊,係可舉例如運動向量資訊、參 照畫格資訊等。
於步驟S16中,演算部23係演算出步驟S12中被排序過之影像、與步驟S15中所選擇之預測影像之間的差分。預測影像,係若進行畫面間預測時則從運動預測.補償部35、若進行畫面內預測時則從畫面內預測部34,分別透過預測影像選擇部36而供給至演算部23。
差分資料係相較於原始的影像資料,資料量較小。因此,相較於把影像直接進行編碼的情形,可壓縮資料量。
於步驟S17中,正交轉換部24係將從演算部23所供給之差分資訊,進行正交轉換。具體而言,會進行離散餘弦轉換、卡忽南-拉維轉換等之正交轉換,而輸出轉換係數。
於步驟S18中,量化部25係將轉換係數予以量化。此量化之際,如後述的步驟S28之處理所說明,速率會被控制。
如以上所述,已被量化之差分資訊,係如下述般地被局部性解碼。亦即,於步驟S19中,逆量化部28係將已被量化部25所量化之轉換係數,以量化部25之特性所對應之特性,進行逆量化。於步驟S20中,逆正交轉換部29係將已被逆量化部28所逆量化之轉換係數,以正交轉換部24之特性所對應之特性,進行逆正交轉換。
於步驟S21中,演算部30係將透過預測影像選擇部36所輸入之預測影像,加算至已被局部性解碼的 差分資訊,生成已被局部性解碼(亦即已被本地解碼)之影像(對應於往演算部23輸入的影像)。
於步驟S22中,去區塊濾波器31,係對演算部30所輸出的影像,進行去區塊濾波處理。藉此,區塊失真就被去除。來自去區塊濾波器31的濾波後的影像,係被輸出至適應偏置濾波器41。
於步驟S23中,適應偏置濾波器41係進行適應偏置濾波處理。藉由此處理,就會每最大編碼單位亦即LCU地,設定在Y,Cb,Cr之分量間共通的偏置濾波器之類型,然後,各分量地設定偏置。然後,使用這些來對去區塊濾波器31進行過濾波後的影像,施行濾波處理。此外,該適應偏置濾波處理的細節,將參照圖10而於後述。
分量間共通之類型資訊或每分量之偏置,這些被供給至可逆編碼部26的各資訊(以下總稱為適應偏置參數),係在後述步驟S26中被編碼。
於步驟S24中,適應迴圈濾波器42,係對適應偏置濾波器41所致之濾波後的影像,進行適應迴圈濾波處理。例如,對適應偏置濾波器41所致之濾波後的影像,使用濾波器係數,每一LCU地,對影像進行濾波處理,濾波處理結果會被供給至畫格記憶體32。
如以上,就可藉由配合適應偏置濾波器41與適應迴圈濾波器42之處理單位,來有效率地進行處理。
於步驟S25中,畫格記憶體32係將已被過濾 之影像,加以記憶。此外,對畫格記憶體32,係還會有未被去區塊濾波器31、適應偏置濾波器41、及適應迴圈濾波器42進行濾波之影像,從演算部30被供給,而被記憶。
另一方面,在上述的步驟S18中被量化之轉換係數,係也被供給至可逆編碼部26。於步驟S26中,可逆編碼部26係將量化部25所輸出之已被量化之轉換係數、和所被供給之各參數,加以編碼。亦即,差分影像係被可變長度編碼、算術編碼等之可逆編碼,而被壓縮。此處,適應偏置濾波器的參數也被編碼。
於步驟S27中,積存緩衝區27係將已被編碼之差分影像(亦即編碼串流),當成壓縮影像而予以積存。積存緩衝區27所積存之壓縮影像,係被適宜讀出,透過傳輸路而傳輸至解碼側。
於步驟S28中,速率控制部37係基於積存緩衝區27中所積存之壓縮影像,以不會發生溢位或下溢之方式,控制量化部25的量化動作之速率。
一旦步驟S28的處理結束,則編碼處理就會結束。
[影像解碼裝置的構成例]
圖3係表示作為適用了本揭露之影像處理裝置的影像解碼裝置之一實施形態的構成。如圖3所示的影像解碼裝置51,係為對應於圖1之影像編碼裝置11的解碼裝置。
已被影像編碼裝置11所編碼之編碼串流(資料),係透過所定之傳輸路,被傳輸至該對應於影像編碼裝置11的影像解碼裝置51,而被解碼。
如圖3所示的影像解碼裝置51,係具有:積存緩衝區61、可逆解碼部62、逆量化部63、逆正交轉換部64、演算部65、去區塊濾波器66、畫面排序緩衝區67、及D/A轉換部68。又,影像解碼裝置51係具有:畫格記憶體69、選擇部70、畫面內預測部71、運動預測.補償部72、及選擇部73。
再者,影像解碼裝置51,係在去區塊濾波器66、和畫面排序緩衝區67及畫格記憶體69之間,具有適應偏置濾波器81及適應迴圈濾波器82。
積存緩衝區61,係將所被傳輸過來的編碼資料加以收取的收取部。積存緩衝區61,係將所被傳輸過來的編碼資料,加以收取並積存。該編碼資料係被影像編碼裝置11所編碼而成。可逆解碼部62,係將在所定之時序上從積存緩衝區61所讀出之編碼資料,以圖1之可逆編碼部26之編碼方式所對應之方式,進行解碼。
可逆解碼部62,係將已被解碼之表示畫面內預測模式之資訊等參數,供給至畫面內預測部71,並將表示畫面間預測模式之資訊或運動向量資訊等參數,供給至運動預測.補償部72。又,可逆解碼部62係將已被解碼之適應偏置參數(表示各分量之ON/OFF的資訊、表示每LCU之分量間共通之類型的資訊或各分量之偏置等), 供給至適應偏置濾波器81。
逆量化部63,係將可逆解碼部62解碼所得之係數資料(量化係數),以圖1之量化部25的量化方式所對應之方式,進行逆量化。亦即,逆量化部63,係使用從影像編碼裝置11所供給之量化參數,以和圖1之逆量化部28同樣的方法,進行量化係數的逆量化。
逆量化部63係將已被逆量化之係數資料、亦即正交轉換係數,供給至逆正交轉換部64。逆正交轉換部64,係以圖1的正交轉換部24的正交轉換方式所對應之方式,將該正交轉換係數進行逆正交轉換,獲得在影像編碼裝置11中被正交轉換前的殘差資料所對應之解碼殘差資料。
逆正交轉換所得到的解碼殘差資料,係被供給至演算部65。又,對演算部65,係透過選擇部73,而從畫面內預測部71或是運動預測.補償部72,供給著預測影像。
演算部65,係將該解碼殘差資料與預測影像進行加算,獲得影像編碼裝置11之演算部23進行預測影像減算前的影像資料所對應之解碼影像資料。演算部65,係將該解碼影像資料,供給至去區塊濾波器66。
去區塊濾波器66,係藉由適宜地進行去區塊濾波處理,以去除解碼影像的區塊失真。去區塊濾波器66,係將其濾波處理結果,供給至適應偏置濾波器81。
適應偏置濾波器81,係對去區塊濾波器66所 致之濾波後的影像,進行主要用來去除漣波現象的偏置濾波(SAO)處理。
適應偏置濾波器81,係使用從可逆解碼部62所供給之適應偏置參數,而每最大編碼單位亦即LCU地,對去區塊濾波器66所致之濾波後的影像,施行濾波處理。適應偏置濾波器81,係將濾波處理後之影像,供給至適應迴圈濾波器82。
此外,適應偏置濾波器81的細節,係在圖16中後述,但適應偏置濾波器81,係每一切片地收取表示各分量之ON/OFF的資訊、每最大編碼單位亦即LCU的偏置濾波器之種類(類型)與偏置(值)。其中,濾波器之類型,係在Y,Cb,Cr的分量間被共通地設定。適應偏置濾波器81,係使用已被收取之類型與偏置,對去區塊濾波器66所致之濾波後的影像,施行濾波處理。
適應迴圈濾波器82係與圖1之影像編碼裝置11的適應迴圈濾波器42基本上是同樣的構成,係每最大編碼單位亦即LCU地,進行適應迴圈濾波處理。適應迴圈濾波器82,係對適應偏置濾波器81所致之濾波後的影像,使用濾波器係數,每LCU地進行濾波處理,將濾波處理結果,供給至畫格記憶體69及畫面排序緩衝區67。
此外,雖然在本說明書中省略詳細說明,但在影像解碼裝置51中,濾波器係數,係被影像編碼裝置11的適應迴圈濾波器42而每LUC地被算出、編碼而送來者,是被可逆解碼部62所解碼並使用。
畫面排序緩衝區67,係進行影像的排序。亦即,藉由圖1的畫面排序緩衝區22而被排序成編碼所需之順序的畫格之順序,係被排序成原本的顯示順序。D/A轉換部68,係將從畫面排序緩衝區67所供給之影像進行D/A轉換,輸出至未圖示之顯示器而顯示之。
適應迴圈濾波器82的輸出,係還會被供給至畫格記憶體69。
畫格記憶體69、選擇部70、畫面內預測部71、運動預測.補償部72、及選擇部73,係、分別對應於影像編碼裝置11的畫格記憶體32、選擇部33、畫面內預測部34、運動預測.補償部35、及預測影像選擇部36。
選擇部70,係將被畫面間處理之影像與被參照之影像,從畫格記憶體69中讀出,供給至運動預測.補償部72。又,選擇部70,係將畫面內預測時所使用的影像,從畫格記憶體69中讀出,供給至畫面內預測部71。
對畫面內預測部71係從可逆解碼部62適宜供給著,將標頭資訊解碼所得之表示畫面內預測模式的資訊等。畫面內預測部71係基於該資訊,而根據從畫格記憶體69所取得之參照影像,生成預測影像,將所生成之預測影像供給至選擇部73。
對運動預測.補償部72,係有將標頭資訊解碼所得到的資訊(預測模式資訊、運動向量資訊、參照畫格資訊、旗標、及各種參數等),會從可逆解碼部62被供給。
運動預測.補償部72,係基於從可逆解碼部62所供給之這些資訊,根據從畫格記憶體69所取得之參照影像,生成預測影像,將所生成之預測影像供給至選擇部73。
選擇部73,係將運動預測.補償部72或畫面內預測部71所生成之預測影像加以選擇,供給至演算部65。
[影像解碼裝置之動作]
參照圖4,說明如以上之影像解碼裝置51所執行的解碼處理的流程例。
解碼處理一旦開始,則於步驟S51中,積存緩衝區61係將所被傳輸過來的編碼串流(資料),加以收取、積存。於步驟S52中,可逆解碼部62係將從積存緩衝區61所供給之編碼資料,加以解碼。已被圖1之可逆編碼部26所編碼的I圖像、P圖像、以及B圖像,會被解碼。
在早於圖像之解碼前,運動向量資訊、參照畫格資訊、預測模式資訊(畫面內預測模式、或畫面間預測模式)等之參數的資訊,也被解碼。
預測模式資訊是畫面內預測模式資訊的情況下,預測模式資訊係被供給至畫面內預測部71。當預測模式資訊是畫面間預測模式資訊時,與預測模式資訊對應的運動向量資訊等,係被供給至運動預測.補償部72。又,適應偏置參數亦被解碼,被供給至適應偏置濾波器81。
於步驟S53中,畫面內預測部71或運動預測.補償部72,係對應於從可逆解碼部62所供給之預測模式資訊,而分別進行預測影像生成處理。
亦即,從可逆解碼部62供給了畫面內預測模式資訊時,畫面內預測部71係生成畫面內預測模式的畫面內預測影像。從可逆解碼部62供給了畫面間預測模式資訊時,運動預測.補償部72,係進行畫面間預測模式的運動預測.補償處理,生成畫面間預測影像。
藉由此處理,畫面內預測部71所生成之預測影像(畫面內預測影像)、或運動預測.補償部72所生成之預測影像(畫面間預測影像),係被供給至選擇部73。
於步驟S54中,選擇部73係選擇預測影像。亦即,畫面內預測部71所生成之預測影像、或運動預測.補償部72所生成之預測影像,會被供給。因此,已被供給之預測影像會被選擇然後供給至演算部65,於後述的步驟S57中,與逆正交轉換部64之輸出進行加算。
於上述的步驟S52中,已被可逆解碼部62所解碼之轉換係數,係也被供給至逆量化部63。於步驟S55中,逆量化部63係將已被可逆解碼部62所解碼之轉換係數,以圖1之量化部25之特性所對應之特性,進行逆量化。
於步驟S56中,逆正交轉換部29係將已被逆量化部28所逆量化之轉換係數,以圖1之正交轉換部24之特性所對應之特性,進行逆正交轉換。藉此,圖1之正 交轉換部24之輸入(演算部23之輸出)所對應的差分資訊,就被解碼。
於步驟S57中,演算部65係將上述步驟S54之處理中所被選擇,透過選擇部73而被輸入的預測影像,與差分資訊進行加算。藉此,原本的影像就被解碼。
於步驟S58中,去區塊濾波器66,係對演算部65所輸出的影像,進行去區塊濾波處理。藉此,區塊失真就被去除。來自去區塊濾波器66的解碼影像,係被輸出至適應偏置濾波器81。
於步驟S59中,適應偏置濾波器81係進行適應偏置濾波處理。適應偏置濾波器81,係使用來自可逆解碼部62的適應偏置參數,對去區塊濾波器66所致之濾波後的影像,施行濾波處理。適應偏置濾波器81,係將濾波處理後之影像,供給至適應迴圈濾波器82。
此外,適應偏置濾波器81的細節,將在圖17中後述,但適應偏置濾波器81係進行適應偏置濾波處理。藉由此處理,就會每最大編碼單位亦即LCU地,設定在Y,Cb,Cr之分量間共通的偏置濾波器之類型,然後,各分量地設定偏置。然後,使用這些來對去區塊濾波器66進行過濾波後的影像,施行濾波處理。
於步驟S60中,適應迴圈濾波器82,係對適應偏置濾波器81所致之濾波後的影像,進行適應迴圈濾波處理。適應迴圈濾波器82,係使用每最大編碼單位亦即LCU所被計算出來的濾波器係數,對輸入影像,每 LCU地進行濾波處理,將濾波處理結果,供給至畫面排序緩衝區67及畫格記憶體69。
於步驟S61中,畫格記憶體69係將已被過濾之影像,加以記憶。
於步驟S62中,畫面排序緩衝區67係進行適應迴圈濾波器82後的影像之排序。亦即,已被影像編碼裝置11的畫面排序緩衝區22為了進行編碼而排序過的畫格之順序,會被排序成原本的顯示順序。
於步驟S63中,D/A轉換部68係將來自畫面排序緩衝區67的影像,進行D/A轉換。該影像係被輸出至未圖示的顯示器,而顯示出影像。
一旦步驟S63的處理結束,則解碼處理就會結束。
<先前手法之說明>
[HEVC方式中的適應偏置處理]
接著,說明HEVC方式中的適應偏置濾波器。於HEVC方式中,係採用Sample Adaptive Offset方式。
在編碼側上,適應偏置濾波器41係被設在去區塊濾波器(DB)31、與適應迴圈濾波器(ALF)42之間。在解碼側上也同樣地,適應偏置濾波器81係被設在去區塊濾波器(DB)66、與適應迴圈濾波器(ALF)82之間。
作為適應偏置之類型(種類),稱作頻帶偏置者係有2種類,稱作邊緣偏置者係有6種類,而且亦有可能 不適應偏置。然後,每LCU地選擇要用上述哪種適應偏置之類型來將影像進行編碼。
此選擇資訊,係當成PQAO Info.,被編碼部(Entropy Coding)所編碼,生成位元串流,所被生成之位元串流係被發送至解碼側。藉由使用此方法,就可提升編碼效率。
首先,參照圖5,說明頻帶偏置之細節。
於頻帶偏置中,於圖5的例子中,1個刻度係表示1頻帶=8像素,亮度像素值係被分成32頻帶,各個頻帶係獨立地具有偏置值。
亦即,於圖5的例子中,0至255像素(32頻帶)當中,中央的16頻帶,係被分成第1群組,兩旁的各8頻帶係被分成第2群組。
然後,僅第1群組及第2群組之任一方的偏置會被編碼,送往解碼側。一般而言,在1個領域中,多半為,若不是黑白分明,就是具有微妙的色彩差異,很少第1群組與第2群組雙方全部都具有像素。因此,藉由僅發送一方之偏置,在各個LCU中,就可抑制未含有之值的像素值被傳輸而導致編碼量增加。
此外,輸入訊號若是由播送而來的情況下,亮度訊號係被限制成16,235、色差訊號係被限制成16,240之範圍。此時,會適用圖5下段所示的broadcast legal,對於標示×記號之兩旁各2頻帶的偏置值,就不被傳輸。
接著,參照圖6,說明邊緣偏置之細節。
於邊緣偏置中,會進行該當像素值、和該當像素值所相鄰之相鄰像素值的比較,對於其所對應之範疇,偏置值會被傳輸。
在邊緣偏置裡,存在有圖6的A至圖6的D所示的4個1維圖案、和圖6的E及圖6的F所示的2個2維圖案,分別是以圖6所示的類別來傳輸偏置。
圖6的A係表示,相對於該當像素C,相鄰像素是左右的1維地配置,亦即相對於圖6之A的圖案是呈0度夾角的1-D,0-degree圖案。圖6的B係表示,相對於該當像素C,相鄰像素是上下的1維地配置,亦即相對於圖6之A的圖案是呈90度夾角的1-D,90-degree圖案。
圖6的C係表示,相對於該當像素C,相鄰像素是左上和右下的1維地配置,亦即相對於圖6之A的圖案是呈135度夾角的1-D,135-degree圖案。圖6的D係表示,相對於該當像素C,相鄰像素是右上和左下的1維地配置,亦即相對於圖6之A的圖案是呈45度夾角的1-D,135-degree圖案。
圖6的E係表示,相對於該當像素C,相鄰像素是上下左右的2維地配置,亦即相對於該當像素C是呈交叉的2-D,cross圖案。圖6的F係表示,相對於該當像素C,相鄰像素是右上左下、左上右下的2維地配置,亦即相對於該當像素C是呈斜向交叉的2-D,diagonal圖案。
圖7的A係表示1維圖案的規則一覽表 (Classification rule for 1-D patterns)。圖6的A至圖6的D的圖案,係被分類成如圖7的A所示的5種類之類別,根據該類別而算出偏置,並送往解碼部。
若該當像素C之像素值是小於2個相鄰像素之像素值,則被分類成類別1。若該當像素C之像素值是小於一方之相鄰像素之像素值,而與另一方之相鄰像素之像素值一致的情況下,則被分類成類別2。若該當像素C之像素值是大於一方之相鄰像素之像素值,而與另一方之相鄰像素之像素值一致的情況下,則被分類成類別3。若該當像素C之像素值是大於2個相鄰像素之像素值,則被分類成類別4。若以上皆非的情況下,則被分類成類別0。
圖7的B係表示2維圖案的規則一覽表(Classification rule for 2-D patterns)。圖6的E及圖6的F的圖案,係被分類成如圖7的B所示的7種類之類別,根據該類別而將偏置送往解碼部。
若該當像素C之像素值是小於4個相鄰像素之像素值,則被分類成類別1。若該當像素C之像素值是小於3個相鄰像素之像素值,而與第4個相鄰像素之像素值一致的情況下,則被分類成類別2。若該當像素C之像素值是小於3個相鄰像素之像素值,而大於第4個相鄰像素之像素值的情況下,則被分類成類別3。
若該當像素C之像素值是大於3個相鄰像素之像素值,而小於第4個相鄰像素之像素值的情況下,則 被分類成類別4。若該當像素C之像素值是大於3個相鄰像素之像素值,而與第4個相鄰像素之像素值一致的情況下,則被分類成類別5。若該當像素C之像素值是大於4個相鄰像素之像素值,則被分類成類別6。若以上皆非的情況下,則被分類成類別0。
如以上,在邊緣偏置中,反而是1維圖案,僅對相鄰2像素進行比較即可,因此演算量較低。此外,high efficiency編碼條件中,相較於low delay編碼條件,將1bit偏置之值設成高精度,而送往解碼側。
上述的適應偏置處理,係於HEVC方式(非專利文獻1)中,對每一LCU進行的處理。又,在HEVC方式中的適應偏置處理中,Y,Cb,Cr之分量間的控制訊號,係完全獨立地傳輸。
亦即,HEVC方式中,ON/OFF資訊、濾波器類型資訊、及濾波器係數等之SAO控制資訊,係每LCU地、或每分量地完全獨立地傳輸。
相對於此,於非專利文獻2中則是提出了,在上述的SAO控制資訊當中,將分量間的ON/OFF控制訊號置換成1個語法而傳輸。
接著,參照圖8的流程圖,說明先前每LCU的SAO控制資訊傳輸處理。
於步驟S11中,令分量ID(cIdx)=0。此處,cIdx=0係表示Y(亮度訊號),cIdx=1係表示Cb(色差訊號),cIdx=2係表示Cr(色差訊號)。
於步驟S12中,判定是否cIdx<3。於步驟S12中,若判定為cIdx<3,則處理係前進至步驟S13。於步驟S13中,判定是否slice_sample_adaptive_offset_flag[cIdx]=1。slice_sample_adaptive_offset_flag[cIdx],係為每一切片的表示各分量之ON/OFF的資訊(旗標)。
於步驟S13中,若判定為slice_sample_adaptive_offset_flag[cIdx]=1(亦即進行對cIdx之適應偏置濾波器)時,則處理係前進至步驟S14。於步驟S14中,針對cIdx(=0)的SAO控制資訊,會被傳輸。此外,於非專利文獻2中,作為SAO控制資訊,係發送了濾波器類型資訊、及濾波器係數(偏置)等。
於步驟S13中,若判定為slice_sample_adaptive_offset_flag[cIdx]=0(亦即不進行對cIdx之適應偏置濾波器)時,則略過步驟S14,前進至步驟S15。
於步驟S15中,令cIdx++(亦即,cIdx=1),處理係返回至步驟S12。於步驟S12中,若判定為並非cIdx<3,則處理係前進至步驟S16。
於步驟S16中,判定現在處理中之目前LCU是否為最後LCU。於步驟S16中,若判定現在處理中之目前LCU並非最後LCU,則處理係前進至步驟S17。於步驟S17中,令下個LCU為目前LCU,處理係返回至步驟S11。
於步驟S16中,若判定現在處理中之目前 LCU是最後LCU,則每一LCU的SAO控制資訊傳輸處理就結束。
如以上,在非專利文獻2中,濾波器類型資訊、及濾波器係數等之SAO控制資訊是每LCU地、且每分量地完全獨立地傳輸。
然而,於上述非專利文獻1、2中,由於是在Y,Cb,Cr之分量間獨立地傳輸類型資訊,因此適應偏置濾波器之控制上所需要之編碼量係較多。
鑑於以上情形,本技術中,是在分量間(Y,Cb,Cr或是Cb,Cr),把濾波器類型做共通化,僅係數會被當成SAO控制資訊而被獨立地傳輸。
<3.第1實施形態>
[適應偏置濾波器之構成例]
圖9係圖1的影像編碼裝置中的適應偏置濾波器及可逆編碼部之構成例的區塊圖。
於圖9的例子中,適應偏置濾波器41係含有:SAO旗標設定部111、類型設定部112、偏置設定部113、SAO控制資訊設定部114、偏置緩衝區115、濾波處理部116、及影像緩衝區117所構成。
可逆編碼部26,係至少含有語法寫入部121所構成。
來自去區塊濾波器31的去區塊後像素值,係被輸入至SAO旗標設定部111、類型設定部112、偏置設 定部113、及濾波處理部116。SAO旗標設定部111,係使用去區塊後像素值,以切片單位,設定各分量的表示適應偏置濾波器之ON/OFF的SAO旗標(slice_sample_adaptive_offset_flag)。SAO旗標設定部111,係將所設定之SAO旗標,供給至類型設定部112及語法寫入部121。
類型設定部112,係使用去區塊後像素值,以LCU單位,設定在Y,Cb,Cr之分量間共通的濾波器之類型。例如,以LCU單位來計算成本函數值,設定成本函數值為最小的最適合於該LCU的類型。此時,雖然會使用到所有的分量的訊號,但所使用的訊號係沒有限定,亦可僅使用亮度訊號。類型設定部112,係將表示類型之資訊,供給至偏置設定部113及語法寫入部121。又,類型設定部112係也將各分量的SAO旗標,供給至偏置設定部113。
偏置設定部113,係使用去區塊後像素值,以LCU單位,設定在Y,Cb,Cr之各分量間獨立的偏置(係數)。此時,例如,會使用到各分量的訊號(去區塊後像素值),以LCU單位來計算成本函數值,設定成本函數值為最小的最適合於該LCU的偏置。
偏置設定部113,係將各分量之SAO旗標及偏置、及分量間共通之類型,供給至濾波處理部116。又,偏置設定部113係將偏置,供給至SAO控制資訊設定部114。
SAO控制資訊設定部114,係每分量地,將來自偏置設定部113的偏置,寫入至偏置緩衝區115。又,SAO控制資訊設定部114係參照被寫入至偏置緩衝區115的資訊,判定來自偏置設定部113的偏置,是否和現在處理中之目前LCU的左方相鄰之左LCU的偏置一致。SAO控制資訊設定部114,係若判定為一致,則設定sao_merge_left_flag,將所設定的sao_merge_left_flag,當作SAO控制資訊而供給至語法寫入部121。
然後,SAO控制資訊設定部114係判定來自偏置設定部113的偏置,是否和目前LCU的上方相鄰之上LCU的偏置一致。SAO控制資訊設定部114,係若判定為一致,則設定sao_merge_top_flag,將所設定的sao_merge_top_flag,當作SAO控制資訊而供給至語法寫入部121。
SAO控制資訊設定部114,係若來自偏置設定部113的偏置是和左LCU或上LCU都不一致,則僅將偏置,當作SAO控制資訊,供給至語法寫入部121。亦即,sao_merge_left_flag係為表示是與左LCU相同偏置的旗標,sao_merge_top_flag係為表示是與上LCU相同偏置的旗標,當這些旗標被設定時,則所被設定之旗標會取代偏置而被發送。此外,此處,雖然說明僅以偏置來進行判定的例子,但亦可從偏置設定部113供給類型和偏置,以類型和偏置來進行判定。
偏置緩衝區115,係將相鄰於目前LCU的 LCU的偏置,加以保持。偏置緩衝區115中係只要至少保持著目前LCU的左LCU與上LCU之偏置即可。
濾波處理部116,係基於來自偏置設定部113的SAO旗標、類型資訊、偏置資訊,對來自去區塊濾波器31的各分量的去區塊後像素值,每LCU地施行適應偏置濾波處理。濾波處理部116,係將偏置處理後的像素值,供給至影像緩衝區117。
影像緩衝區117,係將濾波處理部116所致之偏置處理後的像素值予以暫時儲存,在所定之時序上,供給至適應迴圈濾波器42。
語法寫入部121,係將來自SAO旗標設定部111的SAO旗標,每切片地寫入至編碼串流的標頭部。語法寫入部121,係每LCU地,將來自類型設定部112的分量間共通之類型、來自SAO控制資訊設定部114的每分量之偏置或合併旗標,寫入至編碼串流的標頭部。
[編碼側的適應偏置濾波處理]
接著,參照圖10的流程圖,說明圖9的適應偏置濾波器41所進行之適應偏置濾波處理。此外,該適應偏置濾波處理,係為圖2的步驟S23中的處理。
來自去區塊濾波器31的去區塊後像素值,係被輸入至SAO旗標設定部111、類型設定部112、偏置設定部113、及濾波處理部116。SAO旗標設定部111,係於步驟S111中,使用去區塊後像素值,以切片單位,設 定各分量的表示適應偏置濾波器之ON/OFF的SAO旗標(slice_sample_adaptive_offset_flag)。SAO旗標設定部111,係將所設定之SAO旗標,供給至類型設定部112及語法寫入部121。
類型設定部112,係於步驟S112中,令分量ID(cIdx)=0。此處,cIdx=0係表示Y(亮度訊號),cIdx=1係表示Cb(色差訊號),cIdx=2係表示Cr(色差訊號)。
步驟S113中,類型設定部112係判定是否slice_sample_adaptive_offset_flag[0 or 1or 2]=1。亦即,於步驟S113中,判定是否要適用Y、Cb、Cr當中之至少1者的適應偏置濾波器。
於步驟S113中,若判定為slice_sample_adaptive_offset_flag[0 or 1or 2]=1,亦即要適用Y、Cb、Cr當中之至少1者的適應偏置濾波器時,則處理係前進至步驟S114。
於步驟S114中,類型設定部112,係使用去區塊後像素值,以LCU單位,設定在Y,Cb,Cr之分量間共通的濾波器之類型(sao_type)。類型設定部112,係將表示類型之資訊,供給至語法寫入部121,其後,處理係前進至步驟S115。
此外,對應於此,語法寫入部121,係於後述的圖12的步驟S143中,將sao_type寫入至語法中,供給至積存緩衝區27並傳輸之。
於步驟S112中,若判定為 slice_sample_adaptive_offset_flag[0 and 1and 2]=0,亦即Y、Cb、Cr之所有的適應偏置濾波器都不適用時,則處理係略過步驟S114,前進至步驟S115。
類型設定部112,係於步驟S115中,判定是否cIdx<3。於步驟S115中,若判定為cIdx<3,則處理係前進至步驟S116。
於步驟S116中,類型設定部112係判定是否slice_sample_adaptive_offset_flag[cIdx]=1。
於步驟S116中,若判定為slice_sample_adaptive_offset_flag[cIdx]=1(亦即進行對cIdx之適應偏置濾波器)時,則處理係前進至步驟S117。此時,類型設定部112,係將藉由步驟S114而被設定的濾波器之類型、和步驟S111中所被設定之對應的cIdx之SAO旗標(slice_sample_adaptive_offset_flag),供給至偏置設定部113。
於步驟S117中,偏置設定部113及SAO控制資訊設定部114,係設定對cIdx(=0(亦即Y亮度訊號)的SAO控制資訊。該SAO控制資訊設定處理係參照圖11而後述,但藉由該處理,會設定偏置或合併旗標來作為SAO控制資訊,所被設定之SAO控制資訊,會被供給至語法寫入部121。又,此處,所被設定之偏置,係被供給至濾波處理部116。
對應於此,語法寫入部121,係於後述的圖12的步驟S146中,將對cIdx之SAO控制資訊寫入至語 法中,供給至積存緩衝區27並傳輸之。
步驟S117之後,處理係前進至步驟S118。又,於步驟S116中若判定為slice_sample_adaptive_offset_flag[cIdx]=0(亦即不進行對cIdx之適應偏置濾波器)時,則處理係略過步驟S117,前進至步驟S118。
於步驟S118中,濾波處理部116,係對來自去區塊濾波器31的去區塊處理後像素,進行適應濾波處理。此時,根據藉由步驟S114而被設定的濾波器之類型、和步驟S111中所被設定之對應的cIdx之SAO旗標、還有步驟S117中所設定之偏置,來進行適應濾波處理。
濾波處理部116,係將偏置處理後的像素值,供給至影像緩衝區117。影像緩衝區117,係將濾波處理部116所致之偏置處理後的像素值予以暫時儲存,在所定之時序上,供給至適應迴圈濾波器42。
類型設定部112,係於步驟S119中,令cIdx++(亦即,cIdx=1(亦即Cb色差訊號)),處理係返回至步驟S115。又,於步驟S115中,若判定為並非cIdx<3,則處理係前進至步驟S120。
於步驟S120中,類型設定部112係判定現在處理中之目前LCU是否為最後LCU。於步驟S120中,若判定現在處理中之目前LCU並非最後LCU,則處理係前進至步驟S121。於步驟S121中,將目前LCU移往下個LCU,處理係返回至步驟S112。
於步驟S120中,若判定現在處理中之目前LCU是最後LCU,則結束適應偏置濾波器。
[SAO控制資訊設定處理]
接著,參照圖11的流程圖,說明圖10的步驟S117的SAO控制資訊設定處理。
於步驟S131中,偏置設定部113係使用去區塊後像素值,以LCU單位,設定cIdx的各分量獨立之偏置(係數),將已設定之偏置,供給至濾波處理部116和SAO控制資訊設定部114。
SAO控制資訊設定部114,係於步驟S132中,對Y,Cb,Cr之每分量地,將來自偏置設定部113的偏置,寫入至偏置緩衝區115。
於步驟S133中,SAO控制資訊設定部114係判定,現在處理中之目前LCU,是否可和目前LCU的左方相鄰之左LCU做合併。亦即,SAO控制資訊設定部114係參照被寫入至偏置緩衝區115的資訊,判定來自偏置設定部113的目前LCU的偏置,是否和左LCU的偏置一致。
於步驟S133中,若判定為來自偏置設定部113的目前LCU的偏置是和左LCU之偏置一致,目前LCU是可和左LCU合併的情況下,則處理係前進至步驟S134。
於步驟S134中,SAO控制資訊設定部114, 係設定sao_merge_left_flag,將所設定的sao_merge_left_flag,當作SAO控制資訊而供給至語法寫入部121。
另一方面,於步驟S133中,若判定為目前LCU無法和左LCU合併,則處理係前進至步驟S135。於步驟S135中,SAO控制資訊設定部114係判定,現在處理中之目前LCU,是否可和目前LCU的上方相鄰之上LCU做合併。亦即,SAO控制資訊設定部114係參照被寫入至偏置緩衝區115的資訊,判定來自偏置設定部113的目前LCU的偏置,是否和上LCU的偏置一致。
於步驟S135中,若判定為來自偏置設定部113的目前LCU的偏置是和上LCU之偏置一致,目前LCU是可和上LCU合併的情況下,則處理係前進至步驟S136。
於步驟S136中,SAO控制資訊設定部114,係設定sao_merge_top_flag,將所設定的sao_merge_top_flag,當作SAO控制資訊而供給至語法寫入部121。
另一方面,於步驟S135中,若判定為目前LCU無法和上LCU合併,則處理係前進至步驟S137。
於步驟S137中,SAO控制資訊設定部114,係將偏置,當作SAO控制資訊,供給至語法寫入部121。
[每LCU的SAO控制資訊傳輸處理]
接著,參照圖12的流程圖,說明相對於圖8之先前例的每LCU的SAO控制資訊傳輸處理。此外,此處理係對應於參照圖10而上述之適應偏置濾波處理,例如,是在圖2的步驟S26之編碼處理中所進行之處理。
語法寫入部121,係於步驟S141中,令分量ID(cIdx)=0。
步驟S142中,語法寫入部121係判定是否slice_sample_adaptive_offset_flag[0 or 1or 2]=1。亦即,判定是否要適用Y、Cb、Cr當中之至少1者的適應偏置濾波器。
步驟S142中,若判定為slice_sample_adaptive_offset_flag[0 or 1or 2]=1,則處理係前進至步驟S143。於步驟S143中,語法寫入部121,係將藉由圖10之步驟S114而被設定、供給的表示濾波器之類型(sao_type)之資訊,寫入至語法中,供給至積存緩衝區27並傳輸之。此外,表示類型之資訊,係以PPS(Picture Parameter Set)或是切片單位而被傳輸。
於步驟S142中,若判定為slice_sample_adaptive_offset_flag[0 and 1 and 2]=0,則步驟S143係被略過,處理係前進至步驟S144。
步驟S144中,語法寫入部121係判定是否cIdx<3。於步驟S144中,若判定為cIdx<3,則處理係前進至步驟S145。
步驟S145中,語法寫入部121係判定是否 slice_sample_adaptive_offset_flag[cIdx]=1。於步驟S145中,若判定為slice_sample_adaptive_offset_flag[cIdx]=1(亦即進行對cIdx之適應偏置濾波器)時,則處理係前進至步驟S146。
於步驟S146中,語法寫入部121,係將藉由圖10之步驟S117而被設定、供給的針對cIdx(=0(亦即Y亮度訊號))的SAO控制資訊(sao_type除外),寫入至語法中,供給至積存緩衝區27並傳輸之。
語法寫入部121,係於步驟S147中,令cIdx++(亦即,cIdx=1(亦即Cr色差訊號)),處理係返回至步驟S144。又,於步驟S144中,若判定為並非cIdx<3,則處理係前進至步驟S148。
於步驟S148中,語法寫入部121係判定現在處理中之目前LCU是否為最後LCU。於步驟S148中,若判定現在處理中之目前LCU並非最後LCU,則處理係前進至步驟S149。於步驟S149中,將目前LCU移往下個LCU,處理係返回至步驟S141。
於步驟S148中,若判定現在處理中之目前LCU是最後LCU,則每一LCU的SAO控制資訊傳輸處理就結束。
如以上,將表示濾波器之類型的資訊,在Y,Cb,Cr之分量間、亦即亮度及色差之成分間做共通化而輸送,變成僅將係數(偏置)在各分量間獨立傳輸,就可減少編碼量。
[適應偏置濾波器之其他構成例]
圖13係圖1的影像編碼裝置中的適應偏置濾波器及可逆編碼部之其他構成例的區塊圖。
於圖13的例子中,適應偏置濾波器41係具備:SAO旗標設定部111、偏置設定部113、SAO控制資訊設定部114、偏置緩衝區115、濾波處理部116、及影像緩衝區117,這點是和圖9的適應偏置濾波器41共通。
適應偏置濾波器41,係類型設定部112被置換成類型設定部141這點,是和圖9的適應偏置濾波器41不同。
又,圖13的可逆編碼部26,係語法寫入部121是被置換成語法寫入部161這點,是和圖9的可逆編碼部26不同。
亦即,圖13的類型設定部141係含有:用來設定在亮度訊號上獨立之濾波器類型的Y類型設定部151、及用來設定在Cb與Cr之色差訊號間共通之濾波器類型的Cm類型設定部152所構成。
Y類型設定部151,係使用亮度訊號,例如,以LCU單位來計算成本函數值,設定成本函數值為最小的、對該亮度訊號之LCU為最佳之類型。Cm類型設定部152,係使用Cb及Cr之至少任一方,例如,以LCU單位來計算成本函數值,設定成本函數值為最小的、對該色差 訊號之LCU為最佳之類型。
語法寫入部161,係和圖9的語法寫入部121同樣地,將來自SAO旗標設定部111的SAO旗標,每切片地寫入至編碼串流的標頭部。語法寫入部161,係和語法寫入部121同樣地,將來自SAO控制資訊設定部114的每分量之偏置或合併旗標,寫入至編碼串流的標頭部。
又,語法寫入部161係與語法寫入部121不同,是每LCU地,將來自類型設定部112的亮度用之表示Y類型的類型資訊、色差分量間共通之表示Cm類型的類型資訊,寫入至編碼串流的標頭部。
[編碼側的適應偏置濾波處理]
接著,參照圖14的流程圖,說明圖13的適應偏置濾波器41所進行之適應偏置濾波處理。此外,該適應偏置濾波處理,係為圖2的步驟S23中的處理。
SAO旗標設定部111,係於步驟S161中,使用去區塊後像素值,以切片單位,設定各分量的表示適應偏置濾波器之ON/OFF的SAO旗標。SAO旗標設定部111,係將所設定之SAO旗標(slice_sample_adaptive_offset_flag),供給至Y類型設定部151、Cm類型設定部152、及語法寫入部161。
Y類型設定部151及Cm類型設定部152,係於步驟S162中,令分量ID(cIdx)=0。
於步驟S163中,Y類型設定部151係判定是 否slice_sample_adaptive_offset_flag[0]=1。亦即,於步驟S163中係判定是否要適用Y的適應偏置濾波器。
於步驟S163中,若判定為slice_sample_adaptive_offset_flag[0]=1,亦即要適用Y的適應偏置濾波器時,則處理係前進至步驟S164。
於步驟S164中,Y類型設定部151,係使用去區塊後像素值,以LCU單位,設定Y的濾波器之類型(sao_type_Y)。Y類型設定部151,係將表示Y之類型的資訊,供給至語法寫入部161,其後,處理係前進至步驟S165。
此外,對應於此,語法寫入部161,係於後述的圖15的步驟S183中,將sao_type_Y寫入至語法中,供給至積存緩衝區27並傳輸之。
又,於步驟S163中,若判定為slice_sample_adaptive_offset_flag[0]=0,則處理係略過步驟S164,前進至步驟S165。
於步驟S165中,Cm類型設定部152係判定是否slice_sample_adaptive_offset_flag[1or2]=1。亦即,於步驟S165中係判定是否要適用Cr或Cb的適應偏置濾波器。
於步驟S165中,若判定為slice_sample_adaptive_offset_flag[1 or 2]=1,亦即要適用Cm的適應偏置濾波器時,則處理係前進至步驟S166。
於步驟S166中,Cm類型設定部152,係使 用去區塊後像素值,以LCU單位,設定Cb和Cr上共通的濾波器之類型(sao_type_Cm)。Y類型設定部151,係將表示Cm之類型的資訊,供給至語法寫入部161,其後,處理係前進至步驟S167。
此外,對應於此,語法寫入部161,係於後述的圖15的步驟S185中,將sao_type_Cm寫入至語法中,供給至積存緩衝區27並傳輸之。
又,於步驟S165中,若判定為slice_sample_adaptive_offset_flag[1and2]=0,則處理係略過步驟S166,前進至步驟S167。
此外,以下的S167至S173,係基本上是進行和圖10的步驟S115至S121相同的處理,因此其說明係重複故省略之。
[每LCU的SAO控制資訊傳輸處理]
接著,參照圖15的流程圖,說明對圖8之先前例的每LCU的SAO控制資訊傳輸處理。此外,此處理係對應於參照圖14而上述之適應偏置濾波處理,例如,是在圖2的步驟S26之編碼處理中所進行之處理。
語法寫入部161,係於步驟S181中,令分量ID(cIdx)=0。
步驟S182中,語法寫入部161係判定是否slice_sample_adaptive_offset_flag[0]=1。亦即,判定是否要適用Y的適應偏置濾波器。
步驟S182中,若判定為slice_sample_adaptive_offset_flag[0]=1,則處理係前進至步驟S183。於步驟S183中,語法寫入部161,係將藉由圖14之步驟S164而被供給的表示濾波器之類型(sao_type_Y)之資訊,寫入至語法中,供給至積存緩衝區27並傳輸之。
於步驟S182中,若判定為slice_sample_adaptive_offset_flag[0]=0,則處理係略過步驟S183,前進至步驟S184。
步驟S184中,語法寫入部161係判定是否slice_sample_adaptive_offset_flag[1or2]=1。亦即,判定是否要適用Cm的適應偏置濾波器。
步驟S184中,若判定為slice_sample_adaptive_offset_flag[1or2]=1,則處理係前進至步驟S185。於步驟S185中,語法寫入部161,係將藉由圖14之步驟S166而被供給的表示濾波器之類型(sao_type_Cm)之資訊,寫入至語法中,供給至積存緩衝區27並傳輸之。
於步驟S184中,若判定為slice_sample_adaptive_offset_flag[1and 2]=0,則步驟S185係被略過,處理係前進至步驟S186。
此外,以下的S186至S191,係基本上是進行和圖14的步驟S144至S149相同的處理,因此這些說明係重複故省略之。
如以上,亦可僅在Cb及Cr之色差的分量間,將濾波器之類型資訊做共通化,此情況下,亦可削減編碼量。
<4.第5實施形態>
[適應偏置濾波器之構成例]
圖16係圖3的影像解碼裝置中的可逆解碼部及適應偏置濾波器之構成例的區塊圖。此外,圖16所示之構成例,係對應於圖9的適應偏置濾波器與可逆編碼部。
於圖16的例子中,可逆解碼部62係至少含有語法取得部211所構成。
適應偏置濾波器81係含有:SAO旗標收取部221、類型收取部222、合併旗標收取部223、偏置緩衝區224、偏置收取部225、濾波處理部226、及影像緩衝區227所構成。
語法取得部211,係從編碼串流之標頭部,取得語法。然後,語法取得部211,係在所取得的語法當中,將適應偏置參數,供給至SAO旗標收取部221、類型收取部222、合併旗標收取部223、及偏置收取部225。
亦即,語法取得部211係將適應偏置參數之1的SAO旗標(slice_sample_adaptive_offset_flag),供給至SAO旗標收取部221。語法取得部211係將適應偏置參數之1的濾波器之類型資訊,供給至類型收取部222。語法取得部211係將適應偏置參數之1的合併旗標 (sao_merge_left_flag或sao_merge_top_flag),供給至合併旗標收取部223。語法取得部211係將適應偏置參數之1的偏置(係數),供給至偏置收取部225。
此外,適應偏置參數當中,SAO旗標係每切片地被設定而傳輸過來。適應偏置參數當中,類型資訊、合併旗標、及偏置等,係每LCU地被設定而傳輸過來。類型資訊係例如以PPS(Picture Parameter Set)或是切片單位而被傳輸過來。
SAO旗標收取部221,係將從語法取得部211所供給的表示每一分量之ON/OFF的SAO旗標,供給至濾波處理部226。類型收取部222,係將從語法取得部211所供給之分量間共通的濾波器類型資訊,供給至濾波處理部226。合併旗標收取部223,係將從語法取得部211所供給之合併旗標,供給至偏置緩衝區224。偏置收取部225,係將從語法取得部211所取得之偏置,供給至偏置緩衝區224及濾波處理部226。
偏置緩衝區224,係將相鄰於目前LCU的LCU的偏置,加以保持。偏置緩衝區224中係只要至少保持著目前LCU的左LCU與上LCU之偏置即可。偏置緩衝區224,係一旦收取來自合併旗標收取部223的針對目前LCU的合併旗標,就將與合併旗標所示之相鄰LCU(左or上)對應而記憶的偏置予以讀出,供給至濾波處理部226。然後,偏置緩衝區224係將所讀出的偏置,對應於目前LCU而記憶。又,偏置緩衝區224,係一旦從偏置收取部 225收取針對目前LCU之偏置,就將所收取到的偏置,對應於目前LCU而記憶。
濾波處理部226,係參照來自SAO旗標收取部221、類型收取部222、偏置緩衝區224、偏置收取部225的資訊,對來自去區塊濾波器66的去區塊後的像素值,進行濾波處理。
亦即,在濾波處理部226中,係會參照來自SAO旗標收取部221的SAO旗標、來自類型收取部222的分量間共通化之濾波器類型、來自偏置緩衝區224或偏置收取部225的偏置。
濾波處理部226,係將偏置處理後的像素,供給至影像緩衝區227。
影像緩衝區227,係與圖10的影像緩衝區117基本上同樣地被構成。亦即,影像緩衝區227,係將濾波處理部226所致之偏置處理後的像素值予以暫時儲存,在所定之時序上,供給至適應迴圈濾波器82。
[解碼側的適應偏置濾波處理]
接著,參照圖17的流程圖,說明圖16的適應偏置濾波器81所進行之適應偏置濾波處理。此外,該適應偏置濾波處理,係為圖4的步驟S59中的處理。
於圖4的步驟S52中,編碼串流被解碼之際,語法取得部211,係從編碼串流之標頭部讀出語法,其中,將適應偏置參數,供給至適應偏置濾波器81的各 部。
SAO旗標收取部221,係於步驟S211中,收取從語法取得部211所供給之適應偏置參數的SAO旗標(slice_sample_adaptive_offset_flag)。SAO旗標收取部221,係將所收取的SAO旗標,供給至濾波處理部226。
濾波處理部226,係於步驟S212中,令分量ID(cIdx)=0。
濾波處理部226,係於步驟S213中,判定是否slice_sample_adaptive_offset_flag[0 or 1or 2]=1。亦即,於步驟S213中,判定是否要適用Y、Cb、Cr當中之至少1者的適應偏置濾波器。
於步驟S213中,若判定為slice_sample_adaptive_offset_flag[0 or 1or 2]=1,亦即要適用Y、Cb、Cr當中之至少1者的適應偏置濾波器時,則處理係前進至步驟S214。
於步驟S214中,濾波處理部226,係將來自語法取得部211的分量間被共通化的濾波器類型資訊(sao_type),透過類型收取部222而加以收取。
於步驟S213中,若判定為slice_sample_adaptive_offset_flag[0 and 1and 2]=0,亦即Y、Cb、Cr之所有的適應偏置濾波器都不適用時,則處理係略過步驟S214,前進至步驟S215。
於步驟S215中,濾波處理部226係判定是否cIdx<3。於步驟S215中,若判定為cIdx<3,則處理係前 進至步驟S216。
於步驟S216中,濾波處理部226係判定是否slice_sample_adaptive_offset_flag[cIdx]=1。
於步驟S216中,若判定為slice_sample_adaptive_offset_flag[cIdx]=1(亦即進行對cIdx之適應偏置濾波器)時,則處理係前進至步驟S217。
於步驟S217中,濾波處理部226收取針對cIdx(=0)的SAO控制資訊。此SAO控制資訊收取處理,係參照圖18而後述,但藉由該處理,合併旗標或偏置會被收取,藉由所被收取之合併旗標而被讀出的偏置、或所被收取之偏置,係被供給至濾波處理部226。
步驟S217之後,處理係前進至步驟S218。又,於步驟S216中若判定為slice_sample_adaptive_offset_flag[cIdx]=0(亦即不進行對cIdx之適應偏置濾波器)時,則處理係略過步驟S217,前進至步驟S218。
於步驟S218中,濾波處理部226,係對來自去區塊濾波器66的去區塊處理後像素,進行適應濾波處理。此時,根據藉由步驟S214而收取到的濾波器之類型、和步驟S211中所收取到的對應的cIdx之SAO旗標、還有步驟S217中所取得的偏置,來進行適應濾波處理。
濾波處理部226,係將偏置處理後的像素值,供給至影像緩衝區227。影像緩衝區227,係將濾波處理部226所致之偏置處理後的像素值予以暫時儲存,在所定 之時序上,供給至適應迴圈濾波器42。
濾波處理部226,係於步驟S219中,令cIdx++(亦即,cIdx=1),處理係返回至步驟S215。又,於步驟S215中,若判定為並非cIdx<3,則處理係前進至步驟S220。
於步驟S220中,濾波處理部226係判定現在處理中之目前LCU是否為最後LCU。於步驟S220中,若判定現在處理中之目前LCU並非最後LCU,則處理係前進至步驟S221。於步驟S221中,將目前LCU移到下個LCU,處理係返回至步驟S212。
於步驟S220中,若判定現在處理中之目前LCU是最後LCU,則結束適應偏置濾波處理。
[SAO控制資訊設定處理]
接著,參照圖18的流程圖,說明圖17的步驟S217的SAO控制資訊收取處理。
於步驟S231中,合併旗標收取部223係收取合併旗標。於步驟S232中,合併旗標收取部223係判定sao_merge_left_flag是否為1。於步驟S232中,若判定sao_merge_left_flag為1,則處理係前進至步驟S233。
於步驟S233中,合併旗標收取部223係控制偏置緩衝區224,讀出左LCU的偏置,偏置緩衝區224係將所讀出之左LCU的偏置,供給至濾波處理部226。
另一方面,於步驟S232中,若判定 sao_merge_left_flag為0,則處理係前進至步驟S234。於步驟S234中,合併旗標收取部223係判定sao_merge_top_flag是否為1。於步驟S234中,若判定sao_merge_top_flag為1,則處理係前進至步驟S235。
於步驟S235中,合併旗標收取部223係控制偏置緩衝區224,讀出上LCU的偏置,偏置緩衝區224係將所讀出之上LCU的偏置,供給至濾波處理部226。
又,於步驟S234中,若判定sao_merge_top_flag為0,則處理係前進至步驟S236。於步驟S236中,偏置收取部225係收取來自語法取得部211的偏置,供給至濾波處理部226。又,偏置收取部225,係將所收取的偏置,也供給至偏置緩衝區224。
於步驟S237中,偏置緩衝區224,係將步驟S233或S235所讀出之偏置、或來自偏置收取部225的偏置,當作目前LCU的偏置而寫入緩衝區。
如以上,表示濾波器之類型的資訊,是在Y,Cb,Cr之分量間、亦即亮度及色差之成分間被共通化而輸送,變成僅將係數(偏置)在各分量間獨立傳輸,就可減少編碼量。
[適應偏置濾波器之其他構成例]
圖19係圖3的影像解碼裝置中的可逆解碼部及適應偏置濾波器之構成例的區塊圖。此外,圖19所示之構成例,係對應於圖13的適應偏置濾波器與可逆編碼部。
於圖19的例子中,可逆解碼部62係語法取得部211被置換成語法取得部241這點,是和圖16的可逆解碼部62不同。
適應偏置濾波器81係具備:SAO旗標收取部221、合併旗標收取部223、偏置緩衝區224、偏置收取部225、濾波處理部226、及影像緩衝區227這點,是和圖16的適應偏置濾波器81共通。
又,適應偏置濾波器81係類型收取部222是被置換成由Y類型收取部261及Cm類型收取部262所成之類型收取部251這點,是和圖16的適應偏置濾波器81不同。
亦即,於圖16的例子中,作為適應偏置參數之1,係為在Y,Cb,Cr間被共通化的濾波器之類型資訊,被傳輸過來。相對於此,在圖19的例子中,則是Y的濾波器之類型資訊、及Cb與Cr間被共通化的濾波器之類型資訊,被傳輸過來。
語法取得部241,係和圖16的語法取得部211同樣地,取得SAO旗標(slice_sample_adaptive_offset_flag),供給至SAO旗標收取部221。語法取得部241,係和圖16的語法取得部211同樣地,取得合併旗標(sao_merge_left_flag或sao_merge_top_flag),供給至合併旗標收取部223。語法取得部241,係和圖16的語法取得部211同樣地,取得偏置,供給至偏置收取部225。
另一方面,語法取得部241,係和圖16的語法取得部211不同,將Y的濾波器之類型資訊、及Cb與Cr間被共通化的濾波器之類型資訊,加以取得,分別供給至Y類型收取部261及Cm類型收取部262。
Y類型收取部261,係將從語法取得部211所供給之Y的濾波器類型資訊,供給至濾波處理部226。Cm類型收取部262,係將從語法取得部211所供給之Cb與Cr間被共通化之Cm的濾波器類型資訊,供給至濾波處理部226。
[解碼側的適應偏置濾波處理]
接著,參照圖20的流程圖,說明圖19的適應偏置濾波器81所進行之適應偏置濾波處理。此外,該適應偏置濾波處理,係為圖4的步驟S59中的處理。
SAO旗標收取部221,係於步驟S261中,收取從語法取得部211所供給之適應偏置參數的SAO旗標(slice_sample_adaptive_offset_flag)。SAO旗標收取部221,係將所收取的SAO旗標,供給至濾波處理部226。
濾波處理部226,係於步驟S262中,令分量ID(cIdx)=0。濾波處理部226,係於步驟S263中,判定是否slice_sample_adaptive_offset_flag[0]=1。亦即,於步驟S263中係判定是否要適用Y的適應偏置濾波器。
於步驟S263中,若判定為slice_sample_adaptive_offset_flag[0]=1,亦即要適用Y的 適應偏置濾波器時,則處理係前進至步驟S264。
於步驟S264中,濾波處理部226,係將來自語法取得部241的Y的濾波器類型資訊(sao_type_Y),透過Y類型收取部261而加以收取。
另一方面,於步驟S263中,若判定為slice_sample_adaptive_offset_flag[0]=0,亦即不適用Y的適應偏置濾波器時,則處理係略過步驟S264,前進至步驟S265。
於步驟S265中,濾波處理部226係判定是否slice_sample_adaptive_offset_flag[1 or 2]=1。於步驟S265中,會判定是否要適用Cb或Cr的適應偏置濾波器。
於步驟S265中,若判定為slice_sample_adaptive_offset_flag[1 or 2]=1,亦即要適用Cb或Cr的適應偏置濾波器時,則處理係前進至步驟S266。
於步驟S266中,濾波處理部226,係將來自語法取得部241的Cm的濾波器類型資訊(sao_type_Cm),透過Cm類型收取部262而加以收取。
又,於步驟S265中,若判定為slice_sample_adaptive_offset_flag[1 and 2]=0,亦即不適用Cb及Cr的適應偏置濾波器時,則處理係略過步驟S266,前進至步驟S267。
此外,以下的S267至S273,係基本上是和圖17的步驟S215至S221相同的處理,因此其說明係重複故省略之。
如以上所述,亦可僅在Cb及Cr之色差的分量間,將濾波器之類型資訊做共通化,此情況下,亦可削減編碼量。
此外,於上記說明中,雖然說明了在亮度、色度的所有分量間把類型做共通化的例子,和僅在色差之分量間把類型做共通化的例子,但亦可具有這些雙方之模式,選擇性地使用之。
亦即,亦可設計成,將亮度、色度的所有分量間把類型做共通化的模式,視為全共通模式,將僅在色差之分量間把類型做共通化的模式視為色差共通模式,而具有2種類之模式。此時,亦可將用來識別在編碼側上曾使用過哪一模式的模式識別資訊,發送至解碼側。
然後,此情況下,於解碼側係收取所被傳輸過來的模式識別資訊,使用所收取到的模式識別資訊來設定模式,施行適應偏置濾波器。
如以上,是設計成將濾波器之類型資訊,在亮度訊號及色差訊號之各分量間做共通化然後發送。藉此,可削減編碼量,可提升編碼效率。
此外,於上記說明中,雖然針對色彩格式是4:2:0的情形加以說明,但本技術係亦可適用於4:2:2等4:4:4之其他色彩格式。
又,亦可設計成,例如,在使用choma_format_idc,而為4:2:0(choma_format_idc==1)的情況下,則在所有的分量間把SAO類型共通化,在 4:4:4(choma_format_idc==3)的情況下,不進行SAO類型之共通化,在4:2:2(choma_format_idc==2)的情況下,僅在Cb/Cr間把SAO類型共通化。亦即,亦可隨著色彩格式,來決定上述的全共通模式或色差共通模式。
又,於上記說明中,雖然說明了亮度及色差是Y,Cb,Cr之色彩空間的例子,但亮度及色差是Y,U,V等其他色彩空間時,亦可適用。
於以上所述中,作為編碼方式是以HEVC方式為基礎來採用。可是,本揭露係不限於此,亦可適用於,作為迴圈內濾波器是至少含有適應偏置濾波器的其他編碼方式/解碼方式。
此外,本揭露係可適用於,例如,將像是HEVC方式等這類藉由離散餘弦轉換等之正交轉換與運動補償所壓縮而成的影像資訊(位元串流),透過衛星播送、有線電視、網際網路、或行動電話機等之網路媒介而收訊時所使用的影像編碼裝置及影像解碼裝置。又,本揭露係可適用於,在光、磁碟、及快閃記憶體這類記憶媒體上進行處理之際所使用的影像編碼裝置及影像解碼裝置。
<5.第3實施形態>
[對多視點影像編碼.多視點影像解碼之適用]
上述一連串處理,係可適用於多視點影像編碼.多視點影像解碼。圖21係圖示多視點影像編碼方式之一例。
如圖21所示,多視點影像,係含有複數視點 之影像,該複數視點當中的所定1個視點之影像,係被指定成基礎視點的影像。基礎視點之影像以外的各視點之影像,係被當成非基礎視點之影像。
在進行如圖21所示的多視點影像編碼時,在各視點(同一視點)中,可設定適應偏置濾波器參數(上述的SAO旗標、濾波器之類型資訊、偏置、及模式識別資訊等)。又,在各視點(不同視點)中,亦可將其他視點上所被設定的適應偏置濾波器參數,加以共用。
此時,在基礎視點中所被設定的適應偏置濾波器參數,是被至少1個非基礎視點所使用。或者,例如,在非基礎視點(view_id=i)中所被設定的適應偏置濾波器參數,是在基礎視點及非基礎視點(view_id=j)之至少任意一方中被使用。
藉此,可削減編碼量。
[多視點影像編碼裝置]
圖22係上述進行多視點影像編碼的多視點影像編碼裝置的圖示。如圖22所示,多視點影像編碼裝置600係具有:編碼部601、編碼部602、及多工化部603。
編碼部601,係將基礎視點影像予以編碼,生成基礎視點影像編碼串流。編碼部602,係將非基礎視點影像予以編碼,生成非基礎視點影像編碼串流。多工化部603,係將編碼部601中所生成之基礎視點影像編碼串流,和編碼部602中所生成之非基礎視點影像編碼串流,進 行多工化,生成多視點影像編碼串流。
對該多視點影像編碼裝置600的編碼部601及編碼部602,可適用影像編碼裝置11(圖1)。此時,多視點影像編碼裝置600,係將編碼部601所設定之適應偏置濾波器參數、和編碼部602所設定之適應偏置濾波器參數,加以設定並傳輸。
此外,亦可將如上述而由編碼部601所設定的適應偏置濾波器參數,設定成讓編碼部601及編碼部602共用而被傳輸。反之,亦可將編碼部602所整體設定的適應偏置濾波器參數,設定成讓編碼部601及編碼部602共用而被傳輸。
[多視點影像解碼裝置]
圖23係上述進行多視點影像解碼的多視點影像解碼裝置的圖示。如圖23所示,多視點影像解碼裝置610係具有:逆多工化部611、解碼部612、及解碼部613。
逆多工化部611,係將基礎視點影像編碼串流與非基礎視點影像編碼串流所多工化而成的多視點影像編碼串流,進行逆多工化,抽出基礎視點影像編碼串流、和非基礎視點影像編碼串流。解碼部612,係將已被逆多工化部611所抽出的基礎視點影像編碼串流予以解碼,獲得基礎視點影像。解碼部613,係將已被逆多工化部611所抽出的非基礎視點影像編碼串流予以解碼,獲得非基礎視點影像。
對該多視點影像解碼裝置610的解碼部612及解碼部613,可適用影像解碼裝置51(圖3)。此時,多視點影像解碼裝置610,係使用編碼部601所設定、解碼部612所解碼之適應偏置濾波器參數、和編碼部602所設定、解碼部613所解碼之適應偏置濾波器參數,來進行處理。
此外,有時候會將如上述而由編碼部601(或編碼部602)所設定的適應偏置濾波器參數,設定成讓編碼部601及編碼部602共用而被傳輸。此情況下,在多視點影像解碼裝置610中,係使用由編碼部601(或編碼部602)所設定、由解碼部612(或解碼部613)所解碼之適應偏置濾波器參數,來進行處理。
<6.第4實施形態>
[階層影像編碼.階層影像解碼之適用]
上述一連串處理,係可適用於階層影像編碼.階層影像解碼。圖24係圖示多視點影像編碼方式之一例。
如圖24所示,階層影像,係含有複數階層(解析度)之影像,該複數解析度之中的所定1個階層的影像,係被指定成基礎圖層之影像。基礎圖層影像以外的各階層之影像,係被當成非基礎圖層之影像。
在進行如圖24所示的階層影像編碼(空間可調性)的情況下,於各圖層(同一圖層)中,可以設定適應偏置濾波器參數。又,在各圖層(不同圖層)中,亦可將其他 圖層上所被設定的適應偏置濾波器參數,加以共用。
此時,在基礎圖層中所被設定的適應偏置濾波器參數,是被至少1個非基礎圖層所使用。或者,例如,在非基礎圖層(layer_id=i)中所被設定的適應偏置濾波器參數,是在基礎圖層及非基礎圖層(layer_id=j)之至少任意一方中被使用。
藉此,可削減編碼量。
[階層影像編碼裝置]
圖25係上述進行階層影像編碼的階層影像編碼裝置的圖示。如圖25所示,階層影像編碼裝置620係具有:編碼部621、編碼部622、及多工化部623。
編碼部621,係將基礎圖層影像予以編碼,生成基礎圖層影像編碼串流。編碼部622,係將非基礎圖層影像予以編碼,生成非基礎圖層影像編碼串流。多工化部623,係將編碼部621中所生成之基礎圖層影像編碼串流,和編碼部622中所生成之非基礎圖層影像編碼串流,進行多工化,生成階層影像編碼串流。
對該階層影像編碼裝置620的編碼部621及編碼部622,可適用影像編碼裝置11(圖1)。此時,階層影像編碼裝置620,係將編碼部621所設定之適應偏置濾波器參數、和編碼部602所設定之適應偏置濾波器參數,加以設定並傳輸。
此外,亦可將如上述而由編碼部621所設定 的適應偏置濾波器參數,設定成讓編碼部621及編碼部622共用而被傳輸。反之,亦可將編碼部622所設定的適應偏置濾波器參數,設定成讓編碼部621及編碼部622共用而被傳輸。
[階層影像解碼裝置]
圖26係上述進行階層影像解碼的階層影像解碼裝置的圖示。如圖26所示,階層影像解碼裝置630係具有:逆多工化部631、解碼部632、及解碼部633。
逆多工化部631,係將基礎圖層影像編碼串流與非基礎圖層影像編碼串流所多工化而成的階層影像編碼串流,進行逆多工化,抽出基礎圖層影像編碼串流、和非基礎圖層影像編碼串流。解碼部632,係將已被逆多工化部631所抽出的基礎圖層影像編碼串流予以解碼,獲得基礎圖層影像。解碼部633,係將已被逆多工化部631所抽出的非基礎圖層影像編碼串流予以解碼,獲得非基礎圖層影像。
對該階層影像解碼裝置630的解碼部632及解碼部633,可適用影像解碼裝置51(圖3)。此時,階層影像解碼裝置630,係使用編碼部621所設定、解碼部632所解碼之適應偏置濾波器參數、和編碼部622所設定、解碼部633所解碼之適應偏置濾波器參數,來進行處理。
此外,有時候會將如上述而由編碼部621(或 編碼部622)所設定的適應偏置濾波器參數,設定成讓編碼部621及編碼部622共用而被傳輸。此情況下,在階層影像解碼裝置630中,係使用由編碼部621(或編碼部622)所設定、由解碼部632(或解碼部633)所解碼之適應偏置濾波器參數,來進行處理。
<7.第5實施形態>
[電腦的構成例]
上述一連串處理,係可藉由硬體來執行,也可藉由軟體來執行。在以軟體來執行一連串之處理時,構成該軟體的程式,係可安裝至電腦。此處,電腦係包含:被組裝在專用硬體中的電腦、或藉由安裝各種程式而可執行各種機能的例如通用之個人電腦等。
圖27係以程式來執行上述一連串處理的電腦的硬體之構成例的區塊圖。
於電腦800中,CPU(Central Processing Unit)801、ROM(Read Only Memory)802、RAM(Random Access Memory)803,係藉由匯流排804而被彼此連接。
在匯流排804上係還連接有輸出入介面805。輸出入介面805上係連接有:輸入部806、輸出部807、記憶部808、通訊部809、及驅動機810。
輸入部806,係由鍵盤、滑鼠、麥克風等所成。輸出部807係由顯示器、揚聲器等所成。記憶部808,係由硬碟或非揮發性記憶體等所成。通訊部809係由網路 介面等所成。驅動機810係驅動:磁碟、光碟、光磁碟、或半導體記憶體等之可移除式媒體811。
在如以上構成的電腦中,藉由CPU801而例如將記憶部808中所記憶之程式透過輸出入介面805及匯流排804,而載入至RAM803裡並加以執行,就可進行上述一連串處理。
電腦800(CPU801)所執行的程式,係可記錄在例如封裝媒體等之可移除式媒體811中而提供。又,程式係可透過區域網路、網際網路、數位衛星播送這類有線或無線的傳輸媒介而提供。
在電腦中,程式係藉由將可移除式媒體811裝著至驅動機810,就可透過輸出入介面805,安裝至記憶部808。又,程式係可透過有線或無線之傳輸媒體,以通訊部809接收之,安裝至記憶部808。除此以外,程式係可事前安裝在ROM802或記憶部808中。
此外,電腦所執行的程式,係可為依照本說明書所說明之順序而在時間序列上進行處理的程式,也可平行地、或呼叫進行時等必要之時序上進行處理的程式。
此外,在本說明書中,雖然記述記錄媒體中所記錄之程式的步驟,是按照記載的順序而在時間序列上順序進行之處理,但當然並不一定要是時間序列上的處理,亦包含平行或個別執行之處理。
又,於本說明書中,所謂的系統,係指由複數設備(裝置)所構成之裝置全體。
又,於以上說明中,亦可將以1個裝置(或處理部)做說明的構成加以分割,成為複數裝置(或處理部)而構成之。反之,亦可將以上說明中以複數裝置(或處理部)做說明的構成總結成1個裝置(或處理部)而構成之。又,對各裝置(或各處理部)之構成,當然亦可附加上述以外之構成。再者,若系統全體的構成或動作是實質上相同,則亦可使某個裝置(或處理部)之構成的一部分被包含在其他裝置(或其他處理部)之構成中。亦即,本技術係不限定於上述的實施形態,在不脫離本技術主旨的範圍內可做各種變更。
上述實施形態所述之影像編碼裝置及影像解碼裝置,係可應用於衛星播送、有線TV等之有線播送、網際網路上的配送、及藉由蜂巢基地台通訊而對終端支配送等的送訊機或是收訊機,在光碟、磁碟及快閃記憶體等之媒體中記錄影像的記錄裝置、或從這些記憶媒體中再生出影像的再生裝置等各式各樣的電子機器。以下說明4個應用例。
<8.應用例>
[第1應用例:電視受像機]
圖28係圖示了適用上述實施形態的電視裝置的概略構成之一例。電視裝置900係具備:天線901、選台器902、解多工器903、解碼器904、映像訊號處理部905、顯示部906、聲音訊號處理部907、揚聲器908、外部介 面部909、控制部910、使用者介面911、及匯流排912。
選台器902,係從透過天線901所接收之播送訊號中,抽出所望頻道之訊號,並將所抽出之訊號予以解調。然後,選台器902係將解調所得到之編碼位元串流,輸出至解多工器903。亦即,選台器902係將影像所被編碼而成的編碼串流予以接收,具有電視裝置900中的傳輸手段之功能。
解多工器903係從編碼位元串流中分離出視聽對象之節目的映像串流及聲音串流,將所分離之各串流,輸出至解碼器904。又,解多工器903,係從編碼位元串流中抽出EPG(Electronic Program Guide)等輔助性資料,將所抽出的資料,供給至控制部910。此外,解多工器903係當編碼位元串流是有被擾頻時,則亦可進行去擾頻。
解碼器904,係將從解多工器903所輸入的映像串流及聲音串流,予以解碼。然後,解碼器904係將解碼處理所生成之映像資料,輸出至映像訊號處理部905。又,解碼器904係將解碼處理所生成之聲音資料,輸出至聲音訊號處理部907。
映像訊號處理部905,係將從解碼器904所輸入之映像資料予以再生,在顯示部906上顯示出映像。又,映像訊號處理部905,係亦可將透過網路而供給之應用程式畫面,顯示在顯示部906。又,映像訊號處理部905,係亦可針對映像資料,隨應於設定,而進行例如雜訊去 除等之追加的處理。甚至,映像訊號處理部905係亦可生成例如選單、按鈕或游標等之GUI(Graphical User Interface)的影像,將所生成之影像重疊至輸出影像。
顯示部906,係受從映像訊號處理部905所供給之驅動訊號所驅動,在顯示裝置(例如液晶顯示器、電漿顯示器或OELD(Organic ElectroLuminescence Display)(有機EL顯示器)等)之映像面上,顯示出映像或影像。
聲音訊號處理部907,係針對從解碼器904所輸入的聲音資料,進行D/A轉換及增幅等之再生處理,使聲音從揚聲器908輸出。又,聲音訊號處理部907,係亦可針對聲音資料,進行雜訊去除等之追加的處理。
外部介面909,係為用來連接電視裝置900與外部機器或網路所需的介面。例如,透過外部介面909所接收之映像串流或聲音串流,係亦可被解碼器904所解碼。亦即,外部介面909係亦為將影像所被編碼而成的編碼串流予以接收,具有電視裝置900中的傳輸手段之功能。
控制部910係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著,被CPU所執行之程式、程式資料、EPG資料、及透過網路所取得之資料等。被記憶體所記憶的程式,係例如在電視裝置900啟動時被CPU讀取、執行。CPU係藉由執行程式,而隨應於從例如使用者介面911所輸入的操作訊號,來控制電視裝置900的動作。
使用者介面911,係和控制部910連接。使用 者介面911係具有例如,用來讓使用者操作電視裝置900所需的按鈕及開關、以及遙控訊號的收訊部等。使用者介面911,係偵測透過這些構成要素而由使用者所做之操作,生成操作訊號,將所生成之操作訊號,輸出至控制部910。
匯流排912,係將選台器902、解多工器903、解碼器904、映像訊號處理部905、聲音訊號處理部907、外部介面909及控制部910,彼此連接。
在如此構成的電視裝置900中,解碼器904係具有上述實施形態所述之影像解碼裝置的機能。藉此,在電視裝置900的影像之解碼之際,可削減編碼量。
[第2應用例:行動電話機]
圖29係圖示了適用上述實施形態的行動電話機的概略構成之一例。行動電話機920係具備:天線921、通訊部922、聲音編解碼器923、揚聲器924、麥克風925、攝影機部926、影像處理部927、多工分離部928、記錄再生部929、顯示部930、控制部931、操作部932、及匯流排933。
天線921係被連接至通訊部922。揚聲器924及麥克風925係被連接至聲音編解碼器923。操作部932,係被連接至控制部931。匯流排933係將通訊部922、聲音編解碼器923、攝影機部926、影像處理部927、多工分離部928、記錄再生部929、顯示部930、及控制部 931,彼此連接。
行動電話機920,係在包含語音通話模式、資料通訊模式、攝影模式及電視電話模式的各種動作模式下,進行聲音訊號之收送訊、電子郵件或影像資料之收送訊、影像之攝影、及資料之記錄等動作。
於語音通話模式中,由麥克風925所生成的類比聲音訊號,係被供給至聲音編解碼器923。聲音編解碼器923,係將類比聲音訊號轉換成聲音資料,將已被轉換之聲音資料,進行A/D轉換並壓縮。然後,聲音編解碼器923係將壓縮後的聲音資料,輸出至通訊部922。通訊部922,係將聲音資料進行編碼及調變,生成送訊訊號。然後,通訊部922係將已生成之送訊訊號,透過天線921而發送至基地台(未圖示)。又,通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換,取得收訊訊號。然後,通訊部922,係將收訊訊號進行解調及解碼而生成聲音資料,將已生成之聲音資料,輸出至聲音編解碼器923。聲音編解碼器923,係將聲音資料進行解壓縮及D/A轉換,生成類比聲音訊號。然後,聲音編解碼器923係將已生成之聲音訊號,供給至揚聲器924而輸出聲音。
又,在資料通訊模式下,例如,控制部931係隨應於使用者透過操作部932所做的操作,來生成構成電子郵件的文字資料。又,控制部931係將文字顯示在顯示部930。又,控制部931,係隨應於透過操作部932而從使用者下達的送訊指示而生成電子郵件資料,將已生成 之電子郵件資料,輸出至通訊部922。通訊部922,係將電子郵件資料進行編碼及調變,生成送訊訊號。然後,通訊部922係將已生成之送訊訊號,透過天線921而發送至基地台(未圖示)。又,通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換,取得收訊訊號。然後,通訊部922係將收訊訊號進行解調及解碼以復原出電子郵件資料,將已復原之電子郵件資料,輸出至控制部931。控制部931,係令顯示部930顯示出電子郵件的內容,同時,令電子郵件資料被記憶至記錄再生部929的記憶媒體。
記錄再生部929,係具有可任意讀寫的記憶媒體。例如,記憶媒體係可為RAM或快閃記憶體等之內建型的記憶媒體,亦可為硬碟、磁碟、光磁碟、光碟、USB(Universal Serial Bus)記憶體、或記憶卡等之外部裝著型的記憶媒體。
又,於攝影模式中,例如,攝影機部926係拍攝被攝體而生成影像資料,將已生成之影像資料,輸出至影像處理部927。影像處理部927,係將從攝影機部926所輸入之影像資料予以編碼,使編碼串流被記憶至記憶再生部929的記憶媒體中。
又,於電視電話模式中,例如,多工分離部928係將已被影像處理部927所編碼之映像串流、和從聲音編解碼器923所輸入之聲音串流,進行多工化,將已多工化之串流,輸出至通訊部922。通訊部922,係將串流 進行編碼及調變,生成送訊訊號。然後,通訊部922係將已生成之送訊訊號,透過天線921而發送至基地台(未圖示)。又,通訊部922係將透過天線921所接收之無線訊號進行增幅及頻率轉換,取得收訊訊號。這些送訊訊號及收訊訊號中係可含有編碼位元串流。然後,通訊部922係將收訊訊號進行解調及解碼以復原出串流,將已復原之串流,輸出至多工分離部928。多工分離部928係從所被輸入之串流中,分離出映像串流及聲音串流,將映像串流輸出至影像處理部927、將聲音串流輸出至聲音編解碼器923。影像處理部927,係將映像串流予以解碼,生成映像資料。映像資料係被供給至顯示部930,藉由顯示部930而顯示出一連串之影像。聲音編解碼器923,係將聲音串流進行解壓縮及D/A轉換,生成類比聲音訊號。然後,聲音編解碼器923係將已生成之聲音訊號,供給至揚聲器924而輸出聲音。
在如此構成的行動電話機920中,影像處理部927係具有上述實施形態所述之影像編碼裝置及影像解碼裝置的機能。藉此,在行動電話機920的影像之解碼之際,可削減編碼量。
[第3應用例:記錄再生裝置]
圖30係圖示了適用上述實施形態的記錄再生裝置的概略構成之一例。記錄再生裝置940係例如,將所接收之播送節目的聲音資料及映像資料進行編碼,而記錄至記錄 媒體。又,記錄再生裝置940係亦可,例如,將從其他裝置所取得之聲音資料及映像資料進行編碼,而記錄至記錄媒體。又,記錄再生裝置940係例如,隨應於使用者之指示,將記錄媒體中所記錄之資料,在監視器及揚聲器上進行再生。此時,記錄再生裝置940,係將聲音資料及映像資料予以解碼。
記錄再生裝置940係具備:選台器941、外部介面942、編碼器943、HDD(Hard Disk Drive)944、碟片驅動機945、選擇器946、解碼器947、OSD(On-Screen Display)948、控制部949、及使用者介面950。
選台器941,係從透過天線(未圖示)所接收之播送訊號中,抽出所望頻道之訊號,並將所抽出之訊號予以解調。然後,選台器941係將解調所得到之編碼位元串流,輸出至選擇器946。亦即,選台器941係具有記錄再生裝置940中的傳輸手段之功能。
外部介面942,係為用來連接記錄再生裝置940與外部機器或網路所需的介面。外部介面942係可為例如IEEE1394介面、網路介面、USB介面、或快閃記憶體介面等。例如,透過外部介面942所接收之映像資料及聲音資料,係被輸入至編碼器943。亦即,外部介面942係具有記錄再生裝置940中的傳輸手段之功能。
編碼器943,係當從外部介面942所輸入之映像資料及聲音資料是未被編碼的情況下,則將映像資料及聲音資料予以編碼。然後,編碼器943係將編碼位元串流 ,輸出至選擇器946。
HDD944,係將映像及聲音等之內容資料所被壓縮而成的編碼位元串流、各種程式及其他資料,記錄在內部的硬碟裡。又,HDD944係在映像及聲音之再生時,將這些資料從硬碟中讀出。
碟片驅動機945,係對所裝著之記錄媒體,進行資料記錄及讀出。被裝著在碟片驅動機945的記錄媒體,係可為例如DVD碟片(DVD-Video、DVD-RAM、DVD-R、DVD-RW、DVD+R、DVD+RW等)或Blu-ray(註冊商標)碟片等。
選擇器946,係在映像及聲音之記錄時,係選擇從選台器941或編碼器943所輸入的編碼位元串流,將已選擇之編碼位元串流,輸出至HDD944或碟片驅動機945。又,選擇器946,係在映像及聲音之再生時,將從HDD944或碟片驅動機945所輸入之編碼位元串流,輸出至解碼器947。
解碼器947,係將編碼位元串流予以解碼,生成映像資料及聲音資料。然後,解碼器947係將已生成之映像資料,輸出至OSD948。又,解碼器904係將已生成之聲音資料,輸出至外部的揚聲器。
OSD948,係將從解碼器947所輸入之映像資料予以再生,顯示出映像。又,OSD948係亦可對所顯示之映像,重疊上例如選單、按鈕或游標等之GUI的影像。
控制部949係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著CPU所執行的程式、及程式資料等。被記憶體所記憶的程式,係例如在記錄再生裝置940啟動時被CPU讀取、執行。CPU係藉由執行程式,而隨應於從例如使用者介面950所輸入的操作訊號,來控制記錄再生裝置940的動作。
使用者介面950,係和控制部949連接。使用者介面950係具有例如,用來讓使用者操作記錄再生裝置940所需的按鈕及開關、以及遙控訊號的收訊部等。使用者介面950,係偵測透過這些構成要素而由使用者所做之操作,生成操作訊號,將所生成之操作訊號,輸出至控制部949。
在如此構成的記錄再生裝置940中,編碼器943係具有上述實施形態所述之影像編碼裝置的機能。又,解碼器947係具有上述實施形態所述之影像解碼裝置的機能。藉此,在記錄再生裝置940的影像之解碼之際,可削減編碼量。
[第4應用例:攝像裝置]
圖31係圖示了適用上述實施形態的攝像裝置的概略構成之一例。攝像裝置960係拍攝被攝體而生成影像,將影像資料進行編碼,而記錄至記錄媒體。
攝像裝置960係具備:光學區塊961、攝像部962、訊號處理部963、影像處理部964、顯示部965、外 部介面966、記憶體967、媒體驅動機968、OSD969、控制部970、使用者介面971、及匯流排972。
光學區塊961係被連接至攝像部962。攝像部962係被連接至訊號處理部963。顯示部965係被連接至影像處理部964。使用者介面971係被連接至控制部970。匯流排972係將影像處理部964、外部介面966、記憶體967、媒體驅動機968、OSD969、及控制部970,彼此連接。
光學區塊961,係具有對焦透鏡及光圈機構等。光學區塊961,係使被攝體的光學像,成像在攝像部962的攝像面。攝像部962,係具有CCD(Charge Coupled Device)或CMOS(Complementary Metal Oxide Semiconductor)等之影像感測器,將成像在攝像面的光學像,藉由光電轉換而轉換成電氣訊號的影像訊號。然後,攝像部962係將影像訊號,輸出至訊號處理部963。
訊號處理部963,係對從攝像部962所輸入的影像訊號進行KNEE補正、γ補正、色彩補正等各種相機訊號處理。訊號處理部963,係將攝影機訊號處理後的影像資料,輸出至影像處理部964。
影像處理部964,係將從訊號處理部963所輸入的影像資料予以編碼,生成編碼資料。然後,影像處理部964,係將已生成之編碼資料,輸出至外部介面966或媒體驅動機968。又,影像處理部964,係將從外部介面966或媒體驅動機968所輸入之編碼資料予以解碼,生成 影像資料。然後,影像處理部964係將已生成之影像資料,輸出至顯示部965。又,影像處理部964,係亦可將從訊號處理部963所輸入的影像資料,輸出至顯示部965而顯示出影像。又,影像處理部964,係亦可將從OSD969所取得之顯示用資料,重疊至對顯示部965輸出的影像上。
OSD969係生成例如選單、按鈕或游標等之GUI的影像,將所生成之影像,輸出至影像處理部964。
外部介面966,係被構成為例如USB輸出入端子。外部介面966,係例如在影像的列印時,將攝像裝置960與印表機做連接。又,外部介面966上係因應需要而連接有驅動機。驅動機上係裝著有例如磁碟或光碟等之可移除式媒體,從可移除式媒體所讀出的程式,係可被安裝至攝像裝置960。甚至,外部介面966係還可被構成為連接LAN或網際網路等之網路的網路介面。亦即,外部介面966係具有攝像裝置960中的傳輸手段之功能。
被裝著至媒體驅動機968的記錄媒體,係可為例如磁碟、光磁碟、光碟、或半導體記憶體等之可任意讀寫之可移除式媒體。又,亦可被構成為,記錄媒體是對媒體驅動機968固定裝著,例如,內建型硬碟機或SSD(Solid State Drive)這類非可移除式的記憶部。
控制部970係具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體係記憶著CPU所執行的程式、及程式資料等。被記憶體所記憶的程式,係例如 在攝像裝置960啟動時被CPU讀取、執行。CPU係藉由執行程式,而隨應於從例如使用者介面971所輸入的操作訊號,來控制攝像裝置960的動作。
使用者介面971,係和控制部970連接。使用者介面971係具有例如,用來讓使用者操作攝像裝置960所需的按鈕及開關等。使用者介面971,係偵測透過這些構成要素而由使用者所做之操作,生成操作訊號,將所生成之操作訊號,輸出至控制部970。
在如此構成的攝像裝置960中,影像處理部964係具有上述實施形態所述之影像編碼裝置及影像解碼裝置的機能。藉此,在攝像裝置960的影像之解碼之際,可削減編碼量。
此外,在本說明書中係說明了,適應偏置濾波器的各參數等之各種資訊,係被多工化至編碼串流,從編碼列被傳輸至解碼側的例子。然而,這些資訊的傳輸手法係不限定於所述例子。例如,這些資訊係亦可不被多工化至編碼位元串流,而是以與編碼位元串流建立關連之個別資料的方式而被傳輸或記錄。此處,「建立關連」之用語係意味著,位元串流中所含之影像(切片或區塊等,亦可為影像之一部分)和該當影像所對應之資訊進行解碼時使其能夠彼此連結的意思。亦即,資訊係可有別於影像(或位元串流)而在另外的傳輸路上進行傳輸。又,資訊係亦可有別於影像(或位元串流)而被記錄在另外的記錄媒體(或是同一記錄媒體的其他記錄區域)。甚至,資訊和影像( 或位元串流),係亦可以例如複數畫格、1畫格、或畫格內之一部分等之任意單位,而彼此關連。
以上雖然一面參照添附圖面一面詳細說明了本揭露的理想實施形態,但本揭露並非限定於所述例子。只要是本揭露所屬技術領域中具有通常知識者,自然可於申請專利範圍中所記載之技術思想的範疇內,想到各種變更例或修正例,而這些當然也都屬於本揭露的技術範圍。
此外,本技術係亦可採取如下之構成。
(1)一種影像處理裝置,其係具備:解碼部,將編碼串流進行解碼處理,生成影像;和適應偏置濾波器部,係依照前記影像之分量間共通的適用偏置濾波器之類型,來對前記解碼部所生成之影像,施行適應偏置濾波器。
(2)如前記(1)所記載之影像處理裝置,其中,前記適應偏置濾波器之類型,係在前記影像之亮度成分與色差成分上為共通。
(3)如前記(1)所記載之影像處理裝置,其中,前記適應偏置濾波器之類型,係在前記影像之色差成分間為共通。
(4)如前記(3)所記載之影像處理裝置,其中,前記適應偏置濾波器之類型,係在第1色差成分與第2色差成分上為共通。
(5)如前記(4)所記載之影像處理裝置,其中,在對前記第1色差成分的適應偏置濾波器之類型是頻 帶偏置的情況下,對前記第2色差成分的適應偏置濾波器之類型係為頻帶偏置。
(6)如前記(4)所記載之影像處理裝置,其中,在對前記第1色差成分的適應偏置濾波器之類型是邊緣偏置的情況下,對前記第2色差成分的適應偏置濾波器之類型係為邊緣偏置。
(7)如前記(4)所記載之影像處理裝置,其中,在前記適應偏置濾波器之類型是邊緣偏置的情況下,邊緣偏置的圖案規則係在前記影像之色差成分間為共通。
(8)如前記(7)所記載之影像處理裝置,其中,在對前記第1色差成分的偏置濾波器之類型是邊緣偏置之1維圖案的情況下,對前記第2色差成分的偏置濾波器之類型係為邊緣偏置之1維圖案。
(9)如前記(7)所記載之影像處理裝置,其中,在對前記第1色差成分的偏置濾波器之類型是邊緣偏置之2維圖案的情況下,對前記第2色差成分的偏置濾波器之類型係為邊緣偏置之2維圖案。
(10)如前記(4)所記載之影像處理裝置,其中,在對前記第1色差成分的偏置濾波器之類型是不適用偏置之類型的情況下,對前記第2色差成分的偏置濾波器之類型係為不適用偏置之類型。
(11)如前記(1)乃至(10)之任一項所記載之影像處理裝置,其中,前記影像之色彩空間係為Y/Cb/Cr格式。
(12)如前記(1)乃至(11)之任一項所記載之影像處理裝置,其中,還具備:收取部,係將前記編碼串流、和表示前記影像之分量間共通之適應偏置濾波器之類型的類型資訊,加以收取;前記解碼部,係使用已被前記收取部所收取的類型資訊,來將已被前記收取部所收取的編碼串流,進行解碼處理。
(13)如前記(1)乃至(12)之任一項所記載之影像處理裝置,其中,還具備:去區塊濾波器部,係對前記解碼部所生成之影像,施行去區塊濾波器;前記適應偏置濾波器部,係對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
(14)如前記(1)乃至(13)之任一項所記載之影像處理裝置,其中,前記收取部,係將表示與Current編碼單位所相鄰之相鄰編碼單位相同之偏置的合併旗標,予以收取;前記適應偏置濾波器部,係使用已被前記收取部所收取到的合併旗標,來對已被前記解碼部所生成之影像,施行適應偏置濾波器。
(15)一種影像處理方法,係將編碼串流進行解碼處理,生成影像;依照前記影像之分量間共通的適應偏置濾波器之類型 ,來對已被生成之影像,施行適應偏置濾波器。
(16)一種影像處理裝置,其係具備:設定部,係將適應偏置濾波器之類型,在影像之分量間做共通地設定;和適應偏置濾波器部,係依照已被前記設定部所設定之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;和編碼部,係使用已被前記適應偏置濾波器部施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流。
(17)如前記(16)所記載之影像處理裝置,其中,前記設定部,係將前記適應偏置濾波器之類型,在前記影像之亮度成分與色差成分上做共通地設定。
(18)如前記(16)所記載之影像處理裝置,其中,前記設定部,係將前記適應偏置濾波器之類型,在前記影像之色差成分間做共通地設定。
(19)如前記(18)所記載之影像處理裝置,其中,前記設定部,係將前記適應偏置濾波器之類型,在第1色差成分與第2色差成分上做共通地設定。
(20)如前記(19)所記載之影像處理裝置,其中,前記設定部,係在將對前記第1色差成分的適應偏置濾波器之類型設定成頻帶偏置的情況下,將對前記第2色差成分的適應偏置濾波器之類型設定成頻帶偏置。
(21)如前記(19)所記載之影像處理裝置,其中, 前記設定部,係在將對前記第1色差成分的適應偏置濾波器之類型設定成邊緣偏置的情況下,將對前記第2色差成分的適應偏置濾波器之類型設定成邊緣偏置。
(22)如前記(19)所記載之影像處理裝置,其中,前記設定部,係在將前記適應偏置濾波器之類型設定成邊緣偏置的情況下,將邊緣偏置之圖案規則,在前記影像之色差成分間做共通地設定。
(23)如前記(22)所記載之影像處理裝置,其中,前記設定部,係在將對前記第1色差成分的適應偏置濾波器之類型設定成邊緣偏置之1維圖案的情況下,將對前記第2色差成分的適應偏置濾波器之類型設定成邊緣偏置之1維圖案。
(24)如前記(22)所記載之影像處理裝置,其中,前記設定部,係在將對前記第1色差成分的偏置濾波器之類型設定成邊緣偏置之2維圖案的情況下,將對前記第2色差成分的偏置濾波器之類型設定成邊緣偏置之2維圖案。
(25)如前記(19)所記載之影像處理裝置,其中,前記設定部,係在將對前記第1色差成分的偏置濾波器之類型設定成不適用偏置之類型的情況下,將對前記第2色差成分的偏置濾波器之類型設定成不適用偏置之類型。
(26)如前記(16)乃至(25)之任一項所記載之影像處理裝置,其中, 前記影像之色彩空間係為Y/Cb/Cr格式。
(27)如前記(16)乃至(26)之任一項所記載之影像處理裝置,其中,還具備:去區塊濾波器部,係對已被本地解碼處理之影像,施行去區塊濾波器;前記適應偏置濾波器部,係對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
(28)如前記(16)乃至(27)之任一項所記載之影像處理裝置,其中,前記設定部,係在與Current編碼單位所相鄰之相鄰編碼單位相同之偏置的情況下,將前記相鄰編碼單位之偏置,設定成為Current編碼單位。
(29)一種影像處理方法,係將適應偏置濾波器之類型,在影像之分量間做共通地設定;依照已被設定之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;使用已被施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流。
(30)一種影像處理裝置,其係具備:設定部,係將用來表示在影像之分量間共通之適應偏置濾波器之類型的類型資訊,予以設定;和適應偏置濾波器部,係依照在影像之分量間共通之適 應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;和編碼部,係使用已被前記適應偏置濾波器部施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流;和傳輸部,係將含有前記設定部所設定之類型資訊、和前記編碼部所生成之編碼串流,予以傳輸。
(31)如前記(30)所記載之影像處理裝置,其中,前記適應偏置濾波器之類型,係在前記影像之色差成分間為共通。
(32)如前記(31)所記載之影像處理裝置,其中,前記適應偏置濾波器之類型,係在第1色差成分與第2色差成分上為共通。
(33)如前記(30)乃至(32)之任一項所記載之影像處理裝置,其中,前記設定部,係每最大編碼單位地,設定前記類型資訊。
(34)如前記(30)乃至(33)之任一項所記載之影像處理裝置,其中,還具備:去區塊濾波器部,係對已被本地解碼處理之影像,施行去區塊濾波器;前記適應偏置濾波器部,係對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
(35)一種影像處理方法,係 將用來表示在影像之分量間共通之適應偏置濾波器之類型的類型資訊,予以設定;依照在影像之分量間共通之適應偏置濾波器之類型,來對前記影像進行編碼之際曾經有被本地解碼處理過之影像,施行適應偏置濾波器;使用已被施行過適應偏置濾波器的影像,而將前記影像進行編碼處理,生成編碼串流;將含有已被設定之類型資訊、和已被生成之編碼串流,予以傳輸。
26‧‧‧可逆編碼部
31‧‧‧去區塊濾波器
41‧‧‧適應偏置濾波器
42‧‧‧適應迴圈濾波器
111‧‧‧SAO旗標設定部
112‧‧‧類型設定部
113‧‧‧偏置設定部
114‧‧‧SAO控制資訊設定部
115‧‧‧偏置緩衝區
116‧‧‧濾波器處理部
117‧‧‧影像緩衝區

Claims (15)

  1. 一種影像處理裝置,其係具備:收取部,係將編碼串流、和在對影像之第1色差成分的適應偏置濾波器之類型與對前記影像之第2色差成分的適應偏置濾波器之類型間為共通的表示類型之1個參數也就是傳輸類型資訊,予以收取;和解碼部,將前記收取部所收取到的編碼串流,進行解碼處理,以生成影像;和適應偏置濾波器部,係依照已被前記收取部所收取到的前記傳輸類型資訊,來對已被前記解碼部所生成之影像,施行適應偏置濾波器。
  2. 如請求項1所記載之影像處理裝置,其中,表示對前記影像之第1色差成分的適應偏置濾波器之類型的第1類型資訊與表示對前記影像之第2色差成分的適應偏置濾波器之類型的第2類型資訊所被共通化而成的資訊,係被設定來作為前記傳輸類型資訊。
  3. 如請求項2所記載之影像處理裝置,其中,前記第1類型資訊與前記第2類型資訊所被共通化而成的資訊,係每最大編碼單位地被設定。
  4. 如請求項2所記載之影像處理裝置,其中,前記收取部,係將所被傳輸過來的前記第1類型資訊與前記第2類型資訊所被共通化而成的資訊,當作已被設定之前記傳輸類型資訊而予以接收。
  5. 如請求項4所記載之影像處理裝置,其中, 前記收取部,係將所被傳輸過來的前記第1類型資訊與前記第2類型資訊所被共通化而成的資訊,當作前記編碼串流的語法而予以接收。
  6. 如請求項1所記載之影像處理裝置,其中,表示前記第1類型資訊與前記第2類型資訊間係為共通且為頻帶偏置的資訊,係被設定來作為前記傳輸類型資訊。
  7. 如請求項1所記載之影像處理裝置,其中,表示前記第1類型資訊與前記第2類型資訊間係為共通且為邊緣偏置的資訊,係被設定來作為前記傳輸類型資訊。
  8. 如請求項7所記載之影像處理裝置,其中,表示前記第1類型資訊與前記第2類型資訊間係為共通且為邊緣偏置之圖案規則的資訊,係被設定來作為前記傳輸類型資訊。
  9. 如請求項8所記載之影像處理裝置,其中,表示前記第1類型資訊與前記第2類型資訊間係為共通且為邊緣偏置之1維圖案的資訊,係被設定來作為前記傳輸類型資訊。
  10. 如請求項8所記載之影像處理裝置,其中,表示前記第1類型資訊與前記第2類型資訊間係為共通且為邊緣偏置之2維圖案的資訊,係被設定來作為前記傳輸類型資訊。
  11. 如請求項1所記載之影像處理裝置,其中, 表示前記第1類型資訊與前記第2類型資訊間係為共通且為不適用偏置之類型的資訊,係被設定來作為前記傳輸類型資訊。
  12. 如請求項1所記載之影像處理裝置,其中,前記影像之色彩空間係為Y/Cb/Cr格式。
  13. 如請求項1所記載之影像處理裝置,其中,前記影像,係以具有階層構造的單位而被編碼。
  14. 如請求項1所記載之影像處理裝置,其中,還具備:去區塊濾波器部,係對前記解碼部所生成之影像,施行去區塊濾波器;前記適應偏置濾波器部,係對已被前記去區塊濾波器部施行過去區塊濾波器的影像,施行適應偏置濾波器。
  15. 一種影像處理方法,係將編碼串流、和在對影像之第1色差成分的適應偏置濾波器之類型與對前記影像之第2色差成分的適應偏置濾波器之類型間為共通的表示類型之1個參數也就是傳輸類型資訊,予以收取;將所收取到的編碼串流進行解碼處理,以生成影像;依照已被收取的前記傳輸類型資訊,來對已被生成之影像,施行適應偏置濾波器。
TW102121376A 2012-06-27 2013-06-17 Image processing device and method TWI595776B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012144217 2012-06-27

Publications (2)

Publication Number Publication Date
TW201414317A TW201414317A (zh) 2014-04-01
TWI595776B true TWI595776B (zh) 2017-08-11

Family

ID=49782981

Family Applications (2)

Application Number Title Priority Date Filing Date
TW102121376A TWI595776B (zh) 2012-06-27 2013-06-17 Image processing device and method
TW106117039A TWI618404B (zh) 2012-06-27 2013-06-17 Image processing device and method

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW106117039A TWI618404B (zh) 2012-06-27 2013-06-17 Image processing device and method

Country Status (15)

Country Link
US (2) US10425662B2 (zh)
EP (1) EP2869556A4 (zh)
JP (2) JPWO2014002821A1 (zh)
KR (1) KR20150034691A (zh)
CN (2) CN104380751A (zh)
AU (2) AU2013282051B2 (zh)
BR (1) BR112014032102A2 (zh)
CA (1) CA2875211A1 (zh)
MX (2) MX344940B (zh)
MY (1) MY166894A (zh)
PH (2) PH12014502828B1 (zh)
RU (2) RU2630385C2 (zh)
SG (2) SG10201504069YA (zh)
TW (2) TWI595776B (zh)
WO (2) WO2014002821A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9503732B2 (en) * 2013-04-10 2016-11-22 Arris Enterprises, Inc. Re-sampling with phase offset adjustment for luma and chroma to select filters in scalable video coding
MX360947B (es) 2014-01-03 2018-10-29 Arris Entpr Llc Sintaxis de extensión condicionalmente analizada para procesamiento de extensión hevc.
CA2943121C (en) 2014-03-18 2020-09-08 Arris Enterprises Llc Scalable video coding using reference and scaled reference layer offsets
WO2015168581A1 (en) 2014-05-01 2015-11-05 Arris Enterprises, Inc. Reference layer and scaled reference layer offsets for scalable video coding
CA2950749C (en) 2014-05-30 2019-02-19 Arris Enterprises Llc Reference layer offset parameters for inter-layer prediction in scalable video coding
US20150382016A1 (en) * 2014-06-27 2015-12-31 Mitsubishi Electric Research Laboratories, Inc. Method for Processing Multi-Component Video and Images
US9877024B2 (en) * 2015-03-06 2018-01-23 Qualcomm Incorporated Low complexity sample adaptive offset (SAO) coding
US9872026B2 (en) * 2015-06-12 2018-01-16 Intel Corporation Sample adaptive offset coding
CN106817583B (zh) * 2015-12-02 2020-01-10 福州瑞芯微电子股份有限公司 一种hevc sao计算方法和装置
CN109076256A (zh) * 2016-04-12 2018-12-21 索尼公司 发送设备、发送方法、接收设备和接收方法
US10924730B2 (en) 2016-11-07 2021-02-16 Lg Electronics Inc. Image decoding method and device in image coding system
WO2018174591A1 (ko) * 2017-03-22 2018-09-27 김기백 영상을 구성하는 화소값 범위를 이용한 영상 부호화/복호화 방법
GB2574425A (en) * 2018-06-05 2019-12-11 Canon Kk Video coding and decoding
WO2021045162A1 (ja) * 2019-09-06 2021-03-11 ソニー株式会社 画像処理装置及び画像処理方法
CN113489984A (zh) * 2021-05-25 2021-10-08 杭州博雅鸿图视频技术有限公司 Avs3的样点自适应补偿方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2299720A1 (en) * 2008-07-04 2011-03-23 Kabushiki Kaisha Toshiba Dynamic image encoding/decoding method and device
TWI355204B (en) * 2006-11-17 2011-12-21 Lg Electronics Inc Method and apparatus for decoding/encoding a vide

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5946043A (en) * 1997-12-31 1999-08-31 Microsoft Corporation Video coding using adaptive coding of block parameters for coded/uncoded blocks
EP1324297A2 (en) * 2001-12-13 2003-07-02 Matsushita Electric Industrial Co., Ltd. Displaying method, displaying apparatus, filtering unit, filtering process method, recording medium for storing filtering process programs, and method for processing image
BRPI0304545B1 (pt) * 2002-01-14 2018-07-03 Nokia Technologies Oy Método de codificação das imagens em uma seqüência de vídeo digital para fornecer os dados de vídeo codificados, codificador de vídeo, método de decodificação dos dados indicativos de uma sequência de vídeo digital, decodificador de vídeo, e, sistema de codificação de vídeo
JP4846571B2 (ja) * 2003-04-24 2011-12-28 ディスプレイテック,インコーポレイテッド 微小表示装置システム及び画像を表示する方法
US7593598B2 (en) * 2005-02-03 2009-09-22 Siemens Medical Solutions Usa, Inc. System and method for efficient filter design through weighted difference of Gaussian filters
KR100703776B1 (ko) * 2005-04-19 2007-04-06 삼성전자주식회사 향상된 코딩 효율을 갖는 컨텍스트 기반 적응적 산술 코딩및 디코딩 방법과 이를 위한 장치, 이를 포함하는 비디오코딩 및 디코딩 방법과 이를 위한 장치
US7656326B2 (en) * 2006-06-08 2010-02-02 Via Technologies, Inc. Decoding of context adaptive binary arithmetic codes in computational core of programmable graphics processing unit
KR101266168B1 (ko) * 2006-08-16 2013-05-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
JP4254867B2 (ja) 2007-01-31 2009-04-15 ソニー株式会社 情報処理装置および方法、プログラム、並びに記録媒体
KR101356733B1 (ko) * 2007-03-07 2014-02-05 삼성전자주식회사 컨텍스트 기반 적응적 이진 산술 부호화, 복호화 방법 및장치
WO2009088340A1 (en) * 2008-01-08 2009-07-16 Telefonaktiebolaget Lm Ericsson (Publ) Adaptive filtering
EP2237557A1 (en) * 2009-04-03 2010-10-06 Panasonic Corporation Coding for filter coefficients
JP5597968B2 (ja) * 2009-07-01 2014-10-01 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP5133950B2 (ja) * 2009-07-16 2013-01-30 日本電信電話株式会社 コンテクスト適応エントロピ符号化方法および装置,コンテクスト適応エントロピ復号方法および装置,並びにそれらのプログラム
KR101624649B1 (ko) * 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US9369712B2 (en) * 2010-01-14 2016-06-14 Dolby Laboratories Licensing Corporation Buffered adaptive filters
KR101529992B1 (ko) 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
EP2559238B1 (en) 2010-04-13 2015-06-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Adaptive image filtering method and apparatus
US8654860B2 (en) * 2010-11-01 2014-02-18 Mediatek Inc. Apparatus and method for high efficiency video coding using flexible slice structure
WO2012063878A1 (ja) * 2010-11-10 2012-05-18 ソニー株式会社 画像処理装置と画像処理方法
US9001883B2 (en) * 2011-02-16 2015-04-07 Mediatek Inc Method and apparatus for slice common information sharing
EP2882190B1 (en) * 2011-04-21 2018-11-14 HFI Innovation Inc. Method and apparatus for improved in-loop filtering
US20120294353A1 (en) * 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
WO2012175195A1 (en) * 2011-06-20 2012-12-27 Panasonic Corporation Simplified pipeline for filtering
JP5907367B2 (ja) 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2014197723A (ja) 2012-01-06 2014-10-16 ソニー株式会社 画像処理装置および方法
US9380302B2 (en) * 2012-02-27 2016-06-28 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
JP6242385B2 (ja) * 2012-05-29 2017-12-06 寰發股▲ふん▼有限公司HFI Innovation Inc. サンプルアダプティブオフセット情報(SampleAdaptiveOffsetInformation)の符号化の方法と装置
BR112013032418B1 (pt) * 2012-06-04 2023-04-11 Sun Patent Trust Método e aparelho de codificação de imagem em movimento, método e aparelho de decodificação de imagem em movimento, e aparelho de codificação e decodificação de imagem em movimento
AU2013275098B2 (en) * 2012-06-11 2016-05-05 Samsung Electronics Co., Ltd. Method and apparatus for encoding videos sharing SAO parameter according to color component
CN104769639A (zh) * 2012-11-07 2015-07-08 Vid拓展公司 用于对高动态范围视频进行去噪的时间滤波器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI355204B (en) * 2006-11-17 2011-12-21 Lg Electronics Inc Method and apparatus for decoding/encoding a vide
EP2299720A1 (en) * 2008-07-04 2011-03-23 Kabushiki Kaisha Toshiba Dynamic image encoding/decoding method and device

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Benjamin Bross, Woo-Jin Han, Jens-Rainer Ohm, Gary J. Sullivan, Thomas Wiegand, "High efficiency video coding (HEVC) text specification draft 6," JCTVC-H1003, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 8th Meeting: San José, CA, USA, 1–10 April 2 2012. *
Elena Alshina, Tammy Lee, JeongHoon Park, Guillaume LAROCHE, Christophe GISQUET, Patrice ONNO, "Non-CE1: On SAO Type sharing between color component," JCTVC-0590, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 9th Meeting: Geneva, CH, May 2 2012. *

Also Published As

Publication number Publication date
MX344940B (es) 2017-01-12
AU2017201322A1 (en) 2017-03-16
RU2017118046A3 (zh) 2020-06-16
MX2014015614A (es) 2015-04-09
SG11201408555UA (en) 2015-02-27
PH12017501462A1 (en) 2019-01-28
AU2013282051B2 (en) 2017-02-16
JPWO2014002822A1 (ja) 2016-05-30
JPWO2014002821A1 (ja) 2016-05-30
MX340766B (es) 2016-07-26
SG10201504069YA (en) 2015-06-29
PH12014502828A1 (en) 2015-02-02
TW201414317A (zh) 2014-04-01
BR112014032102A2 (pt) 2017-09-19
US20150110200A1 (en) 2015-04-23
KR20150034691A (ko) 2015-04-03
AU2017201322B2 (en) 2018-06-07
RU2630385C2 (ru) 2017-09-07
PH12014502828B1 (en) 2015-02-02
US20150288986A1 (en) 2015-10-08
WO2014002821A1 (ja) 2014-01-03
CN104380751A (zh) 2015-02-25
TWI618404B (zh) 2018-03-11
EP2869556A4 (en) 2015-11-18
RU2017118046A (ru) 2018-11-28
RU2731125C2 (ru) 2020-08-31
EP2869556A1 (en) 2015-05-06
US10425662B2 (en) 2019-09-24
WO2014002822A1 (ja) 2014-01-03
RU2014151757A (ru) 2016-07-10
CA2875211A1 (en) 2014-01-03
MY166894A (en) 2018-07-24
TW201733359A (zh) 2017-09-16
CN104380731A (zh) 2015-02-25
AU2013282051A1 (en) 2014-12-11
US10412418B2 (en) 2019-09-10

Similar Documents

Publication Publication Date Title
TWI595776B (zh) Image processing device and method
TWI592011B (zh) Image processing device and method
CN107018424B (zh) 图像处理装置和图像处理方法
US10448057B2 (en) Image processing device and method
JP5810700B2 (ja) 画像処理装置及び画像処理方法
TWI581623B (zh) Image processing apparatus and method, program, and recording medium
CN104170384A (zh) 图像解码设备、图像解码方法、图像编码设备和图像编码方法
CN104641646A (zh) 图像处理设备和图像处理方法
CN104854868B (zh) 图像处理设备和方法
JP2013074491A (ja) 画像処理装置および方法