TWI605708B - Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded - Google Patents

Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded Download PDF

Info

Publication number
TWI605708B
TWI605708B TW106103712A TW106103712A TWI605708B TW I605708 B TWI605708 B TW I605708B TW 106103712 A TW106103712 A TW 106103712A TW 106103712 A TW106103712 A TW 106103712A TW I605708 B TWI605708 B TW I605708B
Authority
TW
Taiwan
Prior art keywords
block
information
motion vector
prediction
unit
Prior art date
Application number
TW106103712A
Other languages
English (en)
Other versions
TW201722159A (zh
Inventor
Masayoshi Nishitani
Hiroya Nakamura
Hideki Takehara
Shigeru Fukushima
Original Assignee
Jvc Kenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2011146770A external-priority patent/JP5246303B2/ja
Priority claimed from JP2011146769A external-priority patent/JP5644701B2/ja
Application filed by Jvc Kenwood Corp filed Critical Jvc Kenwood Corp
Publication of TW201722159A publication Critical patent/TW201722159A/zh
Application granted granted Critical
Publication of TWI605708B publication Critical patent/TWI605708B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

影像解碼裝置、影像解碼方法及記錄有影像解碼程式之記錄媒體
本發明係有關於動態影像的編碼技術，尤其是有關於，將圖像分割成矩形區塊，在圖像間依區塊單位來進行運動推定、補償的影像編碼裝置、影像編碼方法、影像編碼程式、影像解碼裝置、影像解碼方法及影像解碼程式。
以MPEG(Moving Picture Coding Experts Group)為代表的將圖像分割成矩形區塊，在圖像間依區塊單位來進行運動推定、補償的動態影像編碼方式中，為了削減在各區塊中所生成的運動向量的編碼量，而會對運動向量進行預測處理。
在MPEG-2中，以巨集區塊單位而被偵測的運動向量，係被求取和前一個已被編碼之巨集區塊的運動向量的差分，藉由將該差分向量予以編碼，以削減編碼量。在MPEG-4 AVC/H.264中，是利用運動向量會與周圍的相鄰區塊之運動向量具有較強的相關這點，根據周圍的相鄰區塊來進行預測，將該差分向量予以編碼，藉此以削減編碼量。具體而言，係從處理對象的區塊的左、上及右上之相 鄰區塊之運動向量而算出中央值，藉由取出與該中央值之差分，來實現運動向量之預測。
在這些預測方法中，由於預測所需的運動向量是只有1個，因此若預測失準，則運動向量的差分會變大，導致發生編碼量增加之課題。又，雖然運動向量的編碼量是被削減，但其他運動資訊係隨著每一處理對象之區塊而被編碼。因此，即使具有與周圍相鄰區塊相同的運動資訊，仍會因為重複編碼的緣故，導致無法有效率地編碼之課題。
為了解決這些課題，ISO/IEC及ITU-T中的動態影像編碼之規格作業之中，有2個新的技術正在被討論。1個係為，關於運動向量之預測方法，針對已編碼之周圍的相鄰區塊之運動向量及已編碼之不同時間之另一圖像的同一位置之周邊區塊之運動向量，將其分別視為預測運動向量之候補來適用時，藉由其發生編碼量來進行評估的手法。
圖1(a)、(b)中係圖示了，作為預測運動向量之候補的相鄰區塊之一例。圖1(a)係同一圖像內的相鄰區塊之例子，圖1(b)係不同時間之另一圖像的同一位置之周邊區塊的例子。將這些區塊的運動向量視為預測運動向量之候補，選擇出會使處理對象區塊之運動向量與預測運動向量之候補的差分值的發生編碼量呈最小的預測運動向量。然後，將與該當預測運動向量的差分值，以及若有必要，還會將選擇了預測運動向量的相鄰區塊的相關之附加資訊，予以編碼、傳輸。
另1個係為，若處理對象區塊之運動資訊、和周圍的 已編碼之相鄰區塊之運動資訊是相同，則處理對象區塊係不使用在自身之運動資訊的編碼上，而是使用於相鄰區塊之運動資訊的編碼上。具體而言，係為藉由將指定具備所參照之運動資訊的相鄰區塊的附加資訊加以編碼，以削減運動資訊之編碼量的手法(例如參照專利文獻1)。此種手法係被稱為合併(merge)，是作為削減運動資訊編碼量之一手法而受到矚目。
[先前技術文獻] [專利文獻]
[專利文獻1]日本特開平10-276439號公報
在上述的運動向量之預測方法或合併手法中，使用已編碼之周圍的相鄰區塊及不同時間之另一圖像的同一位置之周邊區塊之運動向量、表示所參照之圖像的參照圖像號碼、參照清單等之編碼資訊。然而，由於各個技術中所參照之周圍的相鄰區塊的位置是不同的，因此對記錄有已編碼之編碼資訊的記憶體的存取次數會增加，具有如此困難面。
又，在一般的編碼過程中，為了選擇最佳的參照目標，是使用參照目標之相鄰區塊的編碼資訊來進行運動補償，以發生編碼量與編碼失真為指標來做判定。然而，若 所參照的周圍之相鄰區塊有所不同，則區塊數會增加，處理負荷會增加，具有如此困難面。再者，解碼時，讀出已解碼之編碼資訊的時序會受到限制，將已解碼之編碼資訊加以記憶的暫時記憶體會增加，具有如此困難面。
本發明係有鑑於此種狀況而研發，其目的在於提供一種，能夠一面抑制在運動資訊處理之際的負荷，一面提升運動資訊的編碼效率之技術。
為了解決上記課題，本發明的某個樣態的影像編碼裝置，係屬於以動態影像之各圖像被分割而成之區塊單位而使用運動向量來進行編碼的影像編碼裝置，其係具備：取得部(104)，係將編碼對象區塊的複數參照區塊候補之編碼資訊，加以取得；和第1模式偵測部(106)，係在第1影像間預測模式下，該模式係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊之模式，基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並賦予用來特定前記第1候補清單中所被登錄之參照區塊候補所需的索引，將前記複數參照區塊候補之索引予以輸出；和第2模式偵測部(103)，係在第2影像間預測模式下，該模式係為，使用以被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊為基礎的預測運動向量和前記編碼對象區塊之運動向量的差分運動向量之模式，基於第2所定順位而從前記複數參照區 塊候補，生成第2候補清單，並賦予用來特定前記第2候補清單中所被登錄之參照區塊候補所需的索引，將前記複數參照區塊候補之索引及前記差分運動向量予以輸出；和預測方法決定部(107)，係根據前記第1模式偵測部(106)及前記第2模式偵測部(103)之輸出結果，來決定每一前記編碼對象區塊的參照區塊與影像間預測模式；和編碼列生成部(109)，係將已被前記預測方法決定部(107)所決定之參照區塊之索引、用來表示已被前記預測方法決定部(107)所決定之影像間預測模式的預測模式資訊、第2影像間預測模式被決定時的參照區塊所對應之前記差分運動向量，予以編碼。前記第1模式偵測部(106)及前記第2模式偵測部(103)，係使用共通的複數區塊，來作為前記複數參照區塊候補。
亦可為，前記第1模式偵測部(106)，係對前記第1所定順位越高的參照區塊候補之索引，分配越少的碼字。
亦可為，用來在前記第1模式偵測部(106)所生成的前記第1候補清單中排列前記複數參照區塊候補所需的前記第1所定順位，和用來在前記第2模式偵測部(103)所生成的前記第2候補清單中排列前記複數參照區塊候補所需的前記第2所定順位，係為不同。
亦可為，前記第1模式偵測部(106)，係將前記複數參照區塊候補之數目加以限制，而生成前記複數參照區塊候補的前記第1候補清單。亦可為，前記第2模式偵測 部(103)，係將前記複數參照區塊候補之數目加以限制，而生成前記複數參照區塊候補的前記第2候補清單。
亦可為，前記複數參照區塊候補中係含有：對前記編碼對象區塊呈空間性相鄰之已被編碼之區塊、和與含有前記編碼對象區塊之圖像呈時間性相異之圖像中所含之區塊。亦可為，前記第1模式偵測部(106)及前記第2模式偵測部(103)，係於前記複數參照區塊候補中，前記時間性相異之圖像中所含之區塊的前記第1所定順位及第2所定順位的順位，係被設定成低於前記空間性相鄰之區塊的前記第1所定順位及第2所定順位的順位。
亦可為，前記第1模式偵測部(106)，係對前記空間性相鄰之已被編碼之複數區塊，基於前記第1所定順位來生成前記第1候補清單之際，對於將前記空間性相鄰之複數區塊予以排列至前記第1候補清單的候補數，設定所定之上限值，利用前記第1所定順位中從最上位起至前記所定之上限值之部分的順位為止的參照區塊，來生成前記第1候補清單。
亦可為，前記第2模式偵測部(103)，係在前記空間性相鄰之已被編碼之複數區塊當中，令被配置在前記編碼對象區塊之左側的區塊為左區塊群，令被配置在前記編碼對象區塊之上側的區塊為上區塊群，從前記區塊群之中，導出代表各個前記區塊群的候補，按照前記左區塊群之候補、前記上區塊群之候補的順序，設定前記第2所定順位，生成前記第2候補清單。
亦可為，前記第1模式偵測部(106)，係將前記第1候補清單中所排列的參照區塊候補之最大個數加以設定，基於前記參照區塊候補之最大個數，來生成前記第1候補清單。亦可為，前記編碼列生成部(109)，係將用來表示前記參照區塊候補之最大個數的資訊加以編碼而使其包含在編碼列中。
本發明的另一樣態，係為影像編碼方法。此方法係屬於以動態影像之各圖像被分割而成之區塊單位而使用運動向量來進行編碼的影像編碼方法，其係具備：第1步驟，係將編碼對象區塊的複數參照區塊候補之編碼資訊，加以取得；和第2步驟，係在第1影像間預測模式下，該模式係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊之模式，基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並賦予用來特定前記第1候補清單中所被登錄之參照區塊候補所需的索引，將前記複數參照區塊候補之索引予以輸出；和第3步驟，係在第2影像間預測模式下，該模式係為，使用以被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊為基礎的預測運動向量和前記編碼對象區塊之運動向量的差分運動向量之模式，基於第2所定順位而從前記複數參照區塊候補，生成第2候補清單，並賦予用來特定前記第2候補清單中所被登錄之參照區塊候補所需的索引，將前記複數參照區塊候補之索引及前記差分運動向量予以輸出；和第4步驟，係根據前記第2步驟及前記第3步驟所 輸出之輸出結果，來決定每一前記編碼對象區塊的參照區塊與影像間預測模式；和第5步驟，係將已被前記第4步驟所決定之參照區塊之索引、用來表示已被前記第4步驟所決定之影像間預測模式的預測模式資訊、第2影像間預測模式被決定時的參照區塊所對應之前記差分運動向量，予以編碼。前記第2步驟及前記第3步驟，係使用共通的複數區塊，來作為前記複數參照區塊候補。
本發明的某個樣態的影像解碼裝置，係屬於將編碼列予以解碼的影像解碼裝置，該編碼列係以動態影像之各圖像所分割而成之區塊單位、使用運動向量而被編碼者；其係具備：編碼列解碼部(202)，係從前記編碼列中，針對每一解碼對象區塊而解碼出表示影像間預測模式的預測模式資訊與參照區塊之索引、或是表示影像間預測模式的預測模式資訊與參照區塊之索引與參照區塊所對應之差分運動向量；和編碼資訊儲存部(210)，係用來儲存各區塊的編碼資訊；和取得部(205)，係將前記解碼對象區塊的複數參照區塊候補之編碼資訊，從前記編碼資訊儲存部(210)，加以取得；和第1模式輸出部(206)，係當已被前記編碼列解碼部(202)所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊的第1影像間預測模式時，則基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並根據已被前記編碼列解碼部(202)所解碼之參照區塊之索引，從前記第1候補清單 中特定出前記解碼對象區塊的參照區塊，將該編碼資訊予以輸出；和第2模式輸出部(204)，係當已被前記編碼列解碼部(202)所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊所對應之差分運動向量的第2影像間預測模式時，則基於第2所定順位而從前記複數參照區塊候補，生成第2候補清單，並根據已被前記編碼列解碼部所解碼之參照區塊之索引，從前記第2候補清單中特定出前記解碼對象區塊的參照區塊，從該當參照區塊之前記編碼資訊所具備之運動向量之資訊為基礎的預測運動向量、和已被前記編碼列解碼部(202)所解碼之差分運動向量，算出前記解碼對象區塊之運動向量並予以輸出；和運動補償預測部(207)，係根據從前記第1模式輸出部(206)或前記第2模式輸出部(204)所輸出的資訊，使用已被前記編碼列解碼部(202)所解碼之預測模式資訊所示的影像間預測模式，進行運動補償，以生成預測影像。前記第1模式輸出部(206)及前記第2模式輸出部(204)，係使用共通的複數區塊，來作為前記複數參照區塊候補。
亦可為，前記第1模式輸出部(206)，係對前記第1所定順位越高的參照區塊候補之索引，分配越少的碼字。
亦可為，用來在前記第1模式輸出部(206)所生成的前記第1候補清單中排列參照區塊候補所需的前記第1所定順位，和用來在前記第2模式輸出部(204)所生成 的前記第2候補清單中排列參照區塊候補所需的前記第2所定順位，係為不同。
亦可為，前記第1模式輸出部(206)，係將前記複數參照區塊候補之數目加以限制，而生成前記複數參照區塊候補的前記第1候補清單。亦可為，前記第2模式輸出部(204)，係將前記複數參照區塊候補之數目加以限制，而生成前記複數參照區塊候補的前記第2候補清單。
亦可為，前記複數參照區塊候補中係含有：對前記解碼對象區塊呈空間性相鄰之已被解碼之區塊、和與含有前記解碼對象區塊之圖像呈時間性相異之圖像中所含之區塊。亦可為，前記第1模式輸出部(206)及前記第2模式輸出部(204)，係於前記複數參照區塊候補中，前記時間性相異之圖像中所含之區塊的前記第1所定順位及第2所定順位的順位，係被設定成低於前記空間性相鄰之區塊的前記第1所定順位及第2所定順位的順位。
亦可為，前記第1模式輸出部(206)，係對前記空間性相鄰之已被解碼之複數區塊，基於前記第1所定順位來生成前記第1候補清單之際，對於將前記空間性相鄰之複數區塊予以排列至前記第1候補清單的候補數，設定所定之上限值，利用前記第1所定順位中從最上位起至前記所定之上限值之部分的順位為止的參照區塊，來生成前記第1候補清單。
亦可為，前記第2模式輸出部(204)，係在前記空間性相鄰之已被解碼之複數區塊當中，令被配置在前記解 碼對象區塊之左側的區塊為左區塊群，令被配置在前記解碼對象區塊之上側的區塊為上區塊群，從前記區塊群之中，導出代表各個前記區塊群的候補，按照前記左區塊群之候補、前記上區塊群之候補的順序，設定前記第2所定順位，生成前記第2候補清單。
亦可為，前記第1模式輸出部(206)，係基於在前記編碼列解碼部中從前記編碼列所解碼出來的前記第1候補清單中所排列的參照區塊候補之最大個數，來生成前記第1候補清單。
本發明的另一樣態，係為影像解碼方法。此方法係屬於將編碼列予以解碼的影像解碼方法，該編碼列係以動態影像之各圖像所分割而成之區塊單位、使用運動向量而被編碼者；其係具備：第1步驟，係從前記編碼列中，針對每一解碼對象區塊而解碼出表示影像間預測模式的預測模式資訊與參照區塊之索引、或是表示影像間預測模式的預測模式資訊與參照區塊之索引與參照區塊所對應之差分運動向量；和第2步驟，係將前記解碼對象區塊的複數參照區塊候補之編碼資訊，加以取得；和第3步驟，係當已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊的第1影像間預測模式時，則基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並根據已被前記第1步驟所解碼之參照區塊之索引，從前記第1候補清單中特定出前記解碼對象區塊的參 照區塊，將該編碼資訊予以輸出；和第4步驟，係當已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊所對應之差分運動向量的第2影像間預測模式時，則基於第2所定順位而從前記複數參照區塊候補，生成第2候補清單，並根據已被前記第1步驟所解碼之參照區塊之索引，從前記第2候補清單中特定出前記解碼對象區塊的參照區塊，從該當參照區塊之前記編碼資訊所具備之運動向量之資訊為基礎的預測運動向量、和已被前記第1步驟所解碼之差分運動向量，算出前記解碼對象區塊之運動向量並予以輸出；和第5步驟，係根據由前記第3步驟或前記第4步驟所輸出的資訊，使用已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，進行運動補償，以生成預測影像。前記第3步驟及前記第4步驟，係使用共通的複數區塊，來作為前記複數參照區塊候補。
此外，即使將以上構成要素之任意組合、本發明之表現，在方法、裝置、系統、記錄媒體、電腦程式等之間做轉換而成者，對本發明的樣態而言皆為有效。
若依據本發明，則可一面抑制運動資訊處理之際的負荷，一面提升運動資訊的編碼效率。
100‧‧‧動態影像編碼裝置
101‧‧‧影像記憶體
102‧‧‧運動向量偵測部
103‧‧‧運動向量預測部
104‧‧‧畫面間預測資訊偵測部
105‧‧‧運動補償預測部
106‧‧‧合併偵測部
107‧‧‧預測方法決定部
108‧‧‧開關
109‧‧‧第1編碼位元列生成部
110‧‧‧殘差訊號生成部
111‧‧‧正交轉換‧量化部
112‧‧‧逆量化‧逆正交轉換部
113‧‧‧解碼影像訊號重疊部
114‧‧‧編碼資訊儲存記憶體
115‧‧‧解碼影像記憶體
116‧‧‧第2編碼位元列生成部
117‧‧‧編碼位元列多工化部
200‧‧‧動態影像解碼裝置
201‧‧‧位元列分離部
202‧‧‧第1編碼位元列解碼部
203‧‧‧第2編碼位元列解碼部
204‧‧‧運動向量算出部
205‧‧‧畫面間預測資訊偵測部
206‧‧‧合併判定部
207‧‧‧運動補償預測部
208‧‧‧逆量化‧逆正交轉換部
209‧‧‧解碼影像訊號重疊部
210‧‧‧編碼資訊儲存記憶體
211‧‧‧解碼影像記憶體
212‧‧‧開關
301‧‧‧處理對象區塊位置偵測部
302‧‧‧相鄰區塊指定部
303‧‧‧暫時記憶體
310‧‧‧編碼資訊導出部
311‧‧‧參照候補清單作成部
312‧‧‧同一資訊偵測部
313‧‧‧輸出部
314‧‧‧參照候補清單儲存記憶體
315‧‧‧選擇部
318‧‧‧參照候補制限部
320‧‧‧編碼資訊導出部
321‧‧‧參照候補清單作成部
322‧‧‧同一資訊偵測部
323‧‧‧輸出部
324‧‧‧參照候補清單儲存記憶體
326‧‧‧差分運動向量算出部
328‧‧‧參照候補制限部
329‧‧‧參照候補控制部
[圖1]圖1(a)、(b)係處理對象之預測區塊、和同一圖像或不同時間之另一圖像中相鄰的預測區塊之一例的說明圖。
[圖2]本發明的實施例中的動態影像編碼裝置之構成的區塊圖。
[圖3]圖3(a)、(b)係本發明的實施例中的預測模式之分類定義的說明圖。
[圖4]本發明的實施例中的動態影像解碼裝置之構成的區塊圖。
[圖5]本發明的實施例中的編碼區塊之定義的說明圖。
[圖6]本發明的實施例中的參照相鄰區塊之選出方法的相關之預測區塊層級上的位元串流之語法模態的說明圖。
[圖7]圖7(a)~(d)係本發明的實施例中的預測區塊之形狀之種類的說明圖。
[圖8]本發明的實施例中的編碼資訊儲存記憶體中所被記錄的編碼資訊的保存形式的說明圖。
[圖9]圖9(a)、(b)係本發明的實施例中的相對於處理對象之預測區塊而作為參照目標之相鄰區塊之配置的說明圖。
[圖10]本發明的實施例中的畫面間預測資訊偵測部的詳細構成的區塊圖。
[圖11]實施例1中的合併偵測部的詳細構成的區塊 圖。
[圖12]實施例1的合併偵測部的編碼資訊導出部之動作的說明用流程圖。
[圖13]實施例1的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖14]圖14(a)~(c)係實施例1的編碼資訊導出部中，將處理對象之預測區塊的參照圖像號碼候補予以選出之動作的說明圖。
[圖15]實施例1的編碼資訊導出部中，從處理對象之預測區塊的參照圖像號碼候補，選出參照圖像號碼之選出模態的表列之圖。
[圖16]實施例1的編碼資訊導出部中，將不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊加以選出之動作的說明用流程圖。
[圖17]實施例1的編碼資訊導出部中，將不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊加以算出之詳細動作的說明用流程圖。
[圖18]將col圖像與其參照圖像之距離，換算成處理對象之圖像與其參照圖像之距離，將運動向量配合處理對象之圖像進行比例縮放的說明圖。
[圖19]實施例1的參照候補清單作成部中，將被編碼資訊導出部所選出的參照相鄰區塊之編碼資訊，登錄至參照候補清單之動作的說明用流程圖。
[圖20]於實施例1中，參照候補清單作成部所作成之 參照候補清單之一例的圖示。
[圖21]實施例1的同一資訊偵測部中，將已被登錄在參照候補清單中的同一之編碼資訊予以測出、刪除然後更新參照候補清單之動作的說明用流程圖。
[圖22]實施例1的合併判定部的詳細構成的區塊圖。
[圖23]實施例1的運動向量預測部之詳細構成的區塊圖。
[圖24]實施例1的運動向量預測部的編碼資訊導出部之動作的說明用流程圖。
[圖25]實施例1的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖26]實施例1的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用之另一手法的流程圖。
[圖27]運動向量的比例縮放的說明圖。
[圖28]於實施例1中，參照候補清單作成部所作成之參照候補清單之一例的圖示。
[圖29]實施例1的同一資訊偵測部中，將已被登錄在參照候補清單中的具備同一運動向量之編碼資訊予以測出、刪除然後更新參照候補清單之動作的說明用流程圖。
[圖30]實施例1的運動向量算出部之詳細構成的區塊圖。
[圖31]圖31(a)、(b)係實施例2中的相對於處理對象之預測區塊而作為參照目標之相鄰區塊之配置的說明圖。
[圖32]實施例2的合併偵測部的編碼資訊導出部之動作的說明用流程圖。
[圖33]實施例2的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖34]實施例2的編碼資訊導出部中，將處理對象之預測區塊的參照圖像號碼候補予以選出之動作的說明圖。
[圖35]實施例2的編碼資訊導出部中，從處理對象之預測區塊的參照圖像號碼候補，選出參照圖像號碼之選出模態的表列之圖。
[圖36]於實施例2中，合併偵測部的參照候補清單作成部所作成之參照候補清單之一例的圖示。
[圖37]實施例2的運動向量預測部的編碼資訊導出部之動作的說明用流程圖。
[圖38]實施例2的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖39]實施例2的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用之另一手法的流程圖。
[圖40]於實施例2中，運動偵測部的參照候補清單作成部所作成之參照候補清單之一例的圖示。
[圖41]於實施例3中，在合併模式與運動偵測模式下以不同選出手法所作成之參照候補清單之一例的圖示。
[圖42]實施例4的合併偵測部的編碼資訊導出部之動作的說明用流程圖。
[圖43]實施例4的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖44]實施例4的運動向量預測部的編碼資訊導出部之動作的說明用流程圖。
[圖45]實施例4的編碼資訊導出部中，將同一圖像上的周圍之相鄰區塊予以選出之動作的說明用之手法的流程圖。
[圖46]實施例5的參照候補清單作成部中，將被編碼資訊導出部所選出的參照相鄰區塊之編碼資訊，登錄至參照候補清單之動作的說明用流程圖。
[圖47]於實施例6中，參照候補清單作成部所作成之參照候補清單之一例的圖示。
[圖48]實施例7的合併偵測部的詳細構成的區塊圖。
[圖49]實施例7的同一資訊偵測部中，將已被登錄在參照候補清單中的編碼資訊予以限制然後更新參照候補清單之動作的說明用流程圖。
[圖50]實施例7的合併偵測部的詳細構成的區塊圖。
[圖51]實施例7的參照候補清單作成部中，將已被登錄在參照候補清單中的編碼資訊予以限制然後更新參照候補清單之動作的說明用流程圖。
[圖52]實施例7的運動向量預測部之詳細構成的區塊圖。
[圖53]實施例7的編碼資訊導出部中，將周圍之相鄰區塊予以選出之動作的說明用流程圖。
[圖54]實施例7的編碼資訊導出部的運動向量之算出的詳細動作的說明用流程圖。
[圖55]實施例7的參照候補清單作成部中，將被編碼資訊導出部所選出的參照相鄰區塊之編碼資訊，登錄至參照候補清單之動作的說明用流程圖。
[圖56]實施例7的同一資訊偵測部中，將已被登錄在參照候補清單中的編碼資訊予以限制然後更新參照候補清單之動作的說明用流程圖。
[圖57]實施例7的運動向量預測部之詳細構成的區塊圖。
[圖58]實施例8的參照候補清單作成部中，將被編碼資訊導出部所選出的參照相鄰區塊之編碼資訊，登錄至參照候補清單之動作的說明用流程圖。
[圖59]於實施例8中，在合併模式與運動偵測模式下所作成之參照候補清單之一例的圖示。
[圖60]實施例9的參照候補清單作成部中，將被編碼資訊導出部所選出的參照相鄰區塊之編碼資訊，登錄至參照候補清單之動作的說明用流程圖。
[圖61]實施例9的參照候補清單作成部中，轉換表之作成．更新動作的說明用流程圖。
[圖62]實施例9的參照候補清單作成部中，參照候補清單之索引與轉換表之索引的對應關係之一例的圖示。
[圖63]於實施例9中，參照候補清單作成部所作成之參照候補清單之一例的圖示。
[圖64]實施例12的運動向量預測部之詳細構成的區塊圖。
[圖65]實施例12的參照候補控制部中，將已被登錄在參照候補清單中的編碼資訊實施抽換之動作的說明用流程圖。
說明實施本發明的理想之動態影像編碼裝置及動態影像解碼裝置。圖2係本發明的實施例所述之動態影像編碼裝置100之構成的區塊圖。動態影像編碼裝置100，係具備：影像記憶體101、運動向量偵測部102、運動向量預測部103、畫面間預測資訊偵測部104、運動補償預測部105、合併偵測部106、預測方法決定部107、開關108、第1編碼位元列生成部109、殘差訊號生成部110、正交轉換‧量化部111、逆量化‧逆正交轉換部112、解碼影像訊號重疊部113、編碼資訊儲存記憶體114、解碼影像記憶體115、第2編碼位元列生成部116及編碼位元列多工化部117。此外，連結各區塊間的粗實線之箭頭係表示圖像之影像訊號的流向，細實線之箭頭係表示控制編碼的參數訊號的流向。
影像記憶體101係將按照攝影/顯示時間順序所供給的編碼對象之影像訊號，予以暫時儲存。影像記憶體101，係將所被儲存的編碼對象之影像訊號，以所定之像素區塊單位，供給至運動向量偵測部102、預測方法決定 部107及殘差訊號生成部110。此時，按照攝影/顯示時間順序而被儲存的影像，係被排序成編碼順序，以像素區塊單位，從影像記憶體101輸出。
運動向量偵測部102，係藉由在從影像記憶體101所供給之影像訊號與從解碼影像記憶體115所供給之解碼影像(參照圖像)間進行區塊比對等，將各預測區塊尺寸、每一預測模式的運動向量，以預測區塊單位而加以測出，將所測出的運動向量，供給至運動補償預測部105、運動向量預測部103及預測方法決定部107。此處，預測模式係如圖3(a)所示般地大致分類，圖3(a)、(b)中的單向預測或雙預測模式的運動向量，會被偵測。預測模式係以後述的語法之定義來說明。
運動向量預測部103，係當預測模式是運動偵測模式時，將畫面間預測資訊偵測部104所輸出的編碼資訊的運動向量，當作預測運動向量，根據運動向量偵測部102所測出之運動向量與該當預測運動向量，算出差分運動向量，將所算出的差分運動向量，供給至預測方法決定部107。然後，將用來特定已被選擇之預測運動向量的索引，供給至預測方法決定部107。運動向量預測部103的詳細構成與動作，將於後述。
畫面間預測資訊偵測部104，係將處理對象之預測區塊是在所參照之同一圖像上且相鄰於處理對象之預測區塊之周邊的已編碼預測區塊、或在不同時間之另一圖像之中與處理對象之預測區塊同一位置之區塊周邊所相鄰的預測 區塊之編碼資訊，從編碼資訊儲存記憶體114中加以取得。在編碼資訊儲存記憶體114中所記憶的已被編碼之周邊之相鄰區塊、或不同時間之另一圖像之相鄰區塊的編碼資訊當中，從處理對象之預測區塊之位置資訊，偵測出複數參照目標候補之相鄰區塊的編碼資訊，將被選擇來作為參照目標的相鄰區塊的編碼資訊和用來特定該相鄰區塊的索引，以被輸入至開關108的受動態影像編碼裝置100所控制之預測模式來做切換而供給。畫面間預測資訊偵測部104的詳細構成與動作，將於後述。
運動補償預測部105，係使用已被運動向量偵測部102所測出之運動向量或已被畫面間預測資訊偵測部104所測出的被選擇來作為參照目標之相鄰區塊的編碼資訊，從參照圖像藉由運動補償預測而生成預測影像訊號，將該當預測影像訊號供給至預測方法決定部107。此外，在雙預測時，係對主要使用於前方向預測的L0預測、主要使用於後方向預測的L1預測的2個運動補償預測影像訊號，適應性地乘算權重係數而加以重疊，生成最終的預測影像訊號。該加權係數，係以切片單位或預測區塊單位而被設定。
合併偵測部106，係當預測模式是合併模式時，為了將畫面間預測資訊偵測部104所取得的處理對象之預測區塊所參照的相鄰區塊(以下稱作參照相鄰區塊)的編碼資訊，當作處理對象之預測區塊之編碼資訊而加以利用，而將相鄰區塊排序成優先參照之順位而登錄至參照候補清 單。合併偵測部106，係將已被登錄在該當參照候補清單中的編碼資訊，當作處理對象之預測區塊之編碼資訊而予以測出，將已被測出的編碼資訊的運動向量、參照圖像號碼、參照清單等，供給至運動補償預測部105。然後，合併偵測部106係將用來特定具備所被測出之編碼資訊的參照相鄰區塊所需的索引，供給至預測方法決定部107。合併偵測部106的詳細構成與動作，將於後述。
預測方法決定部107，係藉由評估參照相鄰區塊的編碼資訊、用來特定相鄰區塊的索引的編碼量、運動補償預測訊號與影像訊號之間的失真量等，而從複數預測方法之中，決定包含最佳之預測區塊尺寸、分割模式(PartMode)、預測模式(PredMode)等的預測方法。預測方法決定部107，係將含有表示所決定之預測方法的資訊，及隨應於所決定之預測方法之差分運動向量等的編碼資訊，供給至第1編碼位元列生成部109。此外，預測區塊尺寸、分割模式及預測模式之細節，將於後述。
開關108，係隨應於受動態影像編碼裝置100所控制的預測模式，將已被畫面間預測資訊偵測部104所測出的被選擇來作為參照目標之相鄰區塊的編碼資訊，在運動向量預測部103或合併偵測部106之間做切換供給。然後，開關108係將含有表示所決定之預測方法的資訊，及含有相應於所決定之預測方法的運動向量等的編碼資訊，儲存至編碼資訊儲存記憶體114，將相應於所決定之預測模式的運動補償預測影像訊號，供給至殘差訊號生成部110及 解碼影像訊號重疊部113。
殘差訊號生成部110，係將所編碼之影像訊號與預測訊號進行兩者的減算而生成殘差訊號，供給至正交轉換‧量化部111。正交轉換．量化部111，係對殘差訊號而進行正交轉換及量化而生成已被正交轉換、量化過的殘差訊號，供給至第2編碼位元列生成部116與逆量化‧逆正交轉換部112。
第1編碼位元列生成部109，係將已被預測方法決定部107所決定之預測方法資訊及相應於該當預測方法資訊的差分運動向量之相關資訊，依照規定之語法規則而予以編碼而生成第1編碼位元列，供給至編碼位元列多工化部117。
此外，可因應需要，而將從預測方法決定部107所供給之加權預測的加權參數、交錯式編碼之際的畫格/圖場預測識別用旗標、量化的量化參數、表示是否將殘差訊號進行編碼的旗標、識別正交轉換之手法的旗標、識別殘差訊號之編碼順序的旗標、去區塊濾波器等之後段濾波器的資訊等的，編碼資訊之預測值與實際使用之值的差分，供給至第1編碼位元列生成部109而加以編碼。甚至，可將識別殘差訊號之編碼順序的旗標等已被預測之編碼資訊，儲存在編碼資訊儲存記憶體114中。
第2編碼位元列生成部116，係將已被正交轉換及量化過的殘差訊號，依照規定之語法規則來進行熵編碼以生成第2編碼位元列，供給至編碼位元列多工化部117。編 碼位元列多工化部117，係將第1編碼位元列與第2編碼位元列，因照規定之語法規則而進行多工化，輸出位元串流。
逆量化‧逆正交轉換部112，係將從正交轉換‧量化部111所供給之已被正交轉換、量化過的殘差訊號，進行逆量化及逆正交轉換而算出殘差訊號，供給至解碼影像訊號重疊部113。解碼影像訊號重疊部113，係將相應於預測方法決定部107所決定之預測訊號、和被逆量化‧逆正交轉換部112進行逆量化及逆正交轉換後的殘差訊號加以重疊而生成解碼影像，儲存在解碼影像記憶體115中。此外，也可對解碼影像實施用來減少編碼所致區塊失真等失真的濾波處理，然後儲存在解碼影像記憶體115中。此情況下，因應需要而將用來識別去區塊濾波器等之後段濾波器之資訊的旗標等所被預測而成的編碼資訊，儲存至編碼資訊儲存記憶體114。
圖4係圖2之動態影像編碼裝置100所對應之實施例中的動態影像解碼裝置200之構成的區塊圖。該當影像解碼裝置200，係具備：位元列分離部201、第1編碼位元列解碼部202、第2編碼位元列解碼部203、運動向量算出部204、畫面間預測資訊偵測部205、合併判定部206、運動補償預測部207、逆量化‧逆正交轉換部208、解碼影像訊號重疊部209、編碼資訊儲存記憶體210、解碼影像記憶體211及開關212。此外，和圖2的動態影像編碼裝置100同樣地，連結各區塊間的粗實線之箭頭係表 示圖像之影像訊號的流向，細實線之箭頭係表示控制編碼的參數訊號的流向。
圖4的動態影像解碼裝置200的解碼處理，係為對應於圖2之動態影像編碼裝置100之內部所設之解碼處理，因此圖4的補償預測部207、逆量化‧逆正交轉換部208、解碼影像訊號重疊部209、編碼資訊儲存記憶體210及解碼影像記憶體211之各構成，係具有和圖2的動態影像編碼裝置100的運動補償預測部105、逆量化‧逆正交轉換部112、解碼影像訊號重疊部113、編碼資訊儲存記憶體114及解碼影像記憶體115之各構成分別對應的機能。
被供給至位元列分離部201的位元串流係依照規定之語法規則而被分離，所分離出來的編碼位元列係被供給至第1編碼位元列解碼部202及第2編碼位元列解碼部203。
第1編碼位元列解碼部202係將所被供給之編碼位元列予以解碼而輸出預測模式、運動向量等之相關的編碼資訊，將編碼資訊供給至運動向量算出部204或畫面間預測資訊偵測部205、運動補償預測部207，並且儲存至編碼資訊儲存記憶體210。
第2編碼位元列解碼部203係將所被供給之編碼位元列予以解碼而算出已被正交轉換‧量化之殘差訊號，將已被正交轉換‧量化之殘差訊號供給至逆量化‧逆正交轉換部208。
運動向量算出部204，係當預測模式是運動偵測模式時，將畫面間預測資訊偵測部205所判定、輸出的編碼資訊的運動向量，當作預測運動向量，根據已被第1編碼位元列解碼部202所解碼之差分向量與該當預測運動向量而算出運動向量，將該當運動向量供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
畫面間預測資訊偵測部205，係將處理對象之預測區塊是在所參照之同一圖像上且相鄰於處理對象之預測區塊之周邊的已解碼預測區塊、或在不同時間之另一圖像之中與處理對象之預測區塊同一位置之區塊周邊所相鄰的預測區塊之編碼資訊，從編碼資訊儲存記憶體210中加以取得。在編碼資訊儲存記憶體210中所記憶的已被解碼之周邊之相鄰區塊、或不同時間之另一圖像之相鄰區塊的編碼資訊當中，從處理對象之預測區塊之位置資訊，偵測出複數參照目標候補之相鄰區塊的編碼資訊，將被選擇來作為參照目標的相鄰區塊的編碼資訊和用來特定該相鄰區塊的索引，以被輸入至開關212的已被動態影像解碼裝置200所解碼的預測模式來做切換而供給。畫面間預測資訊偵測部205的詳細構成與動作，將於後述。
合併判定部206，係當預測模式是合併模式時，為了將畫面間預測資訊偵測部205所取得的處理對象之預測區塊的參照相鄰區塊的編碼資訊，當作處理對象之預測區塊之編碼資訊來利用，而將相鄰區塊排序成優先參照之順位而登錄至參照候補清單。合併判定部206，係從該當參照 候補清單之中，偵測出用來將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的相鄰區塊，將該編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。合併判定部206的詳細構成與動作，將於後述。
運動補償預測部207，係使用已被運動向量算出部204所算出之運動向量或已被合併判定部206所測出的被選擇來作為參照目標之相鄰區塊的編碼資訊，從參照圖像藉由運動補償預測而生成預測影像訊號，將預測影像訊號供給至解碼影像訊號重疊部209。此外，在雙預測的情況下，係對L0預測、L1預測的2個運動補償預測影像訊號，適應性地乘算權重係數，生成最終的預測影像訊號。
逆量化‧逆正交轉換部208，係對第1編碼位元列解碼部202所解碼之已被正交轉換‧量化之殘差訊號，進行逆正交轉換及逆量化，獲得已被逆正交轉換．逆量化之殘差訊號。
解碼影像訊號重疊部209，係將已被運動補償預測部207進行運動補償預測的預測影像訊號、和已被逆量化‧逆正交轉換部208進行逆正交轉換．逆量化之殘差訊號加以重疊，以將解碼影像訊號予以解碼，儲存至解碼影像記憶體211。在儲存至解碼影像記憶體211之際，係也可對解碼影像實施用來減少編碼所致區塊失真等的濾波處理，然後儲存在解碼影像記憶體211中。
開關212，係隨應於已被第1編碼位元列解碼部202 所解碼之預測模式，將已被畫面間預測資訊偵測部205所測出的被選擇來作為參照目標之相鄰區塊的編碼資訊，在運動向量算出部204或合併判定部206之間做切換供給。
在以下的實施例中係說明，將動態影像編碼裝置100的畫面間預測資訊偵測部104及動態影像解碼裝置200的畫面間預測資訊偵測部205之中所共通實施的運動向量之預測方法與合併手法中所參照的周邊之相鄰區塊的配置加以統合，從其中選擇出參照相鄰區塊的方法的細節。
在以本發明中的實施例來說明參照相鄰區塊之選出方法之前，先定義本實施例中所使用的用語。
(本發明中所使用之用語的定義) ‧編碼區塊之定義
在本實施例中，如圖5所示，將畫面內均等分割成同一尺寸的正方之矩形區塊。此區塊稱為編碼區塊，是進行編碼及解碼之際的處理的基本。編碼區塊係會隨著畫面內的紋理，為了使編碼處理最佳化，而可將編碼區塊內做4分割，變成區塊尺寸更小的編碼區塊。圖5中所示的將畫面內以均等尺寸做分割的編碼區塊，稱作最大編碼區塊，在其內部因應編碼條件而做4分割而成者，總稱為編碼區塊。無法將編碼區塊繼續4分割的最小尺寸之編碼區塊，稱作最小編碼區塊。
‧預測區塊之定義
在畫面內分割成區塊而進行運動補償時，將運動補償的區塊尺寸設成較小的一方，是可進行更細緻之預測，因此從數種區塊尺寸之中選擇出最佳者，進行運動補償，會採取此種機制。進行該運動補償之區塊，稱作預測區塊。預測區塊係在將編碼區塊之內部做分割時會被使用，隨應於運動補償而可區分成：不將編碼區塊內部做分割而視為1個區塊時係為最大者、在水平或垂直方向做2分割而成者、藉由水平與垂直之均等分割而做4分割而成者。隨應於分割方法，定義有對應於分割類型的分割模式(PartMode)，示於圖6。圖7(a)~(d)中的矩形內部之號碼，係表示已被分割的預測區塊之號碼。在最小編碼區塊內部裡，為了管理預測區塊，把從0開始的號碼，對預測區塊，從上而下、從左而右地依序進行分配。
如以上所述，將編碼區塊進行運動偵測、補償時，作為運動偵測．補償之單位，係將編碼區塊本身之尺寸、將編碼區塊做2分割或4分割而成的各個小區塊、再4分割而成的各個小區塊，視為編碼區塊而同樣地進行分割，藉此，成為可一路遞迴獲得預測區塊之最小尺寸之尺寸的區塊。在以下的說明中，若沒有特別聲明，則進行運動偵測．補償的單位，係無關於形狀、尺寸，皆為“預測區塊”。
(參照清單)
接著說明參照清單。在編碼及解碼之際，係根據每一 參照清單LX的參照索引，來指定參照圖像號碼而參照。會準備L0與L1這2者，X中係代入0或1。將參照清單L0中所被登錄之參照圖像予以參照之畫面間預測，稱作L0預測(Pred_L0)，將參照清單L1中所被登錄之參照圖像予以參照之運動補償預測，稱作L1預測(Pred_L1)。主要來說，L0預測係被使用於前方預測，L1預測係被使用於後方預測，在P切片上係只使用L0預測，在B切片上係可使用L0預測及L1預測、和將L0預測與L1預測進行平均或加算加權之雙預測。以後的處理中，對輸出附加有字尾LX之值，係為按照L0預測、L1預測別地進行處理為前提。
(編碼資訊之記錄)
接著說明，藉由運動偵測．補償而被測出的運動向量等之編碼資訊的記錄。此處，編碼資訊係由，運動向量、參照清單、將被登錄在參照清單中之參照圖像予以表示的參照圖像號碼、預測模式等，在編碼時曾被使用之資訊所構成。雖然是以預測區塊單位來進行運動偵測．補償，但已被偵測出來的運動向量等的編碼資訊，係不是以預測區塊單位而被記錄，是以上述的最小預測區塊單位而進行記錄。亦即，是將與構成預測區塊內部的複數最小預測區塊相同的編碼資訊，予以記錄。
預測區塊的尺寸係隨著編碼條件而改變，因此以預測區塊單位而記錄至編碼資訊儲存記憶體114、210時，係 除了已被偵測到的運動向量以外，還需要有預測區塊在圖像上的位置、預測區塊的形狀等之附加資訊，為了取得編碼資訊所需的存取會變得複雜化。因此，雖然會有資訊重複記錄所致之冗長度，但分割成均一的最小預測區塊單位而進行記錄的方式，在存取上是較為容易的。
圖8係將圖像以最小預測區塊做分割之一例，使用該圖來說明被記錄在編碼資訊儲存記憶體114、210中的編碼資訊的保存形式。圖8中的w係表示圖像之寬度，h係表示圖像之高度。若將最小預測區塊的寬度及高度令作p，則圖像是由橫向w/p個、縱向h/p個的最小預測區塊所構成，該1個1個的最小預測區塊所對應之編碼資訊，是以圖8中的粗實線所表示的逐線掃描順序，被記錄至編碼資訊儲存記憶體114、210。
此處，將圖8中的粗線所圍繞之矩形領域，視為預測區塊(圖8中以斜線所示之領域)。預測區塊中藉由運動偵測而會偵測出運動向量等之編碼資訊。已被偵測出來的編碼資訊，係被記錄至，構成預測區塊之中的最小預測區塊所對應之編碼資訊儲存記憶體114、210。將編碼資訊儲存記憶體114、210的編碼資訊的記錄領域之開頭位址若令圖8中的左上為原點，則預測區塊的開頭位置係為圖6中的黑點所示。若預測區塊的開頭位置係為，以最小預測區塊單位而從原點起往右x個、往下y個之位置，則預測區塊的開頭位址係以w/p×y+x來表示。從該開頭位置的最小預測區塊起，對斜線所示之預測區塊內的最小預測 區塊所對應之編碼資訊儲存記憶體114、210內的記憶領域，逐一記錄下預測區塊之編碼資訊。如此一來，預測區塊之中的最小預測區塊所對應之編碼資訊儲存記憶體114、210的記錄領域裡，就會記錄著相同的編碼資訊。
接著說明，本發明的實施例中的，具備參照相鄰區塊之選出方法的動態影像編碼裝置所編碼的動態影像的位元串流的語法。
(語法之定義)
上述圖3(a)係以預測模式來將編碼做大致區分。若為影像間預測(Inter模式)時，則首先藉由是否使用合併手法，來區分合併模式與非合併模式。非合併模式係為會實際進行區塊比對等之運動向量偵測的模式，亦可稱之為運動偵測模式。合併模式係還會區分成skip模式與非skip模式。skip模式係將藉由參照相鄰區塊之編碼資訊所預測出來的預測影像訊號當作解碼影像，因此影像殘差訊號係為0。因此，skip模式係為不需要編碼傳輸，僅將表示編碼資訊之參照目標的索引進行編碼傳輸的模式。skip模式的編碼資訊係和合併模式相同，此處，將影像殘差訊號進行編碼傳輸的情形，限定為合併模式。將Inter模式的編碼對象訊號所分類而成的表，示於圖3(b)。在skip模式中，由於係與其他模式不同，不需要影像殘差訊號的編碼傳輸，因此與其依照圖3(a)的預測模式之分歧順序來進行判定，不如先進行skip模式之判定， 反而較能夠抑制模式判定時所使用之旗標的編碼量。
上述的圖6係表示以切片中的預測區塊單位而被描述的語法模態。首先，設置有表示是否為skip模式的旗標skip_flag。當skip_flag為真(1)，而且參照相鄰區塊之候補的總數NumMergeCand超過1個時，則會適用skip模式，在編碼資訊設置參照相鄰區塊之候補清單亦即合併清單之索引的語法要素merge_idx。NumMergeCand為1時，該1個係為參照相鄰區塊，因此不傳輸merge_idx即確定參照相鄰區塊之候補。
接著，當預測區塊的預測模式是影像間預測(Inter模式)時，會設置用來表示是否為合併模式的旗標merge_flag。當merge_flag為真(1)，而且參照相鄰區塊之候補的總數NumMergeCand超過1個時，則會適用合併模式，在編碼資訊設置參照相鄰區塊之候補清單亦即合併清單之索引的語法要素merge_idx。NumMergeCand為1時，該1個係為參照相鄰區塊，因此不傳輸merge_idx即確定參照相鄰區塊之候補。
merge_flag為偽(0)時，不適用合併模式，進行通常的運動向量偵測，將運動向量或參照圖像號碼等之編碼資訊予以傳輸(該當於運動偵測模式)。每一預測區塊，藉由預測區塊所屬之切片的切片類型，來選擇在編碼及解碼之際所使用的參照清單。當切片類型slice_type為“B”時，會設定表示單向預測或雙預測的旗標inter_pred_flag。
inter_pred_flag係設定成Pred_L0(L0預測)、Pred_L1(L1預測)或Pred_BI(雙預測)。基於inter_pred_flag，設定參照清單LX(X=0或1)。已被設定的每一參照清單中係被設置有，藉由運動向量偵測所求出的表示參照圖像號碼的語法要素ref_idx_lX、及運動向量與預測區塊之周圍之相鄰區塊之預測運動向量的差分運動向量的語法要素mvd_lX[i]。此處，X係以0或1來表示參照清單，i係表示差分運動向量之成分，i=0係表示x成分，i=1係表示y成分。
接著，若預測運動向量之候補的總數NumMvpCand(LX)超過1個，則會設置有所參照之預測運動向量之候補的清單亦即MVP清單的索引的語法要素mvp_idx_lX。NumMvpCand(LX)係表示，在參照清單LX(X係為0或1)中將預測區塊的預測運動向量之候補的總數予以算出的函數。又，因為運動向量之預測方法而導致預測運動向量之候補的總數NumMvpCand(LX)為1個時，索引mvp_idx_lX就不會被設置、編碼。若預測運動向量之候補的總數是1個，則該1個就可以成為預測運動向量，因此就算不傳輸mvp_idx_lX也能確定所參照之預測運動向量之候補。基於以上的語法，就可進行動態影像之位元串流的編碼及解碼。
接著，運動偵測模式下具備所參照之預測運動向量的周圍之相鄰區塊、或合併模式下的編碼資訊之參照目標的周圍之相鄰區塊的配置之一例，示於圖9(a)、(b)。 在圖9(a)、(b)中，對於處理對象的預測區塊，將相鄰之區塊以最小預測區塊來表示。
此構成係對已被記憶在編碼資訊儲存記憶體114、210中的已編碼之編碼資訊，基於處理對象之預測區塊之位置與大小(區塊的寬度及高度)來進行存取時，較為理想。關於圖9(a)、(b)所示的周圍之相鄰區塊，在處理對象之預測區塊的左側相鄰之區塊以記號“A”表示，上側相鄰之區塊以“B”表示。旁邊的數字係表示位置。
區塊“T”係為不同時間之另一圖像的同一位置所相鄰之區塊之一例。本發明的實施例中係假設為，相對於處理對象之預測區塊而設定在另一圖像的右下。此外，隨著處理對象之預測區塊的位置，當區塊T變成圖像外的情況下，則為相對於處理對象之預測區塊而在另一圖像之中央附近的最小預測區塊之位置。圖9(a)係位於同一圖像上的空間的相鄰區塊，令為5個候補，加上位於不同時間之另一圖像的候補而總計由6個候補所構成。圖9(b)係位於同一圖像上的空間的相鄰區塊，令為4個候補，加上位於不同時間之另一圖像的候補而總計由5個候補所構成。
雖然亦可如圖1所示般地將相鄰的所有區塊都視為候補，但例如，若令處理對象之預測區塊的尺寸是64×64像素，編碼資訊儲存記憶體114、210中編碼資訊所被記錄的區塊的尺寸是4×4像素，則處理對象之預測區塊所相鄰之區塊係為左側16個、上側16個、還有角落3個的區塊 會變成參照目標之相鄰區塊。以硬體來實作時，必須要考慮所能想定的最大之記憶體存取次數、記憶體量、及處理量(處理時間)。
在本發明的實施例中，係如圖9(a)所示，將左側相鄰之區塊、上側相鄰之區塊分別限定為1個以縮減所參照之候補，將左斜下側、右斜上側及左斜上側所相鄰之區塊加入成為候補。又，在圖9(b)中，係將左側相鄰之區塊、上側相鄰之區塊分別限定為與圖9(a)不同的1個以縮減所參照之候補，將左斜下側及右斜上側所相鄰之區塊，當作候補。
如此，藉由預先限定候補，在本發明的實施例中，編碼效率幾乎不會降低，具有削減記憶體存取次數、記憶體量、及處理量(處理時間)的效果。又，在後述的實施例3以後係可以削減記憶體存取次數、記憶體量、及處理量(處理時間)，而且還可以削減合併索引、MVP索引的編碼量，因此還具有削減發生編碼量之效果。又，在本發明的實施例中，合併模式與運動偵測模式係藉由將候補之位置予以共通化，以達成更進一步的記憶體存取次數、記憶體量、及處理量(處理時間)之削減。
以下係使用圖9(a)的配置例來進行說明。使用圖9(b)之配置例的情況，係在以下說明中藉由省略C0，就可進行和圖9(a)之配置例相同的處理。此外，參照相鄰區塊之配置，係只要在動態影像編碼裝置100及動態影像解碼裝置200中不產生矛盾，則可為任意之構成。又， 參照相鄰區塊的編碼資訊，係當作動態影像編碼裝置100中已被編碼、在動態影像解碼裝置200中已被解碼之資訊，只要是能夠記憶在編碼資訊儲存記憶體114、210中，則可以為任意之資訊。
圖10係圖示了，表示動態影像編碼裝置100之構成的圖2及表示動態影像解碼裝置200之構成的圖4中所設置的實施例1的畫面間預測資訊偵測部104、205之細節。圖10中的粗虛線所圍繞之部分係表示畫面間預測資訊偵測部104、205，使用該圖來說明。畫面間預測資訊偵測部104、205係含有：處理對象區塊位置偵測部301、相鄰區塊指定部302及暫時記憶體303。在合併模式與運動偵測模式之雙方的模式下，將候補之位置共通化成圖9(a)之配置，說明從編碼資訊儲存記憶體114、210取得圖9(a)之配置的相鄰區塊之編碼資訊的程序。
首先，處理對象之預測區塊在圖像內之位置與尺寸的資訊，係被輸入至處理對象區塊位置偵測部301。處理對象之預測區塊的位置，係以圖像的左上像素為原點，以至處理對象之預測區塊的左上像素為止的水平及垂直方向的像素單位之距離來表示。然後，藉由表示處理對象之編碼區塊之分割模式的PartMode與編碼區塊被遞迴分割的次數，算出處理對象之預測區塊的寬度與高度，算出處理對象之預測區塊所參照的參照相鄰區塊的位置。
基於已被算出的相鄰區塊之位置，相鄰區塊指定部302係向編碼資訊儲存記憶體114、210進行存取，從其 中將該當於圖9(a)所示之相鄰區塊之位置的編碼資訊，讀取至暫時記憶體303。暫時記憶體303，係被設在畫面間預測資訊偵測部104、205內部，是將處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊加以記憶的記憶體。此處，當已被算出之相鄰區塊之位置是畫面外時，由於該當相鄰區塊係不存在，因此將“0”記錄至暫時記憶體303。
如以上所述，藉由在合併模式與運動偵測模式之雙方的模式下，將候補之位置予以共通化，在編碼側可削減相鄰區塊之編碼資訊往暫時記憶體303的儲存處理量。又，就不需要每一預測模式就變更預測方法，每次為了取得必要之相鄰區塊之編碼資訊而對編碼資訊儲存記憶體114進行存取。另一方面，在解碼側係在進行合併模式與運動偵測模式之判別之前，就可以開始相鄰區塊之編碼資訊往暫時記憶體303的儲存處理，因此可提升解碼處理的速度。
具備本發明的實施例所述之編碼資訊的選出方法的動態影像編碼裝置100及動態影像解碼裝置200中，不將處理對象之預測區塊的運動向量或參照圖像號碼等之編碼資訊直接編碼，而是將編碼資訊儲存記憶體114、210中所儲存的已經編碼/解碼的周圍之相鄰區塊之編碼資訊加以參照、利用。然後，藉由將表示參照相鄰區塊之位置的索引或將運動向量加以預測的預測運動向量之索引予以編碼，以實現涉及編碼資訊的編碼量之削減。在以下中，從已被畫面間預測資訊偵測部104、205所取得的相鄰區塊 之編碼資訊中，在編碼過程中，將表示參照相鄰區塊之位置的索引或將運動向量加以預測的預測運動向量之索引予以導出的手法、和基於對應於編碼過程之解碼過程中所被解碼之參照相鄰區塊之位置加以表示的索引或用來預測運動向量的預測運動向量之索引，來表示編碼資訊取得手法的具體實施例。
(實施例1)
首先，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例1的合併偵測部106。圖11係表示合併偵測部106的詳細構成。圖11中的粗虛線所圍繞之部分係表示合併偵測部106，使用該圖來說明。合併偵測部106，係含有：編碼資訊導出部310、參照候補清單作成部311、同一資訊偵測部312、輸出部313及參照候補清單儲存記憶體314。
首先，藉由被輸入至開關108的受動態影像編碼裝置100所控制之預測模式，將畫面間預測資訊偵測部104的輸出目標，切換成合併偵測部106。將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部310。
編碼資訊導出部310之動作係使用圖12的流程圖來說明。從最初輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效並 導出之(S100)。
圖13係圖示與處理對象之預測區塊位於相同圖像的每一相鄰區塊的判定處理的詳細流程。首先，將變數N予以初期化(S200)。對變數N係會設定圖9(a)所示之同一圖像上的相鄰區塊A1,B1,B0,A0,C0。此處，若在初期化時設定成N=A1，則變數N的更新係以B1,B0,A0,C0之順序而進行。
接著，將儲存著以後的判定中所使用的相鄰區塊之編碼資訊的變數，予以初期化。此處，變數係為表示相鄰區塊是否有效的旗標availableFlagN、運動向量mvLXN、參照圖像號碼refIdxLXN及表示參照清單之有效性的旗標predFlagLXN，係被初期化如下(S201)。
availableFlagN=0
mvLXN=(0,0)
refIdxLXN=0
predFlagLXN=0
此處，附加字X係被設定為表示參照清單的0或1。將變數N的相鄰區塊(以下稱作相鄰區塊N)之位置及編碼資訊，加以取得(S202)。
基於已被取得的相鄰區塊N之位置，來判定相鄰區塊N是否有效(S203)。例如，當處理對象之預測區塊是在圖像左端位置時，由於處理對象之預測區塊沒有左邊相鄰區塊存在，因此編碼資訊儲存記憶體114之中該當之編碼資訊就係不存在，因而判定為無效。相鄰區塊N為無效時 (S203的N)，將availableFlagN設定成“0”(S207)。若相鄰區塊N為有效時(S203的Y)，則判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S204)。
若相鄰區塊N的預測模式是Intra模式時(S204的Y)，則將availableFlagN設定成“0”(S207)。若相鄰區塊N的預測模式非Intra模式時(S204的N)，則將availableFlagN設定成“1”(S205)。接著，將相鄰區塊N的編碼資訊，代入至refIdxLXN、mvLXN及predFlagLXN而設定之(S206)。
一旦如以上而結束了對相鄰區塊N的判定處理，則實施變數N是否為相鄰區塊之最後的判定(S208)。變數N的更新係按照A1,B1,B0,A0,C0的順序進行，因此這裡係進行N是否為C0的判定。若N為C0(S208的Y)，則表示對所有的相鄰區塊都進行過判定，結束處理。若N非C0(S208的N)，則進行N的更新(S209)。按照上述相鄰區塊之順序來更新N，將步驟S201以後的處理，針對相鄰區塊N重複進行之。如以上所述，藉由將存在於與處理對象之預測區塊同一圖像上的周圍之相鄰區塊視為參照區塊，而導出其編碼資訊。
接著，回到圖12，決定出將不同時間之另一圖像視為合併候補時的處理對象之預測區塊的參照圖像號碼(S101)。此處理係如以下說明，是為了參照不同時間之另一圖像的同一位置所相鄰之區塊的運動向量，來決定處 理對象之預測區塊進行畫面間預測之際的參照圖像而進行。此時，根據已編碼之相鄰區塊之編碼資訊，來決定處理對象之預測區塊所參照之圖像的參照圖像號碼。此處，以前面之處理(S100)所導出的同一圖像上的相鄰區塊之編碼資訊為基礎的手法，使用圖14來說明之。
首先，將步驟S100所導出的4個相鄰區塊，分類成3個群組。作為群組係有：將處理對象之預測區塊之左邊銜接的相鄰區塊視為群組A，將上邊銜接之相鄰區塊視為群組B、及將角落銜接之相鄰區塊視為群組C，以各個群組來進行判定。
首先，針對群組A，使用圖14(a)來說明。由於群組A所屬之相鄰區塊係為A1，因此調查步驟S100中表示A1是否有效的旗標availableFlagA1(S300)。若availableFlagA1為1(S300的Y)，則將群組A的參照圖像號碼refIdxLXA，設定成A1的參照圖像號碼。若非如此(S300的N)，則將refIdxLXA設定成表示參照圖像號碼不存在的-1。
同樣地，針對群組B，使用圖14(b)來說明。由於群組B所屬之相鄰區塊係為B1，因此調查步驟S100中表示B1是否有效的旗標availableFlagB1(S301)。若availableFlagB1為1(S301的Y)，則將群組B的參照圖像號碼refIdxLXB，設定成B1的參照圖像號碼。若非如此(S301的N)，則將refIdxLXB設定成-1。
群組C中所屬之相鄰區塊係為A0、B0與C0，如圖 14(c)所示，以B0、A0、C0之順序進行判定。和A1、B1同樣地，調查B0的旗標availableFlagB0(S302)。若availableFlagB0為1(S302的Y)，則將群組C的參照圖像號碼refIdxLXC，設定成B0的參照圖像號碼，若非如此(S302的N)，則調查A0的旗標availableFlagA0(S303)。若availableFlagA0為1(S303的Y)，則將群組C的參照圖像號碼refIdxLXC，設定成A0的參照圖像號碼。若非如此(S303的N)，則調查C0的旗標availableFlagC0(S304)。若availableFlagC0為1(S304的Y)，則將群組C的參照圖像號碼refIdxLXC，設定成C0的參照圖像號碼。若非如此(S304的N)，則將refIdxLXC設定成-1。
此外，如圖9(b)所示的位於同一圖像上的相鄰區塊所示，若C0之位置的區塊不存在，則對B0與A0這2個相鄰區塊進行判定。藉由如此導出的各群組的參照圖像號碼refIdxLXN(N係為A,B或C)之多數決或選擇最小值，來決定不同時間之另一圖像之同一位置所相鄰之區塊的參照圖像號碼。
圖15中圖示了基於參照圖像號碼refIdxLXN的判定。從圖15的上方起依序說明。第1~4行係為refIdxLXN中若有相同值存在，則藉由多數決來進行選擇。第1行係refIdxLXN全部都相同之情形，若為-1則設為0，若非如此則設為refIdxLXA之值。第2~4行係3個refIdxLXN當中有2個相同的情形，2個相同時的值為- 1則設為剩下的1個refIdxLXN之值，若非如此則設為2個相同時的值。
第5~8行係為refIdxLXN中沒有相同值存在的情形，從其中選擇出最小值。3個之中將-1的refIdxLXN除外，選擇最小的參照圖像號碼之值。如以上所述，處理對象之預測區塊的參照圖像號碼會被決定，但亦可使用該手法以外的其他手法來為之。
回到圖12，接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S102)。圖16係圖示與處理對象之預測區塊位於另一圖像的相鄰區塊的判定處理的詳細流程。首先指定，與含有處理對象之預測區塊的圖像為不同時間之另一圖像(S400)。若含有處理對象之預測區塊的切片是P切片，則僅能使用L0預測，因此指定L0的參照清單之中的參照圖像號碼0所示的圖像。若為B切片，則可以使用L0預測、L1預測之一方及L0,L1之雙預測，但指定L0或L1之其中一方的參照清單的參照圖像號碼0所示的圖像。此處，雖然未言及B切片時的不同時間之另一圖像之指定，但亦可考慮在切片標頭內，若為B切片時則插入預先決定要參照哪個參照清單的參數等手法。
接著，指定所參照之不同時間之另一圖像的同一位置所相鄰之區塊的位置(S401)。在實施例1中，將圖9(a)所示的參照相鄰區塊“T”設成不同時間之另一圖像的同一位置所相鄰之區塊，因此根據處理對象之預測區塊 的位置與表示分割模式的PartMode與分割次數，算出處理對象之預測區塊的寬度與高度，算出相鄰區塊“T”的位置。已被算出的相鄰區塊之位置是圖像外時，則為在不同時間之另一圖像中，與處理對象之預測區塊同一位置的中央附近之位置。在以下的說明中，令不同時間之另一圖像為col圖像，令該圖像的處理對象區塊的同一位置所相鄰之區塊為col區塊，對其運動向量或參照圖像號碼係標注字尾“Col”來表示之。
基於col圖像和其中與處理對象之預測區塊同一位置所相鄰之區塊col區塊的位置，對編碼資訊儲存記憶體114進行存取而讀取col區塊的編碼資訊，判定編碼資訊是否為有效，導出運動向量(S402)。
圖17係圖示這些導出的詳細處理，使用此圖來說明。根據從編碼資訊儲存記憶體114所讀取到的col區塊的編碼資訊與位置，來判定col區塊是否有效(S500)。若col區塊不存在，或col區塊的預測模式是Intra時(S500的Y)，則將col區塊的基準運動向量mvCol設定成(0,0)，將基準有效旗標availableFlagCol設定成0(S501)，前進至步驟S509。若非如此時(S500的N)，則進入表示col區塊的L0參照清單的有效性的旗標predFlagL0之判定(S502)。
若predFlagL0為0時(S502的Y)，則由於L0預測是無效，因此選擇L1預測的編碼資訊，將mvCol設定成mvL1，將基準參照圖像號碼refIdxCol設定成refIdxL1 (S503)，前進至步驟S507。若非如此時(S502的N)，亦即L0預測為有效時，則進入表示col區塊的L1參照清單的有效性的旗標predFlagL1之判定(S504)。
若predFlagL1為0時(S504的Y)，則由於L1預測是無效，因此選擇L0預測的編碼資訊，將mvCol設定成mvL0，將refIdxCol設定成refIdxL0(S505)，前進至步驟S507。若非如此時(S504的N)，亦即L0及L1預測皆為有效時，則進入Pred_BI模式下的導出(S506)。Pred_BI模式下的導出中，會選擇L0預測或L1預測之其中一方。
選擇方法係可舉例如，將與步驟S500中所選擇之col圖像相同之參照清單加以選擇，在col區塊的L0預測、L1預測之各個參照圖像中選擇與col圖像之影像間距離較近者，或是將col區塊的L0預測、L1預測之各個運動向量與處理對象之圖像交叉者加以選擇等等。
第3個判定基準之一例示於圖18。在此例中，當處理對象之圖像是與col區塊的運動向量交叉時，亦即，按照col圖像的參照圖像、處理對象之圖像、col圖像的時間順序而被顯示，相當於col區塊的區塊係必定存在於處理對象之圖像內部，在微小時間內，評估周邊領域之運動後，選擇有交叉之一側之預測，會在運動向量預測中獲得較近的值的信賴性會變高。因此，選擇與處理對象之圖像交叉的運動向量的參照清單側，設定mvCol及refIdxCol。
回到圖17，接著，由於有運動向量存在，因此將基準有效旗標availableFlagCol設定成1(S507)。將表示參照清單的變數X設定成0(S508)，導出col區塊的L0及L1預測的運動向量。根據上述過程中所求出的基準運動向量mvCol與基準參照圖像號碼refIdxCol來指定參照圖像之位置，算出與col圖像的影像間距離colDist。
另一方面，根據步驟S401中所決定之處理對象之預測區塊的參照圖像號碼refIdxLX，來指定參照圖像之位置，算出與處理對象之圖像的影像間距離currDist。進行currDist與colDist之比較(S509)。若currDist與colDist相同(S509的OK)，則將基準運動向量mvCol直接當作mvLXCol(S510)。
若currDist與colDist相異(S509的NG)，則實施比例縮放所致之距離換算。比例縮放係為，將相鄰區塊的參照之圖像的影像間距離，配合著與處理對象之預測區塊所參照之圖像的影像間距離，將相鄰區塊之運動向量進行距離換算，當作處理對象之預測區塊的運動向量的處理。圖18係圖示比例縮放之一例。col圖像上的col區塊與處理對象之預測區塊所各自參照的圖像的影像間距離是colDist、currDist，因此將col區塊的運動向量mvCol藉由下式而配合處理對象之預測區塊的影像間距離，算出運動向量(S511)。
判定X是否為1(S512)。若X非1，亦即為0時(S512的N)，則針對L1預測之方向也用同樣程序進行算出。因此，將X更新成1(S513)，重複步驟S509以後。若X為1(S512的Y)，則結束處理。
如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部311。在實施例1中，作為對參照候補清單儲存記憶體314登錄參照相鄰區塊的編碼資訊之候補的記憶領域，設有參照候補清單。然後，對該當參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單，登錄該當參照相鄰區塊的編碼資訊之候補。藉此，就可削減參照候補清單之索引merge_idx的編碼量。
將參照候補清單中的各要素之位置的較高要素，配置在參照候補清單的前方，藉此而削減編碼量。表示優先順位的索引merge_idx係從0起以上升順序而分配。例如，若參照候補清單的要素為3個時，將參照候補清單之索引0設成“0”(2進位表示)，將索引1設成“10”(2進位表示)，將索引2設成“11”(2進位表示)，藉此，表示索引0的編碼量就變成1位元，在索引0中登錄被認為發生頻率較高的要素，藉此以削減編碼量。
被設在參照候補清單儲存記憶體314中的參照候補清 單，係形成清單結構，設有數列領域，將用來表示參照清單內部之所在的索引、和對應於索引的參照相鄰區塊的編碼資訊之候補，當作要素而儲存。此數列領域係以candList來表示。索引的數字是從0開始，在參照候補清單candList的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。在以下的處理中，參照候補清單candList中所被登錄之索引i的編碼資訊，係以candList[i]來表示，與參照候補清單candList係藉由數列標示來做區別。此外，參照候補清單的記憶領域中所儲存的編碼資訊，在沒有特別聲明的情況下，係以參照相鄰區塊的位置名(A0,A1,B0,B1,C0,T)來表示。
參照候補清單作成部311之動作，使用圖19的流程圖來說明。首先，將變數N與參照候補清單之索引k予以初期化(S600)。對變數N係會初期設定圖9(a)所示之相鄰區塊A1，k係被設定成0。索引k係表示，參照候補清單之記憶領域中所被設定之編碼資訊之候補的儲存領域的優先順位。
接著，進行參照相鄰區塊N的有效旗標availableFlagN之判定(S601)。若availableFlagN為1時(S601的Y)，則將相鄰區塊N的編碼資訊登錄至參照候補清單candList[k](S602)，將k予以更新(S603)。若availableFlagN為0時(S601的N)，則不登錄至參照候補清單，進入下個步驟。
判定相鄰區塊N是否為最後的參照區塊(S604)。 若為最後的區塊(S604的Y)，則將索引之值設定至候補清單總數NumListCand後(S605)，結束處理。若非最後的區塊(S604的N)，則將變數N予以更新(S606)，重複步驟S601以後之處理。
此處，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例1中，若為合併模式，則是設定了順序(A1,B1,B0,A0,C0,T)。優先順位越上位則登錄在參照候補清單的越前方，對將參照候補清單中的合併候補加以特定的合併索引，分配較短編碼長度的符碼。
在合併模式的情況下，係將處理對象之預測區塊的邊、和被認為編碼資訊最可能相等之處理對象之預測區塊的邊是彼此銜接的相鄰區塊A1及B1，優先登錄在參照候補清單的前方。藉此，可削減合併索引的編碼量，提升編碼效率。
藉由以上處理，若被登錄在參照候補清單中的參照相鄰區塊全部都有效，則以圖20所示之順序，作成參照候補清單。將優先順位視為索引，各碼字係在參照候補清單的右列表示，最大碼字長度係為NumListCand-1。圖20的情況下，NumListCand係為6，碼字最大是以5位元來表示。當參照相鄰區塊只有1個是有效時，則最大碼字長度係為0，因此不需要索引，僅1個被判定為有效的相鄰區塊之編碼資訊之候補會被唯一決定成為參照目標。
已被作成的參照候補清單，係被輸入至同一資訊偵測 部312。在同一資訊偵測部312中，係比較參照候補清單之中所儲存的編碼資訊之候補，若有相同編碼資訊之候補存在時，則將帶有最小之參照候補清單之索引的編碼資訊之候補以外全部刪除。使用圖21所示的流程圖來說明動作。
首先，將表示參照候補清單之索引的變數n和m分別設定成0和1(S700)。比較參照候補清單中所儲存的索引n與m的編碼資訊(S701)。此處，進行比較的編碼資訊係為，預測模式、所使用之參照清單、所使用之每一參照清單的參照圖像號碼、及所使用之每一參照清單的運動向量。若判定為不一致(S701的N)，則前進至步驟S704。若判定為一致(S701的Y)，則判定n與m中索引較大者亦即m，是否已經被記錄在刪除清單裡(S702)。
當m是已經被記錄在刪除清單時(S702的Y)，則前進至步驟S704。若未被記錄(S702的N)，則將m記錄至刪除清單(S703)。刪除清單，係為同一資訊偵測部312內所被設置的暫時記憶用的記憶體。
接著，對m加算1而更新之(S704)。進行m與候補清單總數NumListCand之比較(S705)。若m並非NumListCand(S705的N)，則重複步驟S701以後的與索引n的編碼資訊之比較。若m是NumListCand(S705的Y)則對n加算1而更新之(S706)。
接著，進行n與(NumListCand-1)之比較(S707) 。若n非(NumListCand-1)(S707的N)，則將m設定成(n+1)(S709)，重複步驟S701以後的編碼資訊之比較。若n已經是(NumListCand-1)(S707的Y)，則將刪除清單中所記錄之索引所該當之清單的儲存領域的編碼資訊，予以刪除，以索引0為基準，以索引較小的候補之順序逐一縮略，將碼字與參照候補清單的總數NumListCand予以更新(S708)，結束處理。
最後，將輸出部313所作成的參照候補清單之中的索引與編碼資訊，予以輸出。參照候補清單，係將參照候補清單當作合併清單，將清單中的索引當作合併索引，而予以輸出。在動態影像編碼裝置100中，係被輸出至運動補償預測部105與預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例1的合併偵測部106所對應的，被設置在動態影像解碼裝置200中的實施例1的合併判定部206。圖22係表示合併判定部206的詳細構成。圖22中以粗虛線圍繞之部分係表示合併判定部206。合併判定部206係含有：編碼資訊導出部310、參照候補清單作成部311、同一資訊偵測部312、參照候補清單儲存記憶體314及選擇部。
合併判定部206係與動態影像編碼裝置100的合併偵測部106相對應，內部構成係只有選擇部315和輸出部313有所不同，其他的編碼資訊導出部310、參照候補清單作成部311、同一資訊偵測部312及參照候補清單儲存記憶體314係具備相同機能。因此，會以至同一資訊偵測 部312為止之處理，作成和編碼過程相同的參照候補清單。
以下說明，從所作成的參照候補清單中，取得合併模式下的參照相鄰區塊的編碼資訊的選擇部315。選擇部315，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。將所選擇之編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
接著，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例1的運動向量預測部103。圖23係表示運動向量預測部103的詳細構成。圖23中的粗虛線所圍繞之部分係表示運動向量預測部103，使用該圖來說明。運動向量預測部103，係含有：編碼資訊導出部320、參照候補清單作成部321、同一資訊偵測部322、輸出部323、參照候補清單儲存記憶體324及差分運動向量算出部326。
將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部320。編碼資訊導出部320之動作係使用圖24的流程圖來說明。
從最初輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效並導出之(S800)。圖25係圖示與處理對象之預測區塊位於 相同圖像的每一相鄰區塊的判定處理的詳細流程。此外，圖25的判定處理係針對L0,L1的每一清單獨立進行。
隨應於處理對象之預測區塊的預測模式，在單向預測且L0預測時係僅將參照清單L0中所被登錄的編碼資訊，在單向預測且L1預測時係僅將參照清單L1中所被登錄的編碼資訊，在雙預測時係將參照清單L0,L1中所被登錄的各個編碼資訊，進行判定處理。在本說明書中，若無特別注釋，則運動偵測模式時的判定處理係將參照候補清單之另一方面視為LX來進行說明，圖示的參照候補清單也只舉1個例子。
首先，將變數N予以初期化(S900)。對變數N係會設定圖9(a)所示之同一圖像上的相鄰區塊A1,B1,B0,A0,C0。此處，若在初期化時設定成N=A1，則變數N的更新係以B1,B0,A0,C0之順序而進行。
接著，將儲存著以後的判定中所使用的相鄰區塊之編碼資訊的變數，予以初期化。此處，變數係為表示相鄰區塊是否有效的旗標availableFlagLXN、運動向量mvLXN、參照圖像號碼refIdxLXN及表示參照清單之有效性的旗標predFlagLXN，係被初期化如下(S901)。
availableFlagLXN=0
mvLXN=(0,0)
refIdxLXN=0
predFlagLXN=0
此處，附加字X係被設定為表示參照清單的0或1。 將變數N的相鄰區塊(以下稱作相鄰區塊N)之位置及編碼資訊，加以取得(S902)。
基於已被取得的相鄰區塊N之位置，來判定相鄰區塊N是否有效(S903)。例如，當處理對象之預測區塊是在圖像左端位置時，由於處理對象之預測區塊沒有左邊相鄰區塊存在，因此編碼資訊儲存記憶體114之中該當之編碼資訊就係不存在，因而判定為無效。
相鄰區塊N為無效時(S903的N)，將availableFlagLXN設定成“0”(S908)。若相鄰區塊N為有效時(S903的Y)，則判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S904)。
若相鄰區塊N的預測模式是Intra模式時(S904的Y)，則將availableFlagLXN設定成“0”(S908)。若相鄰區塊N的預測模式並非Intra模式時(S904的N)則判定，與處理對象之預測區塊之算出對象的預測是使用相同參照清單且相同參照圖像號碼的預測，是否已經對相鄰區塊N進行(S905)。
若尚未進行(S905的N)，則將availableFlagLXN設定成“0”(S908)。若已被進行(S905的Y)，則將availableFlagLXN設定成“1”(S906)。接著，將相鄰區塊N的運動向量之值，代入至mvLXN而設定之(S907)。
一旦如以上而結束了對相鄰區塊N的判定處理，則實施變數N是否為相鄰區塊之最後的判定(S909)。變數N 的更新係按照A1,B1,B0,A0,C0的順序進行，因此這裡係進行N是否為C0的判定。若N為C0(S909的Y)，則表示對所有的相鄰區塊都進行過判定，結束處理。若N非C0(S909的N)，則進行N的更新(S910)。按照上述相鄰區塊之順序來更新N，將步驟S901以後的處理，針對相鄰區塊N重複進行之。
此外，在實施例1中，是在步驟S905中，判定與處理對象之預測區塊之算出對象的預測是使用相同參照清單且相同參照圖像號碼的預測是否已經對相鄰區塊N進行。這是因為，若為同一參照圖像號碼及參照清單之條件，則接近之處理對象之預測區塊和相鄰區塊N的運動向量相同或為相近值的機率較高，因此運動向量的差分值較小，可提升編碼效率。
然而，同一圖像上使用相同參照圖像號碼及參照清單進行預測的相鄰區塊並不一定會存在，若不存在時，則無法算出運動向量之差分值，導致編碼效率降低。於是，不以步驟S905的同一參照清單及參照圖像號碼之條件來限縮判定，相鄰區塊上所進行之預測，係即使在滿足如下的條件時，仍將表示相鄰區塊是否有效的旗標availableFlagLXN設成1(有效)，視為參照相鄰區塊之候補，導出其編碼資訊。
條件1：相同參照清單，相同參照圖像號碼
條件2：不同參照清單，相同參照圖像號碼
條件3：相同參照清單，不同參照圖像號碼
條件4：不同參照清單，不同參照圖像號碼
此時的處理流程示於圖26。圖26與圖25的不同處在於，刪除了圖25的步驟S905的僅條件1之條件判定這點，進行步驟S911的條件1至4的條件判定，若不滿足條件1或2時則追加了運動向量的比例縮放處理(S912)這點。其他的步驟S900至步驟S910係和圖25說明的相同，因此以下針對變更、追加處進行說明。
若相鄰區塊N的預測模式非Intra模式時(S904的N)，則將availableFlagLXN設定成“1”(S906)。接著，將處理對象之預測區塊的算出對象之預測的編碼資訊和相鄰區塊N的編碼資訊進行比較，以判定條件1至4(S911)。若滿足條件1或2時，則將相鄰區塊N的相同參照清單(符合條件1時)或是不同參照清單(符合條件2時)的運動向量之值，代入至mvLXN而設定之(S907)。
若滿足條件3或4，則實施相同參照清單(符合條件3時)或是不同參照清單(符合條件4時)的相鄰區塊N的運動向量的比例縮放處理(S912)。在運動偵測模式中，係為了以較少的編碼量來傳輸處理對象之預測區塊的運動向量，而進行運動向量預測。運動向量預測係為，求取處理對象之預測區塊的運動向量與相鄰區塊之運動向量的差分，將該差分值進行編碼的處理。此時，若各個參照之圖像有所不同，則會影響到運動向量的大小，甚至導致差分值比實際的處理對象之預測區塊的運動向量還大。
於是，將相鄰區塊的參照之圖像的影像間距離，配合著與處理對象之預測區塊所參照之圖像的影像間距離，實施將相鄰區塊之運動向量進行距離換算的比例縮放。圖27係圖示比例縮放之一例。對處理對象之預測區塊，以運動向量偵測部102進行運動向量偵測，偵測出處理對象之預測區塊的運動向量、參照圖像號碼及參照清單。
另一方面，由於處理對象之圖像上的相鄰區塊係本身的編碼資訊為已知，因此從各個參照圖像號碼，選出要參照的圖像。處理對象之圖像上的相鄰區塊與處理對象之預測區塊所各自參照的圖像之影像間距離td、tb會被算出，將相鄰區塊N的相同參照清單LX的運動向量mvLX(符合條件3時)，或不同參照清單LY(X=0時Y=1、X=1時Y=0)的運動向量mvLY(符合條件4時)，以下式進行距離換算以使其符合處理對象之預測區塊的影像間距離。
回到圖26，如此，將已被換算之運動向量mvLX或mvLY，代入至mvLXN而設定之(S907)。藉由實施此比例縮放處理，對於處理對象之預測區塊，就可導出較相近的預測運動向量而達成精度提升。如以上所述，藉由將存在於與處理對象之預測區塊同一圖像上的周圍之相鄰區塊視為參照區塊，而導出其編碼資訊。
回到圖24，接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S801)。此處理係和合併偵測部106中的編碼資訊導出部310的步驟S103之處理基本上相同。若為合併模式，則在合併偵測部106中的編碼資訊導出部310中，進行步驟S103之處理前，進行處理對象之預測區塊的參照圖像號碼的導出(S102)。
相對於此，若為運動偵測模式，則對於處理對象之預測區塊，以運動向量偵測部102進行運動向量偵測，偵測出處理對象之預測區塊的運動向量、參照圖像號碼及參照清單。根據這些已被測出的處理對象之預測區塊之編碼資訊和已知的不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊，從各個參照圖像號碼選出要參照之圖像，對處理對象之預測區塊與其參照圖像之影像間距離，將不同時間之另一圖像的同一位置所相鄰之區塊的運動向量予以換算而算出之。
如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部321。參照候補清單作成部321所作成的參照候補清單，係隨應於處理對象之預測區塊的Inter模式，對L0預測及L1預測的2個參照清單，分別作成參照候補清單。在Inter模式下係定義L0預測與L1預測來作為單向預測，定義Bi-pred預測來作為雙預測，在Bi-pred預測中係使用L0預測及L1預測的2個參照清單。因此，隨應於編碼時的預測模式，參照候補清單儲存記憶體314 中係可設有1至2個參照候補清單，也可預先設置L0預測和L1預測的2個份的參照候補清單。在本說明書中，若無特別注釋，則運動偵測模式時的參照候補清單係為了說明上方便而僅舉例1個來說明，圖示的參照候補清單也只舉1個例子。
在實施例1中，在參照候補清單儲存記憶體324中，作為登錄參照相鄰區塊的編碼資訊之候補的記憶領域，設有參照候補清單。然後，對該當參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單儲存記憶體324，登錄該當參照相鄰區塊的編碼資訊之候補。藉此，就可削減參照候補清單之索引mvp_idx_l0及mvp_idx_l1的編碼量。
藉由將優先順位較高的要素配置在參照候補清單的前方，以削減編碼量。表示參照候補清單中的各要素之位置的索引係從0起以上升順序而分配。被設在參照候補清單儲存記憶體324中的參照候補清單，係形成清單結構，設有數列領域，將用來表示參照清單內部之所在的索引、和對應於索引的參照相鄰區塊的編碼資訊之候補，當作要素而儲存。
此數列領域係以candListLX來表示。索引的數字是從0開始，在參照候補清單candListLX的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。在以下的處理中，參照候補清單candListLX中所被登錄之索引i的編碼資訊，係以candListLX[i]來表示，與參照候補清單 candListLX係藉由數列標示來做區別。此外，參照候補清單的記憶領域中所儲存的編碼資訊，在沒有特別聲明的情況下，係以參照相鄰區塊的位置名(A0,A1,B0,B1,C0,T)來表示。
參照候補清單作成部321的動作，係和合併偵測部106的參照候補清單作成部311相同，將編碼資訊導出部320所得之表示相鄰區塊是否有效的旗標availableFlagLXN，以運動偵測模式所定義之順序A1,B1,A0,B0,C0,T做判定，若為1(有效)，則登錄至設在參照候補清單儲存記憶體324中的參照候補清單裡。
藉由以上處理，若被登錄在參照候補清單中的參照相鄰區塊全部都有效，則以圖20所示之順序，作成參照候補清單。將優先順位視為索引，各碼字係在參照候補清單的右列表示，最大碼字長度係為NumListCand-1。圖20的情況下，NumListCand係為6，碼字最大是以5位元來表示。當參照相鄰區塊只有1個是有效時，則最大碼字長度係為0，因此不需要碼字，僅1個被判定為有效的相鄰區塊之編碼資訊之候補會被唯一決定成為參照目標。
已被作成的參照候補清單，係被輸入至同一資訊偵測部322。在同一資訊偵測部322中，係比較參照候補清單之中所儲存的運動向量，若有具備相同運動向量的候補存在時，則將帶有最小之參照候補清單之候補以外全部刪除。使用圖29所示的流程圖來說明動作。
首先，將表示參照候補清單之索引的變數n和m分 別設定成0和1(S1000)。比較參照候補清單中所儲存的索引n與m的運動向量(S1001)。若判定為不一致(S1001的N)，則前進至步驟S1004。若判定為一致(S1001的Y)，則判定n與m中索引較大者亦即m，是否已經被記錄在刪除清單裡(S1002)。
當m是已經被記錄在刪除清單時(S1002的Y)，則前進至步驟S1004。若未被記錄(S1002的N)，則將m記錄至刪除清單(S1003)。刪除清單，係為同一資訊偵測部322內所被設置的暫時記憶用的記憶體。
接著，對m加算1而更新之(S1004)。進行m與候補清單總數NumListCand之比較(S1005)。若m並非NumListCand(S1005的N)，則重複步驟S1001以後的與索引n的運動向量之比較。若m是NumListCand(S1005的Y)，則對n加算1而更新之(S1006)。
接著進行n與(NumListCand-1)之比較(S1007)。若n非(NumListCand-1)(S1007的N)，則將m設定成(n+1)(S1009)，重複步驟S1001以後的運動向量之比較。若n已經是(NumListCand-1)(S1007的Y)，則將刪除清單中所記錄之索引所該當之清單的儲存領域的編碼資訊，予以刪除，以索引0為基準，以索引較小的候補之順序逐一縮略，將碼字與參照候補清單的總數NumListCand予以更新(S1008)，結束處理。
差分運動向量算出部326，係將如此作成之參照候補清單之中的編碼資訊的運動向量，當作預測運動向量，根 據運動向量偵測部102所測出之運動向量與預測運動向量，算出差分運動向量，將所算出的差分運動向量，供給至輸出部323。
最後，將輸出部323所作成的參照候補清單之中的索引與差分運動向量，予以輸出。參照候補清單，係將參照候補清單當作MVP清單，將清單中的索引當作MVP索引而予以輸出。在動態影像編碼裝置100中，輸出至預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例1的運動向量預測部103所對應的，被設置在動態影像解碼裝置200中的實施例1的運動向量算出部204。圖30係表示運動向量算出部204的詳細構成。圖30中的粗虛線所圍繞之部分係表示運動向量算出部204。運動向量算出部204係含有：編碼資訊導出部320、參照候補清單作成部321、同一資訊偵測部322、參照候補清單儲存記憶體324、選擇部325及運動向量加算部327。
運動向量算出部204，係語動態影像編碼裝置100的運動向量預測部103對應，內部構成係只有選擇部325與輸出部323及運動向量加算部327不同，其他的編碼資訊導出部320、參照候補清單作成部321、同一資訊偵測部322及參照候補清單儲存記憶體324係具備相同機能。因此，會以至同一資訊偵測部322為止之處理，作成和編碼過程相同的參照候補清單。
以下說明，從所作成的參照候補清單中，取得運動偵 測模式下的參照相鄰區塊的編碼資訊的選擇部325。選擇部325，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。從被選擇之清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在運動向量加算部327中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量進行加算，算出運動向量。將該當運動向量供給至運動補償預測部207，並且將所被選擇之參照候補清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
(實施例2)
圖31(a)、(b)中圖示了實施例2的相對於處理對象之預測區塊的參照相鄰區塊之配置。各相鄰區塊的記號，係和圖9(a)、(b)相同，此處係使用圖31(a)的配置例來進行說明。實施例2係將與處理對象之預測區塊位於同一圖像上的相鄰區塊，群組化成左側相鄰的區塊群(圖31(a)中係為A0與A1)、上側相鄰的區塊群(圖31(a)中係為B0、B1與C0)，從各個區塊群之中，選擇出1個參照相鄰區塊來作為區塊群的代表值。
作為選擇的方法，係基於相鄰區塊之編碼資訊的預測模式及位置，判定相鄰區塊是否有效，這點在實施例1、2中是相同的，但在區塊群單位中各選出1個代表的相鄰區塊，這點有所不同。如此，從複數相鄰區塊所成之區塊 群之中，選出代表該區塊群之相鄰區塊的方法，稱作掃描(scan)。藉由該掃描，代表左側相鄰之區塊群的相鄰區塊、代表上側相鄰之區塊群的相鄰區塊及不同時間之另一圖像的同一位置所相鄰之區塊的這3個相鄰區塊，會被登錄至參照候補清單中。
因此，可較實施例1更為削減參照候補清單中所登錄的相鄰區塊之總數，可削減同一資訊偵測部312中的編碼資訊之比較次數、及同一資訊偵測部322中的運動向量之比較次數。甚至，可縮短分配給參照候補清單之索引的碼字長度，可削減參照候補清單之索引的編碼量。甚至，藉由將左側及上側相鄰的區塊群之中的相鄰區塊的處理順序，順應著預測模式而加以變更，藉此就可選擇適合於預測模式的相鄰區塊，可期待編碼效率之改善。
處理順序係為，當預測模式是合併模式時，合併偵測部106及合併判定部206係如圖31(a)、(b)中的細虛線箭頭所示，左側相鄰之區塊群係為從上而下，上側相鄰之區塊群係為將左上相鄰區塊C0設為最後之順序而以B1,B0,C0之順序來進行處理。若為運動偵測模式，則運動向量預測部103及運動向量算出部204係如圖31(a)、(b)中的細實線箭頭所示，左側相鄰之區塊群係為從上而下，上側相鄰之區塊群係為從右而左的順序，進行處理。
在合併模式中，將處理對象之預測區塊和被認為編碼資訊最可能相等之相鄰區塊A1,B1優先進行判定處理而 選擇之，藉此而提升編碼效率。另一方面，在運動偵測模式中，係為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊的候補間的編碼資訊之差異較容易變得明顯的方式，將左側與上側之候補間的距離較遠的相鄰區塊A0,B0優先進行判定處理而選擇之。藉此，可削減差分運動向量的編碼量，提升編碼效率。
以下僅針對與實施例1不同的實施例2之動作，詳細說明。首先說明動態影像編碼裝置100中的合併偵測部106之動作。合併偵測部106係和實施例1中所說明的圖11相同構成，但編碼資訊導出部310之處理係和實施例1不同，因此針對實施例2中的編碼資訊導出部310之動作加以說明。圖32係實施例2中的編碼資訊導出部310之動作的流程圖。
首先，藉由被輸入至開關108的受動態影像編碼裝置100所控制之預測模式，將畫面間預測資訊偵測部104的輸出目標，切換成合併偵測部106，將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部310。
從輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效並導出之(S103)。圖33係圖示與處理對象之預測區塊位於相同圖像的每一相鄰區塊的判定處理的詳細流程。由於是對實施例1的圖13所示之流程圖新追加了步驟S210、步驟 S211、步驟S212、步驟S213及步驟S214的處理，其餘均和實施例1同等，因此這裡僅說明追加的處理。
首先，將區塊群M予以初期化(S210)。此處，假設是設定成左側相鄰之區塊群，對M係設定表示左側區塊群的值亦即A。接著，將區塊群之中的變數N予以初期化(S200)。變數N係隨應於上述區塊群內的處理順序而被設定，N的更新時係以左側區塊群為A1,A0，上側為B1,B0,C0之順序，而被更新。
圖33中的步驟S201至步驟S209的處理基本上和實施例1的圖13相同，但判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S204)、若相鄰區塊N的預測模式非Intra模式時(S204的N)，則之後的處理係和實施例1不同。
判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S204)、若相鄰區塊N的預測模式並非Intra模式時(S204的N)，則進入M是否為左側區塊群的判定(S211)，若M是左側區塊群(S211的Y)，則將availableFlagM設定成“1”(S205)，將相鄰區塊N的編碼資訊，代入至refIdxLXM、mvLXM及predFlagLXM而設定之(S206)。只有當M是上側區塊群時(S211的N)，判定左側區塊群中所選擇之相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊是否相同(S212)。
由於最初會選擇代表左側區塊群的相鄰區塊，因此會 保持其編碼資訊，使用於上側區塊群的判定。藉由該處理，就不會與代表左側區塊群的相鄰區塊之編碼資訊發生重複，因此參照目標的選擇幅度可以更廣。此外，為了削減處理量，還可以省略步驟S211及步驟S212之處理，直接前進至步驟S205。
左側區塊群中所選擇之相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊為不同、或左側之區塊群中所被選擇之相鄰區塊之編碼資訊是不存在時(S212的N)，則將availableFlagM設定成“1”(S205)，將相鄰區塊N的編碼資訊，代入至refIdxLXM、mvLXM及predFlagLXM而設定之(S206)。
接著，在區塊群M的編碼資訊被設定後，為了對下個區塊群、亦即上側相鄰之區塊群進行處理，而判定變數M是否為表示上側區塊群的值亦即B(S213)。若M並非為B(上側)(S213的N)，則將M更新成B(上側)(S214)，重複步驟S200以後之處理。若M是上側(S213的Y)，則結束處理。
相鄰區塊N並非有效(S203的N)、相鄰區塊N的預測模式並非畫面內編碼(Intra)模式(S204的Y)、左側區塊群中所選擇之相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊係為相同時(S212的Y)，則將availableFlagM設定成“0”(S207)，判定相鄰區塊N是否為區塊群M內的相鄰區塊的最後(S208)。
變數N之更新係隨應於上述區塊群內的處理順序而被 設定，此處係判定N是否為A0(左側區塊群的情形)或C0(上側區塊群的情形)。若相鄰區塊N是最後區塊(S208的Y)，則進入區塊群M之判定(S213)，若非如此(S208的N)，則將變數N隨應於區塊內的處理順序而更新(S209)，重複步驟S201以後之處理。如以上所述，將存在於與處理對象之預測區塊同一圖像上的區塊群的相鄰區塊視為代表之參照區塊，而導出其編碼資訊。
回到圖32，接著，決定出將不同時間之另一圖像視為合併候補時的處理對象之預測區塊的參照圖像號碼(S104)。雖然亦可以直接利用實施例1中的步驟S101之處理，但此處係針對以前面之處理(S103)所導出的同一圖像上的左側及上側相鄰區塊群的編碼資訊為基礎的手法，使用圖34(a)、(b)來說明之。
首先，步驟S103中所導出之表示左側相鄰區塊群A及上側相鄰區塊群B各區塊群之相鄰區塊是否為有效的旗標availableFlagM、參照圖像號碼refIdxLXM，會被輸入。此處，M係為A及B。
首先，針對左側的相鄰區塊群A，使用圖34(a)來說明。調查表示左側相鄰區塊群之相鄰區塊是否有效的旗標availableFlagA(S1100)。若availableFlagA為1(S1100的Y)，則將左側相鄰區塊群的相鄰區塊的參照圖像號碼refIdxLXA加以設定，若非如此(S1100的N)，則將refIdxLXA設定成-1。
同樣地，針對上側相鄰區塊群B，使用圖34(b)來 說明。調查表示上側相鄰區塊群之相鄰區塊是否有效的旗標availableFlagB(S1101)。若availableFlagB為1(S1101的Y)，則將上側相鄰區塊群的相鄰區塊的參照圖像號碼refIdxLXB加以設定，若非如此(S1101的N)，則將refIdxLXB設定成-1。
基於如此導出之各區塊群的參照圖像號碼refIdxLXM(M係A,B)之條件，來決定不同時間之另一圖像之同一位置所相鄰之區塊的參照圖像號碼refIdxLXCol。圖35中圖示了基於參照圖像號碼refIdxLXM的判定。圖35的第1行係為refIdxLXA與refIdxLXB是相同值，且並非-1的情形，選擇refIdxLXA。第2行係為refIdxLXA與refIdxLXB是不同值，且均不是-1的情形，選擇最小的參照圖像號碼之值。第3行與第4行係任一方為-1的情形，選擇非-1之一方。第5行係雙方均為-1的情形，此時係設定“0”。如以上所述，處理對象之預測區塊的參照圖像號碼會被決定，但亦可使用該手法以外的其他手法來為之。
回到圖32，接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S102)。由於是和實施例1的步驟S102相同，因此省略說明。如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部311。
在實施例2中也是和實施例1同樣地，在參照候補清單儲存記憶體314中，設有參照候補清單來作為用來登錄 參照相鄰區塊的編碼資訊之候補的記憶領域，對參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補。藉此，削減參照候補清單之索引merge_idx的編碼量。
參照候補清單作成部311係進行和實施例1同樣的動作，判定所參照之左側及上側的相鄰區塊群、不同時間之另一圖像的同一位置所相鄰之區塊的有效旗標availableFlagM(此處M係為A,B,T)，將相鄰區塊之編碼資訊，登錄至參照候補清單candList。此處假設，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例2中係設定左側、上側、不同時間的相同順序(A,B,T)。
藉由以上處理，若被登錄在參照候補清單中的參照相鄰區塊全部都有效，則以圖36所示之順序，作成參照候補清單。將優先順位視為索引，各碼字係在參照候補清單的右列表示，最大碼字長度係為2。此處，參照候補清單內部的括弧，係從左側或上側之相鄰區塊群之中，在編碼資訊導出部310以括弧內的左而右之順序而被處理，將所被選擇的1個相鄰區塊加以表示。
已被作成的參照候補清單，係在同一資訊偵測部312中將同一編碼資訊的參照候補清單中所儲存之編碼資訊予以刪除，將參照候補清單作成部311所作成的參照候補清單之中的索引與編碼資訊予以輸出。參照候補清單，係將 參照候補清單當作合併清單，將該當清單中的索引當作合併索引，而予以輸出。在動態影像編碼裝置100中，係被輸出至運動補償預測部105與預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例2的合併偵測部106所對應的，被設置在動態影像解碼裝置200中的實施例2的合併判定部206。合併偵測部206係和實施例1中所說明的圖22相同構成，編碼資訊導出部310之處理是和實施例1不同。其他的參照候補清單作成部311、同一資訊偵測部312、參照候補清單儲存記憶體314及選擇部315係和實施例1具備相同機能。
又，實施例2中的合併判定部206的編碼資訊導出部310係和上述實施例2中的合併偵測部106的編碼資訊導出部310具備相同機能，因此藉由實施例2中的合併判定部206的合併判定部206的同一資訊偵測部312為止的處理，作成和實施例2的合併偵測部106相同的參照候補清單。說明從所作成的參照候補清單中，在合併模式下取得參照相鄰區塊的編碼資訊的選擇部315。選擇部315，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。將所選擇之編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
接著，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例2的運動向量預測部103。實施例 2的運動向量預測部103係和實施例1中所說明的圖23相同構成，但編碼資訊導出部320之處理係和實施例1不同，因此在實施例2中係說明編碼資訊導出部320之動作。圖37係實施例2中的編碼資訊導出部320之動作的流程圖。
首先，藉由被輸入至開關108的受動態影像編碼裝置100所控制之預測模式，將畫面間預測資訊偵測部104的輸出目標，切換成運動向量預測部103。將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部320。從輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效並導出之(S802)。圖38係圖示與處理對象之預測區塊位於相同圖像的每一相鄰區塊的判定處理的詳細流程。
由於是對實施例1的圖25所示之流程圖新追加了步驟S913、步驟S914、步驟S915、步驟S916及步驟S917的處理，其餘均和實施例1同等，因此這裡僅說明追加的處理。
首先，將區塊群的變數M予以初期化(S913)。此處，假設是設定成左側相鄰之區塊群，對M係設定表示左側區塊群的值亦即A。接著，將區塊群之中的變數N予以初期化(S900)。變數N係隨應於上述區塊群內的處理順序而被設定，N的更新時係以左側區塊群為A0,A1， 上側為B0,B1,C0之順序，而被更新。之後的步驟S901至步驟S910的處理基本上和實施例1相同，但判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S904)、若相鄰區塊N的預測模式非Intra模式時(S904的N)，則之後的處理係和實施例1不同。
判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S904)、若相鄰區塊N的預測模式並非Intra模式時(S904的N)，則進入M是否為左側區塊群的判定(S914)，若M是左側區塊群(S914的Y)，則前進至步驟S905之處理。只有當M是上側區塊群時(S914的N)，判定左側區塊群中所選擇之相鄰區塊之運動向量mvLXA與相鄰區塊N的運動向量是否相同(S915)。
由於最初會選擇代表左側區塊群的相鄰區塊，因此會保持其運動向量，使用於上側區塊群的判定。藉由該處理，就不會與代表左側區塊群的相鄰區塊之運動向量發生重複，因此參照目標的選擇幅度可以更廣。此外，為了削減處理量，還可以省略步驟S914及步驟S915之處理，直接前進至步驟S905。
左側區塊群中所選擇之相鄰區塊之運動向量mvLXA與相鄰區塊N之運動向量係為相同時(S915的Y)，前進至步驟S908。若不同(S915的N)，則判定與處理對象之預測區塊之算出對象的預測是使用相同參照清單且相同參照圖像號碼的預測，是否已經對相鄰區塊N進行 (S905)。
若針對相鄰區塊N也有進行與使用了處理對象之預測區塊之算出對象之運動向量的預測是使用相同參照清單且相同參照圖像號碼的預測(S905的Y)，則將availableFlagLXN設定成“1”(S906)，將相鄰區塊N的運動向量，代入至mvLXM而設定之(S907)。在區塊群M的運動向量被設定後，為了對下個區塊群、亦即上側相鄰之區塊群進行處理，而判定變數M是否為表示上側區塊群的值亦即B(S916)。若M並非為B(上側)(S916的N)，則將M更新成B(上側)(S917)，重複步驟S900以後之處理。若M是B(上側)(S916的Y)，則結束處理。
相鄰區塊N並非有效(S903的N)、相鄰區塊N的預測模式並非畫面內編碼(Intra)模式(S904的Y)、左側區塊群中所選擇之相鄰區塊之運動向量mvLXA與上側區塊群的相鄰區塊N的運動向量為相同時(S915的Y)、使用相同參照清單且相同參照圖像號碼的預測未被進行時(S905的N)，則將availableFlagLXM設定成“0”(S908)，判定相鄰區塊N是否為區塊群M內的相鄰區塊的最後(S909)。變數N之更新係隨應於上述區塊群內的處理順序而被設定，此處係判定N是否為A1(左側區塊群的情形)或C0(上側區塊群的情形)。
若相鄰區塊N是最後區塊(S909的Y)，則進入區塊群M之判定(S916)。若非如此(S909的N)，則將 變數N隨應於區塊內的處理順序而更新(S910)，重複步驟S901以後之處理。如以上所述，將存在於與處理對象之預測區塊同一圖像上的區塊群的相鄰區塊視為代表之參照區塊，而導出其編碼資訊。
在實施例2中也是和實施例1同樣地，相鄰區塊上所進行之預測，係即使在滿足如下的條件時，仍可將表示相鄰區塊是否有效的旗標availableFlagLXM設成1(有效)，視為參照相鄰區塊之候補，導出其編碼資訊。
條件1：相同參照清單，相同參照圖像號碼
條件2：不同參照清單，相同參照圖像號碼
條件3：相同參照清單，不同參照圖像號碼
條件4：不同參照清單，不同參照圖像號碼
此時的處理流程示於圖39。和上述的圖38不同處在於，刪除了步驟S905的僅條件1之條件判定這點，進行步驟S911的條件1至4的條件判定，若不滿足條件1或2時則追加了運動向量的比例縮放處理(S912)這點。
首先，將區塊群的變數M予以初期化(S913)。此處，假設是設定成左側相鄰之區塊群，對M係設定A。接著，將區塊群之中的變數N予以初期化(S900)。變數N係隨應於上述區塊群內的處理順序而被設定，N的更新時係以左側區塊群為A0,A1，上側為B0,B1,C0之順序，而被更新。以下的步驟S901至步驟S910的處理基本上和實施例1的圖26相同。判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S904)、若相鄰區塊N 的預測模式非Intra模式時(S904的N)，則之後的處理係和實施例2的圖38不同。
若相鄰區塊N的預測模式並非Intra模式時(S904的N)，亦即Inter模式時，則將處理對象之預測區塊的算出對象之預測的編碼資訊和相鄰區塊N的編碼資訊進行比較，進行條件1至4的判定處理(S911)。若滿足條件1或條件2時，則進入M是否為左區塊群的判定處理(S914)。另一方面，若滿足條件3或4，則和實施例1的圖26之S912同樣地實施相鄰區塊N的運動向量的比例縮放處理(S912)，進入M是否為左區塊群的判定處理(S914)。
若M是左側區塊群(S914的Y)，則將availableFlagLXM設定成“1”(S906)。當M是上側區塊群時(S914的N)，判定左側區塊群中所選擇之相鄰區塊之運動向量mvLXA與相鄰區塊N的運動向量是否相同(S915)。此外，為了削減處理量，還可以省略步驟S914及步驟S915之處理，直接前進至步驟S906。
左側區塊群中所選擇之相鄰區塊之運動向量mvLXA與相鄰區塊N的編碼資訊為相同時(S915的Y)，將availableFlagLXN設定成“0”(S908)，若為不同(S915的N)，則將availableFlagLXM設定成“1”(S906)。
和實施例1的圖26的步驟S907同樣地，相鄰區塊N的相同參照清單(符合條件1時)的運動向量mvLX或不 同參照清單(符合條件2時)的運動向量mvLY，或相同參照清單(符合條件3時)的藉由比例縮放而被換算過的運動向量mvLX或不同參照清單(符合條件4時)的藉由比例縮放而被換算過運動向量mvLY，被設定代入至mvLXM(S907)。
在區塊群M的運動向量被設定後，為了對下個區塊群、亦即上側相鄰之區塊群進行處理，而判定變數M是否為上側(S916)。若M非上側(S916的N)，則將M更新成B(上側)(S917)，重複步驟S900以後之處理。若M是上側(S916的Y)，則結束處理。
將availableFlagLXM設定成“0”的情況下(S908)，判定相鄰區塊N是否為區塊群M內的相鄰區塊的最後(S909)。變數N之更新係隨應於上述區塊群內的處理順序而被設定，此處係判定N是否為A1(左側區塊群的情形)或C0(上側區塊群的情形)。若相鄰區塊N是最後區塊(S909的Y)，則進入區塊群M之判定(S916)，若非如此(S909的Y)，則將變數N隨應於區塊內的處理順序而更新(S910)，重複步驟S901以後之處理。如以上所述，將存在於與處理對象之預測區塊同一圖像上的區塊群的相鄰區塊視為代表之參照區塊，而導出其運動向量。
回到圖37，接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S801)。此係和實施例1的步驟S801相同，因此省略 說明。如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部321。參照候補清單作成部321所作成的參照候補清單，係對L0預測及L1預測的2個參照清單，分別作成參照候補清單。在本說明書中，若無特別注釋，則運動偵測模式時的參照候補清單係為了說明上方便而僅舉例1個來說明，圖示的參照候補清單也只舉1個例子。
在實施例2中，在參照候補清單儲存記憶體324中，作為登錄參照相鄰區塊的編碼資訊之候補的記憶領域，設有參照候補清單。然後，對參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單儲存記憶體324，登錄參照相鄰區塊的編碼資訊之候補。藉此，就可削減參照候補清單之索引mvp_idx_l0及mvp_idx_l1的編碼量。
藉由將優先順位較高的要素配置在參照候補清單的前方，以削減編碼量。表示優先順位的索引係從0起以上升順序而分配。被設在參照候補清單儲存記憶體324中的參照候補清單，係形成清單結構，設有數列領域，將用來表示參照清單內部之所在的索引、和對應於索引的參照相鄰區塊的編碼資訊之候補，當作要素而儲存。此數列領域係以candListLX來表示。索引的數字是從0開始，在參照候補清單candListLX的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。在以下的處理中，參照候補清單candListLX中所被登錄之索引i的編碼資訊，係以candListLX[i]來表示，與參照候補清單candListLX係藉 由數列標示來做區別。此外，參照候補清單的記憶領域中所儲存的編碼資訊，在沒有特別聲明的情況下，係以參照相鄰區塊的位置名(A0,A1,B0,B1,C0,T)來表示。
參照候補清單作成部321係進行和實施例1同樣的動作，判定所參照之左側及上側的相鄰區塊群、不同時間之另一圖像的同一位置所相鄰之區塊的有效旗標availableFlagLXM(此處M係為A,B,T)，將相鄰區塊之編碼資訊，登錄至參照候補清單candListLX。此處假設，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例2中係設定左側、上側、不同時間的相同順序(A,B,T)。藉由以上處理，若被登錄在參照候補清單中的參照相鄰區塊全部都有效，則以圖40所示之順序，作成參照候補清單。
將優先順位視為索引，各碼字係在參照候補清單的右列表示，最大碼字長度係為2。此處，參照候補清單內部的括弧，係從左側或上側之相鄰區塊群之中，在編碼資訊導出部320以括弧內的左而右之順序而被處理，將所被選擇的1個相鄰區塊加以表示。當參照相鄰區塊只有1個是有效時，則最大碼字長度係為0，因此不需要碼字，僅1個被判定為有效的相鄰區塊之編碼資訊之候補會被唯一決定成為參照目標。
已被作成的參照候補清單，係在同一資訊偵測部322中將同一編碼資訊的參照候補清單中所儲存之編碼資訊予以刪除，將差分運動向量算出部326中所作成之參照候補 清單之中的編碼資訊的運動向量，當作預測運動向量，根據運動向量偵測部102所測出之運動向量與預測運動向量，算出差分運動向量，將所算出的差分運動向量，供給至輸出部323。
最後，將輸出部323所作成的參照候補清單之中的索引與差分運動向量，予以輸出。參照候補清單，係將參照候補清單當作MVP清單，將清單中的索引當作MVP索引而予以輸出。在動態影像編碼裝置100中，輸出至預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例2的運動向量預測部103所對應的，被設置在動態影像解碼裝置200中的實施例2的運動向量算出部204。運動向量算出部204係和圖30相同構成，編碼資訊導出部320之處理是和實施例1不同。其他的參照候補清單作成部321、同一資訊偵測部322、參照候補清單儲存記憶體324、選擇部325及運動向量加算部327係和實施例1具備相同機能。
又，編碼資訊導出部320係具備與上述實施例2之運動向量預測部103的編碼資訊導出部320相同機能，因此是以運動向量算出部204的同一資訊偵測部322為止的處理，作成與實施例2的運動向量預測部103相同的參照候補清單。說明從所作成的參照候補清單中，在運動偵測模式下取得參照相鄰區塊的編碼資訊的選擇部325。選擇部325，係從所作成的參照候補清單之中，將已被第1編碼 位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。從被選擇之參照候補清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在運動向量加算部327中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量進行加算，算出運動向量，供給至運動補償預測部207，並且將已被選擇之清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
此外，在實施例2中，雖然是從各區塊群中，選擇出1個相鄰區塊來作為參照相鄰區塊之代表，但亦可選出複數個相鄰區塊。但是，是以不會超過區塊群之中的區塊數之範圍來做設定。
(實施例3)
在實施例3中，係隨著預測模式來改變參照相鄰區塊的選擇方法。使用圖31(a)的相鄰區塊的配置來說明。在合併模式下係從6個相鄰區塊A0,A1,B0,B1,C0,T之中，選擇出1個相鄰區塊之編碼資訊來作為參照目標。在運動偵測模式下係在6個相鄰區塊A0,A1,B0,B1,C0,T當中，將A0與A1分類成左側相鄰之區塊群，將B0、B1與C0分類成上側相鄰之區塊群，從各區塊群之中，選擇出1個來作為代表的相鄰區塊。從左側及上側相鄰之區塊群的各代表區塊和T這3個相鄰區塊中，選擇出1個相鄰區塊之編碼資訊來作為參照目標。亦即，此係合併模式是 將實施例1的手法，運動偵測模式是將實施例2的手法分別加以適用的混合手法。
在合併模式中，直接使用參照相鄰區塊之候補的編碼資訊，進行影像間預測，因此為了保留選擇的餘地，將比運動偵測模式還多的候補，登錄至清單中。這是因為，合併模式係相較於運動偵測模式，可將較多的資訊(運動向量、參照索引、參照清單)以少少的編碼量就能加以傳輸，因此與其削減合併索引的編碼量，不如留下相鄰區塊之候補而擴展選擇之幅度，反而能夠提升編碼效率。另一方面，在運動偵測模式中，係並非直接使用參照相鄰區塊之候補的編碼資訊，將差分運動向量當作首次編碼資訊而予以編碼，因此進行掃描而縮減候補然後登錄至清單。這是因為，與其縮減候補，不如削減MVP索引之編碼量，反而較能提升編碼效率。
實施例3中所作成的候補清單，係若全部參照相鄰區塊都有效時，則按照預測模式別而表示成如圖41。由於在合併偵測部106及運動向量預測部103中分別作成參照候補清單，候補清單總數也不同，因此碼字也是在第3項目以後就不同，會分別作成最佳的碼字，因此可期待編碼效率之改善。又，雖然碼字長度變長，但亦可將運動偵測模式的碼字“11”(2進位表示)配合同一行的合併模式的“110”(2進位表示)，將出現的碼字的種類予以共通化。
(實施例4)
實施例4係從與處理對象之預測區塊位於相同圖像上的相鄰區塊(以下稱作空間相鄰區塊)，選擇2個區塊來作為代表之相鄰區塊的方法。這點係與實施例2相同，但在實施例2中係將空間相鄰區塊分成2個區塊群而定義，在區塊群單位中各選出1個代表的相鄰區塊。在實施例4中則是將空間相鄰區塊全體視為1個區塊群，從其中選出2個代表的相鄰區塊，這點有所不同。
和實施例2同樣地與處理對象之預測區塊位於相同圖像上的相鄰區塊的代表的2個相鄰區塊及不同時間之另一圖像的同一位置所相鄰之區塊的這3個相鄰區塊，會被登錄至參照候補清單。可較實施例1更為削減參照候補清單中所登錄的相鄰區塊之總數，因此可削減同一資訊偵測部312中的編碼資訊之比較次數、同一資訊偵測部322中的運動向量之比較次數。甚至，可縮短分配給參照候補清單之索引的碼字長度，可削減參照候補清單之索引的編碼量。甚至，藉由將相鄰區塊的選出處理順序，順應著預測模式而加以變更，藉此就可選擇適合於預測模式的相鄰區塊，可期待編碼效率之改善。
處理順序係為，當預測模式是合併模式時，合併偵測部106及合併判定部206係以圖9(a)的A1,B1,B0,A0,C0(或B1,A1,A0,B0,C0)的順序來進行處理。若為運動偵測模式，則運動向量預測部103及運動向量算出部204係以圖9(a)的B0,A0,A1,B1,C0(或A0,B0, B1,A1,C0)之順序來進行處理。
在合併模式下，優先選擇相鄰區塊A1,B1，登錄至候補清單。這是因為，相鄰區塊A1,B1係與處理對象之預測區塊的邊相接，因此相較於其他相鄰區塊(A0,B0,C)，編碼資訊與處理對象之預測區塊相等的可能性較高，將可能性高的候補加以登錄，可以期待合併模式下的編碼效率提升。另一方面，在運動偵測模式下，優先選擇相鄰區塊A0,B0，登錄至候補清單。相鄰區塊A0,B0係在相鄰區塊之中，候補間的距離最遠，可登錄不同性質之運動向量的可能性最高，可擴展預測運動向量的選擇幅度。藉此，在傳輸差分運動向量之際，難以產生較大的編碼量，可期待運動偵測模式下的編碼效率提升。
實施例4的動態影像編碼裝置100及動態影像解碼裝置200之構成係和實施例1、2相同。又，實施例4的動作係除了圖11及圖22的編碼資訊導出部310、圖23及圖30的編碼資訊導出部320的動作以外，其餘係和實施例2相同。以下僅針對與實施例2不同的實施例4之動作，詳細說明。
首先說明動態影像編碼裝置中的合併偵測部106之動作。合併偵測部106係和實施例2的圖11相同構成，但編碼資訊導出部310之處理係和實施例2不同，因此針對實施例4中的編碼資訊導出部310之動作加以說明。圖42係實施例4中的編碼資訊導出部310之動作的流程圖。
首先，藉由被輸入至開關108的受動態影像編碼裝置100所控制之預測模式，將畫面間預測資訊偵測部104的輸出目標，切換成合併偵測部106，將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部310。
從輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效，導出2個相鄰區塊(S105)。圖43係圖示與處理對象之預測區塊位於相同圖像的每一相鄰區塊的判定處理的詳細流程。
首先，將表示已被選擇之相鄰區塊的變數F設定成S0，將計數器k設定成0(S1600)。表示已被選擇之相鄰區塊的變數F的S0係表示最初被選出的第1候補之相鄰區塊，S1係表示第2個被選出的第2候補之相鄰區塊。
接著，將表示處理中之相鄰區塊的變數N，初期化成A1(S1601)。表示處理中之相鄰區塊的變數N係按照A1,B1,B0,A0,C0的處理順序而被設定，N更新時係按照此一順序而被更新。
接著，將儲存著以後的判定中所使用的相鄰區塊之編碼資訊的變數，予以初期化(S1602)。此處，變數係為表示相鄰區塊是否有效的旗標availableFlagF、運動向量mvLXF、參照圖像號碼refIdxLXF及表示預測方向之有效性的旗標predFlagLXF，係被初期化如下。
availableFlagF=0
mvLXF=(0,0)
refIdxLXF=0
predFlagLXF=0
此處，附加字X係被設定為表示預測方向的0或1。將表示處理中之相鄰區塊的變數N的相鄰區塊(以下稱作相鄰區塊N)之位置及編碼資訊，加以取得(S1603)。
基於已被取得的相鄰區塊N之位置，來判定相鄰區塊N是否有效(S1604)。例如，當處理對象之預測區塊是在圖像左端位置時，由於處理對象之預測區塊沒有左邊相鄰區塊存在，因此編碼資訊儲存記憶體114之中該當之編碼資訊就係不存在，因而判定為無效。
相鄰區塊N為無效時(S1604的N)，將availableFlagF設定成“0”(S1613)。若相鄰區塊N為有效時(S1604的Y)，則判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S1605)，若相鄰區塊N的預測模式是Intra模式時(S1605的Y)，則將availableFlagF設定成“0”(S1613)。
若相鄰區塊N的預測模式並非Intra模式時(S1605的N)，亦即Inter模式時，則進入F是否為S0之判定(S1606)，若F為S0(S1606的Y)，則將availableFlagF(availableFlagS0)設定成1(S1608)。
若F非S0(S1606的N)，則判定已被選擇之相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊是否相同 (S1607)。若已被選擇之相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊為相同(S1607的Y)，則將availableFlagF設定成“0”(S1613)。
具體而言，若將空間相鄰區塊的最大數設成2，則將最初被選擇成為第1候補的編碼資訊加以保持，並使用於第2候補的選出之際的比較判定中。藉由該處理，第2候補之相鄰區塊之編碼資訊就不會與代表的第1候補之相鄰區塊之編碼資訊重複，因此可將較多的候補，選擇來作為參照目標。此外，為了削減處理量，還可以省略步驟S1606及步驟S1607之處理，直接前進至步驟S1608。
若已被選擇來作為第1候補的相鄰區塊之編碼資訊與相鄰區塊N的編碼資訊為不同(S1607的N)，則將availableFlagF(availableFlagS1)設定成“1”(S1608)。接著，將相鄰區塊N的編碼資訊，代入至refIdxLXF、mvLXF及predFlagLXF而設定之(S1609)。
接著，將計數器k加算1而更新之(S1610)，判定計數器k是否比空間候補之最大候補數的2還小(S1611)。若計數器k是空間候補之最大候補數的2(S1611的Y)，則將表示已被選擇之空間相鄰區塊之候補數的變數NumListCand設定成k(S1616)，結束處理。
將availableFlagF設定成“0”的情況下(S1613)，判定相鄰區塊N是否為相鄰區塊的最後(S1614)。又，若k是小於空間候補之最大候補數的2(S1611的N)， 則將F更新成S1(S1612)，判定相鄰區塊N是否為相鄰區塊的最後(S1614)。變數N之更新係隨應於上述A1,B1,B0,A0,C0的處理順序而被設定，此處係進行N是否為C0之判定。
若相鄰區塊N是最後區塊(S1614的Y)，則將表示已被選擇之空間相鄰區塊之候補數的變數NumListCand設定成k(S1616)，結束處理。若相鄰區塊N非最後區塊(S1614的N)，則將變數N隨應於A1,B1,B0,A0,C0的處理順序而更新(S1615)，重複步驟S1602以後之處理。如以上所述，將存在於與處理對象之預測區塊同一圖像上的區塊群的相鄰區塊視為代表的2個參照區塊，而導出各自的編碼資訊。
回到圖42，接續於步驟S105，決定出將不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊當作候補時的處理對象之預測區塊的參照圖像號碼(S104)。此步驟S104之處理，係和實施例1、2的步驟S104相同。接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S102)。此實施例4的步驟S102之處理，也是和實施例1、2的步驟S102相同。
如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部311。在實施例4中也是和實施例2同樣地，作為對參照候補清單儲存記憶體314登錄參照相鄰區塊的編碼資訊之候補的記憶領域，設有參照候補清單。對 參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補。藉此，削減參照候補清單之索引merge_idx的編碼量。
參照候補清單作成部311係進行和圖19的流程圖中所示的實施例1、2相同的動作。但是，實施例4的變數F之值，是視為圖19的變數N之值來進行設定而動作。空間第1候補相鄰區塊S0、空間第2候補相鄰區塊S1、及不同時間之另一圖像的同一位置所相鄰之區塊T的有效旗標availableFlagN(此處N係為S0,S1,T)之判定會被進行，將相鄰區塊之編碼資訊，登錄至參照候補清單candList。此處，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例4中，是以相同時間的第1候補、相同時間的第2候補、不同時間的相同順序(S0,S1,T)之順序，來做設定。
和實施例1、2同樣地，已被作成的參照候補清單，係在同一資訊偵測部312中將同一編碼資訊的參照候補清單中所儲存之編碼資訊予以刪除，將輸出部313所作成的參照候補清單之中的索引與編碼資訊予以輸出。參照候補清單，係將參照候補清單當作合併清單，將清單中的索引當作合併索引，而予以輸出。在動態影像編碼裝置100中，係被輸出至運動補償預測部105與預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例 4的合併偵測部106所對應的，被設置在動態影像解碼裝置200中的實施例4的合併判定部206。合併偵測部206係和實施例2的圖22相同構成，編碼資訊導出部310之處理是和實施例2不同。其他的參照候補清單作成部311、同一資訊偵測部312、參照候補清單儲存記憶體314及選擇部315係和實施例2具備相同機能。
又，合併判定部206的編碼資訊導出部310係和上述實施例4中的合併偵測部106的編碼資訊導出部310具備相同機能，合併判定部206的參照候補清單作成部311係和上述實施例4中的合併偵測部106的參照候補清單作成部311具備相同機能，合併判定部206的同一資訊偵測部312係和上述實施例4中的合併偵測部106的同一資訊偵測部312具備相同機能，因此以合併判定部206的同一資訊偵測部312為止的處理，作成和實施例4的合併偵測部106相同的參照候補清單。
和實施例2同樣地，在選擇部315中，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。將所選擇之編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
接著，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例4的運動向量預測部103。運動向量預測部103係和實施例2的圖23相同構成，但編碼資 訊導出部320之處理係和實施例2不同，因此針對實施例4中的編碼資訊導出部320之動作加以說明。圖44係實施例4中的編碼資訊導出部320之動作的流程圖。
首先，藉由被輸入至開關108的受動態影像編碼裝置100所控制之預測模式，將畫面間預測資訊偵測部104的輸出目標，切換成運動向量預測部103。將畫面間預測資訊偵測部104之內部的暫時記憶體303中所記憶之處理對象之預測區塊所參照的參照相鄰區塊的編碼資訊，輸入至編碼資訊導出部320。
從輸入的相鄰區塊之中，判定與處理對象之預測區塊位於相同圖像之相鄰區塊之編碼資訊是否為有效，導出2個相鄰區塊(S803)。圖45係圖示與處理對象之預測區塊位於相同圖像的每一相鄰區塊的判定處理的詳細流程。將圖45所示之處理隨應於處理對象的區塊的預測模式，針對L0預測而進行之、針對L1預測而進行之、L0預測與L1預測之雙預測時則分別進行之。
首先，將空間候補索引F設定成S0，將計數器k設定成0(S1700)。空間候補索引F的S0係表示最初被選出的第1候補之相鄰區塊，S1係表示第2個被選出的第2候補之相鄰區塊。
接著，將區塊群之中的變數N予以初期化成A1(S1701)。表示處理中之相鄰區塊的變數N係按照B0,A0,A1,B1,C0的處理順序而被設定，N更新時係按照此一順序而被更新。
接著，將儲存著以後的判定中所使用的相鄰區塊之編碼資訊的變數，予以初期化(S1702)。此處，變數係為表示相鄰區塊是否有效的旗標availableFlagF、運動向量mvLXF、參照圖像號碼refIdxLXF及表示預測方向之有效性的旗標predFlagLXF，係被初期化如下。
availableFlagLXF=0
mvLXF=(0,0)
refIdxLXF=0
predFlagLXF=0
此處，附加字X係被設定為表示預測方向的0或1。將表示處理中之相鄰區塊的變數N的相鄰區塊(以下稱作相鄰區塊N)之位置及編碼資訊，加以取得(S1703)。
基於已被取得的相鄰區塊N之位置，來判定相鄰區塊N是否有效(S1704)。例如，當處理對象之預測區塊是在圖像左端位置時，由於處理對象之預測區塊沒有左邊相鄰區塊存在，因此編碼資訊儲存記憶體114之中該當之編碼資訊就係不存在，因而判定為無效。
相鄰區塊N為無效時(S1704的N)，將availableFlagLXF設定成“0”(S1715)。若相鄰區塊N為有效時(S1704的Y)，則判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S1705)，若相鄰區塊N的預測模式是Intra模式時(S1705的Y)，則將availableFlagLXF設定成“0”(S1715)。
若相鄰區塊N的預測模式並非Intra模式時(S1705 的N)，亦即Inter模式時，則將處理對象之預測區塊的算出對象之預測和相鄰區塊N的編碼資訊進行比較，進行條件1至4的判定處理(S1709)。若滿足條件1或條件2時，則進入F是否為S0的判定處理(S1706)。另一方面，若滿足條件3或4，則和實施例2的圖39之S912同樣地實施相鄰區塊N的運動向量的比例縮放處理(S1710)，進入F是否為S0的判定處理(S1706)。
若F為S0(S1706的Y)，則將availableFlagLXF(availableFlagLXS0)設定成1(S1708)。若F非S0(S1706的N)，則判定已被選擇之相鄰區塊之運動向量、和相鄰區塊N之運動向量或相鄰區塊N之運動向量被比例縮放而成之運動向量mvLXN，是否為相同(S1707)。
若已被選擇之相鄰區塊之運動向量和相鄰區塊N之運動向量為相同(S1707的Y)，則將availableFlagLXF設定成“0”(S1715)。具體而言，若將空間相鄰區塊的最大數設成2，則將最初被選擇成為第1候補的運動向量加以保持，並使用於第2候補的選出之際的比較判定中。藉由該處理，第2候補之相鄰區塊之編碼資訊就不會與代表的第1候補之相鄰區塊之運動向量重複，因此作為參照目標的選擇幅度係變廣。此外，為了削減處理量，亦可以省略步驟S1706及步驟S1707之處理，直接前進至步驟S1708，將availableFlagLXF(availableFlagLXS1)設定成“1”(S1708)。
若已被選擇來作為第1候補的相鄰區塊之運動向量mvLXS0與相鄰區塊N的運動向量mvLXN為不同(S1707的N)，則將availableFlagLXF(availableFlagLXS1)設定成“1”(S1708)。相鄰區塊N的相同參照清單(符合條件1時)的運動向量mvLX或不同參照清單(符合條件2時)的運動向量mvLY，或相同參照清單(符合條件3時)的藉由比例縮放而被換算過的運動向量mvLX或不同參照清單(符合條件4時)的藉由比例縮放而被換算過運動向量mvLY，被設定代入至mvLXM(S1711)。
將計數器k加算1而更新之(S1712)，判定計數器k是否比空間候補之最大候補數的2還小(S1713)。若計數器k是空間候補之最大候補數的2(S1713的N)，則將表示已被選擇之空間相鄰區塊之候補數的變數NumListCand設定成k(S1718)，結束處理。
將availableFlagF設定成“0”的情況下(S1715)，判定相鄰區塊N是否為相鄰區塊的最後(S1716)。又，若k是小於空間候補之最大候補數的2(S1713的Y)，則將F更新成S1(S1714)，判定相鄰區塊N是否為相鄰區塊的最後(S1716)。
變數N之更新係隨應於上述B0,A0,A1,B1,C0的處理順序而被設定，此處係進行N是否為C0之判定。若相鄰區塊N是最後區塊(S1716的Y)，則將表示已被選擇之空間相鄰區塊之候補數的變數NumListCand設定成k(S1718)，結束處理。若相鄰區塊N非最後區塊 (S1716的N)，則將變數N隨應於B0,A0,A1,B1,C0的處理順序而更新(S1717)，重複步驟S1702以後之處理。如以上所述，將存在於與處理對象之預測區塊同一圖像上的區塊群的相鄰區塊視為代表之參照區塊，而導出其編碼資訊。
回到圖44，接著，判定不同時間之另一圖像的同一位置所相鄰之區塊的編碼資訊是否為有效，並導出之(S801)。此實施例4的S801之處理，也是和實施例1的S801相同，因此省略說明。
如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部321。作為參照候補清單作成部321所作成的參照候補清單，係隨應於預測模式(L0預測、L1預測、雙預測)，對L0預測及L1預測之2個預測方向的其中一方，或其雙方，作成各自的參照候補清單。在本說明書中，若無特別注釋，則運動偵測模式時的參照候補清單係為了說明上方便而僅舉例1個來說明，圖示的參照候補清單也只舉1個例子。
在實施例4中，在參照候補清單儲存記憶體324中，作為登錄參照相鄰區塊的編碼資訊之候補的記憶領域，設有參照候補清單。然後，對參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單儲存記憶體324，登錄參照相鄰區塊的編碼資訊之候補。藉此，就可削減參照候補清單之索引mvp_idx_l0及mvp_idx_l1的編碼量。
藉由將優先順位較高的要素配置在參照候補清單的前方，以削減編碼量。表示優先順位的索引係從0起以上升順序而分配。被設在參照候補清單儲存記憶體324中的參照候補清單，係形成清單結構，設有數列領域，將用來表示參照清單內部之所在的索引、和對應於索引的參照相鄰區塊的編碼資訊之候補，當作要素而儲存。此數列領域係以candListLX來表示。索引的數字是從0開始，在參照候補清單candListLX的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。
在以下的處理中，參照候補清單candListLX中所被登錄之索引i的編碼資訊，係以candListLX[i]來表示，與參照候補清單candListLX係藉由數列標示來做區別。此外，參照候補清單的記憶領域中所儲存的編碼資訊，在沒有特別聲明的情況下，係以參照相鄰區塊的位置名(A0,A1,B0,B1,C0,T)來表示。
參照候補清單作成部321係進行和圖19的流程圖中所示的實施例1、2相同的動作。但是，實施例4的變數F之值，是視為圖19的變數N之值來進行設定而動作。空間第1候補相鄰區塊S0、空間第2候補相鄰區塊S1、及不同時間之另一圖像的同一位置所相鄰之區塊的有效旗標availableFlagLXN(此處N係為S0,S1,T)之判定會被進行，將相鄰區塊之編碼資訊，登錄至參照候補清單candListLX。此處，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例4中，是 設定相同時間的第1候補、相同時間的第2候補、不同時間的相同順序(S0,S1,T)。
和實施例1、2同樣地，已被作成的參照候補清單，係在同一資訊偵測部322中將同一編碼資訊的參照候補清單中所儲存之編碼資訊予以刪除，將差分運動向量算出部326所作成的參照候補清單之中的編碼資訊的運動向量，當作預測運動向量。根據運動向量偵測部102所測出之運動向量與預測運動向量，算出差分運動向量，將所算出之差分運動向量，供給至輸出部323。
最後，將輸出部323所作成的參照候補清單之中的索引與差分運動向量，予以輸出。參照候補清單，係將參照候補清單當作MVP清單，將清單中的索引當作MVP索引而予以輸出。在動態影像編碼裝置100中，輸出至預測方法決定部107。
說明上述被設置在動態影像編碼裝置100中的實施例4的運動向量預測部103所對應的，被設置在動態影像解碼裝置200中的實施例4的運動向量算出部204。運動向量算出部204係和實施例2的圖30相同構成，編碼資訊導出部320之處理是和實施例2不同。其他的參照候補清單作成部321、同一資訊偵測部322、參照候補清單儲存記憶體324、選擇部325及運動向量加算部327係和實施例2具備相同機能。
又，編碼資訊導出部320係具備與上述實施例2之運動向量預測部103的編碼資訊導出部320相同機能，合併 判定部206的參照候補清單作成部311係和上述實施例4中的合併偵測部106的參照候補清單作成部311具備相同機能，合併判定部206的同一資訊偵測部312係和上述實施例4中的合併偵測部106的同一資訊偵測部312具備相同機能，因此以運動向量算出部204的同一資訊偵測部322為止的處理，作成和實施例4的運動向量預測部103相同的參照候補清單。
和實施例2同樣地，選擇部325係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。從被選擇之參照候補清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在運動向量加算部327中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量進行加算，算出運動向量，供給至運動補償預測部207，並且將已被選擇之清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
此外，在實施例4中，雖然是將2個相鄰區塊，當成相鄰區塊的代表而加以選出，但亦可合併模式、運動偵測模式分別選出1個或3個以上之相鄰區塊來作為代表。但是，是以不會超過區塊群之中的區塊數之範圍來做設定。此外，本發明之說明所使用的圖9之配置，代表數最大為6個。合併模式時，代表數若設定成6個，就和實施例1等價。在運動偵測模式下係將2個空間相鄰區塊當作代 表，在合併模式下係將3個以上之空間相鄰區塊當作代表等等，藉由使合併模式會比運動偵測模式以更多的空間相鄰區塊來作為代表，可獲得以下的效果。
亦即，在合併模式中，直接使用參照相鄰區塊之候補的編碼資訊，進行影像間預測，因此為了保留選擇的餘地，將比運動偵測模式還多的候補，登錄至清單中。這是因為，合併模式係相較於運動偵測模式，可將較多的資訊(運動向量、參照索引、預測方向)以少少的編碼量就能加以傳輸，因此與其削減合併索引的編碼量，不如留下相鄰區塊之候補而擴展選擇之幅度，反而能夠提升編碼效率。
另一方面，在運動偵測模式中，係並非直接使用參照相鄰區塊之候補的編碼資訊，將差分運動向量當作首次編碼資訊而予以編碼，因此較合併模式更為縮減候補而登錄至清單中。這是因為，與其縮減候補，不如削減MVP索引之編碼量，反而較能提升編碼效率。
合併模式下，若選出3個以上之空間相鄰區塊來作為代表，則在圖43的步驟S1607中，判定所有已被選擇之各個相鄰區塊之編碼資訊、和相鄰區塊N的編碼資訊，是否相同。在運動偵測模式下，若選出3個以上之空間相鄰區塊來作為代表，則在圖45的步驟S1707中，判定所有已被選擇之各個相鄰區塊之運動向量、和相鄰區塊N之運動向量或相鄰區塊N之運動向量被比例縮放而成之運動向量mvLXN，是否為相同。
合併模式的情況下係亦可使用實施例4的手法，運動偵測模式的情況下係亦可使用其他實施例的手法。同樣地，運動偵測模式的情況下係亦可使用實施例4的手法，合併模式的情況下係亦可使用其他實施例的手法。尤其是，合併模式的情況下使用實施例1的手法，運動偵測模式的情況下使用實施例4的手法的情況下，可獲得和實施例3同樣的效果。
亦即，在合併模式中，直接使用參照相鄰區塊之候補的編碼資訊，進行影像間預測，因此為了保留選擇的餘地，將比運動偵測模式還多的候補，登錄至清單中。這是因為，合併模式係相較於運動偵測模式，可將較多的資訊(運動向量、參照索引、預測方向)以少少的編碼量就能加以傳輸，因此與其削減合併索引的編碼量，不如儘可能留下相鄰區塊之候補，因為儘可能增加運動資訊之候補，是可對編碼效率提升有所貢獻。
另一方面，在運動偵測模式中，係並非直接使用參照相鄰區塊之候補的編碼資訊，將差分運動向量當作首次編碼資訊而予以編碼，因此進行掃描而縮減候補然後登錄至清單。這是因為，運動偵測模式之候補係只被使用於預測向量，因此即使留下較多相鄰區塊之候補，在候補間登錄相近的運動向量仍無法減少差分運動向量的編碼量，只會增加MVP索引的編碼量。因此，藉由縮減登錄在清單中的候補，削減MVP索引之編碼量，可對編碼效率提升有所貢獻。
由於可以合併模式、運動偵測模式均可僅使用表示相鄰區塊是否可以當作參照目標候補而利用的資訊來決定登錄至清單中的候補，因此不需要進行複雜的判定，針對合併模式、運動偵測模式，可分別登錄最佳之候補至清單中。
甚至，實施例4係僅將不同時間之另一圖像的同一位置所相鄰之區塊做特別對待而登錄在參照候補清單的最後。位於相同圖像上的相鄰區塊彼此具有相同編碼資訊的可能性很高，不同時間之另一圖像的同一位置所相鄰之區塊係帶有與它們不同之編碼資訊的可能性很高，因此可以說，另外當作候補而進行登錄的效果較高。例如，位於相同圖像上的相鄰區塊全部都是畫面內的情況下，不同時間之另一圖像的同一位置所相鄰之區塊具有畫面間預測之編碼資訊的可能性仍很高。只不過，不同時間之另一圖像的同一位置所相鄰之區塊，係相較於與處理對象之預測區塊位於相同圖像上的相鄰區塊，處理對象之預測區塊與編碼資訊相等或相近的可能性很低，因此降低優先順位。
(實施例5)
說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例5的合併偵測部106。合併偵測部106係和實施例1中所說明的圖11相同構成，但參照候補清單作成部311之處理係和實施例1不同，因此針對實施例5中的合併偵測部106的參照候補清單作成部311之動作加 以說明。參照候補清單作成部311，係在參照候補清單儲存記憶體314中，設有參照候補清單來作為用來登錄參照相鄰區塊的編碼資訊之候補的記憶領域，對參照相鄰區塊的編碼資訊之候補標上優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補。藉此，削減參照候補清單之索引merge_idx的編碼量。
藉由將優先順位較高的要素配置在參照候補清單的前方，以削減編碼量。表示優先順位的索引係從0起以上升順序而分配。此處，在合併模式的情況下，是設定了順序(A1,B1,B0,A0,C0,T)。在合併模式的情況下，係將處理對象之預測區塊的邊、和被認為編碼資訊最可能相等之處理對象之預測區塊的邊是彼此銜接的相鄰區塊A1及B1，優先登錄在清單的前方，藉此以削減合併索引的編碼量，提升編碼效率。
被設在參照候補清單儲存記憶體314中的參照候補清單，係形成清單結構，設有數列領域，將用來表示參照清單內部之所在的索引、和對應於索引的參照相鄰區塊的編碼資訊之候補，當作要素而儲存。此數列領域係以candList來表示。索引的數字是從0開始，在參照候補清單candList的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。在以下的處理中，參照候補清單candList中所被登錄之索引i的編碼資訊，係以candList[i]來表示，與參照候補清單candList係藉由數列標示來做區別。此外，參照候補清單的記憶領域中所儲存的編碼資訊，在沒有特 別聲明的情況下，係以參照相鄰區塊的位置名(A0,A1,B0,B1,C0,T)來表示。
圖46係實施例5中的參照候補清單作成部311之動作的流程圖。在實施例5中，在參照候補清單作成前，從圖31(a)所示之相鄰區塊之中，分類成左側及上側的區塊群，設定各個區塊群的參照相鄰區塊的個數NA及NB。此處，左側區塊群的相鄰區塊係為A0、A1，上側區塊群的相鄰區塊係為B0、B1、C0，將NA及NB均設定成1。亦即，從這些區塊群中選擇出1個相鄰區塊的意思。此外，NA及NB係不超過各個區塊群之中的相鄰區塊總數。
首先，將變數N與參照候補清單之索引k予以初期化(S1200)。對變數N係初期設定了對應於預測模式的最高優先順位的相鄰區塊。在合併模式下係為A1，在運動偵測模式下係為A0。k係被設定成0。索引k係表示，參照候補清單之記憶領域中所被設定之編碼資訊之候補的儲存領域的優先順位。
接著，將左側及上側的區塊群的計數器na及nb予以初期化成0(S1201)。首先判定，相鄰區塊N是否為隸屬於左側或上側區塊群的相鄰區塊(S1202)。若不屬於(S1202的N)，則前進至步驟S1206，若屬於(S1202的Y)，則判定是隸屬於左側或上側之哪一區塊群中(S1203)。
若為左側，則進入計數器na與NA之比較 (S1204)，若na小於NA(S1204的Y)，則前進至步驟S1206，若非如此時(S1204的N)，則進至步驟S1210。若為上側，則進入計數器nb與NB之比較(S1205)，若nb小於NB(S1205的Y)，則前進至步驟S1206，若非如此時(S1205的N)，則進至步驟S1210。
若na及nb是NA及NB以上時，則表示在各區塊群中超過了對參照候補清單所選出的相鄰區塊數，此情況下，不判定是否登錄至參照候補清單，不做登錄。
進行相鄰區塊N的有效旗標availableFlagN之判定(S1206)。若availableFlagN為1時(S1206的Y)，則將相鄰區塊N的編碼資訊登錄至參照候補清單candListLX[k](S1207)，將k予以更新(S1208)。然後，若相鄰區塊N是隸屬於左側或上側區塊群中，則將計數器na或nb予以更新(S1209)。若availableFlagN為0時(S1206的N)，則不登錄至參照候補清單，進入步驟S1210。
判定相鄰區塊N是否為最後的參照區塊(S1210)。若為最後的區塊(S1210的Y)，則將索引之值設定至候補清單總數NumListCand後(S1211)，結束處理。若非最後的區塊(S1210的Y)，則將變數N予以更新(S1212)，重複步驟S1202以後之處理。
藉由以上的處理，就被登錄至參照候補清單中。此處，被登錄至參照候補清單的最大數係以NA+NB+1來 表示。會對最初設定之NA與NB加算1個不同時間的候補，此處係NA,NB均設為1，因此最大係為3。當參照相鄰區塊只有1個是有效時，則最大碼字長度係為0，因此不需要碼字，僅1個被判定為有效的相鄰區塊之編碼資訊之候補會被唯一決定成為參照目標。
在上記的處理中，例如相鄰區塊A1的有效旗標availableFlagA1為0時，優先順位係為A1,B1,B0,A0,C0,T，因此參照候補清單中係按照優先順序而登錄B1,A0,T。若以和實施例2相同之條件來進行處理，則為A0,B1,T。實施例5則是保持原本的優先順位，將處理對象之預測區塊和被認為編碼資訊最可能相等之相鄰區塊，優先登錄在參照候補清單的前方，藉此而削減索引的編碼量，提升編碼效率。
又，此情況下，代表左側及上側相鄰之區塊群的相鄰區塊及不同時間之另一圖像的同一位置所相鄰之區塊這3個相鄰區塊會被登錄至參照候補清單，參照相鄰區塊的總數可較實施例1更為削減，因此可縮短所分配之碼字長度，可改善編碼效率。
說明上述被設置在動態影像編碼裝置100中的實施例5的合併偵測部106所對應的，被設置在動態影像解碼裝置200中的實施例5的合併判定部206。合併偵測部206係和實施例1中所說明的圖22相同構成，參照候補清單作成部311之處理是和實施例1不同。其他的編碼資訊導出部310、同一資訊偵測部312、參照候補清單儲存記憶 體314及選擇部315係和實施例1具備相同機能。
又，參照候補清單作成部311係和上述實施例5中的合併偵測部106的參照候補清單作成部311具備相同機能，因此以合併判定部206的同一資訊偵測部312為止的處理，作成和實施例5的合併偵測部106相同的參照候補清單。
說明從所作成的參照候補清單中，取得合併模式下的參照相鄰區塊的編碼資訊的選擇部315。選擇部315，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。將所選擇之編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
接著，說明表示本發明之動態影像編碼裝置100之構成的圖2之中所被設置的實施例5的運動向量預測部103。運動向量預測部103係和實施例1中所說明的圖23相同構成，但參照候補清單作成部321之處理是和實施例1不同。參照候補清單作成部321基本上是具備和合併偵測部106的參照候補清單作成部311相同機能，因此判定參照相鄰區塊的編碼資訊之候補是否有效，登錄至參照候補清單的動作係為相同，所以省略說明。
參照候補清單作成部321與合併偵測部106的參照候補清單作成部311不同處在於，在設於參照候補清單儲存記憶體324內的參照候補清單，登錄參照相鄰區塊的編碼 資訊之候補時的優先順位。若為運動偵測模式下，則在參照候補清單作成部321中，係被設定成A0,B0,A1,B1,C0,T之順序。
運動偵測模式，係用來傳輸差分運動向量的模式，為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊之候補的運動向量的差較大的方式，將左側與上側候補間的距離加大而做登錄，藉此以削減差分運動向量之編碼量，提升編碼效率。該運動偵測模式下的優先順位之決定方法，係與儘可能將同一編碼資訊之機率高的相鄰區塊優先當作候補而加以登錄的合併模式，目的不同。如以上所述，藉由標上優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補，以削減參照候補清單之索引mvp_idx_l0及mvp_idx_l1的編碼量。
對應於上述被設置在動態影像編碼裝置100中的實施例5的運動向量預測部103，被設置在動態影像解碼裝置200中的實施例5的運動向量算出部204也是，運動向量算出部204的參照候補清單作成部321，係具備與對應之運動向量預測部103的參照候補清單作成部321相同機能，因此會作成和運動向量預測部103相同的參照候補清單。
說明從所作成的參照候補清單中，在運動偵測模式下取得參照相鄰區塊的編碼資訊的選擇部325。選擇部325，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的 索引所指定的清單的相鄰區塊，加以選擇。從被選擇之清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在運動向量加算部327中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量進行加算，算出運動向量，供給至運動補償預測部207，並且將已被選擇之清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
此外，在實施例5中，雖然將NA及NB均設定成1，但亦可設定不會超過各個區塊群的相鄰區塊總數的數目，甚至，亦可隨預測模式而分別變更設定。
(實施例6)
在實施例6中，定義與實施例2不同的參照相鄰區塊之區塊群，從其中選擇出1個代表相鄰區塊的方法是有所改變。使用圖31(a)的相鄰區塊的配置來說明。將圖31(a)中所配置的6個相鄰區塊A0,A1,B0,B1,C0,T，令A1為左側相鄰的代表區塊，令B1為上側相鄰的代表區塊，將不同時間之另一圖像的同一位置所相鄰之區塊T、處理對象之預測區塊之角落位置的相鄰區塊A0,B0和C0，視為角落相鄰之區塊群。從該區塊群之中，選擇出1個來作為代表的相鄰區塊。從左側、上側、不同時間及角落的4個相鄰區塊中，選擇出1個相鄰區塊之編碼資訊來作為參照目標。
處理對象之預測區塊的邊、和被認為編碼資訊最可能 相等的處理對象之預測區塊的邊有所銜接的相鄰區塊A1及B1，優先登錄在參照候補清單的前方，將相對可能性較低的角落的3個相鄰區塊予以群組化，削減索引的編碼量，提升編碼效率，因此是在合併模式時尤其有效的手法。
被設置在動態影像編碼裝置100中的實施例6的合併偵測部106，和被設置在對應之動態影像解碼裝置200中的實施例6的合併判定部206的參照候補清單作成部311，以及被設置在動態影像編碼裝置100中的實施例6的運動向量預測部103，被設置在對應之動態影像解碼裝置200中的實施例6的運動向量算出部204的參照候補清單作成部321之中，將處理對象之預測區塊之角落位置的相鄰區塊A0,B0和C0，定義成角落相鄰之區塊群。以A1,B1,(B0,A0,C0),T之順序來設定優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補，以削減參照候補清單之索引的編碼量。此處，參照候補清單內部的括弧，係從左側或上側之相鄰區塊群之中，以括弧內的左而右之順序而被處理，將所被選擇的1個相鄰區塊加以表示。
在參照候補清單作成部311及321中，作為從角落相鄰區塊群選擇代表相鄰區塊的方式，例如，如實施例2所說明，是將區塊群之中的相鄰區塊，以預先決定之處理順序，進行掃描。亦可判定是否滿足相鄰區塊為有效、且非Intra模式此一條件，將滿足此條件的最初之相鄰區塊加 以選擇。此處，雖然將處理順序設成B0,A0,C0，但並不一定要為此一順序。又，亦可進行角落相鄰區塊群之中的相鄰區塊B0,A0,C0之編碼資訊的比較，選擇具備同一編碼資訊的相鄰區塊。亦即，在區塊群之中進行多數決，在具備同一編碼資訊的相鄰區塊當中，以處理順序B0,A0,C0而將先出現者選擇成相鄰區塊。實施例6中所作成的參照候補清單，係若全部參照相鄰區塊都有效時，則如圖47所表示。
(實施例7)
實施例7，係限制參照候補清單中所被登錄的參照相鄰區塊的數目。實施例1、3(實施例係為合併模式的情形)的參照候補清單中所登錄的參照相鄰區塊數，係若為圖9(a)或圖31(a)之相鄰區塊的配置時，則最大會存在有6個。若從其中選擇出相鄰區塊，則索引最大需要5位元的編碼量，因此難謂提升編碼效率。於是限定成，僅使用和實施例2、4等同樣被作成之參照候補清單之中的上位之相鄰區塊之編碼資訊。
首先，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例7的合併偵測部106。圖48係圖示了，對圖11所示的實施例1的動態影像編碼裝置100的合併偵測部106，追加了參照候補制限部318而成的合併偵測部106之構成。圖48所示各部係具備和圖11所示各部相同之機能，因此這裡僅說明參照候補制限部318的 機能。
參照候補制限部318係被輸入著，在同一資訊偵測部312中已經從參照候補清單裡把具備同一編碼資訊之參照相鄰區塊予以刪除過的參照候補清單。參照候補制限部318係判定，從參照候補清單之中，是否把所設定之限制數量份的索引上位之相鄰區塊留下，其他則刪除或不選擇之。例如，對於表示實施例1中沒有同一編碼資訊存在時的參照候補清單之一例的圖20，若在合併模式下限制成3個，則將索引0至2的上位3個相鄰區塊當作參照候補，其餘就不使用因此排除在參照候補的對象之外。
如以上所述，相鄰區塊會被限制而登錄至參照候補清單中作為參照候補，參照相鄰區塊的總數可較實施例1更為削減，因此可縮短所分配之碼字長度，可改善編碼效率。又，由於鎖定參照候補清單的優先順位高的相鄰區塊而加以限制，因此可抑制編碼效率的降低。參照候補清單的限制數，係可在例如SPS(Sequence Parameter Set)或Slice Header這類標頭資訊中，設定限制數。又，亦可在編碼側與解碼側上設定成為默認性條件，只要不讓編碼側與解碼側上產生矛盾即可，方法沒有限制。又，亦可隨著預測模式來分別設定限制數。甚至，亦可基於處理對象之預測區塊所參照之已編碼或已解碼之相鄰區塊之編碼資訊，來適應性變更參照候補清單的限制數。
如以上所述，雖然說明了，藉由在同一資訊偵測部312之正後方設置參照候補制限部318以限制參照候補的 手法，但即使不把參照候補制限部318設在合併偵測部106中，而是讓同一資訊偵測部312中具備參照候補制限部318的機能，也可獲得同等效果。此情況下，在同一資訊偵測部312中，係比較參照候補清單之中所儲存的編碼資訊之候補，若有相同編碼資訊之候補存在時，則將帶有最小之參照候補清單之索引的編碼資訊之候補以外全部刪除，並且，將帶有最小之參照候補清單之索引的編碼資訊之候補，再次登錄至參照候補清單，若其登錄數達到限制數時就結束處理。
圖49係實施例7中的同一資訊偵測部312之動作的流程圖，對進行實施例1的圖21所示之動作的同一資訊偵測部312，追加實施例7的參照候補限制機能。對圖21之流程圖，新追加步驟S710至步驟S712之處理步驟，說明這些追加的處理。
在表示參照候補清單之索引的變數n與m的設定後，將表示刪除清單中所記錄之參照候補清單之候補數的計數器s設定成0(S710)。接著，在步驟S702中，判定m是否已經被記錄在刪除清單中，若m未被記錄在刪除清單中(S702的N)，則將m記錄至刪除清單，並且對計數器s加算1而更新之(S711)。
接著判定s是否等於閾值TH(S712)。此處，閾值TH係表示，候補清單總數NumListCand減去限制數而成的數。亦即表示，在參照候補清單中留下限制數之候補，表示被記錄在刪除清單中的候補數之最大數。若s等於 TH(S712的Y)，則參照候補清單中會留下限制數份之候補，因此結束同一資訊判定之處理，前進至步驟S708，將刪除清單中所記錄之索引所該當之清單的儲存領域的編碼資訊，予以刪除，以索引0為基準，以索引較小的候補之順序進行縮略，更新碼字而結束。此外，參照候補清單之總數NumListCand係被更新成限制數。
又，亦可將參照候補制限部318設在同一資訊偵測部312的正前方。此情況下，由於將參照候補清單作成部311所作成的參照候補清單之中的參照候補加以限制以縮減候補數，因此同一資訊偵測部312中偵測同一資訊的最大次數會被削減，因此具有削減處理量之效果。
圖50係圖示了，以圖11所示的實施例1的動態影像編碼裝置100的合併偵測部106為基礎，追加了實施例7的參照候補制限部318而成的合併偵測部106之構成。圖50所示各部係具備和圖11所示各部相同之機能。與上述圖48之構成只有參照候補制限部318的位置不同，參照候補制限部318的動作係也相同。參照候補制限部318係判定，從參照候補清單作成部311所作成的參照候補清單之中，是否把所設定之限制數量份的索引上位之相鄰區塊留下，其他則刪除或不選擇之。
如以上所述，雖然說明了，藉由在同一資訊偵測部312之正前方設置參照候補制限部318以限制參照候補的手法，但即使不把參照候補制限部318設在合併偵測部106中，而是讓參照候補清單作成部311中具備參照候補 制限部318的機能，也可獲得同等效果。此情況下，在參照候補清單作成部311中，係將編碼資訊導出部310所導出的參照相鄰區塊的編碼資訊，登錄至參照候補清單，並且將已被登錄在參照候補清單中的參照相鄰區塊之數目予以計數，該數目若達到限制數則結束處理。
圖51係實施例7中的參照候補清單作成部311之動作的流程圖，對進行實施例1的圖19所示之動作的參照候補清單作成部311，追加實施例7的參照候補限制機能。對圖19之流程圖，新追加步驟S607之處理步驟，說明該追加的處理。
首先，將變數N與參照候補清單之索引k予以初期化(S600)。索引k係表示，參照候補清單之記憶領域中所被設定之編碼資訊之候補的儲存領域的優先順位。
接著，進行參照相鄰區塊N的有效旗標availableFlagN之判定(S601)，若availableFlagN為1時(S601的Y)，則將相鄰區塊N的編碼資訊登錄至參照候補清單(S602)，將k予以更新(S603)。
接著進行k是否達到限制數之判定(S607)。若k未達限制數(S607的N)，則由於參照候補清單中尚未登錄限制數份的編碼資訊，因此前進至步驟S604。若k達到限制數(S607的Y)，則由於參照候補清單中已登錄有限制數份之編碼資訊，因此將索引之值設定至候補清單總數NumListCand後(S605)，結束處理。
此外，雖然是以對實施例1的合併偵測部106追加參 照候補制限部318之例子來說明，但在其他實施例中也是可以追加參照候補制限部318。又，亦可對對應於合併偵測部106的動態影像解碼裝置200之中所設置之實施例7的合併判定部206，追加參照候補制限部318，在合併判定部206中不設置參照候補制限部318，讓合併判定部206的參照候補清單作成部311或同一資訊偵測部312中，具備參照候補制限部318的機能，也可獲得同等效果。但是，在編碼側與解碼側上，設置參照候補制限部318的位置或具備參照候補制限部318機能的處理部，必須要相同。
接著，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例7的運動向量預測部103。圖52係圖示了，以圖23所示的實施例1的動態影像編碼裝置的運動向量預測部103為基礎，追加了實施例7的參照候補制限部328而成的運動向量預測部103之構成。圖52所示各部基本上係具備和圖23所示各部相同之機能，但編碼資訊導出部320及參照候補清單作成部321之處理係和實施例1不同。說明實施例7中的編碼資訊導出部320及參照候補清單作成部321與新追加的參照候補制限部328之機能。
圖53係實施例7中的編碼資訊導出部320之動作的流程圖。在實施例1的編碼資訊導出部320中，隨應於處理對象之預測區塊的預測模式，在單向預測且L0預測時係僅將參照清單L0中所被登錄的編碼資訊，在單向預測 且L1預測時係僅將參照清單L1中所被登錄的編碼資訊，在雙預測時係將參照清單L0,L1中所被登錄的各個編碼資訊之判定，是按照L0與L1之每一清單而獨立進行。
在實施例7中，首先，無關於清單而判定相鄰區塊之有效性，其後隨應於處理對象之預測區塊的預測模式，偵測出編碼資訊並取得之。藉由此處理，就不需要針對每一清單進行相鄰區塊的有效性判定，可削減處理工程數。
首先，將變數N予以初期化(S900)。對變數N係會設定圖9(a)所示之同一圖像上的相鄰區塊B0,A0,A1,B1,C0。此處，若在初期化時設定成N=B0，則變數N的更新係以A0,A1,B1,C0之順序而進行。
運動偵測模式，係用來傳輸差分運動向量的模式，為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊之候補的運動向量的差較大的方式，將左側與上側候補間的距離加大而做登錄，藉此以削減差分運動向量之編碼量，提升編碼效率。該運動偵測模式下的優先順位之決定方法，係與儘可能將同一編碼資訊之機率高的相鄰區塊優先當作候補而加以登錄的合併模式，目的不同。
接著，將變數N的相鄰區塊(以下稱作相鄰區塊N)之位置及編碼資訊，加以取得(S902)。基於已被取得的相鄰區塊N之位置，來判定相鄰區塊N是否有效(S903)。例如，當處理對象之預測區塊是在圖像左端位置時，由於處理對象之預測區塊沒有左邊相鄰區塊存在，因此編碼資訊儲存記憶體114之中該當之編碼資訊就係不 存在，因而判定為無效。
相鄰區塊N為無效時(S903的N)，將availableFlagN設定成“0”(S908)。若相鄰區塊N為有效時(S903的Y)，則判定相鄰區塊N的預測模式是否為畫面內編碼(Intra)模式(S904)。若相鄰區塊N的預測模式非Intra模式時(S904的Y)、亦即是Inter模式時，則將availableFlagN設定成“1”(S906)。接著，進行運動向量之算出(S916)。在運動向量之算出後，將相鄰區塊N的編碼資訊，代入至refIdxLXN、mvLXN及predFlagLXN而設定之(S907)。
一旦如以上而結束了對相鄰區塊N的判定處理，則實施變數N是否為相鄰區塊之最後的判定(S909)。變數N的更新係按照B0,A0,A1,B1,C0的順序進行，因此這裡係進行N是否為C0的判定。若N為C0(S909的Y)，則表示對所有的相鄰區塊都進行過判定，結束處理。若N非C0(S909的N)，則進行N的更新(S910)。按照上述相鄰區塊之順序來更新N，將步驟S902以後的處理，針對相鄰區塊N重複進行之。
此處，針對運動向量之算出過程，使用圖54的流程圖來說明。首先，將儲存著L0預測的相鄰區塊N的編碼資訊的變數，予以初期化。此處，變數係為相鄰區塊N的運動向量mvL0N、參照圖像號碼refIdxL0N及表示參照清單之有效性的旗標predFlagL0N，係被初期化如下(S920)。
mvL0N=(0,0)
refIdxL0N=0
predFlagL0N=0)
接著，判定處理對象之預測區塊的Inter模式是否為單向之L0預測或Bi-pred預測(雙預測)(S921)。在Bi-pred預測中係使用L0預測及L1預測的2個參照清單，因此若為單向之L0預測或Bi-pred預測時(S921的Y)，則進入相鄰區塊N的運動向量mvL0N之算出(S922)。
當處理對象之預測區塊與相鄰區塊N的參照圖像號碼及參照清單為相同時，則將相鄰區塊N的L0預測之運動向量，代入mvL0N而設定之。當處理對象之預測區塊與相鄰區塊N的參照圖像號碼及參照清單並非相同時，則實施相鄰區塊N的運動向量的比例縮放處理。關於比例縮放處理，在實施例1中已經說明過，因此這裡省略。藉由實施比例縮放處理，對於處理對象之預測區塊，就可導出較相近的運動向量而達成精度提升。如以上所述，將經過比例縮放處理的運動向量代入至mvL0N，將相鄰區塊N的L0預測之編碼資訊代入至refIdxL0N及predFlagL0N而設定之。
若非單向之L0預測也非Bi-pred預測時(S921的N)，則進入L1預測的運動向量判定。接著，將儲存著L1預測的相鄰區塊N的編碼資訊的變數，予以初期化。此處，變數係為相鄰區塊N的運動向量mvL1N、參照圖 像號碼refIdxL1N及表示參照清單之有效性的旗標predFlagL1N，係被初期化如下(S923)。
mvL1N=(0,0)
refIdxL1N=0
predFlagL1N=0
接著，判定處理對象之預測區塊的Inter模式是否為單向之L1預測或Bi-pred預測(雙預測)(S924)。在Bi-pred預測中係使用L0預測及L1預測的2個參照清單，因此若為單向之L1預測或Bi-pred預測時(S924的Y)，則進入相鄰區塊N的運動向量mvL1N之算出(S925)。
當處理對象之預測區塊與相鄰區塊N的參照圖像號碼及參照清單為相同時，則將相鄰區塊N的L1預測之運動向量，代入mvL0N而設定之。當處理對象之預測區塊與相鄰區塊N的參照圖像號碼及參照清單並非相同時，則實施相鄰區塊N的運動向量的比例縮放處理。關於比例縮放處理，在實施例1中已經說明過，因此這裡省略。如以上所述，將經過比例縮放處理的運動向量代入至mvL1N，將相鄰區塊N的L1預測之編碼資訊代入至refIdxL1N及predFlagL1N而設定之。若非單向之L1預測也非Bi-pred預測時(S924的N)，則結束處理。
如以上所述，藉由將存在於與處理對象之預測區塊同一圖像上的周圍之相鄰區塊視為參照區塊，而導出其編碼資訊。不同時間之另一圖像的同一位置所相鄰之區塊的編 碼資訊之導出係和實施例1相同，因此這裡省略說明。
如此所得之相鄰區塊之編碼資訊，係被輸入至參照候補清單作成部321。作為參照候補清單作成部321所作成的參照候補清單，係隨應於處理對象之預測區塊的Inter模式，對L0及L1預測的2個參照清單，分別作成參照候補清單。在實施例1中雖然是針對每一參照清單而作成參照候補清單，但實施例7中是將表示之後判定中所使用之相鄰區塊之有效性的旗標，無關於參照清單而都是以1個旗標availableFlagN來表示，因此可一次就作成L0、L1兩預測的參照候補清單，可削減處理工程數。
參照候補清單作成部321之動作，使用圖55的流程圖來說明。首先，將變數N與參照候補清單之索引k予以初期化(S600)。對變數N係會初期設定圖9(a)所示之相鄰區塊B0，k係被設定成0。變數N係表示對參照候補清單儲存的優先順位，是按照相鄰區塊B0,A0,A1,B1,C0之順序而進行。索引k係表示，參照候補清單之記憶領域中所被設定之編碼資訊之候補的儲存領域的號碼，是與優先順位相對應。
接著，進行參照相鄰區塊N的有效旗標availableFlagN之判定(S601)。若availableFlagN為1時(S601的Y)，則將相鄰區塊N的編碼資訊同時登錄至L0及L1預測的2個參照候補清單candListLX[k]中(S602)，將k予以更新(S603)。此處，字尾X係表示0或1。若availableFlagN為0時(S601的N)，則不 登錄至參照候補清單，進入下個步驟。判定相鄰區塊N是否為最後的參照區塊(S604)。若為最後的區塊(S604的Y)，則將索引之值設定至候補清單總數NumListCand後(S605)，結束處理。若非最後的區塊(S604的N)，則將變數N予以更新(S606)，重複步驟S601以後之處理。
對參照候補制限部328係輸入著，在同一資訊偵測部322中已經從參照候補清單裡把具備同一運動向量之參照相鄰區塊予以刪除過的參照候補清單。參照候補制限部328係判定，從參照候補清單之中，是否把所設定之限制數量份的索引上位之相鄰區塊留下，其他則刪除或不選擇之。例如，在表示實施例1中沒有同一運動向量存在時的參照候補清單之一例的圖28中，若在運動偵測模式的情況下限制成3個，則將索引0至2的上位3個相鄰區塊當作參照候補，其餘就不使用因此排除在參照候補的對象之外。
如以上所述，相鄰區塊會被限制而登錄至參照候補清單中作為參照候補，參照相鄰區塊的總數可較實施例1更為削減，因此可縮短所分配之碼字長度，可改善編碼效率。又，由於鎖定參照候補清單的優先順位高的相鄰區塊而加以限制，因此可抑制編碼效率的降低。參照候補清單的限制數，係可在例如SPS(Sequence Parameter Set)或Slice Header這類標頭資訊中，設定限制數。
又，亦可在編碼側與解碼側上設定成為默認性條件， 只要不讓編碼側與解碼側上產生矛盾即可，方法沒有限制。又，亦可隨著預測模式來分別設定限制數。甚至，亦可基於處理對象之預測區塊所參照之已編碼或已解碼之相鄰區塊之編碼資訊，來適應性變更參照候補清單的限制數。
如以上所述，雖然說明了，藉由在同一資訊偵測部322之正後方設置參照候補制限部328以限制參照候補的手法，但即使不把參照候補制限部328設在運動向量預測部103中，而是讓同一資訊偵測部322中具備參照候補制限部328的機能，也可獲得同等效果。此情況下，在同一資訊偵測部322中，係比較參照候補清單之中所儲存的編碼資訊之候補，若有具備相同運動向量之候補存在時，則將帶有最小之參照候補清單之索引的編碼資訊之候補以外全部刪除，並且，將帶有最小之參照候補清單之索引的編碼資訊之候補，再次登錄至參照候補清單，該登錄數若達到限制數則結束處理。
圖56係實施例7中的同一資訊偵測部322之動作的流程圖，對進行實施例1的圖29所示之動作的同一資訊偵測部322，追加實施例7的參照候補限制機能。對圖29之流程圖，新追加步驟S1010至步驟S1012之處理步驟，說明這些追加的處理。
在表示參照候補清單之索引的變數n與m的設定後，將表示刪除清單中所記錄之參照候補清單之候補數的計數器s設定成0(S1010)。接著，在步驟S1002中， 判定m是否已經被記錄在刪除清單中，若m未被記錄在刪除清單中(S1002的N)，則將m記錄至刪除清單(S1003)，並且將計數器s加算1而更新之(S1011)。
接著判定s是否等於閾值TH(S1012)。此處，閾值TH係表示，候補清單總數NumListCand減去限制數而成的數。亦即表示，在參照候補清單中留下限制數之候補，表示被記錄在刪除清單中的候補數之最大數。若s等於TH(S1012的Y)，則參照候補清單中會留下限制數份之候補，因此結束同一資訊判定之處理，前進至步驟S1008，將刪除清單中所記錄之索引所該當之清單的儲存領域的編碼資訊，予以刪除，以索引0為基準，以索引較小的候補之順序進行縮略，更新碼字而結束。此外，參照候補清單之總數NumListCand係被更新成限制數。
又，亦可將參照候補制限部328設在同一資訊偵測部322的正前方。此情況下，由於將參照候補清單作成部321所作成的參照候補清單之中的參照候補加以限制以縮減候補數，因此同一資訊偵測部322中偵測同一資訊的最大次數會被削減，因此具有削減處理量之效果。
圖57係圖示了，以圖23所示的實施例1的動態影像編碼裝置的運動向量預測部103為基礎，追加了實施例7的參照候補制限部328而成的運動向量預測部103之構成。圖57所示各部係具備和圖23所示各部相同之機能。與上述圖52之構成只有參照候補制限部328的位置不同，參照候補制限部328的動作係相同。參照候補制限部 328係判定，從參照候補清單作成部321所作成的參照候補清單之中，是否把所設定之限制數量份的索引上位之相鄰區塊留下，其他則刪除或不選擇之。
如以上所述，雖然說明了，藉由在同一資訊偵測部322之正前方設置參照候補制限部328以限制參照候補的手法，但即使不把參照候補制限部328設在運動向量預測部103中，而是讓參照候補清單作成部321中具備參照候補制限部328的機能，也可獲得同等效果。此情況下，在參照候補清單作成部321中，係將編碼資訊導出部320所導出的參照相鄰區塊的編碼資訊，登錄至參照候補清單，並且將已被登錄在參照候補清單中的參照相鄰區塊之數目予以計數，該數目若達到限制數則結束處理。參照候補清單作成部321，係隨應於處理對象之預測區塊的預測模式，可同時作成L0及L1預測的參照候補清單，除了這點以外，其餘是進行與表示實施例7之參照候補清單作成部311之動作的圖51的流程圖相同的動作，因此這裡省略說明。
(實施例8)
在實施例8中，定義與實施例2、5不同的參照相鄰區塊之區塊群，從其中選擇出K個代表相鄰區塊。使用圖31(a)的相鄰區塊的配置來說明。和實施例4同樣地，從圖31(a)中所配置的6個相鄰區塊A0,A1,B0,B1,C0,T，將與處理對象之預測區塊位於相同圖像上的相鄰 區塊A0,A1,B0,B1,C0視為1個區塊群，從該區塊群之中，選擇出K個代表的相鄰區塊。
將已被選擇之相同圖像上的代表之K個相鄰區塊、和不同時間之另一圖像的同一位置所相鄰之區塊T的K+1個相鄰區塊之編碼資訊，當作參照候補而登錄至參照候補清單中。相對於在實施例4中是在編碼資訊導出部310、編碼資訊導出部320選擇K個(2個)代表的相鄰區塊，在實施例8中則是和實施例1同樣地，編碼資訊導出部310及編碼資訊導出部320係選擇所有的相鄰區塊，在作成參照候補清單以後的處理中，選擇K個(2個)代表之相鄰區塊，這點有所不同。
實施例8係與將對作為參照候補而選出之相鄰區塊之數目設下限制的實施例7，適用至與處理對象之預測區塊位於同一圖像上的區塊群時等價，但僅將不同時間之另一圖像的同一位置所相鄰之區塊做特別對待而登錄在參照候補清單的最後，這點是有所不同。位於相同圖像上的相鄰區塊彼此具有相同編碼資訊的可能性很高，不同時間之另一圖像的同一位置所相鄰之區塊係帶有與它們不同之編碼資訊的可能性很高，因此可以說，另外當作候補而進行登錄的效果較高。例如，位於相同圖像上的相鄰區塊全部都是畫面內的情況下，不同時間之另一圖像的同一位置所相鄰之區塊具有畫面間預測之編碼資訊的可能性仍很高。只不過，不同時間之另一圖像的同一位置所相鄰之區塊，係相較於與處理對象之預測區塊位於相同圖像上的相鄰區 塊，處理對象之預測區塊與編碼資訊相等或相近的可能性很低，因此降低優先順位。
因此，將優先順位設定成低於從同一圖像上的區塊群中所選擇之相鄰區塊，登錄在參照候補清單的下位之位置。在以下中，實施例8係視為與實施例7中所說明過的動態影像編碼裝置100及動態影像解碼裝置200相同構成來說明。但是，並未設置實施例7的參照候補制限部318及328，而是將參照候補制限部的機能設置在參照候補清單作成部311、321、或同一資訊偵測部312、322之中，對與處理對象之預測區塊位於相同圖像上的相鄰區塊的區塊群做適用。
被設置在動態影像編碼裝置100中的合併偵測部106、被設置在對應之動態影像解碼裝置200中的合併判定部206的參照候補清單作成部311、以及被設置在動態影像編碼裝置100中的運動向量預測部103、被設置在對應之動態影像解碼裝置200中的運動向量算出部204的參照候補清單作成部321之中，將與處理對象之預測區塊位於相同圖像上的相鄰區塊A0,A1,B0,B1,C0，定義成同一圖像上的區塊群。按照代表同一圖像上的區塊群的相鄰區塊、T之順序而設定優先順位，從優先順位較高者，向參照候補清單，登錄參照相鄰區塊的編碼資訊之候補，以削減參照候補清單之索引的編碼量。
首先，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例8的合併偵測部106。合併偵測部 106係和實施例1中所說明的圖11相同構成，但參照候補清單作成部311之處理是和實施例1不同。針對實施例8中的合併偵測部106的參照候補清單作成部311之動作加以說明。
圖58係實施例8中的參照候補清單作成部311之動作的流程圖。在實施例8中，係在參照候補清單作成前，將同一圖像上的區塊群對參照相鄰區塊之參照候補清單的登錄數K，加以設定。此處，K係設定成2。此外，K係不超過同一圖像上的區塊群之中的相鄰區塊總數。
首先，將變數N與參照候補清單之索引k予以初期化(S1300)。對變數N係初期設定了對應於預測模式的最高優先順位的相鄰區塊。合併模式下的優先順位係設成A1,B1,B0,A0,C0，因此會被設定A1，N的更新是以此一順序而被進行。k係被設定成0。索引k係表示，參照候補清單之記憶領域中所被設定之編碼資訊之候補的儲存領域的優先順位。
首先，進行相鄰區塊N的有效旗標availableFlagN之判定(S1301)。若availableFlagN為0時(S1301的N)，則不登錄至參照候補清單，進入步驟S1305。若availableFlagN為1時(S1301的Y)，則將相鄰區塊N的編碼資訊登錄至參照候補清單(S1302)，將k予以更新(S1303)。
k更新後，進入k與K之比較(S1304)。若k未滿K(S1304的Y)，亦即參照候補清單中所被登錄之相鄰 區塊的數目尚未達到設定數K時，則前進至步驟S1305。若k為K以上(S1304的N)，則由於是參照候補清單中所被登錄之相鄰區塊的數目已經達到設定數K的情形，因此從是否登錄至參照候補清單之判定離開，進至步驟S1307。
接著，判定相鄰區塊N是否為最後的參照區塊(S1305)。若相鄰區塊N非最後區塊(S1305的N)，則將變數N予以更新(S1306)，重複步驟S1301以後之處理。若相鄰區塊N是最後區塊(S1305的Y)，則前進至步驟S1307。
在同一圖像上的區塊群的登錄判定結束後，進行不同時間之另一圖像的同一位置所相鄰之區塊T的有效旗標availableFlagT之判定(S1307)。若availableFlagT為1時(S1307的Y)，則將相鄰區塊T的編碼資訊登錄至參照候補清單(S1308)，將k予以更新(S1309)。若availableFlagT為0時(S1307的N)，則不登錄至參照候補清單，進入步驟S1310。將已登錄至參照候補清單之數目，設定至候補清單總數NumListCand後(S1310)，結束處理。
藉由以上的處理，就被登錄至參照候補清單中。此處，被登錄至參照候補清單的最大數係以K+1來表示。當參照相鄰區塊只有1個是有效時，則最大碼字長度係為0，因此不需要碼字，僅將1個被判定為有效的相鄰區塊之編碼資訊之候補，唯一決定成為參照目標。
說明上述被設置在動態影像編碼裝置100中的合併偵測部106所對應的，被設置在動態影像解碼裝置200中的實施例8的合併判定部206。合併偵測部206係和實施例1中所說明的圖22相同構成，參照候補清單作成部311之處理是和實施例1不同。其他的編碼資訊導出部310、同一資訊偵測部312、參照候補清單儲存記憶體314及選擇部315係和實施例1具備相同機能。
又，參照候補清單作成部311係和上述實施例8中的合併偵測部106的參照候補清單作成部311具備相同機能，因此以合併判定部206的同一資訊偵測部312為止的處理，作成和實施例8的合併偵測部106相同的參照候補清單。說明從所作成的參照候補清單中，取得合併模式下的參照相鄰區塊的編碼資訊的選擇部315。選擇部315，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。將所選擇之編碼資訊供給至運動補償預測部207，並且供給至編碼資訊儲存記憶體210。
接著，說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例8的運動向量預測部103。運動向量預測部103係和實施例1中所說明的圖23相同構成，但參照候補清單作成部321之處理是和實施例1不同。針對實施例8中的參照候補清單作成部321之動作加以說明。
參照候補清單作成部321係和上述合併偵測部106的參照候補清單作成部311同樣地，將與處理對象之預測區塊位於相同圖像上的相鄰區塊A0,A1,B0,B1,C0視為1個區塊群，從該區塊群之中，選擇出K個代表的相鄰區塊。相較於合併偵測部106的參照候補清單作成部311，除了同時作成L0及L1預測各自的參照候補清單這點以外，其餘處理流程沒有太大差別，因此這裡省略說明。此外，運動偵測模式下的優先順位係設為B0,A0,A1,B1,C0。
至於上述被設置在動態影像編碼裝置100中的運動向量預測部103所對應的，被設置在動態影像解碼裝置200中的實施例8的運動向量算出部204也是，運動向量算出部204的參照候補清單作成部321，係具備與對應之運動向量預測部103的參照候補清單作成部321相同機能，會作成和運動向量預測部103相同的參照候補清單，因此這裡省略說明。
藉由以上處理，實施例8中所作成的候補清單，係若全部參照相鄰區塊都有效時，則按照預測模式別而表示成如圖59。此係合併模式、運動偵測模式都是將同一圖像上的區塊群的參照相鄰區塊的個數設成2時的一例，各個預測模式的高優先順位之有效相鄰區塊會被登錄至參照候補清單。
在實施例8中，優先順位在合併模式時係為A1,B1,B0,A0,C0，在運動偵測模式時係為B0,A0,A1,B1,C0 之順序，但並不一定要為此種順序。但是，在合併模式的情況下，係將處理對象之預測區塊的邊、和被認為編碼資訊最可能相等之處理對象之預測區塊的邊是彼此銜接的相鄰區塊A1及B1，優先登錄在參照候補清單的前方，藉此以削減合併索引的編碼量，可提升編碼效率。
運動偵測模式，係用來傳輸差分運動向量的模式，為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊之候補的運動向量的差較大的方式，將左側與上側候補間的距離加大而做登錄，藉此以削減差分運動向量之編碼量，可提升編碼效率。該運動偵測模式下的優先順位之決定方法，係與儘可能將同一編碼資訊之機率高的相鄰區塊優先當作候補而加以登錄的合併模式，目的不同。此外，如實施例3所說明，合併模式的情況下係使用實施例8，運動偵測模式時係使用實施例2或其他實施例等，亦可隨著預測模式來改變組合。
(實施例9)
在實施例9中，和實施例1同樣地，對於與處理對象之預測區塊位於相同圖像上的相鄰區塊及不同時間之另一圖像的同一位置所相鄰之區塊，若相鄰區塊是有效則登錄至參照候補清單，從參照候補清單之中選擇出最佳的相鄰區塊之編碼資訊，將表示相鄰區塊的參照候補清單之索引予以編碼、傳輸。
使用圖9(a)的相鄰區塊的配置來說明。在實施例1 中，在作成參照候補清單時，對相鄰區塊之位置會建立對應有預先決定之優先順位，以優先順位之順序來判定相鄰區塊是否滿足所定條件，若滿足條件則登錄在參照候補清單的前方，作成參照候補清單。亦即，相鄰區塊之位置所對應到的優先順位是直接反映在參照候補清單之索引上，優先順位越高，則被儲存在索引越小的參照候補清單的記憶領域中。
一般認為，處理對象之預測區塊的周圍之相鄰區塊，係與處理對象之預測區塊銜接的領域越大，編碼資訊與處理對象之預測區塊相等的可能性越高，因此藉由將此種相鄰區塊優先登錄在參照候補清單的前方，可削減索引的編碼量，提升編碼效率。
由以上觀點，在實施例9中，在運動偵測模式時，將運動向量預測的參照候補清單作成時判定相鄰區塊之有效性的順序，和對參照相鄰區塊所分配之碼字的順序，予以分別定義。參照候補清單作成時判定相鄰區塊之有效性的順序，係為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊之候補的運動向量的差較大的方式，設成使相鄰區塊間之距離加大之順位。
此處，將運動向量預測的參照候補清單作成時判定相鄰區塊之有效性的順序，設為B0,A0,A1,B1,C0,T。另一方面，對參照相鄰區塊所分配的碼字，係將與處理對象之預測區塊銜接之領域較大的相鄰區塊為優先，而以A1,B1,B0,A0,C0,T之順序來分配較少的碼字。
說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例9的運動向量預測部103。實施例9的運動向量預測部103係和實施例1中所說明的圖23相同構成，但參照候補清單作成部321之動作是有所不同。針對實施例9中的參照候補清單作成部321之動作加以說明。圖60係實施例9的運動偵測模式下的參照候補清單作成部321之動作的流程圖，使用此圖來說明。
參照候補清單作成部321基本上是實施和運動向量預測部103中的參照候補清單作成部321相同的動作。在運動偵測模式下係必須要以參照清單來作成L0預測與L1預測各自的參照候補清單，因此運動偵測模式下的參照候補清單作成，係將L0預測與L1預測個別實施2次。因此，在判定相鄰區塊之有效性的步驟S601中，表示相鄰區塊之有效性的旗標availableFlagLXN(X係為0或1，N係記入表示相鄰區塊之記號)中會附加表示參照清單的LX字尾，但判定動作係和合併模式時相同。
在圖60中，將運動向量預測部103中的參照候補清單作成部321之動作，對圖19之流程圖，新追加了轉換表之作成、更新(S608)，包含此判定部，說明參照候補清單作成部321之動作。但是，此處僅說明參照清單之一方，另一方參照清單係由於判定動作相同故省略說明。
首先，將變數N與參照候補清單之索引k予以初期化(S600)。對變數N係會初期設定圖9(a)所示之相鄰區塊B0，k係被設定成0。索引k係表示，參照候補清單 儲存記憶體324中所設置之參照候補清單的記憶領域中所被設定之編碼資訊之候補的儲存領域的優先順位。此儲存領域係呈數列結構，以candList來表示。索引的數字是從0開始，在參照候補清單candList的記憶領域中，儲存下參照相鄰區塊的編碼資訊之候補。在以下的處理中，參照候補清單candList中所被登錄之索引i的編碼資訊，係以candList[i]來表示。
接著，進行參照相鄰區塊N的有效旗標availableFlagLXN之判定(S601)。此處，X係代入0或1。若availableFlagLXN為0時(S601的N)，則不登錄至參照候補清單，進入下個步驟。判定相鄰區塊N是否為最後的參照區塊(S604)。若為最後的區塊(S604的Y)，則將索引k之值設定至候補清單總數NumListCand後(S605)，結束處理。若非最後的區塊(S604的N)，則將變數N予以更新(S606)，重複步驟S601以後之處理。此處，更新變數N的相鄰區塊的順序，是變成儲存在參照候補清單中的優先順位，在實施例9中，是設定了順序(B0,A0,A1,B1,C0,T)。
另一方面，若availableFlagLXN為1時(S601的Y)，則將相鄰區塊N的編碼資訊登錄至參照候補清單candList[k](S602)，實施轉換表之作成、更新(S608)，將k予以更新(S603)。
此處，說明轉換表之作成、更新(S608)之細節。在轉換表之作成、更新中，會作成把運動向量預測的參照候 補清單作成時判定相鄰區塊之有效性的順序，和對參照相鄰區塊所分配之碼字的順序做對應的轉換表。轉換表係為被設置在參照候補清單儲存記憶體324裡的呈數列結構的記憶領域，將表示參照候補清單之索引所對應之碼字的轉換表之索引，予以記憶。
使用圖61來說明。變數N與參照候補清單之索引k會被輸入，開始轉換表之作成、更新。首先，將變數M與轉換表之索引j予以初期化(S1400)。對變數M係會初期設定圖9(a)所示之相鄰區塊A1，j係被設定成0。變數M係以A1,B1,B0,A0,C0,T之順序而被更新。接著，進行M與N的同一性判定(S1401)。若M與N不同(S1401的N)，則不登錄至轉換表，將j予以更新(S1403)。
接著，判定變數M是否為最後的相鄰區塊(S1404)。若最後的相鄰區塊為T，且M是T時(S1404的Y)，則結束處理。若非最後的區塊(S1404的N)，則將變數M予以更新(S1405)，重複步驟S1401以後之處理。
若M為N(S1401的Y)，則將參照候補清單之索引k登錄至轉換表開頭起算第j個記憶領域(S1402)。一旦索引k被登錄，則結束處理，返回圖60的k之更新(S603)。藉由以上處理，若參照候補清單之索引k被登錄至轉換表，且參照相鄰區塊全部都有效，則會被建立對應至圖62所示之轉換表之索引所表示之碼字。
使用該轉換表，已被登錄之參照候補清單，係若全部參照相鄰區塊都有效，則以圖63所示之順序來作成參照候補清單，分配碼字。當參照相鄰區塊只有1個是有效時，則不需要碼字，僅1個被判定為有效的相鄰區塊之編碼資訊之候補會被唯一決定成為參照目標。
此處係對參照候補清單作成部321所剛作成的參照候補清單之索引進行說明，但原本是在同一資訊偵測部322中具備同一編碼資訊之參照候補之相鄰區塊從參照候補清單刪除後，將參照候補清單之索引與轉換表之索引建立對應，較為理想。被同一資訊偵測部322刪除過的參照候補的相鄰區塊的參照候補清單之索引所該當之轉換表的記憶領域也會被刪除，而往轉換表的開頭方向縮減。
例如，在圖62中，參照候補清單之索引1所該當之相鄰區塊被刪除時，參照候補清單之索引1所該當之轉換表之索引3的地點會被刪除。轉換表之索引4及5係會分別被更新成3及4，各自對應之碼字也被更新成1110及1111。
如以上所述，將已被作成之參照候補清單的運動向量，當作預測運動向量，在差分運動向量算出部326中，係根據運動向量偵測部102所測出之運動向量與預測運動向量，算出差分運動向量，將所算出的差分運動向量，供給至輸出部323。將輸出部323所作成的參照候補清單之中的索引與差分運動向量，予以輸出。參照候補清單，係將參照候補清單當作MVP清單，將清單中的索引當作 MVP索引而予以輸出。
對應於上述被設置在動態影像編碼裝置100中的運動向量預測部103，被設置在動態影像解碼裝置200中的運動向量算出部204之中也是具備和運動向量預測部103同樣機能的實施例9的參照候補清單作成部321或同一資訊偵測部322，因此會作成和運動向量預測部103相同的參照候補清單。已被作成的參照候補清單，係被輸出至選擇部325。
選擇部325，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。從被選擇之清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在差分運動向量算出部326中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量進行加算，算出運動向量，供給至運動補償預測部207，並且將已被選擇之參照候補清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
(實施例10)
實施例10係在運動偵測模式時，將參照候補清單作成時判定相鄰區塊之有效性的順序，看最初之相鄰區塊是否有效，而變更其後的相鄰區塊的判定順序。使用圖9(a)的相鄰區塊的配置來說明。以實施例9的參照候補清單作成時判定相鄰區塊之有效性的順序B0,A0,A1,C0, B1,T為一例來說明。
最初判定的相鄰區塊係為B0，若B0為有效，則其後的相鄰區塊之順序係不被變更。若B0為無效，則其後的相鄰區塊之順序會被變更成A0,B1,C0,A1之順序。B0為無效時，A0會被成最初判定的相鄰區塊，其後的相鄰區塊係為A1。由於A1係與A0位置相近，因此帶有與A0相近之值的運動向量的可能性很高，A1被當成預測運動向量而選擇的可能性較低。
運動偵測模式，係用來傳輸差分運動向量的模式，若參照相鄰區塊所具備之區塊是相近的值，則預測運動向量的選擇幅度會變窄，無法偵測出適切的預測運動向量。因此，B0為無效時，A0的下個判定的相鄰區塊，係為了擴展預測運動向量的選擇幅度，而以加大與A0的運動向量的差的方式，選擇與A0距離較遠的相鄰區塊B1。如此，是儘可能使預測運動向量之候補的相鄰區塊的距離加大，來變更判定的順序。
(實施例11)
在實施例11中係表示了，若為運動偵測模式，則將與處理對象之預測區塊位於相同圖像上的相鄰區塊定義成同一圖像上的區塊群，從其中選擇出代表區塊群的2個相鄰區塊的一手法。使用圖9(a)的相鄰區塊的配置來說明。將參照候補清單作成時判定相鄰區塊之有效性的順序，設成B0,B1,C0,A1,A0。
首先，以列記的左而右之順序B0,B1,C0,A1,A0(順向)來判定相鄰區塊的有效性，將最初被判定成有效的相鄰區塊，先當作第1個代表區塊群的相鄰區塊而登錄至參照候補清單。接著，以列記順序的倒序，亦即右而左之順序A0,A1,C0,B1,B0(逆向)來判定相鄰區塊的有效性，將另1個代表區塊群之相鄰區塊，登錄至參照候補清單。
相鄰區塊之有效性的判定順序，是從處理對象之預測區塊的右上角落往左下角落，以使得相鄰區塊之候補的運動向量的差較大的方式，將有效性的判定順序倒置，加大候補間之距離而做登錄，藉此，可擴展預測運動向量的選擇幅度，削減差分運動向量之編碼量，提升編碼效率。
此外，以順向、逆向來判定相鄰區塊之有效性時，在順向是A0、在逆向是B0的各自相當於最後順序的相鄰區塊之判定亦可省略。這是因為，若以順向之判定而最後的A0被選擇時，由於是逆向之最初判定中被認為有效的相鄰區塊，因此作為以順向之判定所選擇的相鄰區塊，並不適切。
又，亦可限制成，以從各方向之判定，而僅判定至C0為止的3個相鄰區塊。例如，若從順向之判定是選擇A0，從逆向之判定是選擇A1，則會是具備相同運動向量的相鄰區塊的可能性很高，運動向量預測的選擇幅度會變窄，無法有效地導出預測運動向量。為了避免此種相近之相鄰區塊的選擇，而進行有效性之判定到中間位置的C0 為止。如以上之有效性判定的限制，係由於判定的相鄰區塊的數目減少，因此可削減處理工程數。
(實施例12)
實施例12係在運動偵測模式時，對實施例9，將與處理對象之預測區塊位於相同圖像上的相鄰區塊定義成同一圖像上的區塊群，從其中選擇代表區塊群的相鄰區塊。在實施例12中，係和實施例9同樣地，將運動向量預測的參照候補清單作成時判定相鄰區塊之有效性的順序，和對參照相鄰區塊所分配之碼字的順序，予以分別定義。
在參照候補清單作成時，係為了擴展預測運動向量的選擇幅度，以使得左側與上側相鄰區塊之候補的運動向量的差較大的方式，設成使相鄰區塊間之距離加大之順位，在碼字分配時，將處理對象之預測區塊和被認為編碼資訊最可能相等之處理對象之預測區塊是彼此銜接之領域較大的相鄰區塊，優先分配較小的碼字。
此處，將運動向量預測的參照候補清單作成時判定相鄰區塊之有效性的順序，設為B0,A0,A1,C0,B1,T。另一方面，對參照相鄰區塊所分配的碼字，係將與處理對象之預測區塊銜接之領域較大的相鄰區塊為優先，而以A1,B1,B0,A0,C0,T之順序來分配較少的碼字。
首先說明表示動態影像編碼裝置100之構成的圖2之中所被設置的實施例12之特徵的運動向量預測部103。運動向量預測部103係為圖64所示之構成，相對於實施 例9所說明的圖23，在參照候補清單作成部321的正後方追加有參照候補控制部329這點是有所不同。
又，在實施例12中，由於要選擇代表與處理對象之預測區塊位於同一圖像上之區塊群的相鄰區塊，因此參照候補清單作成部321係進行，和實施例8所說明之從與處理對象之預測區塊位於同一圖像上之區塊群的選擇方法同樣的動作。此處，從同一圖像上的區塊群選擇出K個代表之相鄰區塊。將已被選擇之代表同一圖像上的區塊群的K個相鄰區塊、和不同時間之另一圖像的同一位置所相鄰之區塊T的K+1個相鄰區塊之編碼資訊，當作參照候補而登錄至參照候補清單中。
此處假設K係設為2，在參照候補清單作成部321中，係從參照候補清單的開頭起將代表同一圖像上的區塊群的2個相鄰區塊、及不同時間之另一圖像的同一位置所相鄰之區塊的總計3個編碼資訊，登錄至參照候補清單，而說明如下。
圖65係參照候補控制部329之動作的流程圖。參照候補清單作成部321所作成的參照候補清單和已被登錄至參照候補清單的參照候補數NumListCand，會被輸入。首先，進行NumListCand之判定(S1500)。若NumListCand未滿2(S1500的Y)，亦即已被登錄至參照候補清單中的參照候補是1個，則該1個候補會被唯一決定成為參照目標，因此結束處理。
若NumListCand大於2(S1500的N)，則將具備有 從參照候補清單之開頭起第2個被登錄之編碼資訊CandListLX[1]的相鄰區塊，令作N。此處，參照候補清單的數列CandListLX係將0當作參照候補清單之開頭索引而開始，因此CandListLX[1]係為從參照候補清單之開頭起所被登錄的第2個編碼資訊所被儲存的記憶領域，字尾X中係代入表示參照清單之參照清單的0(L0預測)或1(L1預測)。
接著，判定N是否為相鄰區塊A1或B1(S1502)。若N既非A1也非B1(S1502的N)，則結束處理。若N是A1或B1(S1502的Y)，則實施參照候補清單之中的編碼資訊的替換(S1503)。進行參照候補清單之開頭的編碼資訊CandListLX[0]與第2個編碼資訊CandListLX[1]的替換。
由於參照候補清單的作成順序係為B0,A0,A1,C0,B1，因此當A1或B1是位於參照候補清單的第2個時，開頭之相鄰區塊的碼字長度會比A1或B1還長。這是因為，由於將相鄰區塊予以特定的索引的碼字分配順序是被定義成A1,B1,B0,A0,C0,T，因此碼字長度會是A1<B1<B0<A0<C0<T的緣故。於是，將A1或B1置換到參照候補清單之開頭，將碼字長度短的索引的相鄰區塊在參照候補清單中的優先度提高，削減索引的編碼量。
此外，替換前的參照候補清單中的順序若為A1,B1時也實施替換，藉此，雖然碼字較長的B1會變成參照候補清單之開頭，但相較於其他相鄰區塊變成參照候補清單 之開頭的情形，仍可較為抑制編碼效率的損失。如以上所述，實施參照候補清單之中的替換，就可對參照候補清單的上位，分配以較少碼字來特定相鄰區塊的相鄰區塊，可促使編碼效率提升。
如以上所述，在同一資訊偵測部322之後，將已被作成之參照候補清單的運動向量，當作預測運動向量，差分運動向量算出部326係根據運動向量偵測部102所測出之運動向量與預測運動向量，算出差分運動向量，將所算出的差分運動向量，供給至輸出部323。將輸出部323所作成的參照候補清單之中的索引與差分運動向量，予以輸出。參照候補清單，係將參照候補清單當作MVP清單，將清單中的索引當作MVP索引而予以輸出。
對應於上述被設置在動態影像編碼裝置100中的運動向量預測部103，被設置在動態影像解碼裝置200中的運動向量算出部204之中也是設置和運動向量預測部103同樣機能的實施例12的參照候補控制部329，因此會作成和運動向量預測部103相同的參照候補清單。已被作成的參照候補清單，係被輸出至選擇部325。選擇部325，係從所作成的參照候補清單之中，將已被第1編碼位元列解碼部202所已被解碼之參照相鄰區塊予以特定的索引所指定的參照候補清單的相鄰區塊，加以選擇。從被選擇之清單的相鄰區塊之編碼資訊中，將運動向量當作預測運動向量於予以輸出，在差分運動向量算出部326中將預測運動向量與第1編碼位元列解碼部202所解碼之差分運動向量 進行加算，算出運動向量，供給至運動補償預測部207，並且將已被選擇之參照候補清單的相鄰區塊之編碼資訊，供給至編碼資訊儲存記憶體210。
如以上所說明，在本發明的實施例中，藉由將運動向量之預測方法與合併手法中所各自參照的周邊相鄰區塊之配置加以統合，以削減記憶相鄰區塊之資訊的暫時記憶體，從共通化的參照相鄰區塊，針對各預測手法而決定候補的優先順位，藉此，可削減影像間預測中的運動向量之預測方法與合併手法的編碼效率之冗長度，同時提高解碼時的處理效率。又，在進行運動補償前，可根據所參照之周圍之相鄰區塊的預測模式或位置資訊等，判定該參照區塊的有效性，藉此可削減運動補償的處理次數。
以下更具體地說明之。為了削減所能想定的最大之記憶體存取次數、記憶體量、處理量(處理時間)，如圖9(a)所示，將左側相鄰之區塊、上側相鄰之區塊分別限定為1個以縮減候補。如此，藉由預先限定候補，編碼效率幾乎不會降低，具有削減記憶體存取次數、記憶體量、處理量(處理時間)的效果。
又，可以削減記憶體存取次數、記憶體量、處理量(處理時間)，而且還可以削減合併索引、MVP索引的編碼量，因此具有削減編碼量之效果。又，合併模式與運動偵測模式下，藉由將候補之位置予以共通化，以達成更進一步的記憶體存取次數、記憶體量、處理量(處理時間)之削減。然後，以分別適合於合併模式及運動偵測模 式的配置來將候補儲存至候補清單中，藉此在合併模式下係削減合併索引的編碼量，在運動偵測模式下係削減MVP索引、及差分運動向量的編碼量，藉此而改善了編碼效率。
此外，本發明係不限定於以上的實施例，亦包含例如使上記動態影像編碼/解碼裝置之機能實現於電腦所需的動態影像編碼/解碼程式。此動態影像編碼/解碼程式，係可從記錄媒體讀取而被安裝至電腦，也可透過通訊網路傳輸而被安裝至電腦。
以上所述的實施例的動態影像編碼裝置所輸出的動態影像的編碼串流，係為了可隨著實施例中所使用之編碼方法來進行解碼，而具有特定的資料格式，對應於動態影像編碼裝置的動態影像解碼裝置係可將此特定資料格式的編碼串流加以解碼。
動態影像編碼裝置與動態影像解碼裝置之間為了收授編碼位元串流，而使用有線或無線網路的情況下，可將編碼位元串流轉換成適合於通訊路之傳輸形態的資料形式來進行傳輸。此情況下，會設置有：將動態影像編碼裝置所輸出之編碼位元串流轉換成適合於通訊路之傳輸形態之資料形式的編碼資料然後發送至網路的動態影像送訊裝置、和從網路接收編碼資料並復原成編碼位元串流而供給至動態影像解碼裝置的動態影像收訊裝置。
動態影像送訊裝置，係含有：將動態影像編碼裝置所輸出之編碼位元串流予以緩衝的記憶體、將編碼位元串流 予以封包化的封包處理部、將已被封包化的編碼資料透過網路而進行發送的送訊部。動態影像收訊裝置，係含有：將已被封包化的編碼資料透過網路而進行接收的收訊部、將已被接收之編碼資料予以緩衝的記憶體、將編碼資料進行封包處理而生成編碼串流並提供給動態影像解碼裝置的封包處理部。
以上係依據數個實施例來說明了本發明。這些實施例係為例示，這些各構成要素或各處理程序之組合中還有各種可能的變形例，而這些變形例也都屬於本發明之範圍，而能被當業者所理解。
[產業上利用之可能性]
本發明係可利用於，利用運動補償預測的動態影像編碼及解碼技術。
106‧‧‧合併偵測部
310‧‧‧編碼資訊導出部
311‧‧‧參照候補清單作成部
312‧‧‧同一資訊偵測部
313‧‧‧輸出部
314‧‧‧參照候補清單儲存記憶體

Claims (3)

  1. 一種影像解碼裝置，係屬於將編碼列予以解碼的影像解碼裝置，該編碼列係以動態影像之各圖像所分割而成之區塊單位，使用運動向量而被編碼者，其特徵為，具備：編碼列解碼部，係從前記編碼列中，針對每一解碼對象區塊而解碼出：表示影像間預測模式的預測模式資訊與第1索引或是表示影像間預測模式的預測模式資訊與第2索引、與差分運動向量；和取得部，係將前記解碼對象區塊的複數參照區塊之編碼資訊，加以取得；和第1模式輸出部，係當已被前記編碼列解碼部所解碼之預測模式資訊所示的影像間預測模式，係為會使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊的第1影像間預測模式時，則基於第1所定順位而從前記複數參照區塊導出編碼資訊以生成第1候補清單，並根據已被前記編碼列解碼部所解碼之第1索引，從前記第1候補清單中特定出第1候補，將該第1候補的編碼資訊，予以輸出；和第2模式輸出部，係當已被前記編碼列解碼部所解碼之預測模式資訊所示的影像間預測模式，係為會使用被索引所特定之參照區塊所對應之差分運動向量的第2影像間預測模式時，則基於第2所定順位而從前記複數參照區塊導出預測運動向量以生成第2候補清單，並根據已被前記 編碼列解碼部所解碼之第2索引，從前記第2候補清單中特定出第2候補，從該第2候補的預測運動向量與已被前記編碼列解碼部所解碼之差分運動向量，算出前記解碼對象區塊的運動向量並予以輸出；和運動補償預測部，係根據從前記第1模式輸出部或前記第2模式輸出部所輸出的資訊，使用已被前記編碼列解碼部所解碼之預測模式資訊所示的影像間預測模式，進行運動補償，以生成預測影像；前記第1模式輸出部及前記第2模式輸出部，係使用共通的複數區塊，來作為前記複數參照區塊；前記第1模式輸出部用來生成前記第1候補清單所需的前記第1所定順位，與前記第2模式輸出部用來生成前記第2候補清單所需的前記第2所定順位，係為不同；前記第1所定順位係為：空間性相鄰的左候補區塊、上候補區塊、右上候補區塊、左下候補區塊、左上候補區塊、時間性相異之圖像中所含之候補區塊之順序；前記第2模式輸出部，係在前記空間性相鄰之已被解碼之複數區塊當中，令被配置在前記解碼對象區塊之左側的區塊為左區塊群，令被配置在前記解碼對象區塊之上側的區塊為上區塊群，從前記區塊群之中，導出代表各個前記區塊群的候補，按照前記左區塊群之候補、前記上區塊群之候補的順序，設定前記第2所定順位，生成前記第2候補清單。
  2. 一種影像解碼方法，係屬於將編碼列予以解碼的 影像解碼方法，該編碼列係以動態影像之各圖像所分割而成之區塊單位，使用運動向量而被編碼者，其特徵為，具有：第1步驟，係從前記編碼列中，針對每一解碼對象區塊而解碼出表示影像間預測模式的預測模式資訊與參照區塊之索引、或是表示影像間預測模式的預測模式資訊與參照區塊之索引與參照區塊所對應之差分運動向量；和第2步驟，係將前記解碼對象區塊的複數參照區塊候補之編碼資訊，加以取得；和第3步驟，係當已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊的第1影像間預測模式時，則基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並根據已被前記第1步驟所解碼之參照區塊之索引，從前記第1候補清單中特定出前記解碼對象區塊的參照區塊，將該編碼資訊予以輸出；和第4步驟，係當已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊所對應之差分運動向量的第2影像間預測模式時，則基於第2所定順位而從前記複數參照區塊候補，生成第2候補清單，並根據已被前記第1步驟所解碼之參照區塊之索引，從前記第2候補清單中特定出前記解碼對象區塊的參照區塊，從該當參照區塊之前記編碼資訊所具備之運 動向量之資訊為基礎的預測運動向量、和已被前記第1步驟所解碼之差分運動向量，算出前記解碼對象區塊之運動向量並予以輸出；和第5步驟，係根據由前記第3步驟或前記第4步驟所輸出的資訊，使用已被前記第1步驟所解碼之預測模式資訊所示的影像間預測模式，進行運動補償，以生成預測影像；前記第3步驟及前記第4步驟，係使用共通的複數區塊，來作為前記複數參照區塊；於前記第3步驟中用來生成前記第1候補清單所需的前記第1所定順位，與於前記第4步驟中用來生成前記第2候補清單所需的前記第2所定順位，係為不同；前記第1所定順位係為：空間性相鄰的左候補區塊、上候補區塊、右上候補區塊、左下候補區塊、左上候補區塊、時間性相異之圖像中所含之候補區塊之順序；於前記第3步驟中，在前記空間性相鄰之已被解碼之複數區塊當中，令被配置在前記解碼對象區塊之左側的區塊為左區塊群，令被配置在前記解碼對象區塊之上側的區塊為上區塊群，從前記區塊群之中，導出代表各個前記區塊群的候補，按照前記左區塊群之候補、前記上區塊群之候補的順序，設定前記第2所定順位，生成前記第2候補清單。
  3. 一種記錄媒體，係屬於記錄有將編碼列予以解碼的影像解碼程式之記錄媒體，該編碼列係以動態影像之各 圖像所分割而成之區塊單位，使用運動向量而被編碼者，其特徵為，前記影像解碼程式係令電腦執行：第1處理，係從前記編碼列中，針對每一解碼對象區塊而解碼出表示影像間預測模式的預測模式資訊與參照區塊之索引、或是表示影像間預測模式的預測模式資訊與參照區塊之索引與參照區塊所對應之差分運動向量；和第2處理，係將前記解碼對象區塊的複數參照區塊候補之編碼資訊，加以取得；和第3處理，係當已被前記第1處理所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊的前記編碼資訊所具備之運動向量之資訊的第1影像間預測模式時，則基於第1所定順位而從前記複數參照區塊候補，生成第1候補清單，並根據已被前記第1處理所解碼之參照區塊之索引，從前記第1候補清單中特定出前記解碼對象區塊的參照區塊，將該編碼資訊予以輸出；和第4處理，係當已被前記第1處理所解碼之預測模式資訊所示的影像間預測模式，係為使用被索引所特定之參照區塊所對應之差分運動向量的第2影像間預測模式時，則基於第2所定順位而從前記複數參照區塊候補，生成第2候補清單，並根據已被前記第1處理所解碼之參照區塊之索引，從前記第2候補清單中特定出前記解碼對象區塊的參照區塊，從該當參照區塊之前記編碼資訊所具備之運 動向量之資訊為基礎的預測運動向量、和已被前記第1處理所解碼之差分運動向量，算出前記解碼對象區塊之運動向量並予以輸出；和第5處理，係根據由前記第3處理或前記第4處理所輸出的資訊，使用已被前記第1處理所解碼之預測模式資訊所示的影像間預測模式，進行運動補償，以生成預測影像；前記第3處理及前記第4處理，係使用共通的複數區塊，來作為前記複數參照區塊；於前記第3處理中用來生成前記第1候補清單所需的前記第1所定順位，與於前記第4處理中用來生成前記第2候補清單所需的前記第2所定順位，係為不同；前記第1所定順位係為：空間性相鄰的左候補區塊、上候補區塊、右上候補區塊、左下候補區塊、左上候補區塊、時間性相異之圖像中所含之候補區塊之順序；於前記第3處理中，在前記空間性相鄰之已被解碼之複數區塊當中，令被配置在前記解碼對象區塊之左側的區塊為左區塊群，令被配置在前記解碼對象區塊之上側的區塊為上區塊群，從前記區塊群之中，導出代表各個前記區塊群的候補，按照前記左區塊群之候補、前記上區塊群之候補的順序，設定前記第2所定順位，生成前記第2候補清單。
TW106103712A 2011-06-30 2012-06-29 Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded TWI605708B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011146770A JP5246303B2 (ja) 2011-06-30 2011-06-30 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP2011146769A JP5644701B2 (ja) 2011-06-30 2011-06-30 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに、送信装置、送信方法、及び送信プログラム

Publications (2)

Publication Number Publication Date
TW201722159A TW201722159A (zh) 2017-06-16
TWI605708B true TWI605708B (zh) 2017-11-11

Family

ID=47423713

Family Applications (5)

Application Number Title Priority Date Filing Date
TW106103709A TWI605707B (zh) 2011-06-30 2012-06-29 Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded
TW101123505A TWI521951B (zh) 2011-06-30 2012-06-29 Image coding apparatus, video coding method and image coding program, sending device, sending method and sending program, image decoding device, image decoding method and image decoding program, and receiving device, receiving method and receiving program
TW105130014A TWI577183B (zh) 2011-06-30 2012-06-29 An image decoding apparatus, an image decoding method, and an image decoding program
TW106103712A TWI605708B (zh) 2011-06-30 2012-06-29 Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded
TW104138507A TW201608879A (zh) 2011-06-30 2012-06-29 影像解碼裝置、影像解碼方法、及影像解碼程式

Family Applications Before (3)

Application Number Title Priority Date Filing Date
TW106103709A TWI605707B (zh) 2011-06-30 2012-06-29 Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded
TW101123505A TWI521951B (zh) 2011-06-30 2012-06-29 Image coding apparatus, video coding method and image coding program, sending device, sending method and sending program, image decoding device, image decoding method and image decoding program, and receiving device, receiving method and receiving program
TW105130014A TWI577183B (zh) 2011-06-30 2012-06-29 An image decoding apparatus, an image decoding method, and an image decoding program

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW104138507A TW201608879A (zh) 2011-06-30 2012-06-29 影像解碼裝置、影像解碼方法、及影像解碼程式

Country Status (9)

Country Link
US (5) US8982956B2 (zh)
EP (5) EP3422714B1 (zh)
KR (5) KR101681011B1 (zh)
CN (5) CN107071403B (zh)
BR (1) BR112013033818B1 (zh)
HU (3) HUE052632T2 (zh)
PL (3) PL3419290T3 (zh)
TW (5) TWI605707B (zh)
WO (1) WO2013001793A1 (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102232113B1 (ko) * 2011-03-21 2021-03-25 엘지전자 주식회사 움직임 벡터 예측자 선택 방법 및 이를 이용하는 장치
CN107071403B (zh) * 2011-06-30 2019-09-24 Jvc建伍株式会社 图像编码装置、图像编码方法、图像解码装置及图像解码方法
JP6422011B2 (ja) * 2012-05-11 2018-11-14 サン パテント トラスト 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置
EP2979449B1 (en) * 2013-03-25 2018-09-26 Imax Corporation Enhancing motion pictures with accurate motion information
US20160073115A1 (en) * 2013-04-05 2016-03-10 Samsung Electronics Co., Ltd. Method for determining inter-prediction candidate for interlayer decoding and encoding method and apparatus
US10070070B2 (en) * 2014-05-28 2018-09-04 Mediatek Inc. Video processing apparatus with transform unit size selection, mode information unit size selection and/or picture width/height decision, and related video processing method thereof
US20150350686A1 (en) * 2014-05-29 2015-12-03 Apple Inc. Preencoder assisted video encoding
KR20220162877A (ko) 2014-10-31 2022-12-08 삼성전자주식회사 고정밀 스킵 부호화를 이용한 비디오 부호화 장치 및 비디오 복호화 장치 및 그 방법
KR20160131526A (ko) * 2015-05-07 2016-11-16 삼성전자주식회사 시스템 온 칩, 상기 시스템 온 칩을 포함하는 디스플레이 시스템, 및 상기 디스플레이 시스템의 동작 방법
GB2557809B (en) * 2015-08-28 2021-12-01 Kt Corp Method and device for processing video signal
US11517539B2 (en) 2016-02-15 2022-12-06 University Of Georgia Research Foundation, Inc. IPA-3-loaded liposomes and methods of use thereof
CN109155847A (zh) 2016-03-24 2019-01-04 英迪股份有限公司 用于编码/解码视频信号的方法和装置
WO2017195608A1 (ja) * 2016-05-13 2017-11-16 シャープ株式会社 動画像復号装置
TWI610558B (zh) * 2016-05-26 2018-01-01 晨星半導體股份有限公司 位元分配方法及視訊編碼裝置
CN113747174B (zh) * 2017-06-26 2023-11-28 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法、解码方法和非暂时性存储介质
JPWO2019082318A1 (ja) * 2017-10-25 2020-11-19 株式会社ソシオネクスト 動画像処理装置、動画像処理システム、及び動画像処理方法
WO2019112072A1 (ko) * 2017-12-04 2019-06-13 엘지전자 주식회사 영상 코딩 시스템에서 수정된 움직임 정보 후보 리스트에 기반한 영상 디코딩 방법 및 장치
US10491897B2 (en) * 2018-04-13 2019-11-26 Google Llc Spatially adaptive quantization-aware deblocking filter
US10469869B1 (en) * 2018-06-01 2019-11-05 Tencent America LLC Method and apparatus for video coding
CN115134599A (zh) 2018-06-29 2022-09-30 抖音视界有限公司 更新查找表（lut）的条件
WO2020003284A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and amvp
KR102646649B1 (ko) 2018-06-29 2024-03-13 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut에서의 모션 후보들의 검사 순서
CN110662059B (zh) 2018-06-29 2021-04-20 北京字节跳动网络技术有限公司 使用查找表存储先前编码的运动信息并用其编码后续块的方法和装置
WO2020003270A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Number of motion candidates in a look up table to be checked according to mode
WO2020003261A1 (en) * 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Selection from multiple luts
KR20210024502A (ko) 2018-06-29 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Hmvp 후보를 병합/amvp에 추가할 때의 부분/풀 프루닝
CN114845108A (zh) 2018-06-29 2022-08-02 抖音视界(北京)有限公司 查找表的更新：fifo、约束的fifo
JP7181395B2 (ja) 2018-07-02 2022-11-30 北京字節跳動網絡技術有限公司 イントラ予測モードを有するルックアップテーブルおよび非隣接ブロックからのイントラモード予測
CN112585976A (zh) * 2018-08-06 2021-03-30 韩国电子通信研究院 用于对图像进行编码/解码的方法和设备以及用于存储比特流的记录介质
CN117241039A (zh) 2018-08-28 2023-12-15 华为技术有限公司 帧间预测方法、装置以及视频编码器和视频解码器
TWI820211B (zh) 2018-09-12 2023-11-01 大陸商北京字節跳動網絡技術有限公司 取決於總數減去k的開始檢查hmvp候選的條件
CN118555391A (zh) * 2018-09-21 2024-08-27 韩国电子通信研究院 图像编码/解码方法和用于发送压缩视频数据的装置
EP3847814A4 (en) 2018-11-06 2021-07-14 Beijing Bytedance Network Technology Co. Ltd. POSITION DEPENDENT STORAGE, MOVEMENT INFORMATION
US10887611B2 (en) * 2018-12-27 2021-01-05 Qualcomm Incorporated Pruning for illumination compensation mode
RU2770863C1 (ru) * 2018-12-28 2022-04-22 ДжейВиСиКЕНВУД Корпорейшн Устройство кодирования кадров, способ кодирования кадров, устройство декодирования кадров и способ декодирования кадров
BR112021012435A8 (pt) * 2018-12-28 2022-08-02 Jvckenwood Corp Dispositivo de decodificação de imagem, método de decodificação de imagem e programa de decodificação de imagem
WO2020143741A1 (en) 2019-01-10 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Invoke of lut updating
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
WO2020147772A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Motion candidates derivation
CN110809161B (zh) * 2019-03-11 2020-12-29 杭州海康威视数字技术股份有限公司 运动信息候选者列表构建方法及装置
WO2020192611A1 (en) 2019-03-22 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
JP7405870B2 (ja) 2019-05-24 2023-12-26 華為技術有限公司 Ｉｂｃマージ・リストのために使用する符号化器、復号器、及び対応する方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883678A (en) * 1995-09-29 1999-03-16 Kabushiki Kaisha Toshiba Video coding and video decoding apparatus for reducing an alpha-map signal at a controlled reduction ratio
US20070147514A1 (en) * 1996-10-31 2007-06-28 Noboru Yamaguchi Video encoding apparatus and video decoding apparatus
US20070291838A1 (en) * 2002-01-05 2007-12-20 Samsung Electronics Co., Ltd. Image coding and decoding method and apparatus considering human visual characteristics
US20090046781A1 (en) * 2005-09-26 2009-02-19 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3703836C2 (de) 1987-02-07 1995-12-21 Heinrich Lindert Bearbeitungsanlage für Geflügelfleisch
JP3637996B2 (ja) 1997-03-28 2005-04-13 シャープ株式会社 領域統合が可能な動き補償フレーム間予測方式を用いた動画像符号化・復号化装置
KR100407691B1 (ko) * 2000-12-21 2003-12-01 한국전자통신연구원 계층탐색을 이용한 움직임 추정장치 및 방법
JP3823767B2 (ja) * 2001-07-18 2006-09-20 日本電信電話株式会社 動画像の前景背景領域分離方法、及びその方法を用いた条件付画素補填による動画像符号化方法
EP1478190B1 (en) * 2002-04-26 2013-01-02 NTT DoCoMo, Inc. Image encoding device, image encoding method, and image encoding program
US20050013498A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
JP4213646B2 (ja) * 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
KR100878827B1 (ko) * 2005-07-08 2009-01-14 엘지전자 주식회사 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는방법
KR20070056627A (ko) * 2005-11-30 2007-06-04 삼성전자주식회사 움직임 추정장치, 움직임 추정방법 및 전역 움직임추정장치
RU2426267C2 (ru) * 2007-01-08 2011-08-10 Нокиа Корпорейшн Усовершенствованное межуровневое предсказание для расширенной пространственной масштабируемости при кодировании видеосигнала
KR100809354B1 (ko) * 2007-02-02 2008-03-05 삼성전자주식회사 복원된 프레임의 프레임율을 업컨버팅하는 장치 및 방법
JP5025286B2 (ja) * 2007-02-28 2012-09-12 シャープ株式会社 符号化装置及び復号装置
CN101669367A (zh) * 2007-03-02 2010-03-10 Lg电子株式会社 用于解码/编码视频信号的方法及设备
CN100571370C (zh) 2007-05-24 2009-12-16 中兴通讯股份有限公司 将传统iptv终端接入ims域的装置、系统和方法
CN100496127C (zh) * 2007-06-05 2009-06-03 南京大学 Mpeg-2到h.264码的快速转换方法
US8345968B2 (en) * 2007-06-28 2013-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
CN101198064A (zh) * 2007-12-10 2008-06-11 武汉大学 一种分辨率分层技术中的运动矢量预测方法
US8649437B2 (en) * 2007-12-20 2014-02-11 Qualcomm Incorporated Image interpolation with halo reduction
WO2010004939A1 (ja) * 2008-07-10 2010-01-14 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
JP5401071B2 (ja) * 2008-10-09 2014-01-29 株式会社Ｎｔｔドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、動画像復号プログラム、動画像処理システムおよび動画像処理方法
CN101931739A (zh) * 2009-06-23 2010-12-29 鸿富锦精密工业（深圳）有限公司 绝对误差总和值估算系统及方法
CN101600108B (zh) * 2009-06-26 2011-02-02 北京工业大学 一种多视点视频编码中的运动和视差联合估计方法
CN101860754B (zh) * 2009-12-16 2013-11-13 香港应用科技研究院有限公司 运动矢量编码和解码的方法和装置
US8885711B2 (en) * 2009-12-17 2014-11-11 Sk Telecom Co., Ltd. Image encoding/decoding method and device
KR101457396B1 (ko) * 2010-01-14 2014-11-03 삼성전자주식회사 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치
CN103039075B (zh) * 2010-05-21 2015-11-25 Jvc建伍株式会社 图像编码装置、图像编码方法、以及图像解码装置、图像解码方法
KR101449679B1 (ko) * 2010-08-18 2014-10-15 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법, 및 참조픽처 인덱싱 장치 및 방법
US9282338B2 (en) * 2011-06-20 2016-03-08 Qualcomm Incorporated Unified merge mode and adaptive motion vector prediction mode candidates selection
JP5644701B2 (ja) 2011-06-30 2014-12-24 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに、送信装置、送信方法、及び送信プログラム
CN107071403B (zh) * 2011-06-30 2019-09-24 Jvc建伍株式会社 图像编码装置、图像编码方法、图像解码装置及图像解码方法
GB2559062B (en) * 2011-10-17 2018-11-14 Kt Corp Video decoding method using transform method selected from a transform method set

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883678A (en) * 1995-09-29 1999-03-16 Kabushiki Kaisha Toshiba Video coding and video decoding apparatus for reducing an alpha-map signal at a controlled reduction ratio
US20070147514A1 (en) * 1996-10-31 2007-06-28 Noboru Yamaguchi Video encoding apparatus and video decoding apparatus
US20070291838A1 (en) * 2002-01-05 2007-12-20 Samsung Electronics Co., Ltd. Image coding and decoding method and apparatus considering human visual characteristics
US20090046781A1 (en) * 2005-09-26 2009-02-19 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Yunfei Zheng et al. Unified Motion Vector Predictor Selection for Merge and AMVP, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, JCTVC-E396, 5th Meeting: Geneva, 16-23 March, 2011 *

Also Published As

Publication number Publication date
US20160241857A1 (en) 2016-08-18
KR20150085093A (ko) 2015-07-22
CN107105227B (zh) 2019-10-25
TW201722159A (zh) 2017-06-16
KR101777097B1 (ko) 2017-09-08
TWI563835B (zh) 2016-12-21
EP2728882A1 (en) 2014-05-07
KR20160139044A (ko) 2016-12-06
US9363529B2 (en) 2016-06-07
KR101744468B1 (ko) 2017-06-07
EP3419289B1 (en) 2020-12-23
US20140219356A1 (en) 2014-08-07
TW201608879A (zh) 2016-03-01
EP3419290A1 (en) 2018-12-26
HUE053035T2 (hu) 2021-06-28
CN107105228A (zh) 2017-08-29
US20160080759A1 (en) 2016-03-17
TW201309039A (zh) 2013-02-16
CN107071403A (zh) 2017-08-18
PL3422714T3 (pl) 2021-05-31
TW201722158A (zh) 2017-06-16
US20150131734A1 (en) 2015-05-14
EP3285489B1 (en) 2019-04-24
EP3285489A1 (en) 2018-02-21
CN107105228B (zh) 2020-03-20
KR101729429B1 (ko) 2017-04-21
KR101681011B1 (ko) 2016-11-29
US9191680B2 (en) 2015-11-17
KR20160023917A (ko) 2016-03-03
KR20170064554A (ko) 2017-06-09
CN103609120A (zh) 2014-02-26
WO2013001793A1 (ja) 2013-01-03
EP3419289A1 (en) 2018-12-26
PL3419289T3 (pl) 2021-04-19
CN106851267A (zh) 2017-06-13
EP3422714B1 (en) 2020-12-23
US8982956B2 (en) 2015-03-17
PL3419290T3 (pl) 2021-05-31
CN107105227A (zh) 2017-08-29
KR101598306B1 (ko) 2016-02-26
US9706208B2 (en) 2017-07-11
KR20140031384A (ko) 2014-03-12
TWI605707B (zh) 2017-11-11
CN103609120B (zh) 2016-09-28
EP3422714A1 (en) 2019-01-02
US9800873B2 (en) 2017-10-24
EP3419290B1 (en) 2020-12-23
TWI577183B (zh) 2017-04-01
BR112013033818B1 (pt) 2020-02-04
TWI521951B (zh) 2016-02-11
BR112013033818A2 (pt) 2017-02-14
CN107071403B (zh) 2019-09-24
HUE052633T2 (hu) 2021-05-28
HUE052632T2 (hu) 2021-05-28
US20170105000A1 (en) 2017-04-13
TW201707456A (zh) 2017-02-16
EP2728882A4 (en) 2015-03-25
CN106851267B (zh) 2019-10-22
EP2728882B1 (en) 2017-11-22

Similar Documents

Publication Publication Date Title
TWI605708B (zh) Image decoding apparatus, image decoding method, and recording medium on which image decoding program is recorded
JP6233489B2 (ja) 画像復号装置、画像復号方法、及び画像復号プログラム
JP5644701B2 (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに、送信装置、送信方法、及び送信プログラム
JP6036976B2 (ja) 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP6036977B2 (ja) 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP5776714B2 (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5776713B2 (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5246303B2 (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP6036975B2 (ja) 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP6036974B2 (ja) 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP5776712B2 (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5776711B2 (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP2013059023A (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム
TW201320758A (zh) 影像編碼裝置、影像編碼方法、影像編碼程式、影像解碼裝置、影像解碼方法及影像解碼程式