CN104170378A - 用于参考从多方块图片的段得到的比特流地址相关信息来确定多方块图片的方块的比特流起始地址的方法和装置 - Google Patents

用于参考从多方块图片的段得到的比特流地址相关信息来确定多方块图片的方块的比特流起始地址的方法和装置 Download PDF

Info

Publication number
CN104170378A
CN104170378A CN201480000830.2A CN201480000830A CN104170378A CN 104170378 A CN104170378 A CN 104170378A CN 201480000830 A CN201480000830 A CN 201480000830A CN 104170378 A CN104170378 A CN 104170378A
Authority
CN
China
Prior art keywords
bit stream
address
square
coding unit
maximum coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480000830.2A
Other languages
English (en)
Other versions
CN104170378B (zh
Inventor
王智鸣
郑佳韵
张永昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN104170378A publication Critical patent/CN104170378A/zh
Application granted granted Critical
Publication of CN104170378B publication Critical patent/CN104170378B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种方块处理方法，至少包括如下步骤：分析多方块图片的比特流，以用于从多方块图片的至少一个特定段的段头得到比特流地址相关信息；利用方块处理电路，以至少接收比特流地址相关信息和至少参考已接收的比特流地址相关信息来确定多方块图片的特定方块的比特流起始地址。

Description

用于参考从多方块图片的段得到的比特流地址相关信息来确定多方块图片的方块的比特流起始地址的方法和装置
交叉引用
本发明主张在2013年1月9日提出的申请号为61/750,413的美国临时专利申请的优先权；主张在2013年12月30日提出的申请号为14/142,929的美国专利申请的优先权。因此在全文中合并参考这些专利申请案。
技术领域
本发明是有关于处理多方块图片，特别是有关于用于参考从多方块图片的段(例如，切片)得到的比特流地址相关信息来确定多方块图片的方块的比特流起始地址的方法和装置。
背景技术
正如提出的高效率视频编码(High-Efficiency Video Coding,以下简称为HEVC)规格，一个图片可以划分为多个方块(tiles)，以及一个方块可以划分为多个切片。在每一个切片中，最大编码单元(largest coding units,LCUs)是光栅扫描的。在每一个方块中，切片是顺序扫描的。在每一个多方块图片(multi-tile picture)中，方块是光栅扫描的。此外，正如提出的HEVC规格，一个图片可以划分为多个切片，以及一个切片可以划分为多个方块。在每一个方块中，最大编码单元是光栅扫描的。在每一个切片中，方块是光栅扫描的。在每一个多方块图片中，切片是顺序扫描的。在一个现有的解码设计中，多方块图片的比特流会被顺序地解码，以便为此在扫描过程中获得方块。
按照HEVC规格，在每一个方块的流中没有定义起始码(start code)。因此，由于在比特流中的每一个方块缺少比特流起始地址，现有的解码设计不能直接解码多方块图片中的一个方块而不解码同一多方块图片中的先前方块。此外，由于在比特流中缺少每一个方块的比特流起始地址，现有的解码设计不能并行解码同一多方块图片中的多个方块。
发明内容
根据本发明的示范性实施方式，提出一种用于参考从多方块图片的段(例如，切片)得到的比特流地址相关信息，来确定多方块图片的方块的比特流起始地址的方法和装置，以解决上述技术问题。
根据本发明的第一方面，揭示了一种方块处理方法。该方块处理方法至少包括如下步骤：分析多方块图片的比特流，以用于从多方块图片的至少一个特定段的段头得到比特流地址相关信息；利用方块处理电路，以至少接收比特流地址相关信息和至少参考已接收的比特流地址相关信息来确定多方块图片的特定方块的比特流起始地址。
根据本发明的第二方面，揭示了一种方块处理装置。该方块处理装置包括：解复用器和方块处理电路。解复用器分析多方块图片的比特流，以用于从多方块图片的至少一个特定段的段头得到比特流地址相关信息。方块处理电路，至少接收比特流地址相关信息和至少参考已接收的比特流地址相关信息来确定多方块图片的特定方块的比特流起始地址。
在参阅随后的通过附图解释说明的优选具体实施方式的详尽描述后，本领域的技术人员便可了解本发明的上述或者其他发明目的。
附图说明
图1为根据本发明实施方式的采用方块处理装置的视频处理系统的示意图。
图2为包括于多方块图片中的方块的实施方式的示意图。
图3为包括于多方块图片的切片的实施方式的示意图。
图4为包括于多方块图片中的最大编码单元的示意图。
图5为多方块图片的比特流结构的实施方式的示意图。
图6为根据本发明实施方式的第一方块处理方法的流程图。
图7为包括于多方块图片中的切片的实施方式的示意图。
图8为包括于多方块图片的方块的实施方式的示意图。
图9为包括于多方块图片中的最大编码单元的示意图。
图10为多方块图片的比特流结构的另一实施方式的示意图。
图11为根据本发明实施方式的第二方块处理方法的流程图。
具体实施方式
在说明书及前述的权利要求当中使用了某些词汇来指称特定的元件。所属领域中普通技术人员应可理解，硬件制造商可能会用不同的名词来称呼相同个元件。本说明书及前述的权利要求并不以名称的差异来作为区分元件的方式，而是以元件在功能上的差异来作为区分的准则。在通篇说明书及前述的权利要求当中所提及的“包含”为开放式的用语，故应解释成“包含但不限定于”。以外，“耦接”一词在此包含任何直接及间接的电气连接手段。因此，若文中描述第一装置耦接于第二装置，则代表该第一装置可直接电气连接于该第二装置，或通过其它装置或连接手段间接地电气连接至该第二装置。
本发明的主要概念为在多方块图片(multi-tile picture)的比特流中至少利用可用的头信息，来获得多方块图片的任意方块的比特流起始地址。具体地，从多方块图片的比特流中分析得到多方块图片的特定段(segment)的段头(segment header)(即，特定切片的切片头(slice header))，然后参考从段头得到的至少一个地址相关信息，以产生通过应用请求的特定方块的比特流起始地址。提出的方块处理方案的进一步细节将详述如下。
请参考图1，图1为根据本发明实施方式的采用方块处理装置的视频处理系统的示意图。视频处理系统100包括解复用器(demultiplexer,DEMUX)102、视频比特流缓冲器(例如，存储器)104、视频解码器106、数据缓冲器(例如，存储器)108、以及方块处理电路110。其中解复用器102、方块处理电路110和数据缓冲器108作为提出的方块处理装置112，以用于识别在多方块图片中的任意方块的比特流起始地址。传输流(transport stream)包括音频基本流(audio elementary stream)、视频基本流(video elementary stream)等。因此，解复用器102解复用传输流，并输出至少一个多方块图片的视频基本流至视频比特流缓冲器104。当通过方块处理装置112确定特定方块(例如，方块n)的比特流起始地址时，视频解码器106可以仅从在视频比特流缓冲器104中缓冲的视频基本比特流读出特定方块的流(例如，方块n的流)，并直接解码特定方块的流(例如，方块n的流)以恢复特定方块的图像内容。因此，当方块处理装置112能够确定在多方块图片中的任意方块的比特流起始地址时，一个或多个方块的流可以直接地从视频比特流缓冲器104中的视频基本流检索(retrieve)。这样，视频处理系统100能够支持各种应用。例如，多方块的多核处理，以及解码单一方块的感兴趣区域(region of interest,ROI)。提出的方块处理装置112的技术特点将详述如下所示。
关于方块处理装置112，解复用器102进一步分析多方块图片的比特流，以用于从多方块图片的至少一个特定段的段头中得到比特流地址相关信息，并存储比特流地址相关信息于数据缓冲器108中，以及方块处理电路110至少接收比特流地址相关信息，并至少参考已接收的比特流地址相关信息以确定多方块图片的特定方块的比特流起始地址。因此，当解复用传输流时，解复用器102也分析视频基本流以从每一个段头中获得比特流地址相关信息。假定通过视频处理系统100处理的传输流符合HEVC规格，每一个段为切片(slice)。然而，此并非用于限制本发明。至少利用比特流中可用的段(该段可以包括多个方块，或者该段可以包括于一个方块中)的头信息来确定所需的方块的比特流起始地址的任意多方块图片处理系统均落入本发明的保护范围。为简明和简洁起见，以下假设段为在HEVC中定义的切片。
在第一方案中，一个图片被划分为多个方块，以及每一个方块被划分为一个或多个切片。由于上述提到的特定段(例如，特定切片)包括于上述提到的特定方块中，以及上述的特定段不大于上述的特定方块。具体地，特定切片为特定方块的至少一部分(即，部分或全部)，从特定切片的切片头的分析操作中获得的比特流地址相关信息可以包括特定切片的第一最大编码单元地址和指示特定切片的比特流起始地址的相关比特流指针。
请参考图2～图4，图2为包括于多方块图片中的方块的实施方式的示意图。图3为包括于多方块图片的切片的实施方式的示意图。图4为包括于多方块图片中的最大编码单元的示意图。如图2所示，示范性的多方块图片200具有两个垂直分区(partition)和水平分区，因此产生四个方块(方块Tile 0、方块Tile 1、方块Tile 2和方块Tile 3)。此仅用于解释说明之用，而并非用于限制本发明。在实践中，依据实际的设计考虑，可以调整方块的数目和方块的尺寸。依照HEVC规格，先扫描左上方的方块Tile 0；在扫描左上方的方块Tile 0之后，扫描右上方的方块Tile 1；在扫描右上方的方块Tile 1之后，扫描左下方的方块Tile 2；以及在扫描左下方的方块Tile 2之后，扫描右下方的方块Tile 3。如图3所示，方块Tile 0～方块Tile 2的每一个被划分为两个切片，以及整个方块Tile 3视为切片Slice 6。此仅用于解释说明，而并非用于限制本发明。在实践中，依据实际的设计考虑，可以调整包括于方块中的切片的数目。依照HEVC规格，光栅扫描(raster scan)每一个方块中的最大编码单元。因此，对于左上方的方块Tile 0，先扫描上方的切片Slice 0，以及在扫描上方的切片Slice 0之后扫描下方的切片Slice 1；对于右上方的方块Tile 1，先扫描上方的切片Slice 2，以及在扫描上方的切片Slice 2之后扫描下方的切片Slice 3；以及对于左下方的方块Tile 2，先扫描上方的切片Slice 4，以及在扫描上方的切片Slice 4之后扫描下方的切片Slice 5。除此之外，如图4所示，多方块图片200的连续的最大编码单元以光栅扫描的顺序来排列，以使得左上方的方块Tile 0的上方的切片Slice 0的第一最大编码单元由“0”来索引，左上方的方块Tile 0的下方的切片Slice 1的第一最大编码单元由“32”来索引，右上方的方块Tile 1的上方的切片Slice 2的第一最大编码单元由“7”来索引，右上方的方块Tile 1的下方的切片Slice 3的第一最大编码单元由“23”来索引，左下方的方块Tile 2的上方的切片Slice 4的第一最大编码单元由“48”来索引，左下方的方块Tile 2的下方的切片Slice 5的第一最大编码单元由“64”来索引，以及右下方的方块Tile 3的切片Slice 6的第一最大编码单元由“55”来索引。换句话说，切片Slice 0～切片Slice 6的第一最大编码单元的地址分别为“0”、“32”、“7”、“23”、“48”、“64”和“55”。
请参考图5，图5为多方块图片的比特流结构的实施方式的示意图。如上所述，连续扫描每一个方块中的切片；以及光栅扫描多方块图片中的方块。因此，切片Slice 0～切片Slice 6的流数据可以顺序排列于由如图1所示的解复用器102解复用和分析的视频基本流中，其中每一个切片的流包括切片头和切片数据，其中切片头包括辅助信息，切片数据包括已编码的最大编码单元数据。以切片Slice 3的比特流举例来说，切片数据包括由“23～31”和“39～47”索引的最大编码单元的已编码数据。请注意，依照HEVC规格，切片头具有语法(syntax)slice_segment_address来指示切片的第一最大编码单元地址。因此，当解复用器102分析多方块图片200的HEVC比特流时，解复用器102通过查找包括于对应的切片头中的语法slice_segment_address来获得切片Slice 0～切片Slice 6中的每一个的第一最大编码单元地址，并存储切片Slice 0～切片Slice 6中的每一个的第一最大编码单元地址于数据缓冲器108中。
此外，当解复用器102分析多方块图片200的HEVC比特流时，解复用器102也可以获得切片Slice 0～切片Slice 6中的每一个的比特流起始地址，以响应分析对应的切片的切片头。具体地，当解复用器102发现当前分析特定的切片的切片头时，可以相应地确定特定的切片的比特流起始地址。在此实施方式中，由解复用器102确定的比特流指针BP0～比特流指针BP6会指向存储于视频比特流104中的切片Slice 0～切片Slice 6的流的比特流起始地址。
基于比特流指针和切片Slice 0～切片Slice 6的第一最大编码单元地址，可以轻易确定多方块图片200的任意方块的比特流起始地址。如图5所示，具有更高级别的信息(higher-level information)。例如，包括于多方块图片的比特流中的序列参数级(sequenceparameter set,SPS)和图片参数集(picture parameter set,PPS)。其中，图片参数级具有指示方块分区信息的方块语法(即，在多方块图片中的方块的排列)。因此，基于由解复用器102分析的方块分区信息，方块处理电路110能够计算包括于多方块图片中的每一个方块的第一最大编码单元地址。在HEVC图片参数集中的示范性方块语法将描述如下。
if(tiles_enabled_flag){
num_tile_columns_minus1
num_tile_rows_minus1
uniform_spacing_flag
if(！uniform_spacing_flag){
for(i＝0；i<num_tile_columns_minus1；i++)
column_width_minus1[i]
for(i＝0；i<num_tile_rows_minus1；i++)
row_height_minus1[i]
}
语法元素(syntax elements)num_tile_columns_minus1和语法元素num_tile_rows_minus1指示多方块图片的垂直分区(vertical partitions)的数目和多方块图片的水平分区(horizontal partitions)的数目。因此，方块处理电路110根据语法元素num_tile_columns_minus1和语法元素num_tile_rows_minus1来知道包括于多方块图片中的方块的数目。语法元素uniform_spacing_flag确定方块的宽度是否相同以及方块的高度是否相同。若语法元素uniform_spacing_flag指示方块的宽度不同并且方块的高度也不相同，则语法元素column_width_minus1用于指示每一个方块的宽度，以及语法元素row_height_minus1用于指示每一个方块的高度。在此示例中，方块处理电路110参考方块分区信息以确定方块Tile 0～方块Tile 3的第一最大编码单元的地址分别由“0”、“7”、“48”和“55”来索引。此外，方块处理电路110可以存储方块Tile 0～方块Tile 3的第一最大编码单元的地址于数据缓冲器108中。
如图3所示，方块Tile 0～方块Tile 2中的每一个具有的切片多于一个。由于左上方的方块Tile 0的第一最大编码单元也为左上方的方块Tile 0的上方切片Slice 0的第一最大编码单元，上方的切片Slice 0(即，根据扫描顺序包括于左上方的方块Tile 0中的第一切片)被视为左上方的方块Tile 0的关键切片(key slice)。相似地，上方的切片Slice 2(即，根据扫描顺序包括于右上方的方块Tile 1中的第一切片)被视为右上方的方块Tile 1的关键切片；上方的切片Slice 4(即，根据扫描顺序包括于左下方的方块Tile 2中的第一切片)被视为左下方的方块Tile 2的关键切片；以及切片Slice 6(即，根据扫描顺序包括于右下方的方块Tile 3中的第一切片)被视为右下方的方块Tile 3的关键切片。在此实施方式中，方块处理电路110发现关键切片具有的第一最大编码单元地址等同于应用请求的特定方块的第一最大编码单元地址，然后通过发现的关键切片指向的比特流指向的比特流起始地址来设置特定方块的比特流起始地址。
在感兴趣区域解码应用仅需要解码特定方块的情况下，方块处理电路110发现特定切片(即，关键切片)的第一最大编码单元地址等于特定方块的第一最大编码单元地址，并将特定切片的比特流起始地址作为特定方块的比特流起始地址来输出。因此，视频解码器106直接从存储于视频比特流缓冲器104的视频基本流中检索特定方块的比特流，并完成用于解码特定方块的感兴趣区域。在多核处理应用同时需要解码多个特定方块的情况下，方块处理电路110分别发现特定切片(即，关键切片)的第一最大编码单元地址等于特定方块的第一最大编码单元地址，并将特定切片的比特流起始地址作为特定方块的比特流起始地址来输出。因此，视频解码器106直接从存储于视频比特流缓冲器104的视频基本流中检索特定方块的比特流，并完成用于特定方块的多核处理。
请参考图6，图6为根据本发明实施方式的第一方块处理方法的流程图。在第一方案下，方块处理装置100采用第一方块处理方法。若结果实质上相同，则步骤不需要按图6所示的顺序来严格执行。此外，根据设计的实际考虑，流程可以省略一个或多个步骤及/或包括一个或多个额外的步骤。得到特定方块的比特流起始地址的操作可以简单地归纳如下。
步骤602：分析HEVC比特流(例如，要处理的具有多方块图片的视频基本流)。
步骤604：根据每一个切片的切片头中的语法slice_segment_address来发现每一个切片的切片头中的第一最大编码单元地址。
步骤606：确定每一个切片的比特流起始地址以产生比特流指针。
步骤608：存储每一个切片的第一最大编码单元地址于数据缓冲器(例如，存储器)中。
步骤610：存储每一个切片的比特流指针于数据缓冲器中。
步骤612：根据在图片参数集(PPS)中的方块语法计算每一个方块的第一最大编码单元地址。
步骤614：存储每一个方块的第一最大编码单元地址于数据缓冲器中。
步骤616，发现特定切片(即，关键切片)的第一最大编码单元地址等于应用请求的特定方块的第一最大编码单元地址。
步骤618：输出通过发现的特定切片的比特流指针指向的比特流起始地址，以作为特定方块的比特流起始地址。
请注意，步骤616和步骤618可以重复执行，并由此输出应用请求的多个特定方块的比特流起始地址。本领域技术人员在阅读第一方案下的方块处理装置100的相关段落之后，可以轻易地理解图6所示的每一个步骤的实施细节。为求简洁，省略进一步的描述。
在第二方案中，一个图片被划分为多个切片，以及每一个切片被划分一个或多个方块。由于上述提到的特定方块为包括于上述提到的特定段(例如，特定切片)中，以及上述的特定方块不大于上述的特定段。具体地，特定方块为特定切片的至少一部分(即，部分或全部)。当切片包括多于一个的方块时，从特定切片的切片头的分析操作中获得的比特流地址相关信息可以包括特定切片的第一最大编码单元地址、指示特定切片的比特流起始地址的相关比特流指针、和包括于特定切片中的至少一个方块的比特流偏移。
请参考图7～图9，图7为包括于多方块图片中的切片的实施方式的示意图。图8为包括于多方块图片的方块的实施方式的示意图。图9为包括于多方块图片中的最大编码单元的示意图。如图7所示，多方块图片700具有两个水平分区(partition)，因此产生两个切片(切片Slice 0和切片Slice 1)。如图8所示，切片Slice 0和切片Slice 1中的每一个被划分为两个方块。此仅用于解释说明之用，而并非用于限制本发明。在实践中，依据实际的设计考虑，可以调整切片/方块的数目和切片/方块的尺寸。依照HEVC规格，先扫描上方的切片Slice 0的左边的方块Tile 0；在扫描上方的切片Slice 0的左边的方块Tile 0之后，扫描上方的切片Slice 0的右方的方块Tile 1；在扫描上方的切片Slice 0的右边的方块Tile 1之后，扫描下方的切片Slice 1的左方的方块Tile 2；以及在扫描下方的切片Slice 1的左边的方块Tile 2之后，扫描下方的切片Slice 1的右方的方块Tile 3。如图9所示，多方块图片700的连续的最大编码单元以光栅扫描的顺序来排列，以使得上方的切片Slice 0的左方的方块Tile 0的第一最大编码单元由“0”来索引，上方的切片Slice 0的右方的方块Tile 1的第一最大编码单元由“7”来索引，下方的切片Slice 1的左方的方块Tile 2的第一最大编码单元由“48”来索引，以及下方的切片Slice 1的右方的方块Tile 3的第一最大编码单元由“55”来索引。换句话说，切片Slice 0～切片Slice 1的第一最大编码单元的地址分别为“0”和“48”。
请参考图10，图10为多方块图片的比特流结构的另一实施方式的示意图。如上所述，光栅扫描切片中的方块，以及连续扫描多方块图片中的切片。因此，切片Slice 0～切片Slice1的比特流数据可以顺序安排于由如图1所示的解复用器102解复用和分析的视频基本流中。与图3所示的比特流结构类似，每一个切片的流包括切片头和切片数据，其中切片头包括辅助信息，切片数据包括已编码的最大编码单元数据。切片头具有语法(syntax)slice_segment_address来指示切片的第一最大编码单元地址。因此，当解复用器102分析多方块图片700的HEVC比特流时，解复用器102通过查找包括于对应的切片头的语法slice_segment_address来获得切片Slice 0～切片Slice 1中的每一个的第一最大编码单元地址，并存储切片Slice 0～切片Slice 1中的每一个的第一最大编码单元地址于数据缓冲器108中。进一步，当解复用器102分析多方块图片700的HEVC比特流时，解复用器102也可以获得切片Slice 0～切片Slice 1中的每一个的比特流起始地址，以响应分析对应的切片的切片头。具体地，当解复用器102发现当前分析特定的切片的切片头时，可以相应地确定特定的切片的比特流起始地址。因此，解复用器102可以存储切片Slice 0～切片Slice 1的比特流指针BP0、比特流指针BP1于数据缓冲器108中，其中比特流指针BP0、比特流指针BP1会分别指向存储于视频比特流104中的切片Slice 0～切片Slice 1的流的比特流起始地址。
由于一个切片可被划分为多个方块，方块偏移语法包括于HEVC切片头中。在此实施方式中，根据光栅扫描顺序，解复用器102进一步分析切片头以获得在扫描切片中的第一个方块之后的每一个方块的比特流偏移地址。在HEVC切片头中的方块偏移语法将描述如下。
if(tiles_enabled_flag||entropy_coding_sync_enabled_flag){
num_entry_point_offsets
if(num_entry_point_offsets>0){
offset_len_minus1
for(i＝0；i<num_entry_point_offsets；i++)
entry_point_offset[i]}
}
语法元素num_entry_point_offsets指示比特流偏移的数目。语法元素offset_len_minus1指示每一个比特流偏移的位长度。语法元素entry_point_offset记录一个方块的比特流偏移。在此实施方式中，从切片Slice 0的切片头中的方块偏移语法中获得在切片Slice 0的比特流起始地址(即，方块Tile 0的比特流起始地址)和方块Tile 1的比特流起始地址之间的比特流偏移Offset 1，以及在切片Slice 1的切片头中的方块偏移语法中获得在切片Slice 1的比特流起始地址(即，方块Tile 2的比特流起始地址)和方块Tile 3的比特流起始地址之间的比特流偏移Offset 3。
基于比特流指针和切片Slice 0～切片Slice 1的第一最大编码单元地址，可以轻易地确定在多方块图片700中的方块Tile 0和方块Tile 2的比特流起始地址。此外，基于比特流指针和切片Slice 0～切片Slice 1的第一最大编码单元地址以及方块Tile 1和方块Tile 3的比特流偏移，可以轻易确定在多方块图片700中的方块Tile 1和方块Tile 3比特流起始地址。
如上所示，一个图片参数集包括于多方块图片的流中，其中图片参数集具有指示方块分区信息(即，在多方块图片中的方块的排列)的方块语法。因此，基于由解复用器102分析的方块分区信息，方块处理电路110能够计算包括于多方块图片700中的每一个方块的第一最大编码单元地址。在此示例中，方块处理电路110确定方块Tile 0～方块Tile 3的第一最大编码单元的地址分别由“0”、“7”、“48”和“55”来索引，然后存储方块Tile 0～方块Tile 3的第一最大编码单元的地址于数据缓冲器108中。
如图8和图9所示，切片Slice 0的比特流起始地址也为方块Tile 0的比特流起始地址，以及切片Slice 1的比特流起始地址也为方块Tile 2的比特流起始地址。因此，当方块处理电路110发现切片Slice 0和Slice 1中的一个具有的第一最大编码单元地址等于等同于应用请求的特定方块的第一最大编码单元地址时，方块处理电路110通过发现的切片的比特流指针指向的比特流起始地址来设置特定方块的比特流起始地址。然而，当方块处理电路110发现切片Slice 0和切片Slice 1中的每一个的第一最大编码单元地址均不等同于应用请求的特定方块的第一最大编码单元地址时，这意味着根据光栅扫描顺序请求的特定方块不是切片Slice 0和切片Slice 1中的任何一个的第一方块，特定方块的比特流偏移用于确定特定方块的比特流起始地址。具体地，方块处理电路110将特定方块的比特流偏移添加至特定切片的比特流起始地址，并由此产生特定方块的比特流起始地址，其中该特定切片包括特定方块。
在感兴趣区域解码应用仅需要解码特定方块的情况下，方块处理电路110通过特定切片的比特流起始地址或特定切片的比特流起始地址与特定方块的比特流偏移之和作为特定方块的比特流起始地址，来设置特定方块的比特流起始地址。因此，视频解码器106直接从存储于视频比特流缓冲器104的视频基本流中检索特定方块的比特流，并完成用于解码特定方块的感兴趣区域。在多核处理应用同时需要解码多个特定方块的情况下，方块处理电路110通过多个特定切片的比特流起始地址或特定切片的比特流起始地址加上特定方块的比特流偏移的多个和来确定特定方块的比特流起始地址。因此，视频解码器106直接从存储于视频比特流缓冲器104的视频基本流中检索特定方块的比特流，并完成用于特定方块的多核处理。
请参考图11，图11为根据本发明实施方式的第二方块处理方法的流程图。在第二方案下，方块处理装置100采用第二方块处理方法。若结果实质上相同，则步骤不需要按图11所示的顺序来严格执行。此外，根据设计的实际考虑，流程可以省略一个或多个步骤及/或包括一个或多个额外的步骤。得到特定方块的比特流起始地址的操作可以简单地归纳如下。
步骤1102：分析HEVC比特流(例如，要处理的具有多方块图片的视频基本流)。
步骤1104：根据每一个切片的切片头中的语法slice_segment_address来发现每一个切片的第一最大编码单元地址。
步骤1106：确定每一个切片的比特流起始地址以产生比特流指针。
步骤1108：根据每一个切片的切片头中的方块偏移语法，发现方块的比特流偏移。
步骤1110：存储每一个切片的第一最大编码单元地址于数据缓冲器(例如，存储器)中。
步骤1112：存储每一个切片的比特流指针于数据缓冲器中。
步骤1114：存储方块的比特流偏移于数据缓冲器中。
步骤1116：根据图片参数集中的方块语法计算每一个方块的第一最大编码单元的地址。
步骤1118：存储每一个方块的第一最大编码单元地址于数据缓冲器中。
步骤1120：检测特定切片具有的第一最大编码单元地址是否等同于应用请求的特定方块的第一最大编码单元地址。若是，则转至步骤1122；否则，转至步骤1124。
步骤1122：通过发现的特定切片的比特流指针指向的比特流起始地址来设置特定方块的比特流起始地址。
步骤1124：根据包括特定方块的特定切片的比特流起始地址和特定方块的比特流偏移来设置特定方块的比特流起始地址。
请注意，步骤1120、步骤1122和步骤1124可以重复执行，并由此输出应用请求的多个特定方块的比特流起始地址。本领域技术人员在阅读第二方案下的方块处理装置100的相关段落之后，可以轻易地理解图11所示的每一个步骤的实施细节。为求简洁，省略进一步的描述。
虽然本发明已以较佳实施方式揭露如上，然而必须了解其并非用以限定本发明。相反，任何本领域技术人员，在不脱离本发明的精神和范围内，当可做些许更动与润饰，因此本发明的保护范围应当以权利要求书所界定的保护范围为准。

Claims (20)

1.一种方块处理方法，其特征在于，包括：
分析多方块图片的比特流，以用于从该多方块图片的至少一个特定段的段头得到比特流地址相关信息；
利用方块处理电路，以至少接收该比特流地址相关信息和至少参考已接收的比特流地址相关信息来确定该多方块图片的特定方块的比特流起始地址。
2.根据权利要求1所述的方块处理方法，其特征在于，该特定段包括于该特定方块中。
3.根据权利要求2所述的方块处理方法，其特征在于，根据扫描顺序，该特定段为包括于该特定方块中的多个段的第一段。
4.根据权利要求2所述的方块处理方法，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该分析多方块图片的比特流的步骤进一步包括：分析该比特流中的方块分区信息，并从该方块分区信息中得到该特定方块的第一最大编码单元地址；以及
该至少接收该比特流地址相关信息的步骤包括：
查找具有该第一最大编码单元地址等同于该特定方块的该第一最大编码单元地址的段；
当发现该特定段的该第一最大编码单元地址等同于该特定方块的该第一最大编码单元地址时，接收从该特定段得到的该比特流地址相关信息。
5.根据权利要求2所述的方块处理方法，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该从该段头得到比特流地址相关信息的步骤包括：获得该特定段的比特流起始地址，以响应分析该特定段的该段头；以及
该至少接收该比特流地址相关信息来确定该特定方块的比特流起始地址的步骤包括：通过该特定段的该比特流起始地址来设置该特定方块的该比特流起始地址。
6.根据权利要求1所述的方块处理方法，其特征在于，该特定方块包括于该特定段中。
7.根据权利要求6所述的方块处理方法，其特征在于，根据扫描顺序，该特定方块为包括于该特定段中的多个方块的第一方块。
8.根据权利要求6所述的方块处理方法，其特征在于，根据扫描顺序，该特定方块不是包括于该特定段中的多个方块的第一方块。
9.根据权利要求6所述的方块处理方法，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该分析多方块图片的比特流的步骤进一步包括：分析该多方块图片的该比特流中的方块分区信息，并从该方块分区信息中得到该特定方块的第一最大编码单元地址；
该从该段头得到比特流地址相关信息的步骤包括：获得该特定段的比特流起始地址，以响应分析该特定段的该段头；以及
该至少参考已接收的比特流地址相关信息来确定该特定方块的比特流起始地址的步骤包括：
当该特定方块的该第一最大编码单元地址等同于该特定段的该第一最大编码单元地址时，通过该特定段的该比特流起始地址来设置该特定方块的该比特流起始地址。
10.根据权利要求6所述的方块处理方法，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址和该特定方块的比特流偏移；
该分析多方块图片的比特流的步骤进一步包括：分析该多方块图片的该比特流中的方块分区信息；并从该方块分区信息得到该特定方块的第一最大编码单元地址；
该从该段头得到比特流地址相关信息的步骤进一步包括：获得该特定段的比特流起始地址，以响应分析该特定段的该段头，以及获得该特定方块的该比特流偏移；以及
该至少参考已接收的比特流地址相关信息来确定该特定方块的比特流起始地址的步骤包括：
当该特定方块的该第一最大编码单元地址不同于该特定段的该第一最大编码单元地址时，根据该特定段的该比特流起始地址和该特定方块的该比特流偏移来设置该特定方块的该比特流起始地址。
11.一种方块处理装置，其特征在于，包括：
解复用器，分析多方块图片的比特流，以用于从该多方块图片的至少一个特定段的段头得到比特流地址相关信息；以及
方块处理电路，至少接收该比特流地址相关信息和至少参考已接收的比特流地址相关信息来确定该多方块图片的特定方块的比特流起始地址。
12.根据权利要求11所述的方块处理装置，其特征在于，该特定段包括于该特定方块中。
13.根据权利要求12所述的方块处理装置，其特征在于，根据扫描顺序，该特定段为包括于该特定方块中的多个段的第一段。
14.根据权利要求12所述的方块处理装置，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该解复用器分析该比特流中的方块分区信息，并且该方块处理电路进一步从该方块分区信息中得到该特定方块的第一最大编码单元地址；以及
该方块处理电路查找具有该第一最大编码单元地址等同于该特定方块的该第一最大编码单元地址的段；以及当发现该特定段的该第一最大编码单元地址等同于该特定方块的该第一最大编码单元地址时，接收从该特定段得到的该比特流地址相关信息。
15.根据权利要求12所述的方块处理装置，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该解复用器获得该特定段的比特流起始地址作为该比特流地址相关信息，以响应分析该特定段的该段头；以及
该方块处理电路通过该特定段的该比特流起始地址来设置该特定方块的该比特流起始地址。
16.根据权利要求11所述的方块处理装置，其特征在于，该特定方块包括于该特定段中。
17.根据权利要求16所述的方块处理装置，其特征在于，根据扫描顺序，该特定方块为包括于该特定段中的多个方块的第一方块。
18.根据权利要求16所述的方块处理装置，其特征在于，根据扫描顺序，该特定方块不是包括于该特定段中的多个方块的第一方块。
19.根据权利要求16所述的方块处理装置，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址；
该解复用器进一步分析该多方块图片的该比特流中的方块分区信息，以及该方块处理电路进一步从该方块分区信息中得到该特定方块的第一最大编码单元地址；
该解复用器获得该特定段的比特流起始地址作为该比特流地址相关信息，以响应分析该特定段的该段头；以及
当该特定方块的该第一最大编码单元地址等同于该特定段的该第一最大编码单元地址时，该方块处理电路通过该特定段的该比特流起始地址来设置该特定方块的该比特流起始地址。
20.根据权利要求16所述的方块处理装置，其特征在于，
该特定段的该段头指示该特定段的第一最大编码单元(LCU)地址和该特定方块的比特流偏移；
该解复用器进一步分析该多方块图片的该比特流中的方块分区信息，以及该方块处理电路从该方块分区信息得到该特定方块的第一最大编码单元地址；
该解复用器通过获得该特定段的比特流起始地址得到该比特流地址相关信息，以响应分析该特定段的该段头，并进一步获得该特定方块的该比特流偏移；以及
当该特定方块的该第一最大编码单元地址不同于该特定段的该第一最大编码单元地址时，该方块处理电路根据该特定段的该比特流起始地址和该特定方块的该比特流偏移来设置该特定方块的该比特流起始地址。
CN201480000830.2A 2013-01-09 2014-01-07 方块处理方法和方块处理装置 Expired - Fee Related CN104170378B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361750413P 2013-01-09 2013-01-09
US61/750,413 2013-01-09
US14/142,929 2013-12-30
US14/142,929 US20140192899A1 (en) 2013-01-09 2013-12-30 Method and apparatus for referring to bitstream address related information derived from segment of multi-tile picture to determine bitstream start address of tile of multi-tile picture
PCT/CN2014/070243 WO2014108059A1 (en) 2013-01-09 2014-01-07 Method and apparatus for referring to bitstream address related information derived from segment of multi-tile picture to determine bitstream start address of tile of multi-tile picture

Publications (2)

Publication Number Publication Date
CN104170378A true CN104170378A (zh) 2014-11-26
CN104170378B CN104170378B (zh) 2017-07-07

Family

ID=51060944

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480000830.2A Expired - Fee Related CN104170378B (zh) 2013-01-09 2014-01-07 方块处理方法和方块处理装置

Country Status (3)

Country Link
US (1) US20140192899A1 (zh)
CN (1) CN104170378B (zh)
WO (1) WO2014108059A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113170237A (zh) * 2018-09-28 2021-07-23 中兴通讯股份有限公司 视频编码与解码方法和设备

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6214235B2 (ja) * 2012-07-02 2017-10-18 キヤノン株式会社 ファイル生成方法、ファイル生成装置、及びプログラム
KR102111436B1 (ko) * 2014-01-06 2020-05-18 에스케이 텔레콤주식회사 다중 영상의 단일 비트 스트림 생성방법 및 생성장치
WO2017091023A1 (ko) * 2015-11-24 2017-06-01 삼성전자 주식회사 비디오 복호화 방법 및 장치, 그 부호화 방법 및 장치
WO2019145262A1 (en) * 2018-01-25 2019-08-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient sub-picture extraction
KR20200145742A (ko) * 2019-06-20 2020-12-30 주식회사 엑스리스 영상 신호 부호화/복호화 방법 및 이를 위한 장치
WO2021164783A1 (en) * 2020-02-21 2021-08-26 Beijing Bytedance Network Technology Co., Ltd. Signaling of slice and tile picture partitions
WO2021170132A1 (en) * 2020-02-28 2021-09-02 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods simplifying signalling slice header syntax elements
AU2021226398A1 (en) * 2020-02-28 2022-09-29 Huawei Technologies Co., Ltd. A decoder and corresponding methods to signal picture partitioning information for slices

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001078489A2 (en) * 2000-04-07 2001-10-25 Broadcom Homenetworking, Inc. Frame-based communication with variable rate payload
CN1622624A (zh) * 2003-11-28 2005-06-01 联发科技股份有限公司 视讯译码装置的影像比特流译码系统与方法
CN1771548A (zh) * 2003-04-04 2006-05-10 Lg电子株式会社 继续回放的系统和方法
CN1820317A (zh) * 2003-10-18 2006-08-16 三星电子株式会社 任意再现音频数据的数据再现设备及其方法
CN101453648A (zh) * 2007-12-07 2009-06-10 联发科技股份有限公司 源图像编码的方法与系统以及译码压缩图像的方法与系统
CN101506813A (zh) * 2006-08-25 2009-08-12 三星电子株式会社 以段为单位执行av内容的方法、avcp装置和家庭网络系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8767824B2 (en) * 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
WO2013111593A1 (ja) * 2012-01-27 2013-08-01 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001078489A2 (en) * 2000-04-07 2001-10-25 Broadcom Homenetworking, Inc. Frame-based communication with variable rate payload
CN1771548A (zh) * 2003-04-04 2006-05-10 Lg电子株式会社 继续回放的系统和方法
CN1820317A (zh) * 2003-10-18 2006-08-16 三星电子株式会社 任意再现音频数据的数据再现设备及其方法
CN1622624A (zh) * 2003-11-28 2005-06-01 联发科技股份有限公司 视讯译码装置的影像比特流译码系统与方法
CN101506813A (zh) * 2006-08-25 2009-08-12 三星电子株式会社 以段为单位执行av内容的方法、avcp装置和家庭网络系统
CN101453648A (zh) * 2007-12-07 2009-06-10 联发科技股份有限公司 源图像编码的方法与系统以及译码压缩图像的方法与系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113170237A (zh) * 2018-09-28 2021-07-23 中兴通讯股份有限公司 视频编码与解码方法和设备
US11589047B2 (en) 2018-09-28 2023-02-21 Zte Corporation Video encoding and decoding methods and apparatus
CN113170237B (zh) * 2018-09-28 2023-02-28 中兴通讯股份有限公司 视频编码与解码方法和设备

Also Published As

Publication number Publication date
US20140192899A1 (en) 2014-07-10
WO2014108059A1 (en) 2014-07-17
CN104170378B (zh) 2017-07-07

Similar Documents

Publication Publication Date Title
CN104170378A (zh) 用于参考从多方块图片的段得到的比特流地址相关信息来确定多方块图片的方块的比特流起始地址的方法和装置
JP6622879B2 (ja) メディアファイルの再生装置、再生方法、及びプログラム
US20160255345A1 (en) Method of Video Coding Using Prediction based on Intra Picture Block Copy
RU2013111832A (ru) Способ и устройство кодирования видео, использующие блок преобразования переменной древовидной структуры, и способ и устройство декодирования видео
FI4084478T3 (fi) Menetelmä lohkon osittamiseksi ja dekoodauslaite
RU2013119372A (ru) Способ и устройство для кодирования и декодирования блока кодирования границы картинки
JP2013543285A (ja) ネスト型エントロピー符号化
CN103165151B (zh) 多媒体文件播放方法和装置
US11831919B2 (en) Encoding device and encoding method
US20210344898A1 (en) Video decoding device and video decoding method
CN104519323A (zh) 一种人车目标分类系统和方法
RU2016112623A (ru) Устройство передачи, способ передачи и устройство приема
CN116018809A (zh) 信息处理装置和方法
CN105472406A (zh) 演示文稿显示方法和系统
KR101262611B1 (ko) 비디오 서버 및 데이터 수록 재생 방법
US20070177595A1 (en) DTV decoding system and de-multiplexing method thereof
CN103929637A (zh) 一种视频比较装置及其比较方法
US20170302960A1 (en) Method of Lookup Table Size Reduction for Depth Modelling Mode in Depth Coding
CN103165157A (zh) 定位无索引avi 文件播放位置的方法、装置及播放器
US9560365B2 (en) Image coding device, image decoding device, image coding method, and image decoding method
CN104768014A (zh) 编解码方法
ES2553215T3 (es) Procesamiento de un flujo de datos digitales
JP2020088550A (ja) 情報処理装置および情報処理方法、並びにプログラム
CN1870156A (zh) 盘片播放装置及其播放控制方法与数据分析方法
KR20110100058A (ko) 동영상 검색 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170707

Termination date: 20200107