CN101562750B - 视频编码快速模式选择装置及方法 - Google Patents
视频编码快速模式选择装置及方法 Download PDFInfo
- Publication number
- CN101562750B CN101562750B CN 200910039729 CN200910039729A CN101562750B CN 101562750 B CN101562750 B CN 101562750B CN 200910039729 CN200910039729 CN 200910039729 CN 200910039729 A CN200910039729 A CN 200910039729A CN 101562750 B CN101562750 B CN 101562750B
- Authority
- CN
- China
- Prior art keywords
- cost
- frame
- optimum
- mode
- encoding mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供了一种视频编码快速模式选择装置及方法,所述方法包括:根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;对当前帧的每一个宏块进行如下步骤的模式选择:计算当前宏块在各宏块模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式;当所述最优帧间编码模式的代价小于所述代价阈值时,选择所述最优帧间编码模式作为当前宏块的编码模式。采用本发明提供的视频编码快速模式选择装置及方法,能提高编码模式选择的准确性。
Description
技术领域
本发明涉及视频编码技术领域,更具体地说,涉及一种视频编码快速模式选择装置及方法。
背景技术
视频编码的目的是对视频数据进行压缩。常用的视频编码技术是先对视频序列进行预测编码,然后传输图像像素与其预测值的差值信号,去除空间或时间的相关性,达到压缩的目的。预测编码包括帧内预测编码和帧间预测编码,其中,帧内预测编码是利用同一帧中的像素值进行预测,帧间预测编码时利用相邻帧中的像素值进行预测。
由于视频图像区域内容的差异性,为获得尽可能高的压缩效率,在对帧间帧(采用前向预测编码的帧,简称“P帧”)的每个判定为非SKIP宏块编码,以及对双向帧(采用双向预测编码的帧,简称“B帧”)的每个判定为非SKIP宏块且非DIRECT宏块编码时,都需选择最优的编码模式。一般对帧间相似度较高的宏块采用帧间预测编码模式,而对相邻宏块间相似度较高的宏块采用帧内预测编码模式。
在目前流行的视频编码标准中,通常对宏块(如16×16像素)采用不同尺寸(例如16×8、8×16、8×8像素等)的宏块分割模式,在选择编码模式时需对每种宏块分割模式进行运动估计,计算帧间预测编码代价,以及计算每种宏块分割模式下不同预测方向的帧内预测编码代价,比较帧间和帧内各模式下的代价,选择代价最小的编码模式作为最优编码模式。由于在运动估计和编码代价计算中会涉及大量的绝对误差和(Sum of Absolute Difference,简称“SAD”)及变换后的绝对误差和(Sum of Absolute Transformed Difference,简称“SATD”)等高复杂度的计算,特别是在采用高编码效率的率失真优化的模式选择时,还需增加码率估算的过程,因此编码模式选择具有很高的计算复杂度。
目前,在对每一宏块进行快速编码模式选择时,通常先计算各宏块分割模 式下的帧间预测编码代价,从中选择代价最小的帧间编码模式作为最优帧间编码模式,若最优帧间编码模式的代价小于某一固定阈值(通过对典型视频序列进行编码训练得到),则以最优帧间编码模式作为当前宏块的编码模式,否则,计算各宏块分割模式下不同预测方向上的帧内预测编码代价,并与最优帧间编码模式的代价进行比较,从中选择代价最小的编码模式作为当前宏块的编码模式。
然而,由于固定阈值是通过其它视频序列进行编码训练得到的,若该阈值不适合当前编码的视频序列,则可能会出现当前帧实际适合采用帧内编码模式,但由于最优帧间编码模式的代价小于阈值而没有采用帧内编码模式的情况,从而造成了编码模式选择的不准确,导致编码效率下降。
发明内容
基于此,有必要提供一种能提高编码模式选择准确性的视频编码快速模式选择装置。
此外,还有必要提供一种能提高编码模式选择准确性的视频编码快速模式选择方法。
所述视频编码快速模式选择装置包括:阈值调整单元,用于根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;模式选择单元,与所述阈值调整单元相连,用于计算当前宏块在各宏块分割模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式,以及当最优帧间编码模式的代价小于代价阈值时,则选择最优帧间编码模式作为当前宏块的编码模式。
该阈值调整单元包括:初始化参数设置模块,用于设置初始化参数,初始化参数包括比例参数及至少两个代价区间;代价分布统计模块,与初始化参数设置模块相连,统计前一帧中最优帧间编码代价位于代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布;阈值计算模块,与初始化参数设置模块及代价分布统计模块相连,根据比例分布计算当前帧的代价阈值。
该初始化参数设置模块可按照以下分布设置等长的代价区间:
[0,C),[C,2C),[2C,3C),...,[N*C,+∞)
其中,C是一个区间的代价,N是正整数;
所述阈值计算模块当 时,计算所述代价阈值为:Tadapt=i*C,其中,Rn是最优帧间编码代价位于第n个代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例,r是预设的比例参数,Tadapt是代价阈值,i的取值为0~N。
该模式选择单元包括:帧间编码代价计算模块,用于计算当前宏块在各宏块分割模式下的帧间编码代价;帧内编码代价计算模块,帧间编码代价计算模块相连,用于计算各宏块分割模式下不同预测方向的帧内编码代价;比较选择模块,与帧间编码代价计算模块及帧内编码代价计算模块相连,用于比较最优帧间编码模式的代价与代价阈值,当最优帧间编码模式的代价大于代价阈值时,通知帧内编码代价计算模块计算各宏块分割模式下不同预测方向的帧内编码代价,并从中选择代价最小的帧内编码模式作为最优帧内编码模式。
上述比较选择模块还用于比较最优帧间编码模式与最优帧内编码模式的代价大小,从中选择代价小的编码模式作为当前宏块的编码模式。
所述视频编码快速模式选择方法包括:根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;对当前帧的每一个宏块进行如下步骤的模式选择:计算当前宏块在各宏块模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式;当最优帧间编码模式的代价小于所述代价阈值时,选择最优帧间编码模式作为当前宏块的编码模式。
该调整当前帧的代价阈值的步骤可包括:设置初始化参数,初始化参数包括比例参数及至少两个代价区间;统计前一帧中最优帧间编码代价位于代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布;根据比例分布计算当前帧的代价阈值。
该调整当前帧的代价阈值的步骤包括:
按照以下分布设置等长的代价区间:
[0,C),[C,2C),[2C,3C),...,[N*C,+∞)
其中,C是一个区间的代价,N是正整数;
当 时,计算所述代价阈值为:Tadapt=i*C,其中,Rn是最优帧间编码代价位于第n个代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例,r是预设比例参数,Tadapt是代价阈值,i的取值为0~N。
上述方法还包括:当最优帧间编码模式的代价大于代价阈值时,则计算各宏块分割模式下不同预测方向的帧内编码代价,并从中选择代价最小的帧内编码模式作为最优帧内编码模式。
另外,选择最优帧内编码模式的步骤之后还可包括:比较最优帧间编码模式与最优帧内编码模式的代价大小,从中选择代价小的编码模式作为当前宏块的编码模式。
上述视频编码快速模式选择装置及方法,通过前一帧的帧内预测宏块的最优帧间编码代价分布情况自适应调整当前帧的代价阈值,在对每一个宏块进行编码时,若最优帧间编码模式的代价小于当前帧的代价阈值,则选择最优帧间编码模式作为当前宏块的编码模式,否则,在最优帧间编码模式和最优帧内编码模式中选择代价较小的模式作为当前宏块的编码模式。这样,能提高快速模式选择的准确性。
附图说明
图1是一个实施例中视频编码快速模式选择装置的示意图;
图2是一个实施例中视频编码快速模式选择装置的结构示意图;
图3是一个实施例中视频编码快速模式选择方法的流程图;
图4是一个实施例中代价阈值的计算方法的流程图;
图5是一个实施例中对一个宏块的视频编码快速模式选择方法的流程图。
具体实施方式
图1示出了一个实施例中的视频编码快速模式选择装置,该装置包括阈值 调整单元100和模式选择单元200,其中:
阈值调整单元100用于根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;模式选择单元200与阈值调整单元100相连,用于在对每一宏块进行编码时,计算当前宏块各宏块分割模式下的帧间编码代价,并选择代价最小的帧间编码模式作为最优帧间编码模式,以及当最优帧间编码模式的代价小于所述代价阈值时,选择最优帧间编码模式作为当前宏块的编码模式。
图2示出了一个实施例中的视频编码快速模式选择装置的内部结构,其中阈值调整单元100包括初始化参数设置模块101、代价分布统计模块102和阈值计算模块103,其中:
初始化参数设置模块101用于设置初始化参数,该初始化参数包括至少两个代价区间以及比例参数。在一个实施方式中,初始化参数设置模块101按照以下分布设置等长的代价区间:
[0,C),[C,2C),[2C,3C),...,[N*C,+∞)
其中,C是一个区间的代价,N是整数。
代价分布统计模块102与初始化参数设置模块101相连,用于统计前一帧中最优帧间编码代价位于所述代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布。上述帧内预测宏块是指以帧内模式进行预测编码的宏块。在一个实施方式中,代价分布统计模块102按照以下公式统计所述比例分布:
Ri=mi/M
其中,Ri是最优帧间编码代价位于第i个代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例,mi是最优帧间编码代价位于第i个代价区间内的帧内预测宏块的个数,M是帧内预测宏块总数,i的取值为0~N。
阈值计算模块103与初始化参数设置模块101及代价分布统计模块102相连,用于根据比例分布计算当前帧的代价阈值。在一个实施方式中,阈值计算模块103对上述计算得到的Ri进行累加,具体地,是从RN开始依次累加RN-1、RN-2....当 时,计算所述代价阈值为:
Tadapt=i*C
其中,r是预设的比例参数,可由初始化参数设置模块101设置,Tadapt是代价阈值,i的取值为0~N。
模式选择单元200包括帧间编码代价计算模块201、帧内编码代价计算模块202和比较选择模块203,其中:
帧间编码代价计算模块201与代价分布统计模块102相连,用于在编码每一个宏块时,计算当前宏块在各宏块分割模式下的帧间编码代价。帧间编码代价的计算可采用现有的代价计算方法,在此则不再赘述。
帧内编码代价计算模块202与阈值计算模块103及帧内编码代价计算模块202相连,用于在编码每一个宏块时,计算各宏块分割模式下不同预测方向的帧内编码代价。帧内编码代价的计算也可采用现有的代价计算方法,在此也不再赘述。
比较选择模块203与帧间编码代价计算模块201及帧内编码代价计算模块202相连,用于比较最优帧间编码模式的代价与代价阈值,当最优帧间编码模式的代价小于上述计算得到的代价阈值时,选择最优帧间编码模式作为当前宏块的编码模式,否则,通知帧内编码代价计算模块202计算当前帧各宏块分割模式下的不同预测方向的帧内编码代价,并从中选择代价最小的帧内编码模式作为最优帧内编码模式,以及比较最优帧间编码模式与最优帧内编码模式的代价大小,从中选择代价小的编码模式作为当前宏块的编码模式。
图3示出了一个实施例中视频编码快速模式选择方法的流程,具体过程如下:
在步骤S301中,根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值。
在步骤S302中,判断是否完成了当前帧所有宏块的编码,若是,则结束,否则进入步骤S302。
在步骤S303中,计算当前宏块在各宏块分割模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式。
在步骤S304中,当所述最优帧间编码模式的代价小于所述代价阈值时,选择所述最优帧间编码模式作为当前宏块的编码模式。
应当说明的是,上述步骤S303和步骤S304是对当前帧的每一个宏块编码时所进行的快速模式选择,若当前帧的所有宏块编码完成,则进入下一帧的编码,直至视频序列的所有帧编码完成。
图4示出了一个实施例中代价阈值的计算方法流程,具体过程如下:
在步骤S401中,设置初始化参数,该初始化参数包括至少两个代价区间及比例参数。在一个实施方式中,初始化参数设置101按照以下分布设置等长的代价区间:
[0,C),[C,2C),[2C,3C),...,[N*C,+∞)
其中,C是一个区间的代价,N是整数。
在步骤S402中,统计前一帧中最优帧间编码代价位于代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布。在一个实施方式中,代价分布统计模块102按照以下公式统计所述比例分布:
Ri=mi/M
其中,Ri是最优帧间编码代价位于第i个代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例,mi是最优帧间编码代价位于第i个代价区间内的帧内预测宏块的个数,M是帧内预测宏块总数,i的取值为0~N。
在步骤S403中,根据所述比例分布计算当前帧的代价阈值。在一个实施方式中,阈值计算模块103对上述计算得到的Ri进行累加,具体地,是从RN开始依次累加RN-1、RN-2....当 时,计算所述代价阈值为:
Tadapt=i*C
其中,r是预设的比例参数,可由初始化参数设置模块101设置,Tadapt是代价阈值,i的取值为0~N。
由于视频序列邻近帧之间的内容具有相似性,前一帧的帧内预测宏块在模式选择时的最优帧间编码代价分布可以较好的近似当前帧相应的分布情况,在编码当前帧的某一宏块时,若计算得到的最优帧间编码代价小于或等于代价阈值时,则可认为当前宏块选择帧内编码模式的概率很低,因此不进行帧内编码模式的代价不会影响模式选择结果的准确性。
图5示出了一个实施例中视频编码快速模式选择方法的流程,对每一个宏块编码时的快速模式选择的具体过程如下:
在步骤S501中,计算当前宏块在各宏块分割模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式。
在步骤S502中,比较最优帧间编码模式的代价与代价阈值的大小。代价阈值可采用上述计算方法获得,在此则不再赘述。
在步骤S503中,判断最优帧间编码模式的代价是否小于代价阈值,若是,则进入步骤S504,否则,进入步骤S505。
在步骤S504中,选择最优帧间编码模式作为当前帧的编码模式。
在步骤S505中,计算各宏块分割模式下不同预测方向的帧内编码代价,从中选择代价最小的帧内编码模式作为最优帧内编码模式。
在步骤S506中,比较最优帧间编码模式与最优帧内编码模式的代价大小。
在步骤S507中,从最优帧间编码模式和最优帧内编码模式中选择代价小的编码模式作为当前宏块的编码模式。
在步骤S508中,判断当前宏块是否为帧内预测宏块,若是,则进入步骤S509,否则结束。帧内预测宏块即当前以帧内模式进行预测编码的宏块。
在步骤S509中,更新最优帧间编码代价分布。在一个实施例中,当前宏块选择的编码模式是最优帧内编码模式,则可更新当前帧的最优帧间编码代价分布,而当前帧的最优帧间编码代价分布可用于下一帧的代价阈值的计算。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种视频编码快速模式选择装置,其特征在于,包括:
阈值调整单元,用于根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;
模式选择单元,与所述阈值调整单元相连,用于计算当前宏块在各宏块分割模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式,以及当所述最优帧间编码模式的代价小于所述代价阈值时,则选择所述最优帧间编码模式作为当前宏块的编码模式;所述阈值调整单元包括:
初始化参数设置模块,用于设置初始化参数,所述初始化参数包括比例参数及至少两个代价区间;
代价分布统计模块,与所述初始化参数设置模块相连,统计前一帧中最优帧间编码代价位于所述代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布;
阈值计算模块,与所述初始化参数设置模块及代价分布统计模块相连,根据所述比例分布计算当前帧的代价阈值。
3.根据权利要求1所述的视频编码快速模式选择装置,其特征在于,所述模式选择单元包括:
帧间编码代价计算模块,用于计算当前宏块在各宏块分割模式下的帧间编码代价;
帧内编码代价计算模块,与所述帧间编码代价计算模块相连,用于计算各宏块分割模式下不同预测方向的帧内编码代价;
比较选择模块,与所述帧间编码代价计算模块及帧内编码代价计算模块相连,用于比较最优帧间编码模式的代价与所述代价阈值,当所述最优帧间编码模式的代价大于所述代价阈值时,通知所述帧内编码代价计算模块计算各宏块分割模式下不同预测方向的帧内编码代价,并从中选择代价最小的帧内编码模式作为最优帧内编码模式。
4.根据权利要求3所述的视频编码快速模式选择装置,其特征在于,所述比较选择模块还用于比较最优帧间编码模式与最优帧内编码模式的代价大小,从中选择代价小的编码模式作为当前宏块的编码模式。
5.一种视频编码快速模式选择方法,其特征在于,所述方法包括:
根据前一帧的帧内预测宏块的最优帧间编码代价分布调整当前帧的代价阈值;
对当前帧的每一个宏块进行如下步骤的模式选择:
计算当前宏块在各宏块模式下的帧间编码代价,选择代价最小的帧间编码模式作为最优帧间编码模式;
当所述最优帧间编码模式的代价小于所述代价阈值时,选择所述最优帧间编码模式作为当前宏块的编码模式;所述调整当前帧的代价阈值的步骤包括:
设置初始化参数,所述初始化参数包括比例参数及至少两个代价区间;
统计前一帧中最优帧间编码代价位于所述代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例分布;
根据所述比例分布计算当前帧的代价阈值。
6.根据权利要求5所述的视频编码快速模式选择方法,其特征在于,调整当前帧的代价阈值的步骤包括:
按照以下分布设置等长的代价区间:
[0,C),[C,2C),[2C,3C),...,[N*C,+∞)
其中,C是一个区间的代价,N是正整数;
当 时,计算所述代价阈值为:Tadapt=i*C,其中,Rn是最优帧间编码 代价位于第n个代价区间内的帧内预测宏块的个数占帧内预测宏块总数的比例,r是预设比例参数,Tadapt是代价阈值,i的取值为0~N。
7.根据权利要求5所述的视频编码快速模式选择方法,其特征在于,所述方法还包括:
当所述最优帧间编码模式的代价大于所述代价阈值时,则计算各宏块分割模式下不同预测方向的帧内编码代价,并从中选择代价最小的帧内编码模式作为最优帧内编码模式。
8.根据权利要求7所述的视频编码快速模式选择方法,其特征在于,所述选择最优帧内编码模式的步骤之后还包括:
比较所述最优帧间编码模式与最优帧内编码模式的代价大小,从中选择代价小的编码模式作为当前宏块的编码模式。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910039729 CN101562750B (zh) | 2009-05-25 | 2009-05-25 | 视频编码快速模式选择装置及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910039729 CN101562750B (zh) | 2009-05-25 | 2009-05-25 | 视频编码快速模式选择装置及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101562750A CN101562750A (zh) | 2009-10-21 |
CN101562750B true CN101562750B (zh) | 2011-02-09 |
Family
ID=41221336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200910039729 Active CN101562750B (zh) | 2009-05-25 | 2009-05-25 | 视频编码快速模式选择装置及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101562750B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101783951B (zh) * | 2010-03-02 | 2012-01-04 | 西安交通大学 | 基于人类视觉系统的视频编码帧间预测模式快速确定方法 |
CN102647587B (zh) * | 2011-02-16 | 2015-01-21 | 富士通株式会社 | 运动估计方法和装置 |
CN104768000A (zh) * | 2014-01-02 | 2015-07-08 | 中兴通讯股份有限公司 | 异构集群中实现x264编码加速的方法、系统及计算节点 |
CN105898297B (zh) * | 2016-04-29 | 2019-03-15 | 上海高智科技发展有限公司 | 一种基于hevc的快速模式选择方法及系统 |
CN108810531B (zh) * | 2017-05-03 | 2019-11-19 | 腾讯科技(深圳)有限公司 | 视频编码处理方法、装置及电子设备 |
CN109905702B (zh) * | 2017-12-11 | 2021-12-21 | 腾讯科技(深圳)有限公司 | 一种视频编码中参考信息确定的方法、装置及存储介质 |
CN110351552B (zh) * | 2018-04-03 | 2021-06-25 | 杭州微帧信息科技有限公司 | 视频编码中一种快速编码方法 |
-
2009
- 2009-05-25 CN CN 200910039729 patent/CN101562750B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN101562750A (zh) | 2009-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101562750B (zh) | 视频编码快速模式选择装置及方法 | |
CN102301716B (zh) | 解码代表画面序列的流的方法,编码画面序列的方法以及编码的数据结构 | |
CN100593955C (zh) | 用于以帧间或帧内模式编码视频图像的方法和设备 | |
CN101860748A (zh) | 基于分布式视频编码的边信息生成系统及方法 | |
CN101309408B (zh) | 一种亮度块帧内预测模式选择方法 | |
CN101159871B (zh) | 宏块组级视频码率控制方法 | |
CN100592798C (zh) | 一种视频编码快速变换量化的实现方法 | |
CN102334337A (zh) | 选择性使用离散正余弦转换的编解码装置和方法 | |
CN103533359B (zh) | 一种h.264码率控制方法 | |
CN101867814B (zh) | 图像编码设备和图像编码方法 | |
CN102932642B (zh) | 一种帧间编码快速模式选择方法 | |
CN103188496A (zh) | 基于运动矢量分布预测的快速运动估计视频编码方法 | |
CN103841418A (zh) | 一种3g网络中视频监控器码率控制的优化方法及系统 | |
CN103119935A (zh) | 图像插值方法和设备 | |
CN101621694B (zh) | 一种运动估计方法、系统及显示终端 | |
CN102196272B (zh) | 一种p帧编码方法及装置 | |
CN101022555A (zh) | 帧间预测编码的模式快速选择方法 | |
CN100452878C (zh) | 一种视频编码中的运动图像处理方法 | |
CN101313581B (zh) | 视频图像编码方法及设备 | |
CN103384327A (zh) | 基于自适应阈值的avs快速模式选择算法 | |
CN101883275B (zh) | 视频编码方法 | |
CN108989818A (zh) | 一种图像编码参数调整方法及装置 | |
CN101888561A (zh) | 一种率失真优化动态调整的多视点视频传输差错控制方法 | |
CN102843555A (zh) | 一种帧内预测方法和系统 | |
CN101933334A (zh) | 用于测量闪烁的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |