CN101404766A - 一种多视点视频信号的编码方法 - Google Patents
一种多视点视频信号的编码方法 Download PDFInfo
- Publication number
- CN101404766A CN101404766A CN 200810162036 CN200810162036A CN101404766A CN 101404766 A CN101404766 A CN 101404766A CN 200810162036 CN200810162036 CN 200810162036 CN 200810162036 A CN200810162036 A CN 200810162036A CN 101404766 A CN101404766 A CN 101404766A
- Authority
- CN
- China
- Prior art keywords
- macro
- block
- block coding
- video
- coding pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种多视点视频信号的编码方法，优点在于有效地利用了多视点彩色视频中的所有B帧中各个宏块的最优宏块编码模式，使得多视点深度视频编码过程中能够在保证编码图像质量和编码压缩效率的前提下减少深度视频中所有B帧中的各个宏块的宏块编码模式的搜索范围，从而达到降低多视点深度视频编码的计算复杂度，提高多视点深度视频编码速度的目的；在确定多视点深度视频中当前宏块的最优宏块编码模式过程中引入了平滑因子，不仅保证编码率失真性能，而且提高了编码速度。
Description
技术领域
本发明涉及一种视频信号的处理技术，尤其是涉及一种多视点视频信号的编码方法。
背景技术
自由视点电视(FTV，Free-viewpoint Television)是具有先进的视觉媒体模式的三维视频系统之一，含有传统的二维视频系统所没有的视觉功能。FTV能够很好地满足用户从任意角度欣赏场景，体现到身临其境的感觉。这种新兴媒体的兴起，引起了国内外很多专家和学者的广泛关注，FTV的核心技术是多视点视频信号编解码和实时的虚拟视点图像绘制。国际标准化组织JVT(Joint Video Team，联合视频专家组)提出了MVD(multi-view video plus depth)的结构，即采用N个视点的彩色视频及彩色视频对应的深度视频信息来表达场景的三维信息以支持面向用户端虚拟视点绘制的三维视频系统。在MVD的结构中，彩色视频中的每幅彩色图像都含有相对应的深度图，深度图并不能直接用于显示，而是作为虚拟视点绘制的参数使用，这极大地增加了传输的数据量，从而给传输带宽带来了极大的压力。
为了能有效存储、传输主要由彩色视频及深度视频信息组成的多视点视频信号，并且在应用中实现视点间的自由切换、用户和系统之间的高效交互操作，必须对彩色视频和深度视频信息进行高效压缩，减轻传输带宽的压力。压缩性能可以从编码率失真性能和编码复杂度两方面来考虑。为了提高编码率失真性能，目前，很多FTV系统框架中的多视点视频信号编码压缩方法中采用了分层B帧(HBP，Hierarchical B Pictures)预测编码结构。HBP除了采用运动估计消除时间上的冗余外，还采用了视差估计来消除视点间的相关性空间冗余，能够对多视点视频信号进行较好的压缩。但由于深度视频和普通的彩色视频信息具有不同的特性，即一方面，在深度视频中，往往只包含灰度信息，而与之相对应的是，普通的彩色视频信息除了亮度信息以外，还反映场景中的色彩信息；另一方面，在场景中一个对象，即使在彩色视频具有丰富的纹理和色彩信息，在深度视频对应区域内的灰度变化却是平滑的。这些不同的特性决定了多视点深度视频和多视点彩色视频图像在编码时没有必要互相参考。因此在编码结构上，多视点彩色视频和多视点深度视频互相独立。图1a和图1b分别给出了基于HBP的多视点彩色视频与多视点深度视频的预测编码结构。在该预测编码结构中包含了I帧、P帧和大量的B帧。
目前，JVT针对多视点视频信号编码提出了多视点视频编码校验模型(JMVM，JointMultiview Video Model)。在JMVM中，对于每一个宏块，通过率失真优化技术求取率失真代价最小的宏块编码模式作为当前正在处理的宏块的宏块编码模式，以寻求较低的码率和更好的画面质量的平衡。如果当前正在处理的宏块所在帧为I帧，则编码器需搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中找到具有率失真代价最小的宏块编码模式作为该宏块的最优宏块编码模式；如果当前正在处理的宏块所在帧为P帧或者B帧，则编码器将搜索多个参考帧的情况下还需依次搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中找到具有率失真代价最小的宏块编码模式作为该宏块的最优宏块编码模式。率失真代价通过J(s，c，MODE|λMODE)＝SSD(s，c，MODE|QP)+λMODER(s，c，MODE)计算得到。其中，MODE表示当前宏块的一种编码模式，J(s，c，MODE|λMODE)表示MODE模式下的率失真代价，s为原始的视频信号，c为采用MODE模式编码后的重构视频信号，λMODE为拉格朗日乘子，R(s，c，MODE)表示MODE模式下用来编码宏块头信息、视差矢量信息和所有DCT(DiscreteCosine Transform，离散余弦变换)系数的所有编码比特数，SSD(s，c，MODE|QP)为原始的视频信号和重构视频信号之间的平方差值和(SSD，Sum of Square Difference)，SSD(s，c，MODE|QP)的值通过 计算得到，B1、B2分别为当前宏块的水平和垂直像素数，可以取值16、8或4，l＝(lx，ly)T表示视差矢量，QP为量化参量，[i，j]表示像素的坐标，s[i，j]表示原始的视频信号中坐标为[i，j]的像素的像素值，c[i，j]表示重构视频信号中坐标为[i，j]的像素的像素值。在JMVM编码过程中，采用了对所有宏块编码模式进行搜索以得到最优宏块编码模式，这种方法可以获得较高的重建图像质量，但宏块编码模式全搜索的方法导致计算复杂度非常高。
发明内容
本发明所要解决的技术问题是提供一种根据多视点彩色视频中所有B帧中的各个宏块的最优宏块编码模式确定多视点深度视频中所有B帧中的各个宏块的最优宏块编码模式，实现低计算复杂度的多视点视频信号的编码方法。
本发明解决上述技术问题所采用的技术方案为：一种多视点视频信号的编码方法，包括以下步骤：
1)、在多视点视频编码校验模型JMVM上，采用HBP预测编码结构对多视点视频信号的彩色视频进行编码，在编码过程中，对彩色视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对于彩色视频中所有B帧和P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式，并将所有B帧中的各个宏块的最优宏块编码模式存储到预先设定的临时文件中；
2)、在多视点视频编码校验模型JMVM上，利用HBP预测编码结构对多视点视频信号的深度视频进行编码，在编码过程中，对深度视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有B帧的各个宏块，根据已存储在临时文件中的彩色视频中所有B帧中的各个宏块的最优宏块编码模式和深度视频中所有B帧的各个宏块的平滑因子对其进行编码，具体过程为：定义深度视频中当前正在处理的宏块为当前宏块，计算当前宏块的平滑因子，判断当前宏块的平滑因子是否小于设定的阈值且在彩色视频中与当前宏块相对应的宏块的最优宏块编码模式是否为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式，如果当前宏块的平滑因子小于设定的阈值且在彩色视频中与当前宏块相对应的宏块的最优宏块编码模式为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式时，则编码器采用现有的H.264的率失真优化技术搜索SKIP、Intra16×16、Intra8×8、Intra4×4和Inter16×16宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码，否则，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码。
所述的步骤2)中的当前宏块的平滑因子的计算过程为：将当前宏块的平滑因子记为δ，
其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中所有像素的平均值，
为了进一步提高编码速度，可将当前宏块的平滑因子修订为其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中个像素的平均值，
N的值为1、2、4、8、16中的任一个。
所述的步骤2)中的设定的阈值为5。
与现有技术相比，本发明的优点在于有效地利用了多视点彩色视频中的所有B帧中各个宏块的最优宏块编码模式，使得多视点深度视频编码过程中能够在保证编码图像质量和编码压缩效率的前提下减少深度视频中所有B帧中的各个宏块的宏块编码模式的搜索范围，从而达到降低多视点深度视频编码的计算复杂度，提高多视点深度视频编码速度的目的；在确定多视点深度视频中当前宏块的最优宏块编码模式过程中引入了平滑因子，不仅保证了编码率失真性能，而且大大提高了编码速度。
附图说明
图1a为基于HBP的多视点彩色视频的预测编码结构；
图1b为基于HBP的多视点深度视频的预测编码结构；
图2a为“Ballet”多视点彩色视频的最优宏块编码模式；
图2b为“Ballet”多视点深度视频的最优宏块编码模式；
图3为本发明编码方法的预测结构；
图4a为“Ballet”多视点深度视频的S0T6帧中各个宏块的δ值；
图4b为“Ballet”多视点深度视频的S0T6帧中δ＞5的宏块；
图5a为“Breakdancers”多视点深度视频的S0T6帧中各个宏块的δ值；
图5b为“Breakdancers”多视点深度视频的S0T6帧中δ＞5的宏块；
图6为“Ballet”多视点视频分别采用JMVM编码方法、直接映射方法及本发明方法进行编码的编码率失真性能比较示意图；
图7为“Breakdancers”多视点视频分别采用JMVM编码方法、直接映射方法及本发明方法进行编码的编码率失真性能比较示意图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
多视点视频信号主要由多视点彩色视频和多视点深度视频组成，由于多视点彩色视频和多视点深度视频的最优宏块编码模式具有较强的相似性，如图2a所示的“Ballet”多视点彩色视频的最优宏块编码模式和图2b所示的“Ballet”多视点深度视频的最优宏块编码模式。因此，在多视点深度视频和多视点彩色视频的编码预测结构相互独立的情况下，本发明将多视点彩色视频中各个宏块的宏块编码模式选择情况用作多视点视频深度视频中对应深度图像编码的编码预测值，即对多视点彩色视频和多视点深度视频进行联合编码，以减小编码计算复杂度。本发明编码方法即多视点彩色视频和多视点深度视频联合编码的预测结构如图3所示，图3中每条虚线连接一对时间和时间上对应的多视点彩色视频中的B帧和多视点深度视频中的B帧，虚线表示宏块编码模式预测，虚线尾部所指的B帧的宏块编码模式用作虚线箭头所指的对应的B帧的宏块编码模式预测参考。由于在这种多视点彩色视频和多视点深度视频联合编码的预测结构中，B帧将消耗掉大量的计算时间，所以在本发明编码方法中只考虑B帧编码过程的模式预测。本发明编码方法的具体步骤为：
1)、在多视频编码校验模型JMVM上，采用图3左边所示的编码结构对多视点视频信号的彩色视频进行编码。在编码过程中，对彩色视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对于彩色视频中所有B帧和P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式。在本发明中，为了实现多视点彩色视频和多视点深度视频的联合编码，将多视点彩色视频中所有B帧中的各个宏块的最优宏块编码模式存储到预先设定的临时文件中。
2)、在多视点视频编码校验模型JMVM上，利用图3右边所示的编码结构对多视点视频信号的深度视频进行编码，在编码过程中，对深度视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有B帧的各个宏块，根据已存储在临时文件中的多视点彩色视频中所有B帧中的各个宏块的最优宏块编码模式和深度视频中所有B帧的各个宏块的平滑因子对其进行编码，具体过程为：定义多视点深度视频中当前正在处理的宏块为当前宏块，计算当前宏块的平滑因子，判断当前宏块的平滑因子是否小于设定的阈值且在多视点彩色视频中与当前宏块相对应的宏块的最优宏块编码模式是否为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式，如果当前宏块的平滑因子小于设定的阈值且在多视点彩色视频中与当前宏块相对应的宏块的最优宏块编码模式为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式，则编码器采用现有的H.264的率失真优化技术搜索SKIP、Intra16×16、Intra8×8、Intra4×4和Inter16×16宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码，否则，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码。由于编码器在搜索宏块编码模式过程中，搜索SKIP、Intra16×16、Intra8×8和Intra4×4宏块编码模式所花的时间远远少于搜索Inter16×16、Inter16×8、Inter8×16、Inter8×8和Inter8×8Frex宏块编码模式所花的时间，所以本发明将最消耗计算时间的B帧的各个宏块的宏块编码模式搜索范围缩小，使B帧中的很多宏块只在SKIP、Intra16×16、Intra8×8、Intra4×4和Inter16×16这些宏块编码模式中搜索，既保证了编码图像质量和编码压缩效率，又降低了多视点深度视频编码的计算复杂度，提高了多视点深度视频的编码速度。
上述步骤2)中的当前宏块的平滑因子的计算过程为：将当前宏块的平滑因子记为δ，
其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中所有像素的平均值，
宏块的平滑因子的引入带来了额外计算开销。为了进一步减小这种额外开销，可以用当前宏块亮度信号的下采样的平滑因子来近似表征整个宏块的平滑程度，这样，可以缩小δ的计算规模。为了进一步提高编码速度，可将当前宏块的平滑因子修订为
其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中
个像素的平均值，
N的值可以取为1、2、4、8、16中的任一个。当N＝1时，
退化为
在此具体实施例中，阈值的大小的设置决定于对各个多视点深度视频测试序列中各个宏块的平滑因子δ的统计分析。图4a表示“Ballet”深度视频的S0T6帧中各个宏块的δ值，在该S0T6帧中δ＞5的宏块如图4b所示。这些δ＞5的宏块反应了深度视频中深度发生较大变化的区域，而这些区域往往是宏块编码模式分布较为复杂的区域。相反，在其它区域中，宏块编码模式比较单一，如果是剧烈运动的对象，往往选择Intra16×16、Intra8×8或Intra4×4宏块编码模式中的一种；如果是静止区域，则选择SKIP模式。“Breakdancers”深度视频也具有相似的特征，图5a和5b分别给出了“breakdancers”深度视频的S0T6帧中各个宏块的δ值以及S0T6帧中δ＞5的宏块。从上述对平滑因子δ的统计分析可以看出，阈值设置为5时可以较好地将深度视频图像划分成两个区域，即深度变化较小的区域和深度变化较大的区域，对深度变化较小的区域可以利用多视点彩色视频中对应宏块的最优宏块编码模式来决定宏块编码模式的选择方法，即如果对应彩色视频中对应宏块的模式为SKIP、Intra16×16、Intra8×8或Intra4×4中的任何一种宏块编码模式时，则编码器搜索SKIP、Intra16×16、Intra8×8、Intra4×4和Inter16×16宏块编码模式；否则，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式。
为了测试本发明编码方法的性能，采用了表1所列的测试环境，设定的阈值取值5。在Intel Xeon 3.2GHz，12GB内存的服务器上，对Microsoft提供的序列“Breakdancers”和“Ballet”的多视点彩色视频及多视点深度视频进行测试，主要根据JVT提出的多视点视频公共的测试环境，测试了JMVM编码方法、直接映射的方法以及本发明编码方法在N＝1、2、4和8时的性能情况。其中，直接映射方法为直接将记录于临时文件的最优宏块编码模式作为B帧中当前宏块的最优宏块编码模式。
表2给出了序列“Ballet”和“Breakdancers”多视点深度视频分别采用直接映射方法以及本发明编码方法进行多视点深度视频编码的编码速度提升的比较情况。与现有的JMVM全搜索方法相比，直接映射方法的编码速度提高了2.25～4.48倍，而本发明编码方法的编码速度提高了1.98～3.24倍。从表2中可知，N的值越大，本发明编码方法的加速性能越好。但是，当量化参数QP＝22时，“Breakdancers”多视点深度视频的编码速度随着N的值增加而略微变慢，这是因为N的值越大，宏块的平滑因子不能完全反映该宏块亮度信号的变化情况，少量的宏块由于平滑因子超过了设定的阈值而采用了全搜索的缘故。
图6和图7分别为“Ballet”和“Breakdancers”多视点视频采用JMVM编码方法、直接映射方法以及本发明编码方法进行编码的编码率失真性能比较示意图。其中，直接映射方法的率失真性能与JMVM编码方法相比，有显著的下降。而本发明编码方法在N取不同值的情况下，均能较好地维持编码率失真性能。综上所述，本发明编码方法随着N值的增加，率失真性能有轻微的下降，主要原因是下采样计算平滑度不能准确反映整个宏块的情况所致。
表1测试环境
表2“Ballet”和“Breakdancers”多视点视频采用直接映射方法与本发明编码方法的编码加速倍数比较表
Claims (4)
1、一种多视点视频信号的编码方法，其特征在于包括以下步骤：
1)、在多视点视频编码校验模型JMVM上，采用HBP预测编码结构对多视点视频信号的彩色视频进行编码，在编码过程中，对彩色视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对于彩色视频中所有B帧和P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式，并将所有B帧中的各个宏块的最优宏块编码模式存储到预先设定的临时文件中；
2)、在多视点视频编码校验模型JMVM上，利用HBP预测编码结构对多视点视频信号的深度视频进行编码，在编码过程中，对深度视频中所有I帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这三种宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有P帧的各个宏块，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为各个宏块各自的最优宏块编码模式；对深度视频中所有B帧的各个宏块，根据已存储在临时文件中的彩色视频中所有B帧中的各个宏块的最优宏块编码模式和深度视频中所有B帧的各个宏块的平滑因子对其进行编码，具体过程为：定义深度视频中当前正在处理的宏块为当前宏块，计算当前宏块的平滑因子，判断当前宏块的平滑因子是否小于设定的阈值且在彩色视频中与当前宏块相对应的宏块的最优宏块编码模式是否为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式，如果当前宏块的平滑因子小于设定的阈值且在彩色视频中与当前宏块相对应的宏块的最优宏块编码模式为SKIP、Intra16×16、Intra8×8和Intra4×4中的任何一种宏块编码模式，则编码器采用现有的H.264的率失真优化技术搜索SKIP、Intra16×16、Intra8×8、Intra4×4和Inter16×16宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码，否则，编码器采用现有的H.264的率失真优化技术搜索SKIP、Inter16×16、Inter16×8、Inter8×16、Inter8×8、Inter8×8Frext、Intra16×16、Intra8×8和Intra4×4宏块编码模式，从这些宏块编码模式中选出率失真代价最小的宏块编码模式作为当前宏块的最优宏块编码模式进行编码。
2、根据权利要求1所述的一种多视点视频信号的编码方法，其特征在于所述的步骤2)中的当前宏块的平滑因子的计算过程为：将当前宏块的平滑因子记为δ，
其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中所有像素的平均值，
3、根据权利要求1所述的一种多视点视频信号的编码方法，其特征在于所述的步骤2)中的当前宏块的平滑因子的计算过程为：将当前宏块的平滑因子记为δ，
其中，pixel(p，q)表示当前宏块中像素(p，q)的亮度值，
表示当前宏块中个像素的平均值，
N的值为1、2、4、8、16中的任一个。
4、根据权利要求1所述的一种多视点视频信号的编码方法，其特征在于所述的步骤2)中的设定的阈值为5。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200810162036 CN101404766B (zh) | 2008-11-05 | 2008-11-05 | 一种多视点视频信号的编码方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200810162036 CN101404766B (zh) | 2008-11-05 | 2008-11-05 | 一种多视点视频信号的编码方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101404766A true CN101404766A (zh) | 2009-04-08 |
| CN101404766B CN101404766B (zh) | 2010-06-30 |
Family
ID=40538614
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200810162036 Expired - Fee Related CN101404766B (zh) | 2008-11-05 | 2008-11-05 | 一种多视点视频信号的编码方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101404766B (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102196257A (zh) * | 2010-03-11 | 2011-09-21 | 中国科学院微电子研究所 | 一种宏块编码模式预先判定方法及装置 |
| CN101729891B (zh) * | 2009-11-05 | 2012-06-20 | 宁波大学 | 一种多视点深度视频的编码方法 |
| CN102572439A (zh) * | 2012-03-14 | 2012-07-11 | 清华大学深圳研究生院 | 一种确定多视点视频编码最佳模式进行编码的方法 |
| CN103024395A (zh) * | 2012-12-31 | 2013-04-03 | 清华大学 | 多视点视频编码模式选择方法及装置 |
| WO2013091513A1 (en) * | 2011-12-22 | 2013-06-27 | Mediatek Inc. | Method and apparatus of texture image compression in 3d video coding |
| CN103188500A (zh) * | 2011-12-31 | 2013-07-03 | 中国科学院深圳先进技术研究院 | 多视点视频信号的编码方法 |
| CN103338370A (zh) * | 2013-06-05 | 2013-10-02 | 宁波大学 | 一种多视点深度视频快速编码方法 |
| CN103442226A (zh) * | 2013-07-30 | 2013-12-11 | 宁波大学 | 基于双目恰可觉察失真的多视点彩色视频快速编码方法 |
| CN105872543A (zh) * | 2016-03-30 | 2016-08-17 | 上海大学 | 一种mvd视点可分级编码中的快速模式选择方法 |
| CN106303547A (zh) * | 2015-06-08 | 2017-01-04 | 中国科学院深圳先进技术研究院 | 三维视频编码方法和装置 |
-
2008
- 2008-11-05 CN CN 200810162036 patent/CN101404766B/zh not_active Expired - Fee Related
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101729891B (zh) * | 2009-11-05 | 2012-06-20 | 宁波大学 | 一种多视点深度视频的编码方法 |
| CN102196257A (zh) * | 2010-03-11 | 2011-09-21 | 中国科学院微电子研究所 | 一种宏块编码模式预先判定方法及装置 |
| CN102196257B (zh) * | 2010-03-11 | 2014-02-12 | 中国科学院微电子研究所 | 一种宏块编码模式预先判定方法及装置 |
| US9560362B2 (en) | 2011-12-22 | 2017-01-31 | Mediatek Inc. | Method and apparatus of texture image compression in 3D video coding |
| WO2013091513A1 (en) * | 2011-12-22 | 2013-06-27 | Mediatek Inc. | Method and apparatus of texture image compression in 3d video coding |
| CN103188500B (zh) * | 2011-12-31 | 2015-04-08 | 中国科学院深圳先进技术研究院 | 多视点视频信号的编码方法 |
| CN103188500A (zh) * | 2011-12-31 | 2013-07-03 | 中国科学院深圳先进技术研究院 | 多视点视频信号的编码方法 |
| CN102572439B (zh) * | 2012-03-14 | 2014-02-12 | 清华大学深圳研究生院 | 一种确定多视点视频编码最佳模式进行编码的方法 |
| CN102572439A (zh) * | 2012-03-14 | 2012-07-11 | 清华大学深圳研究生院 | 一种确定多视点视频编码最佳模式进行编码的方法 |
| CN103024395A (zh) * | 2012-12-31 | 2013-04-03 | 清华大学 | 多视点视频编码模式选择方法及装置 |
| CN103024395B (zh) * | 2012-12-31 | 2015-08-12 | 清华大学 | 多视点视频编码模式选择方法及装置 |
| CN103338370A (zh) * | 2013-06-05 | 2013-10-02 | 宁波大学 | 一种多视点深度视频快速编码方法 |
| CN103338370B (zh) * | 2013-06-05 | 2016-06-08 | 宁波大学 | 一种多视点深度视频快速编码方法 |
| CN103442226A (zh) * | 2013-07-30 | 2013-12-11 | 宁波大学 | 基于双目恰可觉察失真的多视点彩色视频快速编码方法 |
| CN103442226B (zh) * | 2013-07-30 | 2016-08-17 | 宁波大学 | 基于双目恰可觉察失真的多视点彩色视频快速编码方法 |
| CN106303547A (zh) * | 2015-06-08 | 2017-01-04 | 中国科学院深圳先进技术研究院 | 三维视频编码方法和装置 |
| CN106303547B (zh) * | 2015-06-08 | 2019-01-01 | 中国科学院深圳先进技术研究院 | 三维视频编码方法和装置 |
| CN105872543A (zh) * | 2016-03-30 | 2016-08-17 | 上海大学 | 一种mvd视点可分级编码中的快速模式选择方法 |
| CN105872543B (zh) * | 2016-03-30 | 2018-10-23 | 上海大学 | 一种mvd视点可分级编码中的快速模式选择方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101404766B (zh) | 2010-06-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101404766B (zh) | 一种多视点视频信号的编码方法 | |
| CN101729891B (zh) | 一种多视点深度视频的编码方法 | |
| CN100496121C (zh) | 一种交互式多视点视频系统的图像信号处理方法 | |
| CN102209243B (zh) | 基于线性模型的深度图帧内预测方法 | |
| CN101986716B (zh) | 一种快速深度视频编码方法 | |
| CN104378643B (zh) | 一种3d视频深度图像帧内预测模式选择方法及系统 | |
| CN103581647B (zh) | 一种基于彩色视频运动矢量的深度图序列分形编码方法 | |
| CN104539962A (zh) | 一种融合视觉感知特征的可分层视频编码方法 | |
| CN104754359B (zh) | 一种二维自由视点视频的深度图编码失真预测方法 | |
| CN103338370B (zh) | 一种多视点深度视频快速编码方法 | |
| CN101710993A (zh) | 基于块的自适应超分辨率视频处理方法及系统 | |
| CN101867813B (zh) | 面向交互式应用的多视点视频编码方法 | |
| CN105430415A (zh) | 一种3d-hevc深度视频帧内快速编码方法 | |
| CN104602028A (zh) | 一种立体视频b帧整帧丢失错误隐藏方法 | |
| CN103546758A (zh) | 一种快速深度图序列帧间模式选择分形编码方法 | |
| CN103067704A (zh) | 一种基于编码单元层次提前跳过的视频编码方法和系统 | |
| CN101710985B (zh) | 一种用于图像编码的图像亮度补偿方法 | |
| CN110446052A (zh) | 一种3d-hevc帧内深度图快速cu深度选择方法 | |
| CN105049866A (zh) | 基于绘制失真模型的多视点加深度编码的码率分配方法 | |
| CN101389028A (zh) | 一种基于空域分解的视频帧内编码方法 | |
| CN104159095A (zh) | 一种多视点纹理视频和深度图编码的码率控制方法 | |
| CN103024381A (zh) | 一种基于恰可察觉失真的宏块模式快速选择方法 | |
| CN101568038B (zh) | 基于视差/运动联合估计的多视点容错编码框架 | |
| CN103873867A (zh) | 自由视点视频深度图失真预测方法和编码方法 | |
| CN101720042A (zh) | 一种多视点视频信号的编码方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| ASS | Succession or assignment of patent right |
Owner name: SHANGHAI SILICON INTELLECTUAL PROPERTY EXCHANGE CE Free format text: FORMER OWNER: NINGBO UNIVERSITY Effective date: 20120105 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: 315211 NINGBO, ZHEJIANG PROVINCE TO: 200030 XUHUI, SHANGHAI |
|
| TR01 | Transfer of patent right |
Effective date of registration: 20120105 Address after: 200030 Shanghai City No. 333 Yishan Road Huixin International Building 1 building 1704 Patentee after: Shanghai Silicon Intellectual Property Exchange Co.,Ltd. Address before: 315211 Zhejiang Province, Ningbo Jiangbei District Fenghua Road No. 818 Patentee before: Ningbo University |
|
| ASS | Succession or assignment of patent right |
Owner name: SHANGHAI SIPAI KESI TECHNOLOGY CO., LTD. Free format text: FORMER OWNER: SHANGHAI SILICON INTELLECTUAL PROPERTY EXCHANGE CENTER CO., LTD. Effective date: 20120217 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: 200030 XUHUI, SHANGHAI TO: 201203 PUDONG NEW AREA, SHANGHAI |
|
| TR01 | Transfer of patent right |
Effective date of registration: 20120217 Address after: 201203 Shanghai Chunxiao Road No. 350 South Building Room 207 Patentee after: Shanghai spparks Technology Co.,Ltd. Address before: 200030 Shanghai City No. 333 Yishan Road Huixin International Building 1 building 1704 Patentee before: Shanghai Silicon Intellectual Property Exchange Co.,Ltd. |
|
| ASS | Succession or assignment of patent right |
Owner name: SHANGHAI GUIZHI INTELLECTUAL PROPERTY SERVICE CO., Free format text: FORMER OWNER: SHANGHAI SIPAI KESI TECHNOLOGY CO., LTD. Effective date: 20120606 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| C56 | Change in the name or address of the patentee | ||
| CP02 | Change in the address of a patent holder |
Address after: 200030 Shanghai City No. 333 Yishan Road Huixin International Building 1 building 1706 Patentee after: Shanghai spparks Technology Co.,Ltd. Address before: 201203 Shanghai Chunxiao Road No. 350 South Building Room 207 Patentee before: Shanghai spparks Technology Co.,Ltd. |
|
| TR01 | Transfer of patent right |
Effective date of registration: 20120606 Address after: 200030 Shanghai City No. 333 Yishan Road Huixin International Building 1 building 1704 Patentee after: Shanghai Guizhi Intellectual Property Service Co.,Ltd. Address before: 200030 Shanghai City No. 333 Yishan Road Huixin International Building 1 building 1706 Patentee before: Shanghai spparks Technology Co.,Ltd. |
|
| DD01 | Delivery of document by public notice |
Addressee: Shi Lingling Document name: Notification of Passing Examination on Formalities |
|
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20100630 Termination date: 20191105 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |