CN101540926A - 基于h.264的立体视频编解码方法 - Google Patents
基于h.264的立体视频编解码方法 Download PDFInfo
- Publication number
- CN101540926A CN101540926A CN200910030728.8A CN200910030728A CN101540926A CN 101540926 A CN101540926 A CN 101540926A CN 200910030728 A CN200910030728 A CN 200910030728A CN 101540926 A CN101540926 A CN 101540926A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- decoding
- stereo
- vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 230000033001 locomotion Effects 0.000 claims abstract description 32
- 230000005540 biological transmission Effects 0.000 claims abstract description 14
- 239000000872 buffer Substances 0.000 claims abstract description 6
- 230000008569 process Effects 0.000 claims abstract description 4
- 230000003139 buffering effect Effects 0.000 claims description 43
- 239000000284 extract Substances 0.000 claims description 6
- 238000011084 recovery Methods 0.000 claims description 6
- 238000011002 quantification Methods 0.000 claims description 4
- 230000008878 coupling Effects 0.000 claims description 3
- 238000010168 coupling process Methods 0.000 claims description 3
- 238000005859 coupling reaction Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 claims description 3
- 238000013139 quantization Methods 0.000 claims description 3
- 208000009115 Anorectal Malformations Diseases 0.000 claims description 2
- 238000002474 experimental method Methods 0.000 claims description 2
- 238000005192 partition Methods 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 7
- 238000011161 development Methods 0.000 description 6
- 230000018109 developmental process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000007906 compression Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000013144 data compression Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000036301 sexual development Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
一种基于H.264的立体视频编解码方法，步骤包括：1)双路视频采集端分别获取左右眼的视频图像，左右眼的视频图像分别传送到各自对应的视频缓存中等待处理；2)编码器模块对所述缓存中的双路视频图像数据进行处理：先对运动/视差补偿，提取矢量信息；然后在对视频图像进行H.264编码的过程中把所用矢量信息嵌入参考图像中，最终得到视频流，实现双路视频的可单路传输性；3)通过视频流发送模块发送已编码视频流到视频解码/接收端，实现立体视频的单路传输；4)所述视频解码/接收端包括普通H.264客户端和装有H.264立体图像解码器的客户端，得到单路视频显示或进而立体视频显示。
Description
技术领域；
本发明属于视频或图像处理领域，更具体的是在立体视频处理过程中实现立体视频单路传输的方法和系统。
背景技术
随着科学技术的高速发展，以计算机、网络和电子技术为代表的信息技术获得了突飞猛进的发展。视频技术由黑白到彩色，再到今天的高清晰度数字视频，发展速度也极其迅猛。现代视频技术正在向“数字化”、“高清晰度化”和“立体化”方向发展。立体技术是未来视频技术的一个重要发展方向。但是立体视频数据量是单路视频的2倍，限制了其实际应用，因而立体视频或图像处理技术现已经成为一个研究热点。
H.264/MPEG-4AVC(H.264)是1995年自MPEG-2视频压缩标准发布以后，由ITU-T和ISO/IEC的联合开发组共同开发的最新国际视频编码标准。其最大的优势是具有很高的数据压缩比率，在同等图像质量的条件下，H.264的压缩比是MPEG-2的2倍以上，是MPEG-4的1.5～2倍，H.264标准也具有更好的信道适应性，应用前景更为广泛。这些都为立体视频编码技术提供了良好的平台，促进着立体视频编码研究的进一步发展。但是，H.264的高效性是建立在其实现的高复杂度基础上的，就其Baseline而言，解码器复杂度将是H.263解码器的3倍左右，而编码器的复杂度更是高达10多倍。H.264的高复杂度是制约其实时性发展的一个重要问题。而现有研究很大程度上局限于快速模式选择、快速匹配，以及如何从单目图像恢复双路图像，快速算法对复杂性的改进有限，而且与现有的显示设备不兼容，单路图像提取立体信息一方面不能有效利用目前双路摄像机已经普遍存在的情况下获取的立体信息，另一方面提取的深度信息精确性很低。因而急需一种在降低立体视频传输系统码率的基础上，简化H.264编解码器复杂度的立体图像处理方法。
发明内容
本发明的目的是在使用通用H.264编解码器基础上实现立体视频中双路视频的单路传输，并且接收端可选择的使用单路视频解码或者立体视频解码。
一种基于H.264的立体视频编解码方法，该方法是在立体视频数据嵌入系统中完成，该系统包括双路视频采集端、编码器模块、视频流发送模块和视频解码/接收端；
所述方法的步骤包括：
1)双路视频采集端分别获取左右眼的视频图像，左右眼的视频图像分别传送到各自对应的视频缓存中等待处理；
2)编码器模块对所述缓存中的双路视频图像数据进行处理：
先对运动/视差补偿，提取矢量信息；然后在对视频图像进行H.264编码过程中将所用矢量信息嵌入到参考图像中，最终得到视频流；实现双路视频的可单路传输性；
(参考图像是H.264编码过程中的专有名词，参考图像是H.264编码过程中用于运动补偿的同路的前一帧图像或者视差补偿的另一路的同一帧图像。)
3)通过视频流发送模块发送已编码视频流到视频解码/接收端，实现立体视频的单路传输；
4)所述视频解码/接收端包括普通H.264客户端和装有H.264立体图像解码器的客户端；普通H.264客户端对接收到的视频流进行单路图像解码，得到单路视频显示；装有H.264立体图像解码器的客户端根据嵌入的矢量信息对双路图像进行恢复，恢复得到的双路图像分别存入两个缓冲区，进而立体显示。
所述步骤2)中，对获取到双路视频并开辟两个缓冲区、分别存放两路图像后，先进行运动补偿、视差补偿；然后对参考图像依次进行分块、整数DCT变换、矢量信息嵌入、量化和编码步骤得到编码后的视频流。
所述步骤3)中，利用无线或有线的方式发送已编码视频流到互联网或客户端。
所述客户端包括存储设备。
视频发布服务器接收通过互联网接收到视频流，再把视频流传输到视频解码/接收端。
所述步骤4)中，接收端解码器选择是单路视频解码或立体视频解码，如果是单路视频解码，将嵌入数据位置0，然后进行通用H.264解码，或者直接进行通用H.264解码；如果是立体视频解码，开辟两个缓冲区，首先提取出嵌入的矢量信息并将嵌入数据位置0，将接受到的一路信号存入一个缓冲区，如果标志位为0，则矢量信息为运动矢量V_x、V_y，与缓冲区前一帧一起利用运动补偿模式恢复此帧；若标志位为1，则矢量信息为视差矢量V_x，V_y，与另一缓冲区当前帧一起恢复此帧。
所述编码器模块是DSP处理系统或ARM处理系统。
本发明的特点是：高效、简洁，实用性强，实时性方面是一个很大的改进，并且有效处理了双通道数据量庞大的问题，在现有单目视频图像编码发展技术已经成熟的基础上，实现了高信噪比的条件下高的压缩比。
附图说明
图1本发明立体视频数据嵌入系统框架图
图2系统处理流程框图
图3本发明系统采取的运动/视差补偿策略示意图
图4H.264中的整数变换示意图
图5数据嵌入策略示意图
图6双路视频处理硬件框图
图7编码器编码流程图
图8解码器解码流程图
具体实施方式
下面结合附图与具体实施方式对本发明作进一步说明。
如图2，一种基于通用H.264的立体视频编解码方法，实现立体视频的单路传输。基于H.264的立体视频编解码系统由双路视频采集端、立体视频处理核心模块(内含编码器模块和视频流发送模块)与视频解码/接收端组成的。双路视频采集端通过双目视频摄像机获取左右眼视频图像，并将其传送到视频缓存中以待处理；立体视频处理核心模块对缓存中的双路视频图像数据进行处理，完成双路数据缓冲、立体视频图像矢量数据(运动矢量和视差矢量)的提取与嵌入、单路图像的H.264压缩编码、视频流发送等功能。编码标准选择H.264编码标准，为了以后便于移植到移动终端中，考虑到移动终端的计算能力和实时性要求，系统选择H.264基本档次(Baseline Profile)编码器。视频解码/接收端可以对接受到的视频流直接进行单路视频图像解码，得到单路视频显示，也可以装以H.264立体图像解码器跟据嵌入的矢量信息对视频图像进行恢复，恢复的双路视频图像分别存入两个缓冲区，进而可以立体显示。
(a)立体视频编解码系统
立体视频编解码系统如图1所示。系统由双路视频采集端、立体视频处理核心模块(内含编码器模块和视频流发送模块)与视频解码/接收端组成。其中，双路视频采集端通过双目视频摄像机获取左右眼视频图像，并将其传送到视频缓存中以待处理；编码器模块对缓存中的双路视频图像数据进行处理，完成双路数据缓冲、立体视频图像矢量数据(运动矢量和视差矢量)的提取与嵌入和单路图像的H.264压缩编码，即可得到单路图像视频流，视频流发送模块(可以是无线EDGE模块等无线，或者其它有线的方式)将已编码视频流发送到Internet网、存储设备等，或者视频解码/接收端，实现立体视频的单路传输；视频解码/接收端则根据解码器的选择对接收到的码流进行单路或者立体解码。系统处理流程如图2所示。
(b)基于H.264的立体视频数据嵌入方法
H.264采用运动/视差补偿策略，其基本档次支持I帧和P帧。I帧采用帧内模式编码，编码效率较低但无需参考帧，可以独立恢复出全部图像信息且能有效阻止由于包丢失而引起的错误扩散。P帧采用帧间模式编码，利用帧间预测和运动补偿来消除时域冗余，只传输当前帧、参考帧的差值和矢量数据，编码效率高，而参考帧的差值矩阵数据大部分为0，对于图像质量要求并不是太高的情况下，认为参考帧差值为0，这样，因此需要传输当前帧和矢量数据即可。本系统MCP(运动补偿估计)与DCP(视差补偿估计)相结合的立体视频编码策略示意图如图3所示。
H.264与先前的标准(例如H.263等)相似，对图像采用基于块的变换编码，但变换是整数操作而不是实数运算，其过程和DCT(Discrete Cosine Transform离散余弦变换)变换相似。这种方法的优点在于：在编码器中和解码器中允许精度相同的变换和反变换，便于使用简单的定点运算方式。也就是说，这里没有″反变换误差″。变换的单位是4×4块，而不是以往常用的8×8块。由于用于变换块的尺寸缩小，运动物体的划分更精确，这样，不但变换计算量比较小，而且在运动物体边缘处的衔接误差也大为减小。为了使小尺寸块的变换方式对图像中较大面积的平滑区域不产生块之间的灰度差异，可对帧内宏块亮度数据的16个4×4块的DC系数(每个小块一个，共16个)进行第二次4×4块的变换，对色度数据的4个4×4块的DC系数(每个小块一个，共4个)进行2×2块的变换(见图4)，经变换后，数据的能量基本上集中到左上方(低频信号)了，由于高频信号区域基本为0，特别是量化后，0系数更多，系统设计将矢量信息嵌入到高频信号区域，在量化前将矢量信息嵌入到固定的两位数据中(例如宏块按照ZIGZAG扫描后的最后两个数据)，然后进行量化、编码。数据嵌入方式如图5所示。
编码器算法流程图如图7所示，可分为如下步骤：
1.初始化图像参数，建立右通道所需的内存。如源文件存入的数组，运动补偿和视差补偿后残差存储内存等
2.分块。为便于统计实验结果及查看嵌入数据对图像质量影响的大小，本文将对左路图像的分块模式进行固定，分为H.264编码器使用的16*16、16*8、8*16、8*8、8*4、4*8、4*4七种模式
3.设置运动补偿搜索窗及视差补偿搜索窗。
4.帧内预测帧间预测的判断。
(1)如果是左通道的第一帧，采用帧内编码。
(2)如果是右通道的第一帧，采用帧内编码，同时采用以左通道第一帧为参考帧的视差补偿预测，并存储所需的视差矢量和残差。使用H.264编码器中的运动估计函数进行视差匹配，分块方法按步骤3中进行。
(3)如果是左通道的非第一帧，那么以前一帧作为参考帧进行运动估计，采用块匹配算法，确定搜索范围，全搜索找到MAE最小的块，作为最佳匹配块，即为预测块。并记下运动矢量MV0。
(4)如果是右通道的非第一帧，那么要进行两种预测。以右通道相应帧作为参考，记下运动矢量MV1。以左通道相应帧为参考帧做视差估计，找到最佳匹配块，记下视差矢量DV。
5.求残差。
(1)左通道除第一帧后的每一帧中根据MV0找出预测块，用当前块减去预测块，得残差。
(2)右通道的每一帧，根据DV找到视差补偿预测块，求得残差，记为R1；根据MV 1找到运动补偿预测块，求得残差，记为R2；
6.确定右通道预测块。如果R1＞R2，那么将MV 1所指的匹配块作为预测块，最终残差为R2，存储运动矢量。反之，将DV所指的块作为预测块，最终残差为R1，存储视差矢量，置标志位为1。
7.对宏块进行整数DCT变换，将矢量信息V_x，V_y嵌入到宏块DCT变换后的最后两位中(按照zigzag扫描的最后两位)，并置标志位(宏块倒数第三位)为0(表示后面的矢量信息为运动矢量)或1(表示后面嵌入的为视差矢量)。嵌入后对该宏块进行量化，编码等。
8.判断是否编完所有宏块，如果没有，转到下一宏块，否则，转到下一帧图像，直到编完所有图像。
(c)视频解码/接收端
接收端解码器选择是单路视频解码或立体视频解码。如果是单路视频解码，将嵌入数据位置0，然后进行通用H.264解码，或者直接进行通用H.264解码；如果是立体视频解码，开辟两个缓冲区，首先提取出嵌入的矢量信息并将嵌入数据位置0，将接受到的一路信号存入一个缓冲区，如果标志位(宏块倒数第三位)为0，则矢量信息为运动矢量(V_x，V_y)，与缓冲区前一帧一起利用运动补偿模式恢复此帧；若标志位为1，则矢量信息为视差矢量(V_x，V_y)，与另一缓冲区当前帧一起恢复此帧。
立体视频解码器算法流程图如图8所示，可分为如下步骤：
1.初始化解码参数，并开辟两个缓冲区A、B
2.接收一帧图像，判断该帧宏块是否解码结束，如果结束，进入步骤9，否则进入步骤3
3.读取下一个宏块，并对其进行熵解码、反量化、读取嵌入的标志位和矢量信息，然后对其反DCT变换
4.如果该宏块属于左图像第一帧，则进行帧内解码，将解码后数据存入缓冲区A，返回步骤2，否则进入步骤5
5.如果该宏块属于右通道第一帧，则以缓冲区A的当前帧进行视差补偿恢复，并存入缓冲区B，返回步骤2，否则进入步骤6
6.如果该宏块属于左通道非第一帧，则以缓冲区A前一帧进行运动补偿恢复，并将解码后数据存入缓冲区A，返回步骤2，否则进入步骤7
7.标志位如果为0，则以缓冲区B的前一帧进行运动补偿恢复，并将解码后数据存入缓冲区B，返回步骤2，否则进入步骤8
8.以缓冲区A的当前帧进行视差补偿恢复，并存入缓冲区B，返回步骤2
9.如果图像解码结束，则解码结束，否则进入步骤2
上述步骤中的缓冲区A和B即为图2中所述的缓冲区A’和B’。
双路视频处理核心模块是立体图像处理数据嵌入系统的核心部分，如图6所示，选用专用数字信号处理器TMS320DM642作为核心单元。外围功能模块还包括音视频解码单元，时钟单元，SDRAM，Flash，UART控制，无线EDGE模块等。TMS320DM642时钟高达600MHz，处理能力4800MIPS，具有3个视频端口(VP0-VP3)，支持多种分辨率和标准。通过外部内存接口(EMIF)控制单元可直接与外部的SDRAM，FLASH进行连接，并可扩展实现ATA硬盘接口，UART接口和数字I/O接口等。
在利用视频端口VP0、VP1通过有线或者无线的方式获取到双路视频以后，开辟两个缓冲区，分别存放两路图像，再根据图3进行运动补偿、视差补偿后，对参考图像依次进行分块、整数DCT变换、矢量信息嵌入、量化、编码等步骤得到编码后的视频流，利用无线EDGE模块等无线，或者其它有线的方式将编码后的视频流传送到互联网或客户端。
在解码端，普通H.264客户端对接收到的视频流进行单路图像解码，得到单路视频显示，而对H.264立体图像客户端，首先开辟两个缓冲区，经过熵解码、反量化后提取标志位，根据标志位的数值确定进行运动补偿恢复或者视差补偿恢复，再根据嵌入的矢量信息对图像进行恢复工作，经过反DCT变换等步骤恢复双路图像并分别存入两个缓冲区，进而可以立体显示。
本发明可以应用于
a：存储系统：例如立体视频图像的DVD记录与重放系统，按照本立体图像编码方法编码后的数据存储在DVD上，播放设备可以进行H.264解码时，播放时就可以对存储数据进行单路或者立体视频解码。
b：实时监控系统：监视器端安装有使用本方法的立体视频编码系统，监视端使用视频解码方法进行立体视频监控。
Claims (7)
1、一种基于H.264的立体视频编解码方法，其特征是该方法是在立体视频数据嵌入系统中完成，该系统包括双路视频采集端、编码器模块、视频流发送模块和视频解码/接收端；
所述方法的步骤包括：
1)双路视频采集端分别获取左右眼的视频图像，左右眼的视频图像分别传送到各自对应的视频缓存中等待处理；
2)编码器模块对所述缓存中的双路视频图像数据进行处理：
先对运动/视差补偿，提取矢量信息；然后在对视频图像进行H.264编码的过程中把所用矢量信息嵌入参考图像中，最终得到单路视频流，实现双路视频的可单路传输性；
3)通过视频流发送模块发送已编码视频流到视频解码/接收端，实现立体视频的单路传输；
4)所述视频解码/接收端包括普通H.264客户端和装有H.264立体图像解码器的客户端；普通H.264客户端对接收到的视频流进行单路图像解码，得到单路视频显示；装有H.264立体图像解码器的客户端根据嵌入的矢量信息对双路图像进行恢复，恢复得到的双路图像分别存入两个缓冲区，进而立体显示。
2、根据权利要求1所述的基于H.264的立体视频编解码方法，其特征是所述步骤2)中，先对获取到双路视频先进行运动补偿、视差补偿；然后对参考图像依次进行分块、整数DCT变换、矢量信息嵌入和量化得到单路图像，最后进行H.264编码得到单路视频流。
3、根据权利要求2所述的基于H.264的立体视频编解码方法，其特征是所述步骤2)中，编码器模块的步骤包括：
2.1)初始化图像参数，建立右或左通道所需的内存；
2.2)分块：为便于统计实验结果及查看嵌入数据对图像质量影响的大小，对左路图像的分块模式进行固定，分为H.264编码器使用的16*16、16*8、8*16、8*8、8*4、4*8和4*4七种模式；
2.3)设置运动补偿搜索窗及视差补偿搜索窗；
2.4)帧内预测和帧间预测的判断：
a、如果是左通道的第一帧，采用帧内编码；
b、如果是右通道的第一帧，采用帧内编码，同时采用以左通道第一帧为参考帧的视差补偿预测，并存储所需的视差矢量和残差；使用H.264编码器中的运动估计函数进行视差匹配，分块方法按步骤2.3)中进行。
c、如果是左通道的非第一帧，那么以前一帧作为参考帧进行运动估计，采用块匹配算法，确定搜索范围，全搜索找到MAE最小的块，作为最佳匹配块，即为预测块，并记下运动矢量MV0；
d、如果是右通道的非第一帧，那么要进行两种预测：以右通道相应帧作为参考，记下运动矢量MV1；以左通道相应帧为参考帧做视差估计，找到最佳匹配块，记下视差矢量DV；
2.5)求残差：
a、左通道除第一帧后的每一帧中根据MV0找出预测块，用当前块减去预测块，得残差；
b、右通道的每一帧，根据DV找到视差补偿预测块，求得残差，记为R1；根据MV1找到运动补偿预测块，求得残差，记为R2；
2.6)确定右通道预测块：如果R1＞R2，那么将MV1所指的匹配块作为预测块，最终残差为R2，存储运动矢量；反之，将DV所指的块作为预测块，最终残差为R1，存储视差矢量，置标志位为1；
2.7)对宏块进行整数DCT变换，将矢量信息V_x，V_y嵌入到宏块DCT变换后的最后两位中，即按照zigzag扫描的最后两位，并置标志位为0，表示后面的矢量信息为运动矢量，或1，表示后面嵌入的为视差矢量；嵌入后对该宏块进行量化，编码；
2.8)判断是否编完所有宏块，如果没有，转到下一宏块，否则，转到下一帧图像，直到编完所有图像。
4、根据权利要求1所述的基于H.264的立体视频编解码方法，其特征是所述步骤3)中，利用无线或有线的方式发送已编码视频流到互联网或客户端；视频发布服务器接收通过互联网接收到视频流，再把视频流传输到视频解码/接收端。
5、根据权利要求1所述的基于H.264的立体视频编解码方法，其特征是所述步骤4)中，接收端解码器选择是单路视频解码或立体视频解码，如果是单路视频解码，将嵌入数据位置0，然后进行通用H.264解码，或者直接进行通用H.264解码；如果是立体视频解码，开辟两个缓冲区，首先提取出嵌入的矢量信息并将嵌入数据位置0，将接受到的一路信号存入一个缓冲区，如果标志位为0，则矢量信息为运动矢量V_x、V_y，与缓冲区前一帧一起利用运动补偿模式恢复此帧；若标志位为1，则矢量信息为视差矢量V_x，V_y，与另一缓冲区当前帧一起恢复此帧。
6、根据权利要求5所述的基于H.264的立体视频编解码方法，其特征是所述步骤4)中，视频解码步骤包括：
1)初始化解码参数，并开辟两个缓冲区A、B；
2)接收一帧图像，判断该帧宏块是否解码结束，如果结束，进入步骤9)，否则进入步骤3)；
3)读取下一个宏块，并对其进行熵解码、反量化、读取嵌入的标志位和矢量信息，然后对其反DCT变换；
4)如果该宏块属于左图像第一帧，则进行帧内解码，将解码后数据存入缓冲区A，返回步骤2，否则进入步骤5)；
5)如果该宏块属于右通道第一帧，则以缓冲区A的当前帧进行视差补偿恢复，并存入缓冲区B，返回步骤2)，否则进入步骤6)；
6)如果该宏块属于左通道非第一帧，则以缓冲区A前一帧进行运动补偿恢复，并将解码后数据存入缓冲区A，返回步骤2)，否则进入步骤7)；
7)标志位如果为0，则以缓冲区B的前一帧进行运动补偿恢复，并将解码后数据存入缓冲区B，返回步骤2)，否则进入步骤8)；
8)以缓冲区A的当前帧进行视差补偿恢复，并存入缓冲区B，返回步骤2)；
9)如果图像解码结束，则解码结束，否则进入步骤2)。
7、根据权利要求1所述的基于H.264的立体视频编解码方法，其特征是所述编码器模块是DSP处理系统或ARM处理系统。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910030728.8A CN101540926B (zh) | 2009-04-15 | 2009-04-15 | 基于h.264的立体视频编解码方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910030728.8A CN101540926B (zh) | 2009-04-15 | 2009-04-15 | 基于h.264的立体视频编解码方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101540926A true CN101540926A (zh) | 2009-09-23 |
| CN101540926B CN101540926B (zh) | 2010-10-27 |
Family
ID=41123863
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200910030728.8A Expired - Fee Related CN101540926B (zh) | 2009-04-15 | 2009-04-15 | 基于h.264的立体视频编解码方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101540926B (zh) |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101969560A (zh) * | 2010-11-01 | 2011-02-09 | 北京中科大洋科技发展股份有限公司 | 一种多核平台下Mpeg2高清编码器的Slice码率分配方法 |
| CN102045580A (zh) * | 2009-10-13 | 2011-05-04 | 美国博通公司 | 用于处理视频的方法和系统 |
| CN102131097A (zh) * | 2011-03-21 | 2011-07-20 | 中国电信股份有限公司 | 3d流媒体传输方法及系统 |
| CN102131111A (zh) * | 2011-01-25 | 2011-07-20 | 天津大学 | 一种立体视频传输系统 |
| CN102316252A (zh) * | 2010-06-30 | 2012-01-11 | 宁波Gqy视讯股份有限公司 | 一种用于监控的立体网络摄像终端 |
| CN102340662A (zh) * | 2010-07-22 | 2012-02-01 | 炬才微电子（深圳）有限公司 | 一种视频处理设备和方法 |
| CN102387359A (zh) * | 2010-08-31 | 2012-03-21 | 中国电信股份有限公司 | 三维视频传输方法、系统及编解码装置 |
| CN102790890A (zh) * | 2011-05-17 | 2012-11-21 | 佳能株式会社 | 立体图像编码设备及其方法和摄像设备 |
| CN103369299A (zh) * | 2012-04-09 | 2013-10-23 | 维图通讯有限公司 | 一种基于h.264编码技术的视频监控方法 |
| WO2015006884A1 (en) * | 2013-07-19 | 2015-01-22 | Qualcomm Incorporated | 3d video coding with partition-based depth inter coding |
| CN107454426A (zh) * | 2012-07-27 | 2017-12-08 | 寰发股份有限公司 | 三维视频编码或解码方法 |
| CN107483929A (zh) * | 2011-09-09 | 2017-12-15 | 株式会社Kt | 用于解码视频信号的方法 |
| CN108111833A (zh) * | 2016-11-24 | 2018-06-01 | 阿里巴巴集团控股有限公司 | 用于立体视频编解码的方法、装置及系统 |
| WO2018161942A1 (en) * | 2017-03-09 | 2018-09-13 | Mediatek Inc. | Video processing apparatus using one or both of reference frame re-rotation and content-oriented rotation selection and associated video processing method |
| US10560678B2 (en) | 2016-11-09 | 2020-02-11 | Mediatek Inc. | Method and apparatus having video encoding function with syntax element signaling of rotation information of content-oriented rotation applied to 360-degree image content or 360-degree video content represented in projection format and associated method and apparatus having video decoding function |
| CN114697632A (zh) * | 2022-03-28 | 2022-07-01 | 天津大学 | 一种基于双向条件编码的端到端立体图像压缩方法及装置 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102741917B (zh) | 2010-11-26 | 2015-04-22 | 联发科技（新加坡）私人有限公司 | 执行视频显示控制的方法、视频处理电路及视频显示系统 |
| TWI485651B (zh) * | 2011-03-15 | 2015-05-21 | Teco Elec & Machinery Co Ltd | 深度資料估計方法及其裝置 |
-
2009
- 2009-04-15 CN CN200910030728.8A patent/CN101540926B/zh not_active Expired - Fee Related
Cited By (30)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102045580B (zh) * | 2009-10-13 | 2014-06-11 | 美国博通公司 | 用于处理视频的方法和系统 |
| CN102045580A (zh) * | 2009-10-13 | 2011-05-04 | 美国博通公司 | 用于处理视频的方法和系统 |
| CN102316252A (zh) * | 2010-06-30 | 2012-01-11 | 宁波Gqy视讯股份有限公司 | 一种用于监控的立体网络摄像终端 |
| CN102340662A (zh) * | 2010-07-22 | 2012-02-01 | 炬才微电子（深圳）有限公司 | 一种视频处理设备和方法 |
| CN102340662B (zh) * | 2010-07-22 | 2013-01-23 | 炬才微电子（深圳）有限公司 | 一种视频处理设备和方法 |
| CN102387359A (zh) * | 2010-08-31 | 2012-03-21 | 中国电信股份有限公司 | 三维视频传输方法、系统及编解码装置 |
| CN101969560B (zh) * | 2010-11-01 | 2012-09-05 | 北京中科大洋科技发展股份有限公司 | 一种多核平台下MPEG2高清编码器的Slice码率分配方法 |
| CN101969560A (zh) * | 2010-11-01 | 2011-02-09 | 北京中科大洋科技发展股份有限公司 | 一种多核平台下Mpeg2高清编码器的Slice码率分配方法 |
| CN102131111A (zh) * | 2011-01-25 | 2011-07-20 | 天津大学 | 一种立体视频传输系统 |
| CN102131097A (zh) * | 2011-03-21 | 2011-07-20 | 中国电信股份有限公司 | 3d流媒体传输方法及系统 |
| CN102131097B (zh) * | 2011-03-21 | 2016-05-18 | 中国电信股份有限公司 | 3d流媒体传输方法及系统 |
| CN102790890B (zh) * | 2011-05-17 | 2015-09-30 | 佳能株式会社 | 立体图像编码设备及其方法和摄像设备 |
| US8983217B2 (en) | 2011-05-17 | 2015-03-17 | Canon Kabushiki Kaisha | Stereo image encoding apparatus, its method, and image pickup apparatus having stereo image encoding apparatus |
| CN102790890A (zh) * | 2011-05-17 | 2012-11-21 | 佳能株式会社 | 立体图像编码设备及其方法和摄像设备 |
| US10523967B2 (en) | 2011-09-09 | 2019-12-31 | Kt Corporation | Method for deriving a temporal predictive motion vector, and apparatus using the method |
| CN107483929A (zh) * | 2011-09-09 | 2017-12-15 | 株式会社Kt | 用于解码视频信号的方法 |
| US11089333B2 (en) | 2011-09-09 | 2021-08-10 | Kt Corporation | Method for deriving a temporal predictive motion vector, and apparatus using the method |
| US10805639B2 (en) | 2011-09-09 | 2020-10-13 | Kt Corporation | Method for deriving a temporal predictive motion vector, and apparatus using the method |
| CN107483929B (zh) * | 2011-09-09 | 2020-05-12 | 株式会社Kt | 用于解码视频信号的方法 |
| CN103369299A (zh) * | 2012-04-09 | 2013-10-23 | 维图通讯有限公司 | 一种基于h.264编码技术的视频监控方法 |
| CN107454426A (zh) * | 2012-07-27 | 2017-12-08 | 寰发股份有限公司 | 三维视频编码或解码方法 |
| WO2015006884A1 (en) * | 2013-07-19 | 2015-01-22 | Qualcomm Incorporated | 3d video coding with partition-based depth inter coding |
| US10587857B2 (en) | 2016-11-09 | 2020-03-10 | Mediatek Inc. | Method and apparatus having video decoding function with syntax element parsing for obtaining rotation information of content-oriented rotation applied to 360-degree image content or 360-degree video content represented in projection format |
| US10560678B2 (en) | 2016-11-09 | 2020-02-11 | Mediatek Inc. | Method and apparatus having video encoding function with syntax element signaling of rotation information of content-oriented rotation applied to 360-degree image content or 360-degree video content represented in projection format and associated method and apparatus having video decoding function |
| CN108111833A (zh) * | 2016-11-24 | 2018-06-01 | 阿里巴巴集团控股有限公司 | 用于立体视频编解码的方法、装置及系统 |
| CN110447229A (zh) * | 2017-03-09 | 2019-11-12 | 联发科技股份有限公司 | 使用参考帧重新旋转以及内容导向旋转选择的一或两者的视频处理装置以及相关视频处理方法 |
| TWI673681B (zh) * | 2017-03-09 | 2019-10-01 | 聯發科技股份有限公司 | 使用參考幀重新旋轉以及內容導向旋轉選擇的一或兩者的視訊處理裝置以及相關視訊處理方法 |
| WO2018161942A1 (en) * | 2017-03-09 | 2018-09-13 | Mediatek Inc. | Video processing apparatus using one or both of reference frame re-rotation and content-oriented rotation selection and associated video processing method |
| CN114697632A (zh) * | 2022-03-28 | 2022-07-01 | 天津大学 | 一种基于双向条件编码的端到端立体图像压缩方法及装置 |
| CN114697632B (zh) * | 2022-03-28 | 2023-12-26 | 天津大学 | 一种基于双向条件编码的端到端立体图像压缩方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101540926B (zh) | 2010-10-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101540926B (zh) | 基于h.264的立体视频编解码方法 | |
| Duan et al. | Video coding for machines: A paradigm of collaborative compression and intelligent analytics | |
| Chen et al. | Learning for video compression | |
| Guo et al. | Distributed multi-view video coding | |
| CN101159875B (zh) | 二重预测视频编解码方法和装置 | |
| KR100597402B1 (ko) | 스케일러블 비디오 코딩 및 디코딩 방법, 이를 위한 장치 | |
| CN104704835B (zh) | 视频编码中运动信息管理的装置与方法 | |
| CN103141092B (zh) | 针对视频压缩使用运动补偿的基于示例的超分辨率来编码视频信号的方法和设备 | |
| KR20070026317A (ko) | 비디오 코딩에 사용되는 코딩단/디코딩단의 양방향예측방법 | |
| WO2019184639A1 (zh) | 一种双向帧间预测方法及装置 | |
| CN101668205A (zh) | 基于残差宏块自适应下采样立体视频压缩编码方法 | |
| MX2008002391A (es) | Metodo y aparato para codificar video de vistas multiples. | |
| KR20050075483A (ko) | 비디오 코딩 및 디코딩 방법, 및 이를 위한 장치 | |
| CN106162190A (zh) | 一种视频图像压缩和读取的方法、装置及系统 | |
| Yan et al. | Stereo video coding based on frame estimation and interpolation | |
| Joy et al. | Deep CNN based video compression with lung ultrasound sample | |
| CN101262607B (zh) | 二重预测视频编解码方法和装置 | |
| CN102263952A (zh) | 一种基于对象的快速双目立体视频分形压缩与解压缩方法 | |
| Zhang et al. | Error-resilient coding by convolutional neural networks for underwater video transmission | |
| CN101010962A (zh) | 一种运动估计的方法和装置 | |
| Wen et al. | Low bit-rate video streaming for face-to-face teleconference | |
| Ratnottar et al. | Comparative study of motion estimation & motion compensation for video compression | |
| Tsung et al. | Video encoder design for high-definition 3D video communication systems | |
| Sigger et al. | Spatial-temporal autoencoder with attention network for video compression | |
| EP3496405A1 (en) | Devices and methods for video reconstruction from multiple source videos |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C53 | Correction of patent of invention or patent application | ||
| CB03 | Change of inventor or designer information |
Inventor after: Ji Xiaoyong Inventor after: Sun Li Inventor after: Lu Haoming Inventor after: Wang Jian Inventor after: Gao Minfang Inventor after: Yang Xiaoqin Inventor after: Chen Zhiyong Inventor after: Huang Qianshan Inventor after: Liu Fang Inventor after: Jiang Li Inventor after: Liu Xu Inventor before: Ji Xiaoyong Inventor before: Chen Zhiyong Inventor before: Gao Minfang Inventor before: Liu Fang Inventor before: Jiang Li Inventor before: Liu Xu Inventor before: Sun Li Inventor before: Lu Haoming Inventor before: Yang Xiaoqin Inventor before: Huang Qianshan |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: INVENTOR; FROM: JI XIAOYONG GAO MINFANG LIU FANG JIANG LI LIU XU SUN LI LU HAOMING YANG XIAOQIN HUANG QIANSHAN CHEN ZHIYONG TO: JI XIAOYONG WANG JIAN GAO MINFANG YANG XIAOQIN CHEN ZHIYONG HUANG QIANSHAN LIU FANG JIANG LI LIU XU SUN LI LU HAOMING |
|
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| C17 | Cessation of patent right | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20101027 Termination date: 20130415 |