CN102655604A - 视频处理方法和设备 - Google Patents
视频处理方法和设备 Download PDFInfo
- Publication number
- CN102655604A CN102655604A CN201110050993XA CN201110050993A CN102655604A CN 102655604 A CN102655604 A CN 102655604A CN 201110050993X A CN201110050993X A CN 201110050993XA CN 201110050993 A CN201110050993 A CN 201110050993A CN 102655604 A CN102655604 A CN 102655604A
- Authority
- CN
- China
- Prior art keywords
- equipment
- codec unit
- video data
- decoding
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title abstract 3
- 238000000034 method Methods 0.000 claims abstract description 49
- 230000003139 buffering effect Effects 0.000 claims abstract description 41
- 230000008569 process Effects 0.000 claims abstract description 14
- 230000005540 biological transmission Effects 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 18
- 238000012423 maintenance Methods 0.000 claims description 5
- NUHSROFQTUXZQQ-UHFFFAOYSA-N isopentenyl diphosphate Chemical compound CC(=C)CCO[P@](O)(=O)OP(O)(O)=O NUHSROFQTUXZQQ-UHFFFAOYSA-N 0.000 description 5
- 230000000737 periodic effect Effects 0.000 description 4
- 241000209094 Oryza Species 0.000 description 2
- 235000007164 Oryza sativa Nutrition 0.000 description 2
- 235000021186 dishes Nutrition 0.000 description 2
- 235000009566 rice Nutrition 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明实施例提供一种视频处理方法和设备，所述视频处理方法包括：第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元；所述编解码单元包括帧或宏块；所述第一设备将编码后的编解码单元发送给所述第二设备。本发明实施例中，第一设备将接收类型包含I和P(可选的包含B)类型帧或宏块的视频数据重新编码，重新编码过程中尽可能地使用P或B类型，然后将编码后的视频数据发送给第二设备，从而可以减少视频数据占用的带宽资源，也可以提高用户体验度。
Description
技术领域
本发明实施例涉及视频技术领域，尤其涉及一种视频处理方法和设备。
背景技术
随着通信技术的发展，视频在移动网络中的应用越来越广泛。但视频业务在提供丰富信息的同时，也占用了大部分的系统带宽，成为运营商的一大压力，特别是对于移动运营商。由于带宽有限，视频业务容易造成移动网络拥塞，视频用户的体验下降，同时给其他语音/数据用户造成影响。
现有的视频编码格式中，存在帧内编码帧和帧间编码帧的区分。帧内编码帧为独立编码的图像，接收端不依赖于其他帧解码；而接收端对帧间编码帧的解码则需要依赖于之前收到的帧，如果之前收到的帧发生丢失或者传输错误，则后续依赖这一帧解码的图像都会发生错误，直至下一个帧内编码帧正常解码。帧内编码帧由于没有参考其他帧，其编码后的数据量一般比帧间编码帧的数据量大的多。用I代表帧内编码帧，P代表前向帧间预测编码帧，则现有的许多视频，尤其是实时视频，都表现为IPPP...(或者中间有一些编码为B帧，B帧为双向帧间预测编码，一般用于非实时视频)的周期格式，有些编码标准中称这种周期序列为图像组，称图像组中第一个I帧为关键帧。另外，I、P和B也可以代表宏块的编码类型，含义与帧的编码类型一样，其中宏块是帧的编码单位。I帧中所有的宏块都编码为I宏块，而P帧中可以有I和P两种类型的宏块，B帧中可以有I、P和B三种类型的宏块。
但是，对于IPPP...(或者中间有一些编码为B帧)这种I帧周期间隔的视频数据，存在视频数据量过大，占用带宽资源较多，用户体验不好的问题。另外，对于I宏块，目前有些做法是在P帧或B帧中随机地插入I宏块，以减小传输错误带来的影响；但是，这些随机插入的I宏块在没有错误发生时是不必要的，同样存在占用带宽资源较多的问题，相应地用户体验度不高。
发明内容
本发明实施例提供一种视频处理方法和设备，以减少视频数据占用的带宽资源，以及提高用户体验度。
本发明实施例提供一种视频处理方法，包括：
第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元；所述编解码单元包括帧或宏块；
所述第一设备将编码后的编解码单元发送给所述第二设备。
本发明实施例还提供一种第一设备，包括：
编码模块，用于参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元；所述编解码单元包括帧或宏块；
发送模块，用于将所述编码模块编码后的编解码单元发送给所述第二设备。
通过本发明实施例，第一设备可以参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元，然后将编码后的编解码单元发送给第二设备。由于P或B类型编解码单元包含的数据量较小，因此将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元可以减少视频数据占用的带宽资源，进而可以提高用户体验度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明视频处理方法实施例一的流程图；
图2为本发明应用场景实施例一的示意图；
图3为本发明视频处理方法实施例二的流程图；
图4为本发明应用场景实施例二的示意图；
图5为本发明应用场景实施例三的示意图；
图6为本发明视频处理方法实施例三的流程图；
图7为本发明第一设备实施例一的结构示意图；
图8为本发明第一设备实施例二的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明视频处理方法实施例一的流程图，如图1所示，该视频处理方法可以包括：
步骤101，第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元，其中，上述编解码单元可以为帧或宏块。
步骤102，第一设备将编码后的编解码单元发送给第二设备。
本实施例中，在第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元之前，该第一设备还可以维护已发送数据单元和自身编码器的参考图像缓冲区中编解码单元之间的对应关系，并根据第一设备与第二设备之间的传输错误反馈标记自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元。
本实施例中，在第一设备将编码后的编解码单元发送给第二设备之前，当自身编码器的参考图像缓冲区中没有能被第二设备正确解码的编解码单元时，该第一设备可以将该视频数据的原始编解码单元或者解码后编解码单元编码为I类型编解码单元。
进一步地，在第一设备将编码后的编解码单元发送给第二设备之后，第二设备可以对编码后的编解码单元进行解码和重新编码，在重新编码过程中按照预定周期将部分编解码单元编码为图像组关键帧编解码单元，例如：I类型编解码单元。
本实施例中，在第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的解码后编解码单元编码为P或B类型编解码单元之前，第一设备还可以从网络接收上述视频数据，并对该视频数据进行解码，获得解码后编解码单元。
进一步地，第一设备还可以根据对所述视频数据进行解码的过程是否使用错误隐藏技术以及第一设备与第二设备之间的传输错误反馈，标记第一设备编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元。
另外，第一设备从网络接收视频数据之后，对该视频数据进行解码之前，第一设备还可以根据上述视频数据的因特网协议(Internet Protocol；以下简称：IP)地址、端口号、协议号和网络内部标签中的至少一个确定该视频数据对应的业务流；并获取对该视频数据进行解码或重编码所需的参数。
本实施例中，第一设备可以只对接收的视频数据中的I类型编解码单元进行解码，获得解码后编解码单元，然后将该解码后编解码单元参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元编码为P或B类型编解码单元。而对于视频数据中的P或B类型的编解码单元，第一设备可以将该视频数据中的P或B类型的编解码单元直接发送给第二设备。
上述实施例中，第一设备将视频数据的原始编解码单元或者解码后编解码单元参考该第一设备编码器的参考图像缓冲区中可以被第二设备正确解码的编解码单元编码为P或B类型编解码单元，然后将编码后的编解码单元发送给第二设备。由于P或B类型编解码单元包含的数据量较小，因此将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元可以减少视频数据占用的带宽资源，进而可以提高用户体验度。
图2为本发明应用场景实施例一的示意图，图2所示的应用场景为下行实时视频业务场景，如图2所示，本场景中，传输层一般不采用端到端重传的方式，允许有丢包/错包的发生。视频源将下行视频数据发送给网络侧网元，再由网络侧网元将上述下行视频数据经过处理后传输给终端设备。网络侧网元可以是基站、网关或者核心网设备等，本发明实施例对此不作限定。
图3为本发明视频处理方法实施例二的流程图，本实施例提供的视频处理方法可以应用于图2所示的应用场景中，本实施例以网络侧网元为基站为例进行说明。
如图3所示，该视频处理方法可以包括：
步骤301，基站接收下行视频数据，该下行视频数据包含I和P类型的帧或宏块，也可能包含B类型帧或宏块。
步骤302，基站确定下行视频数据对应的业务流，并获取对该下行视频数据进行解码或重编码所需的参数。
具体地，基站可以根据IP地址、端口、协议号和网络内部标签中的至少一个确定下行视频数据对应的业务流；
基站可以通过截取并记录业务流中传递的视频参数，或通过解码，或通过与视频源交互，或通过与接收端设备交互，或通过设置的方式获得对该下行视频数据进行解码或重编码所需的参数。
步骤303，基站对接收的下行视频数据进行解码，并根据解码过程是否使用错误隐藏技术标记被正确解码的帧或宏块。
具体地，如果一个帧或宏块在解码时使用了错误隐藏技术，则该帧或宏块没有正确解码；或者如果一个帧或宏块所参考的数据没有正确解码，则认为该帧或宏块也没有正确解码。相反地，如果一个帧或宏块的解码以及其所有参考的数据都没有使用错误隐藏技术，则标记该帧或宏块为正确解码的帧或宏块。
步骤304，基站将解码后的帧或宏块重新编码为P或B类型帧或宏块，编码所使用的参考帧或宏块为基站编码器参考图像缓冲区中可以被终端正确解码的帧或宏块。
具体的，在重编码之前，基站事先维护已发送数据单元(如混合自动重传请求(Hybrid Automatic Repeat Request；以下简称：HARQ)块、媒体接入控制(Media Access Control；以下简称：MAC)包、自动重传请求(AutomaticRepeat Request；以下简称：ARQ)块或IP包)与基站编码器参考图像缓冲区中帧或宏块之间的对应关系，并根据步骤303的标记结果以及基站与终端之间已发送数据的传输反馈(例如：HARQ反馈或ARQ反馈)标记基站编码器参考图像缓冲区中可以被终端正确解码的帧或宏块。举例来说，步骤303标记正确解码的帧或宏块如果之前参考的是能被终端正确解码的帧或宏块，并且又正确地被传输给终端，举例来说，可以通过没有HARQ或者ARQ错误反馈确定步骤303标记正确解码的帧或宏块被正确地传输给终端，则可以认为该帧或宏块在终端可以被正确解码，基站主要标记放入自身编码器参考图像缓冲区中的帧或宏块。
特别地，如果基站编码器参考图像缓冲区中没有合适的帧或宏块时，则基站可以将原先解码后的帧或宏块重新编码为I类型帧或宏块。在这种情况下，步骤303标记的正确解码的帧或宏块在被重新编码为I类型帧或宏块，并被正确传输给终端之后，就认为该帧或宏块可以在终端正确解码。
步骤305，基站将重新编码后的视频数据发送给终端。
可替代地，步骤304中可以只将接收的下行视频数据中的I类型帧或宏块重新编码为P或B类型的帧或宏块，而将上述下行视频数据中的其余数据直接发送给终端。
本实施例以网络侧网元为基站为例进行说明，对于网络侧网元为网关或核心网设备的情况，在步骤304，网络侧网元与终端之间的传输反馈需要依赖基站将空口传输反馈(例如：HARQ反馈或ARQ反馈)告知给网络侧网元；在步骤305，网络侧网元先通过有线链路将重新编码后的视频数据传输给基站，再由基站通过空口发送给终端。
上述实施例中，网络侧网元将接收类型包含I和P(可选的包含B)类型帧或宏块的视频数据重新编码，重新编码过程中尽可能地使用P或B类型的帧或宏块，然后将编码后的下行视频数据发送给终端设备。由于P或B类型编解码单元包含的数据量较小，因此重新编码过程中尽可能地使用P或B类型的帧或宏块可以减少视频数据占用的带宽资源，也可以提高用户体验度。
图4为本发明应用场景实施例二的示意图，图4所示的场景为非实时下行场景，如图4所示，本场景中，视频源与终端设备之间可以采用端到端重传的方式消除错误；或者视频源与网络侧网元建立TCP连接，网络侧网元与终端设备建立TCP连接，采用分段TCP传输的方式消除传输错误。
本实施例中，网络侧网元可以为接入网或核心网的某个网元，该网络侧网元可以将接收到的IPPP...(周期可以是固定周期或不固定周期，中间可以有一些帧编码为B帧)周期结构的下行视频数据中的I帧转换成P或B帧，也可以将接收视频数据中的I宏块重新编码为P或B宏块，然后将重新编码后的下行视频数据发送给终端设备。
由于不同路径传输或者错包重传可能造成网络侧网元接收的下行视频数据是乱序的，此时网络侧网元可以采用以下3种方式中的任意一种将下行视频数据中的I帧或宏块重新编码成P或B类型帧或宏块：
1)网络侧网元可以参考该网络侧网元已正确接收并解码的帧，将接收到的下行视频数据中的I帧或宏块转换成P或B类型帧或宏块；
2)当网络侧网元认为待转换的I帧或宏块所能参考的帧不在该网络侧网元的解码缓冲区中时，则该网络侧网元可以不将下行视频数据中的I帧或宏块转换为P或B类型帧或宏块；
3)网络侧网元等待合适的所需参考的帧或宏块到达后再将I帧或宏块转换为P或B类型帧或宏块。
同样，本实施例中，网络侧网元的处理逻辑都是针对一个特定的业务流的，因此网络侧网元在将接收到的下行视频数据进行处理之前，网络侧网元需要先确定下行视频数据对应的业务流，并获取对该下行视频数据进行解码或重编码所需的参数。具体地，网络侧网元可以根据IP地址、端口、协议号和网络内部标签中的至少一个确定下行视频数据对应的业务流；网络侧网元可以通过截取并记录业务流中传递的视频参数，或通过解码，或通过与视频源交互，或者通过与接收端设备交互，或通过设置的方式获得对该下行视频数据进行解码或重编码所需的参数。
另外，本实施例中，可选地，终端设备可以出于回放或跳跃等本地卡带式影像录像机(Video Cassette Recorder；以下简称：VCR)控制的需要，将接收并解码的视频数据按照一定周期将部分帧重新编码为图像组关键帧，例如重新编码为IPPP...(或者中间有一些编码为B帧)周期结构的视频序列。
图5为本发明应用场景实施例三的示意图，图5所示的场景为上行实时视频业务场景，如图5所示，本场景中，终端设备作为视频源发送实时上行视频数据，传输层不采用端到端重传的方式，允许有丢包或错包的发生。网络侧(接入网或核心网)网元需要部署视频转码功能。
图6为本发明视频处理方法实施例三的流程图，本实施例提供的视频处理方法可以应用于本发明图5所示的应用场景中，如图6所示，该视频处理方法可以包括：
步骤601，除上行视频数据中的第一帧外，终端将视频帧或宏块编码为P或B类型帧或宏块，编码所使用的参考帧或宏块为终端编码器参考图像缓冲区中可以被网络侧网元正确解码的帧或宏块。
具体的，在重编码之前，终端事先维护已发送数据单元(例如：HARQ块、MAC包、ARQ块或IP包)与终端编码器参考图像缓冲区中帧或宏块之间的对应关系，并根据终端与网络侧网元之间已发送数据的传输反馈(例如：HARQ反馈或ARQ反馈)标记终端编码器参考图像缓冲区中可以被网络侧正确解码的帧或宏块。举例来说，帧或宏块如果之前参考的是能被网络侧网元正确解码的帧或宏块，并且又被正确地传输给网络侧网元，举例来说，可以通过没有HARQ或ARQ错误反馈确定帧或宏块被正确地传输给网络侧网元，则认为该帧或宏块在网络侧网元可以正确解码，终端主要标记放入自身编码器参考图像缓冲区中的帧或宏块。
特别的，如果终端编码器参考图像缓冲区中没有合适的帧或宏块时，终端则将待编码的帧或宏块编码为I类型帧或宏块。在这种情况下，I类型帧或宏块只要正确传输给网络侧网元后，就认为该帧或宏块可以在网络侧网元正确解码。
步骤602，终端将编码后的视频数据发送给网络侧网元。
步骤603，网络侧网元收到终端发送的视频数据后进行解码和重新编码，重新编码过程中按照一定周期将部分帧重新编码为图像组关键帧，例如重新编码为IPPP...(或者中间有一些编码为B帧)周期结构的视频序列。
同样，本实施例中，网络侧网元对上行视频数据的处理逻辑是针对一个特定的业务流的，因此网络侧网元在对接收的上行视频数据进行解码和重新编码之前，需要先确定上行视频数据对应的业务流，并获取对该上行视频数据进行解码或重编码所需的参数。具体地，网络侧网元可以根据IP地址、端口、协议号和网络内部标签中的至少一个确定上行视频数据对应的业务流；网络侧网元可以通过截取并记录业务中传递的视频参数，或通过解码，或通过与视频源交互，或通过与接收端设备交互，或通过设置的方式获得对该上行视频数据进行解码或重编码所需的参数。
本实施例中，终端设备在视频数据编码过程中尽可能地使用P或B类型帧或宏块，从而可以减少视频数据占用的带宽资源，也可以提高用户体验度。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
图7为本发明第一设备实施例一的结构示意图，本实施例中的第一设备可以实现本发明图1所示实施例的流程。如图7所示，该第一设备可以包括：
编码模块71，用于参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元，其中上述编解码单元可以为帧或宏块；
发送模块72，用于将编码模块71编码后的编解码单元发送给第二设备。
上述第一设备，编码模块71参考自身编码器的参考图像缓冲区中可以被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元，然后发送模块72将编码后的编解码单元发送给第二设备。由于P或B类型编解码单元包含的数据量较小，因此编码模块71将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元可以减少视频数据占用的带宽资源，进而可以提高用户体验度。
图8为本发明第一设备实施例二的结构示意图，与图7所示的第一设备相比，不同之处在于，图8所示的第一设备还可以进一步包括：
维护模块73，用于维护已发送数据单元和自身编码器的参考图像缓冲区中编解码单元之间的对应关系；
标记模块74，用于根据第一设备与第二设备之间的传输错误反馈标记自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元。
本实施例中，编码模块71还可以当自身编码器的参考图像缓冲区中没有能被第二设备正确解码的编解码单元时，将视频数据的原始编解码单元或者解码后编解码单元编码为I类型编解码单元。
进一步地，第一设备还可以包括：
接收模块75，用于从网络接收视频数据；
解码模块76，用于对接收模块75接收的视频数据进行解码，获得解码后编解码单元。
本实施例中，标记模块74还可以根据解码模块76对上述视频数据进行解码的过程是否使用错误隐藏技术以及第一设备与第二设备之间的传输错误反馈，标记自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元。
具体地，解码模块76可以只对上述视频数据中的I类型编解码单元进行解码，获得解码后编解码单元。这时，发送模块72可以将上述视频数据中的P或B类型的编解码单元直接发送给第二设备。
进一步地，第一设备还可以包括：
确定模块77，用于根据视频数据的IP地址、端口号、协议号和网络内部标签中的至少一个确定该视频数据对应的业务流；
获取模块78，用于获取对上述视频数据进行解码或重编码所需的参数。
上述第一设备中，编码模块71将接收类型包含I和P(可选的包含B)类型帧或宏块的视频数据重新编码，重新编码过程中尽可能地使用P或B类型，然后发送模块72将编码后的下行视频数据发送给第二设备。由于P或B类型编解码单元包含的数据量较小，因此编码模块71将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元可以减少视频数据占用的带宽资源，也可以提高用户体验度。
本领域技术人员可以理解附图只是一个优选实施例的示意图，附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中，也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块，也可以进一步拆分成多个子模块。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (15)
1.一种视频处理方法，其特征在于，包括：
第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元；所述编解码单元包括帧或宏块；
所述第一设备将编码后的编解码单元发送给所述第二设备。
2.根据权利要求1所述的方法，其特征在于，所述第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元之前，还包括：
所述第一设备维护已发送数据单元和自身编码器的参考图像缓冲区中编解码单元之间的对应关系，并根据所述第一设备与所述第二设备之间的传输错误反馈，标记自身编码器的参考图像缓冲区中能被所述第二设备正确解码的编解码单元。
3.根据权利要求2所述的方法，其特征在于，所述第一设备将编码后的编解码单元发送给所述第二设备之前，还包括：
当自身编码器的参考图像缓冲区中没有能被所述第二设备正确解码的编解码单元时，所述第一设备将所述视频数据的原始编解码单元或者解码后编解码单元编码为I类型编解码单元。
4.根据权利要求1、2或3所述的方法，其特征在于，所述第一设备将编码后的编解码单元发送给所述第二设备之后，还包括：
所述第二设备对编码后的编解码单元进行解码和重新编码，在重新编码过程中按照预定周期将部分编解码单元编码为图像组关键帧编解码单元。
5.根据权利要求2或3所述的方法，其特征在于，所述第一设备参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的解码后编解码单元编码为P或B类型编解码单元之前，还包括：
所述第一设备从网络接收所述视频数据，并对所述视频数据进行解码，获得所述解码后编解码单元。
6.根据权利要求5所述的方法，其特征在于，还包括：
所述第一设备根据所述对所述视频数据进行解码的过程是否使用错误隐藏技术以及所述第一设备与所述第二设备之间的传输错误反馈，标记自身编码器的参考图像缓冲区中能被所述第二设备正确解码的编解码单元。
7.根据权利要求5所述的方法，其特征在于，所述对所述视频数据进行解码，获得所述解码后编解码单元包括：
所述第一设备对所述视频数据中的I类型编解码单元进行解码，获得所述解码后编解码单元。
8.根据权利要求7所述的方法，其特征在于，还包括：
所述第一设备将所述视频数据中的P或B类型的编解码单元直接发送给所述第二设备。
9.一种第一设备，其特征在于，包括：
编码模块，用于参考自身编码器的参考图像缓冲区中能被第二设备正确解码的编解码单元，将视频数据的原始编解码单元或者解码后编解码单元编码为P或B类型编解码单元；所述编解码单元包括帧或宏块；
发送模块，用于将所述编码模块编码后的编解码单元发送给所述第二设备。
10.根据权利要求9所述的设备，其特征在于，还包括：
维护模块，用于维护已发送数据单元和自身编码器的参考图像缓冲区中编解码单元之间的对应关系；
标记模块，用于根据所述第一设备与所述第二设备之间的传输错误反馈，标记自身编码器的参考图像缓冲区中能被所述第二设备正确解码的编解码单元。
11.根据权利要求10所述的设备，其特征在于，
所述编码模块，还用于当自身编码器的参考图像缓冲区中没有能被所述第二设备正确解码的编解码单元时，将所述视频数据的原始编解码单元或者解码后编解码单元编码为I类型编解码单元。
12.根据权利要求10或11所述的设备，其特征在于，还包括：
接收模块，用于从网络接收所述视频数据；
解码模块，用于对所述接收模块接收的视频数据进行解码，获得所述解码后编解码单元。
13.根据权利要求12所述的设备，其特征在于，
所述标记模块，还用于根据所述解码模块对所述视频数据进行解码的过程是否使用错误隐藏技术以及所述第一设备与所述第二设备之间的传输错误反馈，标记自身编码器的参考图像缓冲区中能被所述第二设备正确解码的编解码单元。
14.根据权利要求12所述的设备，其特征在于，所述解码模块具体用于对所述视频数据中的I类型编解码单元进行解码，获得所述解码后编解码单元。
15.根据权利要求14所述的设备，其特征在于，
所述发送模块，还用于将所述视频数据中的P或B类型的编解码单元直接发送给所述第二设备。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110050993.XA CN102655604B (zh) | 2011-03-03 | 2011-03-03 | 视频处理方法和设备 |
| PCT/CN2011/083526 WO2012116563A1 (zh) | 2011-03-03 | 2011-12-06 | 视频处理方法和设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110050993.XA CN102655604B (zh) | 2011-03-03 | 2011-03-03 | 视频处理方法和设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102655604A true CN102655604A (zh) | 2012-09-05 |
| CN102655604B CN102655604B (zh) | 2016-06-22 |
Family
ID=46731121
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110050993.XA Expired - Fee Related CN102655604B (zh) | 2011-03-03 | 2011-03-03 | 视频处理方法和设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN102655604B (zh) |
| WO (1) | WO2012116563A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106416415A (zh) * | 2014-05-30 | 2017-02-15 | 诺基亚通信公司 | 基于邻近的通信、网络辅助设备发现 |
| CN110636332A (zh) * | 2019-10-21 | 2019-12-31 | 山东小桨启航科技有限公司 | 一种视频处理方法、装置及计算机可读存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1470133A (zh) * | 2000-08-14 | 2004-01-21 | ��˹��ŵ�� | 视频编码 |
| CN101193312A (zh) * | 2006-11-22 | 2008-06-04 | 中兴通讯股份有限公司 | 基于反馈的自适应错误恢复装置、视频通信系统和方法 |
| CN101589616A (zh) * | 2007-01-22 | 2009-11-25 | 高通股份有限公司 | 用以区分反向链路与前向链路视频数据错误的错误过滤器 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE10163152A1 (de) * | 2001-12-20 | 2003-07-03 | Thomson Brandt Gmbh | MPEG-Video-Aufzeichnungsträger und Wiedergabegerät |
-
2011
- 2011-03-03 CN CN201110050993.XA patent/CN102655604B/zh not_active Expired - Fee Related
- 2011-12-06 WO PCT/CN2011/083526 patent/WO2012116563A1/zh active Application Filing
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1470133A (zh) * | 2000-08-14 | 2004-01-21 | ��˹��ŵ�� | 视频编码 |
| CN101193312A (zh) * | 2006-11-22 | 2008-06-04 | 中兴通讯股份有限公司 | 基于反馈的自适应错误恢复装置、视频通信系统和方法 |
| CN101589616A (zh) * | 2007-01-22 | 2009-11-25 | 高通股份有限公司 | 用以区分反向链路与前向链路视频数据错误的错误过滤器 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106416415A (zh) * | 2014-05-30 | 2017-02-15 | 诺基亚通信公司 | 基于邻近的通信、网络辅助设备发现 |
| CN110636332A (zh) * | 2019-10-21 | 2019-12-31 | 山东小桨启航科技有限公司 | 一种视频处理方法、装置及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2012116563A1 (zh) | 2012-09-07 |
| CN102655604B (zh) | 2016-06-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101401438B (zh) | 视频编码 | |
| KR20060122663A (ko) | 영상신호의 엔코딩 및 디코딩에서의 픽처 정보를 전송하고이를 이용하는 방법 | |
| US20090103635A1 (en) | System and method of unequal error protection with hybrid arq/fec for video streaming over wireless local area networks | |
| US20180184101A1 (en) | Coding Mode Selection For Predictive Video Coder/Decoder Systems In Low-Latency Communication Environments | |
| CN101185333A (zh) | 编码视频信号时发送画面信息的方法以及解码视频信号时使用该画面信息的方法 | |
| KR100627596B1 (ko) | 동화상 인코딩 장치들 및 동화상 인코딩 방법들 | |
| CN101207813A (zh) | 一种视频序列的编码、解码方法及编码、解码系统 | |
| US20070280356A1 (en) | Method For Video Coding Conversion And Video Coding Conversion Device | |
| CN102342057A (zh) | 用于可伸缩媒体的封装的方法和装置 | |
| JP7448558B2 (ja) | 画像エンコーディングおよびデコーディングのための方法およびデバイス | |
| CN104253996A (zh) | 视频数据的发送、接收方法及其装置以及传输系统 | |
| CN103747199A (zh) | 视频会议电视终端视频源的接入方法和系统 | |
| CN103338412A (zh) | 结合无线自适应调制与编码的自适应视频编码系统 | |
| US20130315304A1 (en) | Method for binarizing intra prediction mode and method, apparatus, and system for decoding intra prediction mode | |
| EP2117235A2 (en) | Apparatus and method for managing reference frame buffer in layered video coding | |
| US9451523B2 (en) | Method and apparatus for managing packet in system supporting network coding | |
| KR20130140883A (ko) | 코드 블록 저장 방법 및 장치 | |
| CN102870416A (zh) | 运动图像编码装置以及运动图像解码装置 | |
| CN102655604A (zh) | 视频处理方法和设备 | |
| US20120124443A1 (en) | Ad-hoc multimedia group communication terminal robust to packet loss and method of operating the same | |
| CN101998147A (zh) | 媒体数据的传输方法、网络侧设备及通信系统 | |
| US20090154457A1 (en) | Enhancing reliability of multicasting and broadcasting services (mbs) over broad band wireless access (bwa) networks | |
| CN1998242A (zh) | 编码流记录介质、图像编码装置和图像解码装置 | |
| CN108521869A (zh) | 无线数据传输方法和设备 | |
| US20130346831A1 (en) | Method of generating forward error correction packet and server and client apparatus employing the same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160622 Termination date: 20190303 |