CN101998104B - 一种视频电话及其替代视频的生成方法 - Google Patents

Abstract

本发明公开了一种视频电话及其替代视频的生成方法，包括：在已建立视频通话并接收到视频替代指示后，根据该视频替代指示中携带的替代资源的标识，获取存储的该替代资源包含的资源数据；并将获取的资源数据解码为原始图像数据；并根据该原始数据生成替代视频。采用本发明提供的视频电话及方法，相比现有技术，能够更广泛、更灵活的设置并选择本地视频内容的替代资源，且减少处理时间，及减少存储替代资源的存储空间。

Description

一种视频电话及其替代视频的生成方法

技术领域

本发明涉及通信领域，尤其涉及一种视频电话及其替代视频的生成方法。

背景技术

视频电话能够为通信双方提供双向视频影像的功能，图1所示为目前视频电话的结构示意图。在建立视频通话后，视频电话中的摄像头采集图像数据（所采集的图像数据为原始图像数据），并实时将采集到的图像数据输出到视频电话通信引擎中的编码器，编码器将接收到的图像数据编码为符合通信协议要求格式的视频，并通过通信复用控制模块实时将视频输出给对方；同时，通信复用控制模块接收对方发送的视频，并将接收到的视频实时输入到解码器，解码器对视频进行解码后，通过显示设备显示接收到的视频内容。通过上述流程，实现通话双方的视频通话。

在视频电话的使用过程中，由于隐私或者其他应用的原因，用户可能不希望将其视频电话的摄像头所采集的本地视频内容输出给对方，这就需要使用其他视频替代本地视频，并通过视频流的形式将替代视频传输给对方，以达到上述通信目的。

目前，现有技术中关于替代视频的方法，一般是在视频电话中预先存储各种格式的视频作为替代资源，当进行视频通话时，如果需要进行视频的替换，则根据当前使用的通信协议的要求，例如，编码格式、分辨率和码率等，从预先存储的替代资源中找到匹配的视频，然后将找到的视频直接通过通信复用控制模块输出，实现替换。

采用现有方法，由于目前多样的通信协议，使得视频电话中需要预先存储多种格式的视频，如果用户希望将一段特定视频内容作为替代视频内容，则需要将该视频预先解码后再编码为多种格式的视频，并存储，所以，导致需要占用较多的存储空间来存储替代资源，及导致对替代资源的选择很有限。

发明内容

本发明实施例提供一种视频电话中的替代视频的生成方法，相比现有技术，能够更广泛、更灵活的设置并选择替代资源，且减少处理时间，及减少存储替代资源的存储空间。

本发明实施例提供一种视频电话中的替代视频的生成方法，包括：

在已建立视频通话并接收到视频替代指示后，根据所述视频替代指示中携带的替代资源的标识，获取存储的所述替代资源包含的资源数据；

将所述资源数据解码为原始图像数据，并将已解码出的所述原始图像数据存储在帧缓冲队列中；

根据设置的视频帧率，按存储顺序从所述帧缓冲队列中逐一提取对应一帧图像的原始图像数据，并生成替代视频。

本发明实施例还提供一种视频电话，包括：

获取单元，用于在已建立视频通话并接收到视频替代指示后，根据所述视频替代指示中携带的替代资源的标识，获取存储的所述替代资源包含的资源数据；

解码单元，用于将所述资源数据解码为原始图像数据；

生成单元，用于根据所述原始图像数据生成替代视频；

其中，所述生成单元，包括：缓冲子单元和生成子单元；

所述缓冲子单元，用于存储已解码出的所述原始图像数据，并根据设置的视频帧率，按存储顺序逐一输出对应一帧图像的原始图像数据给所述生成子单元，并删除已输出的原始图像数据；所述生成子单元，用于根据接收的原始图像数据，生成替代视频；或者

所述缓冲子单元，用于存储已解码出的所述原始图像数据；所述生成子单元，用于根据设置的视频帧率，按存储顺序从所述缓冲子单元中逐一提取对应一帧图像的原始图像数据，并生成替代视频。

本发明实施例提供的方法中，是在已建立视频通话后，获取存储的替代资源包含的资源数据，并将获取的资源数据解码为原始图像数据，并根据该原始图像数据生成替代视频。即是在已建立视频通话后，才开始执行相应步骤实时生成替代视频，所以对替代资源而言，不必要求满足通信协议要求的格式，对于一段特定视频内容只需要存储一种格式的视频，在通信时即可以满足使用的各种通信协议，因此，相比现有技术，能够更广泛、更灵活的设置并选择替代资源，且减少了存储替代资源的存储空间，还由于不需要对替代资源进行预处理，而是在视频通话中实时处理生成替代视频，减少了处理时间。

附图说明

图1为现有技术中的一种视频电话的结构示意图；

图2为本发明实施例中提供的一种视频电话中的替代视频的生成方法的流程图；

图3为本发明实施例中视频通话时视频发送的流程图之一；

图4为本发明实施例中视频通话时视频发送的流程图之二；

图5为本发明实施例中视频通话时视频发送的流程图之三；

图6为本发明实施例中视频通话时视频发送的流程图之四；

图7为本发明实施例中提供的一种视频电话的结构示意图；

图8、图9和图10为本发明实施例中提供的一种视频电话中的生成单元的结构示意图。

具体实施方式

本发明实施例提供一种视频电话中的替代视频的生成方法，在建立视频通话后，根据选择的替代资源包含的资源数据，动态实时的生成每帧替代视频，并实时发送给通话对方，具体包括：

步骤S201、在已建立视频通话并接收到视频替代指示后，根据该视频替代指示中携带的替代资源的标识，获取存储的该替代资源包含的资源数据。

本步骤中，替代资源可以为视频或图像。如果替代资源为视频，则以数据流的形式，按顺序获取替代资源包含的资源数据，实时进入步骤S202进行处理；如果替代资源为图像，则获取该图像对应的资源数据，实时进入步骤S202进行处理。

步骤S202、将获取的资源数据解码为原始图像数据。

本步骤具体可以为：根据获取的资源数据的格式，选择对应的解码器将获取的资源数据解码为原始图像数据。

更具体的可以为对获取的对应一帧图像的资源数据进行解码，获得对应一帧图像的原始图像数据。

步骤S203、根据该原始数据生成替代视频。由于已建立视频通话，所以本步骤中生成的替代视频被实时发送给通话对方。

下面结合附图，用具体实施例对本发明提供的方法进行详细描述。

图3所示为本发明实施例中视频通话时视频发送的流程图之一，以视频通话双方其中的一方为例，具体包括：

步骤S301、建立视频通话，并获取视频通信参数。可以根据视频通话使用的通信协议，获取协议要求的关于视频传输的参数，例如，与视频图像大小、视频图像颜色空间等有关的视频图像参数，与视频输出有关的视频帧率，及传输的视频的编码格式等；如果通信协议没有要求的相关参数，也可以由用户预先设置。

步骤S302、建立视频通话后，根据获取的视频通信参数，采集图像数据，并实时将采集的对应每帧图像的原始图像数据进行相应的编码，生成本地视频，并实时发送给通话对方。

步骤S303、接收到视频替代指示，进入步骤S304，该视频替代指示中携带了选择的替代资源的标识。该视频替代指示可以是用户做出的指示，也可以是视频电话内当满足预先设置条件时发出的指示，例如摄像头故障时，发出视频替代指示。

步骤S304、根据替代资源的标识确定出用户选择的替代资源，并获取存储的该替代资源包含的资源数据。

本步骤中，替代资源可以为视频或图像。如果替代资源为视频，则以数据流的形式，按顺序获取替代资源包含的资源数据，实时进入步骤S305进行处理；如果替代资源为图像，则获取该图像对应的资源数据，实时进入步骤S305进行处理。

较佳的，本步骤中，当替代资源为视频时，获取替代资源包含的全部资源数据后，还可以从对应第一帧图像的资源数据开始，再次以数据流的形式，按顺序获取资源数据；当替代资源为图像时，为了后续生成连续的替代视频，可以以数据流的形式，不断的获取这一图像对应的资源数据，相应的后续不断对每次获取的该资源数据进行处理，生成替代视频，以保证视频的连续性。

步骤S305、将获取到的资源数据解码为对应该资源数据的原始图像数据。具体可以为：根据获取的资源数据的格式，选择对应的解码器将获取的资源数据解码为原始图像数据。所选择的解码器可以为视频电话内原有的解码器。

更具体的可以为：将获取的对应一帧图像的资源数据进行解码，获得对应一帧图像的原始图像数据。

步骤S306、根据步骤S305中解码后获得的原始图像数据生成替代视频，并实时发送给通话对方。

本步骤可以按上述步骤S301中获取的编码格式要求，直接对解码后获得的原始图像数据进行相应的编码，生成替代视频；

也可以根据与视频图像大小、视频图像颜色空间等有关的设置的视频图像参数，对获得的原始图像数据进行处理，以满足设置的视频图像参数的要求，再按上述步骤S301中获取的编码格式要求，对处理后的原始图像数据进行相应的编码，生成替代视频。

较佳的，本步骤还可以为：将解码后获得的原始图像数据或处理后的原始图像数据，存储在帧缓冲队列中，帧缓冲队列的大小可以根据需要灵活设置，在生成替代视频时，根据上述步骤S301中获取的视频帧率（可以是只要满足一定范围内的帧率均可），按存储顺序从帧缓冲队列中逐一提取对应一帧图像的原始图像数据或处理后的原始图像数据，即根据视频帧率，每隔设定时长从帧缓冲队列中逐一提取对应一帧图像的原始图像数据或处理后的原始图像数据，并对其进行相应的编码，生成替代视频。如果帧缓冲队列已满，则暂停对替代资源包含的资源数据的获取及解码。

在生成替代视频时，通过上述缓冲处理，可以保证视频通话中，在进行视频切换时，做到无缝切换，即保证不间断视频的发送。

较佳的，若当前时刻帧缓冲队列中为空，则根据视频帧率和之前帧缓冲队列中最后存储的对应一帧图像的原始图像数据，生成替代视频；即根据视频帧率，每隔设定时长对之前帧缓冲队列中最后存储的对应一帧图像的原始图像数据进行相应的编码，生成替代视频。如此处理，可以使得在上述步骤S304中，当替代资源为图像时，仅获取一次该图像对应的资源数据，即可保证视频的连续性。

上述图3所示流程为在已建立视频通话后，接收到视频替代指示，进行视频替代的流程，本发明实施例中，用户亦可以在建立视频通话前给出视频替代指示，则建立视频通话后，直接选择替代资源，进行相应处理，生成替代视频，并实时发送给通话对方，具体如图4所示，包括：

步骤S401、建立视频通话前，接收到用户的视频替代指示，该视频替代指示中携带了用户选择的替代资源的标识。建立视频通话，并获取视频通信参数。获取的视频通信参数与上述步骤S301中相同。

步骤S402、步骤S403和步骤S404，分别与上述步骤S304、步骤S305和步骤S306相同，在此不再做详细描述。

本发明实施例中，由于是在建立视频通话后，以数据流的形式，动态的生成替代视频，并发送，所以，在当前视频通话中发送的为替代视频时，还可以进行视频切换，将发送的视频切换回采集的本地视频，或将发送的视频切换为根据其他替代资源生成的替代视频。

图5所示为将发送的视频切换回采集的本地视频的流程图，包括：

步骤S501、采用与上述步骤S304、步骤S305和步骤S306相同的步骤，实时的以数据流的形式，根据确定出的替代资源，生成替代视频，并发送给通话对方。

步骤S502、接收到切换为本地视频的指示，进入步骤S503。

步骤S503、根据建立视频通话后获取的视频通信参数，采集图像数据，并实时将采集的对应每帧图像的原始图像数据进行相应的编码，生成本地视频，并实时发送给通话对方。

图6所示为将发送的视频切换为根据其他替代资源生成的替代视频的流程图，包括：

步骤S601、与上述步骤S501相同。

步骤S602、接收到切换为新替代视频的指示，该指示中携带了选择的新替代资源的标识。

步骤S603、采用与上述步骤S304、步骤S305和步骤S306相同的步骤，实时的以数据流的形式，根据确定出的新替代资源，生成新替代视频，并发送给通话对方。

采用本发明实施例提供的上述方法，由于是在建立视频通话后，以数据流的形式，动态的生成替代视频，并发送，所以，在获取到视频替代指示，或切换指示后，进行替换时，在数据流的传输环节中的多个位置均可以实现替换，例如：使用替代资源替换当前摄像头采集的原始图像数据；或者使用解码出的原始图像数据替换当前摄像头采集的原始图像数据；或者使用生成的替代视频替换根据采集的本地视频；或者使用新替代资源替换当前采用的替代资源。

基于同一发明构思，根据本发明上述实施例提供的视频电话中替代视频的生成方法，相应地，本发明另一实施例还提供了一种视频电话，其结构示意图如图7所示，包括：

获取单元701，用于在已建立视频通话并接收到视频替代指示后，根据视频替代指示中携带的替代资源的标识，获取存储的该代资源包含的资源数据；

解码单元702，用于将获取的资源数据解码为原始图像数据；

生成单元703，用于根据该原始图像数据生成替代视频。

较佳的，上述解码单元702，具体用于根据获取的资源数据的格式，选择对应的解码器将获取的资源数据解码为原始图像数据。

较佳的，上述生成单元703，如图8所示，包括：

处理子单元801，用于根据设置的视频图像参数对获取的原始图像数据进行处理；设置的视频图像参数为视频图像大小和/或视频图像颜色空间；

生成子单元802，用于根据处理后的原始图像数据生成替代视频。

较佳的，上述生成单元704，如图9所示，包括：缓冲子单元901和生成子单元902；

上述缓冲子单元901，用于存储已解码出的原始图像数据，并根据设置的视频帧率，按存储顺序逐一输出对应一帧图像的原始图像数据给上述生成子单元902，并删除已输出的原始图像数据；上述生成子单元902，用于根据接收的原始图像数据，生成替代视频；或者

上述缓冲子单元901，用于存储已解码出的原始图像数据；上述生成子单元902，用于根据设置的视频帧率，按存储顺序从上述缓冲子单元901中逐一提取对应一帧图像的原始图像数据，并生成替代视频。

上述两种方式，分别对应缓冲子单元901和生成子单元902之间数据传输的不同驱动模式，前一种方式为缓冲子单元901主动将数据输出给生成子单元902，后一种方式为生成子单元902主动从缓冲子单元901中提取数据。

相应的，对于前一种方式，较佳的，上述缓冲子单元901，还用于当仅存储对应一个图像的原始图像数据时，根据设置的视频帧率持续输出之前最后存储的对应一帧图像的原始图像数据给上述生成子单元902；或者

对于后一种方式，较佳的，上述生成子单元902，用于若当前时刻上述缓冲子单元901中为空，则根据设置的视频帧率和之前上述缓冲子单元902中最后存储的对应一帧图像的原始图像数据，生成替代视频。

较佳的，上述生成单元703，如图10所示，包括：处理子单元1001、缓冲子单元1002和生成子单元1003；

其中，处理子单元1001与上述处理子单元801相同；缓冲子单元1002与上述缓冲子单元901功能相同，区别在于存储的是由处理子单元1001处理后的原始图像数据；生成子单元1003与上述生成子单元902相同；在此不再对其做详细描述。

采用本发明实施例中提供的上述视频电话进行视频通话时，由于是在建立视频通话后，以数据流的形式，动态的生成替代视频，并发送，所以，在获取到视频替代指示，或切换指示后，进行替换时，在数据流传输经过的多个单元均可以实现替换，例如，如图7所示，在获取单元701处控制选择输入的数据流为采集的原始图像数据或替代资源包含的资源数据，此时，如果选择的是采集的原始图像数据，则解码单元702变为通道，不需要再进行解码；或者在生成单元703处控制选择输入的数据流为解码后的原始图像数据或采集的原始图像数据；或者在发送视频时，控制选择发送生成的替代视频或采集的本地视频。

本发明实施例中提供的上述视频电话中，生成单元可以为现有技术中如图1所示的视频电话中的视频电话通信引擎；或者生成单元中的生成子单元为视频电话通信引擎，因此，可以在现有图1所示的视频电话的基础上增加具备相应功能的单元即可，便于实现。

综上所述，本发明实施例提供的方案，包括：在已建立视频通话并接收到视频替代指示后，根据该视频替代指示中携带的替代资源的标识，获取存储的该替代资源包含的资源数据；并将获取的资源数据解码为原始图像数据；并根据该原始数据生成替代视频。采用本发明方案，相比现有技术，能够更广泛、更灵活的设置并选择替代资源，且减少处理时间，及减少存储替代资源的存储空间。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种视频电话中的替代视频的生成方法，其特征在于，包括：

在已建立视频通话并接收到视频替代指示后，根据所述视频替代指示中携带的替代资源的标识，获取存储的所述替代资源包含的资源数据；

将所述资源数据解码为原始图像数据，并将已解码出的所述原始图像数据存储在帧缓冲队列中；

根据设置的视频帧率，按存储顺序从所述帧缓冲队列中逐一提取对应一帧图像的原始图像数据，并生成替代视频。

2.如权利要求1所述的方法，其特征在于，所述将所述资源数据解码为原始图像数据，具体为：

根据所述资源数据的格式，选择对应的解码器将所述资源数据解码为原始图像数据。

3.如权利要求1所述的方法，其特征在于，所述生成替代视频，具体为：

根据设置的视频图像参数对提取的原始图像数据进行处理，并根据处理后的原始图像数据生成替代视频；所述设置的视频图像参数为视频图像大小和/或视频图像颜色空间。

4.如权利要求1所述的方法，其特征在于，若当前时刻所述帧缓冲队列中为空，则根据所述设置的视频帧率和之前所述帧缓冲队列中最后存储的对应一帧图像的原始图像数据，生成替代视频。

5.如权利要求1-4任一所述的方法，其特征在于，在获取到视频替代指示后进行替换时，使用所述替代资源替换当前摄像头采集的原始图像数据；或者

使用所述原始图像数据替换当前摄像头采集的原始图像数据；或者

使用所述替代视频替换根据当前摄像头采集的原始图像数据生成的视频；或者

使用所述替代资源替换当前采用的替代资源。

6.一种视频电话，其特征在于，包括：

获取单元，用于在已建立视频通话并接收到视频替代指示后，根据所述视频替代指示中携带的替代资源的标识，获取存储的所述替代资源包含的资源数据；

解码单元，用于将所述资源数据解码为原始图像数据；

生成单元，用于根据所述原始图像数据生成替代视频；

其中，所述生成单元，包括：缓冲子单元和生成子单元；

所述缓冲子单元，用于存储已解码出的所述原始图像数据，并根据设置的视频帧率，按存储顺序逐一输出对应一帧图像的原始图像数据给所述生成子单元，并删除已输出的原始图像数据；所述生成子单元，用于根据接收的原始图像数据，生成替代视频；或者

所述缓冲子单元，用于存储已解码出的所述原始图像数据；所述生成子单元，用于根据设置的视频帧率，按存储顺序从所述缓冲子单元中逐一提取对应一帧图像的原始图像数据，并生成替代视频。

7.如权利要求6所述的视频电话，其特征在于，所述解码单元，具体用于根据所述资源数据的格式，选择对应的解码器将所述资源数据解码为原始图像数据。

8.如权利要求6所述的视频电话，其特征在于，所述生成子单元，具体用于根据设置的视频图像参数对所述原始图像数据进行处理；所述设置的视频图像参数为视频图像大小和/或视频图像颜色空间；并根据处理后的原始图像数据生成替代视频。

9.如权利要求6所述的视频电话，其特征在于，所述缓冲子单元，还用于当其为空时，根据所述设置的视频帧率持续输出之前最后存储的对应一帧图像的原始图像数据给所述生成子单元；或者

所述生成子单元，用于若当前时刻所述缓冲子单元中为空，则根据所述设置的视频帧率和之前所述缓冲子单元中最后存储的对应一帧图像的原始图像数据，生成替代视频。

Images