CN115643428A - 一种包装图文制作方法、设备、存储介质 - Google Patents

Abstract

本申请提供一种包装图文制作方法、设备、存储介质，该方法读取节目视频；依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作。本申请提供的方法，依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

Description

一种包装图文制作方法、设备、存储介质

技术领域

本申请涉及广播电视技术领域，尤其涉及一种包装图文制作方法、设备、存储介质。

背景技术

现代电视台的播出中，有按频道统一风格对播出节目进行包装的需求。通常的做法是，所有和播出节目没有实际关联或不宜在节目制作过程加入的图文等信息，由频道播出系统在播出环节统一制作和节目视频叠加播出。由此可以保证节目原视频的纯净性，有利于节目的重用。同时在频道播出环节统一实时播出这些图文内容，有利于频道风格的统一和信息的时效性和可控制性。

图1示出了频道包装效果示意图。

频道包装制作、播出的信号会叠加在频道播出的视频信号之上，包装播出内容与频道播出内容如果没有协同，播出信号画面会出现美观度差、甚至对原始信号中的重要信息和内容遮盖，影响播出传达效果。

图2中标出了常见的电视节目中容易和频道包装效果发生冲突的内容。

例如频道包装的滚动字幕覆盖了节目视频中原有唱词字幕，频道包装叠加的角标遮挡了节目视频中的广告角标，或者原有视频中有“直播”字样的角标在节目重播时没有被覆盖导致观众误以为直播进行中等。

现有频道包装系统对于这类问题，仍然依赖重复枯燥的人工主观审查，完全没有有效的技术解决方案。在电视台频道数及电视节目量倍增的情况下，人工审查环节消耗了频道包装制作人员的大量时间和精力。

发明内容

为了解决上述技术缺陷之一，本申请提供了一种包装图文制作方法、设备、存储介质。

本申请第一个方面，提供了一种包装图文制作方法，所述方法包括：

读取节目视频；

依次选取所述视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；

根据检测和定位结果，确定所述特定内容在视频中出现的时间段和区域；

根据所述时间段和区域进行包装图文制作。

可选地，所述依次选取所述视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位之前，还包括：

获取包括特定内容的样本集；

基于所述样本集训练识别模型，得到训练后的识别模型。

可选地，所述获取包括特定内容的样本集，包括：

获取包括特定内容的正样本；

获取常见的非特定内容的样本；

将获取的所有样本形成样本集。

可选地，所述根据所述时间段和区域进行包装图文制作，包括：

根据所述时间段和区域确定包装内容；

根据所述包装内容进行包装图文制作。

可选地，所述根据所述时间段和区域确定包装内容，包括：

展示所述时间段和区域对应的告警提示；

获取基于所述告警提示制作的包装内容。

可选地，所述展示所述时间段和区域对应的告警提示，包括：

以横道图的形式展示所述时间段和区域对应的告警提示。

可选地，所述根据所述时间段和区域进行包装图文制作，包括：

根据所述时间段和区域确定包装播出单；

根据所述包装播出单进行包装图文制作。

可选地，所述根据所述时间段和区域确定包装播出单，包括：

将所述时间段和区域与预先设置的覆盖区域和添加逻辑进行比较；

如果比较结果为时间和曲云均冲突，则按包装内容的冲突处理逻辑进行处理，生成包装播出单。

本申请第二个方面，提供了一种电子设备，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如上述第一个方面所述的方法。

本申请第三个方面，提供了一种计算机可读存储介质，其上存储有计算机程序；所述计算机程序被处理器执行以实现如上述第一个方面所述的方法。

本申请提供一种包装图文制作方法、设备、存储介质，该方法读取节目视频；依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作。本申请提供的方法依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为现有的频道包装效果示意图；

图2为现有的电视节目和频道包装效果冲突的示意图；

图3为本申请实施例提供的一种包装图文制作方法的流程示意图；

图4为本申请实施例提供的一种时间线横道图告警示意图；

图5为本申请实施例提供的另一种包装图文制作方法的流程示意图。

具体实施方式

为了使本申请实施例中的技术方案及优点更加清楚明白，以下结合附图对本申请的示例性实施例进行进一步详细的说明，显然，所描述的实施例仅是本申请的一部分实施例，而不是所有实施例的穷举。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

在实现本申请的过程中，发明人发现，频道包装制作、播出的信号会叠加在频道播出的视频信号之上，包装播出内容与频道播出内容如果没有协同，播出信号画面会出现美观度差、甚至对原始信号中的重要信息和内容遮盖，影响播出传达效果。现有频道包装系统对于这类问题，仍然依赖重复枯燥的人工主观审查，完全没有有效的技术解决方案。在电视台频道数及电视节目量倍增的情况下，人工审查环节消耗了频道包装制作人员的大量时间和精力。

针对上述问题，本申请实施例中提供了一种包装图文制作方法、设备、存储介质，该方法读取节目视频；依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作。本申请提供的方法依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

参见图3，本实施例提供的包装图文制作方法实现流程如下：

101，读取节目视频。

102，依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位。

其中，识别模型是预选训练的，训练过程为：

1、获取包括特定内容的样本集。

例如，获取包括特定内容的正样本，获取常见的非特定内容的样本，将获取的所有样本形成样本集。

2、基于样本集训练识别模型，得到训练后的识别模型。

另外，在具体实现时，可以采用深度学习神经网络实现识别模型。通过深度学习神经网络技术，实现对节目视频中的字幕、角标，人脸等特定内容进行检测和定位，确定节目视频中需要注意的特定内容在视频出现的时间区间和区域，辅助频道包装制作人员正确的编辑包装内容。甚至可以在明确了包装内容添加逻辑的基础上，自动生成包装条目，实现智能躲避视频唱词、广告角标, 自动覆盖指定角标等频道包装需求。

在训练识别模型过程中，每添加一个识别分类就整理足够的该分类预识别的特定内容的正样本和其他常见的非特定内容样本一起组成样本集，进行该分类的训练，等得到准确率足够高的识别模型后，即可将特定内容加入识别选项。并设定该特定内容的特性，比如：不能被覆盖或必须被特定包装内容覆盖等。

103，根据检测和定位结果，确定特定内容在视频中出现的时间段和区域。

104，根据时间段和区域进行包装图文制作。

本步骤的实现方案为：

1.1根据时间段和区域确定包装内容。

实现过程为：

1）展示时间段和区域对应的告警提示。

例如，以图4所示的横道图的形式展示时间段和区域对应的告警提示。

2）获取基于告警提示制作的包装内容。

1.2根据包装内容进行包装图文制作。

同时，

2.1根据时间段和区域确定包装播出单。

实现过程为：将时间段和区域与预先设置的覆盖区域和添加逻辑进行比较。如果比较结果为时间和曲云均冲突，则按包装内容的冲突处理逻辑进行处理，生成包装播出单。

2.2根据包装播出单进行包装图文制作。

本实施例提供的方法，参见图5，先提交欲识别的视频特定内容样本集，再进行深度学习的训练得到高准确率识别模型，然后读取节目视频逐帧进行分类识别，对特定内容进行检测和定位，合并每帧的识别信息，得到特定内容在视频中出现的时间段和区域。然后一方面以横道图等形式显示包装制作警告提示，包装制作人员手动制作包装内容，另一方面预设包装内容的显示区域，添加逻辑和冲突处理，对包装内容和识别出的视频特定内容进行冲突比较，按预设的冲突处理处理冲突，自动生成包装播出单。最终输出频道包装节目包装结果。

本本实施例提供的包装图文制作方法，是一个确实可行的解决现有频道包装和节目视频内容冲突的技术方案。为频道包装制作人员手动制作包装内容提供客观的包装冲突预警，也能自动生成避免内容冲突的频道包装项。从而使频道包装制作人员从枯燥重复的包装制作工作中解放了出来，并且提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

下面再以在制作频道包装的包装项（即一个节目包装内容）过程为例，再次对本提案的实现过程进行说明。

1、获取节目视频后，使用训练后的识别模型对节目视频逐帧进行智能识别，记录下每帧画面识别出来的每个分类的区域和帧号。

2、合并相邻帧出现区域重叠同类内容，从而得到不同的识别分类在视频中出现的时间区间和覆盖区域。

3、可以将识别出来的节目视频中特定内容分类的显示时间段，以横道图的图示形式显示到包装制作的时间线上，或以其他方式显示警告内容。提醒包装制作人员在手动制作包装内容时注意。

4、每个节目的包装内容的模板也可以事先标定好自己的覆盖区域和添加逻辑（例如：节目视频开始后30秒到结束前30秒间持续出现或每隔2分钟显示20秒等）以及和视频特定内容出现冲突后的处理逻辑（例如：改变包装内容位置或改变显示时间）。

5、将识别出的节目特定内容的显示区域和显示时间段，与节目的包装内容的覆盖区域和按添加逻辑应出现的时间段进行比较，如果出现时间和区域都重叠的冲突，按包装内容的冲突处理逻辑进行处理，自动生成包装项和包装子项。

本实施例提供一种包装图文制作方法，该方法读取节目视频；依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作。本实施例提供的方法依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

基于包装图文制作方法的同一发明构思，本实施例提供一种电子设备，该电子设备包括：存储器，处理器，以及计算机程序。

其中，计算机程序存储在存储器中，并被配置为由处理器执行以实现上述包装图文制作方法。

具体的，

读取节目视频。

依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位。

根据检测和定位结果，确定特定内容在视频中出现的时间段和区域。

根据时间段和区域进行包装图文制作。

可选地，依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位之前，还包括：

获取包括特定内容的样本集。

基于样本集训练识别模型，得到训练后的识别模型。

可选地，获取包括特定内容的样本集，包括：

获取包括特定内容的正样本。

获取常见的非特定内容的样本。

将获取的所有样本形成样本集。

可选地，根据时间段和区域进行包装图文制作，包括：

根据时间段和区域确定包装内容。

根据包装内容进行包装图文制作。

可选地，根据时间段和区域确定包装内容，包括：

展示时间段和区域对应的告警提示。

获取基于告警提示制作的包装内容。

可选地，展示时间段和区域对应的告警提示，包括：

以横道图的形式展示时间段和区域对应的告警提示。

可选地，根据时间段和区域进行包装图文制作，包括：

根据时间段和区域确定包装播出单。

根据包装播出单进行包装图文制作。

可选地，根据时间段和区域确定包装播出单，包括：

将时间段和区域与预先设置的覆盖区域和添加逻辑进行比较。

如果比较结果为时间和曲云均冲突，则按包装内容的冲突处理逻辑进行处理，生成包装播出单。

本实施例提供的电子设备，其上计算机程序被处理器执行以依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

基于包装图文制作方法的同一发明构思，本实施例提供一种计算机，且其上存储有计算机程序。计算机程序被处理器执行以实现上述包装图文制作方法。

具体的，

读取节目视频。

依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位。

根据检测和定位结果，确定特定内容在视频中出现的时间段和区域。

根据时间段和区域进行包装图文制作。

可选地，依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位之前，还包括：

获取包括特定内容的样本集。

基于样本集训练识别模型，得到训练后的识别模型。

可选地，获取包括特定内容的样本集，包括：

获取包括特定内容的正样本。

获取常见的非特定内容的样本。

将获取的所有样本形成样本集。

可选地，根据时间段和区域进行包装图文制作，包括：

根据时间段和区域确定包装内容。

根据包装内容进行包装图文制作。

可选地，根据时间段和区域确定包装内容，包括：

展示时间段和区域对应的告警提示。

获取基于告警提示制作的包装内容。

可选地，展示时间段和区域对应的告警提示，包括：

以横道图的形式展示时间段和区域对应的告警提示。

可选地，根据时间段和区域进行包装图文制作，包括：

根据时间段和区域确定包装播出单。

根据包装播出单进行包装图文制作。

可选地，根据时间段和区域确定包装播出单，包括：

将时间段和区域与预先设置的覆盖区域和添加逻辑进行比较。

如果比较结果为时间和曲云均冲突，则按包装内容的冲突处理逻辑进行处理，生成包装播出单。

本实施例提供的计算机可读存储介质，其上的计算机程序被处理器执行以依次选取视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；根据检测和定位结果，确定特定内容在视频中出现的时间段和区域；根据时间段和区域进行包装图文制作，实现了自动生成避免内容冲突的频道包装项，提高了频道包装的制作质量，减少了频道包装内容和节目视频内容冲突发生的可能性。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。本申请实施例中的方案可以采用各种计算机语言实现，例如，面向对象的程序设计语言Java和直译式脚本语言JavaScript等。

本申请是参照根据本申请实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种包装图文制作方法，其特征在于，所述方法包括：

读取节目视频；

依次选取所述视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位；

根据检测和定位结果，确定所述特定内容在视频中出现的时间段和区域；

根据所述时间段和区域进行包装图文制作。

2.根据权利要求1所述的方法，其特征在于，所述依次选取所述视频中的各帧，基于训练后的识别模型对特定内容进行检测和定位之前，还包括：

获取包括特定内容的样本集；

基于所述样本集训练识别模型，得到训练后的识别模型。

3.根据权利要求2所述的方法，其特征在于，所述获取包括特定内容的样本集，包括：

获取包括特定内容的正样本；

获取常见的非特定内容的样本；

将获取的所有样本形成样本集。

4.根据权利要求1所述的方法，其特征在于，所述根据所述时间段和区域进行包装图文制作，包括：

根据所述时间段和区域确定包装内容；

根据所述包装内容进行包装图文制作。

5.根据权利要求4所述的方法，其特征在于，所述根据所述时间段和区域确定包装内容，包括：

展示所述时间段和区域对应的告警提示；

获取基于所述告警提示制作的包装内容。

6.根据权利要求5所述的方法，其特征在于，所述展示所述时间段和区域对应的告警提示，包括：

以横道图的形式展示所述时间段和区域对应的告警提示。

7.根据权利要求1所述的方法，其特征在于，所述根据所述时间段和区域进行包装图文制作，包括：

根据所述时间段和区域确定包装播出单；

根据所述包装播出单进行包装图文制作。

8.根据权利要求7所述的方法，其特征在于，所述根据所述时间段和区域确定包装播出单，包括：

将所述时间段和区域与预先设置的覆盖区域和添加逻辑进行比较；

如果比较结果为时间和曲云均冲突，则按包装内容的冲突处理逻辑进行处理，生成包装播出单。

9.一种电子设备，其特征在于，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如权利要求1-8任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序；所述计算机程序被处理器执行以实现如权利要求1-8任一项所述的方法。

Images