CN104754367A - 一种多媒体信息处理方法及设备 - Google Patents

一种多媒体信息处理方法及设备 Download PDF

Info

Publication number
CN104754367A
CN104754367A CN201510162015.2A CN201510162015A CN104754367A CN 104754367 A CN104754367 A CN 104754367A CN 201510162015 A CN201510162015 A CN 201510162015A CN 104754367 A CN104754367 A CN 104754367A
Authority
CN
China
Prior art keywords
parameter
multimedia messages
key frame
frame images
field picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510162015.2A
Other languages
English (en)
Inventor
周健
罗少华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Beijing Co Ltd
Original Assignee
Tencent Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Beijing Co Ltd filed Critical Tencent Technology Beijing Co Ltd
Priority to CN201510162015.2A priority Critical patent/CN104754367A/zh
Publication of CN104754367A publication Critical patent/CN104754367A/zh
Priority to PCT/CN2016/077243 priority patent/WO2016161899A1/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668—Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例公开了一种多媒体信息处理方法及设备；所述方法包括：获取并分析第一多媒体信息，获得所述第一多媒体信息的关键帧图像；识别所述关键帧图像，获得所述关键帧图像的第一参数；获取并分析第二多媒体信息，获得所述第二多媒体信息的第一帧图像；识别所述第一帧图像，获得所述第一帧图像的第二参数；判断所述第一参数和所述第二参数是否满足预定条件，当所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。

Description

一种多媒体信息处理方法及设备
技术领域
本发明设计信息处理技术，具体设计一种多媒体信息处理方法及设备。
背景技术
本申请发明人在实现本申请实施例技术方案的过程中，至少发现相关技术中存在如下技术问题：
以现有的多媒体信息播放场景为例，在播放第一多媒体信息时，通常会插入至少一段第二多媒体信息。其中，第一多媒体信息，比如电影或电视剧视频是用户想要观看的内容；而第二多媒体信息，比如广告通常都是设备推送的内容，并不是用户想要观看的内容。
现有技术存在的问题是：第一多媒体信息中插入第二多媒体信息的插入点完全由人工进行选择，这样会大大增加人力成本。然而，对于上述问题，相关技术中并未存在有效的解决方案。
发明内容
为解决现有存在的技术问题，本发明实施例提供一种多媒体信息处理方法及设备，能够实现在第一多媒体信息中自动插入第二多媒体信息，即能够实现广告的自动插入。
为达到上述目的，本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种多媒体信息处理方法，所述方法包括：
获取并分析第一多媒体信息，获得所述第一多媒体信息的关键帧图像；
识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；
获取并分析第二多媒体信息，获得所述第二多媒体信息的第一帧图像；
识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；
判断所述第一参数和所述第二参数是否满足预定条件，当所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
上述方案中，所述获取第一多媒体信息时，所述方法还包括：获取第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数；
相应的，所述获取第二多媒体信息时，所述方法还包括：获取第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数。
上述方案中，所述判断所述第一参数和所述第二参数是否满足预定条件之前，所述方法还包括：判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致；确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，进一步判断所述第一参数和所述第二参数是否满足预定条件。
上述方案中，所述获取第一多媒体信息后，所述方法还包括：获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
相应的，所述依据所述位置确定所述第二多媒体信息的插入点，包括：依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
上述方案中，所述第一参数表征所述关键帧图像的色彩参数或灰度参数；所述第二参数表征所述第一帧图像的色彩参数或灰度参数；
相应的，所述判断所述第一参数和所述第二参数是否满足预定条件，包括：判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
本发明实施例还提供了一种设备，所述设备包括：第一获取单元、第一分析单元、第二获取单元、第二分析单元、匹配单元和确定单元；其中，
所述第一获取单元，用于获取第一多媒体信息；
所述第一分析单元，用于分析所述第一获取单元获取的所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像；识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；
所述第二获取单元，用于获取第二多媒体信息；
所述第二分析单元，用于分析所述第二获取单元获取的所述第二多媒体信息，获得所述第二多媒体信息的第一帧图像；识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；
所述匹配单元，用于判断所述第一分析单元获得的所述第一参数和所述第二分析单元获得的所述第二参数是否满足预定条件；
所述确定单元，用于当所述匹配单元确定所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
上述方案中，所述第一获取单元，还用于获取第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数；
所述第二获取单元，还用于获取第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数。
上述方案中，所述匹配单元，还用于判断所述第一参数和所述第二参数是否满足预定条件之前，判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致；确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，进一步判断所述第一参数和所述第二参数是否满足预定条件。
上述方案中，所述第一获取单元，还用于获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
所述确定单元，用于依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第一获取单元获取的所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
上述方案中，所述第一参数表征所述关键帧图像的色彩参数或灰度参数；所述第二参数表征所述第一帧图像的色彩参数或灰度参数；
相应的，所述匹配单元，用于判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
本发明实施例提供了一种多媒体信息处理方法及设备，通过获取并分析第一多媒体信息(所述第一多媒体信息即视频)，获得所述第一多媒体信息的关键帧图像；识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；获取并分析第二多媒体信息(所述第二多媒体信息即广告素材)，获得所述第二多媒体信息的第一帧图像；识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；判断所述第一参数和所述第二参数是否满足预定条件，当所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。如此，采用本发明实施例的技术方案，通过对第一多媒体信息的关键帧图像的识别，以及对第二多媒体信息的第一帧图像的识别，将所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配的关键帧图像所在位置作为所述第二多媒体信息的插入点，一方面实现了第二多媒体信息的自动控制插入，大大减少了人力成本；另一方面，所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配意味着所述关键帧图像与所述第一帧图像的色彩或灰度相同或近似，使得当在所述关键帧图像所在位置插入所述第二多媒体信息时，用户所观看到的所述第二多媒体信息能够与所述第一多媒体信息在显示效果上达到完美融合，使用户在观看第一多媒体信息时对突然插入的第二多媒体信息不会感到突兀，大大提升了用户的视觉体验。
附图说明
图1为本发明实施例一的多媒体信息处理方法的流程示意图；
图2为本发明实施例的多媒体信息处理方法的应用场景示意图；
图3为本发明实施例二的多媒体信息处理方法的流程示意图；
图4为本发明实施例的设备的组成结构示意图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细的说明。
实施例一
本发明实施例提供了一种多媒体信息处理方法，所述多媒体信息处理方法应用于设备中。图1为本发明实施例一的多媒体信息处理方法的流程示意图；如图1所示，所述多媒体信息处理方法包括：
步骤101：获取并分析第一多媒体信息，获得所述第一多媒体信息的关键帧图像。
本发明实施例所述的多媒体信息处理方法应用于设备中，所述设备具体可以是多媒体平台所属服务器或服务器集群，所述多媒体平台如腾讯视频等等。则本步骤中，所述获取第一多媒体信息，分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像，包括：设备获取第一多媒体信息，分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像。
这里，所述第一多媒体信息具体指视频，且所述设备获取到的视频通常为采用特定压缩方式压缩后的视频数据。本实施例中，所述压缩后的视频数据通常为IPB帧数据。具体的，IPB帧数据包括I帧、P帧和B帧。其中，I帧为关键帧，可以理解为处于I帧的画面被完整保留，即解码时只需要本帧数据便可完成解码。P帧为向前预测编码帧，表示当前帧与上一个关键帧(或上一帧)的区别，解码时需要上一个关键帧(或上一帧)的图像数据才能生成本帧图像，即P帧没有完整图像数据。B帧为双向预测编码帧，可以理解为B帧是当前帧与前一帧和后一帧的区别，解码是需要前一帧和后一帧的图像数据才能生成本帧图像。则本实施例中，所述特定压缩方式可以是压缩后包含有关键帧(也可以理解为参考帧)的任一压缩方式(即压缩标准)，如运动图像专家组(MPEG，Moving Picture Experts Group)压缩标准等等。
基于此，本步骤中，所述分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像，为：分析所述第一多媒体信息，获得所述第一多媒体信息中的I帧图像。具体的，分析所述第一多媒体信息，即分析基于IPB帧数据表征的第一多媒体信息，由于所述IPB帧数据中的I帧画面被完整保留，而P帧和B帧没有完整图像，则可从所述IPB帧数据中抽取I帧画面，且抽取到的I帧画面为至少一帧。
步骤102：识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数。
这里，所述第一参数可以表征所述关键帧图像的色彩参数；所述色彩参数可通过红绿蓝(RGB)色系表征。具体的，所述设备识别所述关键帧图像中每个像素点的RGB值，基于每个像素点的RGB值确定相应像素点在RGB色系表中的色系，统计所述关键帧图像中处于同一色系的像素点的数量，将处于同一色系的数量最多的像素点对应的色系(或者数量大于第一预设阈值的像素点对应的色系)作为所述关键帧图像的色彩参数。
所述第一参数还可以表征所述关键帧图像的灰度参数，所述灰度参数可通过灰度值表征。具体的，所述设备按预设处理方式处理所述关键帧图像，将所述关键帧图像转换为灰度图像；其中，所述预设处理方式可以为图像二值化处理方式。所述设备识别所述灰度图像(处理后的关键帧图像)中每个像素点的灰度值，统计处于同一灰度的像素点的数量(其中，所述处于同一灰度的像素点可以是处于同一灰度值的像素点，也可以是处于同一灰度值范围的像素点)，将处于同一灰度的数量最多的像素点(或者数量大于第二预设阈值的像素点对应的灰度)对应的灰度作为所述关键帧图像的灰度参数。
步骤103：获取并分析第二多媒体信息，获得所述第二多媒体信息的第一帧图像。
这里，所述第二多媒体信息具体指广告素材数据，所述广告素材数据可采用视频、图像互换格式(GIF，Graphics Interchange Format)或图片格式。则所述设备获取到广告素材数据后，分析所述广告素材数据，获得所述广告素材数据中的第一帧图像，具体的，当所述广告素材数据为视频数据时，获得所述视频数据的第一帧图像；当所述广告素材数据为GIF数据时，获得所述GIF的第一张图片；当所述广告素材数据为一张图片时，则直接获得所述图片。
步骤104：识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数。
这里，所述第二参数表征所述第一帧图像的色彩参数；所述色彩参数可通过红绿蓝(RGB)色系表征。具体的，所述设备识别所述第一帧图像中每个像素点的RGB值，基于每个像素点的RGB值确定相应像素点在RGB色系表中的色系，统计所述第一帧图像中处于同一色系的像素点的数量，将处于同一色系的数量最多的像素点对应的色系(或者数量大于第一预设阈值的像素点对应的色系)作为所述第一帧图像的色彩参数。
所述第一参数还可以表征所述第一帧图像的灰度参数，所述灰度参数可通过灰度值表征。具体的，所述设备按预设处理方式处理所述第一帧图像，将所述第一帧图像转换为灰度图像；其中，所述预设处理方式可以为图像二值化处理方式。所述设备识别所述灰度图像(处理后的第一帧图像)中每个像素点的灰度值，统计处于同一灰度的像素点的数量(其中，所述处于同一灰度的像素点可以是处于同一灰度值的像素点，也可以是处于同一灰度值范围的像素点)，将处于同一灰度的数量最多的像素点(或者数量大于第二预设阈值的像素点对应的灰度)对应的灰度作为所述第一帧图像的灰度参数。
本实施例中，步骤102中获得的第一参数和本步骤中获得的第二参数采用同属性的参数表征，如所述第一参数通过所述关键帧图像的色彩参数表征时，所述第二参数同样采用所述第一帧图像的色彩参数表征；相应的，当所述第一参数通过所述关键帧图像的灰度参数表征时，所述第二参数同样采用所述第一帧图像的灰度参数表征。
步骤105：判断所述第一参数和所述第二参数是否满足预定条件，当所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
这里，所述判断所述第一参数和所述第二参数是否满足预定条件，包括：判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
具体的，所述关键帧图像的第一参数和所述第一帧图像的第二参数采用同属性的参数表征。作为一种实施方式，当所述第一参数和所述第二参数均通过色彩参数表征时，所述色彩参数可以为色系，则判断所述关键帧图像和所述第一帧图像的色彩参数是否匹配，包括：判断所述关键帧图像的色系和所述第一帧图像的色系是否匹配一致，当所述关键帧图像的色系和所述第一帧图像的色系匹配一致时，确定所述关键帧图像和所述第一帧图像的色彩参数匹配；或者，判断所述关键帧图像的色系与所述第一帧图像的色系在预设色系表中的距离是否小于第二阈值，当所述关键帧图像的色系与所述第一帧图像的色系在预设色系表中的距离小于第二阈值时(如所述第二阈值为2，所述关键帧图像的色系序号为21，对应像素点的RGB值为：240、156、66；所述第一关键帧图像的色系序号为22，对应像素点的RGB值为：245、177、109)，确定所述关键帧图像和所述第一帧图像的色彩参数匹配。
作为另一种实施方式，当所述第一参数和所述第二参数均通过灰度参数表征时，所述灰度参数可以为灰度值，则判断所述关键帧图像和所述第一帧图像的灰度参数是否匹配，包括：判断所述关键帧图像的色系和所述第一帧图像的灰度值是否匹配一致，当所述关键帧图像的灰度值和所述第一帧图像的灰度值匹配一致时，确定所述关键帧图像和所述第一帧图像的灰度参数匹配；或者，判断所述关键帧图像的灰度值与所述第一帧图像的灰度值是否小于第三阈值，当所述关键帧图像的灰度值与所述第一帧图像的灰度值小于第三阈值时(如所述第三阈值为20，所述关键帧图像的灰度值为150，所述第一关键帧图像的灰度值为165)，确定所述关键帧图像和所述第一帧图像的灰度参数匹配。
进一步地，当所述关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，可以理解为所述关键帧图像和所述第一帧图像的色系或灰度相同或相近，则确定所述关键帧图像所在位置为所述第二多媒体信息的插入点。在实际应用中，所述第一多媒体信息中的关键帧图像可以包含N个，N为正整数；则确定其中的M(M为正整数且M小于N)个关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，依据预设规则选择P个关键帧图像所在位置所述第二多媒体信息的插入点；其中，P为正整数且P小于M。
作为一种实施方式，所述获取第一多媒体信息后，所述方法还包括：获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
相应的，所述依据所述位置确定所述第二多媒体信息的插入点，包括：依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
具体的，确定M(M为正整数且M小于N)个关键帧图像的第一参数和所述第一帧图像的第二参数匹配后，依据上述第五参数中的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围，确定允许插入的第二多媒体信息的数量和/或所述第一多媒体信息中允许插入的第二多媒体信息的时间范围，基于所述允许插入的第二多媒体信息的数量和/或所述第一多媒体信息中允许插入的第二多媒体信息的时间范围选择P个关键帧图像所在位置所述第二多媒体信息的插入点；其中，P值不大于所述允许插入的第二多媒体信息的数量，且所述P个关键帧图像所在位置在所述第一多媒体信息中允许插入的第二多媒体信息的时间范围中。
作为一种具体实施方式，所述设备在获取每个第二多媒体信息(即广告素材数据)时，识别每个第二多媒体信息的第一图像，并获得每一个第二多媒体信息的第一帧图像的第二参数，所述第二参数可通过色彩参数(如色系)或灰度参数(灰度值)表征，将每个第二多媒体信息的第二参数按相同色彩参数类别或相同灰度类别参数存储在数据库中。当获取到第一多媒体信息后，识别所述第一多媒体信息的关键帧图像(即I帧图像)，并获得所述关键帧图像的第一参数，在所述数据库中选择与所述第一参数相匹配的类别集合，在所述类别集合中选择第二多媒体信息插入在所述关键帧图像在所述第一多媒体信息中的位置(其中，所述关键帧图像在所述第一多媒体信息中的位置可基于预先获取的第五参数确定)。
采用本发明实施例的技术方案，通过对第一多媒体信息的关键帧图像的识别，以及对第二多媒体信息的第一帧图像的识别，将所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配的关键帧图像所在位置作为所述第二多媒体信息的插入点，一方面实现了第二多媒体信息的自动控制插入，大大减少了人力成本；另一方面，所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配意味着所述关键帧图像与所述第一帧图像的色彩或灰度相同或近似，使得当在所述关键帧图像所在位置插入所述第二多媒体信息时，用户所观看到的所述第二多媒体信息能够与所述第一多媒体信息在显示效果上达到完美融合，使用户在观看第一多媒体信息时对突然插入的第二多媒体信息不会感到突兀，大大提升了用户的视觉体验。
图2为本发明实施例的多媒体信息处理方法的应用场景示意图；如图2所示，本发明实施例所述的多媒体信息处理方法可应用于以下场景：用户1通过第一终端11上传第一多媒体信息(所述第一多媒体信息即视频)，并在上传过程中设定第三参数(所述第三参数至少包括：所述第一多媒体信息允许插入的广告类型和/或所述第一多媒体信息所在的频道类型)；服务器3获取到所述第一多媒体信息，并获取所述第三参数，将所述第三参数作为所述第一多媒体信息相关联的标签信息参数存储。用户2通过第二终端21上传第二多媒体信息(所述第二多媒体信息即广告素材)，并在上传过程中设定第四参数(所述第四参数至少包括：所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型)；所述服务器3获取到所述第二多媒体信息，并获取所述第四参数，将所述第四参数作为所述第二多媒体信息相关联的标签信息参数存储。所述服务器3可基于实施例一中所述的多媒体信息处理方法确定所述第一多媒体信息中的插入点，所述插入点为所述第二多媒体信息插入所述第一多媒体信息中的插入点。
实施例二
基于图2所示的应用场景，本发明实施例还提供了一种多媒体信息处理方法。图3为本发明实施例二的多媒体信息处理方法的流程示意图；如图3所示，所述多媒体信息处理方法包括：
步骤301：获取第一多媒体信息和第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数。
本发明实施例所述的多媒体信息处理方法应用于设备中，所述设备具体可以是多媒体平台所属服务器或服务器集群，所述多媒体平台如腾讯视频等等。则本步骤中，所述获取第一多媒体信息，分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像，包括：设备获取第一多媒体信息，分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像。
这里，所述第一多媒体信息具体指视频，且所述设备获取到的视频通常为采用特定压缩方式压缩后的视频数据。所述第三参数表征所述第一多媒体信息相关联的标签信息参数，所述标签信息参数至少包括：所述第一多媒体信息允许插入的广告类型和/或所述第一多媒体信息所在的频道类型。具体的，基于如2所示的应用场景，用户1通过第一终端上传第一多媒体信息至所述设备，用户1通常基于所述第一多媒体信息的类型选择频道类型，例如，当所述第一多媒体信息为电影时，通常选择电影频道进行上传；当所述第一多媒体信息为电视剧时，通常选择电视就频道进行上传；则本实施例的所述第一多媒体信息所在的频道类型为获取到的用户设定的与所述第一多媒体信息的类型相关联的频道类型。和/或，在用户1通过第一终端上传所述第一多媒体信息时，通常还需要设定允许插入的广告类型，所述广告类型如生活洗护类、药品保健品类、食品类等等；所述允许插入的广告类型可预先设定n个类型以供用户1选择；其中，n为正整数。则当所述用户1选定所述允许插入的广告类型后，所述设备依据用户1在所述第一终端上的操作，获得所述允许插入的广告类型。
步骤302：获取第二多媒体信息和第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数。
这里，所述第二多媒体信息具体指广告素材数据，所述广告素材数据可采用视频、GIF或图片格式。具体的，基于如图2所示的应用场景，用户2通过第二终端上传第二多媒体信息至所述设备，即上传广告素材至所述设备。在用户2通过第二终端上传所述第二多媒体信息时，还需要设定所述第二多媒体信息相关联的标签信息参数，所述标签信息参数包括所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型。其中，所述第二多媒体信息允许投放的频道类型例如电影频道、电视剧频道、综艺频道等等，以所述设备所承载的多媒体平台中包括的频道数量为准。所述第二多媒体信息的类型可预先设定n个类型以供用户2选择，如生活洗护类、药品保健品类、食品类等等。则当用户2选定所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型后，所述设备依据用户2在所述第二终端上的操作，获得所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型。
步骤303：判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致。
步骤304：确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围。
步骤303和步骤304应用的场景通常包括海量的第一多媒体信息和海量的第二多媒体信息，即海量的视频和海量的广告素材。这里，基于所述第一多媒体信息的第三参数(即所述第一多媒体信息允许插入的广告类型和/或所述第一多媒体信息所在的频道类型)和所述第二多媒体信息的第四参数(即所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型)，匹配所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数，即所述设备选择与所述第一多媒体信息的第三参数匹配一致的第二多媒体信息作为待插入的第二多媒体信息，以对海量的广告素材进行筛选，能够实现对广告的定向投放。
这里，所述第一多媒体信息相关联的第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围。具体的，所述设备可基于所述第一多媒体信息的时长确定所述第一多媒体信息中允许插入的第二多媒体信息的数量，所述允许插入的第二多媒体信息的数量为最高上限，在实际应用中，所插入的第二多媒体信息的数量不高于所述最高上限。所述允许插入的第二多媒体信息之间的时间间隔即两个第二多媒体信息插入点之间的时间间隔。所述第一多媒体信息中不允许插入第二多媒体信息的时间范围也即所述第一多媒体信息中允许插入第二多媒体信息的时间范围，例如当视频的片头所在的时间范围插入广告时，用户通常感到反感；而在视频的片尾所在的时间范围插入广告时，用户浏览到视频的片尾通常会切换至另一视频，通常也看不到插入的广告；因此，本实施例中可设置所述第一多媒体信息中不允许插入第二多媒体信息的时间范围(或所述第一多媒体信息中允许插入第二多媒体信息的时间范围)。
步骤305：分析所述第一多媒体信息，获得所述第一多媒体信息的N个关键帧图像；N为正整数。
这里，所述第一多媒体信息为采用特定压缩方式压缩后的视频数据。本实施例中，所述压缩后的视频数据通常为IPB帧数据。具体的，IPB帧数据包括I帧、P帧和B帧。其中，I帧为关键帧，可以理解为处于I帧的画面被完整保留，即解码时只需要本帧数据便可完成解码。P帧为向前预测编码帧，表示当前帧与上一个关键帧(或上一帧)的区别，解码时需要上一个关键帧(或上一帧)的图像数据才能生成本帧图像，即P帧没有完整图像数据。B帧为双向预测编码帧，可以理解为B帧是当前帧与前一帧和后一帧的区别，解码是需要前一帧和后一帧的图像数据才能生成本帧图像。则本实施例中，所述特定压缩方式可以是压缩后包含有关键帧(也可以理解为参考帧)的任一压缩方式(即压缩标准)，如MPEG压缩标准等等。
基于此，本步骤中，所述分析所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像，为：分析所述第一多媒体信息，获得所述第一多媒体信息中的I帧图像。具体的，分析所述第一多媒体信息，即分析基于IPB帧数据表征的第一多媒体信息，由于所述IPB帧数据中的I帧画面被完整保留，而P帧和B帧没有完整图像，则可从所述IPB帧数据中抽取I帧画面，且抽取到的I帧画面为N个。
步骤306：识别所述N个关键帧图像，获得所述N个关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数.
这里，所述第一参数可以表征所述关键帧图像的色彩参数；所述色彩参数可通过红绿蓝(RGB)色系表征。具体的，所述设备识别所述关键帧图像中每个像素点的RGB值，基于每个像素点的RGB值确定相应像素点在RGB色系表中的色系，统计所述关键帧图像中处于同一色系的像素点的数量，将处于同一色系的数量最多的像素点对应的色系(或者数量大于第一预设阈值的像素点对应的色系)作为所述关键帧图像的色彩参数。
所述第一参数还可以表征所述关键帧图像的灰度参数，所述灰度参数可通过灰度值表征。具体的，所述设备按预设处理方式处理所述关键帧图像，将所述关键帧图像转换为灰度图像；其中，所述预设处理方式可以为图像二值化处理方式。所述设备识别所述灰度图像(处理后的关键帧图像)中每个像素点的灰度值，统计处于同一灰度的像素点的数量(其中，所述处于同一灰度的像素点可以是处于同一灰度值的像素点，也可以是处于同一灰度值范围的像素点)，将处于同一灰度的数量最多的像素点(或者数量大于第二预设阈值的像素点对应的灰度)对应的灰度作为所述关键帧图像的灰度参数。
步骤307：分析所述第二多媒体信息，获得所述第二多媒体信息的第一帧图像。
这里，所述设备分析所述第二多媒体信息(即广告素材数据)，获得所述第二多媒体信息中的第一帧图像，具体的，当所述第二多媒体信息为视频数据时，获得所述视频数据的第一帧图像；当所述第二多媒体信息为GIF数据时，获得所述GIF的第一张图片；当所述第二多媒体信息为一张图片时，则直接获得所述图片。
步骤308：识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数。
这里，所述第二参数表征所述第一帧图像的色彩参数；所述色彩参数可通过红绿蓝(RGB)色系表征。具体的，所述设备识别所述第一帧图像中每个像素点的RGB值，基于每个像素点的RGB值确定相应像素点在RGB色系表中的色系，统计所述第一帧图像中处于同一色系的像素点的数量，将处于同一色系的数量最多的像素点对应的色系(或者数量大于第一预设阈值的像素点对应的色系)作为所述第一帧图像的色彩参数。
所述第一参数还可以表征所述第一帧图像的灰度参数，所述灰度参数可通过灰度值表征。具体的，所述设备按预设处理方式处理所述第一帧图像，将所述第一帧图像转换为灰度图像；其中，所述预设处理方式可以为图像二值化处理方式。所述设备识别所述灰度图像(处理后的第一帧图像)中每个像素点的灰度值，统计处于同一灰度的像素点的数量(其中，所述处于同一灰度的像素点可以是处于同一灰度值的像素点，也可以是处于同一灰度值范围的像素点)，将处于同一灰度的数量最多的像素点(或者数量大于第二预设阈值的像素点对应的灰度)对应的灰度作为所述第一帧图像的灰度参数。
本实施例中，步骤306中获得的第一参数和本步骤中获得的第二参数采用同属性的参数表征，如所述第一参数通过所述关键帧图像的色彩参数表征时，所述第二参数同样采用所述第一帧图像的色彩参数表征；相应的，当所述第一参数通过所述关键帧图像的灰度参数表征时，所述第二参数同样采用所述第一帧图像的灰度参数表征。
步骤309：判断所述第一参数和所述第二参数是否满足预定条件，当所述N个关键帧图像中M个关键帧图像的第一参数和所述第二参数满足预定条件时，确定所述M个关键帧图像在所述第一多媒体信息中的位置，依据所述M个关键帧图像在所述第一多媒体信息中的位置以及所述第五参数确定所述第二多媒体信息的P个插入点，以在所述P个插入点插入所述第二多媒体信息；其中，M和P均为正整数，且P小于等于M小于等于N。
这里，所述判断所述第一参数和所述第二参数是否满足预定条件，包括：判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
具体的，所述关键帧图像的第一参数和所述第一帧图像的第二参数采用同属性的参数表征。作为一种实施方式，当所述第一参数和所述第二参数均通过色彩参数表征时，所述色彩参数可以为色系，则判断所述关键帧图像和所述第一帧图像的色彩参数是否匹配，包括：判断所述关键帧图像的色系和所述第一帧图像的色系是否匹配一致，当所述关键帧图像的色系和所述第一帧图像的色系匹配一致时，确定所述关键帧图像和所述第一帧图像的色彩参数匹配；或者，判断所述关键帧图像的色系与所述第一帧图像的色系在预设色系表中的距离是否小于第二阈值，当所述关键帧图像的色系与所述第一帧图像的色系在预设色系表中的距离小于第二阈值时(如所述第二阈值为2，所述关键帧图像的色系序号为21，对应像素点的RGB值为：240、156、66；所述第一关键帧图像的色系序号为22，对应像素点的RGB值为：245、177、109)，确定所述关键帧图像和所述第一帧图像的色彩参数匹配。
作为另一种实施方式，当所述第一参数和所述第二参数均通过灰度参数表征时，所述灰度参数可以为灰度值，则判断所述关键帧图像和所述第一帧图像的灰度参数是否匹配，包括：判断所述关键帧图像的色系和所述第一帧图像的灰度值是否匹配一致，当所述关键帧图像的灰度值和所述第一帧图像的灰度值匹配一致时，确定所述关键帧图像和所述第一帧图像的灰度参数匹配；或者，判断所述关键帧图像的灰度值与所述第一帧图像的灰度值是否小于第三阈值，当所述关键帧图像的灰度值与所述第一帧图像的灰度值小于第三阈值时(如所述第三阈值为20，所述关键帧图像的灰度值为150，所述第一关键帧图像的灰度值为165)，确定所述关键帧图像和所述第一帧图像的灰度参数匹配。
进一步地，当所述关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，可以理解为所述关键帧图像和所述第一帧图像的色系或灰度相同或相近，则确定所述关键帧图像所在位置为所述第二多媒体信息的插入点。在实际应用中，所述第一多媒体信息中的关键帧图像可以包含N个，N为正整数；则确定其中的M(M为正整数且M小于N)个关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，依据预设规则选择P个关键帧图像所在位置所述第二多媒体信息的插入点；其中，P为正整数且P小于M。
采用本发明实施例的技术方案，通过对第一多媒体信息的关键帧图像的识别，以及对第二多媒体信息的第一帧图像的识别，将所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配的关键帧图像所在位置作为所述第二多媒体信息的插入点，一方面实现了第二多媒体信息的自动控制插入，大大减少了人力成本；另一方面，所述关键帧图像的第一参数与所述第一帧图像的第二参数匹配意味着所述关键帧图像与所述第一帧图像的色彩或灰度相同或近似，使得当在所述关键帧图像所在位置插入所述第二多媒体信息时，用户所观看到的所述第二多媒体信息能够与所述第一多媒体信息在显示效果上达到完美融合，使用户在观看第一多媒体信息时对突然插入的第二多媒体信息不会感到突兀，大大提升了用户的视觉体验。
实施例三
本发明实施例还提供了一种设备。图4为本发明实施例的设备的组成结构示意图；如图4所示，所述设备包括：第一获取单元41、第一分析单元42、第二获取单元43、第二分析单元44、匹配单元45和确定单元46；其中，
所述第一获取单元41，用于获取第一多媒体信息；
所述第一分析单元42，用于分析所述第一获取单元41获取的所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像；识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；
所述第二获取单元43，用于获取第二多媒体信息；
所述第二分析单元44，用于分析所述第二获取单元43获取的所述第二多媒体信息，获得所述第二多媒体信息的第一帧图像；识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；
所述匹配单元45，用于判断所述第一分析单元42获得的所述第一参数和所述第二分析单元44获得的所述第二参数是否满足预定条件；
所述确定单元46，用于当所述匹配单元45确定所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
本实施例中，所述第一多媒体信息具体指视频，且所述第一获取单元41获取到的视频通常为采用特定压缩方式压缩后的视频数据。本实施例中，所述压缩后的视频数据通常为IPB帧数据。具体的，IPB帧数据包括I帧、P帧和B帧。其中，I帧为关键帧，可以理解为处于I帧的画面被完整保留，即解码时只需要本帧数据便可完成解码。P帧为向前预测编码帧，表示当前帧与上一个关键帧(或上一帧)的区别，解码时需要上一个关键帧(或上一帧)的图像数据才能生成本帧图像，即P帧没有完整图像数据。B帧为双向预测编码帧，可以理解为B帧是当前帧与前一帧和后一帧的区别，解码是需要前一帧和后一帧的图像数据才能生成本帧图像。则本实施例中，所述特定压缩方式可以是压缩后包含有关键帧(也可以理解为参考帧)的任一压缩方式(即压缩标准)，如MPEG压缩标准等等。基于此，所述第一分析单元42分析所述第一多媒体信息，获得所述第一多媒体信息中的I帧图像。
本实施例中，所述第二多媒体信息具体指广告素材数据，所述广告素材数据可采用视频、GIF或图片格式。则所述第二获取单元43获取到广告素材数据后，分析所述广告素材数据，获得所述广告素材数据中的第一帧图像，具体的，当所述广告素材数据为视频数据时，获得所述视频数据的第一帧图像；当所述广告素材数据为GIF数据时，获得所述GIF的第一张图片；当所述广告素材数据为一张图片时，则直接获得所述图片。
本实施例中，所述第一参数可以表征所述关键帧图像的色彩参数；所述第二参数可以表征所述第一帧图像的色彩参数；所述色彩参数可通过红绿蓝(RGB)色系表征。具体的，所述第一分析单元42识别所述关键帧图像中每个像素点的RGB值，基于每个像素点的RGB值确定相应像素点在RGB色系表中的色系，统计所述关键帧图像中处于同一色系的像素点的数量，将处于同一色系的数量最多的像素点对应的色系(或者数量大于第一预设阈值的像素点对应的色系)作为所述关键帧图像的色彩参数。所述第二分析单元44获得所述第一帧图像的色彩参数的方式与上述类似，这里不再赘述。
所述第一参数还可以表征所述关键帧图像的灰度参数，所述第二参数可以表征所述第一帧图像的灰度参数；所述灰度参数可通过灰度值表征。具体的，所述设备按预设处理方式处理所述关键帧图像，将所述关键帧图像转换为灰度图像；其中，所述预设处理方式可以为图像二值化处理方式。所述第一分析单元42识别所述灰度图像(处理后的关键帧图像)中每个像素点的灰度值，统计处于同一灰度的像素点的数量(其中，所述处于同一灰度的像素点可以是处于同一灰度值的像素点，也可以是处于同一灰度值范围的像素点)，将处于同一灰度的数量最多的像素点(或者数量大于第二预设阈值的像素点对应的灰度)对应的灰度作为所述关键帧图像的灰度参数。所述第二分析单元44获得所述第一帧图像的灰度参数的方式与上述类似，这里不再赘述。
具体的，所述第一参数表征所述关键帧图像的色彩参数或灰度参数；所述第二参数表征所述第一帧图像的色彩参数或灰度参数；
相应的，所述匹配单元45，用于判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
具体的，当所述第一参数和所述第二参数均通过灰度参数表征时，所述灰度参数可以为灰度值，则所述匹配单元45判断所述关键帧图像和所述第一帧图像的灰度参数是否匹配，包括：判断所述关键帧图像的色系和所述第一帧图像的灰度值是否匹配一致，当所述关键帧图像的灰度值和所述第一帧图像的灰度值匹配一致时，确定所述关键帧图像和所述第一帧图像的灰度参数匹配；或者，判断所述关键帧图像的灰度值与所述第一帧图像的灰度值是否小于第三阈值，当所述关键帧图像的灰度值与所述第一帧图像的灰度值小于第三阈值时(如所述第三阈值为20，所述关键帧图像的灰度值为150，所述第一关键帧图像的灰度值为165)，确定所述关键帧图像和所述第一帧图像的灰度参数匹配。当所述第一参数和所述第二参数均通过色彩参数表征时所述匹配单元的匹配方式与上述类似，这里不再赘述。
当所述关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，可以理解为所述关键帧图像和所述第一帧图像的色系或灰度相同或相近，则确定所述关键帧图像所在位置为所述第二多媒体信息的插入点。在实际应用中，所述第一多媒体信息中的关键帧图像可以包含N个，N为正整数；则确定其中的M(M为正整数且M小于N)个关键帧图像的第一参数和所述第一帧图像的第二参数匹配时，依据预设规则选择P个关键帧图像所在位置所述第二多媒体信息的插入点；其中，P为正整数且P小于M。
作为另一种实施方式，所述第一获取单元41，还用于获取第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数；
所述第二获取单元43，还用于获取第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数；
相应的，所述匹配单元45，还用于判断所述第一参数和所述第二参数是否满足预定条件之前，判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致；确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，进一步判断所述第一参数和所述第二参数是否满足预定条件。
这里，所述第三参数表征所述第一多媒体信息相关联的标签信息参数，所述标签信息参数至少包括：所述第一多媒体信息允许插入的广告类型和/或所述第一多媒体信息所在的频道类型。所述第四参数表征所述第二多媒体信息相关联的标签信息参数，所述标签信息参数包括所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型。当所述设备中存储有海量的第一多媒体信息和海量的第二多媒体信息时，即海量的视频和海量的广告素材。所述匹配单元45基于所述第一多媒体信息的第三参数(即所述第一多媒体信息允许插入的广告类型和/或所述第一多媒体信息所在的频道类型)和所述第二多媒体信息的第四参数(即所述第二多媒体信息允许投放的频道类型和/或所述第二多媒体信息的类型)，匹配所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数，即所述设备选择与所述第一多媒体信息的第三参数匹配一致的第二多媒体信息作为待插入的第二多媒体信息，以对海量的广告素材进行筛选，能够实现对广告的定向投放。
作为又一种实施方式，所述第一获取单元41，还用于获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
相应的，所述确定单元46，用于依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第一获取单元41获取的所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
具体的，所述匹配单元45确定M(M为正整数且M小于N)个关键帧图像的第一参数和所述第一帧图像的第二参数匹配后，所述确定单元46依据上述第五参数中的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围，确定允许插入的第二多媒体信息的数量和/或所述第一多媒体信息中允许插入的第二多媒体信息的时间范围，基于所述允许插入的第二多媒体信息的数量和/或所述第一多媒体信息中允许插入的第二多媒体信息的时间范围选择P个关键帧图像所在位置所述第二多媒体信息的插入点；其中，P值不大于所述允许插入的第二多媒体信息的数量，且所述P个关键帧图像所在位置在所述第一多媒体信息中允许插入的第二多媒体信息的时间范围中。
本领域技术人员应当理解，本发明实施例的设备中各处理单元的功能，可参照前述多媒体信息处理方法的相关描述而理解，本发明实施例的设备中各处理单元，可通过实现本发明实施例所述的功能的模拟电路而实现，也可以通过执行本发明实施例所述的功能的软件在智能终端上的运行而实现。
在本发明实施例中，所述设备中的第一分析单元42、第二分析单元44、匹配单元45和确定单元46，在实际应用中均可由所述设备中的中央处理器(CPU，Central Processing Unit)、数字信号处理器(DSP，Digital Signal Processor)或可编程门阵列(FPGA，Field－Programmable Gate Array)实现；所述设备中的第一获取单元41和第二获取单元43，在实际应用中可由所述设备中的接收机或接收天线实现。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (10)

1.一种多媒体信息处理方法，其特征在于，所述方法包括：
获取并分析第一多媒体信息，获得所述第一多媒体信息的关键帧图像；
识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；
获取并分析第二多媒体信息，获得所述第二多媒体信息的第一帧图像；
识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；
判断所述第一参数和所述第二参数是否满足预定条件，当所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
2.根据权利要求1所述的方法，其特征在于，所述获取第一多媒体信息时，所述方法还包括：获取第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数；
相应的，所述获取第二多媒体信息时，所述方法还包括：获取第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数。
3.根据权利要求2所述的方法，其特征在于，所述判断所述第一参数和所述第二参数是否满足预定条件之前，所述方法还包括：判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致；确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，进一步判断所述第一参数和所述第二参数是否满足预定条件。
4.根据权利要求1所述的方法，其特征在于，所述获取第一多媒体信息后，所述方法还包括：获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
相应的，所述依据所述位置确定所述第二多媒体信息的插入点，包括：依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
5.根据权利要求1所述的方法，其特征在于，所述第一参数表征所述关键帧图像的色彩参数或灰度参数；所述第二参数表征所述第一帧图像的色彩参数或灰度参数；
相应的，所述判断所述第一参数和所述第二参数是否满足预定条件，包括：判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
6.一种设备，其特征在于，所述设备包括：第一获取单元、第一分析单元、第二获取单元、第二分析单元、匹配单元和确定单元；其中，
所述第一获取单元，用于获取第一多媒体信息；
所述第一分析单元，用于分析所述第一获取单元获取的所述第一多媒体信息，获得所述第一多媒体信息的关键帧图像；识别所述关键帧图像，获得所述关键帧图像的第一参数；所述第一参数表征所述关键帧图像的显示属性参数；
所述第二获取单元，用于获取第二多媒体信息；
所述第二分析单元，用于分析所述第二获取单元获取的所述第二多媒体信息，获得所述第二多媒体信息的第一帧图像；识别所述第一帧图像，获得所述第一帧图像的第二参数；所述第二参数表征所述第一帧图像的显示属性参数；
所述匹配单元，用于判断所述第一分析单元获得的所述第一参数和所述第二分析单元获得的所述第二参数是否满足预定条件；
所述确定单元，用于当所述匹配单元确定所述第一参数和所述第二参数满足预定条件时，确定所述关键帧图像在所述第一多媒体信息中的位置，依据所述位置确定所述第二多媒体信息的插入点，以在所述插入点插入所述第二多媒体信息。
7.根据权利要求6所述的设备，其特征在于，所述第一获取单元，还用于获取第三参数；所述第三参数表征所述第一多媒体信息相关联的标签信息参数；
所述第二获取单元，还用于获取第四参数；所述第四参数表征所述第二多媒体信息相关联的标签信息参数。
8.根据权利要求7所述的设备，其特征在于，所述匹配单元，还用于判断所述第一参数和所述第二参数是否满足预定条件之前，判断所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数是否匹配一致；确定所述第一多媒体信息的第三参数和所述第二多媒体信息的第四参数匹配一致后，进一步判断所述第一参数和所述第二参数是否满足预定条件。
9.根据权利要求6所述的设备，其特征在于，所述第一获取单元，还用于获取所述第一多媒体信息相关联的第五参数，所述第五参数包括以下参数的至少之一：允许插入的第二多媒体信息的数量、允许插入的第二多媒体信息之间的时间间隔、所述第一多媒体信息中不允许插入第二多媒体信息的时间范围；
所述确定单元，用于依据所述关键帧图像在所述第一多媒体信息中的位置，以及所述第一获取单元获取的所述第五参数确定所述第二多媒体信息在所述第一多媒体信息中的插入点。
10.根据权利要求6所述的设备，其特征在于，所述第一参数表征所述关键帧图像的色彩参数或灰度参数；所述第二参数表征所述第一帧图像的色彩参数或灰度参数；
相应的，所述匹配单元，用于判断所述关键帧图像和所述第一帧图像的色彩参数或灰度参数是否匹配；当所述关键帧图像和所述第一帧图像的色彩参数或灰度参数匹配时，确定所述第一参数和所述第二参数满足预定条件。
CN201510162015.2A 2015-04-07 2015-04-07 一种多媒体信息处理方法及设备 Pending CN104754367A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510162015.2A CN104754367A (zh) 2015-04-07 2015-04-07 一种多媒体信息处理方法及设备
PCT/CN2016/077243 WO2016161899A1 (zh) 2015-04-07 2016-03-24 一种多媒体信息处理方法、设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510162015.2A CN104754367A (zh) 2015-04-07 2015-04-07 一种多媒体信息处理方法及设备

Publications (1)

Publication Number Publication Date
CN104754367A true CN104754367A (zh) 2015-07-01

Family

ID=53593373

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510162015.2A Pending CN104754367A (zh) 2015-04-07 2015-04-07 一种多媒体信息处理方法及设备

Country Status (2)

Country Link
CN (1) CN104754367A (zh)
WO (1) WO2016161899A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106470358A (zh) * 2015-08-21 2017-03-01 深圳市天易联科技有限公司 智能电视机的显存图像识别方法及装置
CN106604128A (zh) * 2016-12-30 2017-04-26 中广热点云科技有限公司 一种在网络视频中插入预促销项目的方法和系统
CN110769291A (zh) * 2019-11-18 2020-02-07 上海极链网络科技有限公司 一种视频处理方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101179739A (zh) * 2007-01-11 2008-05-14 腾讯科技（深圳）有限公司 一种插入广告的方法及装置
CN102547462A (zh) * 2010-12-28 2012-07-04 联想(北京)有限公司 信息推送装置、方法、系统、检索服务器及视频播放装置
CN103218734A (zh) * 2013-04-01 2013-07-24 天脉聚源(北京)传媒科技有限公司 一种广告信息的推送方法及装置
US8861898B2 (en) * 2007-03-16 2014-10-14 Sony Corporation Content image search

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9443147B2 (en) * 2010-04-26 2016-09-13 Microsoft Technology Licensing, Llc Enriching online videos by content detection, searching, and information aggregation
US9467750B2 (en) * 2013-05-31 2016-10-11 Adobe Systems Incorporated Placing unobtrusive overlays in video content
CN103888785A (zh) * 2014-03-10 2014-06-25 百度在线网络技术（北京）有限公司 信息的提供方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101179739A (zh) * 2007-01-11 2008-05-14 腾讯科技（深圳）有限公司 一种插入广告的方法及装置
US8861898B2 (en) * 2007-03-16 2014-10-14 Sony Corporation Content image search
CN102547462A (zh) * 2010-12-28 2012-07-04 联想(北京)有限公司 信息推送装置、方法、系统、检索服务器及视频播放装置
CN103218734A (zh) * 2013-04-01 2013-07-24 天脉聚源(北京)传媒科技有限公司 一种广告信息的推送方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘晓平: "《计算机技术与应用进展》", 31 July 2008, 中国科学技术大学出版社 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106470358A (zh) * 2015-08-21 2017-03-01 深圳市天易联科技有限公司 智能电视机的显存图像识别方法及装置
CN106470358B (zh) * 2015-08-21 2020-09-25 深圳市天易联科技有限公司 智能电视机的显存图像识别方法及装置
CN106604128A (zh) * 2016-12-30 2017-04-26 中广热点云科技有限公司 一种在网络视频中插入预促销项目的方法和系统
CN106604128B (zh) * 2016-12-30 2019-10-25 中广热点云科技有限公司 一种在网络视频中插入预促销项目的方法和系统
CN110769291A (zh) * 2019-11-18 2020-02-07 上海极链网络科技有限公司 一种视频处理方法、装置、电子设备及存储介质
CN110769291B (zh) * 2019-11-18 2022-08-30 上海极链网络科技有限公司 一种视频处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2016161899A1 (zh) 2016-10-13

Similar Documents

Publication Publication Date Title
CN108810649B (zh) 画质调节方法、智能电视机及存储介质
US10368123B2 (en) Information pushing method, terminal and server
US9621844B1 (en) Systems and methods for identifying a video aspect-ratio frame attribute
KR101318459B1 (ko) 수신기 상에서 오디오비주얼 문서를 시청하는 방법 및이러한 문서를 시청하기 위한 수신기
US20160261929A1 (en) Broadcast receiving apparatus and method and controller for providing summary content service
US20160004921A1 (en) Legibility enhancement for a logo, text or other region of interest in video
US20190313071A1 (en) Dynamic chroma key for video background replacement
CN102893602A (zh) 具有使用嵌入在比特流中的元数据的呈现控制的视频显示
CN102771109A (zh) 通过盖写视频数据进行视频传递和控制
CN112182299B (zh) 一种视频中精彩片段的获取方法、装置、设备和介质
EP3343913B1 (en) Display device and method for controlling same
CN110324679B (zh) 一种视频数据处理方法及装置
CN103946871A (zh) 图像处理装置、图像识别装置、图像识别方法以及程序
KR101900471B1 (ko) 반응 효과가 삽입된 방송 시스템
CN105933764A (zh) 广播接收装置及其控制方法
US10290110B2 (en) Video overlay modification for enhanced readability
CN101562712A (zh) 实现数字电视网络视频自适应窗口截取播放的方法
CN105519126A (zh) 用于显示视频的方法和用于显示视频的装置
CN104754367A (zh) 一种多媒体信息处理方法及设备
CN112788329A (zh) 视频静帧检测方法、装置、电视及存储介质
CN110740378A (zh) 一种视频中广告识别方法、系统、装置和存储介质
CN117014649A (zh) 视频处理方法、装置及电子设备
CN110378973B (zh) 图像信息处理方法、装置以及电子设备
EP3876543A1 (en) Video playback method and apparatus
US20080159592A1 (en) Video processing method and system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150701