CN108521578A - 一种检测视频中可贴图区域、实现在视频中贴图的方法 - Google Patents
一种检测视频中可贴图区域、实现在视频中贴图的方法 Download PDFInfo
- Publication number
- CN108521578A CN108521578A CN201810462754.7A CN201810462754A CN108521578A CN 108521578 A CN108521578 A CN 108521578A CN 201810462754 A CN201810462754 A CN 201810462754A CN 108521578 A CN108521578 A CN 108521578A
- Authority
- CN
- China
- Prior art keywords
- textures
- region
- video
- designated
- description information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
Abstract
本发明公开了一种检测视频中可贴图区域的方法、装置，实现在视频中贴图的方法、服务器、客户端，电子设备，计算机可读存储介质。该方法包括：服务器通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，将获取的视频中可贴图区域信息发送给客户端，以便客户端在视频中相应的区域添加贴图，或者客户端也可以通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，根据获取的位置信息完成在视频中相应的区域添加贴图。通过本技术方案可确定可贴图区域是最大指定形状的区域，将贴图添加在该区域中后，防止添加贴图后遮挡视频中的主要元素内容，也可以实现贴图与视频的融合，避免因贴图的添加音影响用户观看视频的视觉体验。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种检测视频中可贴图区域的方法、装置，实现在视频中贴图的方法、服务器、客户端，电子设备，计算机可读存储介质。
背景技术
随着各种视频应用程序的增多，为了提高用户浏览视频的使用体验，会对视频进行一定的处理后在提供给用户，例如，在视频中添加一些元素，使得视频变得更加丰富，但是要在视频中添加一些元素的方案的难点在于，如何确定元素在视频中的添加位置，以使得元素可以更好的融入该视频中，保证用户观看视频的视觉体验。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的检测视频中可贴图区域的方法、装置，实现在视频中贴图的方法、服务器、客户端，电子设备，计算机可读存储介质。
根据本发明的一个方面，提供了一种检测视频中可贴图区域的方法，其中，该方法包括：遍历视频的各帧图像，对于遍历到的当前图像：
检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
可选地，在将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息之前，该方法进一步包括：
判断所述时间间隔长度是否大于预设时间长度阈值；
只在所述时间间隔长度大于预设时间长度阈值时，才执行所述将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息的步骤。
根据本发明的另一方面，提供了一种实现在视频中贴图的方法，其中，该方法包括：
根据如前述的方法，获取指定视频的可贴图区域的描述信息；
将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
将所述指定视频和对应的配置文件一起发送到客户端。
根据本发明的又一方面，提供了一种实现在视频中贴图的方法，其中，该方法包括：
获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
获取与该指定视频对应的贴图内容；
根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
可选地，所述获取指定视频的可贴图区域的描述信息包括：
接收服务器下发的指定视频的配置文件，所述配置文件中包括指定视频的可贴图区域的描述信息；
或者，
根据如前述的方法，获取指定视频的可贴图区域的描述信息。
可选地，获取与该指定视频对应的贴图内容包括如下中的任一种：
根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
根据本发明的再一方面，提供了一种检测视频中可贴图区域的装置，其中，该装置包括：
遍历单元，适于遍历视频的各帧图像；
检测单元，适于对于遍历到的当前图像，检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
记录单元，适于如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
差值计算单元，适于如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
描述信息保存单元，适于如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
可选地，
所述描述信息保存单元，适于在将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息之前，判断所述时间间隔长度是否大于预设时间长度阈值；只在所述时间间隔长度大于预设时间长度阈值时，才执行所述将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息的步骤。
根据本发明的再一方面，提供了一种实现在视频中贴图的服务器，其中，该服务器包括：
描述信息获取单元，适于通过如前述的检测视频中可贴图区域的装置，获取指定视频的可贴图区域的描述信息；
描述信息配置单元，适于将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
发送单元，适于将所述指定视频和对应的配置文件一起发送到客户端。
根据本发明的再一方面，提供了一种实现在视频中贴图的客户端，其中，该客户端包括：
视频获取单元，适于获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
贴图获取单元，适于获取与该指定视频对应的贴图内容；
贴图添加单元，适于根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
可选地，
所述视频获取单元，适于接收服务器下发的指定视频的配置文件，所述配置文件中包括指定视频的可贴图区域的描述信息；或者，通过如前述的检测视频中可贴图区域的装置，获取指定视频的可贴图区域的描述信息。
可选地，
所述贴图获取单元，适于根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
根据本发明的再一方面，提供了一种电子设备，其中，该电子设备包括：
处理器；以及，
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行根据前述的任意一种方法。
根据本发明的再一方面，提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现前述的任意一种方法。
根据本发明的技术方案，服务器通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，将获取的视频中可贴图区域信息发送给客户端，以便客户端在视频中相应的区域添加贴图，或者客户端也可以通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，根据获取的位置信息完成在视频中相应的区域添加贴图。通过本技术方案可确定可贴图区域是最大指定形状的区域，将贴图添加在该区域中后，防止添加贴图后遮挡视频中的主要元素内容，也可以实现贴图与视频的融合，且可以达到增强现实的效果，保证贴图添加到视频后的真实感，避免因贴图的添加音影响用户观看视频的视觉体验。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的检测视频中可贴图区域的方法的流程示意图；
图2示出了根据本发明另一个实施例的检测视频中可贴图区域的方法的流程示意图；
图3示出了根据本发明一个实施例的实现在视频中贴图的方法的流程示意图；
图4示出了根据本发明另一个实施例的实现在视频中贴图的方法的流程示意图；
图5示出了根据本发明一个实施例的检测视频中可贴图区域的装置的结构示意图；
图6示出了根据本发明一个实施例的实现在视频中贴图的服务器的结构示意图；
图7示出了根据本发明一个实施例的实现在视频中贴图的客户端的结构示意图；
图8示出了根据本发明一个实施例的电子设备的结构示意图；
图9示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的检测视频中可贴图区域的方法的流程示意图。如图1所示，该方法包括：
步骤S110，遍历视频的各帧图像，对于遍历到的当前图像执行如下步骤：
视频中包含有多帧图像，为了实现在视频中可贴图区域的检测，需要对视频中的每帧图像进行检测，对于每帧图像均执行下述的步骤。
步骤S120，检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域。
在本实施例中，检测当前图像中的连通区域中最大指定形状区域的方法可以通过墙体分割算法以及连通域算法进行检测，例如，检测出当前图像中是否包含墙体等适合贴图的区域(如颜色大体一致的空白墙面、地面、电视屏幕等平整区域)，检测出适合贴图的区域后，将该当前图像转换成黑白二值图像，该黑白二值图像中的白色即为检测到的适合贴图的区域，图像中可能存在多个白色区域，但是并非每个白色区域都可以贴图，需要在白色区域中通过连通域算法确定白色的区域中连通区域的最大指定形状区域(例如矩形)，确定该最大指定形状区域后，则确定检测出该当前图像中的连通区域中最大指定形状区域。然后判断上一帧图像中是否也存在该指定形状区域。
步骤S130，如果不存在则将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
如果不存在说明该视频中从当前图像开始才出现了可贴图的区域，即第一次检测到最大指定形状区域。那么就需要判断该可贴图的区域在一个位置持续了多长时间，以便在该时间段内在该位置进行贴图。所以本实施例中如果不存在则将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
步骤S140，如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值。
步骤S150，如果差值小于预设阈值，则开始遍历下一帧图像。
本实施例中，如果存在说明该指定形状区域作为可贴图区域已经存在了，那么就需要判断该区域的位置是否发生了变化，如果发生了变化则说明贴图的位置也需要发送变化，所以本实施例中计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值，这里的差值可以是位置差值，如位置的偏移量，设定一预设阈值，如果差值小于该预设阈值，说明该最大指定形状区域没有太大的变化，贴图的位置也可以不变，或者说位置是相对稳定的，可以进行贴图，则继续开始遍历下一帧图像，判断下一帧图像中是否可以在同一位置进行贴图，如果下一帧图像中的指定形状区域的位置与当前图像中的差值小于预设阈值，说明还可以在该位置进行贴图，则继续遍历下下帧图像，直至差值不小于预设阈值。
步骤S160，如果差值不小于预设阈值，则记录当前图像在视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息；并将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
如果差值大于或等于预设阈值，则说明该最大指定形状区域的位置变化较大，需要改变贴图的位置才可以，那么对于之前帧图像的贴图位置到该当前图像对应的时间点就可以截止了，所以将之前的信息作为用于贴图的描述信息保存，即将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息。同时，为了进行下一个描述信息的获取，将开始时间和指定形状区域在图像中的位置重新记录，即将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置。
本实施例的设计思路是：在视频的图像中确定一个最大指定形状区域及其位置，检测该最大指定形状区域处于同一位置或相近位置的持续时间，则在该持续时间内，在该位置进行贴图；如果位置发生变化，则说明贴图的位置也需要发生变化，那么就需要重新进行可贴图区域的检测。
在一个具体的例子中，检测视频的第10帧图像时，检测到该图像中的连通区域中最大矩形区域，确定第9帧图像中也存在最大矩形区域，那么就获取该第10帧图像中的该最大矩形区域的位置1，计算位置1与第9帧图像中的最大矩形区域的位置2的差值，如果差值小于预设阈值，则说明该最大矩形区域位置变化不大或不变，遍历第11帧图像；如果差值不小于预设阈值，则说明相比较第9帧图像中的位置2，该最大矩形区域的位置已经变化，那么就将该第10帧图像之前的最大矩形区域的位置、持续时间、开始时间对应保存为所述视频中的一个可贴图区域的描述信息。
在另一个具体的例子中，第5帧检测首次到最大矩形区域在位置1，记录开始时间是视频的第3s，第5帧-第9帧图像中均检测到最大矩形区域，且与位置1的差值小于预设阈值，在第10帧图像是检测到最大矩形区域在位置2，且位置2与位置1的差值大于预设阈值，第10帧图像的时间是第6s，则记录第10帧凸显的时间点6s与开始时间3s的时间间隔3s，将位置1，开始时间第3s，时间间隔长度3s对应保存为该视频的一个可贴图区域的描述信息。为了进行下一个可贴图描述信息的获取，将开始时间记录为第6s，位置记录为位置2。这样，在对视频进行贴图时，根据该条可贴图区域的描述信息，就在视频的第3s的图像的位置1出贴图，一直到第6s结束在位置处贴图。
可见，通过本实施例，可以确定可贴图区域是最大指定形状的区域，将贴图添加在该区域中后，防止添加贴图后遮挡视频中的主要元素内容，也可以实现贴图与视频的融合，且可以达到增强现实的效果，保证贴图添加到视频后的真实感，避免因贴图的添加音影响用户观看视频的视觉体验。
在本发明的一个实施例中，在步骤S160中的将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息之前，图1所示的方法进一步包括：判断时间间隔长度是否大于预设时间长度阈值；只在时间间隔长度大于预设时间长度阈值时，才执行将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息的步骤。如果时间间隔长度小于预设时间长度阈值，则不执行将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息的步骤，而只执行将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像的步骤。
考虑到如果时间间隔太短进行贴图时，一方面起不到相应的效果，还会造成系统资源的浪费，所以，在本实施例中，在保存成描述信息之前，需要判断时间间隔长度是否大于预设时间间隔长度，如果是，才保存为描述信息，以便进行贴图处理，如果否，则不保存描述信息，这样就不会进行贴图。然后将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
例如，在上一个例子的基础上，如果预设时间长度阈值是4s，则第10帧图像的播放时间点与开始时间的时间间隔长度3s小于4s，则不会保存该描述信息，而是直接将开始时间记录为第6s，位置记录为位置2，进行下一帧图像的遍历。
图2示出了根据本发明另一个实施例的检测视频中可贴图区域的方法的流程示意图。如图2所示，开始执行本实施例的步骤后，步骤S210，对视频进行解码，遍历视频中的图像，对于一帧图像，执行如下步骤：步骤S220，利用墙体分割算法获取该帧图像中的适合贴图的区域，转换成黑白二值图像mask；步骤S230，利用连通域算法确定连通域内最大的矩形区域；步骤S240，判断是否存在上一个矩形信息；如果否，则将该帧图像的播放时间点保存为开始时间，继续步骤S210对视频解码，进行下一帧图像的遍历；如果是，则步骤S250，计算与上一个矩形区域间的差值；步骤S260，判断差值是否小于指定阈值；如果是，则步骤S210对视频解码，进行下一帧图像的遍历；如果否，则步骤S270，计算该帧图像的播放时间点与记录的开始时间的时间间隔；步骤S280，判断该时间间隔是否小于指定间隔阈值；如果是，则步骤S210对视频解码，进行下一帧图像的遍历；如果否，则步骤S290记录矩形位置、当前图像的播放时间点和时间间隔，将其对应保存为一个可贴图区域的描述信息，然后步骤S210对视频解码，进行下一帧图像的遍历。
图3示出了根据本发明一个实施例的实现在视频中贴图的方法的流程示意图。如图3所示，该方法包括：
步骤S310，根据如图1的检测视频中可贴图区域的方法，获取指定视频的可贴图区域的描述信息。
在本实施例中，获取的指定视频的可贴图区域的描述信息可能是一个可贴图区域的描述信息也可能是多个可贴图区域的描述信息。
步骤S320，将可贴图区域的描述信息保存到指定视频的配置文件中。
步骤S330，将指定视频和对应的配置文件一起发送到客户端。
在本实施例中，服务器在获取到指定视频的可贴图区域的描述信息后，将该描述信息保存在配置文件中，然后将指定视频和对应的配置文件一起发送到客户端，当客户端接收到该指定视频和对应的配置文件后，客户端会根据该指定视频的配置文件中的可贴图区域的描述信息对该指定视频进行贴图，并播放进行贴图后的视频，这样，用户浏览的指定视频则是进行贴图处理后的视频，可以使得指定视频的内容更加丰富。例如贴图还可以是推荐广告等，达到广告宣传的目的，且还不会引起用户的反感情绪，保证用户的观看体验。
图4示出了根据本发明另一个实施例的实现在视频中贴图的方法的流程示意图。如图4所示，该方法包括：
步骤S410，获取指定视频，以及获取指定视频的可贴图区域的描述信息；可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度。
步骤S420，获取与该指定视频对应的贴图内容。
在本实施例中贴图内容可以是推荐贴图也可以是推荐广告贴图，又或者是与视频向匹配的其他贴图，可以根据需求进行设定。例如，视频中的内容是一个人坐在办公室中，视频内容比较单一，那么就可以选择树林的贴图，添加在视频中显示的墙面，体现一种在树林中办公的视觉体验。
步骤S430，根据指定视频的可贴图区域的描述信息，将贴图内容添加到视频中可贴图区域。
例如，在指定视频的可贴图区域的描述信息中包括：位置1、开始时间第2s，时间间隔长度是5s；以及，位置2、开始时间第20s，时间间隔长度是10s，则根据描述信息，选择对应的贴图后，在该指定视频的第2s至第7s，在位置1处添加获取的贴图1；以及，在该指定视频的第20s至30s，在位置2处添加获取的贴图2。这里的贴图1和贴图2可以是相同的，也可以是不同的。
可见，通过本实施例，客户端侧完成了对指定视频添加贴图的操作，这样，用户浏览的指定视频则是进行贴图处理后的视频，可以使得指定视频的内容更加丰富。
在发明的一个实施例中，步骤S410中的获取指定视频的可贴图区域的描述信息包括：接收服务器下发的指定视频的配置文件，配置文件中包括指定视频的可贴图区域的描述信息；或者，根据如图1的检测视频中可贴图区域的方法，获取指定视频的可贴图区域的描述信息。
也就是说，在本实施例中客户端获取指定视频的可贴图区域的描述信息可以有两种方式：一个是从服务器处获取，即服务器处获取指定视频的可贴图区域的描述信息(例如，采用图1所示的方法获取)，然后有服务器发送给客户端，例如，图3所示的从服务器侧说明的实现在视频中贴图的方法，该方式中描述信息的获取是在服务器侧完成，对指定视频的贴图是在客户端完成；另一个是客户端采用图1所示的方法获取指定视频的可贴图区域的描述信息，该方式中描述信息的获取和对指定视频的贴图均是在客户端完成。
在本发明的一个实施例中，步骤S420中的获取与该指定视频对应的贴图内容包括如下中的任一种：根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
在本实施例中，根据指定形状区域的大小选取相匹配的贴图内容，这是因为，贴图的本身有大有小，如果指定形状区域较小，选择太大的贴图添加到该区域，则会造成贴图中内容的不清楚；如果指定形状区域较大，选择太小的贴图添加到该区域，则会造成可贴图区域的浪费，选择大小相匹配的贴图进行添加，考虑到不一定大小完全匹配的贴图，可以选择贴图的大小与指定形状区域的大小的差值在一定阈值范围内的，然后在添加时，将贴图的大小按照指定形状区域的大小进行适当的调整，如放大或缩小，以便是贴图大小与指定形状区域的大小适配，而且还可以保证贴图内容的清晰度。
在本实施例中，还可以根据时间间隔长度选取相匹配的贴图内容，如果时间间隔长度较长，可以选择时间相匹配的短视频或者GIF图片作为贴图进行添加，在视频播放的同时，选择的贴图也会随之进行播放，已达到视频显示内容中也在播放视频的效果。
另外，还可以根据指定形状区域对应的视频元素选择相匹配的贴图内容，例如，在确定指定形状区域的位置后，根据该位置确定对应的视频元素，例如，确定的视频元素是视频图像中的电视机屏幕，则可以选择短视频广告进行播放，实现的是视频中的电视机播放广告的效果，进一步增强用户的使用体验。
上述的三种选取相匹配的贴图的方式可以单独使用也可以相结合使用。
图5示出了根据本发明一个实施例的检测视频中可贴图区域的装置的结构示意图。如图5所示，该检测视频中可贴图区域的装置500包括：
遍历单元510，适于遍历视频的各帧图像。
视频中包含有多帧图像，为了实现在视频中可贴图区域的检测，需要对视频中的每帧图像进行检测，对于每帧图像均执行下述的步骤。
检测单元520，适于对于遍历到的当前图像，检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域。
在本实施例中，检测当前图像中的连通区域中最大指定形状区域的方法可以通过墙体分割算法以及连通域算法进行检测，例如，检测出当前图像中是否包含墙体等适合贴图的区域(如颜色大体一致的墙面、地面、电视屏幕等平整区域)，检测出适合贴图的区域后，将该当前图像转换成黑白二值图像，该黑白二值图像中的白色即为检测到的适合贴图的区域，图像中可能存在多个白色区域，但是并非每个白色区域都可以贴图，需要在白色区域中通过连通域算法确定白色的区域中连通区域的最大指定形状区域(例如矩形)，确定该最大指定形状区域后，则确定检测出该当前图像中的连通区域中最大指定形状区域。然后判断上一帧图像中是否也存在该指定形状区域。
记录单元530，适于如果不存在则将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
如果不存在说明该视频中从当前图像开始才出现了可贴图的区域，即第一次检测到最大指定形状区域。那么就需要判断该可贴图的区域在一个位置持续了多长时间，以便在该时间段内在该位置进行贴图。所以本实施例中如果不存在则将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
差值计算单元540，适于如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果差值小于预设阈值，则开始遍历下一帧图像。
本实施例中，如果存在说明该指定形状区域作为可贴图区域已经存在了，那么就需要判断该区域的位置是否发生了变化，如果发生了变化则说明贴图的位置也需要发送变化，所以本实施例中计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值，这里的差值可以是位置差值，如位置的偏移量，设定一预设阈值，如果差值小于该预设阈值，说明该最大指定形状区域没有太大的变化，贴图的位置也可以不变，或者说位置是相对稳定的，可以进行贴图，则继续开始遍历下一帧图像，判断下一帧图像中是否可以在同一位置进行贴图，如果下一帧图像中的指定形状区域的位置与当前图像中的差值小于预设阈值，说明还可以在该位置进行贴图，则继续遍历下下帧图像，直至差值不小于预设阈值。
描述信息保存单元550，适于如果差值不小于预设阈值，则记录当前图像在视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息；并将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像。
如果差值大于或等于预设阈值，则说明该最大指定形状区域的位置变化较大，需要改变贴图的位置才可以，那么对于之前帧图像的贴图位置到该当前图像对应的时间点就可以截止了，所以将之前的信息作为用于贴图的描述信息保存，即将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息。同时，为了进行下一个描述信息的获取，将开始时间和指定形状区域在图像中的位置重新记录，即将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置。
本实施例的设计思路是：在视频的图像中确定一个最大指定形状区域及其位置，检测该最大指定形状区域处于同一位置或相近位置的持续时间，则在该持续时间内，在该位置进行贴图；如果位置发生变化，则说明贴图的位置也需要发生变化，那么就需要重新进行可贴图区域的检测。
在一个具体的例子中，检测视频的第10帧图像时，检测到该图像中的连通区域中最大矩形区域，确定第9帧图像中也存在最大矩形区域，那么就获取该第10帧图像中的该最大矩形区域的位置1，计算位置1与第9帧图像中的最大矩形区域的位置2的差值，如果差值小于预设阈值，则说明该最大矩形区域位置变化不大或不变，遍历第11帧图像；如果差值不小于预设阈值，则说明相比较第9帧图像中的位置2，该最大矩形区域的位置已经变化，那么就将该第10帧图像之前的最大矩形区域的位置、持续时间、开始时间对应保存为所述视频中的一个可贴图区域的描述信息。
在另一个具体的例子中，第5帧检测首次到最大矩形区域在位置1，记录开始时间是视频的第3s，第5帧-第9帧图像中均检测到最大矩形区域，且与位置1的差值小于预设阈值，在第10帧图像是检测到最大矩形区域在位置2，且位置2与位置1的差值大于预设阈值，第10帧图像的时间是第6s，则记录第10帧凸显的时间点6s与开始时间3s的时间间隔3s，将位置1，开始时间第3s，时间间隔长度3s对应保存为该视频的一个可贴图区域的描述信息。为了进行下一个可贴图描述信息的获取，将开始时间记录为第6s，位置记录为位置2。这样，在对视频进行贴图时，根据该条可贴图区域的描述信息，就在视频的第3s的图像的位置1出贴图，一直到第6s结束在位置处贴图。
可见，通过本实施例，可以确定可贴图区域是最大指定形状的区域，将贴图添加在该区域中后，防止添加贴图后遮挡视频中的主要元素内容，也可以实现贴图与视频的融合，达到增强现实的效果，保证贴图添加到视频后的真实感，避免因贴图的添加音影响用户观看视频的视觉体验。
在本发明的一个实施例中，描述信息保存单元550，适于在将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息之前，判断时间间隔长度是否大于预设时间长度阈值；只在时间间隔长度大于预设时间长度阈值时，才执行将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息的步骤。如果时间间隔长度小于预设时间长度阈值，则不执行将最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为视频中的一个可贴图区域的描述信息的步骤，而只执行将当前图像在视频中的播放时间点记录为开始时间，记录最大指定形状区域在图像中的位置，开始遍历下一帧图像的步骤。
考虑到如果时间间隔太短进行贴图时，一方面起不到相应的效果，还会造成系统资源的浪费，所以，在本实施例中，在保存成描述信息之前，需要判断时间间隔长度是否大于预设时间间隔长度，如果是，才保存为描述信息，以便进行贴图处理，如果否，则不保存描述信息，这样就不会进行贴图。然后将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
例如，在上一个例子的基础上，如果预设时间长度阈值是4s，则第10帧图像的播放时间点与开始时间的时间间隔长度3s小于4s，则不会保存该描述信息，而是直接将开始时间记录为第6s，位置记录为位置2，进行下一帧图像的遍历。
图6示出了根据本发明一个实施例的实现在视频中贴图的服务器的结构示意图。如图6所示，该实现在视频中贴图的服务器600包括：
描述信息获取单元610，适于通过如图5所示的检测视频中可贴图区域的装置500，获取指定视频的可贴图区域的描述信息。
在本实施例中，获取的指定视频的可贴图区域的描述信息可能是一个可贴图区域的描述信息也可能是多个可贴图区域的描述信息。
描述信息配置单元620，适于将可贴图区域的描述信息保存到指定视频的配置文件中。
发送单元630，适于将指定视频和对应的配置文件一起发送到客户端。
在本实施例中，服务器在获取到指定视频的可贴图区域的描述信息后，将该描述信息保存在配置文件中，然后将指定视频和对应的配置文件一起发送到客户端，当客户端接收到该指定视频和对应的配置文件后，客户端会根据该指定视频的配置文件中的可贴图区域的描述信息对该指定视频进行贴图，并播放进行贴图后的视频，这样，用户浏览的指定视频则是进行贴图处理后的视频，可以使得指定视频的内容更加丰富。例如贴图还可以是推荐广告等，达到广告宣传的目的，且还不会引起用户的反感情绪，保证用户的观看体验。
图7示出了根据本发明一个实施例的实现在视频中贴图的客户端的结构示意图。如图7所示，该实现在视频中贴图的客户端700包括：
视频获取单元710，适于获取指定视频，以及获取指定视频的可贴图区域的描述信息；可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度。
贴图获取单元720，适于获取与该指定视频对应的贴图内容。
在本实施例中贴图内容可以是推荐贴图也可以是推荐广告贴图，又或者是与视频向匹配的其他贴图，可以根据需求进行设定。例如，视频中的内容是一个人坐在办公室中，视频内容比较单一，那么就可以选择树林的贴图，添加在视频中显示的墙面，体现一种在树林中办公的视觉体验。
贴图添加单元730，适于根据指定视频的可贴图区域的描述信息，将贴图内容添加到视频中可贴图区域。
例如，在指定视频的可贴图区域的描述信息中包括：位置1、开始时间第2s，时间间隔长度是5s；以及，位置2、开始时间第20s，时间间隔长度是10s，则根据描述信息，选择对应的贴图后，在该指定视频的第2s至第7s，在位置1处添加获取的贴图1；以及，在该指定视频的第20s至30s，在位置2处添加获取的贴图2。这里的贴图1和贴图2可以是相同的，也可以是不同的。
可见，通过本实施例，客户端侧完成了对指定视频添加贴图的操作，这样，用户浏览的指定视频则是进行贴图处理后的视频，可以使得指定视频的内容更加丰富，且可以达到增强现实的效果。
在发明的一个实施例中，视频获取单元710，适于接收服务器下发的指定视频的配置文件，配置文件中包括指定视频的可贴图区域的描述信息；或者，通过如图5所示的检测视频中可贴图区域的装置500，获取指定视频的可贴图区域的描述信息。
也就是说，在本实施例中客户端获取指定视频的可贴图区域的描述信息可以有两种方式：一个是从服务器处获取，即服务器处获取指定视频的可贴图区域的描述信息(例如，采用图5所示的检测视频中可贴图区域的装置获取)，然后有服务器发送给客户端，例如，图3所示的从服务器侧说明的实现在视频中贴图的方法，该方式中描述信息的获取是在服务器侧完成，对指定视频的贴图是在客户端完成；另一个是客户端采用图5所示的检测视频中可贴图区域的装置获取指定视频的可贴图区域的描述信息，该方式中描述信息的获取和对指定视频的贴图均是在客户端完成。
在本发明的一个实施例中，贴图获取单元720，适于根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
在本实施例中，根据指定形状区域的大小选取相匹配的贴图内容，这是因为，贴图的本身有大有小，如果指定形状区域较小，选择太大的贴图添加到该区域，则会造成贴图中内容的不清楚；如果指定形状区域较大，选择太小的贴图添加到该区域，则会造成可贴图区域的浪费，选择大小相匹配的贴图进行添加，考虑到不一定大小完全匹配的贴图，可以选择贴图的大小与指定形状区域的大小的差值在一定阈值范围内的，然后在添加时，将贴图的大小按照指定形状区域的大小进行适当的调整，如放大或缩小，以便是贴图大小与指定形状区域的大小适配，而且还可以保证贴图内容的清晰度。
在本实施例中，还可以根据时间间隔长度选取相匹配的贴图内容，如果时间间隔长度较长，可以选择时间相匹配的短视频或者GIF图片作为贴图进行添加，在视频播放的同时，选择的贴图也会随之进行播放，已达到视频显示内容中也在播放视频的效果。
另外，还可以根据指定形状区域对应的视频元素选择相匹配的贴图内容，例如，在确定指定形状区域的位置后，根据该位置确定对应的视频元素，例如，确定的视频元素是视频图像中的电视机屏幕，则可以选择短视频广告进行播放，实现的是视频中的电视机播放广告的效果，进一步增强用户的使用体验。
上述的三种选取相匹配的贴图的方式可以单独使用也可以相结合使用。
综上所述，根据本发明的技术方案，服务器通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，将获取的视频中可贴图区域信息发送给客户端，以便客户端在视频中相应的区域添加贴图，或者客户端也可以通过检测视频中可贴图区域的方法确定视频中可以添加贴图的位置，根据获取的位置信息完成在视频中相应的区域添加贴图。通过本技术方案可确定可贴图区域是最大指定形状的区域，将贴图添加在该区域中后，防止添加贴图后遮挡视频中的主要元素内容，也可以实现贴图与视频的融合，且可以达到增强现实的效果，保证贴图添加到视频后的真实感，避免因贴图的添加音影响用户观看视频的视觉体验。
需要说明的是：
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述，构造这类装置所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的检测视频中可贴图区域的装置，实现在视频中贴图的服务器和客户端、电子设备、计算机可读存储介质中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
例如，图8示出了根据本发明一个实施例的电子设备的结构示意图。该电子设备800传统上包括处理器810和被安排成存储计算机可执行指令(程序代码)的存储器820。存储器820可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。存储器820具有存储用于执行图1或图3或图4所示的以及各实施例中的任何方法步骤的程序代码840的存储空间830。例如，用于程序代码的存储空间830可以包括分别用于实现上面的方法中的各种步骤的各个程序代码840。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘，紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为例如图9所述的计算机可读存储介质900。该计算机可读存储介质900可以具有与图8的电子设备中的存储器820类似布置的存储段、存储空间等。程序代码可以例如以适当形式进行压缩。通常，存储单元存储有用于执行根据本发明的方法步骤的程序代码910，即可以由诸如810之类的处理器读取的程序代码，当这些程序代码由电子设备运行时，导致该电子设备执行上面所描述的方法中的各个步骤。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明公开了A1、一种检测视频中可贴图区域的方法，其中，该方法包括：遍历视频的各帧图像，对于遍历到的当前图像：
检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
A2、如A1所述的方法，其中，在将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息之前，该方法进一步包括：
判断所述时间间隔长度是否大于预设时间长度阈值；
只在所述时间间隔长度大于预设时间长度阈值时，才执行所述将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息的步骤。
本发明还公开了B3、一种实现在视频中贴图的方法，其中，该方法包括：
根据如A1或A2所述的方法，获取指定视频的可贴图区域的描述信息；
将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
将所述指定视频和对应的配置文件一起发送到客户端。
本发明还公开了C4、一种实现在视频中贴图的方法，其中，该方法包括：
获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
获取与该指定视频对应的贴图内容；
根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
C5、如C4所述的方法，其中，所述获取指定视频的可贴图区域的描述信息包括：
接收服务器下发的指定视频的配置文件，所述配置文件中包括指定视频的可贴图区域的描述信息；
或者，
根据如A1或A2所述的方法，获取指定视频的可贴图区域的描述信息。
C6、如C4所述的方法，其中，所述获取与该指定视频对应的贴图内容包括如下中的任一种：
根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
本发明还公开了D7、一种检测视频中可贴图区域的装置，其中，该装置包括：
遍历单元，适于遍历视频的各帧图像；
检测单元，适于对于遍历到的当前图像，检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
记录单元，适于如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
差值计算单元，适于如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
描述信息保存单元，适于如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
D8、如D7所述的装置，其中，
所述描述信息保存单元，适于在将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息之前，判断所述时间间隔长度是否大于预设时间长度阈值；只在所述时间间隔长度大于预设时间长度阈值时，才执行所述将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息的步骤。
本发明还公开了E9、一种实现在视频中贴图的服务器，其中，该服务器包括：
描述信息获取单元，适于通过如D7或D8所述的检测视频中可贴图区域的装置，获取指定视频的可贴图区域的描述信息；
描述信息配置单元，适于将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
发送单元，适于将所述指定视频和对应的配置文件一起发送到客户端。
本发明还公开了F10、一种实现在视频中贴图的客户端，其中，该客户端包括：
视频获取单元，适于获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
贴图获取单元，适于获取与该指定视频对应的贴图内容；
贴图添加单元，适于根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
F11、如F10所述的客户端，其中，
所述视频获取单元，适于接收服务器下发的指定视频的配置文件，所述配置文件中包括指定视频的可贴图区域的描述信息；或者，通过如D7或D8所述的检测视频中可贴图区域的装置，获取指定视频的可贴图区域的描述信息。
F12、如F10所述的客户端，其中，
所述贴图获取单元，适于根据指定视频的可贴图区域的描述信息中的指定形状区域的大小和/或时间间隔长度，选取相匹配的贴图内容。
本发明还公开了G13、一种电子设备，其中，该电子设备包括：
处理器；以及，
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行根据A1或A2所述的方法，或者执行根据B3所述的方法，或者执行根据C4～C6中任一项所述的方法。
本发明还公开了H14、一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现A1或A2所述的方法，或者实现B3所述的方法，或者实现C4～C6中任一项所述的方法。
Claims (10)
1.一种检测视频中可贴图区域的方法，其中，该方法包括：遍历视频的各帧图像，对于遍历到的当前图像：
检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
2.如权利要求1所述的方法，其中，在将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息之前，该方法进一步包括：
判断所述时间间隔长度是否大于预设时间长度阈值；
只在所述时间间隔长度大于预设时间长度阈值时，才执行所述将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息的步骤。
3.一种实现在视频中贴图的方法，其中，该方法包括：
根据如权利要求1或2所述的方法，获取指定视频的可贴图区域的描述信息；
将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
将所述指定视频和对应的配置文件一起发送到客户端。
4.一种实现在视频中贴图的方法，其中，该方法包括：
获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
获取与该指定视频对应的贴图内容；
根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
5.如权利要求4所述的方法，其中，所述获取指定视频的可贴图区域的描述信息包括：
接收服务器下发的指定视频的配置文件，所述配置文件中包括指定视频的可贴图区域的描述信息；
或者，
根据如权利要求1或2所述的方法，获取指定视频的可贴图区域的描述信息。
6.一种检测视频中可贴图区域的装置，其中，该装置包括：
遍历单元，适于遍历视频的各帧图像；
检测单元，适于对于遍历到的当前图像，检测出该当前图像中的连通区域中最大指定形状区域，判断上一帧图像中是否存在指定形状区域；
记录单元，适于如果不存在则将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像；
差值计算单元，适于如果存在则计算当前图像中的最大指定形状区域与上一帧图像中的指定形状区域的差值；如果所述差值小于预设阈值，则开始遍历下一帧图像；
描述信息保存单元，适于如果所述差值不小于预设阈值，则记录当前图像在所述视频中的播放时间点与所记录的开始时间之间的时间间隔长度；将所述最大指定形状区域在图像中的位置、所记录的开始时间和时间间隔长度对应保存为所述视频中的一个可贴图区域的描述信息；并将当前图像在所述视频中的播放时间点记录为开始时间，记录所述最大指定形状区域在图像中的位置，开始遍历下一帧图像。
7.一种实现在视频中贴图的服务器，其中，该服务器包括：
描述信息获取单元，适于通过如权利要求7或8所述的检测视频中可贴图区域的装置，获取指定视频的可贴图区域的描述信息；
描述信息配置单元，适于将所述可贴图区域的描述信息保存到所述指定视频的配置文件中；
发送单元，适于将所述指定视频和对应的配置文件一起发送到客户端。
8.一种实现在视频中贴图的客户端，其中，该客户端包括：
视频获取单元，适于获取指定视频，以及获取指定视频的可贴图区域的描述信息；所述可贴图区域的描述信息包括：指定形状区域在图像中的位置、开始时间和时间间隔长度；
贴图获取单元，适于获取与该指定视频对应的贴图内容；
贴图添加单元，适于根据指定视频的可贴图区域的描述信息，将所述贴图内容添加到视频中可贴图区域。
9.一种电子设备，其中，该电子设备包括：
处理器；以及，
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行根据权利要求1或2所述的方法，或者执行根据权利要求3所述的方法，或者执行根据权利要求4～5中任一项所述的方法。
10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现权利要求1或2所述的方法，或者实现权利要求3所述的方法，或者实现权利要求4～5中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810462754.7A CN108521578A (zh) | 2018-05-15 | 2018-05-15 | 一种检测视频中可贴图区域、实现在视频中贴图的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810462754.7A CN108521578A (zh) | 2018-05-15 | 2018-05-15 | 一种检测视频中可贴图区域、实现在视频中贴图的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108521578A true CN108521578A (zh) | 2018-09-11 |
Family
ID=63427020
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810462754.7A Pending CN108521578A (zh) | 2018-05-15 | 2018-05-15 | 一种检测视频中可贴图区域、实现在视频中贴图的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108521578A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109756672A (zh) * | 2018-11-13 | 2019-05-14 | 深圳艺达文化传媒有限公司 | 短视频动物模型叠加方法及相关产品 |
| CN110971840A (zh) * | 2019-12-06 | 2020-04-07 | 广州酷狗计算机科技有限公司 | 视频贴图方法及装置、计算机设备及存储介质 |
| CN111064984A (zh) * | 2018-10-16 | 2020-04-24 | 杭州海康威视数字技术股份有限公司 | 一种视频帧的智能信息叠加显示方法、装置及硬盘录像机 |
| CN111953924A (zh) * | 2020-08-21 | 2020-11-17 | 杨文龙 | 基于图像处理的视频窗口调整方法、装置、介质及系统 |
| CN112199534A (zh) * | 2020-10-10 | 2021-01-08 | 维沃移动通信有限公司 | 贴纸推荐方法、装置、电子设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101031030A (zh) * | 2007-04-17 | 2007-09-05 | 北京中星微电子有限公司 | 对图像添加特效的方法和系统 |
| US20140098879A1 (en) * | 2012-10-10 | 2014-04-10 | Samsung Electronics Co., Ltd. | Method and apparatus for motion estimation in a video system |
| CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技（上海）有限公司 | 视频处理方法及视频处理装置 |
| CN106611412A (zh) * | 2015-10-20 | 2017-05-03 | 成都理想境界科技有限公司 | 贴图视频生成方法及装置 |
| US20170256065A1 (en) * | 2016-03-01 | 2017-09-07 | Intel Corporation | Tracking regions of interest across video frames with corresponding depth maps |
-
2018
- 2018-05-15 CN CN201810462754.7A patent/CN108521578A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101031030A (zh) * | 2007-04-17 | 2007-09-05 | 北京中星微电子有限公司 | 对图像添加特效的方法和系统 |
| US20140098879A1 (en) * | 2012-10-10 | 2014-04-10 | Samsung Electronics Co., Ltd. | Method and apparatus for motion estimation in a video system |
| CN106611412A (zh) * | 2015-10-20 | 2017-05-03 | 成都理想境界科技有限公司 | 贴图视频生成方法及装置 |
| US20170256065A1 (en) * | 2016-03-01 | 2017-09-07 | Intel Corporation | Tracking regions of interest across video frames with corresponding depth maps |
| CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技（上海）有限公司 | 视频处理方法及视频处理装置 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111064984A (zh) * | 2018-10-16 | 2020-04-24 | 杭州海康威视数字技术股份有限公司 | 一种视频帧的智能信息叠加显示方法、装置及硬盘录像机 |
| CN109756672A (zh) * | 2018-11-13 | 2019-05-14 | 深圳艺达文化传媒有限公司 | 短视频动物模型叠加方法及相关产品 |
| CN110971840A (zh) * | 2019-12-06 | 2020-04-07 | 广州酷狗计算机科技有限公司 | 视频贴图方法及装置、计算机设备及存储介质 |
| CN110971840B (zh) * | 2019-12-06 | 2022-07-26 | 广州酷狗计算机科技有限公司 | 视频贴图方法及装置、计算机设备及存储介质 |
| CN111953924A (zh) * | 2020-08-21 | 2020-11-17 | 杨文龙 | 基于图像处理的视频窗口调整方法、装置、介质及系统 |
| CN111953924B (zh) * | 2020-08-21 | 2022-03-25 | 杨文龙 | 基于图像处理的视频窗口调整方法、装置、介质及系统 |
| CN112199534A (zh) * | 2020-10-10 | 2021-01-08 | 维沃移动通信有限公司 | 贴纸推荐方法、装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108521578A (zh) | 一种检测视频中可贴图区域、实现在视频中贴图的方法 | |
| CN107393569B (zh) | 音视频剪辑方法及装置 | |
| CN110062270B (zh) | 广告展示方法和装置 | |
| CN108040265A (zh) | 一种对视频进行处理的方法和装置 | |
| CN105142031A (zh) | 在视频播放时以弹幕显示文字信息的方法及装置 | |
| CN108133718A (zh) | 一种对视频进行处理的方法和装置 | |
| WO2011064168A1 (en) | Method and apparatus for identifying popular network video segments | |
| CN104504133A (zh) | 应用程序的推荐方法及装置 | |
| CN106648675A (zh) | 应用程序使用信息的展示方法、装置和电子设备 | |
| CN108377418A (zh) | 一种视频标注处理方法和装置 | |
| CN105975844B (zh) | 一种登录方法和装置 | |
| CN107633541A (zh) | 一种图像特效的生成方法和装置 | |
| CN108124101A (zh) | 视频采集方法、装置、电子设备和计算机可读存储介质 | |
| CN105426524B (zh) | 一种网页界面展示方法和装置 | |
| CN108089701A (zh) | 一种虚拟现实vr场景的展示方法和装置 | |
| CN109121005A (zh) | 多媒体数据的处理方法及电子设备 | |
| US9141255B2 (en) | Mosaic generation from user-created content | |
| CN109960549A (zh) | 一种gif图片的生成方法和装置 | |
| CN105554424A (zh) | 在应用中进行视频播放的方法和装置 | |
| CN107608730A (zh) | 一种应用内容加载方法和装置 | |
| CN106354841B (zh) | 推荐算法的测试方法及装置 | |
| CN106452808A (zh) | 一种数据处理方法和装置 | |
| CN107666616A (zh) | 一种基于视频内容的广告投放方法及装置 | |
| CN108174246A (zh) | 一种投放视频广告的方法及装置 | |
| CN108833974A (zh) | 识别视频中的半透明水印的方法、装置和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180911 |
|
| RJ01 | Rejection of invention patent application after publication |