CN103856824B - 视频中弹出跟踪对象的视频的方法 - Google Patents

Abstract

视频中弹出跟踪对象的视频的方法。用途是播放者能弹出视频中对象新的视频，对对象的展现更立体真实全面。实现它需要两个相关联的软件，一个是播放跟踪制作装置，它的方法包括：启动视频自动跟踪，用图标来显示跟踪，每一帧把各跟踪对象坐标参数和要弹出的视频文件对应信息，随同这个有图标的图象帧写到一个特别格式的视频文件中；一个是本地或客户端互动视频播放器，它的方法包括：播放所述特别格式视频文件的视频，获取上面所述参数和信息以便动态确定点击视频中有图标的图像的许可范围，在许可范围内点击有图标的特定对象时弹出新播放器，它根据文件对应信息播放某对象的视频。本发明解决了视频中对象的运动参数如何存储和利用的问题。

Description

视频中弹出跟踪对象的视频的方法

技术领域

本发明属于数字视频跟踪处理和播放的技术领域，具体涉及视频中多个对象的跟踪显示，视频跟踪结果记录，再现视频数据时能通过视频界面中对象操作，弹出播放该跟踪对象的新视频的方法。

背景技术

数字视频跟踪目前有成熟的目标检测跟踪算法，如高斯背景建模、粒子滤波、kalmanfiter算法、MeanShift算法和光学跟踪等等。国内申请（专利）号：02800903.7的在自动视频跟踪系统中选择目标的方法；申请（专利）号：200510029899.0的基于自适应表面模型的概率视频跟踪方法；申请（专利）号：200910077056.6的一种视频跟踪设备及方法；申请（专利）号：200910245180.9的基于多级特征的视频跟踪方法，都是在成熟的目标检测跟踪算法中的一些改进，一般是对运动对象的跟踪显示，跟踪后只能显示不能对跟踪的对象进行特别处理（如下段所述），而且跟踪起来算法复杂，很耗CPU和时间。而本专利的目标跟踪方法仅针对那些相对于环境处于静态，但相对于摄象机处于运动的多个对象的跟踪，先在一帧图像中选定要跟踪的一个主对象，使用成熟的目标检测跟踪算法（如MeanShift算法）对该主对象进行跟踪显示，然后其它要跟踪的多个从对象不采用上面任何跟踪算法，使用自己的耗CPU和时间很少的简单算法来跟踪显示。另外本专利解决了对跟踪的对象进行特别处理的技术问题，使刚才跟踪的这些对象能根据用户的点击一个个的从原来视频中跳出来，也就是原来视频画面中能弹出新的一个或多个视频，以便用户获得新的体验，能进一步详细生动地看到原来视频画面中某个跟踪对象的全貌。这种新型的视频互动形式，与国内申请（专利）号：201110442571.7解决的视频信息显示不同，它仅能在原来视频中根据鼠标位置所在的对象，做一些注释信息显示，如下面所述的视链技术；而国内申请（专利）号：200610083038.5中虽有多个视频画面，但只是解决视频画面切换的方法，是多人视频画面和单人视频画面之间的切换，视频内容没有相互关系；申请（专利）号：200710076946.6只是解决播放视频广告的方法；申请（专利）号：200510002038.3虽然显示多个视频画面，但视频内容相互之间和播放先后方面可以没关系，而本专利中弹出后视频是依赖于弹出前视频存在的，一方面，弹出后视频的播放器，需要播放者点击弹出前的视频中某个对象才能出现，另一方面，弹出后视频的播放器播放的内容是关于弹出前视频中特定对象的更加全方位立体的视频，无论在播放先后，还是在播放内容直接相关性上都不同，本专利方案中先后出现的两个视频好比有母子关系，一个是母视频，一个是子视频。本专利与最近网上出现的视链技术也不同（通过百度搜索“视链”，在百度百科中可以找到一编标题为“视链”的介绍文章），从这编关于视链的文章可以看出，视链是影视中人物的注释，也可链接至有关的信息页面，也就是网页，它通过滑动鼠标至人物头像（也就是视频画面中对象），会闪现一些信息。然后本文章进一步介绍，视频中出现一些物品，可以点击进入电子商务购买流程。因此，虽然视链技术也能基于视频弹出网页，网页中也有视频，看似有本专利的母视频和子视频之间的关系，但视链技术与本专利弹出的子视频和母视频之间的关系有如下根本的不同，它不是母视频和子视频之间的关系。视链技术不能让播放者从播放画面上看出哪些对象有视链，因为视链技术对于有视链的对象没有用图标来标记，从视频画面上看不出来，而本专利的解决方案可以让播放者从播放画面上看出哪些对象能弹出新播放器，因为能弹出新播放器的对象在视频画面中都有图标做了标记，给用户的体验明显强于视链技术；再一个不同的是，视链技术弹出的网页的用途是为了进入电子商务购买流程，网页内容是注释信息，网页中有视频也可以没有，如果是视频也是普通网页中存在的视频，视频不能离开网页存在，而且网页中视频内容与弹出网页前视频中的对象没有直接相关性，而本专利的解决方案，弹出的视频既可以在网页中播放，也可以不用网页单独用播放器播放，因为母视频播放时，在读取特别格式的视频文件的图象帧头中获取了要弹出播放器所需要的所有参数如文件对应信息，这样，两个视频文件具有直接相关性，而视链不具有接个方法，它必须通过链接间接获取要弹出的网页中视频所对应信息；技术方案更大的区别是，本专利的解决方案是读特别格式的视频文件，从中每读一图象帧就从图象帧头动态获取特定对象的视频图画所在区域和它对应的文件信息，而根据这些特定对象的视频图画所在区域和它对应的文件信息，马上确定了是否弹出播放器和播放什么文件，而视链技术是在视频启动时加载信息到内存中，播放过程中需要对视频对象进行图象分析，然后与内存中许多信息搜索处理，在用户体验时必然很消耗CPU和时间，尤其处理的对象很多时更加明显。

发明内容

本发明的目的是，解决了视频播放时播放者对视频画面中感兴趣的对象只能看，无法针对视频画面中有图标标记的对象，通过弹出一个新播放器单独地全方位立体播放它，从而进行互动操作的问题。本发明的技术方案总体上要创新两个软件，一个产生特别格式的视频文件的播放跟踪制作装置和一个能弹出多个视频的本地或客户端互动视频播放器。本发明的具体技术方案是：

第一个软件播放跟踪制作装置，它启动播放，解决跟踪、用图标来标记跟踪和文件制作功能，它先使用通行方法跟踪某一个主跟踪对象，其它要跟踪的多个从跟踪对象仅使用与所述主跟踪对象的相对位置不变的算法来跟踪。通过这样跟踪，动态地获得所述主跟踪对象和其它要跟踪的多个从跟踪对象在帧图像的窗口坐标参数（纵坐标和横坐标），并由此显示一些图标来标记跟踪结果。同时每一帧再把窗口坐标参数和文件对应编号信息，都随同显示一些图标后的图象帧写到一个文件中，产生一个特别格式的视频文件。互动的视频播放器可以本地一帧一帧地读特别格式的视频文件得到上面所述参数，依靠这些参数动态地确定一个局部范围，这个范围动态地确定播放者点击视频画面时，是否会触发弹出一个新的播放器，新的播放器在弹出时根据上面获取的文件对应信息参数，找到并读出播放该跟踪对象所对应的视频文件。本发明的有益效果是，软件装置产生的特别格式的视频文件，能把播放时在视频画面中直接看到的跟踪对象的跟踪效果，与视频文件中每一个图象帧头记录的关于跟踪对象许多有用参数（如在图象帧中的窗口坐标参数以及文件对应信息）一一对应起来，这样，通过这些有用参数，视频画面中对象不再是捉摸不到，而是随手拈来，为我所用；通过本专利实现的视频播放器播放视频，播放者通过点击视频画面跳出另外一个视频，获取视频画面中许多重要对象全方位信息的欲望得到满足，使用户有全新的体验，使播放者真真玩转视频，而不再是被动的视频播放者。

附图说明

无。

具体实施方式

1、先使用摄像机在一排物品前面大视野地慢速平移拍摄（本专利的对象跟踪仅针对相对于环境处于静态而相对于摄象机处于平行运动的对象），并录制成一个普通视频文件。然后，使用本发明的第一个播放跟踪制作装置，对这个普通视频文件进行播放。播放过程中，用鼠标右键点击（不放）平移以便框住一个在颜色上与周边颜色有所不同的对象，然后鼠标右键放开，这样得到主跟踪对象，并看到视频界面中该主跟踪对象的运动被长方形图标框住跟踪；接着，马上对其它要跟踪的多个从跟踪对象分别用鼠标快速地点击一下，然后仅使用与所述主跟踪对象的相对位置不变的算法来跟踪，再根据上面跟踪分别获得的所述主跟踪对象在帧图像的窗口坐标参数（纵坐标和横坐标），以及其它多个从跟踪对象与所述主跟踪对象的相对位置参数（主要是纵坐标和横坐标相对位置），显示一些图标来标记跟踪结果，每一帧再把窗口坐标参数、相对位置参数和各个主或从跟踪对象的文件对应信息（下面点击跟踪对象时弹出的播放器要播放的文件要用到，根据文件对应信息，分别找到各跟踪对象的一般格式的视频文件），都随同显示一些图标后的图象帧写到一个文件中，以文件形式存储下来，产生一个特别格式的视频文件，对它的播放对应弹出前的视频。2、对上面主跟踪对象和其它要跟踪的多个从跟踪对象，使用摄像机分别进行近距离全方位立体拍摄，并分别录制成一个个普通视频文件，对这些普通视频文件的文件名按一定序号编号并放到某个目录下。对它们的分别播放对应弹出后的视频，这些视频文件的各自播放内容，对应上面所述特别格式的视频文件的播放画面中的主或从跟踪对象，这样，弹出后的视频与弹出前的视频在播放的内容上具有直接相关性。3、在本地或远端，使用本发明的互动视频播放器（第二个软件）播放上面所述的特别格式的视频文件，互动的视频播放器可以本地一帧一帧地读特别格式的视频文件得到视频流和上面所述参数，并通过一个全局变量（结构数组）动态地记录上面所述参数。互动的视频播放器也可以作为视频客户端，通过网络一帧一帧地得到上面所述参数和视频流，并通过一个全局变量（结构数组）动态地记录上面所述参数。当然，作为客户端的互动视频播放器时播放时，需要视频服务器能认识特别格式的视频文件，并能一帧一帧地读视频文件，再一帧一帧地把上面所述参数通过网络转给客户端。4、接下来，不管是本地还是客户端视频播放器，根据上面所述的全局变量中记录的窗口坐标参数或相对位置参数，再动态地确定一个许可范围，也就是视频图标标记的图画所在区域，当播放者点击视频画面时会触发软件进行判断，点击的地方是否位于上面许可范围内，当点击的地方不在上面任何许可范围内，程序对点击不做反应，视频播放不受影响，当点击的地方位于上面许可范围内，程序又要分析是位于哪个跟踪对象的特别许可范围内，如果是就让原来视频播放器暂时停止播放，并弹出一个新的播放器，新的播放器在弹出时根据上面全局变量记录的参数（文件对应信息），找到并读出播放该跟踪对象所对应的视频文件（根据文件对应信息，每个跟踪对象对应一个视频文件，这些视频文件与上面说的特别格式的视频文件不同，可以是普通视频文件）或向视频服务器发送消息请求对该跟踪对象所对应的视频文件的播放，这样，两个播放文件要播放的内容也具有直接相关性。当该弹出的播放器被关掉后，原来视频播放器又开始往下播放，等候播放者点击新的对象，如果点击的地方在特别许可范围内，又开始上面的重复执行。

Claims (1)

1.一种弹出视频的方法，在视频播放时，点击视频画面中对象会弹出视频，其特征是：弹出前的视频，它对应的播放文件必须是特别格式的视频文件，该视频文件的每一个图像帧都有一个帧头，该视频文件把它播放时视频中跟踪对象的图标标记，与该视频文件中每一个图像帧头记录的该跟踪对象的位置参数和文件对应信息参数一一对应起来，所述位置参数决定了视频图标标记所在区域，弹出视频时根据所述文件对应信息找到并读出该跟踪对象所对应的视频文件，或向视频服务器发送消息请求对该跟踪对象所对应的视频文件的播放。