CN109936697A - 一种视频拍摄目标跟踪方法和装置 - Google Patents

Abstract

本发明公开了一种视频拍摄目标跟踪方和装置，包括：设置屏幕显示区域；进行用户视频对象跟踪；调整显示屏幕中显示区域；生成视频。本发明能够方便控制视频显示区域，进行视频拍摄对象的跟踪，并能够根据进行视频对象的微调，以完整的呈现拍摄视频的用户视角。

Description

一种视频拍摄目标跟踪方法和装置

技术领域

本发明涉及计算机视觉目标跟踪技术领域，具体而言，涉及一种视频拍摄目标跟踪方法和装置。

背景技术

现有的移动终端一般都配置摄像头，具有照相和拍摄的功能，且在移动终端的正面和背面都设置有摄像头，便于用户拍照和摄像，静态拍照时由于保持手不动移动终端一般不会发生抖动；但是当拍摄视频时手一般要根据环境场景的变化来不断移动拍摄，由于人手的稳定性不是很好，所以在拍摄视频时经常会使视频不断的抖动，虽然现有的很多移动终端都加入了硬件和软件的防抖，但是，这只能够在明显的进行设备级别的防抖，然而，经常会遇到拍摄出来的视频与人视角看到的视频并不是完全匹配，或者由于人手移动的速度过快，造成拍摄视频中的对象出现虚化或者模糊，而该虚化或者模糊会造成视频并不能完全真实的反映人视角看到的动态视频。

如人视角本身看到的是一个比较全景的动态视频，而由于摄像头的视角问题，或者人手在移动过程中高低起伏造成部分人视角内的画面并没有完全呈现到拍摄设备中，因为人在拍摄过程中一般是一边看拍摄对象一边看显示区域的。如何使拍摄设备拍摄出来的视频最大限度的接近人的视角所看到的景象，这是提高拍摄视频质量的难点，也是提升用户使用视频拍摄设备体验的重点。

发明内容

本发明提出了一种视频拍摄目标跟踪方法，包括：

设置屏幕显示区域；

进行用户视频对象跟踪；

调整显示屏幕中显示区域；

生成视频。

所述的方法，所述设置屏幕显示区域具体包括：进入防抖拍摄模式，确定屏幕的第一显示区域，所述第一显示区域小于显示屏幕，所述第一显示区域位于所述显示屏幕的第一位置。

所述的方法，所述第一显示区域之外的显示屏幕区域为第二显示区域，所述第二显示区域为虚化显示区域，所述第一位置以所述显示屏幕的中心形成中心对称，所述第一显示区域与显示屏幕等比例缩小。

所述的方法，所述进行用户视频对象跟踪包括跟踪用户视角和跟踪拍摄对象，所述跟踪用户视角包括：启动前置摄像头，扫描摄像区域内的用户视角，将跟踪的视角信息输入到控制器；

确定拍摄设备的位置信息，根据所述视角信息和位置信息生成拍摄视角差。

所述跟踪拍摄对象具体包括：将视频拍摄的初始位置设置为起点，提取起点位置的第一帧图像；判断视频拍摄位置的移动是否横向移动或者纵向移动，如果是，则判断横向移动或者纵向移动是否大于第一移动位移，如果大于或者等于第一移动位移，则提取等于第一移动位移的视频中的第二帧图像；分别确定第一帧图像和第二帧图像的位置信息，将第一帧图像和第二帧图像的位置信息作为两个坐标点，连接成直线，以该直线作为视频拍摄的移动方向，实时检测视频拍摄过程中视频拍摄设备是否在移动方向的范围内，如果在范围内发生偏移，则第一显示区域在显示屏幕中也发生对应的偏移，如果发生了超出范围内的偏移，则判定是用户主动控制拍摄设备，则第一显示区域在显示屏幕中不发生偏移。

所述的方法，所述视角差计算方法包括：计算拍摄设备与用户视角的角度差、高度差、水平差，根据所述角度差生成视角角度差的第一偏差信号，根据所述高度差生成视角角度差的第二偏差信号，根据所述水平差生成视角角度差的第三偏差信号，根据所述第一偏差信号、第二偏差信号、第三偏差信号进行加权计算，确定视角差的调整的第一控制信号

所述的方法，所述调整显示屏幕中显示区域具体包括：根据所述拍摄视角差，调整所述第一显示区域由第一位置向第二位置移动，以调整视频拍摄过程中的视角差。

所述的方法，所述生成视频包括：生成第一预制视频，对所述第一预制视频进行调整，得到第二预制视频，对第二预制视频进行连贯处理，得到最终视频。

所述的方法，所述第一预制视频包括第一完整视频和第一帧显示视频，所述第一完整视频根据调整视频拍摄过程中的视角差过程中，在第一显示区域显示的完整视频；所述第一帧显示视频将视频分成一帧一帧的方式进行显示，且包括第一显示区域和第二显示区域的视频，将第一显示区域和第二显示区域通过间隔符间隔开，在进行帧显示视频过程中，可以将第二显示区域的视频至少部分的调整到第一显示区域中，以进行视频显示调整，得到第二预制视频。

所述的方法，比较第二预制视频和第一预制视频，判断第二显示区域调整到第一显示区域的值是否大于第一阈值，如果大于第一阈值，则进行回调至少部分第二显示区域，判断所述第二显示区域调整到第一显示区域的值是否大于第二阈值，如果大于第二阈值小于第一阈值，则将两个视频图像帧之间进行连贯模糊化处理，如果小于第二阈值，则直接生成视频。

一种视频拍摄目标跟踪装置，包括如上述任意一项所述的方法，所述装置包括至少一个摄像头。

本发明所取得的有益技术效果是：本发明能够方便控制视频显示区域，进行视频拍摄对象的跟踪，并能够根据进行视频对象的微调，以完整的呈现拍摄视频的用户视角。作为本发明的主要改进点之一是，在拍摄视频之前，选择进入不同的拍摄模式，改进现有技术中单一的模式，用户可以根据偏好习惯进入防抖模式或者普通模式，进入防抖模式时，视频显示区域小于屏幕区域，能够根据视频拍摄时的抖动调整录制视频的显示，稳定的跟踪拍摄对象，能够根据视频中的图像信息预估视频拍摄设备的移动方向，并根据确定的移动方向判断是抖动还是用户主动控制视频拍摄设备的移动；作为本发明的另一个改进点是，能够根据用户视角调整显示区域，方便用户快速跟踪拍摄对象；作为本发明的又一改进点是，能够根据预制视频，进行后期微调，以将初期未显示的区域调整到显示的屏幕中，以纠正拍摄视频跟踪目标不到位而采用的后期微调，提高视频拍摄的效果。

附图说明

从以下结合附图的描述可以进一步理解本发明。图中的部件不一定按比例绘制，而是将重点放在示出实施例的原理上。在图中，在不同的视图中，相同的附图标记指定对应的部分。

图1是本发明的一种视频拍摄目标跟踪方法的示意图。

具体实施方式

为了使得本发明的目的、技术方案及优点更加清楚明白，以下结合其实施例，对本发明进行进一步详细说明；应当理解，此处所描述的具体实施例仅用于解释本发明，并不用于限定本发明。对于本领域技术人员而言，在查阅以下详细描述之后，本实施例的其它系统、方法和/或特征将变得显而易见。旨在所有此类附加的系统、方法、特征和优点都包括在本说明书内、包括在本发明的范围内，并且受所附权利要求书的保护。在以下详细描述描述了所公开的实施例的另外的特征，并且这些特征根据以下将详细描述将是显而易见的。

实施例一：

本发明提出了一种视频拍摄目标跟踪方法，包括：设置屏幕显示区域；进行用户视频对象跟踪；调整显示屏幕中显示区域；生成视频。

所述的方法，所述设置屏幕显示区域具体包括：进入防抖拍摄模式，确定屏幕的第一显示区域，所述第一显示区域小于显示屏幕，所述第一显示区域位于所述显示屏幕的第一位置。

所述的方法，所述第一显示区域之外的显示屏幕区域为第二显示区域，所述第二显示区域为虚化显示区域，所述第一位置以所述显示屏幕的中心形成中心对称，所述第一显示区域与显示屏幕等比例缩小。

所述的方法，所述进行用户视频对象跟踪包括跟踪用户视角和跟踪拍摄对象，所述跟踪用户视角包括：启动前置摄像头，扫描摄像区域内的用户视角，将跟踪的视角信息输入到控制器；

确定拍摄设备的位置信息，根据所述视角信息和位置信息生成拍摄视角差。

所述跟踪拍摄对象具体包括：将视频拍摄的初始位置设置为起点，提取起点位置的第一帧图像；判断视频拍摄位置的移动是否横向移动或者纵向移动，如果是，则判断横向移动或者纵向移动是否大于第一移动位移，如果大于或者等于第一移动位移，则提取等于第一移动位移的视频中的第二帧图像；分别确定第一帧图像和第二帧图像的位置信息，将第一帧图像和第二帧图像的位置信息作为两个坐标点，连接成直线，以该直线作为视频拍摄的移动方向，实时检测视频拍摄过程中视频拍摄设备是否在移动方向的范围内，如果在范围内发生偏移，则第一显示区域在显示屏幕中也发生对应的偏移，如果发生了超出范围内的偏移，则判定是用户主动控制拍摄设备，则第一显示区域在显示屏幕中不发生偏移。

所述的方法，所述视角差计算方法包括：计算拍摄设备与用户视角的角度差、高度差、水平差，根据所述角度差生成视角角度差的第一偏差信号，根据所述高度差生成视角角度差的第二偏差信号，根据所述水平差生成视角角度差的第三偏差信号，根据所述第一偏差信号、第二偏差信号、第三偏差信号进行加权计算，确定视角差的调整的第一控制信号

所述的方法，所述调整显示屏幕中显示区域具体包括：根据所述拍摄视角差，调整所述第一显示区域由第一位置向第二位置移动，以调整视频拍摄过程中的视角差。

所述的方法，所述生成视频包括：生成第一预制视频，对所述第一预制视频进行调整，得到第二预制视频，对第二预制视频进行连贯处理，得到最终视频。

所述的方法，所述第一预制视频包括第一完整视频和第一帧显示视频，所述第一完整视频根据调整视频拍摄过程中的视角差过程中，在第一显示区域显示的完整视频；所述第一帧显示视频将视频分成一帧一帧的方式进行显示，且包括第一显示区域和第二显示区域的视频，将第一显示区域和第二显示区域通过间隔符间隔开，在进行帧显示视频过程中，可以将第二显示区域的视频至少部分的调整到第一显示区域中，以进行视频显示调整，得到第二预制视频。

所述的方法，比较第二预制视频和第一预制视频，判断第二显示区域调整到第一显示区域的值是否大于第一阈值，如果大于第一阈值，则进行回调至少部分第二显示区域，判断所述第二显示区域调整到第一显示区域的值是否大于第二阈值，如果大于第二阈值小于第一阈值，则将两个视频图像帧之间进行连贯模糊化处理，如果小于第二阈值，则直接生成视频。

优选的是，虽然本发明主要用于视频拍摄，但是，也可以利用第一显示区域和第二显示区域根据对象的方式，进行照片拍摄，用户可以将第二显示区域的内容微调到第一显示区域中。

一种视频拍摄目标跟踪装置，包括如上述任意一项所述的方法，所述装置包括至少一个摄像头。

所述装置至少包括移动终端，如手机、平板、智能眼镜等。

实施例二：

本发明提出了一种视频拍摄目标跟踪方法，包括：设置屏幕显示区域；进行用户视频对象跟踪；调整显示屏幕中显示区域；生成视频。

所述的方法，所述设置屏幕显示区域具体包括：进入防抖拍摄模式，确定屏幕的第一显示区域，所述第一显示区域小于显示屏幕，所述第一显示区域位于所述显示屏幕的第一位置。

优选的是，用户能够通过长时间的按压屏幕，进入防抖拍摄模式，当进入到视频拍摄或者照相机时，屏幕检测到长时间的按压时，比如按压时间超过3秒时，进入到防抖拍模式，在屏幕中形成第一显示区域。

所述的方法，所述第一显示区域之外的显示屏幕区域为第二显示区域，所述第二显示区域为虚化显示区域，所述第一位置以所述显示屏幕的中心形成中心对称，所述第一显示区域与显示屏幕等比例缩小。

优选的是，所述第二显示区域可以根据用户设置，设置为正常显示方式，在拍摄视频时，将第一显示区域与第二显示区域用间隔符隔离开，以使用户能够明显进行区分，方便后续能够进行视频拍摄调整。

所述的方法，所述进行用户视频对象跟踪包括跟踪用户视角和跟踪拍摄对象，所述跟踪用户视角包括：采集视频拍摄装置的高度位置信息，调用拍摄视频占人体高度的基本高度比范围，列举建议参考姿势供用户选择(用户可以设置偏好拍摄信息选择，后期可以自动快速调用)，根据用户的选择，给出视角信息参考值，并根据启动的视频拍摄设备时，将参考值发送给控制器，根据当前启动的视频拍摄设备的水平高度信息，与参考值进行比较，得到偏差值，将所述偏差值发送到控制器，所述控制器根据偏差值进行视角调整。可以根据偏差值的正负值进行视角的增加或者减少。

所述跟踪拍摄对象具体包括：将视频拍摄的初始位置设置为起点，提取起点位置的第一帧图像；判断视频拍摄位置的移动是否横向移动或者纵向移动，如果是，则判断横向移动或者纵向移动是否大于第一移动位移，如果大于或者等于第一移动位移，则提取等于第一移动位移的视频中的第二帧图像；分别确定第一帧图像和第二帧图像的位置信息，将第一帧图像和第二帧图像的位置信息作为两个坐标点，连接成直线，以该直线作为视频拍摄的移动方向，实时检测视频拍摄过程中视频拍摄设备是否在移动方向的范围内，如果在范围内发生偏移，则第一显示区域在显示屏幕中也发生对应的偏移，如果发生了超出范围内的偏移，则判定是用户主动控制拍摄设备，则第一显示区域在显示屏幕中不发生偏移。

其他执行方法与实施例一相同，在此不做重复限定。当然，本实施例的某些具体方式也能够应用到实施例一中，如进入防抖拍摄模式的具体方式，如通过按压屏幕的方式，这在实施例一种同样适用，如第二显示区域能够设置为非虚化的方式，仅仅通过间隔符隔离开的具体方式也能够在实施例一种适用。

一种视频拍摄目标跟踪装置，包括如上述任意一项所述的方法，所述装置包括至少一个摄像头。

所述装置至少包括移动终端，如手机、平板、智能眼镜、单反、微单、笔记本电脑甚至包括通过摄像头与显示屏幕进行配合采用的拍摄设备等。

本发明主要是在拍摄视频或者照片时，主动缩小在屏幕上对拍摄对象的显示范围，因为用户一般根据眼睛看到的对象，以及将向拍摄的对象作为主体进行视频或者照片拍摄，但是拍摄视频时不可避免的会出现抖动，造成想拍摄的视频或者照片并没有完全的呈现在显示屏幕中，也有可能是用户眼睛看到了全局的内容，但是拍摄的视频只是局部，视频发送出去后，其他用户只能看到局部，造成信息不对等，无法完全理解视频的真正内容，造成用户体验差，通过缩小显示区域，使用户在拍摄视频的时候能够最大限度的将关键对象拍摄到，同时，即使没有拍摄到，还能够将不在显示区域中的部分景象微调到视频中，提高了用户拍摄的效率，也提供了用户的体验。

本发明所取得的有益技术效果是：本发明能够方便控制视频显示区域，进行视频拍摄对象的跟踪，并能够根据进行视频对象的微调，以完整的呈现拍摄视频的用户视角。作为本发明的主要改进点之一是，在拍摄视频之前，选择进入不同的拍摄模式，改进现有技术中单一的模式，用户可以根据偏好习惯进入防抖模式或者普通模式，进入防抖模式时，视频显示区域小于屏幕区域，能够根据视频拍摄时的抖动调整录制视频的显示，稳定的跟踪拍摄对象，能够根据视频中的图像信息预估视频拍摄设备的移动方向，并根据确定的移动方向判断是抖动还是用户主动控制视频拍摄设备的移动；作为本发明的另一个改进点是，能够根据用户视角调整显示区域，方便用户快速跟踪拍摄对象；作为本发明的又一改进点是，能够根据预制视频，进行后期微调，以将初期未显示的区域调整到显示的屏幕中，以纠正拍摄视频跟踪目标不到位而采用的后期微调，提高视频拍摄的效果。

虽然上面已经参考各种实施例描述了本发明，但是应当理解，在不脱离本发明的范围的情况下，可以进行许多改变和修改。因此，其旨在上述详细描述被认为是例示性的而非限制性的，并且应当理解，以下权利要求(包括所有等同物)旨在限定本发明的精神和范围。以上这些实施例应理解为仅用于说明本发明而不用于限制本发明的保护范围。在阅读了本发明的记载的内容之后，技术人员可以对本发明作各种改动或修改，这些等效变化和修饰同样落入本发明权利要求所限定的范围。

Claims (10)

1.一种视频拍摄目标跟踪方法，其特征在于，包括：

设置屏幕显示区域；

进行用户视频对象跟踪；

调整显示屏幕中显示区域；

生成视频。

2.如权利要求1所述的方法，其特征在于，所述设置屏幕显示区域具体包括：进入防抖拍摄模式，确定屏幕的第一显示区域，所述第一显示区域小于显示屏幕，所述第一显示区域位于所述显示屏幕的第一位置。

3.如权利要求2所述的方法，其特征在于，所述第一显示区域之外的显示屏幕区域为第二显示区域，所述第二显示区域为虚化显示区域，所述第一位置以所述显示屏幕的中心形成中心对称，所述第一显示区域与显示屏幕等比例缩小。

4.如权利要求1所述的方法，其特征在于，所述进行用户视频对象跟踪包括跟踪用户视角和跟踪拍摄对象，所述跟踪用户视角包括：启动前置摄像头，扫描摄像区域内的用户视角，将跟踪的视角信息输入到控制器；

确定拍摄设备的位置信息，根据所述视角信息和位置信息生成拍摄视角差；

所述跟踪拍摄对象具体包括：将视频拍摄的初始位置设置为起点，提取起点位置的第一帧图像；判断视频拍摄位置的移动是否横向移动或者纵向移动，如果是，则判断横向移动或者纵向移动是否大于第一移动位移，如果大于或者等于第一移动位移，则提取等于第一移动位移的视频中的第二帧图像；分别确定第一帧图像和第二帧图像的位置信息，将第一帧图像和第二帧图像的位置信息作为两个坐标点，连接成直线，以该直线作为视频拍摄的移动方向，实时检测视频拍摄过程中视频拍摄设备是否在移动方向的范围内，如果在范围内发生偏移，则第一显示区域在显示屏幕中也发生对应的偏移，如果发生了超出范围内的偏移，则判定是用户主动控制拍摄设备，则第一显示区域在显示屏幕中不发生偏移。

5.如权利要求4所述的方法，其特征在于，所述视角差计算方法包括：计算拍摄设备与用户视角的角度差、高度差、水平差，根据所述角度差生成视角角度差的第一偏差信号，根据所述高度差生成视角角度差的第二偏差信号，根据所述水平差生成视角角度差的第三偏差信号，根据所述第一偏差信号、第二偏差信号、第三偏差信号进行加权计算，确定视角差的调整的第一控制信号。

6.如权利要求5所述的方法，其特征在于，所述调整显示屏幕中显示区域具体包括：根据所述拍摄视角差，调整所述第一显示区域由第一位置向第二位置移动，以调整视频拍摄过程中的视角差。

7.如权利要求6所述的方法，其特征在于，所述生成视频包括：生成第一预制视频，对所述第一预制视频进行调整，得到第二预制视频，对第二预制视频进行连贯处理，得到最终视频。

8.如权利要求7所述的方法，其特征在于，所述第一预制视频包括第一完整视频和第一帧显示视频，所述第一完整视频根据调整视频拍摄过程中的视角差过程中，在第一显示区域显示的完整视频；所述第一帧显示视频将视频分成一帧一帧的方式进行显示，且包括第一显示区域和第二显示区域的视频，将第一显示区域和第二显示区域通过间隔符间隔开，在进行帧显示视频过程中，可以将第二显示区域的视频至少部分的调整到第一显示区域中，以进行视频显示调整，得到第二预制视频。

9.如权利要求8所述的方法，其特征在于，比较第二预制视频和第一预制视频，判断第二显示区域调整到第一显示区域的值是否大于第一阈值，如果大于第一阈值，则进行回调至少部分第二显示区域，判断所述第二显示区域调整到第一显示区域的值是否大于第二阈值，如果大于第二阈值小于第一阈值，则将两个视频图像帧之间进行连贯模糊化处理，如果小于第二阈值，则直接生成视频。

10.一种视频拍摄目标跟踪装置，其特征在于，包括如权利要求1-9任意一项所述的方法，所述装置包括至少一个摄像头。