CN113472999B - 一种智能设备及其控制方法 - Google Patents

Abstract

本发明公开了一种智能设备及其控制方法，在用户开启目标跟踪功能，且用户确定待跟踪目标时，确定待跟踪目标的观影视角对应的目标视频，并根据待跟踪目标的移动距离、以及当前确定出的视频放大倍数，继续显示当前显示的目标视频。如此，在对待跟踪目标进行跟踪显示时，可以根据待跟踪目标的移动距离、以及当前确定出的视频放大倍数，适时地调整要显示的目标视频，使得在目标视频显示时，增加画面切换的连贯性，避免因画面的急速切换导致部分画面丢失，同时还可以避免因不同视点对应的视频之间的频繁切换而出现的抖动，提高视频的显示效果，从而提高用户的观影感受。

Description

一种智能设备及其控制方法

技术领域

本发明涉及自由视点技术领域，尤指一种智能设备及其控制方法。

背景技术

自由视点技术是一种全新的视频技术，可以应用在直播环境中，通过多相机精确的同步控制，对画面进行不间断地采集，可以保证直播精彩画面的同步和保存，实现用户在360°自由视角地观赛。

然而，虽然用户可以自由切换观影视角，但若要频繁地切换观影视角，可能会导致显示的画面出现抖动，导致用户的观影效果降低。

那么，如何避免频繁切换观影视角时引起的抖动，提高观影效果，是本领域技术人员亟待解决的技术问题。

发明内容

本发明实施例提供了一种智能设备及其控制方法，用以避免频繁切换观影视角时引起的抖动，提高观影效果。

第一方面，本发明实施例提供了一种智能设备，包括：

显示器，被配置为显示图像；

处理器，被配置为：

在用户开启目标跟踪功能，且所述用户确定出待跟踪目标时，确定所述待跟踪目标的观影视角对应的目标视频；其中，在将所述用户确定出所述待跟踪目标的时刻定义为第一时刻，且根据预设的视角切换周期，将每次到达所述视角切换周期的时刻定义为第二时刻，所述第一时刻、以及每个所述第二时刻均对应确定出一个时长为所述视角切换周期的所述目标视频；

根据所述显示器当前显示的所述目标视频中已显示的视频，确定所述待跟踪目标的移动距离；

根据确定出的所述待跟踪目标的移动距离、以及当前确定出的视频放大倍数，控制所述显示器继续显示当前显示的所述目标视频。

第二方面，本发明实施例提供了一种智能设备的控制方法，包括：

在用户开启目标跟踪功能，且所述用户确定出待跟踪目标时，确定所述待跟踪目标的观影视角对应的目标视频；其中，在将所述用户确定出所述待跟踪目标的时刻定义为第一时刻，且根据预设的视角切换周期，将每次到达所述视角切换周期的时刻定义为第二时刻，所述第一时刻、以及每个所述第二时刻均对应确定出一个时长为所述视角切换周期的所述目标视频；

根据当前显示的所述目标视频中已显示的视频，确定所述待跟踪目标的移动距离；

根据确定出的所述待跟踪目标的移动距离、以及当前确定出的视频放大倍数，继续显示当前显示的所述目标视频。

本发明有益效果如下：

本发明实施例提供的一种智能设备及其控制方法，在用户开启目标跟踪功能，且用户确定待跟踪目标时，确定待跟踪目标的观影视角对应的目标视频，并根据待跟踪目标的移动距离、以及当前确定出的视频放大倍数，继续显示当前显示的目标视频。如此，在对待跟踪目标进行跟踪显示时，可以根据待跟踪目标的移动距离、以及当前确定出的视频放大倍数，适时地调整要显示的目标视频，使得在目标视频显示时，增加画面切换的连贯性，避免因画面的急速切换导致部分画面丢失，同时还可以避免因不同视点对应的视频之间的频繁切换而出现的抖动，提高视频的显示效果，从而提高用户的观影感受。

附图说明

图1为本发明实施例中提供的一种智能设备的结构示意图；

图2为本发明实施例中提供的图像采集设备布置情况示意图；

图3为本发明实施例中提供的具体实施例的流程图；

图4为本发明实施例中提供的一种智能设备的控制方法的流程图；

图5为本发明实施例中提供的一种自由视点控制系统的结构示意图。

具体实施方式

下面将结合附图，对本发明实施例提供的一种智能设备及其控制方法的具体实施方式进行详细地说明。需要说明的是，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供了一种智能设备，如图1所示，可以包括：

显示器101，被配置为显示图像；

处理器102，被配置为：

在用户开启目标跟踪功能，且用户确定待跟踪目标时，确定待跟踪目标的观影视角对应的目标视频；其中，在将用户确定出待跟踪目标的时刻定义为第一时刻，且根据预设的视角切换周期，将每次到达视角切换周期的时刻定义为第二时刻，第一时刻、以及每个第二时刻均对应确定出一个时长为视角切换周期的目标视频；

根据显示器101当前显示的目标视频中已显示的视频，确定待跟踪目标的移动距离；

根据确定出的待跟踪目标的移动距离、以及当前确定出的视频放大倍数，控制显示器101继续显示当前显示的目标视频。

如此，在对待跟踪目标进行跟踪显示时，可以根据待跟踪目标的移动距离、以及当前确定出的视频放大倍数，适时地调整要显示的目标视频，使得在目标视频显示时，增加画面切换的连贯性，避免因画面的急速切换导致部分画面丢失，同时还可以避免因不同视点对应的视频之间的频繁切换而出现的抖动，提高视频的显示效果，从而提高用户的观影感受。

可选地，在本发明实施例中，处理器，被配置为：

在第一时刻和每个第二时刻，均执行以下过程：

确定第一时刻或当前第二时刻待跟踪目标与N个视频对应的N个视点之间的位置关系；其中，N个视频包括：根据M个图像采集设备采集到的图像形成的M个视频、以及根据M个图像采集设备采集到的图像确定出的N-M个虚拟视频；N和M均为大于2的整数，且N大于M；

根据确定出的位置关系，从N个视点中，筛选出满足预设的筛选规则的目标视点；

将目标视点对应的视频确定为目标视频；

其中，筛选规则包括：在第一时刻或每个第二时刻，待跟踪目标距离目标视点的中心点最近。

例如，在t1时刻(即上述内容中提及的第一时刻)时，确定出用户选择出了待跟踪目标，此时，处理器可以根据位置关系，确定在t1时刻N个视点中哪个视点满足筛选规则，假设标记为3的视点(即视点3)满足筛选规则，那么则从t1时刻开始，将视点3对应的视频确定为目标视频；

假设切换周期为10s，在t1+10s＝t2(即上述内容中提及的第二时刻)时，重新确定t2时刻N个视点中哪个视点满足筛选规则，假设标记为5的视点(即视点5)满足筛选规则，那么则从t2时刻开始，将视点5对应的视频确定为目标视频；

在t2+10s＝t3(即上述内容中提及的下一个第二时刻)时，重新确定t3时刻N个视点中哪个视点满足筛选规则，假设还是视点3满足筛选规则，那么则从t3时刻开始，将视点3对应的视频确定为目标视频；

在t3+10s＝t4(即上述内容中提及的再下一个第二时刻)时，重新确定t4时刻N个视点中哪个视点满足筛选规则，假设依然是视点3满足筛选规则，那么继续将视点3对应的视频确定为目标视频；

假设N个视频为一场比赛，那么在该比赛结束时，则处理器可以控制显示器当前的比赛内容显示结束。

如此，可以确定出包括待跟踪目标的目标视频，从而实现目标跟踪显示，同时实现视角的自动切换，提高自由视点技术的智能化和人性化。

并且，对于N个视频而言，可以包括两部分：

1、根据M个图像采集设备采集到的图像形成的视频；

也就是说，在设置有M个图像采集设备时，每个图像采集设备可以看作是一个视点，此时可以得到M个视点对应的视频。

2、根据M个图像采集设备采集到的图像确定出的N-M个虚拟视频；

由于图像采集设备设置数量的原因，且图像采集设备的采集角度固定时，相邻两个图像采集设备之间的画面可能无法采集到，此时，可以根据第i个图像采集设备和第i+1个图像采集设备采集到的画面，按照虚拟视点生成算法，计算出第i个图像采集设备和第i+1个图像采集设备之间的视点对应的视频，并将计算出的视频定义为虚拟视频(因并不是直接采集得到的，而是计算得到的，所以称之为虚拟视频)。

具体地，在本发明实施例中，图像采集设备可以但不限于为：摄像头。

并且，智能设备还可以包括扬声器，该扬声器可以与显示器同步播放，以便于用户在看到自由视点视频时还可以听到音频，提高观看感受。

对应地，智能设备还可以包括音频采集器，被配置为在图像采集设备采集图像的同时采集音频数据，以便于后续实现音频播放。

此外，可选地，在设置视角切换周期时，可以根据用户的观看需求、视角切换时画面的显示效果等因素进行设置，在此并不限定。

需要说明的是，上述内容中提及的图像采集设备的采集角度是固定的，此时每个图像采集设备可以称之为一个视点或一个视角；当然，虚拟视频对应的视点，可以理解为虚拟视点或虚拟视角。

在进行视角切换或视点切换时，可以理解为对N个视点对应的视频进行切换，从而有利于实现目标的跟踪显示。

具体地，在本发明实施例中，筛选规则中提及的在第一时刻或每个第二时刻，待跟踪目标距离目标视点的中心点最近，可以理解为：

以第一时刻为例，目标视点在第一时刻对应一帧画面(简称为画面M)，待跟踪目标距离画面M的中心点最近。

如此，可以使得筛选出的目标视点的画面能够有效捕捉到待跟踪目标，且使得用户在观看视频时可以从更好的角度观看待跟踪目标。

具体地，在本发明实施例中，处理器，被配置为：

确定N个视点的位置信息；

根据N个视点的位置信息、以及N个视频在第一时刻或每个第二时刻对应画面中待跟踪目标的位置，确定第一时刻或当前第二时刻待跟踪目标与N个视点之间的位置关系。

以第一时刻为例，在第一时刻，N个视点对应N个画面，至少部分画面中存在待跟踪目标，且待跟踪目标在各画面中的相对位置可能存在不同，那么根据N个视点的位置信息，以及待跟踪目标在各画面中的相对位置，即可换算出待跟踪目标与N个视点之间的位置关系。

当然，在实际情况中，在确定位置关系时，还可以采用其他方式，例如：以第一时刻为例，在第一时刻之前，如果显示器已经开始自由视点视频时，可以根据已经显示的自由视点视频，估算出第一时刻时待跟踪目标与N个视点之间的位置关系。

如此，有利于后续筛选出目标视点，从而实现目标的跟踪显示。

可选地，在本发明实施例中，处理器，被配置为：

确定当前显示的目标视频的视频放大倍数；其中，当前显示的目标视频的视频放大倍数大于零倍且不大于预设倍数，且预设倍数为：根据待跟踪目标在任一目标视频的每一帧画面中所占比例确定；

根据待跟踪目标的移动距离与预设移动范围，调整当前显示的目标视频的视频放大倍数，并根据调整后的视频放大倍数，控制显示器继续显示当前显示的目标视频。

其中，在实际情况中，在确定出目标视频时，目标视频的视频放大倍数可以为零倍，即未进行画面放大；用户为了清楚地观看待跟踪目标，一般会对画面进行放大，使得放大后显示的图像的视频放大倍数大于零，且视频放大倍数是由用户进行选择的，所以处理器可以读取到用户选择出的视频放大倍数。

并且，因在确定出目标视频时，目标视频的视频放大倍数可以为零倍，且用户在增加视频放大倍数后观看到的画面，是对目标视频中每一帧画面进行裁剪后得到的，所以处理器可以根据确定出的目标视频确定出待跟踪目标的移动距离。

例如，在某个时刻确定出的目标视频包括待跟踪目标从A位置移动至B位置的过程，通过目标视频对应的目标视点的设置位置、以及目标视点的设置与A位置和B位置的相对位置关系，可以计算出从A位置移动至B位置的移动距离。

由于移动距离有大有小，所以可以根据待跟踪目标的移动距离与预设移动范围之间的大小关系，调整当前显示的目标视频的视频放大倍数，从而可以根据调整后的视频放大倍数，控制显示器继续显示当前显示的目标视频，进一步地，可以增加待跟踪目标的移动过程显示画面的连贯性，避免因画面的急速切换导致部分画面丢失，消除了画面抖动的现象。

当然，在实际情况中，对于预设移动范围的设置，可以根据实际情况、处理器的运算能力和处理速度等因素进行设置，在此并不限定。

可选地，为了避免用户无限放大画面，进而避免造成强烈的画面抖动，可以对视频放大倍数进行限制，使得：当前显示的目标视频的视频放大倍数大于零倍且不大于预设倍数，且预设倍数为：根据待跟踪目标在任一目标视频的每一帧画面中所占比例确定。

例如，预设倍数可以但不限于为：待跟踪目标在画面中所占比例的十分之一。

下面根据移动距离，分情况说明如何控制显示器显示目标视频。

情况1：移动距离大于预设移动范围中的任一值。

可选地，在本发明实施例中，处理器，被配置为：

在确定出待跟踪目标的移动距离大于预设移动范围中的任一值时，将当前显示的目标视频的视频放大倍数缩小至第一目标倍数；其中，第一目标倍数对应的视频包括：移动距离大于预设移动范围中的任一值时的移动过程；

根据第一目标倍数，控制显示器继续显示当前显示的目标视频。

例如，参见图2所示，以一场篮球赛为例，在球场周边设置有10个图像采集设备(用白色填充的三角表示)，通过这10个图像采集设备可以确定出8个虚拟视点(用黑色填充的五角星表示)，所以这个球场对应了18个视点(包括10个图像采集设备对应的视点、以及8个虚拟视点)；每个视点采集到的画面范围均可以覆盖全场，只是不同视点对应不同的采集角度(图中未示出)；

假设待跟踪目标为篮球，且篮球从前场中的A位置移动至后场中的B位置时，如图2所示，此时可以认为移动距离超出预设移动范围，若用户此时设置的视频放大倍数较大时，因篮球远距离移动，在裁剪画面时需要快速定位篮球，使得画面裁剪时需要处理大量的数据，给画面裁剪带来较大的运算压力；

在确定出篮球的移动距离超出预设移动范围时，可以将视频放大倍数缩小，且缩小至显示的视频可以包括从A位置到B位置的移动过程，从而可以根据缩小后的视频放大倍数继续显示目标视频。

从而，在根据缩小后的视频放大倍数继续显示目标视频时，可以减少画面裁剪时的运算量，进而减少画面裁剪的压力，进而可以流畅地显示待跟踪目标的移动过程，消除了画面的抖动。

具体地，在本发明实施例中，第一目标倍数可以但不限于为零倍。

如此，在根据第一目标倍数继续显示目标视频时，因第一目标倍数为0，所以无需对画面进行裁剪，即确定出的目标视频无需进行裁剪处理可以直接显示出来，从而消除了画面裁剪的压力，因无需进行画面裁剪，所以最终消除了画面的抖动。

情况2：移动距离小于预设移动范围中的任一值。

可选地，在本发明实施例中，处理器，被配置为：

在确定出待跟踪目标的移动距离小于预设移动范围中的任一值，且预设时间内在两个区域之间来回移动时，根据视角切换周期、以及当前显示的目标视频，确定待显示的第三视频；

将第三视频的视频放大倍数缩小至第二目标倍数；其中，第二目标倍数对应的视频包括：移动距离小于预设移动范围中的任一值且在两个区域之间来回移动的过程；

根据第二目标倍数，控制显示器显示第三视频。

其中，预设时间内在两个区域之间来回移动，可以理解为：

在一段时间内，待跟踪目标在C位置和D位置之间来回移动，或者，待跟踪目标在C位置附近和D位置附近来回移动，此时C位置和其附近位置、以及D位置和其附近位置，分别为两个区域。

例如，以待跟踪目标为篮球为例，运动员在运球的过程中，可能会在出现某段时间内(例如但不限于1分钟内)在两个区域之间来回运球的情况，且两个区域之间的距离较小。

如果视角切换周期设置的较小，假设但不限于设置为3秒，且篮球1分钟内在两个相距较小的区域之间来回移动时，因每到视角切换周期就需要重新确定出一个目标视点对应的目标视频，所以因视角切换周期较短，可能会出现显示的画面在两个视点之间来回切换的情况，最终导致画面抖动。

因此，在此情况2中，可以根据视角切换周期、以及当前显示的目标视频，重新确定出待显示的第三视频，再对第三视频的视频放大倍数进行缩小，使得缩小视频放大倍数后显示的图像，可以包括待跟踪目标在两个相距较小的区域之间来回移动的过程，避免显示的画面在两个视点之间来回切换，从而消除画面抖动。

具体地，在本发明实施例中，处理器，被配置为：

判断视角切换周期是否小于第三预设阈值；

若是，且在连续k个视角切换周期内，第一视点对应的视频和第二视点对应的视频交替显示时，根据第一视点对应的视频，和/或第二视点对应的视频，确定第三视频；其中，k为大于2的整数，且当前显示的目标视频为：第一视点对应的视频或第二视点对应的视频；

若否，且在当前显示的目标视频中，连续k帧画面为交替显示的第一画面和第二画面时，将当前显示的目标视频确定为第三视频。

其中，第三预设阈值可以根据实际情况进行设置，在此并不限定。

如此，可以根据视角切换周期和当前显示的目标视频，确定出第三视频，从而有利于后续对第三视频进行处理，以消除画面抖动。

具体地，在本发明实施例中，若将当前显示的目标视频的视频放大倍数定义为参考倍数时，第二目标倍数不大于参考倍数的二分之一。

并且，还可以设置为：调整视频放大倍数后，使得移动过程对应的画面位于显示器的中心区域。

如此，在根据第二目标倍数显示第三视频时，可以尽可能地避免因视角切换周期较小而引起两个视点之间来回切换，同时还可以尽可能地避免在视角切换周期不是很小时在两个画面之间来回切换，最大程度地减少画面的切换，保证移动过程显示的流程性，从而消除画面抖动。

下面以两个具体例子，对此情况2进行详细说明。

例如，在视角切换周期小于第三预设阈值时，可以认为视角切换周期的设置的较小，且假设：

在第i-1个视角切换周期内，显示的是第一视点对应的视频，且该图像的视频放大倍数为20倍；

在第i个视角切换周期内，显示的是第二视点对应的视频，且该图像的视频放大倍数为20倍；

在第i+1个视角切换周期内，显示的依然是第一视点对应的视频，且该图像的视频放大倍数为20倍；

此时：

可以将第一视点对应的视频确定为第三视频；

或，将第二视点对应的视频确定为第三视频；

或，根据第一视点对应的视频和第二视点对应的视频，按照视频生成算法，确定出一个新的视频，将这个新的视频确定为第三视频。

并且，在确定第三视频时，可以是在：

第i+1个视角切换周期到达且确定出需要显示第一视点对应的视频时，确定第三视频；

或，第i+2个视角切换周期到达且确定出需要显示第二视点对应的视频时，确定第三视频。

然后，以将第一视点对应的视频确定为第三视频为例，将第一视点对应的视频的视频放大倍数，从20倍缩小至10倍；

接着，以10倍的视频放大倍数，继续显示第一视点对应的视频。

又例如，在视角切换周期不小于第三预设阈值时，可以认为视角切换周期并没有设置的较小，且假设在第i个视角切换周期内显示的视频中：

第j-1帧画面为待跟踪目标在C位置时对应的第一画面，且该画面的放大倍数为30倍；

第j帧画面为待跟踪目标在D位置时对应的第一画面，且该画面的放大倍数为30倍；

第j+1帧画面依然为待跟踪目标在C位置时对应的第一画面，且该画面的放大倍数为30倍；

此时，可以直接将第i个视角切换周期内显示的视频确定为第三视频。

并且，在第i个视角切换周期内显示的视频的视频放大倍数始终为30倍时，可以将第三视频的视频放大倍数，从30倍缩小至10倍；

接着，以10倍的视频放大倍数，继续显示第三视频。

在具体实施时，不管是上述情况1还是情况2，在根据调整后的视频放大倍数，控制显示器继续显示当前显示的目标视频之后时，处理器，被配置为：

若将当前显示的目标视频定义为第一视频，在到达视角切换周期时，将重新确定出的目标视频定义为第二视频时，根据第一视频调整前的视频放大倍数，控制显示器显示第二视频。

也就是说，在第i个视角切换周期对应的目标视频为第一视频时，第i+1个视角切换周期对应的目标视频即为第二视频，因在显示第一视频时，根据待跟踪目标的移动距离与预设移动范围，对视频放大倍数进行了调整，即从视频放大倍数W1调整到了合适的视频放大倍数(记为视频放大倍数W2)，那么：

在显示第二视频时，可以依然采用视频放大倍数W1继续显示第二视频。

如此，可以继续按照用户需要的视频放大倍数继续显示视频，满足用户的观看需求，同时还可以避免出现画面抖动，提高画面的流畅度。

在具体实施时，在本发明实施例中，用户确定待跟踪目标的方法，可以包括：

方式1：

具体过程可以包括：

过程1：用户在开启目标跟踪功能时，处理器可以控制显示器显示包括多个跟踪目标的跟踪列表；

其中，用户开启目标跟踪功能的方式，可以包括：

1、显示器可以显示有目标跟踪功能开启的对话框，用户通过该对话框开启；

2、智能设备设置有目标跟踪功能开启的硬件按键，用户通过按下硬件按键开启。

当然，在实际情况中，目标跟踪功能的开启方式，除了上述两种方式之外，还可以采用以下方式，如语音控制的方式等，在此并不限定。

过程2：用户从跟踪列表中选择出待跟踪目标。

方式2：

具体过程可以包括：

显示器显示有视频时，用户直接点击视频中出现的待跟踪目标；

处理器控制显示器显示确认对话框；

用户在确认对话框中选择确认时，确定待跟踪目标。

当然，在实际情况中，用户确定待跟踪目标的方式，并不限于上述方式1和方式2，还可以是其他方式，在此并不限定。

下面结合具体实施例，对智能设备的工作过程进行说明。

结合图3所示。

S301、在用户开启目标跟踪功能，且用户确定待跟踪目标时，确定待跟踪目标的观影视角对应的目标视频；

S302、确定当前显示的目标视频中，待跟踪目标的移动距离、以及当前显示的目标视频的视频放大倍数W；

S303、判断待跟踪目标的移动距离是否属于预设移动范围；若是，执行S304；若否，执行S305；

S304、按照确定出的视频放大倍数W，继续显示目标视频；执行S312；

S305、判断待跟踪目标的移动距离是否大于预设移动范围中的任一值；若是，执行S306；若否，执行S307；

S306、将当前显示的目标视频的视频放大倍数W缩小至第一目标倍数，并根据第一目标倍数，控制显示器继续显示当前显示的目标视频；执行S312；

说明一点，在继续显示当前显示的目标视频时，若待跟踪目标的这种远距离移动结束，之后在预设移动范围内移动，且还未到达视角切换周期时，可以将视频放大倍数从第一目标倍数放大至视频放大倍数W，继续以视频放大倍数W显示目标视频。

例如，假设视角切换周期内的某个时刻(即T1时刻)，确定出待跟踪目标的移动距离大于预设移动范围中的任一值时，将视频放大倍数从W缩小至M1(即上述内容中提及的第一目标倍数)，以视频放大倍数M1继续显示视频；

在经过一段时间后到达T2时刻时，待跟踪目标的这种远距离移动结束，且依然未到达视角切换周期，那么：如果接下来待跟踪目标的移动距离在预设移动范围内时，将视频放大倍数可以从M1放大至W，以视频放大倍数W继续显示视频。

S307、判断待跟踪目标是否在预设时间内在两个区域之间来回移动；若是，执行S308；若否，回到S304；

S308、判断视角切换周期是否小于第三预设阈值；若是，执行S309；若否，执行S310；

S309、在连续k个视角切换周期内，第一视点对应的视频和第二视点对应的视频交替显示时，根据第一视点对应的视频，和/或第二视点对应的视频，确定第三视频；执行S311；

S310、在当前显示的目标视频中，连续k帧画面为交替显示的第一画面和第二画面时，将当前显示的目标视频确定为第三视频；执行S311；

S311、将第三视频的视频放大倍数W缩小至第二目标倍数，并根据第二目标倍数，控制显示器显示第三视频；执行S312；

S312、在到达视角切换周期时，根据视频放大倍数W，控制显示器显示重新确定出的目标视频。

基于同一发明构思，本发明实施例提供了一种智能设备的控制方法，该控制方法的实现原理与前述一种智能设备的实现原理类似，该控制方法的具体实施方式可参见前述智能设备的实施例，重复之处不再赘述。

具体地，本发明实施例提供的一种智能设备的控制方法，如图4所示，包括：

S401、在用户开启目标跟踪功能，且用户确定出待跟踪目标时，确定待跟踪目标的观影视角对应的目标视频；其中，在将用户确定出待跟踪目标的时刻定义为第一时刻，且根据预设的视角切换周期，将每次到达视角切换周期的时刻定义为第二时刻，第一时刻、以及每个第二时刻均对应确定出一个时长为视角切换周期的目标视频；

S402、根据当前显示的目标视频中已显示的视频，确定待跟踪目标的移动距离；

S403、根据确定出的待跟踪目标的移动距离、以及当前确定出的视频放大倍数，继续显示当前显示的目标视频。

基于同一发明构思，本发明实施例提供了一种自由视点控制系统，如图5所示，包括：如本发明实施例提供的上述智能设备501。

可选地，在本发明实施例中，如图5所示，还可以包括：M个图像采集设备502。

需要说明的是，可选地，在实际情况中，可以将M个图像采集设备作为一组采集设备，对应地，智能设备可以与多组采集设备连接，且不同组采集设备采集的图像对应的场景不同；此时：

由于智能设备可以接收到多组采集设备采集到的图像，所以智能设备可以确定出多个不同的自由视点视频，然后形成视频列表；

智能设备中的显示器可以显示该视频列表，以便于用户根据观看选择，从视频列表选择出想要观看的视频。

例如，以智能设备与三组采集设备连接为例，三组采集设备分别记为第一组采集设备、第二组采集设备和第三组采集设备，且第一组采集设备布置在篮球场，第二组采集设备布置在乒乓球场，第三组采集设备布置在羽毛球场；

若假设篮球场、乒乓球场和羽毛球场三个场地在不同的场馆，且三个场馆同时在进行比赛时，那么：

第一组采集设备采集到的篮球赛的比赛视频，即为比赛视频1；

第二组采集设备采集到的乒乓球赛的比赛视频，即为比赛视频2；

第三组采集设备采集到的羽毛球赛的比赛视频，即为比赛视频3；

在智能设备获取到三组采集设备采集的图像时，可以形成包括比赛视频1、比赛视频2和比赛视频3的视频列表；

若用户从智能设备显示的视频列表中选择比赛视频3时，说明用户想要观看羽毛球赛的比赛视频，此时：智能设备可以切换显示界面，使得显示界面中显示有比赛视频3。

在实际情况中，视频列表中包括的各自由视点视频之间存在的区别，可以但不限于为视频内容的不同，此处只是举例说明，可以根据实际需要进行设置，在此并不限定。

如此，可以便于用户根据自己的观看需求进行选择，从而为用户提供更多的选择功能，提高用户的体验感受。

当然，可选地，在本发明实施例中，还可以包括：连接于M个图像采集设备和智能设备之间的服务器；

服务器，被配置为：

对M个图像采集设备进行采集控制，并获取M个图像采集设备采集到的画面；

确定M个图像采集设备采集到的画面对应的视频、以及根据M个图像采集设备采集到的图像确定出的N-M个虚拟视频，得到N个视点对应的N个视频；

将N个视频发送至智能设备；

智能设备，被配置为：

在用户确定开启目标跟踪功能时，接收用户输入的对待跟踪目标进行跟踪显示的指令；

接收服务器发送的N个视频；

确定第一时刻或当前第二时刻待跟踪目标与N个视点的位置关系；

根据确定出的位置关系，从N个视点中，筛选出满足预设的筛选规则的目标视点；

将目标视点对应的视频确定为目标视频。

也就是说，服务器通过对M个图像采集设备进行控制，可以获得M个图像采集设备采集到的画面，然后将这些画面进行处理后发送至智能设备，此时：

智能设备获取到的是N个视频；

在智能设备确定出目标视点时，智能设备可以将目标视点对应的视频剪辑出来进行显示，而对于其他视点对应的视频则可以被过滤掉。

当然，还可以设置为：

智能设备接收到用户发出的对待跟踪目标进行跟踪显示的指令时，可以向服务器发送指示消息；

服务器在接收到指示消息时，从N个视点中筛选出目标视点；

服务器仅将目标视点对应的视频发送至智能设备，以使智能设备仅接收且显示目标视频。

也就是说，筛选目标视点和过滤图像的过程由服务器来完成，智能设备仅用于接收服务器处理好的图像并直接进行显示即可。

在实际情况中，智能设备、服务器和图像采集设备之间的设置关系，可以根据实际需要进行选择和设置，只要能够实现目标的跟踪显示即可，在此并不限定。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (12)

1.一种智能设备，其特征在于，包括：

显示器，被配置为显示图像；

处理器，被配置为：

在用户开启目标跟踪功能，且所述用户确定出待跟踪目标时，确定所述待跟踪目标的观影视角对应的目标视频；所述目标视频为自由视点视频；

根据所述显示器当前显示的所述目标视频中已显示的视频，确定所述待跟踪目标的移动距离；

确定当前显示的所述目标视频的视频放大倍数；其中，当前显示的所述目标视频的视频放大倍数大于零倍且不大于预设倍数，且所述预设倍数为：根据所述待跟踪目标在任一所述目标视频的每一帧画面中所占比例确定；

根据所述待跟踪目标的移动距离与预设移动范围，调整当前显示的所述目标视频的视频放大倍数，并根据调整后的视频放大倍数，控制所述显示器继续显示当前显示的所述目标视频；

所述处理器，被配置为：

在确定出所述待跟踪目标的移动距离小于所述预设移动范围中的任一值，且预设时间内在两个区域之间来回移动时，根据预设的视角切换周期、以及当前显示的所述目标视频，确定待显示的第三视频；

将所述第三视频的视频放大倍数缩小至第二目标倍数；其中，所述第二目标倍数对应的视频包括：移动距离小于所述预设移动范围中的任一值且在所述两个区域之间来回移动的过程；

根据所述第二目标倍数，控制所述显示器显示所述第三视频。

2.如权利要求1所述的智能设备，其特征在于，所述处理器，被配置为：

若将当前显示的所述目标视频定义为第一视频，在到达所述视角切换周期时，将重新确定出的所述目标视频定义为第二视频时，根据所述第一视频调整前的视频放大倍数，控制所述显示器显示所述第二视频。

3.如权利要求1所述的智能设备，其特征在于，所述处理器，被配置为：

在确定出所述待跟踪目标的移动距离大于所述预设移动范围中的任一值时，将当前显示的所述目标视频的视频放大倍数缩小至第一目标倍数；其中，所述第一目标倍数对应的视频包括：移动距离大于所述预设移动范围中的任一值时的移动过程；

根据所述第一目标倍数，控制所述显示器继续显示当前显示的所述目标视频。

4.如权利要求3所述的智能设备，其特征在于，所述第一目标倍数为零倍。

5.如权利要求1所述的智能设备，其特征在于，若将当前显示的所述目标视频的视频放大倍数定义为参考倍数时，所述第二目标倍数不大于所述参考倍数的二分之一。

6.如权利要求1所述的智能设备，其特征在于，所述处理器，被配置为：

判断所述视角切换周期是否小于第三预设阈值；

若是，且在连续k个视角切换周期内，第一视点对应的视频和第二视点对应的视频交替显示时，根据所述第一视点对应的视频，和/或所述第二视点对应的视频，确定所述第三视频；其中，k为大于2的整数，且当前显示的所述目标视频为：所述第一视点对应的视频或所述第二视点对应的视频；

若否，且在当前显示的所述目标视频中，连续k帧画面为交替显示的第一画面和第二画面时，将当前显示的所述目标视频确定为所述第三视频。

7.如权利要求1-6任一项所述的智能设备，其特征在于，所述处理器，被配置为：

在将所述用户确定出所述待跟踪目标的时刻定义为第一时刻，且根据所述视角切换周期，将每次到达所述视角切换周期的时刻定义为第二时刻，在所述第一时刻和每个所述第二时刻，均执行以下过程：

确定所述第一时刻或当前第二时刻所述待跟踪目标与N个视频对应的N个视点之间的位置关系；其中，所述N个视频包括：根据M个图像采集设备采集到的图像形成的M个视频、以及根据所述M个图像采集设备采集到的图像确定出的N-M个虚拟视频；N和M均为大于2的整数，且N大于M；

根据确定出的所述位置关系，从所述N个视点中，筛选出满足预设的筛选规则的目标视点；

将所述目标视点对应的视频确定为所述目标视频；

其中，所述筛选规则包括：在所述第一时刻或每个所述第二时刻，所述待跟踪目标距离所述目标视点的中心点最近。

8.一种智能设备的控制方法，其特征在于，包括：

在用户开启目标跟踪功能，且所述用户确定出待跟踪目标时，确定所述待跟踪目标的观影视角对应的目标视频；其中，在将所述用户确定出所述待跟踪目标的时刻定义为第一时刻，且根据预设的视角切换周期，将每次到达所述视角切换周期的时刻定义为第二时刻，所述第一时刻、以及每个所述第二时刻均对应确定出一个时长为所述视角切换周期的所述目标视频；所述目标视频为自由视点视频；

根据当前显示的所述目标视频中已显示的视频，确定所述待跟踪目标的移动距离；

确定当前显示的所述目标视频的视频放大倍数；其中，当前显示的所述目标视频的视频放大倍数大于零倍且不大于预设倍数，且所述预设倍数为：根据所述待跟踪目标在任一所述目标视频的每一帧画面中所占比例确定；

根据所述待跟踪目标的移动距离与预设移动范围，调整当前显示的所述目标视频的视频放大倍数，并根据调整后的视频放大倍数，控制显示器继续显示当前显示的所述目标视频；

其中，根据所述待跟踪目标的移动距离与预设移动范围，调整当前显示的所述目标视频的视频放大倍数，并根据调整后的视频放大倍数，控制显示器继续显示当前显示的所述目标视频，包括：

在确定出所述待跟踪目标的移动距离小于所述预设移动范围中的任一值，且预设时间内在两个区域之间来回移动时，根据所述视角切换周期、以及当前显示的所述目标视频，确定待显示的第三视频；

将所述第三视频的视频放大倍数缩小至第二目标倍数；其中，所述第二目标倍数对应的视频包括：移动距离小于所述预设移动范围中的任一值且在所述两个区域之间来回移动的过程；

根据所述第二目标倍数，控制所述显示器显示所述第三视频。

9.如权利要求8所述的控制方法，其特征在于，还包括：

在控制所述显示器继续显示当前显示的所述目标视频之后，若将当前显示的所述目标视频定义为第一视频，在到达所述视角切换周期时，将重新确定出的所述目标视频定义为第二视频时，根据所述第一视频调整前的视频放大倍数，控制所述显示器显示所述第二视频。

10.如权利要求8所述的控制方法，其特征在于，根据所述待跟踪目标的移动距离与预设移动范围，调整当前显示的所述目标视频的视频放大倍数，并根据调整后的视频放大倍数，控制所述显示器继续显示当前显示的所述目标视频，包括：

在确定出所述待跟踪目标的移动距离大于所述预设移动范围中的任一值时，将当前显示的所述目标视频的视频放大倍数缩小至第一目标倍数；其中，所述第一目标倍数对应的视频包括：移动距离大于所述预设移动范围中的任一值时的移动过程；

根据所述第一目标倍数，控制所述显示器继续显示当前显示的所述目标视频。

11.如权利要求8所述的控制方法，其特征在于，根据所述视角切换周期、以及当前显示的所述目标视频，确定待显示的第三视频，包括：

判断所述视角切换周期是否小于第三预设阈值；

若是，且在连续k个视角切换周期内，第一视点对应的视频和第二视点对应的视频交替显示时，根据所述第一视点对应的视频，和/或所述第二视点对应的视频，确定所述第三视频；其中，k为大于2的整数，且当前显示的所述目标视频为：所述第一视点对应的视频或所述第二视点对应的视频；

若否，且在当前显示的所述目标视频中，连续k帧画面为交替显示的第一画面和第二画面时，将当前显示的所述目标视频确定为所述第三视频。

12.如权利要求8-11任一项所述的控制方法，其特征在于，确定所述待跟踪目标的观影视角对应的目标视频，包括：

在所述第一时刻和每个所述第二时刻，均执行以下过程：

确定所述第一时刻或当前第二时刻所述待跟踪目标与N个视频对应的N个视点之间的位置关系；其中，所述N个视频包括：根据M个图像采集设备采集到的图像形成的M个视频、以及根据所述M个图像采集设备采集到的图像确定出的N-M个虚拟视频；N和M均为大于2的整数，且N大于M；

根据确定出的所述位置关系，从所述N个视点中，筛选出满足预设的筛选规则的目标视点；

将所述目标视点对应的视频确定为所述目标视频；

其中，所述筛选规则包括：在所述第一时刻或每个所述第二时刻，所述待跟踪目标距离所述目标视点的中心点最近。

Images