CN113572965B - 双板书跟踪拍摄方法、装置及拍摄系统 - Google Patents
双板书跟踪拍摄方法、装置及拍摄系统 Download PDFInfo
- Publication number
- CN113572965B CN113572965B CN202110901390.XA CN202110901390A CN113572965B CN 113572965 B CN113572965 B CN 113572965B CN 202110901390 A CN202110901390 A CN 202110901390A CN 113572965 B CN113572965 B CN 113572965B
- Authority
- CN
- China
- Prior art keywords
- area
- shielding
- blackboard
- moving target
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Abstract
本发明公开一种双板书跟踪拍摄方法、装置及拍摄系统。其中,该方法包括步骤:获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;在反屏蔽区域内进行移动目标检测,判断所述移动目标在哪个反屏蔽区域内;根据判断的结果,发出预置信息,使得云台摄像机转到对应的预置位上。本发明针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题。
Description
技术领域
本发明涉及视频图像处理的技术领域,更具体地,涉及一种双板书跟踪拍摄方法、装置及拍摄系统。
背景技术
随着技术发展,多媒体技术越来越广泛地被应用在教学领域中用。目前教室里的多媒体黑板一般如图1所示,包括:教学一体机1、分居教学一体机左右两侧的第一黑板2和第二黑板3。当需要借助多媒体技术进行教学时,老师操作中间的教学一体机,当需要像传统课堂那样讲解时,老师在两侧的黑板进行比划讲解。
在远程录播教室中,一般包括:板书定位分析仪以及专门拍摄板书的摄像机。定位分析仪采用图像分析仪技术实现智能跟踪,分析老师是否在黑板进行比划讲解,并输出分析结果,让主机根据分析结果实现主输出画面的切换。
然而,对于如图1所示的多媒体黑板,目前的远程录播技术只能跟踪一个黑板,也就是说当设定好摄像机拍摄第一黑板后,它是无法再拍摄第二黑板的,为了有更好的录播效果,老师只能在第一黑板讲解。在只能够使用一个黑板进行讲解的情况下,老师讲解的效果大打折扣,大大降低了远程录播教学的效果。
发明内容
针对现有技术中个,不能够对双板书进行跟踪拍摄的缺陷,本发明提供一种双板书跟踪拍摄方法。本发明采用的技术方案如下。
第一方面,本发明提供一种双板书跟踪拍摄方法,包括步骤:
获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏蔽区域是基于第二黑板的位置设置的;
在反屏蔽区域内进行移动目标检测,判断所述移动目标在哪个反屏蔽区域内;
根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一
预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位。
在一种实施方式中,所述判断所述移动目标在哪个反屏蔽区域内的过程包括步骤:
获取所述移动目标的范围的位置信息;
根据所述移动目标的范围的位置信息基于预设的模型得出所述移动目标的范围的质点的位置;
根据所述质点的位置判断所述质点在哪个反屏蔽区域内。
在一种实施方式中,所述判断所述质点在哪个反屏蔽区域内的过程,包括步骤:
获取第一反屏蔽区域的面积,获取第二反屏蔽区域的面积;
其中,所述反屏蔽区域为多边形区域;
计算所述质点与第一反屏蔽区域的每一条边所围成的三角形的面积,得出
第一总面积,计算所述质点与第二反屏蔽区域的每一条边所围成的三角形的面积,得出第二总面积;
比较第一总面积与第一反屏蔽区域的面积,比较第二总面积与第二反屏蔽区域的面积,并根据比较结果判断所述移动目标在哪个反屏蔽区域内;
其中,在第一总面积等于第一反屏蔽区域的面积时,得出所述移动目标在第一反屏蔽区域内;
在第二总面积等于第二反屏蔽区域的面积时,得出所述移动目标在第二反屏蔽区域内。
在一种实施方式中,所述判断所述质点在哪个反屏蔽区域内的过程,包括
步骤:
将所述第一反屏蔽区域拆分为两个三角形区域,将所述第二反屏蔽区域拆
分为两个三角形区域;
其中,所述两个所述反屏蔽区域均为四边形区域;
判断所述质点在哪个三角形区域内;
根据所述质点在哪个三角形区域内的判断结果得出所述质点在对应的反蔽区域内。
在一种实施方式中,还包括步骤:
根据判断所述移动目标在哪个反屏蔽区域内的结果,发出画面切换信息;其中,在所述移动目标在所述第一反屏蔽区域或第二反屏蔽区域内时,发
出画面切换信息,所述切换信息用于指示控制设备将主输出画面切换到云台摄像机的拍摄画面。
在一种实施方式中,还包括步骤:
接收屏蔽区域划定指令,根据所述划定指令重新划定反屏蔽区域;
其中,所述划定指令包括:所述第一反屏蔽区域的第一顶点的位置信息和所述第二反屏蔽区域的第二顶点的位置信息。
第二方面,本发明还提供一种双板书跟踪拍摄装置,包括:
视频获取单元,用于获取源视频,所述源视频中包括:第一反屏蔽区域和
第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏蔽区域是基于第二黑板的位置设置的;
判断单元,用于在反屏蔽区域内进行移动目标检测,判断所述移动目标在
哪个反屏蔽区域内;
发送单元,根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置
信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一
预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位。
第三方面,本发明提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述任一实施方式的方法。
第四方面,本发明提供一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现上述任一实施方式的方法。
第五方面,本发明提供一种双板书跟踪拍摄系统,包括:板书定位分析仪、控制设备和云台摄像机;
所述云台摄像机被配置为包括:第一预置位和第二预置位;
所述板书定位分析仪被配置为执行上述任一实施方式所述的双板书跟踪拍摄方法。
本发明针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预
置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题,提高了录播的适用性。
附图说明
图1是现有的多媒体黑板示意图。
图2是实施例一的流程示意图。
图3是实施例一的源视频示意图。
图4是实施例一的一种实施方式的示意图。
图5是实施例二的装置示意图。
图6是实施例三的系统示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
需要说明的是,本发明实施例所涉及的术语“第一\第二\……”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\……”
在允许的情况下可以互换特定的顺序或先后次序。应该理解“第一\第二\……”
区分的对象在适当情况下可以互换,以使这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
实施例一
请参见图2,图2为本发明实施例一提供的一种双板书跟踪拍摄方法的流程示意图,该方法包括步骤S110、步骤S120和步骤S130。需要注意的是,步骤S110、步骤S120和步骤S130仅为附图标记,用于清晰解释实施例与附图2的对应关系,不代表对本实施例中的各方法步骤的顺序限定。
一般来说,本发明的方法可以用于使用图像分析技术实现智能跟踪的板书
定位分析仪,但是也同时适用于其他利用图像进行分析的设备。本实施例中以使用板书定位分析仪为例,对本发明的方法进行介绍。
步骤S110,获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏
蔽区域是基于第二黑板的位置设置的。
板书定位分析仪拍摄多媒体黑板的实时视频,如图3所示,该视频中基于两个黑板的位置,对左边的第一黑板和右边的第二黑板以外的区域进行屏蔽,因而该视频中只剩下两个反屏蔽区域区域,分别是基于第一黑板的位置设置的第一反屏蔽区域21和基于第二黑板的位置设置的第二反屏蔽区域31。本步骤中,获取该只剩下第一反屏蔽区域和第二反屏蔽区域的视频。
本方法是为了判断黑板是否被使用,所以不需要关注黑板以外的区域发生了些什么事情,因此把黑板以外的区域屏蔽掉,这样做有利于减少后续的移动目标检测占用的资源,以及可以不需要额外地判断移动目标是否在黑板区域内。
步骤S120,在反屏蔽区域内进行移动目标检测,判断所述移动目标在哪个反屏蔽区域内。
对该视频中的反屏蔽区域内的区域进行移动目标检测,例如在图3中,检测到反屏蔽区域内有移动目标——手部。在检测到移动目标后,要判断该移动目标是位于哪个反屏蔽区域内,例如在图3中,判断出该移动的手部是位于第一反屏蔽区域21内。
由于老师讲解时,一般会靠近相应的黑板并配合有相应的肢体动作,所以该相应的黑板范围内,都会出现老师的肢体动作。因此,当检测到反屏蔽区域内有移动目标,就可以从侧面反映出老师正在使用黑板进行讲解。又由于反屏蔽区域内分别是左右两块黑板的区域,所以进一步判断出移动目标在哪个反屏蔽区域内后就可以得出老师在使用哪个黑板进行讲解。
这里需要指出的是,板书定位分析仪设置的位置不同,移动物体的类型就会产生变化,这时需要指定某类型的物体为检测的移动目标。例如,板书定位分析仪设置得比较贴近黑板,可能只能够拍摄到老师的手部,由于移动目标只有一个,所以移动目标就是手部;但如果板书定位分析仪设置得较为远一点,有机会拍到老师的全身,这时就有必要指定一个身体部位(如手部)作为检测的移动目标。本方法中,优选的作为作为检测的移动目标身体部位是手部,因为老师在讲解的时候一般会用手在黑板上比划。
对于目标对象检测,可以使用基于深度学习的目标检测算法,其中,基于深度学习的目标检测算法主要分为两类:Two stage目标检测算法和One stage
目标检测算法。Two stage目标检测算法,先进行区域生成(region proposal,RP)(一个有可能包含待检物体的预选框),再通过卷积神经网络进行样本分类,任务是:特征提取->生成RP->分类/定位回归。常见的two stage目标检测算法有:R-CNN、SPP-Net、Fast R-CNN、Faster R-CNN和R-FCN等。One stage目标检测算法,不用RP,直接在网络中提取特征来预测物体分类和位置,任务是:特征提取->分类/定位回归。常见的one stage目标检测算法有:OverFeat、YOLOv1、YOLOv2、YOLOv3、SSD和RetinaNet等。
步骤S130,根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一
预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位。
对于用于拍摄两个黑板的云台摄像机,分别设置好第一和第二两个预置位。
云台摄像机在第一预置位时,对准第一黑板,拍摄第一黑板及其附近的内容,
云台摄像机在第二预置位时,对准第二黑板,拍摄第二黑板及其附近的内容。预设好两个预置位后,控制设备等待接收板书定位分析仪发出的预置信息,根据预置信息控制云台摄像机转动对应的预置位。
步骤S120中,判断出不同的位置关系,本步骤中,根据不同的位置关系发出不同的预置信息。当移动目标在所述第一反屏蔽区域内时,发出第一预置信息,当移动目标在所述第二反屏蔽区域内时,发出第二预置信息,控制设备接收到预置信息后,根据该不同类型的信息控制云台摄像机转动对应的预置位。
这里需要指出的是,这里所指的控制设备,可以是一台具体的设备,例如当本方法用于板书定位分析仪时,该控制设备就是录播主机,也可以是设备上的某一个模块,例如一台设备上既运行本方法也执行控制云台摄像机操作,那么该控制设备就是接收指令并控制云台摄像机的模块。
本发明针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题,提高了录播的适用性。
在一种实施方式中,所述判断所述移动目标在哪个反屏蔽区域内的过程包括:步骤S1201、步骤S1202和步骤S1203。
步骤S1201,获取所述移动目标的范围的位置信息。
如图3所示,检测到移动目标后,通常都有一个框框将其框住。图3中,
虚线框4内就是移动目标的范围。本步骤中,获取该移动目标的范围的位置信息。
步骤S1202,根据所述移动目标的范围的位置信息基于预设的模型得出所述移动目标的范围的质点的位置。
由于移动目标的范围比较大,可以将移动目标的范围基于预设的模型简化为一个质点,通过判断该质点在哪个反屏蔽区域内。该预设的模型就是用于确定质点的位置,例如,该质点可以是该移动目标的范围的中心点、其中一个顶点或范围内的某个指定位置的点。在获得了移动目标的范围的位置信息后,基于预设的模型就可以得出该质点的位置。
步骤S1203,根据所述质点的位置判断所述质点在哪个反屏蔽区域内。
根据该质点的位置,得出质点与两个反屏蔽区域之间的位置关系,得出质点在哪个反屏蔽区域内,质点所在的反屏蔽区域理所当然地就是移动目标所在的反屏蔽区域内。
本发明方法将移动目标简化成一个质点,通过判断质点在哪个反屏蔽区域内即可以判断移动目标在哪个反屏蔽区域内,简化了判断的流程。
在一种实施方式中,所述判断所述质点在哪个反屏蔽区域内的过程,包括:步骤S210、步骤S220和步骤S230。
本实施例中为了方便介绍,用移动目标的范围的中心点作为质点。
步骤S210,获取第一反屏蔽区域的面积,获取第二反屏蔽区域的面积;
其中,所述反屏蔽区域为多边形区域。
如图4所示,左边的四边形是第一反屏蔽区域21,右边的四边形是第二反屏蔽区域31,它们的面积分别是S21和S31,获取它们的面积值。基于板书定位分析仪设置的位置和拍摄的角度是固定的,所以第一反屏蔽区域和第二反屏蔽区域是相对固定的区域,因继而它们的面积也是为固定的值。
步骤S220,计算所述质点与第一反屏蔽区域的每一条边所围成的三角形的面积,得出第一总面积,计算所述质点与第二反屏蔽区域的每一条边所围成的三角形的面积,得出第二总面积。
如图4所示,图中点O是图3中的虚线框4的中心点,也即移动目标的范围的质点。第一反屏蔽区域有四个端点、四条边,该四条边分别是AB、BC、CD和AD,点O与每一条边分别围成一个三角形,分别是△OAB、△OBC、△OCD和△OAD。把△OAB、△OBC、△OCD和△OAD四个三角形的面积加起来,得出第一总面积S第一。类似地,点O与第二反屏蔽区域的四条边也分别围成了三角形,分别是△OA’B’、△OB’C’、△OC’D’和△OA’D’。把△OA’B’、△OB’C’、△OC’D’和△OA’D’D四个三角形的面积加起来,得出第二总面积S第二。
步骤S230,比较第一总面积与第一反屏蔽区域的面积,比较第二总面积与第二反屏蔽区域的面积,并根据比较结果判断所述移动目标在哪个反屏蔽区域内;
其中,在第一总面积等于第一反屏蔽区域的面积时,得出所述移动目标在第一反屏蔽区域内;
在第二总面积等于第二反屏蔽区域的面积时,得出所述移动目标在第二反屏蔽区域内。
如图4所示,O点在第一反屏蔽区域内,由图中可以看出,△OAB、△OBC、
△OCD和△OAD四个三角形加起来的第一总面积S第一是等于第一反屏蔽区域所形成的面积S21的。明显地从图中可以看到,第二总面积S第二是不等于第二反屏蔽区域所形成的面积S22的。
同理,假如又有另一个质点O’在第二反屏蔽区域内,该点O’与第二反屏蔽区域的四条边所分别围成的三角形的第二总面积S第二是等于第二反屏蔽区域所形成的面积S22的。
因此,可以通过比较计算而得出的第一、第二总面积与获取的第一、第二反屏蔽区域的面积就可以判断质点在哪个反屏蔽区域内,从而判断出移动目标在哪个反屏蔽区域内。
这里需要指出的是,本步骤中的相等不是绝对的相等,是大致的相等。由于计算是存在误差,所以只要在误差范围内相等的话,都认为是相等。
在一种实施方式中,所述判断所述质点在哪个反屏蔽区域内的过程,包括:
步骤S310、步骤S320和步骤S330。
同样的,本实施例中为了方便介绍,用移动目标的范围的中心点作为质点。
步骤S310,将所述第一反屏蔽区域拆分为两个三角形区域,将所述第二反屏蔽区域拆分为两个三角形区域;
其中,所述两个所述反屏蔽区域均为四边形区域。
步骤S320,判断所述质点在哪个三角形区域内。
步骤S330,根据所述质点在哪个三角形区域内的判断结果得出所述质点在对应的反屏蔽区域内。
一般来说,两个反屏蔽区域都是四边形区域,但该四边形区域有可能是凸四边形,也有可能是凹四边形。但是不论是凸四边形还是凹四边形,都可以拆分为两个三角形区域。
由于判断质点在哪个三角形区域比较简单,可以采用外积法等方法求得。得到判断结果后,可以通过该三角形是由哪个反屏蔽区域拆分而得的,从而得知该质点在反屏蔽区域上。
在一种实施方式中,所述质点为所述移动目标的范围的中心点。
在一种实施方式中,本发明的双板书跟踪拍摄方法还包括步骤S140。
步骤S140,根据判断所述移动目标在哪个反屏蔽区域内的结果,发出画面切换信息;
其中,在所述移动目标在所述第一反屏蔽区域或第二反屏蔽区域内时,发出画面切换信息,所述切换信息用于指示控制设备将主输出画面切换到云台摄像机的拍摄画面。
移动目标在第一反屏蔽区域或第二反屏蔽区域内时,说明老师正利用其中一个黑板讲解授课,这时应该重点黑板,输出画面应该是专门负责拍摄黑板的云台摄像机的画面。因此,本方法此时还发出画面切换信息,切换信息用于指示控制设备将主输出画面切换到云台摄像机的拍摄画面。
在一种实施方式中,接收屏蔽区域划定指令,根据所述划定指令重新划定
反屏蔽区域;
其中,所述划定指令包括:所述第一反屏蔽区域的第一顶点的位置信息和所述第二反屏蔽区域的第二顶点的位置信息。
在实际情况中,板书定位分析仪放置的位置和拍摄角度可能会因某些原因而发生变化,如果此时还继续使用之前所划定的屏蔽区域恐怕就不太适应新的情形了,所以可以重新设置第一和第二反屏蔽区域。当然,在没有设置好反屏蔽区域的时候,也需要设置反屏蔽区域。
本方法中,用户操作机器,在屏幕上的点出黑板的顶点,然后机器接收到这几个顶点的位置信息,把顶点连接起来,就形成了反屏蔽区域。当然,也可以通过图像识别等技术,识别出黑板的顶点,然后连接这些顶点,形成反屏蔽区域。
实施例二
与实施例一的方法相对应,如图5所示,本发明还提供一种双板书跟踪拍摄装置,包括:视频获取单元410、判断单元420和发送单元430;
视频获取单元410,用于获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏蔽区域是基于第二黑板的位置设置的;
判断单元420,用于在反屏蔽区域内进行移动目标检测,判断所述移动目
标在哪个反屏蔽区域内;
发送单元430,根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位。
本双板书跟踪拍摄装置针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题,提高了录播的适用性。
在一种实施方式中,判断单元判断所述移动目标在哪个反屏蔽区域内的过程包括步骤:
获取所述移动目标的范围的位置信息;
根据所述移动目标的范围的位置信息基于预设的模型得出所述移动目标的范围的质点的位置;
根据所述质点的位置判断所述质点在哪个反屏蔽区域内。
在一种实施方式中,判断单元判断所述质点在哪个反屏蔽区域内的过程,包括步骤:
将所述第一反屏蔽区域拆分为两个三角形区域,将所述第二反屏蔽区域拆
分为两个三角形区域;
其中,所述两个所述反屏蔽区域均为四边形区域;
判断所述质点在哪个三角形区域内;
根据所述质点在哪个三角形区域内的判断结果得出所述质点在对应的反屏蔽区域内。
在一种实施方式中,判断单元判断所述质点在哪个反屏蔽区域内的过程,包括步骤:
获取第一反屏蔽区域的面积,获取第二反屏蔽区域的面积;
其中,所述反屏蔽区域为多边形区域;
计算所述质点与第一反屏蔽区域的每一条边所围成的三角形的面积,得出第一总面积,计算所述质点与第二反屏蔽区域的每一条边所围成的三角形的面
积,得出第二总面积;
比较第一总面积与第一反屏蔽区域的面积,比较第二总面积与第二反屏蔽区域的面积,并根据比较结果判断所述移动目标在哪个反屏蔽区域内;
其中,在第一总面积等于第一反屏蔽区域的面积时,得出所述移动目标在
第一反屏蔽区域内;
在第二总面积等于第二反屏蔽区域的面积时,得出所述移动目标在第二反屏蔽区域内。
在一种实施方式中,发送单元还用于根据判断所述移动目标在哪个反屏蔽
区域内的结果,发出画面切换信息;
其中,在所述移动目标在所述第一反屏蔽区域或第二反屏蔽区域内时,发出画面切换信息,所述切换信息用于指示控制设备将主输出画面切换到云台摄像机的拍摄画面。
在一种实施方式中,还包括:反屏蔽区域确定单元;
反屏蔽区域确定单元用于接收屏蔽区域划定指令,根据所述划定指令重新
划定反屏蔽区域;
其中,所述划定指令包括:所述第一反屏蔽区域的第一顶点的位置信息和所述第二反屏蔽区域的第二顶点的位置信息。
实施例三
如图6所示,本发明还公开一种双板书跟踪拍摄系统,该系统包括:板书定位分析仪510、控制设备520和云台摄像机530;
所述云台摄像机530被配置为包括:第一预置位和第二预置位;
所述板书定位分析仪510被配置为执行实施例一所述的双板书跟踪拍摄方法。
如实施例一种所述,板书定位分析仪510是用于拍摄多媒体黑板的实时视频并利用拍摄到的视频进行分析的设备。云台摄像机530是用于拍摄板书的,它被设置了两个预置位,分别是专门拍摄第一黑板2的第一预置位和专门拍摄第二黑板3的第二预置位。控制设备520根据板书定位分析仪510的分析结果和指令控制云台摄像机530的转动。控制设备520除了控制云台摄像机530的转动外,还接收包括云台摄像机530在内的多路视频输入数据,根据既定的设置输出对应的视频流和/或视频流组成的拼接画面。
本双板书跟踪拍摄系统针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题,提高了录播的适用性。
实施例四
本发明实施例还提供了一种存储介质,其上存储有计算机指令,该指令被处理器执行时实现上述任一实施例的双板书跟踪拍摄方法。
本领域的技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、随机存取存储器(RAM,Random Access Memory)、只读存储器(ROM,Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、终端、或者网络设备等)执行本发明各个实施例方法的全部或部分。而前述的存储介质包括:移动存储设备、RAM、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
与上述的计算机存储介质对应的是,在一个实施例中还提供一种计算机设备,该计算机设备包括存储器、编码器及存储在存储器上并可在编码器上运行的计算机程序,其中,编码器执行程序时实现如上述各实施例中的任意一种双板书跟踪拍摄方法。
上述计算机设备针对实时视频对两块黑板区域分别预设好反屏蔽区域,对云台摄像机设置好分别对准两快黑板的预置位,对反屏蔽区域内进行目标检测,并判断移动目标在哪个反屏蔽区域内,根据判断的结果控制云台摄像机转到相应的预置位进行拍摄,解决了现有技术之中不能够对双板书进行跟踪拍摄的技术问题,提高了录播的适用性。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。
Claims (7)
1.一种双板书跟踪拍摄方法,其特征在于,包括步骤:
获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏蔽区域是基于第二黑板的位置设置的;
在反屏蔽区域内进行移动目标检测,判断所述移动目标在哪个反屏蔽区域内;
根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位;
所述判断所述移动目标在哪个反屏蔽区域内的过程包括步骤:
获取所述移动目标的范围的位置信息;
根据所述移动目标的范围的位置信息基于预设的模型得出所述移动目标的范围的质点的位置;
根据所述质点的位置判断所述质点在哪个反屏蔽区域内;
所述判断所述质点在哪个反屏蔽区域内的过程,包括步骤:
获取第一反屏蔽区域的面积,获取第二反屏蔽区域的面积;
其中,所述反屏蔽区域为多边形区域;
计算所述质点与第一反屏蔽区域的每一条边所围成的三角形的面积,得出第一总面积,计算所述质点与第二反屏蔽区域的每一条边所围成的三角形的面积,得出第二总面积;
比较第一总面积与第一反屏蔽区域的面积,比较第二总面积与第二反屏蔽区域的面积,并根据比较结果判断所述移动目标在哪个反屏蔽区域内;
其中,在第一总面积等于第一反屏蔽区域的面积时,得出所述移动目标在第一反屏蔽区域内;
在第二总面积等于第二反屏蔽区域的面积时,得出所述移动目标在第二反屏蔽区域内。
2.根据权利要求1所述的双板书跟踪拍摄方法,其特征在于,还包括步骤:
根据判断所述移动目标在哪个反屏蔽区域内的结果,发出画面切换信息;
其中,在所述移动目标在所述第一反屏蔽区域或第二反屏蔽区域内时,发出画面切换信息,所述切换信息用于指示控制设备将主输出画面切换到云台摄像机的拍摄画面。
3.根据权利要求1所述的双板书跟踪拍摄方法,其特征在于,还包括步骤:
接收屏蔽区域划定指令,根据所述划定指令重新划定反屏蔽区域;
其中,所述划定指令包括:所述第一反屏蔽区域的第一顶点的位置信息和所述第二反屏蔽区域的第二顶点的位置信息。
4.一种双板书跟踪拍摄装置,其特征在于,包括:
视频获取单元,用于获取源视频,所述源视频中包括:第一反屏蔽区域和第二反屏蔽区域;
其中,所述第一反屏蔽区域是基于第一黑板的位置设置的,所述第二反屏蔽区域是基于第二黑板的位置设置的;
判断单元,用于在反屏蔽区域内进行移动目标检测,判断所述移动目标在哪个反屏蔽区域内;
发送单元,根据判断所述移动目标在哪个反屏蔽区域内的结果,发出预置信息;
其中,在所述移动目标在所述第一反屏蔽区域内时,发出第一预置信息,所述第一预置信息用于指示控制设备控制云台摄像机转到拍摄第一黑板的第一预置位;
在所述移动目标在所述第二反屏蔽区域内时,发出第二预置信息,所述第二预置信息用于指示控制设备控制云台摄像机转到拍摄第二黑板的第二预置位;
判断单元判断所述移动目标在哪个反屏蔽区域内的过程包括步骤:
获取所述移动目标的范围的位置信息;
根据所述移动目标的范围的位置信息基于预设的模型得出所述移动目标的范围的质点的位置;
根据所述质点的位置判断所述质点在哪个反屏蔽区域内;
判断单元判断所述质点在哪个反屏蔽区域内的过程,包括步骤:
获取第一反屏蔽区域的面积,获取第二反屏蔽区域的面积;
其中,所述反屏蔽区域为多边形区域;
计算所述质点与第一反屏蔽区域的每一条边所围成的三角形的面积,得出第一总面积,计算所述质点与第二反屏蔽区域的每一条边所围成的三角形的面积,得出第二总面积;
比较第一总面积与第一反屏蔽区域的面积,比较第二总面积与第二反屏蔽区域的面积,并根据比较结果判断所述移动目标在哪个反屏蔽区域内;
其中,在第一总面积等于第一反屏蔽区域的面积时,得出所述移动目标在第一反屏蔽区域内;
在第二总面积等于第二反屏蔽区域的面积时,得出所述移动目标在第二反屏蔽区域内。
5.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-3中任一所述的方法。
6.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-3中任一所述的方法。
7.一种双板书跟踪拍摄系统,其特征在于,包括:板书定位分析仪、控制设备和云台摄像机;
所述云台摄像机被配置为包括:第一预置位和第二预置位;
所述板书定位分析仪被配置为执行权利要求1-3中任一所述的双板书跟踪拍摄方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110901390.XA CN113572965B (zh) | 2021-08-06 | 2021-08-06 | 双板书跟踪拍摄方法、装置及拍摄系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110901390.XA CN113572965B (zh) | 2021-08-06 | 2021-08-06 | 双板书跟踪拍摄方法、装置及拍摄系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113572965A CN113572965A (zh) | 2021-10-29 |
CN113572965B true CN113572965B (zh) | 2023-04-07 |
Family
ID=78170760
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110901390.XA Active CN113572965B (zh) | 2021-08-06 | 2021-08-06 | 双板书跟踪拍摄方法、装置及拍摄系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113572965B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115460353B (zh) * | 2022-11-11 | 2023-03-24 | 深圳市鹏创软件有限公司 | 教学跟踪摄像设备配置方法、装置、电子设备及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004289779A (ja) * | 2003-03-06 | 2004-10-14 | Chuo Electronics Co Ltd | 移動体撮像方法、移動体撮像システム |
CN106803913A (zh) * | 2017-03-10 | 2017-06-06 | 武汉东信同邦信息技术有限公司 | 一种用于自动侦测学生起立发言动作的检测方法及其装置 |
CN107707810A (zh) * | 2017-08-21 | 2018-02-16 | 广州紫川电子科技有限公司 | 基于红外热像仪的热源追踪方法、装置及系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101699469A (zh) * | 2009-11-09 | 2010-04-28 | 南京邮电大学 | 课堂录像中教师黑板书写动作的自动识别方法 |
CN103139451A (zh) * | 2011-11-29 | 2013-06-05 | 上海迈辉信息技术有限公司 | 自动跟踪摄像装置 |
CN103093654B (zh) * | 2013-01-28 | 2014-12-03 | 北京航空航天大学 | 一种双摄像机交互式智能跟踪教学系统 |
CN104735413B (zh) * | 2015-03-18 | 2018-08-07 | 阔地教育科技有限公司 | 一种在线课堂中的画面切换方法及装置 |
CN107452018B (zh) * | 2017-08-02 | 2020-04-07 | 北京翰博尔信息技术股份有限公司 | 主讲人跟踪方法及系统 |
CN110933331B (zh) * | 2019-12-06 | 2022-03-01 | 浙江蓝鸽科技有限公司 | 教学视频的合成方法及系统 |
CN112001944A (zh) * | 2020-07-09 | 2020-11-27 | 浙江大华技术股份有限公司 | 课堂教学质量评价数据的获取方法、计算机设备和介质 |
-
2021
- 2021-08-06 CN CN202110901390.XA patent/CN113572965B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004289779A (ja) * | 2003-03-06 | 2004-10-14 | Chuo Electronics Co Ltd | 移動体撮像方法、移動体撮像システム |
CN106803913A (zh) * | 2017-03-10 | 2017-06-06 | 武汉东信同邦信息技术有限公司 | 一种用于自动侦测学生起立发言动作的检测方法及其装置 |
CN107707810A (zh) * | 2017-08-21 | 2018-02-16 | 广州紫川电子科技有限公司 | 基于红外热像仪的热源追踪方法、装置及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN113572965A (zh) | 2021-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Lai et al. | Semantic-driven generation of hyperlapse from 360 degree video | |
CN111160172B (zh) | 泊车位检测方法、装置、计算机设备和存储介质 | |
CN1979087B (zh) | 图像处理装置及其方法 | |
US20110157387A1 (en) | Method and apparatus for generating image data | |
US11102413B2 (en) | Camera area locking | |
CN107087107A (zh) | 基于双摄像头的图像处理装置及方法 | |
EP3934243A1 (en) | Ultra-short-focus alignment method and apparatus for picture and screen, ultra-short-focus projector, and storage medium | |
CN110443154A (zh) | 关键点的三维坐标定位方法、装置、电子设备和存储介质 | |
CN105981368A (zh) | 在成像装置中的照片构图和位置引导 | |
CN108833785A (zh) | 多视角图像的融合方法、装置、计算机设备和存储介质 | |
EP2428036A1 (en) | Systems and methods for the autonomous production of videos from multi-sensored data | |
US10666858B2 (en) | Deep-learning-based system to assist camera autofocus | |
US20140198229A1 (en) | Image pickup apparatus, remote control apparatus, and methods of controlling image pickup apparatus and remote control apparatus | |
CN113132717A (zh) | 数据处理方法、终端和服务器 | |
CN106161945A (zh) | 拍照处理方法和装置 | |
CN113572965B (zh) | 双板书跟踪拍摄方法、装置及拍摄系统 | |
US11057553B2 (en) | Electronic device for capturing media using a bendable display and method thereof | |
JP4606278B2 (ja) | 映像構造化方法及び装置及びプログラム | |
US20230098829A1 (en) | Image Processing System for Extending a Range for Image Analytics | |
CN116543014A (zh) | 一种融合全景的教师自动跟踪方法及系统 | |
CN115022549A (zh) | 拍摄构图方法、装置、计算机设备和存储介质 | |
US20160275373A1 (en) | Evaluation of models generated from objects in video | |
CN112995503A (zh) | 手势控制全景图像获取方法、装置、电子设备及存储介质 | |
WO2023188606A1 (ja) | 記録方法、記録装置、及びプログラム | |
WO2023188652A1 (ja) | 記録方法、記録装置、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |