CN105830426B - 一种视频生成系统的视频生成方法及装置 - Google Patents

一种视频生成系统的视频生成方法及装置 Download PDF

Info

Publication number
CN105830426B
CN105830426B CN201480018777.9A CN201480018777A CN105830426B CN 105830426 B CN105830426 B CN 105830426B CN 201480018777 A CN201480018777 A CN 201480018777A CN 105830426 B CN105830426 B CN 105830426B
Authority
CN
China
Prior art keywords
image
target object
acquisition
video
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480018777.9A
Other languages
English (en)
Other versions
CN105830426A (zh
Inventor
瞿新
廖海
孙兴磊
袁洁
徐崇
钱震
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN REACH INFORMATION TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN REACH INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN REACH INFORMATION TECHNOLOGY Co Ltd filed Critical SHENZHEN REACH INFORMATION TECHNOLOGY Co Ltd
Publication of CN105830426A publication Critical patent/CN105830426A/zh
Application granted granted Critical
Publication of CN105830426B publication Critical patent/CN105830426B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Abstract

本发明属于视频拍摄领域，提供了一种视频生成系统的视频生成方法及装置，所述系统包括定位摄像机、跟踪摄像机以及全景摄像机，所述方法包括：当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；当判断跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换所述全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。实现自动控制切换采集不同摄像机的图像生成视频，从而做到对目标的精准跟踪、准确切换，实现了视频生成过程的自动化切换，使得安装调试完毕以后，不需要操作，也不需要人工干预。

Description

一种视频生成系统的视频生成方法及装置
技术领域
本发明属于视频拍摄领域，尤其涉及一种视频生成系统的视频生成方法及装置。
背景技术
随着科技的发展和社会的进步,摄像机系统对目标进行跟踪并生视频已经十分普遍。现有的摄像机系统,通常采用手动方式控制单个摄像机的远景及近景切换、以及不同摄像机之间的切换，所以，在视频生成过程中，至少需要一个人值班，且人工切换过程中可能会引入操作误差。
综上，现有技术在摄像机跟踪目标并生成视频的过程中，无法实现不同摄像机之间的智能录播切换。
发明内容
本发明实施例的目的在于提供一种视频生成系统的视频生成方法及装置，旨在解决现有技术在摄像机跟踪目标并生成视频的过程中，还无法实现不同摄像机之间的智能录播切换的问题。
本发明的第一方面提供了一种视频生成系统的视频生成方法，所述系统包括定位摄像机、跟踪摄像机以及全景摄像机，所述方法包括：
获取定位摄像机采集的图像；
判断所述采集的图像中是否包含目标对象；
当所述采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的坐标位置；
根据所述坐标位置，控制所述跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
判断跟踪摄像机采集的图像中包含的目标对象是否为人；
当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
当判断跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换所述全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
本发明的第二方面提供了一种视频生成系统的视频生成装置，所述装置包括：
获取单元，用于获取定位摄像机采集的图像；
第一判断单元，用于判断所述采集的图像中是否包含目标对象；
位置确定单元，用于当所述采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的坐标位置；
跟踪单元，用于根据所述坐标位置，控制跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
第二判断单元，用于判断跟踪摄像机采集的图像中包含的目标对象是否为人；
第一切换单元，用于当跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
第二切换单元，用于当跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
本发明实施例，通过定位摄像机采集的图像确定目标对象，并通过跟踪摄像机进一步判断所述目标对象是否为人，当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人在所述跟踪摄像机的镜头范围内时，自动切换跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频，当跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，自动切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频，这使得在视频录制过程中，不同摄像机之间的自动切换，从而获取平滑切换的视频，使得安装调试完毕以后，不需要操作，也不需要人工干预。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了本发明实施例的教室场景中的视频生成系统的示意图；
图2示出了本发明实施例一提供的视频生成系统的视频生成方法实现的流程图；
图3示出了本发明实施例二提供的视频生成系统的视频生成方法实现的流程图；
图4示出了本发明实施例三提供的视频生成系统的视频生成装置的结构图；
图5示出了本发明实施例四提供的视频生成系统的视频生成装置的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明实施例的应用场景为利用多个摄像机对目标进行跟踪并生成视频的场景，例如可以为学校教场景内、培训机构培训场所内等，请参阅图1示出了本发明实施例的教室场景中的视频生成系统的示意图，所视频生成系统包括：定位摄像机、跟踪摄像机和全景摄像机，其中，可以将定位摄像机安装在教室中央的天花上，所述摄像机的方向正对讲台，所述跟踪摄像机和全景摄像机分别定位于教室后方，另外，在生成视频数据之前确定以下数据：确定所述定位摄像机的镜头参数、确定定位摄像机的镜头像素点与镜头可视角度之间的关系，即所述定位摄像机的水平方向的像素点之间的距离能够代表的可视角度的大小、确定定位摄像机的高度及所述定位摄像机与讲台之间的距离、确定跟踪摄像机的高度以及跟踪摄像机与讲台之间的距离。该视频生成系统，结合目标检测、三角换算、镜头切换等手段，对定位摄像机采集的图像、跟踪摄像机采集的图像以及全景摄像机采集的图像进行分析，从而实现在无人值守情况下生成智能跟踪、切换平滑的视频。
以下结合具体实施例对本发明的实现进行详细描述：
实施例一：
图2示出了本发明实施例一提供的视频生成系统的视频生成方法实现的流程图，所述系统包括定位摄像机、跟踪摄像机以及全景摄像机，其中，可以由定位摄像机来寻找疑似目标，通过定位摄像机、跟踪摄像机采集图像，并对所述图像进行图像分析以确定所述疑似目标是否是人，以排除其他物体产生的干扰，并控制自动切换采集不同摄像机的图像生成视频，从而做到对目标的精准跟踪、准确切换，所述方法详述如下：
S201，获取定位摄像机采集的图像；
S202，判断所述采集的图像中是否包含目标对象；
通过对定位摄像机的采集的图像进行进一步分析，可以确定所述图像是否包含目标对象，为了准确确认定位摄像机定位的目标对象为人，由跟踪摄像机进一步对所述目标对象进行跟踪，以确定所述目标对象是否为人，具体过程如下：
S203，当定位摄像机当前采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的位置；
S204，根据所述目标在当前空间中所处的位置，控制跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
S205，判断跟踪摄像机采集的图像中包含的目标对象是否为人；
S206，当确定跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
S207，当确定跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
本发明实施例，通过定位摄像机采集的图像确定目标对象，并通过跟踪摄像机进一步判断所述目标对象是否为人，当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人在所述跟踪摄像机的镜头范围内时，自动切换跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频，当跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，自动切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频，这使得在视频录制过程中，不同摄像机之间的自动切换，从而获取平滑切换的视频，使得安装调试完毕以后，不需要操作，也不需要人工干预。
实施例二：
图3示出了本发明实施例二提供的视频生成系统的视频生成方法实现的流程图，所述系统包括定位摄像机、跟踪摄像机以及全景摄像机，所述方法详述如下：
S301，获取定位摄像机采集的图像；
S302，将定位摄像机当前获取的图像帧与背景帧进行比较，当所述当前获取的图像帧中变化的像素点的个数超过预定阈值时，则判定当前获取的图像帧包含前景对象，其中，背景帧为所述定位摄像机采集的图像的初始帧；
其中，所述背景帧为包括前景对象的图像帧，此处优选的可以对定位摄像机采集的图像的初始帧进行处理后作为初始帧，以使所述初始帧更接近真实的背景。
本实施例中，将定位摄像机当前获取的图像帧与所述背景帧进行比较，当与所述背景帧相比，所述当前获取的图像帧中变化的像素点的个数超过预定阈值时，所述当前获取的图像帧中包含前景对象；当所述当前获取的图像帧中变化的像素点的个数未超过预定阈值时，则判定当前获取的图像帧仍然为背景帧。
S303，当所述前景对象像素点在固定位置停留时间大于预定时间，确定所述前景对象为背景对象，执行S304；
S305，当所述前景对象的像素点的联通数大于预定阈值时，确定所述前景对象为目标对象，执行S306。
S304，将所述背景对象刷新到背景帧内；
在实际情况中，背景也是在不断变化的，因此，所以可以按照预定时间间隔对背景进行刷新，此外，背景刷新的方式直接影响到目标对象检测的准确性，特别对于目标频繁运动的场景很容易产生误刷新的情况，例如，对于教室场景内，教师频繁移动的情形。本实施例中，当所述前景对象的像素点的联通数大于预定阈值时，说明该前景对象足够大，可能为人，所以确定所述前景对象为目标对象，当前景对象在固定位置停留时间大于预定时间时，说明该前景对象是新加入背景中的背景对象，因此将所述背景对象刷新到背景帧，从而避免将背景目标当作目标对象的误识别。
S306，将所述背景对象刷新到背景帧内；
其中，根据所述目标对象在定位镜头内所处的像素点的位置，查找所述定位摄像机的镜头的像素点与所述定位摄像机的镜头的可视角度之间的关系，确定所述目标对象所处的可视角度。
S307，根据所述目标对象在所处的可视角度、当前空间参数、以及三角函数关系，确定目标在当前空间中所处的坐标位置。
本实施例中，所述空间参数可以包括当前空间的长、宽、高等。
在位置确定过程中，定位摄像机可以正对待拍摄面，定位摄像机中心点是摄像机对拍摄面做垂线的焦点，通过定位摄像机镜头的可视角度和像素点比较得到目标与中心点之间的水平夹角。将跟踪摄像机正对拍摄面，并控制云台示跟踪摄像机移动到所述水平夹角的方向上。云台和定位夹角之间可能会存在一定的固定偏移，可以由工程人员在第一次调试时手工矫正。
S308，根据所述目标在当前空间中所处的坐标位置，控制跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
本实施例中，所述跟踪摄像机采集的图像包括所述目标对象。通过对所述目标对象的跟踪，可以对所述目标对象进行进一步的分析，从而确定所述目标对象是否为人。
S309，判断跟踪摄像机采集的图像中包含的目标对象是否为人；
本实施例中，可以根据人脸轮廓识别和/或肤色检测，确定当前采集的目标对象为人，通过采用人脸轮廓和肤色检测的技术，来识别当前跟踪的到底是不是人，从而避免其他的干扰目标造成误跟踪和误触发，具体的可以如下包括：
a.提取所述跟踪摄像机采集的图像中的目标对象的线条；
其中，提取出来的线条一般位于明暗交界处或者物体的边缘。
b.将所述线条分为不同的类型；
c.按顺序依次遍历不同类型的线条，并对遍历后的不同类型的线条进行组合；
d.当判断组合后的图像符合预设人脸模型时，则确定所述目标对象为人。
本实施例中，可以按角度将所述线条分为不同的类型，例如，将所有的线条分为0度、45度、90度、135度等。首先，遍历所有0度的线条，然后，以之为原点在一定范围内遍历周围其他的线，判断遍历后的线条组成的图形是否符合预设的人脸模型，如果符合则判断当前目标对象为人。
S310，当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
S311，当判断跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换所述全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
本实施例中，由定位摄像机、跟踪摄像机采集图像，并对所述图像进行图像分析以确定所述疑似目标是否是人，以排除其他物体产生的干扰，并自动控制切换采集不同摄像机的图像生成视频，从而做到对目标的精准跟踪、准确切换，实现了视频生成过程的自动化切换，使得安装调试完毕以后，不需要操作，也不需要人工干预。
实施例三：
图4示出了本发明实施例三提供的视频生成系统的视频生成装置的结构图，为了便于说明，仅示出了与本发明实施例相关的部分。
所述视频生成系统的视频生成装置包括：获取单元41、第一判断单元42、位置确定单元43、跟踪单元44、第二判断单元45、第一切换单元46以及第二切换单元47。
获取单元41，用于获取定位摄像机采集的图像；
第一判断单元42，用于判断所述采集的图像中是否包含目标对象；
位置确定单元43，用于当所述采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的坐标位置；
跟踪单元44，用于根据所述坐标位置，控制跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
第二判断单元45，用于判断跟踪摄像机采集的图像中包含的目标对象是否为人；
第一切换单元46，用于当跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
第二切换单元47，用于当跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
本发明实施例，实现不同视频源之间的自动切换，可以获取平滑切换的视频，使得安装调试完毕以后，不需要操作，也不需要人工干预。
本发明实施例提供的视频生成系统的视频生成装置可以与前述方法实施例二对应，详情参见上述实施例二的描述，在此不再赘述。
实施例四：
图5示出了本发明实施例四提供的视频生成系统的视频生成装置的结构图，为了便于说明，仅示出了与本发明实施例相关的部分。
所述视频生成系统的视频生成装置包括：获取单元51、第一判断单元52、位置确定单元53、跟踪单元54、第二判断单元55、第一切换单元56以及第二切换单元57、刷新单元58。
所述第一判断单元52包括：
第一判断模块521，用于将定位摄像机当前获取的图像帧与所述背景帧进行比较，当所述当前获取的图像帧中变化的像素点的个数超过预定阈值时，则判定当前获取的图像帧包含前景对象，其中，背景帧为所述定位摄像机采集的图像的初始帧；
第二判断模块522，用于当所述前景对象的像素点在固定位置停留时间大于预定时间，确定所述前景对象为背景对象；当所述前景对象的像素点的联通数大于预定阈值时，确定所述前景对象为目标对象。
所述装置还包括：
刷新单元58，用于当确定所述前景对象为背景对象时，将所述背景对象刷新到背景帧内。
所述位置确定单元53包括：
角度确定模块531，用于根据定位摄像机的镜头的像素点与定位摄像机的镜头的可视角度之间的关系，确定所述目标对象所处的可视角度；
坐标确定模块532，用于根据所述目标对象在所处的可视角度、当前空间参数、以及三角函数关系，确定目标在当前空间中所处的坐标位置。
所述第二判断单元55包括：
提取模块551，用于提取所述跟踪摄像机采集图像中的目标对象的线条；
分类模块552，用于将所述线条分为不同的类型；
组合模块553，用于按顺序依次遍历不同类型的线条，并对遍历后的不同类型的线条进行组合；
比较模块554，用于当判断组合后的图像符合预设人脸模型时，则确定所述目标对象为人。
本发明实施例提供的视频生成系统的视频生成装置与前述方法实施例三对应，详情参见上述实施例三的描述，在此不再赘述。
值得注意的是，上述装置和系统实施例中，所包括的各个单元只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
另外，本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，相应的程序可以存储于一计算机可读取存储介质中，所述的存储介质，如ROM/RAM、磁盘或光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种视频生成系统的视频生成方法，其特征在于，所述系统包括定位摄像机、跟踪摄像机以及全景摄像机，所述方法包括：
获取定位摄像机采集的图像；
判断所述采集的图像中是否包含目标对象；
当所述采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的坐标位置；
根据所述坐标位置，控制所述跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
判断跟踪摄像机采集的图像中包含的目标对象是否为人；
当判断跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
当判断跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换所述全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
2.如权利要求1所述的方法，所述判断所述采集的图像中是否包含目标对象包括：
将定位摄像机当前获取的图像帧与背景帧进行比较，当所述当前获取的图像帧中变化的像素点的个数超过预定阈值时，则判定当前获取的图像帧包含前景对象，其中，背景帧为所述定位摄像机采集的图像的初始帧；
当所述前景对象的像素点在固定位置停留时间大于预定时间，确定所述前景对象为背景对象；当所述前景对象的像素点的联通数大于预定阈值时，确定所述前景对象为目标对象。
3.如权利要求2所述的方法，其特征在于，所述方法还包括：
当确定所述前景对象为背景对象时，将所述背景对象刷新到背景帧内。
4.如权利要求1所述的方法，其特征在于，所述确定所述目标对象在当前的拍摄空间内所处的坐标位置包括：
根据定位摄像机的镜头的像素点与定位摄像机的镜头的可视角度之间的关系，确定所述目标对象所处的可视角度；
根据所述目标对象在所处的可视角度、当前空间参数、以及三角函数关系，确定目标在当前空间中所处的坐标位置。
5.如权利要求1所述的方法，其特征在于，所述判断跟踪摄像机采集的图像中包含的目标对象是否为人包括：
提取所述跟踪摄像机采集图像中的目标对象的线条；
将所述线条分为不同的类型；
按顺序依次遍历不同类型的线条，并对遍历后的不同类型的线条进行组合；
当判断组合后的图像符合预设人脸模型时，则确定所述目标对象为人。
6.一种视频生成系统的视频生成装置，其特征在于，所述装置包括：
获取单元，用于获取定位摄像机采集的图像；
第一判断单元，用于判断所述采集的图像中是否包含目标对象；
位置确定单元，用于当所述采集的图像中包含目标对象时，确定所述目标对象在当前的拍摄空间内所处的坐标位置；
跟踪单元，用于根据所述坐标位置，控制跟踪摄像机的云台进行移动，以使所述跟踪摄像机对所述目标对象进行跟踪，同时获取跟踪摄像机采集的图像；
第二判断单元，用于判断跟踪摄像机采集的图像中包含的目标对象是否为人；
第一切换单元，用于当跟踪摄像机采集的图像中包含的目标对象为人，且所述人位于所述跟踪摄像机的镜头范围内时，切换所述跟踪摄像机为视频生成源，根据所述跟踪摄像机采集的图像生成视频；
第二切换单元，用于当跟踪摄像机采集的图像中包含的目标对象为人、且所述人位于所述跟踪摄像机的镜头范围外时，或者当确定跟踪摄像机采集的图像中包含的目标对象为非人时，切换全景摄像机为视频生成源，根据所述全景摄像机采集的图像生成视频。
7.如权利要求6所述的装置，其特征在于，所述第一判断单元包括：
第一判断模块，用于将定位摄像机当前获取的图像帧与所述背景帧进行比较，当所述当前获取的图像帧中变化的像素点的个数超过预定阈值时，则判定当前获取的图像帧包含前景对象，其中，背景帧为所述定位摄像机采集的图像的初始帧；
第二判断模块，用于当所述前景对象的像素点在固定位置停留时间大于预定时间，确定所述前景对象为背景对象；当所述前景对象的像素点的联通数大于预定阈值时，确定所述前景对象为目标对象。
8.如权利要求7所述的装置，其特征在于，所述装置还包括：
刷新单元，用于当确定所述前景对象为背景对象时，将所述背景对象刷新到背景帧内。
9.如权利要去6所述的装置，其特征在于，所述位置确定单元包括：
角度确定模块，用于根据定位摄像机的镜头的像素点与定位摄像机的镜头的可视角度之间的关系，确定所述目标对象所处的可视角度；
坐标确定模块，用于根据所述目标对象在所处的可视角度、当前空间参数、以及三角函数关系，确定目标在当前空间中所处的坐标位置。
10.如权利要求6所述的装置，其特征在于，所述第二判断单元包括：
提取模块，用于提取所述跟踪摄像机采集图像中的目标对象的线条；
分类模块，用于将所述线条分为不同的类型；
组合模块，用于按顺序依次遍历不同类型的线条，并对遍历后的不同类型的线条进行组合；
比较模块，用于当判断组合后的图像符合预设人脸模型时，则确定所述目标对象为人。
CN201480018777.9A 2014-11-10 2014-11-10 一种视频生成系统的视频生成方法及装置 Active CN105830426B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/090703 WO2016074123A1 (zh) 2014-11-10 2014-11-10 一种视频生成系统的视频生成方法及装置

Publications (2)

Publication Number Publication Date
CN105830426A CN105830426A (zh) 2016-08-03
CN105830426B true CN105830426B (zh) 2019-01-01

Family

ID=55953532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480018777.9A Active CN105830426B (zh) 2014-11-10 2014-11-10 一种视频生成系统的视频生成方法及装置

Country Status (3)

Country Link
US (1) US9838595B2 (zh)
CN (1) CN105830426B (zh)
WO (1) WO2016074123A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131491A (zh) * 2016-07-19 2016-11-16 科盾科技股份有限公司 一种用于抓捕目标的装置
CN107666590B (zh) * 2016-07-29 2020-01-17 华为终端有限公司 一种目标监控方法、摄像头、控制器和目标监控系统
CN106603912B (zh) * 2016-12-05 2020-09-11 科大讯飞股份有限公司 一种视频直播控制方法及装置
CN112449113B (zh) * 2017-05-09 2022-04-15 浙江凡后科技有限公司 一种物体位置捕捉系统及物体运动轨迹捕捉方法
CN109215055A (zh) * 2017-06-30 2019-01-15 杭州海康威视数字技术股份有限公司 一种目标特征提取方法、装置及应用系统
CN108090147A (zh) * 2017-12-08 2018-05-29 四川金英科技有限责任公司 一种视频目标智能追踪方法
CN110876036B (zh) * 2018-08-31 2022-08-02 腾讯数码（天津）有限公司 一种视频生成的方法以及相关装置
TWI714318B (zh) * 2019-10-25 2020-12-21 緯創資通股份有限公司 人臉辨識方法及裝置
US11553162B2 (en) * 2019-12-23 2023-01-10 Evolon Technology, Inc. Image processing system for extending a range for image analytics
CN113269011B (zh) * 2020-02-17 2022-10-14 浙江宇视科技有限公司 车辆检测方法、装置、设备及存储介质
CN111402304A (zh) * 2020-03-23 2020-07-10 浙江大华技术股份有限公司 目标对象的跟踪方法、装置及网络视频录像设备
CN111866437B (zh) * 2020-06-30 2022-04-08 厦门亿联网络技术股份有限公司 一种用于视频会议双摄像头的自动切换方法、装置、终端设备以及存储介质
CN113687715A (zh) * 2021-07-20 2021-11-23 温州大学 基于计算机视觉的人机交互系统及交互方法
CN116320322B (zh) * 2023-05-12 2023-08-22 美宜佳控股有限公司 门店云值守视频推流方法、装置、系统、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2896731Y (zh) * 2006-03-20 2007-05-02 江军 同步摄像跟踪系统
CN102256065A (zh) * 2011-07-25 2011-11-23 中国科学院自动化研究所 基于视频监控网络的视频自动浓缩方法
CN103164991A (zh) * 2013-03-01 2013-06-19 广州市信和电信发展有限公司 一种网络互动教学教研应用系统
CN103777643A (zh) * 2012-10-23 2014-05-07 北京网动网络科技股份有限公司 一种基于图像定位的摄像机自动跟踪系统及跟踪方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9740922B2 (en) * 2008-04-24 2017-08-22 Oblong Industries, Inc. Adaptive tracking system for spatial input devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2896731Y (zh) * 2006-03-20 2007-05-02 江军 同步摄像跟踪系统
CN102256065A (zh) * 2011-07-25 2011-11-23 中国科学院自动化研究所 基于视频监控网络的视频自动浓缩方法
CN103777643A (zh) * 2012-10-23 2014-05-07 北京网动网络科技股份有限公司 一种基于图像定位的摄像机自动跟踪系统及跟踪方法
CN103164991A (zh) * 2013-03-01 2013-06-19 广州市信和电信发展有限公司 一种网络互动教学教研应用系统

Also Published As

Publication number Publication date
CN105830426A (zh) 2016-08-03
US20160344928A1 (en) 2016-11-24
US9838595B2 (en) 2017-12-05
WO2016074123A1 (zh) 2016-05-19

Similar Documents

Publication Publication Date Title
CN105830426B (zh) 一种视频生成系统的视频生成方法及装置
CN105391910B (zh) 多摄像机激光扫描仪
CN103093654B (zh) 一种双摄像机交互式智能跟踪教学系统
JP2018535496A (ja) ビデオ録画方法、サーバー、システム及び記憶媒体
CN101406390B (zh) 检测人体部位和人的方法和设备以及对象检测方法和设备
CN103905734A (zh) 一种智能跟踪摄像方法和装置
US20070018977A1 (en) Method and apparatus for generating a depth map
US20120086809A1 (en) Image capturing device and motion tracking method
CN108776974B (zh) 一种适用于公共交通场景的实时目标跟踪方法
CN110049206A (zh) 图像处理方法及装置
CN102360423A (zh) 一种人体智能跟踪方法
CN101640788B (zh) 一种监控控制方法、装置及监控系统
CN107105193B (zh) 基于人体信息的机器人监控系统
CN103327245A (zh) 一种红外成像系统的自动对焦方法
CN105898107A (zh) 一种目标物体抓拍方法及系统
CN106504274A (zh) 一种基于红外摄像头下的视觉跟踪方法及系统
CN104539890A (zh) 一种目标跟踪方法及系统
CN110460778A (zh) 一种相机的巡航方法、装置、计算机设备和存储介质
Yokoi et al. Virtual camerawork for generating lecture video from high resolution images
CN105809108A (zh) 基于分布式视觉的行人定位方法和系统
CN106558069A (zh) 一种基于视频监控下的目标跟踪方法及系统
JP2017092839A5 (zh)
CN110335308B (zh) 基于视差约束与双向环形检验的双目视觉里程计计算方法
JP2009211525A (ja) 物体検出装置
KR20170113901A (ko) 1인 미디어 방송 촬영용 방송자 추적 카메라 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: 518057 north of 6 / F and north of 7 / F, building a, tefa infoport building, No. 2 Kefeng Road, Science Park community, Yuehai street, Nanshan District, Shenzhen, Guangdong

Patentee after: SZ REACH TECH Co.,Ltd.

Address before: 518057 Room 601, building B, Kingdee Software Park, No. 2, Keji South 12th Road, Nanshan District, Shenzhen City, Guangdong Province

Patentee before: SZ REACH TECH Co.,Ltd.

CP02 Change in the address of a patent holder