CN108989686A - 基于人形追踪的实时拍摄装置及控制方法 - Google Patents

基于人形追踪的实时拍摄装置及控制方法 Download PDF

Info

Publication number
CN108989686A
CN108989686A CN201811033461.3A CN201811033461A CN108989686A CN 108989686 A CN108989686 A CN 108989686A CN 201811033461 A CN201811033461 A CN 201811033461A CN 108989686 A CN108989686 A CN 108989686A
Authority
CN
China
Prior art keywords
humanoid
human
camera
unit
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811033461.3A
Other languages
English (en)
Other versions
CN108989686B (zh
Inventor
黄霖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN GWELLTIMES TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN GWELLTIMES TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN GWELLTIMES TECHNOLOGY Co Ltd filed Critical SHENZHEN GWELLTIMES TECHNOLOGY Co Ltd
Priority to CN201811033461.3A priority Critical patent/CN108989686B/zh
Publication of CN108989686A publication Critical patent/CN108989686A/zh
Application granted granted Critical
Publication of CN108989686B publication Critical patent/CN108989686B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D3/00—Control of position or direction
    • G05D3/12—Control of position or direction using feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

本发明公开一种基于人形追踪的实时拍摄装置及控制方法，该实时拍摄装置包括摄像单元、云台控制驱动器、人形识别单元、人形坐标反馈控制单元；所述摄像单元获取图像信息传输给人形识别单元；所述云台控制驱动器用于驱动电机，并获取电机转动反馈量；所述人形识别单元获取图像信息，并对其处理分析，识别图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；所述人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。本发明克服了现有主播摄像头固定视角，主播无法大范围活动带来的空间限制，更加智能有效的应用在唱跳类直播活动中。

Description

基于人形追踪的实时拍摄装置及控制方法
技术领域
本发明涉及摄像技术领域，特别涉及一种基于人形追踪的实时拍摄装置及控制方法。
背景技术
实时拍摄设备，例如，主播摄像头、直播摄像头、及普通摄像头等，目前功能和发展方向局限于更高分辨率，增加美颜效果，减少传输延迟，增加补光灯辅助措施，无法随着被拍摄者移动，或跟随被拍摄者拍摄，在歌舞类直播时，往往主播要适应摄像头的视角，无法大范围的移动，或者，需要专业摄影师实时手工调整摄像设备。
发明内容
针对现有技术存在的问题，本发明提供一种基于人形追踪的实时拍摄装置及控制方法。
首先，本发明提供一种基于人形追踪的实时拍摄装置，其包括：摄像单元、云台控制驱动器、人形识别单元、人形坐标反馈控制单元；
所述摄像单元包括摄像头，上下调节、左右调节的两云台，及控制两云台转动的两电机，该摄像单元获取图像信息传输给人形识别单元；
所述云台控制驱动器用于驱动电机，并获取电机转动反馈量；
所述人形识别单元获取图像信息，并对其处理分析，识别图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
所述人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。
作为本发明一优选实施方案，所述人形识别单元采用openCV HOG算法识别图像信息中的人形物体。
作为本发明一优选实施方案，所述上下调节云台上下转动170°，左右调节的云台左右转动355°。
本发明还提供一种基于人形追踪的实时拍摄控制方法，包括以下步骤：
S1、摄像单元获取图像信息并反馈给人形识别单元；
S2、人形识别单元处理分析获取的图像信息，识别出图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
S3、人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。
作为本发明一优选实施方案，步骤S3中，所述差异量为比较与摄像单元摄像头视角坐标系的中心坐标的差异量，其实现算法为：
水平转动角α＝K1*X；
垂直转动角γ＝K2*Y；
其中，K1、K2为根据摄像头视角调整的校准系数，X、Y为人形物体的坐标。
作为本发明一优选实施方案，还包括以下步骤：
S4、当人形识别算法单元计算出现短暂人形消失时，会记录消失坐标，并在坐标附近形成新的识别区，当人形再次出现后继续重复跟踪过程。
作为本发明一优选实施方案，所述人形识别单元采用openCV HOG算法识别图像信息中的人形物体。
采用本发明的技术方案，具有以下有益效果：
通过基于人形追踪的摄像装置，例如，网络主播摄像头，克服了现有主播摄像头固定视角，主播无法大范围活动带来的空间限制，更加智能有效的应用在唱跳类直播活动中。
附图说明
图1为本发明摄像装置组成框图；
图2为本发明中摄像单元一实施例结构示意图；
图3为本发明中摄像单元视角的坐标系；
图4为本发明控制方法的流程图。
具体实施方式
以下结合附图和具体实施例，对本发明进一步说明。
参照图1与图2所示，本发明提供一种基于人形追踪的实时拍摄装置，其包括：摄像单元10、云台控制驱动器20、人形识别单元30、人形坐标反馈控制单元40；
所述摄像单元10包括摄像头105，上下调节、左右调节的两云台101/102，及控制两云台转动的两电机103/104，该摄像单元获取图像信息传输给人形识别单元；
所述云台控制驱动器20用于驱动电机103/104，并获取电机转动反馈量；
所述人形识别单元30获取图像信息，并对其处理分析，识别图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
所述人形坐标反馈控制单元40获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。
其中，所述人形识别单元30采用openCV HOG算法识别图像信息中的人形物体。
所述上下调节云台101上下转动170°，左右调节的云台102左右转动355°。
本发明还提供一种基于人形追踪的实时拍摄控制方法，包括以下步骤：
S1、摄像单元获取图像信息并反馈给人形识别单元；
S2、人形识别单元处理分析获取的图像信息，识别出图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
其中，所述人形识别单元采用openCV HOG算法识别图像信息中的人形物体，其坐标系按照图3建立，假设人形物体的坐标为(X＝50，Y＝-20)。
S3、人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪；
其中，所述差异量为比较与摄像单元摄像头视角坐标系的中心坐标的差异量，其实现算法为：
水平转动角α＝K1*X；
垂直转动角γ＝K2*Y；
其中，K1、K2为根据摄像头视角调整的校准系数，X、Y为人形物体的坐标。
S4、当人形识别算法单元计算出现短暂人形消失时，会记录消失坐标，并在坐标附近形成新的识别区，当人形再次出现后继续重复跟踪过程。
该步骤为人形容错：当人形识别算法单元计算出现短暂人形消失时，会记录消失坐标，并在坐标附近形成新的识别区，当人形再次出现后继续重复跟踪过程。
举例过程如：原本在(x＝-10，y＝50)处发现人形，可是到下一帧发现此坐标人形消失。此时人形识别算法运算单元会记录之前坐标(x＝-10，y＝50)，再接下来的连续10帧着重对这个坐标附近进行HOG算法识别。如果持续10帧都没有重新识别到人形，则重新开始对整个画面进行人形识别和追踪，以提高追踪的稳定性。
以上所述仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是在本发明的发明构思下，利用本发明说明书及附图内容所作的等效结构变换，或直接/间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。

Claims (7)

1.一种基于人形追踪的实时拍摄装置，其特征在于，包括：摄像单元、云台控制驱动器、人形识别单元、人形坐标反馈控制单元；
所述摄像单元包括摄像头，上下调节、左右调节的两云台，及控制两云台转动的两电机，该摄像单元获取图像信息传输给人形识别单元；
所述云台控制驱动器用于驱动电机，并获取电机转动反馈量；
所述人形识别单元获取图像信息，并对其处理分析，识别图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
所述人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。
2.根据权利要求1所述的基于人形追踪的实时拍摄装置，其特征在于，所述人形识别单元采用openCV HOG算法识别图像信息中的人形物体。
3.根据权利要求1所述的基于人形追踪的实时拍摄装置，其特征在于，所述上下调节云台上下转动170°，左右调节的云台左右转动355°。
4.一种基于人形追踪的实时拍摄控制方法，其特征在于，包括以下步骤：
S1、摄像单元获取图像信息并反馈给人形识别单元；
S2、人形识别单元处理分析获取的图像信息，识别出图像信息中的人形物体，并根据移动窗口位置得到人形物体的坐标；
S3、人形坐标反馈控制单元获取人形物体的坐标，比较与摄像单元摄像头视角坐标系的差异量，反馈给云台控制驱动器驱动摄像单元实现人形跟踪。
5.根据权利要求4所述的基于人形追踪的实时拍摄控制方法，其特征在于，步骤S3中，所述差异量为比较与摄像单元摄像头视角坐标系的中心坐标的差异量，其实现算法为：
水平转动角α＝K1*X；
垂直转动角γ＝K2*Y；
其中，K1、K2为根据摄像头视角调整的校准系数，X、Y为人形物体的坐标。
6.根据权利要求4所述的基于人形追踪的实时拍摄控制方法，其特征在于，还包括以下步骤：
S4、当人形识别算法单元计算出现短暂人形消失时，会记录消失坐标，并在坐标附近形成新的识别区，当人形再次出现后继续重复跟踪过程。
7.根据权利要求4所述的基于人形追踪的实时拍摄控制方法，其特征在于，所述人形识别单元采用openCV HOG算法识别图像信息中的人形物体。
CN201811033461.3A 2018-09-05 2018-09-05 基于人形追踪的实时拍摄装置及控制方法 Active CN108989686B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811033461.3A CN108989686B (zh) 2018-09-05 2018-09-05 基于人形追踪的实时拍摄装置及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811033461.3A CN108989686B (zh) 2018-09-05 2018-09-05 基于人形追踪的实时拍摄装置及控制方法

Publications (2)

Publication Number Publication Date
CN108989686A true CN108989686A (zh) 2018-12-11
CN108989686B CN108989686B (zh) 2021-02-19

Family

ID=64544894

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811033461.3A Active CN108989686B (zh) 2018-09-05 2018-09-05 基于人形追踪的实时拍摄装置及控制方法

Country Status (1)

Country Link
CN (1) CN108989686B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110244775A (zh) * 2019-04-29 2019-09-17 广州市景沃电子有限公司 基于移动设备夹持云台的自动跟踪方法及装置
WO2021216948A1 (en) * 2020-04-23 2021-10-28 Sony Group Corporation Calibration of cameras on unmanned aerial vehicles using human joints
WO2022007119A1 (zh) * 2020-07-07 2022-01-13 章微微 基于分布状态的定向驱动平台以及相应终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060072257A (ko) * 2004-12-22 2006-06-28 엘지전자 주식회사 로봇의 목표물 추적방법
CN103607569A (zh) * 2013-11-22 2014-02-26 广东威创视讯科技股份有限公司 视频监控中的监控目标跟踪方法和系统
CN103826103A (zh) * 2014-02-27 2014-05-28 浙江宇视科技有限公司 云台摄像机巡航控制方法
CN105550670A (zh) * 2016-01-27 2016-05-04 兰州理工大学 一种目标物体动态跟踪与测量定位方法
CN106991700A (zh) * 2017-04-20 2017-07-28 佛山科学技术学院 一种无人机目标位置锁定和追踪装置及其方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060072257A (ko) * 2004-12-22 2006-06-28 엘지전자 주식회사 로봇의 목표물 추적방법
CN103607569A (zh) * 2013-11-22 2014-02-26 广东威创视讯科技股份有限公司 视频监控中的监控目标跟踪方法和系统
CN103826103A (zh) * 2014-02-27 2014-05-28 浙江宇视科技有限公司 云台摄像机巡航控制方法
CN105550670A (zh) * 2016-01-27 2016-05-04 兰州理工大学 一种目标物体动态跟踪与测量定位方法
CN106991700A (zh) * 2017-04-20 2017-07-28 佛山科学技术学院 一种无人机目标位置锁定和追踪装置及其方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110244775A (zh) * 2019-04-29 2019-09-17 广州市景沃电子有限公司 基于移动设备夹持云台的自动跟踪方法及装置
WO2021216948A1 (en) * 2020-04-23 2021-10-28 Sony Group Corporation Calibration of cameras on unmanned aerial vehicles using human joints
WO2022007119A1 (zh) * 2020-07-07 2022-01-13 章微微 基于分布状态的定向驱动平台以及相应终端

Also Published As

Publication number Publication date
CN108989686B (zh) 2021-02-19

Similar Documents

Publication Publication Date Title
CN103716594B (zh) 基于运动目标检测的全景拼接联动方法及装置
CN109151439B (zh) 一种基于视觉的自动追踪拍摄系统及方法
CN108989686A (zh) 基于人形追踪的实时拍摄装置及控制方法
US9690262B2 (en) Display device and method for regulating viewing angle of display device
US7494430B2 (en) System and method for correcting golf swing using internet
EP1394743A3 (en) Device for detecting position/orientation of object from stereo images
US20060147192A1 (en) Best shooting moment selectable digital camera apparatus
US11565190B2 (en) Virtual tourism method, client, server, system, acquisition device, and medium
CN105718862A (zh) 一种单摄像头教师自动跟踪方法、装置及录播系统
WO2008087974A1 (ja) データ処理装置、方法、記録媒体
US11039940B2 (en) Measurement and ordering system for orthotic devices
WO2004053795A3 (en) Method and apparatus for correcting a head pose in a video phone image
CN106713740B (zh) 定位跟踪摄像方法与系统
CN110933316A (zh) 一种基于双摄交互式的教师跟踪教学系统
CN107517344A (zh) 摄像装置识别范围的调整方法及装置
CN106060514A (zh) 多目视觉控制电视姿态的装置和方法
WO2019119410A1 (zh) 全景拍照方法、拍照设备及机器可读存储介质
CN108989765B (zh) 动态跟踪自拍的三角架系统
CN106998430A (zh) 基于多相机的360度视频回放方法
CN112019759A (zh) 一种对录播课中的学生进行跟踪拍摄方法、装置及设备
WO2018121730A1 (zh) 视频监控和人脸识别方法、装置及系统
TW201310993A (zh) 顯示裝置及該顯示裝置的轉動方法
TW201129084A (en) Controlling system and method for camera, adjusting apparatus for camera including the same
WO2021192906A1 (ja) 算出方法
CN100502788C (zh) 放射治疗高精度快速摆位的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant