CN106027887A - 针对旋镜云台的枪球联动控制的方法、装置及电子设备 - Google Patents

针对旋镜云台的枪球联动控制的方法、装置及电子设备 Download PDF

Info

Publication number
CN106027887A
CN106027887A CN201610341354.1A CN201610341354A CN106027887A CN 106027887 A CN106027887 A CN 106027887A CN 201610341354 A CN201610341354 A CN 201610341354A CN 106027887 A CN106027887 A CN 106027887A
Authority
CN
China
Prior art keywords
reflecting mirror
gunlock
monitoring
monitoring objective
ball machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610341354.1A
Other languages
English (en)
Other versions
CN106027887B (zh
Inventor
胡彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing gelingshentong Information Technology Co.,Ltd.
Original Assignee
BEIJING DEEPGLINT INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING DEEPGLINT INFORMATION TECHNOLOGY Co Ltd filed Critical BEIJING DEEPGLINT INFORMATION TECHNOLOGY Co Ltd
Priority to CN201610341354.1A priority Critical patent/CN106027887B/zh
Publication of CN106027887A publication Critical patent/CN106027887A/zh
Application granted granted Critical
Publication of CN106027887B publication Critical patent/CN106027887B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Telescopes (AREA)

Abstract

本申请提供了针对旋镜云台的枪球联动控制的方法、装置及电子设备，包括：确定枪机监控图像中的监控目标的像素坐标；根据所述枪机监控图像中的监控目标的像素坐标确定球机获取包含所述监控目标的监控图像的转动调整量；根据所述转动调整量确定反射镜的驱动信号；根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。采用本申请的技术方案，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。

Description

针对旋镜云台的枪球联动控制的方法、装置及电子设备
技术领域
本申请涉及监控技术领域，特别涉及针对旋镜云台的枪球联动控制的方法、装置及电子设备。
背景技术
现有的枪球联动系统中的枪机通常是固定不动的广角相机，球机由两个相互垂直的电机驱动转动，通过直接驱动球机转动实现球机监控视野范围的调整。
对于现有的枪机联动方案，当球机质量较大时，由于惯性因素，会影响球机转动的响应时间，而无法做到迅速调整球机的监控视野对监控目标进行追踪。
发明内容
本申请实施例提出了针对旋镜云台的枪球联动控制的方法、装置及电子设备，用以克服现有技术中存在的对大面积或远距离的监控场景监控质量不高的不足。
本申请实施例第一方面提供了针对旋镜云台的枪球联动控制的方法，包括如下步骤：
确定枪机监控图像中的监控目标的像素坐标；
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
本申请实施例第二方面提供了针对旋镜云台的枪球联动控制的装置，包括：
第一确定单元，用于确定枪机监控图像中的监控目标的像素坐标；
第二确定单元，用于根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
驱动控制单元，用于根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
本申请实施例第三方面提供了一种电子设备，包括：处理器、存储器、通信接口和总线；
所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；
所述存储器存储可执行程序代码；
所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于执行针对旋镜云台的枪球联动控制的方法；
所述通信接口用于接收所述处理器执行程序后的结果，并发送所述结果；
其中，所述针对旋镜云台的枪球联动控制的方法包括：
确定枪机监控图像中的监控目标的像素坐标；
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
本申请实施例第四方面提供了一种存储介质，其中，该存储介质用于存储应用程序，所述应用程序用于在运行时执行本发明实施例所述的针对旋镜云台的枪球联动控制的方法。
本申请实施例第五方面提供一种应用程序，其中，该应用程序用于在运行时执行本发明实施例所述的针对旋镜云台的枪球联动控制的方法。
本申请有益效果如下：
本申请实施例提供了针对旋镜云台的枪球联动控制的方法、装置及电子设备，应用于枪机和球机位置固定，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。先确定枪机监控图像中的监控目标的像素坐标，根根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号，进而根据所述驱动信号驱动反射镜转动。与现有的直接驱动球机转动的方案不同，本申请实施例中的方案是直接驱动反射镜转动以达到调整球机监控视野及范围的调整，由于反射镜重量大大小于球机的重量，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。
附图说明
下面将参照附图描述本申请的具体实施例。
图1为本申请实施例一中提供的针对旋镜云台的枪球联动控制的方法流程示意图；
图2为本申请实施例一中提供的针对旋镜云台的枪球联动控制的方法中的枪球联动系统的坐标定义说明示意图；
图3为本申请实施例一中提供的针对旋镜云台的枪球联动控制的方法中反射镜驱动的分解示意图；
图4为本申请实施例三中提供的针对旋镜云台的枪球联动控制的装置结构示意图；
图5为本申请实施例四中提供的针对旋镜云台的枪球联动控制的电子设备结构示意图。
具体实施方式
为了使本申请的技术方案及优点更加清楚明白，以下结合附图对本申请的示例性实施例进行进一步详细的说明，显然，所描述的实施例仅是本申请的一部分实施例，而不是所有实施例的穷举。并且在不冲突的情况下，本说明书中的实施例及实施例中的特征可以互相结合。
在实现本申请的过程中，发明人发现，现有的枪球联动方案是根据枪机(广角相机)监控视野范围内通过手动选择或自动检测到确定监控目标的位置，进而调整球机(长焦相机)位置来跟踪该监控目标。通常，枪机采用固定不动的广角相机，由两个相互垂直的电机驱动球机转动，通过直接旋转球机实现球机监控视野范围的调整。当球机质量较大时，由于惯性因素，会影响球机转动的响应时间，而无法做到迅速调整球机的监控视野对监控目标进行追踪。
针对上述问题，本申请中提供了针对旋镜云台的枪球联动控制的方法、装置及电子设备，与现有的直接驱动球机转动的方案不同，本申请提供的方案中的枪机和球机的安装位置都是固定的，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像，直接驱动的是反射镜转动以达到调整球机监控视野及范围的调整，由于反射镜重量大大小于球机的重量，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。
本申请实施例中的方案可以应用于枪机和球机的安装位置都是固定的，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。
图1为本申请实施例一中提供的枪球联动控制的方法流程示意图，如图1所示，该枪球联动控制的方法可以包括如下步骤：
步骤101：确定枪机监控图像中的监控目标的像素坐标；
步骤102：根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
步骤103：根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
图2为本申请实施例一中提供的枪球联动控制的方法中的枪球联动系统的坐标定义说明示意图，如图2所示，设枪机的坐标系为EW，球机的坐标系为EL，其中，EW和EL的坐标原点分别为广角相机和长焦相机的传感器的中心，X轴和Y轴分别对应于相机传感器的长边和宽边方向，Z轴为经过坐标原点的前向法线方向。
反射镜的坐标系为EM，EM的坐标原点为反射镜面的中心，其中，X轴与反射镜的俯仰轴方向相同，Z轴为反射镜面前向法线方向。
球机的坐标系EL在反射镜的镜像中的坐标系被记作为ER，为了方便起见，选取世界坐标系作为枪机坐标系。
相对于监控的景深范围，枪机、球机、镜面的位置应尽可能接近(例如，监控范围为50～70米的目标时，三者间任意两者之间的距离建议不超过10厘米)，但相对方向关系不做具体限定。
EW的坐标原点到EM的坐标原点(即，反射镜面的中心)的向量为体的，在确定第一相对位置关系时，可以具体如下：
设步骤101中的监控目标在枪机监控图像中的像素坐标为[x，y]T，所述[x，y]T可以经过所述监控目标和所述枪机传感器中心的直线上任意体素的投影，所述直线表示为：
其中，KW为枪机内参矩阵，KW∈R3×3。
具体实施中，根据射影几何定理，枪机画面中像素点[x，y]T可以是一条直线上任意体素的投影，这条直线过相机中心且可以被表示为(其中，KW∈R3×3是枪机相机内参矩阵)。
具体的，所述监控目标在以所述枪机为中心的三维坐标系中的三维坐标可以为：其中，h为所述监控目标距离所述枪机传感器中心的距离。
实施中，步骤102的执行可以具体包括：
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定所述反射镜的第一相对位置关系，所述第一相对位置关系为所述球机获取包含所述监控目标的监控图像时，与所述反射镜的相对位置关系；
根据所述第一相对位置关系及所述反射镜当前的位置确定所述反射镜的驱动信号。
现有技术中由于是根据监控目标中枪机监控图像中的像素坐标，根据枪机与球机监控视线的相对关系，直接驱动球机以使其获取该监控目标的监控图像或视频，所以，在枪球联动控制时，直接确定球机的旋转角度(包括水平旋转角度，和/或，俯仰旋转角度)即可。
而本申请实施例中的枪球联动控制方案应用于枪机和球机位置固定，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。在确定枪机监控图像中的监控目标的像素坐标后，根据预先确定的枪机、球机与反射镜之间的位置关系及监控目标在枪机监控图像中的像素坐标，确定球机获取包含所述监控目标的监控图像时(所述监控目标可以位于球机监控图像中的特定位置，例如，位于球机监控图像的中心、左上角、右下角等等)，球机与反射镜的相对位置关系。即，要使球机获取包含所述监控目标的监控图像，球机和反射镜应该保持的夹角范围。
确定了第一相对位置关系(对应于反射镜的目标位置)后，根据反射镜当前的位置确定使反射镜旋转至目标位置需要的转动量，该转动量经过信号转换成为反射镜的驱动信号。
所述球机监控所述监控目标的视线方向可以为：
其中，为所述枪机中心到所述反射镜中心的位移向量。
具体实施中，在世界坐标系中，球机相机的视线方向应该看向
确定枪机监控图像中的监控目标的像素坐标之后，还可以包括：
预估所述监控目标距离所述枪机的距离h；
根据所述h确定所述枪机监控所述监控目标时的视线向量。
具体实施中，在实际应用中，由于二维图像不包含景深信息h，无法直接准确计算出球机转动位置，在枪镜距离稍大时，可以根据场景预估h取平均值以求得枪机监控所述监控目标时的视线向量在理想情况下枪镜距离可以忽略。
具体的，所述反射镜的中心可以位于所述球机的法线上，所述球机的法线为经过所述球机传感器中心的法线。
步骤103中的驱动信号可以包括水平旋转驱动信号；
所述水平旋转驱动信号为沿向量旋转d；其中，为水平旋转向量，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
步骤103中的驱动信号可以包括：俯仰旋转驱动信号；
所述俯仰旋转驱动信号为沿反射镜坐标系X轴旋转角度p；其中，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
具体实施中，可以将反射镜的当前位置调整至使球机视线方向与枪机的法向ZW平行的位置。可能会存在仅需对反射镜进行水平旋转驱动，或者，仅需对反射镜进行俯仰旋转驱动的情况，也可能需要对反射镜进行水平旋转驱动和俯仰旋转驱动。
本申请实施例提供了针对旋镜云台的枪球联动控制的方法，应用于枪机和球机位置固定，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。先确定枪机监控图像中的监控目标的像素坐标，根根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号，进而根据所述驱动信号驱动反射镜转动。与现有的直接驱动球机转动的方案不同，本申请实施例中的方案是直接驱动反射镜转动以达到调整球机监控视野及范围的调整，由于反射镜重量大大小于球机的重量，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。
实施例二
实施例一中对枪球联动控制的方法实施进行了说明，现在结合具体场景对监控装置控制的方法的实施进行描述。
例如，监控装置为枪球联动系统，该枪球联动系统设置于某一商场中执行监控任务。在该应用场景下实施本申请提供的监控装置控制的方法，可以如下：
图3为本申请实施例一中提供的枪球联动控制的方法中反射镜驱动的分解示意图，如图3所示，
(1)通过测量算出反射镜的初始位置相对于世界坐标系EW的旋转矩阵
(2)假设反射镜相对于初始位置的水平角度和俯仰角度分别为d0和p0，由于反射镜坐标系X轴在任何情况下都与反射镜的俯仰(pitch)轴重合，而Y轴却和反射镜的水平旋转轴(drift)轴存在夹角p0，则目标位置坐标系EM相对于初始位置坐标系的旋转矩阵可以分解为依次沿向量旋转d，沿反射镜坐标系X轴旋转p。这两种旋转可以分别被罗德里格斯变换和欧拉变换RX(p)表示。
(3)反射镜旋转后的坐标系相对于世界坐标系的旋转矩阵可以表示为再乘以[0，0，1]T即可得到旋镜当前法线方向在世界坐标系中的表达ZM。反射镜的具体旋转过程详见图3。
(4)球机视线方向实则为长焦相机法线方向Zw经过反射镜反射后的方向，即为Zw在反射镜中的投影，可通过ZM即可求出。
(5)得到了关于d和p的方程，即这样就可求得d和p。
实施例三
基于同一申请构思，本申请实施例中还提供了针对旋镜云台的枪球联动控制的装置，由于该装置解决问题的原理与针对旋镜云台的枪球联动控制的方法相似，因此该装置的实施可以参见方法的实施，重复之处不再赘述。
图4为本申请实施例三中提供的枪球联动控制的装置结构示意图，如图4所示，该枪球联动控制的装置可以包括：
第一确定单元401，用于确定枪机监控图像中的监控目标的像素坐标；
第二确定单元402，用于根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
驱动控制单元403，用于根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
实施中，所述第二确定单元可以具体用于根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定所述反射镜的第一相对位置关系，所述第一相对位置关系为所述球机获取包含所述监控目标的监控图像时，与所述反射镜的相对位置关系；根据所述第一相对位置关系及所述反射镜当前的位置确定所述反射镜的驱动信号。
实施中，所述驱动信号可以包括：水平旋转驱动信号；
所述水平旋转驱动信号为沿向量旋转角度d；其中，为水平旋转向量，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
实施中，所述驱动信号可以包括：俯仰旋转驱动信号；
所述俯仰旋转驱动信号为沿反射镜坐标系X轴旋转角度p；其中，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
实施中，所述监控目标在所述枪机监控图像中的像素坐标为[x，y]T，所述[x，y]T可以经过所述监控目标和所述枪机传感器中心的直线上任意体素的投影，所述直线表示为：
其中，KW为枪机内参矩阵，KW∈R3×3。
实施中，所述监控目标在以所述枪机为中心的三维坐标系中的三维坐标可以为：
其中，h为所述监控目标距离所述枪机传感器中心的距离。
实施中，所述球机监控所述监控目标的视线方向可以为：
其中，为所述枪机中心到所述反射镜中心的位移向量。
实施中，所述针对旋镜云台的枪球联动控制的装置还可以包括：
预估单元，用于确定枪机监控图像中的监控目标的像素坐标之后，预估所述监控目标距离所述枪机的距离h；
第三确定单元，用于根据所述h确定所述枪机监控所述监控目标时的视线向量
实施中，所述反射镜的中心可以位于所述球机的法线上，所述球机的法线为经过所述球机传感器中心的法线。
本申请实施例提供了针对旋镜云台的枪球联动控制的装置，应用于枪机和球机位置固定，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。先确定枪机监控图像中的监控目标的像素坐标，根根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号，进而根据所述驱动信号驱动反射镜转动。与现有的直接驱动球机转动的方案不同，本申请实施例中的方案是直接驱动反射镜转动以达到调整球机监控视野及范围的调整，由于反射镜重量大大小于球机的重量，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。
为了描述的方便，以上所述装置的各部分以功能分为各种模块或单元分别描述。当然，在实施本申请时可以把各模块或单元的功能在同一个或多个软件或硬件中实现。
实施例四
图5为本申请实施例四中提供的电子设备结构示意图，如图5所示，该枪球联动控制的电子设备可以包括：处理器、存储器、通信接口和总线；
所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；
所述存储器存储可执行程序代码；
所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于执行针对旋镜云台的枪球联动控制的方法；
所述通信接口用于接收所述处理器执行程序后的结果，并发送所述结果；
其中，所述针对旋镜云台的枪球联动控制的方法包括：
确定枪机监控图像中的监控目标的像素坐标；
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
本申请实施例提供的电子设备，应用于枪机和球机位置固定，球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像的枪球联动系统。先确定枪机监控图像中的监控目标的像素坐标，根根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号，进而根据所述驱动信号驱动反射镜转动。与现有的直接驱动球机转动的方案不同，本申请实施例中的方案是直接驱动反射镜转动以达到调整球机监控视野及范围的调整，由于反射镜重量大大小于球机的重量，可以快速响应驱动控制，实现对球机的监控视野的迅速调整，更好地追踪监控目标。
本申请实施例还提供了一种存储介质，其中，该存储介质用于存储应用程序，所述应用程序用于在运行时执行本发明实施例所述的针对旋镜云台的枪球联动控制的方法。
本申请实施例进一步提供一种应用程序，其中，该应用程序用于在运行时执行本发明实施例所述的针对旋镜云台的枪球联动控制的方法。
该应用程序可以运行于本申请实施例提供的电子设备中。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (19)

1.针对旋镜云台的枪球联动控制的方法，其特征在于，包括如下步骤：
确定枪机监控图像中的监控目标的像素坐标；
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
2.如权利要求1所述的方法，其特征在于，根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号，具体包括：
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定所述反射镜的第一相对位置关系，所述第一相对位置关系为所述球机获取包含所述监控目标的监控图像时，与所述反射镜的相对位置关系；
根据所述第一相对位置关系及所述反射镜当前的位置确定所述反射镜的驱动信号。
3.如权利要求2所述的方法，其特征在于，所述驱动信号包括：水平旋转驱动信号；
所述水平旋转驱动信号为沿向量旋转角度d；其中，为水平旋转向量，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
4.如权利要求2所述的方法，其特征在于，所述驱动信号包括：俯仰旋转驱动信号；
所述俯仰旋转驱动信号为沿反射镜坐标系X轴旋转角度p；其中，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
5.如权利要求1所述的方法，其特征在于，所述监控目标在所述枪机监控图像中的像素坐标为[x，y]T，所述[x，y]T经过所述监控目标和所述枪机传感器中心的直线上任意体素的投影，所述直线表示为：
其中，KW为枪机内参矩阵，KW∈R3×3。
6.如权利要求5所述的方法，其特征在于，所述监控目标在以所述枪机为中心的三维坐标系中的三维坐标为：
其中，h为所述监控目标距离所述枪机传感器中心的距离。
7.如权利要求6所述的方法，其特征在于，所述球机监控所述监控目标的视线方向为：
其中，为所述枪机中心到所述反射镜中心的位移向量。
8.如权利要求5所述的方法，其特征在于，确定枪机监控图像中的监控目标的像素坐标之后，还包括：
预估所述监控目标距离所述枪机的距离h；
根据所述h确定所述枪机监控所述监控目标时的视线向量
9.如权利要求1所述的方法，其特征在于，所述反射镜的中心位于所述球机的法线上，所述球机的法线为经过所述球机传感器中心的法线。
10.针对旋镜云台的枪球联动控制的装置，其特征在于，包括：
第一确定单元，用于确定枪机监控图像中的监控目标的像素坐标；
第二确定单元，用于根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
驱动控制单元，用于根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
11.如权利要求10所述的装置，其特征在于，所述第二确定单元具体用于根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定所述反射镜的第一相对位置关系，所述第一相对位置关系为所述球机获取包含所述监控目标的监控图像时，与所述反射镜的相对位置关系；根据所述第一相对位置关系及所述反射镜当前的位置确定所述反射镜的驱动信号。
12.如权利要求11所述的装置，其特征在于，所述驱动信号包括：水平旋转驱动信号；
所述水平旋转驱动信号为沿向量旋转角度d；其中，为水平旋转向量，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
13.如权利要求11所述的装置，其特征在于，所述驱动信号包括：俯仰旋转驱动信号；
所述俯仰旋转驱动信号为沿反射镜坐标系X轴旋转角度p；其中，所述反射镜的初始位置为(d0，p0)，d0为所述反射镜的当前位置对应的水平角度，p0为所述反射镜的当前位置对应的俯仰角度，所述反射镜的目标位置为(d0+d，p0+p)，所述反射镜坐标系中的X轴与俯仰轴重合，Y轴与水平旋转轴夹角为p0。
14.如权利要求10所述的装置，其特征在于，所述监控目标在所述枪机监控图像中的像素坐标为[x，y]T，所述[x，y]T经过所述监控目标和所述枪机传感器中心的直线上任意体素的投影，所述直线表示为：
其中，KW为枪机内参矩阵，KW∈R3×3。
15.如权利要求14所述的装置，其特征在于，所述监控目标在以所述枪机为中心的三维坐标系中的的三维坐标为：
其中，h为所述监控目标距离所述枪机传感器中心的距离。
16.如权利要求15所述的装置，其特征在于，所述球机监控所述监控目标的视线方向为：
其中，为所述枪机中心到所述反射镜中心的位移向量。
17.如权利要求14所述的装置，其特征在于，还包括：
预估单元，用于确定枪机监控图像中的监控目标的像素坐标之后，预估所述监控目标距离所述枪机的距离h；
第三确定单元，用于根据所述h确定所述枪机监控所述监控目标时的视线向量
18.如权利要求10所述的装置，其特征在于，所述反射镜的中心位于所述球机的法线上，所述球机的法线为经过所述球机传感器中心的法线。
19.一种电子设备，其特征在于，包括：处理器、存储器、通信接口和总线；
所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；
所述存储器存储可执行程序代码；
所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于执行针对旋镜云台的枪球联动控制的方法；
所述通信接口用于接收所述处理器执行程序后的结果，并发送所述结果；
其中，所述针对旋镜云台的枪球联动控制的方法包括：
确定枪机监控图像中的监控目标的像素坐标；
根据所述枪机监控图像中的监控目标的像素坐标及所述枪机、球机与反射镜之间的位置关系确定反射镜的驱动信号；
根据所述驱动信号驱动反射镜转动；其中，所述枪机和所述球机位置固定，所述球机通过反射镜的反射光线获取包含所述监控目标的监控区域的监控图像。
CN201610341354.1A 2016-05-20 2016-05-20 针对旋镜云台的枪球联动控制的方法、装置及电子设备 Active CN106027887B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610341354.1A CN106027887B (zh) 2016-05-20 2016-05-20 针对旋镜云台的枪球联动控制的方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610341354.1A CN106027887B (zh) 2016-05-20 2016-05-20 针对旋镜云台的枪球联动控制的方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN106027887A true CN106027887A (zh) 2016-10-12
CN106027887B CN106027887B (zh) 2019-01-25

Family

ID=57096771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610341354.1A Active CN106027887B (zh) 2016-05-20 2016-05-20 针对旋镜云台的枪球联动控制的方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN106027887B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107730556A (zh) * 2017-09-13 2018-02-23 济南中维世纪科技有限公司 一种枪球联动坐标定位方法
CN108020158A (zh) * 2016-11-04 2018-05-11 浙江大华技术股份有限公司 一种基于球机的三维位置测量方法及装置
CN108062115A (zh) * 2018-02-07 2018-05-22 成都新舟锐视科技有限公司 一种基于云台控制技术的多目标连续跟踪系统及方法
CN108270986A (zh) * 2016-12-30 2018-07-10 中兴通讯股份有限公司 一种云台控制及处理方法、装置、系统、电子设备
CN109839896A (zh) * 2017-11-29 2019-06-04 蓝思智能机器人(长沙)有限公司 一种控制x/y执行器移动的方法、装置和介质
CN111327880A (zh) * 2020-02-20 2020-06-23 浙江大华技术股份有限公司 智能监控的方法、摄像机、计算机设备及存储介质
CN113194263A (zh) * 2021-07-01 2021-07-30 中国南方电网有限责任公司超高压输电公司广州局 枪球联动控制方法、装置、计算机设备和存储介质
CN114141053A (zh) * 2021-12-07 2022-03-04 无锡加视诚智能科技有限公司 一种高位枪球联动装置及使用方法
CN115278014A (zh) * 2022-07-22 2022-11-01 重庆紫光华山智安科技有限公司 一种目标跟踪方法、系统、计算机设备及可读介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1304058A (zh) * 1999-11-26 2001-07-18 李朝辉 摄像机扫描扩展云台
JP2007172509A (ja) * 2005-12-26 2007-07-05 Matsushita Electric Ind Co Ltd 顔検出照合装置
CN1327710C (zh) * 2004-04-21 2007-07-18 张兆宏 主动式监视系统及监视方法
CN104424631A (zh) * 2013-08-23 2015-03-18 浙江大华技术股份有限公司 一种基于枪球联动系统的坐标关联方法及装置
CN104700409A (zh) * 2015-03-13 2015-06-10 国网四川省电力公司电力科学研究院 一种根据监控目标自动调整摄像机预置位的方法
CN104754302A (zh) * 2015-03-20 2015-07-01 安徽大学 一种基于枪球联动系统的目标检测跟踪方法
CN105242689A (zh) * 2015-09-23 2016-01-13 浙江大学 一种基于光学反射的云台跟踪视觉系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1304058A (zh) * 1999-11-26 2001-07-18 李朝辉 摄像机扫描扩展云台
CN1327710C (zh) * 2004-04-21 2007-07-18 张兆宏 主动式监视系统及监视方法
JP2007172509A (ja) * 2005-12-26 2007-07-05 Matsushita Electric Ind Co Ltd 顔検出照合装置
CN104424631A (zh) * 2013-08-23 2015-03-18 浙江大华技术股份有限公司 一种基于枪球联动系统的坐标关联方法及装置
CN104700409A (zh) * 2015-03-13 2015-06-10 国网四川省电力公司电力科学研究院 一种根据监控目标自动调整摄像机预置位的方法
CN104754302A (zh) * 2015-03-20 2015-07-01 安徽大学 一种基于枪球联动系统的目标检测跟踪方法
CN105242689A (zh) * 2015-09-23 2016-01-13 浙江大学 一种基于光学反射的云台跟踪视觉系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
鲁宇: ""人眼虹膜图像采集跟瞄系统设计"", 《中国优秀硕士学位论文全文数据库（电子期刊）》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108020158A (zh) * 2016-11-04 2018-05-11 浙江大华技术股份有限公司 一种基于球机的三维位置测量方法及装置
CN108270986A (zh) * 2016-12-30 2018-07-10 中兴通讯股份有限公司 一种云台控制及处理方法、装置、系统、电子设备
CN107730556A (zh) * 2017-09-13 2018-02-23 济南中维世纪科技有限公司 一种枪球联动坐标定位方法
CN107730556B (zh) * 2017-09-13 2021-07-16 济南中维世纪科技有限公司 一种枪球联动坐标定位方法
CN109839896A (zh) * 2017-11-29 2019-06-04 蓝思智能机器人(长沙)有限公司 一种控制x/y执行器移动的方法、装置和介质
CN108062115A (zh) * 2018-02-07 2018-05-22 成都新舟锐视科技有限公司 一种基于云台控制技术的多目标连续跟踪系统及方法
CN111327880A (zh) * 2020-02-20 2020-06-23 浙江大华技术股份有限公司 智能监控的方法、摄像机、计算机设备及存储介质
CN113194263A (zh) * 2021-07-01 2021-07-30 中国南方电网有限责任公司超高压输电公司广州局 枪球联动控制方法、装置、计算机设备和存储介质
CN113194263B (zh) * 2021-07-01 2021-10-22 中国南方电网有限责任公司超高压输电公司广州局 枪球联动控制方法、装置、计算机设备和存储介质
CN114141053A (zh) * 2021-12-07 2022-03-04 无锡加视诚智能科技有限公司 一种高位枪球联动装置及使用方法
CN115278014A (zh) * 2022-07-22 2022-11-01 重庆紫光华山智安科技有限公司 一种目标跟踪方法、系统、计算机设备及可读介质
CN115278014B (zh) * 2022-07-22 2023-09-15 重庆紫光华山智安科技有限公司 一种目标跟踪方法、系统、计算机设备及可读介质

Also Published As

Publication number Publication date
CN106027887B (zh) 2019-01-25

Similar Documents

Publication Publication Date Title
CN106027887A (zh) 针对旋镜云台的枪球联动控制的方法、装置及电子设备
US20170132806A1 (en) System and method for augmented reality and virtual reality applications
CN104184932B (zh) 球机控制方法及装置
US10600150B2 (en) Utilizing an inertial measurement device to adjust orientation of panorama digital images
CN106104203B (zh) 一种移动物体的距离检测方法、装置及飞行器
CN111025283B (zh) 雷达与球机联动的方法及装置
CN105931263A (zh) 一种目标跟踪方法及电子设备
EP3273412B1 (en) Three-dimensional modelling method and device
CN106408551B (zh) 一种监控装置控制的方法及装置
JP6174968B2 (ja) 撮像シミュレーション装置
JP2014529727A (ja) 自動シーン較正
EP3644826A1 (en) A wearable eye tracking system with slippage detection and correction
CN104469170B (zh) 双目摄像装置、图像处理方法及装置
CN108564615A (zh) 模拟激光雷达探测的方法、装置、系统及存储介质
US20180035100A1 (en) Method and apparatus for extending binocular camera positioning range
US10904562B2 (en) System and method for constructing optical flow fields
US20230012240A1 (en) Data acquisition device, data correction method and apparatus, and electronic device
CN106826867A (zh) 一种机器人及控制机器人头部转动的方法
CN108028904A (zh) 移动设备上光场增强现实/虚拟现实的方法和系统
CN110458104B (zh) 人眼视线检测系统的人眼视线方向确定方法和系统
CN111309141A (zh) 屏幕估计
JP2009260564A (ja) 移動体画像追尾装置
JP7192526B2 (ja) 画像処理装置、画像処理方法及びプログラム
EP2962290B1 (en) Relaying 3d information by depth simulation using 2d pixel displacement
CN105323553A (zh) 一种云台设备的控制方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100192 Block B, Building 1, Tiandi Adjacent to Maple Industrial Park, No. 1, North Yongtaizhuang Road, Haidian District, Beijing

Applicant after: BEIJING DEEPGLINT INFORMATION TECHNOLOGY CO., LTD.

Address before: 100091 No. 6 Yudai Road, Haidian District, Beijing

Applicant before: BEIJING DEEPGLINT INFORMATION TECHNOLOGY CO., LTD.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 100192 Block B, Building 1, Tiandi Adjacent to Maple Industrial Park, No. 1, North Yongtaizhuang Road, Haidian District, Beijing

Patentee after: Beijing gelingshentong Information Technology Co.,Ltd.

Address before: 100192 Block B, Building 1, Tiandi Adjacent to Maple Industrial Park, No. 1, North Yongtaizhuang Road, Haidian District, Beijing

Patentee before: BEIJING DEEPGLINT INFORMATION TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder