CN104190078A - 一种光枪射击的目标识别方法、装置及系统 - Google Patents

一种光枪射击的目标识别方法、装置及系统 Download PDF

Info

Publication number
CN104190078A
CN104190078A CN201410432763.3A CN201410432763A CN104190078A CN 104190078 A CN104190078 A CN 104190078A CN 201410432763 A CN201410432763 A CN 201410432763A CN 104190078 A CN104190078 A CN 104190078A
Authority
CN
China
Prior art keywords
camera
light source
coordinate system
image
field picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410432763.3A
Other languages
English (en)
Other versions
CN104190078B (zh
Inventor
李乐
周琨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Huanchuang Technology Co ltd
Original Assignee
SHENZHEN TVPALY TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN TVPALY TECHNOLOGY Co Ltd filed Critical SHENZHEN TVPALY TECHNOLOGY Co Ltd
Priority to CN201410432763.3A priority Critical patent/CN104190078B/zh
Publication of CN104190078A publication Critical patent/CN104190078A/zh
Application granted granted Critical
Publication of CN104190078B publication Critical patent/CN104190078B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明适用于电子设备领域,提供了一种光枪射击的目标识别方法,该方法包括:获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。与现有技术相比,本发明可准确获取所述光枪姿态,从而能够更好的保证光枪射击的目标位置的准确性。

Description

一种光枪射击的目标识别方法、装置及系统
技术领域
本发明属于电子设备领域,尤其涉及一种光枪射击的目标识别方法、装置及系统。
背景技术
光枪作为重要的体感射击游戏道具,由于其通过光线仿真子弹的射击,使得射击类游戏可以从有线的鼠标键盘控制中解放,利用光线的直线传播仿真枪类的射击,提供更为生动的射击效果。
为了准确的获取光枪射击在屏幕上的目标位置,需要对光枪进行有效的定位。现有的一般作法为通过光学感知方式,通过安装在目标屏幕端的LED红外灯条以及设置于手持终端上的红外摄像头,通过红外摄像头获取灯条的位置,以用来计算出光枪的大概指向,并将指向位置粗略的换算成在屏幕的像素位置。
但是,由于使用LED灯条无法为红外摄像头提供绝对定位,使得光枪指向的位置是相对的,这样容易导致光枪实际射击的目标位置与计算的目标位置出现较大的偏差。
发明内容
本发明实施例的目的在于提供一种光枪射击的目标识别方法、装置及系统,以解决现有技术中由于使用LED灯条无法为红外摄像头提供绝对定位,使得光枪指向的位置是相对的,这样容易导致光枪实际射击的目标位置与计算的目标位置出现较大的偏差的问题。
本发明实施例是这样实现的,一种光枪射击的目标识别方法,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述方法包括:
获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;
根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
本发明实施例的另一方面还提供一种光枪射击的目标识别装置,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述装置包括:
位置获取单元,用于获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;
姿态关系矩阵计算单元,用于根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
位置确定单元,用于根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
本发明实施例的另一方面还提供了一种光枪射击的目标识别系统,所述系统包括光枪、电视识别器和分析处理中心,所述电视识别器可设置于所述用于光枪射击的目标屏幕,在所述电视识别器上设置有第一摄像头、第一光源、第一同步通信模块、第一处理器,所述光枪上设置有第二摄像头、第二光源、第二同步通信模块以及第二处理器,其中:
所述第一处理器用于获取所述第二光源在所述第一摄像头生成的图像中的位置,所述第二处理器用于获取的所述第一光源在所述第二摄像头生成的图像中的位置,所述分析处理中心用于接收第一处理器通过第一同步通信模块发送的所述第二光源在所述第一摄像头生成的图像中的位置,以及第二处理器通过第二同步通信模块发送的所述第一光源在所述第二摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵,并根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
在本发明实施例中,通过目标屏幕上的第一摄像头获取光枪上第二光源的在生成图像中的位置,以及光枪上的第二摄像头获取目标屏幕上的第一光源在生成图像中的位置,可以得到第一摄像头坐标系与第二摄像头坐标系之间的第一姿态关系矩阵,并根据第一摄像头的坐标系与目标屏幕的坐标系之间的第二姿态关系矩阵,从而可以确定所述光枪光心射线在所述目标屏幕中的位置。本发明所述方案与现有技术相比,由光枪的第二摄像头和第二光源以及电视定位器的第一摄像头和第一光源,可准确获取所述光枪姿态,从而能够更好的保证光枪射击的目标位置的准确性。
附图说明
图1是本发明实施例提供的光枪射击的目标识别方法的实现流程图;
图2是本发明实施例提供的获取光源的位置的实现流程图;
图3是本发明实施例提供的光枪射击的目标识别系统的结构示意图;
图4为本发明实施例提供的光枪射击的目标识别装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例可应用于各种使用光线作为控制终端的互动设备,包括如游戏机中的射击类游戏机等,所述光枪可以理解为各种通过光信号进行控制的手持终端,由于在游戏类设备中,多以光枪形式出现,故在本申请中统称为光枪。通过光枪在目标屏幕中对应的射击位置,使得相应的控制指令作用于屏幕的该位置处,本发明通过提高光枪的目标位置与响应坐标的准确度,进一步提高用户的使用体验。
图1示出了本发明实施例提供的光枪射击的目标识别方法的实现流程,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述方法包括:
在步骤S101中,获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置。
具体的,所述电视识别器上设置第一摄像头和第一光源,通过配合光枪上设置的第二摄像头与第二光源,确定所述光枪的姿态,通过精确的求解光枪相对于电视识别器的绝对坐标,以获得光枪的光心的绝对指向。
其中,所述电视识别器,为设置于电视机顶端,或者设置于电视机底部,或者固定于电视机的侧部,用于辅助定位所述电视机屏幕的位置。其中,所述电视机的屏幕尺寸以及所述电视识别器与所述电视机的相对位置,在进行目标位置识别时,需要预先输入相应的参数。
其中,所述第一光源和第二光源,可以为红外光源,也可以为可见光源。当所述第一光源或第二光源为红外光源时,用于接收所述红外光源的对应的第二摄像头或第一摄像头对应为红外摄像头,当所述第一光源或第二光源为可见光源时,所述对应的第二摄像头或第一摄像头可以为普通的可见光摄像机。
所述第一光源,可以为三个红外光源或可见光源,也可以为三个以上的多个红外光源或可见光源,多个第一光源用于定位时,可进一步提高定位的准确度,一般可选用三个红外光源。
所述目标屏幕,可以为普通的电视机或者游戏机屏幕,当然也可以为其它液晶显示器屏幕。所述屏幕上可以预先设定多个标定点,可以用于标定当前光枪的姿态位置,优选的实施方式为在目标屏幕的四个角落位置设备四个标定点,以及在屏幕的正中设置标定点,这样可以更好的实现标定的效果。
所述获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置步骤,在所述光枪和所述电视识别器上设置有同步通信模块,具体过程可以如图2所示:
在步骤S201中,使用同步通信模块使第一光源点亮,第二光源熄灭,使第一摄像头、第二摄像头同步曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像。
具体的,可以通过电视识别器中的同步通信模块向所述光枪的同步通信模块发送同步信号,使所述第一光源点亮、第二光源熄灭,并通过第一摄像头获取第一帧图像、第二摄像头获取第二帧图像。
在步骤S202中,使用同步通信模块使第一光源熄灭,第二光源点亮,使第一摄像头和第二摄像头再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像。
具体的,可以通过第一同步通信模块与第二同步通信模块进行通信,使得所述第一光源熄灭和第二光源点亮,由第一摄像头和第二摄像头在与步骤S201中相同的角度获取第三帧图像和第四帧图像。
当然,步骤S201和步骤S202只是一种较佳实施方式,可以理解的是,为得到第一、第二、第三、第四帧图像,还可以同时点亮或者同时熄灭第一光源和第二光源,或者第一摄像头和第二摄像头先后曝光等方式等。
在步骤S203中,将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
由于第一帧图像和第三帧图像的区别仅在于第二光源是否点亮,当两帧图像相减时,即可去掉相同的背景图像,得到第二光源在图像中的位置。
同样,由于第二帧图像和第四帧图像的区别仅在于第一光源是否点亮,当两帧图像相减时,即可去掉相同的背景图像,得到第一光源在图像中的位置。
在步骤S102中,根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵。
具体如图3所示,所述第一光源所在坐标系为Oc1,第二光源所在坐标系为Oc2,为确定所述第一光源的坐标系Oc1与第二光源所在坐标系Oc2之间的姿态关系矩阵,需要经过多次迭代进行求解,也即通过多次同步曝光获取第一帧差图像和第二帧差图像。具体计算步骤可以为:
根据所述第一光源在所述第二摄像头生成的图像中的位置p1、以及第二光源在所述第一摄像头生成的图像中的位置p2,以及公式
p1=K1*Mt*Pw2
p2=K2*inv(Mt)*Pw1
计算得到所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
其中,所述K1为第一摄像头的内部参数矩阵,K2为第二摄像头的内部参数矩阵,Pw2为已知的第二光源相对于第二摄像头的空间3D坐标,Pw2为已知的第一光源相对于第一摄像头的空间3D坐标,Mt为待求的第一摄像头坐标系与第二摄像头坐标系之间的关系矩阵。
如图3所示,作为电视识别器上设置有三个红外LED光源作为第一光源,电视识别器中第一光源的坐标系为Oc1,光枪上的第二光源的坐标系为Oc2,目标屏幕的坐标系为Os,作为光枪第二光源的发射射线的参数矩阵为L,光枪打在目标屏幕的2D位置为(pix,piy)。
上述求解Mt的过程为实时的过程,也就是说,光枪在使用过程中,空间的位置角度是不断变化的,因此需要实时的记录其空间的位置关系的变化,可以根据预定的更新周期,计算所述光枪的坐标系与所述双目摄像机的坐标系之间的第一姿态关系矩阵Mt
在步骤S103中,根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
具体的,所述根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置步骤包括:
根据所计算的第一姿态关系矩阵Mt以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵M,由公式
L c = M t * L * M t T
c=M*Lc*MT*P
pixX=c(1)/c(4)
pixY=c(2)/c(4)
计算得到所述光枪光心射线在屏幕上的坐标位置(pix,piy);
其中,所述L为光枪射线参数矩阵,所述为Mt的转置矩阵,所述MT为M的转置矩阵,所述P为目标屏幕的平面参数向量,所述c(1)、c(2)、c(4)分别为向量c中的第1个值、第2个值和第4个值。
本发明实施例中通过目标屏幕上的第一摄像头获取光枪上第二光源的在生成图像中的位置,以及光枪上的第二摄像头获取目标屏幕上的第一光源在生成图像中的位置,可以得到第一摄像头坐标系与第二摄像头坐标系之间的第一姿态关系矩阵,并根据第一摄像头的坐标系与目标屏幕的坐标系之间的第二姿态关系矩阵,从而可以确定所述光枪光心射线在所述目标屏幕中的位置。本发明所述方案与现有技术相比,由光枪的第二摄像头和第二光源以及电视定位器的第一摄像头和第一光源,可准确获取所述光枪姿态,从而能够更好的保证光枪射击的目标位置的准确性。
另外,由于本发明所述的光枪射击的目标识别方法不需要依赖复杂的传感器,只需要光学设备便可以求得绝对的光枪指向关系,从而可以降低成本。
如图4所示为本发明实施例提供的光枪射击的目标识别装置的结构示意图,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述装置包括:
位置获取单元401,用于获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;
姿态关系矩阵计算单元402,用于根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
位置确定单元403,用于根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
优选的,所述姿态关系矩阵计算单元具体用于:
根据所述第一光源在所述第二摄像头生成的图像中的位置p1、以及第二光源在所述第一摄像头生成的图像中的位置p2,以及公式
p1=K1*Mt*Pw2
p2=K2*inv(Mt)*Pw1
计算得到所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
其中,所述K1为第一摄像头的内部参数矩阵,K2为第二摄像头的内部参数矩阵,Pw2为已知的第二光源相对于第二摄像头的空间3D坐标,Pw2为已知的第一光源相对于第一摄像头的空间3D坐标,Mt为待求的第一摄像头坐标系与第二摄像头坐标系之间的关系矩阵。
更进一步的,所述所述位置确定单元具体用于:
根据所计算的第一姿态关系矩阵Mt以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵M,由公式
L c = M t * L * M t T
c=M*L*MT*P
c
pixX=c(1)/c(4)
pixY=c(2)/c(4)
计算得到所述光枪光心射线在屏幕上的坐标位置(pix,piy);
其中,所述L为光枪射线参数矩阵,所述为Mt的转置矩阵,所述MT为M的转置矩阵,所述P为目标屏幕的平面参数向量,所述c(1)、c(2)、c(4)分别为向量c中的第1个值、第2个值和第4个值。
优选的,所述位置获取单元包括:
第一曝光子单元,用于使用同步通信模块使第一光源点亮,第二光源熄灭,使第一摄像头、第二摄像头同步曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像;
第二曝光子单元,用于使用同步通信模块使第一光源熄灭,第二光源点亮,使第一摄像头和第二摄像头再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像;
像素位置获取子单元,用于将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
图4所示的光枪射击的目标识别装置与图1和图2所示的光枪射击的目标识别方法对应,在此不作重复赘述。
如图3所示,本发明实施例所述的光枪射击的目标识别系统的结构示意图,所述系统包括光枪、电视识别器和分析处理中心,所述电视识别器可设置于所述用于光枪射击的目标屏幕,在所述电视识别器上设置有第一摄像头、第一光源、第一同步通信模块、第一处理器,所述光枪上设置有第二摄像头、第二光源、第二同步通信模块以及第二处理器,其中:
所述第一处理器用于获取所述第二光源在所述第一摄像头生成的图像中的位置,所述第二处理器用于获取的所述第一光源在所述第二摄像头生成的图像中的位置,所述分析处理中心用于接收第一处理器通过第一同步通信模块发送的所述第二光源在所述第一摄像头生成的图像中的位置,以及第二处理器通过第二同步通信模块发送的所述第一光源在所述第二摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵,并根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
优选的,所述第一处理器用于获取所述第二光源在所述第一摄像头生成的图像中的位置,所述第二处理器用于获取的所述第一光源在所述第二摄像头生成的图像中的位置具体为:
所述第一同步信号通信模块和第二同步通信模块进行通信,第一光源点亮,同时第二光源熄灭,此时第一像头和第二摄像头同时曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像;且在第一光源熄灭,同时第二光源点亮,此时第一摄像头和第二摄像头同时再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像;
第一处理器用于将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,第二处理器用于将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
本发明实施例所述光枪射击的目标识别系统与图1和图3所述的光枪射击的目标识别方法对应。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种光枪射击的目标识别方法,其特征在于,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述方法包括:
获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;
根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵步骤包括:
根据所述第一光源在所述第二摄像头生成的图像中的位置p1、以及第二光源在所述第一摄像头生成的图像中的位置p2,以及公式
p1=K1*Mt*Pw2
p2=K2*inv(Mt)*Pw1
计算得到所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
其中,所述K1为第一摄像头的内部参数矩阵,K2为第二摄像头的内部参数矩阵,Pw2为已知的第二光源相对于第二摄像头的空间3D坐标,Pw2为已知的第一光源相对于第一摄像头的空间3D坐标,Mt为待求的第一摄像头坐标系与第二摄像头坐标系之间的关系矩阵。
3.根据权利要求1或2所述方法,其特征在于,所述根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置步骤包括:
根据所计算的第一姿态关系矩阵Mt以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵M,由公式
L c = M t * L * M t T
c=M*Lc*MT*P
pixX=c(1)/c(4)
pixY=c(2)/c(4)
计算得到所述光枪光心射线在屏幕上的坐标位置(pix,piy);
其中,所述L为光枪射线参数矩阵,所述为Mt的转置矩阵,所述MT为M的转置矩阵,所述P为目标屏幕的平面参数向量,所述c(1)、c(2)、c(4)分别为向量c中的第1个值、第2个值和第4个值。
4.根据权利要求1所述方法,其特征在于,在所述光枪和所述电视识别器上设置有同步通信模块,所述获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置步骤包括:
使用同步通信模块使第一光源点亮,第二光源熄灭,使第一摄像头、第二摄像头同步曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像;
使用同步通信模块使第一光源熄灭,第二光源点亮,使第一摄像头和第二摄像头再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像;
将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
5.一种光枪射击的目标识别装置,其特征在于,在目标屏幕上的电视识别器上设置有第一摄像头、第一光源,所述光枪上设置有第二光源和第二摄像头,所述装置包括:
位置获取单元,用于获取的所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置;
姿态关系矩阵计算单元,用于根据所述第一光源在所述第二摄像头生成的图像中的位置以及所述第二光源在所述第一摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
位置确定单元,用于根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
6.根据权利要求5所述装置,其特征在于,所述姿态关系矩阵计算单元具体用于:
根据所述第一光源在所述第二摄像头生成的图像中的位置p1、以及第二光源在所述第一摄像头生成的图像中的位置p2,以及公式
p1=K1*Mt*Pw2
p2=K2*inv(Mt)*Pw1
计算得到所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵;
其中,所述K1为第一摄像头的内部参数矩阵,K2为第二摄像头的内部参数矩阵,Pw2为已知的第二光源相对于第二摄像头的空间3D坐标,Pw2为已知的第一光源相对于第一摄像头的空间3D坐标,Mt为待求的第一摄像头坐标系与第二摄像头坐标系之间的关系矩阵。
7.根据权利要求5所述装置,其特征在于,所述位置确定单元具体用于:
根据所计算的第一姿态关系矩阵Mt以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵M,由公式
L c = M t * L * M t T
c=M*Lc*MT*P
pixX=c(1)/c(4)
pixY=c(2)/c(4)
计算得到所述光枪光心射线在屏幕上的坐标位置(pix,piy);
其中,所述L为光枪射线参数矩阵,所述为Mt的转置矩阵,所述MT为M的转置矩阵,所述P为目标屏幕的平面参数向量,所述c(1)、c(2)、c(4)分别为向量c中的第1个值、第2个值和第4个值。
8.根据权利要求5所述装置,其特征在于,所述位置获取单元包括:
第一曝光子单元,用于使用同步通信模块使第一光源点亮,第二光源熄灭,使第一摄像头、第二摄像头同步曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像;
第二曝光子单元,用于使用同步通信模块使第一光源熄灭,第二光源点亮,使第一摄像头和第二摄像头再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像;
像素位置获取子单元,用于将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
9.一种光枪射击的目标识别系统,其特征在于,所述系统包括光枪、电视识别器和分析处理中心,所述电视识别器可设置于所述用于光枪射击的目标屏幕,在所述电视识别器上设置有第一摄像头、第一光源、第一同步通信模块、第一处理器,所述光枪上设置有第二摄像头、第二光源、第二同步通信模块以及第二处理器,其中:
所述第一处理器用于获取所述第二光源在所述第一摄像头生成的图像中的位置,所述第二处理器用于获取的所述第一光源在所述第二摄像头生成的图像中的位置,所述分析处理中心用于接收第一处理器通过第一同步通信模块发送的所述第二光源在所述第一摄像头生成的图像中的位置,以及第二处理器通过第二同步通信模块发送的所述第一光源在所述第二摄像头生成的图像中的位置,计算所述第一摄像头坐标系与所述第二摄像头坐标系之间的第一姿态关系矩阵,并根据所计算的第一姿态关系矩阵以及预先标定的所述第一摄像头的坐标系与所述目标屏幕的坐标系的第二姿态关系矩阵,确定所述光枪光心射线在所述目标屏幕中的位置。
10.根据权利要求9所述系统,其特征在于,所述第一处理器用于获取所述第二光源在所述第一摄像头生成的图像中的位置,所述第二处理器用于获取的所述第一光源在所述第二摄像头生成的图像中的位置具体为:
所述第一同步信号通信模块和第二同步通信模块进行通信,第一光源点亮,同时第二光源熄灭,此时第一像头和第二摄像头同时曝光,第一摄像头获取第一帧图像,第二摄像头获取第二帧图像;且在第一光源熄灭,同时第二光源点亮,此时第一摄像头和第二摄像头同时再次曝光,第一摄像头获取第三帧图像,第二摄像头获取第四帧图像;
第一处理器用于将所述第一帧图像和第三帧图像相减得到第一帧差图像,根据所述第一帧差图像识别第二光源的像素位置,第二处理器用于将所述第二帧图像与第四帧图像相减得到第二帧差图像,根据所述第二帧差图像得到第一光源的像素位置。
CN201410432763.3A 2014-08-28 2014-08-28 一种光枪射击的目标识别方法、装置及系统 Active CN104190078B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410432763.3A CN104190078B (zh) 2014-08-28 2014-08-28 一种光枪射击的目标识别方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410432763.3A CN104190078B (zh) 2014-08-28 2014-08-28 一种光枪射击的目标识别方法、装置及系统

Publications (2)

Publication Number Publication Date
CN104190078A true CN104190078A (zh) 2014-12-10
CN104190078B CN104190078B (zh) 2017-05-31

Family

ID=52075532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410432763.3A Active CN104190078B (zh) 2014-08-28 2014-08-28 一种光枪射击的目标识别方法、装置及系统

Country Status (1)

Country Link
CN (1) CN104190078B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110006906A (zh) * 2019-02-20 2019-07-12 上海鋆雪自动化有限公司 一种精细雾化喷头检测装置及其控制方法
CN111752386A (zh) * 2020-06-05 2020-10-09 深圳市欢创科技有限公司 一种空间定位方法、系统及头戴式设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050202870A1 (en) * 2003-12-26 2005-09-15 Mitsuru Kawamura Information processing device, game device, image generation method, and game image generation method
KR20070102942A (ko) * 2006-04-17 2007-10-22 이문기 가상 카메라를 이용한 조준 장치
CN101158883A (zh) * 2007-10-09 2008-04-09 深圳先进技术研究院 一种基于计算机视觉的虚拟体育系统及其实现方法
TW201241396A (en) * 2011-04-06 2012-10-16 Wei-Kai Liou Leaser guide interactive electronic whiteboard technology apply to military firing training and the first person shooting (F.P.S) game system
US20130293548A1 (en) * 2009-11-16 2013-11-07 Sony Corporation Information processing apparatus, information processing method, program, and information processing system
US20140184496A1 (en) * 2013-01-03 2014-07-03 Meta Company Extramissive spatial imaging digital eye glass apparatuses, methods and systems for virtual or augmediated vision, manipulation, creation, or interaction with objects, materials, or other entities

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050202870A1 (en) * 2003-12-26 2005-09-15 Mitsuru Kawamura Information processing device, game device, image generation method, and game image generation method
KR20070102942A (ko) * 2006-04-17 2007-10-22 이문기 가상 카메라를 이용한 조준 장치
CN101158883A (zh) * 2007-10-09 2008-04-09 深圳先进技术研究院 一种基于计算机视觉的虚拟体育系统及其实现方法
US20130293548A1 (en) * 2009-11-16 2013-11-07 Sony Corporation Information processing apparatus, information processing method, program, and information processing system
TW201241396A (en) * 2011-04-06 2012-10-16 Wei-Kai Liou Leaser guide interactive electronic whiteboard technology apply to military firing training and the first person shooting (F.P.S) game system
US20140184496A1 (en) * 2013-01-03 2014-07-03 Meta Company Extramissive spatial imaging digital eye glass apparatuses, methods and systems for virtual or augmediated vision, manipulation, creation, or interaction with objects, materials, or other entities

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110006906A (zh) * 2019-02-20 2019-07-12 上海鋆雪自动化有限公司 一种精细雾化喷头检测装置及其控制方法
CN111752386A (zh) * 2020-06-05 2020-10-09 深圳市欢创科技有限公司 一种空间定位方法、系统及头戴式设备

Also Published As

Publication number Publication date
CN104190078B (zh) 2017-05-31

Similar Documents

Publication Publication Date Title
US10896497B2 (en) Inconsistency detecting system, mixed-reality system, program, and inconsistency detecting method
US20180276897A1 (en) Method and Device for Adjusting Virtual Reality Image
CN106550228B (zh) 获取三维场景的深度图的设备
US20190110039A1 (en) Head-mounted display tracking system
CN107396075B (zh) 一种投影图像校正信息的生成方法及生成装置
CN106454311B (zh) 一种led三维成像系统及方法
US9872002B2 (en) Method and device for controlling projection of wearable apparatus, and wearable apparatus
EP3139600B1 (en) Projection method
US10235806B2 (en) Depth and chroma information based coalescence of real world and virtual world images
SG10201709781TA (en) Display apparatus and method of displaying using projectors
TWI577172B (zh) 影像校正系統和立體照相機的校正方法
US9123171B1 (en) Enhancing the coupled zone of a stereoscopic display
CN105872526A (zh) 双目ar头戴显示设备及其信息显示方法
US20170185147A1 (en) A method and apparatus for displaying a virtual object in three-dimensional (3d) space
US20160381297A1 (en) Providing enhanced situational-awareness using magnified picture-in-picture within a wide field-of-view optical image
US10537814B2 (en) Screen coding methods and camera based game controller for video shoot game
US9082225B2 (en) Method, apparatus and system for adjusting stereoscopic image, television set and stereoscopic glasses
CN107864372B (zh) 立体拍照方法、装置及终端
CN107197222B (zh) 生成投影设备的校正信息的方法及装置
CN115205128A (zh) 基于结构光的深度相机温漂校正方法、系统、设备及介质
CN104121892A (zh) 一种获取光枪射击的目标位置的方法、装置及系统
CN104190078A (zh) 一种光枪射击的目标识别方法、装置及系统
US9479747B2 (en) Guide image generation device and method using parameters
KR20130130283A (ko) 증강현실을 위한 스마트폰 자이로센서 기반의 정면객체 생성시스템 및 방법
US20180278902A1 (en) Projection device, content determination device and projection method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 518000, Floor 1801, Block C, Minzhi Stock Commercial Center, North Station Community, Minzhi Street, Longhua District, Shenzhen City, Guangdong Province

Patentee after: Shenzhen Huanchuang Technology Co.,Ltd.

Address before: 3A, Maikelong Building, No. 6 Gaoxin South Sixth Road, Nanshan District, Shenzhen, Guangdong Province, 518000

Patentee before: SHENZHEN CAMSENSE TECHNOLOGIES Co.,Ltd.