CN104349096B - 一种图像标定方法、装置及电子设备 - Google Patents

一种图像标定方法、装置及电子设备 Download PDF

Info

Publication number
CN104349096B
CN104349096B CN201310347516.9A CN201310347516A CN104349096B CN 104349096 B CN104349096 B CN 104349096B CN 201310347516 A CN201310347516 A CN 201310347516A CN 104349096 B CN104349096 B CN 104349096B
Authority
CN
China
Prior art keywords
point
depth
projection
depth camera
depth image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310347516.9A
Other languages
English (en)
Other versions
CN104349096A (zh
Inventor
李翔
马军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201310347516.9A priority Critical patent/CN104349096B/zh
Priority to US14/451,977 priority patent/US9691357B2/en
Priority to DE102014111243.1A priority patent/DE102014111243A1/de
Publication of CN104349096A publication Critical patent/CN104349096A/zh
Application granted granted Critical
Publication of CN104349096B publication Critical patent/CN104349096B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Projection Apparatus (AREA)

Abstract

本申请提供了一种图像标定方法,装置及电子设备。其中一种图像标定方法,包括:获取深度摄像头在投影面上形成的深度图像,其中投影面是深度摄像头照射到的面,以及微型投影仪投射的光束照射到的面;依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,其中投影区域是微型投影仪在投影面上形成的区域,实现了自动标定投影区域在深度图像中的相对位置。当微型投影仪或者投影面发生变化后,仍可以依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,无需再依赖用户操作重新标定相对位置,加快了标定速度,提高效率。

Description

一种图像标定方法、装置及电子设备
技术领域
本申请涉及图像校正技术领域,特别涉及一种图像标定方法、装置及电子设备。
背景技术
投影仪是一种可以将图像或视频等多媒体信息投射到投影面上的设备,其可以通过不同的接口同其他电子设备进行连接,以获取该电子设备存储的图像或视频,并将图像或视频投射到投影面上。
在使用投影仪时,首先需要标定投影仪的投影区域在摄像头的识别区域的相对位置。其中图像标定过程可以是:将校准图案,如十字架投射到摄像头的识别区域到四个角上,然后由用户依次点击四个角上的十字架。识别区域响应点击操作得到投影区域的四个顶点在识别区域的坐标,从而使用四个顶点来标定投影区域在识别区域的相对位置。
从上述可以看出,现有图像标定过程需要依赖用户操作方可标定出两个区域的相对位置。
发明内容
有鉴于此,本申请实施例提供一种图像标定方法,装置及电子设备,用于解决现有图像标定过程需要依赖用户操作方可投影区域在识别区域的相对位置的问题。技术方案如下:
本申请实施例提供一种图像标定方法,应用于一电子设备,所述电子设备包括微型投影仪和深度摄像头,所述微型投影仪和所述深度摄像头的相对位置固定,所述方法包括:
获取所述深度摄像头在投影面上形成的深度图像,其中所述投影面是所述深度摄像头照射到的面,以及所述微型投影仪投射的光束照射到的面;
依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,其中所述投影区域是所述微型投影仪在所述投影面上形成的区域。
优选地,依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,包括:
获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,其中所述深度摄像头的发散点是所述深度摄像头照射的光束的在空间形成的锥体的顶点;
依据所述微型投影仪和所述深度摄像头的相对位置,以及所述垂点的像素坐标,得到所述微型投影仪的发散点在所述投影面上的垂点的像素坐标,其中所述微型投影仪的发散点是所述微型投影仪照射的光束的在空间形成的锥体的顶点;
依据微型投影仪的发散点在所述投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到所述投影区域的四个顶点的像素坐标,以标定投影区域在所述深度图像中的相对位置。
优选地,获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,包括:
获取所述深度图像的中心点的像素坐标;
得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离;
依据所述深度图像的中心点的像素坐标,结合分辨率和距离对应关系,得到所述深度图像的发散点在所述投影面上的垂点的像素坐标。
优选地,得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离,包括:
依据所述中心点的深度信息和所述深度摄像头的发散点在所述投影面上的垂点的深度信息,结合勾股定理得到所述垂点和所述中心点的距离;
或者
得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离,包括:获取所述深度图像的中心点和所述深度摄像头的发散点的连线与所述投影面的法线形成的夹角的角度值;
依据所述深度图像的中心点的深度信息和所述角度值,结合余弦定理得到所述垂点和所述中心点的距离。
优选地,通过平面方程拟合得到所述投影面的法线。
优选地,所述方法还包括:
获取操作体在所述深度图像的操作以及所述操作在所述深度图像中的操作区域;
依据投影区域在所述深度图像中的相对位置,将所述深度图像中的操作区域转换成所述投影区域的操作区域;
在所述投影区域的操作区域中执行所述操作体的操作。
本申请实施例还一种图像标定装置,应用于一电子设备,所述电子设备包括微型投影仪和深度摄像头,所述微型投影仪和所述深度摄像头的相对位置固定,所述装置包括:
获取单元,用于获取所述深度摄像头在投影面上形成的深度图像,其中所述投影面是所述深度摄像头照射到的面,以及所述微型投影仪投射的光束照射到的面;
位置得到单元,用于依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,其中所述投影区域是所述微型投影仪在所述投影面上形成的区域。
优选地,所述位置得到单元包括:
获取子单元,用于获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,其中所述深度摄像头的发散点是所述深度摄像头照射的光束的在空间形成的锥体的顶点;
第一坐标得到子单元,用于依据所述微型投影仪和所述深度摄像头的相对位置,以及所述垂点的像素坐标,得到所述微型投影仪的发散点在所述投影面上的垂点的像素坐标,其中所述微型投影仪的发散点是所述微型投影仪照射的光束的在空间形成的锥体的顶点;
第二坐标得到子单元,用于依据微型投影仪的发散点在所述投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到所述投影区域的四个顶点的像素坐标,以标定投影区域在所述深度图像中的相对位置。
优选地,所述获取子单元包括:
第一坐标获取子单元,用于获取所述深度图像的中心点的像素坐标;
距离得到子单元,用于得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离;
第二坐标获取子单元,用于依据所述深度图像的中心点的像素坐标,结合分辨率和距离对应关系,得到所述深度图像的发散点在所述投影面上的垂点的像素坐标。
优选地,所述距离得到子单元具体用于:
依据所述中心点的深度信息和所述深度摄像头的发散点在所述投影面上的垂点的深度信息,结合勾股定理得到所述垂点和所述中心点的距离;
或者获取所述深度图像的中心点和所述深度摄像头的发散点的连线与所述投影面的法线形成的夹角的角度值;依据所述深度图像的中心点的深度信息和所述角度值,结合余弦定理得到所述垂点和所述中心点的距离。
优选地,通过平面方程拟合得到所述投影面的法线。
优选地,所述装置还包括:
操作获取单元,用于获取操作体在所述深度图像的操作以及所述操作在所述深度图像中的操作区域;
转换单元,用于依据投影区域在所述深度图像中的相对位置,将所述深度图像中的操作区域转换成所述投影区域的操作区域;
执行单元,用于在所述投影区域的操作区域中执行所述操作体的操作。
本申请实施例还提供一种电子设备,包括:微型投影仪、深度摄像头和上述图像标定装置,所述微型投影仪和所述深度摄像头的相对位置固定,所述图像标定装置用于标定所述微型投影仪的投影区域在所述深度摄像头的深度图像中的相对位置。
与现有技术相比,本申请包括以下优点:
在本申请中,首先获取深度摄像头在投影面上形成的深度图像,再依据微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,从而实现了自动标定投影区域在深度图像中的相对位置。与现有技术相比,当微型投影仪或者投影面发生变化后,仍可以依据微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,无需再依赖用户操作重新标定相对位置,加快了标定速度,提高效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种图像标定方法的一种流程图;
图2为本申请实施例提供的一种图像标定方法的子流程图;
图3为深度摄像头的照射图;
图4为本申请实施例提供的距离计算的一种示意图;
图5为本申请实施例提供的距离计算的另一种示意图;
图6为本申请实施例提供的距离计算的再一种示意图;
图7为本申请实施例提供的一种图像标定方法的另一种流程图;
图8为本申请实施例提供的一种图像标定装置的一种结构示意图;
图9为本申请实施例提供的一种图像标定装置的子结构示意图;
图10为本申请实施例提供的一种图像标定装置的另一种结构示意图。
具体实施方式
本申请实施例提供的图像标定方法应用于一电子设备,其中电子设备包括微型投影仪和深度摄像头,微型投影仪和深度摄像头的相对位置固定。该图像标定方法包括:
获取深度摄像头在投影面上形成的深度图像,其中投影面是深度摄像头照射到的面,以及微型投影仪投射的光束照射到的面;
依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,其中投影区域是微型投影仪在投影面上形成的区域。
从上述方案可以看出,本申请实施例提供的图像标定方法可以实现自动标定投影区域在深度图像中的相对位置。当微型投影仪或者投影面发生变化后,仍可以依据微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,与现有技术相比,无需再依赖用户操作重新标定相对位置,加快了标定速度,提高效率。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参阅图1,其示出了本申请实施例提供的一种图像标定方法的流程图,该图像标定方法应用于一电子设备,其中电子设备包括微型投影仪和深度摄像头,微型投影仪和深度摄像头的相对位置固定。
图1所示的图像标定方法可以包括以下步骤:
步骤101:获取深度摄像头在投影面上形成的深度图像,其中投影面是深度摄像头照射到的面,以及微型投影仪投射的光束照射到的面。
深度图像是具有物体三维特征信息,即深度信息的图像,其中深度信息是指深度图像对应的场景中某一点与深度摄像头之间的距离。
在本申请实施例中,深度图像中每个像素点的坐标采用像素坐标表示。例如深度图像是640*480矩形的深度图像,则深度图像的中心点的像素坐标是(320,240),其中640是深度图像的横向分辨率,480是深度图像的纵向分辨率。
步骤102:依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,其中投影区域是微型投影仪在投影面上形成的区域。
可以理解的是:投影区域在深度图像中的相对位置可以采用投影区域的四个顶点在深度图像中的像素坐标来表示。
在本申请实施例中,得到投影区域在深度图像中的相对位置的一种可行方式可以参阅图2所示的流程图,包括:
步骤1021:获取深度摄像头的发散点在投影面上的垂点的像素坐标,其中深度摄像头的发散点是深度摄像头照射的光束的在空间形成的锥体的顶点。
下面以图3所示深度摄像头的照射图为例,对深度摄像头的参数,如发散点、中心点以及垂点进行说明。在图3中点B、C、D和E是从点A发出的光束,照射到投影面上形成的点,该五个点构成的图形是深度摄像头照射的光束的在空间形成的锥体,所以点A是深度摄像头的发散点。从点A向投影面做垂线,该垂线与投影面的相交点G则是发散点在投影面上的垂点。
点B、C、D和E构成的区域是深度摄像头在投影面上所照射到的区域,深度摄像头所获得的深度图像是该区域的深度图像。深度摄像头照射到的区域是一个矩形区域,因此矩形的中心点F是深度图像的中心点。
在深度图像中每个像素点的坐标采用像素坐标表示,且深度图像是矩形的深度图像的情况下,可以获得该深度图像的中心点的像素坐标,如前述深度图像是640*480矩形的深度图像,其中心点的像素坐标是(320,240)。
进一步,深度图像是具有深度信息的图像,其中深度信息是指深度图像对应的场景中某一点与深度摄像头之间的距离。具体地,深度信息是投影面中每个点到发散点的距离,因此AG和AF两条线的长度可知。又因为线AG垂直于投影面,所以通过勾股定理可以计算出线GF的长度,即得到深度摄像头的发散点在投影面上的垂点和中心点的距离。
在线GF平行于线CE的情况下,垂点G和中心点F的纵向像素坐标相同,垂点G的横向像素坐标则可以依据分辨率和距离的对应关系得到,从而得到垂点G的像素坐标。
在线GF不平行于线CE的情况下,垂点G和中心点F的横向像素坐标和纵向像素坐标都不同,此时则需要进一步计算垂点G和中心点F的相对位置,即垂点G的横向像素坐标到中心点F的横向像素坐标的距离,以及垂点G的纵向像素坐标到中心点F的纵向像素坐标的距离,具体请参阅图4所示。
从中心点F做平行于线CE的直线,从垂点G做平行于线CB的直线,两个直线的相交点记为H,则本领域技术人员可知,线GH的长度是垂点G的纵向像素坐标到中心点F的纵向像素坐标的距离,线HF的长度是垂点G的纵向像素坐标到中心点F的纵向像素坐标的距离,且线GH垂直于线HF。
线GH和线HF的长度获取过程可以是:首先从深度图像中获得线AG和线AF的长度,通过勾股定理得到直角三角形AGF中线GF的长度,再从深度图像中获得线AH的长度,依据勾股定理得到直角三角形AGH中线GH的长度,进一步通过勾股定理得到直角三角形GHF中线HF的长度。
在得到线GH和线HF的长度,即得到垂点G的横向像素坐标到中心点F的横向像素坐标的距离,以及垂点G的纵向像素坐标到中心点F的纵向像素坐标的距离后,结合分辨率和距离对应关系,得到垂点的像素坐标。
上述分辨率和距离对应关系获取过程可以是:从深度图像中可以得到线AC和线AE的长度,三角形ACE的顶角ACE的取值是深度摄像头的视角,依据三角形定理可以得到线CE的长度。同样可以得到线CB的长度。进一步深度图像的横向分辨率和纵向分辨率已知,则可以得到分辨率和距离的对应关系。
例如深度图像是640*480的深度图像时,其横向分辨率是640,纵向分辨率是480,线CE的长度是20cm,线CB的长度是15cm,则分辨率和距离的对应关系是:横向距离中每厘米表示32横向分辨率,纵向距离中每厘米表示32纵向分辨率。
在本申请实施例中,深度摄像头的发散点在投影面上的垂点和中心点的距离的获取过程也可以如下:
获取深度图像的中心点和深度摄像头的发散点的连线与投影面的法线形成的夹角的角度值,再依据深度图像的中心点的深度信息和角度值,结合余弦定理得到垂点和中心点的距离。其中投影面的法线通过平面方程拟合得到。平面方程拟合得到投影面的法线的过程请参阅现有平面方程拟合过程,对此本申请实施例不再加以阐述。
如图5所示投影面的法线平行于线AG,所以角GAF的取值等于深度图像的中心点和深度摄像头的发散点的连线与投影面的法线1形成的夹角的角度值,所以在获知角GAF的取值后,结合深度图像的中心点的深度信息,依据定理得到垂点和中心点的距离。
步骤1022:依据微型投影仪和深度摄像头的相对位置,以及垂点的像素坐标,得到微型投影仪的发散点在投影面上的垂点的像素坐标,其中微型投影仪的发散点是微型投影仪照射的光束的在空间形成的锥体的顶点。
可以理解的是:深度摄像头的发散点在投影面上的垂点和微型投影仪的发散点在投影面上的垂点的相对位置是:微型投影仪和深度摄像头的相对位置。在获得深度摄像头的发散点在投影面上的垂点的像素坐标后,根据该相对位置即可得到微型投影仪的发散点在投影面上的垂点的像素坐标。
比如:dx是深度摄像头和微型投影仪在水平X轴上的距离,dy是两者在Y轴上的距离,若深度摄像头的发散点在投影面上的垂点的像素坐标是(x,y),则微型投影仪的发散点在投影面上的垂点的像素坐标(x+dx对应的横向分辨率,y+dy对应的纵向分辨率)。
步骤1023:依据微型投影仪的发散点在投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到投影区域的四个顶点的像素坐标,以标定投影区域在深度图像中的相对位置。
下面结合附图6具体介绍投影区域的四个顶点的像素坐标的获取过程,图6中点O是微型投影仪的发散点,点P是微型投影仪的发散点在投影面上的垂点,点Q、M、N和Z是投影区域的四个顶点。在本申请实施例中以点Q为例说明顶点的像素坐标的获取过程。具体如下:
从点P向线QM和线QN分别作垂线,其相交点为I和J,线OI、线OP和线OJ的长度可以从深度图像中获得,则依据勾股定理可以得到线PI和线PJ的长度。
进一步在获知微型投影仪的发散点在投影面上的垂点的像素坐标的情况下,结合分辨率和距离对应关系得到点Q的像素坐标。同样点M、N和Z的像素坐标的获取过程也可以参阅点Q的像素坐标的获取过程。
当微型投影仪或者投影面发生变化后,仍可以依据微型投影仪和所述深度摄像头的相对位置,参见图1至图6所示内容得到投影区域在所述深度图像中的相对位置,相对于现有技术来说,本申请实施例提供的图像标定方法无需再依赖用户操作重新标定相对位置,加快了标定速度,提高效率。
在标定投影区域在深度图像中的相对位置后,还可以进一步将在深度图像中的操作转换为对投影区域的操作,如图7所示,其示出了本申请实施例提供的图像标定方法的另一种流程图,可以包括以下步骤:
步骤201:获取深度摄像头在投影面上形成的深度图像,其中投影面是深度摄像头照射到的面,以及微型投影仪投射的光束照射到的面。
步骤202:依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,其中投影区域是微型投影仪在投影面上形成的区域。
步骤201和步骤202的具体过程请参阅步骤101和步骤102中的阐述,对此本申请实施例不再加以赘述。
步骤203:获取操作体在深度图像的操作以及操作在深度图像中的操作区域。
其中,操作体在深度图像的操作包括:点击操作和/或滑动操作。如果操作体在深度图像中进行点击操作,则获取该点击操作在深度图像中的点击坐标。如果操作体在深度图像中进行滑动操作,则获取操作体在执行该滑动操作接触和离开操作物,如屏幕时的点坐标。
步骤204:将深度图像中的操作区域转换成投影区域的操作区域。
投影区域在深度图像中的相对位置已获知,进而在得到深度图像中的操作区域后,依据该相对位置,将深度图像中的操作区域转换成投影区域的操作区域。
步骤205:在投影区域的操作区域中执行操作体的操作。
与上述方法实施例相对应,本申请实施例提供一种图像标定装置,应用于一电子设备,其中电子设备包括微型投影仪和深度摄像头,微型投影仪和深度摄像头的相对位置固定。
本申请实施例提供的图像标定装置的结构示意图请参阅图8所示,可以包括:获取单元11和位置得到单元12。其中,
获取单元11,用于获取深度摄像头在投影面上形成的深度图像,其中投影面是深度摄像头照射到的面,以及微型投影仪投射的光束照射到的面。
在本申请实施例中,深度图像是具有物体三维特征信息,即深度信息的图像,其中深度信息是指深度图像对应的场景中某一点与深度摄像头之间的距离。
深度图像中每个像素点的坐标采用像素坐标表示。例如深度图像是640*480矩形的深度图像,则深度图像的中心点的像素坐标是(320,240),其中640是深度图像的横向分辨率,480是深度图像的纵向分辨率。
位置得到单元12,用于依据微型投影仪和深度摄像头的相对位置,得到投影区域在深度图像中的相对位置,其中投影区域是微型投影仪在投影面上形成的区域。
可以理解的是,投影区域在深度图像中的相对位置可以采用投影区域的四个顶点在深度图像中的像素坐标来表示。则位置得到单元12的一种结构示意图请参阅图9所示,包括:获取子单元121、第一坐标得到子单元122和第二坐标得到子单元123。其中,
获取子单元121,用于获取深度摄像头的发散点在投影面上的垂点的像素坐标,其中深度摄像头的发散点是深度摄像头照射的光束的在空间形成的锥体的顶点。
具体地,获取子单元包括:第一坐标获取子单元、距离得到子单元和第二坐标获取子单元,其中,
第一坐标获取子单元,用于获取深度图像的中心点的像素坐标。
距离得到子单元,用于得到深度摄像头的发散点在投影面上的垂点和中心点的距离。
在本申请实施例中,距离得到子单元具体用于:依据中心点的深度信息和深度摄像头的发散点在投影面上的垂点的深度信息,结合勾股定理得到垂点和中心点的距离;或者获取深度图像的中心点和深度摄像头的发散点的连线与投影面的法线形成的夹角的角度值;依据深度图像的中心点的深度信息和角度值,结合余弦定理得到垂点和中心点的距离。其中投影面的法线通过平面方程拟合得到。
第二坐标获取子单元,用于依据深度图像的中心点的像素坐标,结合分辨率和距离对应关系,得到深度图像的发散点在投影面上的垂点的像素坐标。
第一坐标得到子单元122,用于依据微型投影仪和深度摄像头的相对位置,以及垂点的像素坐标,得到微型投影仪的发散点在投影面上的垂点的像素坐标,其中微型投影仪的发散点是微型投影仪照射的光束的在空间形成的锥体的顶点。
可以理解的是:深度摄像头的发散点在投影面上的垂点和微型投影仪的发散点在投影面上的垂点的相对位置是:微型投影仪和深度摄像头的相对位置。在获得深度摄像头的发散点在投影面上的垂点的像素坐标后,根据该相对位置即可得到微型投影仪的发散点在投影面上的垂点的像素坐标。
比如:dx是深度摄像头和微型投影仪在水平X轴上的距离,dy是两者在Y轴上的距离,若深度摄像头的发散点在投影面上的垂点的像素坐标是(x,y),则微型投影仪的发散点在投影面上的垂点的像素坐标(x+dx对应的横向分辨率,y+dy对应的纵向分辨率)。
第二坐标得到子单元123,用于依据微型投影仪的发散点在投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到投影区域的四个顶点的像素坐标,以标定投影区域在深度图像中的相对位置,具体获取过程请参阅附图6的相关说明。
请参阅图10,其示出了本申请实施例提供的一种图像标定装置的另一种结构示意图,在图8基础上,还包括:操作获取单元13、转换单元14和执行单元15。其中,
操作获取单元13,用于获取操作体在深度图像的操作以及操作在深度图像中的操作区域。
其中,操作体在深度图像的操作包括:点击操作和/或滑动操作。如果操作体在深度图像中进行点击操作,则获取该点击操作在深度图像中的点击坐标。如果操作体在深度图像中进行滑动操作,则获取操作体在执行该滑动操作接触和离开操作物,如屏幕时的点坐标。
转换单元14,用于依据投影区域在深度图像中的相对位置,将深度图像中的操作区域转换成投影区域的操作区域。
投影区域在深度图像中的相对位置已获知,进而在得到深度图像中的操作区域后,依据该相对位置,将深度图像中的操作区域转换成投影区域的操作区域。
执行单元15,用于在投影区域的操作区域中执行操作体的操作。
此外,本申请实施例还提供一种电子设备,包括:微型投影仪、深度摄像头和上述图像标定装置,微型投影仪和深度摄像头的相对位置固定,图像标定装置用于标定微型投影仪的投影区域在深度摄像头的深度图像中的相对位置。其中图像标定装置的具体结构和实施请参阅上述装置实施例和方法实施例,对此本申请实施例不再加以阐述。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
以上对本申请所提供的一种图像标定方法、装置及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (11)

1.一种图像标定方法,应用于一电子设备,其特征在于,所述电子设备包括微型投影仪和深度摄像头,所述微型投影仪和所述深度摄像头的相对位置固定,所述方法包括:
获取所述深度摄像头在投影面上形成的深度图像,其中所述投影面是所述深度摄像头照射到的面,以及所述微型投影仪投射的光束照射到的面;
依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,其中所述投影区域是所述微型投影仪在所述投影面上形成的区域;
依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,包括:
获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,其中所述深度摄像头的发散点是所述深度摄像头照射的光束的在空间形成的锥体的顶点;
依据所述微型投影仪和所述深度摄像头的相对位置,以及所述垂点的像素坐标,得到所述微型投影仪的发散点在所述投影面上的垂点的像素坐标,其中所述微型投影仪的发散点是所述微型投影仪照射的光束的在空间形成的锥体的顶点;
依据微型投影仪的发散点在所述投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到所述投影区域的四个顶点的像素坐标,以标定投影区域在所述深度图像中的相对位置。
2.根据权利要求1所述的方法,其特征在于,获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,包括:
获取所述深度图像的中心点的像素坐标;
得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离;
依据所述深度图像的中心点的像素坐标,结合分辨率和距离对应关系,得到所述深度图像的发散点在所述投影面上的垂点的像素坐标。
3.根据权利要求2所述的方法,其特征在于,得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离,包括:
依据所述中心点的深度信息和所述深度摄像头的发散点在所述投影面上的垂点的深度信息,结合勾股定理得到所述垂点和所述中心点的距离;
或者
得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离,包括:获取所述深度图像的中心点和所述深度摄像头的发散点的连线与所述投影面的法线形成的夹角的角度值;
依据所述深度图像的中心点的深度信息和所述角度值,结合余弦定理得到所述垂点和所述中心点的距离。
4.根据权利要求3所述的方法,其特征在于,通过平面方程拟合得到所述投影面的法线。
5.根据权利要求1至4任意一项所述的方法,其特征在于,所述方法还包括:
获取操作体在所述深度图像的操作以及所述操作在所述深度图像中的操作区域;
依据投影区域在所述深度图像中的相对位置,将所述深度图像中的操作区域转换成所述投影区域的操作区域;
在所述投影区域的操作区域中执行所述操作体的操作。
6.一种图像标定装置,应用于一电子设备,其特征在于,所述电子设备包括微型投影仪和深度摄像头,所述微型投影仪和所述深度摄像头的相对位置固定,所述装置包括:
获取单元,用于获取所述深度摄像头在投影面上形成的深度图像,其中所述投影面是所述深度摄像头照射到的面,以及所述微型投影仪投射的光束照射到的面;
位置得到单元,用于依据所述微型投影仪和所述深度摄像头的相对位置,得到投影区域在所述深度图像中的相对位置,其中所述投影区域是所述微型投影仪在所述投影面上形成的区域;
所述位置得到单元包括:
获取子单元,用于获取所述深度摄像头的发散点在所述投影面上的垂点的像素坐标,其中所述深度摄像头的发散点是所述深度摄像头照射的光束的在空间形成的锥体的顶点;
第一坐标得到子单元,用于依据所述微型投影仪和所述深度摄像头的相对位置,以及所述垂点的像素坐标,得到所述微型投影仪的发散点在所述投影面上的垂点的像素坐标,其中所述微型投影仪的发散点是所述微型投影仪照射的光束的在空间形成的锥体的顶点;
第二坐标得到子单元,用于依据微型投影仪的发散点在所述投影面上的垂点的像素坐标,结合分辨率和距离对应关系得到所述投影区域的四个顶点的像素坐标,以标定投影区域在所述深度图像中的相对位置。
7.根据权利要求6所述的装置,其特征在于,所述获取子单元包括:
第一坐标获取子单元,用于获取所述深度图像的中心点的像素坐标;
距离得到子单元,用于得到所述深度摄像头的发散点在所述投影面上的垂点和所述中心点的距离;
第二坐标获取子单元,用于依据所述深度图像的中心点的像素坐标,结合分辨率和距离对应关系,得到所述深度图像的发散点在所述投影面上的垂点的像素坐标。
8.根据权利要求7所述的装置,其特征在于,所述距离得到子单元具体用于:
依据所述中心点的深度信息和所述深度摄像头的发散点在所述投影面上的垂点的深度信息,结合勾股定理得到所述垂点和所述中心点的距离;
或者获取所述深度图像的中心点和所述深度摄像头的发散点的连线与所述投影面的法线形成的夹角的角度值;依据所述深度图像的中心点的深度信息和所述角度值,结合余弦定理得到所述垂点和所述中心点的距离。
9.根据权利要求8所述的装置,其特征在于,通过平面方程拟合得到所述投影面的法线。
10.根据权利要求6至9任意一项所述的装置,其特征在于,所述装置还包括:
操作获取单元,用于获取操作体在所述深度图像的操作以及所述操作在所述深度图像中的操作区域;
转换单元,用于依据投影区域在所述深度图像中的相对位置,将所述深度图像中的操作区域转换成所述投影区域的操作区域;
执行单元,用于在所述投影区域的操作区域中执行所述操作体的操作。
11.一种电子设备,其特征在于,包括:微型投影仪、深度摄像头和如权利要求9至10任意一项所述的图像标定装置,所述微型投影仪和所述深度摄像头的相对位置固定,所述图像标定装置用于标定所述微型投影仪的投影区域在所述深度摄像头的深度图像中的相对位置。
CN201310347516.9A 2013-08-09 2013-08-09 一种图像标定方法、装置及电子设备 Active CN104349096B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201310347516.9A CN104349096B (zh) 2013-08-09 2013-08-09 一种图像标定方法、装置及电子设备
US14/451,977 US9691357B2 (en) 2013-08-09 2014-08-05 Information processing method and electronic device thereof, image calibration method and apparatus, and electronic device thereof
DE102014111243.1A DE102014111243A1 (de) 2013-08-09 2014-08-07 Verfahren und elektronisches Gerät zur Informationsverarbeitung, Verfahren und Vorrichtung und elektronisches Gerät zur Bildkalibrierung

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310347516.9A CN104349096B (zh) 2013-08-09 2013-08-09 一种图像标定方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN104349096A CN104349096A (zh) 2015-02-11
CN104349096B true CN104349096B (zh) 2017-12-29

Family

ID=52503798

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310347516.9A Active CN104349096B (zh) 2013-08-09 2013-08-09 一种图像标定方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN104349096B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3144888A1 (en) * 2015-09-17 2017-03-22 Thomson Licensing An apparatus and a method for generating data representing a pixel beam
CN107454373B (zh) * 2016-05-31 2019-06-14 财团法人工业技术研究院 投影系统及其非平面自动校正方法与自动校正处理装置
CN108279809B (zh) * 2018-01-15 2021-11-19 歌尔科技有限公司 一种校准方法和装置
CN108289208B (zh) * 2018-01-24 2020-11-27 歌尔股份有限公司 一种投影画面自动校正方法和装置
CN108600716A (zh) * 2018-05-17 2018-09-28 京东方科技集团股份有限公司 投影设备和系统、投影方法
CN110769222B (zh) * 2018-12-24 2021-08-17 成都极米科技股份有限公司 投影面深度信息获取方法、投影方法及投影系统
CN110769224B (zh) * 2018-12-27 2021-06-29 成都极米科技股份有限公司 投影区域获取方法及投影方法
CN110491316A (zh) * 2019-07-08 2019-11-22 青岛小鸟看看科技有限公司 一种投影仪及其投影控制方法
CN112950677A (zh) * 2021-01-12 2021-06-11 湖北航天技术研究院总体设计所 图像跟踪仿真方法、装置、设备及存储介质
US12010466B2 (en) 2021-06-22 2024-06-11 Industrial Technology Research Institute Visual recognition based method and system for projecting patterned light, method and system applied to oral inspection, and machining system
TWI807480B (zh) * 2021-06-22 2023-07-01 財團法人工業技術研究院 基於視覺辨識的圖案光投影方法與系統、應用於口腔檢測的方法與系統、及機械加工系統
CN116828163B (zh) * 2023-08-30 2023-11-21 深圳市影冠科技有限公司 一种投影仪的控制系统及控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1577050A (zh) * 2003-07-11 2005-02-09 精工爱普生株式会社 图像处理系统、投影机及图像处理方法
CN1601368A (zh) * 2003-09-26 2005-03-30 精工爱普生株式会社 图像处理系统、投影机以及图像处理方法
CN102221887A (zh) * 2011-06-23 2011-10-19 康佳集团股份有限公司 互动投影系统及方法
CN102455575A (zh) * 2010-10-28 2012-05-16 精工爱普生株式会社 投影型显示装置及其控制方法
CN102708566A (zh) * 2012-05-08 2012-10-03 天津工业大学 一种新型的单个摄像机和单个投影光源同步标定方法
CN102954770A (zh) * 2011-08-15 2013-03-06 佳能株式会社 三维测量设备和三维测量方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7593024B2 (en) * 2005-01-15 2009-09-22 International Business Machines Corporation Screen calibration for display devices

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1577050A (zh) * 2003-07-11 2005-02-09 精工爱普生株式会社 图像处理系统、投影机及图像处理方法
CN1601368A (zh) * 2003-09-26 2005-03-30 精工爱普生株式会社 图像处理系统、投影机以及图像处理方法
CN102455575A (zh) * 2010-10-28 2012-05-16 精工爱普生株式会社 投影型显示装置及其控制方法
CN102221887A (zh) * 2011-06-23 2011-10-19 康佳集团股份有限公司 互动投影系统及方法
CN102954770A (zh) * 2011-08-15 2013-03-06 佳能株式会社 三维测量设备和三维测量方法
CN102708566A (zh) * 2012-05-08 2012-10-03 天津工业大学 一种新型的单个摄像机和单个投影光源同步标定方法

Also Published As

Publication number Publication date
CN104349096A (zh) 2015-02-11

Similar Documents

Publication Publication Date Title
CN104349096B (zh) 一种图像标定方法、装置及电子设备
CN104349095B (zh) 一种图像调整方法、装置及电子设备
CN107547879B (zh) 一种投影成像的校正方法、装置及激光电视
JP6914268B2 (ja) 曲面ディスプレイ画面用のパース補正
CN110300292B (zh) 投影畸变校正方法、装置、系统及存储介质
JP6344050B2 (ja) 画像処理システム、画像処理装置、プログラム
US9691357B2 (en) Information processing method and electronic device thereof, image calibration method and apparatus, and electronic device thereof
US9545784B2 (en) Projection image correction system and projection image correction method
CN110191326B (zh) 一种投影系统分辨率扩展方法、装置和投影系统
CN104869376B (zh) 视频融合中多图像多像素级别几何校正方法
JP2007072537A (ja) 360°画像撮影装置
KR20150135765A (ko) 웨어러블 장치의 프로젝션을 제어하기 위한 방법 및 디바이스, 및 웨어러블 장치
US9030553B2 (en) Projector image correction device and method
CN110996083A (zh) 一种梯形校正方法、装置和电子设备及可读存储介质
JP2015233266A (ja) 画像処理システム、情報処理装置、プログラム
JP2016096516A (ja) 画像処理装置、画像投影システム、画像処理方法およびプログラム
Iwai et al. Shadow removal of projected imagery by occluder shape measurement in a multiple overlapping projection system
CN103994779A (zh) 基于三维激光点云的全景相机标定方法
WO2021022775A1 (zh) 深度图像生成方法、装置、设备及计算机可读存储介质
CN108062790B (zh) 应用于物体三维重建的三维坐标系建立方法
CN108895979A (zh) 线段编码的结构光深度获取方法
WO2017091289A1 (en) Projecting an image on an irregularly shaped display surface
JP6121746B2 (ja) 撮影位置決定装置、プログラム、および方法
Xu et al. Real-time keystone correction for hand-held projectors with an RGBD camera
CN203949640U (zh) 结构光图案发生器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant