CN111397582B - 一种目标物的定位方法、装置、可读介质及电子设备 - Google Patents
一种目标物的定位方法、装置、可读介质及电子设备 Download PDFInfo
- Publication number
- CN111397582B CN111397582B CN202010259208.0A CN202010259208A CN111397582B CN 111397582 B CN111397582 B CN 111397582B CN 202010259208 A CN202010259208 A CN 202010259208A CN 111397582 B CN111397582 B CN 111397582B
- Authority
- CN
- China
- Prior art keywords
- structured light
- reference point
- determining
- coordinate
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/04—Interpretation of pictures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/12—Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Multimedia (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明公开了一种目标物的定位方法、装置、可读介质及电子设备,包括:通过预设的图像分析模型,确定待测图像中的目标物;根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标;根据所述参考点的像素坐标,确定所述参考点的结构光坐标;利用所述结构光传感器,确定结构光坐标范围;当所述参考点的结构光坐标和所述结构光坐标范围匹配,根据所述结构光坐标范围对所述目标物定位;根据对于目标物的定位能够对空间划分以及地图展示等功能提供明确条件和依据。
Description
技术领域
本发明涉及图像分析技术领域,尤其涉及一种目标物的定位方法、装置、可读介质及电子设备。
背景技术
对于自走型的智能机器人(如扫地机器人)来说,通常都需要对其所处空间建立地图。现有技术中,可以通过SLAM(simultaneous localization and mapping,即同步定位建图)建立空间地图,进而使智能机器人实现导航、路线规划和地图展示等功能。
对于室内空间建立地图之后,还可进一步的对地图进行区域划分,以便于更合理的完成行进路线的规划。但是由于室内空间中可能存在各种各样的干扰因素,所以当前实现的空间划分可能由于缺少明确的目标物,导致准确性较低。
发明内容
本发明提供一种目标物的定位方法、装置、可读介质及电子设备,结合待测图像与结构光探测,实现对于室内目标物的定位,从而为空间划分提供明确条件。
第一方面,本发明提供了一种目标物的定位方法,包括:
通过预设的图像分析模型,确定待测图像中的目标物;
根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标;
根据所述参考点的像素坐标,确定所述参考点的结构光坐标;
利用所述结构光传感器,确定结构光坐标范围;
当所述参考点的结构光坐标和所述结构光坐标范围匹配,根据所述结构光坐标范围对所述目标物定位。
优选地,所述根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标包括:
在所述待测图像中,确定所述结构光线的投影线;
根据所述投影线,和所述目标物在所述待测图像中的像素坐标范围,确定所述结构光线的参考线段;
在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标。
优选地,所述根据所述参考点的像素坐标,确定所述参考点的结构光坐标包括:
确定采集所述待测图像的相机,与所述结构光传感器的相对位置关系;
通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标。
优选地,所述通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标包括:
根据所述参考点的像素坐标和所述相对位置关系,确定所述参考点的世界坐标;
根据所述参考点的世界坐标,确定所述参考点的结构光坐标。
优选地,所述利用所述结构光传感器,确定结构光坐标范围包括:
当所述结构光传感器采集到非连续的结构光信号,将所述结构光信号非连续的范围确定为所述结构光坐标范围。
优选地,所述参考点的结构光坐标和所述结构光坐标范围匹配包括:
当所述参考点的结构光坐标在所述结构光坐标范围以内,则所述参考点的结构光坐标和所述结构光坐标范围匹配。
优选地,还包括:
根据所述结构光坐标范围对所述目标物定位之后,利用所述目标物进行空间划分。
第二方面,本发明提供了一种目标物的定位装置,包括:
目标物确定模块,用于通过预设的图像分析模型,确定待测图像中的目标物;
参考点确定模块,用于根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标;
结构光坐标确定模块,用于根据所述参考点的像素坐标,确定所述参考点的结构光坐标;
坐标范围确定模块,用于利用所述结构光传感器,确定的结构光坐标范围;
定位模块,用于在所述参考点的结构光坐标和所述结构光坐标范围匹配时,根据所述结构光坐标范围对所述目标物定位。
第三方面,本发明提供了一种可读介质,包括执行指令,当电子设备的处理器执行所述执行指令时,所述电子设备执行如第一方面中任一所述的目标物的定位方法。
第四方面,本发明提供了一种电子设备,包括处理器以及存储有执行指令的存储器,当所述处理器执行所述存储器存储的所述执行指令时,所述处理器执行如第一方面中任一所述的目标物的定位方法。
本发明提供了一种目标物的定位方法、装置、可读介质及电子设备,通过结构光传感器探测到室内空间不闭合的位置,确定结构光坐标范围;并通过对待测图像进行分析,能够确定导致空间不闭合的目标物,并通过坐标转换确定了目标物截取结构光线的参考点的结构光坐标;对所述参考点的结构光坐标和所述结构光坐标范围进行匹配,判断导致室内空间不闭合的结构是否为待测图像中特定种类的目标物,进而实现对于目标物的定位;根据对于目标物的定位能够对空间划分以及地图展示等功能提供明确条件和依据。
上述的非惯用的优选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
为了更清楚地说明本发明实施例或现有的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为现有技术中非闭合室内空间的示意图;
图2为本发明一实施例提供的一种目标物的定位方法的流程示意图;
图3为本发明一实施例提供的另一种目标物的定位方法的流程示意图;
图4为本发明一实施例中待测图像的示意图;
图5为本发明一实施例提供的一种目标物的定位装置的结构示意图;
图6为本发明一实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合具体实施例及相应的附图对本发明的技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
自走型的智能机器人对于室内空间建立地图之后,还可进一步的对地图进行区域划分,以便于更合理的完成行进路线的规划。一些情况下,室内空间界限明确,墙壁、门、窗可以共同构成一个闭合的空间,利用智能机器人搭载的结构光传感器能够轻易的完成空间划分。但在另一些情况下,室内空间并不完全闭合,所以通过结构光传感器可能无法实现空间划分,或者完成空间划分的准确性较低。
例如图1所示的情况,C房间与D房间连接的门开启,导致C房间不是一个完全闭合的空间。处于C房间中的智能机器人通过结构光传感器发射结构光线之后,投射到墙壁上的结构光线能够反射形成结构光信号,使智能机器人感知到“墙”的存在。但投射向“门”的方向的结构光线将从开启的门中穿过,使智能机器人感知到“门”的位置“没有物体”。此时智能机器人无法确定这一“没有物体”的空间究竟是“门”、“窗”或“走廊”,因此便无法准确的划分出C房间的空间范围。
因此,本发明提供一种目标物的定位方法及装置,结合待测图像与结构光探测,实现对于室内目标物的定位,从而为空间划分提供明确条件。
参见图2所示,为本发明提供的目标物的定位方法的具体实施例。本实施例中,所述方法具体包括以下步骤:
步骤201、通过预设的图像分析模型,确定待测图像中的目标物。
本实施例中,目标物可以泛指任何致使室内空间不闭合的结构。例如敞开状态下的门、窗等结构。本实施例中,将结合图像分析技术确定智能机器人的探测范围内出现的目标物。
通常在智能机器人上,将会搭载摄像头、相机等图像采集设备。利用此类设备对于探测范围进行拍摄,即可得到针对该探测范围的待测图像。进而对待测图像进行图像分析,可确定待测图像中是否包括特定种类的目标物,以及目标物的具体位置。
从待测图像中分析确定目标物的过程,可利用预设的图像分析模型实现。通常图像分析模型可基于神经网络技术搭建,当然也可根据需要采用其他技术,本实施例中对此不做限定。图像分析模型需预先针对特定的目标物进行训练。具体的,即以大量的针对目标物进行标注的样本图片作为样本集,并利用样本集对图像分析模型进行训练,使之可以对待测图像进行分析,从而定待测图像中是否包括特定种类的目标物。进一步的,还可以确定目标物的具体位置,即目标物在待测图像中的像素坐标范围。
步骤202、根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标。
在智能机器人上,还将会搭载结构光传感器。结构光传感器与所述图像采集设备有相对固定的位置关系。并且图像采集设备的拍摄范围,与结构光传感器的探测范围大致相同。
通常,结构光传感器发出的结构光线,呈以其自身为圆心的扇形或半圆形,并且结构光线与水平面平行。因此,结构光线投射到室内墙壁上时,会形成一条平行于水平面的直线,即投影线。但是由于结构光线会穿过目标物,所以投影线在目标物范围内将是断开的。而本实施例中所述方法的最终目的,即判断投影线断开的位置,究竟是否为特定的目标物。
由于图像采集设备的拍摄范围,与结构光传感器的探测范围大致相同,且相对位置关系固定。所以能够利用二者的几何关系,确定出投影线在待测图像中的位置。也就能够确定出穿过目标物的结构光线所在的位置。可以理解的是,目标物将会截取结构光线形成一条线段,即参考线段。本实施例中,将在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标。
步骤203、根据所述参考点的像素坐标,确定所述参考点的结构光坐标。
确定参考点的像素坐标之后,即可根据结构光传感器与图像采集设备的相对位置关系,对参考点的像素坐标进行坐标转换。即确定该参考点投影到结构光传感器的坐标系当中的位置,得到所述参考点的结构光坐标。本实施例中对于上述的坐标转换过程不做限定,任何能可实现的计算方式均可结合在本实施例整体技术方案当中。
步骤204、利用所述结构光传感器,确定结构光坐标范围。
结合图1所示可以理解的是,结构光线投射到室内墙壁上时,会形成一条平行于水平面的直线,即投影线。结构光线经过反射形成的结构光信号。结构光传感器接收到该结构光信号之后,即探测到了其相对于墙壁的距离,从而确定了墙壁的形状和位置。
而在目标物致使室内空间不闭合的情况下,结构光线会穿过目标物,即如图1所示。在结构光线穿过目标物的范围内,结构光信号可能会缺失,即探测不到物体。或者可能结构光信号所探测到的距离与“墙壁段”的距离数值有明显的差别,也就是探测到了更远处的物体。总之在目标物的范围内,结构光信号探测得到的距离数值与目标物范围之外将出现明显的不连续。
本实施例中,即可将上述体现为明显不连续的结构光信号对应的坐标范围,确定为目标物对应的结构光坐标范围。所述结构光坐标范围意味着在这一范围内,室内空间不闭合。
步骤205、当所述参考点的结构光坐标和所述结构光坐标范围匹配,根据所述结构光坐标范围对所述目标物定位。
根据前述已知的是,通过结构光传感器确定了结构光坐标范围,能够得知室内空间在这一位置不闭合,但无法确定不闭合的空间究竟是“门”、“窗”或“走廊”。而通过对待测图像进行分析,能够确定导致空间不闭合的目标物,并通过坐标转换确定了目标物截取结构光线的参考点的结构光坐标。
所以只需对所述参考点的结构光坐标和所述结构光坐标范围进行匹配,即可对二者进行印证,确定导致室内空间不闭合的结构,是否为待测图像中的目标物。如果所述参考点的结构光坐标在所述结构光坐标范围以内,可以认为所述参考点的结构光坐标和所述结构光坐标范围匹配。也就是说,正是待测图像中的目标物导致室内空间不闭合,结构光信号出现不连续。
至此,本实施例中实现了对于目标物的定位,确定目标物在结构光传感器的坐标系当中的位置,即对应所述结构光坐标范围。后续可以根据目标物的位置,准确的实现对于室内空间的划分。亦可根据目标物的位置,实现对于地图的展示功能。
通过以上技术方案可知,本实施例存在的有益效果是:通过结构光传感器探测到室内空间不闭合的位置,确定结构光坐标范围;并通过对待测图像进行分析,能够确定导致空间不闭合的目标物,并通过坐标转换确定了目标物截取结构光线的参考点的结构光坐标;对所述参考点的结构光坐标和所述结构光坐标范围进行匹配,判断导致室内空间不闭合的结构是否为待测图像中特定种类的目标物,进而实现对于目标物的定位;根据对于目标物的定位能够对空间划分以及地图展示等功能提供明确条件和依据。
图2所示仅为本发明所述方法的基础实施例,在其基础上进行一定的优化和拓展,还能够得到所述方法的其他优选实施例。
如图3所示,为本发明所述目标物的定位方法的另一个具体实施例。本实施例在前述实施例的基础上,结合具体应用场景进行进一步的叙述。本实施例中,所述方法具体包括以下步骤:
步骤301、通过预设的图像分析模型,确定待测图像中的目标物。
本实施例中,待测图像如图4中所示。通过图像分析模型,可以确定图4中的粗线矩形代表本实施例中目标物,本实施例目标物具体为敞开状态下的门;门的所在范围之外则为墙壁。进一步的,可以确定目标物在待测图像中的像素坐标范围。
步骤302、在所述待测图像中,确定所述结构光线的投影线。
结构光传感器发出的结构光线可以是水平的半圆型。通过几何关系可以确定结构光线投射到实际空间中的位置,也就是其映射到待测图像中的位置。如图4所示,图4中水平方向的虚线即代表结构光线投射到墙壁上形成的投影线。
步骤303、根据所述投影线,和所述目标物在所述待测图像中的像素坐标范围,确定所述结构光线的参考线段。
而由于结构光线穿过目标物,导致投影线在目标物“门”的范围内断开。断开位置(即“门”的范围截取投影线的范围)图4中以点画线表示。该点画线范围,即本步骤中所确定的参考线段。
步骤304、在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标。
在待测图像中确定了参考线段之后,便可确定所述参考线段在待测图像中的像素坐标范围。进一步的,可以在参考线段中选取多个参考点。优选的可以选择10~20个参考点,并确定每个参考点在所述待测图像中的像素坐标。图4中所述的P点,即代表一个参考点。
拍摄过程中能够取得参考点P在相机(即图像采集设备)中的三维坐标(X,Y,Z)。本实施例中,则可将此三维坐标转换成二维坐标(u,v),(u,v)即参考点的像素坐标。
转换过程可参考如下公式:
其中f代表相机焦距,sx,sy,ox,oy均为本领域中公知的相机内参。
步骤305、通过图像采集设备与结构光传感器的相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标。
在本实施例中为了简化计算过程,可将采集所述待测图像的相机和结构光传感器设置于同一水平高度,并进一步确定二者的相对位置关系。进一步的,可以根据所述参考点的像素坐标和所述相对位置关系,确定所述参考点的世界坐标;根据所述参考点的世界坐标,确定所述参考点的结构光坐标。
将参考点的像素坐标转换成世界坐标可参考以下公式:
其中,(UP,VP,WP)代表参考点的世界坐标;R代表相机的旋转矩阵,T代表相机的平移矩阵,即所述的相对位置关系将通过旋转矩阵与平移矩阵的形式体现。
将参考点的世界坐标转换成结构光坐标可参考以下公式:
(U,V,W)=A(UP,VP,WP)
其中,(U,V,W)代表参考点的结构光坐标;A代表世界坐标系到结构光坐标系的转换矩阵,可视为已知。另一些情况下为了便于计算,可将世界坐标系和结构光坐标系设定为同一坐标系,即(U,V,W)=(UP,VP,WP)。
步骤306、当所述结构光传感器采集到非连续的结构光信号,将所述结构光信号非连续的范围确定为所述结构光坐标范围。
结构光线投射到室内墙壁上,再经过反射会形成的结构光信号。光传感器接收到该结构光信号之后,即探测到了其相对于墙壁的距离,从而确定了墙壁的形状和位置。结构光线落在室内墙壁上的位置,即图4中所示的投影线。可以理解的是,墙壁在物理空间中是连续的,所以结构光传感器到墙壁各处的距离,数值应当是连续的。假设结构光传感器处于闭合的空间当中,则其获得的结构光信号应该是完全连续的结构光信号。
但由于室内空间在目标物的位置处不闭合,结构光线从敞开的门中穿过,所以必然会导致结构光信号探测的距离在目标物的范围之内(即参考线段的范围内)与范围之外非连续。目标物范围之内的结构光线可能探测不到物体,即结构光信号缺失;也可能探测到更远处的物体,即测得的距离明显大于目标物范围之外。本实施例中,所述结构光信号非连续的范围确定为结构光坐标范围。
步骤307、当所述参考点的结构光坐标在所述结构光坐标范围以内,根据所述结构光坐标范围对所述目标物定位。
结构光坐标范围意味着,在这一范围内室内空间不闭合。但仅仅凭借结构光传感器的探测,尚无法确定是何种结构导致了这一“不闭合”。将参考点的结构光坐标和结构光坐标范围进行匹配,则实现了对于待测图像与结构光信号二者的相互印证。从而确定导致这一“不闭合”的结构,究竟是否为目标物。
当参考点的结构光坐标在结构光坐标范围以内,则意味着结构光传感器所探测到的室内空间不闭合的位置,恰好是待测图像中目标物(敞开状态下的门)的位置。在本实施例场景之下,则可确定正是待测图像中出现的门,导致了室内空间不闭合,使结构光传感器探测到了非连续的结构光信号。
步骤308、根据所述结构光坐标范围对所述目标物定位之后,利用所述目标物进行空间划分。
如上所述,假如确定导致室内空间“不闭合”的结构正是目标物“门”,则通常可以认为“门”的两侧应属于室内空间不同的区域。进一步的可以通过目标物的坐标(也就是结构光坐标范围)实现对于室内空间的划分。相反如果目标物为“走廊”,或者判断发现并非目标物导致室内空间“不闭合”,则通常不应直接根据目标物的坐标进行空间划分,以免出现错误。由此,根据待测图像与结构光信号二者的相互印证,实现对于目标物的定位,对空间划分以及地图展示等功能提供明确条件和依据。
如图5所示,为本发明所述目标物的定位装置的一个具体实施例。本实施例所述装置,即用于执行图2~3所述方法的实体装置。其技术方案本质上与上述实施例一致,上述实施例中的相应描述同样适用于本实施例中。本实施例中所述装置包括:
目标物确定模块501,用于通过预设的图像分析模型,确定待测图像中的目标物。
参考点确定模块502,用于根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标。
结构光坐标确定模块503,用于根据所述参考点的像素坐标,确定所述参考点的结构光坐标。
坐标范围确定模块504,用于利用所述结构光传感器,确定结构光坐标范围。
定位模块505,用于在所述参考点的结构光坐标和所述结构光坐标范围匹配时,根据所述结构光坐标范围对所述目标物定位。
另外在图5所示实施例的基础上,优选地,参考点确定模块502包括:
投影线确定单元,用于在所述待测图像中,确定所述结构光线的投影线。
参考线段确定单元,用于根据所述投影线,和所述目标物在所述待测图像中的像素坐标范围,确定所述结构光线的参考线段。
参考点确定单元,用于在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标。
所述结构光坐标确定模块503包括:
位置关系确定单元,用于确定采集所述待测图像的相机,与所述结构光传感器的相对位置关系。
坐标转换单元,用于通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标。
所述坐标转换单元包括:
第一转换子单元,用于根据所述参考点的像素坐标和所述相对位置关系,确定所述参考点的世界坐标。
第二转换子单元,用于根据所述参考点的世界坐标,确定所述参考点的结构光坐标。
坐标范围确定模块504包括:
结构信号接收单元,用于接收并确定非连续的结构光信号。
坐标范围确定单元,用于将所述结构光信号非连续的范围确定为所述结构光坐标范围。
所述定位模块505包括:
匹配单元,用于在所述参考点的结构光坐标在所述结构光坐标范围以内时,则确定所述参考点的结构光坐标和所述结构光坐标范围匹配。
定位单元,用于根据所述结构光坐标范围对所述目标物定位。
另外,还包括:
空间划分模块,用于在根据所述结构光坐标范围对所述目标物定位之后,利用所述目标物进行空间划分。
图6是本发明实施例提供的一种电子设备的结构示意图。在硬件层面,该电子设备包括处理器,可选地还包括内部总线、网络接口、存储器。其中,存储器可能包含内存,例如高速随机存取存储器(Random-Access Memory,RAM),也可能还包括非易失性存储器(non-volatile memory),例如至少1个磁盘存储器等。当然,该电子设备还可能包括其他业务所需要的硬件。
处理器、网络接口和存储器可以通过内部总线相互连接,该内部总线可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(PeripheralComponent Interconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图6中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
存储器,用于存放执行指令。具体地,执行指令即可被执行的计算机程序。存储器可以包括内存和非易失性存储器,并向处理器提供执行指令和数据。
在一种可能实现的方式中,处理器从非易失性存储器中读取对应的执行指令到内存中然后运行,也可从其它设备上获取相应的执行指令,以在逻辑层面上形成目标物的定位装置。处理器执行存储器所存放的执行指令,以通过执行的执行指令实现本发明任一实施例中提供的目标物的定位方法。
上述如本发明图5所示实施例提供的目标物的定位装置执行的方法可以应用于处理器中,或者由处理器实现。处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
本发明实施例还提出了一种可读介质,该可读存储介质存储有执行指令,存储的执行指令被电子设备的处理器执行时,能够使该电子设备执行本发明任一实施例中提供的目标物的定位方法,并具体用于执行如图2或图3所示的方法。
前述各个实施例中所述的电子设备可以为计算机。
本领域内的技术人员应明白,本发明的实施例可提供为方法或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例,或软件和硬件相结合的形式。
本发明中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本发明的实施例而已,并不用于限制本发明。对于本领域技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。
Claims (8)
1.一种目标物的定位方法,其特征在于,包括:
通过预设的图像分析模型,确定待测图像中的目标物;
根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标;
根据所述参考点的像素坐标,确定所述参考点的结构光坐标;
利用所述结构光传感器,确定结构光坐标范围;
当所述参考点的结构光坐标和所述结构光坐标范围匹配,根据所述结构光坐标范围对所述目标物定位;
其中,所述根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标包括:
在所述待测图像中,确定所述结构光线的投影线;
根据所述投影线,和所述目标物在所述待测图像中的像素坐标范围,确定所述结构光线的参考线段;
在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标;
其中,所述根据所述参考点的像素坐标,确定所述参考点的结构光坐标包括:
确定采集所述待测图像的相机,与所述结构光传感器的相对位置关系;
通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标。
2.根据权利要求1所述方法,其特征在于,所述通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标包括:
根据所述参考点的像素坐标和所述相对位置关系,确定所述参考点的世界坐标;
根据所述参考点的世界坐标,确定所述参考点的结构光坐标。
3.根据权利要求1所述方法,其特征在于,所述利用所述结构光传感器,确定结构光坐标范围包括:
当所述结构光传感器采集到非连续的结构光信号,将所述结构光信号非连续的范围确定为所述结构光坐标范围。
4.根据权利要求1所述方法,其特征在于,所述参考点的结构光坐标和所述结构光坐标范围匹配包括:
当所述参考点的结构光坐标在所述结构光坐标范围以内,则所述参考点的结构光坐标和所述结构光坐标范围匹配。
5.根据权利要求1~4任意一项所述方法,其特征在于,还包括:
根据所述结构光坐标范围对所述目标物定位之后,利用所述目标物进行空间划分。
6.一种目标物的定位装置,其特征在于,包括:
目标物确定模块,用于通过预设的图像分析模型,确定待测图像中的目标物;
参考点确定模块,用于根据结构光传感器生成的结构光线,和所述待测图像中的目标物确定参考点;并确定所述参考点的像素坐标;其中,所述参考点确定模块具体包括:
投影线确定单元,用于在所述待测图像中,确定所述结构光线的投影线;
参考线段确定单元,用于根据所述投影线,和所述目标物在所述待测图像中的像素坐标范围,确定所述结构光线的参考线段;
参考点确定单元,用于在所述参考线段上确定多个参考点,并确定各所述参考点在所述待测图像中的像素坐标;
结构光坐标确定模块,用于根据所述参考点的像素坐标,确定所述参考点的结构光坐标;其中,所述结构光坐标确定模块具体包括:
位置关系确定单元,用于确定采集所述待测图像的相机,与所述结构光传感器的相对位置关系;
坐标转换单元,用于通过所述相对位置关系,将所述参考点的像素坐标转换成所述参考点的结构光坐标;
坐标范围确定模块,用于利用所述结构光传感器,确定结构光坐标范围;
定位模块,用于在所述参考点的结构光坐标和所述结构光坐标范围匹配时,根据所述结构光坐标范围对所述目标物定位。
7.一种可读介质,包括执行指令,当电子设备的处理器执行所述执行指令时,所述电子设备执行如权利要求1至5中任一权项所述的目标物的定位方法。
8.一种电子设备,包括处理器以及存储有执行指令的存储器,当所述处理器执行所述存储器存储的所述执行指令时,所述处理器执行如权利要求1至5中任一权项所述的目标物的定位方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010259208.0A CN111397582B (zh) | 2020-04-03 | 2020-04-03 | 一种目标物的定位方法、装置、可读介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010259208.0A CN111397582B (zh) | 2020-04-03 | 2020-04-03 | 一种目标物的定位方法、装置、可读介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111397582A CN111397582A (zh) | 2020-07-10 |
CN111397582B true CN111397582B (zh) | 2021-12-10 |
Family
ID=71433672
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010259208.0A Active CN111397582B (zh) | 2020-04-03 | 2020-04-03 | 一种目标物的定位方法、装置、可读介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111397582B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113341752B (zh) * | 2021-06-25 | 2023-04-14 | 杭州萤石软件有限公司 | 一种智能门锁与清洁机器人联动的方法、智能家居系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101629806B (zh) * | 2009-06-22 | 2011-01-05 | 哈尔滨工程大学 | 结合激光发射器的非线性ccd三维定位装置及定位方法 |
CN103411553B (zh) * | 2013-08-13 | 2016-03-02 | 天津大学 | 多线结构光视觉传感器的快速标定方法 |
CN104570147B (zh) * | 2014-12-26 | 2017-05-31 | 北京控制工程研究所 | 一种基于单目相机和主动结构光的障碍探测方法 |
CN105783876A (zh) * | 2016-05-26 | 2016-07-20 | 华北理工大学 | 基于单目视觉和圆结构光的目标姿态测量系统及测量方法 |
CN106875444B (zh) * | 2017-01-19 | 2019-11-19 | 浙江大华技术股份有限公司 | 一种目标物定位方法及装置 |
CN110174093B (zh) * | 2019-05-05 | 2022-10-28 | 腾讯科技(深圳)有限公司 | 定位方法、装置、设备和计算机可读存储介质 |
CN111504299B (zh) * | 2020-04-03 | 2023-08-18 | 北京小狗吸尘器集团股份有限公司 | 一种地图建立方法、装置、可读介质及电子设备 |
-
2020
- 2020-04-03 CN CN202010259208.0A patent/CN111397582B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN111397582A (zh) | 2020-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108955718B (zh) | 一种视觉里程计及其定位方法、机器人以及存储介质 | |
US20190120934A1 (en) | Three-dimensional alignment of radar and camera sensors | |
CN110146096B (zh) | 一种基于图像感知的车辆定位方法及装置 | |
Yan et al. | Joint camera intrinsic and lidar-camera extrinsic calibration | |
US12008785B2 (en) | Detection, 3D reconstruction and tracking of multiple rigid objects moving in relation to one another | |
CN111679688A (zh) | 一种自走机器人的充电方法、装置、可读介质及电子设备 | |
Bejanin et al. | Model validation for change detection [machine vision] | |
CN112037249A (zh) | 一种对摄像装置影像中物体进行跟踪的方法及装置 | |
Silva et al. | Camera calibration using a color-depth camera: Points and lines based DLT including radial distortion | |
CN111397582B (zh) | 一种目标物的定位方法、装置、可读介质及电子设备 | |
CN111504299B (zh) | 一种地图建立方法、装置、可读介质及电子设备 | |
JP6410231B2 (ja) | 位置合わせ装置、位置合わせ方法及び位置合わせ用コンピュータプログラム | |
CN109587303B (zh) | 电子设备和移动平台 | |
CN114661049A (zh) | 一种巡检方法、装置及计算机可读介质 | |
CN118463965A (zh) | 定位精度评价方法、装置以及车辆 | |
Collins et al. | Site model acquisition and extension from aerial images | |
JP6886136B2 (ja) | 位置合わせ装置、位置合わせ方法及び位置合わせ用コンピュータプログラム | |
CN111489384B (zh) | 基于互视角的遮挡评估方法及装置、设备、系统和介质 | |
CN112148817A (zh) | 一种基于全景图的slam优化方法、装置和系统 | |
CN111489362B (zh) | 一种空间划分方法、装置、可读介质及电子设备 | |
JP2019139107A (ja) | 地図作成装置、地図作成方法及び地図作成用コンピュータプログラム | |
KR102212268B1 (ko) | 위치 측정 시스템과 이를 구비하는 이동 수단 및 이를 수행하기 위한 컴퓨팅 장치 | |
US12118743B2 (en) | Electronic apparatus and object detection method | |
CN109660732B (zh) | 电子设备和移动平台 | |
CN116958931B (zh) | 用于仓储中车辆碰撞预警的方法及计算设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder |
Address after: 7-605, 6th floor, building 1, yard a, Guanghua Road, Chaoyang District, Beijing 100026 Patentee after: Beijing dog vacuum cleaner Group Co.,Ltd. Address before: 7-605, 6th floor, building 1, yard a, Guanghua Road, Chaoyang District, Beijing 100026 Patentee before: PUPPY ELECTRONIC APPLIANCES INTERNET TECHNOLOGY (BEIJING) Co.,Ltd. |
|
CP01 | Change in the name or title of a patent holder |