CN109059895B - 一种基于手机摄像头和传感器的多模态室内测距及定位方法 - Google Patents
一种基于手机摄像头和传感器的多模态室内测距及定位方法 Download PDFInfo
- Publication number
- CN109059895B CN109059895B CN201810285906.0A CN201810285906A CN109059895B CN 109059895 B CN109059895 B CN 109059895B CN 201810285906 A CN201810285906 A CN 201810285906A CN 109059895 B CN109059895 B CN 109059895B
- Authority
- CN
- China
- Prior art keywords
- distance
- image
- sensor
- data
- mobile phone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000005259 measurement Methods 0.000 title claims abstract description 23
- 239000011159 matrix material Substances 0.000 claims abstract description 9
- 230000009466 transformation Effects 0.000 claims abstract description 9
- 238000009825 accumulation Methods 0.000 claims abstract description 3
- 238000001514 detection method Methods 0.000 claims description 33
- 238000012545 processing Methods 0.000 claims description 13
- 230000000007 visual effect Effects 0.000 claims description 5
- 230000001133 acceleration Effects 0.000 claims description 3
- 238000013135 deep learning Methods 0.000 claims description 3
- 239000013598 vector Substances 0.000 claims description 3
- 239000013589 supplement Substances 0.000 claims description 2
- 230000001502 supplementing effect Effects 0.000 claims description 2
- 238000006073 displacement reaction Methods 0.000 claims 1
- 230000004927 fusion Effects 0.000 claims 1
- 230000011218 segmentation Effects 0.000 claims 1
- 230000033001 locomotion Effects 0.000 abstract description 10
- 230000008569 process Effects 0.000 description 15
- 230000007246 mechanism Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 230000000295 complement effect Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000009469 supplementation Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/005—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/04—Interpretation of pictures
- G01C11/06—Interpretation of pictures by comparison of two or more pictures of the same area
- G01C11/08—Interpretation of pictures by comparison of two or more pictures of the same area the pictures not being supported in the same relative position as when they were taken
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/10—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
- G01C21/12—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
- G01C21/16—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
- G01C21/165—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
- H04W4/33—Services specially adapted for particular environments, situations or purposes for indoor environments, e.g. buildings
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Automation & Control Theory (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种基于手机摄像头和传感器的多模态室内测距及定位方法。通过融合智能手机的多种类型数据寻求更易部署、更精准的定位策略。本发明克服了基于单目摄像机定位的尺度不确定和漂移问题,并改善了传感器定位方法的误差累积。包括以下步骤:(1)参考内置传感器数据划分检测的目标区域,并匹配图像特征点;(2)根据特征匹配结果计算图像间的变换矩阵,矫正图像角度以确保其与用户拍摄朝向的一致性;(3)识别图像中的多目标物体并输出其在图像空间的坐标;(4)利用传感器数据对提取的运动特征及图像信息进行校正;(5)基于上述步骤测量结果,求解用户到图像中物体的实际角度及距离,实现定位。
Description
技术领域
本发明公开了一种基于手机摄像头和传感器的多模态室内测距及定位方法,主要用于解决在室内环境中结合图像、手机内置传感器以及WiFi信号等方法进行用户定位的问题。本发明涉及图像检测和无线网络技术领域,是一种融合多模态数据进行室内测距及定位的优化方法。
背景技术
随着更多物联网设备如智能手机、平板电脑、可穿戴设备等性能的飞速增长,和基于定位的应用增加,位置感知发挥了越来越重要的作用。其中,室外位置服务已经成熟,基于GPS和地图的位置服务被广泛应用,并成为各种移动设备被使用最多的应用之一。然而,室内环境下的定位一直是一个很多问题未被解决的领域。
为解决这些问题,文献1(Indoor localization via multi-modal sensing onsmartphones)提出首先使用传感器数据(WiFi和惯性测量)估计粗略位置,然后通过室内几何推理来利用语义信息,最后将候选图像与查询图像匹配以返回估计位置。该方法加快了基于图像的本地化流程,但构建数据库的复杂度和成本较高。文献2(CrowdMap:AccurateReconstruction of Indoor Floor Plans from Crowdsourced Sensor-Rich Videos)提出结合手机IMU传感器和视频数据跟踪摄像头位置,进而进行用户定位和场景重建。其特点是设计一个基于多类传感器的分层系统,逐步筛选精度高的定位数据。但它预设几百个房间的平面布局和场景信息,复杂度较高,通用性不强。
专利1(一种单目测距定位检测系统及其检测方法)提出在图像中检测人脸信息,计算人脸图像对应的目标人物到图像传感器之间的距离来进行定位。该方法精度较高但需要存储场所关联人物的全部人脸图像信息,并且不断迭代调整距离阈值,计算量较大。专利2(一种基于点特征的单目视觉位姿测量方法)提出以摄像机作为测量传感器,配合特殊的点特征合作标志器组成测量系统,通过图像处理找到满足标志器模型约束的特征点区域,利用P3P方法实现物体间的相对位置测量。该方法适用于复杂多变的背景和光照条件,但最终测量的是两个物体间的相对距离及位姿,对用户这个目标对象的特征处理不够明确。
本发明的意义在于不同于以往的室内定位的研究,在目标测距及定位的最终目标下,如果仅利用智能手机单目摄像头采集的图像,基于图像空间和物理空间的几何变换关系进行位置估算,会导致定位依赖特定环境、可移植性低的问题;单纯的利用传感器数据进行位置推算,会产生内在误差累积。所以,本发明不拘泥于对特定的环境和应用采取有针对性的方案,而是着重于考虑用传感器数据补充单目定位中的距离和尺度信息,用单目采集的图像特征提高传感器定位中的准确率。这个思路,一方面丰富了定位中的场景特征;另一方面提高了处理运动数据的效率,有助于实现实时性、可靠性更强的室内定位系统。本发明采用通用性良好的定位模型,为用户输出其相对单个或多个物体的位置,为深度提取以及场景重建等应用领域提供了新的可能性。
发明内容
[发明目的]:本发明主要解决利用手机单目摄像头及其内置传感器对用户进行室内测距及定位的问题。
[技术方案]:本发明的解决方案主要包括以下内容:
(1)图像数据处理:
图像数据模块是整个系统处理过程的重要分支之一,为后续的定位模型提供了基本信息,主要包含以下步骤:特征匹配、变换矩阵计算以及目标的分类及检测。
1)特征匹配:
特征匹配的目的在于为下一步的变换矩阵提供计算依据,为目标分类提供数据集训练的信息来源。主要包含:划分目标检测范围、检测并匹配图像特征点和去除错误匹配点的三项步骤。
其中,划分目标检测范围是为了在结合传感器补充移动数据的前提下,计算两幅图像之间的距离,交换重叠区域信息,降低特征匹配的算法复杂度;特征点检测及匹配部分运用改进的SIFT算法对目标区域进行应用,获取对应的矩阵信息;去除错误匹配点有助于降低错误特征点的干扰,提高匹配模块的检测精度。
2)变换矩阵计算:
利用图像进行定位需要通过改变摄像机的位置获取两幅图像,然后利用提取的图像匹配特征点对并依据空间物点与所成像点的投影几何关系得到摄像机坐标系和物体坐标系的空间位姿参数。在这个过程中,需要根据两次拍摄过程中手机所在的位置来确定两处摄像机坐标系的关系,即计算两幅图像之间的相对变换矩阵,来调整各幅图像的方位与用户拍摄朝向的一致性。
3)目标的分类及检测:
这里,结合前两步的结果,采用基于深度学习的目标分类与检测方法,识别用户拍摄图像中的单个或多个目标物体,获取每个目标物体到其检测框的几何距离。计算各物体的中心检测点在图像坐标系中的坐标。进一步地,输出各物体在每幅图像中相对于两条拍摄的视觉边界的距离比例。
(2)传感器数据对图像的校正机制:
传感器数据模块是整个系统处理过程中的另一重要分支,为矫正图像数据中的某些误差和信息缺失提供了保障,也为后续的模型求解提供了部分基本数据来源。
处理过程主要包含以下两个方面:
1)首先,通过手机内置的加速度计和陀螺仪可以获取用户在两个拍摄点之间的移动距离和转动方向,为图像的各类计算提供现实参考。
2)其次,一方面,在无线环境下,通过手机在移动过程中穿过的菲涅尔区域边界数量确定用户的运动数据;另一方面,通过手机超声波测量在移动过程中,每个频率在固定长度呈现的峰值的数目来获得手机运动的绝对距离。参考这两方面的数据,为图像数据的处理提供补充和校正机制。
(3)定位模型求解:
本发明提出一种用户到场景中目标物体的距离和方位测量的定位模型。在以上步骤已知图像空间中物体的对应距离及其比例、物理空间中两次拍摄点的真实移动距离以及物点在图像坐标系和物理坐标系的对应关系的基础上,通过几何运算可以进一步地求解用户到室内场景中的某个目标物体的距离和角度,从而实现用户的位置估计。
[有益效果]:本发明使用智能手机的单目摄像头和内置传感器进行用户到室内场景中的目标物体的距离和位置测量,相较于传统的室内定位方法有着易于部署、成本低以及预测精度高的优点。在室内用户定位的基础上,为进一步的场景重建和单目深度估计应用提出了新的可能性。最后,本发明的设计保证了整个机制的真实性。
[附图说明]:
图1系统流程图
图2基于两幅图像的目标定位模型
图3传感器数据处理流程
图4测距及定位模型
[具体实施方式]:
以下结合附图和具体实施案例对本发明做具体的介绍。
如附图1所示,本发明为一种基于手机单目摄像头和传感器的多模态室内定位方法,分为三个阶段,图像数据处理、传感器数据校正机制和定位模型求解。
1.图像数据处理
1.1图像的特征点检测和匹配:
利用用户从两个定点由手机单目摄像头采集的图像数据,提取场景特征,并寻求两幅图像之间的坐标对应关系。其具体过程如下:
1)由传感器数据计算图像间的移动距离,检索场景的重叠信息,去除无关背景噪声,划分特征匹配的目标区域;
2)采用局部特征检测算法(SIFT),分别对两幅拍摄图像进行特征点提取,根据其有关尺度和方位的描述子得到特征,并进行图像间的特征点匹配。其中,一幅二维图像的尺度空间定义为:
L(x,y,σ)=G(x,y,σ)*I(x,y)
其中,G(x,y,σ)为尺度可变高斯函数,(x,y)用来描述空间的尺度坐标,σ表示图像的平滑程度;
3)通过随机抽样一致(RANSAC)算法在一组图像特征数据集中,采用不断迭代的方法,寻找最优参数模型,并且去除该幅图像中的不符合最优模型的“外点”。
1.2变换矩阵计算:
1)由附图2的基于两幅图像的目标定位模型所示,O1和O2是两次拍摄时摄像机的光心位置(目标对象的位置),I1和I2是两次拍摄时的成像平面,P为目标中选取的一个特征点,p1与p2为该特征在两幅图像上的投影,即p1,p2为两幅图像中某个目标物体的对应匹配点.
2)假设摄像机从甲处移动到乙处的旋转矩阵为R,平移向量为T,设P点在甲处摄像机坐标系中的坐标为Xc1=(xc1,yc1,zc1)T,对应的图像像素坐标为(u1,v1);在乙处摄像机坐标系中的坐标为Xc2=(xc2,yc2,zc2)T,对应的图像像素坐标为(u2,v2)。由此,可以确定两处摄像机坐标系的关系如下:Xc2=RXc1+T,代入已知数据进一步将该关系推算为:
1.3目标的分类及检测:
1)在1.1和1.2步骤的结果的基础上,采用基于深度学习的目标分类和检测方法,识别在描述室内场景的两幅图像中的目标物体,并且按实例为用户显示其检测类别。
2)识别用户拍摄图像中的单个或多个目标物体之后,可以由物体检测模块输出每个目标物体到其检测框的几何距离以及各物体的中心检测点在图像坐标系中的坐标。进一步地,对于每幅图像中的每个目标物体,计算得到其相对于两个拍摄的视觉边界的距离比例。
2.传感器数据对图像数据的校正机制
根据附图3所示,利用手机内置传感器对提取的图像数据进行校正的机制主要可以概括为如下两个部分:
2.1目标物体检测的区域划分:
在执行特征检测及其匹配算法之前,通过由手机在用户在两个拍摄点之间运动产生的加速度计和陀螺仪的数据变化,计算图像之间的移动距离,检索其目标对象的重叠范围,为特征点划分检索区域。
其中,手机加速度计和陀螺仪的数据参考的具体步骤可以描述如下:
1)使用低通滤波器来过滤从加速度计接收到的信号,用于消除任何不由用户的轻微移动造成的噪音;
2)将从加速度计接受到的三个数值(x,y,z)进行二次积分运算,用于将加速度转化为速度,将速度转换为距离;对陀螺仪测量数据执行类似操作,二次积分获取手机在移动过程中的转动角度信息;
3)以上所述的前提是,尽量保证手机以某种固定状态移动,较大的角度偏差会影响其测量结果。为解决以上问题,可以从内置的陀螺仪中获得的欧拉角进行补偿,用欧拉角的度量映射出一个到加速度器起始坐标的向量,在手机运动时,较为准确地测量移动距离以及方位。
2.2单目测量的尺度和距离信息补充:
以上的所有工作得到的大部分距离和角度信息均为在图像坐标系中的测量结果,因此,需要一些物点在物理空间的转动和移动信息来补充最终定位所需的数据。本发明中,主要从两个方面对用户采集的图像数据进行校正:
1)在无线环境下,信号在传播多个路径之后会引起交替强度的同心椭圆构成菲涅尔模型。当目标物体穿过Fresnel区的边界时,接受的信号将产生峰或谷。因此,通过手机在移动过程中穿过的交替边界的数量可以确定用户的运动数据;
2)利用手机超声波产生的信号,在经过逆傅里叶变换之后,每个频率在固定长度呈现的峰值。通过测量在移动过程中峰值的数目来获得手机运动的绝对距离。
参考这两方面的数据,为图像数据的处理提供补充和校正机制。
3.定位模型求解
如附图4所示,这里主要分析在一次定位过程中,通过用户在两个拍摄定点和单个目标物体之间的几何关系,估计用户到室内场景中该物体的距离和角度信息。其中,模型求解过程中的数据主要来源于前两个步骤的推算结果。当图像中有多个目标物体时,其定位过程即为相同模型下不同数据的同理运算。
1)在拍摄定点上,已知单目摄像头的拍摄视角范围为γ(手机自带的摄像头参数)。
2)由目标物体检测可以获取图像空间中投影之后的距离比即d2/d1(d2′/d1′),由加速度和陀螺仪的数据处理可以知道手机的转动角θ1,θ2以及移动距离d。因此,依据:
3)由以上步骤求解目标物体到用户的两个拍摄位置的距离OO1和OO2,以及用户相对目标物体的角度,实现位置度量从而进行定位。
Claims (5)
1.一种基于手机摄像头和传感器的多模态室内测距及定位方法,其特征在于,包括:
(1)特征匹配阶段,检测相同的点在两幅图像中的不同位置,通过尺度不变特征变化(SIFT)算法进行特征点的提取和自动匹配;
(2)目标检测阶段,在获取各目标物体在图像空间到视觉边界的距离基础上,分割并识别多个物体,提供更丰富的检测数据和空间信息;具体包括如下内容:
(2.1)采用基于深度学习的目标分类与检测,识别图像拍摄的室内场景里的单个或多个目标物体;
(2.2)获取每个目标物体到其检测框的边界距离,进一步地,计算物体在图像坐标系中的坐标;
(2.3)参考物体坐标和预测图像尺度,获取物体间距离,计算目标到视觉边界的距离及其比例;
(3)多模态数据融合阶段,在特征点检测之前,首先由手机内置传感器补充检测区域信息,减小匹配模块的复杂度;利用传感器数据解决单目测距中的尺度和距离缺失问题,与图像数据进行补充以及校正;
(4)定位模型求解阶段,通过用户拍摄的两张及以上的照片,结合图像数据和传感器数据,获取在物理空间上用户到图像中各物体的方位和距离;
(5)单目测距及定位阶段,根据模型求解的结果测算用户到场景中某个物体的距离和角度,进而确定用户位置;结合图像中物体的识别结果,最终输出用户到多个物体的相对位置。
2.根据权利要求1所述的基于手机摄像头和传感器的多模态室内测距及定位方法,其特征在于,所述步骤(1)包括:
(1)由手机内置加速度计和陀螺仪的测量数据,确定图像间距离,划分目标物体在照片中的区域;
(2)SIFT特征匹配算法包括两个步骤,首先是SIFT特征的生成,即从两幅待匹配图像中提取出对尺度缩放、旋转、亮度变化无关的特征向量;其次,对尺度特征不变的点进行匹配;
(3)通过Ransac算法去除错误匹配点,在特征匹配结果里,找到一个变换矩阵使目标区域内尽量多的特征点都符合这个变换关系,保留这部分检测结果作为匹配特征。
3.根据权利要求1所述的基于手机摄像头和传感器的多模态室内测距及定位方法,其特征在于,所述步骤(3)包括:
(1)在图像处理部分,为两张照片划分目标检测区域;根据手机内置传感器的加速度和角速度数据,测算图像间的移动距离和转动角度,确定图像的匹配区域;
(2)在定位模型部分,需要手机摄像头在两幅图像的拍摄定点的移动距离数据; 首先,由加速度计的位移和陀螺仪的角度补偿,得到移动距离;但这个数据会随着时间产生误差累积,因此,通过无线CSI的菲涅尔模型或者超声波方法,进一步地确认这个距离数据;多种数据相互校正,提供更准确的数据来源。
4.根据权利要求1所述的基于手机摄像头和传感器的多模态室内测距及定位方法,其特征在于,所述步骤(4)包括:
(1)从两个位置拍摄室内环境中的图像,由特征匹配及目标检测的结果,获取各目标物体到图像边界的距离比例;
(2)通过WiFi CSI的菲涅尔模型和超声波方法补充和校正信息,计算用户的两个拍摄点之间的移动距离;
(3)由手机内置加速度计和陀螺仪的测量数据,确定第二个拍摄点相对于第一个拍摄点之间的手机转动角度,补充图像中的方位信息;
(4)根据图像空间中的各角度和比例数据,参考实际物体空间的距离,实现用户相对于目标物体的距离和方位测量。
5.根据权利要求1所述的基于手机摄像头和传感器的多模态室内测距及定位方法,其特征在于,所述步骤(5)包括:
(1)由图像中物体的分割与检测,获取目标到图像边界的距离比例;结合无线及超声波方法测得的实际移动距离,确定图像中各物体在物体空间到用户的实际距离;
(2)手机摄像头的拍摄角和两个位置上的图像角度,与内置传感器读取的转动角度信息,互为补充,确定图像中各物体到用户的实际方位角度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810285906.0A CN109059895B (zh) | 2018-03-28 | 2018-03-28 | 一种基于手机摄像头和传感器的多模态室内测距及定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810285906.0A CN109059895B (zh) | 2018-03-28 | 2018-03-28 | 一种基于手机摄像头和传感器的多模态室内测距及定位方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109059895A CN109059895A (zh) | 2018-12-21 |
CN109059895B true CN109059895B (zh) | 2021-05-25 |
Family
ID=64820017
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810285906.0A Active CN109059895B (zh) | 2018-03-28 | 2018-03-28 | 一种基于手机摄像头和传感器的多模态室内测距及定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109059895B (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109798877B (zh) * | 2019-02-20 | 2021-08-06 | 博雅工道(北京)机器人科技有限公司 | 一种仿生水下机器鱼双目立体测距方法 |
CN110580723B (zh) * | 2019-07-05 | 2022-08-19 | 成都智明达电子股份有限公司 | 一种利用深度学习和计算机视觉进行精准定位的方法 |
CN110617814A (zh) * | 2019-09-26 | 2019-12-27 | 中国科学院电子学研究所 | 单目视觉和惯性传感器融合的远距离测距系统及方法 |
CN111161339B (zh) * | 2019-11-18 | 2020-11-27 | 珠海随变科技有限公司 | 一种间距测量方法、装置、设备以及计算机可读介质 |
CN111044039B (zh) * | 2019-12-25 | 2024-03-19 | 中航华东光电有限公司 | 基于imu的单目目标区域自适应高精度测距装置和方法 |
CN113469201A (zh) * | 2020-03-31 | 2021-10-01 | 阿里巴巴集团控股有限公司 | 图像采集设备偏移检测方法、图像匹配方法、系统和设备 |
CN113838075B (zh) * | 2020-06-23 | 2024-01-09 | 南宁富联富桂精密工业有限公司 | 单目测距方法、装置及计算机可读存储介质 |
CN111898442B (zh) * | 2020-06-29 | 2023-08-11 | 西北大学 | 一种基于多模态特征融合的人体动作识别方法及装置 |
CN112102406B (zh) * | 2020-09-09 | 2024-07-26 | 东软睿驰汽车技术(沈阳)有限公司 | 单目视觉的尺度修正方法、装置及运载工具 |
CN112733617B (zh) * | 2020-12-22 | 2023-05-23 | 中电海康集团有限公司 | 一种基于多模态数据的目标定位方法及系统 |
CN112528974B (zh) * | 2021-02-08 | 2021-05-14 | 成都睿沿科技有限公司 | 测距方法、装置、电子设备及可读存储介质 |
TWI768724B (zh) * | 2021-02-22 | 2022-06-21 | 張劭農 | 立體空間中定位方法與定位系統 |
TWI788217B (zh) * | 2021-02-22 | 2022-12-21 | 張劭農 | 立體空間中定位方法與定位系統 |
CN113188439B (zh) * | 2021-04-01 | 2022-08-12 | 深圳市磐锋精密技术有限公司 | 一种基于互联网的手机摄像用自动定位方法 |
CN113203412A (zh) * | 2021-05-07 | 2021-08-03 | 江苏俱为科技有限公司 | 一种多模态传感的定位引导方法 |
CN113221891B (zh) * | 2021-05-12 | 2022-12-09 | 佛山育脉科技有限公司 | 掌静脉图像的识别角度的调整方法和装置 |
CN113570915A (zh) * | 2021-07-08 | 2021-10-29 | 云南国土资源职业学院 | 一种思政课堂教学用的移动讲解装置 |
TWI792673B (zh) * | 2021-11-11 | 2023-02-11 | 台達電子工業股份有限公司 | 定位系統以及方法 |
CN114252013B (zh) * | 2021-12-22 | 2024-03-22 | 深圳市天昕朗科技有限公司 | 一种基于有线通讯模式下的agv视觉识别精准定位系统 |
CN115143930B (zh) * | 2022-06-27 | 2024-05-24 | 徐州徐工挖掘机械有限公司 | 一种单目摄像头测距方法、系统及挖掘机 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9720934B1 (en) * | 2014-03-13 | 2017-08-01 | A9.Com, Inc. | Object recognition of feature-sparse or texture-limited subject matter |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2005209773B2 (en) * | 2004-02-10 | 2009-07-16 | Call Genie Inc. | Method and system of providing personal and business information |
CN102435188B (zh) * | 2011-09-15 | 2013-10-02 | 南京航空航天大学 | 一种用于室内环境的单目视觉/惯性全自主导航方法 |
CN103874193B (zh) * | 2012-12-13 | 2018-06-15 | 中国电信股份有限公司 | 一种移动终端定位的方法及系统 |
CN105300375B (zh) * | 2015-09-29 | 2018-04-20 | 塔米智能科技(北京)有限公司 | 一种基于单视觉的机器人室内定位和导航方法 |
CN106211319B (zh) * | 2016-07-20 | 2019-10-01 | 西北大学 | 一种基于wi-fi信号的非指纹被动式定位方法 |
CN106352897B (zh) * | 2016-08-26 | 2018-06-15 | 杨百川 | 一种基于单目视觉传感器的硅mems陀螺误差估计与校正方法 |
CN106403942B (zh) * | 2016-08-30 | 2022-04-29 | 全球能源互联网研究院 | 基于变电站景深图像识别的人员室内惯性定位方法 |
-
2018
- 2018-03-28 CN CN201810285906.0A patent/CN109059895B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9720934B1 (en) * | 2014-03-13 | 2017-08-01 | A9.Com, Inc. | Object recognition of feature-sparse or texture-limited subject matter |
Non-Patent Citations (2)
Title |
---|
Multi-Modal Indoor Positioning of Mobile Devices;Joseph .et al;《2015 International Conference on Indoor Positioning and Indoor Navigation (IPIN)》;20151231;第13-16页 * |
基于视觉的目标定位技术的研究进展;赵霞等;《计算机科学》;20160630;第43卷(第6期);第10-16、43页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109059895A (zh) | 2018-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109059895B (zh) | 一种基于手机摄像头和传感器的多模态室内测距及定位方法 | |
CN111199564B (zh) | 智能移动终端的室内定位方法、装置与电子设备 | |
CN110686677B (zh) | 一种基于几何信息的全局定位方法 | |
US9330307B2 (en) | Learning based estimation of hand and finger pose | |
CN108717531B (zh) | 基于Faster R-CNN的人体姿态估计方法 | |
US8824781B2 (en) | Learning-based pose estimation from depth maps | |
CN111462200A (zh) | 一种跨视频行人定位追踪方法、系统及设备 | |
CN110073362A (zh) | 用于车道标记检测的系统及方法 | |
JP2014515530A (ja) | モバイルデバイスのための平面マッピングおよびトラッキング | |
CN109636854A (zh) | 一种基于line-mod模板匹配的增强现实三维跟踪注册方法 | |
CN113888639B (zh) | 基于事件相机与深度相机的视觉里程计定位方法及系统 | |
CN102034355A (zh) | 一种基于特征点匹配的车辆检测及跟踪方法 | |
WO2019057197A1 (zh) | 运动目标的视觉跟踪方法、装置、电子设备及存储介质 | |
Wen et al. | Hybrid semi-dense 3D semantic-topological mapping from stereo visual-inertial odometry SLAM with loop closure detection | |
Liu et al. | A SLAM-based mobile augmented reality tracking registration algorithm | |
CN105160649A (zh) | 基于核函数非监督聚类的多目标跟踪方法及系统 | |
CN112861808B (zh) | 动态手势识别方法、装置、计算机设备及可读存储介质 | |
KR20170036747A (ko) | 장면 내 키포인트를 추적하기 위한 방법 | |
CN112790758A (zh) | 一种基于计算机视觉的人体运动测量方法、系统及电子设备 | |
Son et al. | A multi-vision sensor-based fast localization system with image matching for challenging outdoor environments | |
CN111998862A (zh) | 一种基于bnn的稠密双目slam方法 | |
WO2023284358A1 (zh) | 相机标定方法、装置、电子设备及存储介质 | |
CN114689038A (zh) | 基于机器视觉的果实检测定位与果园地图构建方法 | |
CN112432653B (zh) | 基于点线特征的单目视觉惯性里程计方法 | |
CN117870659A (zh) | 基于点线特征的视觉惯性组合导航算法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |