CN112100521A - 一种街景识别定位并获取全景图片的方法及系统 - Google Patents
一种街景识别定位并获取全景图片的方法及系统 Download PDFInfo
- Publication number
- CN112100521A CN112100521A CN202010955514.8A CN202010955514A CN112100521A CN 112100521 A CN112100521 A CN 112100521A CN 202010955514 A CN202010955514 A CN 202010955514A CN 112100521 A CN112100521 A CN 112100521A
- Authority
- CN
- China
- Prior art keywords
- picture
- panoramic
- positioning
- street view
- panoramic picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 239000013598 vector Substances 0.000 claims abstract description 31
- 238000000605 extraction Methods 0.000 claims description 7
- 238000012216 screening Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000005549 size reduction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/04—Interpretation of pictures
- G01C11/06—Interpretation of pictures by comparison of two or more pictures of the same area
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种街景识别定位并获取全景图片的方法及系统,其中方法包括:获取待定位的目标图片;将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;获取定位信息,所述定位信息为相似街景图片的地理坐标信息;根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;对所述目标图片进行图像特征向量提取;将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;将定位信息和匹配全景图片推送到用户终端。本发明能通过图片识别获取定位信息以及全景图片,并在全景图片上进行街景标示,提高用户的使用体验。
Description
技术领域
本发明涉及图片识别定位获取全景图片的技术领域,具体涉及一种街景识别定位并获取全景图片的方法及系统。
背景技术
目前最为常用的定位技术为通过全球定位系统(Global Positioning System,简称GPS),然而全球定位系统在某些情况下,容易受到影响而出现定位误差,例如太阳黑子、GPS设备周围存在电磁干扰、极端天气、所处位置信号弱以及信号受遮挡的情况下。为此,可通过结合街景图片进行识别定位,通过对用户实时拍摄的街景图片进行识别,进而获取用户当前的位置信息,结合全球定位系统的定位结果,能有效地降低全球定位系统在受干扰的情况下的定位误差。现有的图片识别定位只能得到用户在地图上的位置信息,对不熟悉该地区的用户不能起到有效的引导作用。如在打车过程中,乘客无法具体描述当前位置,使司机无法通过地图上的定位准确获知乘客的具体位置,影响司机的服务质量。为此,亟需发明一种新型的图片识别定位方法,从而更好地向用户提供更直观且更有效的图片定位服务。
发明内容
为了克服上述现有图片识别技术的技术缺陷,本发明提供一种可通过街景图片识别定位,并获取带有标示的全景图片的方法及系统,能有效地对用户起到定位和引导的作用。
为了解决上述问题,本发明按以下技术方案予以实现的:
第一方面,本发明所述一种街景识别定位并获取全景图片的方法,包括以下步骤:
获取待定位的目标图片;
将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;
获取定位信息,所述定位信息为相似街景图片的地理坐标信息;
根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;
对所述目标图片进行图像特征向量提取;
将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;
获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;
将定位信息和匹配全景图片推送到用户终端。
优选地,所述获取待定位的目标图片后,还进行目标图片判断步骤,具体包括:判断所述目标图片是否为全景图片;若是,则执行对所述目标图片进行图像特征向量提取,并以匹配全景图片的地理坐标信息作为定位信息;若否,则执行所述将所述目标图片与街景图片库进行相似度对比。
优选地,所述获取待定位的目标图片后,还执行判断目标图片数量的步骤:若所述目标图片为一张,则执行所述将目标图片与街景图片库进行相似度对比步骤;若所述目标图片为两张及以上,则将所述目标图片拼合为拼合图片,并将所述拼合图片与全景图片库进行特征匹配。
优选地,所述目标图片拼合中,若干目标图片进行相互内容识别,获得识别结果,并根据识别结果进行图片重叠以实现图片拼合。
优选地,所述获取位置信息还包括:若所述目标图片为一张,则取相似街景图片的地理坐标信息作为定位信息;若所述目标图片为两张及以上,则在地理坐标系统上生成覆盖所有相似街景图片的地理坐标点的圆,以该圆的圆心的地理坐标信息作为定位信息。
优选地,所述将定位信息和匹配全景图片推送到用户终端后,还执行反馈判断步骤,具体包括:获取反馈信号,所述反馈信号为来自用户终端匹配全景图片是否准确的信息;若准确,则以定位信息标记后储存所述目标图片;若不准确,则获取用户终端的GPS定位点,根据GPS定位点选择相应的全景图片。
优选地,所述以定位信息标记后储存所述目标图片,具体包括:若所述目标图片为全景图片,则储存到全景图片库中;若所述目标图片不是全景图片,则储存到街景图片库中。
优选地,所述位置信息标记由地理坐标信息中的经度、纬度以及序号依次排列组合而成。
第二方面,本发明还提供一种街景识别定位并获取全景图片的系统,包括:
获取模块,用于获取待定位的目标图片;
对比模块,用于将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;
定位模块,用于获取定位信息,所述定位信息为相似街景图片的地理坐标信息;
全景筛选模块,用于根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;
向量提取模块,用于对所述目标图片进行图像特征向量提取;
特征匹配模块,用于将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;
标示模块,用于获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;
推送模块,用于将定位信息和匹配全景图片推送到用户终端。
第三方面,本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述任意一项所述的街景识别定位并获取全景图片的方法的步骤。
与现有技术相比,本发明的有益效果是:
本发明提供了一种街景识别定位并获取全景图片的方法及系统,通过获取用户终端拍摄的实时街景照片与街景图片库进行对比,获取定位信息,再与全景图片库进行对比,获取全景图片,并获取定位点附近的街景信息,将标志性的街景信息标示在全景图片上,并将定位信息以及标示后的全景图片推送到用户终端,使用户能通过街景识别降低全球定位系统的定位误差,而且全景图片使用户的定位可视化,用户可根据全景图片的标示作为更直观的位置引导参考。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明的主流程框图;
图2是本发明的实施例1的程序流程框图;
图3是本发明的子步骤11的流程框图;
图4是本发明的子步骤31的流程框图;
图5是本发明的步骤9和子步骤91的流程框图;
图6是本发明的系统的示意图;
图7是本发明的实施例2的程序流程框图;
图8是本发明的子程序12的流程框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
现有技术中的图片定位技术仅能通过街景图片进行地理坐标定位,而本发明涉及的图片识别定位需要提供全景图片,通过街景图片对全景图片进行对比识别,并获取当前用户所处位置的全景街景图片,从而使本发明能一定程度上为用户起到更好的定位以及位置引导作用。用户在具有拍摄功能的移动终端(如智能手机、平板电脑或智能手表)安装相应的应用。服务器具有存储单元和处理器,存储单元中分别设置有街景图片库和全景图片库,分别用于存放常规街景图片和全景街景图片,处理器用于处理本发明方法的操作步骤。
如图1和图2所示,本发明实施例提供的一种街景识别定位并获取全景图片的方法,其包括以下步骤:
步骤1:获取待定位的目标图片。
具体地,当用户需要进行图片定位时,对当前的街景进行拍摄,拍摄得到的若干张街景图片为目标图片,目标图片与图片定位请求信息一起发送到服务器,服务器通过无线网络接收图片定位请求信息,并接收待定位的目标图片。
如图3所示,本实施例优选地,还包括子步骤11:判断所述目标图片是否为全景图片;若是,则执行对所述目标图片进行图像特征向量提取,并以匹配全景图片的地理坐标信息作为定位信息;若否,则执行所述将所述目标图片与街景图片库进行相似度对比。
具体地,用户可通过具有全景拍摄功能的移动终端拍摄全景街景图片,以全景图片作为目标图片,发送到服务器。服务器在接收到目标图片后,还进行图片形式的判断步骤,若判断到目标图片为全景街景图片,则能跳过步骤2、步骤3以及步骤4,能直接执行步骤5,以使目标图片与全景图片库进行特征匹配,避免全景图片在街景图片库中出现识别错误的情况,同时,省略步骤2、步骤3和步骤4后能提高本实施例所述的图片识别定位方法的识别定位效率。通过目标图片与全景图片库进行特征匹配能获得匹配全景图片,获取匹配全景图片的地理坐标信息作为定位信息,推送到用户终端。
若判断到目标图片为常规的街景图片,服务器顺序执行步骤2、步骤3和步骤4。
步骤2:将所述目标图片与街景图片库进行相似度对比,获得相似街景图片。
街景图片的采集可使用带有GPS的相机或者移动设备进行街景图片的拍摄采集,对于同一地点,收集不同时间、不同季节、不同角度的拍摄图片,也可从谷歌地图或者百度地图中直接下载带有地理坐标位置信息的图片集到街景图片库中。
具体地,街景图片库中的街景图片通过街景的位置信息进行标记,以方便服务器进行根据位置的图片查询,本实施例中,以该街景的地理坐标中的经度和纬度组合进行编码,以编码对街景图片库中的街景图片图片进行标记。为了降低图片相似度对比所花费的时间,本实施例通过全球定位系统所定位的地理坐标作为定位参考点,在街景图片库中选取定位参考点附近范围的街道图片,服务器通过目标图片与参考点范围内的街景图片库中街景图片进行相似度对比,从而获得相似街景图片。
本实施例优选地,目标图片与街景图片库中的图片通过感知哈希算法进行相似度对比,通过离散余弦变换降低图片频率,具有较好的鲁棒性。首先对目标图片进行缩小尺寸处理,然后进行灰度化处理,之后计算离散余弦变换,并选取部分矩阵,接着计算离散余弦变换的均值,然后进行哈希值计算,最后进行图片配对,计算汉明距离。
步骤3:获取定位信息,所述定位信息为相似街景图片的地理坐标信息。
服务器根据相似街景图片的定位标记信息,解析后获取该相似街景图片的地理坐标信息,并将该地理坐标信息进行缓存,作为定位信息。
如图4所示,本实施例优选地,获取定位信息中,具体包括子步骤31:若所述目标图片为一张,则取相似街景图片的地理坐标信息作为定位信息;若所述目标图片为两张及以上,则在地理坐标系统上生成覆盖所有相似街景图片的地理坐标点的圆,以该圆的圆心的地理坐标信息作为定位信息。
具体地,在服务器判断目标图片不是全景图片后,在获取定位信息之前,服务器对目标图片的数量进行检测,若目标图片的数量为一张,相应地最为接近的相似街景图片的数量为一张,服务器获取标记在该相似街景图片上的位置信息,从而获取定位信息。
若目标图片的数量多于一张,为两张及两张以上时,相应地,相似街景图片的数量亦为两张及两张以上,由于不同的相似街景图片上所标记的地理坐标信息存在偏差,服务器分别获取所以相似街景图片的地理坐标信息后,将各相似街景图片的坐标点显示在地理坐标上,并生成一个覆盖所以相似街景图片坐标点的最小直径的圆,然后服务器获取该圆的圆心的地理坐标,将该地理坐标作为定位信息,从而实现在多张相似街景图片中获取一个较为合理的地理坐标点作为定位信息。
步骤4:根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片。
全景图片库中全景图片的采集通过带有GPS且具有全景拍摄功能的设备,对于同一街景的不同时期进行全景图片的拍摄,也可从网络的全景图片库中直接下载带有地理坐标位置信息的全景图片集到全景图片库中。
具体地,服务器根据相似街景图片的定位信息,在全景图片库中进行图片检索,从而读取获取定位信息中坐标附近的全景图片集。本实施例中,全景图片库中的全景图片根据拍摄地点的经纬度进行标记,以方便进行分区域检索和读取使用。根据定位信息,在全景图片库中定位点附近进行筛选检索,选取若干全景图片组成全景图片集。
步骤5:对所述目标图片进行图像特征向量提取。
具体地,服务器对目标图片进行图像特征向量提取,得到目标图片的排序特征向量和重排序特征向量。
步骤6:将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片。
具体地,服务器通过对全景图片集中的全景图片进行图像特征向量提取,建立图片特征向量集。图片特征向量集包括排序特征向量集和重排序特征向量集。目标图片的排序特征向量与排序特征向量集进行特征匹配,获得初始排序列表;重排序特征向量与重排序特征向量集进行特征匹配,获得联合特征向量,从而在全景图片集中获得最符合目标图片的匹配全景图片。
步骤7获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示。
具体地,服务器通过解析标记在匹配全景图片上的地理坐标信息,获得匹配全景图片中街道的具体位置,并通过百度地图或谷歌地图等获取该地点附近的街道信息,服务器将主要的街道信息,例如标志性建筑等,标示在匹配全景图片中,当匹配全景图片方向转动时,街景信息标示随之运动,以引导用户能获知当前位置附近的街景信息。
步骤8:将定位信息和匹配全景图片推送到用户终端。
具体地,服务器将定位信息和匹配全景图片推送到用户终端,用户终端中的地图中显示出定位点,并显示带有街景标示信息的匹配全景图片,用户可获知附近主要的建筑信息,以及通过匹配全景图片更直观地获知具体的方向和距离,显著地提高用户的使用体验。
如图5所示,本实施例优选地,还包括步骤9:获取反馈信号,所述反馈信号为来自用户终端匹配全景图片是否准确的信息;若准确,则以定位信息标记后储存所述目标图片;若不准确,则获取用户终端的GPS定位点,根据GPS定位点选择相应的全景图片。
在服务器向用户发送定位信息以及匹配全景图片后,后等待用户的反馈信息,若用户确认匹配全景图片与用户所在位置相匹配,服务器将目标图片储存到街景图片库中,并将匹配全景图片与目标图片建立对应记录,以提高下次检索时的关联性。若用户终端向服务器发出匹配不准确的反馈信息,服务器获取用户终端的具体GPS定位信息,并根据该定位信息在全景图片库中获取最接近的全景图片,并发送到客户终端,防止图片识别定位误差而对用户造成错误引导。
本实施例优选地,还包括子步骤91:所述以定位信息标记后储存所述目标图片,具体包括:若所述目标图片为全景图片,则储存到全景图片库中;若所述目标图片不是全景图片,则储存到街景图片库中。将用户提供的目标图片按类型辨别后,储存到街景图片库和全景图片库中,能有效地增加街景图片库和全景图片库中图片的数量,从而提高服务器进行图片识别定位的准确性。
本实施例优选地,所述位置信息标记由地理坐标信息中的经度、纬度以及序号依次排列组合而成。具体地,以定位信息标记为图片进行命名。服务器在进行图片检索时,通过定位信息,筛选获取街景图片库以及全景图片库中的图片名称,缩小范围后再进行图片相似度对比以及特征匹配,从而降低服务器的工作量。以图片的经度、纬度以及序号依次排列组合的方式,时图片易于以位置进行排序归类,便于查找调用。
本发明所述的街景识别定位并获取全景图片的方法,还适用于打车过程中。具体地,乘客端发出定位请求,拍摄街景图片后发送到服务器中,服务器获取定位信息和乘客所处街景的全景图片后,分别发送到乘客端和司机端,司机通过司机端获取乘客当前的街景信息,以便司机更直观地获知乘客的准确位置,以使司机能为乘客提供更好的服务。
如图6所示,本发明实施例还提供一种街景识别定位并获取全景图片的系统,包括:
获取模块M1,用于获取待定位的目标图片。
对比模块M2,用于将所述目标图片与街景图片库进行相似度对比,获得相似街景图片。
定位模块M3,用于获取定位信息,所述定位信息为相似街景图片的地理坐标信息。
全景筛选模块M4,用于根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片。
向量提取模块M5,用于对所述目标图片进行图像特征向量提取。
特征匹配模块M6,用于将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片。
标示模块M7,用于获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示。
推送模块M8,用于将定位信息和匹配全景图片推送到用户终端。
本发明实施例还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序。
其中,处理器和存储器通过通信总线实现相互连接。处理器可调用存储器中的逻辑指令,以执行如下方法:获取待定位的目标图片;将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;获取定位信息,所述定位信息为相似街景图片的地理坐标信息;根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;对所述目标图片进行图像特征向量提取;将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;将定位信息和匹配全景图片推送到用户终端。
本发明通过获取用户终端拍摄的实时街景照片与街景图片库进行对比,获取定位信息,再与全景图片库进行对比,获取全景图片,并获取定位点附近的街景信息,将标志性的街景信息标示在全景图片上,并将定位信息以及标示后的全景图片推送到用户终端,使用户能通过街景识别降低全球定位系统的定位误差,而且能根据全景图片的标示作为位置引导参考。
实施例2
如图7所示,本实施例2包括实施例1的所有步骤:
步骤1:获取待定位的目标图片。
子步骤11:判断所述目标图片是否为全景图片;若是,则执行对所述目标图片进行图像特征向量提取,并以匹配全景图片的地理坐标信息作为定位信息;若否,则执行所述将所述目标图片与街景图片库进行相似度对比。
步骤2:将所述目标图片与街景图片库进行相似度对比,获得相似街景图片。
步骤3:获取定位信息,所述定位信息为相似街景图片的地理坐标信息。
子步骤31:若所述目标图片为一张,则取相似街景图片的地理坐标信息作为定位信息;若所述目标图片为两张及以上,则在地理坐标系统上生成覆盖所有相似街景图片的地理坐标点的圆,以该圆的圆心的地理坐标信息作为定位信息。
步骤4:根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片。
步骤5:对所述目标图片进行图像特征向量提取。
步骤6:将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片。
步骤7获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示。
步骤8:将定位信息和匹配全景图片推送到用户终端。
步骤9:获取反馈信号,所述反馈信号为来自用户终端匹配全景图片是否准确的信息;若准确,则以定位信息标记后储存所述目标图片;若不准确,则获取用户终端的GPS定位点,根据GPS定位点选择相应的全景图片。
子步骤91:所述以定位信息标记后储存所述目标图片,具体包括:若所述目标图片为全景图片,则储存到全景图片库中;若所述目标图片不是全景图片,则储存到街景图片库中。将用户提供的目标图片按类型辨别后,储存到街景图片库和全景图片库中,能有效地增加街景图片库和全景图片库中图片的数量,从而提高服务器进行图片识别定位的准确性。
如图8所示,本实施例优选地,执行子步骤11后,还包括:
子步骤12:获取待定位的目标图片后,还执行判断目标图片数量的步骤:若所述目标图片为一张,则执行所述将目标图片与街景图片库进行相似度对比步骤;若所述目标图片为两张及以上,则将所述目标图片拼合为拼合图片,并将所述拼合图片与全景图片库进行特征匹配。
具体地,服务器在获取待定位的目标图片后,在执行子步骤11中判断目标图片不是全景图片后,还对目标图片的数量进行判断,若判断结果中目标图片的数量为一张,则顺序执行步骤2。若判断结果中,目标图片的数量多于一张,则可通过将所有目标图片拼合成一张图片,再将这张较大的图片进行图像特征向量提取,用获取的图像特征向量与全景图片库中的全景图片进行特征匹配,实现由若干相关联的街景图片直接获得匹配全景图片。并采用匹配全景图片的位置信息作为定位信息,通过子步骤12,能省略服务器执行的步骤,从而降低服务器的运行压力,同时能提高服务器进行图片识别定位的效率。
本实施例优选地,所述目标图片拼合中,若干目标图片进行相互内容识别,获得识别结果,并根据识别结果进行图片重叠以实现图片拼合。将若干目标图片的相似部分识别后拼合,以使若干目标图片能更合理地合成一张内容匹配的图片,进而提高特征匹配的准确性。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种街景识别定位并获取全景图片的方法,其特征在于,包括以下步骤:
获取待定位的目标图片;
将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;
获取定位信息,所述定位信息为相似街景图片的地理坐标信息;
根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;
对所述目标图片进行图像特征向量提取;
将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;
获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;
将定位信息和匹配全景图片推送到用户终端。
2.根据权利要求1所述的街景识别定位并获取全景图片的方法,其特征在于,所述获取待定位的目标图片后,还进行目标图片判断步骤,具体包括:
判断所述目标图片是否为全景图片;
若是,则执行对所述目标图片进行图像特征向量提取,并以匹配全景图片的地理坐标信息作为定位信息;
若否,则执行所述将所述目标图片与街景图片库进行相似度对比。
3.根据权利要求1所述的街景识别定位并获取全景图片的方法,其特征在于,所述获取待定位的目标图片后,还执行判断目标图片数量的步骤:
若所述目标图片为一张,则执行所述将目标图片与街景图片库进行相似度对比步骤;
若所述目标图片为两张及以上,则将所述目标图片拼合为拼合图片,并将所述拼合图片与全景图片库进行特征匹配。
4.根据权利要求3所述的街景识别定位并获取全景图片的方法,其特征在于:
所述目标图片拼合中,若干目标图片进行相互内容识别,获得识别结果,并根据识别结果进行图片重叠以实现图片拼合。
5.根据权利要求3所述的街景识别定位并获取全景图片的方法,其特征在于,所述获取位置信息还包括:
若所述目标图片为一张,则取相似街景图片的地理坐标信息作为定位信息;
若所述目标图片为两张及以上,则在地理坐标系统上生成覆盖所有相似街景图片的地理坐标点的圆,以该圆的圆心的地理坐标信息作为定位信息。
6.根据权利要求1所述的街景识别定位并获取全景图片的方法,其特征在于,所述将定位信息和匹配全景图片推送到用户终端后,还执行反馈判断步骤,具体包括:
获取反馈信号,所述反馈信号为来自用户终端匹配全景图片是否准确的信息;
若准确,则以定位信息标记后储存所述目标图片;
若不准确,则获取用户终端的GPS定位点,根据GPS定位点选择相应的全景图片。
7.根据权利要求6所述的街景识别定位并获取全景图片的方法,其特征在于,所述以定位信息标记后储存所述目标图片,具体包括:
若所述目标图片为全景图片,则储存到全景图片库中;
若所述目标图片不是全景图片,则储存到街景图片库中。
8.根据权利要求7所述的街景识别定位并获取全景图片的方法,其特征在于:
所述位置信息标记由地理坐标信息中的经度、纬度以及序号依次排列组合而成。
9.一种街景识别定位并获取全景图片的系统,其特征在于,包括:
获取模块,用于获取待定位的目标图片;
对比模块,用于将所述目标图片与街景图片库进行相似度对比,获得相似街景图片;
定位模块,用于获取定位信息,所述定位信息为相似街景图片的地理坐标信息;
全景筛选模块,用于根据定位信息,在全景图片库中获取全景图片集,所述全景图片集包括若干全景图片;
向量提取模块,用于对所述目标图片进行图像特征向量提取;
特征匹配模块,用于将所述目标图片与所述全景图片集进行特征匹配,获取匹配全景图片;
标示模块,用于获取所述匹配全景图片坐标点附近的街景信息,在匹配全景图片中进行相应的标示;
推送模块,用于将定位信息和匹配全景图片推送到用户终端。
10.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至8任意一项所述的街景识别定位并获取全景图片的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010955514.8A CN112100521B (zh) | 2020-09-11 | 2020-09-11 | 一种街景识别定位并获取全景图片的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010955514.8A CN112100521B (zh) | 2020-09-11 | 2020-09-11 | 一种街景识别定位并获取全景图片的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112100521A true CN112100521A (zh) | 2020-12-18 |
CN112100521B CN112100521B (zh) | 2023-12-22 |
Family
ID=73751454
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010955514.8A Active CN112100521B (zh) | 2020-09-11 | 2020-09-11 | 一种街景识别定位并获取全景图片的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112100521B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115359346A (zh) * | 2022-10-19 | 2022-11-18 | 北京市城市规划设计研究院 | 基于街景图片的小微空间识别方法、装置及电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102542523A (zh) * | 2011-12-28 | 2012-07-04 | 天津大学 | 一种基于街景的城市图片信息认证方法 |
WO2014117568A1 (en) * | 2013-01-30 | 2014-08-07 | Tencent Technology (Shenzhen) Company Limited | Method and device for performing transition between street view images |
CN109520500A (zh) * | 2018-10-19 | 2019-03-26 | 南京航空航天大学 | 一种基于终端拍摄图像匹配的精确定位及街景库采集方法 |
CN110472092A (zh) * | 2019-07-15 | 2019-11-19 | 清华大学 | 一种街景图片的地理定位方法及系统 |
WO2020020712A1 (en) * | 2018-07-27 | 2020-01-30 | Bayerische Motoren Werke Aktiengesellschaft | Method, device and system for processing positioning information |
WO2020135326A1 (zh) * | 2018-12-29 | 2020-07-02 | 阿里巴巴集团控股有限公司 | 一种基于图片的方向标注方法及装置 |
-
2020
- 2020-09-11 CN CN202010955514.8A patent/CN112100521B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102542523A (zh) * | 2011-12-28 | 2012-07-04 | 天津大学 | 一种基于街景的城市图片信息认证方法 |
WO2014117568A1 (en) * | 2013-01-30 | 2014-08-07 | Tencent Technology (Shenzhen) Company Limited | Method and device for performing transition between street view images |
WO2020020712A1 (en) * | 2018-07-27 | 2020-01-30 | Bayerische Motoren Werke Aktiengesellschaft | Method, device and system for processing positioning information |
CN110763250A (zh) * | 2018-07-27 | 2020-02-07 | 宝马股份公司 | 用于处理定位信息的方法和装置以及系统 |
CN109520500A (zh) * | 2018-10-19 | 2019-03-26 | 南京航空航天大学 | 一种基于终端拍摄图像匹配的精确定位及街景库采集方法 |
WO2020135326A1 (zh) * | 2018-12-29 | 2020-07-02 | 阿里巴巴集团控股有限公司 | 一种基于图片的方向标注方法及装置 |
CN110472092A (zh) * | 2019-07-15 | 2019-11-19 | 清华大学 | 一种街景图片的地理定位方法及系统 |
Non-Patent Citations (2)
Title |
---|
杨学博;: "街景地图中基于文字识别的自动标注研究", 中国高新技术企业, no. 13 * |
贾奋励;陈令羽;宋国民;张世团;: "全景图增强地理现实的空间认知问题", 测绘工程, no. 04 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115359346A (zh) * | 2022-10-19 | 2022-11-18 | 北京市城市规划设计研究院 | 基于街景图片的小微空间识别方法、装置及电子设备 |
CN115359346B (zh) * | 2022-10-19 | 2023-03-07 | 北京市城市规划设计研究院 | 基于街景图片的小微空间识别方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN112100521B (zh) | 2023-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8189964B2 (en) | Matching an approximately located query image against a reference image set | |
CN110645986B (zh) | 定位方法及装置、终端、存储介质 | |
CN106250938B (zh) | 目标跟踪方法、增强现实方法及其装置 | |
KR102344012B1 (ko) | 관심 지점을 표시하기 위한 방법 및 장치 | |
US20180306590A1 (en) | Map update method and in-vehicle terminal | |
US8774527B1 (en) | Matching an approximately located query image against a reference image set using cellular base station and wireless access point information | |
US20130243250A1 (en) | Location of image capture device and object features in a captured image | |
US8687853B2 (en) | Method, system and computer-readable recording medium for providing service using electronic map | |
CN103067856A (zh) | 基于图像识别的地理位置定位方法及系统 | |
WO2016199662A1 (ja) | 画像情報処理システム | |
US20130328931A1 (en) | System and Method for Mobile Identification of Real Property by Geospatial Analysis | |
US8373712B2 (en) | Method, system and computer-readable recording medium for providing image data | |
US9141858B2 (en) | Determining GPS coordinates for images | |
CN111832579B (zh) | 地图兴趣点数据处理方法、装置、电子设备以及可读介质 | |
CN112100521B (zh) | 一种街景识别定位并获取全景图片的方法及系统 | |
CN106996785B (zh) | 一种对导航数据进行更新的方法及装置 | |
JP2002197103A (ja) | 情報提供方法およびそのシステム | |
CN110781797B (zh) | 一种标注方法、装置及电子设备 | |
CN110503685B (zh) | 一种数据处理方法以及设备 | |
KR20130036839A (ko) | 증강현실 서비스를 지원하는 시스템에서 영상 정합을 위한 장치 및 방법 | |
CN106776777A (zh) | 地理位置信息的识别方法、识别装置及终端 | |
CN112598732A (zh) | 目标设备定位方法、地图构建方法及装置、介质、设备 | |
CN116664812B (zh) | 一种视觉定位方法、视觉定位系统及电子设备 | |
CN115033731B (zh) | 图像检索方法、装置、电子设备及存储介质 | |
CN115511959A (zh) | 巡检目标的定位方法、飞行设备及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |