CN112197786A - 一种基于实景反馈的ar导航预显示巡航系统 - Google Patents

一种基于实景反馈的ar导航预显示巡航系统 Download PDF

Info

Publication number
CN112197786A
CN112197786A CN202010942283.7A CN202010942283A CN112197786A CN 112197786 A CN112197786 A CN 112197786A CN 202010942283 A CN202010942283 A CN 202010942283A CN 112197786 A CN112197786 A CN 112197786A
Authority
CN
China
Prior art keywords
vehicle
live
mounted end
action
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010942283.7A
Other languages
English (en)
Other versions
CN112197786B (zh
Inventor
刘力
刘铁堂
龚利恒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zhangrui Electronic Co ltd
Original Assignee
Shenzhen Zhangrui Electronic Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Zhangrui Electronic Co ltd filed Critical Shenzhen Zhangrui Electronic Co ltd
Priority to CN202010942283.7A priority Critical patent/CN112197786B/zh
Publication of CN112197786A publication Critical patent/CN112197786A/zh
Application granted granted Critical
Publication of CN112197786B publication Critical patent/CN112197786B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
    • G06K17/0029Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement being specially adapted for wireless interrogation of grouped or bundled articles tagged with wireless record carriers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Navigation (AREA)

Abstract

本发明公开了一种基于实景反馈的AR导航预显示巡航系统,一种基于实景反馈的AR导航预显示巡航系统,包括AR服务器、车载端和路面实景地图采集端;其中,AR服务器包括AR实景数据库、5G信号发送和接收模块和AR实景地图修正模块;车载端包括本地AR实景数据库,5G信号发送和接收模块、摄像模块、AR实景图像显示模块、车载端处理器、车载端定位模块和车联网RFID传感设备;路面实景地图采集端包括路面实景地图采集模块、载体和本地AR实景数据库、车载端定位模块和载体RFID传感设备,所述载体上设置有路面实景地图采集模块。通过,AR实景地图和平面定位地图实现交叉验证从而获取更加准确的定位车道信息,从而提高定位精度,并且车载端可以拍摄图像上传从而可以方便更新地图,从而节约人力资源,提高工作效率。

Description

一种基于实景反馈的AR导航预显示巡航系统
技术领域
本发明涉及导航巡航系统技术领域,具体为一种基于实景反馈的AR导航预显示巡航系统。
背景技术
随着电子技术的发展,人们开始更加快捷和方便的生活方式。如今,随着我国经济的发展,自驾车在人们生活中成为越来越不可或缺的一部分。但是,在我们驾车去某目的地时,由于城市或地区的大而复杂,导致人们并不能认识路线,这给生活带来了不便;但是,随着导航技术的发展,利用导航系统进行导航以便查询路线去目的地,这给人们生活带来方便。
现有技术中,导航系统包括百度地图、高德地图和360地图等,但是,这些导航地图都是平面地图的形式展现给使用者,或者,所谓的3D虚拟导航,但对多条并行道路,如在现今日益复杂的桥梁路面来说,可能由于定位精度的差异,而将车辆定位到其他道路上,从而导致导航失败,使用者使用时可能会产生误操作从而引起事故。
因此,随着交通条件的日益复杂,传统的导航技术已经无法适应于现今的道路,为此,希望提供一直更加智能化的导航技术。目前,传统的导航技术基本都是地图导航,和地图显示路径,但是,地图终究不是实景图,因此,对地图认识能力不强的人来说,需要将地图和实景对照来认识,但是这对在道路上行驶的车辆来说,这种导航技术还不够方便,使得驾驶员需要分心,可能使得驾驶员发生危险。
另外一方面,随着AR(即增强现实)技术的发展,AR的应用也越来越广泛了,其中AR导航是主要的应用方向之一。AR技术让导航更加直观,旨在使用AR导航来帮助引导用户到达目的地。
对于传统导航我们再熟悉不过,2D导航在给我们提供便利的同时确实还存在着很多不尽如人意的地方,比如复杂高架桥、景区道路崎岖、商城店铺繁多时,是不是有很多人都有过因为没理解导航提示,而错过路口、走错店铺的情况,而AR导航会凭借其沉浸式的导航体验、精准的定位,以及人性化的智能语音播报,将这一窘境的发生降至最低。
对于现今的导航来说,为了完成完美导航,一方面需要高精度、低延时的导航和定位,另外还希望能够提供实景导航,这样可以直接看到实景图,并实现实景导航。
另外一方面,第五代移动通信技术(英语:5th generation mobile networks或5th generation wireless systems、5th-Generation,简称5G)是最新一代蜂窝移动通信技术,其中,5G的性能目标是高数据速率、减少延迟、节省能源、降低成本、提高系统容量和大规模设备连接,速度高达20Gbit/s,可以实现宽信道带宽和大容量MIMO。因此,为了快速进行通信以便更加方便快捷导航,即需要更加方便快捷的通信技术,保证足够低的通信延时,同时需要更快更宽的带宽,以便为此,人们便把眼光盯向5G通信技术。
另外一方面,由于复杂高架桥、景区道路崎岖或隧道等地区,由于导致的GPS信号丢失,从而导致无法实景导航,随着车联网技术的兴起,任命便把该技术应用汽车导航中,以便增加同行效率和行车效率。具体而言,所谓车联网(IOV:Internetof Vehicle),是指车与车、车与路、车与人、车与传感设备等交互,实现车辆与公众网络通信的动态移动通信系统。利用先进传感技术、网络技术、计算技术、控制技术、智能技术,对道路和交通进行全面感知,实现多个系统间大范围、大容量数据的交互,对每一辆汽车进行交通全程控制,对每一条道路进行交通全时空控制,以提供交通效率和交通安全为主的网络与应用。它可以通过车与车、车与人、车与路互联互通实现信息共享,收集车辆、道路和环境的信息,并在信息网络平台上对多源采集的信息进行加工、计算、共享和安全发布,根据不同的功能需求对车辆进行有效的引导与监管,以及提供专业的多媒体与移动互联网应用服务。
从网络上看,IOV系统是一个″端管云″三层体系。车联网(IOV:InternetofVehicle)能够实现智能化交通管理、智能动态信息服务和车辆控制的一体化网络,是物联网技术在交通系统领域的典型应用,是移动互联网、物联网向业务实质和纵深发展的必经之路,是未来信息通信、环保、节能、安全等发展的融合性技术。
同时,现有技术中,导航技术基本是感受定位系统的位置,并将位置显示到地图上,从而实现在地图上的导航;而如果能将拍照的实景反馈到地图上,并进行显示,从而实现地图导航的纠正,则必然会大大提高定位精度。然而,在现有技术中,并无上述技术,为此希望能够提供一种导航技术,解决上述问题。
发明内容
本发明的目的在于提供一种基于实景反馈的AR导航预显示巡航系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种基于实景反馈的AR导航预显示巡航系统,包括AR服务器、车载端和路面实景地图采集端;
其中,AR服务器包括AR实景数据库、5G信号发送和接收模块和AR实景地图修正模块;
车载端包括本地AR实景数据库,5G信号发送和接收模块、摄像模块、AR实景图像显示模块、车载端处理器、车载端定位模块和车联网RFID传感设备;
路面实景地图采集端包括路面实景地图采集模块、载体和本地AR实景数据库、车载端定位模块和载体RFID传感设备,所述载体上设置有路面实景地图采集模块;
所述车载端初始化时,车载端的5G信号发送和接收模块和AR服务器端的5G信号发送和接收模块进行通信连接,并建立通信通道,车载端和AR服务器通信,以确认车载端的AR实景数据库已经是最新的AR实景数据库,否则车载端重新下载最新的AR实景数据库以更新AR实景数据库;所述摄像模块用于获取当前图像提供给车载端处理器,所述车载端处理器依据摄像模块提供图像数据在车载端和AR实景数据库进行匹配,并将匹配的AR实景图像和实车数据结合提供给AR实景图像显示模块显示;
所述车联网RFID传感设备用于车辆之间,或所述车辆与所述路面实景地图采集端进行通信;
所述路面实景地图采集端可以和AR服务器通信连接,用于采集路面实景地图并发送给AR服务器,同时,所述路面实景地图采集端还可以和车辆的车载端建立通信连接,从而实现路面实景地图采集端和车辆进行通信;此外,所述路面实景地图采集端和邻近的路面实景地图采集端还可以进行通信,或作为车载端的中继通信模块以便实现车辆和所述AR服务器进行通信;具体而言,所述路面实景地图采集模块用于采集路面实景图像并发送给AR服务器,并经AR服务器处理后形成AR实景数据库;所述载体RFID传感设备用于和相邻的所述载体RFID传感设备、车辆上的车载端的车联网RFID传感设备构成车辆网。
优选的,当所述车载端处理器在车载端的本地AR实景数据库未匹配到合适的图像时,启动AI智能模糊匹配进行匹配,以获取当前的实际路线和位置,并利用摄像模块摄像获得AR实景图像,并将图像通过5G信号发送和接收模块上传至AR服务器。
优选的,当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和所述载体RFID传感设备进行中继通信以便和AR服务器通信;
优选的,当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信;
优选的,所述路面实景地图采集端的载体可以是移动车辆和路灯等构成的载体。
优选的,所述路灯和移动车设置有所述载体RFID传感设备和摄像模块,当发生道路修建和改造时,可以通过设置的所述载体RFID传感设备构成的车联网将所述摄像模块拍摄的图像传输给所述AR服务器以便修正AR服务器的AR实景数据库。
优选的,所述AR实景图像显示模块包括带有显示功能的车前挡风玻璃,所述车前挡风玻璃具备半透明显示功能,其能将查询到的导航AR实景图像显示在挡风玻璃上,当驾驶员透过车挡风玻璃看到的图像和所述导航实景图对比基本重叠时,这表示驾驶员行走的路线正确;而在驾驶员透过车挡风玻璃看到的图像和所述导航实景图对比差异明显时,这表明汽车行走在错误的道路上,此时车载端发出报警,并从新规划新的导航路线。
优选的,所述车载端设置有车载端定位模块,所述车载端定位模块获取车辆当前的位置,并利用车辆AI智能算法和摄像模块和AR实景数据库进行匹配,以便获取车辆实际的行驶道路和路线,从而修正车辆实际所在的道路的车道,或高架桥的哪层的哪一车道。其可以快速定位。
优选的,所述接线盒连接有接地线,且接地线与罐体外壁连接。
优选的,所述载体为汽车、路口信号灯或路灯或其他可以承载路面实景地图采集模块的载体。
另外一方面,本申请还提供一种基于实景反馈的AR导航预显示巡航系统的自动导航方法,所述自动导航方法的步骤如下:
S1、打开所述AR导航预显示巡航系统的车载端,所述车载端进行初始化,同时,所述车载端的5G信号发送和接收模块和所述AR服务器的5G信号发送和接收模块连接,完成AR实景数据库查询工作,确保车载端的AR实景数据库为最新的数据库,如果非最新数据库,则从所述AR服务器下载最新的AR实景数据库,以更新车载端;
S2、车载端初始化后,提示用户输入目的地,用户输入目的地后,显示规划路径信息和AR全景图像,同时摄像头开始工作;
S3、所述摄像头拍摄到车头景象,并和所述车载端的本地AR实景数据库的数据进行AI智能匹配,同时车载端的车载端定位模块给出地图地理位置数据,经过地图位置数据和AI智能匹配的AR实景图,从而得出车辆在AR实景巡航图,将车辆定位到具体的车道中;
S4、在获取不到车载端定位模块给出地图地理位置数据时,获取车速传感模块的速度数据和加速度传感器测定方向信息,进而利用方向信息和速度数据并结合AI智能匹配的AR实景图,从而获得车辆的AR实景巡航图;
S5、在摄像头拍摄到车头景象和所述车载端的本地AR实景数据库的数据无法进行图像匹配,则认定当前实景已经发生改变,此时需要启动模糊匹配,同时修正车载端的AR实景数据库和所述服务器的AR实景图;具体来说,所述模糊匹配时是依据所拍摄的主要图像点和当前地图定位附近的AR实景数据库中的图像进行模糊匹配,从而得出该车实际所处的车道和位置,同时,车载端的摄像头获取的图像和车载端的车载端定位模块获取的位置信息传输至AR实景服务器的AR实景地图修正模块,所述AR实景地图修正模块修正相应位置的AR实景地图,并更新AR实景服务器的AR实景数据库。
优选的,当车辆行进至由于5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信。
与现有技术相比,本发明的有益效果是:
1、本发明的基于实景反馈的AR导航预显示巡航系统通过AR实景图像和拍摄的景象进行交叉查询,从而可以快速定位到具体道路路线的车道,从而进一步提高汽车驾驶的精度,可靠性高。
2、本发明基于实景反馈的AR导航预显示巡航系统,当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和所述载体RFID传感设备进行中继通信或所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信,从而提高在没有5G信号区域以便和AR服务器通信和定位精度;
3.本发明的基于实景反馈的AR导航预显示巡航系统,其在当前的道路由于修整、改造导致景象发生变化而无法有效匹配时,可以利用车载端的摄像头进行模糊匹配以便获取当前车道,而打破传统的匹配不好就报送错误而不利于导航的问题,并且其可以自行修整服务器的地图库,保证地图最新,实现自动化控制,节约人力资源,提高工作效率。
附图说明
图1为本发明整体发明构思示意图;
图2为本发明的AR服务器结构示意图;
图3为本发明的车载端的结构示意图;
图4位本发明的路面实景地图采集端结构示意图。
图中:1、AR服务器;2、路面实景地图采集端;3、车载端;4、AR实景数据库;5、AR实景地图修正模块;6、5G信号发送和接收模块。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-4,本发明提供一种技术方案:一种基于实景反馈的AR导航预显示巡航系统,包括AR服务器、车载端和路面实景地图采集端;
其中,AR服务器包括AR实景数据库、5G信号发送和接收模块和AR实景地图修正模块;
车载端包括本地AR实景数据库,5G信号发送和接收模块、摄像模块、AR实景图像显示模块、车载端处理器、车载端定位模块和车联网RFID传感设备;
路面实景地图采集端包括路面实景地图采集模块、载体和本地AR实景数据库和载体RFID传感设备,所述载体上设置有路面实景地图采集模块;
所述车载端初始化时,车载端的5G信号发送和接收模块和AR服务器端的5G信号发送和接收模块进行通信连接,并建立通信通道,车载端和AR服务器通信,以确认车载端的AR实景数据库已经是最新的AR实景数据库,否则车载端重新下载最新的AR实景数据库以更新AR实景数据库;所述摄像模块用于获取当前图像提供给车载端处理器,所述车载端处理器依据摄像模块提供图像数据在车载端和AR实景数据库进行匹配,并将匹配的AR实景图像和实车数据结合提供给AR实景图像显示模块显示;
所述车联网RFID传感设备用于车辆之间,或所述车辆与所述路面实景地图采集端进行通信;
所述路面实景地图采集端可以和AR服务器通信连接,用于采集路面实景地图并发送给AR服务器,同时,所述路面实景地图采集端还可以和车辆的车载端建立通信连接,从而实现路面实景地图采集端和车辆进行通信;此外,所述路面实景地图采集端和邻近的路面实景地图采集端还可以进行通信,或作为车载端的中继通信模块以便实现车辆和所述AR服务器进行通信;具体而言,所述路面实景地图采集模块用于采集路面实景图像并发送给AR服务器,并经AR服务器处理后形成AR实景数据库;所述载体RFID传感设备用于和相邻的所述载体RFID传感设备、车辆上的车载端的车联网RFID传感设备构成车辆网。
优选的,当所述车载端处理器在车载端的本地AR实景数据库未匹配到合适的图像时,启动AI智能模糊匹配进行匹配,以获取当前的实际路线和位置,并利用摄像模块摄像获得AR实景图像,并将图像通过5G信号发送和接收模块上传至AR服务器。
优选的,当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和所述载体RFID传感设备进行中继通信以便和AR服务器通信;
优选的,当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信;
优选的,所述路面实景地图采集端的载体可以是移动车辆和路灯等构成的载体。
优选的,所述路灯和移动车设置有所述载体RFID传感设备和摄像模块,当发生道路修建和改造时,可以通过设置的所述载体RFID传感设备构成的车联网将所述摄像模块拍摄的图像传输给所述AR服务器以便修正AR服务器的AR实景数据库。
优选的,所述AR实景图像显示模块包括带有显示功能的车前挡风玻璃,所述车前挡风玻璃具备半透明显示功能,其能将查询到的导航AR实景图像显示在挡风玻璃上,当驾驶员透过车挡风玻璃看到的图像和所述导航实景图对比基本重叠时,这表示驾驶员行走的路线正确;而在驾驶员透过车挡风玻璃看到的图像和所述导航实景图对比差异明显时,这表明汽车行走在错误的道路上,此时车载端发出报警,并从新规划新的导航路线。
优选的,所述车载端设置有车载端定位模块,所述车载端定位模块获取车辆当前的位置,并利用车辆AI智能算法和摄像模块和AR实景数据库进行匹配,以便获取车辆实际的行驶道路和路线,从而修正车辆实际所在的道路的车道,或高架桥的哪层的哪一车道。其可以快速定位。
优选的,所述接线盒连接有接地线,且接地线与罐体外壁连接。
优选的,所述载体为汽车、路口信号灯或路灯或其他可以承载路面实景地图采集模块的载体。
另外一方面,本申请还提供一种基于实景反馈的AR导航预显示巡航系统的自动导航方法,所述自动导航方法的步骤如下:
S1、打开所述AR导航预显示巡航系统的车载端,所述车载端进行初始化,同时,所述车载端的5G信号发送和接收模块和所述AR服务器的5G信号发送和接收模块连接,完成AR实景数据库查询工作,确保车载端的AR实景数据库为最新的数据库,如果非最新数据库,则从所述AR服务器下载最新的AR实景数据库,以更新车载端;
S2、车载端初始化后,提示用户输入目的地,用户输入目的地后,显示规划路径信息和AR全景图像,同时摄像头开始工作;
S3、所述摄像头拍摄到车头景象,并和所述车载端的本地AR实景数据库的数据进行AI智能匹配,同时车载端的车载端定位模块给出地图地理位置数据,经过地图位置数据和AI智能匹配的AR实景图,从而得出车辆在AR实景巡航图,将车辆定位到具体的车道中;
S4、在获取不到车载端定位模块给出地图地理位置数据时,获取车速传感模块的速度数据和加速度传感器测定方向信息,进而利用方向信息和速度数据并结合AI智能匹配的AR实景图,从而获得车辆的AR实景巡航图;
S5、在摄像头拍摄到车头景象和所述车载端的本地AR实景数据库的数据无法进行图像匹配,则认定当前实景已经发生改变,此时需要启动模糊匹配,同时修正车载端的AR实景数据库和所述服务器的AR实景图;具体来说,所述模糊匹配时是依据所拍摄的主要图像点和当前地图定位附近的AR实景数据库中的图像进行模糊匹配,从而得出该车实际所处的车道和位置,同时,车载端的摄像头获取的图像和车载端的车载端定位模块获取的位置信息传输至AR实景服务器的AR实景地图修正模块,所述AR实景地图修正模块修正相应位置的AR实景地图,并更新AR实景服务器的AR实景数据库。
优选的,当车辆行进至由于5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语″包括″、″包含″或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (5)

1.一种基于实景反馈的AR导航预显示巡航系统,包括AR服务器、车载端和路面实景地图采集端;
其中,AR服务器包括AR实景数据库、5G信号发送和接收模块和AR实景地图修正模块;
车载端包括本地AR实景数据库,5G信号发送和接收模块、摄像模块、AR实景图像显示模块、车载端处理器、车载端定位模块和车联网RFID传感设备;
路面实景地图采集端包括路面实景地图采集模块、载体和本地AR实景数据库和载体RFID传感设备,所述载体上设置有路面实景地图采集模块;
所述车载端初始化时,车载端的5G信号发送和接收模块和AR服务器端的5G信号发送和接收模块进行通信连接,并建立通信通道,车载端和AR服务器通信,以确认车载端的AR实景数据库已经是最新的AR实景数据库,否则车载端重新下载最新的AR实景数据库以更新AR实景数据库;所述摄像模块用于获取当前图像提供给车载端处理器,所述车载端处理器依据摄像模块提供图像数据在车载端和AR实景数据库进行匹配,并将匹配的AR实景图像和实车数据结合提供给AR实景图像显示模块显示;
所述车联网RFID传感设备用于车辆之间,或所述车辆与所述路面实景地图采集端进行通信;
所述路面实景地图采集端可以和AR服务器通信连接,用于采集路面实景地图并发送给AR服务器,同时,所述路面实景地图采集端还可以和车辆的车载端建立通信连接,从而实现路面实景地图采集端和车辆进行通信;此外,所述路面实景地图采集端和邻近的路面实景地图采集端还可以进行通信,或作为车载端的中继通信模块以便实现车辆和所述AR服务器进行通信;具体而言,所述路面实景地图采集模块用于采集路面实景图像并发送给AR服务器,并经AR服务器处理后形成AR实景数据库;所述载体RFID传感设备用于和相邻的所述载体RFID传感设备、车辆上的车载端的车联网RFID传感设备构成车辆网;
当所述车载端处理器在车载端的本地AR实景数据库未匹配到合适的图像时,启动AI智能模糊匹配进行匹配,以获取当前的实际路线和位置,并利用摄像模块摄像获得AR实景图像,并将图像通过5G信号发送和接收模块上传至AR服务器;
当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和所述载体RFID传感设备进行中继通信以便和AR服务器通信。
2.根据权利要求1所述的一种基于实景反馈的AR导航预显示巡航系统,其特征在于:当所述车载端由于信号的5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信。
3.根据权利要求1所述的一种基于实景反馈的AR导航预显示巡航系统,其特征在于:所述路面实景地图采集端的载体可以是移动车辆和路灯等构成的载体。
4.一种根据权利要求1-3任一项所述基于实景反馈的AR导航预显示巡航系统的自动导航方法,所述自动导航方法的步骤如下:
S1、打开所述AR导航预显示巡航系统的车载端,所述车载端进行初始化,同时,所述车载端的5G信号发送和接收模块和所述AR服务器的5G信号发送和接收模块连接,完成AR实景数据库查询工作,确保车载端的AR实景数据库为最新的数据库,如果非最新数据库,则从所述AR服务器下载最新的AR实景数据库,以更新车载端;
S2、车载端初始化后,提示用户输入目的地,用户输入目的地后,显示规划路径信息和AR全景图像,同时摄像头开始工作;
S3、所述摄像头拍摄到车头景象,并和所述车载端的本地AR实景数据库的数据进行AI智能匹配,同时车载端的车载端定位模块给出地图地理位置数据,经过地图位置数据和AI智能匹配的AR实景图,从而得出车辆在AR实景巡航图;
S4、在获取不到车载端定位模块给出地图地理位置数据时,获取车速传感模块的速度数据和加速度传感器测定方向信息,进而利用方向信息和速度数据并结合AI智能匹配的AR实景图,从而获得车辆的AR实景巡航图;
S5、在摄像头拍摄到车头景象和所述车载端的本地AR实景数据库的数据无法进行图像匹配,则认定当前实景已经发生改变,此时需要启动模糊匹配,同时修正车载端的AR实景数据库和所述服务器的AR实景图;具体来说,所述模糊匹配时是依据所拍摄的主要图像点和当前地图定位附近的AR实景数据库中的图像进行模糊匹配,从而得出该车实际所处的车道和位置,同时,车载端的摄像头获取的图像和车载端的车载端定位模块获取的位置信息传输至AR实景服务器的AR实景地图修正模块,所述AR实景地图修正模块修正相应位置的AR实景地图,并更新AR实景服务器的AR实景数据库。
5.根据权利要求4所述的一种基于实景反馈的AR导航预显示巡航系统的自动导航方法,其特征在于:
当车辆行进至由于5G信号无法覆盖的隧道、遮蔽车库大和桥底下等5G遮蔽信号地段无法进行5G通信时,所述车载端通过所述车联网RFID传感设备和相邻车辆的所述车联网RFID传感设备、所述载体RFID传感设备混合组网进行中继通信以便和AR服务器通信。
CN202010942283.7A 2020-09-09 2020-09-09 一种基于实景反馈的ar导航预显示巡航系统 Active CN112197786B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010942283.7A CN112197786B (zh) 2020-09-09 2020-09-09 一种基于实景反馈的ar导航预显示巡航系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010942283.7A CN112197786B (zh) 2020-09-09 2020-09-09 一种基于实景反馈的ar导航预显示巡航系统

Publications (2)

Publication Number Publication Date
CN112197786A true CN112197786A (zh) 2021-01-08
CN112197786B CN112197786B (zh) 2021-09-10

Family

ID=74014449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010942283.7A Active CN112197786B (zh) 2020-09-09 2020-09-09 一种基于实景反馈的ar导航预显示巡航系统

Country Status (1)

Country Link
CN (1) CN112197786B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113779677A (zh) * 2021-09-10 2021-12-10 贵州华泰智远大数据服务有限公司 一种基于地理位置信息服务的数字孪生数据快速生成平台

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120226437A1 (en) * 2011-03-01 2012-09-06 Mitac International Corp. Navigation device with augmented reality navigation functionality
CN105303209A (zh) * 2015-10-27 2016-02-03 重庆智韬信息技术中心 建立车载rfid信息数据中继传输的系统
CN105444773A (zh) * 2015-11-26 2016-03-30 中山大学 一种基于实景识别与增强现实的导航方法及系统
CN107782314A (zh) * 2017-10-24 2018-03-09 张志奇 一种基于扫码的增强现实技术室内定位导航方法
CN110843674A (zh) * 2019-11-22 2020-02-28 深圳晨芯时代科技有限公司 一种基于ar增强现实技术的车载显示模组系统
CN111157009A (zh) * 2020-04-02 2020-05-15 深圳司南数据服务有限公司 基于移动终端和ar智能的室内定位导航创建方法及系统
CN111256687A (zh) * 2018-11-30 2020-06-09 广东星舆科技有限公司 地图数据的处理方法、装置、采集设备和存储介质
CN111397627A (zh) * 2020-03-30 2020-07-10 深圳市凯立德科技股份有限公司 Ar导航方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120226437A1 (en) * 2011-03-01 2012-09-06 Mitac International Corp. Navigation device with augmented reality navigation functionality
CN105303209A (zh) * 2015-10-27 2016-02-03 重庆智韬信息技术中心 建立车载rfid信息数据中继传输的系统
CN105444773A (zh) * 2015-11-26 2016-03-30 中山大学 一种基于实景识别与增强现实的导航方法及系统
CN107782314A (zh) * 2017-10-24 2018-03-09 张志奇 一种基于扫码的增强现实技术室内定位导航方法
CN111256687A (zh) * 2018-11-30 2020-06-09 广东星舆科技有限公司 地图数据的处理方法、装置、采集设备和存储介质
CN110843674A (zh) * 2019-11-22 2020-02-28 深圳晨芯时代科技有限公司 一种基于ar增强现实技术的车载显示模组系统
CN111397627A (zh) * 2020-03-30 2020-07-10 深圳市凯立德科技股份有限公司 Ar导航方法及装置
CN111157009A (zh) * 2020-04-02 2020-05-15 深圳司南数据服务有限公司 基于移动终端和ar智能的室内定位导航创建方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113779677A (zh) * 2021-09-10 2021-12-10 贵州华泰智远大数据服务有限公司 一种基于地理位置信息服务的数字孪生数据快速生成平台
CN113779677B (zh) * 2021-09-10 2024-01-12 贵州华泰智远大数据服务有限公司 一种基于地理位置信息服务的数字孪生数据快速生成平台

Also Published As

Publication number Publication date
CN112197786B (zh) 2021-09-10

Similar Documents

Publication Publication Date Title
CN110186467B (zh) 基于群感测点云地图的控制自主车辆的方法及计算机实施系统
JP6785859B2 (ja) 自動運転ナビゲーション方法、装置、およびシステム、車載端末、ならびにサーバ
US9684081B2 (en) Method and apparatus for providing a location data error map
CN104359487B (zh) 一种实景导航系统
EP2203718B1 (en) A method of processing positioning data
EP1221588B1 (en) Method of navigation guidance
US9651383B2 (en) Method and system for creating indoor and outdoor linked path
CN102713520B (zh) 导航装置和方法
CN103559805B (zh) 基于北斗及惯性导航的高精度3g视频车载定位系统
CN104583722A (zh) 用于路线搜索的设备及方法
WO2008044309A1 (en) Navigation system, mobile terminal device, and route guiding method
JP2021509169A (ja) ナビゲーション装置を使用して車線情報を提供する方法およびシステム
CN101903745A (zh) 经改进的导航装置和方法
US11677930B2 (en) Method, apparatus, and system for aligning a vehicle-mounted device
WO2021189570A1 (zh) 一种基于增强现实的室内寻车引导系统与方法
US20190227176A1 (en) Gnss localization using vehicle sensors
CN112197786B (zh) 一种基于实景反馈的ar导航预显示巡航系统
CN112013867B (zh) 基于实景反馈的ar导航预显示巡航系统
CN106802151A (zh) 基于沿途参照物匹配的导航方法
CN109115234A (zh) 车辆、车机设备及其基于迪杰斯特拉算法的导航方法
CN104884897B (zh) 移动装置的地图匹配方法
CN112067014B (zh) 一种ar多路导航系统
US20220197893A1 (en) Aerial vehicle and edge device collaboration for visual positioning image database management and updating
CN105674998A (zh) 导航装置及方法
CN106643751A (zh) 一种基于云服务的车载导航

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant