具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
请参阅图1,图1是本发明实景地图制作方法一实施例的流程图。本发明的实景地图制作方法的执行主体为实景地图制作装置,实景地图制作装置具有至少两个摄像头。实景地图制作装置可以为行车记录仪,也可以为其他车载信息终端设备,此处不做限制。本实施例中的实景地图制作方法包括以下步骤:
S101:获取摄像头实时采集的视频图像并形成全景视频流。其中,所述视频图像信息包括目标对象的位置信息。
实景地图制作装置在确认制作实景地图时,启动安装于车辆上的摄像头,并控制摄像头实时采集车辆周围360度的视频图像。即实景地图制作装置通过扫街(在街上抓拍)的方式实时采集车辆周围360度的视频图像。
实景地图制作装置获取摄像头实时采集的视频图像,并将视频图像进行视频同步、拼接合成等处理等形成全景视频流。
其中,在本实施例中,摄像头的数量为至少两个,分别安装在车辆右前方、车辆右后方。可以理解的是,在其他实施例中摄像头的数量可以为一个或多个,摄像头安装的数量和位置,以保证能够采集到车辆周围360度的视频图像为准,此处不做限制。
视频图像信息包括目标对象的位置信息。目标对象的位置信息包括GPS地理位置信息。目标对象可以为商业建筑。商业建筑包括各类日常用品和生产资料等的零售商店、商场、批发市场;金融、证券等行业的交易场所及供经营管理业务活动的商务办公楼/写字楼;各类服务业建筑,包括旅馆(含宾馆、酒店、招待所等)、餐馆(含中西餐厅、饮食店、酒吧等)、文化娱乐设施(如卡OK歌舞厅等)、会所(亦称会员俱乐部,为会员提供休憩、饮食、聚会、文化娱乐和体育活动等的场所)等。
可以理解的是,由于安装于车辆上的摄像头在车辆启动或行驶过程中均可能产生震动,从而可能导致摄像头采集的视频图像出现的视频模糊、画面抖动的情况;因此,实景地图制作装置还可以对摄像头所采集的视频图像进行防抖动处理,以消除因车辆启动或行驶过程中造成的视频模糊以及画面抖动,从而获得摄像头所采集的清晰稳定的视频图像。
S102:识别出所述全景视频流中的目标对象信息;其中,所述目标对象信息包括所述目标对象的标识以及所述目标对象的位置信息。
实景地图制作装置通过专业目标识别技术从全景视频流中识别出目标对象信息。
其中,专业目标识别技术可以包括文字识别技术、图标识别技术,对具体的文字识别技术、图标识别技术不做限制,只要能够识别全景视频流中的目标对象信息即可。
进一步地,实景地图制作装置通过文字识别技术识别出全景视频流中的目标对象的文字类信息。通过深度机器深度学习算法Deep Logo识别出全景视频流中的目标对象的图标/商标(Logo)类信息。
其中,文字识别技术可以为采用Google光学字符识别算法(OpticalCharacter Recognition,OCR),但并不限于此,还可以为其他的识别算法,例如,模式识别、文本扫描等,此处不做限制。
目标对象信息包括目标对象的标识以及目标对象的位置信息。目标对象的标识可以包括目标对象的名称、图标(Logo)等,目标对象的名称可以为中文,也可以为英文,或其以其他语种的形式进行标识。目标对象的标识与目标对象的位置信息关联保存。
S103:根据所述目标对象信息获取所述目标对象对应的子目标对象信息;其中,所述子目标对象信息包括所述子目标对象的标识以及所属楼层信息。
实景地图制作装置根据目标对象的标识、位置信息获取与目标对象的标识、位置信息均匹配的子目标对象信息。
例如,实景地图制作装置根据目标对象的经纬度信息,获取该经纬度上,处于该目标对象各层的子目标对象信息。
子目标对象信息包括子目标对象的标识、子目标对象所属楼层信息。子目标对象的所属楼层信息用于描述处于目标对象中的具体位置。
子目标对象的标识可以包括子目标对象的名称、图标(Logo)等,子目标对象的名称可以为中文,也可以为英文,或其以其他语种的形式进行标识。
子目标对象所属楼层信息包括所属楼层的楼层号、分区号、门牌号等。
子目标对象的标识与子目标对象的位置信息关联保存。
可以理解的是,目标对象对应的子目标对象信息可以从全景视频流中获取,当无法从全景视频流中获取时,可以通过其他途径获取(比如,可以从网络服务器的数据库中获取),此处不做限制。
S104:根据所述目标对象信息、所述子目标对象信息以及所述全景视频流进行地图绘制处理,生成实景地图。
实景地图制作装置根据目标对象信息,将目标对象信息对应的子目标对象信息添加到全景视频流中目标对象的对应位置,并进行地图绘制处理生成实景地图。
其中,实景地图能够显示目标对象各楼层中的子目标对象信息,其具体显示方式可根据实际需求设置,此处不做限制。
可以理解的是,实景地图制作装置可以根据子目标对象的所属楼层信息,在实景地图中标示子目标对象的海拔高度。
生成实景地图的方法可以是将获取的全景视频流与第三方实景地图或第三方电子地图耦合进行地图绘制处理以生成实景地图。其中,获取的全景视频流中的目标对象所处的相应位置上标识有目标对象对应的子目标对象信息。
上述方案,实景地图制作装置通过获取摄像头实时采集的视频图像并形成全景视频流;根据全景视频流中的目标对象信息获取目标对象对应的子目标对象信息;并根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图有效;这种方法能够从实景地图中快速获取目标对象对应的子目标对象信息,以及能够根据子目标对象信息快速获取子目标对象的地理分布信息,便于用户进行分类查找/管理,提高信息获取效率。
请参阅图2,图2是本发明实景地图制作方法另一实施例的流程图。本发明的实景地图制作方法的执行主体为实景地图制作装置,实景地图制作装置具有至少两个摄像头。实景地图制作装置可以为行车记录仪,也可以为其他车载信息终端设备,此处不做限制。本实施例中的实景地图制作方法包括以下步骤:
S201:获取摄像头实时采集的视频图像并形成全景视频流。其中,所述视频图像信息包括目标对象的位置信息。
本实施例中的步骤S201与上一实施例中的步骤S101相同,具体请参阅上一实施例步骤S101的相关描述,此处不赘述。
S202:识别出所述全景视频流中的目标对象信息;其中,所述目标对象信息包括所述目标对象的标识以及所述目标对象的位置信息。
本实施例中的步骤S202与上一实施例中的步骤S102相同,具体请参阅上一实施例步骤S102的相关描述,此处不赘述。
S203:根据所述目标对象信息获取所述目标对象对应的子目标对象信息;其中,所述子目标对象信息包括所述子目标对象的标识以及所属楼层信息。
实景地图制作装置根据目标对象的位置信息获取与该位置与目标对象的标识匹配的子目标对象信息。例如,实景地图制作装置根据目标对象的经纬度信息,获取该经纬度上,处于该目标对象各层的子目标对象信息。
子目标对象信息包括子目标对象的标识、子目标对象所属楼层信息。子目标对象的所属楼层信息用于描述处于目标对象中的具体位置。
子目标对象的标识可以包括子目标对象的名称、图标(Logo)等,子目标对象的名称可以为中文,也可以为英文,或其以其他语种的形式进行标识。
子目标对象所属楼层信息包括所属楼层的楼层号、分区号、门牌号等。
子目标对象的标识与子目标对象的位置信息关联保存。
进一步地,步骤S203具体为:根据所述目标对象信息从所述全景视频流中获取与所述目标对象匹配的子目标对象信息;和/或根据所述目标对象的信息通过爬网技术、字符串插值算法获取与所述目标对象匹配的子目标对象信息。
例如,当目标对象的楼层较低,实景地图制作装置获取的视频流包括目标对象所有楼层的子目标对象信息时,实景地图制作装置根据目标对象的标识、位置信息从全景视频流中获取与目标对象的标识以及位置信息均匹配的子目标对象信息。
当目标对象的楼层较高,实景地图制作装置获取的视频流包括目标对象部分楼层的子目标对象信息时,实景地图制作装置根据目标对象的标识、位置信息(经纬度信息、具体所属的街道信息等),通过爬网技术、字符串插值算法获取与目标对象的标识、位置信息均匹配的子目标对象信息。
或者,实景地图制作装置根据目标对象的标识、位置信息从全景视频流中与获取目标对象的标识以及位置信息均匹配的子目标对象信息;无法从全景视频流中获取的子目标对象信息,通过爬网技术、字符串插值算法获取与目标对象的标识、位置信息均匹配的子目标对象信息。
其中,爬网是指系统访问和分析内容及其属性(有时称为"元数据")从而建立可提供搜索查询服务的内容索引的过程。
进一步地,通过爬网技术、字符串插值算法获取与目标对象的标识、位置信息均匹配的子目标对象信息可以为:根据所述目标对象的信息通过爬网技术获取与所述目标对象匹配的子目标对象信息;采用所述字符串插值算法对所述子目标对象信息进行字符串比对和语义分析处理建立所述目标对象与其对应的子目标对象的对应关系。
例如,实景地图制作装置通过爬网技术获取与目标对象的标识、位置信息均匹配的子目标对象的标识,以确定处于同一地理位置,该目标对象各楼层的子目标对象,采用字符串插值算法对获取到的子目标对象的标识包含的字符串进行字符串比对和语义分析,分离出地址字符串中包含的国家、省份、城市、街路、小区、楼名、门牌编号等元素,并且补充缺少的成分。在分离出正确的各级地址元素后,在确定地址的单位中搜索最接近的地址,然后通过其坐标、经纬度信息等来确定子目标对象的具体位置,建子目标对象的位置与目标对象的位置之间的对应关系,从而将子目标对象的标识、位置信息与目标对象关联起来。
可以理解的是,本实施例中,实景地图制作装置可以根据从全景视频流中获取的目标对象的信息通过爬网技术、字符串插值算法获取与该目标对象信息匹配的所有子目标对象信息,并将其保存在本地数据库中。
S204:根据所述目标对象信息、所述子目标对象信息以及所述全景视频流进行地图绘制处理,生成实景地图。
实景地图制作装置根据目标对象信息,将目标对象信息对应的子目标对象信息添加到全景视频流中目标对象的对应位置,并进行地图绘制处理生成实景地图。
其中,实景地图能够显示目标对象各楼层中的子目标对象信息,其具体显示方式可根据实际需求设置,此处不做限制。
进一步地,步骤S204包括:校验所述目标对象信息以及所述子目标对象信息;在校验通过时,根据所述目标对象信息、所述子目标对象信息以及所述全景视频流进行地图绘制处理,生成实景地图。
实景地图制作装置在获取到目标对象对应的所有子目标对象信息后,校验目标对象信息以及子目标对象信息是否正确。
进一步地,校验目标对象信息以及所述子目标对象信息具体为:确认所述目标对象信息以及所述子目标对象信息与从数据库获取的信息是否一致;若一致,则校验通过;若不一致,则通过字符串插值算法进行进一步校验。
例如,实景地图制作装置在获取到目标对象对应的所有子目标对象信息后,确认目标对象信息以及子目标对象信息与从数据库获取的信息是否一致。
实景地图制作装置在确认通过步骤S203获取的目标对象信息以及子目标对象信息,与从数据库中获取的目标对象信息、子目标对象信息相同时,则判定为校验通过;否则,判定为校验失败。
其中,数据库保存有目标对象信息以及目标对象对应的子目标对象信息。数据库可以为本地数据库,也可以是网络服务器对应的数据库,此处不做限制。
在校验通过时,实景地图制作装置根据目标对象信息,将目标对象信息对应的子目标对象信息添加到全景视频流中目标对象的对应位置,并进行地图绘制处理生成实景地图。
在校验失败时,实景地图制作装置通过字符串插值算法对子目标对象信息进行字符串比对和语义分析,分离出地址字符串中包含的国家、省份、城市、街路、小区、楼名、门牌编号等元素,并且补充缺少的成分,通过交换界面将最终结果呈现给用户进行人工确认。在检测到用户输入的校验后的信息时,确认校验通过。
可以理解的是,实景地图制作装置可以根据子目标对象的所属楼层信息,在实景地图中标示子目标对象的海拔高度。
生成实景地图的方法可以是将获取的全景视频流与第三方实景地图或第三方电子地图耦合进行地图绘制处理以生成实景地图。其中,获取的全景视频流中的目标对象所处的相应位置上标识有目标对象对应的子目标对象信息。
上述方案,实景地图制作装置通过获取摄像头实时采集的视频图像并形成全景视频流;根据全景视频流中的目标对象信息获取目标对象对应的子目标对象信息;并根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图有效;这种方法能够从实景地图中快速获取目标对象对应的子目标对象信息,以及能够根据子目标对象信息快速获取子目标对象的地理分布信息,便于用户进行分类查找/管理,提高信息获取效率。
实景地图制作装置对获取到的目标对象信息、子目标对象信息进行校验,能够提高信息获取精度、准确度,以避免用户获取到错误信息,给用户带来不必要的麻烦。
请参阅图3,图3是本发明实景地图制作装置一实施例的结构示意图。实景地图制作装置具有至少两个摄像头。实景地图制作装置可以为行车记录仪,也可以为其他车载信息终端设备,此处不做限制。其中,本实施例的实景地图制作装置所包括的各模块用于执行图1对应的实施例中包含的各步骤,具体请参阅图1以及图1对应的实施例中的相关描述,此处不赘述。本实施例实景地图制作装置包括视频流形成模块310、识别模块320、获取模块330以及地图生成模块340。
视频流形成模块310用于获取摄像头实时采集的视频图像并形成全景视频流;其中,所述视频图像信息包括目标对象的位置信息。
比如,视频流形成模块310获取摄像头实时采集的视频图像并形成全景视频流;其中,所述视频图像信息包括目标对象的位置信息。视频流形成模块310将全景视频流发送至识别模块320、地图生成模块340。
识别模块320用于接收视频流形成模块310发送的全景视频流,识别出全景视频流中的目标对象信息;其中,目标对象信息包括目标对象的标识以及目标对象的位置信息。
比如,识别模块320接收视频流形成模块310发送的全景视频流,识别出全景视频流中的目标对象信息;其中,目标对象信息包括目标对象的标识以及目标对象的位置信息。识别模块320将识别出的目标对象信息发送至获取模块330。
获取模块330用于接收识别模块320发送的目标对象信息,根据目标对象信息获取目标对象对应的子目标对象信息;其中,子目标对象信息包括子目标对象的标识以及所属楼层信息。
比如,获取模块330接收识别模块320发送的目标对象信息,根据目标对象信息获取目标对象对应的子目标对象信息;其中,子目标对象信息包括子目标对象的标识以及所属楼层信息。获取模块330将目标对象信息以及目标对象对应的子目标对象信息发送至地图生成模块340。
地图生成模块340用于接收视频流形成模块310发送的视频流、获取模块330发送的目标对象信息以及目标对象对应的子目标对象信息,根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图。
比如,地图生成模块340接收视频流形成模块310发送的视频流、获取模块330发送的目标对象信息以及目标对象对应的子目标对象信息,根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图。
上述方案,实景地图制作装置通过获取摄像头实时采集的视频图像并形成全景视频流;根据全景视频流中的目标对象信息获取目标对象对应的子目标对象信息;并根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图有效;这种方法能够从实景地图中快速获取目标对象对应的子目标对象信息,以及能够根据子目标对象信息快速获取子目标对象的地理分布信息,便于用户进行分类查找/管理,提高信息获取效率。
请参阅图4,图4是本发明实景地图制作装置另一实施例的结构示意图。实景地图制作装置具有至少两个摄像头。实景地图制作装置可以为行车记录仪,也可以为其他车载信息终端设备,此处不做限制。其中,本实施例的实景地图制作装置所包括的各模块用于执行图2对应的实施例中包含的各步骤,具体请参阅图2以及图2对应的实施例中的相关描述,此处不赘述。本实施例实景地图制作装置包括视频流形成模块410、识别模块420、获取模块430以及地图生成模块440。地图生成模块440包括校验单元441以及生成单元442。
视频流形成模块410用于获取摄像头实时采集的视频图像并形成全景视频流;其中,所述视频图像信息包括目标对象的位置信息。
比如,视频流形成模块410获取摄像头实时采集的视频图像并形成全景视频流;其中,所述视频图像信息包括目标对象的位置信息。视频流形成模块410将全景视频流发送至识别模块420、地图生成模块440的校验单元441。
识别模块420用于接收视频流形成模块410发送的全景视频流,识别出所述全景视频流中的目标对象信息;其中,目标对象信息包括目标对象的标识以及目标对象的位置信息。
比如,识别模块420接收视频流形成模块410发送的全景视频流,识别出所述全景视频流中的目标对象信息;其中,目标对象信息包括目标对象的标识以及目标对象的位置信息。识别模块420将识别出的目标对象信息发送至获取模块430。
获取模块430用于接收识别模块420发送的目标对象信息,根据目标对象信息获取目标对象对应的子目标对象信息;其中,子目标对象信息包括子目标对象的标识以及所属楼层信息。
比如,获取模块330接收识别模块320发送的目标对象信息,根据目标对象信息获取目标对象对应的子目标对象信息;其中,子目标对象信息包括子目标对象的标识以及所属楼层信息。
进一步地,获取模块330具体用于根据目标对象信息从全景视频流中获取与目标对象匹配的子目标对象信息;和/或根据目标对象的信息通过爬网技术、字符串插值算法获取与目标对象匹配的子目标对象信息。
进一步地,获取模块330根据目标对象信息从全景视频流中获取与目标对象匹配的子目标对象信息;和/或根据目标对象的信息通过爬网技术、字符串插值算法获取与目标对象匹配的子目标对象信息。
进一步地,获取模块330具体用于根据目标对象信息从全景视频流中获取与目标对象匹配的子目标对象信息;和/或根据目标对象的信息通过爬网技术获取与目标对象匹配的子目标对象信息;采用字符串插值算法对子目标对象信息进行字符串比对和语义分析处理建立目标对象与所述子目标对象的对应关系。
比如,获取模块330根据目标对象信息从全景视频流中获取与目标对象匹配的子目标对象信息;和/或根据目标对象的信息通过爬网技术获取与目标对象匹配的子目标对象信息;采用字符串插值算法对子目标对象信息进行字符串比对和语义分析处理建立目标对象与所述子目标对象的对应关系。
获取模块430将目标对象信息以及目标对象对应的子目标对象信息发送至地图生成模块440的生成单元442。
地图生成模块440用于接收视频流形成模块410发送的视频流、获取模块430发送的目标对象信息以及目标对象对应的子目标对象信息,根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图。
比如,地图生成模块440接收视频流形成模块410发送的视频流、获取模块430发送的目标对象信息以及目标对象对应的子目标对象信息,根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图。
进一步地,地图生成模块440包括校验单元441以及生成单元442。校验单元441用于接收获取模块430发送的目标对象信息以及目标对象对应的子目标对象信息,校验目标对象信息以及子目标对象信息。
进一步地,校验单元441具体用于确认目标对象信息以及子目标对象信息与从数据库获取的信息是否一致;若一致,则校验通过;若不一致,则通过字符串插值算法进行进一步校验。校验单元441在校验通过时,将校验后的目标对象信息、子目标对象信息发送至生成单元442。
生成单元442用于接收视频流形成模块410发送的视频流,以及接收校验单元441校验后的目标对象信息、子目标对象信息,根据目标对象信息、子目标对象信息以及所述全景视频流进行地图绘制处理,生成实景地图。
上述方案,实景地图制作装置通过获取摄像头实时采集的视频图像并形成全景视频流;根据全景视频流中的目标对象信息获取目标对象对应的子目标对象信息;并根据目标对象信息、子目标对象信息以及全景视频流进行地图绘制处理,生成实景地图有效;这种方法能够从实景地图中快速获取目标对象对应的子目标对象信息,以及能够根据子目标对象信息快速获取子目标对象的地理分布信息,便于用户进行分类查找/管理,提高信息获取效率。
实景地图制作装置对获取到的目标对象信息、子目标对象信息进行校验,能够提高信息获取精度、准确度,以避免用户获取到错误信息,给用户带来不必要的麻烦。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。