CN110544063A - 一种基于ar的物流平台驾驶员现场支援系统及其方法 - Google Patents

Abstract

本发明公开一种基于AR的物流平台驾驶员现场支援系统，包括物流处理平台和若干驾驶平台，驾驶平台与物流处理平台连接，且各驾驶平台间建立通信连接；物流处理平台包括数据渲染模块、数据建模模块、物流管理处理模块和方案解决数据库；驾驶平台包括AR采集终端和支援类型上传模块；本发明的驾驶员通过上传支援类型以及AR现场环境，筛选方案解决数据库中该支援类型对应的解决方案，同时，可根据其他驾驶员上传的支援类型进行对比筛选，将发生过同种支援类型的驾驶员间建立通信连接，实现驾驶员对驾驶员的解决方案的指导，便于实现AR现场指导解决问题，具有问题解决的针对性强以及解决问题的效率高的特点，并提高了驾驶员间的相互协作能力。

Description

一种基于AR的物流平台驾驶员现场支援系统及其方法

技术领域

本发明属于物流平台技术领域，涉及到一种基于AR的物流平台驾驶员现场支援系统及其方法。

背景技术

AR,增强现实(Augmented Reality)技术是一种将虚拟信息与真实世界巧妙融合的技术，广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段，将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后，应用到真实世界中，两种信息互为补充，从而实现对真实世界的“增强”。

物流运输的驾驶员在驾驶车辆的过程中，若车辆发生故障或其他问题，驾驶员仅通过自身的能力无法解决问题，且当故障发生地距离支援地相差较远时，无法对问题进行解决，目前，可通过电话或网络进行支援，但是存在沟通延时、沟通信息失真以及沟通成本高的问题，不能及时解决现场的问题，存在问题解决的效率慢以及针对问题性差缺点，为了解决以上问题，现设计一种基于AR的物流平台驾驶员现场支援系统及其方法。

发明内容

本发明的目的在于提供的一种AR模式的物流平台驾驶员现场支援系统，解决了现有技术中存在的问题解决的效率低、针对性差以及不及时的问题。

本发明的目的可以通过以下技术方案实现：

一种基于AR的物流平台驾驶员现场支援系统，包括物流处理平台和若干驾驶平台，驾驶平台与物流处理平台连接，且各驾驶平台间建立通信连接；

所述物流处理平台包括数据渲染模块、数据建模模块、物流管理处理模块和方案解决数据库；

所述驾驶平台包括AR采集终端和支援类型上传模块；

所述AR采集终端为具有AR功能的智能手机，用于实时采集驾驶员所在的现场环境图像，将采集的现场环境图像分别发送至数据渲染模块和方案解决数据库；

所述支援类型上传模块用于输入驾驶员所需的支援类型，并将输入的支援类型分别发送至物流管理处理模块和方案解决数据库；

所述数据渲染模块用于接收AR采集终端发送的驾驶员所在的现场环境图像，对接收的现场环境图像进行图像划分，划分成若干子图像，对划分的各子图像按照从左到右以及从上到下的顺序进行编号，分别提取各子图像中的特征，并将提取的各子图像的特征建立子图像特征构建数据集合，并对子图像特征构建数据集合中的特征进行渲染处理，并将经渲染处理后的环境特征发送至数据建模模块；

所述数据建模模块用于接收数据渲染模块发送的经渲染处理后的各子图像对应的子图像特征构建数据集合，并按照各子图像对应的编号顺序依次对子图像特征构建数据集合中的特征进行建模处理，获取三维的虚拟环境，并将构建的虚拟环境发送至物流管理处理模块，同时，对不同支援类型下的AR现场环境图像进行虚拟环境的构建，并将构建的不同支援类型下的虚拟环境发送至方案解决数据库；

所述方案解决数据库用于存储不同支援类型下的AR现场环境图像，且存储AR采集终端发送的驾驶员现场采集的环境图像，并存储不同支援类型下的解决方案，同时存储不同驾驶平台发送的驾驶员上传的所需支援类型，并统计各驾驶平台的驾驶员所有上传过的支援类型；

所述物流管理处理模块用于接收支援类型上传模块发送的驾驶员所需的支援类型以及数据建模模块发送的该驾驶员周围的虚拟环境，根据支援类型以及虚拟环境依次筛选方案解决数据库中与该支援类型相对应的支援类型，并提取该支援类型对应的解决方案，并将提取的解决方案反馈至交互模块，同时，筛选出方案解决数据库中存储的各驾驶平台的驾驶员上传的支援类型，并将提出支援类型的驾驶员的支援类型与其他驾驶员上传的支援类型进行对比，提取相匹配的驾驶员，并将该驾驶员的AR采集终端发送至提出支援类型的驾驶员的交互模块上。

进一步地，所述驾驶平台还包括交互模块，所述交互模块用于接收物流管理处理模块反馈的该支援类型对应的解决方案以及与发生过该支援类型相同的其他驾驶员的AR采集终端，接收其他驾驶员的AR采集终端建立驾驶员间的通信交互。

一种基于AR的物流平台驾驶员现场支援方法，包括以下步骤：

S1、发出支援类型，并采集驾驶员所在的现场环境图像；

S2、对采集的现场环境图像进行划分，划分成若干子图像，提取子图像中的特征，建立子图像特征构建数据集合；

S3、对子图像特征构建数据集合中的特征进行渲染处理；

S4、对经渲染处理的特征进行建模；

S5、建立不同支援类型下的虚拟环境以及设置不同支援类型下的解决方案；

S6、将步骤S1中的支援类型与步骤S5中的支援类型进行筛选对比，提取与之匹配的支援类型，并提取该支援类型对应的解决方案，执行步骤S8；

S7、提取各驾驶员所有上传过的支援类型，并将步骤S1中的支援类型与各驾驶员所有上传过的支援类型进行对比，若对比成功，则筛选与步骤S1中的支援类型相同的驾驶员，并将该驾驶员的AR采集终端发送至发出支援类型的驾驶员，实现驾驶员间的相互联系；

S8、将支援类型对应的解决方案发送至驾驶员。

本发明的有益效果：

本发明提供的一种AR模式的物流平台驾驶员现场支援系统，驾驶员通过上传支援类型以及AR现场环境的图像，为驾驶员筛选该支援类型对应的解决方案，指导驾驶员根据解决方案对支援类型的问题进行解决，同时，可根据其他驾驶员上传的支援类型进行对比筛选，将发生过同种支援类型的驾驶员间建立通信连接，实现驾驶员对驾驶员的解决方案的指导，便于实现AR现场指导解决问题，具有问题解决的针对性强、解决问题的效率高以及及时性强的特点，并提高了驾驶员间的相互协作能力。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明中一种基于AR模式的物流平台驾驶员现场支援系统的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

请参阅图1所示，一种基于AR的物流平台驾驶员现场支援系统，包括物流处理平台和若干驾驶平台，驾驶平台与物流处理平台连接，且各驾驶平台间建立通信连接；

所述物流处理平台包括数据渲染模块、数据建模模块、物流管理处理模块和方案解决数据库；

驾驶平台包括AR采集终端、支援类型上传模块和交互模块；

AR采集终端为具有AR功能的智能手机，用于实时采集驾驶员所在的现场环境图像，将采集的现场环境图像分别发送至数据渲染模块和方案解决数据库，其中，AR采集终端可为物流平台的驾驶员的AR手机，也可为非物流平台驾驶员的AR手机。

支援类型上传模块用于输入驾驶员所需的支援类型，并将输入的支援类型分别发送至物流管理处理模块和方案解决数据库；

交互模块用于接收物流管理处理模块反馈的该支援类型对应的解决方案以及与发生过该支援类型相同的其他驾驶员的AR采集终端，接收其他驾驶员的AR采集终端建立驾驶员间的通信交互，可进行针对支援类型的技术指导，帮助提出支援类型的驾驶员解决问题。

数据渲染模块用于接收AR采集终端发送的驾驶员所在的现场环境图像，对接收的现场环境图像进行图像划分，划分成若干子图像，对划分的各子图像按照从左到右以及从上到下的顺序进行编号，分别提取各子图像中的特征，并将提取的各子图像的特征建立子图像特征构建数据集合，并对子图像特征构建数据集合中的特征进行渲染处理，以提高现场环境的真实性，并将经渲染处理后的环境特征发送至数据建模模块；

所述数据建模模块用于接收数据渲染模块发送的经渲染处理后的各子图像对应的子图像特征构建数据集合，并按照各子图像对应的编号顺序依次对子图像特征构建数据集合中的特征进行建模处理，获取三维的虚拟环境，并将构建的虚拟环境发送至物流管理处理模块，同时，对不同支援类型下的AR现场环境图像进行虚拟环境的构建，并将构建的不同支援类型下的虚拟环境发送至方案解决数据库。

方案解决数据库用于存储不同支援类型下的AR现场环境图像，且存储AR采集终端发送的驾驶员现场采集的环境图像，并存储不同支援类型下的解决方案，同时存储不同驾驶平台发送的驾驶员上传的所需支援类型，并统计各驾驶平台的驾驶员所有上传过的支援类型；

物流管理处理模块用于接收支援类型上传模块发送的驾驶员所需的支援类型以及数据建模模块发送的该驾驶员周围的虚拟环境，根据支援类型以及虚拟环境依次筛选方案解决数据库中与该支援类型相对应的支援类型，并提取该支援类型对应的解决方案，并将提取的解决方案反馈至交互模块，同时，筛选出方案解决数据库中存储的各驾驶平台的驾驶员上传的支援类型，并将提出支援类型的驾驶员的支援类型与其他驾驶员上传的支援类型进行对比，提取相匹配的驾驶员，并将该驾驶员的AR采集终端发送至提出支援类型的驾驶员的交互模块上。

本系统通过上传支援类型以及AR环境图像，可少选与该支援类型对应的解决方案，并同时可筛选发生过此支援类型的驾驶员，采用双方案对提出支援类型的驾驶员提供可靠的解决方案。

一种基于AR的物流平台驾驶员现场支援方法，包括以下步骤：

S1、发出支援类型，并采集驾驶员所在的现场环境图像；

S2、对采集的现场环境图像进行划分，划分成若干子图像，提取子图像中的特征，建立子图像特征构建数据集合；

S3、对子图像特征构建数据集合中的特征进行渲染处理；

S4、对经渲染处理的特征进行建模；

S5、建立不同支援类型下的虚拟环境以及设置不同支援类型下的解决方案；

S6、将步骤S1中的支援类型与步骤S5中的支援类型进行筛选对比，提取与之匹配的支援类型，并提取该支援类型对应的解决方案，执行步骤S8；

S7、提取各驾驶员所有上传过的支援类型，并将步骤S1中的支援类型与各驾驶员所有上传过的支援类型进行对比，若对比成功，则筛选与步骤S1中的支援类型相同的驾驶员，并将该驾驶员的AR采集终端发送至发出支援类型的驾驶员，实现驾驶员间的相互联系；

S8、将支援类型对应的解决方案发送至驾驶员。

以上内容仅仅是对本发明的构思所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的构思或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。

Claims (3)

1.一种基于AR的物流平台驾驶员现场支援系统，其特征在于：包括物流处理平台和若干驾驶平台，驾驶平台与物流处理平台连接，且各驾驶平台间建立通信连接；

所述物流处理平台包括数据渲染模块、数据建模模块、物流管理处理模块和方案解决数据库；

所述驾驶平台包括AR采集终端和支援类型上传模块；

所述AR采集终端为具有AR功能的智能手机，用于实时采集驾驶员所在的现场环境图像，将采集的现场环境图像分别发送至数据渲染模块和方案解决数据库；

所述支援类型上传模块用于输入驾驶员所需的支援类型，并将输入的支援类型分别发送至物流管理处理模块和方案解决数据库；

所述数据渲染模块用于接收AR采集终端发送的驾驶员所在的现场环境图像，对接收的现场环境图像进行图像划分，划分成若干子图像，对划分的各子图像按照从左到右以及从上到下的顺序进行编号，分别提取各子图像中的特征，并将提取的各子图像的特征建立子图像特征构建数据集合，并对子图像特征构建数据集合中的特征进行渲染处理，并将经渲染处理后的环境特征发送至数据建模模块；

所述数据建模模块用于接收数据渲染模块发送的经渲染处理后的各子图像对应的子图像特征构建数据集合，并按照各子图像对应的编号顺序依次对子图像特征构建数据集合中的特征进行建模处理，获取三维的虚拟环境，并将构建的虚拟环境发送至物流管理处理模块，同时，对不同支援类型下的AR现场环境图像进行虚拟环境的构建，并将构建的不同支援类型下的虚拟环境发送至方案解决数据库；

所述方案解决数据库用于存储不同支援类型下的AR现场环境图像，且存储AR采集终端发送的驾驶员现场采集的环境图像，并存储不同支援类型下的解决方案，同时存储不同驾驶平台发送的驾驶员上传的所需支援类型，并统计各驾驶平台的驾驶员所有上传过的支援类型；

所述物流管理处理模块用于接收支援类型上传模块发送的驾驶员所需的支援类型以及数据建模模块发送的该驾驶员周围的虚拟环境，根据支援类型以及虚拟环境依次筛选方案解决数据库中与该支援类型相对应的支援类型，并提取该支援类型对应的解决方案，并将提取的解决方案反馈至交互模块，同时，筛选出方案解决数据库中存储的各驾驶平台的驾驶员上传的支援类型，并将提出支援类型的驾驶员的支援类型与其他驾驶员上传的支援类型进行对比，提取相匹配的驾驶员，并将该驾驶员的AR采集终端发送至提出支援类型的驾驶员的交互模块上。

2.根据权利要求1所述的一种基于AR的物流平台驾驶员现场支援系统，其特征在于：所述驾驶平台还包括交互模块，所述交互模块用于接收物流管理处理模块反馈的该支援类型对应的解决方案以及与发生过该支援类型相同的其他驾驶员的AR采集终端，接收其他驾驶员的AR采集终端建立驾驶员间的通信交互。

3.一种基于AR的物流平台驾驶员现场支援方法，其特征在于：包括以下步骤：

S1、发出支援类型，并采集驾驶员所在的现场环境图像；

S2、对采集的现场环境图像进行划分，划分成若干子图像，提取子图像中的特征，建立子图像特征构建数据集合；

S3、对子图像特征构建数据集合中的特征进行渲染处理；

S4、对经渲染处理的特征进行建模；

S5、建立不同支援类型下的虚拟环境以及设置不同支援类型下的解决方案；

S6、将步骤S1中的支援类型与步骤S5中的支援类型进行筛选对比，提取与之匹配的支援类型，并提取该支援类型对应的解决方案，执行步骤S8；

S7、提取各驾驶员所有上传过的支援类型，并将步骤S1中的支援类型与各驾驶员所有上传过的支援类型进行对比，若对比成功，则筛选与步骤S1中的支援类型相同的驾驶员，并将该驾驶员的AR采集终端发送至发出支援类型的驾驶员，实现驾驶员间的相互联系；

S8、将支援类型对应的解决方案发送至驾驶员。