CN113010544A - 基于ar增强现实的收费稽核方法及系统 - Google Patents

基于ar增强现实的收费稽核方法及系统 Download PDF

Info

Publication number
CN113010544A
CN113010544A CN202110467945.4A CN202110467945A CN113010544A CN 113010544 A CN113010544 A CN 113010544A CN 202110467945 A CN202110467945 A CN 202110467945A CN 113010544 A CN113010544 A CN 113010544A
Authority
CN
China
Prior art keywords
information
data
basic
vehicle
acquiring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110467945.4A
Other languages
English (en)
Other versions
CN113010544B (zh
Inventor
李俭楠
王迅
吴斌
张涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhaotong Liangfengtai Information Technology Co ltd
Original Assignee
Zhaotong Liangfengtai Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhaotong Liangfengtai Information Technology Co ltd filed Critical Zhaotong Liangfengtai Information Technology Co ltd
Priority to CN202110467945.4A priority Critical patent/CN113010544B/zh
Publication of CN113010544A publication Critical patent/CN113010544A/zh
Application granted granted Critical
Publication of CN113010544B publication Critical patent/CN113010544B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供了一种基于AR增强现实的收费稽核方法及系统，涉及公路运营管理技术领域，应用于AR移动终端，该AR移动终端与处理服务器和后台服务器进行数据传输，包括以下：采用AR移动终端采集基本信息，并识别获得基础数据；将所述基础数据发送至处理服务器端进行处理，以获取与所述基础数据关联的稽核历史信息；根据所述基本信息从后台服务器端的数据库中获取车辆数据，并获取与所述车辆数据对应的车辆运行数据；将基于所述基础数据、所述车辆运行数据和所述稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示；用于解决现有收费稽核时无法做到快速查询证据链，需要通过人工查询或关联数据，工作效率较低，容易遗漏的问题。

Description

基于AR增强现实的收费稽核方法及系统
技术领域
本发明涉及公路运营管理技术领域，尤其涉及一种基于AR增强现实的收费稽核方法及系统。
背景技术
高速公路收费稽核过程中，通过计算机手段实现数据分析处理，实现高速公路收费稽核电子化，达到打击各种偷逃高速公路通信费违法、违规行为。随着经济发展，高速公路建设进入了一个快速增长的时期，新开通的高速公路越来越多，通车里程越来越长，在高速公路联网收费之后，在运行期间，高速公路运营部门在对偷逃通行费、管理部门员工工作期间操作规范，收费设施，票据，监控，证据链，历史记录等进行收费稽核，但是随着时间的延长，产生的数据和档案越来越多，查找，追溯，信息关联存在不便
在实际现实中，现有的运营模式下，我们对车辆或者高速公路运营方收费稽核的时候，对有争议的案件的时候，还需要人工调取项目的监控，票据，过往历史，收费流水等历史记录，追根溯源的时候和细节的时候，无法做到快速查询证据链，历史记录，管理方的工作人员行为规范(收费站，收费亭的工作秩序，收费人员的操作流程)，收费设施的完整性，票据档案管理，监控视频等，需要通过人工查询或关联数据，工作效率较低，且还可能存在遗漏的情况。
发明内容
为了克服上述技术缺陷，本发明的目的在于提供一种基于AR增强现实的收费稽核方法及系统，用于解决现有收费稽核时无法做到快速查询证据链，需要通过人工查询或关联数据，工作效率较低，容易遗漏的问题。
本发明公开了一种基于AR增强现实的收费稽核方法，应用于AR移动终端，该AR移动终端与处理服务器和后台服务器进行数据传输，包括以下：
在接收启动信号后采用AR移动终端采集基本信息，并对所述基本信息进行初步识别，获得基础数据；其中，所述基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
将所述基础数据发送至处理服务器端进行处理，以获取与所述基础数据关联的稽核历史信息；
根据所述基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与所述车辆数据对应的车辆运行数据；其中，所述车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
将所述基础数据和所述车辆运行数据关联，并基于关联后的数据和所述稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示。
优选地，所述对所述基本信息进行初步识别，获得基础数据，包括以下：
根据所述基本信息获取人脸图像，采用人脸识别算法对所述人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
根据所述基本信息获取证件图像和车牌图像，采用图像识别算法对所述证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，所述证件信息包括人员证件和车辆证件；
基于所述基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；
根据所述人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
优选地，在所述接收启动信号后采集车辆的基本信息前，包括以下：
采用预设智能捕捉算法采集手势信息，对所述手势信息解析，获得解析结果；
根据预设第一转换表获取与所述解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
优选地，在所述接收启动信号后采集车辆的基本信息前，还包括以下：
接收音频数据，采用语音识别算法对所述音频数据进行处理，获得识别结果；
根据预设第二转换表获取与所述识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
优选地，所述在显示设备上可视化展示，包括以下：
筛选出所述基础数据、所述轨迹数据及所述稽核历史信息中的位置数据；
预先关联地理信息系统对所述位置数据进行可视化处理，获得与所述位置数据对应的可视化路径数据，以在显示设备上进行可视化展示。
优选地，所述方法还包括以下：
提供一输入接口，用于向AR移动终端发出指令或传输数据；
和/或，将所述基础数据、所述车辆运行数据和所述稽核历史信息转换成音/视频数据，用于在显示设备上播放。
本发明还提供一种基于AR增强现实的收费稽核系统，包括AR移动终端、用于数据处理的处理服务器和关联数据库的后台服务器；
所述AR移动终端包括以下：
识别模块，用于接收启动信号后采集基本信息，并对所述基本信息进行初步识别，获得基础数据；其中，所述基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
获取模块，用于将所述基础数据发送至处理服务器端进行处理，以获取与所述基础数据关联的稽核历史信息；
传输模块，用于根据所述基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与所述车辆数据对应的车辆运行数据；其中，所述车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
显示模块，用于将所述基础数据和所述车辆运行数据关联，并基于关联后的数据和所述稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示；
所述AR移动终端、所述处理服务器和所述后台服务器之间进行数据传输，以获得述基础数据、所述车辆运行数据和所述稽核历史信息。
优选地，所述识别模块包括：
人脸识别子模块，用于根据所述基本信息获取人脸图像，采用人脸识别算法对所述人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
图像识别子模块，用于根据所述基本信息获取证件图像和车牌图像，采用图像识别算法对所述证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，所述证件信息包括人员证件和车辆证件；
设备识别子模块，用于基于所述基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；
处理子模块，用于根据所述人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
优选地，所述AR移动终端还包括：
动作处理模块，用于采用预设智能捕捉算法采集手势信息，对所述手势信息解析，获得解析结果；根据预设第一转换表获取与所述解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息；
和/或语音处理模块，用于接收音频数据，采用语音识别算法对所述音频数据进行处理，获得识别结果；根据预设第二转换表获取与所述识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
优选地，所述AR移动终端还包括：
输入模块，用于提供一输入接口，用于向AR移动终端发出指令或传输数据；
和/或，网络模块，用于使AR移动终端通过无线网路与处理服务器和后台服务器连接。
采用了上述技术方案后，与现有技术相比，具有以下有益效果：
采用AR移动终端基于动作处理模块和/或语音处理模块的指令采集数据并利用识别模块下的人脸识别子模块、图像识别子模块、设备识别子模块识别，在将采集的数据发送至处理服务器处理，同时通过后台服务器关联数据库以存储和获取收费稽核关联数据，采用显示模块关联地理信息系统进行可视化展示，通过图像识别，音频识别，GIS地理信息系统，大数据等技术的结合，打通数据关联的链路，在收费稽核时快速查询数据，解决现有收费稽核时无法做到快速查询证据链，需要通过人工查询或关联数据，工作效率较低，容易遗漏的问题，能够协助收费稽人员查快速查询和分析问题，快速处理问题，并能通过可视化的形态展示数据，更加直观易懂。
附图说明
图1为本发明所述基于AR增强现实的收费稽核方法及系统实施例一和实施例二的硬件设备图；
图2为本发明所述基于AR增强现实的收费稽核方法实施例一的流程图；
图3为本发明所述基于AR增强现实的收费稽核方法实施例一中用于体现动作处理模块工作流程图；
图4为本发明所述基于AR增强现实的收费稽核方法实施例一中用于体现语音处理模块工作流程图；
图5为本发明所述基于AR增强现实的收费稽核方法实施例一中用于体现所述对基本信息进行初步识别，获得基础数据的流程图；
图6为本发明所述基于AR增强现实的收费稽核方法实施例一中用于体现在显示设备上可视化展示的流程图；
图7为本发明所述基于AR增强现实的收费稽核系统实施例二的模块示意图。
附图标记：
5、收费稽核系统；51、AR移动终端；52、处理服务器；53、后台服务器；
511、识别模块；5111、人脸识别子模块；5112、图像识别子模块；
5113、设备识别子模块；5114处理子模块；512、获取模块513、传输模块；
514、显示模块；54、动作处理模块55、语音处理模块；56输入模块；
57、网络模块6、地理信息系统。
具体实施方式
以下结合附图与具体实施例进一步阐述本发明的优点。
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本公开可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本公开范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本发明的描述中，需要理解的是，术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
在本发明的描述中，除非另有规定和限定，需要说明的是，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是机械连接或电连接，也可以是两个元件内部的连通，可以是直接相连，也可以通过中间媒介间接相连，对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。
在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，“模块”与“部件”可以混合地使用。
实施例一：本实施例提供了一种基于AR增强现实的收费稽核方法，应用于AR移动终端51，该AR移动终51端与处理服务器52和后台服务器53进行数据传输(可无线传输)，具体的，AR移动终端51用于采集数据并在将采集的数据发送至处理服务器处理后展示，处理服务器52用于数据处理，后台服务器53用于关联数据库以存储和获取数据，通过设置AR移动终端关联处理服务器以及数据库，采集数据后通过图像识别，声音识别，GIS地理信息系统，大数据等多种技术的结合，在收费稽核时快速查询数据，参阅图1和图2，所述方法包括以下：
S100：在接收启动信号后采用AR移动终端采集基本信息，并对基本信息进行初步识别，获得基础数据；其中，基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
在上述步骤中，AR移动终端内可包括图像采集模块、音/视频采集模块等采集模块，用于采集实时信息，更具体的，包括但不限于采集驾驶人员的人脸图像和证件图像、采集车辆图像及其驾驶证件图像。在本实施方式中的AR移动终端也可采用手势和/或语音控制，因此在接收启动信号后采集车辆的基本信息前，参阅图3，包括以下：
S111-1：采用预设智能捕捉算法采集手势信息，对手势信息解析，获得解析结果；
具体的，上述智能捕捉算法可以采用BlazePalm检测器模型对手掌进行检测，该模型可用于移动实时检测，在对整个图像进行手掌检测后，采用手部标志模型通过回归对检测到的手部区域内的进关键点定位，即对坐标进行预测，而后通过算法推导获得手势信息。
S111-2：根据预设第一转换表获取与解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
在上述步骤中，根据手势信息中每个手指的状态，例如弯曲或竖直，是由关节的累积角度决定的，将一组手势信息映射到一组预定义的手势数据上，可以触发该手势信息对应的控制命令，比如开始采集驾驶人员证件信息等，该手势控制可通过在AR移动终端中设置手势识别模块实现，需要说明的是，手势信息包括接触手势，如点击，也包括不接触手势，如静态动作。
作为上述步骤S111-1～S111-2可选的，也可以采用语音控制采集，因此在接收启动信号后采集车辆的基本信息前，参阅图4，还包括以下：
S112-1：接收音频数据，采用语音识别算法对音频数据进行处理，获得识别结果；
在上述步骤中，所述语音识别算法作为举例的如DTW算法。
S112-2：根据预设第二转换表获取与识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
在上述步骤中，通过预设的第二转换表将识别结果转换成控制指令，以实现通语音控制AR移动终端采集数据，通过在AR移动终端中设置语音模块实现，以提供语音的录入和播放，及解码等能力，同时还可以增加网络模块，用于为AR移动终端提供基础网络通信的功能，提供4G，WIFI，蓝牙无线通信等功能，与语音模块连接以实现远程语音控制的功能。
具体的，在上述AR移动终端采集信息完成后会对采集的信息进行处理，如图像识别、语音识别等，具体的所述对基本信息进行初步识别，获得基础数据，参阅图5，包括以下：
S121：根据基本信息获取人脸图像，采用人脸识别算法对人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
在上述步骤中，上述人脸识别算法可采用预训练好的神经网络，预设人员数据库可以是预先自主建立(如人工录入并自主更新)，也可以是从外部的车辆管理系统等获取。
S122：根据基本信息获取证件图像和车牌图像，采用图像识别算法对证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，证件信息包括人员证件和车辆证件；
在上述步骤中，上述通过图像识别算法对汽车车牌识别，在识别完成后还可把识别的车牌信息反馈到后台服务器，以搜索关联出与汽车车牌的相关信息，对证件信息可以采用OCR识别算法，获取证件上的字符，而后也从后台服务器获取与该证件信息关联的其他信息。
S123：基于基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；
在上述步骤中，采用AR增强现实独有的SLAM技术(步定位与地图构建算法)和图像识别技术，获得收费设备信息以确保设备使用处于正常状态下，同便于维修设备提供远程技术指导。
S124：根据人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
根据上述步骤S121～S123，在AR移动终端中分别采用人脸识别子模块、图像识别子模块以及设备识别子模块分别获得人员信息、证件信息、车牌信息和收费设备信息，集合后获得基础信息。
S200：将基础数据发送至处理服务器端进行处理，以获取与基础数据关联的稽核历史信息；
在本实施方式中，处理服务器用于数据处理，以及智能数据分析，根据基础数据大数据分析技术获取关联的稽核历史信息，即历史稽核记录，以实现信息的快速查询。通过与公安网或交通网连接，查询驾驶人员的详细信息，还能查询到司机的稽核的证据链。
S300：根据基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与车辆数据对应的车辆运行数据；其中，车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
在上述步骤中，作为进一步解释的，例如，AR移动智能终端识别驾驶人员，驾驶证件，身份证，汽车车牌等与数据库比对，获取到人员的身份信息，并通过人员信息与汽车关联，获取到收费记录，车辆行驶过程中的监控视频，车辆轨迹等内容，基于前述获取的车辆行驶监控视频，收费员工工作内容(视频，操作记录)，收费记录等信息，计算车辆轨迹等，即为车辆运行数据。
同时收费稽核还可能需要在公路巡视，AR移动终端提供无线，4G功能，可以通过无线网路模块与处理服务器和后台服务器连接，交换数据，在高速公路上收费稽查的时候，AR移动终端能实时捕获路过的车辆，识别驾驶车辆车牌，进而访问服务器通过车牌找到与车相关的详细信息，包括ETC收费信息，路过的视频，车辆估计。在拦车检查的时候，能识别司机驾驶证件，身份证件，寻找到司机的过往驾驶路径数据链。
S400：将基础数据和车辆运行数据关联，并基于关联后的数据和稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示。
通过上述步骤S100～S300实现数据采集和处理，由于关联后的数据和稽核历史信息中可能包含位置数据，为了实现上述在显示设备上可视化展示，参阅图6，包括以下：
S410：筛选出基础数据、轨迹数据及稽核历史信息中的位置数据；
具体的，上述步骤中，可以预设筛选规则(如数据类型)筛选出位置数据，以解决位置数据可视化展示的问题。
S420：预先关联地理信息系统对位置数据进行可视化处理，获得与位置数据对应的可视化路径数据，以在显示设备上进行可视化展示。
在上述步骤中，将位置数据(即地理相关信息)通过地理信息系统下的GIS地图呈现到显示设备(如AR眼镜端)。AR移动智能终端把获取到的信息通过显示模块，把一些信息通过与GIS地图结合，展示数据的在地理上的路径。
为了进一步增加收费稽核时数据查询的范围，上述方法还可包括以下：
提供一输入接口，用于向AR移动终端发出指令或传输数据；
具体的，提供输入接口，可连接与AR移动终端相连接的输入设备，比如输入版，触摸板，启到控制AR移动终端的作用。
和/或，将基础数据、车辆运行数据和稽核历史信息转换成音/视频数据，用于在显示设备上播放。
具体的，在语音模块增加语音的录入和播放，及解码等能力，将把现实世界的声音转录为数字数据和让数字转换为模拟信号，用喇叭或其他传递到人耳的设备把声音广播出去。也可增加视频模块将摄像头的采集的视频数据转换为流的信息，并实时传递到处理服务器或存储到AR移动终端中。
除了上述各个处理方式外，AR移动终端还可在设置设备运维模块，即识别出设备编号信息，结合地位位置信息，访问后台服务器查询出设备的状态信息(是否处于维护状态，工作正常与否，维护工作历史记录，维护人员信息)AR移动终端还可提供稽核收费员的工作日志，识别到收费工作人员的工牌或者人脸，通过后台服务器获取收费人员工作过程的监控视频，操作记录，还有一些收费结算等信息，票据图像存底，并能获取到收费人员现阶段产生的问题日志，便于即时跟踪处理。
在本实施方式中，通过上述设置AR移动终端关联处理服务器以及数据库，采集数据后通过图像识别子模块、人脸识别子模块、设备识别子模块、动作处理模块、语音处理模块处理，并传输至处理服务器采用大数据等技术处理，最后结合GIS地理信息系统在显示模块上进行显示，实现在收费稽核时快速自动查询数据，解决现有收费稽核时无法做到快速查询证据链，需要通过人工查询或关联数据，工作效率较低，容易遗漏的问题。
实施例二：本发明还提供一种基于AR增强现实的收费稽核系统5，参阅图1,和图7，包括AR移动终端51、用于数据处理的处理服务器52和关联数据库的后台服务器53；
AR移动终端51包括以下：
识别模块511，用于接收启动信号后采集基本信息，并对基本信息进行初步识别，获得基础数据；其中，基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
具体的，上述识别模块511包括：
人脸识别子模块5111，用于根据基本信息获取人脸图像，采用人脸识别算法对人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
图像识别子模块5112，用于根据基本信息获取证件图像和车牌图像，采用图像识别算法对证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，证件信息包括人员证件和车辆证件；
设备识别子模块5113，用于基于基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；
处理子模块5114，用于根据人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
获取模块512，用于将基础数据发送至处理服务器端进行处理，以获取与基础数据关联的稽核历史信息；
传输模块513，用于根据基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与车辆数据对应的车辆运行数据；其中，车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
显示模块514，用于将基础数据和车辆运行数据关联，并基于关联后的数据和稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示；
上述显示模块514还用于将关联后的数据和稽核历史信息展示在显示设备上，以进行可视化数据展示，且预先关联地理信息系统6对关联后的数据和稽核历史信息中的位置数据进行可视化处理。
AR移动终端51、处理服务器52和后台服务器53之间进行数据传输，以获得述基础数据、车辆运行数据和稽核历史信息。
动作处理模块54，用于采用预设智能捕捉算法采集手势信息，对手势信息解析，获得解析结果；根据预设第一转换表获取与解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息；
和/或语音处理模块55，用于接收音频数据，采用语音识别算法对音频数据进行处理，获得识别结果；根据预设第二转换表获取与识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
作为举例而非限定的，将信息(驾驶人员，驾驶证件，身份证，档案资料，汽车车牌，收费设施设备)通过上述人脸识别子模块5111、图像识别子模块5112、设备识别子模块5113、处理子模块5114识别后传到处理服务器52，然后获取收费稽核相关信息，然后把与地理相关信息通过GIS地图呈现到显示模块514(如眼镜端)。还可通过后台服务器53获取车辆行驶监控视频，收费员工工作内容(视频，操作记录)，收费记录等信息，车辆轨迹通过AI和大数据在处理服务器52分析处理后得到，AR移动终端51识别驾驶人员，驾驶证件，身份证，汽车车牌等与数据库比对，获取到人员的身份信息，并通过人员信息与汽车关联，获取到收费记录，车辆行驶过程中的监控视频，车辆轨迹等内容，通过与公安网或交通网连接，查询驾驶人员的详细信息，查询到驾驶人员的稽核的证据链。
在上述过程中，可通过动作处理模块54和/或语音处理模块55发送指令，还可设置供输入模块56，提供一输入接口，用于向AR移动终端发出指令或传输数据，在巡视稽核的过程中，把有效信息记录下来，然后上传到服务器，保存起来，还可提供设备运维模块，以识别出设备编号信息，结合地位位置信息，访问服务器查询出设备的状态信息(是否处于维护状态，工作正常与否，维护工作历史记录，维护人员信息)。除上述外，还可设置在AR移动终端51中网络模块57，用于AR移动终端51提供无线，4G功能，可以通过无线网路与处理服务器52和后台服务器53连接，交换数据，在高速公路上收费稽查的时候，AR移动智能终端能实时捕获路过的车辆，识别驾驶车辆车牌，进而访问服务器通过车牌找到与车相关的详细信息，包括ETC收费信息，路过的视频，车辆估计。通过图像识别，音频识别，GIS地理信息系统6，大数据等多种技术的结合，将AR移动终端51、用于数据处理的处理服务器52和关联数据库的后台服务器53之间数据关联的链路打通，实现数据的自动关联及可视化展示，可快速查询数据，无需人工关联数据，以解决现有收费稽核时无法做到快速查询证据链，需要通过人工查询或关联数据，工作效率较低，容易遗漏的问题。
为了进一步完善AR移动终端51的功能，还可增加语音转换模块，以提供语音的录入和播放，及解码(解析各类音频)等能力，起到把现实世界的声音转录为数字数据和让数字转换为模拟信号，用喇叭或其他传递到人耳的设备把声音广播出去的作用，和/或视频处理模块，用于提供把摄像头的采集的视频数据转换为流的信息，并实时传递到后台服务器或存储到AR移动终端51中，可抓取流链接，然后播放流链接，其他常规模块也可在不影响AR移动终端51使用的情况下依据场景类型自主设置，在此不作赘述。
AR智能终端可以以具有增强现实技术的各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置、AR眼镜等等的智能终端。下面，假设终端是智能终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端，如固定与某一路段下用于采集该公路端段的数据以便于增加收费稽核的证据链完整性。
应当注意的是，本发明的实施例有较佳的实施性，且并非对本发明作任何形式的限制，任何熟悉该领域的技术人员可能利用上述揭示的技术内容变更或修饰为等同的有效实施例，但凡未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何修改或等同变化及修饰，均仍属于本发明技术方案的范围内。

Claims (10)

1.一种基于AR增强现实的收费稽核方法，应用于AR移动终端，该AR移动终端与处理服务器和后台服务器进行数据传输，其特征在于，包括以下：
在接收启动信号后采用AR移动终端采集基本信息，并对所述基本信息进行初步识别，获得基础数据；其中，所述基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
将所述基础数据发送至处理服务器端进行处理，以获取与所述基础数据关联的稽核历史信息；
根据所述基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与所述车辆数据对应的车辆运行数据；其中，所述车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
将所述基础数据和所述车辆运行数据关联，并基于关联后的数据和所述稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示。
2.根据权利要求1所述的收费稽核方法，其特征在于，所述对所述基本信息进行初步识别，获得基础数据，包括以下：
根据所述基本信息获取人脸图像，采用人脸识别算法对所述人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
根据所述基本信息获取证件图像和车牌图像，采用图像识别算法对所述证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，所述证件信息包括人员证件和车辆证件；
基于所述基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；根据所述人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
3.根据权利要求1所述的收费稽核方法，其特征在于，在所述接收启动信号后采集车辆的基本信息前，包括以下：
采用预设智能捕捉算法采集手势信息，对所述手势信息解析，获得解析结果；
根据预设第一转换表获取与所述解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
4.根据权利要求1所述的收费稽核方法，其特征在于，在所述接收启动信号后采集车辆的基本信息前，还包括以下：
接收音频数据，采用语音识别算法对所述音频数据进行处理，获得识别结果；
根据预设第二转换表获取与所述识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
5.根据权利要求1所述的收费稽核方法，其特征在于，所述在显示设备上可视化展示，包括以下：
筛选出所述基础数据、所述轨迹数据及所述稽核历史信息中的位置数据；
预先关联地理信息系统对所述位置数据进行可视化处理，获得与所述位置数据对应的可视化路径数据，以在显示设备上进行可视化展示。
6.根据权利要求1所述的收费稽核方法，其特征在于，所述方法还包括以下：
提供一输入接口，用于向AR移动终端发出指令或传输数据；
和/或，将所述基础数据、所述车辆运行数据和所述稽核历史信息转换成音/视频数据，用于在显示设备上播放。
7.一种基于AR增强现实的收费稽核系统，其特征在于，包括AR移动终端、用于数据处理的处理服务器和关联数据库的后台服务器；
所述AR移动终端包括以下：
识别模块，用于接收启动信号后采集基本信息，并对所述基本信息进行初步识别，获得基础数据；其中，所述基础信息包括人员信息、证件信息、车牌信息、收费设备信息；
获取模块，用于将所述基础数据发送至处理服务器端进行处理，以获取与所述基础数据关联的稽核历史信息；
传输模块，用于根据所述基本信息从后台服务器端的数据库中获取车辆数据，并发送处理服务器端处理，以获取与所述车辆数据对应的车辆运行数据；其中，所述车辆运行数据包括车辆监控数据、车辆轨迹数据、收费工作数据、收费记录数据；
显示模块，用于将所述基础数据和所述车辆运行数据关联，并基于关联后的数据和所述稽核历史信息进行收费稽查后关联地理信息系统在显示设备上可视化展示；
所述AR移动终端、所述处理服务器和所述后台服务器之间进行数据传输，以获得述基础数据、所述车辆运行数据和所述稽核历史信息。
8.根据权利要求7所述的收费稽核系统，其特征在于，所述识别模块包括：
人脸识别子模块，用于根据所述基本信息获取人脸图像，采用人脸识别算法对所述人脸图像进行识别，并根据识别结果在预设人员数据库中匹配，以获得人员信息；
图像识别子模块，用于根据所述基本信息获取证件图像和车牌图像，采用图像识别算法对所述证件图像和车牌图像进行识别，获得证件信息和车牌信息；其中，所述证件信息包括人员证件和车辆证件；
设备识别子模块，用于基于所述基本信息采用同步定位与地图构建算法和图像识别算法获得收费设备信息；
处理子模块，用于根据所述人员信息、证件信息、车牌信息和收费设备信息获得基础信息。
9.根据权利要求7所述的收费稽核系统，其特征在于，所述AR移动终端还包括：
动作处理模块，用于采用预设智能捕捉算法采集手势信息，对所述手势信息解析，获得解析结果；根据预设第一转换表获取与所述解析结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息；
和/或语音处理模块，用于接收音频数据，采用语音识别算法对所述音频数据进行处理，获得识别结果；根据预设第二转换表获取与所述识别结果匹配的控制指令，以通过控制指令发出启动信号或采集基本信息。
10.根据权利要求7所述的收费稽核系统，其特征在于，所述AR移动终端还包括：
输入模块，用于提供一输入接口，用于向AR移动终端发出指令或传输数据；
和/或，网络模块，用于使AR移动终端通过无线网路与处理服务器和后台服务器连接。
CN202110467945.4A 2021-04-28 2021-04-28 基于ar增强现实的收费稽核方法及系统 Active CN113010544B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110467945.4A CN113010544B (zh) 2021-04-28 2021-04-28 基于ar增强现实的收费稽核方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110467945.4A CN113010544B (zh) 2021-04-28 2021-04-28 基于ar增强现实的收费稽核方法及系统

Publications (2)

Publication Number Publication Date
CN113010544A true CN113010544A (zh) 2021-06-22
CN113010544B CN113010544B (zh) 2023-04-14

Family

ID=76380865

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110467945.4A Active CN113010544B (zh) 2021-04-28 2021-04-28 基于ar增强现实的收费稽核方法及系统

Country Status (1)

Country Link
CN (1) CN113010544B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117314124A (zh) * 2023-11-28 2023-12-29 四川成渝高速公路股份有限公司 一种高速公路收费业务智能管理系统及方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103399331A (zh) * 2013-07-22 2013-11-20 北京科技大学 一种物流车辆实时定位方法和装置
US20170091723A1 (en) * 2014-05-16 2017-03-30 Thales Device for controlling data carried by an item of on-board equipment, associated fee collection system and method
CN106845646A (zh) * 2016-12-02 2017-06-13 国网山东省电力公司电力科学研究院 一种基于gis平台的电力营销智能稽查系统及方法
CN107169139A (zh) * 2017-06-13 2017-09-15 深圳增强现实技术有限公司 一种基于ar增强现实的文档管理系统、ar移动智能终端
CN111062847A (zh) * 2019-10-22 2020-04-24 广州阳光耐特电子有限公司 一种车辆综合稽查布控系统
US20200184724A1 (en) * 2018-12-06 2020-06-11 Toyota Motor North America, Inc. Augmented reality systems and methods for vehicle inspection
CN112215234A (zh) * 2020-10-16 2021-01-12 神思电子技术股份有限公司 一种道路卡口车辆人员信息核查方法
CN112711619A (zh) * 2020-12-29 2021-04-27 交信北斗(海南)科技有限公司 基于北斗定位的公路逃费稽查平台

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103399331A (zh) * 2013-07-22 2013-11-20 北京科技大学 一种物流车辆实时定位方法和装置
US20170091723A1 (en) * 2014-05-16 2017-03-30 Thales Device for controlling data carried by an item of on-board equipment, associated fee collection system and method
CN106845646A (zh) * 2016-12-02 2017-06-13 国网山东省电力公司电力科学研究院 一种基于gis平台的电力营销智能稽查系统及方法
CN107169139A (zh) * 2017-06-13 2017-09-15 深圳增强现实技术有限公司 一种基于ar增强现实的文档管理系统、ar移动智能终端
US20200184724A1 (en) * 2018-12-06 2020-06-11 Toyota Motor North America, Inc. Augmented reality systems and methods for vehicle inspection
CN111062847A (zh) * 2019-10-22 2020-04-24 广州阳光耐特电子有限公司 一种车辆综合稽查布控系统
CN112215234A (zh) * 2020-10-16 2021-01-12 神思电子技术股份有限公司 一种道路卡口车辆人员信息核查方法
CN112711619A (zh) * 2020-12-29 2021-04-27 交信北斗(海南)科技有限公司 基于北斗定位的公路逃费稽查平台

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ZHANG WANG-FENG: "Internal control, audit risk and audit pricing: Empirical evidences from China"s listed companies", 《2013 INTERNATIONAL CONFERENCE ON MANAGEMENT SCIENCE AND ENGINEERING 20TH ANNUAL CONFERENCE PROCEEDINGS》 *
惠学云 等: "基于大数据分析的易混淆车辅助识别系统设计与实现", 《中国交通信息化》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117314124A (zh) * 2023-11-28 2023-12-29 四川成渝高速公路股份有限公司 一种高速公路收费业务智能管理系统及方法
CN117314124B (zh) * 2023-11-28 2024-02-27 四川成渝高速公路股份有限公司 一种高速公路收费业务智能管理系统及方法

Also Published As

Publication number Publication date
CN113010544B (zh) 2023-04-14

Similar Documents

Publication Publication Date Title
US10229589B1 (en) Investigation assist device, investigation assist method and investigation assist system
CN102622798B (zh) 一种客流统计分析系统
KR100533033B1 (ko) 디지털 영상 처리 기술을 이용한 위치 추적 시스템 및 방법
CN108417047A (zh) 一种车辆定位追踪方法及其系统
CN111862606A (zh) 一种基于多源数据的非法营运车辆识别方法
CN105913367A (zh) 基于人脸识别和位置定位的公交客流量检测系统与方法
CN104123834A (zh) 出租车叫车管理结算系统与方法
CN112150810A (zh) 一种车辆行为管理方法、系统、设备及介质
CN105448105A (zh) 一种基于巡逻警车的监控系统
KR20150000039A (ko) 차량용 블랙박스 정보 공유 시스템
CN111696364A (zh) 一种路侧停车管理方法
CN113010544B (zh) 基于ar增强现实的收费稽核方法及系统
CN109685383A (zh) 一种基于互联网的电子证件应用管理系统
CN111404874A (zh) 出租车嫌疑车辆甄别分析体系架构
CN101714188A (zh) 一种单警及最小作战单元信息化终端装置
JP2007206785A (ja) 車両追跡システムとこれに使用する画像処理装置、中央装置及び車載装置、並びに、車両追跡方法
CN114092868B (zh) 一种人车溯源监控管理系统及方法
CN108254542A (zh) 一种带通讯模块的云存储云识别智能酒精检测系统
CN114999170A (zh) 一种基于高速公路车辆路径数据智能分析可视化系统
CN102789719A (zh) 道路驾驶技能考试过程驾驶人视线识别仪及实现方法
CN109671181A (zh) 一种行车记录仪、车险理赔方法及车险理赔服务系统
CN108551650A (zh) 一种公交客流采集装置及客流统计方法
KR101686851B1 (ko) Cctv 카메라를 이용한 통합 관제 시스템
CN111898434B (zh) 一种视频侦测分析系统
CN116405638A (zh) 基于多元传感器的智能巡检装置、巡检系统及巡检方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant