CN109379245A - 一种wifi报表生成方法及系统 - Google Patents

一种wifi报表生成方法及系统 Download PDF

Info

Publication number
CN109379245A
CN109379245A CN201811105022.9A CN201811105022A CN109379245A CN 109379245 A CN109379245 A CN 109379245A CN 201811105022 A CN201811105022 A CN 201811105022A CN 109379245 A CN109379245 A CN 109379245A
Authority
CN
China
Prior art keywords
report
data
task
wifi
analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811105022.9A
Other languages
English (en)
Inventor
李屏君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CHENGDU SKSPRUCE TECHNOLOGY Inc
Original Assignee
CHENGDU SKSPRUCE TECHNOLOGY Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHENGDU SKSPRUCE TECHNOLOGY Inc filed Critical CHENGDU SKSPRUCE TECHNOLOGY Inc
Priority to CN201811105022.9A priority Critical patent/CN109379245A/zh
Publication of CN109379245A publication Critical patent/CN109379245A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/186—Templates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0246—Exchanging or transporting network management information using the Internet; Embedding network management web servers in network elements; Web-services-based protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/04—Processing captured monitoring data, e.g. for logfile generation
    • H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/14—Arrangements for monitoring or testing data switching networks using software, i.e. software packages

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)

Abstract

本申请提供一种wifi报表生成方法及系统，所述方法在生成wifi报表过程中，先根据已选定的报表模板和报表生成数据添加报表任务，并创建分析任务至分析模块；分析模块通过获取原始数据，以及根据分析任务，采用基于Python语言的分析程序分析原始数据，生成分析报表；再根据输出报表任务，从报表数据库中，获取分析报表数据，以及根据分析报表数据创建wifi报表。本申请提供的wifi报表生成方法使用Python脚本语言提交分析任务到分析模块进行分析，分析模块采用PySpark接口的API，结合大规模数据处理计算引擎对报表原始数据进行分析处理。使用户可以根据需求定制化输出wifi报表，或对已有的分析功能进行更新，而不需要重新编译出新的软件版本。

Description

一种wifi报表生成方法及系统
技术领域
本申请涉及网络通信技术领域，尤其涉及一种wifi报表生成方法及系统。
背景技术
在wifi网络，尤其是大规模wifi网络中，针对wifi网络而生成的性能分析报表，以下简称wifi报表，能够全面反映当前wifi网络环境的运行状态和网络性能，也是一种非常重要的用户需求。
现有的wifi报表生成方式一般为，先根据用户需求，事先定义wifi网络运行数据的聚合方式和展示方式，以便报表系统能够对wifi网络运行数据进行分析，生成分析结果，最后将所述分析结果以表格或动态数据的形式制成wifi报表，并展示给用户。可见，现有的wifi报表生成方式中，数据的聚合方式和展示方式是预先定义的，并且数据的分析方式也是固定的，并且分析方式和分析结果一般不能被最终用户修改。即现有的wifi报表的生成方法不能支持用户定制。
另外，由于现有的wifi报表生成方法的数据聚合方式和展示方式固定，分析方式也固定，如果用户想要根据实际需要，获得定制化的wifi报表，只能通过重新编译出分析软件或更新软件版本的方式，才能够实现新的报表分析方式与展示功能，造成新的wifi报表数据生成过程愈加繁琐。
发明内容
本申请提供了一种wifi报表生成方法及系统，以解决传统wifi报表生成方法不支持用户定制的问题。
一方面，本申请提供一种wifi报表生成方法，包括：
浏览器将已选定的报表模板和报表生成数据发送至报表任务生成器；
所述报表任务生成器根据所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块；
所述分析模块获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库；
所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器；
所述报表生成器根据所述输出报表任务，从所述报表数据库中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
可选的，在所述分析模块获取原始数据的步骤中，所述分析模块从数据仓库中获取所述原始数据；或者，所述分析模块从第三方数据库中获取所述原始数据；所述第三方数据库为关系型数据库或市场可用的非关系型数据库。
可选的，在根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据的步骤还包括：
所述分析模块将分析过程中的中间数据写入所述数据仓库；
或者，所述分析模块将分析过程中的中间数据写入所述第三方数据库。
可选的，所述分析模块获取原始数据的步骤前，所述方法还包括：
wifi设备发送运行数据至数据采集器；
所述数据采集器将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块；
所述消息队列模块将所述运行数据以数据流形式发送至数据流模块；
所述数据流模块对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库。
可选的，所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器的步骤还包括：
所述报表任务管理器根据所述报表任务，生成保存任务指令至所述报表数据库；
所述报表数据库根据所述保存任务指令，将所述分析模块生成的所述生成分析报表进行保存。
可选的，所述报表生成器创建wifi报表后，所述方法还包括：
所述报表生成器将创建的所述wifi报表发送至所述浏览器展示；
和/或，所述报表生成器将创建的所述wifi报表输出为文件形式，并以电子邮件发送。
可选的，所述报表生成器创建wifi报表后，所述方法还包括：
如果所述报表生成数据中包含历史报表获取请求，所述报表生成器根据所述历史报表获取请求在所述报表数据库中，获取历史报表数据；
所述报表生成器将所述历史报表数据和创建的所述wifi报表，一同发送至所述浏览器展示。
另一方面，本申请还提供一种wifi报表生成系统，包括：浏览器、报表任务生成器、分析模块、报表数据库、报表任务管理器以及报表生成器，其中：
所述浏览器，用于展示报表模板和报表生成数据以供选定，以及将已选定的报表模板和报表生成数据发送至报表任务生成器；还用于展示新生成的wifi报表；
所述报表任务生成器，用于所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块；
所述分析模块，内置基于Python语言的分析程序，用于获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库；
所述报表数据库，用于存储所述分析模块生成的分析报表；
所述报表任务管理器，用于根据所述报表任务，生成输出报表任务至报表生成器；
所述报表生成器，用于根据所述输出报表任务，从所述报表数据库中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
可选的，所述系统还包括：数据仓库和第三方数据库；
所述数据仓库，用于存储所述原始数据；
所述第三方数据库，所述第三方数据库为关系型数据库或市场可用的非关系型数据库，用于存储所述原始数据。
可选的，所述系统还包括：分布在运行场景中的多个wifi设备、数据采集器、消息队列模块以及数据流模块；
所述wifi设备，用于发送运行数据至数据采集器；
所述数据采集器，用于将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块；
所述消息队列模块，用于将所述运行数据以数据流形式发送至数据流模块；
所述数据流模块，对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库。
由以上技术方案可知，本申请提供一种wifi报表生成方法及系统，所述方法在生成wifi报表过程中，先根据已选定的报表模板和报表生成数据添加报表任务，并创建分析任务至分析模块；分析模块通过获取原始数据，以及根据分析任务，采用基于Python语言的分析程序分析原始数据，生成分析报表；再根据输出报表任务，从报表数据库中，获取分析报表数据，以及根据分析报表数据创建wifi报表。
本申请提供的wifi报表生成方法使用Python脚本语言提交分析任务到分析模块进行分析，分析模块采用PySpark接口的API，结合大规模数据处理计算引擎对报表原始数据进行分析处理。使用户可以根据需求定制化输出wifi报表，或对已有的分析功能进行更新，而不需要重新编译出新的软件版本。
附图说明
为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请一种wifi报表生成方法的流程示意图；
图2为本申请对原始数据初步分析的流程示意图；
图3为本申请对分析报表保存的流程示意图；
图4为本申请获取历史报表数据的流程示意图；
图5为本申请一种wifi报表生成系统的结构示意图；
图6为本申请原始数据收集过程的结构示意图。
具体实施方式
下面将详细地对实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。
参见图1，为本申请一种wifi报表生成方法的流程示意图。由图1可知，本申请提供的wifi报表生成方法，包括以下步骤：
S1：浏览器将已选定的报表模板和报表生成数据发送至报表任务生成器。
本申请提供的技术方案中，浏览器可在PC端运行，以特定的web网页显示操作界面。例如，在页面中可以显示多个控件以代表供选择的报表模板，或者多个可供选择的报表生成数据。所述报表生成数据可包括多种用于分析的参数类型，如历史报表、报表生成时间等。所述报表生成数据还可以用来补充报表模板中不包含的参数项，以使最终生成的wifi报表，内容更加丰富，能够满足不同的用户需求。
实际应用时，用户通过选择操作，在页面中选定预生成的报表模板以及报表生成数据，在确认选择的信息后，浏览器将已选定的报表模板和报表生成数据发送至报表任务生成器，以便报表任务生成器制定报表任务。需要说明的是，由于在后续步骤中，用于生成wifi报表的原始数据来源有多种，例如，可以是系统内置的数据仓库，也可以是能够被系统读取的第三方数据库，因此，在本申请的部分实施例中，还可以在选定报表模板和报表生成数据时，同时指定原始数据的来源。
S2：所述报表任务生成器根据所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块。
本申请提供的技术方案中，报表任务生成器，主要作用在于根据报表模板和报表生成数据制定对应的控制任务。制定的控制任务主要包括两种，一种是添加报表任务至报表任务管理器，以便在后续步骤中对wifi报表进行输出，另一种是创建一个分析任务至分析模块，以启动分析模块对原始数据进行分析，生成指定类型的分析报表。
S3：所述分析模块获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库。
在本申请提供的技术方案中，分析模块内置基于Python语言的分析程序，分析程序包含大规模数据处理计算引擎，并含有PySpark接口的API。分析模块可以通过数据处理计算引擎对获取的原始数据进行分析，从而提取中原始数据中用于生成wifi报表的内容，并将提取的内容汇聚成报表模板指定的形式，生成分析报表。本申请提供的技术方案中，由于采用了内置基于Python语言的分析程序的分析模块，因此，可以直接针对原始数据进行分析处理，从而使生成的wifi报表不局限于分析程序本身，实现wifi报表的定制化生成。
进一步地，分析模块获取的原始数据可以来源于数据仓库，也可以来源于第三方数据库。其中，数据仓库可作为wifi报表生成系统中的一部分，数据仓库用于存储整个wifi网络中的运行数据；第三方数据库，是能够接入所述wifi报表生成系统的数据库，同样用于存储对应wifi网络的运行数据。为了使分析模块能够对原始数据直接进行处理，在本申请的技术方案中，所述第三方数据库可以为关系型数据库、市场可用的非关系型数据库，分布式文件系统(HDFS)等。
在本申请的部分实施例中，如图2所示，如果参与分析的原始数据来源于数据仓库，在获取原始数据之前，所述方法还包括以下步骤，以实现将wifi网络的运行数据存储在数据仓库中：
S301：wifi设备发送运行数据至数据采集器；
S302：所述数据采集器将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块；
S303：所述消息队列模块将所述运行数据以数据流形式发送至数据流模块；
S304：所述数据流模块对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库。
本实施例中，wifi设备可以包括分布在wifi网络中的各种运行设备，如无线接入点设备(AP)、无线接入控制设备(AC)、物联网设备(IoT)以及第三方设备(3rd-partyDevice)等。这些设备可以将运行时的数据进行采集和统计，并且统一发送给数据采集器，为了便于后续数据的处理，发送的数据可以采用GPB，FluenD，Flume等格式。
运行数据在被发送到数据采集器以后，可以在数据传递时经过编码和压缩，去除数据中不参与生成wifi报表的数据，即无效数据，仅保留有效数据，这样可以在后续的数据处理过程中，减轻对于无效数据的处理量。去除无效数据后，再将数据汇聚成数据流，保存在消息队列模块(如Kafka平台)中，直至数据流模块对所述运行数据进行数据转换和初步分析，经过初步分析的运行数据，可以直接得到运行数据的参数状态，如wifi网络的速率、带宽占用情况等。
示例地，在本实施例中，以单个网络设备的有效数据经过初步分析后，结果如下：
原始数据：
STAtoAP_rx_data_bytes 终端发送的流量 921600B
STAtoAP_rx_data_pkts 终端发送的数据包数 4728
APtoSTA_tx_data_bytes 终端接收的流量 460800B
APtoSTA_tx_data_pkts 终端发送的数据包数 4825
STAtoAP_rx_data_time 终端发送的总时间 100s
APtoSTA_tx_data_time 终端接收的总时间 200s
经过数据流模块的初步分析后，得到结果数据：
STAtoAP_rx_data_bytes 终端发送的速率 9216B/s
APtoSTA_tx_data_bytes 终端接收的速率 2304B/s
本实施例中，wifi设备上发送的运行数据在经过初步分析和格式变换后，保存在数据仓库中，以作为分析模块在分析过程中所要获取的原始数据。
进一步地，在根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据的步骤还包括：所述分析模块将分析过程中的中间数据写入所述数据仓库；或者，所述分析模块将分析过程中的中间数据写入所述第三方数据库。
本实施例中，将中间数据写入数据仓库或者第三方数据库可以在数据仓库中存储多种中间数据的处理形式，从而为以后的运行数据在进行初步分析时，提供参考模板。即，在一次wifi报表生成过程中间数据，可以作为下一次wifi报表的初步分析结果的类型参考，从而在下一次运行数据的收集后，可以通过初步分析过程直接形成中间数据，减轻分析模块对中间数据的处理量。
为了能够获得更多体积小但运行效率较高的原始数据，通过分析模块将分析过程中的中间数据发送到数据仓库中，以提供原始数据的参考模板，即确定一个初步分析结果的标准，以便在后续分析中直接生成中间数据，从而避免分析模块将过多的计算能力分配到简单的重复计算中，分担分析模块的计算负荷，从而提高分析模块的计算效率以及生成分析报表的效率。
S4：所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器。
所述报表任务管理器根据报表任务生成器发送的报表任务内容，生成一个输出报表任务到报表生成器，以启动报表生成器。所述输出报表任务中可以包含相应的报表输出方式的指令，例如，输出的文件类型、输出wifi报表的方式以及输出的wifi报表所需要发送的地址。
进一步地，如图3所示，所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器的步骤还包括：
S401：所述报表任务管理器根据所述报表任务，生成保存任务指令至所述报表数据库；
S402：所述报表数据库根据所述保存任务指令，将所述分析模块生成的所述生成分析报表进行保存。
本实施例中，报表任务管理器还可以根据接收到的报表任务生成保存任务指令，以控制报表数据库对分析模块发送的分析报表进行保存。为了便于对wifi报表数据的存储，以及在后续报表生成过程中，作为历史报表数据进行调用，生成的保存指令中还可以包含当前生成的分析报表的标签数据，报表数据库可以将标签数据与分析报表数据相对应的形式进行保存。另外，生成的报表数据还可以保存在数据仓库中，从而利用数据仓库的储存空间，避免设置大容量的报表数据库。
S5：所述报表生成器根据所述输出报表任务，从所述报表数据库中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
在本申请提供的技术方案中，所述报表生成器在接收到输出报表任务后，读取输出报表任务中指定的分析报表数据识别标志，并根据识别标志在报表数据库中获取对应的分析报表数据。为了减少对报表数据库存储空间的占用，分析报表数据在报表数据库中存储时，需要进行格式变换和数据压缩，因此所述报表生成器还需要对分析报表数据进行处理，使之作为可视化的文件形式进行输出，即形成最终展示给用户的wifi报表。显然，所创建的wifi报表形式上可以与选定的报表模板相一致，并且附带有报表生成数据对应的信息。
在本申请的部分实施例中，所述报表生成器创建wifi报表后，所述方法还包括：所述报表生成器将创建的所述wifi报表发送至所述浏览器展示；和/或，所述报表生成器将创建的所述wifi报表输出为文件形式，并以电子邮件发送。
即在本申请提供的技术方案中，报表生成器将创建的wifi报表可以直接发送到浏览器，使浏览器以图像的形式展示给用户。报表生成器还可以将创建的wifi报表以文件的形式进行输出，如将wifi报表作为电子邮件发送给客户。
进一步地，如图4所示，所述报表生成器创建wifi报表后，所述方法还包括：
S601：如果所述报表生成数据中包含历史报表获取请求，所述报表生成器根据所述历史报表获取请求在所述报表数据库中，获取历史报表数据；
S602：所述报表生成器将所述历史报表数据和创建的所述wifi报表，一同发送至所述浏览器展示。
基于上述wifi报表生成方法，本申请还提供一种wifi报表生成系统，如图5所示，所述系统包括：浏览器1、报表任务生成器2、分析模块3、报表数据库4、报表任务管理器5以及报表生成器6，为了实施wifi报表生成方法，上述各部分之间需要建立通信连接。
在实际应用中，上述各部分可以包含在一个应用程序中，并安装在用户的PC端，再通过每个PC端连接数据库和wifi网络进行相应的数据处理。上述各部件也可以作为网络应用，将各部分的程序分置在整个wifi网络中，通过wifi网络设备的云计算能力创建最终的wifi报表。
所述浏览器1，用于展示报表模板和报表生成数据以供选定，以及将已选定的报表模板和报表生成数据发送至报表任务生成器2；所述浏览器1还用于展示新生成的wifi报表。本申请提供的技术方案中，浏览器1作为整个系统的交互窗口，可以为用户提供可视化的操作界面。浏览器1也可以采用第三方浏览器软件，如IE，Microsoft Edge，GoogleChrome等，而通过制定的页面地址，展示操作页面以及提供实现交互。
所述报表任务生成器2，用于所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块。
所述分析模块3，内置基于Python语言的分析程序和基于PySpark接口的API，用于获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库。
本申请中分析模块3通过大规模数据处理计算引擎对原始数据进行处理，由于内置Python语言的分析程序，因此可以在分析模块3中内置PySpark接口的API，以便对接Python语言的程序。分析模块3，可以使用脚本语言，如python，提交分析任务到数据分析模块进行分析，分析模块采用如Apache Spark一样的数据处理技术。以便于实现针对用户的定制化生成wifi报表，或对已有的分析功能进行更新，而不需要重新编译出新的版本。
所述报表数据库4，用于存储所述分析模块3生成的分析报表。所述报表数据库4可以是一个自由的对象-关系数据库服务器，如，数据库管理系统，PostgreSQL。
所述报表任务管理器5，用于根据所述报表任务，生成输出报表任务至报表生成器6；
所述报表生成器6，用于根据所述输出报表任务，从所述报表数据库4中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
进一步地，如图5所示，所述系统还包括：数据仓库701和第三方数据库702；
所述数据仓库701，用于存储所述原始数据；数据仓库701可以是基于Hadoop的数据仓库工具(Hive)，从而将结构化的数据文件映射为一张数据库表，结合Hadoop分布式文件系统(HDFS)对原始数据进行存储。
所述第三方数据库702，所述第三方数据库702为关系型数据库或市场可用的非关系型数据库，用于存储所述原始数据。所述第三方数据库702也可以是Hadoop分布式文件系统(HDFS)。
进一步地，如图6所示，所述系统还包括：分布在运行场景中的多个wifi设备703、数据采集器704、消息队列模块705以及数据流模块706；
所述wifi设备703，用于发送运行数据至数据采集器704；
所述数据采集器704，用于将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块705；
所述消息队列模块705，用于将所述运行数据以数据流形式发送至数据流模块706；
所述数据流模块706，对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库701。
由以上技术方案可知，本申请提供一种wifi报表生成方法及系统，所述方法在生成wifi报表过程中，先根据已选定的报表模板和报表生成数据添加报表任务，并创建分析任务至分析模块；分析模块通过获取原始数据，以及根据分析任务，采用基于Python语言的分析程序分析原始数据，生成分析报表；再根据输出报表任务，从报表数据库中，获取分析报表数据，以及根据分析报表数据创建wifi报表。
本申请提供的wifi报表生成方法使用Python脚本语言提交分析任务到分析模块进行分析，分析模块采用PySpark接口的API，结合大规模数据处理计算引擎对报表原始数据进行分析处理。使用户可以根据需求定制化输出wifi报表，或对已有的分析功能进行更新，而不需要重新编译出新的软件版本。
本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种wifi报表生成方法，其特征在于，包括：
浏览器将已选定的报表模板和报表生成数据发送至报表任务生成器；
所述报表任务生成器根据所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块；
所述分析模块获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库；
所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器；
所述报表生成器根据所述输出报表任务，从所述报表数据库中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
2.根据权利要求1所述的wifi报表生成方法，其特征在于，在所述分析模块获取原始数据的步骤中，所述分析模块从数据仓库中获取所述原始数据；或者，所述分析模块从第三方数据库中获取所述原始数据；所述第三方数据库为关系型数据库或市场可用的非关系型数据库。
3.根据权利要求2所述的wifi报表生成方法，其特征在于，在根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据的步骤还包括：
所述分析模块将分析过程中的中间数据写入所述数据仓库；
或者，所述分析模块将分析过程中的中间数据写入所述第三方数据库。
4.根据权利要求1所述的wifi报表生成方法，其特征在于，所述分析模块获取原始数据的步骤前，所述方法还包括：
wifi设备发送运行数据至数据采集器；
所述数据采集器将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块；
所述消息队列模块将所述运行数据以数据流形式发送至数据流模块；
所述数据流模块对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库。
5.根据权利要求1所述的wifi报表生成方法，其特征在于，所述报表任务管理器根据所述报表任务，生成输出报表任务至报表生成器的步骤还包括：
所述报表任务管理器根据所述报表任务，生成保存任务指令至所述报表数据库；
所述报表数据库根据所述保存任务指令，将所述分析模块生成的所述生成分析报表进行保存。
6.根据权利要求1所述的wifi报表生成方法，其特征在于，所述报表生成器创建wifi报表后，所述方法还包括：
所述报表生成器将创建的所述wifi报表发送至所述浏览器展示；
和/或，所述报表生成器将创建的所述wifi报表输出为文件形式，并以电子邮件发送。
7.根据权利要求1所述的wifi报表生成方法，其特征在于，所述报表生成器创建wifi报表后，所述方法还包括：
如果所述报表生成数据中包含历史报表获取请求，所述报表生成器根据所述历史报表获取请求在所述报表数据库中，获取历史报表数据；
所述报表生成器将所述历史报表数据和创建的所述wifi报表，一同发送至所述浏览器展示。
8.一种wifi报表生成系统，其特征在于，包括：浏览器、报表任务生成器、分析模块、报表数据库、报表任务管理器以及报表生成器，其中：
所述浏览器，用于展示报表模板和报表生成数据以供选定，以及将已选定的报表模板和报表生成数据发送至报表任务生成器；还用于展示新生成的wifi报表；
所述报表任务生成器，用于所述报表模板和报表生成数据，添加报表任务至报表任务管理器，以及创建分析任务至分析模块；
所述分析模块，内置基于Python语言的分析程序，用于获取原始数据，以及根据所述分析任务，采用基于Python语言的分析程序分析所述原始数据，生成分析报表至报表数据库；
所述报表数据库，用于存储所述分析模块生成的分析报表；
所述报表任务管理器，用于根据所述报表任务，生成输出报表任务至报表生成器；
所述报表生成器，用于根据所述输出报表任务，从所述报表数据库中，获取分析报表数据，以及根据所述分析报表数据创建wifi报表。
9.根据权利要求8所述的wifi报表生成系统，其特征在于，所述系统还包括：数据仓库和第三方数据库；
所述数据仓库，用于存储所述原始数据；
所述第三方数据库，所述第三方数据库为关系型数据库或市场可用的非关系型数据库，用于存储所述原始数据。
10.根据权利要求8所述的wifi报表生成系统，其特征在于，所述系统还包括：分布在运行场景中的多个wifi设备、数据采集器、消息队列模块以及数据流模块；
所述wifi设备，用于发送运行数据至数据采集器；
所述数据采集器，用于将所述运行数据进行编码和压缩，以及将编码和压缩后的所述运行数据发送至消息队列模块；
所述消息队列模块，用于将所述运行数据以数据流形式发送至数据流模块；
所述数据流模块，对所述运行数据进行数据转换和初步分析，以及将数据转换和初步分析后的所述运行数据保存至数据仓库。
CN201811105022.9A 2018-09-21 2018-09-21 一种wifi报表生成方法及系统 Pending CN109379245A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811105022.9A CN109379245A (zh) 2018-09-21 2018-09-21 一种wifi报表生成方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811105022.9A CN109379245A (zh) 2018-09-21 2018-09-21 一种wifi报表生成方法及系统

Publications (1)

Publication Number Publication Date
CN109379245A true CN109379245A (zh) 2019-02-22

Family

ID=65401551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811105022.9A Pending CN109379245A (zh) 2018-09-21 2018-09-21 一种wifi报表生成方法及系统

Country Status (1)

Country Link
CN (1) CN109379245A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109992615A (zh) * 2019-02-25 2019-07-09 贵州力创科技发展有限公司 一种通用导出方法、装置和存储介质
CN110855768A (zh) * 2019-11-07 2020-02-28 成都西加云杉科技有限公司 一种数据处理方法及WiFi-IoT系统
CN110928898A (zh) * 2019-10-24 2020-03-27 长城计算机软件与系统有限公司 数据采集方法、数据采集装置、存储介质及电子设备
CN115185983A (zh) * 2022-09-14 2022-10-14 北京博点智合科技有限公司 一种报表生成方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183371A (zh) * 2007-12-12 2008-05-21 中兴通讯股份有限公司 一种快速完成大数据处理的方法和报表系统
CN107391550A (zh) * 2017-06-06 2017-11-24 广东广业开元科技有限公司 一种基于大数据模板技术的报表生成方法及系统
WO2018119416A1 (en) * 2016-12-22 2018-06-28 Surround Io Corporation Method and system for providing artificial intelligence analytic (aia) services using operator fingerprints and cloud data
CN108536660A (zh) * 2018-04-03 2018-09-14 福建榕基软件工程有限公司 一种自定义报表的生成方法及终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183371A (zh) * 2007-12-12 2008-05-21 中兴通讯股份有限公司 一种快速完成大数据处理的方法和报表系统
WO2018119416A1 (en) * 2016-12-22 2018-06-28 Surround Io Corporation Method and system for providing artificial intelligence analytic (aia) services using operator fingerprints and cloud data
CN107391550A (zh) * 2017-06-06 2017-11-24 广东广业开元科技有限公司 一种基于大数据模板技术的报表生成方法及系统
CN108536660A (zh) * 2018-04-03 2018-09-14 福建榕基软件工程有限公司 一种自定义报表的生成方法及终端

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109992615A (zh) * 2019-02-25 2019-07-09 贵州力创科技发展有限公司 一种通用导出方法、装置和存储介质
CN110928898A (zh) * 2019-10-24 2020-03-27 长城计算机软件与系统有限公司 数据采集方法、数据采集装置、存储介质及电子设备
CN110855768A (zh) * 2019-11-07 2020-02-28 成都西加云杉科技有限公司 一种数据处理方法及WiFi-IoT系统
CN115185983A (zh) * 2022-09-14 2022-10-14 北京博点智合科技有限公司 一种报表生成方法及装置

Similar Documents

Publication Publication Date Title
CN107451109B (zh) 报表生成方法及系统
CN109379245A (zh) 一种wifi报表生成方法及系统
WO2016082468A1 (zh) 数据图形化方法、装置及数据库服务器
CN111209310B (zh) 基于流计算的业务数据处理方法、装置和计算机设备
CN111813573B (zh) 管理平台与机器人软件的通信方法及其相关设备
CN116755844A (zh) 一种仿真引擎的数据处理方法、装置、设备及存储介质
CN112422450A (zh) 计算机设备、服务请求的流量控制方法及装置
CN114706839A (zh) 日志数据处理方法、装置、电子设备和存储介质
CN113010542A (zh) 业务数据处理方法、装置、计算机设备及存储介质
US11620284B2 (en) Backend data aggregation system and method
CN117093619A (zh) 一种规则引擎处理方法、装置、电子设备及存储介质
CN116450723A (zh) 数据提取方法、装置、计算机设备及存储介质
US20200026701A1 (en) Dynamic visualization of application and infrastructure components with layers
CN107679096B (zh) 数据集市间指标共享的方法和装置
CN111694932A (zh) 对话方法和装置
CN112597252B (zh) MongoDB服务器访问方法及系统
CN114356712A (zh) 数据处理方法、装置、设备、可读存储介质及程序产品
CN113704486A (zh) 图谱数据构建方法及装置和图谱数据查询方法及装置
CN105955895B (zh) 分布式消息队列的逻辑控制方法和装置、数据处理设备
CN111753111A (zh) 图片搜索方法和装置
CN109194529B (zh) 一种用于虚拟SIM卡与服务器apdu的交互方法及装置
CN111865696B (zh) 网络安全的可视化方法、装置、设备及介质
CN111064652B (zh) 一种微信工作群智能代理管理系统及方法
CN107995176B (zh) 一种scada系统画面缓存系统
CN108536362B (zh) 用于识别操作的方法、装置及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190222

RJ01 Rejection of invention patent application after publication