CN108133046B - 数据分析方法及装置 - Google Patents
数据分析方法及装置 Download PDFInfo
- Publication number
- CN108133046B CN108133046B CN201810035855.6A CN201810035855A CN108133046B CN 108133046 B CN108133046 B CN 108133046B CN 201810035855 A CN201810035855 A CN 201810035855A CN 108133046 B CN108133046 B CN 108133046B
- Authority
- CN
- China
- Prior art keywords
- student
- data
- professional
- school
- wifi
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007405 data analysis Methods 0.000 title claims abstract description 94
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000004458 analytical method Methods 0.000 claims abstract description 106
- 238000004364 calculation method Methods 0.000 claims abstract description 103
- 230000008569 process Effects 0.000 claims description 16
- 238000013215 result calculation Methods 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 3
- 238000011161 development Methods 0.000 abstract description 6
- 230000006399 behavior Effects 0.000 description 46
- 239000008186 active pharmaceutical agent Substances 0.000 description 37
- 230000006870 function Effects 0.000 description 10
- 238000004590 computer program Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 230000001755 vocal effect Effects 0.000 description 3
- 238000013480 data collection Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 241000700605 Viruses Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000007115 recruitment Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Fuzzy Systems (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- General Health & Medical Sciences (AREA)
- Economics (AREA)
- Primary Health Care (AREA)
- Mathematical Physics (AREA)
- Probability & Statistics with Applications (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
本发明实施例提供一种数据分析方法及装置。该方法包括:教育系统响应数据分析需求,调用API网关将在校基础数据和学生职业成绩计算规则写入到WIFI分析系统的数据库中;教育分析系统响应数据分析需求,向API网关发送学生职业成绩计算请求;API网关将学生职业成绩计算请求转发给WIFI分析系统;WIFI分析系统根据学生职业成绩计算请求从数据库中读取对应的学生行为数据和在校基础数据,并基于学生职业成绩计算规则对学生行为数据和在校基础数据进行数据分析,得到对应学生的职业成绩。由此,能够减少WIFI分析系统到教育分析系统的数据流量,同时可以基于所有的WIFI数据和学生数据进行更完整的数据分析功能,降低了服务器的性能压力和教育系统的开发成本。
Description
技术领域
本发明涉及数据挖掘技术领域,具体而言,涉及一种数据分析方法及装置。
背景技术
在目前的教育系统中,对学生数据进行分析的过程可以在与WIFI分析系统分离的教育系统中完成,具体是通过添加一个教育分析系统,通过WIFI分析系统的APP信息详情和在线记录对教育数据进行深度学习和分析,这就要求将大量的WIFI数据从WIFI分析系统导入到教育分析系统。但是由于WIFI数据量远高于教育数据,这使得服务器的性能成为很严重的问题。同时,由于所需的教育分析系统的要求,从而也会导致教育系统的开发成本很高。
发明内容
为了克服现有技术中的上述不足,本发明的目的在于提供一种数据分析方法及装置,能够减少WIFI分析系统到教育分析系统的数据流量,同时也能够基于所有的WIFI数据和学生数据进行更完整的数据分析功能,降低了服务器的性能压力和教育系统的开发成本。
为了实现上述目的,本发明较佳实施例采用的技术方案如下:
本发明较佳实施例提供一种数据分析方法,应用于服务器,所述服务器上运行有教育系统、教育分析系统、API网关以及WIFI分析系统,所述WIFI分析系统中包括有一存储有学生行为数据的数据库,所述方法包括:
所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中,所述数据分析需求包括学生的职业目标;
所述教育分析系统响应所述数据分析需求,向所述API网关发送学生职业成绩计算请求;
所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统;
所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到对应学生的职业成绩。
在本发明较佳实施例中,在所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中的步骤之前,所述方法还包括:
所述WIFI分析系统接收无线接入点在检测到学生终端接入时通过调用DPI服务进程采集到的学生行为数据,并将所述学生行为数据存储到所述数据库中,其中,所述学生行为数据包括学生使用的应用程序的统计信息。
在本发明较佳实施例中,所述应用程序的统计信息包括每个应用程序的使用记录,所述使用记录包括学生对应用程序的下载记录和/或浏览记录。
在本发明较佳实施例中,所述教育系统中存储有各个学生的在校基础数据、学生职业目标与在校基础数据之间的对应关系以及学生职业目标与学生职业成绩计算规则之间的对应关系,所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中的步骤包括:
所述教育系统从所述数据分析需求中解析得到对应的学生信息和学生职业目标后,获取与所述学生职业目标对应的在校基础数据和学生职业成绩计算规则;
调用所述API网关将所述在校基础数据和所述学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中。
在本发明较佳实施例中,所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到对应学生的职业成绩的步骤,包括:
所述WIFI分析系统从所述学生职业成绩计算请求中解析得到对应的学生信息;
根据所述学生信息从所述数据库中读取对应的学生行为数据、在校基础数据以及学生职业成绩计算规则;
基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩;
根据所述第一职业成绩和所述第二职业成绩计算得到对应学生的职业成绩,所述职业成绩用于表征该学生的职业目标符合情况。
在本发明较佳实施例中,所述基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩的步骤,包括:
从所述学生行为数据中获得目标应用程序的统计信息;
基于所述学生职业成绩计算规则计算所述目标应用程序的统计信息对应的第一职业成绩。
本发明较佳实施例还提供一种数据分析装置,应用于服务器,所述服务器上运行有教育系统、教育分析系统、API网关以及WIFI分析系统,所述WIFI分析系统中包括有一存储有学生行为数据的数据库,所述装置包括:
写入模块,用于响应数据分析需求,通过所述教育系统调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中,所述数据分析需求包括学生的职业目标。
发送模块,用于响应所述数据分析需求,通过所述教育分析系统向所述API网关发送学生职业成绩计算请求。
转发模块,用于通过所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统。
数据分析模块,用于通过所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到对应学生的职业成绩。
本发明较佳实施例还提供一种可读存储介质,所述可读存储介质中存储有计算机程序,所述计算机程序运行时实现上述的数据分析方法。
相对于现有技术而言,本发明具有以下有益效果:
本发明实施例提供一种数据分析方法及装置,首先通过教育系统响应数据分析需求,调用API网关将在校基础数据和学生职业成绩计算规则写入到WIFI分析系统的数据库中,然后,教育分析系统响应数据分析需求,向API网关发送学生职业成绩计算请求,接着,API网关将学生职业成绩计算请求转发给WIFI分析系统,最后,WIFI分析系统根据学生职业成绩计算请求从数据库中读取对应的学生行为数据和在校基础数据,并基于学生职业成绩计算规则对学生行为数据和在校基础数据进行数据分析,得到对应学生的职业成绩。由此,通过API网关将在校基础数据和学生职业成绩计算规则发送到WIFI分析系统,WIFI分析系统使用学生行为数据、在校基础数据和学生职业成绩计算规则进行数据分析,然后计算学生的职业成绩,由于从教育系统发送到WIFI分析系统的在校基础数据和学生职业成绩计算规则比WIFI分析系统内部的学生行为数据量少得多,从而能够减少WIFI分析系统到教育分析系统的数据流量,同时可以基于所有的WIFI数据和学生数据进行更完整的数据分析功能,降低了服务器的性能压力和教育系统的开发成本。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它相关的附图。
图1为本发明较佳实施例提供的服务器的一种结构示意框图;
图2为本发明较佳实施例提供的数据分析方法的一种流程示意图;
图3为图2中所示的步骤S140包括的各个子步骤的一种流程示意图;
图4为本发明较佳实施例提供的数据分析装置的一种功能模块图;
图5为本发明较佳实施例提供的数据分析装置的另一种功能模块图。
图标:100-服务器;110-存储器;120-处理器;130-数据分析装置;131-接收模块;132-写入模块;133-发送模块;134-转发模块;135-数据分析模块。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
请参阅图1,为本发明较佳实施例提供的用于实现数据分析方法的服务器100的一种结构示意框图。在本发明实施例中,所述服务器100应被理解为提供处理、资料库、通讯设施的业务点,所述服务器100可以是X86服务器。举例而言,服务器100可以指具有相关通信和资料存储和资料库设施的单个的物理处理器,或它可以指联网或集聚的处理器、相关网路和存放装置的集合体,并且对软体和一个或多个资料库系统和支援服务器100所提供的服务的应用软体进行操作。服务器100可以在配置或性能上差异很大,但是服务器100一般可以包括一个或多个中央处理单元和存储单元。服务器100还可以包括一个或多个大型存放区设备、一个或多个电源、一个或多个有线或无线网络组件、一个或多个输入/输出组件、或一个或多个作业系统,诸如,Windows Server、Mac OS X、Unix、Linux、FreeBSD。
在本实施例中,所述服务器100包括存储器110、处理器120以及数据分析装置130。其中,所述存储器110与所述处理器120之间直接或间接的电性连接,以实现数据的传输或交互。所述数据分析装置130包括至少一个可以软件或固件的形式存储于所述存储器110中或固化在所述服务器100的操作系统中的软件功能模块。所述处理器120用于执行所述存储器110中存储的可执行模块,例如所述数据分析装置130包括的软件功能模块或计算机程序。
本实施例中,所述服务器100上运行有教育系统、教育分析系统、API网关以及WIFI分析系统。
所述WIFI分析系统可以运行在私有云或服务器100或公共云中,同时具有Web UI,可以实现用户配置、更改和维护策略,本实施例中,所述WIFI分析系统包括有一存储有学生行为数据的数据库。所述API网关是Docker容器中面向组件的软件,可以作为一个或多个集群运行在私有云或服务器100或公共云中,所述API网关为API开发人员,发布者和订户支持以下功能:设计和原型API、发布和管理API使用、创建所有可用API的存储、控制访问和强制安全、管理开发人员社区、管理API流量、监控和货币化、API平台多租户支持、可插入和可扩展等等。
请参阅图2,为本发明较佳实施例提供的数据分析方法的一种流程示意图,所述方法由图1中所示的服务器100执行。所应说明的是,本发明实施例提供的数据分析方法不以图2及以下所述的具体顺序为限制。所述方法的具体流程如下:
步骤S110,所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中。
本实施例中,所述教育系统中存储有各个学生的在校基础数据、学生职业目标与在校基础数据之间的对应关系以及学生职业目标与学生职业成绩计算规则之间的对应关系,所述数据分析需求中包括学生的职业目标。具体地,针对不同的职业目标,所对应的该学生的在校基础数据中的部分数据也各有不同。例如,学校在校基础数据一般包括学生基本信息和学生职业关联信息,所述学生基本信息包括学生姓名、身份证号、出生日期、班级、年级、特点属性等,所述学生职业关联信息与职业目标相关,比如,学生的职业目标为软件工程师,那么所述学生职业关联信息即可包括基础软件工程课程成绩、专业软件工程课程成绩、软件工程选修课成绩、相关实习成绩等等。
在实际场景中,所述教育系统在数据分析需求后,从所述数据分析需求中解析得到对应的学生信息和学生职业目标后,获取与所述学生职业目标对应的在校基础数据和学生职业成绩计算规则,然后调用所述API网关将所述在校基础数据和所述学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中。
步骤S120,所述教育分析系统响应所述数据分析需求,向所述API网关发送学生职业成绩计算请求。
步骤S130,所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统。
步骤S140,所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到对应学生的职业成绩。
在对所述步骤S140作进一步地阐述之前,首先对在所述步骤S110之前所述学生行为数据的获取方式进行说明。本实施例中,所述服务器与多个无线接入点通信连接,其中所述无线接入点(Access Point,AP)是一个无线网络的接入点,俗称“热点”,主要有路由交换接入一体设备和纯接入点设备,一体设备执行接入和路由工作,纯接入设备只负责终端的接入,纯接入设备通常作为无线网络扩展使用,与其它AP或者主AP连接,以扩大无线覆盖范围。
本实施例中,每个所述无线接入点中运行有DPI服务进程,详细地,DPI(DeepPacket Inspection)是一种基于数据包的深度检测技术,针对不同的网络应用层载荷(例如HTTP、DNS等)进行深度检测,通过对报文的有效载荷检测决定其合法性。DPI同时集成了IDS(Intrusion Detection System)、IPS(Intrusion Prevention System)和传统防护墙的功能。这就使得DPI可能检测到IDS、IPS或防火墙都不能独立探测到的某些特定的应用。对于防火墙来说,它能够检测一个报文流的开始和结束,但是不能获取到报文本身之外的特定应用。对于IDS来说,它可以检测到入侵,但是没有能力干预和抵御入侵。IPS可以快速的阻止网络病毒和蠕虫的入侵。更具体地说,DPI可以有效地抵御缓冲区溢出攻击、拒绝服务攻击(DoS)、复杂的入侵,以及一小部分隐藏于单个报文中的网络蠕虫。进一步地,DPI设备可以负责数据采集、流量分析统计、日志合成,应用于所述服务器100可以完成对数据的进一步分析处理,合理组织和存储数据,并进行呈现。
本实施例中,DPI服务进程运行在每个所述AP中,每个AP在检测到学生终端接入时,采集每个学生终端的学生行为数据。具体地,每个学生终端都对应有一个终端硬件地址,例如MAC地址,不同的MAC地址即对应的是不同的学生,为了使得所述WIFI分析系统识别每个学生终端对应的是哪一个学生,可选地,所述WIFI分析系统中还可以存储有每个MAC地址与学生之间的关联信息,也即在获取到每个学生终端的MAC地址时,就能够识别是哪个学生在使用该学生终端。
在实际实施时,每个AP都可以采集每个学生对应用程序(Application,APP)的操作行为信息。所述操作行为信息包括:下载行为信息和/或浏览行为信息,然后,对所述操作行为信息进行记录,生成应用程序的统计信息,从而得到所述学生终端的学生行为数据。所述统计信息包括每个应用程序的使用记录,所述使用记录包括下载记录和/或浏览记录。例如,学生在使用学生终端接入所述AP时,在浏览或者下载应用程序的过程中,AP会通过DPI服务进程实时采集该学生终端的应用程序的统计信息。比如,该学生每天打开的各个应用程序的次数和时刻,各个应用程序的前台运行时间,使用的各个应用程序的类别统计,例如学习类应用程序、游戏类应用程序、新闻类应用程序在每天应用程序的总使用时间或者次数的占比等等,都可以记为该学生终端的应用程序的统计信息。
例如,学生A将他的手机、笔记本电脑或iPad连接到WIFI,然后在7:00AM启动学习类应用程序B时,在AP内部的DPI服务进程启动数据收集,并实时发送到所述WIFI分析系统,当学生A在11:30PM完成/停止该学习类应用程序B时,所述DPI服务进程将收集到的数据实时发送到所述WIFI分析系统,那么该学生A的学习类应用程序B的使用记录为,从早上7:00AM到11:30PM,该学生A一直在使用该学习类应用程序B。
在上述基础上,请参阅图3,所述步骤S140可通过如下子步骤实现:
子步骤S141,WIFI分析系统从所述学生职业成绩计算请求中解析得到对应的学生信息。
本实施例中,所述学生信息可包括该学生的基本信息,例如学生姓名、身份证号、出生日期、班级、年级、特点属性等。
子步骤S142,根据所述学生信息从所述数据库中读取对应的学生行为数据、在校基础数据以及学生职业成绩计算规则。
子步骤S143,基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩。
本实施例中,所述WIFI分析系统通过步骤S110可以获得到该学生的在校基础数据以及学生职业成绩计算规则,其中,所述学生职业成绩计算规则可以预先进行配置,例如,所述学生职业成绩计算规则可以是,学生职业成绩=X*平均课程成绩+Y*指定学习类APP使用率+Z*指定实习活动参与成绩+S*专业认证证书。其中,X、Y、Z、S为各个成绩的成绩系数,具体可以根据实际要求进行设定。所述在校基础数据即为所述平均课程成绩、指定实习活动参与成绩以及专业认证证书,所述学生行为数据即为所述指定学习类APP使用率。
示例性地,以该学生的职业目标为软件工程师为例,所述平均课程成绩也即基础软件工程课程成绩、专业软件工程课程成绩、软件工程选修课成绩以及相关实习成绩的平均值,所述指定学习类APP也即常用的与软件类学习类APP,具体可以按照已经上架的软件类学习类APP进行预先定义。所述指定实习活动参与成绩也即该学生在校期间参加的软件开发类实习活动获得的成绩,所述专业认证证书也即该学生在校期间获得的各种认证证书,其中,每种认证证书可对应折算成相应的成绩。
在此基础上,所述WIFI分析系统可以基于上述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩。
子步骤S144,根据所述第一职业成绩和所述第二职业成绩计算得到对应学生的职业成绩。
本实施例中,将上述第一职业成绩和第二职业成绩相加即可得到该学生的职业成绩,所述职业成绩可以用于表征该学生的职业目标符合情况,也即所述职业成绩越高,那么该学生与职业目标的符合程度越高。由此,可以得到该学生与职业目标的符合程度,从而可以更容易地判断该学生是否与所提供的工作岗位匹配,如此,为招聘方的招聘工作提供较准确的参考。
基于上述设计,通过API网关将在校基础数据和学生职业成绩计算规则发送到WIFI分析系统,WIFI分析系统使用学生行为数据、在校基础数据和学生职业成绩计算规则进行数据分析,然后计算学生的职业成绩,由于从教育系统发送到WIFI分析系统的在校基础数据和学生职业成绩计算规则比WIFI分析系统内部的学生行为数据量少得多,从而能够减少WIFI分析系统到教育分析系统的数据流量,同时可以基于所有的WIFI数据和学生数据进行更完整的数据分析功能,降低了服务器100的性能压力和教育系统的开发成本。
进一步地,请参阅图4,本发明较佳实施例还提供一种数据分析装置130,所述装置可以包括:
写入模块132,用于响应数据分析需求,通过所述教育系统调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中,所述数据分析需求包括学生的职业目标。
发送模块133,用于响应所述数据分析需求,通过所述教育分析系统向所述API网关发送学生职业成绩计算请求。
转发模块134,用于通过所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统。
数据分析模块135,用于通过所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到对应学生的职业成绩。
进一步地,请参阅图5,所述装置还可以包括:
接收模块131,用于通过所述WIFI分析系统接收无线接入点在检测到学生终端接入时通过调用DPI服务进程采集到的学生行为数据,并将所述学生行为数据存储到所述数据库中,其中,所述学生行为数据包括学生使用的应用程序的统计信息。
进一步地,所述教育系统中存储有各个学生的在校基础数据、学生职业目标与在校基础数据之间的对应关系以及学生职业目标与学生职业成绩计算规则之间的对应关系:
所述写入模块132,还用于通过所述教育系统从所述数据分析需求中解析得到对应的学生信息和学生职业目标后,获取与所述学生职业目标对应的在校基础数据和学生职业成绩计算规则。
调用所述API网关将所述在校基础数据和所述学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中。
进一步地,所述数据分析模块135,还用于通过所述WIFI分析系统从所述学生职业成绩计算请求中解析得到对应的学生信息。
根据所述学生信息从所述数据库中读取对应的学生行为数据、在校基础数据以及学生职业成绩计算规则。
基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩。
根据所述第一职业成绩和所述第二职业成绩计算得到对应学生的职业成绩,所述职业成绩用于表征该学生的职业目标符合情况。
可以理解的是,本实施例中的各功能模块的具体操作方法可参照上述方法实施例中相应步骤的详细描述,在此不再重复赘述。
进一步地,本发明较佳实施例还提供一种可读存储介质,所述可读存储介质中存储有计算机程序,所述计算机程序运行时控制所述服务器100执行上述的数据分析方法。
综上所述,本发明实施例提供一种数据分析方法及装置,首先通过教育系统响应数据分析需求,调用API网关将在校基础数据和学生职业成绩计算规则写入到WIFI分析系统的数据库中,然后,教育分析系统响应数据分析需求,向API网关发送学生职业成绩计算请求,接着,API网关将学生职业成绩计算请求转发给WIFI分析系统,最后,WIFI分析系统根据学生职业成绩计算请求从数据库中读取对应的学生行为数据和在校基础数据,并基于学生职业成绩计算规则对学生行为数据和在校基础数据进行数据分析,得到对应学生的职业成绩。由此,通过API网关将在校基础数据和学生职业成绩计算规则发送到WIFI分析系统,WIFI分析系统使用学生行为数据、在校基础数据和学生职业成绩计算规则进行数据分析,然后计算学生的职业成绩,由于从教育系统发送到WIFI分析系统的在校基础数据和学生职业成绩计算规则比WIFI分析系统内部的学生行为数据量少得多,从而能够减少WIFI分析系统到教育分析系统的数据流量,同时可以基于所有的WIFI数据和学生数据进行更完整的数据分析功能,降低了服务器的性能压力和教育系统的开发成本。
在本发明所提供的实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
可以替换的,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其它可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,术语"包括"、"包含"或者其任何其它变体意在涵盖非排它性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其它要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句"包括一个……"限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其它的具体形式实现本发明。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
Claims (10)
1.一种数据分析方法,其特征在于,应用于服务器,所述服务器上运行有教育系统、教育分析系统、API网关以及WIFI分析系统,所述WIFI分析系统中包括有一存储有学生行为数据的数据库,所述方法包括:
所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中,所述数据分析需求包括学生的职业目标;
所述教育分析系统响应所述数据分析需求,向所述API网关发送学生职业成绩计算请求;
所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统;
所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取与所述学生职业成绩计算请求对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到与所述学生职业成绩计算请求对应的学生的职业成绩。
2.根据权利要求1所述的数据分析方法,其特征在于,在所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中的步骤之前,所述方法还包括:
所述WIFI分析系统接收无线接入点在检测到学生终端接入时通过调用DPI服务进程采集到的学生行为数据,并将所述学生行为数据存储到所述数据库中,其中,所述学生行为数据包括学生使用的应用程序的统计信息。
3.根据权利要求2所述的数据分析方法,其特征在于,所述应用程序的统计信息包括每个应用程序的使用记录,所述使用记录包括学生对应用程序的下载记录和/或浏览记录。
4.根据权利要求1所述的数据分析方法,其特征在于,所述教育系统中存储有各个学生的在校基础数据、学生职业目标与在校基础数据之间的对应关系以及学生职业目标与学生职业成绩计算规则之间的对应关系,所述教育系统响应数据分析需求,调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中的步骤包括:
所述教育系统从所述数据分析需求中解析得到与所述数据分析需求对应的学生信息和学生职业目标后,获取与所述学生职业目标对应的在校基础数据和学生职业成绩计算规则;
调用所述API网关将所述在校基础数据和所述学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中。
5.根据权利要求1所述的数据分析方法,其特征在于,所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取与所述学生职业成绩计算请求对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到与所述学生职业成绩计算请求对应的学生的职业成绩的步骤,包括:
所述WIFI分析系统从所述学生职业成绩计算请求中解析得到与所述学生职业成绩计算请求对应的学生信息;
根据所述学生信息从所述数据库中读取对应的学生行为数据、在校基础数据以及学生职业成绩计算规则;
基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩;
根据所述第一职业成绩和所述第二职业成绩计算得到对应学生的职业成绩,所述职业成绩用于表征该学生的职业目标符合情况。
6.根据权利要求5所述的数据分析方法,其特征在于,所述基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩的步骤,包括:
从所述学生行为数据中获得目标应用程序的统计信息;
基于所述学生职业成绩计算规则计算所述目标应用程序的统计信息对应的第一职业成绩。
7.一种数据分析装置,其特征在于,应用于服务器,所述服务器上运行有教育系统、教育分析系统、API网关以及WIFI分析系统,所述WIFI分析系统中包括有一存储有学生行为数据的数据库,所述装置包括:
写入模块,用于响应数据分析需求,通过所述教育系统调用所述API网关将在校基础数据和学生职业成绩计算规则写入到所述WIFI分析系统的数据库中,所述数据分析需求包括学生的职业目标;
发送模块,用于响应所述数据分析需求,通过所述教育分析系统向所述API网关发送学生职业成绩计算请求;
转发模块,用于通过所述API网关将所述学生职业成绩计算请求转发给所述WIFI分析系统;
数据分析模块,用于通过所述WIFI分析系统根据所述学生职业成绩计算请求从所述数据库中读取与所述学生职业成绩计算请求对应的学生行为数据和在校基础数据,并基于所述学生职业成绩计算规则对所述学生行为数据和所述在校基础数据进行数据分析,得到与所述学生职业成绩计算请求对应的学生的职业成绩。
8.根据权利要求7所述的数据分析装置,其特征在于,所述装置还包括:
接收模块,用于通过所述WIFI分析系统接收无线接入点在检测到学生终端接入时通过调用DPI服务进程采集到的学生行为数据,并将所述学生行为数据存储到所述数据库中,其中,所述学生行为数据包括学生使用的应用程序的统计信息。
9.根据权利要求7所述的数据分析装置,其特征在于,所述教育系统中存储有各个学生的在校基础数据、学生职业目标与在校基础数据之间的对应关系以及学生职业目标与学生职业成绩计算规则之间的对应关系:
所述写入模块,还用于通过所述教育系统从所述数据分析需求中解析得到与所述数据分析需求对应的学生信息和学生职业目标后,获取与所述学生职业目标对应的在校基础数据和学生职业成绩计算规则;
调用所述API网关将所述在校基础数据和所述学生职业成绩计算规则写入到所述WIFI分析系统中的数据库中。
10.根据权利要求7所述的数据分析装置,其特征在于:
所述数据分析模块,还用于通过所述WIFI分析系统从所述学生职业成绩计算请求中解析得到与所述学生职业成绩计算请求对应的学生信息;
根据所述学生信息从所述数据库中读取对应的学生行为数据、在校基础数据以及学生职业成绩计算规则;
基于所述学生职业成绩计算规则计算所述学生行为数据对应的第一职业成绩和所述在校基础数据对应的第二职业成绩;
根据所述第一职业成绩和所述第二职业成绩计算得到对应学生的职业成绩,所述职业成绩用于表征该学生的职业目标符合情况。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810035855.6A CN108133046B (zh) | 2018-01-15 | 2018-01-15 | 数据分析方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810035855.6A CN108133046B (zh) | 2018-01-15 | 2018-01-15 | 数据分析方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108133046A CN108133046A (zh) | 2018-06-08 |
CN108133046B true CN108133046B (zh) | 2021-08-24 |
Family
ID=62399744
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810035855.6A Active CN108133046B (zh) | 2018-01-15 | 2018-01-15 | 数据分析方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108133046B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109768984B (zh) * | 2019-01-25 | 2021-11-09 | 成都西加云杉科技有限公司 | 一种WiFi数据分析的授权方法及系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8458165B2 (en) * | 2007-06-28 | 2013-06-04 | Oracle International Corporation | System and method for applying ranking SVM in query relaxation |
US20090325140A1 (en) * | 2008-06-30 | 2009-12-31 | Lou Gray | Method and system to adapt computer-based instruction based on heuristics |
CN104299061A (zh) * | 2013-07-20 | 2015-01-21 | 郑州学生宝电子科技有限公司 | 基于数据分析的学生成绩管理系统 |
CN105070109B (zh) * | 2015-09-01 | 2016-06-22 | 华中师范大学 | 一种基于云计算和物联网技术的混合式学习评价系统及方法 |
CN105549378A (zh) * | 2016-02-25 | 2016-05-04 | 湖南顺泊网络科技有限公司 | 一种新型学生智能手表及包括该手表的学生智能管理系统 |
CN106023012A (zh) * | 2016-05-12 | 2016-10-12 | 北京圣水龙兴文化传媒有限公司 | 一种基于云计算的学生行为分析方法及系统 |
CN107316257B (zh) * | 2017-06-06 | 2020-11-10 | 南京信息工程大学 | 一种基于课堂学生行为分析的教学质量评估方法及系统 |
-
2018
- 2018-01-15 CN CN201810035855.6A patent/CN108133046B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN108133046A (zh) | 2018-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2019204090B2 (en) | Networking flow logs for multi-tenant environments | |
CN108768943B (zh) | 一种检测异常账号的方法、装置及服务器 | |
CN110798472B (zh) | 数据泄露检测方法与装置 | |
US10740411B2 (en) | Determining repeat website users via browser uniqueness tracking | |
CN111404937B (zh) | 一种服务器漏洞的检测方法和装置 | |
US11184449B2 (en) | Network-based probabilistic device linking | |
CN112291264B (zh) | 一种安全控制的方法、装置、服务器和存储介质 | |
CN111885007A (zh) | 信息溯源方法、装置、系统及存储介质 | |
CN111327466B (zh) | 一种告警分析方法、系统、设备以及介质 | |
WO2021243197A1 (en) | Threat mitigation system and method | |
CN110990244B (zh) | 目标设备标识确定方法、装置、电子设备及可读存储介质 | |
CN113794731B (zh) | 识别基于cdn流量伪装攻击的方法、装置、设备和介质 | |
CN108876314B (zh) | 一种职业生涯专业能力可追溯方法及平台 | |
CN108133046B (zh) | 数据分析方法及装置 | |
CN115051867B (zh) | 一种非法外联行为的检测方法、装置、电子设备及介质 | |
Ogiela et al. | Transformative computing for distributed services management protocols | |
US11736336B2 (en) | Real-time monitoring of machine learning models in service orchestration plane | |
CN111866854B (zh) | 一种应用自动更新方法、装置、系统和计算机设备 | |
CN114448645A (zh) | 网页访问的处理方法、装置、存储介质、程序产品 | |
CN106961374B (zh) | 通讯方法、通讯终端及通讯服务端 | |
CN115550011A (zh) | 流量检测模型的处理方法及装置、存储介质和处理器 | |
CN116866208A (zh) | 物联网数据监控方法、装置、电子设备及可读存储介质 | |
CN118233318A (zh) | 一种质量分析方法、电子设备及存储介质 | |
CN116011568A (zh) | 安全资产知识图谱的构建方法及装置 | |
CN117879953A (zh) | 物联网攻击追踪方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Data analysis method and device Effective date of registration: 20220728 Granted publication date: 20210824 Pledgee: Agricultural Bank of China Limited by Share Ltd. Chengdu Wenjiang branch Pledgor: CHENGDU SKSPRUCE TECHNOLOGY, Inc. Registration number: Y2022980011424 |