CN109656979B - 数据统计分析方法、装置及存储介质 - Google Patents

数据统计分析方法、装置及存储介质 Download PDF

Info

Publication number
CN109656979B
CN109656979B CN201811581893.8A CN201811581893A CN109656979B CN 109656979 B CN109656979 B CN 109656979B CN 201811581893 A CN201811581893 A CN 201811581893A CN 109656979 B CN109656979 B CN 109656979B
Authority
CN
China
Prior art keywords
data
dotting
statistical analysis
chart
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811581893.8A
Other languages
English (en)
Other versions
CN109656979A (zh
Inventor
王斌
刘喜文
曹连超
祁宏伟
湛然
周加智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201811581893.8A priority Critical patent/CN109656979B/zh
Publication of CN109656979A publication Critical patent/CN109656979A/zh
Application granted granted Critical
Publication of CN109656979B publication Critical patent/CN109656979B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开是关于一种数据统计分析方法、装置及存储介质,属于大数据技术领域。所述方法包括:根据预配置的打点信息,获取打点信息对应的打点数据;其中,打点信息用于指示所需收集的数据;从打点数据中提取出统计分析所需的n个数据项,n为正整数;根据预配置的图表配置信息,生成n个数据项对应的统计分析图表;其中,图表配置信息用于指示统计分析图表的内容和样式。本公开通过预配置打点信息可以灵活选择所需采集的打点数据,通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式,从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控,充分满足多样化的数据统计分析需求。

Description

数据统计分析方法、装置及存储介质
技术领域
本公开实施例涉及大数据技术领域,特别涉及一种数据统计分析方法、装置及存储介质。
背景技术
随着信息化的发展,传统的技术已经不能满足呈爆炸式增长的数据的存储和计算需求,大数据技术应运而生。
在相关技术中,以对终端中安装运行的应用程序的运行数据进行统计分析为例,采用数据打点的方式收集应用程序的运行数据,然后通过数据统计分析平台对上述收集到的运行数据进行统计分析,得到所需的统计分析结果。
然而,上述相关技术提供的数据统计分析方法,灵活性较差。
发明内容
本公开实施例提供了一种数据统计分析方法、装置及存储介质。所述技术方案如下:
根据本公开实施例的第一方面,提供了一种数据统计分析方法,所述方法包括:
根据预配置的打点信息,获取所述打点信息对应的打点数据;其中,所述打点信息用于指示所需收集的数据;
从所述打点数据中提取出统计分析所需的n个数据项,所述n为正整数;
根据预配置的图表配置信息,生成所述n个数据项对应的统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
可选地,所述根据预配置的打点信息,获取所述打点信息对应的打点数据,包括:
将预配置的所述打点信息发送给目标设备,所述目标设备用于收集所述打点信息对应的所述打点数据;
接收所述目标设备发送的所述打点数据。
可选地,所述从所述打点数据中提取出统计分析所需的n个数据项,包括:
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的所述n个数据项;
接收所述数据分析系统发送的所述n个数据项。
可选地,所述方法还包括:
显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面;
根据对应于所述打点配置页面的配置操作,生成所述打点信息。
可选地,所述方法还包括:
显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面;
根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
可选地,所述方法还包括:
将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
根据本公开实施例的第二方面,提供了一种数据统计分析装置,所述装置包括:
数据获取模块,被配置为根据预配置的打点信息,获取所述打点信息对应的打点数据;其中,所述打点信息用于指示所需收集的数据;
数据项提取模块,被配置为从所述打点数据中提取出统计分析所需的n个数据项,所述n为正整数;
图表生成模块,被配置为根据预配置的图表配置信息,生成所述n个数据项对应的统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
可选地,所述数据获取模块,被配置为:
将预配置的所述打点信息发送给目标设备,所述目标设备用于收集所述打点信息对应的所述打点数据;
接收所述目标设备发送的所述打点数据。
可选地,所述数据项提取模块,被配置为:
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的所述n个数据项;
接收所述数据分析系统发送的所述n个数据项。
可选地,所述装置还包括:
第一显示模块,被配置为显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面;
第一生成模块,被配置为根据对应于所述打点配置页面的配置操作,生成所述打点信息。
可选地,所述装置还包括:
第二显示模块,被配置为显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面;
第二生成模块,被配置为根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
可选地,所述装置还包括:
数据预处理模块,被配置为将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
根据本公开实施例的第三方面,提供了一种数据统计分析装置,所述装置包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
根据预配置的打点信息,获取所述打点信息对应的打点数据;其中,所述打点信息用于指示所需收集的数据;
从所述打点数据中提取出统计分析所需的n个数据项,所述n为正整数;
根据预配置的图表配置信息,生成所述n个数据项对应的统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
根据本公开实施例的第四方面,提供了一种非临时性计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述方法的步骤。
本公开实施例提供的技术方案可以包括以下有益效果:
通过根据预配置的打点信息,获取打点信息对应的打点数据,然后从打点数据中提取出统计分析所需的数据项,最后根据预配置的图表配置信息,生成上述数据项对应的统计分析图表;由于打点信息和图表配置信息可以根据实际需求进行预先配置,通过预配置打点信息可以灵活选择所需采集的打点数据,通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式,从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控,充分满足多样化的数据统计分析需求。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种数据统计分析方法的流程图;
图2是根据一示例性实施例示出的一种场景架构的示意图;
图3是根据一示例性实施例示出的一种统计分析图表的示意图;
图4是根据另一示例性实施例示出的一种数据统计分析方法的流程图;
图5是根据另一示例性实施例示出的一种场景架构的示意图;
图6是根据另一示例性实施例示出的一种统计分析图表的示意图;
图7是根据一示例性实施例示出的一种数据统计分析装置的框图;
图8是根据另一示例性实施例示出的一种数据统计分析装置的框图;
图9是根据另一示例性实施例示出的一种数据统计分析装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种数据统计分析方法的流程图。本实施例以该方法应用于服务器中来举例说明。该方法可以包括如下几个步骤(101~103):
在步骤101中,根据预配置的打点信息,获取打点信息对应的打点数据。
在本公开实施例中,打点信息用于指示所需收集的数据,也即根据打点信息即可获知需要收集哪些数据。可选地,打点信息包括所需收集的数据的位置、类型、时间等信息。其中,所需收集的数据的位置用于指示从哪个/哪些地方收集数据,所需收集的数据的类型用于指示收集哪个/哪些类型的数据,所需收集的数据的时间用于指示收集哪个/哪些时段的数据。打点信息可以由用户根据需求进行预先配置,并由服务器生成。
打点信息对应的打点数据是指根据该打点信息,采用数据打点的方式收集获取的数据。数据打点是指针对特定事件或行为进行收集数据的过程,数据打点也称为数据埋点。
可选地,如果服务器从目标设备获取打点数据,则步骤101包括以下2个子步骤:
1、将预配置的打点信息发送给目标设备;
目标设备可以是终端,例如手机、平板电脑、PC(PersonalComputer,个人计算机)等电子设备,目标设备也可以是服务器,目标设备还可以是其它任意具有数据统计分析需求的设备,本公开实施例对此不作限定。在本公开实施例中,目标设备用于收集打点信息对应的打点数据。
2、接收目标设备发送的打点数据。
目标设备会根据预配置的打点信息,采用数据打点的方式收集与该打点信息对应的打点数据,并将收集到的打点数据发送给服务器。相应地,服务器接收目标设备发送的打点数据。
例如,当用户需要对2017年1月1日至2017年2月3日内终端的启动时间进行统计分析时,服务器会生成用于收集终端的启动时间的打点信息,并将该打点信息发送给终端,终端接收到该打点信息后,根据该打点信息收集2017年1月1日至2017年2月3日内的启动时间,打包成打点数据发送给服务器。服务器接收该打点数据后,对该打点数据进行统计分析。
在步骤102中,从打点数据中提取出统计分析所需的n个数据项,n为正整数。
服务器获取到的打点数据中可能包含一些无用的数据项,因此服务器需要对打点数据中提取出统计分析所需的若干个数据项。其中,统计分析所需的数据项是指在绘制统计分析图表时需要用到的数据项。在该提取过程中,可以对打点数据进行聚合、合并、关联、求最大值、求最小值等计算处理,得到统计分析所需的n个数据项。
服务器可以在本端从打点数据中提取出统计分析所需的n个数据项,也可以通过外部的数据分析系统从打点数据中提取出统计分析所需的n个数据项。可选地,当服务器通过外部的数据分析系统从打点数据中提取出统计分析所需的n个数据项时,上述步骤102包括以下2个子步骤:
1、将打点数据发送给数据分析系统;
数据分析系统是指用于对数据进行分析处理的系统。在本公开实施例中,数据分析系统用于从打点数据中提取出统计分析所需的n个数据项。示例性地,数据分析系统可以是Kylin系统、Druid系统等。Kylin系统技术成熟,能处理超大规模数据集;支持多种微处理器和计算机体系架构,可扩展性强;具有严格的安全机制,安全性高。在实际应用中,可以根据实际需求选择合适的数据分析系统。
2、接收数据分析系统发送的n个数据项。
数据分析系统接收到服务器发送的打点数据后,对该打点数据进行聚合、合并、关联、求最大值、求最小值等计算处理后,得到统计分析所需的n个数据项,并将该n个数据项发送给服务器。相应地,服务器接收数据分析系统发送的n个数据项。
在步骤103中,根据预配置的图表配置信息,生成n个数据项对应的统计分析图表。
在本公开实施例中,图表配置信息用于指示所要生成的统计分析图表的内容和样式。例如,统计分析图表的内容可以包括图表标题、图表横纵坐标对应的取值范围、图表横纵坐标对应的标签等。统计分析图表的样式包括条形图、折线图、柱形图、饼状图等。图表配置信息可以由用户根据需求进行预先配置,并存储在服务器中。
如图2所示,其示出了本公开实施例提供的一个场景架构的示意图。该场景架构中包括服务器21、目标设备22和数据分析系统23。服务器21将预配置的打点信息发送给目标设备22,目标设备22根据该打点信息收集打点数据,并将收集到的打点数据发送给服务器21。服务器21将打点数据发送给数据分析系统23,数据分析系统23对打点数据进行计算处理得到数据统计分析需要的数据项,并将该数据项发送给服务器21。服务器21根据预配置的图表配置信息,生成上述数据项对应的统计分析图表。
以目标设备22是终端,数据分析系统23是Kylin系统为例。用户需要对系统版本分别为版本1至版本9的终端的启动时间进行统计分析,则用户在服务器中预配置打点信息,该打点信息用于获取系统版本分别为版本1至版本9的终端的启动时间。服务器将该打点信息发送给多个终端。终端根据上述打点信息收集打点数据,该打点数据包括终端的启动时间,并将收集到的打点数据发送给服务器。
服务器获取到各个终端发送的打点数据之后,将打点数据发送给Kylin系统,由Kylin系统对系统版本分别为版本1至版本9的终端的启动时间进行取平均值处理,得到系统版本为版本1至版本9的终端的平均启动时间,即得到统计分析需要的数据项,Kylin系统将上述统计分析需要的数据项发送给服务器。
用户想要服务器生成如图3所示的统计分析图表,则用户在服务器中预配置图表配置信息,包括图表标题为平均启动时间趋势、横轴标签为版本号、纵轴标签为平均启动时间、图表样式为折线图等图表配置信息。服务器根据上述图表配置信息,生成如图3所示的统计分析图表。
综上所述,本公开实施例提供的技术方案中,通过根据预配置的打点信息,获取打点信息对应的打点数据,然后从打点数据中提取出统计分析所需的数据项,最后根据预配置的图表配置信息,生成上述数据项对应的统计分析图表;由于打点信息和图表配置信息可以根据实际需求进行预先配置,通过预配置打点信息可以灵活选择所需采集的打点数据,通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式,从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控,充分满足多样化的数据统计分析需求。
图4是根据另一示例性实施例示出的一种数据统计分析方法。本实施例以该方法应用于服务器中来举例说明。该方法可以包括如下几个步骤(401~408):
在步骤401中,显示打点配置页面。
在本公开实施例中,打点配置页面是用于配置打点信息的可视化界面。用户可以在打点配置页面中执行相关的配置操作,如输入或者选择打点信息。打点配置页面可以通过SuperSet或Grafana生成。
在步骤402中,根据对应于打点配置页面的配置操作,生成打点信息。
用户对打点配置页面进行配置,服务器接收对应于打点配置页面的配置操作,并根据该配置操作生成打点信息。
可选地,服务器获取到打点信息之后,将该打点信息发送给审核终端,审核终端的审核员会对打点信息进行审核,审核员会驳回非法的配置操作。通过审核的打点信息会存储到服务器中。
在步骤403中,根据预配置的打点信息,获取打点信息对应的打点数据。
步骤403与上述图1实施例中的步骤101相同或类似,有关步骤403的介绍说明可参见上文图1实施例,此处不再赘述。
在步骤404中,将打点数据发送给数据预处理系统,数据预处理系统用于对打点数据执行数据清洗操作,得到处理后的打点数据。
数据预处理是指在对数据分析处理之前对数据进行的一些预先处理。数据预处理系统包括但不限于以下至少一种:MapReduce系统、Spark系统、ApacheHive系统。
数据清洗操作包括但不限于以下至少一种:缺失值清洗、格式内容清洗、逻辑错误清洗以及非需求数据清洗。缺失值清洗包括确定缺失值范围、填充缺失内容;格式内容清洗包括去除显示格式不一致的字段、去除不该存在的字段;逻辑错误清洗包括去重、去除不合理值、修正矛盾内容;非需求数据清洗包括去除不需要的字段。
在本公开实施例中,对打点数据执行数据清洗操作,有助于提高打点数据的质量,进而有助于提高从打点数据中提取统计分析所需的数据项的效率。
在步骤405中,从处理后的打点数据中提取出统计分析所需的n个数据项,n为正整数。
步骤405与上述图1实施例中的步骤102相同或类似,有关步骤405的介绍说明可参见上文图1实施例,此处不再赘述。
在步骤406中,显示图表配置页面。
在本公开实施例中,图表配置页面是用于配置图表配置信息的可视化界面。用户可以在图表配置页面中执行相关的配置操作,如输入或者选择图表配置信息。图表配置页面可以通过SuperSet或Grafana生成。
在步骤407中,根据对应于图表配置页面的配置操作,生成图表配置信息。
用户对图表配置页面进行配置,服务器接收对应于图表配置页面的配置操作,并根据该配置操作生成图表配置信息。
在步骤408中,根据预配置的图表配置信息,生成n个数据项对应的统计分析图表。
步骤408与上述图1实施例中的步骤103相同或类似,有关步骤408的介绍说明可参见上文图1实施例,此处不再赘述。
需要说明的一点是,上述步骤406-407可以在步骤405之后执行,也可以在步骤405之前执行,本公开实施例对此不作限定。
如图5所示,其示出了本公开实施例提供的另一个场景架构的示意图。该场景架构中包括服务器21、目标设备22、数据分析系统23和数据预处理系统24。服务器21显示打点配置页面,并根据对应于打点配置页面的配置操作,生成打点信息,然后将预配置的打点信息发送给目标设备22。目标设备22根据该打点信息收集打点数据,并将收集到的打点数据发送给服务器21。服务器21将打点数据发送给数据预处理系统24。数据预处理系统24对打点数据执行数据清洗操作,得到处理后的打点数据,然后将处理后的打点数据发送给服务器21。服务器21将处理后的打点数据发送给数据分析系统23。数据分析系统23对打点数据进行计算处理得到数据统计分析需要的数据项,并将该数据项发送给服务器21。服务器21显示图表配置页面,并根据对应于图表配置页面的配置操作,生成图表配置信息。服务器21根据预配置的打点信息,生成数据项对应的统计分析图表。
以目标设备22是终端,数据分析系统23是Kylin系统,数据预处理系统24是Spark系统为例。用户需要对耗电异常类型为Kernel-wakelock的底层应用进行排名。首先,用户在服务器提供的打点配置页面中配置打点信息,该打点信息用于获取2017年1月1日至2017年2月2日内的耗电异常类型为Kernel-wakelock的底层应用。服务器将该预配置的打点信息发送给多个终端。终端根据打点信息收集打点数据,即发生耗电异常类型为Kernel-wakelock的底层应用,包括底层应用1至底层应用15,并将收集到的打点数据发送给服务器。
服务器获取到各个终端发送的打点数据之后,将打点数据发送给Spark系统,Spark系统对打点数据进行数据清洗操作,得到处理后的打点数据。
服务器将该处理后的打点数据发送给Kylin系统,由Kylin系统对上述处理后的打点数据进行计算,得到耗电异常类型为Kernel-wakelock的不同底层应用的平均每天异常用户比例,即统计分析需要的数据项,Kylin将上述统计分析需要的数据项发送给服务器。
用户想要服务器生成如图6所示的统计分析图表,则用户配置图表配置信息,包括图表标题为底层耗电-异常排名、横轴标签为平均每天异常用户比例、纵轴标签为底层应用、图表样式为条形图等图表配置信息。服务器根据上述图表配置信息,生成如图6所示的统计分析图表。
综上所述,本公开实施例提供的技术方案中,通过提供可视化的打点配置页面和图表配置页面,使得用户能够在上述页面中配置打点信息和图表配置信息,更加直观便捷。
另外,在从打点数据中提取统计分析所需的数据项之前,先通过数据预处理系统对打点数据进行数据清理操作,有助于提高打点数据的质量,进而有助于提高从打点数据中提取统计分析所需的数据项的效率。
下述为本公开装置实施例,可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节,请参照本公开方法实施例。
图7是根据一示例性实施例示出的一种数据统计分析装置的框图,该装置具有实现上述方法示例的功能,所述功能可以由硬件实现,也可以由硬件执行相应的软件实现。该装置可以是上文介绍的服务器,也可以设置在服务器中。如图7所示,该装置700可以包括:数据获取模块710、数据项提取模块720和图表生成模块730。
所述数据获取模块710,被配置为根据预配置的打点信息,获取所述打点信息对应的打点数据;其中,所述打点信息用于指示所需收集的数据。
所述数据项提取模块720,被配置为从所述打点数据中提取出统计分析所需的n个数据项,所述n为正整数。
所述图表生成模块730,被配置为根据预配置的图表配置信息,生成所述n个数据项对应的统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
综上所述,本公开实施例提供的技术方案中,通过根据预配置的打点信息,获取打点信息对应的打点数据,然后从打点数据中提取出统计分析所需的数据项,最后根据预配置的图表配置信息,生成上述数据项对应的统计分析图表;由于打点信息和图表配置信息可以根据实际需求进行预先配置,通过预配置打点信息可以灵活选择所需采集的打点数据,通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式,从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控,充分满足多样化的数据统计分析需求。
可选地,所述数据获取模块710,被配置为:
将预配置的所述打点信息发送给目标设备,所述目标设备用于收集所述打点信息对应的所述打点数据;
接收所述目标设备发送的所述打点数据。
可选地,所述数据项提取模块720,被配置为:
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的所述n个数据项;
接收所述数据分析系统发送的所述n个数据项。
可选地,如图8所示,所述装置700还包括:第一显示模块740和第一生成模块770。
所述第一显示模块740,被配置为显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面。
所述第一生成模块770,被配置为根据对应于所述打点配置页面的配置操作,生成所述打点信息。
可选地,所述装置700还包括:第二显示模块760和第二生成模块770。
所述第二显示模块760,被配置为显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面。
所述第二生成模块770,被配置为根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
可选地,所述装置700还包括:数据预处理模块780。
所述数据预处理模块780,被配置为将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
需要说明的一点是,上述实施例提供的装置在实现其功能时,仅以上述各个功能模块的划分进行举例说明,实际应用中,可以根据实际需要而将上述功能分配由不同的功能模块完成,即将设备的内容结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开一示例性实施例还提供了一种数据统计分析装置,能够实现本公开提供的数据统计分析方法。该装置包括:处理器,以及用于存储处理器的可执行指令的存储器。其中,处理器被配置为:
根据预配置的打点信息,获取所述打点信息对应的打点数据;其中,所述打点信息用于指示所需收集的数据;
从所述打点数据中提取出统计分析所需的n个数据项,所述n为正整数;
根据预配置的图表配置信息,生成所述n个数据项对应的统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
可选地,所述处理器被配置为:
将预配置的所述打点信息发送给目标设备,所述目标设备用于收集所述打点信息对应的所述打点数据;
接收所述目标设备发送的所述打点数据。
可选地,所述处理器被配置为:
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的所述n个数据项;
接收所述数据分析系统发送的所述n个数据项。
可选地,所述处理器还被配置为:
显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面;
根据对应于所述打点配置页面的配置操作,生成所述打点信息。
可选地,所述处理器还被配置为:
显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面;
根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
可选地,所述处理器还被配置为:
将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
图9是根据另一示例性实施例示出的一种数据统计分析装置900的框图。例如,装置900可以被提供为一服务器。参照图9,装置900包括处理组件922,其进一步包括一个或多个处理器,以及由存储器932所代表的存储器资源,用于存储可由处理部件922执行的指令,例如应用程序。存储器932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件922被配置为执行指令,以执行上述数据统计分析方法。
装置900还可以包括一个电源组件926被配置为执行装置900的电源管理,一个有线或无线网络接口950被配置为将装置900连接到网络,和一个输入输出(I/O)接口958。装置900可以操作基于存储在存储器932的操作系统,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
在示例性实施例中,还提供了一种非临时性计算机可读存储介质,其上存储有计算机程序,上述计算机程序可由装置900的处理组件922执行以完成上述数据统计分析方法。
例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
应当理解的是,在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种数据统计分析方法,其特征在于,应用于服务器中,所述方法包括:
将预配置的打点信息发送给目标设备;其中,所述打点信息用于指示所需收集的数据,所述目标设备用于收集所述打点信息对应的打点数据,所述目标设备是指具有数据统计分析需求的设备;
接收所述目标设备发送的所述打点数据,所述打点数据是指根据所述打点信息,采用数据打点的方式收集获取的数据;
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的n个数据项,统计分析所需的数据项是指在绘制统计分析图表时需要用到的数据项,所述n为正整数;
接收所述数据分析系统发送的所述n个数据项;
根据预配置的图表配置信息,生成所述n个数据项对应的所述统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面;
根据对应于所述打点配置页面的配置操作,生成所述打点信息。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面;
根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述方法还包括:
将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
5.一种数据统计分析装置,其特征在于,所述装置包括:
数据获取模块,被配置为将预配置的打点信息发送给目标设备;其中,所述打点信息用于指示所需收集的数据,所述目标设备用于收集所述打点信息对应的打点数据,所述目标设备是指具有数据统计分析需求的设备;接收所述目标设备发送的所述打点数据,所述打点数据是指根据所述打点信息,采用数据打点的方式收集获取的数据;
数据项提取模块,被配置为将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的n个数据项,统计分析所需的数据项是指在绘制统计分析图表时需要用到的数据项,所述n为正整数;接收所述数据分析系统发送的所述n个数据项,所述n为正整数;
图表生成模块,被配置为根据预配置的图表配置信息,生成所述n个数据项对应的所述统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
第一显示模块,被配置为显示打点配置页面,所述打点配置页面是用于配置所述打点信息的可视化界面;
第一生成模块,被配置为根据对应于所述打点配置页面的配置操作,生成所述打点信息。
7.根据权利要求5所述的装置,其特征在于,所述装置还包括:
第二显示模块,被配置为显示图表配置页面,所述图表配置页面是用于配置所述图表配置信息的可视化界面;
第二生成模块,被配置为根据对应于所述图表配置页面的配置操作,生成所述图表配置信息。
8.根据权利要求5至7任一项所述的装置,其特征在于,所述装置还包括:
数据预处理模块,被配置为将所述打点数据发送给数据预处理系统,所述数据预处理系统用于对所述打点数据执行数据清洗操作,得到处理后的打点数据;
其中,所述n个数据项从所述处理后的打点数据中提取。
9.一种数据统计分析装置,其特征在于,所述装置包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
将预配置的打点信息发送给目标设备;其中,所述打点信息用于指示所需收集的数据,所述目标设备用于收集所述打点信息对应的打点数据,所述目标设备是指具有数据统计分析需求的设备;
接收所述目标设备发送的所述打点数据,所述打点数据是指根据所述打点信息,采用数据打点的方式收集获取的数据;
将所述打点数据发送给数据分析系统,所述数据分析系统用于从所述打点数据中提取出统计分析所需的n个数据项,统计分析所需的数据项是指在绘制统计分析图表时需要用到的数据项,所述n为正整数;
接收所述数据分析系统发送的所述n个数据项,所述n为正整数;
根据预配置的图表配置信息,生成所述n个数据项对应的所述统计分析图表;其中,所述图表配置信息用于指示所述统计分析图表的内容和样式。
10.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法的步骤。
CN201811581893.8A 2018-12-24 2018-12-24 数据统计分析方法、装置及存储介质 Active CN109656979B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811581893.8A CN109656979B (zh) 2018-12-24 2018-12-24 数据统计分析方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811581893.8A CN109656979B (zh) 2018-12-24 2018-12-24 数据统计分析方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN109656979A CN109656979A (zh) 2019-04-19
CN109656979B true CN109656979B (zh) 2021-05-04

Family

ID=66116484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811581893.8A Active CN109656979B (zh) 2018-12-24 2018-12-24 数据统计分析方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN109656979B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110941608B (zh) * 2019-09-29 2023-01-20 北京思维造物信息科技股份有限公司 一种埋点分析和漏斗分析报表生成方法、装置及设备
CN110796364A (zh) * 2019-10-28 2020-02-14 广州三人行壹佰教育科技有限公司 在线课堂的质检方法、装置、电子设备及存储介质
CN112214504A (zh) * 2020-10-12 2021-01-12 上海酷量信息技术有限公司 一种打点事件统计方法、装置及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106250480A (zh) * 2016-08-01 2016-12-21 浪潮软件集团有限公司 一种基于元数据的可视化统计分析方法
CN107256219A (zh) * 2017-04-24 2017-10-17 卡斯柯信号有限公司 应用于自动列车控制系统海量日志的大数据融合分析方法
CN107451149A (zh) * 2016-05-31 2017-12-08 北京京东尚科信息技术有限公司 流量数据查询任务的监控方法及其装置
CN108228874A (zh) * 2018-01-18 2018-06-29 北京邮电大学 基于人工智能技术的通用知识图谱可视化装置及方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101048732A (zh) * 2004-08-31 2007-10-03 国际商业机器公司 面向对象的数据集成服务体系结构
WO2008055226A2 (en) * 2006-10-31 2008-05-08 Gwen Magrisso Appraisal evaluation and scoring system and method
CN105677622B (zh) * 2016-03-11 2019-05-10 郑州师范学院 大数据分析报告自动生成系统
CN108897664B (zh) * 2018-06-28 2019-10-11 北京九章云极科技有限公司 一种信息展示方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107451149A (zh) * 2016-05-31 2017-12-08 北京京东尚科信息技术有限公司 流量数据查询任务的监控方法及其装置
CN106250480A (zh) * 2016-08-01 2016-12-21 浪潮软件集团有限公司 一种基于元数据的可视化统计分析方法
CN107256219A (zh) * 2017-04-24 2017-10-17 卡斯柯信号有限公司 应用于自动列车控制系统海量日志的大数据融合分析方法
CN108228874A (zh) * 2018-01-18 2018-06-29 北京邮电大学 基于人工智能技术的通用知识图谱可视化装置及方法

Also Published As

Publication number Publication date
CN109656979A (zh) 2019-04-19

Similar Documents

Publication Publication Date Title
CN109656979B (zh) 数据统计分析方法、装置及存储介质
CN104995865B (zh) 基于声音和/或面部辨识的服务提供
CN107301007B (zh) 功能菜单显示方法及系统
CN108376117B (zh) 交互响应的测试方法和设备
US20190228227A1 (en) Method and apparatus for extracting a user attribute, and electronic device
US10313746B2 (en) Server, client and video processing method
CN108133406B (zh) 信息显示方法、装置、电子设备及计算机可读存储介质
CN115426525B (zh) 一种基于高速动帧联动图像拆分方法及装置
CN111130987A (zh) Awr报告自动获取方法、装置、电子设备及存储介质
CN110191356A (zh) 视频审核方法、装置和电子设备
US20170099177A1 (en) In-vehicle information system and information processing method thereof
JP2019520617A (ja) 広告生成方法、コンピュータ読み取り可能な記憶媒体及びシステム
CN110782169A (zh) 更新业务流程方法和装置
WO2019062404A1 (zh) 应用程序的处理方法、装置、存储介质及电子设备
CN113254016A (zh) 界面生成方法、界面信息处理方法、设备及存储介质
CN109102556A (zh) 编辑工具的配置方法和配置参数的生成方法
CN110362470A (zh) 测试数据收集方法、装置、电子设备及存储介质
CN111210232B (zh) 一种数据处理方法、装置及电子设备
CN114663139A (zh) 资源位的处理方法、装置、存储介质和处理器
CN115062217A (zh) 基于人工智能的设计师匹配方法、装置、设备及存储介质
CN104750823B (zh) 推广情况数据的查询方法及装置
CN108520063A (zh) 事件日志的处理方法、装置及终端设备
CN109271122B (zh) 一种基于双显示屏的文件显示方法、装置及设备
CN112634088A (zh) 房源动态信息推送方法及装置
CN111125501B (zh) 用于处理信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant