CN109948077A - 用户行为数据采集方法、装置、设备和计算机存储介质 - Google Patents

用户行为数据采集方法、装置、设备和计算机存储介质 Download PDF

Info

Publication number
CN109948077A
CN109948077A CN201810953063.7A CN201810953063A CN109948077A CN 109948077 A CN109948077 A CN 109948077A CN 201810953063 A CN201810953063 A CN 201810953063A CN 109948077 A CN109948077 A CN 109948077A
Authority
CN
China
Prior art keywords
webpage
user
acquisition
acquisition control
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810953063.7A
Other languages
English (en)
Other versions
CN109948077B (zh
Inventor
林泽全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Printing Co ltd
Shenzhen Lian Intellectual Property Service Center
Original Assignee
Ping An Puhui Enterprise Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Puhui Enterprise Management Co Ltd filed Critical Ping An Puhui Enterprise Management Co Ltd
Priority to CN201810953063.7A priority Critical patent/CN109948077B/zh
Publication of CN109948077A publication Critical patent/CN109948077A/zh
Application granted granted Critical
Publication of CN109948077B publication Critical patent/CN109948077B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本发明公开了一种用户行为数据采集方法,包括以下步骤:接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识;获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件;若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;在网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;并将采集的所述用户行为数据上传至服务器。本发明还公开了一种用户行为数据采集装置、设备和计算机存储介质。本发明旨在便捷高效地进行用户行为数据采集分析。

Description

用户行为数据采集方法、装置、设备和计算机存储介质
技术领域
本发明涉及数据处理领域,尤其涉及用户行为数据采集方法、装置、设备和计算机存储介质。
背景技术
现有的随着移动互联网行业的迅速发展,应用软件作为移动互联网入口的载体,吸引着越来越多的用户使用。
应用软件的开发者在对应用软件做推广运营的过程中,针对应用软件中的用户行为数据分析的重要性也日益体现。用户行为数据处理包括:用户行为数据采集和用户行为数据分析;现有的用户行为数据采集是通过代码埋点的方式进行,代码埋点需要在应用软件代码开发过程中,在指定的位置内进行插入代码,在用户使用应用软件时,会触发所插入的代码进行用户行为数据采集,并将采集的用户行为数据上传至服务器进行分析处理;这样的用户行为数据分析处理方法,导致开发人员的工作量较大,代码埋点导致代码可读性变差;再出现新的埋点需求时,要针对代码进行修改。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种用户行为数据采集方法、装置、设备和计算机存储介质,旨在便捷高效地进行用户行为数据采集分析。
为实现上述目的,本发明提供一种用户行为数据采集方法,所述用户行为数据采集方法包括以下步骤:
接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识;
获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件;
若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
可选地,所述接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识的步骤之前,包括:
确定待采集事件,按预设编码规则生成所述待采集事件对应的采集指令,并将所述采集指令添加至预设采集模板中生成采集控件;
所述当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤,包括:
当检测到所述网络页面加载完成时,调用所述采集控件;
接收用户操作指令,获取所述用户操作指令中的操作事件,将所述操作事件与所述待采集事件进行比对;
若所述操作事件与所述待采集事件匹配,则触发所述待采集事件对应的所述采集指令,并根据所述采集指令采集所述网络页面上的用户行为数据。
可选地,所述若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中的步骤,包括:
若所述网络页面中不包含采集控件,则获取所述网络页面的页面数据接口;
获取所述应用软件中的采集控件,将所述采集控件通过所述页面数据接口导入至所述网络页面中。
可选地,所述获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件的步骤之后,包括:
若所述网络页面中包含采集控件,则获取第一采集控件的控件标识和第二采集控件的控件标识,并根据所述控件标识判断所述第一采集控件与所述第二采集控件是否相同,其中,所述第一采集控件是指网络页面中的采集控件,所述第二采集控件是指所述应用软件中的采集控件;
若所述第一采集控件与所述第二采集控件不同,则删除所述第一采集控件,并将所述第二采集控件导入至所述网络页面中;
若所述第一采集控件与所述第二采集控件相同,则执行当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤。
可选地,所述获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器的步骤,包括:
获取所述用户行为数据,将所述用户行为数据按预设清洗规则进行数据清洗,得到目标行为数据;
对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器。
可选地,所述对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器的步骤之后,包括:
将所述用户指标数据保存至本地存储中的用户数据表;
接收产品查询请求,获取所述产品查询请求中包含的查询维度,并获取所述用户数据表中所述查询维度对应的目标用户指标数据;
获取预设产品列表中与所述目标用户指标数据匹配的产品信息,并显示所述产品信息,以供用户查看。
可选地,所述将所述用户指标数据保存至本地存储中的用户数据表的步骤之后,包括:
当检测到所述用户数据表的占用存储空间超过阈值时,获取所述用户数据表中各用户指标数据的保存时间;
将所述保存时间超过预设时间的用户指标数据作为待删除用户指标数据,并删除所述待删除用户指标数据。
此外,为实现上述目的,本发明还提供一种用户行为数据采集装置;
所述用户行为数据采集装置包括:
接收模块,用于接收用户基于应用软件触发的页面加载请求;
获取模块,用于获取所述页面加载请求中包含的页面标识,所述页面标识对应的网络页面及其所述网络页面的页面标签;
判断模块,用于根据所述页面标签判断所述网络页面中是否包含采集控件;
控件导入模块,用于若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
控件调用模块,用于当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
数据上传模块,用于获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
此外,为实现上述目的,本发明还提供一种用户行为数据采集设备;
所述用户行为数据采集设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其中:
所述计算机程序被所述处理器执行时实现上述的用户行为数据采集方法的步骤。
此外,为实现上述目的,本发明还提供计算机存储介质;
所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述的用户行为数据采集方法的步骤。
本发明实施例提出的一种用户行为数据采集方法、装置、设备和计算机存储介质,通过终端接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识;获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件;若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器,本申请中用户不需要在网络页面对应的代码中进行埋点,减少了开发人员的工作量,由于避免了侵入式的埋点,使得网络页面对应的代码可读性变强,同时减少了的埋点维护成本;与此同时,开发人员可以对采集控件进行实时更新,保证了用户行为数据采集的准确、提高了采集处理的便捷性。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的装置结构示意图;
图2为本发明用户行为数据采集方法第一实施例的流程示意图;
图3为本发明用户行为数据采集装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端(又叫用户行为数据采集设备,其中,用户行为数据采集设备可以是由单独的用户行为数据采集装置构成,也可以是由其他装置与用户行为数据采集装置组合形成)结构示意图。
本发明实施例终端可以固定终端,也可以是移动终端,其中,固定终端如“物联网设备”、带联网功能的智能空调、智能电灯、智能电源等等;移动终端,如带联网功能的智能音箱、自动驾驶汽车、PC(personal computer)个人计算机,智能手机、平板电脑、电子书阅读器、便携计算机等具有显示功能的终端设备。
如图1所示,该终端可以包括:处理器1001,例如中央处理器Central ProcessingUnit,CPU),网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity,WIFI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块;输入单元,比显示屏,触摸屏;网络接口可选除无线接口中除WiFi外,蓝牙、探针、3G/4G/5G(前面的数字表示的是蜂窝移动通信网络的代数。就是表示是第几代的网络。英文字母G表示generation)联网基站设备等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,该计算机软件产品存储在一个存储介质(存储介质:又叫计算机存储介质、计算机介质、可读介质、可读存储介质、计算机可读存储介质或者直接叫介质等,如RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及计算机程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的计算机程序,并执行本发明以下实施例提供的用户行为数据采集方法中的步骤。
参照图2,本发明一种用户行为数据采集方法的第一实施例中,所述用户行为数据采集方法包括:
接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识;
获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件;
若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器
在本申请第一实施例中步骤之前,需要预先生成采集控件:
其中,生成采集控件的步骤为:确定待采集事件,按预设编码规则生成所述待采集事件对应的采集指令,并将所述采集指令添加至预设采集模板中生成采集控件。
本实施例中用户行为数据采集方法,在用户行为数据采集时不需要在程序中进行埋点,只需要将应用软件(应用软件又叫APP壳、或者webview控件,是有着APP外壳的网页内容,APP壳是用超文本标记语言HTML写页面用封装的JavaScript调用底层功能来模仿原生APP功能,即,APP壳是开发人员用HTML配合JavaScript把所有内容都做好打包成安装的APP)中的采集控件导入到用户加载的网络页面中,就可以进行用户行为数据的采集。在利用采集控件进行用户行为数据采集的步骤之前,需要生成一个采集控件,具体地,开发人员确定网络页面中待采集事件,其中,待采集事件包括:“点击”、“滑动”和/或“浏览停留时间”等事件,并将待采集事件按预设规则(预设规则是指预先设置的用户行为数据的采集指令生成规则)编码生成待采集事件对应的采集指令,在采集指令生成完成后,将采集指令添加至预设采集模板(预设采集模板是指开发人员预先设置的用户行为数据采集代码的框架)中生成采集控件。
在本实施例中软件开发者不需要每一应用软件、或者网络页面上都设置用户行为采集指令对应的代码,只需要在APP壳中设置采集控件,在用户基于APP壳加载网络页面时,就可以将采集控件注入到网络页面中,进行用户行为数据的采集,不需要重复设置用户行为的采集语句,方便了开发者的工作,使得软件程序更加简洁。
具体地,本申请所述用户行为数据采集方法第一实施例包括:
步骤S10,接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识。
用户通过手机中安装的应用软件中设置采集控件(采集控件可理解为用户行为数据采集程序)触发的页面加载请求,终端获取页面加载请求中包含的页面标识,其中,页面标识是指唯一识别网络页面的标识信息,以根据页面标识进行网络页面的加载。
步骤S20,获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件。
终端获取页面标识对应的网络页面,及其网络页面的页面标签,其中,页面标签中标记有网络页面的属性信息,例如,页面标签中记录有该网络页面中的数据类型,该网络页面中包含的控件信息;终端根据页面标签中的属性信息,判断网络页面中是否包含采集控件,即,终端根据页面标签中是否包含控件标识,判断网络页面中是否包含采集控件。
步骤S30,若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中。
若网络页面中不包含采集控件,则终端获取应用软件中的采集控件,并将采集控件导入至所述网络页面中,其中,采集控件导入至所述网络页面中是指将采集控件输入至网络页面对应的代码中,在网络页面对应的代码运行是可以调用该采集控件;具体地,终端获取网络页面的页面数据接口,将获取的采集控件通过所述页面数据接口导入至网络页面中。
进一步地,所述步骤S30包括:
步骤S31,若所述网络页面中不包含采集控件,则获取所述网络页面的页面数据接口。
步骤S32,获取所述应用软件中的采集控件,将所述采集控件通过所述页面数据接口导入至所述网络页面中。
在本实施例中将用户不需要在网络页面中的代码中设置的数据采集程序,只需要将设置的采集控件导入到网络页面中就可以对网络页面中用户行为数据进行采集,增强的网络页面代码的可读性。
步骤S40,当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据。
在网络页面加载完成时停止数据传输,在检测到终端网络页面的数据传输量为零时,网络页面加载完成,终端调用网络页面中导入的采集控件,以通过采集控件进行用户行为数据的采集。
具体的,通过采集控件进行用户行为采集的一种实现方式包括:
步骤a1,当检测到所述网络页面加载完成时,调用所述采集控件;
步骤a2,接收用户操作指令,获取所述用户操作指令中的操作事件,将所述操作事件与所述待采集事件进行比对;
步骤a3,若所述操作事件与所述待采集事件匹配,则触发所述待采集事件对应的所述采集指令,并根据所述采集指令采集所述网络页面上的用户行为数据。
终端检测到网络页面(网络页面又叫H5页面)加载完成时,终端自动调用采集控件中采集指令,执行用户行为数据的采集操作,即,采集控件会接收用户操作指令,获取操作指令中的操作事件,将操作事件与待采集事件进行比对;确定用户操作触发的操作事件是否为待采集事件,若用户操作触发的操作事件是待采集事件匹配,则采集网络页面上的用户行为数据。
在本实施例中在检测到用户基于APP加载网络页面时,加载对应的网络页面,并将APP壳中的采集控件输入到网络页面对应的代码中,采集控件中设置了需要采集的用户行为类型,用户行为次数等,网络页面就可以根据采集控件对网络页面上用户行为数据进行监听。例如,采集控件中包括采集用户“点击”、“滑动”的操作,在加载完成网络页面时,若用户在网络页面上进行“点击”、“滑动”、等操作时,采集控件就可以将用户的“点击”、“滑动”等事件进行采集。本实施例中可以实时地进行用户行为数据的采集,避免了现有埋点采集埋点采集用户行为不够准确、不够及时、内容不够丰富的弊端。
此外,本实施例还提供了通过采集控件进行用户行为采集的另一种实现方式包括:
步骤b1,确定网络页面中的待采集区域,并获取待采集区域的数据接口,将采集控件进行导入,以对待采集区域的用户行为数据进行采集;
步骤b2,监听待采集区域中的用户操作对应的事件信息,并将该事件信息作为网络页面上的用户行为数据。
本实施例中可以对网络页面中的各区域进行重点采集,使得采集的用户行为数据更加具有针对性。在本实施例中用户不需要在网络页面对应的代码中进行埋点,减少了开发人员的工作量,由于避免了侵入式的埋点,使得网络页面对应的代码可读性变强,同时减少了的埋点维护成本。
步骤S50,获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
终端获取用户行为数据,并将用户行为数据按预设处理规则(其中,预设处理规则是预先设置的用户行为数据处理的规则,根据用户行为数据的可以灵活设置处理规则,其中,本实施例中的预设处理规则可包括数据清洗规则,数据分类规则、数据统计规则等等)处理并上传至服务器。
具体地,在本实施例中提供了一种用户数据处理的具体实现方式:
步骤c1,获取所述用户行为数据,将所述用户行为数据按预设清洗规则进行数据清洗,得到目标行为数据;
步骤c2,对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器。
即,终端获取用户行为数据,将用户行为数据按预设清洗规则进行数据清洗,其中,预设清洗规则是指预先设置的冗余数据删除规则,得到目标行为数据;终端目标行为数据进行分类统计,得到用户指标数据,终端将用户指标数据上传至服务器,其中,用户指标数据是指根据目标行为数据进行分类统计得到的数据,可以通过用户指标数据对用户的行为进行评估。
例如,网络页面为金融产品推荐页面,采集到的用户行为数据为用户点击保险产品A查看3次,浏览时间分别为10秒、12秒和14秒;用户点击保险产品B查看2次,浏览时间分别为30秒和25秒;用户点击保险产品C查看1次,浏览时间为5秒,用户浏览网络页面上的广告推送3秒,并点击关闭了网络页面上的广告推送,则终端根据预设清洗规则将浏览的广告推送3秒的信息进行删除,得到用户对保险产品A、保险产品B和保险产品C的目标行为数据的,并将目标行为数据以产品为维度进行分类统计,得到用户指标数据,即,本实施例中根据保险产品A浏览总时间36秒,关注度为二级、保险产品B浏览总时间55秒,关注度为一级和保险产品C浏览总时间5秒,关注度为三级,并将处理完成的用户指标数据上传至服务器。
本实施例中在终端进行了用户行为数据的处理,减少了终端与服务器的数据传输量,避免了相同数据的重复传输,减少了网络资源的利用率。
进一步的,在本发明第一实施例的基础上,进一步提出了本发明用户行为数据采集方法的第二实施例,本发明第二实施例是基于采集控件更新提出的,在本实施例中出现采集控件时,不需更改网络页面中的代码。
具体地,所述用户行为数据采集方法包括:
步骤S60,若所述网络页面中包含采集控件,则获取第一采集控件的控件标识和第二采集控件的控件标识,并根据所述控件标识判断所述第一采集控件与所述第二采集控件是否相同。
其中,所述第一采集控件是指网络页面中的采集控件,所述第二采集控件是指所述应用软件中的采集控件。
终端确定网络页面中包含采集控件,则终端获取网络页面中第一采集控件的控件标识和应用软件中第二采集控件的控件标识,终端将网络页面中第一采集控件的控件标识与应用软件中第二采集控件的控件标识进行比对,以判断所述第一采集控件与所述第二采集控件是否相同,若网络页面中第一采集控件的控件标识和应用软件中第二采集控件的控件标识相同,则第一采集控件与所述第二采集控件相同;若网络页面中第一采集控件的控件标识和应用软件中第二采集控件的控件标识不同,则第一采集控件与所述第二采集控件不同。
步骤S70,若所述第一采集控件与所述第二采集控件不同,则删除所述第一采集控件,并将所述第二采集控件导入至所述网络页面中。
具体地,若终端确定第一采集控件与所述第二采集控件不同,即,终端应用软件中的采集控件进行了更新,终端删除网络页面中当前的采集控件,并将应用软件中的第二采集控件导入至所述网络页面中。若所述第一采集控件与所述第二采集控件相同,则执行当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤。具体地,终端根据可以控件标识确定采集控件是否出现了更新,若采集控件出现了更新则对删除网络页面上的采集控件,并将应用软件采集控件导入至所述网络页面中,方便的了软件开发人员的操作。
在本实施例中开发人员可以对采集控件进行实时更新,保证了用户行为数据采集的准确、提高了采集处理的便捷性,在需要更改采集的用户行为数据时,终端可以对于应用软件中的采集控件进行更改,在用户基于应用软件触发的页面加载请求时,就可以将应用软件中新的采集控件进行重新的导入,不需要服务器对网络页面中的代码再进行更改,使得用户行为数据的采集更加便捷。
在本发明第一实施例的基础上,进一步提出了本发明用户行为数据采集方法的第三实施例,在本实施例中终端可以基于采集的用户行为数据为用户推荐需要的产品。
具体地,所述用户行为数据采集方法包括:
步骤S80,将所述用户指标数据保存至本地存储中的用户数据表;
终端获取处理完成的用户指标数据,并将用户指标数据保存至本地存储中的用户数据表,终端可根据用户数据表中的用户指标数据进行用户查看推荐,具体地:
步骤S90,接收产品查询请求,获取所述产品查询请求中包含的查询维度,并获取所述用户数据表中所述查询维度对应的目标用户指标数据。
用户在终端上触发产品查询请求时,终端接收产品查询请求,并获取产品查询请求中的查询维度,其中,所述查询维度根据具体场景设置,例如,查询维度可以设置为用户查询的产品类型,终端获取用户数据表中该产品类型对应的用户指标数据,作为目标用户指标数据。
步骤S100,获取预设产品列表中与所述目标用户指标数据匹配的产品信息,并显示所述产品信息,以供用户查看。
终端将预设产品列表中各产品的产品信息与所述目标用户指标数据进行比对,获取预设产品列表中与所述目标用户指标数据匹配的产品信息,并显示所述产品信息,以供用户查看。
本实施例中终端利用本地存储中的用户指标数据,在用户查询产品根据用户指标数据进行用户产品推荐,使得用户产品查询更加智能。
进一步地,所述步骤S80之后还包括:
步骤S110,当检测到所述用户数据表的占用存储空间超过阈值时,获取所述用户数据表中各用户指标数据的保存时间;
步骤S120,将所述保存时间超过预设时间的用户指标数据作为待删除用户指标数据,并删除所述待删除用户指标数据。
终端实时地对用户数据表中占用存储空间进行检测,在检测到所述用户数据表的占用存储空间超过阈值时,获取所述用户数据表中各用户指标数据的保存时间;并保存时间超过预设时间(预设时间根据具体场景设置,可以设置为1个月)的用户指标数据作为待删除用户指标数据,并删除所述待删除用户指标数据。
在本实施例中终端可以对用户数据表中的用户指标数据进行实时地更新,减少终端本地存储中的空间占用量。
此外,参照图3,本发明实施例还提出一种用户行为数据采集装置,所述用户行为数据采集装置包括:
接收模块10,用于接收用户基于应用软件触发的页面加载请求;
获取模块20,用于获取所述页面加载请求中包含的页面标识,所述页面标识对应的网络页面及所述网络页用户行为数据采集装置面的页面标签;
判断模块30,用于根据所述页面标签判断所述网络页面中是否包含采集控件;
控件导入模块40,用于若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
控件调用模块50,用于当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
数据上传模块60,用于获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
可选地,所述用户行为数据采集装置,还包括:
控件生成模块,用于确定待采集事件,按预设编码规则生成所述待采集事件对应的采集指令,并将所述采集指令添加至预设采集模板中生成采集控件;
所述控件调用模块50,包括:
检测调用单元,用于当检测到所述网络页面加载完成时,调用所述采集控件;
接收比对单元,用于接收用户操作指令,获取所述用户操作指令中的操作事件,将所述操作事件与所述待采集事件进行比对;
数据采集单元,用于若所述操作事件与所述待采集事件匹配,则触发所述待采集事件对应的所述采集指令,并根据所述采集指令采集所述网络页面上的用户行为数据。
可选地,所述控件导入模块40,包括:
接口获取单元,用于若所述网络页面中不包含采集控件,则获取所述网络页面的页面数据接口;
数据导入单元,用于获取所述应用软件中的采集控件,将所述采集控件通过所述页面数据接口导入至所述网络页面中。
可选地,所述用户行为数据采集装置,还包括:
控件比对模块,用于若所述网络页面中包含采集控件,则获取第一采集控件的控件标识和第二采集控件的控件标识,并根据所述控件标识判断所述第一采集控件与所述第二采集控件是否相同,其中,所述第一采集控件是指网络页面中的采集控件,所述第二采集控件是指所述应用软件中的采集控件;
比对调入模块,用于若所述第一采集控件与所述第二采集控件不同,则删除所述第一采集控件,并将所述第二采集控件导入至所述网络页面中;
控件调用模块,用于若所述第一采集控件与所述第二采集控件相同,则执行当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤。
可选地,所述数据上传模块60,包括:
获取清洗单元,用于获取所述用户行为数据,将所述用户行为数据按预设清洗规则进行数据清洗,得到目标行为数据;
分类统计单元,用于对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器。
可选地,所述用户行为数据采集装置,还包括:
数据保存模块,用于将所述用户指标数据保存至本地存储中的用户数据表;
查询获取模块,用于接收产品查询请求,获取所述产品查询请求中包含的查询维度,并获取所述用户数据表中所述查询维度对应的目标用户指标数据;
获取显示模块,用于获取预设产品列表中与所述目标用户指标数据匹配的产品信息,并显示所述产品信息,以供用户查看。
可选地,所述用户行为数据采集装置,还包括:
检测获取模块,用于当检测到所述用户数据表的占用存储空间超过阈值时,获取所述用户数据表中各用户指标数据的保存时间;
数据删除模块,用于将所述保存时间超过预设时间的用户指标数据作为待删除用户指标数据,并删除所述待删除用户指标数据。
此外,本发明实施例还提出一种计算机存储介质。
所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述实施例提供的用户行为数据采集方法中的操作。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来,而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实际的关系或者顺序。
对于装置实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的。可以根据实际的需要选择中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种用户行为数据采集方法,其特征在于,所述用户行为数据采集方法包括以下步骤:
接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识;
获取所述页面标识对应的网络页面及其所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件;
若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
2.如权利要求1所述的用户行为数据采集方法,其特征在于,
所述接收用户基于应用软件触发的页面加载请求,获取所述页面加载请求中包含的页面标识的步骤之前,包括:
确定待采集事件,按预设编码规则生成所述待采集事件对应的采集指令,并将所述采集指令添加至预设采集模板中生成采集控件;
所述当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤,包括:
当检测到所述网络页面加载完成时,调用所述采集控件;
接收用户操作指令,获取所述用户操作指令中的操作事件,将所述操作事件与所述待采集事件进行比对;
若所述操作事件与所述待采集事件匹配,则触发所述待采集事件对应的所述采集指令,并根据所述采集指令采集所述网络页面上的用户行为数据。
3.如权利要求1所述的用户行为数据采集方法,其特征在于,所述若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中的步骤,包括:
若所述网络页面中不包含采集控件,则获取所述网络页面的页面数据接口;
获取所述应用软件中的采集控件,将所述采集控件通过所述页面数据接口导入至所述网络页面中。
4.如权利要求1所述的用户行为数据采集方法,其特征在于,所述获取所述页面标识对应的网络页面及所述网络页面的页面标签,并根据所述页面标签判断所述网络页面中是否包含采集控件的步骤之后,包括:
若所述网络页面中包含采集控件,则获取第一采集控件的控件标识和第二采集控件的控件标识,并根据所述控件标识判断所述第一采集控件与所述第二采集控件是否相同,其中,所述第一采集控件是指网络页面中的采集控件,所述第二采集控件是指所述应用软件中的采集控件;
若所述第一采集控件与所述第二采集控件不同,则删除所述第一采集控件,并将所述第二采集控件导入至所述网络页面中;
若所述第一采集控件与所述第二采集控件相同,则执行当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据的步骤。
5.如权利要求1所述的用户行为数据采集方法,其特征在于,所述获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器的步骤,包括:
获取所述用户行为数据,将所述用户行为数据按预设清洗规则进行数据清洗,得到目标行为数据;
对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器。
6.如权利要求5所述的用户行为数据采集方法,其特征在于,所述对所述目标行为数据进行分类统计,得到用户指标数据,并将所述用户指标数据上传至服务器的步骤之后,包括:
将所述用户指标数据保存至本地存储中的用户数据表;
接收产品查询请求,获取所述产品查询请求中包含的查询维度,并获取所述用户数据表中所述查询维度对应的目标用户指标数据;
获取预设产品列表中与所述目标用户指标数据匹配的产品信息,并显示所述产品信息,以供用户查看。
7.如权利要求6所述的用户行为数据采集方法,其特征在于,所述将所述用户指标数据保存至本地存储中的用户数据表的步骤之后,包括:
当检测到所述用户数据表的占用存储空间超过阈值时,获取所述用户数据表中各用户指标数据的保存时间;
将所述保存时间超过预设时间的用户指标数据作为待删除用户指标数据,并删除所述待删除用户指标数据。
8.一种用户行为数据采集装置,其特征在于,所述用户行为数据采集装置包括:
接收模块,用于接收用户基于应用软件触发的页面加载请求;
获取模块,用于获取所述页面加载请求中包含的页面标识,所述页面标识对应的网络页面及其所述网络页面的页面标签;
判断模块,用于,根据所述页面标签判断所述网络页面中是否包含采集控件;
控件导入模块,用于若所述网络页面中不包含采集控件,则获取所述应用软件中的采集控件,并将所述采集控件导入至所述网络页面中;
控件调用模块,用于当检测到所述网络页面加载完成时,调用所述采集控件,以采集所述网络页面上的用户行为数据;
数据上传模块,用于获取所述用户行为数据,将所述用户行为数据按预设处理规则进行处理并上传至服务器。
9.一种用户行为数据采集设备,其特征在于,所述用户行为数据采集设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其中:
所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的用户行为数据采集方法的步骤。
10.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的用户行为数据采集方法的步骤。
CN201810953063.7A 2018-08-20 2018-08-20 用户行为数据采集方法、装置、设备和计算机存储介质 Active CN109948077B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810953063.7A CN109948077B (zh) 2018-08-20 2018-08-20 用户行为数据采集方法、装置、设备和计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810953063.7A CN109948077B (zh) 2018-08-20 2018-08-20 用户行为数据采集方法、装置、设备和计算机存储介质

Publications (2)

Publication Number Publication Date
CN109948077A true CN109948077A (zh) 2019-06-28
CN109948077B CN109948077B (zh) 2023-09-01

Family

ID=67005808

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810953063.7A Active CN109948077B (zh) 2018-08-20 2018-08-20 用户行为数据采集方法、装置、设备和计算机存储介质

Country Status (1)

Country Link
CN (1) CN109948077B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111158785A (zh) * 2019-12-30 2020-05-15 掌阅科技股份有限公司 电子书应用启动功能页面的确定方法、设备及存储介质
CN111680200A (zh) * 2020-04-27 2020-09-18 平安国际智慧城市科技股份有限公司 用户行为数据的采集方法、装置、设备及存储介质
CN111818133A (zh) * 2020-06-19 2020-10-23 四川新网银行股份有限公司 针对手机传感器的非刻意性数据的采集方法
CN112068910A (zh) * 2020-07-31 2020-12-11 广东飞企互联科技股份有限公司 具有下载功能的附件控件的生成方法、装置以及系统
CN112148413A (zh) * 2020-09-29 2020-12-29 无线生活(杭州)信息科技有限公司 页面优化方法及装置
CN112199265A (zh) * 2020-10-15 2021-01-08 苏州龙盈软件开发有限公司 一种快应用统计方法及系统
CN112788077A (zh) * 2019-11-07 2021-05-11 上海哔哩哔哩科技有限公司 数据采集方法、装置、计算机设备和计算机可读存储介质
CN112905427A (zh) * 2019-12-04 2021-06-04 北京沃东天骏信息技术有限公司 一种数据处理方法和装置
CN115001967A (zh) * 2022-05-30 2022-09-02 平安科技(深圳)有限公司 一种数据采集方法、装置、电子设备及存储介质
CN117130318A (zh) * 2023-10-23 2023-11-28 中国恩菲工程技术有限公司 工业数据采集方法、装置、系统和可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104123143A (zh) * 2013-04-24 2014-10-29 鸿富锦精密工业(深圳)有限公司 用户控件加载系统及方法
CN106933472A (zh) * 2017-05-20 2017-07-07 南京西桥科技有限公司 一种基于手机app的用户行为数据采集系统及其控制方法
CN107391538A (zh) * 2017-04-26 2017-11-24 阿里巴巴集团控股有限公司 点击数据采集、处理和展示方法、装置、设备及存储介质
CN107679072A (zh) * 2017-08-24 2018-02-09 平安普惠企业管理有限公司 用户行为信息采集方法、终端及存储介质
CN107800757A (zh) * 2017-03-28 2018-03-13 平安壹钱包电子商务有限公司 用户行为记录方法及装置
CN107864065A (zh) * 2017-08-16 2018-03-30 上海壹账通金融科技有限公司 无埋点数据采集方法、系统及计算机可读存储介质
CN108038045A (zh) * 2017-12-29 2018-05-15 上海新炬网络技术有限公司 基于无埋点的Android用户行为数据采集方法
CN108334530A (zh) * 2017-08-24 2018-07-27 平安普惠企业管理有限公司 用户行为信息分析方法、设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104123143A (zh) * 2013-04-24 2014-10-29 鸿富锦精密工业(深圳)有限公司 用户控件加载系统及方法
CN107800757A (zh) * 2017-03-28 2018-03-13 平安壹钱包电子商务有限公司 用户行为记录方法及装置
CN107391538A (zh) * 2017-04-26 2017-11-24 阿里巴巴集团控股有限公司 点击数据采集、处理和展示方法、装置、设备及存储介质
CN106933472A (zh) * 2017-05-20 2017-07-07 南京西桥科技有限公司 一种基于手机app的用户行为数据采集系统及其控制方法
CN107864065A (zh) * 2017-08-16 2018-03-30 上海壹账通金融科技有限公司 无埋点数据采集方法、系统及计算机可读存储介质
CN107679072A (zh) * 2017-08-24 2018-02-09 平安普惠企业管理有限公司 用户行为信息采集方法、终端及存储介质
CN108334530A (zh) * 2017-08-24 2018-07-27 平安普惠企业管理有限公司 用户行为信息分析方法、设备及存储介质
CN108038045A (zh) * 2017-12-29 2018-05-15 上海新炬网络技术有限公司 基于无埋点的Android用户行为数据采集方法

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112788077A (zh) * 2019-11-07 2021-05-11 上海哔哩哔哩科技有限公司 数据采集方法、装置、计算机设备和计算机可读存储介质
CN112905427A (zh) * 2019-12-04 2021-06-04 北京沃东天骏信息技术有限公司 一种数据处理方法和装置
CN111158785A (zh) * 2019-12-30 2020-05-15 掌阅科技股份有限公司 电子书应用启动功能页面的确定方法、设备及存储介质
CN111158785B (zh) * 2019-12-30 2023-09-22 掌阅科技股份有限公司 电子书应用启动功能页面的确定方法、设备及存储介质
CN111680200A (zh) * 2020-04-27 2020-09-18 平安国际智慧城市科技股份有限公司 用户行为数据的采集方法、装置、设备及存储介质
CN111818133A (zh) * 2020-06-19 2020-10-23 四川新网银行股份有限公司 针对手机传感器的非刻意性数据的采集方法
CN112068910A (zh) * 2020-07-31 2020-12-11 广东飞企互联科技股份有限公司 具有下载功能的附件控件的生成方法、装置以及系统
CN112148413A (zh) * 2020-09-29 2020-12-29 无线生活(杭州)信息科技有限公司 页面优化方法及装置
CN112199265A (zh) * 2020-10-15 2021-01-08 苏州龙盈软件开发有限公司 一种快应用统计方法及系统
CN115001967A (zh) * 2022-05-30 2022-09-02 平安科技(深圳)有限公司 一种数据采集方法、装置、电子设备及存储介质
CN115001967B (zh) * 2022-05-30 2023-08-29 平安科技(深圳)有限公司 一种数据采集方法、装置、电子设备及存储介质
CN117130318A (zh) * 2023-10-23 2023-11-28 中国恩菲工程技术有限公司 工业数据采集方法、装置、系统和可读存储介质
CN117130318B (zh) * 2023-10-23 2024-01-26 中国恩菲工程技术有限公司 工业数据采集方法、装置、系统和可读存储介质

Also Published As

Publication number Publication date
CN109948077B (zh) 2023-09-01

Similar Documents

Publication Publication Date Title
CN109948077A (zh) 用户行为数据采集方法、装置、设备和计算机存储介质
JP6488508B2 (ja) ウェブページのアクセス方法、装置、デバイス及びプログラム
CN106897215A (zh) 一种基于WebView网页加载性能及用户行为流数据采集的方法
CN109684047A (zh) 事件处理方法、装置、设备和计算机存储介质
CN110046310B (zh) 分析页面中的跳转链接的方法和装置
CN109815416B (zh) 关联信息的推送方法、装置,电子设备及存储介质
US11240290B2 (en) Application download method and apparatus, application sending method and apparatus, and system
CN107679072A (zh) 用户行为信息采集方法、终端及存储介质
CN105786455B (zh) 一种数据处理方法、装置及终端
KR20220127334A (ko) 문서 내 테이블 브라우징 방법, 장치, 전자기기 및 저장매체
CN113590974B (zh) 推荐页面配置方法、装置、电子设备和计算机可读介质
CN112818201A (zh) 一种网络数据采集方法、装置、计算机设备及存储介质
CN106371706A (zh) 应用快捷方式位置选择的方法及装置
CN109492163B (zh) 一种列表展示的记录方法、装置、终端设备及存储介质
CN106372158A (zh) 用户行为数据的处理方法及装置
CN105893584A (zh) 一种显示收藏夹网址标签的方法、客户端和系统
CN109684156B (zh) 基于混合模式应用的监控方法、装置、终端及存储介质
CN109474563A (zh) 文件流的处理、提供方法、客户端及服务器
CN108572985B (zh) 一种页面显示方法及装置
EP3594823B1 (en) Information display method, terminal and server
CN113590985B (zh) 页面跳转配置方法、装置、电子设备和计算机可读介质
CN109978610A (zh) 信息处理方法、移动终端及计算机可读存储介质
CN113868538B (zh) 信息处理方法、装置、设备及介质
CN106021501A (zh) 一种数据存储方法及装置
CN115344148A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20230804

Address after: 518000 Room 202, block B, aerospace micromotor building, No.7, Langshan No.2 Road, Xili street, Nanshan District, Shenzhen City, Guangdong Province

Applicant after: Shenzhen LIAN intellectual property service center

Address before: 518000 Room 201, building A, No. 1, Qian Wan Road, Qianhai Shenzhen Hong Kong cooperation zone, Shenzhen, Guangdong (Shenzhen Qianhai business secretary Co., Ltd.)

Applicant before: PING AN PUHUI ENTERPRISE MANAGEMENT Co.,Ltd.

Effective date of registration: 20230804

Address after: 100044 No. 5, Che Zhuang Street, Beijing, Xicheng District

Applicant after: China Printing Co.,Ltd.

Address before: 518000 Room 202, block B, aerospace micromotor building, No.7, Langshan No.2 Road, Xili street, Nanshan District, Shenzhen City, Guangdong Province

Applicant before: Shenzhen LIAN intellectual property service center

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant