CN110209553B - 数据获取方法及装置 - Google Patents

数据获取方法及装置 Download PDF

Info

Publication number
CN110209553B
CN110209553B CN201910501091.XA CN201910501091A CN110209553B CN 110209553 B CN110209553 B CN 110209553B CN 201910501091 A CN201910501091 A CN 201910501091A CN 110209553 B CN110209553 B CN 110209553B
Authority
CN
China
Prior art keywords
client
mark
information
log file
log files
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910501091.XA
Other languages
English (en)
Other versions
CN110209553A (zh
Inventor
吴红
胡浪
黄立超
黄玉林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Original Assignee
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Happly Sunshine Interactive Entertainment Media Co Ltd filed Critical Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority to CN201910501091.XA priority Critical patent/CN110209553B/zh
Publication of CN110209553A publication Critical patent/CN110209553A/zh
Application granted granted Critical
Publication of CN110209553B publication Critical patent/CN110209553B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/1734Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/069Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供了一种数据获取方法及装置,该方法包括:依据客户端标志,向服务端发送请求信息,在接收到服务端反馈的与请求信息对应的应答信息时,获取应答信息中的开关标志,当开关标志表征开启鹰眼功能时,若应答信息中包含新增任务,则获取本地日志文件中与新增任务对应的目标日志文件,并将目标日志文件进行压缩上报至服务端;应用本发明提供的数据获取方法,若客户端鹰眼功能为开启状态,可将客户端中与新增任务对应的本地日志文件发送至服务端,而无需重新发布新版本,提高获取客户端日志的效率,从而提高问题定位及故障修复的效率。

Description

数据获取方法及装置
技术领域
本发明涉及计算机领域,尤其涉及一种数据获取方法及装置。
背景技术
随着互联网技术的发展,越来越多的用户以客户端为媒介来获取信息,当用户在使用客户端的过程中,客户端产生故障问题时,用户向服务端反馈相应的问题信息,开发人员需要定位问题信息的位置,即定位用户反馈的问题信息在客户端中的位置,定位问题需要依靠与问题信息对应的客户端日志进行。
现有的获取客户端日志的方法为,重新开发新的客户端版本,并在新版本中加入大量数据用于获取客户端日志,当新的客户端版本被安装后,服务端才能获取相应的客户端日志,发明人对现有的客户端日志获取方法进行研究发现,现有的客户端日志获取方法需要重新发布新版本,降低获取客户端日志的获取效率,不利于及时进行问题定位和故障修复。
发明内容
本发明所要解决的技术问题是提供一种数据获取方法,若客户端的鹰眼功能为开启状态,即可将客户端中与新增任务对应的本地日志文件发送至服务端,而无需重新发布新版本。
本发明还提供了一种数据获取装置,用于保证上述方法在实际中的实现及应用。
一种数据获取方法,应用于客户端,所述方法包括:
向服务端发送请求信息;所述请求信中包含所述客户端的客户端标志;
在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;
若所述应答信息中包含新增任务,获取本地日志文件中与所述新增任务对应的目标日志文件;
对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端。
上述的方法,可选的,所述获取本地日志文件中与所述新增任务对应的目标日志文件,包括:
获取所述新增任务中的用户使用时间区间;
依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件。
上述的方法,可选的,还包括:
若所述应答信息中未包含新增任务,则获取预先构建的任务缓存池中的各个压缩日志文件;
确定与每个所述压缩日志文件对应的上报次数;
逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件;
上述的方法,可选的,还包括:
在上报所述压缩日志文件的过程中,检测所述压缩日志文件是否上报成功;
若上报失败,则将所述压缩日志文件存储至预先构建的任务缓存池中。
一种数据获取装置,应用于客户端,所述装置包括:
请求单元,用于向服务端发送请求信息;所述请求信中包含所述客户端的客户端标志;
第一获取单元,用于在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
第一判断单元,用于当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;
第二获取单元,用于若所述应答信息中包含新增任务,获取本地日志文件中与所述新增任务对应的目标日志文件;
第一上报单元,用于对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端。
一种数据获取方法,应用于服务端,所述方法包括:
当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;
判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端;
若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端。
上述的方法,可选的,所述依据所述客户端标志中的各个标志信息,生成开关标志,包括:
确定所述客户端标志中的各个标志信息的优先级;
依据所述客户端标志中的各个标志信息优先级的高低顺序,依次判断所述各个标志信息是否满足预设的条件,直至对所述标志信息的判断结果满足预设的条件,则停止对所述各个标志信息的判断,并生成开启鹰眼功能的开关标志;所述预设的条件为所述标志信息在预设的配置列表中存在与其对应的信息。
上述的方法,可选的,还包括:
若每个标志信息均不满足所述预设的条件,则生成关闭鹰眼功能的开关标志。
上述的方法,可选的,所述与所述客户端对应的新增任务的生成过程,包括:
当接收到与所述客户端对应的问题信息时,获取与所述问题信息对应的用户使用时间区间,并确定所述客户端的设备ID;
依据所述用户使用时间区间和所述设备ID,生成新增任务。
一种数据获取装置,应用于服务端,所述装置包括:
第四获取单元,用于当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
生成单元,用于依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;
第二判断单元,用于判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
第一发送单元,用于若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端;
第二发送单元,用于若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端。
一种存储介质,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行上述的数据获取方法。
一种电子设备,包括存储器,以及一个或者一个以上的指令,其中一个或者一个以上指令存储于存储器中,且经配置以由一个或者一个以上处理器执行上述的数据获取方法。
与现有技术相比,本发明包括以下优点:
本发明提供了一种数据获取方法,依据客户端标志,向服务端发送请求信息,在接收到服务端反馈的与请求信息对应的应答信息时,获取应答信息中的开关标志,当开关标志表征开启鹰眼功能时,若应答信息中包含新增任务,则获取本地日志文件中与新增任务对应的目标日志文件,并将目标日志文件进行压缩上报至服务端。应用本发明提供的数据获取方法,若客户端鹰眼功能为开启状态,可将客户端中与新增任务对应的本地日志文件发送至服务端,而无需重新发布新版本,提高获取客户端日志的效率,从而提高问题定位及故障修复的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明提供的一种数据获取方法的方法流程图;
图2为本发明提供的一种数据获取方法的又一方法流程图;
图3为本发明提供的一种数据获取装置的结构示意图;
图4为本发明提供的一种数据获取方法的又一方法流程图;
图5为本发明提供的一种数据获取装置的又一结构示意图;
图6为本发明提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明可用于众多通用或专用的计算装置环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器装置、包括以上任何装置或设备的分布式计算环境等等。
本发明实施例提供了一种数据获取方法,该方法可以应用在多种系统平台,其执行主体可以为客户端,所述数据获取方法的流程图如图1所示,具体包括:
S101:向服务端发送请求信息;所述请求信中包含所述客户端的客户端标志;
本发明实施例提供的方法中,客户端在启动或者网络状态发生改变后,依据客户端自身的客户端标志,向服务端发送请求信息,请求获取鹰眼功能的开关状态和任务列表,客户端标志可以包含设备ID和版本号等,鹰眼功能代指开发人员对线上的客户端版本中增加相应的代码,使得客户端能在鹰眼功能开启状态时,记录客户端产生故障期间的日志信息。
S102:在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
本发明实施例提供的方法中,客户端在接收到服务端反馈的应答信息时,获取应答信息中的开关标志,该开关标志为表征客户端的鹰眼功能状态的标志,即表征鹰眼功能开启或关闭状态的标志。
S103:当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;
本发明实施例提供的方法中,当开关标志表征鹰眼功能为开启状态时,判断应答信息是否包含新增任务,新增任务可以包含设备ID和用户使用时间区间,新增任务为服务端预先生成的,用于获取客户端日志的任务。
S104:若所述应答信息中包含新增任务,获取本地日志文件中与所述新增任务对应的目标日志文件;
本发明实施例提供的方法中,若服务端反馈的应答信息中包含新增任务,则依据新增任务,获取客户端的本地日志文件中与新增任务对应的日志文件,将获得到的日志文件作为目标日志文件,该目标日志文件可以是多个文件。
S105:对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端。
本发明实施例提供的方法中,获取到的目标日志文件可以是多个,将获取的目标日志文件进行压缩处理,将压缩后的文件上报至服务端,对目标日志文件进行压缩处理可以是多个目标日志文件一起压缩,也可以是的单个目标日志文件进行压缩;可选的,可以对目标日志文件进行切片处理,再将切片后的目标日志文件上报至服务端。
需要说明的是,上报日志的同时,可以将日志文件总数和当前文件数进行上报,用于服务端判断日志是否上传完成,日志文件总数指目标日志文件的文件总数,当前文件数代指压缩或切片后的文件总数;当客户端完成上报日志,则将压缩或切片后的日志文件进行删除。
本发明实施例提供的数据获取方法中,客户端在启动或网络状态发生变化后,依据客户端自身的客户端标志,向服务端发送请求信息,请求获取鹰眼开关的开关状态和任务,在接收到服务端反馈的应答信息时,若应答信息中的开关标志表征鹰眼功能为开启状态,判断应答信息中是否包含新增任务,若包含,则获取客户端本地的日志文件中与新增任务对应的目标日志文件,并对目标日志文件进行压缩或切片处理,并将压缩或切片处理后的日志文件上报至服务端,以使开发人员依据客户端上报的日志文件,进行问题定位。应用本发明实施例提供的数据获取方法,若客户端鹰眼功能为开启状态,可将客户端中与新增任务对应的本地日志文件发送至服务端,而无需重新发布新版本,提高获取客户端日志获取的效率,从而提高问题定位及故障修复的效率。
可选的,本发明实施例提供的方法中,将获取到的目标日志文件进行本地存储,将目标日志文件进行本地存储时,判断当前缓存的日志文件是否超过最大日志缓存量,若是,依据时间顺序,将旧日志文件进行删除,为新的日志文件空出存储空间,再将新的日志文件进行存储,若否,表征存储空间充足,直接存储新的日志文件,优选的,将存储超过3天的日志文件进行删除。
上述本发明实施例图1公开的步骤,如图2所示,还可以包括以下步骤:
S201:向服务端发送请求信息;
本发明实施例提供的方法中,客户端依据客户端标志,向服务端发送请求信息,请求获取表征鹰眼功能状态的开关标志,以及与客户端对应的任务。
S202:在接收到服务端反馈的应答信息时,获取应答信息中的开关标志;
本发明实施例提供的方法中,在接收到服务端反馈的应答信息时,获取应答信息中的开关标志。
S203:当开关标志表征开启鹰眼功能时,判断应答信息中是否包含新增任务;
本发明实施例提供的方法中,当开关标志表征鹰眼功能是开启状态时,判断应答信息中是否包含新增任务,新增任务可以为鹰眼上报日志任务,若应答信息中包含新增任务,则执行步骤S204,若应答信息中未包含新增任务,则执行步骤S205。
S204:获取所述新增任务中的用户使用时间区间,并获取本地日志文件中所有属于用户使用时间区间内的日志文件,压缩获取到的日志文件,获得压缩日志文件;
本发明实施例提供的方法中,若应答信息中包含新增任务,则确定新增任务中的用户使用时间区间,并依据用户使用区间,遍历本地日志文件,查找本地日志文件中所有属于用户使用时间区间内的所有日志文件,查找到的日志文件可以是多个,也可以是单个日志文件,将查找到的与用户使用时间区间对应的日志文件进行压缩处理获得压缩日志文件,可选的,可以将查找到的与用户使用时间区间对应的日志文件进行切片处理。
可选的,本发明实施例提供的方法中,在查找到所有与用户使用时间区间对应的日志文件之后,可以先将查找到的日志文件存储至预先构建的任务缓存池中,并在任务缓存池中,对日志文件进行压缩或切片处理。
S205:获取任务缓存池中的各个压缩日志文件,确定每个压缩日志文件的上报次数;
本发明实施例提供的方法中,若应答信息中未包含新增任务,则获取任务缓存池中的各个压缩日志文件,任务缓存池中每个压缩日志文件均有与其对应的上报次数,确定每个压缩日志文件的上报次数,以依据上报次数确定是否再次将压缩日志文件进行上报。
S206:对每个压缩日志文件,判断上报次数是否小于预设的阈值;
本发明实施例提供的方法中,确定任务缓存池中的每个压缩日志的上报次数,并对每个压缩日志文件判断该压缩日志文件的上报次数是否小于预设的阈值,可选的,所述阈值可以为3,即判断压缩日志文件的上报次数是否小于3次,当压缩日志文件的上报次数小于3次,执行步骤S207,若压缩日志文件的上报次数大于3次,则执行步骤S209。
S207:将压缩日志文件上报至服务端;
本发明实施例提供的方法中,若压缩日志文件的上报次数小于预设的阈值,即上报次数小于3次,则将上报次数小于3次的所有压缩日志文件上报至服务端。
S208:判断是否上报成功;
本发明实施例提供的方法中,在上报压缩日志文件的过程中,实时监测上报进程,判断该压缩日志文件是否上报成功,若压缩日志文件上报成功,执行步骤S209,若压缩日志文件上报失败,则执行步骤S210。
S209:删除压缩日志文件;
本发明实施例提供的方法中,当压缩日志上报成功时,删除该压缩日志文件;
本发明实施例提供的方法中,若任务缓存池中压缩日志文件的上报次数大于预设的阈值,则将任务缓存池中的所述压缩日志文件删除。
S210:将压缩日志文件存储至任务缓存池中。
本发明实施例提供的方法中,若压缩日志文件上报失败,则将该压缩日志文件存储至任务缓存池中,并将压缩日志文件的上报次数加一,等待下一次请求服务端。
本发明实施例提供的数据获取方法,客户端在启动或网络状态发生改变时,向服务端请求获取开关标志和任务,当服务端反馈的开关标志表征鹰眼功能为开启状态时,若服务端反馈的应答信息中包含新增任务,则将获取与新增任务中的用户使用时间对应的日志文件,并将获取到的日志文件压缩上报,若服务端反馈的应答信息中未包含新增任务,则获取任务缓存池中的压缩日志文件,并在判断压缩日志文件的上报次数小于预设的阈值时,将压缩日志文件上报,以使开发人员,依据客户端上报的压缩日志文件进行问题定位,而无需重新发布新版本,提供排查问题和解决问题的工作效率。
与图1所述的方法相对应,本发明实施例还提供了一种数据获取装置,用于对图1中方法的具体实现,其结构示意图如图3所示,具体包括:
请求单元301,用于向服务端发送请求信息;所述请求信中包含所述客户端的客户端标志;
第一获取单元302,用于在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
第一判断单元303,用于当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;
第二获取单元304,用于若所述应答信息中包含新增任务,获取本地日志文件中与所述新增任务对应的目标日志文件;
第一上报单元305,用于对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端。
本发明实施例提供的数据获取装置,客户端在启动或网络状态发生变化后,依据客户端自身的客户端日志,向服务端发送请求信息,请求获取鹰眼开关的开关状态和任务,在接收到服务端反馈的应答信息时,若应答信息中的开关标志表征鹰眼功能为开启状态,判断应答信息中是否包含新增任务,若包含,则获取客户端本地的日志文件中与新增任务对应的目标日志文件,并对目标日志文件进行压缩或切片处理,并将压缩或切片处理后的日志文件上报至服务端,以使开发人员依据客户端上报的日志文件,进行问题定位。应用本发明实施例提供的数据获取装置,若客户端鹰眼功能为开启状态,可将客户端中与新增任务对应的本地日志文件发送至服务端,而无需重新发布新版本,提高获取客户端日志的效率,从而提高问题定位及故障修复的效率。
在本发明的一个实施例中,基于前述方案,第二获取单元304配置为:
获取子单元,用于获取所述新增任务中的用户使用时间区间;
查找子单元,用于依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件。
在本发明的一个实施例中,基于前述方案,数据获取装置还包括:
第三获取单元,用于若所述应答信息中未包含新增任务,则获取预先构建的任务缓存池中的各个压缩日志文件;
确定单元,用于确定与每个所述压缩日志文件对应的上报次数;
第二上报单元,用于逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件;
在本发明的一个实施例中,基于前述方案,数据获取装置还包括:
检测单元,用于在上报所述压缩日志文件的过程中,检测所述压缩日志文件是否上报成功;
存储单元,用于若上报失败,则将所述压缩日志文件存储至预先构建的任务缓存池中。
本发明实施例提供了一种数据获取方法,该方法可以应用在多种系统平台,其执行主体可以为服务端,所述报文传输方法的流程图如图4所示,具体包括:
S401:当接收到客户端发送的请求信息时,获取请求信息中的客户端标志;
本发明实施例提供的方法中,当接收到客户端在启动或是网络状态发生改变时所发送的请求信息时,服务端获取请求信息中的客户端标志,所述客户端标志包含多个标志信息,标志信息可以为设备ID、版本号、IP地址和终端标志等。
S402:依据客户端标志中的各个标志信息,生成开关标志;
本发明实施例提供的方法中,依据客户端的设备ID、版本号、IP地址和终端标志等标志信息,生成开关标志,当存在任意一个标志信息满足预设条件时,生成开启鹰眼功能的开关标志,当所有标志信息都不满足预设条件时,生成关闭鹰眼功能的开关标志。
S403:判断预先生成的新增任务列表中是否存在与客户端对应的新增任务;
本发明实施例提供的方法中,服务端在接收对客户端反馈的问题信息时,预先生成与该客户端对应的新增任务,并在客户端接下次启动或是网络状态发生改变请求服务端时,将该新增任务发送至客户端,新增任务列表由新增任务组成。判断预先生成的新增任务列表中是否存在与客户端对应的新增任务,即确定服务端是否预先生成与该客户端对应的新增任务,若新增任务列表中存在与该客户端对应的新增任务,执行步骤S404,若新增任务列表中不存在与该客户端对应的新增任务,执行步骤S405。
需要说明的是,新增任务可以为鹰眼上报任务。
S404:依据新增任务和开关标志,生成应答信息,并将应答信息发送至客户端;
本发明实施例提供的方法中,若新增任务列表中存在与该客户端对应的新增任务,则依据新增任务和开关标志,生成应答信息,并将应答信息发送至客户端。
S405:依据开关标志,生成应答信息,并将应答信息发送至客户端。
本发明实施例提供的方法中,若新增任务列表中不存在与客户端对应的新增任务,则依据开关标志,生成应答信息,并将应答信息发送至客户端。
上述本发明实施例图4公开的步骤S402涉及到的依据客户端标志中的各个标志信息,生成开关标志,包括以下步骤:
确定所述客户端标志中的各个标志信息的优先级;
依据所述客户端标志中的各个标志信息优先级的高低顺序,依次判断所述各个标志信息是否满足预设的条件,直至对所述标志信息的判断结果满足预设的条件,则停止对所述各个标志信息的判断,并生成开启鹰眼功能的开关标志;所述预设的条件为所述标志信息在预设的配置列表中存在与其对应的信息。
本发明实施例提供的方法中,首先确定客户端标志中的各个标志信息的优先级,并依据各个标志信息优先级的高低顺序,依次判断标志信息是否在预设的配置列表中存在与其对应的信息,当首个出现在配置列表中存在与其对应的信息时,停止对剩余未判断标志信息的判断,并生成开启鹰眼功能的开关标志,若完成对所有标志信息的判断,配置列表中不存在与任意一个标志信息对应的信息时,生成关闭鹰眼功能的开关标志。
对上述提及的依据客户端标志中的各个标志信息,生成开关标志的过程进行举例说明如下:
客户端标志包含设备ID、版本号、IP地址和终端标志,其中优先级的顺序为设备ID>版本号>IP地址>终端标志,依据优先级的高低顺序,先判断服务端的配置列表中是否存在与该设备ID对应的ID,若存在,则表示客户端打开了鹰眼功能,并生成开启鹰眼功能的开关标志,并结束对版本号、IP地址和终端标志的判断,若不存在,则判断该版本号是否存在于配置列表,若版本号存在于配置列表中,则表示客户端打开了鹰眼功能,并生成开启鹰眼功能的开关标志,并结束对IP地址和终端标志的判断,若版本号不存在于配置列表中,则判断该IP地址是否存在于配置列表中,若IP地址存在于配置列表中,则表示客户端打开了鹰眼功能,并生成开启鹰眼功能的开关标志,并结束对终端标志的判断,若IP地址不存在于配置列表中,则判断终端标志是否存在于配置列表中,若存在,则表示客户端打开了鹰眼功能,并生成开启鹰眼功能的开关标志,若不存在,则表示客户端未打开鹰眼功能,并生成关闭鹰眼功能的开关标志。
上述本发明实施例图4公开的步骤S402涉及到的新增任务,该新增任务的生成过程包括以下步骤:
当接收到与所述客户端对应的问题信息时,获取与所述问题信息对应的用户使用时间区间,并确定所述客户端的设备ID;
依据所述用户使用时间区间和所述设备ID,生成新增任务。
本发明实施例提供的方法中,用户在使用客户端的过程中,若客户端出现故障信息,则向服务端反馈问题信息,服务端在接收到与该客户端对应的问题信息时,确定该客户端的设备ID,并为该设备ID配置新增任务,所述新增任务包括设备ID和用户使用时间区间,用户使用时间区间的确定通过用户反馈的时间段来确定,或是依据该客户端的设备ID查询服务端的数据平台系统来确定。
与图4所述的方法相对应,本发明实施例还提供了一种数据获取装置,用于对图4中方法的具体实现,其结构示意图如图5所示,具体包括:
第四获取单元501,用于当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
第一生成单元502,用于依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;
第二判断单元503,用于判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
第一发送单元504,用于若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端;
第二发送单元505,用于若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端。
在本发明的一个实施例中,基于前述方案,生成单元502配置为:
确定子单元,用于确定所述客户端标志中的各个标志信息的优先级;
第一生成子单元,用于依据所述客户端标志中的各个标志信息优先级的高低顺序,依次判断所述各个标志信息是否满足预设的条件,直至对所述标志信息的判断结果满足预设的条件,则停止对所述各个标志信息的判断,并生成开启鹰眼功能的开关标志;所述预设的条件为所述标志信息在预设的配置列表中存在与其对应的信息。
在本发明的一个实施例中,基于前述方案,生成单元502还配置为:
第二生成子单元,用于若每个标志信息均不满足所述预设的条件,则生成关闭鹰眼功能的开关标志。
在本发明的一个实施例中,基于前述方案,第二判断单元503还包括:
第五获取单元,用于当接收到与所述客户端对应的问题信息时,获取与所述问题信息对应的用户使用时间区间,并确定所述客户端的设备ID;
第二生成单元,用于依据所述用户使用时间区间和所述设备ID,生成新增任务。
本发明实施例还提供了一种存储介质,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行上述数据获取方法。
本发明实施例还提供了一种电子设备,其结构示意图如图6所示,具体包括存储器601,以及一个或者一个以上的指令602,其中一个或者一个以上指令602存储于存储器601中,且经配置以由一个或者一个以上处理器603执行所述一个或者一个以上指令602进行以下操作:
向服务端发送请求信息;所述请求信中包含所述客户端的客户端标志;
在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;
若所述应答信息中包含新增任务,获取本地日志文件中与所述新增任务对应的目标日志文件;
对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端。
优选的,还可以执行以下操作:
当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;
判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端;
若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上对本发明所提供的一种数据获取方法及装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种数据获取方法,其特征在于,应用于客户端,所述方法包括:
向服务端发送请求信息;所述请求信息中包含所述客户端的客户端标志;
在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;所述鹰眼功能是指开发人员对线上的客户端版本中增加相应的代码,使得客户端在所述鹰眼功能处于开启状态时,记录所述客户端产生故障期间的日志;
若所述应答信息中包含新增任务,获取所述新增任务中的用户使用时间区间;
依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件;
对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端;
若所述应答信息中未包含新增任务,则获取预先构建的任务缓存池中的各个压缩日志文件;
确定与每个所述压缩日志文件对应的上报次数;
逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件。
2.根据权利要求1所述的方法,其特征在于,还包括:
在上报所述压缩日志文件的过程中,检测所述压缩日志文件是否上报成功;
若上报失败,则将所述压缩日志文件存储至预先构建的任务缓存池中。
3.一种数据获取装置,其特征在于,应用于客户端,所述装置包括:
请求单元,用于向服务端发送请求信息;所述请求信息中包含所述客户端的客户端标志;
第一获取单元,用于在接收到所述服务端反馈的与所述请求信息对应的应答信息时,获取所述应答信息中的开关标志;
第一判断单元,用于当所述开关标志表征开启鹰眼功能时,判断所述应答信息中是否包含新增任务;所述鹰眼功能是指开发人员对线上的客户端版本中增加相应的代码,使得客户端在所述鹰眼功能处于开启状态时,记录所述客户端产生故障期间的日志;
第二获取单元,用于若所述应答信息中包含新增任务,获取所述新增任务中的用户使用时间区间;依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件;
第一上报单元,用于对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端;若所述应答信息中未包含新增任务,则获取预先构建的任务缓存池中的各个压缩日志文件;确定与每个所述压缩日志文件对应的上报次数;逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件。
4.一种数据获取方法,其特征在于,应用于服务端,所述方法包括:
当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;所述鹰眼功能是指开发人员对线上的客户端版本中增加相应的代码,使得客户端在所述鹰眼功能处于开启状态时,记录所述客户端产生故障期间的日志;
判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端,以便于所述客户端获取所述新增任务中的用户使用时间区间,依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件,对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端;
若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端,以便于所述客户端获取预先构建的任务缓存池中的各个压缩日志文件,确定与每个所述压缩日志文件对应的上报次数,逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件。
5.根据权利要求4所述的方法,其特征在于,所述依据所述客户端标志中的各个标志信息,生成开关标志,包括:
确定所述客户端标志中的各个标志信息的优先级;
依据所述客户端标志中的各个标志信息优先级的高低顺序,依次判断所述各个标志信息是否满足预设的条件,直至对所述标志信息的判断结果满足预设的条件,则停止对所述各个标志信息的判断,并生成开启鹰眼功能的开关标志;所述预设的条件为所述标志信息在预设的配置列表中存在与其对应的信息。
6.根据权利要求5所述的方法,其特征在于,还包括:
若每个标志信息均不满足所述预设的条件,则生成关闭鹰眼功能的开关标志。
7.根据权利要求4所述的方法,其特征在于,所述与所述客户端对应的新增任务的生成过程,包括:
当接收到与所述客户端对应的问题信息时,获取与所述问题信息对应的用户使用时间区间,并确定所述客户端的设备ID;
依据所述用户使用时间区间和所述设备ID,生成新增任务。
8.一种数据获取装置,其特征在于,应用于服务端,所述装置包括:
第四获取单元,用于当接收到客户端发送的请求信息时,获取所述请求信息中的客户端标志;所述客户端标志包含多个标志信息;
生成单元,用于依据所述客户端标志中的各个标志信息,生成开关标志;所述开关标志用于表征鹰眼功能是否开启;所述鹰眼功能是指开发人员对线上的客户端版本中增加相应的代码,使得客户端在所述鹰眼功能处于开启状态时,记录所述客户端产生故障期间的日志;
第二判断单元,用于判断预先生成的新增任务列表中是否存在与所述客户端对应的新增任务;
第一发送单元,用于若存在,依据所述新增任务和所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端,以便于所述客户端获取所述新增任务中的用户使用时间区间,依据所述用户使用时间区间,遍历本地日志文件,在所述本地日志文件中查找所有属于所述用户使用时间区间内的日志文件,并将查找到的日志文件确定为目标日志文件,对所述目标日志文件进行压缩,获得压缩日志文件,并将所述压缩日志文件上报至所述服务端;
第二发送单元,用于若不存在,则依据所述开关标志,生成应答信息,并将所述应答信息发送至所述客户端,以便于所述客户端获取预先构建的任务缓存池中的各个压缩日志文件,确定与每个所述压缩日志文件对应的上报次数,逐个判断每个所述压缩日志文件的上报次数是否小于预设的阈值,若所述压缩日志文件的上报次数小于预设的阈值,上报所述压缩日志文件。
CN201910501091.XA 2019-06-11 2019-06-11 数据获取方法及装置 Active CN110209553B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910501091.XA CN110209553B (zh) 2019-06-11 2019-06-11 数据获取方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910501091.XA CN110209553B (zh) 2019-06-11 2019-06-11 数据获取方法及装置

Publications (2)

Publication Number Publication Date
CN110209553A CN110209553A (zh) 2019-09-06
CN110209553B true CN110209553B (zh) 2023-06-20

Family

ID=67791979

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910501091.XA Active CN110209553B (zh) 2019-06-11 2019-06-11 数据获取方法及装置

Country Status (1)

Country Link
CN (1) CN110209553B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115834575A (zh) * 2023-02-28 2023-03-21 新云网科技集团股份有限公司 一种日志上报方法、系统、设备及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004362171A (ja) * 2003-06-03 2004-12-24 Canon Inc クライアント装置
JP2013037403A (ja) * 2011-08-03 2013-02-21 Canon Inc ログ管理システム、ログ管理方法、アプリケーションサーバ、およびログサーバ
WO2014079262A1 (zh) * 2012-11-21 2014-05-30 中兴通讯股份有限公司 远程日志实时获取方法及系统
CN104253704A (zh) * 2013-06-28 2014-12-31 腾讯科技(深圳)有限公司 一种上报终端日志的方法、装置和系统
CN106100879A (zh) * 2016-06-07 2016-11-09 青岛海信移动通信技术股份有限公司 移动终端日志获取方法及装置
CN108306771A (zh) * 2018-02-09 2018-07-20 腾讯科技(深圳)有限公司 日志上报方法、装置及系统
CN109039724A (zh) * 2018-07-23 2018-12-18 北京奇艺世纪科技有限公司 日志上传方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7827148B2 (en) * 2005-01-17 2010-11-02 Kabushiki Kaisha Toshiba Medical equipment having audit log managing function
CN105490841B (zh) * 2015-11-26 2019-03-01 广州华多网络科技有限公司 一种终端日志抓取方法、装置及系统
CN105577445A (zh) * 2015-12-30 2016-05-11 北京京东尚科信息技术有限公司 一种日志收集和上报的方法和装置
CN108200111B (zh) * 2016-12-08 2021-01-05 中国移动通信集团山西有限公司 资源配置信息更新方法、装置和资源接口设备
CN107181633A (zh) * 2017-07-27 2017-09-19 郑州云海信息技术有限公司 一种远程获取业务日志的方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004362171A (ja) * 2003-06-03 2004-12-24 Canon Inc クライアント装置
JP2013037403A (ja) * 2011-08-03 2013-02-21 Canon Inc ログ管理システム、ログ管理方法、アプリケーションサーバ、およびログサーバ
WO2014079262A1 (zh) * 2012-11-21 2014-05-30 中兴通讯股份有限公司 远程日志实时获取方法及系统
CN104253704A (zh) * 2013-06-28 2014-12-31 腾讯科技(深圳)有限公司 一种上报终端日志的方法、装置和系统
CN106100879A (zh) * 2016-06-07 2016-11-09 青岛海信移动通信技术股份有限公司 移动终端日志获取方法及装置
CN108306771A (zh) * 2018-02-09 2018-07-20 腾讯科技(深圳)有限公司 日志上报方法、装置及系统
CN109039724A (zh) * 2018-07-23 2018-12-18 北京奇艺世纪科技有限公司 日志上传方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
一种可扩展的网络用户行为日志获取方法;吴茜媛;郑庆华;王萍;;软件(10);全文 *

Also Published As

Publication number Publication date
CN110209553A (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
CN103377127B (zh) 网页产品的开发测试系统、测试方法及装置
CN104040496B (zh) 终端和应用程序恢复方法
CN107656695B (zh) 一种数据存储、删除方法、装置及分布式存储系统
CN104268055A (zh) 一种程序异常的监控方法和装置
GB2357351B (en) Automatic job resource usage and retrieval
CN110704376A (zh) 日志文件保存方法及装置
CN110209553B (zh) 数据获取方法及装置
CN109783284A (zh) 信息获取方法、系统及服务器、计算机可读存储介质
CN113660359A (zh) 域名解析记录的管理方法及装置、存储介质及电子设备
CN111506496A (zh) 一种测试数据获取方法、装置、电子设备及存储介质
CN113238815A (zh) 一种接口访问控制方法、装置、设备及存储介质
CN103914225B (zh) 一种信息处理的方法及装置
CN113256360B (zh) 基于Ukey机柜的发票处理控制方法、装置、设备和存储介质
CN105224572B (zh) 鉴别垃圾目录的方法及装置
CN107577433B (zh) 一种存储介质和文件数据的迁移方法、装置及设备
CN114328026B (zh) 一种虚拟磁盘备份方法、装置、设备及介质
CN114138575A (zh) 一种硬盘数据垃圾回收的测试方法、装置、设备及介质
CN115766697A (zh) 一种文件下载方法、装置、设备和存储介质
CN105005519A (zh) 清除客户端缓存的方法和装置
CN111625866B (zh) 一种权限管理方法、系统、设备及存储介质
CN113468030A (zh) Abs系统的监控告警方法及装置、存储介质及电子设备
KR20180065839A (ko) 작업 및 작업로그 데이터 분석을 통한 업무 성과 알림 방법 및 장치
CN112749078B (zh) 一种埋点测试方法和装置
US9838488B2 (en) Agent asynchronous transaction monitor
CN110418020B (zh) 名单状态信息处理方法、装置、电子终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant