CN109298990B - 日志存储方法、装置、计算机设备及存储介质 - Google Patents

日志存储方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN109298990B
CN109298990B CN201811208796.4A CN201811208796A CN109298990B CN 109298990 B CN109298990 B CN 109298990B CN 201811208796 A CN201811208796 A CN 201811208796A CN 109298990 B CN109298990 B CN 109298990B
Authority
CN
China
Prior art keywords
server
storage
processed
task
idle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811208796.4A
Other languages
English (en)
Other versions
CN109298990A (zh
Inventor
朱鹏程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201811208796.4A priority Critical patent/CN109298990B/zh
Publication of CN109298990A publication Critical patent/CN109298990A/zh
Application granted granted Critical
Publication of CN109298990B publication Critical patent/CN109298990B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • G06F11/3093—Configuration details thereof, e.g. installation, enabling, spatial arrangement of the probes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/865—Monitoring of software
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明实施例公开了一种日志存储方法、装置、计算机设备及存储介质。其中，所述方法包括：若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中；判断服务器是否处于空闲状态；若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。本发明是基于大数据技术而实现的，通过实施本发明的实施例，可在服务器繁忙时，减少数据库连接占用量(暂时不将调用日志存入数据库中，能够减少数据库的访问量)，提高了服务器对后续业务的处理效率，降低了服务器对业务的响应时间，提高了用户的使用体验。

Description

日志存储方法、装置、计算机设备及存储介质
技术领域
本发明涉及互联网技术领域，尤其涉及一种日志存储方法、装置、计算机设备及存储介质。
背景技术
系统通过其接口向外提供服务，为了监控其接口的使用情况，在检测到接口调用完成后，会在数据库中记录接口的接口调用日志(业务日志)。记录这些接口调用日志时，需要连接数据库进行插入操作。
现有技术中，正常的业务请求会等待接口调用日志记录完成后才进行，在服务器繁忙时，将严重影响了后续业务的执行速度，增加了服务器的响应时间，使得用户的等待时间过长，降低了用户的使用体验。
发明内容
本发明实施例提供了一种日志存储方法、装置、计算机设备及存储介质，旨在解决现有日志存储方法影响后续业务的执行速度，增加了服务器的响应时间的问题。
第一方面，本发明实施例提供了一种日志存储方法，其包括：
若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
判断服务器是否处于空闲状态；
若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
第二方面，本发明实施例还提供了一种日志存储装置，其包括：
加入单元，用于若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
第一判断单元，用于判断服务器是否处于空闲状态；
处理单元，用于若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
暂停单元，用于若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
第三方面，本发明实施例还提供了一种计算机设备，其包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序当被处理器执行时可实现上述方法。
本发明实施例提供了一种日志存储方法、装置、计算机设备及存储介质。其中，所述方法包括：若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中；判断服务器是否处于空闲状态；若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。通过应用本发明实施例的技术方案，在检测到接口调用日志时，将该接口调用日志的存储任务加入到待处理任务队列中，判断服务器是否处于空闲状态，在服务器处于空闲状态时，对待处理任务队列中的存储任务进行处理，在服务器不处于空闲状态时，暂停对待处理任务队列中的存储任务进行处理，从而在服务器繁忙时，能够减少数据库连接占用量(暂时不将调用日志存入数据库中，能够减少数据库的访问量)，提高了服务器对后续业务的处理效率，降低了服务器对业务的响应时间，提高了用户的使用体验。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种日志存储方法的流程示意图；
图2为本发明实施例提供的一种日志存储方法的子流程示意图；
图3为本发明实施例提供的一种日志存储方法的另一子流程示意图；
图4为本发明实施例提供的一种日志存储方法的又一子流程示意图；
图5为本发明实施例提供的一种日志存储装置的示意性框图；
图6为本发明实施例提供的一种日志存储装置的第一判断单元的示意性框图；
图7为本发明实施例提供的一种日志存储装置的第一判断单元的第三判断单元的示意性框图；
图8为本发明实施例提供的一种日志存储装置的处理单元的示意性框图；
图9为本发明实施例提供的一种日志存储装置的确定单元的示意性框图；
图10为本发明实施例提供的一种计算机设备的示意性框图；以及
图11为本发明实施例提供的一种平均业务访问量随着时间变化的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
请参阅图1，图1是本发明实施例提供的一种日志存储方法的流程示意图。本发明实施例提出的日志存储方法应用于服务器中，服务器在接口调用完成后，需要生成接口的接口调用日志，并将接口调用日志存储到数据库中。本发明实施例中，只有在服务器处于空闲状态时，才将接口调用日志存储到数据库中，从而可减少数据库连接占用量，提高服务器的业务访问速度。如图1所示，该方法包括以下步骤S1-S4。
S1、若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中。
其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中。
具体实施中，实时监控接口的调用情况，在检测到接口调用完成时，生成该接口的接口调用日志(将接口的使用情况记录在调用日志中)，并先将该接口调用日志缓存在服务器中。然后，将该接口调用日志的存储任务加入到待处理任务队列中，存储任务用于将该接口调用日志存储到数据库中。
需要说明的是，本方案与现有技术的区别在于，现有技术中，在生成了接口调用日志后，立即进行该接口调用日志的存储任务，而在本方案中，在生成了接口调用日志后，先不立即进行该接口调用日志的存储任务，而是将该接口调用日志的存储任务加入到待处理任务队列中，等到服务器空闲时，再处理待处理任务队列中的存储任务，从而能够确保服务器对后续业务的处理速度，降低了服务器的响应时间。
S2、判断服务器是否处于空闲状态。
本方案中，在服务器处于空闲状态时，执行各接口调用日志的存储任务(即将接口调用日志存储到数据库中)。为此，需要判断服务器是否处于空闲状态。具体地，可根据服务器的运行参数以及服务器的历史业务数据来判断服务器是否处于空闲状态。
其中，服务器的运行参数包括服务器的资源使用率，资源使用率反应服务器当前的运行状态，资源使用率高说明服务器的运行负载高，资源使用率低说明服务器的运行负载低。
服务器的历史业务数据反应了用户的使用习惯，根据服务器的历史业务数据能够预测业务高峰时段，在业务高峰时段到来之前不适合执行接口调用日志的存储任务。
在一实施例中，如图2所示，所述步骤S2可包括步骤S21-S25。
S21、判断服务器的资源使用率是否小于预设的资源使用率阈值。
资源使用率是指服务器当前使用的资源(CPU资源)占服务器总资源的比重。
具体实施中，实时监控服务器的资源使用率，并判断服务器的资源使用率是否小于预设的资源使用率阈值。
需要说明的是，资源使用率阈值可由本领域技术人员根据服务器的实际情况进行设定，本方案不做具体限定。例如，在一实施例中，资源使用率阈值设定为60％。
若服务器的资源使用率不小于预设的资源使用率阈值，转到步骤S24，判定服务器不处于空闲状态。
具体实施中，如果服务器的资源使用率不小于预设的资源使用率阈值，则说明服务器当前的负载较高，因此判定服务器不处于空闲状态(繁忙状态)。
S22、若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段。
具体实施中，如果服务器的资源使用率小于预设的资源使用率阈值，则说明服务器当前的负载较低。本方案中，还需进一步根据服务器的历史业务数据判断当前是否处于空闲时段。
若服务器当前不处于空闲时段，转到步骤S24，判定服务器不处于空闲状态。
在一实施例中，服务器的历史业务数据包括服务器在过往时间的业务访问量。如图3所示，所述步骤S22可包括步骤S231-S233。
S221、根据服务器的历史业务数据确定空闲时间区间。
本发明实施例中，根据服务器的历史业务数据确定空闲时间区间。在空闲时间区间内，服务器的业务访问量较低，较为适合执行各接口调用日志的存储任务。
在一实施例中，服务器的历史业务数据包括服务器在一天的各时刻服务器的平均业务访问量。以上步骤S221具体包括：获取各时刻的平均业务访问量均低于预设的业务访问量阈值的时间区间作为所述空闲时间区间。
需要说明的是，服务器在各时刻的平均业务访问量为服务器在统计周期内各时刻的业务访问量的平均值。例如，在一统计周期(一周)内，服务器在每天12:00:00的业务访问量分别为10、12、10、8、10、10以及10。则服务器在12:00:00时刻的平均业务访问量为10。
具体操作中，根据服务器在各时刻的平均业务访问量制作服务器的平均业务访问量随着时间变化的曲线，该曲线在某一时刻的数值即为该时刻的平均业务访问量。选出各时刻的平均业务访问量均小于预设的业务访问量阈值的时间区间作为空闲时间区间。
参见图11，其为本发明一实施例中平均业务访问量随着时间变化的示意图，在本实施例中，业务访问量阈值设定为A0。有图可知，在本实施例中，空闲时间区间为(T1,T2)以及(T3,T4)。
S222、判断当前时间是否处于空闲时间区间内。
具体实施中，判断当前时刻是否处于空闲时间区间内。
S223、若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
具体实施中，如果当前处于空闲时间区间内，则判定当前处于空闲时段。
相应的，如果当前不处于空闲时间区间内，判定当前不处于空闲时段。
S23、若服务器当前处于空闲时段，判定服务器处于空闲状态。
具体实施中，如果当前处于空闲时段，则判定服务器处于空闲状态，此时可以执行待处理任务队列中各接口的接口调用日志的存储任务。
S24、判定服务器不处于空闲状态。
S3、若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理。
具体实施中，如果服务器处于空闲状态，则说明一方面服务器的资源使用率较低，另一方面服务不处于业务的高峰期，因此可对待处理任务队列中的存储任务进行处理。
在一实施例中，如图4所示，所述步骤S3可包括步骤S31-S33。
S31，判断在当前时间所处的空闲时间区间内服务器是否能够处理待处理任务队列中的所有存储任务。
具体实施中，首先获取当前时间所处的空闲时间区间的剩余时间。具体地，当前时间所处的空闲时间区间的剩余时间等于当前时间所处的空闲时间区间的终点与当前时间的差值。例如，在一实施例中，当前时间所处的空闲时间区间为12：00-13:00，当前时间为12:30，则当前时间所处的空闲时间区间的剩余时间等于30min。
进一步地，根据当前时间所处的空闲时间区间的剩余时间以及服务器处理存储任务的平均时间确定在当前时间所处的空闲时间区间的剩余时间内服务器能够处理的存储任务的数量(即当前时间所处的空闲时间区间的剩余时间与服务器处理存储任务的平均时间的商)。例如，在一实施例中，当前时间所处的空闲时间区间的剩余时间为10min，服务器处理存储任务的平均时间0.01s，则服务器能够处理的存储任务的数量为60000个。
需要说明的是，服务器处理存储任务的平均时间可通过统计服务器的实际处理情况获取。
然后判断服务器能够处理的存储任务的数量是否大于待处理任务队列中存储任务的数量。若大于，则表明在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的所有存储任务；反之，则表明在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务。
如果在当前时间所处的空闲时间区间内能够处理待处理任务队列中的所有存储任务，则执行待处理任务队列中的全部存储任务。
S32，若在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务，获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
具体实施中，如果在当前时间所处的空闲时间区间内不能够处理待处理任务队列中的所有存储任务，则获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
具体地，根据当前时间所处的空闲时间区间的剩余时间以及服务器处理存储任务的平均时间确定在当前时间所处的空闲时间区间的剩余时间内服务器能够处理的存储任务的数量作为特征数量，然后按顺序执行相应数量为特征数量的存储任务。
S4、若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
具体实施中，如果服务器不处于空闲状态，则暂停对待处理任务队列中的存储任务进行处理。待服务器处于空闲状态时，再对待处理任务队列中的存储任务进行处理，以确保服务器对后续业务的处理速度，降低服务器的业务响应时间。
通过应用本发明实施例的技术方案，在检测到接口调用日志时，将该接口调用日志的存储任务加入到待处理任务队列中，判断服务器是否处于空闲状态，在服务器处于空闲状态时，对待处理任务队列中的存储任务进行处理，在服务器不处于空闲状态时，暂停对待处理任务队列中的存储任务进行处理，从而在服务器繁忙时，能够减少数据库连接占用量(暂时不将调用日志存入数据库中，能够减少数据库的访问量)，提高了服务器对后续业务的处理效率，降低了服务器对业务的响应时间，提高了用户的使用体验。
图5是本发明实施例提供的一种日志存储装置50的示意性框图。如图5所示，对应于以上日志存储方法，本发明还提供一种日志存储装置50。该日志存储装置50包括用于执行上述日志存储方法的单元，该装置可以被配置于服务器中。具体地，请参阅图5，该日志存储装置50包括加入单元51、第一判断单元52、处理单元53以及暂停单元54。
加入单元51，用于若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中。
第一判断单元52，用于判断服务器是否处于空闲状态。
处理单元53，用于若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理。
暂停单元54，用于若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
在一实施例中，如图6所示，所述第一判断单元52包括第二判断单元521、第一判定单元522、第三判断单元523、第二判定单元524以及第三判定单元525。
第二判断单元521，用于判断服务器的资源使用率是否小于预设的资源使用率阈值。
第一判定单元522，若服务器的资源使用率不小于预设的资源使用率阈值，判定服务器不处于空闲状态。
第三判断单元523，用于若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段。
第二判定单元524，用于若服务器当前处于空闲时段，判定服务器处于空闲状态。
第三判定单元525，用于若当前不处于空闲时段，判定服务器不处于空闲状态。
在一实施例中，如图7所示，所述第三判断单元523包括确定单元5231、第四判断单元5232以及第四判定单元5233。
确定单元5231，用于根据服务器的历史业务数据确定空闲时间区间。
第四判断单元5232，用于判断当前时间是否处于空闲时间区间内。
第四判定单元5233，用于若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
在一实施例中，如图8所示，所述处理单元53包括第五判断单元531、第一执行单元532以及第二执行单元533。
第五判断单元531，用于判断在当前时间所处的空闲时间区间内服务器是否能够处理待处理任务队列中的所有存储任务。
执行单元532，用于若在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务，获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
在一实施例中，参见图9确定单元5231包括获取单元91。
获取单元91，用于获取各时刻的平均业务访问量均低于预设的业务访问量阈值的时间区间作为所述空闲时间区间。
需要说明的是，所属领域的技术人员可以清楚地了解到，上述日志存储装置50和各单元的具体实现过程，可以参考前述方法实施例中的相应描述，为了描述的方便和简洁，在此不再赘述。
上述日志存储装置50可以实现为一种计算机程序的形式，该计算机程序可以在如图10所示的计算机设备上运行。
请参阅图10，图10是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备为服务器，其中，服务器可以是独立的服务器，也可以是多个服务器组成的服务器集群。
参阅图10，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行一种日志存储方法。
该处理器502用于提供计算和控制能力，以支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行一种日志存储方法。
该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解，图10中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现如下步骤：
若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
判断服务器是否处于空闲状态；
若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
在一实施例中，处理器502在实现所述判断服务器是否处于空闲状态步骤时，具体实现如下步骤：
判断服务器的资源使用率是否小于预设的资源使用率阈值；
若服务器的资源使用率不小于预设的资源使用率阈值，判定服务器不处于空闲状态；
若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段；
若服务器当前处于空闲时段，判定服务器处于空闲状态；
若当前不处于空闲时段，判定服务器不处于空闲状态。
在一实施例中，处理器502在实现所述根据服务器的历史业务数据判断服务器当前是否处于空闲时段步骤时，具体实现如下步骤：
根据服务器的历史业务数据确定空闲时间区间；
判断当前时间是否处于空闲时间区间内；
若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
在一实施例中，处理器502在实现所述对所述待处理任务队列中的存储任务进行处理步骤时，具体实现如下步骤：
判断在当前时间所处的空闲时间区间内服务器是否能够处理待处理任务队列中的所有存储任务；
若在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务，获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
在一实施例中，服务器的历史业务数据包括服务器在一天的各时刻服务器的平均业务访问量，处理器502在实现所述根据服务器的历史业务数据确定空闲时间区间步骤时，具体实现如下步骤：
获取各时刻的平均业务访问量均低于预设的业务访问量阈值的时间区间作为所述空闲时间区间。
应当理解，在本申请实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable GateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成。该计算机程序可存储于一存储介质中，该存储介质为计算机可读存储介质。该计算机程序被该计算机系统中的至少一个处理器执行，以实现上述方法的实施例的流程步骤。
因此，本发明还提供一种存储介质。该存储介质可以为计算机可读存储介质。该存储介质存储有计算机程序。该计算机程序被处理器执行时使处理器执行如下步骤：
若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
判断服务器是否处于空闲状态；
若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理。
在一实施例中，所述处理器在执行所述计算机程序而实现所述判断服务器是否处于空闲状态步骤时，具体实现如下步骤：
判断服务器的资源使用率是否小于预设的资源使用率阈值；
若服务器的资源使用率不小于预设的资源使用率阈值，判定服务器不处于空闲状态；
若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段；
若服务器当前处于空闲时段，判定服务器处于空闲状态；
若当前不处于空闲时段，判定服务器不处于空闲状态。
在一实施例中，所述处理器在执行所述计算机程序而实现所述根据服务器的历史业务数据判断服务器当前是否处于空闲时段步骤时，具体实现如下步骤：
根据服务器的历史业务数据确定空闲时间区间；
判断当前时间是否处于空闲时间区间内；
若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
在一实施例中，所述处理器在执行所述计算机程序而实现所述对所述待处理任务队列中的存储任务进行处理步骤时，具体实现如下步骤：
判断在当前时间所处的空闲时间区间内服务器是否能够处理待处理任务队列中的所有存储任务；
若在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务，获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
在一实施例中，服务器的历史业务数据包括服务器在一天的各时刻服务器的平均业务访问量，所述处理器在执行所述计算机程序而实现所述根据服务器的历史业务数据确定空闲时间区间步骤时，具体实现如下步骤：
获取各时刻的平均业务访问量均低于预设的业务访问量阈值的时间区间作为所述空闲时间区间。
所述存储介质可以是U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、磁碟或者光盘等各种可以存储程序代码的计算机可读存储介质。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的。例如，各个单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本发明实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，终端，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详细描述的部分，可以参见其他实施例的相关描述。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，尚且本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种日志存储方法，其特征在于，包括：
若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
判断服务器是否处于空闲状态；
若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理；
其中，所述将所述接口调用日志的存储任务加入到待处理任务队列中之前还包括将所述接口调用日志缓存在服务器中；所述将所述接口调用日志的存储任务加入到待处理任务队列中之后还包括根据服务器的运行参数和服务器的历史业务数据判断服务器的状态；
所述判断服务器是否处于空闲状态，包括：
判断服务器的资源使用率是否小于预设的资源使用率阈值；
若服务器的资源使用率不小于预设的资源使用率阈值，判定服务器不处于空闲状态；
若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段；
若服务器当前处于空闲时段，判定服务器处于空闲状态；
若当前不处于空闲时段，判定服务器不处于空闲状态；
其中，资源使用率是指服务器当前使用的资源占服务器总资源的比重；
根据服务器在各时刻的平均业务访问量制作服务器的平均业务访问量随着时间变化的曲线。
2.根据权利要求1所述的日志存储方法，其特征在于，所述根据服务器的历史业务数据判断服务器当前是否处于空闲时段，包括：
根据服务器的历史业务数据确定空闲时间区间；
判断当前时间是否处于空闲时间区间内；
若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
3.根据权利要求2所述的日志存储方法，其特征在于，其特征在于，所述对所述待处理任务队列中的存储任务进行处理，包括：
判断在当前时间所处的空闲时间区间内服务器是否能够处理待处理任务队列中的所有存储任务；
若在当前时间所处的空闲时间区间内服务器不能够处理待处理任务队列中的所有存储任务，获取在当前时间所处的空闲时间区间内服务器能够处理待处理任务队列中的存储任务的数量作为特征数量，并相应处理数量为所述特征数量的存储任务。
4.根据权利要求2所述的日志存储方法，其特征在于，服务器的历史业务数据包括服务器在一天的各时刻服务器的平均业务访问量，所述根据服务器的历史业务数据确定空闲时间区间，包括：
获取各时刻的平均业务访问量均低于预设的业务访问量阈值的时间区间作为所述空闲时间区间。
5.一种日志存储装置，其特征在于，包括：
加入单元，用于若检测到接口调用日志，将所述接口调用日志的存储任务加入到待处理任务队列中，其中，所述接口调用日志的存储任务用于将所述接口调用日志存储到数据库中；
第一判断单元，用于判断服务器是否处于空闲状态；
处理单元，用于若服务器处于空闲状态，对所述待处理任务队列中的存储任务进行处理；
暂停单元，用于若服务器不处于空闲状态，暂停对待处理任务队列中的存储任务进行处理；
其中，所述将所述接口调用日志的存储任务加入到待处理任务队列中之前还包括将所述接口调用日志缓存在服务器中；所述将所述接口调用日志的存储任务加入到待处理任务队列中之后还包括根据服务器的运行参数和服务器的历史业务数据判断服务器的状态；
所述第一判断单元包括：
第二判断单元，用于判断服务器的资源使用率是否小于预设的资源使用率阈值；
第一判定单元，若服务器的资源使用率不小于预设的资源使用率阈值，判定服务器不处于空闲状态；
第三判断单元，用于若服务器的资源使用率小于预设的资源使用率阈值，根据服务器的历史业务数据判断服务器当前是否处于空闲时段；
第二判定单元，用于若服务器当前处于空闲时段，判定服务器处于空闲状态；
第三判定单元，用于若当前不处于空闲时段，判定服务器不处于空闲状态；
其中，资源使用率是指服务器当前使用的资源占服务器总资源的比重；
根据服务器在各时刻的平均业务访问量制作服务器的平均业务访问量随着时间变化的曲线。
6.根据权利要求5所述的日志存储装置，其特征在于，所述第三判断单元包括：
确定单元，用于根据服务器的历史业务数据确定空闲时间区间；
第四判断单元，用于判断当前时间是否处于空闲时间区间内；
第四判定单元，用于若当前时间处于空闲时间区间内，判定服务器当前处于空闲时段。
7.一种计算机设备，其特征在于，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-4中任一项所述的方法。
8.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序当被处理器执行时可实现如权利要求1-4中任一项所述的方法。
CN201811208796.4A 2018-10-17 2018-10-17 日志存储方法、装置、计算机设备及存储介质 Active CN109298990B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811208796.4A CN109298990B (zh) 2018-10-17 2018-10-17 日志存储方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811208796.4A CN109298990B (zh) 2018-10-17 2018-10-17 日志存储方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN109298990A CN109298990A (zh) 2019-02-01
CN109298990B true CN109298990B (zh) 2023-04-14

Family

ID=65162995

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811208796.4A Active CN109298990B (zh) 2018-10-17 2018-10-17 日志存储方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN109298990B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110188490B (zh) * 2019-06-03 2021-03-23 珠海格力电器股份有限公司 提高数据仿真效率的方法及装置、存储介质和电子装置
CN110413696A (zh) * 2019-08-02 2019-11-05 中国工商银行股份有限公司 一种数据处理方法及装置
CN110502495A (zh) * 2019-09-02 2019-11-26 中国工商银行股份有限公司 一种应用服务器的日志收集方法及装置
CN112579281B (zh) * 2019-09-27 2023-10-10 杭州海康威视数字技术股份有限公司 资源分配方法、装置、电子设备及存储介质
CN111290923B (zh) * 2020-03-09 2023-07-21 北京奇艺世纪科技有限公司 一种资源状态检测方法及装置
CN111752704B (zh) * 2020-05-23 2023-01-10 苏州浪潮智能科技有限公司 一种分布式存储文件系统mds日志落盘方法及装置
CN112468573B (zh) * 2020-11-24 2023-05-23 新天科技股份有限公司 基于分布式部署的数据推送方法、装置、设备及存储介质
CN112764937B (zh) * 2021-01-29 2022-04-15 中国平安人寿保险股份有限公司 访问量控制方法、装置、计算机设备及存储介质
CN113157518A (zh) * 2021-02-24 2021-07-23 中国建设银行股份有限公司 一种设备接入方法及装置
CN113254414A (zh) * 2021-06-29 2021-08-13 天聚地合(苏州)数据股份有限公司 接口调用日志的生成方法、装置、存储介质及设备
CN113723816A (zh) * 2021-08-31 2021-11-30 成都智元汇信息技术股份有限公司 一种虚拟违禁品考核信息下发的双状态判定方法及服务器

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1662901A (zh) * 2002-06-25 2005-08-31 国际商业机器公司 用于在分布式环境中监视应用性能的方法和系统
CN107423188A (zh) * 2016-03-07 2017-12-01 阿里巴巴集团控股有限公司 日志处理方法及设备

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060190938A1 (en) * 2005-02-22 2006-08-24 Capek Peter G System and method for predictive idle-time task initiation
US7770061B2 (en) * 2005-06-02 2010-08-03 Avaya Inc. Fault recovery in concurrent queue management systems
CN103838659B (zh) * 2014-02-17 2017-09-01 大唐移动通信设备有限公司 一种系统日志的控制方法和装置
CN106156115B (zh) * 2015-04-07 2019-09-27 中国移动通信集团云南有限公司 一种资源调度方法及装置
CN105591821B (zh) * 2016-01-06 2020-06-30 北京京东尚科信息技术有限公司 监控系统和业务系统
CN108628890B (zh) * 2017-03-21 2021-04-30 北京京东尚科信息技术有限公司 一种数据导出方法及系统
CN108446210B (zh) * 2018-02-07 2021-04-30 平安科技（深圳）有限公司 系统性能的度量方法、存储介质和服务器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1662901A (zh) * 2002-06-25 2005-08-31 国际商业机器公司 用于在分布式环境中监视应用性能的方法和系统
CN107423188A (zh) * 2016-03-07 2017-12-01 阿里巴巴集团控股有限公司 日志处理方法及设备

Also Published As

Publication number Publication date
CN109298990A (zh) 2019-02-01

Similar Documents

Publication Publication Date Title
CN109298990B (zh) 日志存储方法、装置、计算机设备及存储介质
CN108829521B (zh) 任务处理方法、装置、计算机设备及存储介质
CN111104448A (zh) 大数据量Excel文件导出方法、装置、计算机设备及存储介质
CN112383585A (zh) 消息处理系统、方法及电子设备
WO2021253851A1 (zh) 一种集群分布式资源调度方法、装置、设备及存储介质
CN110808877A (zh) 基于接口响应时长的统计分析方法、装置及计算机设备
CN112749013A (zh) 线程负载的检测方法、装置、电子设备及存储介质
CN112363886A (zh) 数据库监控方法、系统、终端及存储介质
CN114827168A (zh) 告警聚合上报方法、装置、计算机设备及存储介质
US11455293B2 (en) Counting method, counter and storage medium
CN112052088B (zh) 自适应的进程cpu资源限制方法、装置、终端及存储介质
CN112579396A (zh) 软件系统动态限流方法、装置及设备
CN108804152B (zh) 配置参数的调节方法及装置
CN113992378B (zh) 一种安全监测方法、装置、电子设备及存储介质
CN115774602A (zh) 一种容器资源的分配方法、装置、设备及存储介质
CN112631771B (zh) 一种大数据系统的并行处理方法
CN111190728B (zh) 资源调整方法及装置
CN113590357A (zh) 连接池的调整方法、装置、计算机设备及存储介质
CN110955579A (zh) 一种基于Ambari的大数据平台的监测方法
CN111090627A (zh) 基于池化的日志存储方法、装置、计算机设备及存储介质
CN111193760A (zh) 一种信息发送方法、装置及存储介质
CN111124555A (zh) 大数据接口的调用方法、装置、计算机设备及存储介质
CN113688013A (zh) 一种告警消息通知方法及相关装置
CN114564328A (zh) 一种处理器监测方法、看门狗、处理器及处理器监测系统
CN113064714A (zh) 利用研发环境中的空闲资源处理任务的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant