CN113065884A - 一种话单文件的处理方法、装置及电子设备 - Google Patents
一种话单文件的处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN113065884A CN113065884A CN202010244051.4A CN202010244051A CN113065884A CN 113065884 A CN113065884 A CN 113065884A CN 202010244051 A CN202010244051 A CN 202010244051A CN 113065884 A CN113065884 A CN 113065884A
- Authority
- CN
- China
- Prior art keywords
- preset
- utilization rate
- ticket
- memory
- time period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000034 method Methods 0.000 claims abstract description 236
- 230000008569 process Effects 0.000 claims abstract description 195
- 238000012545 processing Methods 0.000 claims abstract description 108
- 238000003860 storage Methods 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 abstract description 15
- 230000015556 catabolic process Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0201—Market modelling; Market analysis; Collecting market data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Game Theory and Decision Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Tourism & Hospitality (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明实施例提供了一种话单文件的处理方法、装置及电子设备,该方法包括:获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理。通过本发明实施例,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
Description
技术领域
本发明涉及通信技术领域,尤其涉及一种话单文件的处理方法、装置及电子设备。
背景技术
在大数据时代,话单文件是运营商最重要的数据源之一,对话单文件进行处理是后续分析的基础,现有技术通常采用经营分析系统对计费侧主机上生成的话单文件进行处理。
由于计费侧主机可能出现宕机、以及可能受到网络异常等的影响,导致计费侧主机可能在短时间内堆积大量的话单文件,这就使得经营分析系统需要在短时间内对上述堆积的话单文件进行处理。
一些场景下,采用预设数量的进程去处理话单文件的方式,当需要经营分析系统在短时间内处理大量的文件时,会导致每个进程处理的话单文件的数量增多,容易导致经营分析系统的系统崩溃。采用增加并行进程数的方式在短时间内处理大量的文件,由于并行进程的数量增多,也同样容易造成经营分析系统的系统崩溃。
发明内容
本发明实施例的目的是提供一种话单文件的处理方法、装置及电子设备,以解决经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
为了解决上述技术问题,本发明实施例是这样实现的:
第一方面,本发明实施例提供了一种话单文件的处理方法,包括:获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;启动所述目标数量的采集进程,对所述待处理的话单文件进行处理。
第二方面,本发明实施例提供了一种话单文件的处理装置,所述装置包括:第一获取模块,用于获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;确定模块,用于根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;处理模块,用于启动所述目标数量的采集进程,对所述待处理的话单文件进行处理。
第三方面,本发明实施例提供了一种电子设备,包括处理器、通信接口、存储器和通信总线;其中,所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的程序,实现如第一方面所述的话单文件的处理方法步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,实现如第一方面所述的话单文件的处理方法步骤。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,然后,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的话单文件的处理方法的第一种流程示意图;
图2为本发明实施例提供的话单文件的处理方法的第二种流程示意图;
图3为本发明实施例提供的话单文件的处理方法的第三种流程示意图;
图4为本发明实施例提供的话单文件的处理方法的第四种流程示意图;
图5为本发明实施例提供的话单文件的处理方法的第五种流程示意图;
图6为本发明实施例提供的话单文件的处理装置的模块组成示意图;
图7为本发明实施例提供的电子设备的结构示意图。
具体实施方式
本发明实施例提供了一种话单文件的处理方法、装置及电子设备。
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
如图1所示,本发明实施例提供一种话单文件的处理方法,该方法的执行主体可以为服务器,其中,该服务器可以是独立的服务器,也可以是由多个服务器组成的服务器集群,而且,该服务器可以是能够进行网络操作处理的服务器,如话单文件处理服务器、经营分析系统服务器等。该方法具体可以包括以下步骤:
在S101中,获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率。
以执行主体为话单文件处理服务器为例,话单文件处理服务器中可以预先设置有监控程序,该监控程序可以用于统计单位时间内各话单采集进程的CPU使用率,以及各话单采集进程的内存使用率。当话单文件处理服务器的采集入库程序启动时,获取预设时间段内,各话单采集进程的CPU使用率,以及各话单采集进程的内存使用率,并计算预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率。
在S102中,根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量。
其中,上述预设规则可以是根据当前主机CPU使用率、预设时间段内采集进程的CPU平均使用率,确定当前主机可调取的待采集的采集进程的第二预设数量。根据当前主机内存使用率、预设时间段内采集进程的内存平均使用率,确定当前主机可调取的待采集的采集进程的第三预设数量。读取配置信息中可以调用的最大进程数,并从上述第二预设数量、第三预设数量和读取的最大进程数中选取进程数最小的数量作为待发起的采集进程的目标数量。
在S103中,启动目标数量的采集进程,对待处理的话单文件进行处理。
在实施中,通过上述S103的处理,确定出待发起的采集进程的目标数量之后,可以启动上述目标数量的采集进程,对待处理的话单文件进行处理。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了话单文件处理服务器在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
进一步的,如图2所示,上述方法还包括以下处理方式,具体可以参见下述S104-S105的处理。
在S104中,获取话单文件。
其中,上述话单文件可以是由计费侧主机对原始话单处理,生成的话单计费文件。该话单计费文件可以包括短信计费话单文件、流量计费话单文件和语音计费话单文件等。
在S105中,在获取到的话单文件的数量大于第一预设阈值的情况下,选取第一预设数量的话单文件作为待处理的话单文件。
上述待处理的话单文件可以是从获取到的话单文件中选取的预设数量的话单文件,或者,还可以是从获取到的话单文件中选取的预设类别的话单文件,例如,预设类别的话单文件可以是短信类计费话单文件、流量类计费话单文件和语音通话类计费话单文件等。
需要说明的是,话单文件处理服务器上可以预先定义有配置文件,该配置文件中可以预先配置有待获取的话单文件的信息(如待获取的话单文件存储的IP地址、待获取的话单文件读取目录、待获取的话单文件传输协议支持的模式、待获取的话单文件的业务类型分组)、话单文件处理服务器可以调用的最大进程数、话单文件处理服务器可以启动的进程数、话单文件处理服务器主机CPU最大客户数、程序调度批次启动时间、入库话单文件信息(如入库话单文件目录、入库文件合并容量配置信息)、话单文件服务器每批次获取任务读取的最大文件个数等信息。
具体的,以话单文件处理服务器从计费侧主机获取话单文件为例,上述话单文件处理服务器可以是经营分析系统服务器。当话单文件处理服务器从计费侧主机获取话单文件时,话单文件处理服务器可以读取上述配置文件,按照配置文件中的程序调度批次启动时间(如每隔5分钟)、待获取的话单文件传输协议支持的模式、待获取的话单文件存储的IP地址从计费侧主机获取话单文件。
然后,话单文件处理服务器可以将从计费侧主机获取的话单文件保存到数组n中。并将数组n中的文件名与历史周期的文件名(如上一个周期获取到的话单文件的文件名)进行对比,剔除数组n中包含的与历史周期文件的文件名相同的文件,统计经过上述剔除后得到的话单文件的数量(如m)。读取配置信息中的话单文件服务器每批次获取任务可以读取的最大文件数量,若话单文件服务器可以读取的最大文件数量小于剔除后得到的话单文件的数量,则选取话单文件服务器可以读取的最大文件数量的话单文件,作为待处理的话单文件。
进一步的,如图3所示,上述S102的具体处理方式可以多种多样,以下再提供一种可选的处理方式,具体可以参见下述S1021-S1023的处理。
在S1021中,在当前主机CPU使用率小于第二预设阈值的情况下,根据当前主机CPU使用率、预设时间段内采集进程的CPU平均使用率、第二预设阈值,确定待采集的采集进程的第二预设数量。
在实施中,当话单文件处理服务器的主机CPU使用率高于某一预设阈值的情况时,很容易导致主机运行缓慢,进而影响话单文件处理服务器处理话单的效率,因此,话单文件处理服务器的主机CPU使用率通常需要小于某一预设阈值(如第二预设阈值),例如,该第二预设阈值可以为80%。
具体的,设当前主机CPU使用率为P,预设时间段内采集进程的CPU平均使用率为第二预设阈值为0.8,第二预设数量为S1,则在当前主机CPU使用率小于第二预设阈值的情况下,可以通过下述公式来确定待采集的采集进程的第二预设数量:
在S1022中,在当前主机内存使用率小于第三预设阈值的情况下,根据当前主机内存使用率、预设时间段内采集进程的内存平均使用率、第三预设阈值,确定待采集的采集进程的第三预设数量。
在实施中,当话单文件处理服务器的内存使用率高于某一预设阈值的情况时,也同样很容易导致主机运行缓慢,进而影响话单文件处理服务器处理话单的效率,因此,话单文件处理服务器的主机内存使用率通常需要小于某一预设阈值(如第三预设阈值),上述第三预设阈值可以与第二预设阈值相同,也可以与第二预设阈值不同。例如,该第三预设阈值也可以为80%。
具体的,设当前主机内存使用率为R,预设时间段内采集进程的内存平均使用率为第三预设阈值为0.8,第三预设数量为S2,则在当前主机内存使用率小于第三预设阈值的情况下,可以通过下述公式来确定待采集的采集进程的第三预设数量:
在S1023中,从第二预设数量、第三预设数量以及第四预设数量中,选择满足预设数量规则的采集进程数,确定为待发起的采集进程的目标数量,其中,第四预设数量为系统预设的采集进程的数量。
需要说明的是,系统预设的采集进程的数量,可以为配置信息中话单文件处理服务器可以调用的最大进程数S3,即第三预设数量可以为S3。上述满足预设数量规则的采集进程数,可以是从上述第二预设数量、第三预设数量以及第四预设数量中选取的数量最小的进程数。
在实施中,当话单文件处理服务器检测到当前主机CPU使用率小于第二预设阈值的情况下,且当前主机内存使用率小于第三预设阈值的情况下,即P<第二预设阈值,且R<第三预设阈值的情况下,可以通过下述公式来确定待发起的采集进程的目标数量S: 例如,若第二预设阈值为80%,且第三预设阈值也为80%,则上述公式可以为:
需要说明的是,在P≥第二预设阈值,且R≥第三预设阈值的情况下,系统终止确定待发起采集进程目标数量的过程,直到满足当前主机CPU使用率小于第二预设阈值,或当前主机内存使用率小于第三预设阈值的情况下,开始执行确定待发起采集进程目标数量的过程。
进一步的,如图4所示,上述S103的具体处理方式可以多种多样,以下再提供一种可选的处理方式,具体可以参见下述S1031的处理。
在S1031中,将待处理的话单文件平均分配给目标数量的采集进程,以使目标数量的采集进程对待处理的话单文件进行处理。
在实施中,为了避免同一采集周期内,目标数量的采集进程中,分配给某些采集进程的话单文件数量过多,从而影响了采集进程处理话单文件的处理效率,因此,本申请实施例中,在确定出待处理的话单文件的数量以及待发起采集进程目标数量之后,还需要将待处理的话单文件平均分配给目标数量的采集进程,以使目标数量的采集进程对待处理的话单文件进行处理。
具体的,例如,若上述确定出待处理的话单文件的数量为m,待发起采集进程目标数量为S,分配给每个采集进程的话单文件数量为a,则a=m/S。
进一步的,考虑到话单处理服务器在对采集到的话单文件进行清洗合并后,合并后的话单文件的容量可能会大于入库文件的容量配置,进而导致无法入库的情况出现,因此,如图5所示,在对待处理的话单文件进行处理之后,还可以执行下述S106-S107的处理过程。
在S106中,根据入库文件的容量配置,将处理后的话单文件合并成多个与容量配置相匹配的入库文件。
在实施中,话单文件处理服务器在读取到采集进程采集的话单文件之后,可以读取配置文件中的入库文件合并容量配置信息以及话单文件清洗规则,分配预设数量的清洗合并进程,按照清洗规则对采集进程采集的话单文件进行清洗,然后,将清洗后的话单文件按照入库文件合并容量配置信息,合并成符合入库规则的多个与容量配置相匹配的入库文件。
在S107中,对入库文件进行入库处理。
在实施中,可以按照话单文件的业务类型和采集话单文件的数据周期,对上述入库文件进行入库处理。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
进一步的,通过根据入库文件的容量配置,对处理后得到的入库文件进行入库处理,解决了合并后的话单文件的容量可能会大于入库文件的容量配置,导致合并后的话单文件无法入库的问题。
对应上述实施例提供的话单文件的处理方法,基于相同的技术构思,本发明实施例还提供了一种话单文件的处理装置,图6为本发明实施例提供的话单文件的处理装置的第一种模块组成示意图,该话单文件的处理装置用于执行图1至图5描述的话单文件的处理方法,如图6所示,该话单文件的处理装置包括:第一获取模块601、确定模块602和处理模块603。
第一获取模块601用于获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率。确定模块602用于根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量。处理模块603用于启动所述目标数量的采集进程,对待处理的话单文件进行处理。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
可选地,上述装置还包括:第二获取模块和选取模块。
上述第二获取模块用于获取话单文件。选取模块用于在获取到的所述话单文件的数量大于第一预设阈值的情况下,选取第一预设数量的话单文件作为待处理的话单文件。
可选地,上述确定模块602,包括:第一确定单元、第二确定单元、第三确定单元。
第一确定单元用于在当前主机CPU使用率小于第二预设阈值的情况下,根据所述当前主机CPU使用率、所述预设时间段内采集进程的CPU平均使用率、所述第二预设阈值,确定待采集的采集进程的第二预设数量。第二确定单元用于在当前主机内存使用率小于第三预设阈值的情况下,根据所述当前主机内存使用率、所述预设时间段内采集进程的内存平均使用率、所述第三预设阈值,确定待采集的采集进程的第三预设数量。第三确定单元用于从所述第二预设数量、所述第三预设数量以及第四预设数量中,选择满足预设数量规则的采集进程数,确定为待发起的采集进程的目标数量,其中,所述第四预设数量为系统预设的采集进程的数量。
可选地,上述处理模块603用于将待处理的话单文件平均分配给所述目标数量的采集进程,以使所述目标数量的采集进程对所述待处理的话单文件进行处理。
可选地,上述装置还包括:合并模块和入库模块。
合并模块用于在对所述待处理的话单文件进行处理之后,根据入库文件的容量配置,将处理后的话单文件合并成多个与所述容量配置相匹配的入库文件。入库模块用于对所述入库文件进行入库处理。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
本发明实施例提供的话单文件的处理装置能够实现上述话单文件的处理方法对应的实施例中的各个过程,为避免重复,这里不再赘述。
需要说明的是,本发明实施例提供的话单文件的处理装置与本发明实施例提供的话单文件的处理方法基于同一发明构思,因此该实施例的具体实施可以参见前述话单文件的处理方法的实施,重复之处不再赘述。
对应上述实施例提供的话单文件的处理方法,基于相同的技术构思,本发明实施例还提供了一种电子设备,该电子设备用于执行上述的话单文件的处理方法,图7为实现本发明各个实施例的一种电子设备的结构示意图,如图7所示。电子设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上的处理器701和存储器702,存储器702中可以存储有一个或一个以上存储应用程序或数据。其中,存储器702可以是短暂存储或持久存储。存储在存储器702的应用程序可以包括一个或一个以上模块(图示未示出),每个模块可以包括对电子设备中的一系列计算机可执行指令。更进一步地,处理器701可以设置为与存储器702通信,在电子设备上执行存储器702中的一系列计算机可执行指令。电子设备还可以包括一个或一个以上电源703,一个或一个以上有线或无线网络接口704,一个或一个以上输入输出接口705,一个或一个以上键盘706。
具体在本实施例中,电子设备包括有处理器、通信接口、存储器和通信总线;其中,所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的程序,实现以下方法步骤:获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;启动所述目标数量的采集进程,对所述待处理的话单文件进行处理。
本申请实施例还提供一种计算机可读存储介质,所述存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现以下方法步骤:获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;启动所述目标数量的采集进程,对所述待处理的话单文件进行处理。
由以上本发明实施例提供的技术方案可见,本发明实施例通过获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,并根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,启动目标数量的采集进程,对待处理的话单文件进行处理,有效解决了经营分析系统在短时间内对采集到的大量话单文件进行处理时,容易造成系统崩溃的问题。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
可以理解的是,本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(Application Specific Integrated Circuits,ASIC)、数字信号处理器(Digital SignalProcessing,DSP)、数字信号处理设备(DSP Device,DSPD)、可编程逻辑设备(ProgrammableLogic Device,PLD)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本发明所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
还需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,本发明可以有各种更改和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。
Claims (10)
1.一种话单文件的处理方法,其特征在于,所述方法包括:
获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;
根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;
启动所述目标数量的采集进程,对待处理的话单文件进行处理。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取话单文件;
在获取到的所述话单文件的数量大于第一预设阈值的情况下,选取第一预设数量的话单文件作为待处理的话单文件。
3.根据权利要求1所述的方法,其特征在于,根据当前主机CPU使用率、当前主机内存使用率、预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量,包括:
在当前主机CPU使用率小于第二预设阈值的情况下,根据所述当前主机CPU使用率、所述预设时间段内采集进程的CPU平均使用率、所述第二预设阈值,确定待采集的采集进程的第二预设数量;
在当前主机内存使用率小于第三预设阈值的情况下,根据所述当前主机内存使用率、所述预设时间段内采集进程的内存平均使用率、所述第三预设阈值,确定待采集的采集进程的第三预设数量;
从所述第二预设数量、所述第三预设数量以及第四预设数量中,选择满足预设数量规则的采集进程数,确定为待发起的采集进程的目标数量,其中,所述第四预设数量为系统预设的采集进程的数量。
4.根据权利要求1所述的方法,其特征在于,所述启动所述目标数量的采集进程,对待处理的话单文件进行处理,包括:
将待处理的话单文件平均分配给所述目标数量的采集进程,以使所述目标数量的采集进程对所述待处理的话单文件进行处理。
5.根据权利要求1所述的方法,其特征在于,在对待处理的话单文件进行处理之后,还包括:
根据入库文件的容量配置,将处理后的话单文件合并成多个与所述容量配置相匹配的入库文件;
对所述入库文件进行入库处理。
6.一种话单文件的处理装置,其特征在于,所述装置包括:
第一获取模块,用于获取预设时间段内采集进程的CPU平均使用率、预设时间段内采集进程的内存平均使用率;
确定模块,用于根据当前主机CPU使用率、当前主机内存使用率、所述预设时间段内采集进程的CPU平均使用率、所述预设时间段内采集进程的内存平均使用率,按照预设规则,确定待发起的采集进程的目标数量;
处理模块,用于启动所述目标数量的采集进程,对待处理的话单文件进行处理。
7.根据权利要求6所述的装置,其特征在于,所述确定模块,包括:
第一确定单元,用于在当前主机CPU使用率小于第二预设阈值的情况下,根据所述当前主机CPU使用率、所述预设时间段内采集进程的CPU平均使用率、所述第二预设阈值,确定待采集的采集进程的第二预设数量;
第二确定单元,用于在当前主机内存使用率小于第三预设阈值的情况下,根据所述当前主机内存使用率、所述预设时间段内采集进程的内存平均使用率、所述第三预设阈值,确定待采集的采集进程的第三预设数量;
第三确定单元,用于从所述第二预设数量、所述第三预设数量以及第四预设数量中,选择满足预设数量规则的采集进程数,确定为待发起的采集进程的目标数量,其中,所述第四预设数量为系统预设的采集进程的数量。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
合并模块,用于在对所述待处理的话单文件进行处理之后,根据入库文件的容量配置,将处理后的话单文件合并成多个与所述容量配置相匹配的入库文件;
入库模块,用于对所述入库文件进行入库处理。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线;其中,所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的程序,实现如权利要求1-5任一项所述的话单文件的处理方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-5任一项所述的话单文件的处理方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010244051.4A CN113065884A (zh) | 2020-03-31 | 2020-03-31 | 一种话单文件的处理方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010244051.4A CN113065884A (zh) | 2020-03-31 | 2020-03-31 | 一种话单文件的处理方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113065884A true CN113065884A (zh) | 2021-07-02 |
Family
ID=76559082
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010244051.4A Pending CN113065884A (zh) | 2020-03-31 | 2020-03-31 | 一种话单文件的处理方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113065884A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020044639A1 (en) * | 2000-10-12 | 2002-04-18 | Takehiko Shioda | Telephone communication system and method, and server for providing advertisement information |
JP2011128706A (ja) * | 2009-12-15 | 2011-06-30 | Fujitsu Ltd | 仮想計算機割当資源管理プログラム、仮想計算機割当資源管理装置および仮想計算機割当資源管理方法 |
CN102156722A (zh) * | 2011-03-30 | 2011-08-17 | 中国工商银行股份有限公司 | 一种大批量数据处理系统及方法 |
CN103179285A (zh) * | 2011-12-21 | 2013-06-26 | 中国移动通信集团山西有限公司 | 一种话单文件的采集方法及装置 |
CN107832200A (zh) * | 2017-10-24 | 2018-03-23 | 平安科技(深圳)有限公司 | 告警处理方法、装置、计算机设备及存储介质 |
-
2020
- 2020-03-31 CN CN202010244051.4A patent/CN113065884A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020044639A1 (en) * | 2000-10-12 | 2002-04-18 | Takehiko Shioda | Telephone communication system and method, and server for providing advertisement information |
JP2011128706A (ja) * | 2009-12-15 | 2011-06-30 | Fujitsu Ltd | 仮想計算機割当資源管理プログラム、仮想計算機割当資源管理装置および仮想計算機割当資源管理方法 |
CN102156722A (zh) * | 2011-03-30 | 2011-08-17 | 中国工商银行股份有限公司 | 一种大批量数据处理系统及方法 |
CN103179285A (zh) * | 2011-12-21 | 2013-06-26 | 中国移动通信集团山西有限公司 | 一种话单文件的采集方法及装置 |
CN107832200A (zh) * | 2017-10-24 | 2018-03-23 | 平安科技(深圳)有限公司 | 告警处理方法、装置、计算机设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
岑春祥: "基于云化架构业务支撑系统业务连续性保障体系的研究", 《信息通信》, no. 11, 31 December 2017 (2017-12-31), pages 184 - 187 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108683720B (zh) | 一种容器集群服务配置方法及装置 | |
CN111813805A (zh) | 一种数据处理方法及装置 | |
CN111324533B (zh) | A/b测试方法、装置及电子设备 | |
CN112269661B (zh) | 基于Kafka集群的分区迁移方法和装置 | |
CN110647502A (zh) | 一种文件加载方法、设备、装置和计算机存储介质 | |
CN110046187B (zh) | 数据处理系统、方法及装置 | |
WO2018006721A1 (zh) | 日志文件的存储方法及装置 | |
CN111245732A (zh) | 一种流量控制方法、装置及设备 | |
CN112527746A (zh) | 日志存储方法、装置、设备及存储介质 | |
CN111666150B (zh) | 存储空间的分配方法、装置、终端及计算机可读存储介质 | |
CN111078588B (zh) | 垃圾回收方法、装置、设备及存储介质 | |
CN108664322A (zh) | 数据处理方法及系统 | |
CN113065884A (zh) | 一种话单文件的处理方法、装置及电子设备 | |
CN112751926A (zh) | 一种集群中工作节点的管理方法、系统及相关装置 | |
CN112416534A (zh) | 一种基于Agent的任务管理方法及装置 | |
CN108989088B (zh) | 一种日志上传方法和通信设备 | |
CN116204311A (zh) | Pod集群扩缩容方法、装置、计算机设备和存储介质 | |
CN114143263B (zh) | 一种对用户请求进行限流的方法、设备及介质 | |
WO2018188405A1 (zh) | 云应用资源的配置方法及装置 | |
CN106855824B (zh) | 一种任务停止方法、装置及电子设备 | |
CN113127289B (zh) | 一种基于yarn集群的资源管理方法、计算机设备和存储介质 | |
CN113886342A (zh) | 文件的格式转换方法、装置、存储介质及处理器 | |
CN108810299B (zh) | 一种信息解析的方法、介质及设备 | |
CN112910988A (zh) | 一种资源获取方法及资源调度装置 | |
CN111506658B (zh) | 数据处理方法、装置、第一设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |