CN110515963A - 收集统计信息的方法、装置、电子设备及可读存储介质 - Google Patents

收集统计信息的方法、装置、电子设备及可读存储介质 Download PDF

Info

Publication number
CN110515963A
CN110515963A CN201910817108.2A CN201910817108A CN110515963A CN 110515963 A CN110515963 A CN 110515963A CN 201910817108 A CN201910817108 A CN 201910817108A CN 110515963 A CN110515963 A CN 110515963A
Authority
CN
China
Prior art keywords
data
tables
update
amount
statistical information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910817108.2A
Other languages
English (en)
Inventor
李智攀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Neusoft Wang Hai Technology Co Ltd
Original Assignee
Beijing Neusoft Wang Hai Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Neusoft Wang Hai Technology Co Ltd filed Critical Beijing Neusoft Wang Hai Technology Co Ltd
Priority to CN201910817108.2A priority Critical patent/CN110515963A/zh
Publication of CN110515963A publication Critical patent/CN110515963A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2228—Indexing structures
    • G06F16/2272—Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2453—Query optimisation
    • G06F16/24534—Query rewriting; Transformation
    • G06F16/24542—Plan optimisation

Abstract

本申请提供了一种收集统计信息的方法、装置、电子设备及计算机可读存储介质，涉及数据库领域。该方法包括：当监测到数据表发生数据更新时，获取发生数据更新的更新数据量；基于所述更新数据量确定出更新后的数据表的数据总量；基于所述数据总量确定出更新数据量阈值；当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。本申请不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。

Description

收集统计信息的方法、装置、电子设备及可读存储介质
技术领域
本申请涉及数据库技术领域，具体而言，本申请涉及一种收集统计信息的方法、装置、电子设备及计算机可读存储介质。
背景技术
统计信息描述了一个数据表或索引视图中的某些列的值的分布情况，属于数据库对象。根据统计信息，查询优化器就能评估查询过程中需要读取的行数及结果集情况，同时也能创建高质量的查询计划。
在很多实际项目中常常会因为统计信息过期导致系统运行极度缓慢，SQLServer中会对新建的索引列自动创建统计信息，当自动创建统计信息参数设置为ON时，没有创建索引的查询列也会被创建统计信息，SQLServer也提供了是否自动更新统计信息的系统参数，但是这种自动更新只有当满足一定阈值或条件时才会被触发。因此，在很多时候过期的统计信息导致了查询操作选择了次优的执行计划，导致性能急剧下降，有时候，过期的统计信息可能比没有统计信息更加糟糕。
因此，在数据库自动更新统计信息条件未满足之前，由于统计信息更新不及时而导致的系统性能急剧下降成为了急需解决的问题。
目前解决此类问题最常见的做法就是技术人员仅仅对那些被发现统计信息过期的数据表做主动的收集，这样做法其实是治标不治本的，随着时间的推移还是会继续出现统计信息过期的数据表，这样不仅问题没有得到根本性解决，还耗费了人力成本和时间成本。
发明内容
本申请提供了一种收集统计信息的方法、装置、电子设备及计算机可读存储介质，可以解决在数据库自动更新统计信息条件未满足之前，由于统计信息更新不及时而导致的系统性能急剧下降的问题。所述技术方案如下：
第一方面，提供了一种收集统计信息的方法，该方法包括：
当监测到数据表发生数据更新时，获取发生数据更新的更新数据量；
基于所述更新数据量确定出更新后的数据表的数据总量；
基于所述数据总量确定出更新数据量阈值；
当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。
优选地，所述当检测到数据表发生数据更新时，获取发生数据更新的更新数据量的步骤，包括：
以预设的监测频率监测所述数据表是否发生数据更新；
当检测到数据表发生数据更新时，获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
优选地，还包括：
当所述更新数据量未超过所述更新数据量阈值时，重复执行所述以预设的监测频率监测所述数据表是否发生数据更新的步骤；
当检测到数据表发生数据更新时，获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
优选地，所述基于所述数据总量确定出更新数据量阈值的步骤，包括：
将所述数据总量与预设的阈值百分比的乘积数值，与预设的阈值基数值相加，得到所述更新数据量阈值。
优选地，所述收集所述数据表的统计信息的步骤，包括：
采用update statistics TableName语句收集所述数据表的统计信息。
优选地，所述收集所述数据表的统计信息之后，还包括：
将行修改计数器的数值清零。
第二方面，提供了一种收集统计信息的装置，该装置包括：
监测模块，用于监测数据表发生数据更新；
获取模块，用于获取发生数据更新的更新数据量；
第一处理模块，用于基于所述更新数据量确定出更新后的数据表的数据总量；
第二处理模块，用于基于所述数据总量确定出更新数据量阈值；
收集模块，用于当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。
优选地，所述监测模块具体用于：
以预设的监测频率监测所述数据表是否发生数据更新；
所述获取模块具体用于：
获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
优选地，还包括：
当所述更新数据量未超过所述更新数据量阈值时，重复执行所述监测模块和所述获取模块。
优选地，所述第二处理模块具体用于：
将所述数据总量与预设的阈值百分比的乘积数值，与预设的阈值基数值相加，得到所述更新数据量阈值。
优选地，所述收集模块具体用于：
采用update statistics TableName语句收集所述数据表的统计信息。
优选地，还包括：
清除模块，用于将行修改计数器的数值清零。
第三方面，提供了一种电子设备，该电子设备包括：
处理器、存储器和总线；
所述总线，用于连接所述处理器和所述存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，可执行指令使处理器执行如本申请的第一方面所示的收集统计信息的方法对应的操作。
第四方面，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现本申请第一方面所示的收集统计信息的方法。
本申请提供的技术方案带来的有益效果是：
当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于所述更新数据量确定出更新后的数据表的数据总量，再基于所述数据总量确定出更新数据量阈值，当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请一个实施例提供的一种收集统计信息的方法的流程示意图；
图2为本申请另一实施例提供的一种收集统计信息的方法的流程示意图；
图3为本申请又一实施例提供的一种收集统计信息的装置的结构示意图；
图4为本申请又一实施例提供的一种收集统计信息的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
本申请提供的收集统计信息的方法、装置、电子设备和计算机可读存储介质，旨在解决现有技术的如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
在一个实施例中提供了一种收集统计信息的方法，如图1所示，该方法包括：
步骤S101，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量；
具体而言，数据表可以是实际的业务数据表，数据表发生数据更新可以包括对表中的数据进行增、删、改操作，每当数据表发生数据时，SQLServer中的sys.sysindexes表中的RowModCtr(Row Modification Counter，行修改计数器)字段的数值就会累计加一，所以，应用于本发明实施例中，发生数据更新的更新数据量就是RowModCtr字段的数值。
在实际应用中，在监测数据表是否发生数据更新之前，技术人员可以预先设置监控配置信息。具体地，技术人员通过对实际业务数据表的分析，确定出需要监测自动更新统计信息的数据表，配置项可以包括数据表的ID、阈值百分比、监测频率等。
其中，数据库的统计信息收集策略和更新数据量有关，当更新数据量超过了统计信息收集策略中设置的更新数据量阈值时，就会收集统计信息，而阈值百分比就是用于计算更新数据量阈值的。
步骤S102，基于更新数据量确定出更新后的数据表的数据总量；
步骤S103，基于数据总量确定出更新数据量阈值；
在确定了数据表的数据总量后，就可以采用监控配置信息中的阈值百分比来确定出更新数据量阈值了。
步骤S104，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。
在本发明实施例中，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于更新数据量确定出更新后的数据表的数据总量，再基于数据总量确定出更新数据量阈值，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
在另一个实施例中提供了一种收集统计信息的方法，如图2所示，该方法包括：
步骤S201，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量；
具体而言，数据表可以是实际的业务数据表，数据表发生数据更新可以包括对表中的数据进行增、删、改操作，每当数据表发生数据时，SQLServer中的sys.sysindexes表中的RowModCtr(Row Modification Counter，行修改计数器)字段的数值就会累计加一，所以，应用于本发明实施例中，发生数据更新的更新数据量就是RowModCtr字段的数值。
在实际应用中，在监测数据表是否发生数据更新之前，技术人员可以预先设置监控配置信息。具体地，技术人员通过对实际业务数据表的分析，确定出需要监测自动更新统计信息的数据表，配置项可以包括数据表的ID、阈值百分比、监测频率等。
其中，数据库的统计信息收集策略和更新数据量有关，当更新数据量超过了统计信息收集策略中设置的更新数据量阈值时，就会收集统计信息，而阈值百分比就是用于计算更新数据量阈值的。
需要说明的是，本发明实施例可以在监控配置信息中同时设置多个数据表，并针对每个数据表分别设置不同的阈值百分比和监测频率，在本发明实施例中，仅仅以一个数据表进行举例说明。
在本发明一种优选实施例中，当检测到数据表发生数据更新时，获取发生数据更新的更新数据量的步骤，包括：
以预设的监测频率监测数据表是否发生数据更新；
当检测到数据表发生数据更新时，获取数据表对应的行修改计数器的数值，并将数值作为发生数据更新的更新数据量。
具体而言，在对数据表进行监测的时候，可以采用预设的监控配置信息中的监测频率，比如，每隔1小时，或3小时等来监测数据表是否发生数据更新，具体可以将上一次检测时RowModCtr字段的数值与当前检测时RowModCtr字段的数值进行比较，如果二者不相同，则可以确定数据表发生了数据更新，然后，将当前检测时RowModCtr字段的数值作为发生数据更新的更新数据量，比如，当前检测时RowModCtr字段的数值为800，那么更新数据量就是800。
步骤S202，基于更新数据量确定出更新后的数据表的数据总量；
比如，数据表在发生数据更新之前，RowModCtr字段的数值为500，更新数据量为800，那么更新后的数据表的数据总量就是1300了。
步骤S203，基于数据总量确定出更新数据量阈值；
在确定了数据表的数据总量后，就可以采用监控配置信息中的阈值百分比来确定出更新数据量阈值了。
在本发明一种优选实施例中，基于数据总量确定出更新数据量阈值的步骤，包括：
将数据总量与预设的阈值百分比的乘积数值，与预设的阈值基数值相加，得到更新数据量阈值。
在实际应用中，当数据表中的数据未超过500行时，SQLServer针对该数据表更新统计信息和不更新统计信息几乎是没有区别的，甚至没有统计信息也可以，不会出现性能问题，所以，在本发明实施例中，也采用了500作为阈值基数。
具体而言，可以采用如下方式计算出更新数据量阈值：
更新数据量阈值＝500+阈值百分比*数据总量；
比如，预设的阈值百分比为20％，数据总量为1000，那么更新数据量阈值就是700。
需要说明的是，500和20％仅仅只是用于举例说明的，在实际应用中，技术人员可以根据需求来设置阈值基数和阈值百分比，本发明实施例对此不作限制。
步骤S204，当更新数据量超过更新数据量阈值时，收集数据表的统计信息；
比如，预设的阈值百分比为20％，数据总量为10000，那么更新数据量阈值就是2500，而实际的更新数据量为3000，大于更新数据量阈值，因此，收集数据表的统计信息。其中，具体可以采用update statistics TableName语句来收集数据表的统计信息。
在本发明一种优选实施例中，当更新数据量未超过更新数据量阈值时，重复执行以预设的监测频率监测数据表是否发生数据更新的步骤；
当检测到数据表发生数据更新时，获取数据表对应的行修改计数器的数值，并将数值作为发生数据更新的更新数据量；
具体而言，当更新数据量未超过更新数据量阈值时，就不需要收集数据表的统计信息了，而是在下一个监测频率时，判断数据表是否发生数据更新，如果是，则基于更新后的数据表来确定是否需要收集统计信息。
比如，预设的阈值百分比为20％，数据总量为10000，那么更新数据量阈值就是2500，而当前的更新数据量为2000，那么当前就不需要收集统计信息；在下一个监测频率时，更新数据量为5000，那么数量总量则更新为15000，更新数据量阈值也更新为3500，此时，更新数据量大于更新数据量阈值，因此，需要收集更新后的数据表的统计信息了。
步骤S205，将行修改计数器的数值清零。
具体而言，当针对数据表收集了一次统计信息后，就可以将数据表对应的行修改计数器(也就是RowModCtr字段)的数值清零，这样就不会对下一次收集统计信息产生干扰了。
在本发明实施例中，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于更新数据量确定出更新后的数据表的数据总量，再基于数据总量确定出更新数据量阈值，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
图3为本申请又一实施例提供的一种收集统计信息的装置的结构示意图，如图3所示，本实施例的装置可以包括：
监测模块301，用于监测数据表发生数据更新；
获取模块302，用于获取发生数据更新的更新数据量；
第一处理模块303，用于基于所述更新数据量确定出更新后的数据表的数据总量；
第二处理模块304，用于基于所述数据总量确定出更新数据量阈值；
收集模块305，用于当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。
优选地，所述监测模块具体用于：
以预设的监测频率监测所述数据表是否发生数据更新；
所述获取模块具体用于：
获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
优选地，还包括：
当所述更新数据量未超过所述更新数据量阈值时，重复执行所述监测模块和所述获取模块。
优选地，所述第二处理模块具体用于：
将所述数据总量与预设的阈值百分比的乘积数值，与预设的阈值基数值相加，得到所述更新数据量阈值。
优选地，所述收集模块具体用于：
采用update statistics TableName语句收集所述数据表的统计信息。
优选地，还包括：
清除模块，用于将行修改计数器的数值清零。
本实施例的收集统计信息的装置可执行本申请第一个实施例所示的收集统计信息的方法，其实现原理相类似，此处不再赘述。
在本发明实施例中，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于更新数据量确定出更新后的数据表的数据总量，再基于数据总量确定出更新数据量阈值，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
本申请的又一实施例中提供了一种电子设备，该电子设备包括：存储器和处理器；至少一个程序，存储于存储器中，用于被处理器执行时，与现有技术相比可实现：在本发明实施例中，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于更新数据量确定出更新后的数据表的数据总量，再基于数据总量确定出更新数据量阈值，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
在一个可选实施例中提供了一种电子设备，如图4所示，图4所示的电子设备4000包括：处理器4001和存储器4003。其中，处理器4001和存储器4003相连，如通过总线4002相连。可选地，电子设备4000还可以包括收发器4004。需要说明的是，实际应用中收发器4004不限于一个，该电子设备4000的结构并不构成对本申请实施例的限定。
处理器4001可以是CPU，通用处理器，DSP，ASIC，FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器4001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线4002可包括一通路，在上述组件之间传送信息。总线4002可以是PCI总线或EISA总线等。总线4002可以分为地址总线、数据总线、控制总线等。为便于表示，图4中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器4003可以是ROM或可存储静态信息和指令的其他类型的静态存储设备，RAM或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
存储器4003用于存储执行本申请方案的应用程序代码，并由处理器4001来控制执行。处理器4001用于执行存储器4003中存储的应用程序代码，以实现前述任一方法实施例所示的内容。
其中，电子设备包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。
本申请的又一实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当其在计算机上运行时，使得计算机可以执行前述方法实施例中相应内容。与现有技术相比，在本发明实施例中，当监测到数据表发生数据更新时，获取发生数据更新的更新数据量，然后基于更新数据量确定出更新后的数据表的数据总量，再基于数据总量确定出更新数据量阈值，当更新数据量超过更新数据量阈值时，收集数据表的统计信息。这样，在基于SQLServer内置收集统计信息策略的基础上做了可配置化的扩展，使得用户可以根据自身的业务需求结合具体业务表的更新数据量，通过自定义收集统计信息的阀值百分比计算出更新数据量阀值，进而监测、分析配置表收集统计信息的时机，当更新数据量达到更新数据量阀值时，主动触发对被监测数据表进行统计信息收集，从而实现了对SQLServer数据库统计信息收集策略的补充和加强，使其更能满足日常项目需求，不仅解决了因统计信息过期而导致的系统性能急剧下降的问题，还节省了人力成本和时间成本。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种收集统计信息的方法，其特征在于，包括：
当监测到数据表发生数据更新时，获取发生数据更新的更新数据量；
基于所述更新数据量确定出更新后的数据表的数据总量；
基于所述数据总量确定出更新数据量阈值；
当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。
2.根据权利要求1所述的收集统计信息的方法，其特征在于，所述当检测到数据表发生数据更新时，获取发生数据更新的更新数据量的步骤，包括：
以预设的监测频率监测所述数据表是否发生数据更新；
当检测到数据表发生数据更新时，获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
3.根据权利要求2所述的收集统计信息的方法，其特征在于，还包括：
当所述更新数据量未超过所述更新数据量阈值时，重复执行所述以预设的监测频率监测所述数据表是否发生数据更新的步骤；
当检测到数据表发生数据更新时，获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
4.根据权利要求1或2所述的收集统计信息的方法，其特征在于，所述基于所述数据总量确定出更新数据量阈值的步骤，包括：
将所述数据总量与预设的阈值百分比的乘积数值，与预设的阈值基数值相加，得到所述更新数据量阈值。
5.根据权利要求1所述的收集统计信息的方法，其特征在于，所述收集所述数据表的统计信息的步骤，包括：
采用update statistics TableName语句收集所述数据表的统计信息。
6.根据权利要求2所述的收集统计信息的方法，其特征在于，所述收集所述数据表的统计信息之后，还包括：
将行修改计数器的数值清零。
7.一种收集统计信息的装置，其特征在于，包括：
监测模块，用于监测数据表发生数据更新；
获取模块，用于获取发生数据更新的更新数据量；
第一处理模块，用于基于所述更新数据量确定出更新后的数据表的数据总量；
第二处理模块，用于基于所述数据总量确定出更新数据量阈值；
收集模块，用于当所述更新数据量超过所述更新数据量阈值时，收集所述数据表的统计信息。
8.根据权利要求7所述的收集统计信息的装置，其特征在于，所述监测模块具体用于：
以预设的监测频率监测所述数据表是否发生数据更新；
所述第一获取模块具体用于：
获取所述数据表对应的行修改计数器的数值，并将所述数值作为发生数据更新的更新数据量。
9.一种电子设备，其特征在于，其包括：
处理器、存储器和总线；
所述总线，用于连接所述处理器和所述存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，执行上述权利要求1-6中任一项所述的收集统计信息的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机存储介质用于存储计算机指令，当其在计算机上运行时，使得计算机可以执行上述权利要求1-6中任一项所述的收集统计信息的方法。
CN201910817108.2A 2019-08-30 2019-08-30 收集统计信息的方法、装置、电子设备及可读存储介质 Pending CN110515963A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910817108.2A CN110515963A (zh) 2019-08-30 2019-08-30 收集统计信息的方法、装置、电子设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910817108.2A CN110515963A (zh) 2019-08-30 2019-08-30 收集统计信息的方法、装置、电子设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN110515963A true CN110515963A (zh) 2019-11-29

Family

ID=68628989

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910817108.2A Pending CN110515963A (zh) 2019-08-30 2019-08-30 收集统计信息的方法、装置、电子设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN110515963A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107169095A (zh) * 2017-05-12 2017-09-15 郑州云海信息技术有限公司 一种db2数据库表统计信息收集方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101075911A (zh) * 2006-05-18 2007-11-21 阿拉克斯拉网络株式会社 统计信息收集系统及统计信息收集装置
CN105069134A (zh) * 2015-08-18 2015-11-18 上海新炬网络信息技术有限公司 一种Oracle统计信息自动收集方法
CN105553769A (zh) * 2015-12-15 2016-05-04 北京奇虎科技有限公司 一种数据采集分析系统和方法
CN106339244A (zh) * 2016-08-30 2017-01-18 中国银行股份有限公司 一种实现统计信息收集的方法及装置
CN106557494A (zh) * 2015-09-25 2017-04-05 北京国双科技有限公司 更新列存储表的方法及装置
CN107066625A (zh) * 2017-05-12 2017-08-18 郑州云海信息技术有限公司 一种Oracle数据库表统计信息收集方法及系统
CN108829768A (zh) * 2018-05-29 2018-11-16 中国银行股份有限公司 一种统计信息的收集方法及装置
CN108932241A (zh) * 2017-05-24 2018-12-04 腾讯科技（深圳）有限公司 日志数据统计方法、装置及节点

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101075911A (zh) * 2006-05-18 2007-11-21 阿拉克斯拉网络株式会社 统计信息收集系统及统计信息收集装置
CN105069134A (zh) * 2015-08-18 2015-11-18 上海新炬网络信息技术有限公司 一种Oracle统计信息自动收集方法
CN106557494A (zh) * 2015-09-25 2017-04-05 北京国双科技有限公司 更新列存储表的方法及装置
CN105553769A (zh) * 2015-12-15 2016-05-04 北京奇虎科技有限公司 一种数据采集分析系统和方法
CN106339244A (zh) * 2016-08-30 2017-01-18 中国银行股份有限公司 一种实现统计信息收集的方法及装置
CN107066625A (zh) * 2017-05-12 2017-08-18 郑州云海信息技术有限公司 一种Oracle数据库表统计信息收集方法及系统
CN108932241A (zh) * 2017-05-24 2018-12-04 腾讯科技（深圳）有限公司 日志数据统计方法、装置及节点
CN108829768A (zh) * 2018-05-29 2018-11-16 中国银行股份有限公司 一种统计信息的收集方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107169095A (zh) * 2017-05-12 2017-09-15 郑州云海信息技术有限公司 一种db2数据库表统计信息收集方法及系统

Similar Documents

Publication Publication Date Title
US7936260B2 (en) Identifying redundant alarms by determining coefficients of correlation between alarm categories
CN105979532B (zh) 一种业务处理系统的性能容量分析预警方法及装置
CN109634819B (zh) 告警根因定位方法和装置、电子设备
CN110647512B (zh) 一种数据存储和分析方法、装置、设备和可读介质
CN109783512A (zh) 数据处理方法、装置、计算机设备及存储介质
CN109347653A (zh) 一种指标异常发现方法和装置
CN112764993A (zh) 一种节点信息收集方法、装置、设备及可读存储介质
CN111478963A (zh) 消息推送方法、装置、电子设备及计算机可读存储介质
EP3726397A1 (en) Join query method and system for multiple time sequences under columnar storage
CN109144862A (zh) 测试数据的统计方法、装置、计算机设备及存储介质
WO2019029149A1 (zh) 保单的险种状态信息统计方法、终端设备及存储介质
CN103678314B (zh) 基于关联规则提取的海量数据处理系统、设备及方法
CN110515963A (zh) 收集统计信息的方法、装置、电子设备及可读存储介质
CN110262951A (zh) 一种业务秒级监控方法及系统、存储介质及客户端
CN107688589A (zh) 数据库系统优化的方法及装置
CN111970168A (zh) 全链路服务节点的监控方法、装置和存储介质
CN111291119A (zh) 数据同步方法和装置
CN113673110A (zh) 一种晶振时钟修正方法、装置、设备和介质
CN103778041A (zh) 用于互联网的数据监控方法和装置
CN108664322A (zh) 数据处理方法及系统
CN105302691B (zh) 一种元数据性能监控方法及系统
CN103490949A (zh) 一种数据信息采集、数据信息异常检测的方法和设备
CN112947858B (zh) 一种raid 5校验值的更新方法、装置和介质
WO2014149026A1 (en) Apparatus and method for memory storage and analytic execution of time series data
CN107995014B (zh) 基于告警信息发现功能拓扑的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 801-2, floor 8, building 3, No. 22, Ronghua Middle Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing

Applicant after: Wanghai Kangxin (Beijing) Technology Co.,Ltd.

Address before: Room 07, Room 2, Building B, 12 Hongda North Road, Beijing Daxing District, Beijing

Applicant before: BEIJING NEUSOFT VIEWHIGH TECHNOLOGY Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191129