CN112765111A - 用于处理数据的方法、设备和计算机程序产品 - Google Patents

用于处理数据的方法、设备和计算机程序产品 Download PDF

Info

Publication number
CN112765111A
CN112765111A CN201911002251.2A CN201911002251A CN112765111A CN 112765111 A CN112765111 A CN 112765111A CN 201911002251 A CN201911002251 A CN 201911002251A CN 112765111 A CN112765111 A CN 112765111A
Authority
CN
China
Prior art keywords
data
file
compressed
analyzed
data block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911002251.2A
Other languages
English (en)
Inventor
章昊翰
张德政
刘亮亮
施雷
李旺远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC IP Holding Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC IP Holding Co LLC filed Critical EMC IP Holding Co LLC
Priority to CN201911002251.2A priority Critical patent/CN112765111A/zh
Priority to US16/884,226 priority patent/US11200109B2/en
Publication of CN112765111A publication Critical patent/CN112765111A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/362—Software debugging
    • G06F11/366—Software debugging using diagnostics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/174—Redundancy elimination performed by the file system
    • G06F16/1744—Redundancy elimination performed by the file system using compression, e.g. sparse files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751—Error or fault detection not based on redundancy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G06F11/0772—Means for error signaling, e.g. using interrupts, exception flags, dedicated error registers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G06F11/0778—Dumping, i.e. gathering error/state information after a fault for later diagnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079—Root cause analysis, i.e. error or fault diagnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1479—Generic software techniques for error detection or fault masking
    • G06F11/1489—Generic software techniques for error detection or fault masking through recovery blocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本公开的实施例涉及用于数据处理的方法、设备和计算机程序产品。该方法包括响应于接收到来自故障分析设备的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，确定待分析数据块在数据文件的压缩文件中的位置，请求包括待分析数据块在数据文件中的位置。该方法还包括基于待分析数据块在压缩文件中的位置，从压缩文件中确定与待分析数据块相对应的压缩数据块。该方法还包括向故障分析设备发送压缩数据块以用于分析故障。通过采用上述方法，可以节省故障分析的时间，减少了数据传输量以及解压缩所占用的资源，提高了处理效率。

Description

用于处理数据的方法、设备和计算机程序产品
技术领域
本公开的实施例涉及计算机领域，具体地涉及用于处理数据的方法、设备和计算机程序产品。
背景技术
对于计算设备，运行的操作系统并不总是稳定工作的。在一些重要的领域，如果运行的操作系统出现故障时，需要保存存储器的内容以形成数据文件，例如转储文件。然后利用该数据文件分析出现故障的原因，以便能改进系统中的故障以更好的运行系统。如在一些存储系统中，在系统崩溃时，需要将存储系统中的存储器数据保存下来，以用于分析操作系统故障。
然而，为了提高计算设备的性能，计算设备被配置有更强大的CPU内核和更多的内存。此时，需要管理的存储器数据就变得越来越多。因此，如果操作系统出现故障，将导致在存储系统具有更大的数据文件。为了便于处理，通常会将这些数据文件压缩成压缩文件。然而，在分析操作系统故障时仍然存在许多需要解决的问题。
发明内容
本公开的实施例提供一种用于处理数据的方法、设备和计算机程序产品。
根据本公开的第一方面，提供了一种用于处理数据的方法。该方法包括响应于接收到来自故障分析设备的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，确定待分析数据块在数据文件的压缩文件中的位置，请求包括待分析数据块在数据文件中的位置。该方法还包括基于待分析数据块在压缩文件中的位置，从压缩文件中确定与待分析数据块相对应的压缩数据块。该方法还包括向故障分析设备发送压缩数据块以用于分析故障。
根据本公开的第二方面，提供了一种用于处理数据的方法。该方法包括基于与操作系统的故障有关的数据文件中的一组原始数据块的原始位置信息，确定一组原始数据块中的待分析数据块在数据文件中的位置。该方法还包括向数据处理设备发送用于获取待分析数据块的请求，请求包括待分析数据块在数据文件中的位置。该方法还包括从数据处理设备接收与待分析数据块相对应的压缩数据块以用于分析故障。
根据本公开的第三方面，提供了一种数据处理设备。该设备包括处理器；以及存储器，存储有计算机程序指令，处理器运行存储器中的计算机程序指令控制设备执行动作，该动作包括：响应于接收到来自故障分析设备的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，确定待分析数据块在数据文件的压缩文件中的位置，请求包括待分析数据块在数据文件中的位置；基于待分析数据块在压缩文件中的位置，从压缩文件中确定与待分析数据块相对应的压缩数据块；以及向故障分析设备发送压缩数据块以用于分析故障。
根据本公开的第四方面，提供了一种故障分析设备。该设备包括处理器；以及存储器，存储有计算机程序指令，处理器运行存储器中的计算机程序指令控制设备执行动作，该动作包括：基于与操作系统的故障有关的数据文件中的一组原始数据块的原始位置信息，确定一组原始数据块中的待分析数据块在数据文件中的位置；向数据处理设备发送用于获取待分析数据块的请求，请求包括待分析数据块在数据文件中的位置；以及从数据处理设备接收与待分析数据块相对应的压缩数据块以用于分析故障。
根据本公开的第五方面，提供了一种计算机程序产品，该计算机程序产品被有形地存储在非易失性计算机可读介质上并且包括机器可执行指令，该机器可执行指令在被执行时使机器执行本公开的第一方面中的方法的步骤。
根据本公开的第六方面，提供了一种计算机程序产品，该计算机程序产品被有形地存储在非易失性计算机可读介质上并且包括机器可执行指令，该机器可执行指令在被执行时使机器执行本公开的第二方面中的方法的步骤。
附图说明
通过结合附图对本公开示例性实施例进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施例中，相同的参考标号通常代表相同部件。
图1图示了根据本公开的实施例的设备和/或方法可以在其中被实施的示例环境100的示意图；
图2图示了根据本公开的实施例的用于处理数据的方法200的流程图；
图3图示了根据本公开的实施例的用于确定数据块的位置信息的方法300的流程图；
图4图示了根据本公开的实施例的用于故障分析的方法400的流程图；
图5图示了根据本公开的实施例的设备和/或方法可以在其中被实施的示例环境500的示意图；
图6图示了适于用来实施本公开内容的实施例的示例设备600的示意性框图。
在各个附图中，相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
在本公开的实施例的描述中，术语“包括”及其类似用语应当理解为开放性包含，即“包括但不限于”。术语“基于”应当理解为“至少部分地基于”。术语“一个实施例”或“该实施例”应当理解为“至少一个实施例”。术语“第一”、“第二”等等可以指代不同的或相同的对象。下文还可能包括其他明确的和隐含的定义。
下面将参考附图中示出的若干示例实施例来描述本公开的原理。虽然附图中显示了本公开的优选实施例，但应当理解，描述这些实施例仅是为了使本领域技术人员能够更好地理解进而实现本公开，而并非以任何方式限制本公开的范围。
通常，在操作系统崩溃时，会将存储器数据保存为数据文件。然后对数据文件进行压缩来形成压缩的文件。为了分析操作系统故障，数据处理设备会将压缩文件整体发送到故障分析设备进行分析。故障分析设备在接收到压缩文件后先对压缩文件解决压缩以得到解压缩后的文件，然后对解压缩的文件进行调试来分析故障。
设备处理器核心和存储器增大导致了较大的压缩文件。在将压缩文件从数据处理设备上载到故障分析设备需要花费很多时间。同样，在故障分析设备需要更大的磁盘空间来解压缩上载的压缩文件，然后使用调试器(如gdb)进行最终后期分析，降低了磁盘空间的使用效率。此外，由于在解压缩完成后才进行分析，也导致较长的等待时间。
为了解决上述问题，本公开提出了一种用于处理数据的方案。在该方案中，数据处理设备接收来自故障分析设备的用于获取与操作系统故障有关的待分析数据块的请求。数据处理设备基于该待分析数据块在数据文件中的位置，确定与该待分析数据块相对应的压缩数据块在压缩文件中的位置。将压缩数据块发送到故障分析设备以用于确定操作系统故障。该方法通过在使得故障分析设备基于已接收的部分压缩数据就开始进行分析，而不需要接收全部的压缩文件，节省了故障分析的时间。由于很多故障可能并不需要使用全部数据就能确定，因此减少了数据传输量以及解压缩所占用的资源，提高了处理效率。
下面图1图示了根据本公开的实施例的设备和/或方法可以在其中被实施的示例环境100的示意图。
在环境100中包括数据处理设备100和故障分析设备102。数据处理设备101上运行有操作系统。在数据处理设备101的操作系统出现故障时，例如，系统崩溃，数据处理设备101会保存数据处理设备101中的存储器内的数据。存储器内的数据被存储到与操作系统故障有关的数据文件中，例如存储器转储文件或核心转储文件。
在一些实施例中，操作系统故障包括在操作系统上开发的应用出现的故障。此时与操作系统故障有关的数据包括与该应用有关的数据。
在一些实施例中，由于生成的数据文件比较大，数据处理设备101会将数据文件进行压缩以生成压缩文件103。数据处理设备101将压缩文件103存储在与数据处理设备101相关联的存储设备中，例如，用于存储数据的盘阵列中。数据处理设备101可以将压缩文件103发送到故障分析设备102以用于故障分析。
数据处理设备101可以被实现为任何类型的数据处理设备，包括但不限于移动电话(例如，智能手机)、膝上型计算机、便携式数字助理(PDA)、电子书(电子书)阅读器、便携式游戏机、便携式媒体播放器、游戏机、机顶盒(STB)、智能电视(TV)、个人计算机、膝上型计算机、车载计算机(例如，导航单元)等。
数据处理设备101在将存储器内的数据存储到与操作系统故障有关的数据文件时，会基于存储器内的数据形成一组原始数据块。该一组原始数据块包括两部分。其中第一部分是与操作系统的应用有关的第一数据块子组，例如操作系统的应用的编译代码、应用的参数等。第二部分与应用的输入输出操作有关的第二数据块子组。数据处理设备101还将确定该一组原始数据块在数据文件中的位置的原始位置信息，例如数据块在数据文件中的偏移和长度。数据处理设备101还确定与该组数据有关的其他信息，例如数据块在存储器中的位置，诸如数据块在存储器中的偏移和长度等。
在一些实施例中，数据处理设备101在生成数据文件时，顺序将一组原始数据块的原始位置信息、第一数据块子组和第二数据块子组存储在数据文件中。
在一些实施例中，在要对压缩文件103进行故障分析时，数据处理设备101获得压缩文件103后。数据处理设备101对压缩文件103进行解压缩扫描。然后数据处理设备101生成针对压缩文件103的文件元数据，该文件元数据至少包括该一组原始数据块在数据文件中的原始位置信息和与该一组原始数据块有关的压缩位置信息，该压缩位置信息指示与一组原始数据块相对应的一组压缩数据块在压缩文件103中的位置。
在需要将压缩文件103传送到故障分析设备102进行故障分析时，数据处理设备101会向故障204分析装置102传输压缩文件103的至少一部分。
数据处理设备101可以包括硬件处理器，其包括但不限于硬件中央处理单元(CPU)、现场可编程门阵列(FPGA)、复合可编程逻辑器件(CPLD)、专用集成电路(ASIC)、片上系统(SoC)或其组合。
故障分析设备102可以对接收的压缩文件103的一部分进行故障分析。该一部分至少包括原始位置信息和第一数据子组。故障分析设备102会对该一部分进行解压缩处理，然后对解压缩的文件进行分析来确定操作系统故障。在一些实施例中，故障分析设备102内具有调试器，其对接收的解压缩文件103进行分析。
故障分析设备102包括但不限于个人计算机、服务器计算机、手持或膝上型设备、移动设备(诸如移动电话、个人数字助理(PDA)、媒体播放器等)、多处理器系统、消费电子产品、小型计算机、大型计算机、包括上述系统或设备中的任意一个的分布式计算环境等。
在一些实施例中，故障分析设备102在接收到压缩文件103的一部分后不再接收压缩文件103中其余的数据。故障分析设备102对接收的一部分进行解压缩处理。然后故障分析设备102确定操作系统的故障是否在该一部分中。当故障分析设备102根据接收到的一部分不能确定操作系统故障时，可以基于解压缩的一部分中的原始位置信息确定出待分析数据块在数据文件中的位置。然后故障分析设备102将该位置发送到数据处理设备101以获取与该位置相对应的压缩数据块104。数据处理设备101从原始位置信息中找到该位置，然后找到压缩位置信息中的对应压缩位置以确定相应的压缩数据块104。
在一些实施例中，故障分析设备102在接收到压缩文件103的一部分后继续接收压缩文件103中其余的数据。故障分析设备102在接收到一部分后将该一部分解决压缩来分析操作系统的故障，例如在操作系统上开发的应用的故障。当故障分析设备102根据接收到的一部分确定不出操作系统故障时，可以基于一部分中的原始位置信息确定出待分析的数据块在数据文件中的位置。然后故障分析设备102基于该位置，例如数据块在数据文件中的偏移和长度，来确定故障分析设备102已接收的压缩数据块中是否存在与该数据块相对应的压缩数据块。如果不存在，故障分析设备102将该位置发送到数据处理设备101以获取与该位置相对应的压缩数据块104。如果存在，则将对应的压缩数据块进行解压缩以用于分析故障。
上面图1示出了用于处理数据的示例环境100，下面结合图2详细描述用于处理数据的方法100。应当理解，图2的方法可以由数据处理设备101执行，也可以由其他适当的设备执行。
在框202处，数据处理设备101确定是否接收到来自故障分析设备102的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，请求包括待分析数据块在数据文件中的位置。故障分析设备102会根据已接收到的数据文件的部分数据文件分析操作系统的故障。如果在已分析的数据文件中不存在该故障，则故障分析的装置102确定出待分析的数据块。如果故障分析设备102中不存在该待分析数据块，故障分析设备102将会向数据处理设备101发送用于获取待分析数据块的请求。
在一些实施例中，故障分析设备102可以确定待分析数据块在数据文件中的位置，例如，待分析数据块在数据文件中的偏移和长度等。备选地或附加地，故障分析设备102中具有调试器。调试器会对已获得的部分数据文件进行分析，在分析了部分数据文件没有确定出故障时，调试器会确定出待分析数据块在数据文件中的位置。
在一些实施例中，在数据处理设备101的操作系统出现故障时，例如系统崩溃或在操作系统上开发的应用发生故障，则数据处理设备101会生成与操作系统的故障有关的数据文件，例如核心转储文件或存储器转储文件。
在生成数据文件的过程中，数据处理设备101将从与该故障有关的数据中确定出一组原始数据块，该组原始数据块包括与操作系统(例如linux操作系统)中的应用有关的第一数据块子组和与应用的输入/输出操作有关的第二数据块子组。
例如，第一数据块子组中的数据包括应用的编译文本和用于应用的参数等；第二数据块子组中的数据包括针对应用动态分配的存储空间内存储的输入/输出数据。
数据处理设备101还根据第一数据块子组和第二数据块子组在数据文件中的位置，确定出原始位置信息。原始位置信息指示一组原始数据块在数据文件中的位置。例如，一组原始数据块在数据文件中的长度和偏移。备选地或附加地，数据处理设备101还会生成与第一数据块子组和第二数据块子组有关的其他信息，例如数据块在存储器中的位置和偏移等。
数据处理设备101然后将原始位置信息、第一数据块子组和第二数据块子组存储在数据文件中。备选地或附加地，原始位置信息、第一数据块子组和第二数据块子组被顺序存储在数据文件中。在一些实施例中，数据文件包括头部信息和文件内容信息。该头部信息可以包括数据文件有关的信息，如数据文件的标识以及与数据块的原始位置信息。该文件内容信息包括第一数据块子组和第二数据块子组。备选地或附加地，头部信息、第二数据块子组和第二数据块子组顺序存储。
在一些实施例中，数据处理设备101将数据文件压缩成压缩文件103。备选地或附加地，数据处理设备101将压缩文件103存储到与其相关联的存储设备上，例如盘阵列上。
在一些实施例中，数据处理设备101需要将与操作系统有关的数据文件的压缩文件103发送到故障分析设备102来确定故障。数据处理设备101获取该数据文件的压缩文件103，然后向故障分析设备102传输压缩文件103，传输的数据包括压缩文件103中的、与原始位置信息相对应的压缩数据。故障分析设备102基于原始位置信息确定需要从数据处理设备101获取待分析数据块。
在确定数据处理设备101接收到用于获取待分析数据块的请求时，在框204处，数据处理设备101确定待分析数据块在数据文件的压缩文件103中的位置。根据待分析数据块在数据文件中的位置，数据处理设备101可以确定待分析数据块在数据文件中的第一偏移和第一长度。在一些实施例中，待分析数据块在数据文件中的位置包括待分析数据块在数据文件中的第一偏移和第一长度。
基于第一偏移和第一长度，数据处理设备101可以确定待分析数据块在压缩文件103中的第二偏移和第二长度。在一些实施例中，数据处理设备101对压缩文件103进行解压缩扫描来生成针对压缩文件103的文件元数据，该文件元数据包括数据文件中的一组原始数据块在数据文件中的原始位置信息和与一组原始数据块对应的压缩数据块在压缩文件103中的压缩位置信息。因此，文件元数据中包括待分析数据块的第一偏移和第一长度与第二偏移和第二长度的对应关系。
在框206处，数据处理设备101基于待分析数据块在压缩文件103中的位置，从压缩文件103中确定与待分析数据块相对应的压缩数据块104。
在一些实施例中，数据处理设备101基于待分析数据块在压缩文件103中的位置，确定待分析数据块在压缩文件103中的第二偏移和第二长度。然后数据处理设备101根据第二偏移和第二长度，从压缩文件103中找到压缩数据块104。
在框208处，数据处理设备101向故障分析设备102发送压缩数据块104以用于分析故障。在获得与待分析数据块相对应的压缩数据块104后，数据处理设备101将找到的压缩数据块104发送到故障分析设备。
通过上述方法，使得故障分析设备102能够基于已接收的部分压缩数据就开始进行分析，而不需要接收全部的压缩文件，节省了故障分析的时间。由于很多故障可能并不需要使用全部数据就能确定，减少了数据传输量以及解压缩所占用的资源，提高了处理效率。
上面结合图1和图2描述了在数据处理设备101处处理数据的过程，下面结合图1和图3详细描述确定数据块的位置信息的过程。其中，图3图示了根据本公开的实施例的用于确定数据块的位置信息的方法300的流程图。图3的方法例如可以由数据处理设备101执行。
在框302处，数据处理设备101获取数据文件的压缩文件103，数据文件包括原始位置信息，原始位置信息指示一组原始数据块在数据文件中的位置。
在一些实施例中，数据处理设备101从与数据处理设备101相关联的存储设备中读取该压缩文件103。
在框304处，数据处理设备101对压缩文件103进行解压缩以获得原始位置信息。在获取原始位置信息时，数据处理设备101中的调试辅助器对压缩文件103进行解压缩扫描来获取数据文件中的原始位置信息。备选地或附加地，数据处理设备101还可以获得压缩文件103中的任意信息。
在框306处，数据处理设备101基于压缩文件103和原始位置信息，确定压缩位置信息，压缩位置信息指示与一组原始数据块相对应的一组压缩数据块在压缩文件103中的位置。在获得了一组原始数据块的原始位置信息后，可以通过压缩文件103确定出与该原始位置信息对应的一组原始数据块在压缩文件103中的压缩位置信息。
通过上述方法，可以在数据处理设备处生成原始数据块在数据文件和压缩文件中的位置的对应关系。因此，可以基于原始数据块在数据文件中的位置快速确定其在压缩文件中的压缩位置，提高了获取压缩数据块的效率，节省了数据获取时间。
上面结合图1和图3描述了在数据处理设备101处确定数据块的位置信息的过程，下面结合图1和图4详细描述在故障分析设备102处处理数据的过程。图4图示了根据本公开的实施例的用于处理数据的方法400的流程图。图4的方法可以例如由故障分析设备102执行。
在框402处，故障分析设备102基于与操作系统的故障有关的数据文件中的一组原始数据块的原始位置信息，确定一组原始数据块中的待分析数据块在数据文件中的位置。
在一些实施例中，故障分析设备102接收数据文件的压缩文件103的至少一部分，该至少一部分包括与原始位置信息对应的压缩数据和与一组原始数据块中的已接收数据块相对应的压缩数据块。然后，故障分析设备102利用该至少一部分，确定与已接收数据块相对应的原始位置和压缩位置。
在一些实施例中，该至少一部分为故障分析设备102接收到与原始位置信息对应的压缩数据和与一组原始数据块中的已接收数据块相对应的压缩数据块。故障分析设备102仅对该部分解压缩来分析故障，在分析期间，故障分析设备102不再从数据处理设备101接收压缩文件103的数据。
在一些实施例中，该至少一部分不仅包括故障分析设备102接收到与原始位置信息对应的压缩数据和与一组原始数据块中的已接收数据块相对应的压缩数据块。还包括在故障分析设备102对该部分解压缩来分析故障期间持续接收的压缩文件103的数据。
在一些实施例中，故障分析设备102对压缩文件103的至少一部分进行解压缩扫描，然后确定出包括在该一部分中的原始位置信息和与已接收的数据块，例如第一数据块子组。然后，故障分析设备102利用原始位置信息和已接收的数据块，确定出已接收数据块的原始位置。故障分析设备102利用已接收数据块的原始位置和压缩文件103的至少一部分，确定出与已接收数据块相对应的压缩数据块的压缩位置。
在框404处，故障分析设备102向数据处理设备101发送用于获取待分析数据块的请求，该请求包括待分析数据块在数据文件中的位置。
在一些实施例中，故障分析设备102在确定了待分析数据块在数据文件中的位置后，直接向数据处理设备101发送请求。
在一些实施例中，故障分析设备102利用待分析数据块在数据文件中的位置，确定待分析数据块是否存在于一组原始数据块中的已接收数据块中。在故障分析设备102确定待分析数据块不存于在已接收数据块中，向数据处理设备101发送用于获取待分析数据块的请求。如果确定出待分析数据块存在于已接收的数据块中，则将与待分析数据块相对应的压缩数据块104进行解压缩来继续分析故障。
在一些实施例中，在确定待分析数据块是否存于在已接收数据块中时，会将待分析数据块在数据文件中的位置与故障分析设备102中确定的已接收数据块的原始位置进行比较。如果已接收数据块的原始位置中存在待分析数据块的位置表明待分析数据块已被接收。则此时可以确定出与该待分析数据块的位置相对应的压缩位置。从而将已接收的压缩文件103中的至少一部分中与该压缩位置相对应的压缩数据块104进行解压缩以用于分析故障。如果已接收数据块的原始位置中不存在待分析数据块的位置，则表明待分析数据块未被接收。
在框406处，故障分析设备102从数据处理设备101接收与待分析数据块相对应的压缩数据块104以用于分析故障。数据处理设备101在接收到故障分析设备102的请求后，会基于该请求将压缩数据块104发送给故障分析设备102。故障分析设备102在接收到压缩数据块104后对其进行解压缩以用于分析故障。
通述上述方法，故障分析设备可以快速的进行故障分析，节省了分析时间。并且通过从数据处理设备请求数据，减少了从数据处理设备向故障分析设备传输的数据，提高了效率。
上面结合图1和图4描述了在故障分析设备102侧示出了用于处理数据的过程，下面结合图5详细描述用于处理数据的具体示例环境。图5图示了根据本公开的实施例的设备和/或方法可以在其中被实施的示例环境500的示意图。图5示的示例环境500是图1中的示例环境100的一个具体示例。
在环境500中包括的数据处理设备101、故障分析设备102、压缩文件103和压缩数据块104已在图1中进行了详细描述，在此就不再进行详细描述。
在数据处理设备101上具有调试辅助器501。调试辅助器501用于对压缩文件103进行解压缩扫描，然后生成针对压缩文件103的文件元数据504。在一些实施例中，文件元数据504包括与一组原始数据块相对应的原始位置信息和压缩位置信息，该原始位置信息指示一组原始数据块在数据文件中的位置，压缩位置信息指示与一组原始数据块相对应的一组压缩数据块在压缩文件103中的位置。例如，原始位置信息包括原始数据块在数据文件中的偏移和长度，压缩位置信息包括压缩数据块在压缩文件103中的偏移和长度。备选地或附加地，文件元数据504中还可以包括文件元数据504的标识、虚拟地址范围等。
调试辅助器501还可以基于从故障分析设备102接收到的待分析数据块在数据文件中的位置，通过结合文件元数据504，确定出与待分析数据块相对应的压缩数据块104。
故障分析设备102至少接收压缩文件103的部分数据506。该部分数据506至少包括原始位置信息以及第一数据块子组。故障分析设备103对该部分数据506进行解压缩以生成解压缩的部分数据507。然后通过调试器503对解压缩的部分数据507进行故障分析。
调试器503在对解压缩的部分数据507进行分析后，如果没有确定出故障，则调试器503可以基于解压缩的部分数据507确定出待分析数据块，例如确定出待分析数据块在数据文件中的位置。
在一些实施例中，故障分析设备102在接收到部分数据506之后不再接收数据。在确定出待分析数据块在数据文件中的位置后，将该位置发送到数据处理设备101来获取与该数据块相对应的压缩数据块104。
在一些实施例中，可选地，故障分析设备102还包括调试辅助器502。在调试器503对解压缩的部分数据507进行分析时，故障分析设备102还继续从数据处理设备101接收压缩文件103的压缩数据。可选地，调试辅助器502对部分数据506以及后续接收的数据进行解压缩扫描来生成文件元数据505。文件元数据505包括已接收的数据块的部分原始位置信息和部分压缩位置信息。
在在确定出待分析的数据块在数据文件中的位置后，调试辅助器502会基于该地址和文件元数据505确定该待分析数据块是否已被接收。如果已被接收，则将其对应的压缩数据块104解压缩以供调试器503使用。如果没有被接收，则向数据处理设备101发送请求来获取该待分析数据块。
图6示出了可以用来实施本公开内容的实施例的示例设备600的示意性框图。例如，如图1和图5中所示的数据处理设备101和故障分析设备102可以由设备600来实施。如图所示，设备600包括中央处理单元(CPU)601，其可以根据存储在只读存储器(ROM)602中的计算机程序指令或者从存储单元608加载到随机访问存储器(RAM)603中的计算机程序指令，来执行各种适当的动作和处理。在RAM 603中，还可存储设备600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
设备600中的多个部件连接至I/O接口605，包括：输入单元606，例如键盘、鼠标等；输出单元607，例如各种类型的显示器、扬声器等；存储单元608，例如磁盘、光盘等；以及通信单元609，例如网卡、调制解调器、无线通信收发机等。通信单元609允许设备600通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
上文所描述的各个过程和处理，例如方法200、300和400可由处理单元601执行。例如，在一些实施例中，方法200、300和400可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元608。在一些实施例中，计算机程序的部分或者全部可以经由ROM602和/或通信单元609而被载入和/或安装到设备600上。当计算机程序被加载到RAM 603并由CPU 601执行时，可以执行上文描述的方法200、300和400的一个或多个动作。
本公开可以是方法、装置、系统和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于执行本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘故障分析设备。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或故障分析设备上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理单元，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理单元执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (22)

1.一种用于处理数据的方法，包括：
响应于接收到来自故障分析设备的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，确定所述待分析数据块在所述数据文件的压缩文件中的位置，所述请求包括所述待分析数据块在所述数据文件中的位置；
基于所述待分析数据块在所述压缩文件中的位置，从所述压缩文件中确定与所述待分析数据块相对应的压缩数据块；以及
向所述故障分析设备发送所述压缩数据块以用于分析所述故障。
2.根据权利要求1所述的方法，其中确定所述待分析数据块在所述数据文件的压缩文件中的位置包括：
基于所述待分析数据块在所述数据文件中的位置，确定所述待分析数据块在所述数据文件中的第一偏移和第一长度；以及
基于所述第一偏移和所述第一长度，确定所述待分析数据块在所述压缩文件中的第二偏移和第二长度。
3.根据权利要求1所述的方法，其中确定与所述待分析数据块相对应的压缩数据块包括：
基于所述待分析数据块在所述压缩文件中的位置，确定所述待分析数据块在所述压缩文件中的第二偏移和第二长度；以及
基于所述第二偏移和所述第二长度，从所述压缩文件中确定所述压缩数据块。
4.根据权利要求1所述的方法，还包括：
获取所述数据文件的所述压缩文件，所述数据文件包括原始位置信息，所述原始位置信息指示所述一组原始数据块在所述数据文件中的位置；
对所述压缩文件进行解压缩以获得所述原始位置信息；
基于所述压缩文件和所述原始位置信息，确定压缩位置信息，所述压缩位置信息指示与所述一组原始数据块相对应的一组压缩数据块在所述压缩文件中的位置。
5.根据权利要求1所述的方法，还包括：
向所述故障分析设备传输所述压缩文件中的、与所述原始位置信息相对应的压缩数据。
6.根据权利要求1至5中任一项所述的方法，还包括：
响应于所述操作系统的故障，从与所述故障有关的数据中确定所述一组原始数据块，所述一组原始数据块包括与操作系统中的应用有关的第一数据块子组和与所述应用的输入/输出操作有关的第二数据块子组；
基于所述第一数据块子组和所述第二数据块子组在所述数据文件中的位置，确定所述原始位置信息；以及
将所述原始位置信息、所述第一数据块子组和所述第二数据块子组存储在所述数据文件中。
7.一种用于故障分析的方法，包括：
基于与操作系统的故障有关的数据文件中的一组原始数据块的原始位置信息，确定所述一组原始数据块中的待分析数据块在所述数据文件中的位置；
向数据处理设备发送用于获取所述待分析数据块的请求，所述请求包括所述待分析数据块在所述数据文件中的位置；以及
从所述数据处理设备接收与所述待分析数据块相对应的压缩数据块以用于分析所述故障。
8.根据权利要求7所述的方法，还包括：
接收所述数据文件的压缩文件的至少一部分，所述至少一部分包括与所述原始位置信息对应的压缩数据和与所述一组原始数据块中的已接收数据块相对应的压缩数据块；以及
基于所述至少一部分，确定与所述已接收数据块相对应的原始位置和压缩位置。
9.根据权利要求8所述的方法，其中确定所述原始位置和所述压缩位置包括：
基于所述至少一部分，确定所述原始位置信息和与所述已接收的数据块；
基于所述原始位置信息信息和所述已接收的数据块，确定所述原始位置；以及
基于所述原始位置和所述至少一部分，确定所述压缩位置。
10.根据权利要求7所述的方法，其中向数据处理设备发送用于获取所述待分析数据块的请求包括：
基于所述待分析数据块在所述数据文件中的位置，确定所述待分析数据块是否存在于所述一组原始数据块中的已接收数据块中；以及
响应于所述待分析数据块不存于在所述已接收数据块中，向数据处理设备发送用于获取所述待分析数据块的请求。
11.一种数据处理设备，包括：
处理器；以及
存储器，存储有计算机程序指令，处理器运行存储器中的所述计算机程序指令控制所述设备执行动作，所述动作包括：
响应于接收到来自故障分析设备的、用于获取与操作系统的故障有关的数据文件中的一组原始数据块中的待分析数据块的请求，确定所述待分析数据块在所述数据文件的压缩文件中的位置，所述请求包括所述待分析数据块在所述数据文件中的位置；
基于所述待分析数据块在所述压缩文件中的位置，从所述压缩文件中确定与所述待分析数据块相对应的压缩数据块；以及
向所述故障分析设备发送所述压缩数据块以用于分析所述故障。
12.根据权利要求11所述的设备，其中确定所述待分析数据块在所述数据文件的压缩文件中的位置包括：
基于所述待分析数据块在所述数据文件中的位置，确定所述待分析数据块在所述数据文件中的第一偏移和第一长度；以及
基于所述第一偏移和所述第一长度，确定所述待分析数据块在所述压缩文件中的第二偏移和第二长度。
13.根据权利要求11所述的设备，其中确定与所述待分析数据块相对应的压缩数据块包括：
基于所述待分析数据块在所述压缩文件中的位置，确定所述待分析数据块在所述压缩文件中的第二偏移和第二长度；以及
基于所述第二偏移和所述第二长度，从所述压缩文件中确定所述压缩数据块。
14.根据权利要求11所述的设备，所述动作还包括：
获取所述数据文件的所述压缩文件，所述数据文件包括原始位置信息，所述原始位置信息指示所述一组原始数据块在所述数据文件中的位置；
对所述压缩文件进行解压缩以获得所述原始位置信息；
基于所述压缩文件和所述原始位置信息，确定压缩位置信息，所述压缩位置信息指示与所述一组原始数据块相对应的一组压缩数据块在所述压缩文件中的位置。
15.根据权利要求11所述的设备，所述动作还包括：
向所述故障分析设备传输所述压缩文件中的、与所述原始位置信息相对应的压缩数据。
16.根据权利要求11至15中任一项所述的设备，所述动作还包括：
响应于所述操作系统的故障，从与所述故障有关的数据中确定所述一组原始数据块，所述一组原始数据块包括与操作系统中的应用有关的第一数据块子组和与所述应用的输入/输出操作有关的第二数据块子组；
基于所述第一数据块子组和所述第二数据块子组在所述数据文件中的位置，确定所述原始位置信息；以及
将所述原始位置信息、所述第一数据块子组和所述第二数据块子组存储在所述数据文件中。
17.一种故障分析设备，包括：
处理器；以及
存储器，存储有计算机程序指令，处理器运行存储器中的所述计算机程序指令控制所述设备执行动作，所述动作包括：
基于与操作系统的故障有关的数据文件中的一组原始数据块的原始位置信息，确定所述一组原始数据块中的待分析数据块在所述数据文件中的位置；
向数据处理设备发送用于获取所述待分析数据块的请求，所述请求包括所述待分析数据块在所述数据文件中的位置；以及
从所述数据处理设备接收与所述待分析数据块相对应的压缩数据块以用于分析所述故障。
18.根据权利要求17所述的设备，所述动作还包括：
接收所述数据文件的压缩文件的至少一部分，所述至少一部分包括与所述原始位置信息对应的压缩数据和与所述一组原始数据块中的已接收数据块相对应的压缩数据块；以及
基于所述至少一部分，确定与所述已接收数据块相对应的原始位置和压缩位置。
19.根据权利要求18所述的设备，其中确定所述原始位置和所述压缩位置包括：
基于所述至少一部分，确定所述原始位置信息和与所述已接收的数据块；
基于所述原始位置信息信息和所述已接收的数据块，确定所述原始位置；以及
基于所述原始位置和所述至少一部分，确定所述压缩位置。
20.根据权利要求17所述的设备，其中向数据处理设备发送用于获取所述待分析数据块的请求包括：
基于所述待分析数据块在所述数据文件中的位置，确定所述待分析数据块是否存在于所述一组原始数据块中的已接收数据块中；以及
响应于所述待分析数据块不存于在所述已接收数据块中，向数据处理设备发送用于获取所述待分析数据块的请求。
21.一种计算机程序产品，所述计算机程序产品被有形地存储在非易失性计算机可读介质上并且包括机器可执行指令，所述机器可执行指令在被执行时使机器执行根据权利要求1至6中任一项所述的方法的步骤。
22.一种计算机程序产品，所述计算机程序产品被有形地存储在非易失性计算机可读介质上并且包括机器可执行指令，所述机器可执行指令在被执行时使机器执行根据权利要求7至10中任一项所述的方法的步骤。
CN201911002251.2A 2019-10-21 2019-10-21 用于处理数据的方法、设备和计算机程序产品 Pending CN112765111A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911002251.2A CN112765111A (zh) 2019-10-21 2019-10-21 用于处理数据的方法、设备和计算机程序产品
US16/884,226 US11200109B2 (en) 2019-10-21 2020-05-27 Method, device and computer program product for processing data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911002251.2A CN112765111A (zh) 2019-10-21 2019-10-21 用于处理数据的方法、设备和计算机程序产品

Publications (1)

Publication Number Publication Date
CN112765111A true CN112765111A (zh) 2021-05-07

Family

ID=75492400

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911002251.2A Pending CN112765111A (zh) 2019-10-21 2019-10-21 用于处理数据的方法、设备和计算机程序产品

Country Status (2)

Country Link
US (1) US11200109B2 (zh)
CN (1) CN112765111A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117591193A (zh) * 2023-07-27 2024-02-23 北京智芯微电子科技有限公司 应用后下载方法、装置、片上系统、终端及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105373448A (zh) * 2015-10-27 2016-03-02 北京百度网讯科技有限公司 数据库中故障数据的恢复方法和系统
CN105718354A (zh) * 2016-01-20 2016-06-29 上海斐讯数据通信技术有限公司 一种故障信息的重现方法和重现装置
CN105893191A (zh) * 2014-12-19 2016-08-24 伊姆西公司 用于获取故障相关信息的计算设备和方法
US20170109367A1 (en) * 2015-10-16 2017-04-20 International Business Machines Corporation Early compression related processing with offline compression
US20170249370A1 (en) * 2016-02-25 2017-08-31 EMC IP Holding Company LLC Method and apparatus for data processing
CN107526743A (zh) * 2016-06-21 2017-12-29 伊姆西公司 用于压缩文件系统元数据的方法和设备
CN107643906A (zh) * 2016-07-22 2018-01-30 华为技术有限公司 数据处理方法及装置
CN109582653A (zh) * 2018-11-14 2019-04-05 网易（杭州）网络有限公司 文件的压缩、解压缩方法及设备

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6813522B1 (en) 2000-12-29 2004-11-02 Emc Corporation Method of sharing memory in a multi-processor system including a cloning of code and data
US7020669B2 (en) 2001-09-27 2006-03-28 Emc Corporation Apparatus, method and system for writing data to network accessible file system while minimizing risk of cache data loss/ data corruption
US7636804B2 (en) * 2003-04-28 2009-12-22 Quantum Corporation Data storage and protection apparatus and methods of data storage and protection
US7849350B2 (en) 2006-09-28 2010-12-07 Emc Corporation Responding to a storage processor failure with continued write caching
CN102375955A (zh) 2010-08-17 2012-03-14 伊姆西公司 网络文件系统联合命名空间内文件加锁的系统与方法
US8713356B1 (en) 2011-09-02 2014-04-29 Emc Corporation Error detection and recovery tool for logical volume management in a data storage system
US9286261B1 (en) 2011-11-14 2016-03-15 Emc Corporation Architecture and method for a burst buffer using flash technology
US9158540B1 (en) 2011-11-14 2015-10-13 Emc Corporation Method and apparatus for offloading compute resources to a flash co-processing appliance
US9652568B1 (en) 2011-11-14 2017-05-16 EMC IP Holding Company LLC Method, apparatus, and computer program product for design and selection of an I/O subsystem of a supercomputer
US8949221B1 (en) 2011-12-30 2015-02-03 Emc Corporation System and method of distributed query execution
US20140215170A1 (en) * 2013-01-31 2014-07-31 Futurewei Technologies, Inc. Block Compression in a Key/Value Store
US9313091B1 (en) 2013-09-26 2016-04-12 Emc Corporation Analytics platform for automated diagnosis, remediation, and proactive supportability
CN104750605B (zh) 2013-12-30 2018-08-14 伊姆西公司 将内核对象信息包括在用户转储中
US9223679B1 (en) 2014-02-25 2015-12-29 Emc Corporation Lightweight, non-intrusive, and flexible apparatus to obtain system and process state
US10229017B1 (en) 2015-10-01 2019-03-12 EMC IP Holding Company LLC Resetting fibre channel devices for failover in high availability backup systems
CN106933689B (zh) 2015-12-29 2020-05-19 伊姆西Ip控股有限责任公司 一种用于计算设备的方法和装置
US10091297B1 (en) 2016-05-18 2018-10-02 EMC IP Holding Company LLC Data processing and data movement in cloud computing environment
US10372560B2 (en) 2016-06-22 2019-08-06 EMC IP Holding Company LLC Cloud storage write cache management system and method
US10416928B2 (en) * 2017-06-15 2019-09-17 Hitachi, Ltd. Data storage system and process for data compression of distributed data in a scalable cluster system and computer program for such data storage system
CN110058964B (zh) 2018-01-18 2023-05-02 伊姆西Ip控股有限责任公司 数据恢复方法、数据恢复系统和计算机可读介质
US10860483B2 (en) 2019-04-30 2020-12-08 EMC IP Holding Company LLC Handling metadata corruption to avoid data unavailability

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105893191A (zh) * 2014-12-19 2016-08-24 伊姆西公司 用于获取故障相关信息的计算设备和方法
US20170109367A1 (en) * 2015-10-16 2017-04-20 International Business Machines Corporation Early compression related processing with offline compression
CN105373448A (zh) * 2015-10-27 2016-03-02 北京百度网讯科技有限公司 数据库中故障数据的恢复方法和系统
CN105718354A (zh) * 2016-01-20 2016-06-29 上海斐讯数据通信技术有限公司 一种故障信息的重现方法和重现装置
US20170249370A1 (en) * 2016-02-25 2017-08-31 EMC IP Holding Company LLC Method and apparatus for data processing
CN107526743A (zh) * 2016-06-21 2017-12-29 伊姆西公司 用于压缩文件系统元数据的方法和设备
CN107643906A (zh) * 2016-07-22 2018-01-30 华为技术有限公司 数据处理方法及装置
CN109582653A (zh) * 2018-11-14 2019-04-05 网易（杭州）网络有限公司 文件的压缩、解压缩方法及设备

Also Published As

Publication number Publication date
US11200109B2 (en) 2021-12-14
US20210117258A1 (en) 2021-04-22

Similar Documents

Publication Publication Date Title
CN107133180B (zh) 动态页面的测试方法、测试装置及存储介质
CN110457143B (zh) 微服务的调用方法及装置
CN107404418B (zh) 互联网产品测试方法、装置、设备及存储介质
US9529873B2 (en) Enhancing performance of extract, transform, and load (ETL) jobs
CN107315729B (zh) 用于图表的数据处理方法、介质、装置和计算设备
CN109873735B (zh) H5页面的性能测试方法、装置和计算机设备
US20140040347A1 (en) Method and system for a web server transmitting a response to an access request
US11934287B2 (en) Method, electronic device and computer program product for processing data
CN107479868B (zh) 一种界面加载方法、装置及设备
CN109344062A (zh) 页面跨域跳转测试的方法及终端设备
CN113127361A (zh) 应用程序的开发方法、装置、电子设备和存储介质
US20160004782A1 (en) Script caching method and information processing device utilizing the same
CN111352957A (zh) 远程字典服务优化方法及相关设备
CN112765111A (zh) 用于处理数据的方法、设备和计算机程序产品
CN110740138B (zh) 数据传输方法和装置
CN111104053B (zh) 存储数据的方法、装置和计算机程序产品
CN110471776B (zh) 应用数据通信方法、装置及系统
CN110389857B (zh) 数据备份的方法、设备和非瞬态计算机存储介质
US10659321B2 (en) Electronic apparatus for recording debugging information and control method thereof
CN107562629B (zh) 用于测试的方法及装置
CN111046010A (zh) 日志储存方法、装置、系统、电子设备和计算机可读介质
CN105488199A (zh) 混合表单处理方法、装置以及移动终端
CN111679813B (zh) 用于信息处理的方法、电子设备和存储介质
CN108288135B (zh) 系统兼容方法及装置、计算机可读存储介质及电子设备
CN108255534B (zh) Pc端应用处理方法、处理装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination