CN116719475A - 数据处理方法、装置及设备 - Google Patents

数据处理方法、装置及设备 Download PDF

Info

Publication number
CN116719475A
CN116719475A CN202310521658.6A CN202310521658A CN116719475A CN 116719475 A CN116719475 A CN 116719475A CN 202310521658 A CN202310521658 A CN 202310521658A CN 116719475 A CN116719475 A CN 116719475A
Authority
CN
China
Prior art keywords
cloud storage
storage object
target
data
processing instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310521658.6A
Other languages
English (en)
Inventor
刘海涛
郭威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Century TAL Education Technology Co Ltd
Original Assignee
Beijing Century TAL Education Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Century TAL Education Technology Co Ltd filed Critical Beijing Century TAL Education Technology Co Ltd
Priority to CN202310521658.6A priority Critical patent/CN116719475A/zh
Publication of CN116719475A publication Critical patent/CN116719475A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/062—Securing storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0656—Data buffering arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/303—Terminal profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供一种数据处理方法、装置及设备，其中该方法包括：响应于接收到针对目标数据的处理指令，确定所述处理指令对应的目标云存储对象；在当前的对象缓存池中存在所述目标云存储对象的情况下，利用所述目标云存储对象针对所述目标数据执行所述处理指令相应的操作；在所述目标云存储对象执行所述处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于所述对象缓存池的云存储对象中选取替补云存储对象，并利用所述替补云存储对象针对所述目标数据执行所述处理指令相应的操作。本公开可以充分保障数据处理的可靠性和灵活性。

Description

数据处理方法、装置及设备
技术领域
本公开涉及数据处理技术领域，尤其涉及数据处理方法、装置及设备。
背景技术
随着信息技术的发展，越来越多的个人用户、企业、机构组织等用户需要借助云存储服务商进行数据存储，也即，将各自的数据上传至云存储服务商的服务器处进行保存，并且后续可直接通过云存储服务商下载所需数据。但发明人经研究发现，大多用户利用云存储服务商进行数据存储的方式存在可靠性差、灵活性差等问题。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种数据处理方法、装置及设备。
根据本公开的一方面，提供了一种数据处理方法，包括：响应于接收到针对目标数据的处理指令，确定所述处理指令对应的目标云存储对象；在当前的对象缓存池中存在所述目标云存储对象的情况下，利用所述目标云存储对象针对所述目标数据执行所述处理指令相应的操作；在所述目标云存储对象执行所述处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于所述对象缓存池的云存储对象中选取替补云存储对象，并利用所述替补云存储对象针对所述目标数据执行所述处理指令相应的操作。
根据本公开的另一方面，提供了一种数据处理装置，包括：对象确定模块，用于响应于接收到针对目标数据的处理指令，确定所述处理指令对应的目标云存储对象；第一执行模块，用于在当前的对象缓存池中存在所述目标云存储对象的情况下，利用所述目标云存储对象针对所述目标数据执行所述处理指令相应的操作；第二执行模块，用于在所述目标云存储对象执行所述处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于所述对象缓存池的云存储对象中选取替补云存储对象，并利用所述替补云存储对象针对所述目标数据执行所述处理指令相应的操作。
根据本公开的另一方面，提供了一种电子设备，包括：处理器；以及存储程序的存储器，其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行所述的数据处理方法。
本公开实施例中提供的上述技术方案，并非固定采用同一种云存储对象执行所有的数据处理指令，而是可以基于接收到的数据处理指令确定相应的目标云存储对象，然后在对象缓存池中存在该目标云存储对象的情况下，利用该目标云存储对象执行处理指令相应的操作，并且还能够在目标云存储对象执行操作异常的情况下，基于多个云存储对象的优先级，从对象缓存池中选取替补云存储对象执行操作，以此可以充分保障数据处理的可靠性和灵活性。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种数据处理方法的流程示意图；
图2为本公开实施例提供的一种数据处理方法的流程示意图；
图3为本公开实施例提供的一种云存储对象的注册流程示意图；
图4为本公开实施例提供的一种多云存储功能的整体应用流程示意图；
图5为本公开实施例提供的一种数据处理装置的结构示意图；
图6为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本公开使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。
发明人经研究发现，大多数用户主要固定使用一种云存储服务商进行数据存储，可靠性、灵活性和安全性均较差，例如，在该云存储服务商的服务器出现自身故障或者被恶意攻击时，则会出现用户存储的数据不可访问，甚至丢失用户已存储数据等问题；另外，单一的云存储服务商提供的功能有限，可能无法满足用户全部的数据处理需求，而且基于存储容量、数据传输量等用户的使用信息向用户收取的费用固定，用户没有可选择性，使用灵活性也相对较差。为改善以上问题至少之一，本公开实施例提供了一种数据处理方法、装置及设备，以下进行详细阐述说明。
图1为本公开实施例提供的一种数据处理方法的流程示意图，该方法可以由数据处理装置执行，其中该装置可以采用软件和/或硬件实现，一般可集成在电子设备中。如图1所示，该方法主要包括如下步骤S102～步骤S106：
步骤S102，响应于接收到针对目标数据的处理指令，确定处理指令对应的目标云存储对象。
目标数据即为用户所需处理的数据，本公开实施例对其不进行限制。处理指令可以为下载指令、上传指令、中断指令等。云存储对象可以理解为云存储服务商对应的产品或者应用，主要利用云存储技术，具体而言，云存储技术是一种将数据存储在云中的技术，其允许用户通过互联网将数据存储在远程服务器上。在本公开实施例中并非固定采用同一种云存储对象执行所有的数据处理指令，而是可以根据用户需求，选择用户所需的云存储对象执行处理指令，不同处理指令对应的云存储对象可以相同，也可以不同，具体可由用户进行设置。在实际应用中，用户可以在下发处理指令时指定用于执行该处理指令对应的操作的云存储对象(也即目标云存储对象)，处理指令携带有目标云存储对象的标识。此外，用户也可以在预先针对各云存储对象进行配置的期间指定各云存储对象对应的处理指令，具体可根据需求灵活设置，在此不进行限制。
步骤S104，在当前的对象缓存池中存在目标云存储对象的情况下，利用目标云存储对象针对目标数据执行处理指令相应的操作。
在实际应用中，可以首先检测对象缓存池中是否存在目标云存储对象，倘若存在，则直接利用目标云存储对象针对目标数据执行处理指令相应的操作即可，而在对象缓存池中不存在目标云存储对象的情况下，注册目标云存储对象；将完成注册的目标云存储对象加入至对象缓存池内。注册目标云存储对象的过程即为针对目标云存储对象进行实例化操作的过程，只有注册完成(也即完成实例化)的目标云存储对象才可加入至对象缓存池，以便后续可直接应用。
在实际应用中，可以直接利用目标云存储对象针对目标数据执行处理指令相应的操作，诸如，直接执行下载指令相应的操作(下载操作)、直接执行上传指令相应的操作(上传操作)等，而为了进一步提升数据安全性，在实际应用中，针对目标数据执行处理指令相应的操作的步骤，包括如下(1)和(2)：
(1)在处理指令包括上传指令的情况下，对目标数据进行加密处理，得到加密数据，并将加密数据上传至目标云存储对象的服务器进行存储。加密处理所采用的算法可灵活设置，在此不进行限制，通过额外加密的方式，可以充分保障数据存储的安全性，尽可能避免数据泄露等问题。
(2)在处理指令包括下载指令的情况下，从目标云存储对象的服务器下载目标数据对应的加密数据，对加密数据进行解密处理以得到目标数据，并将目标数据提供给用户。可以理解的是，由于上传的数据是已经加密的数据，在用户需要下载指定的目标数据的情况下，下载所得的实际为目标数据对应的加密数据，因此需要先对加密数据进行解密处理，解密处理的算法与加密处理的算法匹配，从而得到用户所需的目标数据。通过上述在利用目标云存储对象进行数据处理之前进行加解密的方式，相比于直接将数据存储于目标云存储对象的服务器的方式而言，更加安全可靠，极大降低了将用户数据存储至云存储对象而可能存在的数据安全隐患。
步骤S106，在目标云存储对象执行处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于对象缓存池的云存储对象中选取替补云存储对象，并利用替补云存储对象针对目标数据执行处理指令相应的操作。
在实际应用中，考虑到云存储对象的服务器可能会出现不太稳定的场景，诸如服务器故障或者被攻击等问题会导致目标云存储对象执行处理指令相应的操作异常，诸如上传失败、下载失败等，会极大影响用户的使用体验。为了提升数据处理的可靠性，本公开实施例可以按照预设的多个云存储对象的优先级，从对象缓存池中选取替补云存储对象，也即采用其它的云存储对象针对目标数据执行处理指令相应的操作，针对目标数据执行处理指令相应的操作的具体方式可以与目标云存储对象执行操作的方式相同或相似，具体可参照前述(1)和(2)实现，在此不再赘述。在从当前位于对象缓存池的云存储对象中选取替补云存储对象时，可以按照优先级，从对象缓存池中首先选取优先级最高的云存储对象作为替补云存储对象，通过该替补云存储对象针对目标数据执行处理指令相应的操作，若该替补云存储对象执行操作异常，则再选取优先级排在该替补云存储对象的下一个云存储对象作为新的替补云存储对象，并利用新的替补云存储对象执行处理指令相应的操作，直至找到的替补云存储对象执行操作成功，或者对象缓存池中的所有云存储对象均未成功执行处理指令相应的操作。通过上述挽救措施，可进一步提升数据处理的可靠性。
进一步，本公开实施例提供的上述数据处理方法还包括：若替补云存储对象均未成功执行处理指令相应的操作，发起异常提示。相比于相关技术中只采用一种云存储对象，倘若该云存储对象未成功则直接向用户报错的方式，或者用户分别采用多种云存储对象，多种云存储对象未成功则分别向用户报错的方式，本公开实施例提供的上述方式会尝试其它云存储对象，只有所有的替补云存储对象均未成功才向用户报错，极大降低了向用户报错的几率，有效提升了用户体验。
本公开实施例中提供的上述技术方案，并非固定采用同一种云存储对象执行所有的数据处理指令，而是可以基于接收到的数据处理指令确定相应的目标云存储对象，然后在对象缓存池中存在该目标云存储对象的情况下，利用该目标云存储对象执行处理指令相应的操作，并且还能够在目标云存储对象执行操作异常的情况下，基于多个云存储对象的优先级，从对象缓存池中选取替补云存储对象执行操作，以此可以充分保障数据处理的可靠性和灵活性。
为便于理解，在图1的基础上，可以参照图2所示的一种数据处理方法的流程示意图，在接收到针对目标数据的处理指令后，可以判断对象缓存池中是否存在处理指令对应的目标云存储对象，如果否，则针对目标云存储对象执行注册流程，并将注册完成后的目标云存储对象加入对象缓存池，并执行处理指令对应的操作。如果是，则直接利用目标云存储对象执行处理指令对应的操作。倘若执行处理指令对应的操作失败，则按照预设优先级从对象缓存池中读取其它云存储对象以执行处理指令对应的操作，若全部云存储对象都失败，则发起异常提示，若有一个云存储对象执行操作成功，则返回结果即可。通过上述方式，用户不仅可以灵活便捷地选择所需的云存储对象执行处理指令相应的操作，还可以有对象缓存池中的其它云存储对象作为备用，并在当前的云存储对象处理异常的情况下按照优先级更换其它云存储对象进行处理，极大降低数据处理异常的几率，充分保障数据处理的可靠性。
在一些实施方式中，对象缓存池中的云存储对象均是按照如下步骤A～步骤C加入至对象缓存池中：
步骤A，获取待加入至对象缓存池中的云存储对象的配置信息。在实际应用中，用户可以预先设置配置信息。示例性地，配置信息包括各云存储对象的配置参数、多个云存储对象的优先级、以及默认使用的云存储对象的信息，诸如默认使用的云存储对象的标识信息。具体的，配置参数诸如可以包括云存储对象初始化所需的参数等，在此不进行限制。多个云存储对象的优先级可以由用户根据需求自行设置，并且用户可设置默认使用的云存储对象，默认使用的云存储对象也可理解为优先级最高的云存储对象，在用户未针对某个处理指令单独指定云存储对象时，即可直接采用用户预设的默认使用的云存储对象。
在实际应用中，配置信息存储至本地配置文件中和/或服务器中。换言之，可以动态从服务器中获取配置信息，也可以静态从本地配置文件中获取配置信息，配置信息可明确包含各云存储对象的种类及相应所需的参数、优先级、默认的云存储对象等信息，也可以包含其它后续所需的信息，在此不进行限制。在实际应用中，可以根据用户的配置操作结果生成配置信息，并将配置信息上传至服务器或者保存在本地配置文件中。另外，本地配置文件中的配置信息和服务器中的配置信息的格式可以相同，也可以不同，具体可灵活设置。
步骤B，基于配置信息下载云存储对象的软件开发工具包。软件开发工具包即为SDK(Software Development Kit)，可通过诸如编译器、调试器、软件框架等来促进应用程序的创建，只有在获取云存储对象的SDK的基础上后续才可利用云存储对象执行数据处理指令对应的操作，诸如利用云存储对象进行数据上传、数据下载等操作。
步骤C，在基于配置信息确认达到云存储对象的注册时机的情况下，基于软件开发工具包注册云存储对象，并将完成注册的云存储对象加入至对象缓存池内。本公开实施例涉及多个云存储对象，可以设置不同云存储对象的注册时机，从而避免同时注册多个云存储对象需要较多处理资源，导致注册速度较慢、卡顿等问题。在实际应用中，倘若注册失败，也可以发起异常提示，指出失败的云存储对象的相关信息等。
在一些具体的实施方式中，多个云存储对象中的第一云存储对象的注册时机为：第一云存储对象的软件开发工具包下载结束；多个云存储对象中的任意第二云存储对象的注册时机为：在对象缓存池内不存在该第二云存储对象的情况下接收到该第二云存储对象对应的处理指令；其中，第一云存储对象为默认使用的云存储对象，第二云存储对象为除默认使用的云存储对象之外的云存储对象。其中，可以根据配置信息中所包含的默认使用的云存储对象的标识，判别各个云存储对象是属于第一云存储对象还是第二云存储对象。具体而言，用户设置的默认使用的云存储对象的优先级别最高，所以在默认使用的云存储对象的SDK下载结束后便可直接进行注册(也可理解为实例化或初始化)，以便后续直接应用。而对于非默认使用的云存储对象，在需要使用该对象时，倘若检测到对象缓存池中不存在该对象，才开始针对该对象进行注册。也即，对于任意第二云存储对象，注册时机可以是首次需要使用时(诸如首次接收到其相应的处理指令)才开始注册，注册完成后即可加入对象缓存池，以便后续需要时可直接应用。诸如，假设用户设置需要使用云存储对象A、云存储对象B、云存储对象C和云存储对象D，并设置云存储对象A为默认使用的云存储对象，则可以在初期首先将云存储对象A～D的SDK分别下载下来，然后只针对云存储对象A进行注册即可，假设后续首先接收到用户发起需要云存储对象C执行的处理指令，此时再针对云存储对象C进行注册。
为便于理解，可以参照图3所示的一种云存储对象的注册流程示意图，首先需要从服务器或本地配置文件获取配置信息，然后基于配置信息下载所需的云存储对象的SDK，并缓存配置信息，以便刷新时读取；然后首先注册默认使用的云存储对象，在接收到非默认使用的云存储对象相应的处理指令的情况下，再针对非默认使用的云存储对象进行注册，此外，图3还进一步示意出倘若注册失败，则发起异常提示，倘若注册成功，则将注册完成的云存储对象加入对象缓存池。通过上述方式，相比于将所有云存储对象同时注册的方式，可以尽可能降低在同一时段内注册所需的处理资源，避免注册缓慢、卡顿等问题，有效提升注册效率以及注册可靠性。
在实际应用中，可以直接使用APP或者第三方管理系统执行上述数据处理方法，具体的，可通过但不限于H5、iOS、Android平台等方式集成多个不同厂商的云存储功能，从而实现第三方的多云存储功能。该APP或第三方管理系统可以仅执行上述数据处理方法，也可以通过一个功能模块(诸如多云存储功能模块)执行上述数据处理方法，具体可灵活设置，在此不进行限制，用户可以自定义多个云存储对象的优先级，并根据用户需求择优调度存储。为便于理解，给出了一种如图4所示的一种多云存储功能的整体应用流程示意图，开始首先执行初始化操作，具体的，针对云管理类对象进行初始化，以便后续可直接执行数据处理方法，其中，云管理类对象可理解为执行上述数据处理方法的功能模块。之后，获取云存储对象的配置信息，在实际应用中，可以将所需配置的参数、优先级设置项、默认云存储对象的选择项等都展示给用户，从而引导用户根据需求进行配置。后续可基于配置信息注册云存储对象，具体注册流程可参照图3所示，在此不再赘述。倘若注册成功，则可以使用上传/分片上传/中断上传/下载功能等功能，也即，用户可以直接下发诸如下载指令、上传指令等处理指令，从而利用相应的云存储对象执行处理指令对应的操作。倘若注册失败或者功能使用失败，可以统一发起异常提示，也即抛出错误信息，以便统一处理。应当说明的是，图4中的初始化、配置信息以及注册等可以预先只执行一次，后续用户直接使用所需的功能即可。
综上，本公开实施例提供的数据处理方法，可以实现动态兼容多云存储，也即实现对多个云存储对象的管理与调度，相比于相关技术中只利用单云存储的方式而言，多云存储的方式可靠性和灵活性更强，避免完全依赖一个特定的云存储服务商所导致的数据瓶颈问题、安全隐患问题等。此外，用户可以根据诸如功能需求、成本需求等个性化需求灵活选择不同的云存储对象执行所需功能，扩展性更强。且本公开实施例可以针对数据处理过程中出现的问题进行统一上报，诸如，只有在所有多云存储对象均执行处理指令对应的操作失败时才统一上报，便于用户有针对性地处理，相比于只依赖的一个云存储对象出现问题后就上报的方式或者多个云存储对象出现问题后分别上报的方式，极大提升了用户感受。且本公开实施例提出了挽救方案，一个云存储对象执行操作异常时可无需上报，直接基于优先级采用下一云存储对象继续执行操作，直至成功完成操作或者直至所有云存储对象全部失败后再统一上报，在提升数据处理可靠性的同时也可以较好地保障用户的数据处理体验。进一步，本公开实施例在利用云存储对象进行数据处理之前进行加解密的方式，相比于直接将数据存储于云存储对象的服务器的方式而言，更加安全可靠，极大降低了将用户数据存储至云存储对象而可能存在的数据安全隐患，充分提升了数据处理的安全性。
对应于前述数据处理方法，本公开实施例还提供了一种数据处理装置，图5为本公开实施例提供的一种数据处理装置的结构示意图，该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图5所示，数据处理装置500包括：
对象确定模块502，用于响应于接收到针对目标数据的处理指令，确定处理指令对应的目标云存储对象；
第一执行模块504，用于在当前的对象缓存池中存在目标云存储对象的情况下，利用目标云存储对象针对目标数据执行处理指令相应的操作；
第二执行模块506，用于在目标云存储对象执行处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于对象缓存池的云存储对象中选取替补云存储对象，并利用替补云存储对象针对目标数据执行处理指令相应的操作。
本公开实施例中提供的上述装置，并非固定采用同一种云存储对象执行所有的数据处理指令，而是可以基于接收到的数据处理指令确定相应的目标云存储对象，然后在对象缓存池中存在该目标云存储对象的情况下，利用该目标云存储对象执行处理指令相应的操作，并且还能够在目标云存储对象执行操作异常的情况下，基于多个云存储对象的优先级，从对象缓存池中选取替补云存储对象执行操作，以此可以充分保障数据处理的可靠性和灵活性。
在一些实施方式中，所述装置还包括注册模块，用于在所述对象缓存池中不存在所述目标云存储对象的情况下，注册所述目标云存储对象；将完成注册的所述目标云存储对象加入至所述对象缓存池内。
在一些实施方式中，所述装置还包括缓存池加入模块，用于按照如下步骤将云存储对象加入至所述对象缓存池中：获取待加入至所述对象缓存池中的云存储对象的配置信息；基于所述配置信息下载所述云存储对象的软件开发工具包；在基于所述配置信息确认达到所述云存储对象的注册时机的情况下，基于所述软件开发工具包注册所述云存储对象，并将完成注册的所述云存储对象加入至所述对象缓存池内。
在一些实施方式中，所述配置信息包括各所述云存储对象的配置参数、多个所述云存储对象的优先级、以及默认使用的云存储对象的信息。
在一些实施方式中，所述多个云存储对象中的第一云存储对象的注册时机为：所述第一云存储对象的软件开发工具包下载结束；所述多个云存储对象中的任意第二云存储对象的注册时机为：在所述对象缓存池内不存在该第二云存储对象的情况下接收到该第二云存储对象对应的处理指令；其中，所述第一云存储对象为所述默认使用的云存储对象，所述第二云存储对象为除所述默认使用的云存储对象之外的云存储对象。
在一些实施方式中，所述配置信息存储至本地配置文件中和/或服务器中。
在一些实施方式中，第一执行模块或第二执行模块还用于在所述处理指令包括上传指令的情况下，对所述目标数据进行加密处理，得到加密数据，并将所述加密数据上传至所述目标云存储对象的服务器进行存储；在所述处理指令包括下载指令的情况下，从所述目标云存储对象的服务器下载所述目标数据对应的加密数据，对所述加密数据进行解密处理以得到所述目标数据，并将所述目标数据提供给用户。
在一些实施方式中，所述装置还包括：异常提示模块，用于若所述替补云存储对象均未成功执行所述处理指令相应的操作，发起异常提示。
本公开实施例所提供的数据处理装置可执行本公开任意实施例所提供的数据处理方法，具备执行方法相应的功能模块和有益效果。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置实施例的具体工作过程，可以参考方法实施例中的对应过程，在此不再赘述。
本公开示例性实施例还提供一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器。所述存储器存储有能够被所述至少一个处理器执行的计算机程序，所述计算机程序在被所述至少一个处理器执行时用于使所述电子设备执行根据本公开实施例的方法。
本公开示例性实施例还提供一种存储有计算机程序的非瞬时计算机可读存储介质，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
本公开示例性实施例还提供一种计算机程序产品，包括计算机程序，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例操作的程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、C++等，还包括常规的过程式程序设计语言，诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外，本公开的实施例还可以是计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令在被处理器运行时使得所述处理器执行本公开实施例所提供的数据处理方法。所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
参考图6，现将描述可以作为本公开的服务器或客户端的电子设备600的结构框图，其是可以应用于本公开的各方面的硬件设备的示例。电子设备旨在表示各种形式的数字电子的计算机设备，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图6所示，电子设备600包括计算单元601，其可以根据存储在只读存储器(ROM)602中的计算机程序或者从存储单元608加载到随机访问存储器(RAM)603中的计算机程序，来执行各种适当的动作和处理。在RAM 603中，还可存储设备600操作所需的各种程序和数据。计算单元601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
电子设备600中的多个部件连接至I/O接口605，包括：输入单元606、输出单元607、存储单元608以及通信单元609。输入单元606可以是能向电子设备600输入信息的任何类型的设备，输入单元606可以接收输入的数字或字符信息，以及产生与电子设备的用户设置和/或功能控制有关的键信号输入。输出单元607可以是能呈现信息的任何类型的设备，并且可以包括但不限于显示器、扬声器、视频/音频输出终端、振动器和/或打印机。存储单元608可以包括但不限于磁盘、光盘。通信单元609允许电子设备600通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据，并且可以包括但不限于调制解调器、网卡、红外通信设备、无线通信收发机和/或芯片组，例如蓝牙TM设备、WiFi设备、WiMa6设备、蜂窝通信设备和/或类似物。
计算单元601可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元601的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元601执行上文所描述的各个方法和处理。例如，在一些实施例中，数据处理方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元608。在一些实施例中，计算机程序的部分或者全部可以经由ROM602和/或通信单元609而被载入和/或安装到电子设备600上。在一些实施例中，计算单元601可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行数据处理方法。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
如本公开使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(PLD))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上仅是本公开的具体实施方式，使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下，在其它实施例中实现。本公开将不会被限制于本文所述的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据处理方法，包括：
响应于接收到针对目标数据的处理指令，确定所述处理指令对应的目标云存储对象；
在当前的对象缓存池中存在所述目标云存储对象的情况下，利用所述目标云存储对象针对所述目标数据执行所述处理指令相应的操作；
在所述目标云存储对象执行所述处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于所述对象缓存池的云存储对象中选取替补云存储对象，并利用所述替补云存储对象针对所述目标数据执行所述处理指令相应的操作。
2.如权利要求1所述的数据处理方法，其中，所述方法还包括：
在所述对象缓存池中不存在所述目标云存储对象的情况下，注册所述目标云存储对象；
将完成注册的所述目标云存储对象加入至所述对象缓存池内。
3.如权利要求1所述的数据处理方法，其中，所述对象缓存池中的云存储对象均是按照如下步骤加入至所述对象缓存池中：
获取待加入至所述对象缓存池中的云存储对象的配置信息；
基于所述配置信息下载所述云存储对象的软件开发工具包；
在基于所述配置信息确认达到所述云存储对象的注册时机的情况下，基于所述软件开发工具包注册所述云存储对象，并将完成注册的所述云存储对象加入至所述对象缓存池内。
4.如权利要求3所述的数据处理方法，其中，所述配置信息包括各所述云存储对象的配置参数、多个所述云存储对象的优先级、以及默认使用的云存储对象的信息。
5.如权利要求4所述的数据处理方法，其中，所述多个云存储对象中的第一云存储对象的注册时机为：所述第一云存储对象的软件开发工具包下载结束；
所述多个云存储对象中的任意第二云存储对象的注册时机为：在所述对象缓存池内不存在该第二云存储对象的情况下接收到该第二云存储对象对应的处理指令；
其中，所述第一云存储对象为所述默认使用的云存储对象，所述第二云存储对象为除所述默认使用的云存储对象之外的云存储对象。
6.如权利要求3所述的数据处理方法，其中，所述配置信息存储至本地配置文件中和/或服务器中。
7.如权利要求1所述的数据处理方法，其中，所述针对所述目标数据执行所述处理指令相应的操作的步骤，包括：
在所述处理指令包括上传指令的情况下，对所述目标数据进行加密处理，得到加密数据，并将所述加密数据上传至所述目标云存储对象的服务器进行存储；
在所述处理指令包括下载指令的情况下，从所述目标云存储对象的服务器下载所述目标数据对应的加密数据，对所述加密数据进行解密处理以得到所述目标数据，并将所述目标数据提供给用户。
8.如权利要求1所述的数据处理方法，其中，所述方法还包括：
若所述替补云存储对象均未成功执行所述处理指令相应的操作，发起异常提示。
9.一种数据处理装置，包括：
对象确定模块，用于响应于接收到针对目标数据的处理指令，确定所述处理指令对应的目标云存储对象；
第一执行模块，用于在当前的对象缓存池中存在所述目标云存储对象的情况下，利用所述目标云存储对象针对所述目标数据执行所述处理指令相应的操作；
第二执行模块，用于在所述目标云存储对象执行所述处理指令相应的操作异常的情况下，按照预设的多个云存储对象的优先级，从当前位于所述对象缓存池的云存储对象中选取替补云存储对象，并利用所述替补云存储对象针对所述目标数据执行所述处理指令相应的操作。
10.一种电子设备，包括：
处理器；以及
存储程序的存储器，
其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行根据权利要求1-8中任一项所述的数据处理方法。
CN202310521658.6A 2023-05-10 2023-05-10 数据处理方法、装置及设备 Pending CN116719475A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310521658.6A CN116719475A (zh) 2023-05-10 2023-05-10 数据处理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310521658.6A CN116719475A (zh) 2023-05-10 2023-05-10 数据处理方法、装置及设备

Publications (1)

Publication Number Publication Date
CN116719475A true CN116719475A (zh) 2023-09-08

Family

ID=87868735

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310521658.6A Pending CN116719475A (zh) 2023-05-10 2023-05-10 数据处理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN116719475A (zh)

Similar Documents

Publication Publication Date Title
US10944754B2 (en) Method, authentication server, and electronic device for configuring a sharing target device for sharing data usage of the electronic device
JP6359568B2 (ja) ワンタッチのデバイス個人化
US10601978B2 (en) Telecommunication device utilization based on heartbeat communication
TWI622933B (zh) Client update method and device
WO2017071207A1 (zh) 一种应用安装方法、相关装置及应用安装系统
US20170201378A1 (en) Electronic device and method for authenticating identification information thereof
US10404568B2 (en) Agent manager for distributed transaction monitoring system
JP6793667B2 (ja) アプリケーションダウンロード方法及び装置
WO2014141180A1 (en) Host device coupled to a mobile phone and method of operating the same
CN109716735B (zh) 用于在于一个或多个应用平台上执行的隔离的应用之间共享应用数据的系统和方法
WO2021121407A1 (zh) 一种虚拟机的容量更改方法及装置
US11782748B2 (en) Cloud shell extension framework
CN111901285B (zh) 一种可信验证方法、系统、设备及存储介质
JP2021508880A (ja) 端末のアプリケーション管理方法、アプリケーションサーバー及び端末
US11272336B2 (en) System, method, and computer program for transferring subscriber identity module (SIM) information for SIM card or eSIM activation
US9535715B2 (en) Booting from a trusted network image
CN107526584B (zh) 数据接入方法和装置
CN114968776A (zh) 一种应用程序的检测方法和装置
US11418573B1 (en) File transfer abstraction on a computer network
US10520929B2 (en) Techniques for implementing universal commands in a welding or cutting system
CN116719475A (zh) 数据处理方法、装置及设备
WO2017096889A1 (zh) 系统升降级的方法和装置
KR102368826B1 (ko) 클라우드 서버 및 클라우드 서버의 동작
US20200065182A1 (en) Leak protection of executables with debug information
US20200409737A1 (en) Server and method for controlling packet transmission

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination