CN112559118A - 应用数据迁移方法、装置、电子设备及存储介质 - Google Patents

应用数据迁移方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112559118A
CN112559118A CN201910913391.9A CN201910913391A CN112559118A CN 112559118 A CN112559118 A CN 112559118A CN 201910913391 A CN201910913391 A CN 201910913391A CN 112559118 A CN112559118 A CN 112559118A
Authority
CN
China
Prior art keywords
state data
application
data
container
imported
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910913391.9A
Other languages
English (en)
Inventor
潘峰
张秋生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201910913391.9A priority Critical patent/CN112559118A/zh
Publication of CN112559118A publication Critical patent/CN112559118A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5022—Mechanisms to release resources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45583—Memory management, e.g. access or allocation

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种应用数据迁移方法、装置、电子设备及存储介质。其中方法包括：当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程，所述应用为需要保存状态数据的应用；通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。本发明实现了对应用中需要保存的状态数据的迁移，保证应用的正常使用。

Description

应用数据迁移方法、装置、电子设备及存储介质
技术领域
本发明涉及数据处理技术领域，特别是涉及一种应用数据迁移方法、装置、电子设备及存储介质。
背景技术
容器是一种沙盒技术，沙盒就是能够像集装箱一样，把应用装起来的技术，这样应用与应用之间就因为有了边界而不至于互相干扰，而被装进集装箱的应用也可以被方便地搬来搬去。容器化技术实际上保证了容器与容器间的隔离性，每个容器中会有单独的进程管理、网络、文件系统等，也正因为如此，可以将多个不同的容器在同一个宿主机上运行而保证容器间不会相互干扰。在容器结束运行时，整个容器内的资源会被释放。
容器运行过程中，主要涉及两部分数据。一部分是元数据，元数据一般会在镜像中定义(镜像可以理解为容器中运行的应用程序包)，对于同一个镜像，在不同容器中运行时该部分元数据的信息是相同的；另一部分是状态数据，状态数据是在应用运行过程中产生。
由于容器在结束运行时会释放其内的资源，因此状态数据也会被销毁。但是，对于一些需要保存状态数据的应用来说，现有技术无法满足其保存状态数据的需求。
发明内容
鉴于上述问题，本发明实施例提供一种应用数据迁移方法、装置、电子设备及存储介质，以解决对于需要保存状态数据的应用，无法满足其保存状态数据的需求的问题。
第一方面，本发明实施例提供了一种应用数据迁移方法，所述方法包括：
当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程；所述应用为需要保存状态数据的应用；
通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；
通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：确定是否满足导出条件；在满足导出条件时，获取所述应用对应的待导出状态数据。
可选地，所述确定是否满足导出条件的步骤，包括：通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件；和/或，监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的性能指标阈值时，确定满足导出条件；和/或，监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件；和/或，获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
可选地，在所述将所述待导入状态数据导入到所述容器中的步骤之后，还包括：关闭所述数据导入进程。
可选地，所述将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据的步骤，包括：从所述存储介质中下载所述待导入状态数据；将所述待导入状态数据导入到所述容器中的指定目录下，以使所述应用从所述指定目录下读取所述待导入状态数据，并加载所述待导入状态数据。
第二方面，本发明实施例提供了一种应用数据迁移装置，所述装置包括：
第一启动模块，用于当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程；所述应用为需要保存状态数据的应用；
导入模块，用于通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
第二启动模块，用于当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；
导出模块，用于通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
可选地，所述导出模块包括：条件确定单元，用于确定是否满足导出条件；数据获取单元，用于在所述条件确定单元确定出在满足导出条件时，获取所述应用对应的待导出状态数据。
可选地，所述条件确定单元包括：第一确定子单元，用于通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件；和/或，第二确定子单元，用于监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的性能指标阈值时，确定满足导出条件；和/或，第三确定子单元，用于监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件；和/或，第四确定子单元，用于获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
可选地，所述导出模块包括：第一读取单元，用于从预先配置的存储状态数据的文件路径下，读取所述状态数据；第一选取单元，用于按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
可选地，所述导出模块包括：第二读取单元，用于从预先配置的存储状态数据的文件路径下，读取所述状态数据；第二选取单元，用于获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
可选地，所述装置还包括：关闭模块，用于在所述导入模块将所述待导入状态数据导入到所述容器中之后，关闭所述数据导入进程。
可选地，所述导入模块包括：数据下载单元，用于从所述存储介质中下载所述待导入状态数据；数据导入单元，用于将所述待导入状态数据导入到所述容器中的指定目录下，以使所述应用从所述指定目录下读取所述待导入状态数据，并加载所述待导入状态数据。
第三方面，本发明实施例提供了一种电子设备，设备包括至少一个处理器、以及与处理器连接的至少一个存储器、总线；其中，所述处理器、所述存储器通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的程序指令，以执行如上任一项所述的应用数据迁移方法。
第四方面，本发明实施例提供了一种存储介质，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在的设备执行如上任一项所述的应用数据迁移方法。
在本发明实施例中，当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程，所述应用为需要保存状态数据的应用；通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
考虑到由于容器隔离性的问题，在容器外部无法访问到容器内部的资源，从而限制了无法在容器外部获取容器内部的状态数据进行保存。本发明实施例中在容器内部设置了数据导入进程和数据导出进程，并设置了存储介质用于存储应用对应的需要保存的状态数据。在应用启动过程中通过容器内的数据导入进程，从存储介质中将该应用对应的待导入状态数据导入到容器内，此时的待导入状态数据为该应用之前在其它容器内运行的过程中导出的状态数据；在应用运行过程中通过数据导出进程，将产生的待导出状态数据导出到存储介质中，作为新增的该应用对应的待导入状态数据，以便该应用之后在其他容器内启动时进行导入。由此可知，本发明实施例针对需要保存状态数据的应用，实现了对应用中需要保存的状态数据的迁移，保证应用的正常使用。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1是本发明实施例一的一种应用数据迁移方法的步骤流程图；
图2是本发明实施例二的一种应用数据迁移方法的步骤流程图；
图3是本发明实施例三的一种应用数据迁移装置的结构框图；
图4是本发明实施例的一种电子设备的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
实施例一
参照图1，示出了本发明实施例一的一种应用数据迁移方法的步骤流程图。
本发明实施例的应用数据迁移方法包括以下步骤：
步骤101，当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程。
步骤102，通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据。
步骤103，当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程。
步骤104，通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
本发明实施例针对的是云容器平台下有状态应用的状态数据的迁移。有状态应用是指需要保存状态数据的应用。例如，对于一个MySQL应用来说，MySQL的运行文件及启动配置信息是元数据，后续MySQL运行过程中创建的库表数据等是状态数据，这些状态数据是需要保存以供应用后续使用的。
由于容器隔离性的问题，在容器外部无法访问到容器内部的资源，从而限制了无法在容器外部获取容器内部的状态数据进行保存。如果通过人工方式手动进入应用的运行环境内，找到应用的状态数据在文件系统中的位置，将数据导出到容器外部存储，一方面手工操作风险较高，另一方面对于不同的应用，其状态数据在文件系统中的存储位置往往都不一致，灵活性较差，再一方面容器内部的数据通常都具有一定的访问权限限制，手工操作不可避免的需要处理一定的权限问题。
针对上述问题，本发明实施例中在容器外部设置存储介质，存储介质用于存储应用对应的待导入状态数据，该待导入状态数据即为该应用在本次启动之前、在其它容器内运行的过程中导出到存储介质中的状态数据。
应用在运行之前，可能在存储介质中已经存在该应用对应的待导入状态数据。因此，在应用所在的容器内部，设置数据导入进程，当应用在容器内启动的过程中，启动与该应用位于同一容器内的数据导入进程。通过数据导入进程从存储介质中查找是否存在该应用对应的待导入状态数据，并将待导入状态数据导入到容器中，以使应用加载待导入状态数据，完成状态数据从存储介质中迁移到容器中。
应用在运行的过程中，还会产生新的状态数据，这些状态数据也可能是需要保存的状态数据。因此，在应用所在的容器内部，还设置数据导出进程，当所述应用在容器内运行的过程中，启动与该应用位于同一容器内的数据导出进程。通过数据导出进程获取到应用在运行过程中产生的、该应用对应的待导出状态数据，将待导出状态数据导出到上述存储介质中，作为新增的该应用对应的待导入状态数据。
本发明实施例针对需要保存状态数据的应用，实现了对应用中需要保存的状态数据的迁移，保证应用的正常使用。
实施例二
参照图2，示出了本发明实施例二的一种应用数据迁移方法的步骤流程图。
本发明实施例的应用数据迁移方法包括以下步骤：
步骤201，当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程。
本发明实施例中，应用在容器内启动的过程中，可以在任意适用的时间点启动位于该容器内的数据导入进程。比如，在应用刚开始启动时，或者在应用启动到设定百分比时，等等，本发明实施例对此不作限制。
步骤202，通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据。
在启动数据导入进程后，通过数据导入进程从存储介质中查找是否存在应用对应的待导入状态数据。如果存在，则将待导入状态数据导入到容器中；如果不存在，则不进行导入处理。
在一种可选实施方式中，在对待导入状态数据进行导入时，可以通过数据导入进程从存储介质中下载所述待导入状态数据。在容器内部的文件系统中，预先设置用于存储待导入状态数据的指定目录，通过数据导入进程将下载的待导入状态数据导入到该指定目录下，后续应用从该指定目录下读取待导入状态数据，并加载待导入状态数据，从而完成对存储介质中的待导入状态数据的迁移。
比如，在存储介质中可以通过key-value(键-值)的方式存储应用对应的待导入状态数据，其中key为应用的唯一标识(如应用的名称等)，value为应用对应的待导入状态数据。因此，数据导入进程先获取应用(也即当前正在启动的应用)的唯一标识，然后从存储介质中存储的key中查找是否存在该应用的唯一标识，如果存在则说明存储介质中存在该应用对应的待导入状态数据。数据导入进程从存储介质中下载该应用的唯一标识的key对应的value中的待导入状态数据。
步骤203，关闭所述数据导入进程。
在数据导入进程将待导入状态数据导入到所述容器中后，可以关闭该数据导入进程。在数据导入进程从存储介质中查找到不存在应用对应的待导入状态数据时，可以关闭该数据导入进程。通过及时关闭数据导入进程，可以节省进程占用的内存等资源。
步骤204，当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程。
本发明实施例中，应用在容器内运行的过程中，可以在任意适用的时间点启动位于该容器内的数据导出进程，只要能保证在获取应用对应的待导出状态数据之前启动数据导出进程即可。比如，在应用启动完成后刚开始运行时，或者在应用运行到设定百分比时，等等，本发明实施例对此不作限制。
步骤205，通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
应用在容器内运行的过程中会产生状态数据，这些状态数据会被存储到容器内的文件系统中，可以在文件系统中预先配置应用对应的存储状态数据的文件路径，将应用运行过程中产生的状态数据存储到该文件路径对应的文件中。如果不导出这些状态数据，则在容器结束运行时会释放这些状态数据。通过数据导出进程可以在应用运行的过程中，动态导出产生的状态数据。
在一种可选实施方式中，在获取应用对应的待导出状态数据时，可以先确定是否满足导出条件。在满足导出条件时，获取应用对应的待导出状态数据；在不满足导出条件时，暂时不获取应用对应的待导出状态数据。
对于导出条件，可以存在以下几种情况，下面分别进行说明。
第一种情况：约定策略
设置可以供数据导出进程访问的服务接口，在该服务接口下设置文件信息，并为文件信息设置远程文件路径。文件信息类似于开关的功能，可以指示开始导出或者不导出，用户可以灵活地对文件信息进行配置。比如，当想要导出应用对应的待导出状态数据时(比如，想要关闭应用时等)，可以将文件信息配置为1，指示开始导出；当不想要导出应用对应的待导出状态数据时，可以将文件信息配置为0，指示不导出。
数据导出进程可以轮询通过该服务接口从远程文件路径下获取文件信息进行判断。因此，确定是否满足导出条件的步骤可以包括：通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件。
第二种情况：自动监控
数据导出进程可以实时自动监控容器所在的宿主机的性能指标和应用的业务指标中的至少一个，并根据指标进行判断。
针对宿主机的性能指标，确定是否满足导出条件的步骤可以包括：监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的指标阈值时，确定满足导出条件。其中，宿主机可以为服务器。性能指标可以为宿主机的内存占用、硬盘占用、CPU占用等指标。预设的性能指标阈值可以根据实际情况设置任意适用的值。比如，设置性能指标阈值为占用百分比阈值，如占用百分比阈值70％、80％，等等。
针对应用的业务指标，确定是否满足导出条件的步骤可以包括：监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件。其中，应用的业务指标可以为应用的访问并发量等指标。预设的业务指标阈值可以根据实际情况设置任意适用的值。比如，设置业务指标阈值为并发量阈值，如并发量阈值为应用允许的最大并发量的70％、80％，等等。
第三种情况：定期导出
设置定期导出方式。在该种方式下，每一次导出待导出状态数据后，数据导出进程记录本次导出的时间，根据该时间实时判断是否到达导出周期。因此，确定是否满足导出条件的步骤可以包括：获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
对于预设的周期的具体数值，本领域技术人员根据实际经验设置任意适用的数值均可，比如预设的周期可以为12小时、1天、2天、1周等等，本实施例对此不作限制。
需要说明的是，对于上述确定是否满足导出条件的方式，各种方式之间可以为“和/或”的关系，“和/或”是指包括其中的至少一个。
对于待导出状态数据，可以存在以下几种情况，下面分别进行说明。
第一种情况：参数配置
在某些情况下，可能并不想要导出产生的全部状态数据，因此可以通过参数配置的方式指定待导出状态数据标识，从而筛选需要导出的状态数据。其中标识可以为文件名称。比如，针对一个MySQL应用来说，如果只是导出部分库的数据，则可以指定需要迁移的库名即可。
因此，获取所述应用对应的待导出状态数据的步骤可以包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
第二种情况：动态选择
在某些情况下，应用在运行过程中可能会产生一些临时文件，这些临时文件是没有必要导出的，因此可以针对性地对临时文件等不需要导出的状态数据的筛选策略。对于不需要导出的状态数据来说，可以通过文件属性区分其是否需要导出。文件属性可以包括导出属性和不导出属性。
因此，获取所述应用对应的待导出状态数据的步骤可以包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
数据导出进程在获取到应用对应的待导出状态数据，将待导出状态数据导出到存储介质中，在存储介质中这些待导出状态数据作为新增的该应用对应的待导入状态数据进行存储。比如，如果在存储介质中通过key-value的方式存储应用对应的待导入状态数据，则数据导出进程获取应用的唯一标识，并按照应用的唯一标识将待导出状态数据导出到存储介质中，存储至该应用的唯一标识所在的key对应的value中。
可选地，本发明实施例中还可以采用适用的校验规则检测导出过程中待导出状态数据是否丢失。比如采用MD5(Message-Digest Algorithm，信息摘要算法)进行检测。MD5算法是一种密码散列函数，可以产生出一个128位的散列值，用于确保信息传输完整一致。在实现中，数据导出进程在获取到应用对应的待导出状态数据后，计算获取到的待导出状态数据对应的第一MD5值；存储介质在获取到待导出状态数据，计算获取的待导出状态数据对应的第二MD5值；如果第一MD5值和第二MD5值相同，则说明数据未丢失，否则说明数据丢失。如果数据丢失，则数据导出进程可以对待导出的状态数据进行重传。
本发明实施例中应用所在的一容器内部，实现对有状态应用产生的状态数据的迁移工作，进一步实现了有状态应用的迁移工作。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
实施例三
参照图3，示出了本发明实施例三的一种应用数据迁移装置的结构框图。
本发明实施例的应用数据迁移装置包括：
第一启动模块301，用于当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程。所述应用为需要保存状态数据的应用。
导入模块302，用于通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
第二启动模块303，用于当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程。
导出模块304，用于通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
可选地，所述导出模块包括：条件确定单元，用于确定是否满足导出条件；数据获取单元，用于在所述条件确定单元确定出在满足导出条件时，获取所述应用对应的待导出状态数据。
可选地，所述条件确定单元包括：第一确定子单元，用于通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件；和/或，第二确定子单元，用于监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的性能指标阈值时，确定满足导出条件；和/或，第三确定子单元，用于监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件；和/或，第四确定子单元，用于获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
可选地，所述导出模块包括：第一读取单元，用于从预先配置的存储状态数据的文件路径下，读取所述状态数据；第一选取单元，用于按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
可选地，所述导出模块包括：第二读取单元，用于从预先配置的存储状态数据的文件路径下，读取所述状态数据；第二选取单元，用于获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
可选地，所述装置还包括：关闭模块，用于在所述导入模块将所述待导入状态数据导入到所述容器中之后，关闭所述数据导入进程。
可选地，所述导入模块包括：数据下载单元，用于从所述存储介质中下载所述待导入状态数据；数据导入单元，用于将所述待导入状态数据导入到所述容器中的指定目录下，以使所述应用从所述指定目录下读取所述待导入状态数据，并加载所述待导入状态数据。
本发明实施例针对需要保存状态数据的应用，实现了对应用中需要保存的状态数据的迁移，保证应用的正常使用。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
所述应用数据迁移装置包括处理器和存储器，上述的各模块、单元、子单元等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来针对需要保存状态数据的应用，实现对应用中需要保存的状态数据的迁移，保证应用的正常使用。
本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现所述应用数据迁移方法。
本发明实施例提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行所述应用数据迁移方法。
本发明实施例提供了一种电子设备，电子设备的结构框图如图4所示。电子设备包括至少一个处理器401、以及与处理器401连接的至少一个存储器402、总线403；其中，处理器401、存储器402通过总线403完成相互间的通信；处理器401用于调用存储器402中的程序指令，以执行上述的应用数据迁移方法。本文中的电子设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：
当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程；所述应用为需要保存状态数据的应用；
通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；
通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：确定是否满足导出条件；在满足导出条件时，获取所述应用对应的待导出状态数据。
可选地，所述确定是否满足导出条件的步骤，包括：通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件；和/或，监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的性能指标阈值时，确定满足导出条件；和/或，监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件；和/或，获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
可选地，所述获取所述应用对应的待导出状态数据的步骤，包括：从预先配置的存储状态数据的文件路径下，读取所述状态数据；获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
可选地，在所述将所述待导入状态数据导入到所述容器中的步骤之后，还包括：关闭所述数据导入进程。
可选地，所述将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据的步骤，包括：从所述存储介质中下载所述待导入状态数据；将所述待导入状态数据导入到所述容器中的指定目录下，以使所述应用从所述指定目录下读取所述待导入状态数据，并加载所述待导入状态数据。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
在一个典型的配置中，设备包括一个或多个处理器(CPU)、存储器和总线。设备还可以包括输入/输出接口、网络接口等。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种应用数据迁移方法，其特征在于，所述方法包括：
当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程；所述应用为需要保存状态数据的应用；
通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；
通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
2.根据权利要求1所述的方法，其特征在于，所述获取所述应用对应的待导出状态数据的步骤，包括：
确定是否满足导出条件；
在满足导出条件时，获取所述应用对应的待导出状态数据。
3.根据权利要求2所述的方法，其特征在于，所述确定是否满足导出条件的步骤，包括：
通过预设的服务接口从预设的远程文件路径下获取文件信息，在所述文件信息指示开始导出时，确定满足导出条件；
和/或，
监控所述容器所在的宿主机的性能指标，在所述性能指标达到预设的性能指标阈值时，确定满足导出条件；
和/或，
监控所述应用的业务指标，在所述业务指标达到预设的业务指标阈值时，确定满足导出条件；
和/或，
获取当前时间和上一次导出的时间，在所述当前时间距离所述上一次导出的时间到达预设的周期时，确定满足导出条件。
4.根据权利要求1或2所述的方法，其特征在于，所述获取所述应用对应的待导出状态数据的步骤，包括：
从预先配置的存储状态数据的文件路径下，读取所述状态数据；
按照预设的待导出状态数据标识，从所述状态数据中选取所述标识对应的状态数据，作为所述待导出状态数据。
5.根据权利要求1或2所述的方法，其特征在于，所述获取所述应用对应的待导出状态数据的步骤，包括：
从预先配置的存储状态数据的文件路径下，读取所述状态数据；
获取所述状态数据的文件属性，从所述状态数据中选取文件属性表示导出属性的状态数据，作为所述待导出状态数据。
6.根据权利要求1所述的方法，其特征在于，在所述将所述待导入状态数据导入到所述容器中的步骤之后，还包括：
关闭所述数据导入进程。
7.根据权利要求1所述的方法，其特征在于，所述将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据的步骤，包括：
从所述存储介质中下载所述待导入状态数据；
将所述待导入状态数据导入到所述容器中的指定目录下，以使所述应用从所述指定目录下读取所述待导入状态数据，并加载所述待导入状态数据。
8.一种应用数据迁移装置，其特征在于，所述装置包括：
第一启动模块，用于当应用在容器内启动的过程中，启动位于所述容器内的数据导入进程；所述应用为需要保存状态数据的应用；
导入模块，用于通过所述数据导入进程从预设的存储介质中查找到存在所述应用对应的待导入状态数据时，将所述待导入状态数据导入到所述容器中，以使所述应用加载所述待导入状态数据；
第二启动模块，用于当所述应用在所述容器内运行的过程中，启动位于所述容器内的数据导出进程；
导出模块，用于通过所述数据导出进程获取所述应用对应的待导出状态数据，将所述待导出状态数据导出到所述存储介质中，作为新增的所述应用对应的待导入状态数据。
9.一种电子设备，其特征在于，所述电子设备包括至少一个处理器、以及与处理器连接的至少一个存储器、总线；其中，所述处理器、所述存储器通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的程序指令，以执行如权利要求1-7中任一项所述的应用数据迁移方法。
10.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在的设备执行如权利要求1至7任一项所述的应用数据迁移方法。
CN201910913391.9A 2019-09-25 2019-09-25 应用数据迁移方法、装置、电子设备及存储介质 Pending CN112559118A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910913391.9A CN112559118A (zh) 2019-09-25 2019-09-25 应用数据迁移方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910913391.9A CN112559118A (zh) 2019-09-25 2019-09-25 应用数据迁移方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN112559118A true CN112559118A (zh) 2021-03-26

Family

ID=75029484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910913391.9A Pending CN112559118A (zh) 2019-09-25 2019-09-25 应用数据迁移方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112559118A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113254159A (zh) * 2021-06-16 2021-08-13 腾讯科技(成都)有限公司 有状态服务的迁移方法、装置、计算机设备及存储介质
CN114721783A (zh) * 2022-05-16 2022-07-08 龙芯中科技术股份有限公司 资源文件提取方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996305A (zh) * 2006-12-22 2007-07-11 华为技术有限公司 一种数据存储及读取方法及装置以及数据传输系统
CN104462119A (zh) * 2013-09-18 2015-03-25 腾讯科技（深圳）有限公司 数据迁移方法及装置
CN106155778A (zh) * 2016-07-07 2016-11-23 中国科学院声学研究所 一种应用容器的启动方法及系统
CN107656968A (zh) * 2017-08-31 2018-02-02 武汉斗鱼网络科技有限公司 大批量业务数据导出方法及系统
WO2018113533A1 (zh) * 2016-12-22 2018-06-28 阿里巴巴集团控股有限公司 一种元数据迁移方法、装置、系统及设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996305A (zh) * 2006-12-22 2007-07-11 华为技术有限公司 一种数据存储及读取方法及装置以及数据传输系统
CN104462119A (zh) * 2013-09-18 2015-03-25 腾讯科技（深圳）有限公司 数据迁移方法及装置
CN106155778A (zh) * 2016-07-07 2016-11-23 中国科学院声学研究所 一种应用容器的启动方法及系统
WO2018113533A1 (zh) * 2016-12-22 2018-06-28 阿里巴巴集团控股有限公司 一种元数据迁移方法、装置、系统及设备
CN107656968A (zh) * 2017-08-31 2018-02-02 武汉斗鱼网络科技有限公司 大批量业务数据导出方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113254159A (zh) * 2021-06-16 2021-08-13 腾讯科技(成都)有限公司 有状态服务的迁移方法、装置、计算机设备及存储介质
CN113254159B (zh) * 2021-06-16 2022-10-21 腾讯科技(成都)有限公司 有状态服务的迁移方法、装置、计算机设备及存储介质
CN114721783A (zh) * 2022-05-16 2022-07-08 龙芯中科技术股份有限公司 资源文件提取方法、装置、电子设备及存储介质
CN114721783B (zh) * 2022-05-16 2022-08-26 龙芯中科技术股份有限公司 资源文件提取方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN112346829B (zh) 一种用于任务调度的方法及设备
CN109391673B (zh) 一种管理更新文件的方法、系统及终端设备
CN112487083B (zh) 一种数据校验方法和设备
WO2018214905A1 (zh) 一种数据存储的方法、装置、介质及设备
EP3244320A1 (en) File path storing and local file accessing method and device
CN110197064B (zh) 进程处理方法和装置、存储介质及电子装置
US11275795B2 (en) System and method for in-place record content management
CN110971571A (zh) 一种网站域名的在验证方法及相关装置
CN112486915B (zh) 数据存储方法及装置
CN112559118A (zh) 应用数据迁移方法、装置、电子设备及存储介质
CN112511627B (zh) 迁移元数据的方法和装置
CN110659259A (zh) 数据库迁移方法、服务器以及计算机存储介质
US9665732B2 (en) Secure Download from internet marketplace
CN111784468A (zh) 一种账户关联方法、装置及电子设备
US20180203636A1 (en) Likelihood of access based object storage in a cloud environment
CN113296891A (zh) 基于平台的多场景知识图谱处理方法及装置
CN110795674B (zh) 一种配置更新方法及装置
CN105975567B (zh) 一种应用程序的内部文件的处理方法及装置
CN110968406B (zh) 处理任务的方法、装置、存储介质和处理器
CN111131474A (zh) 一种基于区块链管理用户协议的方法、设备及介质
CN110019497B (zh) 一种数据读取方法及装置
CN115033551A (zh) 一种数据库迁移方法、装置、电子设备及存储介质
CN114157662A (zh) 一种云平台参数适配方法、装置、终端设备及储存介质
CN112650710A (zh) 数据迁移的发送方法及装置、存储介质、电子装置
CN112328363A (zh) 一种云硬盘挂载方法及其装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination