CN109144977A - 一种数据迁移方法、装置、设备及存储介质 - Google Patents

一种数据迁移方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN109144977A
CN109144977A CN201810921900.8A CN201810921900A CN109144977A CN 109144977 A CN109144977 A CN 109144977A CN 201810921900 A CN201810921900 A CN 201810921900A CN 109144977 A CN109144977 A CN 109144977A
Authority
CN
China
Prior art keywords
data
page
display
level
loaded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810921900.8A
Other languages
English (en)
Inventor
王盟盟
吕庆春
彭飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuba Co Ltd
Original Assignee
Wuba Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuba Co Ltd filed Critical Wuba Co Ltd
Priority to CN201810921900.8A priority Critical patent/CN109144977A/zh
Publication of CN109144977A publication Critical patent/CN109144977A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据迁移方法、装置、设备及存储介质,所述方法包括:确定原数据库中各数据对应的页面;按设定的层级设置规则,确定各所述页面的显示层级;根据所述显示层级,对各数据进行拆分;将拆分后的数据并行迁移到目标数据库。本发明实施例所述的数据迁移方案,将待迁移的数据库中的数据根据显示层级进行拆分,并对拆分后的数据进行并行拷贝,提高了数据的拷贝效率和正确性。并且由于本发明将数据按显示层级拆分、每个显示层级的数据在并行拷贝完成后,其拷贝的数据即可被系统访问,从而加快了对数据的加载效率,便于用户更快的看到页面数据,提高了数据呈现效率。

Description

一种数据迁移方法、装置、设备及存储介质
技术领域
本发明涉及大数据领域,尤其涉及一种数据迁移方法、装置、设备及存储介质。
背景技术
Core Data是一个效率比较高的数据库框架,但是Core Data并不是一种数据库,它底层还是利用Sqlite3来存储数据的。Core Data可以把数据当成对象来操作,而且开发者并不需要在乎数据在磁盘上面的存储方式。它会把位于托管对象上下文NSManagedObject Context里面的托管对象NSManagedObject类的实例或者某个NSManagedObject子类的实例,通过NSManagedObjectModel托管对象模型,把托管对象保存到持久化存储协调器NSPersistentStoreCoordinator持有的一个或者多个持久化存储区中NSPersistentStore中。
但是当数据类型发生变化,删除或修改,再次查询数据修改前保存的旧数据时,数据库读取会失败,因此就需要进行到数据库的迁移,以保证数据的可靠性。例如,当资讯类文章根据业务需求添加新的字段时,旧的SQLite数据无法查询,因此做了一个整体的数据库迁移。把旧的SQLite数据库里的内容,复制到新的SQLite数据库里去,让新的数据库作为默认的数据存储。
然而,当数据库中存在大量数据时,通过数据库整体拷贝的方案不仅消耗了大量CPU的性能,而且会非常耗时,从而导致出现用户等待的情况,用户体验不好。
发明内容
本发明实施例提供一种数据迁移方法、装置、设备及存储介质,用以解决现有技术中数据库进行大量数据迁移时,现有的迁移机制较为耗时,导致迁移效率低,影响用户使用体验的问题。
依据本发明实施例的一个方面,提供一种数据迁移方法,包括:
确定原数据库中各数据对应的页面;
按设定的层级设置规则,确定各所述页面的显示层级;
根据所述显示层级,对各数据进行拆分;
将拆分后的数据并行迁移到目标数据库。
可选地,所述按设定的层级设置规则,确定各所述页面的显示层级,包括:
基于预先收集的用户操作数据,统计用户的显示加载习惯;
根据所述显示加载习惯,预估出加载显示页和非加载显示页;
将所述加载显示页确定为第一显示层级,将所述非加载显示页确定为第二显示层级。
可选地,在将所述加载显示页对应的数据确定为第一显示层级后,还包括:
将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
可选地,所述将拆分后的数据并行迁移到目标数据库,包括:
为拆分后的每部分数据创建迁移子线程;
通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
依据本发明实施例的第二个方面,提供一种数据迁移装置,包括:
页面确定模块,用于确定原数据库中各数据对应的页面;
层级确定模块,用于按设定的层级设置规则,确定各所述页面的显示层级;
拆分模块,用于根据所述显示层级,对各数据进行拆分;
迁移模块,用于将拆分后的数据并行迁移到目标数据库。
可选地,所述层级确定模块,具体用于基于预先收集的用户操作数据,统计用户的显示加载习惯,根据所述显示加载习惯,预估加载显示页和非加载显示页,将所述加载显示页对应的数据确定为第一显示层级,将所述非加载显示页对应的数据确定为第二显示层级。
可选地,所述层级确定模块,还用于将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
可选地,所述迁移模块,具体用于为拆分后的每部分数据创建迁移子线程,通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
依据本发明实施例的第三个方面,提供一种计算设备,所述计算设备包括:存储器、处理器及通信总线;所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行存储器中存储的应用程序中的数据迁移程序,以实现如方法步骤:
确定原数据库中各数据对应的页面;
按设定的层级设置规则,确定各所述页面的显示层级;
根据所述显示层级,对各数据进行拆分;
将拆分后的数据并行迁移到目标数据库。
依据本发明实施例的第四个方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现如下方法步骤:
确定原数据库中各数据对应的页面;
按设定的层级设置规则,确定各所述页面的显示层级;
根据所述显示层级,对各数据进行拆分;
将拆分后的数据并行迁移到目标数据库。
本发明有益效果如下:
本发明实施例所述的数据迁移方案,将待迁移的数据库中的数据根据显示层级进行拆分,并对拆分后的数据进行并行拷贝,提高了数据的拷贝效率和正确性。并且由于本发明将数据按显示层级拆分、每个显示层级的数据在并行拷贝完成后,其拷贝的数据即可被系统访问,从而加快了对数据的加载效率,便于用户更快的看到页面数据,提高了数据呈现效率。
上述说明仅是本发明实施例技术方案的概述,为了能够更清楚了解本发明实施例的技术手段,而可依照说明书的内容予以实施,并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明实施例的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明实施例的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本发明第一实施例提供的一种数据迁移方法的流程图;
图2为本发明第二实施例提供的一种数据迁移方法的流程图;
图3为本发明第三实施例提供的一种数据迁移方法的流程图;
图4为本发明第五实施例提供的一种数据迁移装置的结构框图;
图5为本发明第六实施例提供的一种计算设备的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例考虑到,当原数据库中存在大量数据需要进行整体数据迁移至新数据库时,若采用数据库整体拷贝的方案会存在如下问题:整体拷贝非常耗时,而且还可能会因为外部原因造成拷贝中断的现象;整体拷贝的数据易出现异常、丢失等情况,导致数据的准确性较差。上述问题,在用户层面所表现出来的问题是:整体拷贝未完成时,已拷贝数据处于锁保护状态,系统无法加载该部分数据,从而会出现加载缓慢,导致用户等待,进而影响用户体验的问题。若出现拷贝数据不准确的问题,会导致显示内容不完整或者不准确,进一步影响用户使用体验的问题。
对此,本发明实施例提供一种数据迁移方法、装置、设备及存储介质,本发明实施例在数据迁移时,对数据按显示层级拆分,并进行并行拷贝,很好的解决了现有技术中的各问题。下面就通过几个具体实施例,对本发明的实施过程进行详尽的说明。
在本发明第一实施例中,提供一种数据迁移方法,所述方法可以但不限于应用在Core Data中的数据库迁移。
如图1所示,本发明实施例所述方法包括如下步骤:
步骤S101,确定原数据库中各数据对应的页面;
本发明实施例中,一个页面所显示的数据的条数是固定的,也就是说,根据数据库中的各条数据,可以确定出各条数据属于哪一页面。示例性的,当一个页面显示20条数据时,那么数据库中,前20条数据即为首页面,从首页后的20条数据为第二页面,依次类推。
步骤S102,按设定的层级设置规则,确定各所述页面的显示层级;
本发明实施例中,显示层级是指数据被页面加载时的页面的显示优先级。示例性的,首页优先显示,所以首页的显示层级最高;首页后的第二、三页,也是极有可能被用户上拉加载的页面,所以第二、三页面的显示层级相对也比较高。而越往后的页面被用户上拉加载的概率并不高,那么这些不易被用户上拉加载的页面的显示层级相对较低。
所以,本发明实施例中,在各页面顺序显示的原则下,所述的显示层级是可以灵活设定的,也就是说,本领域技术人员可以根据自身需求,来设定各页面的显示层级。示例性的,本发明实施例中,可以将首页设置为第一优先级的显示层级、将第二至第五页设置为第二优先级的显示层级、将第五页以后的页面设置为第三优先级的显示层级。
步骤S103,根据所述显示层级,对各数据进行拆分;
本发明实施例中,对页面的显示层级进行了划分,那么就可以按照显示层级的划分,来实现对数据的拆分。示例性的,本发明实施例中,若将页面划分为三个显示层级,那么将各数据拆分为:第一显示层级的数据、第二显示层级的数据和第三显示层级的数据。
步骤S104,将拆分后的数据并行迁移到目标数据库。
本发明实施例中,显示层级是指数据被页面加载时的页面的显示优先级,本实施例将按照显示层级拆分的数据并行拷贝到目标数据库后,已下载完成的各显示层级的页面数据即可被加载,从而实现对应页面的加载,无需等到所有的数据都拷贝完成,提高了数据呈现效率。
在本发明的一个可选实施例中,将拆分后的数据并行迁移到目标数据库,具体包括:
为拆分后的每部分数据创建迁移子线程;
通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
也就是说,本发明实施例中,为拆分出的每部分数据,都创建一个子线程,每个子线程对应一个拷贝任务,实现对各部分数据的并行拷贝。
本发明实施例中,并行拷贝的各部分数据在拷贝完成后,已拷贝的数据就去除了锁保护,系统就可以访问该部分数据,从而实现数据的加载,而无需等到所有的数据都拷贝完成,提高了数据呈现效率,避免了用户长时间等待,进而提高了用户的使用体验。另外,由于每个拷贝任务拷贝的只是所有数据中的部分数据,所以拷贝过程中不易出现拷贝异常、数据丢失等情况,提高了数据拷贝的准确性。
在本发明第二实施中提供一种数据迁移方法,所述方法可以但不限于应用在CoreData中的数据库迁移。本实施例相比于第一实施例,将着重阐述按设定的层级设置规则确定各所述页面的显示层级的实施方案。与实施例一相同的步骤,实施过程可参见第一实施例,本实施例不再赘述。
如图2所示,本发明实施例所述方法包括如下步骤:
步骤S201,确定原数据库中各数据对应的页面;
步骤S202,基于预先收集的用户操作数据,统计用户的显示加载习惯;
本发明实施例中,用户操作数据包括但不限于为用户上拉加载的页面的操作数据。显示加载习惯包括但不限于为用户通常上拉加载到第几页,例如,有的用户喜欢上拉加载前3页,有的用户喜欢上拉记载前5页,等等。总之,本实施例就是要统计该用户的显示加载习惯。
步骤S203,根据所述显示加载习惯,预估出加载显示页和非加载显示页;
本发明实施例中,由于在先统计了显示加载习惯,所以,就能够估计出用户想要加载的显示的页面以及非加载显示的页面。示例性的,用户的显示加载习惯为显示前五页,则能够预估出加载显示页为前五页,五页后的页面为非加载显示页。
步骤S204,将所述加载显示页对应的数据确定为第一显示层级,将所述非加载显示页对应的数据确定为第二显示层级;
本发明实施例中,根据是否可能被加载显示,将页面的层级划分为两个层级,一个是与加载显示页对应的显示层级,另一个是与非加载显示页对应的显示层级。
步骤S205,根据所述显示层级,对各数据进行拆分;
步骤S206,将拆分后的数据并行迁移到目标数据库。
本发明实施例所述方案,在实施例一的基础上提出了显示层级划分方案,该划分方案是以用户的操作习惯为参考,对页面的显示层级进行划分,提高了显示层级划分的准确性,进而提高了数据拷贝的准确性。
在本发明第三实施例中,提供一种数据迁移方法,所述方法可以但不限于应用在Core Data中的数据库迁移。本实施例是第二实施例实施方案下的可选方案,该方案细化了显示层级的划分,进一步提高了拷贝的效率及数据显示的及时性。与实施例一、二相同的步骤,实施过程可参见第一、二实施例,本实施例不再赘述。
如图3所示,本发明实施例所述方法包括如下步骤:
步骤S301,确定原数据库中各数据对应的页面;
步骤S302,基于预先收集的用户操作数据,统计用户的显示加载习惯;
本发明实施例中,用户操作数据包括但不限于为用户上拉加载的页面的操作数据。显示加载习惯包括但不限于为用户通常上拉加载到第几页。
步骤S303,根据所述显示加载习惯,预估出加载显示页和非加载显示页;
本发明实施例中,由于在先统计了显示加载习惯,所以,就能够估计出用户想要加载的显示的页面以及非加载显示的页面。
步骤S304,将所述加载显示页对应的数据确定为第一显示层级,将所述非加载显示页对应的数据确定为第二显示层级;
本发明实施例中,根据是否可能被加载显示,将页面的层级划分为两个层级,一个是与加载显示页对应的显示层级,另一个是与非加载显示页对应的显示层级。
步骤S305,将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
本发明实施例中,第一显示层级对应的页面为预先预估出的可能被用户加载的页面。若这部分的页面比较多,则可能导致首页显示也会被延误。所以,本发明实施例中,基于可能被用户加载的页面,将第一显示层级又划分为多个子显示层级,需要指出的是虽然表达为“子层级”,但是其实际上与第二显示层级是同等层级,这里只是对第一显示层级又进行了拆分。示例性的,假定被用户可能加载的页面有十页,则可以将首页、第二至五、第六至十页分别作为一个子显示层级。这样操作,不仅可以优先展示首页,而且对于用户后续上拉加载的第二至五页也极为流畅,无需等待。所以,本实施例进一步提高了数据在页面中的呈现效率。
步骤S306,根据所述显示层级,对各数据进行拆分;
步骤S307,将拆分后的数据并行迁移到目标数据库。
本发明实施例所述方案,在实施例二的基础上提出了显示层级划分的优选方案,该划分方案相比于第二实施例,可以进一步提高数据在页面中的呈现效率。
在本发明第四实施例中,提供一种数据迁移方法,该数据迁移方法将结合具体的应用示例,对本发明所述的数据迁移方法进行更详尽的阐述。需要指出的是,本实施例中纰漏的技术细节用于解释本发明,并不用于唯一限定本发明。
在Core Data中,当数据类型发生变化,删除或修改,再次查询数据修改前保存的旧数据时,数据库读取会失败,因此就需要进行到数据库的迁移,以保证数据的可靠性。本发明实施例提供的数据迁移方法就应用在该场景下。
具体的,本发明实施例考虑到当原数据库中存在大量的数据需要拷贝到目标数据库中时,拷贝比较耗时,所以,本发明实施例基于原数据库中各数据对应页面的显示层级进行数据拆分,具体的,本发明实施例中,将原数据库中的数据拆分为三部分,分别为:首页20条数据、首页后100条、剩下的数据。
在具体实现时,系统需要为各部分数据开辟出三个子线程并行的去拷贝对应部分的数据。
具体的,利用创建的第一子线程来拷贝首页的数据,首页数据20条,所以拷贝速度会很快,当用户进入当前页后不会出现等待的现象;
利用创建的第二子线程来拷贝下100条数据,目的是当用户在列表页上拉加载更多的时候可以有数据展示,不会出现下一页无数据的情况;
利用创建的第三子线程来拷贝剩下的数据,此部分数据为旧数据,用户看到的概率不高,所以我们整体拷贝,不用过分考虑数据拷贝的正确性。
综上可知,本发明实施例,先将数据分了三个显示前后的层级“首页10条,后100条,剩下的”,所有的数据拷贝都是同时进行的,属于并行异步操作,也就是说我的三部分数据是同时进行的拷贝的。此方案的侧重点在于数据的拆分,以及一起执行所有数据的拷贝操作,不区分先后顺序,不过按照数据量的大小首页会优先返回,后100条其次,剩下的会最后返回(当然如果全部只有150条数据的话,剩下的数据会优先后100条返回,由于数据量小,此差异可以忽略不计)。
另外,本发明实施例,将原数据库的数据并行的分成三次拷贝,首页20条数据数据较少,拷贝效率较高,正确性高,同时也更快,这样保证了当用户进入当前页的时候不会出现空白页。后100条拷贝相比整体拷贝数据量也是较少,所以从效率和速度来讲都较快,但是相对于首页会慢,但是这100条数据不会在首页展示,所以不用考虑。主要是用来保证分页的时候有数据。可能会出现分页的时候数据还没有拷贝完成,会出现加载等待的现象,但是上拉加载更多出现加载等待现象是一个正常现象,所以是可以这样处理的。剩下的数据较旧,用户考到的几率不会太大,所以我们整体拷贝。
所以,利用本发明所述的数据迁移方案,最新数据呈现快,用户体验更好,CPU消耗降低,数据更安全。
与方法实施例相对应的,在本发明第五实施例中,提供一种数据迁移装置,如图4所示,所述数据迁移装置包括:
页面确定模块410,用于确定原数据库中各数据对应的页面;
层级确定模块420,用于按设定的层级设置规则,确定各所述页面的显示层级;
拆分模块430,用于根据所述显示层级,对各数据进行拆分;
迁移模块440,用于将拆分后的数据并行迁移到目标数据库。
本发明实施例中,显示层级是指数据被页面加载时的页面的显示优先级。
可选地,本发明实施例中,层级确定模块420,具体用于基于预先收集的用户操作数据,统计用户的显示加载习惯,根据所述显示加载习惯,预估出加载显示页和非加载显示页,将所述加载显示页对应的数据确定为第一显示层级,将所述非加载显示页对应的数据确定为第二显示层级。
本发明实施例中,用户操作数据包括但不限于为用户上拉加载的页面的操作数据。显示加载习惯包括但不限于为用户通常上拉加载到第几页。
可选地,本发明实施例中,层级确定模块420,还用于将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
可选地,本发明实施例中,迁移模块440,具体用于为拆分后的每部分数据创建迁移子线程,通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
本发明实施例中,每个子线程对应一个拷贝任务,针对每个拷贝任务,在拷贝任务拷贝完成后,其拷贝的数据就去除了锁保护,系统就可以访问该部分数据,从而实现数据的加载,而无需等到所有的数据数据都拷贝完成,提高了数据呈现效率,避免了用户长时间等待,进而提高了用户的使用体验。另外,由于每个拷贝任务拷贝的只是所有数据中的部分数据,所以拷贝过程中不易出现拷贝异常、数据丢失等情况,提高了数据拷贝的准确性。
并且,提出了显示层级划分方案,该划分方案是以用户的操作习惯为参考,对页面的显示层级进行划分,提高了显示层级划分的准确性,进而提高了数据拷贝的准确性。
在本发明第六实施例中,提供一种计算设备,如图5所示,所述计算设备包括:存储器510、处理器520及通信总线530;所述通信总线530用于实现处理器520和存储器510之间的连接通信;
具体的,本发明实施例中,处理器520可以是通用处理器,例如中央处理器(Central Processing Unit,CPU),还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(英文:Application Specific Integrated Circuit,ASIC),或者是被配置成实施本发明实施例的一个或多个集成电路。其中,存储器510用于存储所述处理器520的可执行指令;
存储器510,用于存储程序代码,并将该程序代码传输给处理器520。存储器510可以包括易失性存储器(Volatile Memory),例如随机存取存储器(Random Access Memory,RAM);存储器510也可以包括非易失性存储器(Non-Volatile Memory),例如只读存储器(Read-Only Memory,ROM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,HDD)或固态硬盘(Solid-State Drive,SSD);存储器510还可以包括上述种类的存储器的组合。
具体的,本发明实施例中,处理器520用于执行存储器510中存储的应用程序中的数据迁移程序,以实现如下方法步骤:
步骤1,确定原数据库中各数据对应的页面;
步骤2,按设定的层级设置规则,确定各所述页面的显示层级;
步骤3,根据所述显示层级,对各数据进行拆分;
步骤4,将拆分后的数据并行迁移到目标数据库。
本实施例中各步骤的实施过程可参见第一至第三实施例,本实施例不再赘述。
在本发明第七实施例中,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现如下方法步骤:
步骤1,确定原数据库中各数据对应的页面;
步骤2,按设定的层级设置规则,确定各所述页面的显示层级;
步骤3,根据所述显示层级,对各数据进行拆分;
步骤4,将拆分后的数据并行迁移到目标数据库。
本实施例中各步骤的实施过程可参见第一至第三实施例,本实施例不再赘述。
其中,计算机存储介质可以是RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、移动硬盘、CD-ROM或者本领域已知的任何其他形式的存储介质。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
总之,以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种数据迁移方法,其特征在于,包括:
确定原数据库中各数据对应的页面;
按设定的层级设置规则,确定各所述页面的显示层级;
根据所述显示层级,对各数据进行拆分;
将拆分后的数据并行迁移到目标数据库。
2.如权利要求1所述的方法,其特征在于,所述按设定的层级设置规则,确定各所述页面的显示层级,包括:
基于预先收集的用户操作数据,统计用户的显示加载习惯;
根据所述显示加载习惯,预估出加载显示页和非加载显示页;
将所述加载显示页确定为第一显示层级,将所述非加载显示页确定为第二显示层级。
3.如权利要求2所述的方法,其特征在于,在将所述加载显示页确定为第一显示层级后,还包括:
将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
4.如权利要求1至3任意一项所述的方法,其特征在于,所述将拆分后的数据并行迁移到目标数据库,包括:
为拆分后的每部分数据创建迁移子线程;
通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
5.一种数据迁移装置,其特征在于,包括:
页面确定模块,用于确定原数据库中各数据对应的页面;
层级确定模块,用于按设定的层级设置规则,确定各所述页面的显示层级;
拆分模块,用于根据所述显示层级,对各数据进行拆分;
迁移模块,用于将拆分后的数据并行迁移到目标数据库。
6.如权利要求5所述的装置,其特征在于,所述层级确定模块,具体用于基于预先收集的用户操作数据,统计用户的显示加载习惯,根据所述显示加载习惯,预估加载显示页和非加载显示页,将所述加载显示页对应的数据确定为第一显示层级,将所述非加载显示页对应的数据确定为第二显示层级。
7.如权利要求6所述的装置,其特征在于,所述层级确定模块,还用于将所述第一显示层级,按照加载显示页的加载顺序划分为若干子显示层级。
8.如权利要求5至7任意一项所述的装置,其特征在于,所述迁移模块,具体用于为拆分后的每部分数据创建迁移子线程,通过创建的各所述迁移子线程,并行的将对应部分的数据迁移到目标数据库。
9.一种计算设备,其特征在于,所述计算设备包括:存储器、处理器及通信总线;所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行存储器中存储的应用程序中的数据迁移程序,以实现如权利要求1至4中任一项所述的应用程序中的数据迁移方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现如权利要求1至4中任一项所述的应用程序中的数据迁移方法的步骤。
CN201810921900.8A 2018-08-14 2018-08-14 一种数据迁移方法、装置、设备及存储介质 Pending CN109144977A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810921900.8A CN109144977A (zh) 2018-08-14 2018-08-14 一种数据迁移方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810921900.8A CN109144977A (zh) 2018-08-14 2018-08-14 一种数据迁移方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN109144977A true CN109144977A (zh) 2019-01-04

Family

ID=64793318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810921900.8A Pending CN109144977A (zh) 2018-08-14 2018-08-14 一种数据迁移方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN109144977A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400273A (zh) * 2019-11-19 2020-07-10 杭州海康威视系统技术有限公司 数据库扩容方法、装置、电子设备及机器可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103902593A (zh) * 2012-12-27 2014-07-02 中国移动通信集团河南有限公司 一种数据迁移的方法和装置
CN105359146A (zh) * 2013-07-09 2016-02-24 甲骨文国际公司 自动数据库迁移架构
CN105528381A (zh) * 2014-10-27 2016-04-27 青岛金讯网络工程有限公司 数据库数据迁移方法及系统
CN105630778A (zh) * 2014-10-27 2016-06-01 青岛金讯网络工程有限公司 数据库数据迁移方法及系统
US9482772B2 (en) * 2012-11-16 2016-11-01 International Business Machines Corporation Reducing run time in seismic imaging computing
CN106933859A (zh) * 2015-12-30 2017-07-07 中国移动通信集团公司 一种医疗数据的迁移方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9482772B2 (en) * 2012-11-16 2016-11-01 International Business Machines Corporation Reducing run time in seismic imaging computing
CN103902593A (zh) * 2012-12-27 2014-07-02 中国移动通信集团河南有限公司 一种数据迁移的方法和装置
CN105359146A (zh) * 2013-07-09 2016-02-24 甲骨文国际公司 自动数据库迁移架构
CN105528381A (zh) * 2014-10-27 2016-04-27 青岛金讯网络工程有限公司 数据库数据迁移方法及系统
CN105630778A (zh) * 2014-10-27 2016-06-01 青岛金讯网络工程有限公司 数据库数据迁移方法及系统
CN106933859A (zh) * 2015-12-30 2017-07-07 中国移动通信集团公司 一种医疗数据的迁移方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400273A (zh) * 2019-11-19 2020-07-10 杭州海康威视系统技术有限公司 数据库扩容方法、装置、电子设备及机器可读存储介质
CN111400273B (zh) * 2019-11-19 2024-02-02 杭州海康威视系统技术有限公司 数据库扩容方法、装置、电子设备及机器可读存储介质

Similar Documents

Publication Publication Date Title
CN111124305B (zh) 固态硬盘磨损均衡方法、装置及计算机可读存储介质
WO2017177931A1 (zh) 一种文本信息的显示方法、装置和移动设备
CN107729558B (zh) 文件系统碎片整理的方法、系统、装置及计算机存储介质
JP2016502184A (ja) アイコン整理方法、装置、機器、プログラム及び記録媒体
CN103164490B (zh) 一种不固定长度数据的高效存储实现方法和装置
CN104360990A (zh) 一种编辑内容的方法
CN103370691A (zh) 管理缓冲器溢出状况
US20180150196A1 (en) Method and apparatus for switching multiple folders, and computer storage medium
CN110109868A (zh) 用于索引文件的方法、装置和计算机程序产品
US20120185794A1 (en) Method and Apparatus for Managing Buttons on Taskbar
US10423580B2 (en) Storage and compression of an aggregation file
CN103677893B (zh) 开机的映像文件的大小缩减方法及运算装置
CN104536652A (zh) 一种列表显示方法及终端
CN109144977A (zh) 一种数据迁移方法、装置、设备及存储介质
CN103699296A (zh) 一种智能终端及剧集序号提示方法
CN108874491A (zh) 信息加载的方法及装置
CN102270179B (zh) 用于cad系统的基于片元的数据存储和处理方法及其系统
CN114138140B (zh) 信息管理方法、电子设备及存储介质
US9507794B2 (en) Method and apparatus for distributed processing of file
CN103593606B (zh) 上下文信息管理方法及系统
CN115543317A (zh) 前端页面开发方法及装置
CN111625500B (zh) 文件快照方法及装置、电子设备和存储介质
CN109284237B (zh) 一种全闪存储阵列中的垃圾回收方法及系统
CN109189345B (zh) 一种在线数据整理方法、装置、设备及存储介质
CN111176571A (zh) 一种本地对象的管理方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190104

RJ01 Rejection of invention patent application after publication