CN109660576B - 用户数据实时迁移方法、存储介质、电子设备及系统 - Google Patents

用户数据实时迁移方法、存储介质、电子设备及系统 Download PDF

Info

Publication number
CN109660576B
CN109660576B CN201710936631.8A CN201710936631A CN109660576B CN 109660576 B CN109660576 B CN 109660576B CN 201710936631 A CN201710936631 A CN 201710936631A CN 109660576 B CN109660576 B CN 109660576B
Authority
CN
China
Prior art keywords
user
data
operation behavior
storage cluster
user data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710936631.8A
Other languages
English (en)
Other versions
CN109660576A (zh
Inventor
杨鹏
张文明
陈少杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Douyu Network Technology Co Ltd
Original Assignee
Wuhan Douyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Douyu Network Technology Co Ltd filed Critical Wuhan Douyu Network Technology Co Ltd
Priority to CN201710936631.8A priority Critical patent/CN109660576B/zh
Publication of CN109660576A publication Critical patent/CN109660576A/zh
Application granted granted Critical
Publication of CN109660576B publication Critical patent/CN109660576B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/563—Data redirection of data network streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种用户数据实时迁移方法、存储介质、电子设备及系统，涉及数据迁移领域，该方法包括将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；同时，Redis管理服务实时记录当前在线用户的操作行为数据；按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中。本发明能够实现用户数据的在线迁移。

Description

用户数据实时迁移方法、存储介质、电子设备及系统
技术领域
本发明涉及数据迁移领域，具体涉及一种用户数据实时迁移方法、存储介质、电子设备及系统。
背景技术
在互联网直播领域，通常需要使用服务器对注册用户的身份、操作行为、直播喜好等信息进行存储，如用户身份ID、用户对其它用户的关注操作等等数据进行存储，详细的记录了用户的行为喜好，方便用户下次登录直播端时直接推送相应内容给用户，提升用户的直播观看体验。
但是，服务器前期设计的存储空间往往无法满足快速增长的用户量，此时便需要对服务器的存储空间进行扩容，同时不可避免的涉及到数据迁移操作，即将之前服务器存储空间中保存的用户数据迁移到新的大容量存储空间中，但现有的对于数据的迁移操作，需要直播厂商暂停提供服务，待服务器中数据迁移完成后，再次开放直播服务，极大地影响了用户对于直播的体验。
发明内容
针对现有技术中存在的缺陷，本发明的目的在于提供一种用户数据实时迁移方法，能够实现用户数据的在线迁移。
为达到以上目的，本发明采取的技术方案是，包括：
将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；
同时，Redis管理服务实时记录当前在线用户的操作行为数据；
按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中。
在上述技术方案的基础上，
所述操作行为数据用于记录用户对其他用户的关注操作；
每条用户数据中的用户ID和操作行为数据相对应；
用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录。
在上述技术方案的基础上，所述旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，所述新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。
在上述技术方案的基础上，
Redis管理服务实时记录的当前在线用户的操作行为数据按条保存至一消息队列中，每条操作行为数据均与相应的用户ID对应；
按照先后顺序从消息队列中按条取出操作行为数据，判断取出的操作行为数据对应用户的用户数据在新Redis存储集群中是否已拷贝完成。
在上述技术方案的基础上，按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，当操作行为数据所对应用户的用户数据在新Redis存储集群中未拷贝完成时：
判断操作行为数据所对应用户的用户数据是否正在拷贝中，若是，则待操作行为数据所对应用户的用户数据拷贝完成后，将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中。
本发明还提供一种存储介质，该存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述所述的方法。
本发明还提供一种电子设备，包括存储器和处理器，存储器上储存有在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述所述的方法。
本发明还提供一种用户数据实时迁移系统，包括：
数据迁移模块，其用于将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；
数据记录模块，其用于实时记录当前在线用户的操作行为数据；
判断模块，其用于按条判断数据记录模块记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中。
在上述技术方案的基础上，所述操作行为数据用于记录用户对其他用户的关注操作；每条用户数据中的用户ID和操作行为数据相对应；用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录。
在上述技术方案的基础上，所述旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，所述新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。
与现有技术相比，本发明的优点在于：在将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群的过程中，此时Redis管理服务还实时记录当前在线用户的操作行为数据，采用双线程并发的工作模式，实现用户数据的双写，将旧Redis存储集群存储的用户数据完整的拷贝至新Redis存储集群中，且对拷贝工作中的新产生的操作行为数据同时进行记录和存储，因而在用户数据的拷贝过程中，服务器无需停止服务，有效保证了用户对于直播的观看体验。
附图说明
图1为本发明实施例中一种用户数据实时迁移方法的流程图；
图2为本发明实施例中一种电子设备的结构示意图。
具体实施方式
以下结合附图及实施例对本发明作进一步详细说明。
参见图1所示，本发明实施例提供一种用户数据实时迁移方法，用于在无需停止服务或关闭服务器对外的情况下，将用户数据从小容量的存储器中拷贝至大容量的储存器中，实现服务器扩容的目的，本发明实施例的用户数据实时迁移方法基于Redis存储系统，Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库。本发明实施例的用户数据实时迁移方法具体包括：
S1：将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据。旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。本发明实施例中操作行为数据用于记录用户对其他用户的关注操作，如关注或取消关注，每条用户数据中的用户ID和操作行为数据相对应，每个用户的用户ID是唯一的，但每个用户ID可能对应多个操作行为数据，因直播网站中，用户是能够同时关注多个其它用户的，故此种情况下，一个用户ID便会对应多条操作行为数据。
用户ID一般由数字组成，直播网站对用户ID数字的分配，一般按照用户申请的先后顺序进行，即后申请用户的用户ID数值大于先申请用户的用户ID。且在将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中时，Redis存储系统的迁移数据服务MegrateServer对于数据的前移也是按序按条进行，即先迁移用户ID数值较小用户的用户数据，再迁移用户ID数值较大用户的用户数据，按序进行，对于迁移数据的进行，使用Redis的指令“MIGRATE host port key destination-db timeout COPY”从而将current_user_id(当前正进行数据拷贝的用户ID)的用户数据从OldRedisCluster(旧Redis存储集群)拷贝到NewRedisCluster(新Redis存储集群)中，接着再执行指令current_user_id＝current_user_id+1，即将下一个用户的用户数据进行拷贝，以此类推，直至完成旧Redis存储集群中所有用户数据的迁移。
S2：同时，Redis管理服务实时记录当前在线用户的操作行为数据。Redis管理服务是用于记录用户的操作行为数据，如某用户对某用户的关注或取消关注操作，且用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录，即用户数据在从旧Redis存储集群拷贝至新Redis存储集群的过程中，Redis管理服务也在对用户操作后产生的操作行为数据进行记录，从而实现服务器扩容过程中的服务器不停机操作。
对于Redis管理服务记录的操作行为数据以及旧Redis存储集群和新Redis存储集群中记录保存的用户数据，均按照特定数据结构形式进行保存，例如{int32user_id1,int32operate_type,int32user_id2}，user_id1代表用户ID数值为1的用户，int32user_id2代表用户ID数值为2的用户，当参数operate_type的值为1时，表示用户ID数值为1的用户关注了用户ID数值为2的用户，当参数operate_type的值为2时，表示用户ID数值为1的用户取消关注了用户ID数值为2的用户，Redis管理服务按照以上数据结构格式，记录用户操作产生的操作行为数据。
使用Redis存储系统的两个线程同时进行工作，一个线程负责将旧Redis存储集群存储的用户数据拷贝至新Redis存储集群中，另一个线程负责数据拷贝中使Redis管理服务实时记录当前在线用户的操作行为数据，采用双线程并发的工作模式，实现用户数据的拷贝和新产生的用户的操作行为数据记录同时进行，避免服务器数据过程中的停止服务。
S3：按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则表示该条操作行为数据对应用户的用户数据还没拷贝至新Redis存储集群中，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则表示该条操作行为数据对应用户的用户数据已拷贝至新Redis存储集群中，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中。对于操作行为数据合并操作，如之前操作行为数据记录的是用户1关注了用户2，新记录的操作行为数据为用户1取消关注了用户2，则合并后该用户的操作行为数据记录的为用户1没有关注用户2，如之前操作行为数据记录的是用户1关注了用户2，新记录的操作行为数据为用户1关注了用户3，则合并后的操作行为数据记录的是用户1关注了用户2和用户3。
因用户数据从旧Redis存储集群拷贝至新Redis存储集群中需要时间，而此时服务器没有停止对外服务，故此时还会产生当前用户的操作，从而产生用户的操作行为数据，故Redis管理服务实时记录的当前在线用户的操作行为数据按条保存至一消息队列中，每条操作行为数据均与相应的用户ID对应；然后按照先后顺序从消息队列中按条取出操作行为数据，判断取出的操作行为数据对应用户的用户数据在新Redis存储集群中是否已拷贝完成。
按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，当操作行为数据所对应用户的用户数据在新Redis存储集群中未拷贝完成时：判断操作行为数据所对应用户的用户数据是否正在拷贝中，若是，则待操作行为数据所对应用户的用户数据拷贝完成后，将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中。
在一种实施方式中，因用户数据的拷贝是按照用户ID数值的大小，从小开始进行，故对于在数据拷贝过程中，Redis管理服务记录的操作行为数据对应用户的用户数据是否拷贝完成的判断，可以将该用户的用户ID数值与当前正在进行数据拷贝的用户的用户ID数值大小进行比对，从而进行判断。具体的：
从消息队列中取出一条操作行为数据(UserBehavior)，将UserBehavior.user_id和current_user_id的大小进行比对，其中UserBehavior.user_id代表当前从消息队列中取出的一条操作行为数据对应用户的用户ID数值，current_user_id代表当前正在进行拷贝的用户的用户ID数值，若UserBehavior.user_id＜current_user_id，则表示当前取出的操作行为数据对应用户的用户数据已拷贝至新Redis存储集群中，则将当前取出的操作行为数据合并至新Redis存储集群中对应用户的用户数据中；若UserBehavior.user_id＝current_user_id，则表示当前取出的操作行为数据对应用户的用户数据正在进行拷贝，则待当前取出的操作行为数据对应用户数据拷贝完成后，将当前取出的操作行为数据合并至新Redis存储集群中，对于等待的时间，为避免无限制等待，可以对等待时间的上限进行限定；若UserBehavior.user_id＞current_user_id，则表示当前取出的操作行为数据对应用户的用户数据还未拷贝至新Redis存储集群中，则将当前取出的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中。当旧Redis存储集群存储的用户数据全部拷贝至新Redis存储集群中后，此时Redis管理服务新记录的操作行为数据将全部合并至新Redis存储集群对应用户的用户数据中。
本发明的用户数据实时迁移方法的原理在于，在将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群的过程中，此时Redis管理服务还实时记录当前在线用户的操作行为数据，即用户数据的拷贝和新产生的用户的操作行为数据记录同时进行，采用双线程并发的工作模式，实现用户数据的双写，将旧Redis存储集群存储的用户数据完整的拷贝至新Redis存储集群中，且对拷贝工作中的新产生的操作行为数据同时进行记录和存储，有线避免了传统服务器扩容，数据拷贝过程中，服务器需停止服务的设定，有效保证了用户对于直播的观看体验，且整个数据的拷贝工作效率极高，由于Redis存储系统的TPS(Transaction processing systems，事务处理系统)都是10W级别的，故采用本发明的数据拷贝方法，在具体的实施过程中，3亿用户的用户数据能够在1个小时内完成迁移。
另外，对应上述用户数据实时迁移方法，本发明还提供一种存储介质，存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述各实施例所述的用户数据实时迁移方法的步骤。需要说明的是，所述存储介质包括U盘、移动硬盘、ROM(Read-Only Memory，只读存储器)、RAM(Random Access Memory，随机存取存储器)、磁碟或者光盘等各种可以存储程序代码的介质。
参见图2所示，对应上述用户数据实时迁移方法，本发明还提供一种电子设备，包括存储器和处理器，存储器上储存有在处理器上运行的计算机程序，处理器执行计算机程序时实现上述各实施例的用户数据实时迁移方法。
本发明还提供一种基于上述用户数据实时迁移方法的用户数据实时迁移系统，包括数据迁移模块、数据记录模块和判断模块。
数据迁移模块用于将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；数据记录模块用于实时记录当前在线用户的操作行为数据；判断模块用于按条判断数据记录模块记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中。
操作行为数据用于记录用户对其他用户的关注操作；每条用户数据中的用户ID和操作行为数据相对应；用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录。旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。
本发明实施例的用户数据实时迁移系统的原理在于，数据迁移模块在将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群的过程中，此数据记录模块还实时记录当前在线用户的操作行为数据，即用户数据的拷贝和新产生的用户的操作行为数据记录同时进行，采用双线程并发的工作模式，实现用户数据的双写，将旧Redis存储集群存储的用户数据完整的拷贝至新Redis存储集群中，且对拷贝工作中的新产生的操作行为数据同时进行记录和存储，有线避免了传统服务器扩容，数据拷贝过程中，服务器需停止服务的设定，有效保证了用户对于直播的观看体验。
本发明不局限于上述实施方式，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围之内。本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (9)

1.一种用户数据实时迁移方法，基于Redis存储系统，其特征在于：
将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；
同时，Redis管理服务实时记录当前在线用户的操作行为数据；
按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中；
其中，用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录；
使用Redis存储系统的两个线程同时进行工作，一个线程负责将旧Redis存储集群存储的用户数据拷贝至新Redis存储集群中，另一个线程负责数据拷贝中使Redis管理服务实时记录当前在线用户的操作行为数据；
其中，按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，当操作行为数据所对应用户的用户数据在新Redis存储集群中未拷贝完成时：
判断操作行为数据所对应用户的用户数据是否正在拷贝中，若是，则待操作行为数据所对应用户的用户数据拷贝完成后，将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中。
2.如权利要求1所述的一种用户数据实时迁移方法，其特征在于：
所述操作行为数据用于记录用户对其他用户的关注操作；
每条用户数据中的用户ID和操作行为数据相对应。
3.如权利要求2所述的一种用户数据实时迁移方法，其特征在于：所述旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，所述新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。
4.如权利要求1所述的一种用户数据实时迁移方法，其特征在于：
Redis管理服务实时记录的当前在线用户的操作行为数据按条保存至一消息队列中，每条操作行为数据均与相应的用户ID对应；
按照先后顺序从消息队列中按条取出操作行为数据，判断取出的操作行为数据对应用户的用户数据在新Redis存储集群中是否已拷贝完成。
5.一种存储介质，该存储介质上存储有计算机程序，其特征在于：所述计算机程序被处理器执行时实现权利要求1至4任一项所述的方法。
6.一种电子设备，包括存储器和处理器，存储器上储存有在处理器上运行的计算机程序，其特征在于：所述处理器执行所述计算机程序时实现权利要求1至4任一项所述的方法。
7.一种用户数据实时迁移系统，其特征在于，包括：
数据迁移模块，其用于将旧Redis存储集群存储的用户数据按条拷贝至新Redis存储集群中，每条用户数据均包括用户ID和操作行为数据；
数据记录模块，其用于实时记录当前在线用户的操作行为数据；
判断模块，其用于按条判断数据记录模块记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中，若是，则将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中；
其中，用户数据拷贝进行中和拷贝完成后，Redis管理服务均对当前在线用户的操作行为数据进行实时记录；
使用Redis存储系统的两个线程同时进行工作，一个线程负责将旧Redis存储集群存储的用户数据拷贝至新Redis存储集群中，另一个线程负责数据拷贝中使Redis管理服务实时记录当前在线用户的操作行为数据；
其中，按条判断Redis管理服务记录的操作行为数据所对应用户的用户数据在新Redis存储集群中是否已拷贝完成，当操作行为数据所对应用户的用户数据在新Redis存储集群中未拷贝完成时：
判断操作行为数据所对应用户的用户数据是否正在拷贝中，若是，则待操作行为数据所对应用户的用户数据拷贝完成后，将记录的操作行为数据合并至新Redis存储集群中对应用户的用户数据中，若否，则将记录的操作行为数据合并至旧Redis存储集群中对应用户的用户数据中。
8.如权利要求7所述的一种用户数据实时迁移系统，其特征在于：所述操作行为数据用于记录用户对其他用户的关注操作；每条用户数据中的用户ID和操作行为数据相对应。
9.如权利要求8所述的一种用户数据实时迁移系统，其特征在于：所述旧Redis存储集群对应用户数据迁移之前保存用户数据的存储器，所述新Redis存储集群对应用户数据迁移之后保存用户数据的存储器。
CN201710936631.8A 2017-10-10 2017-10-10 用户数据实时迁移方法、存储介质、电子设备及系统 Active CN109660576B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710936631.8A CN109660576B (zh) 2017-10-10 2017-10-10 用户数据实时迁移方法、存储介质、电子设备及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710936631.8A CN109660576B (zh) 2017-10-10 2017-10-10 用户数据实时迁移方法、存储介质、电子设备及系统

Publications (2)

Publication Number Publication Date
CN109660576A CN109660576A (zh) 2019-04-19
CN109660576B true CN109660576B (zh) 2021-09-07

Family

ID=66109466

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710936631.8A Active CN109660576B (zh) 2017-10-10 2017-10-10 用户数据实时迁移方法、存储介质、电子设备及系统

Country Status (1)

Country Link
CN (1) CN109660576B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114945910A (zh) * 2020-02-24 2022-08-26 深圳市欢太科技有限公司 redis集群扩容方法、装置、电子设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101251797A (zh) * 2008-03-31 2008-08-27 中国船舶重工集团公司第七〇九研究所 基于域模型的构件实时主动迁移方法
CN102308297A (zh) * 2011-07-13 2012-01-04 华为技术有限公司 一种数据迁移方法、数据迁移装置及数据迁移系统
CN103473368A (zh) * 2013-09-27 2013-12-25 中国科学院信息工程研究所 一种基于计数排序的虚拟机实时迁移方法及系统
CN103825930A (zh) * 2013-11-12 2014-05-28 浙江省水文局 一种分布式环境下的实时数据同步方法
CN103914474A (zh) * 2013-01-05 2014-07-09 腾讯科技（深圳）有限公司 一种数据迁移方法及系统
CN106682021A (zh) * 2015-11-09 2017-05-17 五八同城信息技术有限公司 数据库迁移方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6865627B2 (en) * 2002-12-27 2005-03-08 Microsoft Corp Regulating real-time data capture rates to match processor-bound data consumption rates

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101251797A (zh) * 2008-03-31 2008-08-27 中国船舶重工集团公司第七〇九研究所 基于域模型的构件实时主动迁移方法
CN102308297A (zh) * 2011-07-13 2012-01-04 华为技术有限公司 一种数据迁移方法、数据迁移装置及数据迁移系统
CN103914474A (zh) * 2013-01-05 2014-07-09 腾讯科技（深圳）有限公司 一种数据迁移方法及系统
CN103473368A (zh) * 2013-09-27 2013-12-25 中国科学院信息工程研究所 一种基于计数排序的虚拟机实时迁移方法及系统
CN103825930A (zh) * 2013-11-12 2014-05-28 浙江省水文局 一种分布式环境下的实时数据同步方法
CN106682021A (zh) * 2015-11-09 2017-05-17 五八同城信息技术有限公司 数据库迁移方法及装置

Also Published As

Publication number Publication date
CN109660576A (zh) 2019-04-19

Similar Documents

Publication Publication Date Title
CN105302478B (zh) 一种数据存储方法及电子设备
CN108460045B (zh) 一种快照的处理方法及分布式块存储系统
CN102708064A (zh) 从休眠中多阶段恢复
CN102770841A (zh) 用于产生最小引导映像的方法和装置
CN106469087B (zh) 元数据输出方法、客户端和元数据服务器
CN107957852B (zh) 一种提升固态硬盘性能一致性的方法
CN108959118B (zh) 一种数据写入的方法及装置
CN106201652B (zh) 一种数据处理方法及虚拟机
CN106844491B (zh) 一种临时数据的写入、读取方法及写入、读取装置
CN104035728A (zh) 一种硬盘热插拔处理方法、装置及节点
CN109117297A (zh) 一种固态硬盘的故障定位方法及装置
CN104866388B (zh) 数据处理方法及装置
CN103927215A (zh) 基于内存盘与SSD硬盘的kvm虚拟机调度的优化方法及系统
CN109660576B (zh) 用户数据实时迁移方法、存储介质、电子设备及系统
CN110780821A (zh) 分布式存储系统的优化方法、装置、服务器和存储介质
CN116301644B (zh) 基于多硬盘协调的数据存储方法、系统、终端及介质
US9009430B2 (en) Restoration of data from a backup storage volume
CN108198582B (zh) 一种NAND Flash控制方法、装置及SSD
CN114138424B (zh) 一种虚拟机内存快照生成方法、装置及电子设备
CN108491483B (zh) 一种远程监控程序运行状态的方法和装置
CN110941605A (zh) 重复数据的在线删除方法、装置及可读存储介质
CN104461382B (zh) 运行多个文件系统的文件服务器的内部写方法和服务器
CN110019086A (zh) 基于分布式文件系统的多副本读取方法、设备及存储介质
CN109753222A (zh) 数据删除方法、服务器及计算机可读介质
US10241686B2 (en) Storage device, information processing device, data access method and program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant