CN104462127B - 一种记录数据更新方法及装置 - Google Patents

一种记录数据更新方法及装置 Download PDF

Info

Publication number
CN104462127B
CN104462127B CN201310432480.4A CN201310432480A CN104462127B CN 104462127 B CN104462127 B CN 104462127B CN 201310432480 A CN201310432480 A CN 201310432480A CN 104462127 B CN104462127 B CN 104462127B
Authority
CN
China
Prior art keywords
update
record
data
record data
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310432480.4A
Other languages
English (en)
Other versions
CN104462127A (zh
Inventor
李凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Oceanbase Technology Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201310432480.4A priority Critical patent/CN104462127B/zh
Publication of CN104462127A publication Critical patent/CN104462127A/zh
Priority to HK15105327.6A priority patent/HK1204815A1/zh
Application granted granted Critical
Publication of CN104462127B publication Critical patent/CN104462127B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24552Database cache management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种记录数据更新方法及装置,包括:依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中该记录的记录数据将要被更新为的更新后记录数据;并基于缓存的该多个更新操作各自对应的更新后记录数据,将该多个更新操作各自针对该记录的重做日志,一次性写入持久化设备;以及当写重做日志成功时,使用缓存的该多个更新操作各自对应的更新后记录数据,更新数据库中该记录的记录数据。采用本申请实施例提供的方案,提高了针对并发记录数据更新的处理效率。

Description

一种记录数据更新方法及装置
技术领域
本申请涉及数据库技术领域,尤其涉及一种记录数据更新方法及装置。
背景技术
在数据库的使用过程中,经常需要对数据库中保存的记录数据进行更新,现有技术中对数据库中保存的记录数据的更新流程,为了保证对数据更新的原子性操作,更新流程主要包括预处理操作、写重做日志操作和提交操作,具体如下:
预处理操作:在接收到更新操作请求之后,首先确定本次更新操作对应的记录,并确定在本次更新操作中该记录的记录数据将要被更新为的更新后记录数据,然后缓存该更新后记录数据,即完成了预处理操作。
在上述预处理操作过程中,为了避免在本次更新操作过程中该记录的记录数据被其它更新操作更改,可以引入锁机制,即在确定本次更新操作对应的记录之后,且在确定更新后记录数据之前,对该记录的记录数据进行加锁处理,使得已加锁的该记录的记录数据在被解锁之前,无法被其它更新操作更改。
写重做日志操作:在完成预处理操作之后,将本次更新操作针对该记录的重做日志(redo log),写入持久化设备,重做日志中包括了本次更新操作的一些操作信息,用于表示本次更新操作的具体操作内容,例如,可以包括本次更新操作对应的记录,以及对应的更新后记录数据等。
执行写重做日志操作的目的在于在数据意外崩溃后,能够根据重做日志恢复数据,以便最终能够成功完成本次更新操作,并且如果写重做日志操作失败,或者预处理操作失败,那么后续不会再执行对应的提交操作,进而可以保证记录数据更新的原子性操作。
提交操作:在完成写重做日志操作之后,使用缓存的该更新后记录数据更新数据库中该记录的记录数据,从而完成本次对该记录的记录数据的更新。当在预处理操作时对该记录的记录数据进行了加锁处理,则还需要对该记录的记录数据进行解锁处理,以便后续当需要针对该记录再次进行更新操作时,能够对该记录的记录数据进行更新。在提交操作完成后,即可以对外发布,使得该记录的更新后记录数据对外可查询到。
通过上述对数据库中的记录数据的更新方案,能够保证对数据更新的原子性操作。然而,在实际应用中,经常会在短时间内需要对数据库中的同一记录的记录数据进行多次更新,例如,在电子商务领域中,电子商务网站上的一些产品可能会在短时间内被多次执行购买操作,在执行购买操作之后,产品数量信息需要更新,产品数量即相当于记录,产品数量的数量值即相当于记录数据,对于一段时间内需要进行多次更新的记录,可以将其称作热点记录。
对于这种短时间内对同一记录的记录数据进行多次更新的情况,可以称作为并发记录数据更新,针对这一情况,在采用现有技术中的上述方案时,对于短时间针对同一记录的多个更新操作请求,需要按照先后顺序,串行的依次针对每个更新操作请求进行更新处理。
然而,由于每次更新操作过程中向持久化设备写重做日志的操作是耗费时间较长的一个操作,所以将导致无法及时对后续等待处理的更新操作请求进行处理,从而导致对并发的多个更新操作请求进行处理的时间较长,进而导致针对并发记录数据更新的处理效率较低。
发明内容
有鉴于此,本申请实施例提供一种记录数据更新方法及装置,用于解决现有技术中存在的针对并发记录数据更新的处理效率较低的问题。
本申请实施例通过如下技术方案实现:
本申请实施例提供了一种记录数据更新方法,包括:
依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据;
基于缓存的所述多个更新操作各自对应的更新后记录数据,将所述多个更新操作各自针对所述记录的重做日志,一次性写入持久化设备;
当写重做日志成功时,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据。
采用本申请实施例提供的上述方法,实现了针对同一记录的多个更新操作的多个重做日志的一次性写入持久化设备,相比将多个重做日志分别多次写入持久化设备,减少了写重做日志的时长,从而提高了针对并发记录数据更新的处理效率。
进一步的,所述多个更新操作为一个预设周期内请求的更新操作;或者
所述多个更新操作为连续的预设数量的更新操作。
进一步的,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据,具体包括:
确定所述记录对应的专用进程或专用线程;
通过所述专用进程或专用线程,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据。
这样,减少了数据库的进程或线程等待被使用的时长,从而减少了对数据进程或线程资源的浪费。
进一步的,在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之前,还包括:
对所述记录的记录数据进行加锁处理;
在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之后,还包括:
对所述记录的记录数据进行解锁处理。
这样,可以通过锁机制,避免在该更新操作过程中其它更新操作对记录的记录数据进行更改。
进一步的,上述方法,还包括:
当写重做日志失败时,取消针对所述多个更新操作对数据库中所述记录的记录数据的更新。
进一步的,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据,具体可以为:
按照所述多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
这样,使得在执行一次对数据库中该记录的记录数据的更新后,该记录的更新后记录数据即可以对外可查询到,以便后续能够及时的对外发布每次更新的更新结果。
使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据,具体也可以为:
使用缓存的所述多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
这样,直接将数据库中该记录的记录数据,更新为最后请求的更新操作对应的更新后记录数据,从而减少了对数据库中该记录的更新次数,也就减少了处理资源的消耗,并且提高了处理效率。
本申请实施例还提供了一种记录数据更新装置,包括:
缓存处理单元,用于依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据;
写重做日志单元,用于基于缓存的所述多个更新操作各自对应的更新后记录数据,将所述多个更新操作各自针对所述记录的重做日志,一次性写入持久化设备;
更新处理单元,用于当写重做日志成功时,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据。
采用本申请实施例提供的上述装置,实现了针对同一记录的多个更新操作的多个重做日志的一次性写入持久化设备,相比将多个重做日志分别多次写入持久化设备,减少了写重做日志的时长,从而提高了针对并发记录数据更新的处理效率。
进一步的,所述缓存处理单元,具体用于确定所述记录对应的专用进程或专用线程;
通过所述专用进程或专用线程,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据。
这样,减少了数据库的进程或线程等待被使用的时长,从而减少了对数据进程或线程资源的浪费。
进一步的,所述缓存处理单元,还用于在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之前,对所述记录的记录数据进行加锁处理;并在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之后,对所述记录的记录数据进行解锁处理。
这样,可以通过锁机制,避免在该更新操作过程中其它更新操作对记录的记录数据进行更改。
进一步的,所述写重做日志单元,还用于当写重做日志失败时,取消针对所述多个更新操作对数据库中所述记录的记录数据的更新。
进一步的,所述更新处理单元,可以具体用于按照所述多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
这样,使得在执行一次对数据库中该记录的记录数据的更新后,该记录的更新后记录数据即可以对外可查询到,以便后续能够及时的对外发布每次更新的更新结果。
所述更新处理单元,也可以具体用于使用缓存的所述多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
这样,直接将数据库中该记录的记录数据,更新为最后请求的更新操作对应的更新后记录数据,从而减少了对数据库中该记录的更新次数,也就减少了处理资源的消耗,并且提高了处理效率。
本申请的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本申请的进一步理解,并且构成说明书的一部分,与本申请实施例一起用于解释本申请,并不构成对本申请的限制。在附图中:
图1为本申请实施例提供的记录数据更新方法的流程图;
图2为本申请实施例1提供的记录数据更新方法的流程图;
图3为本申请实施例2提供的记录数据更新装置的结构式意图。
具体实施方式
为了给出提高针对并发记录数据更新的处理效率的实现方案,本申请实施例提供了一种记录数据更新方法及装置,该技术方案可以应用于更新数据库中的记录数据的过程,既可以实现为一种方法,也可以实现为一种装置。以下结合说明书附图对本申请的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本申请,并不用于限定本申请。并且在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
本申请实施例提供一种记录数据更新方法,如图1所示,包括:
步骤101、依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中该记录的记录数据将要被更新为的更新后记录数据。
步骤102、基于缓存的该多个更新操作各自对应的更新后记录数据,将该多个更新操作各自针对该记录的重做日志,一次性写入持久化设备。
步骤103、当写重做日志成功时,使用缓存的该多个更新操作各自对应的更新后记录数据,更新数据库中该记录的记录数据。
其中,该多个更新操作的选取,可以采用如下两种方式:
第一种方式:该多个更新操作可以为一个预设周期内请求的更新操作,即可以将每个预设周期内请求更新同一记录的多个更新操作作为一组更新操作,以通过上述方法针对该记录的记录数据进行更新。
第二种方式:该多个更新操作也可以为连续的预设数量的更新操作,即将连续的请求更新同一记录的多个更新操作作为一组更新操作,以通过上述方法针对该记录的记录数据进行更新。
进一步的,在本申请实施例提供的上述方法中,可以针对热点记录采用上述图1所示的流程进行记录数据更新处理,而针对非热点记录,由于其更新的频率较低,可以采用现有技术中的各种方法进行记录数据更新处理。
具体的,针对热点记录和非热点记录,可以根据接收的更新操作请求中是否对应记录携带了热点标记进行区分,例如,当更新操作请求中对应请求更新的记录携带有热点标记时,确定该记录为热点记录,当更新操作请求中对应请求更新的记录未携带有热点标记时,确定该记录为非热点记录。更新操作请求可以通过扩展SQL语句实现,并指示请求更新的记录是否为热点记录。
下面结合附图,对本申请实施例提供的方法进行详细描述。
实施例1:
本申请实施例1提供一种记录数据更新方法,该方法可应用于数据库,如图2所示,具体包括如下处理步骤:
步骤201、获取接收的更新操作请求,该更新操作请求用于请求对数据库中的记录数据进行更新。
步骤202、根据接收的更新操作请求,确定请求执行的更新操作,例如,确定在该更新操作中请求更新的记录,以及确定该记录的记录数据将要被更新为的更新后数据。
其中,更新后记录数据可以根据更新操作请求中携带的更新指示信息和数据库中该记录的当前记录数据进行确定,在不同的应用场景中,可以采用相应的具体确定方式,在此不再举例进行详细描述。
进一步的,在本步骤中,当确定出该更新操作请求更新的记录之后,还可以确定该记录是否为热点记录,如果是热点记录,则进入后续步骤203,以采用本申请实施例提供的方法进行更新操作,否则,可以采用现有技术中的各种方法进行记录数据更新处理,如背景技术中所介绍的更新方法。
步骤203、缓存在该更新操作中该记录的记录数据将要被更新为的更新后记录数据。
本步骤中缓存更新后记录数据,相当于是对该记录进行预处理操作,现有技术中,在一次更新操作中对记录进行预处理操作时,是通过预先为请求该更新操作的客户端分配的进程或线程执行的,所以当出现并发记录数据更新情况时,多个更新操作请求是来自不同客户端的,所以需要为每个更新操作请求分配不同的进程或线程,而针对多个更新操作请求是串行处理的,所以后处理的更新操作请求由于等待处理的时间较长,导致为其分配的进程或线程也需要等待较长时间才能被使用,从而浪费了数据库的进程或线程资源。
为了解决这一技术问题,本申请实施例中,具体可以采用如下方式执行本步骤:
确定该记录对应的专用进程或专用线程。例如,根据该记录的主键计算出一个唯一的整数签名值,如果当前不存在与该整数签名值对应的进程或线程,可以对应该整数签名值为其分配一个进程或线程,作为该记录对应的专用进程或专用线程,并建立该整数签名值与分配的该进程或线程的对应关系;如果当前存在与该整数签名值对应的进程或线程,则可以将该整数签名值对应的进程或线程,确定为该记录对应的专用进程或专用线程;
通过该记录对应的专用进程或专用线程,缓存在该更新操作中该记录的记录数据将要被更新为的更新后记录数据。
采用上述方式执行本步骤,减少了数据库的进程或线程等待被使用的时长,从而减少了对数据进程或线程资源的浪费。
当采用上述方式执行本步骤时,由于针对该记录的记录数据的预处理操作都是通过一个进程或线程来完成的,所以可以不使用锁机制,即不需要先对该记录的记录数据进行加锁处理,以及后续对应的解锁处理。
当针对该记录的记录数据的预处理操作不都是通过一个进程或线程来完成时,本步骤中可以通过锁机制避免在预处理操作过程中该记录的记录数据被其它更新操作更改,具体可以为在缓存该更新后记录数据之前,对该记录的记录数据进行加锁处理,并在缓存该更新后记录数据之后,对该记录的记录数据进行解锁处理。
步骤204、获取针对该记录当前已完成预处理操作且未完成写重做日志操作的多个更新操作,并确定该多个更新操作是否满足启动进行批量写重做日志操作的预设条件,如果满足,进入步骤205,如果不满足,返回上述步骤201。
具体的,可以当针对该记录当前已完成预处理操作且未完成写重做日志操作的多个更新操作的数量达到预设数量时,确定满足预设条件。
也可以当针对该记录当前已完成预处理操作且未完成写重做日志操作的多个更新操作为同一个预设周期内请求的所有更新操作时,确定满足预设条件。即相当于后续是将同一个预设周期内请求的所有更新操作的多个重做日志,一次性写入持久化设备,详见后续描述。
步骤205、基于缓存的满足上述预设条件的该多个更新操作各自对应的更新后记录数据,将该多个更新操作各自针对该记录的重做日志,共计多个重做日志,一次性写入持久化设备,即完成对该多个更新操作的写重做日志操作。
每个更新操作针对该记录的重做日志,可以根据实际需要采用现有技术中的各种方式确定,在此不再进行详细描述。
步骤206、确定写重做日志是否成功,如果成功,进入步骤207,如果失败,进入步骤209。
步骤207、使用缓存的该多个更新操作各自对应的更新后记录数据,更新数据库中该记录的记录数据。
本步骤具体可以包括如下两种方式:
第一种方式:按照该多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中该记录的记录数据。
采用上述第一种方式,相当于依次执行了每个更新操作的提交操作,使得在本步骤中执行一次对数据库中该记录的记录数据的更新后,该记录的更新后记录数据即可以对外可查询到,以便后续能够及时的对外发布每次更新的更新结果。
第二种方式:使用缓存的该多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中该记录的记录数据。
采用上述第二种方式,直接将数据库中该记录的记录数据,更新为最后请求的更新操作对应的更新后记录数据,从而减少了对数据库中该记录的更新次数,也就减少了处理资源的消耗,并且提高了处理效率。
本步骤中,在完成上述对数据库中该记录的记录数据的更新后,即可以将更新结果进行发布,以便需要的用户可以及时获知更新结果。
在发布时,可以将各待发布事务暂时保存在待发布链表中,并从待发布链表中按照先后顺序,依次获取待发布事务进行发布。
步骤208、进一步的,当更新操作请求来自客户端时,分别向发送该多个更新操作对应的更新操作请求的客户端,返回更新成功响应。
步骤209、取消使用缓存的该多个更新操作各自对应的更新后记录数据,更新数据库中该记录的记录数据。
并且,当更新操作请求来自客户端时,分别向发送该多个更新操作对应的更新操作请求的客户端,返回更新失败响应。
采用本申请实施例1提供的上述记录数据更新方法,实现了针对同一记录的多个更新操作的多个重做日志的一次性写入持久化设备,相比将多个重做日志分别多次写入持久化设备,减少了写重做日志的时长,从而提高了针对并发记录数据更新的处理效率。
并且,当针对同一个记录的记录数据的预处理操作都是通过一个进程或线程来完成时,减少了数据库的进程或线程等待被使用的时长,从而减少了对数据进程或线程资源的浪费。
实施例2:
基于同一发明构思,根据本申请实施例1提供的记录数据更新方法,相应地,本申请实施例2还提供了一种记录数据更新装置,其结构示意图如图3所示,具体包括:
缓存处理单元301,用于依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据;
写重做日志单元302,用于基于缓存的所述多个更新操作各自对应的更新后记录数据,将所述多个更新操作各自针对所述记录的重做日志,一次性写入持久化设备;
更新处理单元303,用于当写重做日志成功时,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据。
进一步的,缓存处理单元301,具体用于确定所述记录对应的专用进程或专用线程;并通过所述专用进程或专用线程,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据。
进一步的,缓存处理单元301,还用于在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之前,对所述记录的记录数据进行加锁处理;并在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之后,对所述记录的记录数据进行解锁处理。
进一步的,写重做日志单元302,还用于当写重做日志失败时,取消针对所述多个更新操作对数据库中所述记录的记录数据的更新。
进一步的,更新处理单元303,具体用于按照所述多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据;或者使用缓存的所述多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
上述各单元的功能可对应于图1和图2所示流程中的相应处理步骤,在此不再赘述。
综上所述,本申请实施例提供的方案,包括:依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中该记录的记录数据将要被更新为的更新后记录数据;并基于缓存的该多个更新操作各自对应的更新后记录数据,将该多个更新操作各自针对该记录的重做日志,一次性写入持久化设备;以及当写重做日志成功时,使用缓存的该多个更新操作各自对应的更新后记录数据,更新数据库中该记录的记录数据。采用本申请实施例提供的方案,提高了针对并发记录数据更新的处理效率。
本申请的实施例所提供的更新装置可通过计算机程序实现。本领域技术人员应该能够理解,上述的模块划分方式仅是众多模块划分方式中的一种,如果划分为其他模块或不划分模块,只要更新装置具有上述功能,都应该在本申请的保护范围之内。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,所述计算机设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非持续性的电脑可读媒体(transitory media),如调制的数据信号和载波。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (11)

1.一种记录数据更新方法,其特征在于,包括:
依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据;所述更新操作请求更新的所述记录是热点记录,所述热点记录为一段时间内进行多次更新的记录;
基于缓存的所述多个更新操作各自对应的更新后记录数据,将所述多个更新操作各自针对所述记录的重做日志,一次性写入持久化设备;
当写重做日志成功时,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据。
2.如权利要求1所述的方法,其特征在于,所述多个更新操作为一个预设周期内请求的更新操作;或者
所述多个更新操作为连续的预设数量的更新操作。
3.如权利要求1所述的方法,其特征在于,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据,具体包括:
确定所述记录对应的专用进程或专用线程;
通过所述专用进程或专用线程,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据。
4.如权利要求1所述的方法,其特征在于,在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之前,还包括:
对所述记录的记录数据进行加锁处理;
在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之后,还包括:
对所述记录的记录数据进行解锁处理。
5.如权利要求1所述的方法,其特征在于,还包括:
当写重做日志失败时,取消针对所述多个更新操作对数据库中所述记录的记录数据的更新。
6.如权利要求1-5任一所述的方法,其特征在于,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据,具体包括:
按照所述多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据;或者
使用缓存的所述多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
7.一种记录数据更新装置,其特征在于,包括:
缓存处理单元,用于依次针对请求更新同一记录的多个更新操作中的每个更新操作,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据;
写重做日志单元,用于基于缓存的所述多个更新操作各自对应的更新后记录数据,将所述多个更新操作各自针对所述记录的重做日志,一次性写入持久化设备;所述更新操作请求更新的所述记录是热点记录,所述热点记录为一段时间内进行多次更新的记录;
更新处理单元,用于当写重做日志成功时,使用缓存的所述多个更新操作各自对应的更新后记录数据,更新数据库中所述记录的记录数据。
8.如权利要求7所述的装置,其特征在于,所述缓存处理单元,具体用于确定所述记录对应的专用进程或专用线程;
通过所述专用进程或专用线程,缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据。
9.如权利要求7所述的装置,其特征在于,所述缓存处理单元,还用于在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之前,对所述记录的记录数据进行加锁处理;并在缓存在该更新操作中所述记录的记录数据将要被更新为的更新后记录数据之后,对所述记录的记录数据进行解锁处理。
10.如权利要求7所述的装置,其特征在于,所述写重做日志单元,还用于当写重做日志失败时,取消针对所述多个更新操作对数据库中所述记录的记录数据的更新。
11.如权利要求7-10任一所述的装置,其特征在于,所述更新处理单元,具体用于按照所述多个更新操作被请求的先后顺序,依次针对每个更新操作,使用缓存的该更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据;或者使用缓存的所述多个更新操作中最后请求的更新操作对应的更新后记录数据,更新数据库中所述记录的记录数据。
CN201310432480.4A 2013-09-22 2013-09-22 一种记录数据更新方法及装置 Active CN104462127B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201310432480.4A CN104462127B (zh) 2013-09-22 2013-09-22 一种记录数据更新方法及装置
HK15105327.6A HK1204815A1 (zh) 2013-09-22 2015-06-04 種記錄數據更新方法及裝置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310432480.4A CN104462127B (zh) 2013-09-22 2013-09-22 一种记录数据更新方法及装置

Publications (2)

Publication Number Publication Date
CN104462127A CN104462127A (zh) 2015-03-25
CN104462127B true CN104462127B (zh) 2018-07-20

Family

ID=52908184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310432480.4A Active CN104462127B (zh) 2013-09-22 2013-09-22 一种记录数据更新方法及装置

Country Status (2)

Country Link
CN (1) CN104462127B (zh)
HK (1) HK1204815A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106484691B (zh) * 2015-08-24 2019-12-10 阿里巴巴集团控股有限公司 移动终端的数据存储方法和装置
CN106855821A (zh) * 2015-12-08 2017-06-16 阿里巴巴集团控股有限公司 一种分布式事务处理方法及装置
CN107239474B (zh) * 2016-03-29 2021-05-04 创新先进技术有限公司 一种数据记录方法及装置
CN107291777A (zh) * 2016-04-11 2017-10-24 阿里巴巴集团控股有限公司 一种热点数据识别和处理的方法和装置
CN106897338A (zh) * 2016-07-04 2017-06-27 阿里巴巴集团控股有限公司 一种针对数据库的数据修改请求处理方法及装置
TWI709041B (zh) * 2017-01-19 2020-11-01 開曼群島商創新先進技術有限公司 移動終端的資料儲存方法和裝置
CN107818170B (zh) * 2017-11-14 2021-09-28 北京思特奇信息技术股份有限公司 一种访问数据库记录的方法和系统
CN108763239A (zh) * 2018-03-22 2018-11-06 厦门欣旅通科技有限公司 一种网络访问次数计算方法及装置
CN112711436B (zh) * 2019-10-25 2023-09-26 北京奇艺世纪科技有限公司 消息处理方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1289966A (zh) * 1999-09-29 2001-04-04 株式会社东芝 通过事务对多个文件实现原子更新的事务文件系统
CN103136308A (zh) * 2011-11-23 2013-06-05 英业达股份有限公司 应用系统数据库更新的方法和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5352421B2 (ja) * 2009-10-30 2013-11-27 株式会社エヌ・ティ・ティ・データ データアクセス装置、データアクセス方法およびデータアクセスプログラム
CN102043859A (zh) * 2010-12-27 2011-05-04 用友软件股份有限公司 数据更新方法及装置
CN102750317B (zh) * 2012-05-02 2015-01-21 华为技术有限公司 数据持久化处理方法、装置及数据库系统
CN103268351B (zh) * 2013-05-31 2017-05-03 网易(杭州)网络有限公司 一种数据同步方法和设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1289966A (zh) * 1999-09-29 2001-04-04 株式会社东芝 通过事务对多个文件实现原子更新的事务文件系统
CN103136308A (zh) * 2011-11-23 2013-06-05 英业达股份有限公司 应用系统数据库更新的方法和系统

Also Published As

Publication number Publication date
HK1204815A1 (zh) 2015-12-04
CN104462127A (zh) 2015-03-25

Similar Documents

Publication Publication Date Title
CN104462127B (zh) 一种记录数据更新方法及装置
JP6411698B2 (ja) アプリケーションの展開のためのカスタム通信チャネル
JP6799652B2 (ja) 情報を処理するための方法及び装置
CN107113341B (zh) 用于数据划分的分布式关系数据库管理系统中事务的高吞吐量处理的系统
CN114327861B (zh) 执行eda任务的方法、装置、系统和存储介质
CN104199912B (zh) 一种任务处理的方法及装置
CN110806933A (zh) 一种批量任务处理方法、装置、设备和存储介质
CN109993528B (zh) 一种用于管理委托任务的方法与设备
CN112256406B (zh) 作业流程平台化调度方法
CN104407820A (zh) 基于固态硬盘存储系统的数据处理方法、装置以及系统
US8626799B2 (en) Mapping data structures
CN111049904A (zh) 多公有云资源监控的方法与设备
CN109977102A (zh) 数据处理方法、装置、介质及电子设备
CN111651286A (zh) 数据通信方法、装置及计算设备、存储介质
CN111294377B (zh) 一种依赖关系的网络请求发送方法、终端装置及存储介质
CA2852597C (en) Method and system for input driven process flow management
US20140344785A1 (en) Automatic generation of a resource reconfiguring test
WO2019111188A1 (en) Job management in data processing system
CN106341440A (zh) 一种数据更新方法和装置
CN105242915B (zh) 一种数据操作的处理方法及装置
CN114491662B (zh) 一种基于区块链的数据资产审计方法、系统及设备
CN111399818B (zh) 推荐引擎设计方法、装置、服务器及存储介质
US20220188153A1 (en) System and method of executing task of operating system for vehicle
CN115858667A (zh) 用于同步数据的方法、装置、设备和存储介质
CN112540858B (zh) 任务处理方法、服务器、客户端及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1204815

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20191209

Address after: P.O. Box 31119, grand exhibition hall, hibiscus street, 802 West Bay Road, Grand Cayman, Cayman Islands

Patentee after: Innovative advanced technology Co., Ltd

Address before: Cayman Islands Grand Cayman capital building, a four storey No. 847 mailbox

Patentee before: Alibaba Group Holding Co., Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210219

Address after: 801-10, Section B, 8th floor, 556 Xixi Road, Xihu District, Hangzhou City, Zhejiang Province 310000

Patentee after: Ant financial (Hangzhou) Network Technology Co.,Ltd.

Address before: Ky1-1205 P.O. Box 31119, hibiscus street, 802 Sai Wan Road, Grand Cayman Islands, ky1-1205

Patentee before: Innovative advanced technology Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210913

Address after: 100020 unit 02, 901, floor 9, unit 1, building 1, No.1, East Third Ring Middle Road, Chaoyang District, Beijing

Patentee after: Beijing Aoxing Beisi Technology Co., Ltd

Address before: 801-10, Section B, 8th floor, 556 Xixi Road, Xihu District, Hangzhou City, Zhejiang Province 310000

Patentee before: Ant financial (Hangzhou) Network Technology Co.,Ltd.

TR01 Transfer of patent right