CN113760991A - 数据操作方法、装置、电子设备和计算机可读介质 - Google Patents

数据操作方法、装置、电子设备和计算机可读介质 Download PDF

Info

Publication number
CN113760991A
CN113760991A CN202110320370.3A CN202110320370A CN113760991A CN 113760991 A CN113760991 A CN 113760991A CN 202110320370 A CN202110320370 A CN 202110320370A CN 113760991 A CN113760991 A CN 113760991A
Authority
CN
China
Prior art keywords
operation request
request queue
current data
queue
data operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110320370.3A
Other languages
English (en)
Inventor
王晨鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Tuoxian Technology Co Ltd
Original Assignee
Beijing Jingdong Tuoxian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Tuoxian Technology Co Ltd filed Critical Beijing Jingdong Tuoxian Technology Co Ltd
Priority to CN202110320370.3A priority Critical patent/CN113760991A/zh
Publication of CN113760991A publication Critical patent/CN113760991A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24552Database cache management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • G06F16/24578Query processing with adaptation to user needs using ranking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开的实施例公开了数据操作方法、装置、电子设备和计算机可读介质。该方法的一具体实施方式包括:基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息;基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列;将当前数据操作请求加入操作请求队列,得到更新操作请求队列;响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。该实施方式实现了通过任务优先级信息来控制数据操作,可以避免无序抢占资源。

Description

数据操作方法、装置、电子设备和计算机可读介质
技术领域
本公开的实施例涉及计算机技术领域,具体涉及数据操作方法、装置、电子设备和计算机可读介质。
背景技术
在很多业务场景,常常需要定时的执行一些任务,例如定时发短信、定时变更数据、定时发起促销活动等等。这些任务可以称之为定时任务。定时任务与业务系统往往需要共用数据库。
然而,定时任务和业务系统共用数据库时,经常会存在如下技术问题:
大量的定时任务会影响会对数据库的性能造成很大的压力,进而影响业务服务器对数据库进行读写,影响业务服务器的性能。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了数据操作方法、装置、电子设备和计算机可读介质,来解决以上背景技术部分提到的技术问题中的一项或多项。
第一方面,本公开的一些实施例提供了一种数据操作方法,该方法包括:基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息;基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列;将当前数据操作请求加入操作请求队列,得到更新操作请求队列;响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。
第二方面,本公开的一些实施例提供了一种数据操作装置,装置包括:配置信息获取单元,被配置成基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息;队列获取单元,被配置成基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列;更新单元,被配置成将当前数据操作请求加入操作请求队列,得到更新操作请求队列;第一执行单元,被配置成响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。
本公开的上述各个实施例具有如下有益效果:通过任务优先级信息来执行数据操作,可以避免无序抢占资源。对于定时任务和业务系统,可以为其设置合理的优先级,从而避免定时任务影响业务服务器的性能。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。
图1是本公开的一些实施例可以应用于其中的示例性系统的架构图;
图2是根据本公开的数据操作方法的一些实施例的流程图;
图3是根据本公开的数据操作方法的另一些实施例的流程图;
图4是根据本公开的数据操作装置的一些实施例的结构示意图;
图5是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的一些实施例的数据操作方法或数据操作装置的示例性系统架构100。
如图1所示,系统架构100可以包括业务服务器101、定时任务服务器102、数据库服务器103和缓存服务器104。这些服务器之间以网络作为通信介质。网络可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
根据业务场景的不同,业务服务器101可以执行不同的任务。例如,在电商的应用场景下,可以为终端显示各种商品提供后台支持。当用户查看某个商品的信息时,业务服务器101可以从数据库服务器103查询相应的数据,并返回终端以供用户查看。
定时任务服务器102可以是用于执行定时任务的服务器。例如,在电商的应用场景下,定时任务服务器102可以定期执行统计商品的销售量、收藏量等等任务。在执行这些定时任务时,需要访问数据库服务器103,来获取相关的数据。
缓存服务器104可以用于存储相关的配置信息,包括但不限于:数据库对应的请求数目阈值、数据库对应的任务优先级信息等等。
需要说明的是,本公开的实施例所提供的数据操作方法可以由业务服务器101执行,也可以由定时任务服务器102执行。相应地,用于推送信息的装置可以设置业务服务器101中,也可以设置于定时任务服务器102中。在此不做具体限定。
业务服务器101、定时任务服务器102、数据库服务器103和缓存服务器104可以是硬件,也可以是软件。当其为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当上述其为软件时,可以实现成例如用来提供分布式服务的多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1中的服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的服务器。
继续参考图2,示出了根据本公开的数据操作方法的一些实施例的流程200。该数据操作方法,包括以下步骤:
步骤201,基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息。
在一些实施例中,数据操作方法的执行主体(例如图1所示的业务服务器或任务服务器)可以基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置此次拟。其中,操作类型可以是读或写。根据操作类型是读或写,请求数目阈值也可以包括读请求数目阈值或写请求数目阈值。任务优先级信息可以包括读请求任务优先级信息或写请求任务优先级信息。
在此基础上,上述执行主体可以向缓存服务器的发送配置信息获取请求,以获取配置信息。配置信息获取请求中可以包括操作类型、需要访问的数据库的标识。然后,缓存服务器可以根据操作类型和需要访问的数据库的标识,查找该操作类型下、需要访问的数据库对应的请求数目阈值和任务优先级信息。其中,目标数据库可以是需要访问的数据库的标识所表征的数据库。由于缓存服务器中可以存储有多台数据库的配置信息,因此,可以通过需要访问的数据库的标识定位目标数据库。
在一些实施例中,任务优先级信息可以表征数据操作请求对应的任务的优先级。实践中,根据需要,可以为不同的任务设定不同的优先级。举例来说,定时任务可以包括订单超时取消任务、商品销量统计任务。此外,业务系统也可以包括多种任务,例如结算任务、商品信息获取任务等等。也就说,不同的数据操作请求对应不同的任务,而不同的任务对应不同的任务优先级。可以理解,在大量的数据操作请求中,一些数据操作请求可以对应相同的任务,也可以对应不同的任务。而不同任务对应的任务优先级也可以相同,也可以不同。
举例来说,由于大量的用户进行商品浏览购买等操作,在一段时间内,两个用户终端都提交了结算请求,那么,这两个结算请求对应同一个任务,即,结算任务。因此,这两个结算请求对应的任务优先级信息是相同的。当某个数据请求需要访数据库A时,可以将这个数据请求对应的任务的任务优先级信息(假设为X)注册至数据库A,此时,可以认为数据库A对应有任务优先级信息X。
步骤202,基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列。
在一些实施例中,上述执行主体还可以基于操作类型,从缓存服务器中获取目标数据库对应的操作请求队列。
实践中,根据需要,缓存服务器中存储有每台数据库对应的操作请求队列。而根据操作类型的不同,操作请求队列又可以包括读请求队列和写请求队列。因此,上述执行主体可以将包括操作类型和需要访问的数据库的标识的队列获取请求发送至缓存服务器,以得到对应的操作请求队列。
步骤203,将当前数据操作请求加入操作请求队列,得到更新操作请求队列。
在一些实施例中,上述执行主体可以将当前操作请求加入操作请求队列,得到更新操作请求队列。作为示例,可以生成当前数据操作请求对应的标识(ID),然后,将该标识加入操作请求队列,得到更新操作请求队列。可选的,还可以将更新操作请求队列同步至缓存服务器。
步骤204,响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。
在一些实施例中,可以确定更新操作请求队列是否满足执行条件。
作为示例,执行条件可以是:任务优先级大于预设值(如5)且目标时间段内执行的请求数目小于或等于请求数目阈值。若满足执行条件,可以执行当前数据操作请求对应的操作,例如,查询数据库中的数据等。
本公开的一些实施例提供的方法,通过任务优先级信息来控制数据操作,可以避免无序抢占资源。对于定时任务和业务系统,可以为其设置合理的优先级,从而避免定时任务影响业务服务器的性能。
进一步参考图3,其示出了数据操作方法的另一些实施例的流程300。该数据操作方法的流程300,包括以下步骤:
步骤301,基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息。
步骤302,基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列。
在一些实施例中,步骤310-302的具体实现及其所带来的技术效果,可以参考图2对应的那些实施例,在此不再赘述。
步骤303,确定操作请求队列是否为空。
步骤304,响应于操作请求队列为空,增加目标数据库对应的操作请求数目,得到更新操作请求数目。
在一些实施例中,作为示例,可以在原来的操作请求数目上加一,得到更新操作请求数据。操作请求数目可以表示一段时间内已经执行的操作的数目。
步骤305,响应于确定更新操作请求数目小于或等于请求数目阈值,执行当前数据操作请求对应的操作。
在一些实施例,由于操作请求队列为空,说明不需要排队等待,可以直接进行操作,例如访问数据库等。
步骤306,响应于操作请求队列不为空,将当前数据操作请求加入操作请求队列,得到更新操作请求队列。
在一些实施例中,操作请求队列不为空,则需要将当前数据操作请求加入操作请求队列,得到更新操作请求队列。
步骤307,确定任务优先级信息包含的各个任务优先级对应的优先级数值的总和。
在一些实施例中,可以为不同的任务优先级设定不同的优先级数值。例如高优先级的优先级数值为10,次之为5,最低为2。在此基础上,如果任务优先级信息包含3个优先级数值,分别为10、5、2,那么,其总和为12。
步骤308,确定每个任务优先级对应的优先级数值在总和中的占比。
在一些实施例中,以优先级数值2为例,2在12中的占比约为12%。类似的,可以确定每个优先级数值在总和中的占比。
步骤309,确定当前数据操作请求在更新操作请求队列中的排序位置是否符合占比。
在一些实施例中,上述执行主体可以确定当前数据操作请求在更新操作请求队列中的排序位置是否符合上述占比。举例来说,继续以优先级数值2为例,假设目标数据库对应的请求数目阈值为1000。优先级数值2的占比为12%,因此,也就是说,队列中排在前面的120个请求可以执行对应的操作。而排在120之后的请求则目前不能执行操作。若当前数据请求排在120之前,可以认为符合占比。
步骤310,响应于符合占比,执行当前数据操作请求对应的操作。
在步骤301的基础上,若符合占比,可以执行当前数据操作请求对应的操作,例如访问数据库。此外,可选的,可以将其对应的标识从更新操作请求队列中删除。
步骤311,响应于不符合占比,基于等待时长进入等待状态。
在一些实施例中,配置信息中还包括等待时长。在此基础上,若不符合占比,例如,排在120之后,可以进入等待。
可选的,对于进入等待的数据操作请求,等待时长结束后,可以重新执行上述步骤,直至符合执行条件。
从图3中可以看出,与图2对应的一些实施例的描述相比,图3对应的一些实施例中的数据操作方法的流程300通过不同优先级数值的占比来控制是否执行请求,从而保证不超过数据库最大负荷的情况下,根据任务优先级来执行请求。
进一步参考图4,作为对上述各图所示方法的实现,本公开提供了一种数据操作装置的一些实施例,这些装置实施例与图2所示的那些方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图4所示,一些实施例的数据操作装置400,包括:配置信息获取单元401、队列获取单元402、更新单元403和第一执行单元404。其中,配置信息获取单元401被配置成基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息。队列获取单元402被配置成基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列。更新单元403被配置成将当前数据操作请求加入操作请求队列,得到更新操作请求队列。第一执行单元404被配置成响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。
在一些实施例的可选实现方式中,装置400还包括:确定单元、执行单元和增加单元。其中,第一确定单元被配置成确定操作请求队列是否为空。增加单元,被配置成响应于操作请求队列为空,增加目标数据库对应的操作请求数目,得到更新操作请求数目。第一执行单元,被配置响应于确定更新操作请求数目小于或等于请求数目阈值,执行当前数据操作请求对应的操作。
在一些实施例的可选实现方式中,更新单元403进一步被配置成:响应于操作请求队列不为空,将当前数据操作请求加入操作请求队列,得到更新操作请求队列。
在一些实施例的可选实现方式中,第一执行单元404进一步被配置成:确定任务优先级信息包含的各个任务优先级对应的优先级数值的总和;确定每个任务优先级对应的优先级数值在总和中的占比;确定当前数据操作请求在更新操作请求队列中的排序位置是否符合占比;响应于符合占比,执行当前数据操作请求对应的操作。
在一些实施例的可选实现方式中,配置信息中还包括等待时长;以及装置400包括等待单元。其中,等待单元进一步被配置成响应于不符合占比,基于等待时长进入等待状态。
可以理解的是,该装置400中记载的诸单元与参考图2描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置400及其中包含的单元,在此不再赘述。
下面参考图5,其示出了适于用来实现本公开的一些实施例的电子设备(例如图1中的服务器)500的结构示意图。图5示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图5所示,电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中,还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常,以下装置可以连接至I/O接口505:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507;包括例如磁带、硬盘等的存储装置508;以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图5中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置509从网络上被下载和安装,或者从存储装置508被安装,或者从ROM 502被安装。在该计算机程序被处理装置501执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,配置信息包括目标数据库对应的请求数目阈值和目标数据库对应的任务优先级信息;基于操作类型,从缓存服务器中获取在目标数据库对应的操作请求队列;将当前数据操作请求加入操作请求队列,得到更新操作请求队列;响应于更新操作请求队列满足执行条件,执行当前数据操作请求对应的操作,其中,执行条件与请求数目阈值和任务优先级信息相关。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括配置信息获取单元、队列获取单元、更新单元和第一执行单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,配置信息获取单元还可以被描述为“从缓存服务器中获取配置信息单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种数据操作方法,包括:
基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,所述配置信息包括目标数据库对应的请求数目阈值和所述目标数据库对应的任务优先级信息;
基于所述操作类型,从所述缓存服务器中获取在所述目标数据库对应的操作请求队列;
将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列;
响应于所述更新操作请求队列满足执行条件,执行所述当前数据操作请求对应的操作,其中,所述执行条件与所述请求数目阈值和所述任务优先级信息相关。
2.根据权利要求1所述的方法,其中,在所述将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列之前,所述方法还包括:
确定所述操作请求队列是否为空;
响应于所述操作请求队列为空,增加所述目标数据库对应的操作请求数目,得到更新操作请求数目;
响应于确定所述更新操作请求数目小于或等于所述请求数目阈值,执行所述当前数据操作请求对应的操作。
3.根据权利要求2所述的方法,其中,所述将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列,包括:
响应于所述操作请求队列不为空,将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列。
4.根据权利要求3所述的方法,其中,所述响应于所述更新操作请求队列满足执行条件,执行所述当前数据操作请求对应的操作,包括:
确定所述任务优先级信息包含的各个任务优先级对应的优先级数值的总和;
确定每个任务优先级对应的优先级数值在所述总和中的占比;
确定所述当前数据操作请求在所述更新操作请求队列中的排序位置是否符合所述占比;
响应于符合所述占比,执行所述当前数据操作请求对应的操作。
5.根据权利要求4所述的方法,其中,所述配置信息中还包括等待时长;以及
所述方法还包括:
响应于不符合所述占比,基于所述等待时长进入等待状态。
6.一种数据操作装置,包括:
配置信息获取单元,被配置成基于当前数据操作请求对应的操作类型,从缓存服务器中获取配置信息,所述配置信息包括目标数据库对应的请求数目阈值和所述目标数据库对应的任务优先级信息;
队列获取单元,被配置成基于所述操作类型,从所述缓存服务器中获取在所述目标数据库对应的操作请求队列;
更新单元,被配置成将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列;
第一执行单元,被配置成响应于所述更新操作请求队列满足执行条件,执行所述当前数据操作请求对应的操作,其中,所述执行条件与所述请求数目阈值和所述任务优先级信息相关。
7.根据权利要求1所述的装置,其中,所述装置还包括:
确定单元,被配置成确定所述操作请求队列是否为空;
增加单元,被配置成响应于所述操作请求队列为空,增加所述目标数据库对应的操作请求数目,得到更新操作请求数目;
第二执行单元,被配置响应于确定所述更新操作请求数目小于或等于所述请求数目阈值,执行所述当前数据操作请求对应的操作。
8.根据权利要求2所述的装置,其中,所述更新单元进一步被配置成:
响应于所述操作请求队列不为空,将所述当前数据操作请求加入所述操作请求队列,得到更新操作请求队列。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-5中任一所述的方法。
CN202110320370.3A 2021-03-25 2021-03-25 数据操作方法、装置、电子设备和计算机可读介质 Pending CN113760991A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110320370.3A CN113760991A (zh) 2021-03-25 2021-03-25 数据操作方法、装置、电子设备和计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110320370.3A CN113760991A (zh) 2021-03-25 2021-03-25 数据操作方法、装置、电子设备和计算机可读介质

Publications (1)

Publication Number Publication Date
CN113760991A true CN113760991A (zh) 2021-12-07

Family

ID=78786766

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110320370.3A Pending CN113760991A (zh) 2021-03-25 2021-03-25 数据操作方法、装置、电子设备和计算机可读介质

Country Status (1)

Country Link
CN (1) CN113760991A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114968890A (zh) * 2022-05-27 2022-08-30 中国第一汽车股份有限公司 一种同步通信控制方法、装置、系统及存储介质
CN116795518A (zh) * 2023-08-25 2023-09-22 北京飞轮数据科技有限公司 扫描算子执行方法、装置、电子设备和计算机可读介质
CN117193670A (zh) * 2023-11-06 2023-12-08 之江实验室 一种清除缓存的方法、装置、存储介质以及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070255897A1 (en) * 2006-04-26 2007-11-01 Mcnutt Bruce Apparatus, system, and method for facilitating physical disk request scheduling
CN104202261A (zh) * 2014-08-27 2014-12-10 华为技术有限公司 一种业务请求处理方法及装置
CN105117284A (zh) * 2015-09-09 2015-12-02 厦门雅迅网络股份有限公司 一种基于优先级比例队列的工作线程的调度方法
CN105468305A (zh) * 2015-12-09 2016-04-06 浪潮(北京)电子信息产业有限公司 一种数据缓存方法、装置和系统
CN107332902A (zh) * 2017-06-29 2017-11-07 北京鸿联九五信息产业有限公司 在线客服系统的用户请求分配方法、装置和计算设备
US20190317909A1 (en) * 2018-04-16 2019-10-17 International Business Machines Corporation Adding dummy requests to a submission queue to manage processing queued requests according to priorities of the queued requests
CN110688208A (zh) * 2019-09-09 2020-01-14 平安普惠企业管理有限公司 线性递增的任务处理方法、装置、计算机设备和存储介质
CN111400010A (zh) * 2020-03-18 2020-07-10 中国建设银行股份有限公司 任务调度方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070255897A1 (en) * 2006-04-26 2007-11-01 Mcnutt Bruce Apparatus, system, and method for facilitating physical disk request scheduling
CN104202261A (zh) * 2014-08-27 2014-12-10 华为技术有限公司 一种业务请求处理方法及装置
CN105117284A (zh) * 2015-09-09 2015-12-02 厦门雅迅网络股份有限公司 一种基于优先级比例队列的工作线程的调度方法
CN105468305A (zh) * 2015-12-09 2016-04-06 浪潮(北京)电子信息产业有限公司 一种数据缓存方法、装置和系统
CN107332902A (zh) * 2017-06-29 2017-11-07 北京鸿联九五信息产业有限公司 在线客服系统的用户请求分配方法、装置和计算设备
US20190317909A1 (en) * 2018-04-16 2019-10-17 International Business Machines Corporation Adding dummy requests to a submission queue to manage processing queued requests according to priorities of the queued requests
CN110688208A (zh) * 2019-09-09 2020-01-14 平安普惠企业管理有限公司 线性递增的任务处理方法、装置、计算机设备和存储介质
CN111400010A (zh) * 2020-03-18 2020-07-10 中国建设银行股份有限公司 任务调度方法及装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114968890A (zh) * 2022-05-27 2022-08-30 中国第一汽车股份有限公司 一种同步通信控制方法、装置、系统及存储介质
CN116795518A (zh) * 2023-08-25 2023-09-22 北京飞轮数据科技有限公司 扫描算子执行方法、装置、电子设备和计算机可读介质
CN116795518B (zh) * 2023-08-25 2023-10-27 北京飞轮数据科技有限公司 扫描算子执行方法、装置、电子设备和计算机可读介质
CN117193670A (zh) * 2023-11-06 2023-12-08 之江实验室 一种清除缓存的方法、装置、存储介质以及电子设备
CN117193670B (zh) * 2023-11-06 2024-01-30 之江实验室 一种清除缓存的方法、装置、存储介质以及电子设备

Similar Documents

Publication Publication Date Title
CN113760991A (zh) 数据操作方法、装置、电子设备和计算机可读介质
CN110781373B (zh) 榜单更新方法、装置、可读介质和电子设备
CN107547548A (zh) 数据处理方法及系统
CN111240834A (zh) 任务执行方法、装置、电子设备和存储介质
CN110650209A (zh) 实现负载均衡的方法和装置
CN113722056A (zh) 任务调度方法、装置、电子设备和计算机可读介质
CN115357350A (zh) 任务配置方法、装置、电子设备和计算机可读介质
CN113419841A (zh) 消息调度方法、装置、电子设备和计算机可读介质
CN110489219B (zh) 一种调度功能对象的方法、装置、介质和电子设备
CN111881216A (zh) 一种基于共享模板的数据获取方法和装置
CN113760178A (zh) 缓存数据处理方法、装置、电子设备和计算机可读介质
CN113760929A (zh) 数据同步方法、装置、电子设备和计算机可读介质
CN112698920A (zh) 容器任务调度方法、装置、电子设备和计算机可读介质
CN113778850A (zh) 数据处理方法、装置、电子设备和计算机可读介质
CN112115154A (zh) 数据处理和数据查询方法、装置、设备和计算机可读介质
CN113760927A (zh) 数据处理方法、装置、电子设备和计算机可读介质
CN112685075A (zh) 灰度发布方法、装置、电子设备和计算机可读介质
CN112507676A (zh) 能源报表生成方法、装置、电子设备和计算机可读介质
CN112100205A (zh) 数据处理方法、装置、设备和计算机可读介质
CN111694670A (zh) 资源分配方法、装置、设备和计算机可读介质
CN111787043A (zh) 数据请求方法和装置
CN113505297B (zh) 数据查询方法、装置、电子设备和计算机可读介质
CN111625692B (zh) 特征抽取方法、装置、电子设备和计算机可读介质
CN113342837B (zh) 数据发送方法、装置、电子设备和计算机可读介质
CN112637048B (zh) 信息发送方法、装置、电子设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination