CN114741206A - 客户端数据回放处理方法、装置、设备及存储介质 - Google Patents

客户端数据回放处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN114741206A
CN114741206A CN202210647870.2A CN202210647870A CN114741206A CN 114741206 A CN114741206 A CN 114741206A CN 202210647870 A CN202210647870 A CN 202210647870A CN 114741206 A CN114741206 A CN 114741206A
Authority
CN
China
Prior art keywords
data
analysis
playback
queue
thread
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210647870.2A
Other languages
English (en)
Other versions
CN114741206B (zh
Inventor
李秋军
刘振民
贺锟
李黄龙
阳小鲜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Huarui Distributed Technology Co ltd
Original Assignee
Shenzhen Huarui Distributed Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Huarui Distributed Technology Co ltd filed Critical Shenzhen Huarui Distributed Technology Co ltd
Priority to CN202210647870.2A priority Critical patent/CN114741206B/zh
Publication of CN114741206A publication Critical patent/CN114741206A/zh
Application granted granted Critical
Publication of CN114741206B publication Critical patent/CN114741206B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了客户端数据回放处理方法、装置、设备及存储介质,方法包括:根据配置信息配置对应的数据解析线程及解析队列,获取数据解析线程及解析队列的监测数据并存储至预置的数据池中,根据数据池中的监测数据确定一组目标解析资源,上传回放请求至管理服务器,在目标解析资源中添加解析标签,解析标签为回放请求中的任务标识,将回放数据存储至预置的总队列中,依次获取总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。本发明属于数据分析技术领域,可根据配置信息配置目标解析资源并添加解析标签,根据实际数据回放量的需要配置解析资源,避免解析资源浪费,大幅提升解析资源利用的有效性。

Description

客户端数据回放处理方法、装置、设备及存储介质
技术领域
本发明涉及数据分析技术领域,尤其涉及一种客户端数据回放处理方法、装置、设备及存储介质。
背景技术
客户在证券市场中进行股票交易前,通常需要对股票的交易历史记录进行回顾,基于股市中过往的行情数据,按照设定的股票组合进行股票选择,模拟金融市场交易规则进行买入与卖出,得出某时段内的股票盈利率或回撤率等数据信息。然而金融产品中所包括的行情数据数量大且类型多,现有的应用行情数据回放方法的系统在解析回放行情数据时设定了回放数据解析资源数量的上限,从而限制了数据回放量,且在回放数据的过程中解析资源与实际待解析的回放数据无法准确匹配,使解析资源利用率低,造成解析资源的浪费。并且使用大量的解析资源对数据回放系统的硬件条件要求较高,普通的数据回放设备难以进行适用,影响客户端对行情数据的回放解析效率;并且因数据回放卡顿导致回放效果差,影响了客户对数据回放系统的使用体验。因此,现有技术中客户端数据回放处理方法存在数据解析资源利用率较低的问题。
发明内容
本发明实施例提供了一种客户端数据回放处理方法、装置、设备及存储介质,旨在解决现有技术中客户端数据回放处理时数据解析资源利用率较低的问题。
第一方面,本发明实施例提供了一种客户端数据回放处理方法,该方法应用于客户端中,所述客户端与管理服务器之间建立网络连接以实现数据信息的传输,方法包括:
根据配置信息配置对应的数据解析线程及解析队列;所述配置信息包括数据解析线程数及解析队列数;
获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中;
根据所述数据池中的监测数据确定一组目标解析资源;所述目标解析资源包含一个所述数据解析线程及一个所述解析队列;
上传回放请求至所述管理服务器;
在所述目标解析资源中添加解析标签,所述解析标签为所述回放请求中的任务标识;
若接收到所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中;
依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
第二方面,本发明实施例提供了一种客户端数据回放处理装置,所述装置配置于客户端中,所述客户端与管理服务器之间建立网络连接以实现数据信息的传输,装置包括:
配置信息生成单元,用于生成配置信息并根据配置信息配置对应的数据解析线程及解析队列;
监测数据获取单元,用于获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中;
目标解析资源确定单元,用于根据所述数据池中的监测数据确定一组目标解析资源;
回放请求上传单元,用于上传回放请求至所述管理服务器;
解析标签生成单元,用于在所述目标解析资源中添加解析标签;
回放数据接收单元,用于接收所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中;
回放数据解析单元,用于依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
第三方面,本发明实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的客户端数据回放处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,当所述计算机程序被处理器执行时实现如上述第一方面所述的客户端数据回放处理方法。
本发明实施例提供了一种客户端数据回放处理方法、装置、设备及存储介质,可根据配置信息配置对应的数据解析线程及解析队列,获取数据解析线程及解析队列的监测数据并存储至预置的数据池中,根据数据池中的监测数据确定一组目标解析资源,上传回放请求至管理服务器,在目标解析资源中添加解析标签,解析标签为回放请求中的任务标识,将回放数据存储至预置的总队列中,依次获取总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。通过上述方法,在使用客户端进行行情数据回放时,能根据数据解析资源合理配置数据解析线程及解析队列,使数据解析资源能最大限度地得到使用,提高数据解析资源利用的有效性,在进行数据回放时还可以根据监测信息对解析资源进行标记、启动以及停用,实现对解析资源的动态管理,有效保证了解析资源利用的合理性,保证了解析资源回放解析数据的效率,数据解析资源可以根据回放数据的任务量进行自适应调整,使该数据回放处理方法的使用场景更丰富,增强对硬件环境条件的适应性。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的客户端数据回放处理方法的流程示意图;
图2为本发明实施例提供的客户端数据回放处理方法的应用场景示意图;
图3为本发明实施例提供的客户端数据回放处理方法的子流程示意图;
图4为本发明实施例提供的客户端数据回放处理方法的另一子流程示意图;
图5为本发明实施例提供的客户端数据回放处理方法的又一子流程示意图;
图6为本发明实施例提供的客户端数据回放处理方法的再一子流程示意图;
图7为本发明实施例提供的客户端数据回放处理方法的后一子流程示意图;
图8为本发明实施例提供的客户端数据回放处理方法的其后又一子流程示意图;
图9为本发明实施例提供的客户端数据回放处理装置的示意性框图;
图10为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和 “包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/ 或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
请参阅图1及图2,图1为本发明实施例提供的客户端数据回放处理方法的流程示意图;图2为本发明实施例提供的客户端数据回放处理方法的应用场景示意图;该客户端数据回放处理方法应用于客户端10中,该客户端数据回放处理方法通过安装于客户端10中的应用软件进行执行,客户端10与管理服务器20之间建立网络连接以实现数据信息的传输,管理服务器20即是用于执行客户端数据回放处理方法以向客户端10传输待解析回放处理数据的服务器端,客户端10即是用于与管理服务器20建立网络连接以发送回放请求并接收待解析回放数据的终端设备,如台式电脑、笔记本电脑、平板电脑或手机等。图2中仅仅示意出一台客户端10与管理服务器20进行信息传输,在实际应用中,该管理服务器20也可同时与多台客户端10建立通信连接以实现数据信息的传输。
如图1所示,该方法包括步骤S110-S170。
S110、根据配置信息配置对应的数据解析线程及解析队列。
根据配置信息配置对应的数据解析线程及解析队列。客户端的使用者即为客户,如客户需要通过客户端回放处理行情数据,即可通过客户端发送行情数据回放请求信息,管理服务器可接收来自客户端的行情数据回放请求信息,同时,客户端中配置有数据池,用于存储数据信息,同时,客户端中的管理程序控制数据解析队列以对数据信息进行解析。
具体步骤包括:客户端与管理服务器建立网络连接以进行数据传输,客户端在初始化过程中预设用于回放数据解析的配置信息,该配置信息预设于客户端的应用软件中,例如,用户根据数据回放需求进行预先设置,或者客户端中的应用软件在代码中进行预先设置,运行于客户端中的配置主线程用于配置数据解析线程,具体地,客户端回放数据需要运行至少一个数据解析线程,且该数据解析线程在解析数据时可与一个用于存放解析数据的解析队列相对应,并配合工作以进行回放数据解析。该配置信息包含数据解析线程数与解析队列数,客户端根据配置信息配置数据解析线程以及相对应的解析队列,解析队列用于存放并解析客户端接收到的待回放的数据信息。
S120、获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中。
获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中,具体地,客户端中的监控程序对数据解析线程及解析队列进行监测并获得监测数据,监控程序通过监测数据即可将数据解析线程的工作状态信息发送至客户端,使客户端可根据数据解析线程的实际状态进行相适应的操作,其中,监测数据可以包括数据解析线程的激活状态、工作状态、工作开始时间以及工作进行时长,该检测数据存储至客户端中预置的数据池中,可根据需要调取使用。
在一实施例中,如图8所示,在步骤S120之前还包括步骤S121。
S121、根据所配置的数据解析线程及解析队列预先启动至少一个数据解析线程及至少一个解析队列。
预先启动至少一个数据解析线程以及至少一个解析队列,即构成一组目标解析资源,客户端可根据监测信息对该目标解析资源进行选择并使用。
S130、根据所述数据池中的监测数据确定一组目标解析资源。所述目标解析资源包含一个所述数据解析线程及一个所述解析队列。
根据所述数据池中的监测数据确定一组目标解析资源;所述目标解析资源包含一个所述数据解析线程及一个所述解析队列,具体地,根据客户端中的数据池存储的监测数据获悉数据解析线程以及解析队列的激活状态与工作状态后即可确定该线程与队列是否可用于回放数据解析处理,可用于回放数据解析处理的数据解析线程以及与此线程相对应的解析队列共同构成一组目标解析资源。
在一实施例中,如图3所示,步骤S130之前还包括步骤S1301和S1302。
S1301、根据所述数据池中的监测数据判断是否存在已激活的数据解析线程。
具体地,在根据数据池中的监测数据确定目标解析资源之前,根据数据池中的监测数据判断激活后的数据解析线程是否存在,容易理解的是,存储在客户端预设的数据池中的监测数据包括数据解析线程的工作状态信息,调取监测数据即可获悉数据激活后的解析线程是否已处于工作状态,若数据解析线程处于激活且非工作状态,即可选择其进行数据回放解析处理。
S1302、若不存在已激活的数据解析线程,根据所述监测数据对所配置的数据解析线程进行激活。
在对数据解析线程进行选择之前须要对其激活状态进行判断,若客户端所配置的数据解析线程处于非激活状态,则监控程序可根据监测数据对该数据解析线程进行激活,使该数据解析线程可满足回放数据解析的工作条件并进入工作状态。
在一实施例中,如图4所示,步骤S130包括步骤S131和S132。
S131、判断所述监测数据中是否存在解析标签空缺的至少一个数据解析线程及至少一个解析队列;S132、若存在至少一个数据解析线程及至少一个解析队列空缺解析标签,则从中确定解析标签空缺的一个所述数据解析线程及一个所述解析队列作为一组目标解析资源。
在一实施例中,如图5所示,步骤S131之后还包括步骤S1311。
S1311、若不存在数据解析线程及解析队列空缺解析标签,等待预设时长后返回执行所述判断所述监测数据中是否存在解析标签空缺的至少一个数据解析线程及至少一个解析队列的步骤。
等待预设时长后再次进行判断,也即再次执行步骤S131。例如,预设时长可以是2秒,则若判断不存在数据解析线程及解析队列空缺解析标签,等待2秒钟后再次执行上述步骤S131。
S140、上传回放请求至所述管理服务器。
上传回放请求至所述管理服务器。客户端进行行情数据回放前,根据使用需要向管理服务器发送关于回放行情数据信息的请求,即回放请求,发送完回放请求并为每一条回放请求设置任务id,该任务id具有唯一性和排他性,每一条回放请求只对应设置一条任务id,确保管理服务器在接收到回放请求后反馈至客户端的回放数据与回放请求相对应,使回放数据能更准确地满足客户的数据回放需要。
S150、在所述目标解析资源中添加解析标签。
在一实施例中,如图6所示,步骤S150包括子步骤S151和S152。
S151、在所述目标解析资源的数据解析线程及解析队列中分别添加所述解析标签。
具体地,解析标签是用于表明数据解析线程与解析队列状态的字段,目标解析资源包括数据解析线程以及相对应的解析队列,若未向管理服务器发送回放请求,则并不存在任务id,数据解析线程并不与任务id相对应即并无数据解析任务,此时数据解析线程若仍处于激活且可工作的状态,空闲的数据解析线程仍造成能耗,降低了数据解析线程的有效使用率,数据解析线程与对应的解析队列作为最重要的目标解析资源,在对回放数据进行解析过程中对应用环境的适应性要求较高,需要客户投入维护成本。向管理服务器发送回放请求前,客户端中的监控程序根据监测数据确定配置完成的数据解析线程是否可用于回放数据解析,即是否处于激活且非工作的空闲状态,通过为数据解析线程添加解析标签,根据激活状态、工作状态以及工作时间对数据解析线程进行区分,若监控程序确定可用的数据解析线程,则判断线程激活状态,根据线程的激活状态,将线程标记为激活或未激活,并确定已标记为激活的线程,进一步地,判断已标记为激活的线程是否为空闲状态,并根据线程的空闲状态,将线程标记为空闲或非空闲,将同时被标记有激活以及空闲标签的数据解析线程的属性id设置为任务id,此任务id与回放请求所对应的任务id为相同id。此外,客户端中预设的监控程序还可以通过对数据解析线程进行工作时间记录,设定工作时间限制,若数据解析线程的工作时间记录超过设定的工作时间限制时长,则关闭数据解析线程,具体地,数据解析线程停止工作时获得监控程序标记的结束时间戳,用于标记数据解析线程工作结束时刻的时间,监控程序将当前时间与结束时间戳所标记的时间进行比对,若当前时间与结束时间戳所标记的时间相差的时间段时长超出设定的工作时间限制时长,则将数据解析线程关闭,避免数据解析线程空闲时间过长导致的设备能耗浪费问题,关闭并销毁数据解析线程,实现目标解析资源的节约使用。在具体实现过程中,目标解析资源中的解析标签可以采用task-id进行表示,监控程序根据监测信息对数据解析线程进行判断,管理程序中运行的管理线程用于管理数据解析线程的启停与回收,可将目标解析资源中的task-id的字段值设置为任务id,task-id的字段值为0时,即task-id:0表示数据解析线程处于空闲状态,若task-id的字段值大于0时,则表示数据解析线程处于工作状态;判断数据解析线程是否处于工作状态之前,还需要对数据解析线程是否处于激活状态进行判断,可目标解析资源中的is-active的字段值进行设置,is-active的字段值为true时,即数据解析线程处于激活状态,若is-active的字段值为false,则表示数据解析线程处于非激活状态。
S152、对所述目标解析资源中数据解析线程及解析队列的时间戳进行更新。
具体地,管理线程还可使用timestamp字段对数据解析线程的运行进行标记,timestamp字段即时间戳,用于记录数据解析线程的开始工作的时间。
S160、若接收到所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中。
管理服务器将回放数据传输至客户端之前,客户端中预先配置有可用于存储数据的队列,具体地,客户端中还配置有总队列,总队列可存储从管理服务器接收的所有回放数据,若数据解析线程与对应的解析队列激活并启动工作,可将总队列中存储的回放数据分发至数据解析线程与对应的解析队列中进行回放解析处理,预设总队列使全部待回放的数据在客户端中得到预先存储,可在客户端通过分配程序实现回放数据的分配,避免回放数据直接从管理服务器传输至对应目标解析资源过程中因网络连接中断或线程选择偏差造成的数据传输不畅的问题,保证了将回放数据分配至对应目标解析资源的准确性和效率。
S170、依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
在一实施例中,如图7所示,步骤S170包括子步骤S171、S172和S173。
S171、根据每一所述回放数据的任务标识及所述目标解析资源中添加的解析标签,确定与每一所述回放数据对应的目标解析资源;S172、将每一所述回放数据添加至所确定的一个对应所述目标解析资源的解析队列中;S173、将所述目标解析资源的解析队列中的回放数据输入所述目标解析资源的数据解析线程进行解析处理,得到对应的解析数据。
具体地,客户端中预设的总队列接收到来自管理服务器的回放数据,确定已激活并且处于空闲状态的目标解析资源,目标解析资源所包括的数据解析线程在对应的解析队列中运行,目标解析资源可以是多组,即多对数据解析线程与解析队列,可对数据解析线程进行1至n(n为大于等于2的正整数)编号,数据解析线程按编号顺序依次从总队列中获取由总队列进行分发的回放数据,数据解析线程获得回放数据后即对回放数据进行解析,得到对应的解析数据,在客户端中对所得到的解析数据进行显示,也即是对解析数据进行回放处理,客户端的使用者即可察看到所回放的解析数据。
容易理解的是,数据解析线程及对应的解析队列可根据数据回放量的实际需求进行增加或裁减,使目标解析资源的使用更符合客户的使用预期,回放数据的解析过程由多个数据解析线程共同完成或先后依次解析完成,提高了回放数据解析的效率。
在本发明实施例所提供的客户端数据回放处理方法中,根据配置信息配置对应的数据解析线程及解析队列,获取数据解析线程及解析队列的监测数据并存储至预置的数据池中,根据数据池中的监测数据确定一组目标解析资源,上传回放请求至管理服务器,在目标解析资源中添加解析标签,解析标签为回放请求中的任务标识,将回放数据存储至预置的总队列中,依次获取总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。通过上述方法,客户在使用客户端进行行情数据回放时能合理配置数据解析资源解析处理回放数据,通过预设在客户端中的目标解析资源对来自管理服务器的回放数据进行解析,使数据解析资源能最大限度地得到使用,提高数据解析资源利用的有效性,通过添加标签实现对目标解析资源所包括的数据解析线程以及对应的解析队列工作状态的判断,在监测信息的指引下对解析资源进行标记、启动以及停用操作,实现对解析资源的动态管理,根据实际使用需要增加或减少对目标解析资源的使用量,在客户端的应用程序中将回放数据依次分发到数据解析线程中完成回放数据的解析处理,使回放数据的解析处理过程更高效,显著提升了解析处理过程中目标解析资源利用的有效性,有效保证了解析资源利用的合理性,保证了解析资源回放解析数据的效率,客户可对解析资源进行扩展或裁减配置,使该数据回放处理方法的使用场景更丰富,增强对硬件环境条件的适应性。
本发明实施例还提供一种客户端数据回放处理装置,该客户端数据回放处理装置可配置于客户端中,该客户端数据回放处理装置用于执行前述的客户端数据回放处理方法的任一实施例。具体地,请参阅图9,图9为本发明实施例提供的客户端数据回放处理装置的示意性框图。
客户端数据回放处理装置100包括配置信息生成单元110、监测数据获取单元120、目标解析资源确定单元130、回放请求上传单元140、解析标签生成单元150、回放数据接收单元160以及回放数据解析单元170。
在一具体实施例中,配置信息生成单元110,用于生成配置信息并根据配置信息配置对应的数据解析线程及解析队列。
在一具体实施例中,监测数据获取单元120,用于获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中。
在一具体实施例中,目标解析资源确定单元130,用于根据所述数据池中的监测数据确定一组目标解析资源。
在一具体实施例中,回放请求上传单元140,用于上传回放请求至所述管理服务器;
在一具体实施例中,解析标签生成单元150,用于在所述目标解析资源中添加解析标签。
在一具体实施例中,回放数据接收单元160,用于接收所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中。
在一具体实施例中,回放数据解析单元170,用于依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
在本发明实施例所提供的客户端数据回放处理装置100应用上述客户端数据回放处理方法,可根据配置信息配置对应的数据解析线程及解析队列,获取数据解析线程及解析队列的监测数据并存储至预置的数据池中,根据数据池中的监测数据确定一组目标解析资源,上传回放请求至管理服务器,在目标解析资源中添加解析标签,解析标签为回放请求中的任务标识,将回放数据存储至预置的总队列中,依次获取总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。通过上述方法,客户端进行行情数据回放能合理配置数据解析资源解析处理,使数据解析资源能最大限度地得到使用,提高数据解析资源利用的有效性,客户在进行数据回放时还可以在预置的监测信息的指引下对解析资源进行标记、启动以及停用操作,实现对解析资源的动态管理,有效保证了解析资源利用的合理性,保证了解析资源回放解析数据的效率,客户可对解析资源进行扩展或裁减配置,使该数据回放处理方法的使用场景更丰富,增强对硬件环境条件的适应性。
上述客户端数据回放处理装置100可以实现为计算机的形式,客户端数据回放处理方法可实现为在计算机上运行的计算机程序,该计算机程序可以在如图10所示的计算机设备上运行。
请参阅图10,图10是本发明实施例提供的计算机设备的示意性框图。该计算机设备可以是用于执行客户端数据回放处理方法的客户端。
参阅图10,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括存储介质503和内存储器504。
该存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时,可使得处理器502执行客户端数据回放处理方法,其中,存储介质503可以为易失性的存储介质或非易失性的存储介质。
该处理器502用于提供计算和控制能力,支撑整个计算机设备500的运行。
该内存储器504为存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行客户端数据回放处理方法。
该网络接口505用于进行网络通信,如提供数据信息的传输等。本领域技术人员可以理解,图7中示出的结构,仅仅是与本发明方案相关的部分结构的框图,并不构成对本发明方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现上述的基于客户端数据回放处理方法中对应的功能。
本领域技术人员可以理解,图10中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定,在其他实施例中,计算机设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。例如,在一些实施例中,计算机设备可以仅包括存储器及处理器,在这样的实施例中,存储器及处理器的结构及功能与图7所示实施例一致,在此不再赘述。
应当理解,在本发明实施例中,处理器502可以是中央处理单元 (CentralProcessing Unit,CPU),该处理器502还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路 (Application Specific IntegratedCircuit,ASIC)、现成可编程门阵列 (Field-Programmable Gate Array,FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为易失性或非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序,其中计算机程序被处理器执行时实现上述的基于客户端数据回放处理方法中所包含的步骤。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的设备、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中,应该理解到,所揭露的设备、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为逻辑功能划分,实际实现时可以有另外的划分方式,也可以将具有相同功能的单元集合成一个单元,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个计算机可读存储介质中,包括若干指令用以使得一台计算机设备 ( 可以是个人计算机,服务器,或者网络设备等 ) 执行本发明各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括:U 盘、移动硬盘、只读存储器 (ROM,Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种客户端数据回放处理方法,其特征在于,所述方法应用于客户端中,所述客户端与管理服务器建立网络连接以进行数据信息的传输,所述方法包括:
根据配置信息配置对应的数据解析线程及解析队列;所述配置信息包括数据解析线程数及解析队列数;
获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中;
根据所述数据池中的监测数据确定一组目标解析资源;所述目标解析资源包含一个所述数据解析线程及一个所述解析队列;
上传回放请求至所述管理服务器;
在所述目标解析资源中添加解析标签,所述解析标签为所述回放请求中的任务标识;
若接收到所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中;
依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
2.根据权利要求1所述的客户端数据回放处理方法,其特征在于,所述根据所述数据池中的监测数据确定一组目标解析资源之前,所述方法还包括:
根据所述数据池中的监测数据判断是否存在已激活的数据解析线程;
若不存在已激活的数据解析线程,根据所述监测数据对所配置的数据解析线程进行激活。
3.根据权利要求1所述的客户端数据回放处理方法,其特征在于,所述根据所述数据池中的监测数据确定一组目标解析资源,包括:
判断所述监测数据中是否存在解析标签空缺的至少一个数据解析线程及至少一个解析队列;
若存在至少一个数据解析线程及至少一个解析队列空缺解析标签,则从中确定解析标签空缺的一个所述数据解析线程及一个所述解析队列作为一组目标解析资源。
4.根据权利要求3所述的客户端数据回放处理方法,其特征在于,所述判断所述监测数据中是否存在解析标签空缺的至少一个数据解析线程及至少一个解析队列之后,还包括:
若不存在数据解析线程及解析队列空缺解析标签,返回执行所述判断所述监测数据中是否存在解析标签空缺的至少一个数据解析线程及至少一个解析队列的步骤。
5.根据权利要求1所述的客户端数据回放处理方法,其特征在于,所述在所述目标解析资源中添加解析标签,包括:
在所述目标解析资源的数据解析线程及解析队列中分别添加所述解析标签;
对所述目标解析资源中数据解析线程及解析队列的时间戳进行更新。
6.根据权利要求1所述的客户端数据回放处理方法,其特征在于,所述依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放,包括:
根据每一所述回放数据的任务标识及所述目标解析资源中添加的解析标签,确定与每一所述回放数据对应的目标解析资源;
将每一所述回放数据添加至所确定的一个对应所述目标解析资源的解析队列中;
将所述目标解析资源的解析队列中的回放数据输入所述目标解析资源的数据解析线程进行解析处理,得到对应的解析数据。
7.根据权利要求1所述的客户端数据回放处理方法,其特征在于,所述获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中之前,还包括:
根据所配置的数据解析线程及解析队列预先启动至少一个数据解析线程及至少一个解析队列。
8.一种客户端数据回放处理装置,其特征在于,所述装置配置于客户端中,所述客户端与管理服务器建立网络连接以进行数据信息的传输,所述装置包括:
配置信息生成单元,用于生成配置信息并根据配置信息配置对应的数据解析线程及解析队列;
监测数据获取单元,用于获取所述数据解析线程及所述解析队列的监测数据并存储至预置的数据池中;
目标解析资源确定单元,用于根据所述数据池中的监测数据确定一组目标解析资源;
回放请求上传单元,用于上传回放请求至所述管理服务器;
解析标签生成单元,用于在所述目标解析资源中添加解析标签;
回放数据接收单元,用于接收所述管理服务器根据所述回放请求反馈的回放数据,将所述回放数据存储至预置的总队列中;
回放数据解析单元,用于依次获取所述总队列中的回放数据并通过对应的一组目标解析资源进行解析处理,得到对应的解析数据并进行回放。
9.一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的客户端数据回放处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,当所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的客户端数据回放处理方法。
CN202210647870.2A 2022-06-09 2022-06-09 客户端数据回放处理方法、装置、设备及存储介质 Active CN114741206B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210647870.2A CN114741206B (zh) 2022-06-09 2022-06-09 客户端数据回放处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210647870.2A CN114741206B (zh) 2022-06-09 2022-06-09 客户端数据回放处理方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN114741206A true CN114741206A (zh) 2022-07-12
CN114741206B CN114741206B (zh) 2022-09-06

Family

ID=82286961

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210647870.2A Active CN114741206B (zh) 2022-06-09 2022-06-09 客户端数据回放处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN114741206B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015100994A1 (zh) * 2013-12-31 2015-07-09 华为技术有限公司 页面处理方法、装置及系统
US20180203813A1 (en) * 2015-09-29 2018-07-19 Shannon Systems Ltd. Methods for processing return entities associated with multiple requests in single interrupt service routine thread and apparatuses using the same
CN109783255A (zh) * 2019-01-07 2019-05-21 中国银行股份有限公司 数据解析分发装置及高并发数据处理方法
CN110351342A (zh) * 2019-06-20 2019-10-18 平安科技(深圳)有限公司 业务指令处理方法、装置、计算机设备和存储介质
CN110750365A (zh) * 2019-09-21 2020-02-04 苏州浪潮智能科技有限公司 一种远程过程调用方法、系统、终端及存储介质
CN110858223A (zh) * 2018-08-24 2020-03-03 比亚迪股份有限公司 基于数据库的回放方法、系统、服务器及客户端
CN111552622A (zh) * 2020-04-30 2020-08-18 上海英方软件股份有限公司 一种行情数据的回放装置及方法
CN113553153A (zh) * 2021-07-21 2021-10-26 中国工商银行股份有限公司 业务数据处理方法、装置及微服务架构系统
CN114025185A (zh) * 2021-10-28 2022-02-08 杭州网易智企科技有限公司 一种视频回放方法、装置、电子设备及存储介质
EP3968175A1 (en) * 2019-05-05 2022-03-16 Tencent Technology (Shenzhen) Company Limited Data replication method and apparatus, and computer device and storage medium
CN114338830A (zh) * 2022-01-05 2022-04-12 腾讯科技(深圳)有限公司 数据传输方法、装置、计算机可读存储介质及计算机设备

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015100994A1 (zh) * 2013-12-31 2015-07-09 华为技术有限公司 页面处理方法、装置及系统
US20180203813A1 (en) * 2015-09-29 2018-07-19 Shannon Systems Ltd. Methods for processing return entities associated with multiple requests in single interrupt service routine thread and apparatuses using the same
CN110858223A (zh) * 2018-08-24 2020-03-03 比亚迪股份有限公司 基于数据库的回放方法、系统、服务器及客户端
CN109783255A (zh) * 2019-01-07 2019-05-21 中国银行股份有限公司 数据解析分发装置及高并发数据处理方法
EP3968175A1 (en) * 2019-05-05 2022-03-16 Tencent Technology (Shenzhen) Company Limited Data replication method and apparatus, and computer device and storage medium
CN110351342A (zh) * 2019-06-20 2019-10-18 平安科技(深圳)有限公司 业务指令处理方法、装置、计算机设备和存储介质
CN110750365A (zh) * 2019-09-21 2020-02-04 苏州浪潮智能科技有限公司 一种远程过程调用方法、系统、终端及存储介质
CN111552622A (zh) * 2020-04-30 2020-08-18 上海英方软件股份有限公司 一种行情数据的回放装置及方法
CN113553153A (zh) * 2021-07-21 2021-10-26 中国工商银行股份有限公司 业务数据处理方法、装置及微服务架构系统
CN114025185A (zh) * 2021-10-28 2022-02-08 杭州网易智企科技有限公司 一种视频回放方法、装置、电子设备及存储介质
CN114338830A (zh) * 2022-01-05 2022-04-12 腾讯科技(深圳)有限公司 数据传输方法、装置、计算机可读存储介质及计算机设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
XINGYAN CHEN等: "data playback resource queue", 《 IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》 *
吴建华: "基于Linux的高速记录回放系统计算机软件设计", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
郝朝等: "基于C/S模式的机载多路视频同步回放技术", 《计算机技术与发展》 *

Also Published As

Publication number Publication date
CN114741206B (zh) 2022-09-06

Similar Documents

Publication Publication Date Title
US10348809B2 (en) Naming of distributed business transactions
CN110830577B (zh) 服务请求调用追踪方法、装置、计算机设备及存储介质
US9015731B2 (en) Event handling system and method
CN109450771A (zh) 添加好友的方法、装置、计算机设备及存储介质
CN111143163A (zh) 数据监控方法、装置、计算机设备和存储介质
CN115004672B (zh) 信息推送方法、装置、服务器及存储介质
CN109495378A (zh) 检测异常帐号的方法、装置、服务器及存储介质
CN109542718A (zh) 服务调用的监控方法、装置、存储介质及服务器
CN108965291A (zh) 混合应用程序的注册登录方法、系统及计算机设备
CN117061335A (zh) 云平台设备健康管控方法、装置、存储介质和电子设备
CN114741206B (zh) 客户端数据回放处理方法、装置、设备及存储介质
US20150356692A1 (en) Tuning crowdsourced human intelligence task options through flighting
CN111431733A (zh) 服务告警覆盖信息的评估方法及装置
US11023479B2 (en) Managing asynchronous analytics operation based on communication exchange
CN107741885B (zh) 基于cs架构的事务与业务关联方法、关联系统
CN113742099B (zh) 基于集合的消息消费方法、生产方法、系统及存储介质
CN115952001A (zh) 一种基于android系统can通信方法、装置及设备
CN113595814B (zh) 消息延迟检测方法、装置、电子设备及存储介质
CA3150578A1 (en) Data processing method for social media marketing management and system thereof
CN107329819A (zh) 一种作业管理方法及装置
CN113467723A (zh) 一种数据存储方法、装置、设备及介质
CN113778639A (zh) 一种调整线程池的方法、装置、设备和计算机存储介质
CN107742255A (zh) 社交网站信息流同步方法、装置及设备
CN114465952B (zh) 一种配置参数的管理方法、装置及电子设备
CN114756363A (zh) 一种资源配置检测方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant