CN111324473B - 可实现高并发处理交易信息的拍卖交易系统 - Google Patents

可实现高并发处理交易信息的拍卖交易系统 Download PDF

Info

Publication number
CN111324473B
CN111324473B CN202010082869.0A CN202010082869A CN111324473B CN 111324473 B CN111324473 B CN 111324473B CN 202010082869 A CN202010082869 A CN 202010082869A CN 111324473 B CN111324473 B CN 111324473B
Authority
CN
China
Prior art keywords
order
queue
information
redis
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010082869.0A
Other languages
English (en)
Other versions
CN111324473A (zh
Inventor
曹国钧
袁振辉
梁家晧
苏腾强
罗丽姬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Runhe Traditional Chinese Medicine E Commerce Co ltd
Original Assignee
Guangdong Runhe Traditional Chinese Medicine E Commerce Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Runhe Traditional Chinese Medicine E Commerce Co ltd filed Critical Guangdong Runhe Traditional Chinese Medicine E Commerce Co ltd
Priority to CN202010082869.0A priority Critical patent/CN111324473B/zh
Publication of CN111324473A publication Critical patent/CN111324473A/zh
Application granted granted Critical
Publication of CN111324473B publication Critical patent/CN111324473B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/08—Auctions

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Software Systems (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种可实现高并发处理交易信息的拍卖交易系统，包括行情消息分发器和订单消息处理器，先通过消息队列获取原始初始化信息，然后通过行情分别器把获取的信息通知到外部系统，更新redis行情数据，并根据订单消息队列获取最新价格；通过订单消息处理器分发订单消息，并更新redis行情数据，再由行情消息分器分发更新的redis行情。本发明的各个模块都是同步线程并发处理，所以能够更有效地利用硬件设施，达到有效消峰目的，同时通过动态规划思路、有效简化问题把串行业务变成并行业务优化处理的算法方案，实现在硬件资源不变的前提下达到对拍卖交易信息的高并发处理，高实时性发布，提高资源利用的能效比。

Description

可实现高并发处理交易信息的拍卖交易系统
技术领域
本发明涉及拍卖交易系统技术领域，尤其涉及一种可实现高并发处理交易信息的拍卖交易系统。
背景技术
拍卖交易系统主要是用于实现拍卖交易中核心交易数据处理，利用互联网在线处理每一笔交易信息，并向其他系统发布交易行情。用户通过外部业务流程系统进行浏览拍卖交易系统的交易实时行情，然后下单，交易系统就会触发处理下单信息，更新实时交易行情，并分发到具体的中下游业务系统。
目前拍卖交易领域没有成型的、功能完备的交易系统，以用于推动整体拍卖交易的互联网化发展，而且市场仅有的交易系统面对“互联网+”时存在以下问题：第一，经不起高并发的考验，实时性不强，只能不断地通过提高硬件性能来加强信息处理能力；第二，面对系统硬件资源利用率低，能效比不高。
发明内容
本发明要解决的技术问题是针对现有技术的不足，提供一种处理能力更强、实时性更高、能更高效利用软硬件资源、可实现高并发处理交易信息的拍卖交易系统。
为解决上述技术问题，本发明采用如下技术方案：一种可实现高并发处理交易信息的拍卖交易系统，通过与交易流程服务器及订单业务系统配合完成用户下达的交易指令，其特征在于：该拍卖交易系统包括，
行情消息分发器，先通过消息队列获取原始初始化信息，然后通过行情分别器把获取的信息通知到外部系统，更新redis行情数据，并根据订单消息队列获取最新价格；
订单消息处理器：通过订单消息处理器分发订单消息，并更新redis行情数据，再由行情消息分器分发更新的redis行情；
行情消息分发器包括有行情更新置换器、数据库分发器和消息分发器，获取的行情消息推送至行情更新置换器；行情更新置换器查找出对应的redis场次批次队列编号，并对其中的批次单元进行reset值操作；然后由行情更新置换器分发数据到消息分发器，并由数据库分发器对rabbitMQ行情分发消息队列进行分发派送行情消息；
订单消息处理器包括有推送行情消息机、redis队列分发机、处理订单业务数据存储器和订单结算处理器，通过rabbitMQ订单消息队列获取下单信息，推送行情消息机将获取的消息推送到rabbitMQ行情分发消息队列，redis队列分发机分发下单信息；处理订单业务数据存储器获取分发信息进行下单数据的数据库存储，订单结算处理器通知外部跑合订单系统进行订单结算录入操作，完成订单的交易操作。
行情消息分发器更新redis行情数据并根据订单消息队列获取最新价格后，订单消息处理器分发订单消息，并继续更新redis行情数据，行情消息分发器分发更新后的redis行情，并从获取最新价格开始进行循环处理。
用户下单后触发更新行情和接受订单两个主流程，更新行情的流程通过行情消息分发器处理，接收后先进行存储行情操作，同时进行分发行情，分发行情进行高速缓存数据库更新存储redis行情队列，同时对行情消息分发队列进行rabbitMQ行情消息队列；
接受订单操作由订单消息处理器处理，接收订单并发送到rabbitMQ订单业务消息队列，然后转发到订单处理分发器处理，根据高速缓存数据库redis队列情况进行分发，然后由订单结算处理器处理。
行情更新置换器进行对redis行情队列遍历查询，找出对应的redis场次批次队列编号，然后由行情更新置换器进行对redis场次批次队列中的批次单元进行reset值操作；reset值操作过程为：
1）行情更新置换器把对应的redis场次批次数据线性规划方案推送到数据库分发器里面；
2）线性规划方案：
A、把最优队列分解，找出最少消息存储队列和最多消息存储队列；
B、找到最多消息存储队列并消耗，即找到积压最多的消息存储队列进行优先处理，而积压最少的消息存储队列优先积压而不进行处理；
C、分发到最少消息存储队列；
D、循环步骤A-C；
3）数据库分发器进行分发修改，同步修改redis和mysql。
订单消息处理器通过redis队列分发机使用树形规划分发下单信息，树形规划的流程为：
a、先决策判断redis待处理订单队列、redis结算订单队列、redis处理中队列哪个积压信息比较少；
b、如果redis待处理订单队列或redis结算订单队列比较少则进入待处理，如果redis处理中队列比较少则马上进入处理；
c、决策是否马上消耗队列信息，如果处理线程非满则马上消耗，否需继续挤压；
d、订单结算处理器消耗队列信息；
e、循环过程a-d。
本发明的各个模块都是同步线程并发处理，所以能够更有效地利用硬件设施，达到有效消峰目的，同时通过动态规划思路、有效简化问题把串行业务变成并行业务优化处理的算法方案，实现在硬件资源不变的前提下达到对拍卖交易信息的高并发处理，高实时性发布，提高资源利用的能效比。
附图说明
图1为本发明宏观交易流程示意图；
图2为本发明主体算法架构示意图；
图3为下单触发流程示意图；
图4为行情消息分发器架构示意图；
图5为订单消息处理器架构示意图；
图6为行情消息分发器的处理流程示意图；
图7为订单消息处理器的处理流程示意图。
具体实施方式
下面结合具体实施方式对本发明做进一步描述。
本实施例中，所述可实现高并发处理交易信息的拍卖交易系统，通过与交易流程服务器及订单业务系统配合完成用户下达的交易指令，其特征在于：该拍卖交易系统包括，
行情消息分发器，先通过消息队列获取原始初始化信息，然后通过行情分别器把获取的信息通知到外部系统，更新redis行情数据，并根据订单消息队列获取最新价格；
订单消息处理器：通过订单消息处理器分发订单消息，并更新redis行情数据，再由行情消息分器分发更新的redis行情；
行情消息分发器包括有行情更新置换器、数据库分发器和消息分发器，获取的行情消息推送至行情更新置换器；行情更新置换器查找出对应的redis场次批次队列编号，并对其中的批次单元进行reset值操作；然后由行情更新置换器分发数据到消息分发器，并由数据库分发器对rabbitMQ行情分发消息队列进行分发派送行情消息；
订单消息处理器包括有推送行情消息机、redis队列分发机、处理订单业务数据存储器和订单结算处理器，通过rabbitMQ订单消息队列获取下单信息，推送行情消息机将获取的消息推送到rabbitMQ行情分发消息队列，redis队列分发机分发下单信息；处理订单业务数据存储器获取分发信息进行下单数据的数据库存储，订单结算处理器通知外部跑合订单系统进行订单结算录入操作，完成订单的交易操作。
行情消息分发器更新redis行情数据并根据订单消息队列获取最新价格后，订单消息处理器分发订单消息，并继续更新redis行情数据，行情消息分发器分发更新后的redis行情，并从获取最新价格开始进行循环处理。
用户下单后触发更新行情和接受订单两个主流程，更新行情的流程通过行情消息分发器处理，接收后先进行存储行情操作，同时进行分发行情，分发行情进行高速缓存数据库更新存储redis行情队列，同时对行情消息分发队列进行rabbitMQ行情消息队列；
接受订单操作由订单消息处理器处理，接收订单并发送到rabbitMQ订单业务消息队列，然后转发到订单处理分发器处理，根据高速缓存数据库redis队列情况进行分发，然后由订单结算处理器处理。
行情更新置换器进行对redis行情队列遍历查询，找出对应的redis场次批次队列编号，然后由行情更新置换器进行对redis场次批次队列中的批次单元进行reset值操作；reset值操作过程为：
1）行情更新置换器把对应的redis场次批次数据线性规划方案推送到数据库分发器里面；
2）线性规划方案：
A、把最优队列分解，找出最少消息存储队列和最多消息存储队列；因为会存在很多各种场次批次的消息，这些消息分别属于不同的批次，所以是不同的批次队列，找对最多和最少队列可以有效进行积压和消耗。
B、找到最多消息存储队列并消耗，即找到积压最多的消息存储队列进行优先处理，而积压最少的消息存储队列优先积压而不进行处理；
C、分发到最少消息存储队列；
D、循环步骤A-C；
3）数据库分发器进行分发修改，同步修改redis和mysql。
订单消息处理器通过redis队列分发机使用树形规划分发下单信息，树形规划的流程为：
a、先决策判断redis待处理订单队列、redis结算订单队列、redis处理中队列哪个积压信息比较少；
b、如果redis待处理订单队列或redis结算订单队列比较少则进入待处理，如果redis处理中队列比较少则马上进入处理；具体来说，积压最少的队列如果是待处理订单队列或者结算订单队列，则下一步是结算操作；如果订单结算处理器线程接受到待处理订单队列或者订单结束队列的消息后，满载时候会积压到订单结束队列，否则马上进行处理并分发到处理中队列；
c、决策是否马上消耗队列信息，如果处理线程非满则马上消耗，否需继续挤压；即每个消耗队列的处理器（订单处理分发器或者订单结束处理器）线程饱和的话就把消息继续积压回去。
d、订单结算处理器消耗队列信息；
e、循环过程a-d。
上已将本发明做一详细说明，以上所述，仅为本发明之较佳实施例而已，当不能限定本发明实施范围，即凡依本申请范围所作均等变化与修饰，皆应仍属本发明涵盖范围内。

Claims (5)

1.一种可实现高并发处理交易信息的拍卖交易系统，通过与交易流程服务器及订单业务系统配合完成用户下达的交易指令，其特征在于：该拍卖交易系统包括，
行情消息分发器，先通过消息队列获取原始初始化信息，然后通过行情分别器把获取的信息通知到外部系统，更新redis行情数据，并根据订单消息队列获取最新价格；
订单消息处理器：通过订单消息处理器分发订单消息，并更新redis行情数据，再由行情消息分器分发更新的redis行情；
行情消息分发器包括有行情更新置换器、数据库分发器和消息分发器，获取的行情消息推送至行情更新置换器；行情更新置换器查找出对应的redis场次批次队列编号，并对其中的批次单元进行reset值操作；然后由行情更新置换器分发数据到消息分发器，并由数据库分发器对rabbitMQ行情分发消息队列进行分发派送行情消息；
订单消息处理器包括有推送行情消息机、redis队列分发机、处理订单业务数据存储器和订单结算处理器，通过rabbitMQ订单消息队列获取下单信息，推送行情消息机将获取的消息推送到rabbitMQ行情分发消息队列，redis队列分发机分发下单信息；处理订单业务数据存储器获取分发信息进行下单数据的数据库存储，订单结算处理器通知外部跑合订单系统进行订单结算录入操作，完成订单的交易操作。
2.根据权利要求1所述的可实现高并发处理交易信息的拍卖交易系统，其特征在于：行情消息分发器更新redis行情数据并根据订单消息队列获取最新价格后，订单消息处理器分发订单消息，并继续更新redis行情数据，行情消息分发器分发更新后的redis行情，并从获取最新价格开始进行循环处理。
3.根据权利要求2所述的可实现高并发处理交易信息的拍卖交易系统，其特征在于：用户下单后触发更新行情和接受订单两个主流程，更新行情的流程通过行情消息分发器处理，接收后先进行存储行情操作，同时进行分发行情，分发行情进行高速缓存数据库更新存储redis行情队列，同时对行情消息分发队列进行rabbitMQ行情消息队列；
接受订单操作由订单消息处理器处理，接收订单并发送到rabbitMQ订单业务消息队列，然后转发到订单处理分发器处理，根据高速缓存数据库redis队列情况进行分发，然后由订单结算处理器处理。
4.根据权利要求1所述的可实现高并发处理交易信息的拍卖交易系统，其特征在于：行情更新置换器进行对redis行情队列遍历查询，找出对应的redis场次批次队列编号，然后由行情更新置换器进行对redis场次批次队列中的批次单元进行reset值操作；reset值操作过程为：
1）行情更新置换器把对应的redis场次批次数据线性规划方案推送到数据库分发器里面；
2）线性规划方案：
A、把最优队列分解，找出最少消息存储队列和最多消息存储队列；
B、找到最多消息存储队列并消耗，即找到积压最多的消息存储队列进行优先处理，而积压最少的消息存储队列优先积压而不进行处理；
C、分发到最少消息存储队列；
D、循环步骤A-C；
3）数据库分发器进行分发修改，同步修改redis和mysql。
5.根据权利要求1所述的可实现高并发处理交易信息的拍卖交易系统，其特征在于：订单消息处理器通过redis队列分发机使用树形规划分发下单信息，树形规划的流程为：
a、先决策判断redis待处理订单队列、redis结算订单队列、redis处理中队列哪个积压信息比较少；
b、如果redis待处理订单队列或redis结算订单队列比较少则进入待处理，如果redis处理中队列比较少则马上进入处理；
c、决策是否马上消耗队列信息，如果处理线程非满则马上消耗，否需继续挤压；
d、订单结算处理器消耗队列信息；
e、循环过程a-d。
CN202010082869.0A 2020-02-07 2020-02-07 可实现高并发处理交易信息的拍卖交易系统 Active CN111324473B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010082869.0A CN111324473B (zh) 2020-02-07 2020-02-07 可实现高并发处理交易信息的拍卖交易系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010082869.0A CN111324473B (zh) 2020-02-07 2020-02-07 可实现高并发处理交易信息的拍卖交易系统

Publications (2)

Publication Number Publication Date
CN111324473A CN111324473A (zh) 2020-06-23
CN111324473B true CN111324473B (zh) 2023-03-14

Family

ID=71172644

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010082869.0A Active CN111324473B (zh) 2020-02-07 2020-02-07 可实现高并发处理交易信息的拍卖交易系统

Country Status (1)

Country Link
CN (1) CN111324473B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117892702A (zh) * 2024-01-22 2024-04-16 海通证券股份有限公司 行情信息的导入方法、装置和电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011150652A (ja) * 2010-01-25 2011-08-04 Mitsubishi Research Institute Inc Ｖｗａｐ取引市場システムおよびｖｗａｐ取引方法
CN106204000A (zh) * 2016-07-05 2016-12-07 康存乐付保数据科技（上海）有限公司 一种服务消费支付信息处理方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DK2858318T3 (en) * 2013-09-09 2018-02-12 Nex Services North America Llc Corp Trust Center Process and apparatus for order entry in an electronic trading system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011150652A (ja) * 2010-01-25 2011-08-04 Mitsubishi Research Institute Inc Ｖｗａｐ取引市場システムおよびｖｗａｐ取引方法
CN106204000A (zh) * 2016-07-05 2016-12-07 康存乐付保数据科技（上海）有限公司 一种服务消费支付信息处理方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
电子交易市场实时拍卖系统分析及设计;赵颂璋;《农业网络信息》;20081226(第12期);全文 *

Also Published As

Publication number Publication date
CN111324473A (zh) 2020-06-23

Similar Documents

Publication Publication Date Title
US8209690B2 (en) System and method for thread handling in multithreaded parallel computing of nested threads
CN104915407B (zh) 一种基于Hadoop多作业环境下的资源调度方法
CN110908788B (zh) 基于Spark Streaming的数据处理方法、装置、计算机设备及存储介质
CN110569312B (zh) 一种基于gpu的大数据快速检索系统及其使用方法
CN111078436A (zh) 数据处理的方法、装置、设备及存储介质
CN105160570A (zh) 一种可水平扩展的并发在线交易处理方法
CN110795254A (zh) 一种基于php处理高并发io的方法
CN104683472A (zh) 一种支持大数据量的数据传输方法
CN111324473B (zh) 可实现高并发处理交易信息的拍卖交易系统
CN102457578A (zh) 一种基于事件机制的分布式网络监控方法
CN102625144A (zh) 基于局域网云网络的并行视频处理方法
CN104468710A (zh) 一种混合大数据处理系统及处理方法
CN102201922A (zh) 一种数据计费方法和相关装置
CN110879753B (zh) 基于自动化集群资源管理的gpu加速性能优化方法和系统
CN110633302B (zh) 一种海量结构化数据的处理方法及装置
CN115391053B (zh) 基于cpu和gpu混合计算的在线服务方法及装置
CN112395062A (zh) 任务处理方法、装置、设备及计算机可读存储介质
Singh et al. A priority heuristic policy in mobile distributed real-time database system
CN110233892A (zh) Cdn热点资源处理方法、系统及全局热片调度系统
CN115525666A (zh) 一种实时数据更新方法、装置、电子设备及存储介质
CN115168012A (zh) 一种线程池并发线程数确定方法及相关产品
CN111724262B (zh) 一种应用服务器后续包查询系统及其工作方法
CN103631659A (zh) 一种片上网络中面向通信能耗的调度优化方法
CN114339266A (zh) 一种基于国产cpu和操作系统的视频流队列处理方法
CN112434036A (zh) 一种账户管理系统数据的处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant