CN107247763A - 业务数据统计方法、装置、系统、存储介质及电子设备 - Google Patents
业务数据统计方法、装置、系统、存储介质及电子设备 Download PDFInfo
- Publication number
- CN107247763A CN107247763A CN201710406179.4A CN201710406179A CN107247763A CN 107247763 A CN107247763 A CN 107247763A CN 201710406179 A CN201710406179 A CN 201710406179A CN 107247763 A CN107247763 A CN 107247763A
- Authority
- CN
- China
- Prior art keywords
- data information
- real
- database
- display data
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007619 statistical method Methods 0.000 title claims abstract description 19
- 230000015654 memory Effects 0.000 claims abstract description 22
- 230000000737 periodic effect Effects 0.000 claims description 40
- 238000000034 method Methods 0.000 claims description 26
- 230000004044 response Effects 0.000 claims description 14
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2462—Approximate or statistical queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/12—Accounting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/548—Queue
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Computational Linguistics (AREA)
- Probability & Statistics with Applications (AREA)
- Accounting & Taxation (AREA)
- General Business, Economics & Management (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种业务数据统计方法、服务器、系统、存储介质及电子设备,该业务数据统计方法包括接收到实时业务数据信息;根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。实施本发明,通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
Description
技术领域
本发明涉及数据统计领域,尤其涉及一种业务数据统计方法、装置、系统、存储介质及电子设备。
背景技术
在金融企业运营和管理过程中,为了能够及时正确地做出管理决策,需要随时了解公司业务的各项数据,常常需要对一些业务数据进行汇总分析,如实时交易金额、交易笔数、用户投资类型等。
目前的数据统计方法,一般是把大量数据存储到数据库中去,而且需要针对业务特性进行数据库设计,然后再通过需求把数据从数据库中统计出来。例如,通过hadoop等进行数据统计存储。上述方式实现和部署复杂慢,适用一些需要长期分析的数据,但不适用于轻量,部署要求快、实时的数据统计需求,无法满足快速业务统计的需求。
发明内容
本发明的目的在于克服现有技术的数据统计方法无法满足实时的数据统计需求的不足,提供一种业务数据统计方法、装置、系统、存储介质及电子设备。
本发明技术方案提供一种业务数据统计方法,包括:
接收到实时业务数据信息;
根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
进一步的,所述第一数据库的响应时间小于所述第二数据库的响应时间。
进一步的,所述接收到实时业务数据信息,具体包括:
将接收到的所述实时业务数据信息加入消息队列;
解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
进一步的,所述业务数据统计方法还包括:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
进一步的,所述业务数据统计方法还包括:
接收到业务统计请求;
根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送所述实时展现数据信息或所述明细展现数据信息。
本发明技术方案提供一种业务数据统计装置,包括:
实时业务数据信息接收模块,用于接收实时业务数据信息;
统计模块,用于根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
存储模块,用于将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
进一步的,所述第一数据库的响应时间小于所述第二数据库的响应时间。
进一步的,所述实时业务数据信息接收模块,具体包括:
消息队列接收单元,用于将接收到的所述实时业务数据信息加入消息队列;
解析单元,用于解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
进一步的,所述统计模块,还用于:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
进一步的,所述业务数据统计装置还包括:
业务统计请求接收模块,用于接收业务统计请求;
获取模块,用于根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送模块,用于发送所述实时展现数据信息或所述明细展现数据信息。
本发明技术方案提供一种业务数据统计系统,包括如前所述的业务数据统计装置和业务应用服务器,所述业务数据统计装置与所述业务应用服务器通信连接,其中:
业务应用服务器,用于向所述业务数据统计装置发送实时业务数据信息和/或业务统计请求。
进一步的,所述业务应用服务器,具体用于:
向所述业务数据统计装置发送包含所述实时业务数据信息的消息队列。
进一步的,所述业务数据统计系统还包括:
消息队列管理服务器,用于管理和监控所述消息队列。
本发明技术方案提供的一种存储介质,所述存储介质存储计算机指令,当计算机执行所述计算机指令时,用于执行如前所述的业务数据统计方法的所有步骤。
本发明技术方案提供一种电子设备,包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:
接收到实时业务数据信息;
根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
进一步的,所述第一数据库的响应时间小于所述第二数据库的响应时间。
进一步的,将接收到的所述实时业务数据信息加入消息队列;
解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
进一步的,所述至少一个处理器还能够:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
进一步的,所述至少一个处理器还能够:
接收到业务统计请求;
根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送所述实时展现数据信息或所述明细展现数据信息。
采用上述技术方案后,具有如下有益效果:通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
附图说明
参见附图,本发明的公开内容将变得更易理解。应当理解:这些附图仅仅用于说明的目的,而并非意在对本发明的保护范围构成限制。图中:
图1是本发明一实施例提供的一种业务数据统计方法的流程示意图;
图2是本发明可选实施例提供的一种业务数据统计方法的流程示意图;
图3是本发明另一实施例提供的一种业务数据统计方法的流程示意图;
图4是本发明一实施例提供的一种业务数据统计装置的结构示意图;
图5是本发明可选实施例提供的一种业务数据统计装置的结构示意图;
图6是本发明另一实施例提供的一种业务数据统计装置的结构示意图;
图7是本发明一实施例提供的一种业务数据统计系统的结构示意图;
图8是本发明可选实施例提供的一种业务数据统计系统的结构示意图;
图9是本发明第十实施例提供的一种执行业务数据统计方法的电子设备的硬件结构示意图。
具体实施方式
下面结合附图来进一步说明本发明的具体实施方式。
容易理解,根据本发明的技术方案,在不变更本发明实质精神下,本领域的一般技术人员可相互替换的多种结构方式以及实现方式。因此,以下具体实施方式以及附图仅是对本发明的技术方案的示例性说明,而不应当视为本发明的全部或视为对发明技术方案的限定或限制。
在本说明书中提到或者可能提到的上、下、左、右、前、后、正面、背面、顶部、底部等方位用语是相对于各附图中所示的构造进行定义的,它们是相对的概念,因此有可能会根据其所处不同位置、不同使用状态而进行相应地变化。所以,也不应当将这些或者其他的方位用语解释为限制性用语。
实施例一
图1所示为本发明一实施例提供的一种业务数据统计方法的流程示意图,包括:
步骤S101:接收到实时业务数据信息;
步骤S102:根据统计需求对实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
步骤S103:将实时展现数据信息存储至第一数据库,明细展现数据存储至第二数据库。
具体来说,实时展现数据信息包括某个实时业务的交易金额和交易笔数,明细展现数据信息包括交易金额、业务名称、交易名称、交易时间、交易方式、交易地点等某个或某些业务的明细数据,当产生实时业务交易时,业务应用服务器将实时业务数据信息发送至业务数据统计装置,业务数据统计装置根据统计需求将实时产生的实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,便于随时查看。
优选地,第一数据库的响应时间小于第二数据库的响应时间。
具体的,第一数据库为Redis数据库,第二数据库为ElasticSearch数据库,Redis数据库是一个“键-值”数据库,即“key-value”数据库,本发明实施例将实时业务数据信息按照key-value进行统计,生成实时展现数据信息,提高统计速度。ElasticSearch数据库是一个搜索服务器,也可以存储海量的数据,本发明实施例将实时业务数据信息按照具体明细数据进行统计,生成明细展现数据信息,便于汇总检索。
优选地,业务数据统计方法也可以根据一定周期对实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将周期实时展现数据信息存储至第一数据库,周期明细展现数据信息存储至第二数据库。该周期为一个固定的周期,如一天、一个星期、一个月、一年等。
通过实施本发明实施例,通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
实施例二
图2所示为本发明可选实施例提供的一种业务数据统计方法的流程示意图,包括:
步骤S201:将接收到的实时业务数据信息加入消息队列;
步骤S202:解析消息队列,从消息队列中获取实时业务数据信息;
步骤S203:根据统计需求对实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
步骤S204:将实时展现数据信息存储至第一数据库,明细展现数据信息存储至第二数据库。
具体来说,当业务应用服务器产生实时业务交易时,业务应用服务器将实时业务数据信息通过消息队列(Message Queue,MQ)发送至业务数据统计装置中,业务数据统计装置接收到MQ消息之后,解析MQ消息,获取实时业务数据信息,根据统计需求对实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库中,通过业务应用服务器与业务数据统计装置之间进行无需直接通讯,提高业务数据统计装置高并发条件下的处理能力。
通过实施本发明实施例,通过消息中间件MQ异步解耦,使业务应用服务器与业务数据统计装置之间无需直接通讯,提高业务数据统计装置高并发条件下的处理能力。
实施例三
图3所示为本发明另一实施例提供的一种业务数据统计方法的流程示意图,包括:
步骤S301:接收到业务统计请求;
步骤S302:根据业务统计请求,向第一数据库获取实时展现数据信息,或向第二数据库获取明细展现数据信息;
步骤S303:发送实时展现数据信息或明细展现数据信息。
具体来说,当用户需要查看实时展现数据信息时,业务应用服务器将业务统计请求发送至业务数据统计装置,业务数据统计装置接收到业务统计请求之后,根据业务统计请求向第一数据库获取实时展现数据信息,并返回实时展现数据信息至业务应用服务器。当用户需要查看明细展现数据信息时,业务应用服务器将业务统计请求发送至业务数据统计装置,业务数据统计装置接收到业务统计请求之后,根据业务统计请求向第二数据库获取明细展现数据信息,并返回明细展现数据信息至业务应用服务器。
通过实施本发明实施例,根据不同的统计需求,向不同的数据库进行汇总检索,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
实施例四
图4所示为本发明一实施例提供的一种业务数据统计装置的结构示意图,包括:
实时业务数据信息接收模块41,用于接收实时业务数据信息;
统计模块42,用于根据统计需求对实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
存储模块43,用于将实时展现数据信息存储至第一数据库,明细展现数据信息存储至第二数据库。
具体的,第一数据库为Redis数据库,第二数据库为ElasticSearch数据库,Redis数据库是一个“键-值”数据库,即“key-value”数据库,本发明实施例将实时业务数据信息按照key-value进行统计,生成实时展现数据信息,提高统计速度。ElasticSearch数据库是一个搜索服务器,也可以存储海量的数据,本发明实施例将实时业务数据信息按照具体明细数据进行统计,生成明细展现数据信息,便于汇总检索。
通过实施本发明实施例,通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
优选地,统计模块42,还用于:
根据一定周期对实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将周期实时展现数据信息存储至第一数据库,周期明细展现数据信息存储至第二数据库。
具体的,该周期为一个固定的周期,如一天、一个星期、一个月、一年等。
实施例五
图5所示为本发明可选实施例提供的一种业务数据统计装置的结构示意图,包括:
消息队列接收单元51,用于将接收到的实时业务数据信息加入消息队列;
解析单元52,用于解析所述消息队列,从消息队列中获取实时业务数据信息;
统计模块53,用于根据统计需求对实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
存储模块54,用于将实时展现数据信息存储至第一数据库,明细展现数据信息存储至第二数据库。
通过实施本发明实施例,通过消息中间件MQ异步解耦,使业务应用服务器与业务数据统计装置之间无需直接通讯,提高业务数据统计装置高并发条件下的处理能力。
实施例六
图6所示为本发明另一实施例提供的一种业务数据统计装置的结构示意图,包括:
业务统计请求接收模块61,用于接收业务统计请求;
获取模块62,用于根据业务统计请求,向第一数据库获取实时展现数据信息,或向第二数据库获取明细展现数据信息;
发送模块63,用于发送实时展现数据信息或明细展现数据信息。
通过实施本发明实施例,根据不同的统计需求,向不同的数据库进行汇总检索,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
实施例七
图7所示为本发明一实施例提供的一种业务数据统计系统的结构示意图,包括如前所述的业务数据统计装置71和业务应用服务器72,业务数据统计装置71与业务应用服务器72通信连接,其中:
业务应用服务器72,用于向业务数据统计装置71发送实时业务数据信息和/或业务统计请求。
通过实施本发明实施例,通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。
实施例八
图8所示为本发明一实施例提供的一种业务数据统计系统的结构示意图,包括如前所述的业务数据统计装置81、业务应用服务器82和消息队列管理服务器83,消息队列管理服务器83分别与业务数据统计装置81和业务应用服务器82通信连接,其中:
业务应用服务器82,用于向业务数据统计装置81发送包含实时业务数据信息的消息队列;
消息队列管理服务器83,用于管理和监控消息队列。
具体来说,消息队列管理服务器83管理配置MQ消息的基本信息,维护MQ消息的topic信息和tag信息,配置MQ消息的统一资源定位符(Uniform Resoure Locator,URL)地址,监控MQ消息的产生和实时业务交易的产生,并对异常未交易的MQ消息进行报警,同时监控MQ消息发送异常,当MQ消息发送失败时,记录失败原因,并下发发送失败的MQ消息。
通过实施本发明实施例,通过将实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息,并分别存储至第一数据库和第二数据库,实现不同需求的实时业务数据统计,减少数据库的负荷,增加服务器的高可用性,提高处理能力。同时通过消息队列管理服务器对消息队列进行监控和管理,防止业务交易丢失,提高准确性。
实施例九
本发明第九实施例提供了一种存储介质,存储介质存储计算机指令,当计算机执行计算机指令时,用于执行如前所述的业务数据统计方法的所有步骤。
实施例十
图9所示为本发明第十实施例提供的一种执行业务数据统计方法的电子设备的硬件结构示意图,其主要包括:至少一个处理器91;以及,与至少一个处理器91通信连接的存储器92;其中,所述存储器92存储有可被一个处理器91执行的指令,指令被至少一个处理器91执行,以使至少一个处理器91能够执行如图1-图3所示的方法流程。
执行业务数据统计方法的电子设备还可以包括:输入装置93和输出装置94。
处理器91、存储器92、输入装置93及输出装置94可以通过总线或者其他方式连接,图9中以通过总线连接为例。
存储器92作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本申请实施例中的业务数据统计方法对应的程序指令/模块,例如,图1-图3所示的方法流程和图4-图6所示的实时业务数据信息接收模块、统计模块、存储模块、消息队列接收单元、解析单元、业务统计请求接收模块、获取模块和发送模块。处理器91通过运行存储在存储器92中的非易失性软件程序、指令以及模块,从而执行各种功能应用以及数据处理,即实现上述实施例中的业务数据统计方法。
存储器92可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储业务数据统计装置的使用所创建的数据等。此外,存储器92可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器92可选包括相对于处理器91远程设置的存储器,这些远程存储器可以通过网络连接至执行业务数据统计方法的装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置93可接收输入的用户点击,以及产生与业务数据统计装置的用户设置以及功能控制有关的信号输入。输出装置94可包括显示屏等显示设备。
在所述一个或者多个模块存储在存储器92中,当被一个或者多个处理器91运行时,执行上述任意方法实施例中的业务数据统计方法。
上述产品可执行本申请实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请实施例所提供的方法。
本发明实施例的电子设备以多种形式存在,包括但不限于:
(1)电子控制单元(Electronic Control Unit,ECU)又称“行车电脑”、“车载电脑”等。主要由微处理器(CPU)、存储器(ROM、RAM)、输入/输出接口(I/O)、模数转换器(A/D)以及整形、驱动等大规模集成电路组成。
(2)移动通信设备:这类设备的特点是具备移动通信功能,并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机,以及低端手机等。
(3)超移动个人计算机设备:这类设备属于个人计算机的范畴,有计算和处理功能,一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等。
(4)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如iPod),掌上游戏机,电子书,以及智能玩具和便携式车载导航设备。
(5)服务器:提供计算服务的设备,服务器的构成包括处理器、硬盘、内存、系统总线等,服务器和通用的计算机架构类似,但是由于需要提供高可靠的服务,因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(6)其他具有数据交互功能的电子装置。
此外,上述的存储器92中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台移动终端(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件服务器的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明实施例的技术方案,而非对其限制;尽管参照前述实施例对本发明实施例进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (19)
1.一种业务数据统计方法,其特征在于,包括:
接收到实时业务数据信息;
根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
2.如权利要求1所述的业务数据统计方法,其特征在于,所述第一数据库的响应时间小于所述第二数据库的响应时间。
3.如权利要求1所述的业务数据统计方法,其特征在于,所述接收到实时业务数据信息,具体包括:
将接收到的所述实时业务数据信息加入消息队列;
解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
4.如权利要求1所述的业务数据统计方法,其特征在于,所述业务数据统计方法还包括:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
5.如权利要求1所述的业务数据统计方法,其特征在于,所述业务数据统计方法还包括:
接收到业务统计请求;
根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送所述实时展现数据信息或所述明细展现数据信息。
6.一种业务数据统计装置,其特征在于,包括:
实时业务数据信息接收模块,用于接收实时业务数据信息;
统计模块,用于根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
存储模块,用于将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
7.如权利要求6所述的业务数据统计装置,其特征在于,所述第一数据库的响应时间小于所述第二数据库的响应时间。
8.如权利要求6所述的业务数据统计装置,其特征在于,所述实时业务数据信息接收模块,具体包括:
消息队列接收单元,用于将接收到的所述实时业务数据信息加入消息队列;
解析单元,用于解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
9.如权利要求6所述的业务数据统计装置,其特征在于,所述统计模块,还用于:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
10.如权利要求6所述的业务数据统计装置,其特征在于,所述业务数据统计装置还包括:
业务统计请求接收模块,用于接收业务统计请求;
获取模块,用于根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送模块,用于发送所述实时展现数据信息或所述明细展现数据信息。
11.一种业务数据统计系统,其特征在于,包括如权利要求6-10任一项所述的业务数据统计装置和业务应用服务器,所述业务数据统计装置与所述业务应用服务器通信连接,其中:
业务应用服务器,用于向所述业务数据统计装置发送实时业务数据信息和/或业务统计请求。
12.如权利要求11所述的业务数据统计系统,其特征在于,所述业务应用服务器,具体用于:
向所述业务数据统计装置发送包含所述实时业务数据信息的消息队列。
13.如权利要求12所述的业务数据统计系统,其特征在于,所述业务数据统计系统还包括:
消息队列管理服务器,用于管理和监控所述消息队列。
14.一种存储介质,其特征在于,所述存储介质存储计算机指令,当计算机执行所述计算机指令时,用于执行如权利要求1~5任一项所述的业务数据统计方法的所有步骤。
15.一种电子设备,其特征在于,包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:
接收到实时业务数据信息;
根据统计需求对所述实时业务数据信息进行统计,生成实时展现数据信息和明细展现数据信息;
将所述实时展现数据信息存储至第一数据库,所述明细展现数据信息存储至第二数据库。
16.如权利要求15所述的电子设备,其特征在于,所述第一数据库的响应时间小于所述第二数据库的响应时间。
17.如权利要求15所述的电子设备,其特征在于,所述接收到实时业务数据信息,具体包括:
将接收到的所述实时业务数据信息加入消息队列;
解析所述消息队列,从所述消息队列中获取所述实时业务数据信息。
18.如权利要求15所述的电子设备,其特征在于,所述至少一个处理器还能够:
根据一定周期对所述实时业务数据信息进行周期统计,生成周期实时展现数据信息和周期明细展现数据信息,并将所述周期实时展现数据信息存储至所述第一数据库,所述周期明细展现数据信息存储至所述第二数据库。
19.如权利要求15所述的电子设备,其特征在于,所述至少一个处理器还能够:
接收到业务统计请求;
根据所述业务统计请求,向所述第一数据库获取所述实时展现数据信息,或向所述第二数据库获取所述明细展现数据信息;
发送所述实时展现数据信息或所述明细展现数据信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710406179.4A CN107247763A (zh) | 2017-05-31 | 2017-05-31 | 业务数据统计方法、装置、系统、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710406179.4A CN107247763A (zh) | 2017-05-31 | 2017-05-31 | 业务数据统计方法、装置、系统、存储介质及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107247763A true CN107247763A (zh) | 2017-10-13 |
Family
ID=60017852
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710406179.4A Pending CN107247763A (zh) | 2017-05-31 | 2017-05-31 | 业务数据统计方法、装置、系统、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107247763A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108427711A (zh) * | 2018-01-31 | 2018-08-21 | 北京三快在线科技有限公司 | 实时数据仓库、实时数据处理方法、电子设备及存储介质 |
CN110502566A (zh) * | 2019-08-29 | 2019-11-26 | 江苏满运软件科技有限公司 | 近实时数据采集方法、装置、电子设备、存储介质 |
CN110727727A (zh) * | 2019-10-15 | 2020-01-24 | 深圳前海微众银行股份有限公司 | 一种数据库的统计方法及装置 |
CN111200517A (zh) * | 2019-12-24 | 2020-05-26 | 苏州达家迎信息技术有限公司 | 一种业务数据预警控制方法、装置、设备及存储介质 |
CN112036739A (zh) * | 2020-08-28 | 2020-12-04 | 广东电网有限责任公司电力调度控制中心 | 电力市场现货系统业务流程交互方法、终端及存储介质 |
CN112395115A (zh) * | 2020-12-25 | 2021-02-23 | 北京弘远博学科技有限公司 | 实时成绩处理方法、装置、电子设备及计算机可读介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102567471A (zh) * | 2011-12-13 | 2012-07-11 | 华东师范大学 | 一种基于信息增益计算的海量数据异常侦测方法 |
CN103916293A (zh) * | 2014-04-15 | 2014-07-09 | 浪潮软件股份有限公司 | 一种监控分析网站用户行为的方法 |
US9336484B1 (en) * | 2011-09-26 | 2016-05-10 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration (Nasa) | System and method for outlier detection via estimating clusters |
CN105893559A (zh) * | 2016-03-31 | 2016-08-24 | 北京奇艺世纪科技有限公司 | 一种数据推送方法及装置 |
CN106202081A (zh) * | 2015-04-30 | 2016-12-07 | 阿里巴巴集团控股有限公司 | 实时数据处理方法及装置 |
CN106533782A (zh) * | 2016-12-01 | 2017-03-22 | 北京雷石天地电子技术有限公司 | 一种实时发现线下场所业务故障的方法和系统 |
CN106708996A (zh) * | 2016-12-19 | 2017-05-24 | 北京天广汇通科技有限公司 | 用于对关系数据库进行全文搜索的方法及系统 |
-
2017
- 2017-05-31 CN CN201710406179.4A patent/CN107247763A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9336484B1 (en) * | 2011-09-26 | 2016-05-10 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration (Nasa) | System and method for outlier detection via estimating clusters |
CN102567471A (zh) * | 2011-12-13 | 2012-07-11 | 华东师范大学 | 一种基于信息增益计算的海量数据异常侦测方法 |
CN103916293A (zh) * | 2014-04-15 | 2014-07-09 | 浪潮软件股份有限公司 | 一种监控分析网站用户行为的方法 |
CN106202081A (zh) * | 2015-04-30 | 2016-12-07 | 阿里巴巴集团控股有限公司 | 实时数据处理方法及装置 |
CN105893559A (zh) * | 2016-03-31 | 2016-08-24 | 北京奇艺世纪科技有限公司 | 一种数据推送方法及装置 |
CN106533782A (zh) * | 2016-12-01 | 2017-03-22 | 北京雷石天地电子技术有限公司 | 一种实时发现线下场所业务故障的方法和系统 |
CN106708996A (zh) * | 2016-12-19 | 2017-05-24 | 北京天广汇通科技有限公司 | 用于对关系数据库进行全文搜索的方法及系统 |
Non-Patent Citations (1)
Title |
---|
高宇琦: ""数据库技术在铁厂高炉自控系统中的应用"", 《山西电子技术》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108427711A (zh) * | 2018-01-31 | 2018-08-21 | 北京三快在线科技有限公司 | 实时数据仓库、实时数据处理方法、电子设备及存储介质 |
CN110502566A (zh) * | 2019-08-29 | 2019-11-26 | 江苏满运软件科技有限公司 | 近实时数据采集方法、装置、电子设备、存储介质 |
CN110502566B (zh) * | 2019-08-29 | 2022-09-09 | 江苏满运软件科技有限公司 | 近实时数据采集方法、装置、电子设备、存储介质 |
CN110727727A (zh) * | 2019-10-15 | 2020-01-24 | 深圳前海微众银行股份有限公司 | 一种数据库的统计方法及装置 |
CN110727727B (zh) * | 2019-10-15 | 2023-01-10 | 深圳前海微众银行股份有限公司 | 一种数据库的统计方法及装置 |
CN111200517A (zh) * | 2019-12-24 | 2020-05-26 | 苏州达家迎信息技术有限公司 | 一种业务数据预警控制方法、装置、设备及存储介质 |
CN112036739A (zh) * | 2020-08-28 | 2020-12-04 | 广东电网有限责任公司电力调度控制中心 | 电力市场现货系统业务流程交互方法、终端及存储介质 |
CN112395115A (zh) * | 2020-12-25 | 2021-02-23 | 北京弘远博学科技有限公司 | 实时成绩处理方法、装置、电子设备及计算机可读介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107247763A (zh) | 业务数据统计方法、装置、系统、存储介质及电子设备 | |
US20170364697A1 (en) | Data interworking method and data interworking device | |
CN111209352B (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
US7912949B2 (en) | Systems and methods for recording changes to a data store and propagating changes to a client application | |
US20170185454A1 (en) | Method and Electronic Device for Determining Resource Consumption of Task | |
CN106815254B (zh) | 一种数据处理方法和装置 | |
US9588813B1 (en) | Determining cost of service call | |
CN111339073A (zh) | 实时数据处理方法、装置、电子设备及可读存储介质 | |
CN111352800A (zh) | 大数据集群监控方法及相关设备 | |
CN112236760B (zh) | 一种图数据的更新方法、系统、计算机可读存储介质及设备 | |
CN112559301B (zh) | 业务处理方法、存储介质、处理器及电子装置 | |
CN111782473A (zh) | 分布式日志数据处理方法、装置及系统 | |
CN107566480B (zh) | 移动终端应用的用户活动信息采集方法及装置、存储介质 | |
CN113794719A (zh) | 一种基于Elasticsearch技术网络异常流量分析方法、装置和电子设备 | |
CN105162837A (zh) | 海量数据存储环境下提升i/o吞吐率的方法及系统 | |
CN112506887A (zh) | 车辆终端can总线数据处理方法及装置 | |
CN112052398A (zh) | 媒体信息推荐方法、装置、电子设备及存储介质 | |
CN109308219B (zh) | 任务处理方法、装置及分布式计算机系统 | |
CN109218411B (zh) | 数据处理方法及装置、计算机可读存储介质、电子设备 | |
CN110020166A (zh) | 一种数据分析方法及相关设备 | |
CN113176955A (zh) | 物联网设备数据处理方法及装置 | |
CN113778977A (zh) | 数据处理方法和数据处理装置 | |
CN112367540A (zh) | 在线直播推流数监控的方法、装置、计算机设备 | |
CN103856359A (zh) | 获取信息的方法和系统 | |
CN112751893A (zh) | 一种消息轨迹数据的处理方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20171013 |