CN115718754A - 电子会计档案数据的查询方法、装置和电子设备 - Google Patents
电子会计档案数据的查询方法、装置和电子设备 Download PDFInfo
- Publication number
- CN115718754A CN115718754A CN202211424597.3A CN202211424597A CN115718754A CN 115718754 A CN115718754 A CN 115718754A CN 202211424597 A CN202211424597 A CN 202211424597A CN 115718754 A CN115718754 A CN 115718754A
- Authority
- CN
- China
- Prior art keywords
- clickhouse
- data
- cluster
- electronic accounting
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 238000004458 analytical method Methods 0.000 claims abstract description 24
- 230000015654 memory Effects 0.000 claims description 14
- 238000012545 processing Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 4
- 238000012360 testing method Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013499 data model Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种电子会计档案数据的查询方法、装置和电子设备,包括:获取用户发送的电子会计档案数据的操作请求;对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;接收ClickHouse集群返回的数据库操作结果。本发明的电子会计档案数据的查询方法中,合思易会档系统平台使用的是ClickHouse集群构建的分布式数据库,能够实现批量数据的实时写入,实时搜索,能实现亿万级数据毫秒级响应的查询体验。
Description
技术领域
本发明涉及数据库的技术领域,尤其是涉及一种电子会计档案数据的查询方法、装置和电子设备。
背景技术
目前,合思易会档系统平台会接入各类海量第三方电子会计档案数据,如记账凭证、原始单据、银行电子回单、增值税发票等信息,格式化数据量达到几千万甚至上亿。
上述系统平台目前使用中心化数据库mysql作为业务数据库,几千万到上亿的数据量放在同一张表,日常的业务查询速度偏慢。随着数据量的进一步提升,业务查询更慢,一些数据的查询一般需要几百秒的时间,已经无法满足日常业务的需求。
综上,现有的电子会计档案数据的查询方法存在查询速度慢、耗时严重的技术问题。
发明内容
有鉴于此,本发明的目的在于提供一种电子会计档案数据的查询方法、装置和电子设备,以缓解现有的电子会计档案数据的查询方法查询速度慢、耗时严重的技术问题。
第一方面,本发明实施例提供了一种电子会计档案数据的查询方法,应用于合思易会档系统平台,其中,所述合思易会档系统平台的分布式数据库由ClickHouse集群构建,所述方法包括:
获取用户发送的电子会计档案数据的操作请求;
对所述操作请求进行数据库模型解析,得到对应的用于对所述ClickHouse集群进行操作的SQL语句;
将所述SQL语句发送至所述ClickHouse集群,以使所述ClickHouse集群根据所述SQL语句执行对应的数据库操作;
接收所述ClickHouse集群返回的数据库操作结果。
进一步的,所述操作请求的发送形式包括以下任一种:API形式、操作指令的形式,且所述操作请求包括以下至少之一:增加请求、删除请求、修改请求和查询请求。
进一步的,对所述操作请求进行数据库模型解析,包括:
根据所述操作请求中携带的数据类型确定与所述数据类型对应的待操作ClickHouse表;
确定所述操作请求中携带的目标操作类型和待操作字段,其中,所述目标操作类型包括以下至少之一:增加操作、删除操作、修改操作和查询操作;
基于所述待操作ClickHouse表、所述目标操作类型和所述待操作字段构建对应的用于对所述ClickHouse集群进行操作的SQL语句。
进一步的,在获取用户发送的电子会计档案数据的操作请求之前,所述方法还包括:
确定不同数据类型的所述电子会计档案数据包含的字段信息;
根据每种数据类型的所述电子会计档案数据包含的字段信息确定每种数据类型的所述电子会计档案数据对应的数据库模型,进而根据所述数据库模型在所述ClickHouse集群中创建对应的ClickHouse表,其中,每种数据类型对应一张ClickHouse表,所述ClickHouse表为空表;
根据当前的电子会计档案数据的数据类型将所述电子会计档案数据导入对应的ClickHouse表中。
进一步的,根据当前的电子会计档案数据的数据类型将所述电子会计档案数据导入对应的ClickHouse表中,包括:
对所述电子会计档案数据包含的字段信息进行识别;
确定识别到的字段信息对应的数据库模型中的标准字段,进而将字段信息对应的电子会计档案数据导入与所述数据类型对应的ClickHouse表中标准字段的位置。
进一步的,所述ClickHouse集群包括:3个以上的ClickHouse服务节点,2n+1个ZooKeeper节点,n>0,且n为自然数。
进一步的,所述合思易会档系统平台与所述ClickHouse集群连接,所述方法还包括:
对所述ClickHouse集群进行数据库操作测试,以确保所述ClickHouse集群的状态可用。
第二方面,本发明实施例还提供了一种电子会计档案数据的查询装置,应用于合思易会档系统平台,其中,所述合思易会档系统平台的分布式数据库由ClickHouse集群构建,所述装置包括:
获取单元,用于获取用户发送的电子会计档案数据的操作请求;
数据库模型解析单元,用于对所述操作请求进行数据库模型解析,得到对应的用于对所述ClickHouse集群进行操作的SQL语句;
发送单元,用于将所述SQL语句发送至所述ClickHouse集群,以使所述ClickHouse集群根据所述SQL语句执行对应的数据库操作;
接收单元,用于接收所述ClickHouse集群返回的数据库操作结果。
第三方面,本发明实施例还提供了一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面任一项所述的方法的步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有机器可运行指令,所述机器可运行指令在被处理器调用和运行时,所述机器可运行指令促使所述处理器运行上述第一方面任一项所述的方法。
在本发明实施例中,提供了一种电子会计档案数据的查询方法,应用于合思易会档系统平台,其中,合思易会档系统平台的分布式数据库由ClickHouse集群构建,该方法包括:获取用户发送的电子会计档案数据的操作请求;对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;接收ClickHouse集群返回的数据库操作结果。通过上述描述可知,本发明的电子会计档案数据的查询方法中,合思易会档系统平台使用的是ClickHouse集群构建的分布式数据库,能够实现批量数据的实时写入,实时搜索,能实现亿万级数据毫秒级响应的查询体验,缓解了现有的电子会计档案数据的查询方法查询速度慢、耗时严重的技术问题。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种电子会计档案数据的查询方法的流程图;
图2为本发明实施例提供的对操作请求进行数据库模型解析的流程图;
图3为本发明实施例提供的一种电子会计档案数据的查询装置的示意图;
图4为本发明实施例提供的一种电子设备的示意图。
具体实施方式
下面将结合实施例对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前,合思易会档系统平台使用中心化数据库mysql作为业务数据库,几千万到上亿的数据量放在同一张表,日常的业务查询速度偏慢。随着数据量的进一步提升,业务查询更慢,一些数据的查询一般需要几百秒的时间,已经无法满足日常业务的需求。
基于此,本发明的电子会计档案数据的查询方法中,合思易会档系统平台使用的是ClickHouse集群构建的分布式数据库,能够实现批量数据的实时写入,实时搜索,能实现亿万级数据毫秒级响应的查询体验。
为便于对本实施例进行理解,首先对本发明实施例所公开的一种电子会计档案数据的查询方法进行详细介绍。
实施例一:
根据本发明实施例,提供了一种电子会计档案数据的查询方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种电子会计档案数据的查询方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,获取用户发送的电子会计档案数据的操作请求;
在本发明实施例中,上述电子会计档案数据的查询方法可以应用于合思易会档系统平台,其中,合思易会档系统平台的分布式数据库由ClickHouse集群构建。
ClickHouse是俄罗斯的Yandex于2016年开源的用于在线分析处理查询(OLAP:Online Analytical Processing)MPP架构的列式存储数据库(DBMS:Database ManagementSystem),能够使用SQL查询实时生成分析数据报告。ClickHouse的全称是Click Stream,Data WareHouse。
具体的,上述操作请求包括以下至少之一:增加请求、删除请求、修改请求和查询请求。
步骤S104,对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;
下文中再对该过程进行详细描述,在此不再赘述。
步骤S106,将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;
步骤S108,接收ClickHouse集群返回的数据库操作结果。
在本发明实施例中,提供了一种电子会计档案数据的查询方法,应用于合思易会档系统平台,其中,合思易会档系统平台的分布式数据库由ClickHouse集群构建,该方法包括:获取用户发送的电子会计档案数据的操作请求;对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;接收ClickHouse集群返回的数据库操作结果。通过上述描述可知,本发明的电子会计档案数据的查询方法中,合思易会档系统平台使用的是ClickHouse集群构建的分布式数据库,能够实现批量数据的实时写入,实时搜索,能实现亿万级数据毫秒级响应的查询体验,缓解了现有的电子会计档案数据的查询方法查询速度慢、耗时严重的技术问题。
上述内容对本发明的电子会计档案数据的查询方法进行了简要介绍,下面对其中设计到的具体内容进行详细描述。
在本发明的一个可选实施例中,操作请求的发送形式包括以下任一种:API形式、操作指令的形式,且操作请求包括以下至少之一:增加请求、删除请求、修改请求和查询请求。
具体的,可以通过API形式获取用户发送的电子会计档案数据的操作请求,还可以通过用户在交互终端输入操作指令的形式获取用户发送的电子会计档案数据的操作请求。
在本发明的一个可选实施例中,参考图2,上述步骤S104,对操作请求进行数据库模型解析,包括:
步骤S201,根据操作请求中携带的数据类型确定与数据类型对应的待操作ClickHouse表;
在本发明实施例中,不同的电子会计档案数据的数据类型分别对应有不同的ClickHouse表,例如,数据类型为记账凭证,对应的ClickHouse表为记账凭证数据表(即记账凭证ClickHouse表),数据类型为原始单据,对应的ClickHouse表为原始单据数据表(即原始单据ClickHouse表),数据类型为银行电子回单,对应的ClickHouse表为银行电子回单数据表(即银行电子回单ClickHouse表),数据类型为增值税发票,对应的ClickHouse表为增值税发票数据表(即增值税发票ClickHouse表)。
如果操作请求中携带的数据类型为记账凭证,那么待操作ClickHouse表为记账凭证数据表。
步骤S202,确定操作请求中携带的目标操作类型和待操作字段,其中,目标操作类型包括以下至少之一:增加操作、删除操作、修改操作和查询操作;
具体的,一般增删改操作对应的待操作ClickHouse表是一张,查询操作可能对应一张待操作ClickHouse表,联合查询可能对应多张待操作ClickHouse表,增删改查对应的ClickHouse执行的SQL语句分别有所不同。
步骤S203,基于待操作ClickHouse表、目标操作类型和待操作字段构建对应的用于对ClickHouse集群进行操作的SQL语句。
在构建SQL语句时,按照数据库模型进行构建,所谓的数据库模型是指ClickHouse集群中ClickHouse表中各字段所在的列,即ClickHouse表的各列表示的字段信息。
例如,增加操作对应的SQL语句可以为:insert into table_A values(1,'zhangsan'),(2,'lisi'),(3,'wangwu'),表示在table_A表中,增加(1,'zhangsan'),(2,'lisi'),(3,'wangwu')的值,其中,(1,'zhangsan'),(2,'lisi'),(3,'wangwu')便是table_A表的数据库模型,table_A表中包含两个字段,一个是id,另一个是姓名。
删除操作对应的SQL语句可以为:alter table table_A delete where id=1,表示删除table_A表中id=1的数据。
修改操作对应的SQL语句可以为:alter table table_A update name='zhangsan'where id=1,表示把table_A表中,id=1的这条数据的name更新为zhangsan。
查询操作对应的SQL语句可以为:select id,name from table_A,表示查询table_A表中的id和name。
在本发明的一个可选实施例中,在获取用户发送的电子会计档案数据的操作请求之前,该方法还包括:
(1)确定不同数据类型的电子会计档案数据包含的字段信息;
具体的,记账凭证包含的字段信息包括:凭证字、凭证号、科目、记账金额;原始单据包含的字段信息包括:单据号、报销人、报销部门、报销金额;增值税发票包含的字段信息包括:发票金额、税率、发票号码、发票代码、开票人的信息、开户行等,在此不再对不同数据类型的电子会计档案数据包含的字段信息进行举例说明。
(2)根据每种数据类型的电子会计档案数据包含的字段信息确定每种数据类型的电子会计档案数据对应的数据库模型,进而根据数据库模型在ClickHouse集群中创建对应的ClickHouse表,其中,每种数据类型对应一张ClickHouse表,ClickHouse表为空表;
例如,记账凭证包含的字段信息包括:凭证字、凭证号、科目、记账金额,进而确定记账凭证对应的数据库模型可以为第一列表示凭证字、第二列表示凭证号、第三列表示科目、第四列表示记账金额,进而便可在ClickHouse集群中创建与上述数据库模型对应的ClickHouse表,即为记账凭证数据表。在此不再一一举例说明。
(3)根据当前的电子会计档案数据的数据类型将电子会计档案数据导入对应的ClickHouse表中。
具体的,对电子会计档案数据包含的字段信息进行识别;确定识别到的字段信息对应的数据库模型中的标准字段,进而将字段信息对应的电子会计档案数据导入与数据类型对应的ClickHouse表中标准字段的位置。
不同的ClickHouse表存储的数据结构有所不同,对应的数据模型也不一致。ClickHouse表创建完成后,将电子会计档案数据,按照不同的数据类型分别导入对应的ClickHouse表中。本平台使用kotlin语言构建,那么根据不同的数据类型,本平台构建不同的Clickhouse搜索对应的数据模型(数据类型不一样的话,对应的字段就不一样,对应的字段不一样的话,搜索时候字段搜索的条件就不一样)。ClickHouse是列式数据库,那么不同表对应的列有所不同,相当于在本平台用kotlin构建不同成员变量的数据类模型。
在本发明的一个可选实施例中,ClickHouse集群包括:3个以上的ClickHouse服务节点,2n+1个ZooKeeper节点,n>0,且n为自然数。
上述ClickHouse集群用于存储海量电子会计档案数据,ZooKeeper节点用于对ClickHouse服务节点进行管理调度。
在搭建完ClickHouse集群后,将合思易会档系统平台与ClickHouse集群连接,进而对ClickHouse集群进行数据库操作测试(即数据的增删改查),以确保ClickHouse集群的状态可用。
本发明使用ClickHouse作为数据存储数据库,支持批量数据的实时写入,实时搜索,海量数据毫秒级返回,同时本发明的平台构建易会档ClickHouse解析引擎(电子会计档案数据的查询方法的最本质的执行主体为该解析引擎,为平台的一个功能),将用户的增删改查业务操作,通过解析引擎自动生成ClickHouse需要执行的SQL语句,降低开发难度。
本发明先构建ClickHouse集群作为分布式数据库用于存储海量数据,然后使用Kotlin语言实现数据模型类,再接收用户输入的业务操作请求并根据易会档ClickHouse解析引擎,对业务操作请求进行解析并转换成ClickHouse的SQL操作语句,最后将SQL语句提交至ClickHouse集群进行数据库操作,并返回操作结果至用户;本发明能够快速通过ClickHouse搭建海量的电子会计档案数据的解析引擎,并且根据合思易会档ClickHouse解析引擎解析用户业务操作,能得到亿万级数据毫秒级响应的查询体验;目前在国内电子会计档案行业内,还没有公开使用过类似技术的报告,填补了国内电子会计档案行业的技术空白。
本发明能够快速通过ClickHouse搭建基于电子会计档案数据的海量的解析引擎,并且根据易会档ClickHouse解析引擎,能实现海量数据的复杂查询而无需专业的编程开发人员,能得到亿万级数据毫秒级响应的查询体验。
实施例二:
本发明实施例还提供了一种电子会计档案数据的查询装置,该电子会计档案数据的查询装置主要用于执行本发明实施例一中所提供的电子会计档案数据的查询方法,以下对本发明实施例提供的电子会计档案数据的查询装置做具体介绍。
图3是根据本发明实施例的一种电子会计档案数据的查询装置的示意图,该装置应用于合思易会档系统平台,其中,合思易会档系统平台的分布式数据库由ClickHouse集群构建,如图3所示,该装置主要包括:获取单元10、数据库模型解析单元20、发送单元30和接收单元40,其中:
获取单元,用于获取用户发送的电子会计档案数据的操作请求;
数据库模型解析单元,用于对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;
发送单元,用于将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;
接收单元,用于接收ClickHouse集群返回的数据库操作结果。
在本发明实施例中,提供了一种电子会计档案数据的查询装置,应用于合思易会档系统平台,其中,合思易会档系统平台的分布式数据库由ClickHouse集群构建,该装置包括:获取用户发送的电子会计档案数据的操作请求;对操作请求进行数据库模型解析,得到对应的用于对ClickHouse集群进行操作的SQL语句;将SQL语句发送至ClickHouse集群,以使ClickHouse集群根据SQL语句执行对应的数据库操作;接收ClickHouse集群返回的数据库操作结果。通过上述描述可知,本发明的电子会计档案数据的查询装置中,合思易会档系统平台使用的是ClickHouse集群构建的分布式数据库,能够实现批量数据的实时写入,实时搜索,能实现亿万级数据毫秒级响应的查询体验,缓解了现有的电子会计档案数据的查询方法查询速度慢、耗时严重的技术问题。
可选地,操作请求的发送形式包括以下任一种:API形式、操作指令的形式,且操作请求包括以下至少之一:增加请求、删除请求、修改请求和查询请求。
可选地,数据库模型解析单元还用于:根据操作请求中携带的数据类型确定与数据类型对应的待操作ClickHouse表;确定操作请求中携带的目标操作类型和待操作字段,其中,目标操作类型包括以下至少之一:增加操作、删除操作、修改操作和查询操作;基于待操作ClickHouse表、目标操作类型和待操作字段构建对应的用于对ClickHouse集群进行操作的SQL语句。
可选地,该装置还用于:确定不同数据类型的电子会计档案数据包含的字段信息;根据每种数据类型的电子会计档案数据包含的字段信息确定每种数据类型的电子会计档案数据对应的数据库模型,进而根据数据库模型在ClickHouse集群中创建对应的ClickHouse表,其中,每种数据类型对应一张ClickHouse表,ClickHouse表为空表;根据当前的电子会计档案数据的数据类型将电子会计档案数据导入对应的ClickHouse表中。
可选地,该装置还用于:对电子会计档案数据包含的字段信息进行识别;确定识别到的字段信息对应的数据库模型中的标准字段,进而将字段信息对应的电子会计档案数据导入与数据类型对应的ClickHouse表中标准字段的位置。
可选地,ClickHouse集群包括:3个以上的ClickHouse服务节点,2n+1个ZooKeeper节点,n>0,且n为自然数。
可选地,合思易会档系统平台与ClickHouse集群连接,该装置还用于:对ClickHouse集群进行数据库操作测试,以确保ClickHouse集群的状态可用。
本发明实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
如图4所示,本申请实施例提供的一种电子设备600,包括:处理器601、存储器602和总线,所述存储器602存储有所述处理器601可执行的机器可读指令,当电子设备运行时,所述处理器601与所述存储器602之间通过总线通信,所述处理器601执行所述机器可读指令,以执行如上述电子会计档案数据的查询方法的步骤。
具体地,上述存储器602和处理器601能够为通用的存储器和处理器,这里不做具体限定,当处理器601运行存储器602存储的计算机程序时,能够执行上述电子会计档案数据的查询方法。
处理器601可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器601中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器601可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(DigitalSignal Processing,简称DSP)、专用集成电路(Application Specific IntegratedCircuit,简称ASIC)、现成可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器602,处理器601读取存储器602中的信息,结合其硬件完成上述方法的步骤。
对应于上述电子会计档案数据的查询方法,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有机器可运行指令,所述计算机可运行指令在被处理器调用和运行时,所述计算机可运行指令促使所述处理器运行上述电子会计档案数据的查询方法的步骤。
本申请实施例所提供的电子会计档案数据的查询装置可以为设备上的特定硬件或者安装于设备上的软件或固件等。本申请实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,前述描述的系统、装置和单元的具体工作过程,均可以参考上述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
再例如,附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请提供的实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述车辆标记方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释,此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
最后应说明的是:以上所述实施例,仅为本申请的具体实施方式,用以说明本申请的技术方案,而非对其限制,本申请的保护范围并不局限于此,尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本申请实施例技术方案的范围。都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种电子会计档案数据的查询方法,其特征在于,应用于合思易会档系统平台,其中,所述合思易会档系统平台的分布式数据库由ClickHouse集群构建,所述方法包括:
获取用户发送的电子会计档案数据的操作请求;
对所述操作请求进行数据库模型解析,得到对应的用于对所述ClickHouse集群进行操作的SQL语句;
将所述SQL语句发送至所述ClickHouse集群,以使所述ClickHouse集群根据所述SQL语句执行对应的数据库操作;
接收所述ClickHouse集群返回的数据库操作结果。
2.根据权利要求1所述的查询方法,其特征在于,所述操作请求的发送形式包括以下任一种:API形式、操作指令的形式,且所述操作请求包括以下至少之一:增加请求、删除请求、修改请求和查询请求。
3.根据权利要求1所述的查询方法,其特征在于,对所述操作请求进行数据库模型解析,包括:
根据所述操作请求中携带的数据类型确定与所述数据类型对应的待操作ClickHouse表;
确定所述操作请求中携带的目标操作类型和待操作字段,其中,所述目标操作类型包括以下至少之一:增加操作、删除操作、修改操作和查询操作;
基于所述待操作ClickHouse表、所述目标操作类型和所述待操作字段构建对应的用于对所述ClickHouse集群进行操作的SQL语句。
4.根据权利要求1所述的查询方法,其特征在于,在获取用户发送的电子会计档案数据的操作请求之前,所述方法还包括:
确定不同数据类型的所述电子会计档案数据包含的字段信息;
根据每种数据类型的所述电子会计档案数据包含的字段信息确定每种数据类型的所述电子会计档案数据对应的数据库模型,进而根据所述数据库模型在所述ClickHouse集群中创建对应的ClickHouse表,其中,每种数据类型对应一张ClickHouse表,所述ClickHouse表为空表;
根据当前的电子会计档案数据的数据类型将所述电子会计档案数据导入对应的ClickHouse表中。
5.根据权利要求4所述的查询方法,其特征在于,根据当前的电子会计档案数据的数据类型将所述电子会计档案数据导入对应的ClickHouse表中,包括:
对所述电子会计档案数据包含的字段信息进行识别;
确定识别到的字段信息对应的数据库模型中的标准字段,进而将字段信息对应的电子会计档案数据导入与所述数据类型对应的ClickHouse表中标准字段的位置。
6.根据权利要求1所述的查询方法,其特征在于,所述ClickHouse集群包括:3个以上的ClickHouse服务节点,2n+1个ZooKeeper节点,n>0,且n为自然数。
7.根据权利要求1所述的查询方法,其特征在于,所述合思易会档系统平台与所述ClickHouse集群连接,所述方法还包括:
对所述ClickHouse集群进行数据库操作测试,以确保所述ClickHouse集群的状态可用。
8.一种电子会计档案数据的查询装置,其特征在于,应用于合思易会档系统平台,其中,所述合思易会档系统平台的分布式数据库由ClickHouse集群构建,所述装置包括:
获取单元,用于获取用户发送的电子会计档案数据的操作请求;
数据库模型解析单元,用于对所述操作请求进行数据库模型解析,得到对应的用于对所述ClickHouse集群进行操作的SQL语句;
发送单元,用于将所述SQL语句发送至所述ClickHouse集群,以使所述ClickHouse集群根据所述SQL语句执行对应的数据库操作;
接收单元,用于接收所述ClickHouse集群返回的数据库操作结果。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有机器可运行指令,所述机器可运行指令在被处理器调用和运行时,所述机器可运行指令促使所述处理器运行上述权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211424597.3A CN115718754A (zh) | 2022-11-14 | 2022-11-14 | 电子会计档案数据的查询方法、装置和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211424597.3A CN115718754A (zh) | 2022-11-14 | 2022-11-14 | 电子会计档案数据的查询方法、装置和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115718754A true CN115718754A (zh) | 2023-02-28 |
Family
ID=85255287
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211424597.3A Pending CN115718754A (zh) | 2022-11-14 | 2022-11-14 | 电子会计档案数据的查询方法、装置和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115718754A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116910113A (zh) * | 2023-04-14 | 2023-10-20 | 北京合思信息技术有限公司 | 档案数据的流式统计方法、装置、服务器及可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110543517A (zh) * | 2019-08-26 | 2019-12-06 | 汉纳森(厦门)数据股份有限公司 | 一种基于Elasticsearch实现海量数据复杂查询方法、装置及介质 |
CN110716897A (zh) * | 2019-10-15 | 2020-01-21 | 北部湾大学 | 一种基于云计算的海洋档案数据库并行化构建方法和装置 |
CN114661706A (zh) * | 2020-12-23 | 2022-06-24 | 杭州云掣科技有限公司 | 一种基于jlogstash的Clickhouse数据写入插件方法 |
CN114691713A (zh) * | 2022-03-28 | 2022-07-01 | 中国工商银行股份有限公司 | 数据查询方法和装置 |
-
2022
- 2022-11-14 CN CN202211424597.3A patent/CN115718754A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110543517A (zh) * | 2019-08-26 | 2019-12-06 | 汉纳森(厦门)数据股份有限公司 | 一种基于Elasticsearch实现海量数据复杂查询方法、装置及介质 |
CN110716897A (zh) * | 2019-10-15 | 2020-01-21 | 北部湾大学 | 一种基于云计算的海洋档案数据库并行化构建方法和装置 |
CN114661706A (zh) * | 2020-12-23 | 2022-06-24 | 杭州云掣科技有限公司 | 一种基于jlogstash的Clickhouse数据写入插件方法 |
CN114691713A (zh) * | 2022-03-28 | 2022-07-01 | 中国工商银行股份有限公司 | 数据查询方法和装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116910113A (zh) * | 2023-04-14 | 2023-10-20 | 北京合思信息技术有限公司 | 档案数据的流式统计方法、装置、服务器及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10956422B2 (en) | Integrating event processing with map-reduce | |
CN110795455A (zh) | 依赖关系解析方法、电子装置、计算机设备及可读存储介质 | |
CN111177231A (zh) | 报表生成方法和报表生成装置 | |
CN111722839B (zh) | 一种代码生成方法、装置、电子设备及存储介质 | |
CN115061721A (zh) | 一种报表生成方法、装置、计算机设备及存储介质 | |
CN107015987B (zh) | 一种更新和搜索数据库的方法及设备 | |
CN110716951A (zh) | 方便配置的标签配置方法、装置、设备及存储介质 | |
CN112131220B (zh) | 数据报表处理方法及装置 | |
CN113268500B (zh) | 业务处理方法、装置及电子设备 | |
CN114282129A (zh) | 信息系统页面生成方法、系统、电子设备及存储介质 | |
CN115617773A (zh) | 数据迁移的方法、装置和系统 | |
CN112905178A (zh) | 业务功能页面生成方法、装置、设备及介质 | |
CN114741392A (zh) | 数据查询方法、装置、电子设备及存储介质 | |
CN111414410A (zh) | 数据处理方法、装置、设备和存储介质 | |
CN115718754A (zh) | 电子会计档案数据的查询方法、装置和电子设备 | |
CN112199930B (zh) | 一种根据报表配置自动生成报表的方法和系统 | |
CN110765100B (zh) | 标签的生成方法、装置、计算机可读存储介质及服务器 | |
CN112667619A (zh) | 辅助检查数据的方法、装置、终端设备及存储介质 | |
CN111143398B (zh) | 基于扩展sql函数的超大集合查询方法及装置 | |
CN113138998A (zh) | 数据指标的大屏显示方法、装置及存储介质 | |
CN115017185A (zh) | 一种数据处理方法、装置及存储介质 | |
CN111125264A (zh) | 基于扩展olap模型的超大集合分析方法及装置 | |
CN117648339B (zh) | 一种数据探查方法、装置、服务器及存储介质 | |
CN116755684B (zh) | OAS Schema的生成方法、装置、设备及介质 | |
CN117829121B (zh) | 数据处理方法、装置、电子设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |