CN114090608A - 数据报表的生成方法及装置 - Google Patents

数据报表的生成方法及装置 Download PDF

Info

Publication number
CN114090608A
CN114090608A CN202010701877.9A CN202010701877A CN114090608A CN 114090608 A CN114090608 A CN 114090608A CN 202010701877 A CN202010701877 A CN 202010701877A CN 114090608 A CN114090608 A CN 114090608A
Authority
CN
China
Prior art keywords
query
report
data
index
generating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010701877.9A
Other languages
English (en)
Inventor
谭龙
赵月明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Wodong Tianjun Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Wodong Tianjun Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Wodong Tianjun Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN202010701877.9A priority Critical patent/CN114090608A/zh
Publication of CN114090608A publication Critical patent/CN114090608A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种数据报表的生成方法,该方法可以包括以下操作:获取查询请求;确定查询请求指示的查询指标和查询指标所针对的查询对象;根据查询指标和查询指标所针对的查询对象,生成报表查询语句;利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据;根据查询指标、查询对象和指标数据,生成数据报表。本公开还提供了一种数据报表的生成装置、一种电子设备及一种计算机可读存储介质。

Description

数据报表的生成方法及装置
技术领域
本公开涉及数据处理技术领域,更具体地,涉及一种数据报表的生成方法、一种数据报表的生成装置、一种电子设备以及一种计算机可读存储介质。
背景技术
随着互联网技术的迅速发展,各领域数据呈爆炸式态势增长,数据驱动成为众领域发展的重要导向。其中,数据报表能为用户提供有效的数据查询和数据展示功能。
相关技术中,数据报表的生成方法包括由开发人员搭建后台服务,编写结构化查询语言,通过手动封装数据,形成固定格式的数据报表。
然而,在实现本公开实施例的过程中,发明人发现:由开发人员手动搭建固定格式的数据报表,存在数据报表复用性不强,开发成本高,维护难度大的缺陷。
发明内容
有鉴于此,本公开提供了一种复用性强、开发成本低、维护难度小的数据报表生成方法和装置。
本公开的一个方面提供了一种数据报表的生成方法。该方法包括获取查询请求;确定上述查询请求指示的查询指标和上述查询指标所针对的查询对象;根据上述查询指标和上述查询指标所针对的查询对象,生成报表查询语句;利用上述报表查询语句,从报表数据源中获取与上述查询对象关联的指标数据;根据上述查询指标、上述查询对象和上述指标数据,生成数据报表。
可选地,上述根据上述查询指标和上述查询指标所针对的查询对象,生成报表查询语句,包括根据上述查询指标,生成与上述查询指标关联的初始查询语句;将上述初始查询语句中预设的可替换字段替换为上述查询对象,得到上述报表查询语句。
可选地,上述根据上述查询指标,生成与上述查询指标关联的初始查询语句,包括根据上述查询指标,在预设的特征字段库中确定与上述查询指标关联的至少一个特征字段;根据上述至少一个特征字段,生成上述初始查询语句。
可选地,上述利用上述报表查询语句,从报表数据源中获取与上述查询对象关联的指标数据,包括利用上述报表查询语句,从实时报表数据源中获取与上述查询对象关联的报表数据,其中,上述实时报表数据源为在数据产生过程中,实时采集数据而得到的数据源。
可选地,上述实时报表数据源的生成方法包括获取目标应用的配置文件,上述目标应用包括至少一个页面对象,上述配置文件指示各页面对象的数据采集规则;监听上述目标应用的各页面对象中的用户行为;针对任一页面对象,在监听到上述页面对象中的用户行为后,根据与上述页面对象关联的数据采集规则,获取用户的行为数据;从各页面对象中获取的用户的行为数据构成上述实时报表数据源。
可选地,上述根据上述查询指标、上述查询对象和上述指标数据,生成数据报表,包括根据上述查询指标和上述查询对象,生成初始报表;将上述报表数据添加至上述初始报表中,得到上述数据报表。
可选地,该方法还包括根据与上述数据报表关联的图表配置信息,可视化展示上述数据报表。
本公开的另一个方面提供了一种报表生成装置。该装置包括第一获取模块,用于获取查询请求;确定模块,用于确定上述查询请求指示的查询指标和上述查询指标所针对的查询对象;第一处理模块,用于根据上述查询指标和上述查询指标所针对的查询对象,生成报表查询语句;第二获取模块,用于利用上述报表查询语句,从报表数据源中获取与上述查询对象关联的指标数据;第二处理模块,用于根据上述查询指标、上述查询对象和上述指标数据,生成数据报表。
可选地,第一处理模块包括第一处理子模块,用于根据上述查询指标,生成与上述查询指标关联的初始查询语句;第二处理子模块,用于将上述初始查询语句中预设的可替换字段替换为上述查询对象,得到上述报表查询语句。
可选地,第一处理子模块包括第一处理单元,用于根据上述查询指标,在预设的特征字段库中确定与上述查询指标关联的至少一个特征字段;第二处理单元,用于根据上述至少一个特征字段,生成上述初始查询语句。
可选地,第二获取模块包括第一获取子模块,用于利用上述报表查询语句,从实时报表数据源中获取与上述查询对象关联的报表数据,其中,上述实时报表数据源为在数据产生过程中,实时采集数据而得到的数据源。
可选地,该装置还包括第三处理模块,用于生成实时报表数据源。第三处理模块包括第二获取子模块,用于获取目标应用的配置文件,上述目标应用包括至少一个页面对象,上述配置文件指示各页面对象的数据采集规则;第三处理子模块,用于监听上述目标应用的各页面对象中的用户行为;第三获取子模块,用于针对任一页面对象,在监听到上述页面对象中的用户行为后,根据与上述页面对象关联的数据采集规则,获取用户的行为数据,从各页面对象中获取的用户的行为数据构成上述实时报表数据源。
可选地,第二处理模块包括第四处理子模块,用于根据上述查询指标和上述查询对象,生成初始报表;第五处理子模块,用于将上述报表数据添加至上述初始报表中,得到上述数据报表。
可选地,该装置还包括显示模块,用于根据与上述数据报表关联的图表配置信息,可视化展示上述数据报表。
本公开的另一个方面提供了一种电子设备。所述电子设备包括至少一个处理器,以及与所述至少一个处理器通信连接的存储器。其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器实现本公开实施例的方法。
本公开的另一方面提供了一种计算机可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现本公开实施例的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现本公开实施例的方法。
通过本公开实施例,因为采用了获取查询请求,确定查询请求指示的查询指标和查询指标所针对的查询对象,然后根据查询指标和查询指标所针对的查询对象,生成报表查询语句,并利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据,最后根据查询指标、查询对象和指标数据,生成数据报表的技术手段,所以至少部分地克服了相关技术中存在的数据报表复用性不强、开发成本高、维护难度大的技术问题,进而达到了有效提高数据报表复用率、有效降低数据报表的开发成本及维护难度的技术效果。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的数据报表的生成方法的系统架构;
图2A示意性示出了根据本公开一实施例的数据报表的生成方法的流程图;
图2B示意性示出了根据本公开一实施例的数据报表的示意图;
图3示意性示出了根据本公开一实施例的报表查询语句的生成方法的流程图;
图4示意性示出了根据本公开实施例的数据报表的生成装置的框图;
图5示意性示出了根据本公开实施例的适于实现数据报表的生成方法和装置的电子设备的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性地,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、操步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
本公开的各个实施例提供了一种数据报表的生成方法以及能够应用该方法的装置。其中,该方法可以包括获取查询请求,确定查询请求指示的查询指标和查询指标所针对的查询对象,然后根据查询指标和查询指标所针对的查询对象,生成报表查询语句,进而利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据,最后根据查询指标、查询对象和指标数据,生成数据报表。
如图1所示,该系统架构100包括:至少一个终端(图中示出了多个,如终端101、102、103)和服务器104(也可以是服务器集群,图中未示出)。在该系统架构100中,终端(如终端101、102、103)在获取到查询请求后,确定查询请求指示的查询指标和查询指标所针对的查询对象,然后根据查询指标和查询指标所针对的查询对象,生成报表查询语句,并利用报表查询语句,从服务器104的报表数据源中获取与查询对象关联的指标数据,最后根据查询指标、查询对象和指标数据,生成数据报表并向用户展示。
以下将结合附图和具体实施例详细阐述本公开。
图2A示意性示出了根据本公开一实施例的数据报表的生成方法的流程图。
如图2A所示,该方法例如可以包括操作S210~S250。
在操作S210,获取查询请求。
在本公开实施例中,具体地,数据报表通过图表、表格等形式来动态显示数据,其能为用户提供良好的数据查询和数据可视化功能。数据报表的形式可以包括列表式、摘要式、矩阵式、钻取式等。用户通过终端发送查询请求,查询请求用于请求将报表数据以数据报表的形式进行展示。
报表数据的类型包括实时数据和非实时数据,实时数据为在数据产生过程中,实时采集到的数据。实时数据的采集方法例如可通过数据埋点技术实现,示例性地,业务系统在处理业务时会产生大量的业务数据,利用数据埋点技术获取实时产生的业务数据,例如,在订单交易完成后,对订单数量进行计数,以及获取每个订单的订单金额。
数据埋点可以包括代码埋点、可视化埋点和全埋点。代码埋点为在需要统计数据的位置植入代码,以统计实时产生的数据。示例性地,为统计首页某个banner(横幅)的点击量,在banner详情里植入代码,当用户点击该banner时,植入在banner详情里的代码通过回调按钮触发执行,并向服务器上报Key-Value形式的数据,其中,Key的含义为Click_Add_BTN,Value的值为点击次数。可视化埋点为解决代码埋点存在的埋点代价大、更新成本高的问题,设置核心代码,并将核心代码与应用运行的配置信息及资源信息独立开来。全埋点为事先尽可能收集所有控件的操作数据,在获取到用户的查询请求后,配置需将哪些数据进行统计分析。
为保证数据埋点尽量不对业务系统的正常运行造成影响,保证数据埋点的低侵入性,将数据埋点过程中利用到的代码进行封装处理,以避免数据埋点代码与业务代码的直接融合,这有利于有效减弱数据埋点代码对业务代码运行造成的影响。
本公开实施例中获取的查询请求,可以是根据用户选择的查询指标以及查询指标所针对的查询对象所生成的,此处所说用户为请求查询数据报表的用户。具体地,查询指标可以是用户需要查询的报表的报表标识,报表标识例如可以包括报表名、报表显示字段、报表指标等。其中,报表显示字段为构成报表的至少一个可显示字段,报表指标指示报表的报表用途、报表类型等。此外,查询指标所针对的查询对象可以根据用户选择的至少一个搜索特征确定。
可选地,本公开实施例获取的查询请求,可以是根据用户选择的至少一个报表显示字段和至少一个搜索特征生成的。当用户选择的报表显示字段不止一个时,可以通过关联词将不止一个报表显示字段进行组合,关联词例如可以包括或、并、除去等。除此之外,本公开实施例获取的查询请求,也可以是根据用户选择的至少一个报表指标和至少一个搜索特征生成的。报表指标为用于表征报表类型、报表用途等信息的预设特征字段。示例性地,某一报表指标为“统计销售额”。用户在请求查询数据报表时,其可在预设的至少一个报表指标中,选择其需要查询的报表指标以生成查询请求,这有利于实现数据报表的复用,有利于避免报表指标的重复开发,进而有利于降低数据报表的开发成本和维护成本。
接下来,在操作S220,确定查询请求指示的查询指标和查询指标所针对的查询对象。
在本公开实施例中,具体地,确定查询请求指示的查询指标,可以包括确定查询请求指示的报表标识,报表标识例如可以包括报表名、报表显示字段、报表指标等。确定查询指标所针对的查询对象,可以包括确定查询请求指示的搜索特征。搜索特征为用于搜索报表数据的限定条件,具体可以包括搜索指标、搜索指标值、搜索指标值的比较类型。搜索指标值的比较类型可以包括大于、小于、不大于、不小于、等于、不等于、包含、不包含、为空等。作为一种可选的方式,对获取的查询请求进行内容识别处理,得到查询请求中的至少一个特征字段,根据各特征字段的属性值,得到查询请求指示的查询指标以及针对查询指标的查询对象,其中,特征字段可以包括报表名、报表显示字段、报表指标、搜索特征等。
示例性地,获取的查询请求为“查看A商家过去一周内每天的订单数量与销售额”。查询请求指示的查询指标为“订单数量与销售额”。查询指标所针对的查询对象可以根据查询请求中的搜索特征确定,搜索特征包括A商家、过去一周内、每天。
根据查询请求指示的查询指标,可确定出与查询请求关联的初始报表。具体地,根据查询请求指示的报表标识,确定与报表标识关联的初始报表。初始报表库中存储有大量预设的初始报表。查询指标所指示的初始报表,可以是初始报表库中的一个初始报表,也可以是多个初始报表的整合,还可以是多个初始报表的部分内容的整合。每个初始报表对应一个或多个报表指标,报表指标表征报表用途和报表类型,每个初始报表的报表指标通过至少一个报表显示字段实现。
本实施例方法还包括对初始报表进行报表管理,报表管理例如可以包括报表修改、报表分享、报表权限更改等。通过对初始报表进行修改,可实现初始报表的更新和优化。报表修改可以包括对初始报表中的报表显示字段进行增删改操作,也可以包括对初始报表中的报表显示字段进行拆分或聚合处理。
接下来,在操作S230,根据查询指标和查询指标所针对的查询对象,生成报表查询语句。
在本公开实施例中,具体地,根据查询指标和查询指标所针对的查询对象,生成报表查询语句,具体地,根据查询请求指示的报表标识,以及根据查询请求中的至少一个搜索特征,确定用于筛选报表数据的报表查询语句,示例性地,报表查询语句可选用SQL(Structured Query Language,结构化查询语言)语句。报表查询语句中包括至少一个特征字段及至少一个搜索特征,至少一个特征字段与查询请求指示的查询指标相对应,至少一个搜索特征与查询请求指示的查询对象相对应。报表查询语句的至少一个特征字段用于指示初始报表中的报表显示字段,至少一个特征字段及至少一个搜索特征用于实现对报表数据源进行针对性的数据检索。
示例性地,根据查询请求中指示的报表标识,确定出报表查询语句中的特征字段包括vender_id(卖家ID)、question_num(咨询量)、ans_num(消息量)、sale_volume(销售额)。查询请求中的搜索特征包括开始时间、截止时间、卖家ID。根据至少一个特征字段和根据查询请求中的至少一个搜索特征,确定得到报表查询语句。
接下来,在操作S240,利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据。
在本公开实施例中,具体地,报表数据源包括实时报表数据源和非实时报表数据源。其中,实时报表数据源为在数据产生过程中,实时采集数据而得到的数据源。实时报表数据源的生成方法可采用数据埋点技术实现,具体地,可以获取目标应用的配置文件,目标应用包括至少一个页面对象,配置文件指示各页面对象的数据采集规则;监听目标应用的各页面对象中的用户行为;针对任一页面对象,在监听到页面对象中的用户行为后,根据与页面对象关联的数据采集规则,获取用户的行为数据;从各页面对象中获取的用户的行为数据构成实时报表数据源。此处所说用户包括产生行为数据的任何对象,具体可以是业务活动中的服务对象,也可以是业务活动中的服务方,还可以是使用某项服务或者功能的个体或机构。用户行为例如可以包括点击、划动、收藏、双击、下单、申请退款、申请退单、退款、退单、发货等等,用户行为与数据报表的类型与用途相适应。
在生成报表数据源的过程中,可对获取的原始数据进行预处理,预处理包括数据清洗、数据转换、数据拆分、数据组合等。数据清洗包括过滤掉原始数据中的垃圾数据,垃圾数据具体可以是预先指定的数据,也可以是原始数据中的冗余数据、空白数据等。数据转换包括对原始数据进行数据类型转换、字段重命名、字段映射等处理。数据拆分包括对单条原始数据进行拆分处理,数据组合包括对多条原始数据进行合并处理。当原始数据的实时性要求较高时,为实现数据报表自助分析功能的高效运行,可通过提前获取原始数据的部分字段,实现以空间换时间的方式,提高原始数据的获取速率,以实现对原始数据进行实时性的数据报表分析功能。示例性地,在获取订单数据时,需要获取订单数据中的商户信息和商品信息,若每次获取订单数据均需获取该两字段,存在数据获取能损较大的问题,此时,可提前获取订单数据中的商户信息和商品信息,实现以空间换时间的方式,提高订单数据的实时获取效率。
在业务系统运行过程中,利用数据埋点技术实时获取产生的业务数据时,获取的业务数据构成报表数据源。形成报表数据源的形式,有利于实现数据报表生成与业务运行的异步进行,能够有效保证数据报表生成不对业务系统的正常运行造成影响,也不会给业务系统的正常运行带来额外负担。
接下来,在操作S250,根据查询指标、查询对象和指标数据,生成数据报表。
在本公开实施例中,具体地,根据查询指标、查询对象和指标数据,生成数据报表,可以包括根据查询指标和查询对象,确定初始报表,然后将指标数据填充至初始报表中,得到数据报表。查询指标具体为查询请求指示的报表标识,报表标识例如可以包括报表名、报表显示字段、报表指标等。根据查询请求指示的报表标识,能够确定出与查询请求关联的初始报表。然后,将利用报表查询语句查询得到的指标数据填充至初始报表中,得到数据报表。
可选地,还可根据与初始报表关联的图标配置信息,可视化展示数据报表,这有利于实现将海量数据通过数据报表形式实时可视化展示出来,进而有利于更好地实现数据报表统计分析功能。
图2B示意性示出了根据本公开一实施例的数据报表的示意图。如图2B所示,该数据报表可视化展示了某商家从5月1日至5月3日间每天的订单数量与销售额。通过数据报表可知,该商家5月1日订单数量为200件,销售额为1.8万元,5月2日订单数量为300件,销售额为1.85万元,5月2日相比5月1日订单数量增长较多,销售额增幅却不明显,可合理推断由于5月1日为促销活动第一天,消费者可能等待至本日进行大额商品消费;5月2日为假期第二天,消费者的消费行为较平时有所增长,但由于大额商品已于前一日购买完毕,所以本日订单数量增多,销售额增幅并不完全正相关;5月3日为假期最后一天,由于前两日已完成部分消费,消费者在本日消费次数下降,本日订单数量与销售额均明显下降。数据报表能够将海量数据进行可视化展示,其能够提供良好的数据分析功能。
在本公开实施例中,通过获取查询请求,确定查询请求指示的查询指标和查询指标所针对的查询对象,然后根据查询指标和查询指标所针对的查询对象,生成报表查询语句,并利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据,最后根据查询指标、查询对象和指标数据,生成数据报表。根据查询请求指示的查询指标和查询对象,以及根据筛选出的指标数据,生成数据报表,相比于相关技术中的由开发人员手动搭建固定格式的数据报表,本公开实施例方法有效提高了数据报表的复用性,有利于实现数据报表的动态化利用,有利于降低数据报表的开发成本和维护难度。
图3示意性示出了根据本公开另一实施例的数据报表的生成方法的流程图。
如图3所示,操作S230可以包括操作S310和操作S320。
在操作S310,根据查询指标,生成与查询指标关联的初始查询语句。
在本公开实施例中,具体地,根据查询指标,在预设的特征字段库中确定与查询指标关联的至少一个特征字段;根据至少一个特征字段,生成初始查询语句。查询指标具体可以是查询请求指示的报表标识,报表标识例如可以包括报表名、报表显示字段、报表指标等。根据查询请求指示的报表标识,在预设的特征字段库中,确定与报表标识关联的至少一个特征字段。
示例性地,查询语句模板为:
[显示字段:],[聚合字段:],[排序字段:]。
查询请求指示的报表标识包括两个报表指标,报表指标分别为统计订单数量和统计销售额。根据查询请求指示的报表标识,在预设的特征字段库中,确定与报表标识关联的至少一个特征字段,至少一个特征字段包括vender_id(卖家ID)、order_quanity(订单数量)、order_unit price(订单单价)、sale_volume(销售额)、create_time(订单创建时间)。
根据确定出的至少一个特征字段,确定初始查询语句为[select vender_id,order_quanity,order_unitprice,sale_volume,create_time],create_time fromapp.app_test where dt>=#{c1}and dt<=#{c2}and if(″=#{c3},true,contains(split(#{c3},′,′),vender_id))order by create_time]。
在操作S320,将初始查询语句中预设的可替换字段替换为查询对象,得到报表查询语句。
在本公开实施例中,具体地,初始查询语句中包括至少一个预设的可替换字段,利用查询请求指示的查询对象替换初始查询语句中的预设可替换字段。具体地,利用查询请求中的搜索特征替换初始查询语句中的预设可替换字段,得到的报表查询语句,以实现对报表数据源进行针对性的数据筛选。当查询请求中的搜索特征为空时,只根据查询请求指示的报表标识,进行与报表标识关联的数据筛选。当查询请求没有指示报表标识时,无法进行有效的数据筛选。
示例性地,查询请求中的搜索特征包括:[开始时间:2020-05-01],[截止时间:2020-05-03],[商家ID:xmz,1066]。将初始查询语句中预设的可替换字段替换为搜索特征,得到报表查询语句[select vender_id,order_quanity,order_unitprice,sale_volume,create_time],create_time from app.app_test where dt>=‘2020-05-01’and dt<=‘2020-05-03’and if(″=‘xmz,1066’,true,contains(split(‘xmz,1066’,′,′),vender_id))order by create_time]。
在本公开实施例中,根据查询请求指示的至少一个查询指标,以及根据至少一个查询指标所针对的查询对象,生成报表查询语句,以实现利用报表查询语句对报表数据源进行针对性的数据检索,得到与查询对象关联的指标数据,这有效提高了生成数据报表的灵活性和自由度,有效提高了报表指标的复用程度,同时还有利于降低数据报表的开发成本及维护成本,以及有利于降低数据报表的扩展难度;能够有效实现通过数据报表实时可视化展现海量数据,自助分析功能良好。
图4示意性示出了根据本公开实施例的数据报表的生成装置的框图。
如图4所示,该装置包括第一获取模块401、确定模块402、第一处理模块403、第二获取模块404和第二处理模块405。
具体地,第一获取模块401,用于获取查询请求。
确定模块402,用于确定查询请求指示的查询指标和查询指标所针对的查询对象。
第一处理模块403,用于根据查询指标和查询指标所针对的查询对象,生成报表查询语句。
第二获取模块404,用于利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据。
第二处理模块405,用于根据查询指标、查询对象和指标数据,生成数据报表。
在本公开实施例中,通过获取查询请求,确定查询请求指示的查询指标和查询指标所针对的查询对象,然后根据查询指标和查询指标所针对的查询对象,生成报表查询语句,并利用报表查询语句,从报表数据源中获取与查询对象关联的指标数据,最后根据查询指标、查询对象和指标数据,生成数据报表。根据查询请求指示的查询指标和查询对象,以及根据筛选出的指标数据,生成数据报表,相比于相关技术中的由开发人员手动搭建固定格式的数据报表,本公开实施例方法有效提高了数据报表的复用性,有利于降低数据报表的开发成本和维护难度。
作为一种可选的实施例,第一处理模块包括第一处理子模块,用于根据查询指标,生成与查询指标关联的初始查询语句;第二处理子模块,用于将初始查询语句中预设的可替换字段替换为查询对象,得到报表查询语句。
作为一种可选的实施例,第一处理子模块包括第一处理单元,用于根据查询指标,在预设的特征字段库中确定与查询指标关联的至少一个特征字段;第二处理单元,用于根据至少一个特征字段,生成初始查询语句。
作为一种可选的实施例,第二获取模块包括第一获取子模块,用于利用报表查询语句,从实时报表数据源中获取与查询对象关联的报表数据,其中,实时报表数据源为在数据产生过程中,实时采集数据而得到的数据源。
作为一种可选的实施例,该装置还包括第三处理模块,用于生成实时报表数据源。第三处理模块包括第二获取子模块,用于获取目标应用的配置文件,目标应用包括至少一个页面对象,配置文件指示各页面对象的数据采集规则;第三处理子模块,用于监听目标应用的各页面对象中的用户行为;第三获取子模块,用于针对任一页面对象,在监听到页面对象中的用户行为后,根据与页面对象关联的数据采集规则,获取用户的行为数据,从各页面对象中获取的用户的行为数据构成实时报表数据源。
作为一种可选的实施例,第二处理模块包括第四处理子模块,用于根据查询指标和查询对象,生成初始报表;第五处理子模块,用于将报表数据添加至初始报表中,得到数据报表。
作为一种可选的实施例,该装置还包括显示模块,用于根据与数据报表关联的图表配置信息,可视化展示数据报表。
需要说明的是,在本公开实施例中,装置部分的实施例方式与方法部分的实施例方式对应类似,并且所达到的技术效果也对应类似,在此不再赘述。
可选地的模块、子模块中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者根据本公开实施例的模块中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,第一获取模块401、确定模块402、第一处理模块403、第二获取模块404和第二处理模块405中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。可选地,第一获取模块401、确定模块402、第一处理模块403、第二获取模块404和第二处理模块405中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,第一获取模块401、确定模块402、第一处理模块403、第二获取模块404和第二处理模块405中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图5示意性示出了根据本公开实施例的适于数据报表的生成方法和系统的计算机系统的方框图。图5示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,根据本公开实施例的计算机系统600包括处理器601,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。处理器501例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器501还可以包括用于缓存用途的板载存储器。处理器501可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 503中,存储有系统500操作所需的各种程序和数据。处理器501、ROM 502以及RAM 503通过总线504彼此相连。处理器501通过执行ROM 502和/或RAM 503中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 502和RAM 503以外的一个或多个存储器中。处理器501也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
可选地,系统500还可以包括输入/输出(I/O)接口505,输入/输出(I/O)接口505也连接至总线504。系统500还可以包括连接至I/O接口505的以下部件中的一项或多项:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的计算机程序根据需要被安装入存储部分508。
可选地,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。在该计算机程序被处理器501执行时,执行本公开实施例的系统中限定的上述功能。可选地,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
可选地,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如,可选地,计算机可读存储介质可以包括上文描述的ROM 502和/或RAM 503和/或ROM 502和RAM 503以外的一个或多个存储器。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。

Claims (10)

1.一种数据报表的生成方法,包括:
获取查询请求;
确定所述查询请求指示的查询指标和所述查询指标所针对的查询对象;
根据所述查询指标和所述查询指标所针对的查询对象,生成报表查询语句;
利用所述报表查询语句,从报表数据源中获取与所述查询对象关联的指标数据;以及
根据所述查询指标、所述查询对象和所述指标数据,生成数据报表。
2.根据权利要求1所述的方法,其中,所述根据所述查询指标和所述查询指标所针对的查询对象,生成报表查询语句,包括:
根据所述查询指标,生成与所述查询指标关联的初始查询语句;以及
将所述初始查询语句中预设的可替换字段替换为所述查询对象,得到所述报表查询语句。
3.根据权利要求2所述的方法,其中,所述根据所述查询指标,生成与所述查询指标关联的初始查询语句,包括:
根据所述查询指标,在预设的特征字段库中确定与所述查询指标关联的至少一个特征字段;以及
根据所述至少一个特征字段,生成所述初始查询语句。
4.根据权利要求1所述的方法,其中,所述利用所述报表查询语句,从报表数据源中获取与所述查询对象关联的指标数据,包括:
利用所述报表查询语句,从实时报表数据源中获取与所述查询对象关联的报表数据,
其中,所述实时报表数据源为在数据产生过程中,实时采集数据而得到的数据源。
5.根据权利要求4所述的方法,其中,所述实时报表数据源的生成方法包括:
获取目标应用的配置文件,所述目标应用包括至少一个页面对象,所述配置文件指示各页面对象的数据采集规则;
监听所述目标应用的各页面对象中的用户行为;以及
针对任一页面对象,在监听到所述页面对象中的用户行为后,根据与所述页面对象关联的数据采集规则,获取用户的行为数据;
从各页面对象中获取的用户的行为数据构成所述实时报表数据源。
6.根据权利要求1所述的方法,其中,所述根据所述查询指标、所述查询对象和所述指标数据,生成数据报表,包括:
根据所述查询指标和所述查询对象,生成初始报表;以及
将所述报表数据添加至所述初始报表中,得到所述数据报表。
7.根据权利要求1至6中任一项所述的方法,还包括:
根据与所述数据报表关联的图表配置信息,可视化展示所述数据报表。
8.一种数据报表的生成装置,包括:
第一获取模块,用于获取查询请求;
确定模块,用于确定所述查询请求指示的查询指标和所述查询指标所针对的查询对象;
第一处理模块,用于根据所述查询指标和所述查询指标所针对的查询对象,生成报表查询语句;
第二获取模块,用于利用所述报表查询语句,从报表数据源中获取与所述查询对象关联的指标数据;以及
第二处理模块,用于根据所述查询指标、所述查询对象和所述指标数据,生成数据报表。
9.一种电子设备,包括:
一个或多个处理器;以及
存储器,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器实现权利要求1至7中任一项所述的方法。
CN202010701877.9A 2020-07-20 2020-07-20 数据报表的生成方法及装置 Pending CN114090608A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010701877.9A CN114090608A (zh) 2020-07-20 2020-07-20 数据报表的生成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010701877.9A CN114090608A (zh) 2020-07-20 2020-07-20 数据报表的生成方法及装置

Publications (1)

Publication Number Publication Date
CN114090608A true CN114090608A (zh) 2022-02-25

Family

ID=80294830

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010701877.9A Pending CN114090608A (zh) 2020-07-20 2020-07-20 数据报表的生成方法及装置

Country Status (1)

Country Link
CN (1) CN114090608A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114817267A (zh) * 2022-05-16 2022-07-29 通联支付网络服务股份有限公司 用于生成数据报表的方法、设备和介质
CN115826928A (zh) * 2022-12-20 2023-03-21 东方邦信金融科技(上海)有限公司 程序生成方法、系统、电子设备及计算机可读存储介质
CN117573107A (zh) * 2024-01-12 2024-02-20 宁波市华测检测技术有限公司 前端页面生成方法和装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114817267A (zh) * 2022-05-16 2022-07-29 通联支付网络服务股份有限公司 用于生成数据报表的方法、设备和介质
CN115826928A (zh) * 2022-12-20 2023-03-21 东方邦信金融科技(上海)有限公司 程序生成方法、系统、电子设备及计算机可读存储介质
CN115826928B (zh) * 2022-12-20 2024-03-22 东方邦信金融科技(上海)有限公司 程序生成方法、系统、电子设备及计算机可读存储介质
CN117573107A (zh) * 2024-01-12 2024-02-20 宁波市华测检测技术有限公司 前端页面生成方法和装置

Similar Documents

Publication Publication Date Title
CN108536761B (zh) 报表数据查询方法及服务器
CN114090608A (zh) 数据报表的生成方法及装置
US10521446B2 (en) System and method for dynamically refactoring business data objects
US20120072887A1 (en) Generating dependency maps from dependency data
US8839198B2 (en) Automated analysis of composite applications
CN105917315B (zh) 一种用于生成数据记录的内容的方法和计算系统
US11366704B2 (en) Configurable analytics for microservices performance analysis
CN109086442B (zh) 业务数据的展示方法及装置
CN113704288A (zh) 数据展示方法、装置、计算机可读介质及电子设备
CN112882702A (zh) 用于报表配置的信息处理方法及装置
CN114416891B (zh) 在知识图谱中进行数据处理的方法、系统、装置和介质
US20070038686A1 (en) External evaluation processes
CN114168565B (zh) 业务规则模型的回溯测试方法、装置、系统及决策引擎
CN114265657A (zh) 一种小程序的页面显示方法及装置
US20220188283A1 (en) Automatic discovery of executed processes
CN110352405B (zh) 计算机可读介质、计算系统、方法以及电子装置
US20230052352A1 (en) Systems and methods for assigning attribution weights to nodes
US20190197453A1 (en) Aggregating computer functions across different computer applications
CN109933759B (zh) 一种统计类数据表的生成方法和装置
JP2020057356A (ja) 予備部品のバンドルの知能的予測
CN115391655A (zh) 信息查询方法及装置、电子设备和计算机可读存储介质
CN112131257B (zh) 数据查询方法和装置
CN113590660A (zh) 一种数据自助查询方法、装置以及电子设备
CN114168624A (zh) 数据分析方法、计算设备及存储介质
US20120030189A1 (en) Dynamically Joined Fast Search Views for Business Objects

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination