CN114661811A - 数据展示方法、装置、电子设备及存储介质 - Google Patents

数据展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114661811A
CN114661811A CN202210217436.0A CN202210217436A CN114661811A CN 114661811 A CN114661811 A CN 114661811A CN 202210217436 A CN202210217436 A CN 202210217436A CN 114661811 A CN114661811 A CN 114661811A
Authority
CN
China
Prior art keywords
data
target
data table
bin
chart
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210217436.0A
Other languages
English (en)
Inventor
王威
戴嘉乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Huantai Digital Technology Co ltd
Original Assignee
Shenzhen Huantai Digital Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Huantai Digital Technology Co ltd filed Critical Shenzhen Huantai Digital Technology Co ltd
Priority to CN202210217436.0A priority Critical patent/CN114661811A/zh
Publication of CN114661811A publication Critical patent/CN114661811A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26Visual data mining; Browsing structured data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/283Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种数据展示方法、装置、电子设备及存储介质。该方法包括:响应于数据获取请求,从数据仓获取对应数据获取请求的目标数据表,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;在图表集合中确定对应目标数据表的目标图表;根据目标数据表和目标图表,输出对应的展示数据。该方法能够减少数据展示过程中超发的曝光量。本申请中,并不需要设置中间介质进行数据处理,省去了中间介质进行数据处理的时间,提高了数据展示效率。

Description

数据展示方法、装置、电子设备及存储介质
技术领域
本申请涉及互联网信息处理技术领域,更具体地,涉及一种数据展示方法、装置、电子设备及存储介质。
背景技术
大数据时代,所面临的数据挑战更大,例如数据的多样性复杂、数据量级大、数据增长快等。在传统的数据展示方法中,需要将数据仓中的数据通过中间介质(中间介质可以是excel、csv、txt以及中间表等)导入,再将导入的数据进行展示,效率比较低。
发明内容
鉴于上述问题,本申请实施例提出了一种数据展示方法、装置、电子设备及存储介质,以提高数据展示效率。
第一方面,本申请实施例提供了一种数据展示方法,包括:响应于数据获取请求,从数据仓获取对应数据获取请求的目标数据表,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;在图表集合中确定对应目标数据表的目标图表;根据目标数据表和目标图表,输出对应的展示数据。
第二方面,本申请实施例提供了一种数据展示装置,包括:获取模块,用于响应于数据获取请求,从数据仓获取对应数据获取请求的目标数据表,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;确定模块,用于在图表集合中确定对应目标数据表的目标图表;输出模块,用于根据目标数据表和目标图表,输出对应的展示数据。
第三方面,本申请实施例提供了一种电子设备,包括处理器以及存储器;一个或多个程序被存储在存储器中并被配置为由处理器执行以实现上述的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,计算机可读存储介质中存储有程序代码,其中,在程序代码被处理器运行时执行上述的方法。
第五方面,本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述的方法。
本申请实施例提供的一种数据展示方法、装置、电子设备及存储介质,通过从数据仓获取对应数据获取请求的目标数据表,然后在图表集合中确定对应目标数据表的目标图表,再根据目标数据表和目标图表,输出对应的展示数据。其中,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得。本申请中,根据解析规则对原始数据进行处理,得到数据仓中的数据表,直接确定对应配置请求的目标数据表和对应目标数据表的目标图表,并进一步获得展示数据,并不需要设置中间介质进行数据处理,省去了中间介质进行数据处理的时间,提高了数据展示效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的一种数据展示系统的架构示意图。
图2示出了本申请实施例提供的一种数据展示系统的程序架构示意图。
图3示出了本申请实施例提供的一种数据展示方法流程图。
图4示出了本申请实施例中目标数据表的一种获取方法流程图。
图5示出了本申请实施例中目标图表的一种获取方法流程图。
图6示出了本申请实施例中目标数据表的又一种获取方法流程图。
图7示出了本申请实施例中数据仓的一种更新方法流程图。
图8示出了本申请实施例中展示数据的一种更新方法流程图。
图9示出了本申请实施例提供的一种数据展示装置示意图。
图10示出了本申请实施例提供的一种电子设备的示意图。
图11示出了本申请实施例提供的计算机可读存储介质的示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
伴随互联网与移动互联网时代的飞速发展,数字科技(Data Technology,简称DT)时代已经到来,无论哪个行业领域,当下都会面临在海量数据中如何提炼其价值的问题。数据可视化则是一种可以在一定程度上,将数据呈现为用户易于感知的图形符号,让用户交互地理解数据背后的本质;帮助用户更好地理解数据,更快发掘数据中价值的手段。
传统IT时代产生的小数据变成如今的DT大数据时代,数据增长规模从早些年的TB级时代发展到如今的ZB级时代,数据的多样性也从结构化数据变成了结构化数据加非结构化数据。
现有的对大众操作友好的数据可视化工具大部分都需要通过数据仓导出至Excel文件亦或是txt文件才能支持图形化的建模配置,工序繁多效率比较低,缺乏数据同步的实时性和准确性。而对开发者操作友好的工具,常常也需要编写复杂的数据图形建模代码才能实现从数仓读取海量数据至数据可视化的过程(例如:使用Python的Pyecharts库),缺乏业务分析的灵活性。
本申请实施例提供了一种数据展示方法和装置,根据解析规则对原始数据进行处理,得到数据仓中的数据表,直接确定对应配置请求的目标数据表和对应目标数据表的目标图表,并进一步获得展示数据,并不需要设置中间介质进行数据处理,省去了中间介质进行数据处理的时间,提高了数据展示效率。
在对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及一种应用环境进行介绍。
请参阅图1,图1示出了本申请实施例提供的一种数据展示系统的架构示意图;如图1所示,为支撑一个信息流产品应用,可以设置数据展示系统10,在数据展示系统10中,电子设备100连接到中间件200,中间件200连接到数据仓300,数据仓300连接到数据平台400。
其中,电子设备100可以作为本申请的执行主体,实现本申请的数据展示方法的步骤。
中间件200可以包括网络协议装置、数据缓存装置和数据预处理装置,网络协议装置用于将从数据仓中获取到的数据表发送给电子设备,数据缓存装置用于对从数据仓中获取到的数据表进行缓存,数据预处理装置用于对从数据仓中获取到的数据表进行预处理。
其中,可以由数据预处理装置对获取到的数据表进行预处理,得到预处理后的数据表,由数据缓存装置存储预处理后的数据表,再由网络协议装置将缓存的预处理后的数据表发送至电子设备。
数据仓300用于从数据平台400获取原始数据,数据平台400中可以存储有各种数据平台的原始数据,可以是金融数据、身份验证数据、设备信息数据、音视频点击数据和网络链接点击数据等。
数据仓300从数据平台400获取到原始数据之后,根据解析规则,对原始数据进行解析,得到数据表,并存储数据表,以用于电子设备获取。
具体应用中,数据平台400可以是日志流数据库、业务Mysql数据库、数据中心Mysql数据库和ClickHous数据库等,数据仓中的数据表可以存储于数据仓中的TsHouse子数据库、业务Mysql子数据库、数据中心Mysql子数据库和数据中心ClickHous子数据库等。
其中,TsHouse是指一种时间序列数据库。时间序列数据库指主要用于处理带时间标签(按照时间的顺序变化,即时间序列化)的数据。ClickHouse是一个用于联机分析处理的开源列式数据库。
在一些实施方式中,电子设备100可以是独立的物理电子设备,也可以是多个物理电子设备构成的电子设备集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(ContentDelivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云电子设备。
电子设备100可以为智能手机、平板电脑、笔记本电脑、台式计算机,但并不局限于此。
请参阅图2,图2示出了本申请实施例提供的一种数据展示系统的程序架构示意图,程序架构可以包括应用层、接入层、服务层、数据存储层和云平台。
其中,在本申请中,应用层可是指电子设备集成的部分功能,可以包括指标中心、监控中心以及组件中心等,指标中心可以是用户针对数据仓中数据表设置的数据指标,例如单位时间点击率等,监控中心可以用于设置监控条件,当被监控的数据或电子设备的运行状态触发监控条件时,输出警报提示,组件中心可以包括图表集合以其他数据处理组件等。
接入层可以是指电子设备接入网络的接入介质,可以包括单点身份验证、门户网关以及金融网关等。
服务层可以是指中间件对应的部分功能,服务层可以包括网络协议单元(可以是WebSocket协议或Http协议)、数据缓存单元以及数据预处理单元(可以是Farseer-Dal模块)。数据预处理单元用于对从数据仓获取的数据表进行预处理,数据缓存单元用于存储预处理后的数据表,网络协议单元用于将预处理后的数据表发送至电子设备。
数据存储层可是指数据仓对应的功能,数据存储层可以设置用于存储不同数据类型的数据表的子数据库,例如TsHouse子数据库、业务Mysql子数据库、数据中心Mysql子数据库、数据中心ClickHous子数据库以及Redis子数据库等。
用户还可以通过云平台,对数据展示系统进行持续集成、持续部署,云平台也可以作为数据展示系统的配置中心,并对数据展示系统中的数据和运行状态进行云监控。
在本申请中,数据展示系统对应的程序可以是通过多种程序语言构建的,例如可以通过Java+Golang+PHP+NodeJs+Vue构建。其中,Java主要用于数据采集、数据计算、数据存储等后端服务能力的构建;Golang用于协程级并发、数据查询、处理、传输和输出等功能的构建,支持多种数据仓的统一查询,标准输出,如MySQL、TsHouse、ClickHouse等;PHP+NodeJs+Vue用于WebUI的低代码平台的快速搭建和可视化图表等组件的开发。
下面将结合附图具体描述本申请的各实施例。
请参阅图3,图3示出了本申请实施例提供的一种数据展示方法流程图,该方法可以应用于电子设备(例如图1中的电子设备100),该方法包括:
S110、响应于数据获取请求,从数据仓获取对应数据获取请求的目标数据表,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得。
在本申请中,数据获取请求可以是用户通过电子设备发送的,数据获取请求用于获取需求的数据,数据获取请求可以包括需求的数据的数据类型,数据获取请求还可以包括需求的数据的时间区间、地理区间等信息。
电子设备在接收到数据获取请求后,从数据仓的数据表中获取对应数据获取请求的数据表,即,目标数据表。例如,数据获取请求可以是获取A地区的A1用户在2021年的网购交易记录,则存储在数据仓中的包括A地区的A1用户在2021年的网购交易记录的数据表即是目标数据表。
数据仓中的数据表是根据解析规则对获取到的原始数据进行解析获得的。数据仓可以是通过无线网络或有线网络与电子设备连接。用户可以通过电子设备的可视化操作界面,发送数据源配置操作,根据用户的数据源配置操作,确定出对应的数据平台,数据仓则继续从该数据平台持续获取原始数据,并根据预先设置的解析规则,对原始数据进行自动解析,得到数据表,并存储解析获得的数据表。
在本申请具体实施时,解析规则基于原始数据的数据类型和/或原始数据的数据内容确定,例如根据数据的中是否包含时间信息或是否包含地域信息,确定不同的解析规则,又如,对应数据类型不同的业务Mysql数据和数据中心ClickHouse数据,确定不同的解析规则,再如,对不同的数据类型,设定不同的解析规则,同时,对于同种数据类型的原始数据,原始数据的数据内容不同,解析规则也不同。根据解析规则对原始数据进行解析,获得数据表,数据表可以是宽表,容纳较多的数据。
例如,用户在电子设备的可视化操作界面发送数据源配置操作,数据源配置操作是确定数据平台B1和数据平台B2作为数据源,其中,数据平台B的数据类型为业务Mysql数据,数据平台C的数据类型为数据中心ClickHouse数据。数据仓获取数据平台B1和数据平台B2的原始数据,然后根据预先设置的不同的解析规则,分别对业务Mysql数据和数据中心ClickHouse数据进行解析,得到解析后的数据表,并存储解析后的数据表。
S120、在图表集合中确定对应目标数据表的目标图表。
在本申请中,图表集合可以包括多种不同类型的图表,例如图表集合可以包括折线图、柱状图、饼状图、地图和知识图谱等。
在本申请具体实施时,用户还可以发送针对目标数据表的展示需求,电子设备可根据该展示需求和目标数据表的包括的内容,确定出对应的目标图表。在另一些实施例中,展示需求可以包含于数据获取请求中。
例如,目标数据表包括的内容是2020年12个月中,用户C1每个月的消费记录,则根据目标数据表,确定用折线统计图展示用户C1每个月的消费总额的变化,并确定用柱状统计图展示用户C1每个月的消费总额信息。
又如,目标数据表包括的内容是2020年12个月中,用户C2每个月的消费记录,用户的展示需求是用户C1在2020年中电子设备消费的占比,则根据展示需求,确定对应目标数据表的目标图表为饼状图,并利用饼状图展示2020年中电子设备消费的占比。
S130、根据目标数据表和目标图表,输出对应的展示数据。
根据目标数据表包括的内容,以目标图表作为绘图模板,绘制图表,并展示绘制的图表和目标数据表包括的内容,换而言之,在本申请中,展示数据可以包括绘制的图表和目标数据表包括的内容。
例如,目标数据表包括的数据为D公司2010年-2020年每年的支出信息,其中支出信息具体包括电子设备采购支出、员工出差支出和员工团建支出,根据展示需求:电子设备支出变化情况,确定出目标图表为折线图,根据具体的支出信息,绘制D公司的电子设备支出信息折线统计图,其中,展示信息还可以包括员工出差支出的折线统计图、员工团建支出的折线统计图以及D公司2010年-2020年每年的支出信息,该示例中的三种折线统计图可以绘制在同一个坐标系,也可以分别绘制在各自的坐标系。
在本申请具体实施时,可以通过电子设备或与电子设备连接的输出设备输出可视化操作界面,可视化操作界面输出对应的展示数据,输出的展示数据可以是数据预览、业务大盘、数据链路图以及知识图谱等。
本实施例提供的数据展示方法,通过从数据仓获取对应数据获取请求的目标数据表;在图表集合中确定对应目标数据表的目标图表;根据目标数据表和目标图表,输出对应的展示数据,其中,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得。本申请中,根据解析规则对原始数据进行处理,得到数据仓中的数据表,直接确定对应配置请求的目标数据表和对应目标数据表的目标图表,并进一步获得展示数据,并不需要设置中间介质进行数据处理,省去了中间介质进行数据处理的时间,提高了数据展示效率。
请参阅图4,图4示出了本申请实施例中目标数据表的一种获取方法流程图,方法用于电子设备,也就是上述步骤S110的一种具体实施方式,方法包括:
S210、响应于数据获取请求,确认是否存在对应数据获取请求的已缓存的历史数据表。
S220、若不存在,则从数据仓获取对应数据获取请求的目标数据表。
S230、若存在,则将对应数据获取请求的已缓存的历史数据表作为目标数据表。
对于历史时刻获取的历史数据表,可以存储于中间件(图1中的300)中的数据缓存单元中。在接收到数据获取请求时,将数据获取请求发送至中间件,中间件根据数据获取请求,确定数据缓存单元是否存在对应数据获取请求的已缓存的历史数据表,若存在,则将已缓存的历史数据表作为S110中的目标数据表,若不存在,则从数据仓获取对应数据获取请求的目标数据表。
在一些实施例中,中间件的网络协议单元可以是支持Websocket(WebSocket是一种在单个TCP连接上进行全双工通信的协议。WebSocket通信协议于2011年被IETF定为标准RFC 6455,并由RFC7936补充规范。WebSocket API也被W3C定为标准)和http两种通信方式,通过网络协议单元可以将获取到的目标数据表快速实时的传输到电子设备,由电子设备进行实时展示。
在该实施例中,对历史时刻获取的历史数据表进行缓存,以在有的时间直接将对应的数据表发送给电子设备,不需要从数据仓再次获取数据,提高了数据展示的效率。
请参阅图5,图5示出了本申请实施例中目标图表的一种获取方法流程图,方法用于电子设备,也就是上述步骤S120的一种具体实施方式,方法包括:
S310、按照预处理规则,对目标数据表中的数据进行预处理,得到预处理数据表。
在本申请中,预处理规则可以是用户基于需求设定的,预处理规则包括但不限于字符串切割、数值计算等。例如,对于目标数据表中的数据为用户数据时,预处理规则可以是对用户数据中的字符串进行切割,又如,目标数据表中的数据为网络链接点击率时,预处理规则可以是对不同时段的网络点击率加权求和。可以是通过中间件(图1中的300)中的数据预处理单元对数据表进行预处理。
S320、在图表集合中确定对应预处理数据表的第一图表,作为目标图表。
对于运算后的预处理数据表,按照上文S120的方式确定对应的第一图表,此处不再赘述。
在本申请具体实施时,可以通过中间件(图1中的300)的数据预处理装置进行S310,然后再将得到的数据传输给电子设备,由电子设备执行S320,得到第一图表,并将第一图表作为目标图表,以继续执行后续的S130的步骤,输出对应的展示数据。
根据预处理规则,对目标数据表进行预处理,得到更加适合用户需求的预处理数据表,使得展示数据更加契合用户的需求,提高数据展示效果。
请参阅图6,图6示出了本申请实施例中目标数据表的又一种获取方法流程图,方法用于电子设备,也就是上述步骤S110的又一种具体实施方式,方法包括:
S410、响应于数据获取请求,确定出对应数据获取请求的目标数据表所存储的目标子数据库。
需要说明的是,数据仓中的数据表按照数据类型和/或数据编辑类型存储于数据仓中不同的子数据库。不同的数据类型的数据表可以存储在在不同的子数据库,例如,对于业务Mysql数据和数据中心ClickHouse数据对应的数据表,可以分别存储于对应的业务Mysql子数据库和ClickHouse子数据库;数据可编辑类型不同,存储的子数据库也可以不同,例如,对于可读写的数据存储于一个子数据库,不可读写且可查看的数据存储于另一个子数据库;对于数据类型不同的数据表可以存储在不同的子数据库,而同种数据类型的数据,数据可编辑类型不同,存储的子数据库也不同,例如,对于业务Mysql数据和数据中心ClickHouse数据对应的数据表,可以分别存储于对应的子数据库,对于数据类型均为业务Mysql数据的数据表,可以将可读写的数据表和不可读写且可查看的数据表分别存储于不同的子数据库。换而言之,在本申请中,数据表按照数据类型和数据编辑类型中的至少一者为依据,存储于数据仓中不同的子数据库。
在一些实施方式中,数据仓中的子数据库可以支持但不限于MySQL、ClickHouse和TsHouse等类型的数据表的存储。
S420、从目标子数据库获取目标数据表。
根据数据获取请求,确定对应数据获取请求的目标数据表所存储的子数据库,该子数据库即是目标子数据库。确定目标子数据库之后,直接在目标子数据库中获取对应的目标数据表。
在该实施例中,不同数据类型的数据表和/或不同数据编辑类型的数据表分别存储,实现了数据表的分类存储,便于数据仓中数据表的管理,提高数据仓中数据的存储效率和管理效率。
请参阅图7,图7示出了本申请实施例中数据仓的一种更新方法流程图,方法用于电子设备,方法包括:
S510、在监测到数据平台的数据更新时,从数据平台获取更新数据。
本申请中,数据仓中的数据表对应的原始数据是从数据平台获取,数据平台的数据可能会更新,数据仓实时监测数据平台的数据变化情况,当监测到数据平台的数据更新时,获取更新数据。
其中,数据平台的数据更新可以是指数据平台添加数据、删除数据和修改数据等,更新数据可以是指添加的部分数据、被删除的部分数据或被修改的部分数据,更新数据还可以是指被添加部分数据、被删除部分数据或被修改部分数据之后,得到的新的数据。例如,数据平台中的数据F1被添加了部分数据f,得到新的数据F2,则更新数据可以是指F2,也可以是是指f。
S520、根据解析规则对更新数据进行解析,获得第一更新数据表。
其中,S520的操作参照S110的描述,此处不再赘述,更新数据的解析与原始数据的解析过程相似。
S530、通过第一更新数据表对数据仓中的数据表进行更新操作。
在本申请中,当数据平台的数据更新是添加了新的数据时,更新数据可以是指该添加的新的数据,对应的第一更新数据表则是该添加的新的数据对应的数据表,然后将该第一更新数据表添加到数据仓进行存储,实现更新操作。在一些实施例中,更新数据可以是指该新的数据与更新前的数据的数据总和,对应的第一更新数据表则是该数据总和对应的数据表,然后将该第一更新数据表替换数据仓中更新前的数据表,实现更新操作。
当数据平台的数据更新是删除了部分无用数据时,更新数据可以是删除了部分无用数据之后,剩下的全部数据,利用该剩下的全部数据得到的数据表即是第一更新数据表,将该第一更新数据表替换数据仓中更新前的数据表,实现更新操作。在一些实施方式中,可以基于删除的部分无用数据,得到删除标识,然后将删除标识发送到数据仓,以使数据仓基于删除标识,删除数据表中与无用数据对应的部分,实现更新操作,其中,在该种方式中,删除标识可以不执行S520。
当数据平台的数据更新是修改部分数据时,更新数据可以是指该修改的部分数据,对应的第一更新数据表则是该修改的部分数据对应的数据表,然后将该第一更新数据表替换数据仓中对应的部分数据表,实现更新操作。在一些实施例中,更新数据可以是被修改的部分和未被修改的部分对应的数据总和,对应的第一更新数据表则是该数据总和对应的数据表,然后将该第一更新数据表替换数据仓中更新前的数据表,实现更新操作。
数据平台中的数据更新时,对数据仓的数据表同步更新,提高了数据仓中数据表的实时性。
请参阅图8,图8示出了本申请实施例中展示数据的一种更新方法流程图,方法用于电子设备,包括:
S610、在预设时间间隔到达时,确定数据仓中对应目标数据表的数据表是否被更新。
预设时间间隔可以是用户配置的,例如每隔5分钟或每隔30分钟等,对应目标数据表是在执行S110时,实时获取到的对应数据获取请求的目标数据表。由于数据仓基于数据平台的更新操作,更新存储的数据表,当执行S130之后,数据仓中的数据表可能被更新,对应数据获取请求的目标数据表可能也会被更新,因此,在该实施例中,在预设时间间隔到达时,确定数据仓中对应目标数据表的数据表是否被更新。
S620、若是,则从数据仓获取对应目标数据表的第二更新数据表。
数据仓中对应目标数据表的数据表是否被更新,则将该与目标数据表的数据表确定为第二更新数据表。
例如,S110获取到的目标数据表包括的内容为E网络链接点击量E1,而之后,数据平台中存储的E网络链接点击量更新到E2,数据仓中对应的数据表也被更新,得到新的数据表,新的数据表包括E网络链接点击量E2,当预设时间间隔到达时,确定存在于目标数据表对应的数据表,该数据表即是第二更新数据表,第二更新数据表包括的内容为E网络链接点击量E2。
S630、根据第二更新数据表对目标图表进行数据更新,得到第二图表。
由于目标数据表被第二更新数据表更新,原目标图表不再与更新后的第二更新数据表对应,原目标图表不再准确,此时,通过第二更新数据表中的数据对目标图表进行调整,以使目标图表可以准确反映第二更新数据表中的数据。
S640、根据第二更新数据表和第二图表,输出对应的展示数据。
其中,S640的描述参照S130的描述,此处不再赘述。
在该实施例中,对展示数据进行及时更新,并输出更新后的展示数据,提高了展示数据的实时性。
请参阅图9,图9示出了本申请实施例提供的一种数据展示装置示意图,用于电子设备,装置800包括:
获取模块810,用于响应于数据获取请求,从数据仓获取对应数据获取请求的目标数据表,数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;
确定模块820,用于在图表集合中确定对应目标数据表的目标图表;
输出模块830,用于根据目标数据表和目标图表,输出对应的展示数据。
可选地,获取模块810,还用于响应于数据获取请求,确认是否存在对应数据获取请求的已缓存的历史数据表;若不存在,则从数据仓获取对应数据获取请求的目标数据表。
可选地,确定模块820,还用于按照预处理规则,对目标数据表中的数据进行预处理,得到预处理数据表;在图表集合中确定对应预处理数据表的第一图表,作为目标图表。
可选地,数据仓中的数据表按照数据类型和/或数据编辑类型存储于数据仓中不同的子数据库;
获取模块810,还用于响应于数据获取请求,确定出对应数据获取请求的目标数据表所存储的目标子数据库;从目标子数据库获取目标数据表。
可选地,原始数据是从数据平台获取的,装置800还包括:
数据源更新模块,用于在监测到数据平台的数据更新时,从数据平台获取更新数据;根据解析规则对更新数据进行解析,获得第一更新数据表;通过第一更新数据表对数据仓中的数据表进行更新操作。
可选地,装置800还包括:
展示数据更新模块,用于在预设时间间隔到达时,确定数据仓中对应目标数据表的数据表是否被更新;若是,则从数据仓获取对应目标数据表的第二更新数据表;根据第二更新数据表对目标图表进行数据更新,得到第二图表;根据第二更新数据表和第二图表,输出对应的展示数据。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现
下面将结合图10对本申请提供的一种电子设备进行说明。
请参阅图10,图10示出了本申请实施例提供的一种电子设备的示意图,基于上述的数据展示方法。
电子设备900还包括存储器904。其中,该存储器904中存储有可以执行前述实施例中内容的程序,而处理器902可以执行该存储器904中存储的程序。
其中,处理器902可以包括一个或者多个用于处理数据的核以及消息矩阵单元。处理器902利用各种接口和线路连接整个电子设备900内的各个部分,通过运行或执行存储在存储器904内的指令、程序、代码集或指令集,以及调用存储在存储器904内的数据,执行电子设备900的各种功能和处理数据。可选地,处理器902可以采用数字信号处理(DigitalSignal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器902可集成中央处理器(Central Processing Unit,CPU)、图像处理器(GraphicsProcessing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器902中,单独通过一块通信芯片进行实现。
存储器904可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器904可用于存储指令、程序、代码、代码集或指令集。存储器904可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令、用于实现下述各个方法实施例提供的指令等。存储数据区还可以存储电子设备900在使用中所获取的数据(如,待推荐数据以及操作方式)等。
电子设备900还可以包括网络模块以及屏幕,网络模块用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯,例如和音频播放设备进行通讯。网络模块可包括各种现有的用于执行这些功能的电路元件,例如,天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。网络模块可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。屏幕可以进行界面内容的显示以及进行数据交互。
在一些实施例中,电子设备900还可以包括有:外设接口和至少一个外围设备。处理器902、存储器904和外设接口906之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外设接口连接。具体地,外围设备包括:射频组件908、定位组件912、摄像头914、音频组件916、显示屏918以及电源922等中的至少一种
外设接口906可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器902和存储器904。在一些实施例中,处理器902、存储器904和外设接口906被集成在同一芯片或电路板上;在一些其他实施例中,处理器902、存储器904和外设接口906中的任意一个或两个可以在单独的芯片或电路板上实现,本申请实施例对此不加以限定。
射频组件908用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频组件908通过电磁信号与通信网络以及其他通信设备进行通信。射频组件908将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频组件908包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频组件908可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频组件908还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
定位组件912用于定位电子设备的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件912可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
摄像头914用于采集图像或视频。可选地,摄像头914包括前置摄像头和后置摄像头。通常,前置摄像头设置在电子设备900的前面板,后置摄像头设置在电子设备900的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头914还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频组件916可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器902进行处理,或者输入至射频组件908以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在电子设备900的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器902或射频组件908的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频组件914还可以包括耳机插孔。
显示屏918用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏918是触摸显示屏时,显示屏918还具有采集在显示屏918的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器902进行处理。此时,显示屏918还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏918可以为一个,设置电子设备900的前面板;在另一些实施例中,显示屏918可以为至少两个,分别设置在电子设备900的不同表面或呈折叠设计;在又一些实施例中,显示屏918可以是柔性显示屏,设置在电子设备900的弯曲表面上或折叠面上。甚至,显示屏918还可以设置成非矩形的不规则图形,也即异形屏。显示屏918可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,机发光二极管)等材质制备。
电源922用于为电子设备900中的各个组件进行供电。电源922可以是交流电、直流电、一次性电池或可充电电池。当电源922包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
请参阅图11,图11示出了本申请一个实施例提供的计算机可读存储介质的示意图。该计算机可读存储介质1000中存储有程序代码,该程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质1000可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质1000包括非易失性计算机可读存储介质(non-transitory computer-readable storage medium)。计算机可读存储介质1000具有执行上述方法中的任何方法步骤的程序代码1010的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码1010可以例如以适当形式进行压缩。
本申请实施例还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各种可选实现方式中描述的方法。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种数据展示方法,其特征在于,包括:
响应于数据获取请求,从数据仓获取对应所述数据获取请求的目标数据表,所述数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;
在图表集合中确定对应所述目标数据表的目标图表;
根据所述目标数据表和所述目标图表,输出对应的展示数据。
2.如权利要求1所述的方法,其特征在于,所述响应于数据获取请求,从数据仓获取对应所述数据获取请求的目标数据表,包括:
响应于所述数据获取请求,确认是否存在对应所述数据获取请求的已缓存的历史数据表;
若不存在,则从所述数据仓获取对应所述数据获取请求的目标数据表。
3.如权利要求1所述的方法,其特征在于,所述在图表集合中确定对应所述目标数据表的目标图表,包括:
按照预处理规则,对所述目标数据表中的数据进行预处理,得到预处理数据表;
在所述图表集合中确定对应所述预处理数据表的第一图表,作为所述目标图表。
4.如权利要求1所述的方法,其特征在于,所述数据仓中的数据表按照数据类型和/或数据编辑类型存储于所述数据仓中不同的子数据库;所述响应于数据获取请求,从数据仓获取对应所述数据获取请求的目标数据表,包括:
响应于所述数据获取请求,确定出对应所述数据获取请求的目标数据表所存储的目标子数据库;
从所述目标子数据库获取所述目标数据表。
5.如权利要求1所述的方法,其特征在于,所述原始数据是从数据平台获取的,所述方法还包括:
在监测到所述数据平台的数据更新时,从所述数据平台获取更新数据;
根据所述解析规则对所述更新数据进行解析,获得第一更新数据表;
通过所述第一更新数据表对所述数据仓中的数据表进行更新操作。
6.如权利要求5所述的方法,其特征在于,所述根据所述目标数据表和所述目标图表,输出对应的展示数据之后,所述方法还包括:
在预设时间间隔到达时,确定所述数据仓中对应所述目标数据表的数据表是否被更新;
若是,则从数据仓获取对应所述目标数据表的第二更新数据表;
根据所述第二更新数据表对所述目标图表进行数据更新,得到第二图表;
根据所述第二更新数据表和所述第二图表,输出对应的展示数据。
7.如权利要求1所述的方法,其特征在于,所述解析规则基于所述原始数据的数据类型和/或所述原始数据的数据内容确定。
8.一种数据展示装置,其特征在于,包括:
获取模块,用于响应于数据获取请求,从数据仓获取对应所述数据获取请求的目标数据表,所述数据仓中的数据表根据解析规则对获取到的原始数据进行解析获得;
确定模块,用于在图表集合中确定对应所述目标数据表的目标图表;
输出模块,用于根据所述目标数据表和所述目标图表,输出对应的展示数据。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-7中任一项所述的方法。
10.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-7中任一项所述的方法。
CN202210217436.0A 2022-03-07 2022-03-07 数据展示方法、装置、电子设备及存储介质 Pending CN114661811A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210217436.0A CN114661811A (zh) 2022-03-07 2022-03-07 数据展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210217436.0A CN114661811A (zh) 2022-03-07 2022-03-07 数据展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114661811A true CN114661811A (zh) 2022-06-24

Family

ID=82026600

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210217436.0A Pending CN114661811A (zh) 2022-03-07 2022-03-07 数据展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114661811A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117085336A (zh) * 2023-07-21 2023-11-21 广州盈风网络科技有限公司 游戏运营数据导出方法、装置、设备及存储介质
CN117194528A (zh) * 2023-03-24 2023-12-08 山东浪潮爱购云链信息科技有限公司 一种基于商城的可视化数据处理方法、设备及介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117194528A (zh) * 2023-03-24 2023-12-08 山东浪潮爱购云链信息科技有限公司 一种基于商城的可视化数据处理方法、设备及介质
CN117085336A (zh) * 2023-07-21 2023-11-21 广州盈风网络科技有限公司 游戏运营数据导出方法、装置、设备及存储介质
CN117085336B (zh) * 2023-07-21 2024-05-17 广州盈风网络科技有限公司 游戏运营数据导出方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN106557330B (zh) 移动终端系统通知栏通知信息处理方法、装置和移动终端
US10200386B2 (en) Intelligent web page content blocking
CN111192005B (zh) 政务业务处理方法、装置、计算机设备及可读存储介质
US20120324369A1 (en) Method and system for shared document approval
WO2022127233A1 (zh) 虚拟物品的发送方法和计算机设备
CN114661811A (zh) 数据展示方法、装置、电子设备及存储介质
KR20180109043A (ko) 디지털 컨텐츠 가시성 검출
CN111464825A (zh) 一种基于地理信息的直播方法以及相关装置
CN109933594A (zh) 获取数据的方法、装置、电子设备及介质
CN113138771A (zh) 数据处理方法、装置、设备及存储介质
CN111008865A (zh) 优惠券同步展示方法、装置、服务器及存储介质
CN113032587A (zh) 多媒体信息推荐方法、系统、装置、终端和服务器
CN115495519A (zh) 报表数据加工方法及装置
US20220214962A1 (en) System for providing interactive tools for design, testing, and implementation of system architecture
CN115017340A (zh) 多媒体资源生成方法、装置、电子设备及存储介质
US11405341B1 (en) Audience-based content optimization in a messaging system
CN114238859A (zh) 数据处理系统、方法、电子设备以及存储介质
US11317129B1 (en) Targeted content distribution in a messaging system
CN110321332B (zh) 多媒体文件恢复方法、装置、终端和存储介质
CN112669057A (zh) 一种数据预测方法、装置、电子设备及存储介质
CN114489874A (zh) 小程序页面的显示方法、装置、设备及存储介质
CN111709843A (zh) 一种客户画像的生成方法、装置及电子设备
CN112783512B (zh) 应用程序包处理方法、装置、设备及存储介质
CN116089368B (zh) 文件搜索方法和相关装置
CN113220718B (zh) 数据查询方法、装置、电子设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination