CN108846112B - 绘制数据地图的方法及装置 - Google Patents

绘制数据地图的方法及装置 Download PDF

Info

Publication number
CN108846112B
CN108846112B CN201810653947.0A CN201810653947A CN108846112B CN 108846112 B CN108846112 B CN 108846112B CN 201810653947 A CN201810653947 A CN 201810653947A CN 108846112 B CN108846112 B CN 108846112B
Authority
CN
China
Prior art keywords
identifier
data
map
map data
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810653947.0A
Other languages
English (en)
Other versions
CN108846112A (zh
Inventor
张亚如
曾伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New H3C Big Data Technologies Co Ltd
Original Assignee
New H3C Big Data Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by New H3C Big Data Technologies Co Ltd filed Critical New H3C Big Data Technologies Co Ltd
Priority to CN201810653947.0A priority Critical patent/CN108846112B/zh
Publication of CN108846112A publication Critical patent/CN108846112A/zh
Application granted granted Critical
Publication of CN108846112B publication Critical patent/CN108846112B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开涉及一种绘制数据地图的方法及装置,该方法包括:获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;接收到用户访问数据地图的请求时,向服务器发送第一访问请求;接收所述服务器发送的对所述第一访问请求的反馈信息;根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;根据读取的地图数据绘制数据地图,从而提高了绘制数据地图的效率。

Description

绘制数据地图的方法及装置
技术领域
本公开涉及数据处理技术领域,尤其涉及一种绘制数据地图的方法及装置。
背景技术
目前,基于关系型图表绘制插件,例如数据地图,用户仅需提供图形,以及图形之间的关系,通过插件内置的API(Application Programming Interface,应用程序编程接口),就可以将图形之间的关系进行展示。
ETL(Extract-Transform-Load,抽取-转换-加载)文件包含了表与表之间的关系,用户通过上传ETL文件、解析ETL文件的操作,可以获取到表与表之间的关系,然后可通过数据地图展示这种关系,实现数据地图的绘制过程。
在基于数据地图绘制表与表之间的关系时,需要从数据库请求数据地图的数据,获取到表信息以及表与表之间的关系的数据,然后对数据进行封装处理,调用数据地图的API,将数据渲染到页面进行展示。
目前的数据地图绘制方式存在绘制效率低的问题。
发明内容
有鉴于此,本公开提出了一种绘制数据地图的方法及装置。
根据本公开的一个方面,提供了一种绘制数据地图的方法,所述方法应用于客户端,所述方法包括:获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;接收到用户访问数据地图的请求时,向服务器发送第一访问请求;接收所述服务器发送的对所述第一访问请求的反馈信息;根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;根据读取的地图数据绘制数据地图。
根据本公开的另一个方面,提供了一种绘制数据地图的装置,所述装置应用于客户端,所述装置包括:获取模块,用于获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;第一接收模块,用于接收到用户访问数据地图的请求时,向服务器发送第一访问请求;第二接收模块,用于接收所述服务器发送的对所述第一访问请求的反馈信息;读取模块,用于根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;绘制模块,用于根据读取的地图数据绘制数据地图。本实施例的绘制数据地图的方法,在用户访问数据地图时,在客户端设备本地获取数据地图的数据,提高了绘制地图的效率。
根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本公开的示例性实施例、特征和方面,并且用于解释本公开的原理。
图1是根据一示例性实施例示出的一种绘制数据地图的方法的流程图;
图2是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图3是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图4是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图5是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图6是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图7是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图8是根据一示例性实施例示出的绘制数据地图的方法的信令流程图;
图9是根据一示例性实施例示出的一种绘制数据地图的装置的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外,为了更好的说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
图1是根据一示例性实施例示出的一种绘制数据地图的方法的流程图,所述方法应用于客户端,如图1所示,所述方法包括:
步骤101:获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;
其中,地图数据还可包括表信息,例如表的名称,其中,表关系为表与表之间的关系。
步骤102:接收到用户访问数据地图的请求时,向服务器发送第一访问请求;
其中,用户访问数据地图的请求例如用户打开数据地图的页面,或从其他页面跳转回到数据地图的页面时,发起的访问数据地图的请求。
步骤103:接收所述服务器发送的对所述第一访问请求的反馈信息;
步骤104:根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;
步骤105:根据读取的地图数据绘制数据地图。
本实施例的绘制数据地图的方法,在用户访问数据地图时,在客户端设备本地获取数据地图的数据,提高了绘制地图的效率。
在一种可实现方式中,所述获取数据库中的地图数据并保存在本地缓存可包括:接收到用户首次访问数据地图的请求时,向所述服务器发送第二访问请求,所述第二访问请求中携带预设的标识,以使所述服务器根据所述预设的标识将所述数据库中的全部地图数据发送给本客户端。服务器可预先与客户端约定预设的标识所指示的操作,例如,该预设标识可指示服务器将数据地图的全部数据发送给客户端。
在一种可实现方式中,所述向服务器发送第一访问请求之前,该方法还可包括:
接收用户操作;若所述用户操作为上传并解析ETL文件,则为所述用户操作生成第一标识,所述第一标识携带所述用户操作对应的时间戳;若所述用户操作为删除ETL文件,则为所述用户操作生成第二标识,所述第二标识携带所述用户操作对应的时间戳;向所述服务器发送所述用户操作对应的标识以及对应的ETL文件。服务器可与终端预先约定第一标识以及第二标识所指示的操作。在用户上传ETL文件并解析ETL文件时,该ETL文件可能是服务器已经解析过的ETL文件,也可能是服务器未解析过的ETL文件,在用户请求解析的ETL文件是服务器已经解析过的ETL文件时,服务器在解析该ETL文件后,发现之前已经解析过该ETL文件,故客户端可能已经缓存了该ETL文件的数据,服务器则不再返回数据地图的数据,而是返回第一标识给客户端,以告知客户端当前解析的ETL文件为重复解析的ETL文件。在用户请求解析的ETL文件是服务器之前未解析过的ETL文件时,客户端并未缓存该的ETL文件的数据,故可接收服务器返回数据地图的数据库中新增的地图数据,例如,可包括新增的表信息和/或表与表之间的关系。删除ETL文件的操作,例如是用户选定需删除的ETL文件,点击数据地图页面的删除按钮的操作,在用户执行该操作后,生成ETL文件删除请求,该请求中可包括待删除的ETL文件的信息,例如,表名称,表之间的关系等,可在该请求中携带第二标识。当该ETL文件为服务器之前已经解析过的ETL文件时,说明客户端可能也缓存有该ETL文件的数据,在该种情况下,服务器向客户端返回删除的地图数据以及携带有时间戳的第二标识,客户端在接收到服务器返回的删除的地图数据以及第二标识后,可删除本地缓存的相应地图数据,实现了同步更新客户端缓存的数据地图数据的目的。
在一种可实现方式中,所述第一标识可用于指示所述服务器解析对应的ETL文件,并在数据库的地图数据中增加该ETL文件对应的表关系,并为增加的表关系设置该第一标识;所述第二标识可用于指示所述服务器从数据库的地图数据中删除对应的ETL文件对应的表关系,并为删除的表关系设置该第二标识。
其中,预设标识、第一标识以及第二标识可通过预置标志位的值来实现,例如,预设标识可设置为flag=0,第一标识可设置为flag=1,第三标识可设置为flag=2。
在一种可实现方式中,所述反馈信息可包括至少一个用户操作对应的标识以及该标识对应的表关系,客户端可根据用户操作对应的标识来执行相应的操作,例如,存储或删除该标识对应的表关系。
在一种可实现方式中,根据所述反馈信息更新所述缓存中的地图数据可包括:将所述反馈信息中携带的用户操作对应的标识按照时间戳进行排序;依次根据用户操作对应的标识和标识对应的表关系对所述缓存中的地图数据进行更新:根据所述第一标识,将第一标识对应的表关系插入所述缓存中的地图数据;根据所述第二标识,从所述缓存中的地图数据中删除所述第二标识对应的表关系。例如,反馈信息中携带的用户操作对应的标识包括第一标识flag=1,以及第二标识flag=2,该第一标识对应的时间戳为2018年6月13日13:01;第二标识对应的时间戳为2018年6月13日13:01,则将第一标识以及第二标识按照时间戳进行排序,则可以是第一标识在前,第二标识在后,假设第一标识对应的表关系是增加了表1以及表2之间的关系,第二标识对应的表关系是删除表2以及表3之间的关系,则,对于缓存中的地图数据,客户端首先增加表1以及表2之间的关系,然后再删除表2以及表3之间的关系。
图2是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,如图2所示,该方法可包括如下步骤:
步骤201:用户首次访问数据地图,在客户端设备本地设置flag=0,向服务器发送访问请求,在访问请求中携带标识flag=0,该flag=0为上述预设标识的一个示例。
步骤202:服务器接收到客户端的访问请求后,根据flag=0识别出需要返回全部数据地图的数据,设置flag=0。其中,可以预先在数据库中为数据地图的数据的所有表关系都设置flag=0,也可以单独通过一个文件,例如日志等,来记录flag=0的含义。
步骤203:服务器向客户端返回全部数据地图的数据和flag=0。
步骤204:客户端绘制数据地图。
步骤205:在t1时刻,用户上传并解析ETL文件1,在本地设置flag=1(t1),该flag=1(t1)为上述第一标识的一个示例,其中,flag=1(t1)表示在该flag=1的标识中携带该标识对应的时间戳t1。
步骤206:客户端向服务器发送ETL文件1以及flag=1(t1)。
步骤207:服务器解析ETL文件1,发现ETL文件1是新的,在数据地图的数据库中增加ETL文件1中的表关系,并为增加的表关系标记flag=1(t1)。可以在数据库中为增加的每个表关系设置flag=1(t1),也可以单独通过一个文件,例如日志等,记录flag=1(t1)以及对应的表关系。
步骤208:客户端上传并解析ETL文件1,在本地设置flag=1(t2),其中,t2表示flag=2对应的时间戳。
步骤209:客户端将ETL文件1以及flag=1(t2)发送至服务器。
步骤210:服务器解析ETL文件1,发现ETL文件1已解析过,则不对地图数据进行更新,只记录flag=1(t2)(该标识没有对应任何表关系)。
步骤211:用户上传并不解析ETL文件2,在客户端本地设置flag=2(t3),其中,t3为与flag=2对应的时间戳。
步骤212:客户端将ETL文件2以及flag=2(t3)发送给服务器。
步骤213:用户删除ETL文件1,在客户端本地设置flag=3(t4),其中,t4为与flag=3对应的时间戳,该flag=3为上述第二标识的一个示例。
步骤214:客户端将ETL文件以及flag=3(t4)发送给服务器,其中,t4为与flag=3对应的时间戳。
步骤215:服务器根据flag=3查找已解析的ETL文件,ETL文件1已解析过,则将ETL文件1对应的表关系从数据库的地图数据中删除,并为删除的表关系记录flag3(t4);可以在数据库中为待删除的每个表关系设置flag3(t4),但暂不删除表关系,待用户访问数据地图的页面时,即在步骤221中再从数据库删除表关系;也可以单独通过一个文件例如日志等,记录flag3(t4)以及对应的表关系。
步骤216:用户删除ETL文件2,在本地设置flag=3(t5),其中,t5是flag=3对应的时间戳;
步骤217:客户端将ETL文件以及flag=3(t5)发送至服务器;
步骤218:服务器根据flag=3(t5)查找已解析的ETL文件,由于服务器未解析过ETL文件2,不对数据库的地图数据做任何处理,记录flag3(t5)(该标识没有对应任何表关系);
步骤219:用户访问数据地图;
步骤220:客户端向服务器发送访问请求;
步骤221:服务器向客户端返回flag=1(t1)以及增加的表关系、flag=1(t2)、flag=3(t4)以及删除的表关系,以及flag=3(t5);
步骤222:客户端根据flag=1(t1)在数据地图的数据库中增加与flag=1(t1)对应的表关系,根据flag=3在数据地图的数据库中删除与flag=3(t4)对应的表关系,从而完成对客户端的缓存中的地图数据的更新,响应于用户访问数据地图的操作,绘制数据地图。
图3是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装了Web浏览器的设备,服务器例如是Web服务器,AVASCRIPT为Web浏览器中的一部分,在本实施例中,用户首次通过客户端访问数据地图,如图3所示,该方法包括如下步骤:
在用户通过Web浏览器首次访问数据地图页面时,Web浏览器生成数据地图访问请求,JAVASCTIPT设置标识flag=0,该标识为上述预设标识的一个示例,将该标识与数据地图访问请求发送给Web服务器。Web服务器在接收到JAVASCTIPT发送的访问请求和flag=0后,向JAVASCTIPT返回flag=0以及数据地图的全部数据。JAVASCTIPT通过接口获取数据地图的全部数据,该数据包括表信息以及表关系,其中,表信息中可包括表的名称。将数据封装为一个josh对象(data={“nodes”:[{“id”:1,“name”:table1},{“id”:2,“name”:table2},…],“edges”:[{“source”:1,“target”:2},…]})的形式,其中nodes存储的是表的信息,edges存储的是表关系的信息。然后将json对象在客户端localStorage.setItem('key',JSON.stringify(data))进行缓存处理,即将表信息以及表关系缓存至客户端设备本地,例如,可用key-value的形式在客户端设备本地进行缓存,同时利用数据地图,例如,蚂蚁数据可视化的G6的绘图API的net.source(data.nodes,data.edges)载入数据,使用net.render()渲染关系图,从而实现数据地图的绘制。
图4是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装了Web浏览器的设备,服务器例如是Web服务器,AVASCRIPT为Web浏览器中的一部分,如图4所示,该方法包括如下步骤:
用户通过Web浏览器的页面上传ETL文件,并未解析该ETL文件,例如,用户在上传ETL文件后未点击Web浏览器页面上解析ETL文件的按钮,则表示不解析该ETL文件,在这种情况下JAVASCTIPT设置标识flag=-1,该标识可表示当前从客户端的缓存读取地图数据。由于未对ETL文件进行解析,不会对数据地图产生影响,因此,如果此时用户访问数据地图页面,则不再向服务器的数据库请求数据地图的数据,可直接利用localStorage.getItem('key')从客户端的缓存读取地图数据,其中,(localStorage.getItem('key')标识获取指定key本地存储的值,基于读取的数据,调用数据地图的API:net.source(data.nodes,data.edges)、net.render()进行数据地图的绘制。
图5是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装了Web浏览器的设备,服务器例如是Web服务器,JAVASCRIPT为Web浏览器中的一部分,如图5所示,该方法包括如下步骤:
用户通过Web浏览器页面上传ETL文件,并解析该ETL文件,JAVASCRIPT设置标识flag=1,该标识为上述第一标识的一个示例,该第一标识表示向服务器请求新增的数据,在用户访问数据地图页面时,生成数据地图访问请求,可将第一标识携带在访问请求中发送到Web服务器,表示获取新增数据,新增数据可包括新增的表信息以及表与表之间的关系。Web服务器解析该ETL文件后,确定之前未解析过该ELT文件,返回在本次解析ETL文件以及上一次解析ETL文件的时间段内新增的数据以及flag=1给Web浏览器。Web浏览器在接收到Web服务器发送的数据以及flag=1的标识后,先利用JSON.parse.localStorage.getItem('key').data从客户端的缓存读取数据地图的数据并将其转化为JSON对象,然后将新增表信息以及表关系添加到JSON对象中,同时也更新了客户端设备中缓存数据,基于读取到的数据,调用数据地图的PI:net.source(data.nodes,data.edges)、net.render()进行数据地图的绘制。
图6是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装了Web浏览器的设备,服务器例如是Web服务器,JAVASCRIPT为Web浏览器中的一部分,如图6所示,该方法包括如下步骤:
用户通过Web浏览器页面上传ETL文件,然后解析该ETL文件,JAVASCRIPT设置标识flag=1,该标识为上述第二标识的一个示例,该标识在表示向服务器请求新增的数据,新增的数据包括新增的表信息以及表关系。在用户访问数据地图页面时,生成数据地图访问请求,将第二标识以及访问请求发送到Web服务器,Web服务器解析用户上传的ETL文件后,得到ETL的数据,判断该数据为重复数据,则确定之前解析过该ETL文件,不再返回数据给Web浏览器,只返回一个标志位addFlag=false,以及flag=1,给Web浏览器,Web浏览器接收到addFlag以及flag=1后直接利用JSON.parse.localStorage.getItem('key').data从客户端的缓存读取地图数据,基于读取到的地图数据,调用数据地图的API:net.source(data.nodes,data.edges)、net.render()进行数据地图的绘制。
图7是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装了Web浏览器的设备,服务器例如是Web服务器,JAVASCRIPT为Web浏览器中的一部分,如图7所示,该方法包括如下步骤:
用户通过Web浏览器页面删除ETL文件,例如,用户选定需删除的ETL文件,点击Web浏览器页面上的删除按钮,假设用户当前删除的是Web服务器已经解析过的ETL文件,JAVASCRIPT生成删除请求,设置标识flag=2,该标识为上述第四标识的一个示例,表示获取删除的数据,删除的数据例如上述第三数据,该数据可包括表信息以及表与表之间的关系。JAVASCRIPT将该标识以及删除请求发送至Web服务器,Web服务器在接收到该标识以及删除请求后,返回删除的表信息、表与表之间的关系以及该标识给Web浏览器。Web浏览器在接收到Web服务器返回的消息后,利用JSON.parse.localStorage.getItem('key').data从客户端设备取出缓存数据,将删除的表信息以及表之间的关系与缓存数据进行匹配,将缓存数据中与删除的表信息以及表之间关系匹配的数据删除,这样则同步更新客户端设备中的缓存数据,基于客户端中缓存的数据,在用户访问数据地图页面时调用数据地图的API:net.source(data.nodes,data.edges)、net.render()进行数据地图的绘制。
图8是根据一示例性实施例示出的绘制数据地图的方法的信令流程图,在本实施例中,客户端设备例如是安装Web浏览器的设备,服务器例如是Web服务器,JAVASCRIPT为Web浏览器中的一部分如图8所示,该方法包括如下步骤:
用户通过Web浏览器页面删除ETL文件,例如,用户选定需删除的ETL文件,点击Web浏览器页面上的删除按钮,JAVASCRIPT生成删除请求,设置标识flag=2,将该标识以及删除请求发送至Web服务器,Web服务器在接收到该标识以及删除请求后,查询到数据库中并没有该ETL文件的数据,说明Web服务器并未解析过该ETL文件,返回flag=2给客户端设备。客户端设备发现没有数据信息返回,直接利用JSON.parse.localStorage.getItem('key').data从客户端设备的缓存读取数据地图的数据,基于读取到的数据,在用户访问数据地图页面时调用数据地图的API:net.source(data.nodes,data.edges)、net.render()进行数据地图的绘制。
图9是根据一示例性实施例示出的一种绘制数据地图的装置的框图,所述装置应用于客户端,如图9所示,所述装置90包括:获取模块91,用于获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;第一接收模块92,用于接收到用户访问数据地图的请求时,向服务器发送第一访问请求;第二接收模块93,用于接收所述服务器发送的对所述第一访问请求的反馈信息;读取模块94,用于根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;绘制模块95,用于根据读取的地图数据绘制数据地图。
在一种可实现方式中,所述获取模块91可用于:接收到用户首次访问数据地图的请求时,向所述服务器发送第二访问请求,所述第二访问请求中携带预设的标识,以使所述服务器根据所述预设的标识将所述数据库中的全部地图数据发送给本客户端。
在一种可实现方式中,该装置90还可包括:第三接收模块,用于在所述向服务器发送第一访问请求之前,接收用户操作;第一生成模块,用于若所述用户操作为上传并解析ETL文件,则为所述用户操作生成第一标识,所述第一标识携带所述用户操作对应的时间戳;第二生成模块,用于若所述用户操作为删除ETL文件,则为所述用户操作生成第二标识,所述第二标识携带所述用户操作对应的时间戳;发送模块,用于向所述服务器发送所述用户操作对应的标识以及对应的ETL文件。
在一种可实现方式中,所述第一标识可用于指示所述服务器解析对应的ETL文件,并在数据库的地图数据中增加该ETL文件对应的表关系,并为增加的表关系设置该第一标识;所述第二标识可用于指示所述服务器从数据库的地图数据中删除对应的ETL文件对应的表关系,并为删除的表关系设置该第二标识。
在一种可实现方式中,所述反馈信息包括至少一个用户操作对应的标识以及该标识对应的表关系。
在一种可实现方式中,所述读取模块94可包括:排序单元,用于将所述反馈信息中携带的用户操作对应的标识按照时间戳进行排序;更新单元,用于依次根据用户操作对应的标识和标识对应的表关系对所述缓存中的地图数据进行更新:插入单元,用于根据所述第一标识,将第一标识对应的表关系插入所述缓存中的地图数据;删除单元,用于根据所述第二标识,从所述缓存中的地图数据中删除所述第二标识对应的表关系。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种绘制数据地图的方法,其特征在于,所述方法应用于客户端,所述方法包括:
获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;
接收到用户访问数据地图的请求时,向服务器发送第一访问请求;
接收所述服务器发送的对所述第一访问请求的反馈信息;
根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;
根据读取的地图数据绘制数据地图;
所述获取数据库中的地图数据并保存在本地缓存,包括:
接收到用户首次访问数据地图的请求时,向所述服务器发送第二访问请求,所述第二访问请求中携带预设的标识,以使所述服务器根据所述预设的标识将所述数据库中的全部地图数据发送给本客户端。
2.根据权利要求1所述的方法,其特征在于,所述向服务器发送第一访问请求之前,该方法还包括:
接收用户操作;
若所述用户操作为上传并解析ETL文件,则为所述用户操作生成第一标识,所述第一标识携带所述用户操作对应的时间戳;
若所述用户操作为删除ETL文件,则为所述用户操作生成第二标识,所述第二标识携带所述用户操作对应的时间戳;
向所述服务器发送所述用户操作对应的标识以及对应的ETL文件。
3.根据权利要求2所述的方法,其特征在于,
所述第一标识用于指示所述服务器解析对应的ETL文件,并在数据库的地图数据中增加该ETL文件对应的表关系,并为增加的表关系设置该第一标识;
所述第二标识用于指示所述服务器从数据库的地图数据中删除对应的ETL文件对应的表关系,并为删除的表关系设置该第二标识。
4.根据权利要求3所述的方法,其特征在于,所述反馈信息包括至少一个用户操作对应的标识以及该标识对应的表关系。
5.根据权利要求4所述的方法,其特征在于,根据所述反馈信息更新所述缓存中的地图数据,包括:
将所述反馈信息中携带的用户操作对应的标识按照时间戳进行排序;
依次根据用户操作对应的标识和标识对应的表关系对所述缓存中的地图数据进行更新:
根据所述第一标识,将第一标识对应的表关系插入所述缓存中的地图数据;
根据所述第二标识,从所述缓存中的地图数据中删除所述第二标识对应的表关系。
6.一种绘制数据地图的装置,其特征在于,所述装置应用于客户端,所述装置包括:
获取模块,用于获取数据库中的地图数据并保存在本地的缓存,所述地图数据包含至少一条表关系;
第一接收模块,用于接收到用户访问数据地图的请求时,向服务器发送第一访问请求;
第二接收模块,用于接收所述服务器发送的对所述第一访问请求的反馈信息;
读取模块,用于根据所述反馈信息更新所述缓存中的地图数据,从所述缓存读取更新后的地图数据;
绘制模块,用于根据读取的地图数据绘制数据地图;
所述获取模块用于:
接收到用户首次访问数据地图的请求时,向所述服务器发送第二访问请求,所述第二访问请求中携带预设的标识,以使所述服务器根据所述预设的标识将所述数据库中的全部地图数据发送给本客户端。
7.根据权利要求6所述的装置,其特征在于,该装置还包括:
第三接收模块,用于在所述向服务器发送第一访问请求之前,接收用户操作;
第一生成模块,用于若所述用户操作为上传并解析ETL文件,则为所述用户操作生成第一标识,所述第一标识携带所述用户操作对应的时间戳;
第二生成模块,用于若所述用户操作为删除ETL文件,则为所述用户操作生成第二标识,所述第二标识携带所述用户操作对应的时间戳;
发送模块,用于向所述服务器发送所述用户操作对应的标识以及对应的ETL文件。
8.根据权利要求7所述的装置,其特征在于,
所述第一标识用于指示所述服务器解析对应的ETL文件,并在数据库的地图数据中增加该ETL文件对应的表关系,并为增加的表关系设置该第一标识;
所述第二标识用于指示所述服务器从数据库的地图数据中删除对应的ETL文件对应的表关系,并为删除的表关系设置该第二标识。
9.根据权利要求8所述的装置,其特征在于,所述反馈信息包括至少一个用户操作对应的标识以及该标识对应的表关系。
10.根据权利要求9所述的装置,其特征在于,所述读取模块,包括:
排序单元,用于将所述反馈信息中携带的用户操作对应的标识按照时间戳进行排序;
更新单元,用于依次根据用户操作对应的标识和标识对应的表关系对所述缓存中的地图数据进行更新:
插入单元,用于根据所述第一标识,将第一标识对应的表关系插入所述缓存中的地图数据;
删除单元,用于根据所述第二标识,从所述缓存中的地图数据中删除所述第二标识对应的表关系。
CN201810653947.0A 2018-06-22 2018-06-22 绘制数据地图的方法及装置 Active CN108846112B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810653947.0A CN108846112B (zh) 2018-06-22 2018-06-22 绘制数据地图的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810653947.0A CN108846112B (zh) 2018-06-22 2018-06-22 绘制数据地图的方法及装置

Publications (2)

Publication Number Publication Date
CN108846112A CN108846112A (zh) 2018-11-20
CN108846112B true CN108846112B (zh) 2021-04-27

Family

ID=64203490

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810653947.0A Active CN108846112B (zh) 2018-06-22 2018-06-22 绘制数据地图的方法及装置

Country Status (1)

Country Link
CN (1) CN108846112B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108037973A (zh) * 2017-12-20 2018-05-15 苏州优圣美智能系统有限公司 一种与数据处理工具交互的数据流建模和处理系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7849050B2 (en) * 2007-01-29 2010-12-07 Business Objects Data Integration, Inc. Apparatus and method for analyzing impact and lineage of multiple source data objects
CN104615453B (zh) * 2014-09-26 2018-02-09 腾讯科技(深圳)有限公司 一种地图数据处理方法、装置及系统
CN105426443A (zh) * 2015-11-06 2016-03-23 百度在线网络技术(北京)有限公司 一种地图数据的处理方法、装置及系统
CN105608191A (zh) * 2015-12-23 2016-05-25 云南电网有限责任公司 一种基于EnersunWebCache动态生成缓存电网地图瓦片的方法
CN107038017B (zh) * 2016-02-03 2019-06-14 博雅网络游戏开发(深圳)有限公司 渲染数据获取的方法和装置
CN106230907B (zh) * 2016-07-22 2019-05-14 华南理工大学 一种社保大数据可视化方法及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108037973A (zh) * 2017-12-20 2018-05-15 苏州优圣美智能系统有限公司 一种与数据处理工具交互的数据流建模和处理系统

Also Published As

Publication number Publication date
CN108846112A (zh) 2018-11-20

Similar Documents

Publication Publication Date Title
CN110427368B (zh) 数据处理方法、装置、电子设备及存储介质
CN109800207B (zh) 日志解析方法、装置、设备及计算机可读存储介质
CN108614837B (zh) 文件存储和检索的方法及装置
CN109299157B (zh) 一种分布式大单表的数据导出方法及装置
CN111221469B (zh) 同步缓存数据的方法、装置和系统
CN111046041B (zh) 数据处理方法和装置、存储介质及处理器
CN111767297B (zh) 大数据处理方法、装置、设备及介质
CN112417360B (zh) 网页渲染方法和装置
US11734229B2 (en) Reducing database fragmentation
US10846338B2 (en) Data processing device, data processing method, and non-transitory computer readable medium
CN111339171A (zh) 数据查询的方法、装置及设备
CN111083054B (zh) 路由配置处理方法、装置、计算机设备和存储介质
CN110688201B (zh) 一种日志管理方法及相关设备
CN110851477A (zh) 流数据处理方法、装置、计算机设备和存储介质
CN114398520A (zh) 数据检索方法、系统、装置、电子设备及存储介质
CN113495765A (zh) 业务数据的填充方法和装置、存储介质及电子装置
CN108846112B (zh) 绘制数据地图的方法及装置
CN110008243B (zh) 一种数据表处理方法及装置
CN109068286B (zh) 一种信息解析的方法、介质及设备
CN108241710A (zh) 一种文件创建方法、装置以及文件查询方法、装置
CN111339170A (zh) 数据处理方法、装置、计算机设备及存储介质
CN110389966B (zh) 一种信息处理方法及装置
CN108038121B (zh) 一种缓存方法及终端
JP6522261B1 (ja) ファイルの属性情報を管理する方法及びコンピューティング装置{method for managing attribute information of file and computing device using the same}
CN118394794B (zh) 一种跨多个数据源的联邦查询装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant