CN113190360A - 基于云平台的物流数据共享方法、装置、设备及存储介质 - Google Patents
基于云平台的物流数据共享方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113190360A CN113190360A CN202110420567.4A CN202110420567A CN113190360A CN 113190360 A CN113190360 A CN 113190360A CN 202110420567 A CN202110420567 A CN 202110420567A CN 113190360 A CN113190360 A CN 113190360A
- Authority
- CN
- China
- Prior art keywords
- data
- cloud platform
- file
- logistics
- logistics data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/541—Interprogram communication via adapters, e.g. between incompatible applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
Abstract
本发明涉及云技术领域,公开了一种基于云平台的物流数据共享方法、装置、设备及存储介质,用于解决不同系统间的异构物流数据无法实现连通共享的问题。所述方法包括:接收第一终端发送的数据上传请求,数据上传请求携带第一标识;根据第一标识从第一终端获取初始物流数据并将初始物流数据传输至云平台的缓存库;调用预置的云平台接口根据预设数据转换协议对缓存库中的初始物流数据进行数据转换,得到中间文件;接收第二终端发送的数据获取请求,数据获取请求携带第二标识;调用云平台接口从共享数据库中获取与第二标识匹配的候选物流数据;根据预设数据转换协议对候选物流数据进行数据转换,得到目标物流数据并将目标物流数据发送至第二终端。
Description
技术领域
本发明涉及云技术领域,尤其涉及一种基于云平台的数据共享方法、装置、设备及存储介质。
背景技术
近年来,云平台已经发展为一种能为用户提供大量多样化的资源的通用平台。同时,云平台已经展现出了其在广泛的领域中的适用性。云平台的不断发展,为物流信息化的发展提供了新的契机,在物流云信息共享关键的则是存在于各物流中心中的异构数据的交换共享。
当前,处在大数据时代信息的融合共享将给数据带来巨大的增量价值,而由于各物流中心应用平台都是各自建设,数据系统的实现方式及执行标准并不统一,基于不同的应用系统,采用的数据多种多样,则也会导致各分系统产生多种异构数据,形成信息孤岛,为数据信息的共享带来了极大的不便。
发明内容
本发明的主要目的在于解决不同系统间的异构物流数据无法实现连通共享的问题。
本发明第一方面提供了一种基于云平台的物流数据共享方法,包括:接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。
可选的,在本发明第一方面的第一种实现方式中,在所述接收第一终端发送的数据上传请求之后,在所述根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库之前,还包括:读取预置配置信息数据库中的接口配置文件,所述接口配置文件包括输入数据类型信息及响应结果数据类型信息;基于所述接口配置文件配置所述云平台接口;根据预置数据项说明文件,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,并确定数据转换协议。
可选的,在本发明第一方面的第二种实现方式中,所述根据预置数据项说明文件,建立所述云平台接口与云平台的共享数据库之间的数据映射关系,并确定数据转换协议包括:扫描所述预置数据项说明文件,获取预设的数据项类型信息;根据所述预设的数据项类型信息,对所述接口配置文件中的第一数据项进行类型匹配,得到第一数据项类型;判断所述接口配置文件中是否存在与所述预设的数据项类型信息不匹配的第二数据项;若存在所述第二数据项,则将所述第二数据项的数据类型设置为未知数据项类型;根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件;根据所述数据映射关系文件确定所述数据转换协议,并将所述数据转换协议发送至所述云平台接口的接口数据库。
可选的,在本发明第一方面的第三种实现方式中,所述根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件包括:读取所述第一数据项类型,构建所述第一数据项类型与所述数据项类型信息中数据项类型之间的第一数据转换关系,生成第一数据映射关系文件;读取所述未知数据项类型,构建所述未知数据项类型与所述数据项类型信息中数据项类型之间的第二数据转换关系,生成第二数据映射关系文件;对所述第一数据映射关系及所述第二数据映射关系进行合并,得到所述云平台接口与所述云平台的共享数据库之间的数据映射关系文件。
可选的,在本发明第一方面的第四种实现方式中,所述调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库包括:通过所述云平台接口解析所述数据转换协议,获取所述数据映射关系文件;基于所述数据映射关系文件,对所述初始物流数据对应的待处理数据项进行转置处理,得到所述中间文件;将所述中间文件传输至所述共享数据库。
可选的,在本发明第一方面的第五种实现方式中,所述基于所述数据映射关系文件,对所述初始物流数据中的待处理数据项进行转置处理,得到所述中间文件包括:扫描所述初始物流数据,读取所述第一文件中的结构信息元数据及所述第二文件中的内容信息元数据;根据所述数据映射关系文件,生成所述结构信息元数据对应的第一目标数据项及所述内容信息元数据对应的第二目标数据项;将所述第一目标数据项及所述第二目标数据项合并为待处理数据项;调用所述云平台接口的预置映射转换函数对所述待处理数据项进行映射处理,得到所述中间文件。
可选的,在本发明第一方面的第六种实现方式中,所述根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库包括:扫描所述第一标识,获取所述第一标识中的权限验证信息;当所述权限验证信息满足预设条件时,读取所述第一标识的传输配置文件;根据所述传输配置文件读取所述初始物流数据并将所述初始物流数据发送至所述云平台的缓存库。
本发明第二方面提供了一种基于云平台的物流数据共享装置,包括:第一接收模块,用于接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;数据传输模块,用于根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;数据转换模块,用于调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;第二接收模块,用于接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;数据获取模块,用于调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;数据发送模块,用于根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。
可选的,在本发明第二方面的第一种实现方式中,所述基于云平台的物流数据共享装置还包括:
数据读取模块,用于读取预置配置信息库中的接口配置文件,所述接口配置文件包括输入数据类型信息及响应经过数据类型信息;接口配置模块,用于基于所述接口配置文件配置所述云平台接口;协议确定模块,用于根据预置数据项说明文件,建立所述云平台与所述云平台的共享数据库之间的数据映射关系,并确定数据转换协议。
可选的,在本发明第二方面的第二种实现方式中,所述协议确定模块包括:扫描单元,用于扫描所述预置数据项说明文件,获取预设的数据项类型信息;匹配单元,用于根据所述预设的数据项类型信息,对所述接口配置文件中的第一数据项进行类型匹配,得到第一数据项类型;判断单元,用于判断所述接口配置文件中是否存在与所述预设的数据项类型信息不匹配的第二数据项;设置单元,用于若存在所述第二数据项,则将所述第二数据项的数据类型设置为未知数据项类型;建立单元,用于根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件;发送单元,用于根据所述数据映射关系文件确定所述数据转换协议,并将所述数据转换协议发送至所述云平台接口的接口数据库。
可选的,在本发明第二方面的第三种实现方式中,所述建立单元具体用于:读取所述第一数据项类型,构建所述第一数据项类型与所述数据项类型信息中数据项类型之间的第一数据转换关系,生成第一数据映射关系文件;读取所述未知数据项类型,构建所述位置数据项类型与所述数据项类型信息中数据项类型之间的第二数据转换关系,生成第二数据映射关系文件;对所述第一数据映射关系及所述第二数据映射关系进行合并,得到所述云平台接口与所述云平台的共享数据库之间的数据映射关系文件。
可选的,在本发明第二方面的第四种实现方式中,所述数据转换模块包括:解析单元,用于通过所述云平台接口解析所述数据转换协议,获取所述数据映射关系文件;转置单元,用于基于所述数据映射关系文件,对所述初始物流数据对应的待处理数据项进行转置处理,得到所述中间文件;传输单元,用于将所述中间文件传输至所述共享数据库。
可选的,在本发明第二方面的第五种实现方式中,所述转置单元具体用于:扫描所述初始物流数据,读取所述第一文件中的结构信息元数据及所述第二文件中的内容信息元数据;根据所述数据映射关系文件,生成所述结构信息元数据对应的第一目标数据项及所述内容信息元数据对应的第二目标数据项;将所述第一目标数据项及所述第二目标数据项合并为待处理数据项;调用所述云平台接口的预置映射转换函数对所述待处理数据项进行映射处理,得到所述中间文件。
可选的,在本发明第二方面的第六种实现方式中,所述数据传输模块具体用于:扫描所述第一标识,获取所述第一标识中的权限验证信息;当所述权限验证信息满足预设条件时,读取所述第一标识的传输配置文件;根据所述传输配置文件读取所述初始物流数据并将所述初始物流数据发送至所述云平台的缓存库。
本发明第三方面提供了一种基于云平台的物流数据共享设备,包括:存储器和至少一个处理器,所述存储器中存储有指令;所述至少一个处理器调用所述存储器中的所述指令,以使得所述基于云平台的物流数据共享设备执行上述的基于云平台的物流数据共享方法。
本发明的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述的基于云平台的物流数据共享方法。
本发明提供的技术方案中,接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。本发明实施例中,以云平台为基础,充分利用计算资源,能够有效降低交换共享程序的开发成本,本发明实施例中配置的云平台接口,减少了重复开发的资源及时间成本,降低了资源的浪费,进而使得不同系统间的异构物流数据实现数据互通共享。
附图说明
图1为本发明实施例中基于云平台的物流数据共享方法的一个实施例示意图;
图2为本发明实施例中基于云平台的物流数据共享方法的另一个实施例示意图;
图3为本发明实施例中基于云平台的物流数据共享装置的一个实施例示意图;
图4为本发明实施例中基于云平台的物流数据共享设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种基于云平台的物流数据共享方法、装置、设备及存储介质。本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”或“具有”及其任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解,下面对本发明实施例的具体流程进行描述,请参阅图1,本发明实施例中基于云平台的物流数据共享方法的一个实施例包括:
101、接收第一终端发送的数据上传请求,数据上传请求携带第一标识,第一标识用于指示第一终端将要上传的初始物流数据;
可以理解的是,本发明的执行主体可以为基于云平台的物流数据共享装置,还可以是服务器,具体此处不做限定。本发明实施例以服务器为执行主体为例进行说明。
本实施例中,第一终端可以是某个物流中心的物流数据处理终端,服务器接收该物流数据处理终端发出的上传数据请求,该数据上传请求携带第一标识,其中,第一标识具体是指与该数据上传请求对应的传输协议配置文件及物流数据终端所需上传数据的数据索引文件,该传输协议配置文件是用于服务器向物流数据处理终端发起数据传输通道的一种配置文件。例如,在根据传输协议配置文件配置传输协议后,传输方式默认优先使用用户数据体协议(User Datagram Protocol,UDP)传输,该UDP协议是一种无连接的协议,当传输中断时自动切换为传输控制协议(Transmission Control Protocol,TCP)进行传输,该TCP协议是一种面向连接的、可靠的、基于字节流的传输层通信协议。
102、根据第一标识从第一终端获取初始物流数据并将初始物流数据传输至云平台的缓存库,初始物流数据包括第一文件及第二文件,第一文件用于存储初始物流数据的结构信息元数据,第二文件用于存储初始物流数据的内容信息元数据;
具体的,服务器在获取到传输协议配置文件后,服务器从其自有的数据端口向物流数据处理终端发起一条数据通道,并根据第一标识中的数据索引文件从该初始物流数据处理终端中获取所需上传的XML文件格式的初始物流数据,该初始物流数据为与收货相关的数据,例如,到货量(单位)、订单数、车辆的装载量、收货区域面积、收货作业时间、每天收货SKU数等。在本实施例中,将该初始物流数据分为两部分进行保存,即上述的第一文件和第二文件,该结构信息元数据是指字段名称、类型等数据,该内容信息元数据是指该初始物流数据信息中每行中子元素及每列中下属子元素的值,能够保证初始物流数据信息的完整性,避免上传过程中的数据丢失。
可选的,步骤102包括:
扫描第一标识,获取第一标识中的权限验证信息;
当权限验证信息满足预设条件时,读取第一标识的传输配置文件;
根据传输配置文件读取初始物流数据并将初始物流数据发送至云平台的缓存库。
具体的,服务器获取该第一标识的物流数据处理终端的身份权限验证信息,该权限验证信息包括验证指令或物流数据处理终端的用户名和密码,服务器通过对验证指令进行验证或对用户名和密码进行验证判断该数据处理终端是否具有相应权限,若验证失败,则返回错误信息并对该第一终端发送重新验证的提示信息,若验证通过则与该第一终端建立连接,并根据该第一标识,通过数据传输通道读取初始物流数据并发送至云平台的缓存库,可以提升数据共享的安全性,降低数据泄露的风险。
103、调用预置的云平台接口根据预设数据转换协议对缓存库中的初始物流数据进行数据转换,得到中间文件,并将中间文件传输至云平台的共享数据库;
具体的,该预置的云平台接口采用网络服务描述语言(Web ServicesDescription Language,WSDL)描述,该WSDL语言,用于描述云服务及云服务访问方法,可以规定服务位置以及操作方法,预置云平台接口预先封装有数据转化协议,而该数据转换协议则是根据初始物流数据类型及云平台中的数据类型确定的,服务器通过调用该接口对初始物流数据包括的第一文件及第二文件进行数据转换,例如,服务器中的数据转换模块将内容信息元数据的子元素的值2通过预置数据转换函数进行映射计算,假设该函数为f(x)=x2,则得到4作为转换后的值,此处只是为了便于理解进行简单示例,并不限定此实施例中实际应用的数据转换函数,将该初始物流数据转换后的文件作为中间文件发送至云平台的共享数据库中。
104、接收第二终端发送的数据获取请求,数据获取请求携带第二标识,第二标识用于指示第二终端将要获取的目标物流数据;
具体的,第二终端可以是某个物流中心的物流数据处理终端,可以与第一终端为同一终端,也可为不同终端,服务器接收该物流数据处理终端发出的数据获取请求,该数据获取请求携带第二标识,其中第二标识具体是指与该数据获取请求对应的传输协议配置文件及物流数据终端所需获取数据的数据索引文件,该传输协议配置文件与上述步骤101中介绍的文件相类似,故此处不再赘述。
105、调用云平台接口从共享数据库中获取与第二标识匹配的候选物流数据;
具体的,服务器通过调用该云平台接口并根据第二标识中的数据索引文件从该初始物流数据处理终端(第二终端)中获取所需获取的对应候选物流数据,本实施例中的数据索引文件格式也为XML格式文件,其中该候选物流数据指的是初始物流数据进行数据转换后的相应数据。
106、根据预设数据转换协议对候选物流数据进行数据转换,得到目标物流数据并将目标物流数据发送至第二终端。
具体的,服务器通过采用WSDL语言描述的云平台接口,基于数据转换协议,对该候选物流数据进行数据转换,此处数据转换则根据该预置数据转换函数的反函数进行数据转换,从而获得目标物流数据,并根据第二终端发送的数据获取请求中的数据传输协议将该目标物流数据返回至第二终端,由于此处第二终端并不一定与第一终端的系统类型相同,故此处的数据传输协议会根据第二终端进行个性化配置,以便于在第二终端获取目标物流数据后能够与该第二终端适配并完整展示。
本发明实施例中,服务器接收该物流数据处理终端发出的上传数据请求,并根据该数据上传请求获取到传输协议配置文件后,从其自有的数据端口向物流数据处理终端发起一条数据通道,并根据第一标识中的数据索引文件从该初始物流数据处理终端中获取所需上传的XML文件格式的初始物流数据,将该初始物流数据分为两部分进行保存,即上述的第一文件和第二文件,该结构信息元数据是指字段名称、类型等数据,该内容信息元数据是指该初始物流数据信息中每行中子元素及每列中下属子元素的值,根据数据转换协议将XML格式的初始物流数据转换为中间文件并传输至共享库,继而服务器根据第二终端的数据获取请求获取对应的候选物流数据并转换,得到目标物流数据返回至第二终端,本发明实施例中将初始物流数据分为两个文件保存,可以极大的降低数据在传输或转换过程中出现缺失或格式错误的概率,基于云平台开发的用于数据转换及数据传输的接口,可以充分利用计算资源,能够有效降低交换共享程序的开发成本,减少了重复开发的资源及时间成本,降低了资源的浪费,进而使得不同系统间的异构物流数据实现数据互通共享。
请参阅图2,本发明实施例中基于云平台的物流数据共享方法的另一个实施例包括:
2001、接收第一终端发送的数据上传请求,数据上传请求携带第一标识,第一标识用于指示第一终端将要上传的初始物流数据;
在本实施例中,步骤2001的具体实施方式与上述步骤101类似,此处不再赘述。
2002、读取预置配置信息数据库中的接口配置文件,接口配置文件包括输入数据类型信息及响应结果数据类型信息;
具体的,该接口配置文件具体是指包括不同文字段标签的字段名称信息的XML文件,本实施例中的该XML文件即包括输入数据类型信息及与输入数据类型相对应的响应结果数据类型,并且该接口配置文件还包括数据连接的格式,包含交互控制及传输数据的方式。
2003、基于接口配置文件配置云平台接口;
具体的,服务器在读取到接口配置文件之后,对该接口配置文件进行解析,识别接口配置文件中云平台与多种目标连接终端连接的连接方式,交互控制与传输数据的方式,服务器根据上述的交互控制及传输数据的方式配置该云平台接口。
2004、根据预置数据项说明文件,建立云平台接口与云平台的共享数据库之间的数据映射关系,并确定数据转换协议;
具体的,该数据项说明文件具体包括数据项名称、数据项含义说明、别名、数据类型、长度、取值范围、取值含义等内容,服务器根据该数据项说明文件的具体内容,分别对输入数据类型信息及响应结果数据类型信息的数据项说明详细内容进行匹配,并计算得到数据转换函数,从而得到该数据映射关系,进而确定与该数据映射关系相匹配的数据转换协议,在本实施例中,能够根据说明文件将输入数据及响应结果之间的转换关系计算出数据转换函数,可以准确地进行数据转换而降低数据转换中的转换失败的风险。
可选的,步骤2004具体包括:
扫描预置数据项说明文件,获取预设的数据项类型信息;
根据预设的数据项类型信息,对接口配置文件中的第一数据项进行类型匹配,得到第一数据项类型;
判断接口配置文件中是否存在与预设的数据项类型信息不匹配的第二数据项;
若存在第二数据项,则将第二数据项的数据类型设置为未知数据项类型;
根据第一数据项类型及未知数据项类型,建立云平台接口与云平台的共享数据库之间的数据映射关系,得到数据映射关系文件;
根据数据映射关系文件确定数据转换协议,并将数据转换协议发送至云平台接口的接口数据库。
具体的,服务器通过扫描该数据项说明文件,获取该预设的数据项类型信息,例如该预设的数据项类型信息为A、B、C,并扫描接口配置文件中的数据项类型信息,例如该扫描接口配置文件中的数据项类型信息为D、E、F,假设A对应D,B对应E,C对应F,则建立相应的对应关系,此时判断接口配置文件中的数据项是否存在与数据项类型不匹配的数据项,如接口配置文件存在类型G,与预设的数据项类型无法建立对应关系,则将该类型G设置为未知数据项类型,此时对该未知数据项类型在进行数据类型格式转换时对各种数据库不同的数据类型与所列出的数据类型进行整合,对整合后的数据类型与云平台建立映射关系,进而确定数据转换协议,从而避免因存在不匹配的数据项而导致数据转换不完全的情况。
可选的,根据第一数据项类型及未知数据项类型,建立云平台接口与云平台的共享数据库之间的数据映射关系,得到数据映射关系文件进一步包括:
读取第一数据项类型,构建第一数据项类型与数据项类型信息中数据项类型之间的第一数据转换关系,生成第一数据映射关系文件;
读取未知数据项类型,构建未知数据项类型与数据项类型信息中数据项类型之间的第二数据转换关系,生成第二数据映射关系文件;
对第一数据映射关系及第二数据映射关系进行合并,得到云平台接口与云平台的共享数据库之间的数据映射关系文件。
具体的,服务器根据初始物流数据中的多行数据剖析初始物流数据的主键之外的至少一个其他属性的属值,并根据云平台的共享数据库中的多行数据剖析共享数据库的相应主键之外的特定属性的属性值,也就是说,从初始物流数据中的多行数据获取主键之外的至少一个其他属性的属性值及其对应的主键值集合,并从共享数据库中的多行数据获取相应主键之外的特定属性的属性值及其对应的相应主键值集合。具体地,在该步骤中,针对初始物流数据的主键之外的至少一个其他属性中的每一个其他属性,从初始物流数据中的多行数据获得该其他属性的所有不同的属性值,并且获得该其他属性的每一个不同的属性值所对应的主键的主键值集合;类似地,针对共享数据库的相应主键之外的特定属性,从共享中数据库的多行数据获得该特定属性的所有不同的属性值,并且获得该特定属性的每一个不同的属性值所对应的相应主键的主键值集合,从而根据主键值集合来构建各自对应的数据映射关系文件。
2005、根据第一标识从第一终端获取初始物流数据并将初始物流数据传输至云平台的缓存库,初始物流数据包括第一文件及第二文件,第一文件用于存储初始物流数据的结构信息元数据,第二文件用于存储初始物流数据的内容信息元数据;
在本实施例中,步骤2005的具体实施方式与上述步骤102类似,此处不再赘述。
2006、通过云平台接口解析数据转换协议,获取数据映射关系文件;
具体的,服务器对该数据转换协议进行扫描,从而获取该数据映射关系,以便于后续对待处理数据项进行数据转换处理。
2007、基于数据映射关系文件,对初始物流数据对应的待处理数据项进行转置处理,得到中间文件;
具体的,服务器在得到数据映射关系文件后,根据数据映射关系文件中的对应关系,将初始物流数据的数据项与数据映射关系文件中的数据项目进行类型匹配,进而可以得到该待处理数据项,则根据映射关系,将该待处理数据项进行转置处理,从而得到该中间文件,便于后续其它终端在需要获取数据时,来对中间文件进行处理。
可选的,步骤2007进一步包括:
扫描初始物流数据,读取第一文件中的结构信息元数据第二文件中的内容信息元数据;
根据数据映射关系文件,生成结构信息元数据对应的第一目标数据项及内容信息元数据对应的第二目标数据项;
将第一目标数据项及第二目标数据项合并为待处理数据项;
调用云平台接口的预置映射转换函数待处理数据项进行映射处理,得到中间文件。
具体的,由于该初始物流数据包括两部分文件,服务器则对第一文件及第二文件分别进行匹配,首先对第一文件中的结构信息元数据进行匹配,例如字段名称及类型等数据,将此类结构信息元数据对应的数据项进行匹配,同时对第二文件的内容信息元数据进行匹配,例如将内容信息元数据中每列中下属子元素的值等内容信息元数据进行匹配,继而将第一文件及第二文件两部分相匹配的数据项进行拼接,得到待处理数据项,进而对该待处理数据项进行转置处理。
2008、将中间文件传输至共享数据库;
服务器通过云平台接口将中间文件发送至云平台的共享数据库中,至此,已完成对物流异构数据的数据上传阶段,此后,会根据不同终端的数据获取请求或数据调阅请求,对存储在云平台共享数据库的中间文件进行转换,以便于不同终端进行查阅。
2009、接收第二终端发送的数据获取请求,数据获取请求携带第二标识,第二标识用于指示第二终端将要获取的目标物流数据;
2010、调用云平台接口从共享数据库中获取与第二标识匹配的候选物流数据;
2011、根据预设数据转换协议对候选物流数据进行数据转换,得到目标物流数据并将目标物流数据发送至第二终端。
在本实施例中,步骤2009-2011的具体实施方式与上述步骤104-106类似,此处不再赘述。
本发明实施例中,服务器接收第一终端发送的数据上传请求,服务器从第一终端获取初始物流数据,将该初始物流数据分为两部分进行保存,即第一文件和第二文件,能够保证初始物流数据信息的完整性,避免上传过程中的数据丢失,服务器读取接口配置文件,并根据接口配置文件配置云平台接口,服务器根据该数据项说明文件的具体内容,分别对输入数据类型信息及响应结果数据类型信息的数据项说明详细内容进行匹配,并计算得到数据转换函数,从而得到该数据映射关系,并根据映射关系确定转换协议,之后从第一终端获取初始物流数据并传输至缓存库,通过云平台接口解析数据转换协议,获取数据映射关系文件,并根据该映射关系文件,对初始物流数据进行转置处理,得到中间文件并将该中间文件传输至共享数据库,此后,会根据不同终端的数据获取请求或数据调阅请求,对存储在云平台共享数据库的中间文件进行转换,以便于不同终端进行查阅,进而实现物流数据的流通共享,其中,若接口配置文件存在与预设数据项类型不匹配的数据项,则将其类型设置为未知数据项类型,以便于在无法识别新的数据类型时,可以根据实际应用情况做出相应的目标数据类型的选择,确保数据转换的完整性。
请参阅图3,本发明实施例中基于云平台的物流数据共享装置一个实施例包括:
第一接收模块301,用于接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;
数据传输模块302,用于根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;
数据转换模块303,用于调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;
第二接收模块304,用于接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;
数据获取模块305,用于调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;
数据发送模块306,用于根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。
可选的,所述基于云平台的物流数据共享装置还包括:
数据读取模块307,用于读取预置配置信息库中的接口配置文件,所述接口配置文件包括输入数据类型信息及响应经过数据类型信息;
接口配置模块308,用于基于所述接口配置文件配置所述云平台接口;
协议确定模块309,用于根据预置数据项说明文件,建立所述云平台与所述云平台的共享数据库之间的数据映射关系,并确定数据转换协议。
可选的,协议确定模块309包括:
扫描单元3091,用于扫描所述预置数据项说明文件,获取预设的数据项类型信息;
匹配单元3092,用于根据所述预设的数据项类型信息,对所述接口配置文件中的第一数据项进行类型匹配,得到第一数据项类型;
判断单元3093,用于判断所述接口配置文件中是否存在与所述预设的数据项类型信息不匹配的第二数据项;
设置单元3094,用于若存在所述第二数据项,则将所述第二数据项的数据类型设置为未知数据项类型;
建立单元3095,用于根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件;
发送单元3096,用于根据所述数据映射关系文件确定所述数据转换协议,并将所述数据转换协议发送至所述云平台接口的接口数据库。
可选的,建立单元还可以具体用于:
读取所述第一数据项类型,构建所述第一数据项类型与所述数据项类型信息中数据项类型之间的第一数据转换关系,生成第一数据映射关系文件;
读取所述未知数据项类型,构建所述位置数据项类型与所述数据项类型信息中数据项类型之间的第二数据转换关系,生成第二数据映射关系文件;
对所述第一数据映射关系及所述第二数据映射关系进行合并,得到所述云平台接口与所述云平台的共享数据库之间的数据映射关系文件。
可选的,数据转换模块303包括:
解析单元3031,用于通过所述云平台接口解析所述数据转换协议,获取所述数据映射关系文件;
转置单元3032,用于基于所述数据映射关系文件,对所述初始物流数据对应的待处理数据项进行转置处理,得到所述中间文件;
传输单元3033,用于将所述中间文件传输至所述共享数据库。
可选的,转置单元3033还可以具体用于:
扫描所述初始物流数据,读取所述第一文件中的结构信息元数据及所述第二文件中的内容信息元数据;
根据所述数据映射关系文件,生成所述结构信息元数据对应的第一目标数据项及所述内容信息元数据对应的第二目标数据项;
将所述第一目标数据项及所述第二目标数据项合并为待处理数据项;
调用所述云平台接口的预置映射转换函数对所述待处理数据项进行映射处理,得到所述中间文件。
可选的,数据传输模块302还可以具体用于:
扫描所述第一标识,获取所述第一标识中的权限验证信息;
当所述权限验证信息满足预设条件时,读取所述第一标识的传输配置文件;
根据所述传输配置文件读取所述初始物流数据并将所述初始物流数据发送至所述云平台的缓存库。
图4是本发明实施例提供的一种基于云平台的物流数据共享设备的结构示意图,该基于云平台的物流数据共享设备400可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processing units,CPU)410(例如,一个或一个以上处理器)和存储器420,一个或一个以上存储应用程序433或数据432的存储介质430(例如一个或一个以上海量存储设备)。其中,存储器420和存储介质430可以是短暂存储或持久存储。存储在存储介质430的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对基于云平台的物流数据共享设备400中的一系列指令操作。更进一步地,处理器410可以设置为与存储介质430通信,在基于云平台的物流数据共享设备400上执行存储介质430中的一系列指令操作。
基于云平台的物流数据共享设备400还可以包括一个或一个以上电源440,一个或一个以上有线或无线网络接口450,一个或一个以上输入输出接口460,和/或,一个或一个以上操作系统431,例如Windows Serve,Mac OS X,Unix,Linux,FreeBSD等等。本领域技术人员可以理解,图4示出的基于云平台的物流数据共享设备结构并不构成对基于云平台的物流数据共享设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
本发明还提供一种基于云平台的物流数据共享设备,所述基于云平台的物流数据共享设备包括存储器和处理器,存储器中存储有计算机可读指令,计算机可读指令被处理器执行时,使得处理器执行上述各实施例中的所述基于云平台的物流数据共享方法的步骤。
本发明还提供一种计算机可读存储介质,该计算机可读存储介质可以为非易失性计算机可读存储介质,该计算机可读存储介质也可以为易失性计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行所述基于云平台的物流数据共享方法的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种基于云平台的物流数据共享方法,其特征在于,所述基于云平台的物流数据共享方法包括:
接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;
根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;
调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;
接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;
调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;
根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。
2.根据权利要求1所述的基于云平台的物流数据共享方法,其特征在于,在所述接收第一终端发送的数据上传请求之后,在所述根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库之前,还包括:
读取预置配置信息数据库中的接口配置文件,所述接口配置文件包括输入数据类型信息及响应结果数据类型信息;
基于所述接口配置文件配置所述云平台接口;
根据预置数据项说明文件,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,并确定数据转换协议。
3.根据权利要求2所述的基于云平台的物流数据共享方法,其特征在于,所述根据预置数据项说明文件,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,并确定数据转换协议包括:
扫描所述预置数据项说明文件,获取预设的数据项类型信息;
根据所述预设的数据项类型信息,对所述接口配置文件中的第一数据项进行类型匹配,得到第一数据项类型;
判断所述接口配置文件中是否存在与所述预设的数据项类型信息不匹配的第二数据项;
若存在所述第二数据项,则将所述第二数据项的数据类型设置为未知数据项类型;
根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件;
根据所述数据映射关系文件确定所述数据转换协议,并将所述数据转换协议发送至所述云平台接口的接口数据库。
4.根据权利要求3所述的基于云平台的物流数据共享方法,其特征在于,所述根据所述第一数据项类型及所述未知数据项类型,建立所述云平台接口与所述云平台的共享数据库之间的数据映射关系,得到数据映射关系文件包括:
读取所述第一数据项类型,构建所述第一数据项类型与所述数据项类型信息中数据项类型之间的第一数据转换关系,生成第一数据映射关系文件;
读取所述未知数据项类型,构建所述未知数据项类型与所述数据项类型信息中数据项类型之间的第二数据转换关系,生成第二数据映射关系文件;
对所述第一数据映射关系及所述第二数据映射关系进行合并,得到所述云平台接口与所述云平台的共享数据库之间的数据映射关系文件。
5.根据权利要求4所述的基于云平台的物流数据共享方法,其特征在于,所述调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库包括:
通过所述云平台接口解析所述数据转换协议,获取所述数据映射关系文件;
基于所述数据映射关系文件,对所述初始物流数据对应的待处理数据项进行转置处理,得到所述中间文件;
将所述中间文件传输至所述共享数据库。
6.根据权利要求5所述的基于云平台的物流数据共享方法,其特征在于,所述基于所述数据映射关系文件,对所述初始物流数据中的待处理数据项进行转置处理,得到所述中间文件包括:
扫描所述初始物流数据,读取所述第一文件中的结构信息元数据及所述第二文件中的内容信息元数据;
根据所述数据映射关系文件,生成所述结构信息元数据对应的第一目标数据项及所述内容信息元数据对应的第二目标数据项;
将所述第一目标数据项及所述第二目标数据项合并为待处理数据项;
调用所述云平台接口的预置映射转换函数对所述待处理数据项进行映射处理,得到所述中间文件。
7.根据权利要求1所述的基于云平台的物流数据共享方法,其特征在于,所述根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库包括:
扫描所述第一标识,获取所述第一标识中的权限验证信息;
当所述权限验证信息满足预设条件时,读取所述第一标识的传输配置文件;
根据所述传输配置文件读取所述初始物流数据并将所述初始物流数据发送至所述云平台的缓存库。
8.一种基于云平台的物流数据共享装置,其特征在于,所述基于云平台的物流数据共享装置包括:
第一接收模块,用于接收第一终端发送的数据上传请求,所述数据上传请求携带第一标识,所述第一标识用于指示所述第一终端将要上传的初始物流数据;
数据传输模块,用于根据所述第一标识从所述第一终端获取所述初始物流数据并将所述初始物流数据传输至所述云平台的缓存库,所述初始物流数据包括第一文件及第二文件,所述第一文件用于存储所述初始物流数据的结构信息元数据,所述第二文件用于存储所述初始物流数据的内容信息元数据;
数据转换模块,用于调用预置的云平台接口根据预设数据转换协议对所述缓存库中的初始物流数据进行数据转换,得到中间文件,并将所述中间文件传输至云平台的共享数据库;
第二接收模块,用于接收第二终端发送的数据获取请求,所述数据获取请求携带第二标识,所述第二标识用于指示所述第二终端将要获取的目标物流数据;
数据获取模块,用于调用所述云平台接口从所述共享数据库中获取与所述第二标识匹配的候选物流数据;
数据发送模块,用于根据所述预设数据转换协议对所述候选物流数据进行数据转换,得到所述目标物流数据并将所述目标物流数据发送至所述第二终端。
9.一种基于云平台的物流数据共享设备,其特征在于,所述基于云平台的物流数据共享设备包括:存储器和至少一个处理器,所述存储器中存储有指令;
所述至少一个处理器调用所述存储器中的所述指令,以使得所述基于云平台的物流数据共享设备执行如权利要求1-7中任意一项所述的基于云平台的物流数据共享方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现如权利要求1-7中任一项所述基于云平台的物流数据共享方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110420567.4A CN113190360A (zh) | 2021-04-19 | 2021-04-19 | 基于云平台的物流数据共享方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110420567.4A CN113190360A (zh) | 2021-04-19 | 2021-04-19 | 基于云平台的物流数据共享方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113190360A true CN113190360A (zh) | 2021-07-30 |
Family
ID=76977445
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110420567.4A Pending CN113190360A (zh) | 2021-04-19 | 2021-04-19 | 基于云平台的物流数据共享方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113190360A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500563A (zh) * | 2021-12-27 | 2022-05-13 | 四川华西集采电子商务有限公司 | 一种高效数据共享的方法及系统 |
CN115630124A (zh) * | 2022-12-06 | 2023-01-20 | 北京志翔科技股份有限公司 | 数据互联方法、装置及设备 |
-
2021
- 2021-04-19 CN CN202110420567.4A patent/CN113190360A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500563A (zh) * | 2021-12-27 | 2022-05-13 | 四川华西集采电子商务有限公司 | 一种高效数据共享的方法及系统 |
CN115630124A (zh) * | 2022-12-06 | 2023-01-20 | 北京志翔科技股份有限公司 | 数据互联方法、装置及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3389219B1 (en) | Access request conversion method and device | |
CN110022289B (zh) | 数据传输方法、装置及系统 | |
CN113190360A (zh) | 基于云平台的物流数据共享方法、装置、设备及存储介质 | |
CN111444500A (zh) | 鉴权方法、装置、设备及可读存储介质 | |
CN111683066A (zh) | 异构系统集成方法、装置、计算机设备和存储介质 | |
CN113760565A (zh) | 一种数据处理平台、数据处理方法、存储介质及电子设备 | |
CN112468540B (zh) | 基于云平台的数据分发方法、设备及介质 | |
CN111740826A (zh) | 基于加密代理网关的加密方法、解密方法、装置及设备 | |
CN109600381B (zh) | 一种接口适配方法、装置及系统 | |
CN110661780A (zh) | 一种基于saas应用的无线城市数据共享方法与系统 | |
CN111241504B (zh) | 身份验证方法、装置、电子设备及存储介质 | |
CN111327680B (zh) | 认证数据同步方法、装置、系统、计算机设备和存储介质 | |
CN113011907A (zh) | 数据处理方法、装置、存储介质及设备 | |
CN111625373A (zh) | 一种功能访问方法、装置、电子设备及存储介质 | |
CN109672732B (zh) | 一种接口适配方法、装置及系统 | |
CN111209325A (zh) | 业务系统接口识别方法、装置及存储介质 | |
CN114924783A (zh) | 应用程序的接口调用方法、装置、设备及存储介质 | |
CN113709187A (zh) | 多服务器的数据请求方法、装置、设备及存储介质 | |
KR102181608B1 (ko) | 연합 인증 장치 및 그것의 연합 인증 방법 | |
CN111652625A (zh) | 认证方法及装置、电子设备、计算机可读存储介质 | |
CN110704498A (zh) | 数据提取方法、装置、设备及计算机可读存储介质 | |
CN111506846A (zh) | Web页面生成方法、装置、电子设备及存储介质 | |
CN113986835B (zh) | FastDFS分布式文件的管理方法、装置、设备及存储介质 | |
CN115396525B (zh) | 基于服务模板映射的数据交互方法及装置 | |
JPH05113959A (ja) | リモ−トプロシジヤコ−ル要求代行処理方法および装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |