CN113722286A - 时空数据压缩方法、装置、服务器及存储介质 - Google Patents

时空数据压缩方法、装置、服务器及存储介质 Download PDF

Info

Publication number
CN113722286A
CN113722286A CN202010456576.4A CN202010456576A CN113722286A CN 113722286 A CN113722286 A CN 113722286A CN 202010456576 A CN202010456576 A CN 202010456576A CN 113722286 A CN113722286 A CN 113722286A
Authority
CN
China
Prior art keywords
data
mapping
static attribute
attribute data
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010456576.4A
Other languages
English (en)
Inventor
许晓通
李林森
张建兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202010456576.4A priority Critical patent/CN113722286A/zh
Publication of CN113722286A publication Critical patent/CN113722286A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries

Abstract

本申请提供了一种时空数据压缩方法、装置、服务器及存储介质,属于计算机技术领域。所述方法包括:获取待压缩的第一时空数据;从第一时空数据中获取至少一个静态属性数据,静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值;获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据,第一映射数据用于对静态属性数据进行抽象表示;将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。由于静态属性数据的数据量在时空数据中所占的比例较大,将静态属性数据替换为第一映射数据,能够提高时空数据的压缩比例。

Description

时空数据压缩方法、装置、服务器及存储介质
技术领域
本申请涉及计算机技术领域,特别涉及一种时空数据压缩方法、装置、服务器及存储介质。
背景技术
时空数据通常包括时间数据、空间数据和属性数据三个方面的数据,用于按照时间周期记录目标的空间数据或属性数据的变化。例如,车辆的时空数据包括该车辆每个时刻的位置信息、车速、车辆走向和车牌信息等。时空数据具有采集频率高和目标数量多的特点,因此,需要存储的时空数据的数据量非常庞大,为减少存储时空数据所占用的存储空间,节约存储成本,需要对时空数据进行压缩处理。
相关技术中,基于傅里叶变换对时空数据进行有损压缩。将任一时刻的空间数据分解为x、y、z三个空间方向的函数,分别对各个维度上的数据点进行傅里叶变换,在有效控制压缩误差的基础上,完成时空数据的压缩。
相关技术中,针对时空数据中的空间数据进行压缩,由于空间数据的数据量在时空数据中所占的比例较低,因此,压缩前的时空数据与压缩后的时空数据的数据量的比值较小,压缩比例较低。
发明内容
本申请实施例提供了一种时空数据压缩方法、装置、服务器及存储介质,能够提高时空数据的压缩比例。所述技术方案如下:
根据本申请实施例的一方面,提供了一种时空数据压缩方法,所述方法包括:
获取待压缩的第一时空数据,所述第一时空数据是对数据采集目标进行数据采集得到的;
从所述第一时空数据中获取至少一个静态属性数据,所述静态属性数据用于表示所述数据采集目标的静态属性,所述静态属性数据对于数据采集目标的变化活跃度小于预设阈值;
获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,所述第一映射数据用于对所述静态属性数据进行抽象表示;
将所述第一时空数据中的每个静态属性数据替换为所述静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
在一种可能的实现方式中,所述从所述第一时空数据中获取至少一个静态属性数据,包括:
获取至少一个压缩字段,所述压缩字段为用于指示静态属性数据的字段;
根据所述至少一个压缩字段,从所述第一时空数据中获取所述压缩字段对应的静态属性数据。
在另一种可能的实现方式中,所述获取至少一个压缩字段之前,所述方法还包括:
获取数据库的表结构,所述数据库用于存储所述第二时空数据;
解析所述表结构,从所述表结构中获取被指定的至少一个压缩字段,缓存所述至少一个压缩字段。
在另一种可能的实现方式中,所述获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,包括:
响应于映射缓存中存在所述静态属性数据与第一映射数据的映射关系,根据所述静态属性数据与第一映射数据的映射关系,从所述映射缓存中获取所述静态属性数据对应的第一映射数据;
响应于所述映射缓存中不存在所述静态属性数据与第一映射数据的映射关系,根据所述映射缓存中已存在的第二映射数据,确定所述静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,所述根据所述映射缓存中已存在的第二映射数据,确定所述静态属性数据对应的第一映射数据,包括:
从所述已存在的第二映射数据中获取所述静态属性数据所属的字段对应的最新生成的第三映射数据,所述第三映射数据为整型的数值;
在所述第三映射数据的基础上自增,得到所述静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,所述获取待压缩的第一时空数据之前,所述方法还包括:
从已存储的静态属性数据与第一映射数据的映射关系中,查询压缩字段对应的映射关系,所述压缩字段为用于指示静态属性数据的字段;
将所述映射关系缓存于所述映射缓存中。
在另一种可能的实现方式中,所述方法还包括:
响应于接收到用于指示从所述第二时空数据中进行数据查询的查询指令,根据所述查询指令,从所述第二时空数据中获取查询数据;
响应于所述查询数据所属的字段与压缩字段匹配,从所述查询数据中,获取与所述压缩字段匹配的字段对应的第一映射数据,所述压缩字段为用于指示静态属性数据的字段;
获取所述第一映射数据对应的静态属性数据;
将所述查询数据中的第一映射数据替换为所述第一映射数据对应的静态属性数据。
在另一种可能的实现方式中,所述获取所述第一映射数据对应的静态属性数据,包括:
获取所述第一映射数据和静态属性数据的映射关系;
根据第一映射数据与静态属性数据的映射关系,获取所述第一映射数据对应的静态属性数据。
根据本申请实施例的另一方面,提供了一种时空数据压缩装置,所述装置包括:
获取模块,用于获取待压缩的第一时空数据,所述第一时空数据是对数据采集目标进行数据采集得到的;
所述获取模块,还用于从所述第一时空数据中获取至少一个静态属性数据,所述静态属性数据用于表示所述数据采集目标的静态属性,所述静态属性数据对于数据采集目标的变化活跃度小于预设阈值;
所述获取模块,还用于获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,所述第一映射数据用于对所述静态属性数据进行抽象表示;
压缩模块,用于将所述第一时空数据中的每个静态属性数据替换为所述静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
在一种可能的实现方式中,所述获取模块,用于获取至少一个压缩字段,所述压缩字段为用于指示静态属性数据的字段;根据所述至少一个压缩字段,从所述第一时空数据中获取所述压缩字段对应的静态属性数据。
在另一种可能的实现方式中,所述装置还包括:
所述获取模块,还用于获取数据库的表结构,所述数据库用于存储所述第二时空数据;
第一缓存模块,用于解析所述表结构,从所述表结构中获取被指定的至少一个压缩字段,缓存所述至少一个压缩字段。
在另一种可能的实现方式中,所述获取模块,用于响应于映射缓存中存在所述静态属性数据与第一映射数据的映射关系,根据所述静态属性数据与第一映射数据的映射关系,从所述映射缓存中获取所述静态属性数据对应的第一映射数据;响应于所述映射缓存中不存在所述静态属性数据与第一映射数据的映射关系,根据所述映射缓存中已存在的第二映射数据,确定所述静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,所述获取模块,用于从所述已存在的第二映射数据中获取所述静态属性数据所属的字段对应的最新生成的第三映射数据,所述第三映射数据为整型的数值;在所述第三映射数据的基础上自增,得到所述静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,所述装置还包括:
查询模块,用于从已存储的静态属性数据与第一映射数据的映射关系中,查询压缩字段对应的映射关系,所述压缩字段为用于指示静态属性数据的字段;
第二缓存模块,用于将所述映射关系缓存于所述映射缓存中。
在另一种可能的实现方式中,所述装置还包括:
所述获取模块,还用于响应于接收到用于指示从所述第二时空数据中进行数据查询的查询指令,根据所述查询指令,从所述第二时空数据中获取查询数据;
所述获取模块,还用于响应于所述查询数据所属的字段与压缩字段匹配,从所述查询数据中,获取与所述压缩字段匹配的字段对应的第一映射数据,所述压缩字段为用于指示静态属性数据的字段;
所述获取模块,还用于获取所述第一映射数据对应的静态属性数据;
替换模块,用于将所述查询数据中的第一映射数据替换为所述第一映射数据对应的静态属性数据。
在另一种可能的实现方式中,所述获取模块,用于获取所述第一映射数据和静态属性数据的映射关系;根据第一映射数据与静态属性数据的映射关系,获取所述第一映射数据对应的静态属性数据。
根据本申请实施例的另一方面,提供了一种服务器,所述服务器包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行,以实现上述任一可能实现方式所述的时空数据压缩方法。
根据本申请实施例的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行,以实现上述任一可能实现方式所述的时空数据压缩方法。
在本申请实施例中,获取待压缩的第一时空数据,第一时空数据是对数据采集目标进行数据采集得到的;从第一时空数据中获取至少一个静态属性数据,静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值;获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据,第一映射数据用于对静态属性数据进行抽象表示;将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据,得到第二时空数据。上述技术方案,通过将静态属性数据替换为第一映射数据,进行数据压缩,由于静态属性数据的数据量在时空数据中所占的比例较大,将静态属性数据替换为第一映射数据,能够增大压缩前的时空数据与压缩后的时空数据的数据量的比值,提高时空数据的压缩比例。
并且,静态属性数据对于数据采集目标的变化活跃度小于预设阈值,也即静态属性数据在数据采集目标的多条时空数据中是冗余重复的,将静态属性数据替换为用于对静态属性数据进行抽象表示的第一映射数据,能够大大减少时空数据的数据量,减少时空数据读取所占用的IO(Input/Output,输入/输出)资源,提高时空数据的读取效率,进而提高时空数据检索的性能;以及减少时空数据所占的存储空间,有效降低时空数据的存储成本。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种实施环境的示意图;
图2是本申请实施例提供的一种时空数据压缩方法的流程图;
图3是本申请实施例提供的一种时空数据压缩方法的流程图;
图4是本申请实施例提供的一种时空数据压缩方法的流程图;
图5是本申请实施例提供的一种时空数据压缩方法的流程图;
图6是本申请实施例提供的一种时空数据压缩方法的流程图;
图7是本申请实施例提供的一种时空数据压缩装置的框图;
图8是本申请实施例提供的一种服务器的框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们的任意变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
图1是本申请实施例提供的一种实施环境的示意图。参见图1,该实施环境中包括终端101和服务器102;终端101与服务器102之间通过无线或者有线网络连接。
终端101为具有时空数据的采集和上传功能的终端,终端101可以为智能手机、车载终端、可穿戴设备或者物联网系统中的数据采集终端等。终端101包括通信模块和至少一个传感器,传感器用于基于数据采集目标进行时空数据的采集,通信模块用于将采集到的时空数据上传至服务器102。
服务器102可以是一台服务器,或者若干台服务器组成的服务器集群,或者一个云计算服务中心。
服务器102具有压缩和存储时空数据的功能,服务器102对第一时空数据进行压缩,存储压缩后的第二时空数据。服务器102接收终端101上传的第一时空数据,从第一时空数据中获取至少一个静态属性数据;获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据;将第一时空数据中的每个静态属性数据替换为该静态属性数据对应的第一映射数据,得到压缩后的第二时空数据,存储第二时空数据。
静态属性数据用于表示数据采集目标的静态属性,静态属性数据通常以字符串形式来表示。例如,用户为张三,该用户的姓名可以用字符串“zhangsan”来表示;该用户的性别为男性,该用户的性别可以用字符串“male”来表示;该用户的衣服颜色为黑色,该用户的衣服颜色可以用“black”来表示。
静态属性数据对于数据采集目标的变化不活跃。同一数据采集目标的多个第一时空数据所包括的静态属性数据相同,多个第一时空数据中存在多份相同的静态属性数据,静态属性数据在多个第一时空数据中是冗余的。例如,数据采集目标为用户,静态属性数据可以为该用户的姓名,对于该用户的多个第一时空数据,每个第一时空数据中都包括该用户的姓名,且每个第一时空数据中所包括的该用户的姓名均相同,该用户的姓名在该用户的多个第一时空数据中是冗余的。
对于具有采集频率高和目标数量多的特点的第一时空数据,重复存在的静态属性数据的数据量在第一时空数据中所占的比例较高。因此,通过将静态属性数据替换为第一映射数据对第一时空数据进行压缩,能够提高对第一时空数据的压缩比例。
需要说明的一点是,终端101可以直接将采集到的时空数据上传至服务器102。终端101也可以将采集到的时空数据上传至服务器102之外的其他服务器,由其他服务器将需要压缩和存储的时空数据上传至服务器102。
服务器102还具有查询和解压缩时空数据的功能,服务器102可以根据接收到的查询指令,从已存储的第二时空数据中,获取查询数据。若查询数据包括映射数据,服务器102可以对查询数据进行解压缩,将映射数据替换为该映射数据对应的静态属性数据。
需要说明的另一点是,查询指令可以是终端101请求数据查询时触发的;查询指令也可以是服务器102之外的其他服务器请求数据查询时触发的,其他服务器用于从服务器102获取时空数据,对时空数据进行后续处理。
图2是本申请实施例提供的一种时空数据压缩方法的流程图。在本申请实施例中,以服务器对第一时空数据进行压缩为例进行说明,参见图2,该实施例包括:
201、服务器获取待压缩的第一时空数据。
第一时空数据是同时具有时间维度和空间维度的数据。第一时空数据的组成包括时间数据、空间数据和属性数据。
第一时空数据是对数据采集目标进行数据采集得到的,数据采集目标为采集第一时空数据时所基于的目标。例如,若第一时空数据是通过智能手机或者可穿戴设备上传的,数据采集目标可以为该智能手机或该可穿戴设备对应的用户;若第一时空数据是通过车载终端上传的,数据采集目标可以为该车载终端所属的车辆。
时间数据用于表示数据采集的时间信息。空间数据用于表示数据采集目标所在的空间信息,例如,空间数据可以为GPS(Global Positioning System,全球定位系统)数据或者坐标系下的坐标数据,坐标系下的坐标数据可以为平面坐标数据、空间坐标数据或者地理坐标数据等。
属性数据用于表示数据采集目标的属性信息,例如,若数据采集目标为智能手机或可穿戴设备对应的用户,该用户的属性数据可以包括该用户的姓名、性别、步数、移动速度、衣服颜色、心率数据或体温数据中的至少一个;若数据采集目标为车辆,该车辆的属性数据可以包括该车辆的行驶速度、行驶走向、车牌信息或车辆型号中的至少一个。
在一种可能的实现方式中,服务器可以接收终端上传的待压缩的第一时空数据。该终端为具有第一时空数据的采集和上传功能的终端,该终端可以基于数据采集目标进行第一时空数据的采集,将采集到的第一时空数据上传至服务器。
在另一种可能的实现方式中,服务器也可以接收其他服务器上传的待压缩的第一时空数据。其他服务器可以是为终端提供服务的后台服务器,该后台服务器接收终端上传的第一时空数据,将该第一时空数据上传至服务器。
在另一种可能的实现方式中,服务器还可以获取已存储的待压缩的第一时空数据,该已存储的第一时空数据尚未通过本申请提供的时空数据压缩方法进行压缩处理。该第一时空数据可以存储在第一时空数据库中,服务器从该第一时空数据库中获取待压缩的第一时空数据。
202、服务器从第一时空数据中获取至少一个静态属性数据。
第一时空数据中的属性数据可以划分为静态属性数据和动态属性数据。静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值,也即静态属性数据对于数据采集目标来说变化不活跃。动态属性数据对于数据采集目标的变化活跃度大于预设阈值,也即动态属性数据对于数据采集目标来说是实时变化的。
例如,参见表1,数据采集目标为用户,用户的时空数据中的空间数据和属性数据包括用户的姓名、GPS数据、性别、移动速度和衣服颜色等。该用户的姓名、性别和衣服颜色等属性数据随着时间的变化不活跃,静态属性数据包括用户的姓名、性别和衣服颜色;该用户的移动速度等属性数据是实时变化的,动态属性数据包括移动速度。
表1
Figure BDA0002509590460000091
服务器可以根据至少一个压缩字段,获取静态属性数据。参见图3,服务器从第一时空数据中获取至少一个静态属性数据可以通过以下步骤2021至步骤2022实现:
2021、服务器获取至少一个压缩字段。
压缩字段为用于指示静态属性数据的字段。例如,继续参见表1,至少一个压缩字段可以包括name、sex和colorOfCloths。
在一种可能的实现方式中,参见图4,服务器可以获取数据库的表结构,解析表结构,从该表结构中获取被指定的至少一个压缩字段。该数据库为用于存储第二时空数据的数据库,该数据库的表结构中包括组成数据库的字段,组成数据库的字段中包括被指定的压缩字段。
压缩字段可以是在数据库的表结构被创建时被指定的,数据库创建人员可以在创建数据库的表结构时,在该表结构包括的字段中指定压缩字段。压缩字段也可以在数据库的表结构被创建后指定,数据库创建人员可以在已创建数据库的表结构所包括的字段中指定新的压缩字段或者撤销对已被指定的压缩字段的指定。该数据库可以为任一类型的数据库,例如,该数据库可以为NoSQL(NotOnly Structured Query Language,非关系型数据库)。
在本申请实施例中,服务器可以获取被指定的至少一个压缩字段,进而从第一时空数据中获取压缩字段对应的静态属性数据,通过人工指定压缩字段,能够提高静态属性数据获取的准确性。
在另一种可能的实现方式中,服务器可以获取已缓存的至少一个压缩字段,例如,服务器可以从缓存区中获取至少一个压缩字段。
在本申请实施例中,服务器可以缓存至少一个压缩字段,当需要根据至少一个压缩字段,获取静态属性数据时,服务器可以直接从缓存中读取至少一个压缩字段,由于缓存中的数据具有读写速度快的特点,从缓存中读取至少一个压缩字段,能够提高压缩字段的获取效率,进而提高时空数据压缩的效率。
需要说明的一点是,服务器获取已缓存的至少一个压缩字段之前,预先缓存了至少一个压缩字段。服务器可以根据数据库的表结构,获取以及缓存至少一个压缩字段。相应的,服务器获取以及缓存至少一个压缩字段的步骤可以为:服务器获取数据库的表结构,该数据库用于存储第二时空数据;服务器解析该表结构,从该表结构中获取被指定的至少一个压缩字段,缓存上述至少一个压缩字段。
需要说明的另一点是,服务器可以在获取待压缩的第一时空数据之前,就从表结构中获取至少一个压缩字段,并且,缓存上述至少一个压缩字段。服务器也可以在获取到本次待压缩的第一个第一时空数据时,从表结构中获取至少一个压缩字段,并且,缓存上述至少一个压缩字段;服务器后续获取待压缩的第一时空数据时,直接获取已缓存的至少一个压缩字段。
需要说明的另一点是,服务器获取已缓存的至少一个压缩字段之前,还可以根据属性数据的历史变化情况,将变化活跃度小于预设阈值的属性数据所属的字段确定为压缩字段。相应的,服务器确定压缩字段的步骤可以为:服务器从已存储的多个第三时空数据中,分别获取每个字段的多个属性数据;根据多个属性数据的变化情况,确定多个属性数据所属的字段的变化活跃度;将变化活跃度小于预设阈值的字段确定为压缩字段。
预设阈值可以是根据静态属性数据所属的字段的变化活跃度设置的,例如预设阈值可以为0.01、0.005或者0.001等。
服务器可以根据多个属性数据的变化次数和多个属性数据的总数量,确定多个属性数据所属的字段的变化活跃度。相应的,服务器根据多个属性数据的变化情况,确定多个属性数据所属的字段的变化活跃度的步骤可以为:服务器对多个属性数据中相邻的属性数据进行两两比对;响应于相邻的两个属性数据不相同,将属性数据的变化次数加一,得到多个属性数据的变化次数;服务器获取多个属性数据中的属性数据的总数量;根据该变化次数和该总数量,确定多个属性数据所属的字段的变化活跃度。
服务器可以将该变化次数和该总数量的比值确定为变化活跃度。服务器也可以根据该总数量减一得到的数值和该变化次数,确定变化活跃度,服务器可以将该变化次数与该总数量减一得到的数值的比值确定为变化活跃度。
例如,继续参见表1,对于sex字段,该字段的3个属性数据均为male,两两相邻的属性数据均相同,该字段的3个属性数据的变化次数为0,sex字段的变化活跃度为0;则服务器可以将sex字段确定为压缩字段;对于speed字段,该字段的3个属性数据分别为2.0、2.1和1.9,两两相邻的属性数据均不相同,该字段的3个属性数据的变化次数为2,服务器可以将该变化次数与该字段的属性数据的总数量减一得到的数值的比值确定为变化活跃度,speed字段的变化活跃度为1。
在本申请实施例中,服务器可以根据属性数据的变化情况,将变化活跃度小于预设阈值的属性数据所属的字段确定为压缩字段,从第一时空数据中获取压缩字段对应的静态属性数据,减少了静态属性数据确定过程中的人工参与,自动确定第一时空数据中的静态属性数据,提高了静态属性数据的获取效率。
2022、服务器根据至少一个压缩字段,从第一时空数据中获取压缩字段对应的静态属性数据。
例如,至少一个压缩字段包括name、sex和colorOfCloths,继续参见表1,若第一时空数据为表1中的第一条记录“name:zhangsan;GPS:(120,20);sex:male;speed:2.0;colorOfCloths:black”,则第一时空数据中压缩字段对应的静态属性数据包括zhangsan、male和black。
需要说明的另一点是,继续参见图4,服务器在存储第二时空数据时,对第一时空数据中的静态属性数据,继续执行步骤203,也即对第一时空数据中属于压缩字段的数据,进行数据映射;对第一时空数据中除静态属性数据之外的其他数据,直接进行数据存储,也即对第一时空数据中不属于压缩字段的数据,直接进行数据存储。
203、服务器获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据。
第一映射数据用于对静态属性数据进行抽象表示,第一映射数据所占用的存储空间小于静态属性数据所占用的存储空间。第一映射数据可以为整型的数值,例如,第一映射数据可以为0、1、2、3或4等整型的数值。第一映射数据还可以为单个字符,例如,第一映射数据可以为a、b、c或d等单个字符。
在一种可能的实现方式中,服务器响应于映射缓存中存在该静态属性数据与第一映射数据的映射关系,根据该静态属性数据与第一映射数据的映射关系,从映射缓存中获取该静态属性数据对应的第一映射数据。
映射缓存中可以缓存有映射数据表,服务器可以从映射缓存的映射数据表中获取该静态属性数据对应第一映射数据。例如,若第一时空数据中的静态属性数据包括zhangsan,映射缓存中存储有zhangsan与0的映射关系,则服务器可以获取静态属性数据zhangsan对应的第一映射数据为0。
需要说明的一点是,服务器从映射缓存中获取静态属性数据对应的第一映射数据之前,预先将压缩字段对应的映射关系缓存在了映射缓存中。相应的,服务器缓存映射关系的步骤可以为:服务器从已存储的静态属性数据与第一映射数据的映射关系中,查询压缩字段对应的映射关系,该压缩字段为用于指示静态属性数据的字段;将该映射关系缓存于映射缓存中。
压缩字段可以为服务器从数据库的表结构中获取的被指定的压缩字段。服务器在获取待压缩的第一时空数据,对第一时空数据进行压缩之前,可以在已创建的数据库启动或者重新启动时,进行初始化,将压缩字段对应的映射关系缓存于映射缓存中,以保证压缩正常执行。服务器可以在创建静态属性数据与第一映射数据的映射关系时,就缓存压缩字段与该映射关系,并且对应存储压缩字段与该映射关系。当数据库启动或者重新启动时,服务器可以根据压缩字段,从已存储的映射关系中获取压缩字段对应的映射关系,将该映射关系缓存于映射缓存中,继续对待压缩的第一时空数据进行压缩。
在本申请实施例中,服务器可以将静态属性数据与第一映射数据的映射关系缓存于映射缓存中,当需要获取静态属性数据对应的第一映射数据时,可以直接从映射缓存中获取静态属性数据与第一映射数据的映射关系,由于缓存中的数据具有读写速度快的特点,因此,根据映射缓存中的映射关系,获取第一映射数据,能够提高第一映射数据的获取效率,进而提高时空数据压缩的效率。
在另一种可能的实现方式中,若映射缓存中不存在该静态属性数据与第一映射数据的映射关系,服务器需要生成该静态属性数据对应的第一映射数据。相应的,服务器获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据的步骤可以为:服务器响应于映射缓存中不存在静态属性数据与第一映射数据的映射关系,根据映射缓存中已存在的第二映射数据,确定静态属性数据对应的第一映射数据。
服务器可以根据映射缓存中已存在的第二映射数据,基于映射数据生成规则,生成第一映射数据。服务器可以随机生成第一映射数据,且生成的第一映射数据与已存在的第二映射数据均不相同。例如,映射数据生成规则用于指示生成整型的数值作为映射数据,映射缓存中已存在的第二映射数据包括0、1和2,服务器随机生成的第一映射数据可以为3。
服务器还可以根据该静态属性所属的字段对应的已生成的映射数据,确定该静态属性数据对应的第一映射数据。相应的,服务器根据映射缓存中已存在的第二映射数据,确定该静态属性数据对应的第一映射数据的步骤可以为:服务器从已存在的第二映射数据中获取该静态属性数据所属的字段对应的最新生成的第三映射数据,该第三映射数据为整型的数值;在该第三映射数据的基础上自增,得到该静态属性数据对应的第一映射数据。
例如,静态属性数据为zhangsan,映射缓存中不存在该静态属性数据对应的第一映射数据,该静态属性数据所属的字段为name字段。假设已存在的第二映射数据中,name字段对应的最新生成的第三映射数据为静态属性数据lisi对应的3;则服务器可以在该第三映射数据的基础上自增,得到zhangsan对应的第一映射数据为4。
需要说明的一点是,服务器响应于映射缓存中不存在静态属性数据与第一映射数据的映射关系,根据映射缓存中已存在的第二映射数据,确定静态属性数据对应的第一映射数据之后,还可以生成该静态属性数据与该第一映射数据的映射关系,并且,将该映射关系缓存于映射缓存中,以在服务器下一次获取到该静态属性数据时,可以直接从映射缓存中获取该静态属性数据对应的第一映射数据。服务器还可以将该映射关系进行存储,以在数据库启动或者重新启动时,可以获取到已存储的映射关系。继续参见图4,服务器可以将映射关系存储于映射表中,也即进行映射表存储。
204、服务器将第一时空数据中的每个静态属性数据替换为该静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
例如,第一时空数据中压缩字段对应的静态属性数据包括zhangsan、male和black,zhangsan对应的第一映射数据为4,male对应的第一映射数据为0,black对应的静态属性数据为0;服务器将第一时空数据中的每个静态属性数据替换为该静态属性数据对应的第一映射数据,可以得到第二时空数据“name:4;GPS:(120,20);sex:0;speed:2.0;colorOfCloths:0”。
在本申请实施例中,服务器将静态属性数据替换为第一映射数据,第一映射数据所占用的存储空间远小于静态属性数据所占的存储空间,例如,静态属性数据zhangsan至少占用8个字节,第一映射数据4仅占用2个字节,增大了压缩前的时空数据与压缩后的时空数据的比值,提高了时空数据的压缩比例。对于具有海量条数的时空数据,能够大大减少时空数据所占用的存储空间,有效降低存储成本。
需要说明的一点是,继续参见图4,服务器进行数据映射,得到第二时空数据之后,还对第二时空数据进行数据存储。服务器可以将第二时空数据存储于数据库中。
在本申请实施例中,获取待压缩的第一时空数据,第一时空数据是对数据采集目标进行数据采集得到的;从第一时空数据中获取至少一个静态属性数据,静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值;获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据,第一映射数据用于对静态属性数据进行抽象表示;将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据,得到第二时空数据。上述技术方案,通过将静态属性数据替换为第一映射数据,进行数据压缩,由于静态属性数据的数据量在时空数据中所占的比例较大,将静态属性数据替换为第一映射数据,能够增大压缩前的时空数据与压缩后的时空数据的数据量的比值,提高时空数据的压缩比例。
并且,静态属性数据对于数据采集目标的变化活跃度小于预设阈值,也即静态属性数据在数据采集目标的多条时空数据中是冗余重复的,将静态属性数据替换为用于对静态属性数据进行抽象表示的第一映射数据,能够大大减少时空数据的数据量,减少时空数据读取所占用的IO(Input/Output,输入/输出)资源,提高时空数据的读取效率,进而提高时空数据检索的性能;以及减少时空数据所占的存储空间,有效降低时空数据的存储成本。
图5是本申请实施例提供的一种时空数据压缩方法的流程图。在本申请实施例中,以服务器对第二时空数据进行解压缩为例进行说明,参见图5,该实施例包括:
501、服务器响应于接收到用于指示从第二时空数据中进行数据查询的查询指令,根据该查询指令,从第二时空数据中获取查询数据。
服务器对第一时空数据进行压缩,得到第二时空数据,可以将该第二时空数据存储在数据库中。当需要对数据库中的第二时空数据进行查询时,可以触发向服务器发送查询指令,该查询指令用于指示从第二时空数据中进行数据查询。
该查询指令可以用于指示从数据库中查询至少一条第二时空数据。例如,该查询指令可以用于指示从数据库中查询指定时间段内zhangsan和lisi对应的第二时空数据。再如,该查询指令可以用于指示从数据库中查询指定时间zhangsan对应的第二时空数据。
该查询指令还可以用于指示从数据库中查询第二时空数据中的至少一个字段的数据。例如,该查询指令可以用于指示从数据库中查询指定时间段内zhangsan的colorOfCloths字段的数据。
502、服务器响应于查询数据所属的字段与压缩字段匹配,从该查询数据中,获取与压缩字段匹配的字段对应的第一映射数据。
压缩字段为用于指示静态属性数据的字段。例如,继续参见表1,压缩字段可以包括name、sex和colorOfCloths。假设查询数据为“name:4;GPS:(120,20);sex:0;speed:2.0;colorOfCloths:0”,该查询数据所属的字段中与压缩字段匹配的字段包括name、sex和colorOfCloths,服务器从该查询数据中,获取的与压缩字段匹配的字段对应的第一映射数据包括name:4;sex:0;colorOfCloths:0”。
需要说明的一点是,对于查询数据所属的字段中与压缩字段匹配的字段,服务器执行从查询数据中获取第一映射数据的步骤,也即进行映射还原。对于查询数据所属的字段中与压缩字段不匹配的字段,服务器直接读取该字段对应的数据。
503、服务器获取第一映射数据对应的静态属性数据。
服务器可以获取第一映射数据和静态属性数据的映射关系;根据静态属性数据和第一映射数据的映射关系,获取第一映射数据对应的静态属性数据。
服务器在开始进行数据查询时,可以获取数据库对应的映射关系,缓存该映射关系。当服务器需要获取第一映射数据对应的静态属性数据时,可以从缓存中获取映射关系。参见图6,服务器可以在开始进行数据查询时,解析数据库的表结构,从该表结构中获取至少一个压缩字段,从已存储的映射表中获取至少一个压缩字段对应的映射关系,并且,缓存该映射关系,也即读取映射表并缓存。
在一种可能的实现方式中,服务器可以根据第一映射数据,从数据库对应的多个映射关系中查找该第一映射数据,获取该第一映射数据对应的静态属性数据。
在另一种可能的实现方式中,服务器可以根据压缩字段,获取该压缩字段对应的映射关系,从该压缩字段对应的映射关系中查找该第一映射数据,获取该第一映射数据对应的静态属性数据。例如,压缩字段为name,该压缩字段对应的映射关系包括lisi和3、zhangsan和4、wangwu和2、zhaoliu和1以及qianqi和0,假设第一映射数据为4,服务器可以获取该第一映射数据对应的静态属性数据为zhangsan。
在本申请实施例中,服务器可以先获取压缩字段对应的映射关系,再从压缩字段对应的映射关系中,查找第一映射数据对应的静态属性数据,能够提高映射关系的查找效率,进而提高时空数据解压缩的效率。
504、服务器将查询数据中的第一映射数据替换为该第一映射数据对应的静态属性数据。
例如,查询数据为“name:4;GPS:(120,20);sex:0;speed:2.0;colorOfCloths:0”,对于name字段,4对应的静态属性数据为zhangsan;对于sex字段,0对应的静态属性数据为male;对于colorOfCloths字段,0对应的静态属性数据为black;服务器将第一映射数据替换为静态属性数据,进行第二时空数据的解压缩,可以读取到解压缩后的查询数据为“name:zhangsan;GPS:(120,20);sex:male;speed:2.0;colorOfCloths:black”。
继续参见图6,服务器将查询数据中的第一映射数据替换为该第一映射数据对应的静态属性数据,也即对第二时空数据中属于压缩字段的数据,进行映射还原,读取数据;对于不属于压缩字段的数据,直接进行数据读取。
在本申请实施例中,服务器还可以在对第二时空数据进行查询时,对查询到的查询数据进行映射还原,将查询数据还原为被压缩之前的状态。由于查询数据是根据第一映射数据与静态属性数据的映射关系被还原的,第一映射数据与静态属性数据的映射关系是在时空数据被压缩时生成的,因此,基于该映射关系,还原查询数据,能够提高还原查询数据的准确性。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
图7是本申请实施例提供的一种时空数据压缩装置的框图。参见图7,该装置包括:
获取模块701,用于获取待压缩的第一时空数据,第一时空数据是对数据采集目标进行数据采集得到的;
获取模块701,还用于从第一时空数据中获取至少一个静态属性数据,静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值;
获取模块701,还用于获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据,第一映射数据用于对静态属性数据进行抽象表示;
压缩模块702,用于将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
在一种可能的实现方式中,获取模块701,用于获取至少一个压缩字段,压缩字段为用于指示静态属性数据的字段;根据至少一个压缩字段,从第一时空数据中获取压缩字段对应的静态属性数据。
在另一种可能的实现方式中,该装置还包括:
获取模块701,还用于获取数据库的表结构,数据库用于存储第二时空数据;
第一缓存模块,用于解析表结构,从表结构中获取被指定的至少一个压缩字段,缓存至少一个压缩字段。
在另一种可能的实现方式中,获取模块701,用于响应于映射缓存中存在静态属性数据与第一映射数据的映射关系,根据静态属性数据与第一映射数据的映射关系,从映射缓存中获取静态属性数据对应的第一映射数据;响应于映射缓存中不存在静态属性数据与第一映射数据的映射关系,根据映射缓存中已存在的第二映射数据,确定静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,获取模块701,用于从已存在的第二映射数据中获取静态属性数据所属的字段对应的最新生成的第三映射数据,第三映射数据为整型的数值;在第三映射数据的基础上自增,得到静态属性数据对应的第一映射数据。
在另一种可能的实现方式中,该装置还包括:
查询模块,用于从已存储的静态属性数据与第一映射数据的映射关系中,查询压缩字段对应的映射关系,压缩字段为用于指示静态属性数据的字段;
第二缓存模块,用于将映射关系缓存于映射缓存中。
在另一种可能的实现方式中,该装置还包括:
获取模块701,还用于响应于接收到用于指示从第二时空数据中进行数据查询的查询指令,根据查询指令,从第二时空数据中获取查询数据;
获取模块701,还用于响应于查询数据所属的字段与压缩字段匹配,从查询数据中,获取与压缩字段匹配的字段对应的第一映射数据,压缩字段为用于指示静态属性数据的字段;
获取模块701,还用于获取第一映射数据对应的静态属性数据;
替换模块,用于将查询数据中的第一映射数据替换为第一映射数据对应的静态属性数据。
在另一种可能的实现方式中,获取模块701,用于获取第一映射数据和静态属性数据的映射关系;根据第一映射数据与静态属性数据的映射关系,获取第一映射数据对应的静态属性数据。
在本申请实施例中,获取待压缩的第一时空数据,第一时空数据是对数据采集目标进行数据采集得到的;从第一时空数据中获取至少一个静态属性数据,静态属性数据用于表示数据采集目标的静态属性,静态属性数据对于数据采集目标的变化活跃度小于预设阈值;获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据,第一映射数据用于对静态属性数据进行抽象表示;将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据,得到第二时空数据。上述技术方案,通过将静态属性数据替换为第一映射数据,进行数据压缩,由于静态属性数据的数据量在时空数据中所占的比例较大,将静态属性数据替换为第一映射数据,能够增大压缩前的时空数据与压缩后的时空数据的数据量的比值,提高时空数据的压缩比例。
并且,静态属性数据对于数据采集目标的变化活跃度小于预设阈值,也即静态属性数据在数据采集目标的多条时空数据中是冗余重复的,将静态属性数据替换为用于对静态属性数据进行抽象表示的第一映射数据,能够大大减少时空数据的数据量,减少时空数据读取所占用的IO(Input/Output,输入/输出)资源,提高时空数据的读取效率,进而提高时空数据检索的性能;以及减少时空数据所占的存储空间,有效降低时空数据的存储成本。
需要说明的是:上述实施例提供的时空数据压缩装置在对时空数据进行压缩时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将服务器的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的时空数据压缩装置与时空数据压缩方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图8是本申请实施例提供的一种服务器的框图,该服务器800可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(Central Processing Units,CPU)801和一个或一个以上的存储器802,其中,存储器802中存储有至少一条指令,至少一条指令由处理器801加载并执行以实现上述各个方法实施例提供的时空数据压缩方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
在示例性实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有至少一条指令,上述至少一条指令可由服务器中的处理器执行以完成上述实施例中的时空数据压缩方法。例如,计算机可读存储介质可以是ROM(Read-Only Memory,只读存储器)、RAM(Random Access Memory,随机存取存储器)、CD-ROM(Compact Disc Read-OnlyMemory,只读光盘)、磁带、软盘和光数据存储设备等。
本申请还提供了一种计算机程序产品,计算机程序产品包括一个或多个计算机程序,计算机程序被处理器执行时,用于实现上述各个方法实施例提供的时空数据压缩方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (11)

1.一种时空数据压缩方法,其特征在于,所述方法包括:
获取待压缩的第一时空数据,所述第一时空数据是对数据采集目标进行数据采集得到的;
从所述第一时空数据中获取至少一个静态属性数据,所述静态属性数据用于表示所述数据采集目标的静态属性,所述静态属性数据对于数据采集目标的变化活跃度小于预设阈值;
获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,所述第一映射数据用于对所述静态属性数据进行抽象表示;
将所述第一时空数据中的每个静态属性数据替换为所述静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
2.根据权利要求1所述的方法,其特征在于,所述从所述第一时空数据中获取至少一个静态属性数据,包括:
获取至少一个压缩字段,所述压缩字段为用于指示静态属性数据的字段;
根据所述至少一个压缩字段,从所述第一时空数据中获取所述压缩字段对应的静态属性数据。
3.根据权利要求2所述的方法,其特征在于,所述获取至少一个压缩字段之前,所述方法还包括:
获取数据库的表结构,所述数据库用于存储所述第二时空数据;
解析所述表结构,从所述表结构中获取被指定的至少一个压缩字段,缓存所述至少一个压缩字段。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,包括:
响应于映射缓存中存在所述静态属性数据与第一映射数据的映射关系,根据所述静态属性数据与第一映射数据的映射关系,从所述映射缓存中获取所述静态属性数据对应的第一映射数据;
响应于所述映射缓存中不存在所述静态属性数据与第一映射数据的映射关系,根据所述映射缓存中已存在的第二映射数据,确定所述静态属性数据对应的第一映射数据。
5.根据权利要求4所述的方法,其特征在于,所述根据所述映射缓存中已存在的第二映射数据,确定所述静态属性数据对应的第一映射数据,包括:
从所述已存在的第二映射数据中获取所述静态属性数据所属的字段对应的最新生成的第三映射数据,所述第三映射数据为整型的数值;
在所述第三映射数据的基础上自增,得到所述静态属性数据对应的第一映射数据。
6.根据权利要求4所述的方法,其特征在于,所述获取待压缩的第一时空数据之前,所述方法还包括:
从已存储的静态属性数据与第一映射数据的映射关系中,查询压缩字段对应的映射关系,所述压缩字段为用于指示静态属性数据的字段;
将所述映射关系缓存于所述映射缓存中。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于接收到用于指示从所述第二时空数据中进行数据查询的查询指令,根据所述查询指令,从所述第二时空数据中获取查询数据;
响应于所述查询数据所属的字段与压缩字段匹配,从所述查询数据中,获取与所述压缩字段匹配的字段对应的第一映射数据,所述压缩字段为用于指示静态属性数据的字段;
获取所述第一映射数据对应的静态属性数据;
将所述查询数据中的第一映射数据替换为所述第一映射数据对应的静态属性数据。
8.根据权利要求7所述的方法,其特征在于,所述获取所述第一映射数据对应的静态属性数据,包括:
获取所述第一映射数据和静态属性数据的映射关系;
根据第一映射数据与静态属性数据的映射关系,获取所述第一映射数据对应的静态属性数据。
9.一种时空数据压缩装置,其特征在于,所述装置包括:
获取模块,用于获取待压缩的第一时空数据,所述第一时空数据是对数据采集目标进行数据采集得到的;
所述获取模块,还用于从所述第一时空数据中获取至少一个静态属性数据,所述静态属性数据用于表示所述数据采集目标的静态属性,所述静态属性数据对于数据采集目标的变化活跃度小于预设阈值;
所述获取模块,还用于获取所述至少一个静态属性数据中每个静态属性数据对应的第一映射数据,所述第一映射数据用于对所述静态属性数据进行抽象表示;
压缩模块,用于将所述第一时空数据中的每个静态属性数据替换为所述静态属性数据对应的第一映射数据,得到压缩后的第二时空数据。
10.一种服务器,其特征在于,所述服务器包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行,以实现如权利要求1-8任一项所述的时空数据压缩方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行,以实现如权利要求1-8任一项所述的时空数据压缩方法。
CN202010456576.4A 2020-05-26 2020-05-26 时空数据压缩方法、装置、服务器及存储介质 Pending CN113722286A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010456576.4A CN113722286A (zh) 2020-05-26 2020-05-26 时空数据压缩方法、装置、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010456576.4A CN113722286A (zh) 2020-05-26 2020-05-26 时空数据压缩方法、装置、服务器及存储介质

Publications (1)

Publication Number Publication Date
CN113722286A true CN113722286A (zh) 2021-11-30

Family

ID=78672071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010456576.4A Pending CN113722286A (zh) 2020-05-26 2020-05-26 时空数据压缩方法、装置、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN113722286A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090125540A1 (en) * 2007-11-08 2009-05-14 Richard Dean Dettinger Method for executing federated database queries using aliased keys
US20110314010A1 (en) * 2010-06-17 2011-12-22 Microsoft Corporation Keyword to query predicate maps for query translation
WO2016131554A1 (en) * 2015-02-17 2016-08-25 Parstream Gmbh Method and apparatus for adaptive data compression
WO2017092470A1 (zh) * 2015-12-01 2017-06-08 中兴通讯股份有限公司 数据存储方法和装置
CN108388598A (zh) * 2018-02-01 2018-08-10 平安科技(深圳)有限公司 电子装置、数据存储方法及存储介质
WO2019160133A1 (ja) * 2018-02-19 2019-08-22 日本電信電話株式会社 情報管理装置、情報管理方法及び情報管理プログラム
US10552443B1 (en) * 2016-08-11 2020-02-04 MuleSoft, Inc. Schemaless to relational representation conversion

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090125540A1 (en) * 2007-11-08 2009-05-14 Richard Dean Dettinger Method for executing federated database queries using aliased keys
US20110314010A1 (en) * 2010-06-17 2011-12-22 Microsoft Corporation Keyword to query predicate maps for query translation
WO2016131554A1 (en) * 2015-02-17 2016-08-25 Parstream Gmbh Method and apparatus for adaptive data compression
WO2017092470A1 (zh) * 2015-12-01 2017-06-08 中兴通讯股份有限公司 数据存储方法和装置
CN106815267A (zh) * 2015-12-01 2017-06-09 中兴通讯股份有限公司 数据存储方法和装置
US10552443B1 (en) * 2016-08-11 2020-02-04 MuleSoft, Inc. Schemaless to relational representation conversion
CN108388598A (zh) * 2018-02-01 2018-08-10 平安科技(深圳)有限公司 电子装置、数据存储方法及存储介质
WO2019148720A1 (zh) * 2018-02-01 2019-08-08 平安科技(深圳)有限公司 电子装置、数据存储方法及存储介质
WO2019160133A1 (ja) * 2018-02-19 2019-08-22 日本電信電話株式会社 情報管理装置、情報管理方法及び情報管理プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王虎 等: "基于移动端作物大田测试数据采集技术研究与实现", 《中国农业科技导报》, vol. 15, no. 4 *

Similar Documents

Publication Publication Date Title
CN109559234B (zh) 一种区块链状态数据的存储方法、设备和存储介质
US11494339B2 (en) Multi-level compression for storing data in a data store
CN104462430A (zh) 关系型数据库的数据处理方法及装置
CN115023697A (zh) 数据查询方法、装置及服务器
CN116384109A (zh) 一种面向新型配电网的数字孪生模型自动重构方法及装置
CN114398520A (zh) 数据检索方法、系统、装置、电子设备及存储介质
CN114049463A (zh) 一种二叉树的数据网格化、网格点数据的获取方法及装置
CN111343269B (zh) 一种数据下载方法、装置、计算机设备和存储介质
CN110222046B (zh) 列表数据的处理方法、装置、服务器和存储介质
CN116991800A (zh) 文件获取系统、方法、装置、计算机设备和存储介质
CN113722286A (zh) 时空数据压缩方法、装置、服务器及存储介质
CN115905168A (zh) 自适应压缩方法和压缩装置、计算机设备、存储介质
CN114238334A (zh) 异构数据编码、解码方法和装置、计算机设备和存储介质
CN112699149A (zh) 目标数据获取方法、装置和存储介质及电子装置
CN113568967A (zh) 时序指标数据动态提取方法、电子设备及存储介质
CN111782588A (zh) 一种文件读取方法、装置、设备和介质
CN113297245A (zh) 获取执行信息的方法及装置
CN116821102B (zh) 数据迁移方法、装置、计算机设备和存储介质
CN111327721B (zh) Ip地址定位方法及装置、存储介质及电子装置
CN112948376B (zh) 一种ip地理位置信息查询方法、终端设备及存储介质
US20230401179A1 (en) Location data processing system
CN116610703A (zh) 数据查询方法、装置、计算机设备和存储介质
CN117667595A (zh) 一种数据处理方法、装置、设备及存储介质
CN117708164A (zh) 基于并行处理数据库的数据存储方法、装置和设备
CN116719859A (zh) 数据调动方法和装置、存储介质及电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination