CN111078652A - 物流箱码的归档压缩方法及装置 - Google Patents

物流箱码的归档压缩方法及装置 Download PDF

Info

Publication number
CN111078652A
CN111078652A CN201911190773.XA CN201911190773A CN111078652A CN 111078652 A CN111078652 A CN 111078652A CN 201911190773 A CN201911190773 A CN 201911190773A CN 111078652 A CN111078652 A CN 111078652A
Authority
CN
China
Prior art keywords
attribute
code message
box code
logistics box
data table
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911190773.XA
Other languages
English (en)
Inventor
张彬
来彬彬
顾龙成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Suning Logistics Co ltd
Original Assignee
Jiangsu Suning Logistics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Suning Logistics Co ltd filed Critical Jiangsu Suning Logistics Co ltd
Priority to CN201911190773.XA priority Critical patent/CN111078652A/zh
Publication of CN111078652A publication Critical patent/CN111078652A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1744Redundancy elimination performed by the file system using compression, e.g. sparse files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/901Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • G06F16/90344Query processing by using string matching techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开一种物流箱码的归档压缩方法及装置,涉及数据处理技术领域,能够对物流箱码先压缩再归档,减少归档时对存储系统空间的占用。该方法包括:根据物流箱码报文中的属性名称构建辞典数据表,辞典数据表中包括多组一一对应的属性名称和属性字符;从数据库中下载原始物流箱码报文并识别其中的属性名称,基于辞典数据表将原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;将压缩物流箱码报文保存于存储系统中,完成对原始物流箱码报文的归档。该装置应用有上述方案所提的方法。

Description

物流箱码的归档压缩方法及装置
技术领域
本发明涉及数据处理技术领域,尤其涉及一种物流箱码的归档压缩算法。
背景技术
物流箱是货物运输的核心实体载体之一,每天都会被大量使用,物流箱码是记载物流箱流通信息的重要数据,每个物流箱的运输路径信息及运载的货物信息都会通过物流箱码得以体现,物流公司为了保证物流信息的可追溯性,通常会定期对物流箱码进行存储以供查阅使用。
由于每天物流箱码产生的数据量巨大,如果长期存储在数据库中的物流箱码不归档,会严重占用数据库的存储空间并影响数据库的性能,如若不压缩直接对物流箱码进行归档则会消耗较大的存储介质,大幅增加存储成本支出。
发明内容
本发明的目的在于提供一种物流箱码的归档压缩方法及装置,能够对物流箱码先压缩再归档,减少归档时对存储系统空间的占用。
为了实现上述目的,本发明的一方面提供一种物流箱码的归档压缩方法,包括:
根据物流箱码报文中的属性名称构建辞典数据表,所述辞典数据表中包括多组一一对应的属性名称和属性字符;
从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;
将所述压缩物流箱码报文保存于存储系统中,完成对所述原始物流箱码报文的归档。
优选地,所述辞典数据表为可编辑数据表,用于更新其中的属性名称和属性字符。
较佳地,所述辞典数据表包括手动更新模式和自动更新模式;其中,
所述手动更新模式是指管理员通过手动补录、删减或修改的方式更新所述辞典数据表中的属性名称和属性字符;
所述自动更新模式是通过预设多个有序的备用属性字符,当检测到原始物流箱码报文中存在未被替换的属性名称时,顺序提取所述备用属性字符作为所述属性名称对应的属性字符,同时将所述属性名称与所述属性字符对应补录至所述辞典数据表中以做更新。
进一步地,从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文的方法包括:
设置原始物流箱码报文在数据库中的缓存时效,当原始物流箱码报文的缓存时间超过缓存时效时自动转存至压缩空间;
提取压缩空间中的原始物流箱码报文,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,将所述原始物流箱码报文转换为压缩物流箱码报文。
优选地,将所述压缩物流箱码报文保存于存储系统中的方法包括:
先将所述压缩物流箱码报文转换成json字符串,再将所述json字符串保存于存储系统中。
可选地,所述存储系统为HBASE系统。
可选地,所述辞典数据表中的属性名称和属性字符均具有唯一性。
与现有技术相比,本发明提供的物流箱码的归档压缩方法具有以下有益效果:
本发明提供的物流箱码的归档压缩方法,需预先基于大量的物流箱码报文中出现的常用属性名称来构建辞典数据表,该辞典数据表由多组一一对应的属性名称和属性字符构成,其中,属性字符可以理解为属性名称的替代表示字符,其具有字符长度短和结构简单的特点,具体地,当数据库中缓存的原始物流箱码报文数据量达到阈值时,需将超过缓存时效的原始物流箱码报文转换成压缩物流箱码报文然后流转至存储系统中存储,进而保证原始物流箱码报文在长时间内的可追溯性。
综上,替换了属性字符的压缩物流箱码报文相较于原始物流箱码报文的字节长度被大幅缩减,可以大幅减少对存储空间的占用,此外,由于压缩过程遵循了一一对应的替换原则,故整个过程可做到无损压缩。
本发明的另一方面提供一种物流箱码的归档压缩装置,应用有上述技术方案提到的物流箱码的归档压缩方法,该装置包括:
数据表单元,用于根据物流箱码报文中的属性名称构建辞典数据表,所述辞典数据表中包括多组一一对应的属性名称和属性字符;
压缩单元,用于从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;
归档单元,用于将所述压缩物流箱码报文保存于存储系统中,完成对所述原始物流箱码报文的归档。
优选地,还包括用于选择辞典数据表更新模式的模式选择单元,其中,所述辞典数据表包括手动更新模式和自动更新模式;
所述手动更新模式是指管理员通过手动补录、删减或修改的方式更新所述辞典数据表中的属性名称和属性字符;
所述自动更新模式是通过预设多个有序的备用属性字符,当检测到原始物流箱码报文中存在未被替换的属性名称时,顺序提取所述备用属性字符作为所述属性名称对应的属性字符,同时将所述属性名称与所述属性字符对应补录至所述辞典数据表中以做更新。
与现有技术相比,本发明提供的物流箱码的归档压缩装置的有益效果与上述技术方案提供的物流箱码的归档压缩方法的有益效果相同,在此不做赘述。
本发明的第三方面提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器运行时执行上述物流箱码的归档压缩方法的步骤。
与现有技术相比,本发明提供的计算机可读存储介质的有益效果与上述技术方案提供的物流箱码的归档压缩方法的有益效果相同,在此不做赘述。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为实施例一中物流箱码的归档压缩方法的流程示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例,均属于本发明保护的范围。
实施例一
请参阅图1,本实施例提供一种物流箱码的归档压缩方法,包括:
根据物流箱码报文中的属性名称构建辞典数据表,辞典数据表中包括多组一一对应的属性名称和属性字符;从数据库中下载原始物流箱码报文并识别其中的属性名称,基于辞典数据表将原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;将压缩物流箱码报文保存于存储系统中,完成对原始物流箱码报文的归档。
本实施例提供的物流箱码的归档压缩方法,需预先基于大量的物流箱码报文中出现的常用属性名称来构建辞典数据表,该辞典数据表由多组一一对应的属性名称和属性字符构成,其中,属性字符可以理解为属性名称的替代表示字符,其具有字符长度短和结构简单的特点,具体地,当数据库中缓存的原始物流箱码报文数据量达到阈值时,需将超过缓存时效的原始物流箱码报文转换成压缩物流箱码报文然后流转至存储系统中存储,进而保证原始物流箱码报文在长时间内的可追溯性。
为了保证辞典数据表中数据的全面性和准确性,需定期对辞典数据表中的属性名称和属性字符进行更新,故本实施例中的辞典数据表优选用可编辑数据表。
可以理解的是,上述实施例中辞典数据表的更新模式包括手动更新模式和自动更新模式;其中,手动更新模式是指管理员通过手动补录、删减或修改的方式更新辞典数据表中的属性名称和属性字符;自动更新模式是通过预设多个有序的备用属性字符,当检测到原始物流箱码报文中存在未被替换的属性名称时,顺序提取备用属性字符作为属性名称对应的属性字符,同时将属性名称与属性字符对应补录至辞典数据表中以做更新。
具体实施时,当选用手动更新模式时,管理员可随时在辞典数据表中手动补录、删减、修改属性名称和/或属性字符,当选用自动更新模式时,需管理员预先配置多个备用属性字符依序保存,在对原始物流箱码报文进行压缩转换时,会提取出报文中未被替换的属性名称执行此次压缩转换,并顺序选择备用属性字符作为上述未被替换属性名称的属性字符,同时将其属性名称与对应的属性字符补录入辞典数据表中更新。
可见,本实施例在压缩转换过程中能够直接对其未被替换的属性名称进行临时替换,一方面可以使原始物流箱码报文中的属性名称快速的被全部替换,最大程度的压缩报文字段,另一方面,还可起到实时更新辞典数据表的作用,以提升辞典数据表中数据更新的时效性。当然,管理员也可将辞典数据表的更新任务设置为定时任务,使其仅在特定的时间对辞典数据表进行数据更新,这样可减轻服务器的计算压力。
具体地,上述实施例中从数据库中下载原始物流箱码报文并识别其中的属性名称,基于辞典数据表将原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文的方法包括:
设置原始物流箱码报文在数据库中的缓存时效,当原始物流箱码报文的缓存时间超过缓存时效时自动转存至压缩空间;提取压缩空间中的原始物流箱码报文,基于辞典数据表将原始物流箱码报文中的属性名称替换为对应的属性字符,将原始物流箱码报文转换为压缩物流箱码报文。
需要说明的是,压缩空间为数据库中预设的一部分缓存空间,主要用于暂存超过缓存时效的原始物流箱码报文,此外,属性字符的替换也是在压缩空间中进行的,当超过缓存时效的原始物流箱码报文转存至缓存空间后,在数据库中的原始物流箱码报文则会被自动被删除,通过上述缓存机制的设置,能够始终使用预留的空间来缓存新产生的物流箱码报文,不会占用额外的缓存空间,进而确保数据库的性能不受影响。
上述实施例中将所述压缩物流箱码报文保存于存储系统中的方法包括:
先将压缩物流箱码报文转换成json字符串,再将json字符串保存于存储系统中。反之,在读取压缩物流箱码报文时,需首先从存储系统中调取json字符串并转换为压缩物流箱码报文,接着调用建辞典数据表将其中的属性字符还原为对应的属性字符,最终将还原得到的原始物流箱码报文通过应用前端展示给用户。示例性地,存储系统为HBASE系统。
需要强调的是,为了满足报文压缩时的无损特性,还需确保辞典数据表中属性名称和属性字符的唯一性,避免文件压缩后报文出错。为了便于理解,现对上述实施例的具体实现过程做示例性说明:
从数据库中下载原始物流箱码报文为:
{"head":{"originSys":"DWMSWMP","boxCode":"61NJ20000011141000","imodel":"U","boxLife":"0","inStockSit":"L525","boxType":"61","ifWorkbin":0,"scanFlage":"B","packType":"","packLength":"0.000","packWidth":"0.000","packHeight":"0.000","unit":"","boxWeight":"20.000","weightUnit":"KG","packVolume":"640000.000","volumeUnit":"CCM","packageObject":"02","packNum":"1.000","lifnr":"","planSplit":"L525","productNum":"1.000","cpTrackingNum":"","zkeySon":"","zkeyMot":"","person":"17020830","date":"2018-10-19","time":"11:00:42","orderMon":"","sonmunTag":"","addTag":"","driftingBoxId":"","boxCodeCompany":"01","nextStation":"","destination":"","packArea":"","splitSign":null,"originSite":"L525"},"item":{"totalPage":1,"currentPage":1,"items":[{"boxCode":"61NJ20000011141000","innerBox":"OMS0011004869750101","innerType":"02","innerItem":"000010","manageSysOrder":"OMS0011004869750101","originSys":"OMS","taskOrder":"0011004869750101","bol":"653C8CE9C61C466675FA5FC8AEEBC41D","product":"000000011761136396","productName":"自营电器大件商品20180807064717yfsz","number":"1.000","numberUnit":"S01","expired":"","splitSign":"X"}]}};
构建的辞典数据表为:
Figure BDA0002293519520000071
Figure BDA0002293519520000081
Figure BDA0002293519520000091
上述原始物流箱码报文中包含有关键词“head”、“originSys”、“boxCode”等属性名,基于上述辞典数据表将原始物流箱码报文中的属性名称替换为对应的属性字符,转换得到的压缩物流箱码报文为:
"{"0":{"1":"DWMSWMP","2":"61NJ20000011141000","3":"U","4":"0","5":"L525","6":"61","7":0,"8":"B","9":"","10":"0.000","11":"0.000","12":"0.000","13":"","14":"20.000","15":"KG","16":"640000.000","17":"CCM","18":"02","19":"1.000","20":"","21":"L525","22":"1.000","23":"","24":"","25":"","26":"17020830","27":"2018-10-19","28":"11:00:42","29":"","30":"","31":"","32":"","33":"01","34":"","35":"","36":"","37":null,"38":"L525"},"39":{"52":1,"53":1,"40":[{"2":"61NJ20000011141000","41":"OMS0011004869750101","42":"02","42":"000010","44":"OMS0011004869750101","1":"OMS","45":"0011004869750101","46":"653C8CE9C61C466675FA5FC8AEEBC41D","47":"000000011761136396","48":"自营电器大件商品20180807064717yfsz","49":"1.000","50":"S01","51":"","37":"X"}]}}"。
经比对分析,原始物流箱码报文的字节长度为1106个字节,转换为压缩物流箱码报文为729个字节,压缩后的报文存储空间节省了35%。另外,由于上述报文压缩操作只需执行一次查找操作和一次替换操作,其操作的时间复杂度为O(2),相比较于现有技术中的压缩算法,假设报文中需要替换的属性名为N个,如果用顺序查找算法其时间复杂度为O(n),如果采用基于平衡二叉树算法其时间复杂度为O(logN),综上分析,采用本实施例提供的压缩算法具有压缩速度更快的特点。
实施例二
本实施例提供一种物流箱码的归档压缩装置,包括:
数据表单元,用于根据物流箱码报文中的属性名称构建辞典数据表,所述辞典数据表中包括多组一一对应的属性名称和属性字符;
压缩单元,用于从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;
归档单元,用于将所述压缩物流箱码报文保存于存储系统中,完成对所述原始物流箱码报文的归档。
与现有技术相比,本实施例提供的物流箱码的归档压缩装置的有益效果与上述实施例提供的物流箱码的归档压缩方法的有益效果相同,在此不做赘述。
实施例三
本实施例提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器运行时执行上述物流箱码的归档压缩方法的步骤。
与现有技术相比,本实施例提供的计算机可读存储介质的有益效果与上述技术方案提供的物流箱码的归档压缩方法的有益效果相同,在此不做赘述。
本领域普通技术人员可以理解,实现上述发明方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,上述程序可以存储于计算机可读取存储介质中,该程序在执行时,包括上述实施例方法的各步骤,上述的存储介质可以是:ROM/RAM、磁碟、光盘、存储卡等。
以上,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种物流箱码的归档压缩方法,其特征在于,包括:
根据物流箱码报文中的属性名称构建辞典数据表,所述辞典数据表中包括多组一一对应的属性名称和属性字符;
从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;
将所述压缩物流箱码报文保存于存储系统中,完成对所述原始物流箱码报文的归档。
2.根据权利要求1所述的方法,其特征在于,所述辞典数据表为可编辑数据表,用于更新其中的属性名称和属性字符。
3.根据权利要求2所述的方法,其特征在于,所述辞典数据表包括手动更新模式和自动更新模式;其中,
所述手动更新模式是指管理员通过手动补录、删减或修改的方式更新所述辞典数据表中的属性名称和属性字符;
所述自动更新模式是通过预设多个有序的备用属性字符,当检测到原始物流箱码报文中存在未被替换的属性名称时,顺序提取所述备用属性字符作为所述属性名称对应的属性字符,同时将所述属性名称与所述属性字符对应补录至所述辞典数据表中以做更新。
4.根据权利要求3所述的方法,其特征在于,从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文的方法包括:
设置原始物流箱码报文在数据库中的缓存时效,当原始物流箱码报文的缓存时间超过缓存时效时自动转存至压缩空间;
提取压缩空间中的原始物流箱码报文,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,将所述原始物流箱码报文转换为压缩物流箱码报文。
5.根据权利要求4所述的方法,其特征在于,将所述压缩物流箱码报文保存于存储系统中的方法包括:
先将所述压缩物流箱码报文转换成json字符串,再将所述json字符串保存于存储系统中。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述存储系统为HBASE系统。
7.根据权利要求1-5任一项所述的方法,其特征在于,所述辞典数据表中的属性名称和属性字符均具有唯一性。
8.一种物流箱码的归档压缩装置,其特征在于,包括:
数据表单元,用于根据物流箱码报文中的属性名称构建辞典数据表,所述辞典数据表中包括多组一一对应的属性名称和属性字符;
压缩单元,用于从数据库中下载原始物流箱码报文并识别其中的属性名称,基于所述辞典数据表将所述原始物流箱码报文中的属性名称替换为对应的属性字符,转换为压缩物流箱码报文;
归档单元,用于将所述压缩物流箱码报文保存于存储系统中,完成对所述原始物流箱码报文的归档。
9.根据权利要求8所述的装置,其特征在于,还包括用于选择辞典数据表更新模式的模式选择单元,其中,所述辞典数据表包括手动更新模式和自动更新模式;
所述手动更新模式是指管理员通过手动补录、删减或修改的方式更新所述辞典数据表中的属性名称和属性字符;
所述自动更新模式是通过预设多个有序的备用属性字符,当检测到原始物流箱码报文中存在未被替换的属性名称时,顺序提取所述备用属性字符作为所述属性名称对应的属性字符,同时将所述属性名称与所述属性字符对应补录至所述辞典数据表中以做更新。
10.一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,其特征在于,计算机程序被处理器运行时执行上述权利要求1至7任一项所述方法的步骤。
CN201911190773.XA 2019-11-28 2019-11-28 物流箱码的归档压缩方法及装置 Pending CN111078652A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911190773.XA CN111078652A (zh) 2019-11-28 2019-11-28 物流箱码的归档压缩方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911190773.XA CN111078652A (zh) 2019-11-28 2019-11-28 物流箱码的归档压缩方法及装置

Publications (1)

Publication Number Publication Date
CN111078652A true CN111078652A (zh) 2020-04-28

Family

ID=70312130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911190773.XA Pending CN111078652A (zh) 2019-11-28 2019-11-28 物流箱码的归档压缩方法及装置

Country Status (1)

Country Link
CN (1) CN111078652A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114665887A (zh) * 2022-05-24 2022-06-24 成都索贝视频云计算有限公司 一种基于整体压缩的json字符串数据压缩方法
WO2024001163A1 (zh) * 2022-06-29 2024-01-04 青岛海尔科技有限公司 属性数据的转换方法和装置、存储介质及电子装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118293A (zh) * 2009-12-30 2011-07-06 上海可鲁系统软件有限公司 一种通讯报文压缩存储方法
CN113760839A (zh) * 2020-11-25 2021-12-07 北京沃东天骏信息技术有限公司 日志数据压缩处理方法、装置、电子设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118293A (zh) * 2009-12-30 2011-07-06 上海可鲁系统软件有限公司 一种通讯报文压缩存储方法
CN113760839A (zh) * 2020-11-25 2021-12-07 北京沃东天骏信息技术有限公司 日志数据压缩处理方法、装置、电子设备和存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114665887A (zh) * 2022-05-24 2022-06-24 成都索贝视频云计算有限公司 一种基于整体压缩的json字符串数据压缩方法
WO2024001163A1 (zh) * 2022-06-29 2024-01-04 青岛海尔科技有限公司 属性数据的转换方法和装置、存储介质及电子装置

Similar Documents

Publication Publication Date Title
JP6596102B2 (ja) コンテンツ連想シーブに存在している基本データエレメントからデータを導出することによるデータの無損失削減
JP4261779B2 (ja) データ圧縮装置および方法
US5151697A (en) Data structure management tagging system
US8838551B2 (en) Multi-level database compression
US8255398B2 (en) Compression of sorted value indexes using common prefixes
US7283072B1 (en) Methods of creating a dictionary for data compression
US7689630B1 (en) Two-level bitmap structure for bit compression and data management
US7973680B2 (en) Method and system for creating an in-memory physical dictionary for data compression
CN110741637B (zh) 简化视频数据的方法、计算机可读存储介质和电子装置
JP3992495B2 (ja) トリー構造に基づく機能的メモリ
CN109446362A (zh) 基于外存的图数据库结构、图数据存储方法、装置
CN109684290B (zh) 日志存储方法、装置、设备及计算机可读存储介质
CN105009067A (zh) 管理对存储数据单元的操作
CN107729406B (zh) 一种数据分类存储方法及装置
US11074133B2 (en) Method, electronic device and computer readable medium of file management
CN105027071A (zh) 管理对存储数据单元的操作
CN108475508B (zh) 音频数据和保存在块处理存储系统中的数据的简化
CN111078652A (zh) 物流箱码的归档压缩方法及装置
US20100125614A1 (en) Systems and processes for functionally interpolated increasing sequence encoding
JP2019520627A (ja) データベース中にグラフ情報を記憶するためのb木使用
CN103299297A (zh) 文件目录存储方法、检索方法和设备
US8392433B2 (en) Self-indexer and self indexing system
CN109271463B (zh) 一种恢复MySQL数据库的innodb压缩数据的方法
Cheng et al. The Key as Dictionary Compression Method of Inverted Index Table under the Hbase Database.
KR101299555B1 (ko) 해시 함수 기반의 인덱스를 이용한 텍스트 검색 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200428