CN111930708A - 基于Ceph对象存储的对象标签的扩展系统及方法 - Google Patents

基于Ceph对象存储的对象标签的扩展系统及方法 Download PDF

Info

Publication number
CN111930708A
CN111930708A CN202010672693.4A CN202010672693A CN111930708A CN 111930708 A CN111930708 A CN 111930708A CN 202010672693 A CN202010672693 A CN 202010672693A CN 111930708 A CN111930708 A CN 111930708A
Authority
CN
China
Prior art keywords
tag
data
label
request
name
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010672693.4A
Other languages
English (en)
Other versions
CN111930708B (zh
Inventor
雷先强
谢赟
韩欣
孙卓峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Datatom Information Technology Co ltd
Original Assignee
Shanghai Datatom Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Datatom Information Technology Co ltd filed Critical Shanghai Datatom Information Technology Co ltd
Priority to CN202010672693.4A priority Critical patent/CN111930708B/zh
Publication of CN111930708A publication Critical patent/CN111930708A/zh
Application granted granted Critical
Publication of CN111930708B publication Critical patent/CN111930708B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • G06F16/1827—Management specifically adapted to NAS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于Ceph对象存储的对象标签扩展系统及其方法，该系统包括：对象存储系统和客户端；所述对象存储系统包括接口模块，通用处理模块，操作执行模块和数据存储模块；所述接口模块用于提供RESTful API接口、并基于HTTP协议通过该RESTful API接口读取客户端输出的标签操作请求；所述通用处理模块用于读取客户端输出的标签操作请求，对该标签操作请求依序进行参数检测和权限检测，并对通过参数检测和权限检测的标签操作请求进行数据解析、生成标签数据和操作类型数据；所述操作执行模块用于读取通用处理模块、基于所述标签数据和操作类型数据执行标签操作；所述数据存储模块用于存储操作执行模块从标签数据中解析的标签内容和更新的元数据。本发明能够增加标签的数量、并提升标签内容的大小。

Description

基于Ceph对象存储的对象标签的扩展系统及方法
技术领域
本发明属于数据存储技术领域，具体来说涉及一种基于Ceph对象存储的对象标签的扩展系统及方法。
背景技术
随着物联网、云计算、大数据、5G等技术在医疗，电信，互联网等行业中的快速发展，海量的数据增长对传统的存储系统造成很大的挑战，对象存储作为新兴的存储技术近年来得到了广泛使用。对象存储综合了NAS和SAN存储等的优点，同时具有SAN的高速直接访问和NAS的数据共享等优势，提供了高可靠性、跨平台性以及安全的数据共享的存储体系结构。在媒体应用场景中，对象存储经常需要对音频、视频文件附加标签，用于描述文件本身的内容并对文件进行分类管理。但由于目前对象存储IO特性的局限性，若对象的元数据过大，会导致对象的访问速度大幅变慢。故用于保存对象的元数据的存储空间远远小于用于保存对象数据的存储空间。同时，现有的对象标签均存储于对象的元数据中，因此其规格受限于对象的元数据大小。目前对象存储的IO特性造成单个对象仅支持附加10个标签，且所有标签的内容总大小不超过4KB，严重限制了标签的数量和内容的丰富性。因此如何开发出一种能够对文件支持添加大量标签的标签扩展系统，是本领域技术人员需要研究的方向。
发明内容
本发明的目的是提供一种基于Ceph对象存储的对象标签的扩展系统，能够增加标签的数量、提升标签的内容大小，其采用的技术方案如下：
一种基于Ceph对象存储的对象标签扩展系统，其包括：对象存储系统和客户端；所述对象存储系统包括接口模块，通用处理模块，操作执行模块和数据存储模块；所述接口模块用于提供RESTful API接口、通过该RESTful API接口基于HTTP协议读取客户端输出的标签操作请求；所述通用处理模块用于读取客户端输出的标签操作请求，对该标签操作请求依序进行参数检测和权限检测并在标签操作请求通过参数检测和权限检测后生成标签数据并基于请求方法和请求参数生成操作类型数据；所述参数检测包括检测标签操作请求的请求方法是否合法，请求参数是否合法，对象名是否为空；所述权限检测包括检测当前输出标签操作请求的客户端是否具有对象标签的操作权限；所述操作执行模块用于读取通用处理模块、基于所述标签数据和操作类型数据执行标签操作；所述数据存储模块用于存储操作执行模块从标签数据中解析的标签内容和更新的元数据。
基于上述系统，本发明还公开了一种基于Ceph对象存储的对象标签的扩展方法，其技术方案如下：
一种基于Ceph对象存储的对象标签的扩展方法，其包括如下步骤：S1：客户端通过RESTful API接口向对象存储系统输出标签操作请求；S2：通用处理模块对标签操作请求进行参数检测，若参数正确则跳转至S3、若参数错误则输出进程结束信息至客户端；S3：通用处理模块对标签操作请求进行权限检测，若权限匹配则跳转至S4、若权限不足则输出进程结束信息至客户端；S4：通用处理模块对标签操作请求进行数据解析、生成标签数据和操作类型数据；S5：操作执行模块读取S4所得标签数据和操作类型数据，若操作类型数据可识别则执行标签操作、若操作类型数据不可识别则输出进程结束信息至客户端。
通过采用上述技术方案：在保留通过现有的对象标签接口可用前提下，通过新增用于添加、访问、删除对象标签的三个接口，将原本占据元数据区域的标签内容保存至额外对象的数据区域，由此突破了元数据区域对标签数量和大小的限制，能够将对单个对象的标签数量扩展至上千个，同时单个标签的内容大小扩展至与对象数据大小相同，为业务系统的数据整合提供了支持，降低了数据管理的复杂性。
优选的是，上述基于Ceph对象存储的对象标签的扩展方法中：其步骤S1中：所述标签操作请求为添加标签请求；其步骤S5包括如下步骤：S51：从标签数据中解析标签名和标签内容；S52：分别将S51所得各个标签内容通过数据存储模块写入单独的对象中，持久化到存储介质的数据区域并对外隐藏；S53：保存对象元数据中标签名与S51所得的标签名同名的原标签内容所在的对象名、更新对象元数据中的标签名、保存标签名对应的标签内容的对象名的关联信息，并将更新后的对象元数据通过数据存储模块持久化到存储介质的元数据区域，删除记录的原标签内容所在的对象；S54：输出对象标签添加完成信息至客户端。
通过采用这种技术方案：具体实现了对标签的添加请求操作。
优选的是，上述基于Ceph对象存储的对象标签的扩展方法中：步骤S1中：所述标签操作请求为访问标签请求；步骤S5包括如下步骤：S51：从标签数据中解析标签名；S52：从对象元数据中解析S51所得各个标签名所指向的对象，并从该对象中读取标签内容；S53：在S51所得各个标签名前添加区分特征数据，并以流式传输的方式将S52所得标签内容反馈至客户端。
通过采用这种技术方案：具体实现了对标签的访问请求操作。
优选的是，上述基于Ceph对象存储的对象标签的扩展方法中：步骤S1中：所述标签操作请求为删除标签请求；步骤S5包括如下步骤：S51：从标签数据中解析标签名；S52：从对象元数据中解析S51所得各个标签名所指向的对象；S53：通过数据存储模块从存储介质的数据区域中删除S52所得对象；S54：删除对象元数据中S53已删除对象对应标签名的信息，并将更新后的对象元数据通过数据存储模块持久化到存储介质的元数据区域；S55：输出对象标签删除信息至客户端。
通过采用这种技术方案：具体实现了对标签的删除请求操作。
与现有技术相比，本方案能够将文档、音频、视频等各种形式的以及其它任何文件作为标签内容附加到文件对象上。同时，本方法中添加对象标签的操作不会破坏对象的数据和元数据。
附图说明
下面结合附图与具体实施方式对本发明作进一步详细的说明：
图1为实施例1、2、3的结构示意图；
图2为实施例1、2、3的流程示意图。
各附图标记与部件名称对应关系如下：
1、对象存储系统；2、客户端；11、接口模块；12、通用处理模块；13、操作执行模块；14、数据存储模块。
具体实施方式
为了更清楚地说明本发明的技术方案，下面将结合各个实施例作进一步描述。
如图2示为实施例1：
一种基于Ceph对象存储的对象标签扩展系统，其特征在于，包括：对象存储系统1和客户端2；
所述对象存储系统1包括接口模块11，通用处理模块12，操作执行模块13和数据存储模块14；所述接口模块11用于提供RESTful API接口、并基于HTTP协议通过该RESTfulAPI接口读取客户端2输出的标签操作请求；所述通用处理模块12用于读取客户端2输出的标签操作请求，对该标签操作请求依序进行参数检测和权限检测，并对通过参数检测和权限检测的标签操作请求进行数据解析、生成标签数据和操作类型数据；所述操作执行模块13用于读取通用处理模块12、基于所述标签数据和操作类型数据执行标签操作；所述数据存储模块14用于存储操作执行模块13从标签数据中解析的标签内容和更新的元数据。
实施例1：基于上述标签扩展系统执行添加标签请求：
其包括如下步骤：
S1：客户端2通过RESTful API接口向对象存储系统1输出添加标签操作请求；示例数据如下所示：
POST http：//ip：port/bucket/object_name？tag HTTP/1.1
Content-Type：multipart/form-data；
boundary＝----WebKitFormBoundaryrGKCBY7qhFd3TrwA
…
----WebKitFormBoundaryrGKCBY7qhFd3TrwA
Key＝tag1
Value＝value1
----WebKitFormBoundaryrGKCBYTqhFd3TrwA
Key＝tag2
Value＝value2
----WebKitFormBoundaryrGKCBY7qhFd3TrwA--
S2：通用处理模块12对标签操作请求进行参数检测，当请求方法为POST、GET或DELETE，请求参数为tag，且对象名不为空时参数检测通过，若参数正确则跳转至S3、若参数错误则输出进程结束信息至客户端2；以S1示例数据为例，解析得到请求方法为POST，请求参数为tag，对象名为object_name，参数检测通过；
S3：通用处理模块12对标签操作请求进行权限检测，检查客户端2是否具有操作对象标签的权限，若权限匹配则跳转至S4、若权限不足则输出进程结束信息至客户端2；
S4：通用处理模块12对标签操作请求进行数据解析、生成标签数据和操作类型数据；以S1示例数据为例，以boundary的值为分隔符，在----WebKitFormBoundaryrGKCBY7qhFd3TrwA到----WebKitFormBoundaryrGKCBY7qhFd3TrwA-之间的内容为请求数据内容，直接读取生成标签数据，其中Key的值为标签名，Value的值为标签内容；操作类型数据由请求方法和请求参数的组合确定，示例数据中请求方法POST、请求参数tag的组合生成添加标签的操作类型数据。
S51：从标签数据中解析标签名和标签内容，将每一对标签名、标签内容以键值对的形式提取出来；在S1示例数据中得到键值对tag1：value1，tag2：value2；
S52：分别将S51所得各个标签内容通过数据存储模块14写入单独的对象中，持久化到存储介质中的数据区域，并且在索引数据中不保存写入的对象名，以实现对外隐藏；
S53：保存对象元数据中标签名与S51所得的标签名同名的原标签内容所在的对象名、更新对象元数据中的标签名、保存标签名对应的标签内容的对象名的关联信息，并将更新后的对象元数据通过数据存储模块14持久化到存储介质的元数据区域，并删除记录的原标签内容所在的对象；以S1示例数据为例，添加标签tag1、tag2，若对象元数据中已存在标签名tag1，先记录tag1对应标签内容所在的对象名tag_object_1，然后更新对象元数据中tag1、tag2与其对应标签内容value1、value2保存对象tag_object_1-1、tag_object_2的关联信息，并持久化对象元数据到元数据区域，最后删除记录的原标签内容所在的对象tag_object_1；
S54：输出对象标签添加完成信息至客户端2。
实施例2：基于上述标签扩展系统执行访问标签请求：
其包括如下步骤：
S1：客户端2通过RESTful API接口向对象存储系统1输出访问标签操作请求；示例数据如下所示：
Figure BDA0002582714780000051
S2：通用处理模块12对标签操作请求进行参数检测，当请求方法为POST、GET或DELETE，请求参数为tag，且对象名不为空时参数检测通过，若参数正确则跳转至S3、若参数错误则输出进程结束信息至客户端2；以S1示例数据为例，解析得到请求方法为GET，请求参数为tag，对象名为object_name，参数检测通过；
S3：通用处理模块12对标签操作请求进行权限检测，检查客户端2是否具有操作对象标签的权限，若权限匹配则跳转至S4、若权限不足则输出进程结束信息至客户端2；
S4：通用处理模块12对标签操作请求进行数据解析、生成标签数据和操作类型数据；以S1示例数据为例，在<TagSet>到</TagSet>之间的内容为请求数据内容，直接读取生成标签数据，其中Key的值为标签名；操作类型数据由请求方法和请求参数的组合确定，S1示例数据中请求方法GET、请求参数tag的组合生成访问标签的操作类型数据。
S51：从标签数据中解析各个Key值得到标签名；
S52：从对象元数据中解析S51所得各个标签名所指向的对象，并通过数据存储模块14从存储介质的数据区域中读取该对象保存的标签内容；以S1示例数据为例，从对象元数据中解析得到tag1、tag2指向的对象tag_object_1-1、tag_object_2，然后读取它们的内容value1、value2；
S53：在S51所得各个标签名前添加区分特征数据，并以流式传输的方式将S52所得标签内容反馈至客户端2；返回示例数据如下所示，其中特征数据为----WebKitFormBoundaryrGKCBY7qh5yzQa；
HTTP/1.1200 OK
x-amz-tag-boundary：----WebKitFormBoundaryrGKCBY7qh5yzQa
…
----WebKitFormBoundaryrGKCBYTqh5yzQa
Key＝tag1
Value＝value1
----WebKitFormBoundaryrGKCBYTqh5yzQa
Key＝tag2
Value＝value2
----WebKitFormBoundaryrGKCBY7qh5yzQa--
实施例3：基于上述标签扩展系统执行删除标签请求：
其包括如下步骤：
S1：客户端2通过RESTful API接口向对象存储系统1输出删除标签操作请求；示例数据如下所示：
Figure BDA0002582714780000061
Figure BDA0002582714780000071
S2：通用处理模块12对标签操作请求进行参数检测，当请求方法为POST、GET或DELETE，请求参数为tag，对象名不为空时参数检测通过，若参数正确则跳转至S3、若参数错误则输出进程结束信息至客户端2；以S1示例数据为例，解析得到请求方法为DELETE，请求参数为tag，对象名为object_name，参数检测通过；
S3：通用处理模块12对标签操作请求进行权限检测，检查客户端2是否具有操作对象标签的权限，若权限匹配则跳转至S4、若权限不足则输出进程结束信息至客户端2；
S4：通用处理模块12对标签操作请求进行数据解析、生成标签数据和操作类型数据；以S1示例数据为例，在<TagSet>到</TagSet>之间的内容为请求数据内容，直接读取生成标签数据，其中Key的值为标签名；操作类型数据由请求方法和请求参数的组合确定，S1示例数据中请求方法DELETE、请求参数tag的组合生成删除标签的操作类型数据。
S51：从标签数据中解析各个Key值得到标签名；
S52：从对象元数据中解析S51所得各个标签名所指向的对象；以S1示例数据为例，从对象元数据中解析得到tag1、tag2指向的对象tag_object_1-1、tag_object_2；
S53：通过数据存储模块从存储介质的数据区域中删除S52所得对象；以S1示例数据为例，即删除对象tag_object_1-1、tag_object_2；
S54：删除对象元数据中S53已删除对象对应标签名的信息，将更新后的对象元数据通过数据存储模块持久化到存储介质的元数据区域；以S1示例数据为例，删除对象元数据中tag1、tag2与其对应标签内容保存对象tag_object_1-1、tag_object_2的关联信息，然后将更新后的对象元数据持久化到元数据区域；
S55：输出对象标签删除信息至客户端2。
以上所述，仅为本发明的具体实施例，但本发明的保护范围并不局限于此，任何熟悉本领域技术的技术人员在本发明公开的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。本发明的保护范围以权利要求书的保护范围为准。

Claims (5)

1.一种基于Ceph对象存储的对象标签扩展系统，其特征在于，包括：对象存储系统(1)和客户端(2)；
所述对象存储系统(1)包括接口模块(11)，通用处理模块(12)，操作执行模块(13)和数据存储模块(14)；
所述接口模块(11)用于提供RESTful API接口、通过该RESTful API接口基于HTTP协议读取客户端(2)输出的标签操作请求；
所述通用处理模块(12)用于读取客户端(2)输出的标签操作请求，对该标签操作请求依序进行参数检测和权限检测并在标签操作请求通过参数检测和权限检测后生成标签数据并基于请求方法和请求参数生成操作类型数据；
所述参数检测包括检测标签操作请求的请求方法是否合法，请求参数是否合法，对象名是否为空；
所述权限检测包括检测当前输出标签操作请求的客户端(2)是否具有对象标签的操作权限；
所述操作执行模块(13)用于读取通用处理模块(12)、基于所述标签数据和操作类型数据执行标签操作；
所述数据存储模块(14)用于存储操作执行模块(13)从标签数据中解析的标签内容和更新的元数据；所述数据存储模块(14)包括存储介质。
2.一种基于Ceph对象存储的对象标签的扩展方法，其特征在于包括如下步骤：
S1：客户端(2)通过RESTful API接口向对象存储系统(1)输出标签操作请求；
S2：通用处理模块(12)对标签操作请求进行参数检测，若参数正确则跳转至S3、若参数错误则输出进程结束信息至客户端(2)；
S3：通用处理模块(12)对标签操作请求进行权限检测，若权限匹配则跳转至S4、若权限不足则输出进程结束信息至客户端(2)；
S4：通用处理模块(12)对标签操作请求进行数据解析、生成标签数据和操作类型数据；
S5：操作执行模块(13)读取S4所得标签数据和操作类型数据，若操作类型数据可识别则执行标签操作、若操作类型数据不可识别则输出进程结束信息至客户端(2)。
3.如权利要求2所述基于Ceph对象存储的对象标签的扩展方法，其特征在于：
步骤S1中：所述标签操作请求为添加标签请求；
步骤S5包括如下步骤：
S51：从标签数据中解析标签名和标签内容；
S52：分别将S51所得各个标签内容通过数据存储模块(14)写入单独的对象中，持久化到存储介质中的数据区域并对外隐藏；
S53：保存对象元数据中标签名与S51所得的标签名同名的原标签内容所在的对象名、更新对象元数据中的标签名、保存标签名对应的标签内容的对象名的关联信息，并将更新后的对象元数据通过数据存储模块(14)持久化到存储介质的元数据区域，删除记录的原标签内容所在的对象；
S54：输出对象标签添加完成信息至客户端(2)。
4.如权利要求2所述基于Ceph对象存储的对象标签的扩展方法，其特征在于：
步骤S1中：所述标签操作请求为访问标签请求；
步骤S5包括如下步骤：
S51：从标签数据中解析标签名；
S52：从对象元数据中解析S51所得各个标签名所指向的对象，并通过数据存储模块(14)从存储介质的数据区域中读取该对象保存的标签内容；
S53：在S51所得各个标签名前添加区分特征数据，并以流式传输的方式将S52所得标签内容反馈至客户端(2)。
5.如权利要求2所述基于Ceph对象存储的对象标签的扩展方法，其特征在于：
步骤S1中：所述标签操作请求为删除标签请求；
步骤S5包括如下步骤：
S51：从标签数据中解析标签名；
S52：从对象元数据中解析S51所得各个标签名所指向的对象；
S53：通过数据存储模块(14)从存储介质的数据区域中删除S52所得对象；
S54：删除对象元数据中S53已删除对象对应标签名的信息，并将更新后的对象元数据通过数据存储模块(14)持久化到存储介质的元数据区域；
S55：输出对象标签删除信息至客户端(2)。
CN202010672693.4A 2020-07-14 2020-07-14 基于Ceph对象存储的对象标签的扩展系统及方法 Active CN111930708B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010672693.4A CN111930708B (zh) 2020-07-14 2020-07-14 基于Ceph对象存储的对象标签的扩展系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010672693.4A CN111930708B (zh) 2020-07-14 2020-07-14 基于Ceph对象存储的对象标签的扩展系统及方法

Publications (2)

Publication Number Publication Date
CN111930708A true CN111930708A (zh) 2020-11-13
CN111930708B CN111930708B (zh) 2023-07-11

Family

ID=73313903

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010672693.4A Active CN111930708B (zh) 2020-07-14 2020-07-14 基于Ceph对象存储的对象标签的扩展系统及方法

Country Status (1)

Country Link
CN (1) CN111930708B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112287177A (zh) * 2020-11-25 2021-01-29 城云科技（中国）有限公司 一种创建、变更、显示和查询对象标签的方法和装置
CN113126920A (zh) * 2021-04-02 2021-07-16 深圳市杉岩数据技术有限公司 对象存储批量读取及写入方法、客户端、存储网关及介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6128623A (en) * 1998-04-15 2000-10-03 Inktomi Corporation High performance object cache
US20090259701A1 (en) * 2008-04-14 2009-10-15 Wideman Roderick B Methods and systems for space management in data de-duplication
US20140040286A1 (en) * 2012-06-18 2014-02-06 Maldivica Inc. Method and system for the normalization, filtering and securing of associated metadata information on file objects deposited into an object store
CN107409126A (zh) * 2015-02-24 2017-11-28 思科技术公司 用于保护企业计算环境安全的系统和方法
CN108268512A (zh) * 2016-12-30 2018-07-10 中国移动通信集团上海有限公司 一种标签查询方法及装置
CN108874971A (zh) * 2018-06-07 2018-11-23 北京赛思信安技术股份有限公司 一种应用于海量标签化实体数据存储的工具和方法
CN109582756A (zh) * 2018-10-30 2019-04-05 长春理工大学 非结构化源数据的云端自主逻辑归档方法
US20190324987A1 (en) * 2014-05-05 2019-10-24 Aveva Software, Llc Storing and identifying metadata through extended properties in a historization system
CN110825715A (zh) * 2019-11-08 2020-02-21 上海德拓信息技术股份有限公司 基于Ceph对象存储的多对象数据秒合的实现方法
CN111274616A (zh) * 2020-01-16 2020-06-12 上海德拓信息技术股份有限公司 基于Ceph对象存储整体上传分段校验的实现方法
CN111400757A (zh) * 2020-03-13 2020-07-10 西安电子科技大学 防止安卓第三方库中native代码泄露用户隐私的方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6128623A (en) * 1998-04-15 2000-10-03 Inktomi Corporation High performance object cache
US20090259701A1 (en) * 2008-04-14 2009-10-15 Wideman Roderick B Methods and systems for space management in data de-duplication
US20140040286A1 (en) * 2012-06-18 2014-02-06 Maldivica Inc. Method and system for the normalization, filtering and securing of associated metadata information on file objects deposited into an object store
US20190324987A1 (en) * 2014-05-05 2019-10-24 Aveva Software, Llc Storing and identifying metadata through extended properties in a historization system
CN107409126A (zh) * 2015-02-24 2017-11-28 思科技术公司 用于保护企业计算环境安全的系统和方法
CN108268512A (zh) * 2016-12-30 2018-07-10 中国移动通信集团上海有限公司 一种标签查询方法及装置
CN108874971A (zh) * 2018-06-07 2018-11-23 北京赛思信安技术股份有限公司 一种应用于海量标签化实体数据存储的工具和方法
CN109582756A (zh) * 2018-10-30 2019-04-05 长春理工大学 非结构化源数据的云端自主逻辑归档方法
CN110825715A (zh) * 2019-11-08 2020-02-21 上海德拓信息技术股份有限公司 基于Ceph对象存储的多对象数据秒合的实现方法
CN111274616A (zh) * 2020-01-16 2020-06-12 上海德拓信息技术股份有限公司 基于Ceph对象存储整体上传分段校验的实现方法
CN111400757A (zh) * 2020-03-13 2020-07-10 西安电子科技大学 防止安卓第三方库中native代码泄露用户隐私的方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
ANDREAS WÖSS等: "An object storage model for the truffle language implementation framework", 《PPPJ \'14: PROCEEDINGS OF THE 2014 INTERNATIONAL CONFERENCE ON PRINCIPLES AND PRACTICES OF PROGRAMMING ON THE JAVA PLATFORM: VIRTUAL MACHINES, LANGUAGES, AND TOOLS》, pages 133 - 144 *
李小亮: "CSCloud中计算资源的自动可扩展方法研究与实现", 《中国优秀硕士学位论文全文数据库信息科技辑》, no. 1, pages 137 - 134 *
鲜卑大帝: "分布式对象存储-可扩展的分布式系统--Go语言实现", 《HTTPS://BLOG.CSDN.NET/WEIXIN_41670928/ARTICLE/DETAILS/107134039》, pages 1 *
鲜卑大帝: "分布式对象存储-可扩展的分布式系统--Go语言实现", pages 1, Retrieved from the Internet <URL:《https://blog.csdn.net/weixin_41670928/article/details/107134039》> *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112287177A (zh) * 2020-11-25 2021-01-29 城云科技（中国）有限公司 一种创建、变更、显示和查询对象标签的方法和装置
CN113126920A (zh) * 2021-04-02 2021-07-16 深圳市杉岩数据技术有限公司 对象存储批量读取及写入方法、客户端、存储网关及介质

Also Published As

Publication number Publication date
CN111930708B (zh) 2023-07-11

Similar Documents

Publication Publication Date Title
US11036808B2 (en) System and method for indexing electronic discovery data
US20190236102A1 (en) System and method for differential document analysis and storage
US20130124796A1 (en) Storage method and apparatus which are based on data content identification
US11669576B2 (en) System, method and computer program product for protecting derived metadata when updating records within a search engine
US9753977B2 (en) Method and system for managing database
US8422786B2 (en) Analyzing documents using stored templates
US20100228794A1 (en) Semantic document analysis
CN111930708B (zh) 基于Ceph对象存储的对象标签的扩展系统及方法
US9201754B2 (en) Recording application consumption details
CN116089910B (zh) 一种支持多种格式电子文档的密级检测方法
US20150106478A1 (en) File handlers supporting dynamic data streams
CN109902070B (zh) 一种面向WiFi日志数据的解析存储搜索方法
CN117453646A (zh) 融合语义与深度神经网络的内核日志联合压缩与查询方法
US10878018B1 (en) Systems and methods for classification of data streams
CN114218347A (zh) 多个文件内容的快速索引查找方法
US20110145240A1 (en) Organizing Annotations
CN111797063A (zh) 一种流式数据处理方法与系统
US11681862B1 (en) System and method for identifying location of content within an electronic document
CN111915424B (zh) 信息保存方法及相关产品
CN116719778B (zh) Oa系统上ofd文件生成虚拟分区完成四性信息主题的技术
US20230385240A1 (en) Optimizations for data deduplication operations
CN110609909A (zh) 用于电子文档判别勘误的智能方法
Fang et al. Research on Unstructured Data Access Strategy In Cloud Environment
CN116383317A (zh) 一种遥测数据的存储方法、装置、电子设备及存储介质
CN117950942A (zh) 日志管理方法、装置、设备、存储介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant