CN114647380B - 一种数据存算一体固态硬盘模组及系统 - Google Patents

一种数据存算一体固态硬盘模组及系统 Download PDF

Info

Publication number
CN114647380B
CN114647380B CN202210289355.1A CN202210289355A CN114647380B CN 114647380 B CN114647380 B CN 114647380B CN 202210289355 A CN202210289355 A CN 202210289355A CN 114647380 B CN114647380 B CN 114647380B
Authority
CN
China
Prior art keywords
module
data
storage
sub
calculation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210289355.1A
Other languages
English (en)
Other versions
CN114647380A (zh
Inventor
陈光第
黄蓉
周永锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Kemei Information Technology Co ltd
Original Assignee
Suzhou Kemei Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Kemei Information Technology Co ltd filed Critical Suzhou Kemei Information Technology Co ltd
Priority to CN202210289355.1A priority Critical patent/CN114647380B/zh
Publication of CN114647380A publication Critical patent/CN114647380A/zh
Application granted granted Critical
Publication of CN114647380B publication Critical patent/CN114647380B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0656—Data buffering arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0688—Non-volatile semiconductor memory arrays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及电子存储设备技术领域，尤其是涉及一种数据存算一体固态硬盘模组及系统，旨在解决现有技术当主机CPU需要对存储的数据进行处理时，需要先读取并将数据输送至内存中才能进行操作，面对大量数据时容易导致数据获取和处理的效率低下的问题，其技术方案是一种数据存算一体固态硬盘模组，包括运算模块，运算模块与主机CPU、存储模块连接，运算模块用于接收数据请求，并基于所述数据请求进行数据获取、运算以及处理，本申请具有使得数据运算和处理时无需将数据搬运到内存中进行处理，通过兼具存储和运算功能的存储设备，降低数据读取和传输带来的运算负担，提高对硬盘中数据的获取和处理效率的效果。

Description

一种数据存算一体固态硬盘模组及系统
技术领域
本申请涉及电子存储设备技术领域，尤其是涉及一种数据存算一体固态硬盘模组及系统。
背景技术
固态硬盘，又称固态驱动器，是用固态电子存储芯片阵列制成的硬盘，是一种广泛应用于军事、车载、电力及医疗等领域的存储设备。随着信息技术不断发展，大量的数据传输占用了各类总线、网络带宽，与此同时，固态硬盘逐渐替代机械硬盘成为了主流的存储设备。
目前，常见的固态硬盘用于实现数据存储的功能，在应用中，固态硬盘与主机CPU连接，主机CPU同时与主机内存连接，当主机应用需要对硬盘中存储的数据进行处理时，主机CPU将硬盘中的数据读取并调出至内存，在内存中进行数据处理。
在实现本申请的过程中，发明人发现上述技术至少存在以下问题：
当主机CPU需要对存储的数据进行处理时，需要先读取并将数据输送至内存中才能进行操作，面对大量数据时容易导致数据获取和处理的效率低下。
发明内容
为了降低数据读取和传输带来的运算负担，提高对于硬盘中数据的获取和处理效率，本申请提供一种数据存算一体固态硬盘模组、数据存储系统及数据存储运算方法。
第一方面，本申请提供的一种数据存算一体固态硬盘模组，采用如下的技术方案：
一种数据存算一体固态硬盘模组，包括运算模块，所述运算模块与主机CPU连接，所述运算模块还同时与存储模块连接，所述运算模块用于接收主机CPU发送的数据请求，并基于所述数据请求在存储模块中检索对应的响应数据。
通过采用上述技术方案，设置与主机CPU分离的运算模块，由于主机CPU在运算时需要将数据输送到内存中才可以开始运算，因此设置在主机CPU与存储模块之间的运算模块可以与存储模块两者组合形成一个同时具有存储和运算功能的模组，进而取代将数据传输到内存中再进行处理的流程，有助于提高主机对存储设备中的数据获取和处理的效率，降低主机设备的数据处理负担。
在一个具体的可实施方式中，所述运算模块与存储模块集成设置为存储设备和/或所述运算模块与存储模块分离设计。
通过采用上述技术方案，运算模块可以集成在存储模块中形成存储-运算一体式的硬盘，也可以分离设置，单独设置在主机与存储模块之间，作为独立的器件使用，有助于提高运算模块和存储模块在组合应用时的灵活性，降低了当用户只需要其中一种功能时，剩余的功能模块空闲的情况，有助于分别提高运算模块和存储模块的使用效率。
在一个具体的可实施方式中，所述运算模块至少包括运算CPU子模块、IO接口子模块、缓存控制子模块、存算控制子模块以及缓存子模块；
所述运算CPU子模块与IO接口子模块、缓存控制子模块以及存算控制子模块均信号连接，用于实现所述IO接口子模块、缓存控制子模块以及存算控制子模块的资源调度、指令执行以及数据处理；
所述运算CPU子模块，还用于在接收主机CPU发送的数据无效信息后，控制缓存控制子模块将与数据请求相关但未处理的缓存数据发送至主机内存；
所述IO接口子模块与主机CPU信号连接，用于控制数据的输入、输出及分配；
所述缓存控制子模块与所述缓存子模块信号连接，用于控制数据是否存入缓存；
所述存算控制子模块与存储模块信号连接，用于对存储模块的访问进行调度和控制。
通过采用上述技术方案，运算模块中存在不同功能的子模块，有助于实现运算模块对存储模块中的数据的处理效率，进而使得运算模块得以实现对存储模块中数据的读取、处理以及传输等功能，进而便于取代常规处理中的数据搬运步骤，提高数据的存储运算效率，运算CPU子模块可以在主机CPU判定数据存算一体固态硬盘模组处理的数据无效的情况下，将与数据请求相关的缓存数据转移至主机内存，由主机内存提供高算力的数据处理，降低了当数据存算一体固态硬盘模组无法完成数据处理时，主机无法得到数据的可能性，有助于提高存储-运算应用上的灵活性。
在一个具体的可实施方式中，所述运算模块还包括计算子模块，所述计算子模块与存算控制子模块信号连接，用于存储以及提供预设的数据处理算法，所述数据处理引擎包括FPGA算法引擎、GPU算法引擎、TPU算法引擎、DPU算法引擎、NPU算法引擎以及BPU算法引擎中的一种或多种。
通过采用上述技术方案，在计算子模块中集成若干种预设的数据处理算法，有助于使得用户通过预设的算法对数据进行处理，进而有助于提高数据处理的效率。
第二方面，本申请提供一种数据存储系统，采用如下的技术方案：
一种数据存储系统，所述数据存储系统包括用于存储数据的存储模块以及用于实现数据运算的数据存算一体存储运算模块，所述数据存算一体存储运算模块与存储模块信号连接，所述数据存算一体存储运算模块还同时与主机CPU信号连接。
通过采用上述技术方案，设置与主机CPU分离的运算模块，由于主机CPU在运算时需要将数据输送到内存中才可以开始运算，因此设置在主机CPU与存储模块之间的运算模块可以与存储模块两者组合形成一个同时具有存储和运算功能的数据存算一体存储运算模块，进而取代将数据传输到内存中再进行处理的流程，有助于提高主机对存储设备中的数据获取和处理的效率，降低主机设备的数据处理负担。
在一个具体的可实施方式中，所述数据存储系统包括至少两个数据存算一体存储运算模块，每个所述数据存算一体存储运算模块均与一个一一对应的存储模块信号连接，至少两个所述数据存算一体存储运算模块自主机CPU起自上而下逐级设置，所述数据存算一体存储运算模块用于当接收到主机CPU或上级数据存算一体存储运算模块发送的数据请求时，基于所述数据请求在对应的存储模块中检索对应的响应数据，若存在或接收到所述响应数据，则传输至所述主机CPU或上级数据存算一体存储运算模块；若无所述响应数据，则将所述数据请求传递至下级数据存算一体存储运算模块。
通过采用上述技术方案，将数据存算一体存储运算模块进行级联设置，有助于在一个主机的基础下，同时连接并管理多个存储模块，进而有助于在扩大主机的数据存储能力的同时，保证对每个存储模块的控制，有助于提高主机的数据存储运算效率。
第三方面，本申请提供一种数据存储运算方法，采用如下的技术方案：
一种数据存储运算方法，所述方法是基于如第二方面中任一所述的一种数据存储系统实现的，包括以下步骤：
所述数据存算一体固态硬盘模组获取数据请求；
所述数据存算一体固态硬盘模组基于所述数据请求，在对应的存储模块中获取对应的响应数据；
所述数据存算一体固态硬盘模组获取所述响应数据后，将所述响应数据发送至数据请求端。
通过采用上述技术方案，设置与主机CPU分离的运算模块，由于主机CPU在运算时需要将数据输送到内存中才可以开始运算，因此设置在主机CPU与存储模块之间的运算模块可以与存储模块两者组合形成一个同时具有存储和运算功能的数据存算一体固态硬盘模组，进而取代将数据传输到内存中再进行处理的流程，有助于提高主机对存储设备中的数据获取和处理的效率，降低主机设备的数据处理负担。
在一个具体的可实施方式中，所述基于所述数据请求在对应的存储模块中获取对应的响应数据，所述数据存算一体固态硬盘模组获取所述响应数据后，将所述响应数据发送至数据请求端包括：
所述数据存算一体固态硬盘模组基于所述数据请求在对应的存储模块中获取对应的响应数据；
若所述数据存算一体固态硬盘模组在对应存储模块中没有获取到与数据请求匹配的响应数据，则将所述数据请求传递至下级数据存算一体固态硬盘模组；
若所述数据存算一体固态硬盘模组接收到或在对应的存储模块中获取到响应数据，则将所述响应数据传输至数据请求端。
通过采用上述技术方案，将数据存算一体固态硬盘模组进行级联设置，有助于在一个主机的基础下，同时连接并管理多个存储模块，进而有助于在扩大主机的数据存储能力的同时，保证对每个存储模块的控制，有助于提高主机的数据存储运算效率。
第四方面，本申请提供一种智能终端，采用如下的技术方案：
一种智能终端，所述智能终端包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如第三方面任一所述的一种数据存储运算方法。
通过采用上述技术方案，智能终端中的处理器可以根据存储器中存储的相关计算机程序，实现上述一种数据存储运算方法，进而降低数据读取和传输带来的运算负担，提高对于硬盘中数据的获取和处理效率。
第五方面，本申请提供一种计算机可读存储介质，采用了如下的技术方案：
一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如第三方面任一所述的一种数据存储运算方法。
通过采用上述技术方案，能够存储相应的程序，进而降低数据读取和传输带来的运算负担，提高对于硬盘中数据的获取和处理效率。
综上所述，本申请包括以下至少一种有益技术效果：
设置与主机CPU分离的运算模块，由于主机CPU在运算时需要将数据输送到内存中才可以开始运算，因此设置在主机CPU与存储模块之间的运算模块可以与存储模块两者组合形成一个同时具有存储和运算功能的数据存算一体固态硬盘模组，进而取代将数据传输到内存中再进行处理的流程，有助于提高主机对存储设备中的数据获取和处理的效率，降低主机设备的数据处理负担；
将数据存算一体固态硬盘模组进行级联设置，有助于在一个主机的基础下，同时连接并管理多个存储模块，进而有助于在扩大主机的数据存储能力的同时，保证对每个存储模块的控制，有助于提高主机的数据存储运算效率；
在计算子模块中集成若干种预设的数据处理算法，有助于使得用户通过预设的算法对数据进行处理，进而有助于提高数据处理的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是背景技术中主机-存储数据应用的系统架构图；
图2是本申请实施例中示出的一种数据存算一体固态硬盘模组的系统架构示意图；
图3是本申请实施例中示出的一种数据存算一体固态硬盘模组的系统架构示意图；
图4是本申请实施例中示出的一种数据存算一体固态硬盘模组的系统架构示意图；
图5是本申请实施例中示出的一种数据存储系统的系统架构示意图；
图6是本申请实施例中示出的一种数据存储运算方法的方法流程示意图。
具体实施方式
本具体实施例仅仅是对本申请的解释，其并不是对本申请的限制，本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改，但只要在本申请的权利要求范围内都受到专利法的保护为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图1-6，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。
参考图1，在常规的主体-存储模块的数据存储应用系统中，主机在需要应用存储模块中的设备时，存储模块中的数据需要先搬送至主机内存中，由主机内存进行检索和处理，在大数据量的处理场景下，主机-存储模块需要承担大量的数据搬运工作，导致数据存储处理的效率低下。
本申请实施例提供了一种数据存储运算方法，所述方法可以应用于一种数据存储系统中，执行主体可以是数据存算一体固态硬盘模组，并由存储模块辅助实现。可以如图2或图3所示，其中，一种数据存储系统包括用于存储数据的存储模块以及用于实现数据运算的数据存算一体固态硬盘模组，数据存算一体固态硬盘模组与存储模组之间通信连接，数据存算一体固态硬盘模组可以与存储模块之间分离设计或组合设计。具体的，一方面，当数据存算一体固态硬盘模组与存储模块分离时，数据存算一体固态硬盘模组可以根据需要应用于不同的存储模块上，提高了数据存算一体固态硬盘模组使用上的灵活性；另一方面，数据存算一体固态硬盘模组与存储模块组合设计时，数据存算一体固态硬盘模组可以和存储模块组合为存算一体式的存储设备，提高了数据存储运算设备使用上的便捷性。
参考图4，具体的，数据存算一体固态硬盘模组中包括运算CPU子模块、IO接口子模块、缓存控制子模块、存算控制子模块、缓存子模块以及计算子模块；
运算CPU子模块与IO接口子模块、缓存控制子模块以及存算控制子模块均信号连接，用于实现所述IO接口子模块、缓存控制子模块以及存算控制子模块的资源调度、指令执行以及数据处理；
IO接口子模块与主机CPU信号连接，用于控制数据的输入、输出及分配；
缓存控制子模块与所述缓存子模块信号连接，用于控制数据是否存入缓存；
存算控制子模块与存储模块信号连接，用于对存储模块的访问进行调度和控制；
缓存子模块与缓存控制子模块信号连接，用于临时存放数据；
计算子模块，计算子模块是基于通用处理器实现的，用于存储以及在数据处理的过程中提供预设的数据处理引擎，预设的数据处理引擎可以包括FPGA算法引擎、GPU算法引擎、TPU算法引擎、DPU算法引擎、NPU算法引擎以及BPU算法引擎中的一种或多种。当数据存算一体固态硬盘模组接收到数据请求时，可以通过摘要算法对数据请求进行摘要提取，摘要算法可以设置为Hash（哈希）算法，通过Hash（哈希）算法可以生成基于数据请求的内容的请求摘要。获取数据请求摘要之后，计算子模块可以根据与数据请求对应的请求摘要来选取计算子模块中存储的预设的数据处理引擎，具体的，请求摘要与数据处理引擎之间可以通过数据名称、数据属性以及数据关系列表等具有在同类型的数据之间具有一定程度相似性的信息，来建立请求摘要与数据处理引擎之间的映射关系，根据多元线性回归算法可以计算相似度，相似度越高则映射关系的匹配度越高。在实施中，计算子模块可以根据数据处理引擎与请求摘要之间映射关系的匹配度将若干个与数据请求匹配的数据处理引擎作为备选并排序，并通过运算CPU选取备选数据处理引擎中的一个进行独立运算处理、多个并列处理或多个组合协作处理。
此外，当计算子模块中没有与数据请求匹配的数据处理引擎时，运算CPU子模块可以向上级的主机CPU反馈，进而请求主机CPU下发补充所需的数据处理引擎。在此基础上，随数据请求下发的数据处理引擎可以被存储并补充到计算子模块中，进而随着硬盘的使用，增强计算子模块中数据处理引擎的完善程度。
这样，有助于提高数据请求的处理效率，同时有助于数据存算一体固态硬盘模组内部的数据处理的效率。
在一个实施例中，参考图5，为了单一的存储空间可能存在容量不足的情况，因此相应的，一种数据存储系统还可以包括至少两个数据存算一体存储运算模块，每个数据存算一体存储运算模块均与一个一一对应的存储模块信号连接，至少两个所述数据存算一体存储运算模块自主机CPU起自上而下逐级设置，数据存算一体存储运算模块用于当接收到主机CPU或上级数据存算一体存储运算模块发送的数据请求时，基于数据请求在对应的存储模块中检索对应的响应数据，若存在或接收到响应数据，则传输至主机CPU或上级数据存算一体存储运算模块；若无响应数据，则将所述数据请求传递至下级数据存算一体存储运算模块。
这样，有助于在扩大数据存储容量的基础上，提高数据存储运算的效率。
下面将结合具体实施方式，对图6所示的处理流程进行详细的说明，内容可以如下：
步骤601，数据存算一体固态硬盘模组获取数据请求。
步骤602，数据存算一体固态硬盘模组基于所述数据请求，在对应的存储模块中获取对应的响应数据。
步骤603，数据存算一体固态硬盘模组获取所述响应数据后，将所述响应数据发送至数据请求端。
在一个实施例中，步骤602以及步骤603还可以包括：数据存算一体固态硬盘模组基于所述数据请求在对应的存储模块中获取对应的响应数据；若所述数据存算一体固态硬盘模组在对应存储模块中没有获取到与数据请求匹配的响应数据，则将所述数据请求传递至下级数据存算一体固态硬盘模组；若所述数据存算一体固态硬盘模组接收到或在对应的存储模块中获取到响应数据，则将所述响应数据传输至数据请求端。
这样，有助于在保证数据存储和处理的效率的基础上，扩大数据存储容量。
本申请实施例还公开一种智能终端，智能终端包括存储器和处理器，存储器上存储有能够被处理器加载并执行如上述的一种数据存储运算方法的计算机程序。
基于相同的技术构思，本申请实施例还公开一种计算机可读存储介质，包括能够被处理器加载执行时实现上述一种数据存储运算方法流程中的各个步骤。
计算机可读存储介质例如包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
所属领域的技术人员可以清楚地了解到，为描述的方便和简化，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U 盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以对本申请的技术方案进行了详细介绍，但以上实施例的说明只是用于帮助理解本申请的方法及其核心思想，不应理解为对本申请的限制。本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本申请的保护范围之内。

Claims (8)

1.一种数据存算一体固态硬盘模组，其特征在于：包括运算模块，所述运算模块与主机CPU连接，所述运算模块还同时与存储模块连接，所述运算模块用于接收主机CPU发送的数据请求，并基于所述数据请求进行数据获取、运算以及处理，所述数据请求至少用于描述数据获取、运算以及存储的指令；
所述运算模块至少包括运算CPU子模块、IO接口子模块、缓存控制子模块、存算控制子模块、缓存子模块；
所述运算CPU子模块与IO接口子模块、缓存控制子模块以及存算控制子模块均信号连接，用于实现所述IO接口子模块、缓存控制子模块以及存算控制子模块的资源调度、指令执行以及数据处理；
所述运算CPU子模块，还用于在接收主机CPU发送的数据无效信息后，控制缓存控制子模块将与数据请求相关但未处理的缓存数据发送至主机内存；
所述IO接口子模块与主机CPU信号连接，用于控制数据的输入、输出及分配；
所述缓存控制子模块与所述缓存子模块信号连接，用于控制数据是否存入缓存；
所述存算控制子模块与存储模块信号连接，用于对存储模块的访问进行调度和控制；
所述缓存子模块与缓存控制子模块连接，用于临时存储待处理的数据；
所述运算模块还包括计算子模块，所述计算子模块与存算控制子模块信号连接，用于存储以及提供预设的数据处理引擎，所述数据处理引擎包括FPGA算法引擎、GPU算法引擎、TPU算法引擎、DPU算法引擎、NPU算法引擎以及BPU算法引擎中的一种或多种；所述存算控制子模块还用于控制计算子模块中数据处理引擎的应用方式，所述计算子模块还用于在所述存算控制子模块的控制下，按照独立、并行、串行以及组合的形式控制所述数据处理引擎的工作，所述数据处理引擎还包括算法输入模块，所述算法输入模块用于输入并存储用户客制算法引擎；
当所述数据存算一体固态硬盘模组接收到数据请求时，通过摘要算法对数据请求进行摘要提取，生成基于数据请求的内容的请求摘要；
所述计算子模块根据所述数据处理引擎与所述请求摘要之间映射关系的匹配度将若干个与数据请求匹配的数据处理引擎作为备选并排序，并通过运算CPU选取备选数据处理引擎中的一个进行独立运算处理、多个并列处理或多个组合协作处理。
2.根据权利要求1所述的一种数据存算一体固态硬盘模组，其特征在于：所述运算模块与存储模块集成设置为存储-运算一体式存储设备和/或所述运算模块与存储模块分离且独立配置。
3.一种数据存储系统，其特征在于：所述系统包括用于存储数据的存储模块以及用于实现数据运算的数据存算一体存储运算模块，所述数据存算一体存储运算模块与存储模块信号连接，所述数据存算一体存储运算模块还同时与主机CPU信号连接；
所述运算模块至少包括运算CPU子模块、IO接口子模块、缓存控制子模块、存算控制子模块、缓存子模块；
所述运算CPU子模块与IO接口子模块、缓存控制子模块以及存算控制子模块均信号连接，用于实现所述IO接口子模块、缓存控制子模块以及存算控制子模块的资源调度、指令执行以及数据处理；
所述运算CPU子模块，还用于在接收主机CPU发送的数据无效信息后，控制缓存控制子模块将与数据请求相关但未处理的缓存数据发送至主机内存；
所述IO接口子模块与主机CPU信号连接，用于控制数据的输入、输出及分配；
所述缓存控制子模块与所述缓存子模块信号连接，用于控制数据是否存入缓存；
所述存算控制子模块与存储模块信号连接，用于对存储模块的访问进行调度和控制；
所述缓存子模块与缓存控制子模块连接，用于临时存储待处理的数据；
所述运算模块还包括计算子模块，所述计算子模块与存算控制子模块信号连接，用于存储以及提供预设的数据处理引擎，所述数据处理引擎包括FPGA算法引擎、GPU算法引擎、TPU算法引擎、DPU算法引擎、NPU算法引擎以及BPU算法引擎中的一种或多种；所述存算控制子模块还用于控制计算子模块中数据处理引擎的应用方式，所述计算子模块还用于在所述存算控制子模块的控制下，按照独立、并行、串行以及组合的形式控制所述数据处理引擎的工作，所述数据处理引擎还包括算法输入模块，所述算法输入模块用于输入并存储用户客制算法引擎；
当所述数据存算一体固态硬盘模组接收到数据请求时，通过摘要算法对数据请求进行摘要提取，生成基于数据请求的内容的请求摘要；
所述计算子模块根据所述数据处理引擎与所述请求摘要之间映射关系的匹配度将若干个与数据请求匹配的数据处理引擎作为备选并排序，并通过运算CPU选取备选数据处理引擎中的一个进行独立运算处理、多个并列处理或多个组合协作处理。
4.根据权利要求3所述的一种数据存储系统，其特征在于：所述数据存储系统包括至少两个数据存算一体存储运算模块，每个所述数据存算一体存储运算模块均与一个一一对应的存储模块信号连接，至少两个数据存算一体存储运算模块自主机CPU起自上而下逐级设置，所述数据存算一体存储运算模块用于当接收到主机CPU或上级数据存算一体存储运算模块发送的数据请求时，基于所述数据请求在对应的存储模块中检索对应的响应数据，若存在或接收到所述响应数据，则传输至所述主机CPU或上级数据存算一体存储运算模块；若无所述响应数据，则将所述数据请求传递至下级数据存算一体存储运算模块。
5.一种数据存储运算方法，其特征在于：所述方法是基于如权利要求3或4所述的一种数据存储系统实现的，包括以下步骤：
所述数据存算一体固态硬盘模组获取数据请求；
所述数据存算一体固态硬盘模组基于所述数据请求，在对应的存储模块中获取对应的响应数据；
所述数据存算一体固态硬盘模组获取所述响应数据后，将所述响应数据发送至数据请求端。
6.根据权利要求5所述的一种数据存储运算方法，其特征在于：所述基于所述数据请求在对应的存储模块中获取对应的响应数据，所述数据存算一体固态硬盘模组获取所述响应数据后，将所述响应数据发送至数据请求端包括：
所述数据存算一体固态硬盘模组基于所述数据请求在对应的存储模块中获取对应的响应数据；
若所述数据存算一体固态硬盘模组在对应存储模块中没有获取到与数据请求匹配的响应数据，则将所述数据请求传递至下级数据存算一体固态硬盘模组；
若所述数据存算一体固态硬盘模组接收到或在对应的存储模块中获取到响应数据，则将所述响应数据传输至数据请求端。
7.一种智能终端，其特征在于，所述智能终端包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求5或6所述的一种数据存储运算方法。
8.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求5或6所述的一种数据存储运算方法。
CN202210289355.1A 2022-03-23 2022-03-23 一种数据存算一体固态硬盘模组及系统 Active CN114647380B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210289355.1A CN114647380B (zh) 2022-03-23 2022-03-23 一种数据存算一体固态硬盘模组及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210289355.1A CN114647380B (zh) 2022-03-23 2022-03-23 一种数据存算一体固态硬盘模组及系统

Publications (2)

Publication Number Publication Date
CN114647380A CN114647380A (zh) 2022-06-21
CN114647380B true CN114647380B (zh) 2023-11-07

Family

ID=81994819

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210289355.1A Active CN114647380B (zh) 2022-03-23 2022-03-23 一种数据存算一体固态硬盘模组及系统

Country Status (1)

Country Link
CN (1) CN114647380B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105051708A (zh) * 2013-03-15 2015-11-11 美光科技公司 用于包含存储器节点的分布式存储器系统的设备及方法
CN112181293A (zh) * 2020-09-17 2021-01-05 深圳大普微电子科技有限公司 固态硬盘控制器、固态硬盘、存储系统及数据处理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105051708A (zh) * 2013-03-15 2015-11-11 美光科技公司 用于包含存储器节点的分布式存储器系统的设备及方法
CN112181293A (zh) * 2020-09-17 2021-01-05 深圳大普微电子科技有限公司 固态硬盘控制器、固态硬盘、存储系统及数据处理方法

Also Published As

Publication number Publication date
CN114647380A (zh) 2022-06-21

Similar Documents

Publication Publication Date Title
CN109165728B (zh) 一种卷积神经网络的基本计算单元及计算方法
CN111338695B (zh) 基于流水线技术的数据处理方法及相关产品
US11960421B2 (en) Operation accelerator and compression method
US20230128085A1 (en) Data aggregation processing apparatus and method, and storage medium
US20160124683A1 (en) In-memory data compression complementary to host data compression
CN104461710A (zh) 任务处理方法及装置
CN112685148A (zh) 海量终端的异步通信方法、装置、计算机设备和存储介质
CN116795647A (zh) 一种数据库异构资源管理与调度方法、装置、设备及介质
CN114647380B (zh) 一种数据存算一体固态硬盘模组及系统
CN110609924A (zh) 基于图数据的全量关系计算方法、装置、设备及存储介质
CN110765082B (zh) Hadoop文件处理方法、装置、存储介质及服务器
CN114860460B (zh) 一种数据库加速的方法、装置、计算机设备
CN115759213A (zh) 一种用于一维卷积的卷积神经网络协处理器
US20210141723A1 (en) Memory usage in managed runtime applications
CN112769688B (zh) 协议栈适配的方法、装置、电子设备及存储介质
CN209803775U (zh) 数据处理装置
CN112148453A (zh) 用于隐私计算的计算芯片及网络计算系统
CN111382850A (zh) 运算方法、装置及相关产品
CN111382853A (zh) 数据处理装置、方法、芯片及电子设备
CN117170879B (zh) 面向智能芯片的设备管理装置和方法
CN111381872A (zh) 运算方法、装置及相关产品
CN113419988B (zh) 异构多核数据的传输方法、装置、设备及存储介质
Zhang et al. An Acceleration Method of Data Table Parsing and Database Sorting Based on Mask Calculation
CN112396186B (zh) 执行方法、装置及相关产品
EP0744691A2 (en) Method and apparatus for improving utilization of limited resources in a portable electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant