CN112463655B - 一种高速数据采集存储系统的数据存储及读取方法 - Google Patents

一种高速数据采集存储系统的数据存储及读取方法 Download PDF

Info

Publication number
CN112463655B
CN112463655B CN202011273695.2A CN202011273695A CN112463655B CN 112463655 B CN112463655 B CN 112463655B CN 202011273695 A CN202011273695 A CN 202011273695A CN 112463655 B CN112463655 B CN 112463655B
Authority
CN
China
Prior art keywords
srio
ddr
data
resource
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011273695.2A
Other languages
English (en)
Other versions
CN112463655A (zh
Inventor
陈亮
柴红刚
范俊
夏陈军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Huidi Sen Information Technology Co ltd
Original Assignee
Wuhan Huidi Sen Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Huidi Sen Information Technology Co ltd filed Critical Wuhan Huidi Sen Information Technology Co ltd
Priority to CN202011273695.2A priority Critical patent/CN112463655B/zh
Publication of CN112463655A publication Critical patent/CN112463655A/zh
Application granted granted Critical
Publication of CN112463655B publication Critical patent/CN112463655B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
    • G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
    • G06F12/0873—Mapping of cache memory to specific storage devices or parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明涉及一种高速数据采集存储系统的数据存储及读取方法，包括：通过SRIO_ADDR栏位给需要存储的数据分配一段连续非重叠的SRIO地址空间及空间范围；通过DDR_ADDRH栏位直接映射指定DDR缓存资源在系统中的高位地址；对DDR缓存资源的高位地址和SRIO地址资源进行一一映射；将总的DDR缓存资源分解为各个小块，将空闲有效的DDR缓存资源块的低位基地址及空间范围以资源映射描述符的方式写入FIFO缓存中；SRIO接口实时采集需存储的数据；从FIFO缓存中读取有效的资源映射描述符，根据该有效的资源映射描述符，将SRIO接口采集的数据根据该资源映射描述符搬运到对应的DDR缓存资源块中；充分利用SRIO高速串行接口的传输效率，以满足数据采集系统的存储带宽需求。

Description

一种高速数据采集存储系统的数据存储及读取方法
技术领域
本发明涉及数据采集领域，尤其涉及一种高速数据采集存储系统的数据存储及读取方法。
背景技术
随着雷达原始数据、高分辨率视频数据等应用场景下数据带宽的提升，对数据采集系统的存储带宽提出越来越高的要求，达到1GB/s带宽或更高。数据采集系统之间的数据交互多采用SRIO(Serial Rapid IO，高速串行输入/输出)接口来实现。SRIO高速串行接口是一种新型高速互联技术，可以实现从1Gbps到60Gbps的数据传输性能水平，支持多通道传输，于2004年被国际标准组织(ISO)和国际电工协会(IEC)批准为ISO/IEC DIS 18273标准。SRIO传输数据的方式有Direct I/O和Message Passing两种方式。在高速数据采集存储系统中一般采用Direct I/O的方式，支持34bit的SRIO地址空间。将采集数据通过SRIO接口直接写入数据采集存储系统的接口缓冲区(DDR3缓存)，减少数据拷贝次数提升性能。数据采集系统的DDR3缓存，一般支持32-40bit的DDR地址空间。
对于SATA(串行高级技术附件，一种基于行业标准的串行硬件驱动器接口)SSD(固态硬盘)等标准存储设备，数据以Sector(512Byte)为最小单位进行块读写操作。数据的写入或者读取都存在一定的操作时间，完成时间不定。通过SRIO高速串行接口将接收到的采集数据写入SATA SSD等存储设备，由于SSD的操作等待时间，可能会导致接口缓冲区的数据被冲刷的问题，或者由于同步等待导致带宽下降无法满足数据采集系统要求的问题。
发明内容
本发明针对现有技术中存在的技术问题，提供一种高速数据采集存储系统的数据存储读取方法，解决现有技术中问题。
本发明解决上述技术问题的技术方案如下：一种高速数据采集存储系统的数据存储读取方法，所述系统包括：计算设备和包含SRIO接口的存储设备，所述计算设备通过所述SRIO接口向所述存储设备存储数据；所述SRIO接口的FIFO缓存中存储有资源映射描述符，所述资源映射描述符包括用于表示SRIO地址空间的SRIO_ADDR栏位以及表示DDR缓存资源的高位基地址和地位基地址的DDR_ADDRH栏位和DDR_ADDRL栏位；
所述数据存储方法包括：
步骤1，通过所述SRIO_ADDR栏位给需要存储的数据分配一段连续非重叠的SRIO地址空间及空间范围；通过所述DDR_ADDRH栏位直接映射指定DDR缓存资源在所述系统中的高位地址；对所述DDR缓存资源的高位地址和SRIO地址资源进行一一映射；
步骤2，将总的所述DDR缓存资源分解为各个小块，将空闲有效的DDR缓存资源块的低位基地址及空间范围以所述资源映射描述符的方式写入所述FIFO缓存中；
步骤3，所述SRIO接口实时采集需存储的数据；
步骤4，从所述FIFO缓存中读取有效的所述资源映射描述符，根据该有效的所述资源映射描述符，将所述SRIO接口采集的数据根据该资源映射描述符搬运到对应的所述DDR缓存资源块中；
步骤5，对使用完成的所述DDR缓存资源块对应的资源映射描述符进行释放。
一种高速数据采集存储系统的数据读取方法，所述数据读取方法基于上述的数据存储方法之后，所述数据读取方法包括：
步骤6，从所述Complete Queue模块读取已经完成的所述资源映射描述符；
步骤7，从SRIO接口封包中提取SIRO地址与该已经完成的所述资源映射描述符进行比对，确定对应的资源映射描述符，根据该对应的资源映射描述符将对应的所述DDR缓存资源块中存储的数据搬运到所述SRIO接口，通过所述SRIO接口发送给所述计算板。
本发明的有益效果是：DDR资源的高地址和SRIO地址资源在一开始进行匹配，这一块资源是分配给每一个SRIO设备的最大的资源集合；在传输数据的时候，对这个最大的资源集合内部以切割的方式进行传输，即一个小块一个小块的资源进行传输，同时将使用完成将相应的DDR缓存资源块对应的资源映射描述符释放供下次再使用，解决了基于SRIO接口的数据采集存储系统，由于存储设备的特性出现接口缓冲区数据冲刷，或者等待数据存储操作等问题，导致采集数据丢失或者存储带宽下降等问题。
在上述技术方案的基础上，本发明还可以做如下改进。
进一步，所述步骤2中将空闲有效的DDR缓存资源块的低位基地址及空间范围以所述资源映射描述符的方式写入所述FIFO缓存中的ADDR Queue模块中，将所述资源映射描述符写入所述ADDR Queue模块之前包括：
读取所述ADDR Queue模块的空满状态；
如果所述ADDR Queue模块为非满状态，则往所述ADDR Queue模块写入可使用的空闲有效的DDR缓存资源低位基地址及空间范围；
如果所述ADDR Queue模块为满状态或者系统没有空闲有效的DDR缓存资源块，则停止往所述ADDR Queue模块进行写入操作。
进一步，所述步骤2还包括：
实时监测DDR缓存资源块的使用情况，当系统释放掉任一所述DDR缓存资源块时，将该空闲有效的所述DDR缓存资源块的低位基地址及空间范围，写入所述ADDR Queue模块中。
进一步，所述步骤4中将所述SRIO接口采集的数据根据该资源映射描述符搬运到对应的所述DDR缓存资源块中后，将该已经完成的资源映射描述符放入所述FIFO缓存的Complete Queue模块中。
进一步，所述资源映射描述符还包括：Res No栏位、DDR_SIZE栏位和SRIO_SIZE栏位；
所述Res No栏位表示对应的所述资源映射描述符的ID号，所述DDR_SIZE栏位表示对应的有效的DDR缓存资源的空间大小；SRIO_SIZE栏位表示对应的SRIO区间的地址范围大小。
进一步，所述步骤6中通过读取所述Complete Queue模块的空满状态或者以中断的方式，读取所述FIFO缓存中已经完成的所述缓存资源映射描述符。
进一步，所述资源映射描述符还包括表示数据的读写方式为写入还是读取的TYPE栏位，所述TYPE栏位为写入操作时，将相应的所述接口缓冲区中的数据读取写入到所述存储设备中；所述TYPE栏位为写入操作时，将相应的所述接口缓冲区中的数据写入到所述计算设备中。
采用上述进一步方案的有益效果是：充分利用SRIO封包的包头信息，无需传递额外的信息字段，硬件直接完成SRIO地址空间到DDR地址空间的映射，直接写入DDR缓存，避免数据的二次拷贝，提升有效采集数据的传输效率；对有效的DDR缓存资源采用异步FIFO的交互方式，解决了ATMU模块和固件资源互斥访问问题，将同步变为异步的方式，解决了SRIO接口和固件处理性能不匹配的问题，提高了SRIO接口的传输效率。
附图说明
图1为本发明实施例提供的一种高速数据采集存储系统的数据存储读取方法的流程图；
图2为本发明实施例提供的一种资源映射描述符的示意图；
图3为本发明实施例提供的一种数据存储读取装置的结构示意图；
图4为本发明实施例提供的ATMU模块的FIFO缓存中的item序列的实施例的示意图；
图5为本发明实施例提供的用户往SRIO接口发送的正确packet序列的示意图；
图6为本发明实施例提供的用户往SRIO接口发送的错误packet序列的示意图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。
本发明提供的一种高速数据采集存储系统的数据存储读取方法，该数据采集存储系统包括：计算设备和包含SRIO接口的存储设备，计算设备通过SRIO接口向存储设备存储数据；SRIO接口的FIFO缓存中存储有资源映射描述符，资源映射描述符包括用于表示SRIO地址空间的SRIO_ADDR栏位以及表示DDR缓存资源的高位基地址和地位基地址的DDR_ADDRH栏位和DDR_ADDRL栏位；如图1所示为本发明实施例提供的一种高速数据采集存储系统的数据存储读取方法的流程图，由图1可知，该数据存储方法包括：
步骤1，通过SRIO_ADDR栏位给需要存储的数据分配一段连续非重叠的SRIO地址空间及空间范围；通过DDR_ADDRH栏位直接映射指定DDR缓存资源在系统中的高位地址；对DDR缓存资源的高位地址和SRIO地址资源进行一一映射，为每个申请存储资源的SRIO设备分配最大的资源集合。
步骤2，将总的DDR缓存资源分解为各个小块，将空闲有效的DDR缓存资源块的低位基地址及空间范围以资源映射描述符的方式写入FIFO缓存中；
在传输数据阶段，允许对分配最大的资源集合进行乱序调度，即将总的DDR缓存资源根据其使用的情况分解为一小块一小块的DDR缓存资源。
步骤3，SRIO接口实时采集需存储的数据；
步骤4，从FIFO缓存中读取有效的资源映射描述符，根据该有效的资源映射描述符，将SRIO接口采集的数据根据该资源映射描述符搬运到对应的DDR缓存资源块中；
步骤5，对使用完成的DDR缓存资源块对应的资源映射描述符进行释放。
重复步骤3-5至至所有需存储的采集数据都传输完成后结束。
本发明提供的一种速数据采集存储系统的数据存储方法及读取方法，设置资源映射符，DDR资源的高地址和SRIO地址资源在一开始进行匹配，这一块资源是分配给每一个SRIO设备的最大的资源集合；在传输数据的时候，对这个最大的资源集合内部以切割的方式进行传输，即一个小块一个小块的资源进行传输，同时将使用完成将相应的DDR缓存资源块对应的资源映射描述符释放供下次再使用，解决了基于SRIO接口的数据采集存储系统，由于存储设备的特性出现接口缓冲区数据冲刷，或者等待数据存储操作等问题，导致采集数据丢失或者存储带宽下降等问题。
充分利用SRIO封包的包头信息，无需传递额外的信息字段，硬件直接完成SRIO地址空间到DDR地址空间的映射，直接写入DDR缓存，避免数据的二次拷贝，提升有效采集数据的传输效率；对有效的DDR缓存资源采用异步FIFO的交互方式，解决了ATMU模块和固件资源互斥访问问题，将同步变为异步的方式，解决了SRIO接口和固件处理性能不匹配的问题，提高了SRIO接口的传输效率；解决基于SRIO接口的数据采集存储系统，由于存储设备的特性出现接口缓冲区数据冲刷，或者等待数据存储操作等问题，导致采集数据丢失或者存储带宽下降等问题，充分利用SRIO高速串行接口的传输效率，以满足数据采集系统的存储带宽需求。
实施例1
本发明提供的实施例1为本发明提供的一种高速数据采集存储系统的数据存储方法的实施例，该方法的实施例包括：
步骤1，通过SRIO_ADDR栏位给需要存储的数据分配一段连续非重叠的SRIO地址空间及空间范围；通过DDR_ADDRH栏位直接映射指定DDR缓存资源在系统中的高位地址；对DDR缓存资源的高位地址和SRIO地址资源进行一一映射。
步骤2，将总的DDR缓存资源分解为各个小块，将空闲有效的DDR缓存资源块的低位基地址及空间范围以资源映射描述符的方式写入FIFO缓存中；
具体的，步骤2中将空闲有效的DDR缓存资源块的低位基地址及空间范围对应的资源映射描述符即为有效的资源映射描述符。
优选的，步骤2中将空闲有效的DDR缓存资源块的低位基地址及空间范围以资源映射描述符的方式写入FIFO缓存中的ADDR Queue模块中，将资源映射描述符写入ADDR Queue模块之前包括：
读取ADDR Queue模块的空满状态；
如果ADDR Queue模块为非满状态，则往ADDR Queue模块写入可使用的空闲有效的DDR缓存资源低位基地址及空间范围；
比如设置SRIO的空间为16MB，则可将该空间内的DDR3缓存资源以1MB或者2MB等任意颗粒进行切分，写入到ADDR Queue模块中。固件只需要保证送入的资源映射描述符对应的DDR地址空间为连续的，至于映射到DDR缓存资源空间中的具体哪个位置没有约束，从而实现了随机映射的功能。
如果ADDR Queue模块为满状态或者系统没有空闲有效的DDR缓存资源块，则停止往ADDR Queue模块进行写入操作。
进一步的，步骤2还包括：
实时监测DDR缓存资源块的使用情况，当系统释放掉任一DDR缓存资源块时，将该空闲有效的DDR缓存资源块的低位基地址及空间范围，写入ADDR Queue模块中，实现高效的数据调度功能。
每一个切割的小的资源映射描述符，存储设备或者说存储设备上面跑的固件会实时监测资源的使用情况，当释放掉的资源，就会重新分配给对应的模块，即DDR资源的低位地址，这个是通过FIFO缓存队列的方式来实现的。
步骤3，SRIO接口实时采集需存储的数据；
步骤4，从FIFO缓存中读取有效的资源映射描述符，根据该有效的资源映射描述符，将SRIO接口采集的数据根据该资源映射描述符搬运到对应的DDR缓存资源块中。
优选的，步骤4中将SRIO接口采集的数据根据该资源映射描述符搬运到对应的DDR缓存资源块中后，将该已经完成的资源映射描述符放入FIFO缓存的Complete Queue模块中。
步骤5，对使用完成的DDR缓存资源块对应的资源映射描述符进行释放。
优选的，如图2所示为本发明实施例提供的一种资源映射描述符的示意图，由图2可知，该资源映射描述符还包括：Res No栏位、DDR_SIZE栏位和SRIO_SIZE栏位；
Res No栏位表示对应的资源映射描述符的ID号，DDR_SIZE栏位表示对应的有效的DDR缓存资源的空间大小；SRIO_SIZE栏位表示对应的SRIO区间的地址范围大小。
DDR_ADDRH栏位和SRIO_SIZE栏位以寄存器的形式实现，DDR_ADDRL和DDR_SIZE栏位通过FIFO缓存来实现。
对于资源映射描述符，SRIO支持的空间大小为4KB-64MB，即最小的资源空间大小为4KB，SRIO_ADDR的34位地址只需要[33:12]高位为基地址。
实施例2
本发明提供的实施例2为本发明提供的一种高速数据采集存储系统的数据读取方法的实施例，该数据读取方法基于本发明提供的一种高速数据采集存储系统的数据存储方法的实施例，在上述数据存储方法之后还包括：
步骤6，从Complete Queue模块读取已经完成的资源映射描述符；
具体的，步骤6中通过读取Complete Queue模块的空满状态或者以中断的方式，读取FIFO缓存中已经完成的缓存资源映射描述符。
步骤7，从SRIO接口封包中提取SIRO地址与该已经完成的资源映射描述符进行比对，确定对应的资源映射描述符，根据该对应的资源映射描述符将对应的DDR缓存资源块中存储的数据搬运到SRIO接口，通过SRIO接口发送给计算板。
进一步的，由图2可知，资源映射描述符还包括表示数据的读写方式为写入还是读取的TYPE栏位，TYPE栏位为写入操作时，将相应的接口缓冲区中的数据读取写入到存储设备中；TYPE栏位为写入操作时，将相应的接口缓冲区中的数据写入到计算设备中。
实施例3
本发明提供的实施例3为本发明提供的一种高速数据采集存储系统的数据存储读取方法的具体应用实施例，如图3所示为本发明实施例提供的一种数据存储读取装置的结构示意图，由图3可知，数据存储读取的装置由ATMU模块、ADDR Queue模块、Complete Queue模块以及固件构成。
ATMU模块主要完成SRIO接口地址空间到内部DDR地址空间的转化功能，实现数据地址空间的直接映射。
固件模块主要运行在处理器上面的软件代码，实现对DDR3外存存储资源的管理调度，以及通过AXI Lite配置总线对SRIO接口进行配置。
ADDR Queue模块为一组FIFO缓存，用来存放固件生成的有效的DDR缓存资源映射描述符。
Complete Queue模块为一组FIFO缓存，用于ATMU模块已经使用的DDR缓存资源映射描述符。
SRIO接口两侧的计算设备和存储设备，计算设备是发起方，将采集的数据通过SRIO发送到存储设备进行存储，或者通过SRIO从存储设备调取采集的数据进行分析。存储设备是接受方，接收需要存储的数据写入SSD，或者从SSD将数据读取传输出去。SRIO配置为Direct I/O模式，这样子存储设备收发数据的时候，不会影响存储设备上处理器的正常工作。
计算设备通过SRIO可以访问存储设备所有外存。所以每次收发数据，直接将数据存到存储设备的外存中，或者从存储设备的外存中直接读取数据。这部分外存可以称为DDR3缓存。该缓存全部用来存放采集的大批量数据，采用资源映射描述符，缓冲区可以根据需求进行灵活的资源调度配置，进行任意的资源大小划分。资源映射描述符中，Res No对应为资源映射描述符的ID，位宽为10bit，FIFO的深度为1024，允许一次切割产生1024条有效的DDR3缓存资源。SRIO_SIZE，位宽为5bit，支持4KB-64MB的空间大小，计算方法为2^(SRIO_SIZE+1)B,5’b01011对应为4KB的地址空间。SRIO_ADDR为20bit，对应34位寻址空间的[33:12]，存储设备内部采用Xilinx的MPSOC FPGA，处理器为ARM处理器，支持40bit的寻址空间。DDR_ADDRH为40bit地址空间的高8位，即映射的DDR3缓存空间的高位基地址，该地址所有的资源映射描述符都是一样的。DDR_ADDRL为映射的DDR3缓存空间的低位基地址，为40bit地址空间的中间20位，DDR_SIZE，位宽为5bit，支持4KB-64MB的空间大小，计算方法为2^(SRIO_SIZE+1)B,5’b01011对应为4KB的地址空间。
对于资源映射描述符中内存资源的使用情况，例如FIFO中一个资源映射描述符是1MB，而SRIO的最大命令长度只有256B，则ATMU模块会计算当前资源是否使用完成，并进行地址自增操作。用户对内存读写都是按顺序循环操作。ATMU模块会自动根据FIFO缓存中的资源映射描述符，将其拆分为多笔的SRIO Direct I/O封包进行传输，其映射关系如图4-6所示。如图4所示为本发明实施例提供的ATMU模块的FIFO缓存中的item序列的实施例的示意图，如图5所示为本发明实施例提供的用户往SRIO接口发送的正确packet序列的示意图，如图6所示为本发明实施例提供的用户往SRIO接口发送的错误packet序列的示意图。
以上仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种高速数据采集存储系统的数据存储方法，所述系统包括：计算设备和包含SRIO接口的存储设备，所述计算设备通过所述SRIO接口向所述存储设备存储数据；其特征在于，所述SRIO接口的FIFO缓存中存储有资源映射描述符，所述资源映射描述符包括用于表示SRIO地址空间的SRIO_ADDR栏位以及表示DDR缓存资源的高位基地址和低位基地址的DDR_ADDRH栏位和DDR_ADDRL栏位；
所述数据存储方法包括：
步骤1，通过所述SRIO_ADDR栏位给需要存储的数据分配一段连续非重叠的SRIO地址空间及空间范围；通过所述DDR_ADDRH栏位直接映射指定DDR缓存资源在所述系统中的高位地址；对所述DDR缓存资源的高位地址和SRIO地址资源进行一一映射；
步骤2，将总的所述DDR缓存资源分解为各个小块，将空闲有效的DDR缓存资源块的低位基地址及空间范围以所述资源映射描述符的方式写入所述FIFO缓存中；
步骤3，所述SRIO接口实时采集需存储的数据；
步骤4，从所述FIFO缓存中读取有效的所述资源映射描述符，根据该有效的所述资源映射描述符，将所述SRIO接口采集的数据根据该资源映射描述符搬运到对应的所述DDR缓存资源块中；
步骤5，对使用完成的所述DDR缓存资源块对应的资源映射描述符进行释放。
2.根据权利要求1所述的方法，其特征在于，所述步骤2中将空闲有效的DDR缓存资源块的低位基地址及空间范围以所述资源映射描述符的方式写入所述FIFO缓存中的ADDRQueue模块中，将所述资源映射描述符写入所述ADDR Queue模块之前包括：
读取所述ADDR Queue模块的空满状态；
如果所述ADDR Queue模块为非满状态，则往所述ADDR Queue模块写入可使用的空闲有效的DDR缓存资源低位基地址及空间范围；
如果所述ADDR Queue模块为满状态或者系统没有空闲有效的DDR缓存资源块，则停止往所述ADDR Queue模块进行写入操作。
3.根据权利要求2所述的方法，其特征在于，所述步骤2还包括：
实时监测DDR缓存资源块的使用情况，当系统释放掉任一所述DDR缓存资源块时，将该空闲有效的所述DDR缓存资源块的低位基地址及空间范围，写入所述ADDR Queue模块中。
4.根据权利要求1所述的方法，其特征在于，所述步骤4中将所述SRIO接口采集的数据根据该资源映射描述符搬运到对应的所述DDR缓存资源块中后，将已经完成的资源映射描述符放入所述FIFO缓存的Complete Queue模块中。
5.根据权利要求1所述的方法，其特征在于，所述资源映射描述符还包括：Res No栏位、DDR_SIZE栏位和SRIO_SIZE栏位；
所述Res No栏位表示对应的所述资源映射描述符的ID号，所述DDR_SIZE栏位表示对应的有效的DDR缓存资源的空间大小；SRIO_SIZE栏位表示对应的SRIO区间的地址范围大小。
6.一种高速数据采集存储系统的数据读取方法，所述数据读取方法基于权利要求4所述的数据存储方法之后，其特征在于，所述数据读取方法包括：
步骤6，从Complete Queue模块读取已经完成的所述资源映射描述符；
步骤7，从SRIO接口封包中提取SIRO地址与该已经完成的所述资源映射描述符进行比对，确定对应的资源映射描述符，根据该对应的资源映射描述符将对应的所述DDR缓存资源块中存储的数据搬运到所述SRIO接口，通过所述SRIO接口发送给计算板。
7.根据权利要求6所述的方法，其特征在于，所述步骤6中通过读取所述CompleteQueue模块的空满状态或者以中断的方式，读取所述FIFO缓存中已经完成的所述资源映射描述符。
8.根据权利要求6所述的方法，其特征在于，所述资源映射描述符还包括表示数据的读写方式为写入还是读取的TYPE栏位，所述TYPE栏位为写入操作时，将相应的接口缓冲区中的数据读取写入到所述存储设备中；所述TYPE栏位为写入操作时，将相应的所述接口缓冲区中的数据写入到所述计算设备中。
CN202011273695.2A 2020-11-14 2020-11-14 一种高速数据采集存储系统的数据存储及读取方法 Active CN112463655B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011273695.2A CN112463655B (zh) 2020-11-14 2020-11-14 一种高速数据采集存储系统的数据存储及读取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011273695.2A CN112463655B (zh) 2020-11-14 2020-11-14 一种高速数据采集存储系统的数据存储及读取方法

Publications (2)

Publication Number Publication Date
CN112463655A CN112463655A (zh) 2021-03-09
CN112463655B true CN112463655B (zh) 2022-06-14

Family

ID=74837864

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011273695.2A Active CN112463655B (zh) 2020-11-14 2020-11-14 一种高速数据采集存储系统的数据存储及读取方法

Country Status (1)

Country Link
CN (1) CN112463655B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114968169B (zh) * 2022-05-17 2023-10-10 赵浩然 一种fpga控制的ddr映射多个ddr_fifo实现系统及方法
CN115658559B (zh) * 2022-12-22 2023-04-07 摩尔线程智能科技(北京)有限责任公司 内存地址映射方法及装置、芯片

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1828550A (zh) * 2005-02-28 2006-09-06 中国科学院计算技术研究所 一种内存访问信息实时捕获装置及访存信息捕获方法
CN101382927A (zh) * 2008-09-25 2009-03-11 杭州爱威芯科技有限公司 集成在芯片内的高速串行外围接口电路
US7979572B1 (en) * 2007-06-28 2011-07-12 Emc Corporation Data storage system having operation code in address portion for atomic operations
CN103346977A (zh) * 2013-06-28 2013-10-09 中国航天科技集团公司第五研究院第五一三研究所 一种数据资源的动态分配方法
CN103885919A (zh) * 2014-03-20 2014-06-25 北京航空航天大学 一种多dsp和fpga并行处理系统及实现方法
CN105830040A (zh) * 2013-12-20 2016-08-03 拉姆伯斯公司 用于访问存储器的存储器装置
CN108121672A (zh) * 2017-08-08 2018-06-05 鸿秦（北京）科技有限公司 一种基于NandFlash存储器多通道的存储阵列控制方法与装置
CN109271335A (zh) * 2018-07-24 2019-01-25 上海威固信息技术股份有限公司 一种多通道数据源ddr缓存的fpga实现方法
CN109905321A (zh) * 2019-02-13 2019-06-18 西安微电子技术研究所 一种用于自定义高速接口与以太网交互的路由控制系统
CN110086865A (zh) * 2019-04-23 2019-08-02 成都光航信科技有限公司 一种支持多个fc-ae-1553节点并行工作的节点卡及其实现方法
CN110912841A (zh) * 2019-11-19 2020-03-24 天津津航计算技术研究所 面向128bit位宽的SRIO协议控制字符与数据包分离系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9235346B2 (en) * 2012-05-04 2016-01-12 Avago Technologies General Ip (Singapore) Pte. Ltd. Dynamic map pre-fetching for improved sequential reads of a solid-state media
US10628340B2 (en) * 2018-01-18 2020-04-21 Nxp Usa, Inc. Method for reordering out of order responses from decomposed requests in bridge IP

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1828550A (zh) * 2005-02-28 2006-09-06 中国科学院计算技术研究所 一种内存访问信息实时捕获装置及访存信息捕获方法
US7979572B1 (en) * 2007-06-28 2011-07-12 Emc Corporation Data storage system having operation code in address portion for atomic operations
CN101382927A (zh) * 2008-09-25 2009-03-11 杭州爱威芯科技有限公司 集成在芯片内的高速串行外围接口电路
CN103346977A (zh) * 2013-06-28 2013-10-09 中国航天科技集团公司第五研究院第五一三研究所 一种数据资源的动态分配方法
CN105830040A (zh) * 2013-12-20 2016-08-03 拉姆伯斯公司 用于访问存储器的存储器装置
CN103885919A (zh) * 2014-03-20 2014-06-25 北京航空航天大学 一种多dsp和fpga并行处理系统及实现方法
CN108121672A (zh) * 2017-08-08 2018-06-05 鸿秦（北京）科技有限公司 一种基于NandFlash存储器多通道的存储阵列控制方法与装置
CN109271335A (zh) * 2018-07-24 2019-01-25 上海威固信息技术股份有限公司 一种多通道数据源ddr缓存的fpga实现方法
CN109905321A (zh) * 2019-02-13 2019-06-18 西安微电子技术研究所 一种用于自定义高速接口与以太网交互的路由控制系统
CN110086865A (zh) * 2019-04-23 2019-08-02 成都光航信科技有限公司 一种支持多个fc-ae-1553节点并行工作的节点卡及其实现方法
CN110912841A (zh) * 2019-11-19 2020-03-24 天津津航计算技术研究所 面向128bit位宽的SRIO协议控制字符与数据包分离系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于FPGA的DDR3 SDRAM高速图像数据采集方法;隋旭阳等;《兵器装备工程学报》;20180525;全文 *

Also Published As

Publication number Publication date
CN112463655A (zh) 2021-03-09

Similar Documents

Publication Publication Date Title
CN112463655B (zh) 一种高速数据采集存储系统的数据存储及读取方法
US20140068134A1 (en) Data transmission apparatus, system, and method
CN108153482B (zh) Io命令处理方法与介质接口控制器
US9317312B2 (en) Computer and memory management method
TW201303594A (zh) 快閃記憶體介質控制器及裝置
EP0797141A1 (en) Computer system
CN107066202B (zh) 具有多个固态盘的存储设备
CN113535633A (zh) 一种片上缓存装置和读写方法
US20080222500A1 (en) Data relay apparatus, data relay method and data relay integrated circuit
CN108153582B (zh) Io命令处理方法与介质接口控制器
US9229891B2 (en) Determining a direct memory access data transfer mode
CN111181874B (zh) 一种报文处理方法、装置及存储介质
CN109857553B (zh) 内存管理方法及装置
CN109375868B (zh) 一种数据存储方法、调度装置、系统、设备及存储介质
CN108877862B (zh) 页条带的数据组织以及向页条带写入数据的方法与装置
CN113687977A (zh) 基于raid控制器以实现计算性能提升的数据处理装置
CN106302061A (zh) 一种基于FlexRay总线的通信方法、装置及系统
CN113687978A (zh) 用于存储阵列控制器的数据处理方法
CN110399323B (zh) 一种基于srio的高速信息通道
JP5500272B2 (ja) 中継装置、中継履歴記録方法、及びデータ処理装置
CN112732176B (zh) 基于fpga的ssd访问方法及装置、存储系统及存储介质
CN114265791A (zh) 一种数据调度方法、芯片以及电子设备
CN110633225A (zh) 实体存储对照表产生装置及方法
CN101526887B (zh) 将数据写入硬盘的方法、装置及系统
WO2009033971A1 (en) System and method for splitting data and data control information

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant