CN107861846B - 测试访存有效带宽的装置及方法 - Google Patents

测试访存有效带宽的装置及方法 Download PDF

Info

Publication number
CN107861846B
CN107861846B CN201710978643.7A CN201710978643A CN107861846B CN 107861846 B CN107861846 B CN 107861846B CN 201710978643 A CN201710978643 A CN 201710978643A CN 107861846 B CN107861846 B CN 107861846B
Authority
CN
China
Prior art keywords
memory
read
access
pcie
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710978643.7A
Other languages
English (en)
Other versions
CN107861846A (zh
Inventor
纪奎
刘立
窦晓光
王晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dawning Information Industry Beijing Co Ltd
Dawning Information Industry Co Ltd
Original Assignee
Dawning Information Industry Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dawning Information Industry Beijing Co Ltd filed Critical Dawning Information Industry Beijing Co Ltd
Priority to CN201710978643.7A priority Critical patent/CN107861846B/zh
Publication of CN107861846A publication Critical patent/CN107861846A/zh
Application granted granted Critical
Publication of CN107861846B publication Critical patent/CN107861846B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2205—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested
    • G06F11/2221—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested to test input/output devices or peripheral units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2273—Test methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26—Functional testing
    • G06F11/263—Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)

Abstract

本发明提供一种测试访存有效带宽的装置及方法。所述装置包括PCIe控制器、内存写引擎模块、内存读引擎模块和内存控制器，PCIe控制器通过PCIe接口与主机连接；主机用于向所述装置下发控制指令和读取计数指令，启动和停止进而计算出访存有效带宽；PCIe控制器用于解析与主机的PCIe接口时序，提取主机发送过来的PCIe事务层报文，解析出其中的读写请求并译码发送到对应的模块；内存写引擎模块用于根据访问方式和访问空间发起内存写请求，组织与内存控制器接口信号数据格式和时序要求；内存读引擎模块用于根据访问方式和访问空间发起内存读请求，组织与内存控制器接口信号时序要求和等待内存控制器返回的数据信号；内存控制器用于为用户侧提供至少四套读写访问接口。

Description

测试访存有效带宽的装置及方法
技术领域
本发明涉及计算机技术领域，尤其涉及一种测试访存有效带宽的装置及方法。
背景技术
网络安全技术领域应用TOE(TCP Offload Engine，TCP卸载引擎)技术来加速网络响应和提高服务器的性能。目前TOE技术常见的应用领域包括报文TCP(TransmissionControl Protocol，传输控制协议)流管理和排序、ACL(Access Control List，访问控制列表)规则过滤和字符串匹配等，这些功能都有一个共同的特点，需要大容量的板载内存。
不同功能模块访问内存的方式不同，大概可以分为三类：第一、单burst(突发)随机地址只读访问，例如查询ACL规则表或者查询TCP连接管理哈希表等。第二、随机长度读写并发访问，例如流排序缓存原始报文等。第三、根据访问空间大小不同，访存地址的排列方式可以分为{row，bank，col}和{bank、row，col}两种排列方式。
网络加速系统设计时，片外缓存的有效带宽往往是系统性能的瓶颈。现有技术中预估访问片外缓存的有效带宽一般采取如下方法：理论带宽乘以内存访问效率经验值，而内存访问效率与访问方式和访问空间大小相关，所以凭经验值会带来较大误差，有可能会造成系统设计返工的可能。
发明内容
本发明提供的测试访存有效带宽的装置及方法，能够在线测试多种访问方式下的内存有效带宽，为系统设计的性能方面提供参考依据。
第一方面，本发明提供一种测试访存有效带宽的装置，包括PCIe控制器、内存写引擎模块、内存读引擎模块和内存控制器，所述PCIe控制器通过PCIe接口与主机连接；其中，
所述主机，用于通过PCIe接口向所述装置下发控制指令和读取计数指令，启动和停止进而计算出访存有效带宽；
所述PCIe控制器，用于解析所述装置与主机的PCIe接口时序，提取所述主机发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；
所述内存写引擎模块，用于根据访问方式和访问空间，发起内存写请求，组织与所述内存控制器接口信号数据格式和时序要求；
所述内存读引擎模块，用于根据访问方式和访问空间，发起内存读请求，组织与所述内存控制器接口信号时序要求和等待所述内存控制器返回的数据信号；
所述内存控制器，用于为用户侧提供与内存之间的至少四套读写访问接口，根据内存芯片的相关参数发起内存芯片侧的相关操作。
可选地，所述PCIe控制器，还用于在读寄存器操作下从所述内存读引擎模块将读回的数据打包发送到主机。
可选地，所述内存芯片的相关参数包括刷新周期间隔和读写切换延迟。
可选地，所述内存芯片侧的相关操作包括刷新和预充电。
第二方面，本发明提供一种测试访存有效带宽的方法，包括：
主机通过PCIe接口向PCIe控制器下发控制指令和读取计数指令；
PCIe控制器解析与主机的PCIe接口时序，提取主机发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；
内存写引擎模块根据访问方式和访问空间，发起内存写请求，组织与内存控制器接口信号数据格式和时序要求；
内存读引擎模块根据访问方式和访问空间，发起内存读请求，组织与内存控制器接口信号时序要求和等待内存控制器返回的数据信号；
内存控制器为用户侧提供与内存之间的至少四套读写访问接口，根据内存芯片的相关参数发起内存芯片侧的相关操作；
主机通过PCIe接口向PCIe控制器下发测试停止指令，计算访存有效带宽。
可选地，在随机地址只读模式下，所述计算访存有效带宽包括：
按照如下公式计算访存有效带宽：M/(T2-T1)，单位为pps；
其中，T1为所记录的收到第一次请求返回数据的时间，单位为秒，M为收到停止信号后所记录的发送请求的次数，T2为所记录的最后一次请求返回数据的时间，单位为秒。
可选地，在连续地址读写并发模式下，所述计算访存有效带宽包括：
按照如下公式计算写有效带宽：WrLen/(WrT2-WrT1)，单位为bps，按照按照如下公式计算读有效带宽：RdLen/(RdT2-RdT1)，单位为bps；
其中，WrLen为所记录的写请求大小总和，单位为比特，WrT1为所记录的第一次写请求时间，单位为秒，WrT2为所记录的最后一次写请求时间，单位为秒；RdLen为所记录的读请求大小总和，单位为比特，RdT1为所记录的第一次读请求数据返回时间，单位为秒，RdT2为所记录的最后一次读请求数据返回时间，单位为秒。
本发明实施例提供的测试访存有效带宽的装置及方法，能够在线测试多种访问方式下的内存有效带宽，为系统设计的性能方面提供参考依据，为硬件平台选型和系统架构设计提供参考依据，避免项目到测试阶段发现问题后，造成工期延误和成本损失。
附图说明
图1为本发明实施例提供的测试访存有效带宽的装置的结构示意图；
图2为本发明一实施例提供的测试访存有效带宽的方法的流程图；
图3为本发明另一实施例提供的测试访存有效带宽的方法的流程图；
图4为本发明再一实施例提供的测试访存有效带宽的方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供一种测试访存有效带宽的装置，如图1所示，所述测试访存有效带宽的装置1包括PCIe控制器11、内存写引擎模块12、内存读引擎模块13和内存控制器14，所述PCIe控制器11通过PCIe接口与主机3连接；其中，
所述主机3，用于通过PCIe接口向所述测试访存有效带宽的装置1下发控制指令和读取计数指令，启动和停止进而计算出有效带宽；
所述PCIe控制器11，用于解析所述测试访存有效带宽的装置1与主机3的PCIe接口时序，提取主机3发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；对于读寄存器操作，还需从各个模块将读回的数据打包发送到主机3；
内存写引擎模块12，用于根据访问方式和访问空间，发起内存写请求，组织与内存控制器14接口信号数据格式和时序要求；
内存读引擎模块13，用于根据访问方式和访问空间，发起内存读请求，组织与内存控制器14接口信号时序要求和等待内存控制器14返回的数据信号；
所述内存控制器14，用于为用户侧提供至少四套读写访问接口，根据内存芯片刷新周期间隔、读写切换延迟等参数，发起芯片侧的刷新、预充电等操作。
其中，大方框外的内存2是待访问的片外空间，可以是DDR2SDRAM、DDR3SDRAM、DDR4SDRAM或DDR2SRAM等，主机3是支持PCIe插槽的服务器或者个人PC等。
本发明实施例提供的测试访存有效带宽的装置，能够在线测试多种访问方式下的内存有效带宽，为系统设计的性能方面提供参考依据，为硬件平台选型和系统架构设计提供参考依据，避免项目到测试阶段发现问题后，造成工期延误和成本损失。
本发明实施例提供一种测试访存有效带宽的方法，如图2所示，所述方法包括：
S21、主机通过PCIe接口向PCIe控制器下发控制指令和读取计数指令；
S22、PCIe控制器解析与主机的PCIe接口时序，提取主机发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；
S23、内存写引擎模块根据访问方式和访问空间，发起内存写请求，组织与内存控制器接口信号数据格式和时序要求；
S24、内存读引擎模块根据访问方式和访问空间，发起内存读请求，组织与内存控制器接口信号时序要求和等待内存控制器返回的数据信号；
S25、内存控制器为用户侧提供与内存之间的至少四套读写访问接口，根据内存芯片的相关参数发起内存芯片侧的相关操作；
S26、主机通过PCIe接口向PCIe控制器下发测试停止指令，计算访存有效带宽。
本发明实施例提供的测试访存有效带宽的方法，能够在线测试多种访问方式下的内存有效带宽，为系统设计的性能方面提供参考依据，为硬件平台选型和系统架构设计提供参考依据，避免项目到测试阶段发现问题后，造成工期延误和成本损失。
下面结合具体实施例对本发明测试访存有效带宽的方法进行详细说明。
内存访问测试中需要使用随机地址或者随机长度，产生随机数可以采用哈希方程或者循环冗余校验算法，本发明实施例根据CRC32多项式产生随机数，产生一个递增步长为1的计数器作为多项式的输入，多项式的输出是散列均匀的32位数作为访存地址。
根据访问方式的特点，可以采用两种方法表示有效带宽，一个是pps(packet persecond，包/秒)，比如单个突发长度的访问，与访问者的大小无关，只与访问频率有关。另外一种是bps(bit per second，比特/秒)，例如连续地址写或者连续地址读与访问者长度相关，访问者带宽固定的情况下，访问长度越大访问频率越小，所以不能用访问频率表示，用每秒多少比特表示有效带宽。
1、随机地址只读模式
有些应用场景例如网络安全应用中的查规则表或者流表，每次只查询64字节的空间，且地址是随机的。本实施例采用如下测试流程得出有效带宽数值。
如图3所示，在随机地址只读模式下，测试访存有效带宽的方法包括以下几个步骤：
(1)收到启动信号后，连续发送内存读请求，读地址取自随机地址产生器。
(2)记录读请求的次数。
(3)等待读请求返回数据的有效信号，并记录收到第一次请求返回数据的时间，记为T1(单位为秒)。
(4)收到停止信号后，记录发送请求的次数，记为M(单位为访问次数)，并记录最后一次请求返回数据的时间，记为T2(单位为秒)。
(5)访存有效带宽的计算公式为：M/(T2-T1)(单位为pps)。
2、连续地址读写并发模式
有些应用场景例如网络安全应用中业务处理有延迟需要缓存报文，线网中最小包长为64字节，最大包长为1518字节，包长在最小值和最大值之间。按照报文输入顺序采用连续地址并发写读访问，本方法采用如下测试流程得出有效带宽数值。
如图4所示，在连续地址读写并发模式下，测试访存有效带宽的方法包括以下几个步骤：
(1)内存写引擎模块收到测试开始信号后，连续发送内存读请求，读大小取自随机地址产生器，读地址为读长度累加和。
(2)写输出控制信息缓存，记录每次写请求大小和地址，当缓存非空时，读访问引擎模块开始工作。
(3)记录写请求大小总和，记为WrLen(单位为比特)，并记录第一次写请求时间，记为WrT1(单位为秒)。
(4)内存读引擎模块发送读请求，需要检查两个条件，第一是写引擎输出控制信息缓存非空，第二是读请求返回数据高速缓存非满。
(5)记录读请求大小总和，记为RdLen(单位为比特，应该等于WrLen)，并记录第一次读请求数据返回时间，记为RdT1(单位为秒)。
(6)内存写引擎模块收到测试停止信号后，记录最后一次写请求时间，记为WrT2(单位为秒)，以及记录最后一次读请求数据返回时间，记为RdT2(单位为秒)。
(7)访存有效带宽的计算公式为：
写有效带宽：WrLen/(WrT2-WrT1)(单位为bps)；
读有效带宽：RdLen/(RdT2-RdT1)(单位为bps)。
3、有些应用场景例如网络安全应用中会话管理表需要多次的读写操作，访问长度为64字节且地址随机，即随机地址读写并发模式，在该模式下的访存有效带宽的测试方法，可以参照上述随机地址只读模式和连续地址读写并发模式下的访存有效带宽的测试方法，在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。

Claims (7)

1.一种测试访存有效带宽的装置，其特征在于，包括PCIe控制器、内存写引擎模块、内存读引擎模块和内存控制器，所述PCIe控制器通过PCIe接口与主机连接；其中，
所述主机，用于通过PCIe接口向所述装置下发控制指令和读取计数指令，启动和停止进而计算出访存有效带宽；
所述PCIe控制器，用于解析所述装置与主机的PCIe接口时序，提取所述主机发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；
所述内存写引擎模块，用于根据访问方式和访问空间，发起内存写请求，组织与所述内存控制器接口信号数据格式和时序要求；
所述内存读引擎模块，用于根据访问方式和访问空间，发起内存读请求，组织与所述内存控制器接口信号时序要求和等待所述内存控制器返回的数据信号；
所述内存控制器，用于为用户侧提供与内存之间的至少四套读写访问接口，根据内存芯片的相关参数发起内存芯片侧的相关操作。
2.根据权利要求1所述的装置，其特征在于，所述PCIe控制器，还用于在读寄存器操作下从所述内存读引擎模块将读回的数据打包发送到主机。
3.根据权利要求1所述的装置，其特征在于，所述内存芯片的相关参数包括刷新周期间隔和读写切换延迟。
4.根据权利要求1所述的装置，其特征在于，所述内存芯片侧的相关操作包括刷新和预充电。
5.一种测试访存有效带宽的方法，其特征在于，包括：
主机通过PCIe接口向PCIe控制器下发控制指令和读取计数指令；
PCIe控制器解析与主机的PCIe接口时序，提取主机发送过来的PCIe事务层报文，解析出其中的读写请求，并译码发送到对应的模块；
内存写引擎模块根据访问方式和访问空间，发起内存写请求，组织与内存控制器接口信号数据格式和时序要求；
内存读引擎模块根据访问方式和访问空间，发起内存读请求，组织与内存控制器接口信号时序要求和等待内存控制器返回的数据信号；
内存控制器为用户侧提供与内存之间的至少四套读写访问接口，根据内存芯片的相关参数发起内存芯片侧的相关操作；
主机通过PCIe接口向PCIe控制器下发测试停止指令，计算访存有效带宽。
6.根据权利要求5所述的方法，其特征在于，在随机地址只读模式下，所述计算访存有效带宽包括：
按照如下公式计算访存有效带宽：M/(T2-T1)，单位为pps；
其中，T1为所记录的收到第一次请求返回数据的时间，单位为秒，M为收到停止信号后所记录的发送请求的次数，T2为所记录的最后一次请求返回数据的时间，单位为秒。
7.根据权利要求5所述的方法，其特征在于，在连续地址读写并发模式下，所述计算访存有效带宽包括：
按照如下公式计算写有效带宽：WrLen/(WrT2-WrT1)，单位为bps，按照如下公式计算读有效带宽：RdLen/(RdT2-RdT1)，单位为bps；
其中，WrLen为所记录的写请求大小总和，单位为比特，WrT1为所记录的第一次写请求时间，单位为秒，WrT2为所记录的最后一次写请求时间，单位为秒；RdLen为所记录的读请求大小总和，单位为比特，RdT1为所记录的第一次读请求数据返回时间，单位为秒，RdT2为所记录的最后一次读请求数据返回时间，单位为秒。
CN201710978643.7A 2017-10-19 2017-10-19 测试访存有效带宽的装置及方法 Active CN107861846B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710978643.7A CN107861846B (zh) 2017-10-19 2017-10-19 测试访存有效带宽的装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710978643.7A CN107861846B (zh) 2017-10-19 2017-10-19 测试访存有效带宽的装置及方法

Publications (2)

Publication Number Publication Date
CN107861846A CN107861846A (zh) 2018-03-30
CN107861846B true CN107861846B (zh) 2020-09-25

Family

ID=61697594

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710978643.7A Active CN107861846B (zh) 2017-10-19 2017-10-19 测试访存有效带宽的装置及方法

Country Status (1)

Country Link
CN (1) CN107861846B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004074996A2 (en) * 2003-02-18 2004-09-02 Chapparal Network Storage, Inc. Broadcast bridge apparatus for transferring data to subsystems in a storage controller
CN102420719A (zh) * 2011-11-28 2012-04-18 曙光信息产业股份有限公司 一种测试PCIe总线带宽的装置和方法
CN106649014A (zh) * 2016-12-28 2017-05-10 郑州云海信息技术有限公司 一种支持多gpu的计算型服务器的自动测试方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004074996A2 (en) * 2003-02-18 2004-09-02 Chapparal Network Storage, Inc. Broadcast bridge apparatus for transferring data to subsystems in a storage controller
CN102420719A (zh) * 2011-11-28 2012-04-18 曙光信息产业股份有限公司 一种测试PCIe总线带宽的装置和方法
CN106649014A (zh) * 2016-12-28 2017-05-10 郑州云海信息技术有限公司 一种支持多gpu的计算型服务器的自动测试方法

Also Published As

Publication number Publication date
CN107861846A (zh) 2018-03-30

Similar Documents

Publication Publication Date Title
TWI409695B (zh) 用於配置裝置之系統、方法及裝置
US9619167B2 (en) System and method for computing message digests
US10649905B2 (en) Method and apparatus for storing data
WO2022143540A1 (zh) 区块链索引的存储方法、装置、计算机设备及介质
WO2017084348A1 (zh) Ip硬盘的管理方法和装置
US9690713B1 (en) Systems and methods for effectively interacting with a flash memory
CN106681659A (zh) 数据压缩的方法及装置
CN107688443A (zh) 一种数据存储的方法、系统及相关装置
CN104657435A (zh) 一种应用数据的存储管理方法和网络管理系统
US8924642B2 (en) Monitoring record management method and device
CN110928489B (zh) 一种写数据方法、装置及存储节点
CN109144419A (zh) 一种固态硬盘内存读写方法及系统
WO2016101748A1 (zh) 一种网络连接的缓存方法和装置
CN107577614B (zh) 数据写入方法及内存系统
CN108694664A (zh) 业务系统的核对方法及装置、电子设备
CN108170376B (zh) 存储卡读和写的方法和系统
JP2015158910A (ja) ラップ読出しから連続読出しを行うメモリサブシステム
CN107861846B (zh) 测试访存有效带宽的装置及方法
CN106254092A (zh) 一种预警方法、装置及系统
CN108052296B (zh) 一种数据读取方法、设备及计算机存储介质
CN104471645B (zh) 采用检错编码的事务的存储器设备的定时优化装置和方法
CN105335296A (zh) 一种数据处理方法、装置及系统
CN104539746B (zh) 一种访问数据的方法、nas机头和san
WO2017088382A1 (zh) 数据处理的方法和装置
KR102028666B1 (ko) 비식별 요청을 처리하는 저장 장치 및 그것의 동작 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220728

Address after: 100089 building 36, courtyard 8, Dongbeiwang West Road, Haidian District, Beijing

Patentee after: Dawning Information Industry (Beijing) Co.,Ltd.

Patentee after: DAWNING INFORMATION INDUSTRY Co.,Ltd.

Address before: 100193 No. 36 Building, No. 8 Hospital, Wangxi Road, Haidian District, Beijing

Patentee before: Dawning Information Industry (Beijing) Co.,Ltd.