CN114880203A - 用于量子计算云平台测评的装置、系统及方法 - Google Patents
用于量子计算云平台测评的装置、系统及方法 Download PDFInfo
- Publication number
- CN114880203A CN114880203A CN202110158018.4A CN202110158018A CN114880203A CN 114880203 A CN114880203 A CN 114880203A CN 202110158018 A CN202110158018 A CN 202110158018A CN 114880203 A CN114880203 A CN 114880203A
- Authority
- CN
- China
- Prior art keywords
- evaluation
- cloud platform
- test
- module
- quantum computing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N10/00—Quantum computing, i.e. information processing based on quantum-mechanical phenomena
- G06N10/20—Models of quantum computing, e.g. quantum circuits or universal quantum computers
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Computing Systems (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Computational Mathematics (AREA)
- Artificial Intelligence (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及量子云平台测评技术领域,公开一种用于量子计算云平台测评的装置,包括:测试脚本配置模块接收测评内容并根据测评内容获取测试脚本,将测试脚本导入待测量子计算云平台并触发待测量子计算云平台运行测试脚本获得测试结果;评估判定配置模块接收第一用户指令并确定第一用户指令对应的测评内容,将测评内容发送给测试脚本配置模块并触发测试脚本配置模块获取测试脚本,将测评内容发送给数据处理模块并触发数据处理模块根据测评内容对测试结果进行评估,实现对量子计算云平台的测评。本申请还公开一种用于量子计算云平台测评的系统及方法。
Description
技术领域
本申请涉及量子云平台测评技术领域,例如涉及一种用于量子计算云平台测评的装置、系统和方法。
背景技术
目前,随着量子云计算的快速发展,业界就如何评测多种多样的量子计算云平台,在方法论和其科学性方面进行研究。现有的量子计算云平台不但具有复杂的技术特征,同时也具备复杂多样的应用成效与服务体验。因此引入科学测评方法和装置,对于引导量子计算的技术、产业、服务良性发展有积极推动的作用。
在实现本公开实施例的过程中,发现相关技术中至少存在如下问题:缺少对量子计算云平台进行测评的装置。
发明内容
为了对披露的实施例的一些方面有基本的理解,下面给出了简单的概括。所述概括不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围,而是作为后面的详细说明的序言。
本公开实施例提供了一种用于量子计算云平台测评的装置、用于量子计算云平台测评的系统和用于量子计算云平台测评的方法,以便于对量子计算云平台进行测评。
在一些实施例中,所述装置包括:测试脚本配置模块和评估判定配置模块。测试脚本配置模块,被配置为接收测评内容并根据测评内容获取测试脚本,将测试脚本导入待测量子计算云平台并触发待测量子计算云平台运行测试脚本获得测试结果;评估判定配置模块,被配置为接收第一用户指令并确定第一用户指令对应的测评内容,将测评内容发送给测试脚本配置模块并触发测试脚本配置模块获取测试脚本,将测评内容发送给数据处理模块并触发数据处理模块根据测评内容对测试结果进行评估。
在一些实施例中,所述装置包括:测试结果中间件、评估判定组件和数据库模块。测试结果中间件,被配置为接收来自待测量子计算云平台的测试结果,对测试结果进行标准化处理,获得标准化数据,并将标准化数据写入数据库模块,标准化处理包括格式标准化处理和类型标准化处理;评估判定组件,被配置为接收来自测试配置模块的测评内容,调用数据库模块的标准化数据并根据测评内容对标准化数据进行评估获得评估数据,将评估数据写入数据库模块;数据库模块,被配置为存储来自待测量子计算云平台的测试结果、来自测试结果中间件的标准化数据和来自评估判定组件的评估数据。
在一些实施例中,所述装置包括采集模块和第二发送模块。采集模块,被配置为监控并采集待测量子计算云平台的计算资源信息作为监控信息;第二发送模块,被配置为将监控信息发送给测评配置模块,触发测评配置模块获得测试脚本。
在一些实施例中,所述系统包括:测试配置模块、数据处理模块和监控模块。测试配置模块,被配置为接收第一用户指令并确定第一用户指令对应的测评内容,获取监控信息,根据测评内容和监控信息获取测试脚本,将测试脚本导入待测量子计算云平台,触发待测量子计算云平台运行测试脚本获得测试结果,将测评内容发送给数据处理模块并触发数据处理模块根据测评内容对测试结果进行评估;数据理模块,被配置为获取测试结果和测评内容,根据测评内容对测试结果进行评估,获得评估数据;监控模块,被配置为采集待测量子计算云平台的计算资源信息作为监控信息,将监控信息发送给测试配置模块,触发测试配置模块获得测试脚本。
在一些实施例中,所述方法包括:接收第一用户指令,确定第一用户指令对应的测评内容;根据测评内容确定测试脚本;将测试脚本导入量子计算云平台,触发量子计算云平台运行测试脚本;获取运行测试脚本得到的测试结果;根据测评内容对测试结果进行评估,获得评估数据。
本公开实施例提供的用于量子计算云平台测评的装置、用于量子计算云平台测评的系统和用于量子计算云平台测评的方法,可以实现以下技术效果:本方案通过确定测评内容并根据测评内容获得测试脚本,将测试脚本导入待测量子计算云平台,能够触发待测量子云平台运行测试脚本获得测试结果,通过将测评内容发送给数据处理模块,能够触发数据处理模块根据测评内容对测试结果进行评估,从而便于实现对量子计算云平台的测评。
以上的总体描述和下文中的描述仅是示例性和解释性的,不用于限制本申请。
附图说明
一个或多个实施例通过与之对应的附图进行示例性说明,这些示例性说明和附图并不构成对实施例的限定,附图中具有相同参考数字标号的元件示为类似的元件,附图不构成比例限制,并且其中:
图1是本公开实施例提供的一个用于量子计算云平台测评的装置的示意图;
图2是本公开实施例提供的另一个用于量子计算云平台测评的装置的示意图;
图3是本公开实施例提供的另一个用于量子计算云平台测评的装置的示意图;
图4是本公开实施例提供的一个用于量子计算云平台测评的系统的示意图;
图5是本公开实施例提供的一个用于量子计算云平台测评的方法的示意图。
具体实施方式
为了能够更加详尽地了解本公开实施例的特点与技术内容,下面结合附图对本公开实施例的实现进行详细阐述,所附附图仅供参考说明之用,并非用来限定本公开实施例。在以下的技术描述中,为方便解释起见,通过多个细节以提供对所披露实施例的充分理解。然而,在没有这些细节的情况下,一个或多个实施例仍然可以实施。在其它情况下,为简化附图,熟知的结构和装置可以简化展示。
本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开实施例的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含。
除非另有说明,术语“多个”表示两个或两个以上。
本公开实施例中,字符“/”表示前后对象是一种“或”的关系。例如,A/B表示:A或B。
术语“和/或”是一种描述对象的关联关系,表示可以存在三种关系。例如,A和/或B,表示:A或B,或,A和B这三种关系。
结合图1所示,本公开实施例提供第一个用于量子计算云平台测评的装置,包括:测试脚本配置模块1和评估判定配置模块2。测试脚本配置模块1,被配置为接收测评内容并根据测评内容获取测试脚本,将测试脚本导入待测量子计算云平台,触发待测量子计算云平台运行测试脚本获得测试结果;评估判定配置模块2,被配置为接收第一用户指令并确定第一用户指令对应的测评内容,将测评内容发送给测试脚本配置模块并触发测试脚本配置模块获取测试脚本,将测评内容发送给数据处理模块并触发数据处理模块根据测评内容对测试结果进行评估。
本公开实施例提出了一种用于量子计算云平台测评的装置,通过确定测评内容并根据测评内容获得测试脚本,将测试脚本导入待测量子计算云平台,能够触发待测量子云平台运行测试脚本获得测试结果,通过将测评内容发送给数据处理模块,能够触发数据处理模块根据测评内容对测试结果进行评估。
可选地,评估判定配置模块2包括评测内容配置模块、评估方法配置模块和第一发送模块。评测内容配置模块,被配置为接收启动指令并根据启动指令加载量子云计算测评体系模型,接收第一用户指令并确定第一用户指令对应的测评内容,第一用户指令包括量子云计算测评体系模型中任意测评内容对应的选择信息,将测评内容发送给测试脚本配置模块1并触发测试脚本配置模块1获取测试脚本;评估方法配置模块,被配置为获取测评内容对应的评估方法;第一发送模块,被配置为将测评内容和评估方法发送给数据处理模块,触发数据处理模块根据测评内容和评估方法对测试结果进行评估。
可选地,量子云计算测评体系模型包括测评内容,以及与各测评内容对应的功能指标或与各测评内容对应的性能指标。
在一些实施例中,评测内容配置模块根据第一用户指令在量子云计算测评体系模型中选择与测评内容对应的功能指标或与测评内容对应的性能指标;根据选择的功能指标或性能指标确定测评内容。
可选地,测评内容包括:量子硬件成熟度、软件成熟度、量子云平台运维成熟度、量子云应用提供能力、量子云安全服务能力中的一种或多种。
可选地,获取测评内容对应的评估方法,包括:在预设的第一数据表中匹配出与测评内容对应的评估方法;第一数据表存储有测评内容与评估方法之间的对应关系、测评内容和评估方法。
可选地,评估方法包括:统计分布方法和对比验证方法等分析方法。可选地,统计分布方法包括:对测试脚本运行预设次数得到测试结果,并对测试结果进行数据统计。可选地,预设次数为1000次。可选地,对比验证方法包括:将在待测量子计算云平台运行测试脚本得到的测试结果与在经典云计算环境运行同一个测试脚本得到的测试结果进行对比。在一些实施例中,对于NISQ(嘈杂中型量子,Noisy Intermediate-Scale Quantum)下的待测量子计算云平台的测试结果可以通过与经典云计算的测试结果对比了解待测量子计算云平台的稳定性和噪声特性,也可以利用经典云计算机的得到的测试结果对待测量子计算云平台得到的测试结果进行纠错。
通过测评内容获取与测评内容对应的评估方法,将测评内容和评估方法发送给数据处理模块,触发数据处理模块对测试结果进行评估,针对不同的测评内容采取对应的评估方法,使得对测评内容对应的功能指标或性能指标的评估更加准确。
可选地,用于量子计算云平台测评的装置还包括待测平台配置模块。待测平台配置模块,被配置为接收第二用户指令,根据第二用户指令确定待测量子计算云平台,将待测量子计算云平台对应的确定信息发送给测试脚本配置模块1,第二用户指令包括量子计算云平台对应的选择信息。
待测量子计算云平台是测评的主体,也是测试脚本运行的载体。可选地,通过待测平台配置模块对待测量子计算云平台进行选择和配置。
可选地,待测量子计算云平台包括:量子计算测试脚本运行平台和执行运算的资源平台。可选地,量子计算测试脚本运行平台包括:已开发出的与真实的量子计算机的配套量子计算Cloud IDE(云集成开发环境,Cloud Integrated Development Environment)、量子计算云SDK(软件开发工具包,Software Development Kit)、量子计算云API(应用程序接口,Application Programming Interface)、第三方云主机或本地主机。可选地,执行运算的资源平台包括真实的量子计算机或经典云环境里的量子模拟器。可选地,量子计算测试脚本运行平台和执行运算的资源平台根据监控信息进行组合。在一些实施例中,在待测量子计算云平台为量子计算Cloud IDE和与量子计算Cloud IDE同厂家生产的真实的量子计算机的情况下,在量子计算Cloud IDE上运行测试脚本,调用真实的量子计算机资源执行测试脚本设定的计算功能。在一些实施例中,在以第三方云主机、本地主机、量子计算云SDK或量子计算云API运行测试脚本的情况下,通过后台接口连接到异厂家的真实的量子计算机上执行测试脚本设定的计算功能。在一些实施例中,在采用对比验证方法进行评估的情况下,在量子计算Cloud IDE、量子计算云SDK、量子计算云API、第三方云主机或本地主机上运行测试脚本,在经典云环境里的量子模拟器中执行测试脚本设定的计算功能。
可选地,在选择第三方云主机作为量子计算测试脚本运行平台,或者选择经典云环境里的量子模拟器作为执行运算的资源平台的情况下,通过待测平台配置模块对量子模拟器或脚本的运行环境,如第三方云主机,进行创建虚拟机、创建容器、运行虚拟机、运行容器、暂停虚拟机、暂停容器、查询虚拟机资源或查询容器资源等操作。
可选地,测试脚本配置模块1,被配置为,根据测评内容获取备选测试脚本,获取监控信息,并根据监控信息在备选测试脚本中获取测试脚本。可选地,监控信息包括待测量子计算云平台的计算资源信息。
可选地,根据测评内容获取备选测试脚本,包括:在预设的第二数据表中匹配出与测评内容对应的备选测试脚本;第二数据表存储有测评内容与备选测试脚本之间的对应关系、测评内容和备选测试脚本。可选地,备选测试脚本根据测评内容得到。
可选地,待测量子计算云平台的计算资源信息包括量子计算云平台计算资源利用率、量子计算云平台计算资源使用情况和量子计算云平台计算资源空闲情况等。
可选地,根据监控信息在备选测试脚本中获取测试脚本,包括:在待测量子计算云平台的计算资源能支持备选测试脚本在待测量子计算云平台中运行的情况下,将备选测试脚本确定为测试脚本。可选地,在待测量子计算云平台的计算资源不能支持备选测试脚本在待测量子计算云平台中运行的情况下,将备选测试脚本中的一个或多个确定为测试脚本,且待测量子计算云平台的计算资源能支持被选择的测试脚本在待测量子计算云平台中运行。可选地,备选测试脚本与测试脚本的差集为剩余测试脚本。可选地,在待测量子计算云平台的计算资源能支持剩余测试脚本在待测量子计算云平台中运行的情况下,将剩余测试脚本作为下一次测评的测试脚本在待测量子计算云平台中运行。可选地,在待测量子计算云平台的计算资源不能支持剩余测试脚本在待测量子计算云平台中运行的情况下,将剩余测试脚本作为下一次测评的备选测试脚本,并根据监控信息在备选测试脚本中获取测试脚本在待测量子计算云平台中运行。
在待测量子计算云平台运行测试脚本之前获取监控信息,通过监控信息对备选测试脚本进行调整,得到测试脚本。使测试脚本能在待测量子计算云平台完整运行,避免了因为待测量子计算云平台的计算资源不能支持测试脚本在待测量子计算云平台中运行而出现报错、意外中止或没有测试结果的情况出现。
可选地,用于量子计算云平台测评的装置还包括测试状态控制模块。测试状态控制模块被配置为接收包括测试状态控制信息的第三用户指令,根据第三用户指令控制测试脚本在待测量子计算云平台运行的状态。通过测试状态控制模块能够实现对测试流程的控制。在一些实施例中,在第三用户指令为开始测试的情况下,测试状态控制模块根据第三用户指令控制待测量子计算云平台启动测试;在第三用户指令为暂停测试的情况下,测试状态控制模块根据第三用户指令控制待测量子计算云平台暂停测试;在第三用户指令为中止测试的情况下,测试状态控制模块根据第三用户指令控制待测量子计算云平台中止测试;在第三用户指令为保存快照的情况下,测试状态控制模块根据第三用户指令控制待测控制量子计算云平台暂停测试并将当前测试状态和已经得到的测试结果进行保存。
通过第三用户指令控制测试状态控制模块,通过控制测试状态控制模块实现对测试流程的控制,使得测试流程能够随时启动、暂停、中止和保存快照。
结合图2所示,本公开实施例提供一种用于量子计算云平台测评的装置,包括:测试结果中间件3、评估判定组件4和数据库模块5。测试结果中间件3,被配置为接收来自待测量子计算云平台的测试结果,对测试结果进行标准化处理,获得标准化数据,并将标准化数据写入数据库模块5,标准化处理包括格式标准化处理和类型标准化处理;评估判定组件4,被配置为接收来自测评配置模块的测评内容,调用数据库模块5的标准化数据,根据测评内容对标准化数据进行评估获得评估数据,将评估数据写入数据库模块5;数据库模块5,被配置为存储来自待测量子计算云平台的测试结果、来自测试结果中间件3的标准化数据和来自评估判定组件4的评估数据。
本公开实施例提供的用于量子计算云平台测评的装置,通过测试结果中间件对测试结果进行标准化处理,使评估判定组件能够直接对标准化处理后的标准化数据进行评估,提高了对测试结果进行评估的效率;评估判定组件针对不同的测评内容采取对应的测评估方法,能够使得对测试结果的评估更加准确。
可选地,格式标准化处理为将测试结果的格式进行统一。可选地,类型标准化处理为将测试结果的类型进行统一。
可选地,获取测评内容对应的评估方法,包括:在预设的第一数据表中匹配出与测评内容对应的评估方法;第一数据表存储有测评内容与评估方法之间的对应关系、测评内容和评估方法。
可选地,评估方法包括:统计分布方法和对比验证方法等分析方法。可选地,统计分布方法包括:对测试脚本运行预设次数得到测试结果,并对测试结果进行数据统计。可选地,预设次数为1000次。可选地,对比验证方法包括:将在待测量子计算云平台运行测试脚本得到的测试结果与在经典云计算环境运行同一个测试脚本得到的测试结果进行对比。
可选地,根据测评内容和评估方法对标准化数据进行评估,获得评估数据。
可选地,在测评内容对应的功能指标或性能指标已知的情况下,通过择统计分布方法对标准化数据进行评估,获得评估数据,包括:对测试脚本运行预设次数得到的测试结果进行格式标准化处理和类型标准化处理获得的标准化数据;通过对标准化数据进行数据统计得到统计结论,在统计结论满足与测评内容对应的功能指标或性能指标的情况下,测评内容对应的功能指标或性能指标合格。可选地,在测评内容对应的功能指标或性能指标已知的情况下,通过对比验证方法对标准化数据进行评估,包括:对在待测量子计算云平台运行测试脚本得到的测试结果进行格式标准化处理和类型标准化处理获得待测标准化数据;对在经典云计算环境运行同一个测试脚本得到的测试结果进行格式标准化处理和类型标准化处理获得的云环境标准化数据;将待测标准化数据与云环境标准化数据进行对比,得到对比结果,根据对比结果得到测评内容对应的功能指标或性能指标在待测量子计算云平台相较于经典云计算环境功能指标或性能指标的趋势。
可选地,在测评内容对应的功能指标或性能指标未知的情况下,针对测评内容选择与测评内容对应的算法对根据测试脚本得到的标准化数据进行评估得到评估数据。可选地,评估数据为测评内容对应的功能指标或性能指标的趋势。
如图3所示,本公开实施例提供一种用于量子计算云平台测评的装置,包括:采集模块6和第二发送模块7。采集模块6,被配置为监控并采集待测量子计算云平台的计算资源信息作为监控信息;第二发送模块7,被配置为将监控信息发送给测试配置模块,触发测试配置模块获得测试脚本。
通过采集模块采集计算资源信息,通过第二发送模块将计算资源信息发送给测试配置模块,便于通过触发测试配置模块根据计算资源信息获得测试脚本,使得计算资源信息的计算资源满足运行测试脚本的资源,使得测试脚本能在待测量子计算云平台中运行,便于实现对量子计算云平台的测评。
可选地,量子计算云平台的计算资源信息包括量子比特数、基本逻辑门、最大运行次数、量子芯片参数、运行排队形况、CPU(中央处理器,Central Processing Unit)占用、算力资源和网络特性信息等量子计算机的关键性能指标。可选地,量子芯片参数包括量子比特保真度和工作频率。
可选地,在评估方法是对比验证方法的情况下,测试配置模块的待测平台配置模块可根据各个量子计算云平台的当前的计算资源占用情况和待运行测试脚本的资源占用预估选择和推荐可与待测量子计算云平台进行对比验证的量子云平台。
结合图4所示,本公开实施例提供用于量子计算云平台测评的系统,包括:测试配置模块8、数据处理模块9和监控模块10。测试配置模块8,被配置为接收第一用户指令并确定第一用户指令对应的测评内容,获取监控信息并根据测评内容和监控信息获取测试脚本,将测试脚本导入待测量子计算云平台并触发待测量子计算云平台运行测试脚本获得测试结果,将测评内容发送给数据处理模块9并触发数据处理模块9根据测评内容对测试结果进行评估;数据处理模块9,被配置为获取测试结果和测评内容,根据测评内容对测试结果进行评估,获得评估数据;监控模块10,被配置为采集待测量子计算云平台的计算资源信息作为监控信息,将监控信息发送给测试配置模块8,触发测试配置模块8获得测试脚本。
本公开实施例提供用于量子计算云平台测评的系统,通过数据处理模块根据测评内容对测试结果进行评估,测评内容通过测试配置模块根据第一用户指令确定,测试结果通过待测量子计算云平台运行测试脚本获得,测试脚本通过测试配置模块根据测评内容和监控信息获取,监控信息通过监控模块采集的待测量子计算云平台的计算资源信息获得,通过数据处理模块根据测评内容对测试结果进行评估,能够实现对量子计算云平台的测评。
可选地,测试配置模块8包括:测试脚本配置模块、评估判定配置模块、待测平台配置模块和测试状态控制模块。
可选地,测试脚本配置模块,被配置为接收测评内容并根据测评内容获取测试脚本,将测试脚本导入待测量子计算云平台,触发待测量子计算云平台运行测试脚本获得测试结果。
可选地,测试脚本配置模块,被配置为根据测评内容获取备选测试脚本,获取监控信息,并根据监控信息在备选测试脚本中获取测试脚本;可选地,监控信息包括待测量子计算云平台的计算资源信息。可选地,待测量子计算云平台的计算资源信息包括量子计算云平台计算资源利用率、量子计算云平台计算资源使用情况和量子计算云平台计算资源空闲情况等。可选地,根据测评内容获取备选测试脚本,包括:在预设的第二数据表中匹配出与测评内容对应的备选测试脚本;第二数据表存储有测评内容与备选测试脚本之间的对应关系、测评内容和备选测试脚本。可选地,备选测试脚本根据测评内容得到。可选地,根据监控信息在备选测试脚本中获取测试脚本,包括:在待测量子计算云平台的计算资源能支持备选测试脚本在待测量子计算云平台中运行的情况下,将备选测试脚本确定为测试脚本。可选地,在待测量子计算云平台的计算资源不能支持备选测试脚本在待测量子计算云平台中运行的情况下,将备选测试脚本中的一个或多个确定为测试脚本,且待测量子计算云平台的计算资源能支持被选择的测试脚本在待测量子计算云平台中运行。可选地,备选测试脚本与测试脚本的差集为剩余测试脚本。可选地,在待测量子计算云平台的计算资源能支持剩余测试脚本在待测量子计算云平台中运行的情况下,将剩余测试脚本作为下一次测评的测试脚本在待测量子计算云平台中运行。可选地,在待测量子计算云平台的计算资源不能支持剩余测试脚本在待测量子计算云平台中运行的情况下,将剩余测试脚本作为下一次测评的备选测试脚本,并根据监控信息在备选测试脚本中获取测试脚本在待测量子计算云平台中运行。在待测量子计算云平台运行测试脚本之前获取监控信息,脚本配置模块通过监控信息对备选测试脚本进行调整,得到测试脚本,使得测试脚本能在待测量子计算云平台完整运行,避免了因为待测量子计算云平台的计算资源不能支持测试脚本在待测量子计算云平台中运行而出现报错、意外中止或没有测试结果的情况出现。
可选地,评估判定配置模块,被配置为接收第一用户指令并确定第一用户指令对应的测评内容,将测评内容发送给测试脚本配置模块并触发测试脚本配置模块获取测试脚本,将测评内容发送给数据处理模块9并触发数据处理模块9根据测评内容对测试结果进行评估。可选地,评估判定配置模块包括:评测内容配置模块、评估方法配置模块和第一发送模块。可选地,评测内容配置模块,被配置为接收启动指令并根据启动指令加载量子云计算测评体系模型,接收第一用户指令并确定第一用户指令对应的测评内容,第一用户指令包括量子云计算测评体系模型中任意测评内容对应的选择信息,将测评内容发送给测试脚本配置模块并触发测试脚本配置模块获取测试脚本;可选地,评估方法配置模块,被配置为获取测评内容对应的评估方法;可选地,第一发送模块,被配置为将测评内容和评估方法发送给数据处理模块9,触发数据处理模块9根据测评内容和评估方法对测试结果进行评估。可选地,量子云计算测评体系模型包括测评内容,以及与各测评内容对应的功能指标或与各测评内容对应的性能指标。可选地,获取测评内容对应的评估方法,包括:在预设的第一数据表中匹配出与测评内容对应的评估方法;第一数据表存储有测评内容与评估方法之间的对应关系、测评内容和评估方法。可选地,评估方法包括:统计分布方法和对比验证方法等等分析方法。可选地,统计分布方法包括:对测试脚本运行预设次数得到测试结果,并对测试结果进行数据统计。可选地,预设次数为1000次。可选地,对比验证方法包括:将在待测量子计算云平台运行测试脚本得到的测试结果与在经典云计算环境运行同一个测试脚本得到的测试结果进行对比。
通过评测内容配置模块获取测评内容,通过评估方法配置模块获取与测评内容对应的评估方法,通过第一发送模块将测评内容和评估方法发送给数据处理模块,触发数据处理模块对测试结果进行评估,针对不同的测评内容采取对应的评估方法,使得对测评内容对应的功能指标或性能指标的评估更加准确。
可选地,待测平台配置模块,被配置为接收第二用户指令,根据第二用户指令确定待测量子计算云平台,将待测量子计算云平台对应的确定信息发送给测试脚本配置模块,第二用户指令包括量子计算云平台对应的选择信息。
可选地,测试状态控制模块被配置为接收包括测试状态控制信息的第三用户指令,根据第三用户指令控制测试脚本在待测量子计算云平台运行的状态。通过测试状态控制模块能够实现对测试流程的控制,使得测试流程能够随时进行启动、暂停、中止和保存快照等测试流程的变化。
可选地,数据处理模块9包括:测试结果中间件、评估判定组件和数据库模块。可选地,测试结果中间件,被配置为接收来自待测量子计算云平台的测试结果,对测试结果进行标准化处理,获得标准化数据,并将标准化数据写入数据库模块,标准化处理包括格式标准化处理和类型标准化处理;可选地,评估判定组件,被配置为接收来自测评配置模块的测评内容,调用数据库模块的标准化数据,根据测评内容对标准化数据进行评估获得评估数据,将评估数据写入数据库模块;可选地,数据库模块,被配置为存储来自待测量子计算云平台的测试结果、来自测试结果中间件的标准化数据和来自评估判定组件的评估数据。可选地,格式标准化处理为将测试结果的格式进行统一。可选地,类型标准化处理为将测试结果的类型进行统一。可选地,根据测评内容和评估方法对标准化数据进行评估,获得评估数据。
通过测试结果中间件对测试结果进行标准化处理,使评估判定组件能够直接对标准化处理后的标准化数据进行评估,提高了对测试结果进行评估的效率;评估判定组件针对不同的测评内容采取对应的测评估方法,能够使得对测试结果的评估更加准确。
可选地,监控模块10包括:采集模块和第二发送模块。可选地,采集模块,被配置为监控并采集待测量子计算云平台的计算资源信息作为监控信息;可选地,第二发送模块,被配置为将监控信息发送给测试配置模块8,触发测试配置模块8获得测试脚本。
通过采集模块采集计算资源信息,通过第二发送模块将计算资源信息发送给测试配置模块,便于通过触发测试配置模块根据计算资源信息获得测试脚本,使得计算资源信息的计算资源满足运行测试脚本的资源,使得测试脚本能在待测量子计算云平台中运行,便于实现对量子计算云平台的测评。
可选地,对测试配置模块8的测试脚本配置模块、评测内容配置模块、评估方法配置模块、待测平台配置模块和测试状态控制模块进行配置,获得测试配置信息。可选地,测试配置信息存储在数据库中。可选地,测试配置信息包括:待测平台配置模块的配置信息,测试脚本配置模块的配置信息,评测内容配置模块生成的配置信息,评估方法配置模块生成的配置信息和测试状态控制模块生成的配置信息。
可选地,监控模块10将监控信息送给测试配置模块8中的测试脚本配置模块,触发测试脚本配置模块获得测试脚本。
可选地,该用于量子计算云平台测评的系统还包括:接口模块和前端显示模块。接口模块,被配置为接收第一用户指令、第二用户指令和启动指令,并将所述第一用户指令、第二用户指令和启动指令发送给测试配置模块8;前端显示模块:被配置为调用数据处理模块9中的评估数据,对评估数据进行可视化处理获得可视化评估数据,显示可视化评估数据。
可选地,接口模块将第一用户指令发送给测评内容管理模块8,将第二用户指令发送给待测平台配置模块,将第三用户指令发送给测试状态控制模块。可选地,第一用户指令包括量子云计算测评体系模型中任意测评内容对应的选择信息。可选地,第二用户指令包括量子计算云平台对应的选择信息。可选地,第三用户指令包括测试状态的控制信息。
在一些实施例中,接口模块提供了使用量子计算云平台的测评装置的统一接口,通过接口模块登入测评装置,对测试配置模块进行配置并查看测试结果。在通过待测平台配置模块对待测量子计算云平台进行选择和配置过程中,通过接口模块对测试脚本运行环境和算力资源分别进行配置。这样,由于接口模块是用户与该用于量子计算云平台测评的系统的交互接口,通过接口模块可以使用户对该用于量子计算云平台测评的系统的配置更加方便,快捷。
可选地,前端显示模块通过图表或表格的形式显示评估数据。可选地,通过前端显示模块查看测试装置的测试配置信息、监控信息、测试结果、标准化数据和评估数据。这样,使得用户能直观的查看评估数据、测试配置信息的状态,监控信息的状态。
可选地,通过前端显示模块对根据评估数据生成的测试报告进行下载。
结合图5所示,本公开实施例提供一种用于量子计算云平台测评的方法,包括:
步骤S101,接收第一用户指令,确定第一用户指令对应的测评内容;
步骤S102,根据测评内容确定测试脚本;
步骤S103,将测试脚本导入待测量子计算云平台,触发待测量子计算云平台运行测试脚本;
步骤S104,获取运行测试脚本得到的测试结果;
步骤S105,根据测评内容对测试结果进行评估,获得评估数据。
本公开实施例提供的用于量子计算云平台测评的方法,通过确定测评内容并根据测评内容确定测试脚本,将测试脚本导入待测量子计算云平台,能够触发待测量子计算云平台运行测试脚本获取测试结果,根据测评内容对测试结果进行评估,从而实现对待测量子云平台的测评。
可选地,根据测评内容确定测试脚本,包括:根据测评内容获取备选测试脚本,并获取监控信息;监控信息包括待测量子计算云平台的计算资源信息;根据监控信息在备选测试脚本中确定测试脚本。
在待测量子计算云平台运行测试脚本之前获取监控信息,通过监控信息对备选测试脚本进行调整,得到测试脚本。使测试脚本能在待测量子计算云平台完整运行,避免了因为待测量子计算云平台的计算资源不能支持测试脚本在待测量子计算云平台中运行而出现报错、意外中止或没有测试结果的情况出现,得到完整准确的测试脚本,将测试脚本导入待测量子计算云平台,能够触发待测量子云平台运行测试脚本获得测试结果并根据测评内容对测试结果进行评估,使得到的评估数据更加准确,从而实现对待测量子计算云平台的测评。
本公开实施例提供了一种计算机可读存储介质,存储有计算机可执行指令,所述计算机可执行指令设置为执行上述用于量子计算云平台测评的方法。
本公开实施例提供了一种计算机程序产品,所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行上述用于量子计算云平台测评的方法。
上述的计算机可读存储介质可以是暂态计算机可读存储介质,也可以是非暂态计算机可读存储介质。
本公开实施例的技术方案可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括一个或多个指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开实施例所述方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质,包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等多种可以存储程序代码的介质,也可以是暂态存储介质。
以上描述和附图充分地示出了本公开的实施例,以使本领域的技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求,否则单独的部件和功能是可选的,并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。而且,本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的,除非上下文清楚地表明,否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地,如在本申请中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外,当用于本申请中时,术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素,和/或组件的存在,但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下,由语句“包括一个…”限定的要素,并不排除在包括所述要素的过程、方法或者设备中还存在另外的相同要素。本文中,每个实施例重点说明的可以是与其他实施例的不同之处,各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言,如果其与实施例公开的方法部分相对应,那么相关之处可以参见方法部分的描述。
本领域技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,可以取决于技术方案的特定应用和设计约束条件。所述技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能,但是这种实现不应认为超出本公开实施例的范围。所述技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本文所披露的实施例中,所揭露的方法、产品(包括但不限于装置、设备等),可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,可以仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外,在本公开实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中,不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生,有时不同的操作或步骤之间不存在特定的顺序。例如,两个连续的操作或步骤实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
Claims (10)
1.一种用于量子计算云平台测评的装置,其特征在于,包括:
测试脚本配置模块:被配置为接收测评内容;根据所述测评内容获取测试脚本;将所述测试脚本导入待测量子计算云平台,触发所述待测量子计算云平台运行所述测试脚本获得测试结果;
评估判定配置模块:被配置为接收第一用户指令,确定所述第一用户指令对应的测评内容;将所述测评内容发送给所述测试脚本配置模块,触发所述测试脚本配置模块获取测试脚本;将所述测评内容发送给数据处理模块,触发所述数据处理模块根据所述测评内容对所述测试结果进行评估。
2.根据权利要求1所述的装置,其特征在于,所述评估判定配置模块,包括:
评测内容配置模块:被配置为接收启动指令,根据所述启动指令加载量子云计算测评体系模型,并接收第一用户指令,确定所述第一用户指令对应的测评内容;所述第一用户指令包括所述量子云计算测评体系模型中任意测评内容对应的选择信息;将所述测评内容发送给所述测试脚本配置模块,触发所述测试脚本配置模块获取测试脚本;
评估方法配置模块:被配置为获取所述测评内容对应的评估方法;
第一发送模块:被配置为将所述测评内容和所述评估方法发送给所述数据处理模块,触发所述数据处理模块根据所述测评内容和所述评估方法对所述测试结果进行评估。
3.根据权利要求1所述的装置,其特征在于,还包括:
待测平台配置模块:被配置为接收第二用户指令,根据所述第二用户指令确定待测量子计算云平台;将所述待测量子计算云平台对应的确定信息发送给测试脚本配置模块;所述第二用户指令包括量子计算云平台对应的选择信息。
4.根据权利要求1所述的装置,其特征在于,所述测试脚本配置模块,被配置为:
根据所述测评内容获取备选测试脚本,并获取监控信息;所述监控信息包括待测量子计算云平台的计算资源信息;
根据所述监控信息在备选测试脚本中获取测试脚本。
5.一种用于量子计算云平台测评的装置,其特征在于,包括:
测试结果中间件:被配置为接收来自待测量子计算云平台的测试结果,对所述测试结果进行标准化处理,获得标准化数据,并将所述标准化数据写入数据库模块;所述标准化处理包括:格式标准化处理和类型标准化处理;
评估判定组件:被配置为接收来自测评配置模块的测评内容,调用所述数据库模块的所述标准化数据,根据所述测评内容对所述标准化数据进行评估获得评估数据,将所述评估数据写入所述数据库模块;
所述数据库模块:被配置为存储来自所述待测量子计算云平台的所述测试结果、来自所述测试结果中间件的所述标准化数据和来自所述评估判定组件的所述评估数据。
6.一种用于量子计算云平台测评的装置,其特征在于,包括:
采集模块:被配置为监控并采集所述待测量子计算云平台的计算资源信息作为所述监控信息;
第二发送模块:被配置为将所述监控信息发送给测评配置模块,触发测评配置模块获得测试脚本。
7.一种用于量子计算云平台测评的系统,其特征在于,包括:
测评配置模块:被配置为接收第一用户指令,确定所述第一用户指令对应的测评内容,获取监控信息,根据所述测评内容和所述监控信息获取测试脚本,将所述测试脚本导入待测量子计算云平台,触发所述待测量子计算云平台运行所述测试脚本获得测试结果;将所述测评内容发送给数据处理模块,触发所述数据处理模块根据所述测评内容对所述测试结果进行评估;
所述数据处理模块:被配置为获取所述测试结果和所述测评内容,根据所述测评内容对所述测试结果进行评估,获得评估数据;
监控模块:被配置为采集所述待测量子计算云平台的计算资源信息作为所述监控信息,将所述监控信息发送给所述测评配置模块,触发所述测评配置模块获得测试脚本。
8.根据权利要求7所述的系统,其特征在于,还包括:
接口模块:被配置为接收所述第一用户指令、第二用户指令和启动指令,并将所述第一用户指令、第二用户指令和启动指令发送给测评配置模块;
前端显示模块:被配置为调用所述数据处理模块中的所述评估数据,对所述评估数据进行可视化处理获得可视化评估数据,显示所述可视化评估数据。
9.一种用于量子计算云平台测评的方法,其特征在于,包括:
接收第一用户指令,确定所述第一用户指令对应的测评内容;
根据所述测评内容确定测试脚本;
将所述测试脚本导入量子计算云平台,触发所述量子计算云平台运行所述测试脚本;
获取运行所述测试脚本得到的测试结果;
根据所述测评内容对所述测试结果进行评估,获得评估数据。
10.根据权利要求9所述的方法,其特征在于,根据所述测评内容确定测试脚本,包括:
根据所述测评内容获取备选测试脚本,并获取监控信息;所述监控信息包括待测量子计算云平台的计算资源信息;
根据所述监控信息在所述备选测试脚本中确定测试脚本。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110158018.4A CN114880203A (zh) | 2021-02-05 | 2021-02-05 | 用于量子计算云平台测评的装置、系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110158018.4A CN114880203A (zh) | 2021-02-05 | 2021-02-05 | 用于量子计算云平台测评的装置、系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114880203A true CN114880203A (zh) | 2022-08-09 |
Family
ID=82667891
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110158018.4A Pending CN114880203A (zh) | 2021-02-05 | 2021-02-05 | 用于量子计算云平台测评的装置、系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114880203A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024055798A1 (zh) * | 2022-09-14 | 2024-03-21 | 本源量子计算科技(合肥)股份有限公司 | 评测量子设备性能的方法、装置、存储介质及电子装置 |
-
2021
- 2021-02-05 CN CN202110158018.4A patent/CN114880203A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024055798A1 (zh) * | 2022-09-14 | 2024-03-21 | 本源量子计算科技(合肥)股份有限公司 | 评测量子设备性能的方法、装置、存储介质及电子装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106294120B (zh) | 测试代码的方法、设备和计算机程序产品 | |
CN106354645B (zh) | 基于后台系统服务或接口的测试方法和测试平台 | |
US20210319375A1 (en) | Churn prediction in a broadband network | |
CN110061889A (zh) | 区块链性能测试方法、装置、设备和存储介质 | |
CN111897724B (zh) | 一种适用于云平台的自动化测试方法及装置 | |
CN107608901B (zh) | 基于Jmeter的测试方法及装置、存储介质、电子设备 | |
CN109543891B (zh) | 容量预测模型的建立方法、设备及计算机可读存储介质 | |
CN110750458A (zh) | 大数据平台测试方法、装置、可读存储介质及电子设备 | |
US9134997B2 (en) | Methods for assessing deliverable product quality and devices thereof | |
CN111666217B (zh) | 用于测试代码的方法和装置 | |
CN112269697B (zh) | 一种设备存储性能测试方法、系统及相关装置 | |
CN110188036A (zh) | 一种软件测试方法及装置 | |
KR20070080313A (ko) | 클라이언트 단말로 제공되는 서비스 성능 분석 방법 및시스템 | |
CN111258913A (zh) | 算法自动测试方法、装置、计算机系统及可读存储介质 | |
EP3722945B1 (en) | Program operation system and program operation method | |
CN112882927A (zh) | 一种接口自动化测试方法、装置、设备及介质 | |
CN111736951A (zh) | 自动驾驶的仿真方法、计算机设备、及存储介质 | |
CN114880203A (zh) | 用于量子计算云平台测评的装置、系统及方法 | |
CN107430590B (zh) | 用于数据比较的系统和方法 | |
CN108595323B (zh) | 一种系统测试方法及相关装置 | |
CN113656391A (zh) | 数据检测方法及装置、存储介质及电子设备 | |
CN111367782A (zh) | 回归测试数据自动生成的方法及装置 | |
CN111767218A (zh) | 一种用于持续集成的自动化测试方法、设备及存储介质 | |
CN116955193A (zh) | 接口测试方法、装置、设备及存储介质 | |
CN111723017A (zh) | 系统容量测试方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |