CN106603265B - 管理方法、网络装置以及非暂态计算机可读介质 - Google Patents

管理方法、网络装置以及非暂态计算机可读介质 Download PDF

Info

Publication number
CN106603265B
CN106603265B CN201610044165.8A CN201610044165A CN106603265B CN 106603265 B CN106603265 B CN 106603265B CN 201610044165 A CN201610044165 A CN 201610044165A CN 106603265 B CN106603265 B CN 106603265B
Authority
CN
China
Prior art keywords
network
physical layer
management controller
layer device
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610044165.8A
Other languages
English (en)
Other versions
CN106603265A (zh
Inventor
周乐生
施思勤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Quanta Computer Inc
Original Assignee
Quanta Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Quanta Computer Inc filed Critical Quanta Computer Inc
Publication of CN106603265A publication Critical patent/CN106603265A/zh
Application granted granted Critical
Publication of CN106603265B publication Critical patent/CN106603265B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0604Management of faults, events, alarms or notifications using filtering, e.g. reduction of information by using priority, element types, position or time
    • H04L41/0618Management of faults, events, alarms or notifications using filtering, e.g. reduction of information by using priority, element types, position or time based on the physical or logical position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0631Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0709Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a distributed system consisting of a plurality of standalone computer nodes, e.g. clusters, client-server systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751Error or fault detection not based on redundancy
    • G06F11/0754Error or fault detection not based on redundancy by exceeding limits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793Remedial or corrective actions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3055Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3058Monitoring arrangements for monitoring environmental properties or parameters of the computing system or of the computing system component, e.g. monitoring of power, currents, temperature, humidity, position, vibrations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3089Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/327Alarm or error message display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/81Threshold
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0654Management of faults, events, alarms or notifications using network fault recovery
    • H04L41/0659Management of faults, events, alarms or notifications using network fault recovery by isolating or reconfiguring faulty entities
    • H04L41/0661Management of faults, events, alarms or notifications using network fault recovery by isolating or reconfiguring faulty entities by reconfiguring faulty entities

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Debugging And Monitoring (AREA)

Abstract

一种管理方法、服务控制器装置以及非暂态计算机可读介质。该服务控制器装置包括:一个或者多个网络接口,用以与服务器中的其它装置进行通信;一处理器,耦接至网络接口,以及适用于处理一个或者多个处理程序;一存储器,用以存储可由处理器执行的多个指令。当指令通过处理器执行时,使得处理器执行的多个操作包括:监控服务器中的物理层装置以及与物理层装置连接的至少一网络连接器,其中物理层装置用以在至少一介质访问控制器以及网络连接器之间交换数据;判断物理层装置的状态或者网络连接器的状态以指示警示或者故障;以及传输对应于警示或者故障的警示信号至机柜管理控制器。

Description

管理方法、网络装置以及非暂态计算机可读介质
技术领域
本发明涉及一种包括服务器系统的网络系统,特别涉及一种经改良的服务器系统诊断以及监测。
背景技术
网络服务(例如云端运算服务)的需求日益增长反映着产业的转移,企业以及消费者同样地皆可于远端服务器上存储、管理或者以其他方式存取大量的数据。远端服务器通常设置于一个或者多个数据中心内。数据中心可设置包括其相应的硬件或者软件元件的数百甚至数千个远端服务器。而数量众多的硬件或者软件元件以及其可能的配置往往造成每个数据中心内装置网络的复杂。因此,装置网络的复杂往往使得错误或者故障(failure)的根本原因难以被快速地以及有效地辨识以及排除。
发明内容
本发明提供一个或者多个诊断技术的实施例。在一实施例中,诊断技术提供计算机装置(例如设置在数据中心内的服务器)新的网络接口配置。诊断技术更通过新的网络接口配置提供服务控制器给对应的服务器以监控网络条件,例如包括与物理层装置相关的参数、网络接口的网络连接等等。通过上述的方式,诊断技术可有效率地测量各种服务器的条件,并可快速地辨识潜在的网络问题,包括错误、故障等等。
举例来说,根据本发明另一实施例,一服务器包括一服务控制器,例如一基板管理控制器(baseboard management controller,BMC),可用于监控服务器中一物理层(physical layer,PHY)装置以及与物理层装置连接的至少一网络连接器/网络电缆。一般而言,物理层装置用以于至少一介质访问控制器(Media Access Controller,MAC)以及至少一网络连接器/网络电缆之间交换数据。通过上述的方式,物理层装置可自平台路径控制器(Platform Controller Hub,PCH)中独立出来。平台路径控制器可包括嵌入式介质访问控制器电路/装置。基板管理控制器更可判断物理层装置的状态或者至少一网络连接器/网络电缆的状态以指示至少一警示或者故障,并传送对应于至少一警示或者故障的警示信号至一机柜管理控制器(rack management controller,RMC)。机柜管理控制器可自一服务器机柜中对应于每个服务器的每个基板管理控制器搜集上述警示信号,并经由一通信网络提供警示信号给一远端管理员。
值得注意的是,在一些实施例中,基板管理控制器通过一内部整合电路(InterIntegrated Circuit,I2C)通信频道监控对应于物理层装置以及至少一网络连接器/网络电缆的网络参数。
在其它实施例中,基板管理控制器可通过一内部整合电路通信频道在以太网络的10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个中初始化物理层装置。另外,基板管理控制器也可使用一基板自动协商协议(backplane auto-negotiation protocol)在物理层装置以及至少一介质访问控制器之间配置一网络接口。同样地,网络接口可用以操作在以太网络的10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个中。
在另一实施例中,当基板管理控制器判断物理层装置的状态或者网络连接器/网络电缆的状态时,基板管理控制器监控对应于物理层装置或者至少一网络连接器/网络电缆的一个或者多个网络参数。在上述实施例中,基板管理控制器也可接收用以定义警示、故障、错误等等的阈值条件(例如接收自机柜管理控制器)。基板管理控制器可通过比较网络参数以及阈值条件以判断状态并接着传送相应的警示信号。
本发明一个或者多个实施例的细节描述于的附图以及以下叙述中。本发明的其它特征、样式以及潜在优点将描述于后附的说明书、附图、以及权利要求书中。
附图说明
有关本发明的示范实施例请配合附图参考,其中在整篇说明书中,类似的元件以类似的标号表示。在接下来的叙述中,目的在于提出具体的细节以帮助了解本发明的内容。必须了解的是,上述的叙述与以下的详述仅为本发明的示范以及说明,并非用来限制本发明所主张的专利范围。可藉由结合附图以及附加的特征以及细节可描述以及解释本发明的原理,其中:
图1是显示根据本发明一实施例所述的数据中心的示意图;
图2A、图2B是显示根据已知服务器配置的示意图;
图3是显示根据本发明一实施例所述的网络装置示例的方块图;
图4是显示根据本发明一实施例所述的新的服务器配置的方块图;
图5是显示根据本发明一实施例所述的服务器系统中用以诊断监测的简化流程,特别是使用于如图4中所述的新的服务器配置的的一个或者多个装置;以及
图6是显示根据本发明另一实施例所述的服务器系统中用以诊断监测的简化流程。
【符号说明】
100~示意图
105~数据中心
110~服务器机柜
115~服务器
116~机柜管理控制器(RMC)
120~中央处理器(CPU)
125~基板管理控制器(BMC)
130~网络装置
135~感应器
140~硬件存储装置
145~管理员
150~网络
201、202~已知服务器配置
205~平台路径控制器
210~物理层装置
215~网络连接器
220~网络接口控制器/特殊应用集成电路装置
300~网络装置
310~网络接口
320~处理器
330~服务控制器
340~存储器
342~操作系统
344~诊断监控程序/服务
345~数据结构
350~总线
400~服务器配置
500、600~流程图
505~540、605~640~步骤流程
具体实施方式
下文公开本发明各个实施例,并配合附图,作详细说明如下。本领域技术人员可利用这些实施例或其他实施例所描述的细节及其他可利用的元件以及配置,在不离开本发明的精神与范围之下以实施发明。
如前所述,数据中心可设置包括各种硬件以及软件元件(例如微处理器、开关、路由器、存储装置、存储适配器、存储器模块、电源供应器、风扇等等)的数百甚至数千个服务器或者服务器系统。这些服务器(以及硬件/软件元件)通常用以构成复杂的网络(例如网络的骨架等等),并可提供多个应用程序和/或平台(例如网络服务器、邮件服务器、数据库服务器等等)。一般而言,在每个数据中心内,多个服务器设置在一个或者多个实体机壳或者机柜(通常被称为服务器机柜)中。
举例来说,图1是显示根据本发明一实施例所述的数据中心105的示意图100。数据中心105包括多个服务器机柜110,其中每个服务器机柜110包括一个或者多个如同服务器115的服务器。如图所示,位于每个服务器机柜110中的服务器通常通过机柜管理控制器(rack management controller,RMC)116(例如位于一服务器网络中)进行管理。此外,服务器机柜110中的机柜管理控制器116可包括一独立的服务器或者控制装置。
服务器115特别包括各种元件,例如一个或者多个中央处理器120(centralprocessing unit,CPU)、服务微控制器模块或者装置、感应器135、以及硬件存储装置140。服务微控制器模块或者装置包括基板管理控制器125(baseboard managementcontroller,BMC))以及一个或者多个网络装置130(例如PCIe(Peripheral ComponentInterconnect Express)扩充卡(add-on card)、PCI仲介承载板(Mezzanine Card)等等)。可以理解的是,前述的服务器115仅作为描述以及讨论的目的,并非用以限制本发明。此外,本领域技术人员也可理解本发明更可包括或者不包括其它不同的硬件和/或软件元件(未显示)。
中央处理器120可包括多个内核,并可作为服务器115的主要处理器。此外,在此所述的基板管理控制器125和/或网络装置130可独立操作在中央处理器120外。举例来说,基板管理控制器125可独立地与特定服务硬件(例如感应器135)进行通信,并监控中央服务器的状态或者参数。网络装置130也可读立操作在中央处理器120外,并可与基板管理控制器125进行通信。
基板管理控制器125可操作性地包括嵌于每个服务器的主机板上的专用微控制器(微处理器)(在此即为服务器115),以及用以管理各种服务器操作以及监控服务器的状况。举例来说,基板管理控制器125可提供介于系统管理软件以及平台硬件之间的接口。本领域技术人员皆可了解本发明中所述的接口可以为通信频道或者通信介质。
此外,基板管理控制器125可构成一智能平台管理接口(Intelligent PlatformManagement Interface,IPMI)的一部分,用以代表系统监控以及事件恢复的标准。上述标准定义一使用共同讯息的接口,用以存取服务器中可管理的功能。智能平台管理接口特别包括预设指令,用以读取温度、电压、风扇速度、机柜防盗(chassis intrusion)、以及其它参数。系统事件日志、硬件式看门狗(hardware watchdog)、以及功率控制也可通过智能平台管理接口进行存取,并由基板管理控制器125提供。一般而言,服务器主机将智能平台管理接口讯息通过LPC(Low Pin Count)总线转移至基板管理控制器,以及一些装置通道建立在LPC总线上以作为转移讯息的用途(例如键盘控制器规格(Keyboard Controller Style,KCS)接口、字组(Block Transfer)接口等)。基板管理控制器125可管理智能平台管理接口的监测以及控制维护功能(例如电源周期、警示信号的发布等等)。此外,基板管理控制器125可提供其他功能,例如包括SuperIO、SOL(Serial-over-LAN)、系统基本输入/输出系统(BIOS)检修、视频图像(例如视频图像适配器(Video Graphics Adapter,VGA),用以嵌于基板管理控制器125中以显示输出)、以及远端管理。
关于远端管理,可理解的是由于系统以及元件的数量众多,使得数据中心的管理(例如监控、维修等)变得困难。因此,基板管理控制器125可通过网络将每个服务器的远端管理提供给管理员。值得注意的是,基板管理控制器125通常与机柜管理控制器116同时运作以藉由一个或者多个管理员提供远端管理。如图所示,远端管理通过网络150提供给管理员145。管理员145通常通过网络150利用远端管理控制协议(Remote Management ControlProtocol,RMCP)与机柜管理控制器116和/或基板管理控制器125进行通信。通过上述的方式,机柜管理控制器116和/或基板管理控制器125可通过网络150接收相应于对应服务器115和/或监控感应器135的数据或者状态的命令和/或请求,并通过网络150传送警示信号(例如当监控参数超过预设限制时)给管理员145。
图2A、图2B分别显示已知服务器配置201、202的示意图。
如图所示,服务器配置201包括通过LPC总线或者接口耦接至一平台路径控制器205(包括在系统单芯片(System on Chip,SoC)中)的基板管理控制器125。
平台路径控制器205包括嵌入式链结层电路,又称为介质访问控制器。本领域技术人员可以理解的是,介质访问控制器或者介质访问控制器装置为用以控制网络介质或者网络接口的存取以及在网络介质或者网络接口上进行通信的电子电路和/或软件模块。平台路径控制器205亦通过一管理数据输入/输出(Management Data Input/Output,MDIO)接口(有时亦被称为时序管理接口(Serial Management Interface,SMI)或者介质独立接口管理(Media Independent Interface Managememt,MIIM))以及一KR/KR1/KR2/KR4接口(亦被称为以太网络基准)连接至一外部物理层装置(例如收发器等)。反之,物理层装置210通过一使用以太网络的大带宽接口连接至网络连接器215(例如用以提供服务器数据通信)。值得注意的是,在服务器配置201中物理层装置210为用以在平台路径控制器205以及网络连接器215之间交换数据的外部装置。此外,本发明所使用的”网络连接器”一词以及作为网络连接器的网络连接器215可包括连接器、网络缆线、和/或可提供相同功能的电路。
值得注意的是,如图所示,平台路径控制器205亦通过内部整合电路接口或者通信频道连接至网络连接器215。本领域技术人员可以理解的是内部整合电路接口提供缆线诊断协议,例如在一光纤收发模块上提供I2C EEPROM地址(A0,A2)以用于诊断的SFF-8472。
服务器配置202类似于服务器配置201,用以于基板管理控制器125以及平台路径控制器205之间提供一LPC接口。然而,服务器配置202使用一网络接口控制器(NetworkInterface Controller,NIC)/特殊应用集成电路(Application-Specific IntegratedCircuit,ASIC)装置220来传输数据,而不使用如服务器配置201中所示的嵌入式介质访问控制器电路以及独立物理层装置210。因此,平台路径控制器205通过单一PCIe接口连接至网络接口控制器/特殊应用集成电路装置220。网络接口控制器/特殊应用集成电路装置220类似于物理层装置210,用以通过使用以太网络的接口连接至网络连接器215。此外,网络接口控制器/特殊应用集成电路装置220更可通过内部整合电路接口连接至网络连接器215。
总而言之,已知服务器配置201、202将诊断监控限制于服务器115的各种硬件/软件元件之间。具体而言,基板管理控制器125仅通过LPC接口连接至平台路径控制器205,这将限制基板管理控制器125的网络监控功能。因此,当潜在的网络问题成为服务器115中的根本原因或者根本来源时,可将其归咎于任何数量的装置。诊断的动作(例如辨识潜在网络问题的根本原因)将因为数据中心内大量的服务器、系统、以及元件而大量增加或者加倍。
图3是显示根据本发明一实施例所述使用诊断监控技术的网络装置300的方块图。举例来说,装置300可包括任何电子装置,例如服务器、计算机、智能手机、平板计算机、其它电子装置等。装置300可包括一个或者多个网络接口310(例如有线、无线、LPC(Low PinCount)、管理数据输入/输出(MDIO)、内部整合电路、使用以太网络的接口等等)、至少一处理器320、至少一服务控制器330、以及一存储器340,上述每个元件可通过至少一总线350互相连接。
网络接口310包含机械、电子、以及信号电路,用以通过各种媒介传递数据。网络接口310可用以传输和/或接收使用各种不同通讯协议的数据。存储器340包括多个由处理器320、服务控制器330、和/或网络接口310所定址的存储位置。存储器340存储与本发明实施例有关的软件程序以及数据结构345(data structures)。值得注意的是,某些装置可能具有有限的存储器或者不具有存储器(例如除了存储操作在装置上的程序/程序以及相关的快取外,并不包含其它存储器)。
处理器320和/或服务控制器330可包括硬件元件或者硬件逻辑,用以执行软件程序以及处理数据架构345。操作系统342的一部分通常常驻于存储器340中,并通过处理器320/服务控制器330执行,用以功能性地组织装置,除了通过软件程序所提供的调用操作和/或装置上所执行的服务之外。这些软件程序和/或服务可包括诊断监控程序/服务344。当程序/服务344出现于集中式存储器时,使得提供给程序/服务344的可选择的示例执行程序可操作在网络接口310中(例如通过物理层和/或介质访问控制器电路或者装置)。
其它处理器或者存储器类型(包括各种计算机可读介质)可用以存储以及执行关于本发明所述的诊断技术的程序指令对本领域技术人员而言为显而易见的。此外,尽管本发明已揭示各种程序,但本领域技术人员可明确地联想到各种程序可实施为用以根据本发明所述的技术来进行操作(例如根据类似程序的功能来进行操作)的各种模块。以及,尽管本发明所揭示的一些程序为单独操作,但本领域技术人员可理解上述的程序可为其它处理程序中的子程序(routine)或者模块。举例来说,本发明所述的技术可藉由硬件、软件、和/或固件(例如根据本发明一实施例所述的诊断监控程序344),例如包括通过处理器320和/或服务控制器330(或者接口310的独立处理器)所执行的计算机可执行指令,以执行对应于本发明所述的技术的功能。
图4是显示根据本发明一实施例所述的新服务器配置400的方块图。服务器配置400提供本发明所述的诊断监控技术(例如诊断监控程序344)。如前所述,已知服务器配置201、202将诊断监控限制于对应的服务器中。然而,可以理解的是现在的服务器越来越多提供与图2A类似的服务器配置,例如包括具有嵌入式介质访问控制器电路/软件的平台路径控制器以及负责处理服务器或者网络流量的外部物理层装置。
新的服务器配置400提供与基板管理控制器125、物理层装置210、以及网络连接器215连接之内部整合电路网络接口。在新的服务器配置400中,基板管理控制器125可对每个物理层装置210以及网络连接器215执行诊断监控以检测服务器115中潜在的网络问题。通过上述的方式,基板管理控制器125可快速地辨识出潜在网络问题的根本原因,并回报该网络问题给管理员。在此基板管理控制器125通过网络150回报给管理员145。此外,对内部整合电路接口而言,新的服务器配置400亦在平台路径控制器205(例如介质访问控制器电路)以及物理层210之间配置一以太网络接口(例如KR/KR1/KR2/KR4等等)。
在操作上,新的服务器配置400提供额外的基板管理控制器诊断功能。具体而言,基板管理控制器125可通过新的服务器配置400中之内部整合电路接口控制以及监控物理层装置210以及网络连接器125。此外,基板管理控制器125更可接收和/或定义阈值条件,并通过比较监控的网络参数以及阈值条件以判断潜在的网络问题、错误、故障等等。在一些实施例中,基板管理控制器125更可调整上述阈值条件(例如根据管理员145的更新、机柜管理控制器116的更新、服务器条件的历史纪录等等)。较佳的是,基板管理控制器125传送监控的网络参数(包括警示、故障、错误等等)至机柜管理控制器116。反之,机柜管理控制器116可提供管理工具给管理员145以简单且有效的方式通过网络150排除潜在网络问题。
图5是显示根据本发明一实施例所述的服务器系统中用以诊断监测的简化流程500,特别使用于如图4中所述的新的服务器配置中的一个或者多个装置(例如基板管理控制器125和/或机柜管理控制器116)。
图5起始于步骤505,并进入步骤510,启动服务器(例如服务器115)。一旦启动服务器,服务器中的基板管理控制器(例如基板管理控制器125)初始化物理层装置(例如物理层装置210)(步骤515)。举例来说,基板管理控制器可利用例如新的服务器配置400中所示之内部整合电路接口来初始化物理层装置。
在步骤520以及525,处理流程500等到物理层装置初始化后,进入步骤530,如前所述,基板管理控制器可存取物理层装置和/或网络连接器/网络电缆。举例来说,基板管理控制器可监控物理层装置以及网络连接器/网络电缆的各种网络条件,并执行前述的一个或者多个诊断程序。
处理流程500接着进入步骤535,基板管理控制器回报物理层装置的信息(例如状态)以及网络连接器/网络电缆信息至机柜管理控制器。一般而言,机柜管理控制器可搜集和/或集结服务器机柜中对应至不同服务器的每个基板管理控制器的回报。此外,如前所述,机柜管理控制器(与基板管理控制器结合)可通过通讯网络(例如网络150)提供管理工具给管理员。上述管理工具可用以简单且有效率地监控、辨识、以及排除潜在的网络问题。
处理流程500结束于步骤540,但也可持续初始化物理层装置(步骤515)和/或监控物理层装置和/或网络连接器/网络电缆(步骤530)。
图6是显示根据本发明另一实施例所述的服务器系统中用以诊断监测的简化流程600。
处理流程600起始于步骤605,并进入步骤610,其中上述的步骤的细节如前所述,在服务器内的基板管理控制器、物理层装置、以及至少一网络连接器之间建立一内部整合电路通信频道。举例来说,上述之内部整合电路通信频道是显示在新的服务器配置400中。
处理流程600接着进入步骤615,基板管理控制器配置或者初始化介于物理层装置以及介质访问控制器之间的网络接口。较佳的是,基板管理控制器配置网络接口以作为以太网络的10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的一个。此外,基板管理控制器可使用基板自动协商协议(backplane auto-negotiationprotocol)来执行上述的配置或者初始化。
基板管理控制器更可接收一个或者多个阈值条件,用以定义警示、故障、错误等等(步骤620)。举例来说,机柜管理控制器(例如机柜管理控制器116)可传送上述的阈值条件至服务器机柜内对应于每个服务器的每个基板管理控制器。每个基板管理控制器更监控物理层装置的状态或者网络连接器/网络电缆的状态,并在步骤625中判断上述的状态是否指示一特定的网络状况,例如警示、故障、错误等等。举例来说,基板管理控制器可监控对应至物理层装置和/或网络连接器/网络电缆的状态的参数,并比较上述参数以及阈值条件以判断网络状况是否存在。较佳的是,基板管理控制器通过内部整合电路通信频道监控物理层装置以及网络连接器/网络电缆的参数。在一些实施例中,基板管理控制器可使用数字诊断监测接口协议(例如SFF-8472)。此外,机柜管理控制器可提供更新过后的阈值条件至基板管理控制器以继续后续的监控。
基板管理控制器更可传输警示信号至机柜管理控制器以指示发生在服务器中物理层装置或者网络连接器/网络电缆中的警示、故障、错误等等(步骤630)。此外,如前所述,机柜管理控制器更可提供警示信号至远端管理员以使用各种管理工具(步骤635)。上述管理工具更可用以协助网络管理员辨识、排除、以及定址潜在的网络问题。
处理流程结束于步骤640,但也可返回步骤625,基板管理控制器监控以及判断物理层装置或者网络连接器/网络电缆中的状态。
值得注意的是,处理流程500、600中的某些步骤为可选择的,以及第5、6图所示的步骤仅为示范实施例。某些其它步骤可包括于或者排除于处理流程中。此外,本发明的步骤的特定顺序仅为示范实施例,在不脱离本发明实施例的范围内可对步骤进行适当的调整。以及尽管处理流程500、600为独立执行,但每个处理流程中的某些步骤也可并入另一处理流程中,且上述处理流程并不代表其为互斥的。
本发明提供一种适用于数据中心的改良诊断监控,特别有关于通过服务控制器经由对应的服务器中之内部整合电路接口或者通信频道服务控制器(基板管理控制器)来执行的改良诊断监控。这些改良的诊断监控具体上通过利用服务器中的独立物理层装置执行的程序来提供新的硬件以及软件配置。总而言之,改良的诊断监控技术提供数据中心内与每个服务器的特定硬件装置以及软件模块相关的有价值的信息,并提升分析潜在网络问题的根本原因之效率。
上述的实施例以足够的细节叙述使本领域技术人员能藉由上述的描述实施本发明所公开的系统以及方法,以及必须了解的是,在不脱离本发明的精神以及范围内,当可做些许更动与润饰。举例来说,本发明的实施例已显示以及描述对应服务器中的特定服务控制器(例如基板管理控制器)。然而上述的实施例并非用以限制本发明的实施,并可与其它数量的装置、控制器、处理器等等一并使用。
前面的描述已指向具体的实施例。然而,显而易见的是可对所描述的实施例做出其他变化和修改以实现它们的一部分或全部优势。举例来说,可明确地预期的是本发明特定实施的元件、步骤和/或程序在不脱离本发明所公开的范围的情况下可被替换地包括(或者甚至排除)于其它实施中。此外,本发明所描述的元件和/或单元能够被实施为存储于有形(非暂态)计算机可读介质(例如,盘/CD/RAM/EEPROM等等)中的、具有在计算机、硬件、固件或它们的组合中执行的程序指令的软件。此外,本发明的方法所描述的各种功能以及技术可通过存储或者其它来自计算机可存取介质的计算机可执行指令执行。上述指令可包括,例如包括,使通用计算机、专用计算机、或专用处理设备执行某一功能或某组功能的指令和数据。一部分之计算机资源可通过网络进行存取。计算机可执行指令可为,例如二进制代码、中介格式指令(例如组合语言)、固件、或者原始程序代码。计算机可读介质可用以存储指令、所使用的信息、和/或执行方法期间所建立的信息,而前述实施例可包括磁碟或者光盘、快闪存储器、具有非易失性存储器的USB装置、网络存储装置等。此外,根据本发明所公开的装置可包括硬件、固件和/或软件、以及可为各种之外型规格。上述外型规格的典型示例包括膝上型计算机、智能手机、小规格的个人计算机、个人数字助理等。本发明所述的功能也可被具体实施于周边装置或者外接卡中。上述的功能也可通过其它实施例执行于不同芯片上的电路板或者执行于单一装置的不同程序中。指令、用以传输上述指令的媒介、用以执行指令的计算机资源、以及用以提供上述计算机资源的其它架构为提供本发明实施例所述的功能的手段。本发明的描述仅作为示范实施例,但并非用以限制其它实施例的范围。因此,本领域技术人员亦能够理解不脱离本发明的精神和范围的等效构造可在不脱离本发明的精神和范围内作任意的更动、替代与润饰。

Claims (10)

1.一种管理方法,包括:
通过基板管理控制器监控服务器中的物理层装置以及与上述物理层装置连接的至少一网络连接器,其中上述物理层装置用以在至少一介质访问控制器以及上述至少一网络连接器之间交换数据;
通过上述基板管理控制器判断上述物理层装置的状态或者上述至少一网络连接器的状态,以指示警示或者故障,其中,通过上述基板管理控制器接收一个或者多个阈值条件,上述阈值条件用以定义上述警示以及上述故障;
通过上述基板管理控制器传输对应于上述警示或者上述故障的警示信号至机柜管理控制器,以及
通过上述机柜管理控制器经由通信网络提供多个管理工具给管理员以远端排除上述警示信号。
2.如权利要求1所述的管理方法,还包括:
在上述基板管理控制器、上述物理层装置以及上述至少一网络连接器之间建立内部整合电路通信频道;
通过上述基板管理控制器经由上述内部整合电路通信频道初始化上述物理层装置,以与以太网络中10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个中的上述至少一介质访问控制器进行通信;以及
其中判断上述状态的步骤还包括:
通过上述内部整合电路通信频道判断上述物理层装置的上述状态或者上述至少一网络连接器的上述状态。
3.如权利要求1所述的管理方法,还包括:
通过基板管理控制器利用基板自动协商协议在上述物理层装置以及上述至少一介质访问控制器之间配置网络接口;
通过基板管理控制器在上述物理层装置以及上述至少一介质访问控制器之间配置上述网络接口以作为以太网络的10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个。
4.如权利要求1所述的管理方法,其中判断上述状态的步骤还包括:
利用数字诊断检测接口协议判断上述物理层装置的上述状态或者上述至少一网络连接器的上述状态;
通过上述基板管理控制器自上述机柜管理控制器接收一个或者多个更新后阈值条件以定义上述警示以及上述故障;以及
其中判断上述物理层装置的上述状态或者上述网络连接器的上述状态的步骤还包括:
判断对应至上述物理层装置的上述状态或者上述网络连接器的上述状态的一个或者多个网络参数是否超过上述一个或者多个更新后阈值条件。
5.如权利要求1所述的管理方法,其中判断上述状态的步骤还包括:
判断对应至上述物理层装置的上述状态或者上述网络连接器的上述状态的一个或者多个网络参数是否超过上述一个或者多个阈值条件;以及
其中上述服务器为第一服务器以及上述机柜管理控制器为第二服务器,以及上述第一服务器以及上述第二服务器设置在共享服务器机柜上。
6.一种网络装置,包括:
一个或者多个网络接口,用以与上述网络装置中的物理层装置进行通信;
处理器,耦接至上述网络接口,以及适用于执行一个或者多个计算机程序;以及
存储器,用以存储可由上述处理器执行的多个计算机程序,当上述多个计算机程序通过上述处理器执行时,使得上述处理器执行以下操作:
通过基板管理控制器监控上述网络装置中的物理层装置以及与上述物理层装置连接的至少一网络连接器,其中上述物理层装置用以在至少一介质访问控制器以及上述至少一网络连接器之间交换数据;
通过基板管理控制器判断上述物理层装置的状态或者上述至少一网络连接器的状态以指示警示或者故障,其中,接收一个或者多个阈值条件,上述阈值条件用以定义上述警示以及上述故障;
通过基板管理控制器传输对应于上述警示或者上述故障的警示信号至机柜管理控制器,使得所述机柜管理控制器经由通信网络提供多个管理工具给管理员以远端排除上述警示信号。
7.如权利要求6所述的网络装置,其中,当上述多个计算机程序通过上述处理器执行时,还使得上述处理器执行以下操作:
通过上述基板管理控制器经由内部整合电路通信频道初始化以太网络中10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个中的上述物理层装置;
通过基板管理控制器利用基板自动协商协议在上述物理层装置以及上述至少一介质访问控制器之间配置网络接口;
通过基板管理控制器在上述物理层装置以及上述至少一介质访问控制器之间配置上述网络接口以作为以太网络中10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个。
8.如权利要求6所述的网络装置,其中上述一个或者多个网络接口包括内部整合电路通信频道,用以在上述网络装置以及上述物理层装置、上述至少一网络连接器之间进行数据传递,判断上述物理层装置的状态或者上述至少一网络连接器的状态的操作包括:
经由上述内部整合电路通信频道判断上述物理层装置的上述状态或者上述至少一网络连接器的上述状态。
9.一种非暂态计算机可读介质,其上存储有计算机程序,当上述计算机程序通过处理器执行时,使得上述处理器执行以下操作:
通过基板管理控制器监控网络装置中的物理层装置以及与上述物理层装置连接的至少一网络连接器,其中上述物理层装置用以在至少一介质访问控制器以及上述至少一网络连接器之间交换数据;
通过基板管理控制器判断上述物理层装置的状态或者上述至少一网络连接器的状态以指示警示或者故障,其中,接收一个或者多个阈值条件,上述阈值条件用以定义上述警示以及上述故障;
通过基板管理控制器传输对应于上述警示或者上述故障的警示信号至机柜管理控制器,使得所述机柜管理控制器经由通信网络提供多个管理工具给管理员以远端排除上述警示信号。
10.如权利要求9所述的非暂态计算机可读介质,其中上述操作还包括:
通过基板管理控制器通过内部整合电路通信频道初始化以太网络中10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个中的上述物理层装置;
通过基板管理控制器利用基板自动协商协议在上述物理层装置以及上述至少一介质访问控制器之间配置网络接口;
通过基板管理控制器在上述物理层装置以及上述至少一介质访问控制器之间配置上述网络接口以作为以太网络中10GBASE-KR/25GBASE-KR1/50GBASE-KR2/40GBASE-KR4/100GBASE-KR4模式的至少一个。
CN201610044165.8A 2015-10-14 2016-01-22 管理方法、网络装置以及非暂态计算机可读介质 Active CN106603265B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/883,161 2015-10-14
US14/883,161 US10333771B2 (en) 2015-10-14 2015-10-14 Diagnostic monitoring techniques for server systems

Publications (2)

Publication Number Publication Date
CN106603265A CN106603265A (zh) 2017-04-26
CN106603265B true CN106603265B (zh) 2020-06-09

Family

ID=58526062

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610044165.8A Active CN106603265B (zh) 2015-10-14 2016-01-22 管理方法、网络装置以及非暂态计算机可读介质

Country Status (3)

Country Link
US (1) US10333771B2 (zh)
CN (1) CN106603265B (zh)
TW (1) TWI618380B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI587128B (zh) * 2016-05-11 2017-06-11 神雲科技股份有限公司 用於電腦裝置的錯誤狀態資料自動提供方法
US10582636B2 (en) * 2017-08-07 2020-03-03 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Server having a dual-mode serial bus port enabling selective access to a baseboard management controller
JP7007570B2 (ja) * 2017-12-27 2022-01-24 株式会社ソシオネクスト 処理装置、半導体集積回路及び状態監視方法
US10860311B2 (en) * 2018-06-13 2020-12-08 Dell Products, L.P. Method and apparatus for drift management in clustered environments
TWI689811B (zh) * 2018-08-01 2020-04-01 英業達股份有限公司 週期性事件紀錄方法
CN109189640A (zh) * 2018-08-24 2019-01-11 平安科技(深圳)有限公司 服务器的监控方法、装置、计算机设备及存储介质
US11119876B2 (en) * 2018-10-09 2021-09-14 Super Micro Computer, Inc. Device and method for testing computer system
TWI701594B (zh) * 2018-12-05 2020-08-11 英業達股份有限公司 遠端硬體診斷系統與診斷方法
TWI685740B (zh) * 2018-12-28 2020-02-21 營邦企業股份有限公司 運用於資料中心的機櫃異常狀態的遠端排除方法(一)
TWI685736B (zh) * 2018-12-28 2020-02-21 營邦企業股份有限公司 運用於資料中心的機櫃異常狀態的遠端排除方法(二)
CN111414274A (zh) * 2019-01-04 2020-07-14 营邦企业股份有限公司 运用于数据中心的机柜异常状态的远端排除方法
US10842041B2 (en) 2019-03-22 2020-11-17 Aic Inc. Method for remotely clearing abnormal status of racks applied in data center
TWI715005B (zh) * 2019-04-08 2021-01-01 神雲科技股份有限公司 用於監控基板管理控制器之常駐程序的方法
RU2710288C1 (ru) * 2019-04-09 2019-12-25 ЭйАйСи ИНК. Способ удаленного сброса ненормального состояния стоек, применяемых в дата-центре
RU2711469C1 (ru) * 2019-04-09 2020-01-17 ЭйАйСи ИНК. Способ удаленного сброса ненормального состояния стоек, применяемых в дата-центре
RU2709677C1 (ru) * 2019-04-09 2019-12-19 ЭйАйСи ИНК. Способ удаленного сброса ненормального состояния стоек, применяемых в дата-центре
CN110752946B (zh) * 2019-10-16 2021-10-29 苏州浪潮智能科技有限公司 一种bmc网络的恢复方法、系统及装置
US11762747B2 (en) 2020-08-26 2023-09-19 Mellanox Technologies, Ltd. Network based debug
TWI767392B (zh) * 2020-11-04 2022-06-11 英業達股份有限公司 PCIe頻寬自動調配系統及方法
CN114691400A (zh) * 2020-12-31 2022-07-01 联想企业解决方案(新加坡)有限公司 故障处理方法及故障处理装置
TWI767773B (zh) 2021-06-30 2022-06-11 緯穎科技服務股份有限公司 入侵偵測裝置及其方法
CN116546234A (zh) * 2023-05-31 2023-08-04 广州融生信息技术有限公司 国产化视频服务器的故障处理方法、装置、服务器及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793238A (zh) * 2012-10-31 2014-05-14 英业达科技有限公司 机柜与其同时更新多个基本输入输出系统的方法
CN103853636A (zh) * 2012-11-30 2014-06-11 英业达科技有限公司 机柜服务器系统及其检测方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI437426B (zh) * 2011-07-08 2014-05-11 Quanta Comp Inc 伺服器機櫃系統
CN103138971B (zh) * 2011-11-28 2016-06-01 英业达科技有限公司 服务器机柜系统
TW201325137A (zh) 2011-12-05 2013-06-16 Hon Hai Prec Ind Co Ltd 數據中心伺服器穩定性測試裝置及測試方法
CN103777734A (zh) * 2012-10-25 2014-05-07 英业达科技有限公司 机柜式服务器系统与其操作方法
CN103902433A (zh) 2012-12-29 2014-07-02 鸿富锦精密工业(深圳)有限公司 机箱状态监控系统
US9582010B2 (en) 2013-03-14 2017-02-28 Rackspace Us, Inc. System and method of rack management
TWI597139B (zh) 2014-02-18 2017-09-01 廣達電腦股份有限公司 自走式機器人、資料中心及資料中心之維修方法
US10015023B2 (en) * 2014-09-08 2018-07-03 Quanta Computer Inc. High-bandwidth chassis and rack management by VLAN
US20160239370A1 (en) * 2015-02-12 2016-08-18 Aic Inc. Rack having automatic recovery function and automatic recovery method for the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793238A (zh) * 2012-10-31 2014-05-14 英业达科技有限公司 机柜与其同时更新多个基本输入输出系统的方法
CN103853636A (zh) * 2012-11-30 2014-06-11 英业达科技有限公司 机柜服务器系统及其检测方法

Also Published As

Publication number Publication date
US20170111215A1 (en) 2017-04-20
US10333771B2 (en) 2019-06-25
TWI618380B (zh) 2018-03-11
TW201714432A (zh) 2017-04-16
CN106603265A (zh) 2017-04-26

Similar Documents

Publication Publication Date Title
CN106603265B (zh) 管理方法、网络装置以及非暂态计算机可读介质
US9619243B2 (en) Synchronous BMC configuration and operation within cluster of BMC
TWI531907B (zh) 基板管理系統架構
US11210172B2 (en) System and method for information handling system boot status and error data capture and analysis
US20170083457A1 (en) Management of secured storage devices in an information handling system
US10127170B2 (en) High density serial over LAN management system
US10127095B2 (en) Seamless automatic recovery of a switch device
CN104639380A (zh) 服务器监控方法
US9898435B2 (en) Aggregate baseboard management controller (BMC) controller
US11411753B2 (en) Adding network controller sideband interface (NC-SI) sideband and management to a high power consumption device
US20160098336A1 (en) Methods and systems for dynamic retimer programming
US9804980B2 (en) System management through direct communication between system management controllers
CN106502814B (zh) 一种记录pcie设备错误信息的方法及装置
US20180267870A1 (en) Management node failover for high reliability systems
CN106557405A (zh) 服务器机柜监控方法
US9779037B2 (en) Establishing connectivity of modular nodes in a pre-boot environment
CN113918383A (zh) 核心板复位方法、装置、设备、存储介质以及程序产品
CN103092735A (zh) 节点状态更新方法
CN109032867A (zh) 一种故障诊断方法、装置及设备
US10795846B1 (en) Scalable NVMe storage management over system management bus
CN115599617A (zh) 总线检测方法、装置、服务器及电子设备
CN108959026A (zh) 一种精确监控raid卡的方法
US11989567B2 (en) Automatic systems devices rediscovery
US11743106B2 (en) Rapid appraisal of NIC status for high-availability servers
CN117648276A (zh) 带外管理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant