TWI794198B - 乙太網路固態硬碟系統及控制其頻寬的方法 - Google Patents

乙太網路固態硬碟系統及控制其頻寬的方法 Download PDF

Info

Publication number
TWI794198B
TWI794198B TW107100585A TW107100585A TWI794198B TW I794198 B TWI794198 B TW I794198B TW 107100585 A TW107100585 A TW 107100585A TW 107100585 A TW107100585 A TW 107100585A TW I794198 B TWI794198 B TW I794198B
Authority
TW
Taiwan
Prior art keywords
ethernet
bandwidth
ssd
solid
switch
Prior art date
Application number
TW107100585A
Other languages
English (en)
Other versions
TW201832536A (zh
Inventor
瑞姆達斯 P. 卡佳瑞
桑龐 保羅 歐拉利格
森 T. 凡恩
Original Assignee
南韓商三星電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 南韓商三星電子股份有限公司 filed Critical 南韓商三星電子股份有限公司
Publication of TW201832536A publication Critical patent/TW201832536A/zh
Application granted granted Critical
Publication of TWI794198B publication Critical patent/TWI794198B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/40—Bus structure
    • G06F13/4004—Coupling between buses
    • G06F13/4022—Coupling between buses using switching circuits, e.g. switching matrix, connection or expansion network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4282—Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4282—Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus
    • G06F13/4295—Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus using an embedded synchronisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0688—Non-volatile semiconductor memory arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40—Bus networks
    • H04L12/40052—High-speed IEEE 1394 serial bus
    • H04L12/40065—Bandwidth and channel allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0893—Assignment of logical groups to network elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0896—Bandwidth or capacity management, i.e. automatically increasing or decreasing capacities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5003—Managing SLA; Interaction between SLA and QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/70—Admission control; Resource allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/35—Switches specially adapted for specific applications
    • H04L49/351—Switches specially adapted for specific applications for local area network [LAN], e.g. Ethernet switches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/0024—Peripheral component interconnect [PCI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/0026—PCI express
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0894—Policy-based network configuration management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Small-Scale Networks (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Abstract

一種乙太網路固態硬碟(eSSD)系統包括多個乙太網路 固態硬碟、乙太網路開關、及底板管理控制器。乙太網路開關耦合至乙太網路固態硬碟中的每一者，且底板管理控制器耦合至乙太網路固態硬碟中的所述每一者並耦合至乙太網路開關。底板管理控制器控制乙太網路開關向每一乙太網路固態硬碟提供對應的預定頻寬，所述預定頻寬是基於在底板管理控制器的政策表中所儲存的乙太網路固態硬碟的頻寬資訊。所述至少一個預定頻寬可包括對應的乙太網路固態硬碟的預定進入頻寬及預定外出頻寬。所述至少一個預定頻寬可基於與對應的乙太網路固態硬碟相關聯的服務層級，且可自適應地基於對應的乙太網路固態硬碟的操作參數。

Description

乙太網路固態硬碟系統及控制其頻寬的方法
[相關申請案的交叉參考]
本專利申請案基於35 U.S.C.§119(e)主張於2017年2月23日提出申請的美國臨時專利申請案第62/462,901號的優先權，所述美國臨時專利申請案的揭露內容全文併入本案供參考。
本文所揭露的主題大體而言是有關於儲存系統且更具體而言是有關於一種管理與乙太網路固態硬碟系統相關聯的頻寬服務層級協議(SLA)的系統及方法。
乙太網路固態硬碟(ethernet Solid-State Drive，eSSD)使得一或多個遠端伺服器主機能夠以遠端直接附加儲存(Direct Attached Storage，rDAS)模式經由乙太網路連接至乙太網路固態硬碟。然而，傳統乙太網路固態硬碟儲存系統使得頻寬服務層級協議不容易應用於具有多個乙太網路固態硬碟的儲存系統中的特定乙太網路固態硬碟。
示例性實施例提供一種可包括至少一個乙太網路固態 硬碟、乙太網路開關、及控制器(例如底板管理控制器)的乙太網路固態硬碟系統。所述乙太網路開關可耦合至所述至少一個乙太網路固態硬碟；且所述控制器可耦合至所述至少一個乙太網路固態硬碟及所述乙太網路開關。所述控制器可控制所述乙太網路開關向所述至少一個乙太網路固態硬碟提供預定頻寬，其中所述預定頻寬可基於所述控制器的政策表中所儲存的所述至少一個乙太網路固態硬碟的頻寬資訊。在一個實施例中，所述至少一個乙太網路固態硬碟的每一所述預定頻寬可包括所述至少一個乙太網路固態硬碟的預定進入頻寬及預定外出頻寬。在一個實施例中，所述預定進入頻寬可與所述預定外出頻寬不同。在另一實施例中，所述預定頻寬可基於與所述至少一個乙太網路固態硬碟相關聯的服務層級。在又一實施例中，所述預定頻寬可自適應地基於所述至少一個乙太網路固態硬碟的操作參數。
示例性實施例可提供一種控制乙太網路固態硬碟(eSSD)系統的頻寬的方法，所述方法可包括：在控制器處接收多個乙太網路固態硬碟中的至少一個乙太網路固態硬碟的頻寬資訊；在所述控制器處儲存所接收的所述至少一個乙太網路固態硬碟的所述頻寬資訊；以及所述控制器針對所述至少一個乙太網路固態硬碟配置乙太網路開關的頻寬容量，其中所述乙太網路開關可耦合至所述至少一個乙太網路固態硬碟。在一個實施例中，所述至少一個乙太網路固態硬碟的頻寬容量可包括所述至少一個乙太網路固態硬碟的預定進入頻寬及預定外出頻寬。在一個實施例 中，所述預定進入頻寬可與所述預定外出頻寬不同。在一個實施例中，所述頻寬容量可基於與所述至少一個乙太網路固態硬碟相關聯的服務層級。在另一實施例中，所述頻寬容量可自適應地基於所述至少一個乙太網路固態硬碟的操作參數。
100:乙太網路固態硬碟控制平台/控制平台
101:乙太網路開關
102:底板管理控制器裝置
103:快速周邊組件互連開關
104:中平面
105、105a、105b、105n:乙太網路固態硬碟
106:上行鏈路乙太網路埠/上行鏈路埠
107:下行鏈路乙太網路埠/埠/下行鏈路埠
108:乙太網路埠
109、109a、109b、109c:政策表
110:乙太網路
111:快速周邊組件互連匯流排
112:系統管理匯流排
113:管理埠
150:遠端主機/主機
160:管理伺服器
300、400:過程
301、302、303、304、305、306、307、308、309、310、311、401、402、403、404、405、406、407、408、409:操作
在以下部分中，將參照圖中所示的示例性實施例來闡述本文所揭露主題的態樣，在圖中：圖1繪示根據本文所揭露主題的乙太網路固態硬碟控制平台。
圖2A至圖2C分別繪示根據本文所揭露主題的用於管理及/或施行乙太網路進入頻寬及外出頻寬的示例性政策表。
圖3繪示根據本文所揭露主題的用於對服務層級協議政策施行進行初始化的過程的示例性實施例的流程圖。
圖4繪示根據本文所揭露主題的用於監控乙太網路固態硬碟的狀態並基於乙太網路固態硬碟的狀態來修改政策表的過程的示例性實施例的流程圖。
在以下詳細說明中，陳述許多具體細節以提供對本揭露的透徹理解。然而，熟習此項技術者應理解，無需該些具體細節便可實踐所揭露的態樣。在其他實例中，未詳細闡述眾所習知的方法、程式、組件及電路以避免使本文所揭露的主題模糊不清。
在本說明書通篇中提及「一個實施例」或「實施例」時 意味著結合所述實施例所闡述的特定特徵、結構或特性可包括於本文所揭露的至少一個實施例中。因此，在本說明書通篇中各處出現的片語「在一個實施例中」或「在實施例中」抑或「根據一個實施例」(或具有相似含義的其他片語)可能未必皆指同一實施例。此外，在一或多個實施例中，特定特徵、結構或特性可以任何適當的方式進行組合。就此而言，本文所使用的用詞「示例性」意指「充當例子、實例、或說明」。本文中被闡述為「示例性」的任何實施例並非被視為相對於其他實施例必定較佳或具有優勢。另外，端視本文中的論述的上下文而定，單數用語可包括對應的複數形式且複數用語可包括對應的單數形式。應進一步注意，本文中所示出及論述的各種圖(包括組件圖)僅用於說明目的，且並非按比例繪製。相似地，示出各種波形圖及時序圖僅用於說明目的。舉例而言，為清晰起見，一些元件的尺寸可相對於其他元件誇大。此外，若認為適當，則會在各圖中重複使用參考編號以指示對應及/或類似的元件。
本文所使用的術語僅用於闡述特定示例性實施例，而並非旨在限制所主張的主題。除非上下文中清楚地另外指明，否則本文所使用的單數形式「一(a、an)」及「所述(the)」旨在亦包括複數形式。更應理解，當在本說明書中使用用語「包括(comprises及/或comprising)」時，是指明所陳述特徵、整數、步驟、操作、元件、及/或組件的存在，但不排除一或多個其他特徵、整數、步驟、操作、元件、組件、及/或其群組的存在或添加。本文所使用 的用語「第一」、「第二」等用作位於名詞之前的名詞的標記，且除非明確界定為如此，否則不意味著任何類型的次序(例如，空間的、時間的、邏輯的等)。此外，可在二或更多個圖中使用相同的參考編號來指代具有相同或相似功能的部件、組件、區塊、電路、單元、或模組。然而，此類用法僅是出於說明簡潔及易於論述起見；而並非意味著此類組件或單元的構造或架構細節在所有實施例中皆相同，抑或此類共同參考的部件/模組是實作本文所揭露的特定實施例的教示內容的唯一方式。
除非另外定義，否則本文所使用的全部用語(包括技術用語及科學用語)的含義皆與本發明主題所屬技術領域中具有通常知識者所通常理解的含義相同。舉例而言，本文所使用的用語「mod」意指「模數(modulo)」。更應理解，用語(例如在常用字典中所定義的用語)應被解釋為具有與其在相關技術的上下文中的含義一致的含義，且除非本文中明確如此定義，否則不應將其解釋為具有理想化或過於正式的意義。
本文所使用的用語「模組」是指被配置成提供本文中結合模組所闡述的功能的軟體、韌體及/或硬體的任何組合。應用於本文所述的任何實作方式的用語「軟體」可被實施為套裝軟體(software package)、代碼、及/或指令集或指令。應用於本文所述的任何實作方式的用語「硬體」可例如單個地或以任何組合包括硬接線電路系統(hardwired circuitry)、可程式化電路系統(programmable circuitry)、狀態機電路系統(state-machine circuitry)、及/或儲存由可程式化電路系統執行的指令的韌體。模組可集體地或各別地實施為形成較大系統的一部分的軟體、韌體、及/或硬體，所述較大系統例如為但不限於積體電路(integrated circuit，IC)、系統晶片(system on-chip，SoC)等。
本文所揭露的主題提供一種自系統中的乙太網路固態硬碟的角度看由乙太網路固態硬碟控制平台以非侵入性方式施行一或多個頻寬服務層級協議的系統及技術。乙太網路固態硬碟控制平台中的底板管理控制器(baseboard management controller，BMC)裝置可針對連接至所述控制平台的一或多個乙太網路固態硬碟維護各種頻寬政策(bandwidth policies)。底板管理控制器裝置可將控制平台中的乙太網路開關程式化或配置成對連接至主機的上行鏈路埠及/或連接至乙太網路固態硬碟的下行鏈路埠進行速率限制。對於每一單獨的乙太網路固態硬碟的進入方向(主機寫入)與外出方向(主機讀取)，速率限制配置可不同。可因應於以下來設定乙太網路開關的速率限制配置：管理伺服器處的管理者所接收的命令及/或頻寬資訊；底板管理控制器裝置施行包含於底板管理控制器裝置內的一或多個政策；或者系統中的乙太網路固態硬碟中的一或多者的當前健康或狀態。本文所使用的用語「頻寬資訊」可包括與將應用於耦合至控制平台的各別乙太網路固態硬碟、一組乙太網路固態硬碟、及/或整個乙太網路固態硬碟池的進入頻寬及/或外出頻寬有關的資訊。
底板管理控制器裝置對存在於系統中的所有乙太網路 固態硬碟具有可見性，且可監控乙太網路固態硬碟的相應的參數及操作狀態，因此可實施及監控對於各別乙太網路固態硬碟、連接至系統的所有乙太網路固態硬碟的子集、及/或連接至系統的所有乙太網路固態硬碟而言最佳的智慧且複雜的政策。因此，底板管理控制器裝置無需管理系統中可能使用的不同固態硬碟的多種專屬機制，乃因底板管理控制器裝置藉由對乙太網路開關進行程式化或配置來施行系統的服務層級協議，藉此使得獨立於系統中的乙太網路固態硬碟進行服務層級協議頻寬管理。底板管理控制器裝置亦包括去往儲存管理伺服器的通訊路徑，儲存管理者可利用儲存管理伺服器來有效地管理系統的服務層級協議。
圖1繪示根據本文所揭露主題的乙太網路固態硬碟控制平台100。在一個實施例中，乙太網路固態硬碟控制平台100可包括乙太網路開關101、底板管理控制器裝置102、快速周邊組件互連(Peripheral Component Interconnect Express，PCIe)開關103、中平面(mid-plane)104、及一或多個乙太網路固態硬碟105。儘管在圖1中繪示僅一個乙太網路開關101及僅一個快速周邊組件互連開關103作為乙太網路固態硬碟控制平台100的一部分，然而應理解，多個乙太網路開關101及多個快速周邊組件互連開關103可為乙太網路固態硬碟控制平台100的一部分。另外，形成乙太網路固態硬碟控制平台100的組件可實施為單獨的組件或實施為單獨的模組。作為另一選擇，形成乙太網路固態硬碟控制平台100的組件中的二或更多者可彼此成一整體。
乙太網路固態硬碟控制平台100可實體地實施為其中可相對於控制平台100在本地安排有一或多個乙太網路固態硬碟105的底盤或機架。亦可相對於控制平台100在遠端定位有一或多個附加乙太網路固態硬碟105。在一個實施例中，控制平台100可包括24個乙太網路固態硬碟105。在另一實施例中，乙太網路固態硬碟控制平台100可包括48個乙太網路固態硬碟105。在再一實施例中，乙太網路固態硬碟控制平台100可包括任何數目個乙太網路固態硬碟105。
乙太網路開關101可包括多個上行鏈路乙太網路埠106，所述多個上行鏈路乙太網路埠106中的僅一個上行鏈路乙太網路埠106繪示於圖1中。上行鏈路埠106可將乙太網路開關101連接至一或多個遠端主機150，所述一或多個遠端主機150中的僅一個主機150被繪示出。乙太網路開關101亦可包括多個下行鏈路乙太網路埠107，所述多個下行鏈路乙太網路埠107中的僅一個埠107繪示於圖1中。下行鏈路埠107可藉由中平面104將乙太網路開關101連接至位於各別乙太網路固態硬碟105上的乙太網路埠108。在一個實施例中，每一乙太網路固態硬碟105可包括乙太網路埠108。乙太網路開關101可對上行鏈路乙太網路埠106及/或下行鏈路乙太網路埠107執行速率限制。速率限制可具有三個分量：封包或訊框排隊、排程、以及流量及擁塞控制。加權公平排隊(Weighted Fair Queueing，WFQ)速率限制分量可用於實作排隊的子系統。排程速率限制分量的一些例子包括加權循環法 (Weighted Round Robin，WRR)技術及調度循環法(Deficit Round Robin，DRR)技術。流量及擁塞控制速率限制分量可使用例如尾部丟棄(Tail Drop)技術及/或加權隨機早期丟棄(Weighted Random Early Discard，WRED)技術來實作。在一些實施例中，可使用早期擁塞通知(early congestion notification)技術來對通訊量進行流量控制。對於乙太網路鏈路而言，可使用暫停訊框及優先級流量控制(Priority Flow Control，PFC)標準技術。
在一個實施例中，底板管理控制器裝置102可位於作為乙太網路固態硬碟控制平台100的一部分的主開關板中。在另一實施例中，底板管理控制器裝置102與乙太網路開關101可彼此成一整體。
底板管理控制器裝置102可被配置成提供管理功能，例如每一相應的乙太網路固態硬碟105的探索、配置、操作狀態、及健康監控。在一個實施例中，底板管理控制器裝置102可包括一個或多個政策表109(policy table)，所述一個或多個政策表109可包含與以下管理功能(但不限於此)有關的資訊：每一相應的乙太網路固態硬碟105的探索、配置、操作狀態、及健康監控。底板管理控制器裝置102可使用政策表109來管理及/或施行已與乙太網路固態硬碟控制平台100相關聯的一或多個服務層級協議。在一個實施例中，服務層級協議中的一或多者可與底板管理控制器裝置102可施行的具體頻寬政策有關。在一個實施例中，頻寬政策可與各別乙太網路固態硬碟105有關。在另一實施例中， 頻寬政策可與形成和乙太網路固態硬碟控制平台100連接的所有乙太網路固態硬碟105的子集的一組乙太網路固態硬碟105有關。在又一實施例中，頻寬政策可與連接至乙太網路固態硬碟控制平台100的所有乙太網路固態硬碟105有關。
在乙太網路固態硬碟控制平台100的一個實施例中，在底板管理控制器裝置102與乙太網路固態硬碟105之間可能存在三個通訊路徑，所述通訊路徑可用於獲得與由底板管理控制器裝置102提供的管理功能有關的資訊。第一通訊路徑可位於整個乙太網路110上且經由乙太網路開關101。第二通訊路徑可位於快速周邊組件互連匯流排111上且經由快速周邊組件互連開關103及中平面104。第三通訊路徑可經由連接於底板管理控制器裝置102與乙太網路固態硬碟105之間的系統管理匯流排(System Management Bus，SMBus)112。底板管理控制器裝置102亦可具有管理埠113，由管理者(使用者)操作的管理伺服器160可經由管理埠113與底板管理控制器裝置102進行通訊並控制底板管理控制器裝置102。底板管理控制器裝置102可接收一或多個乙太網路固態硬碟105的頻寬資訊，所述頻寬資訊可用於形成一或多個頻寬政策。管理伺服器160可位於乙太網路固態硬碟控制平台100附近或遠端。
乙太網路開關101的連接至遠端主機150的上行鏈路埠106可為高頻寬鏈路。在一個實施例中，乙太網路開關101的上行鏈路埠106可包括多個40十億位元/秒的鏈路及/或100十億位元/ 秒的鏈路。各別乙太網路固態硬碟105通常可具有10十億位元/秒的乙太網路埠108及/或25十億位元/秒的乙太網路埠108。對於乙太網路開關101的上行鏈路埠106的更高頻寬而言，可對乙太網路固態硬碟控制平台100中的各別乙太網路固態硬碟105進行超額訂閱(oversubscribed)。此種頻寬的超額訂閱之所以為可能的，乃因一般而言並非所有乙太網路固態硬碟105同時為現用的(active)。特定乙太網路固態硬碟105所消耗的乙太網路頻寬的量取決於遠端主機150提交給所述乙太網路固態硬碟的工作量。
在一個實施例中，由遠端主機150提交的工作量可使用基於位於光纖通道上的快速非揮發性記憶體(Non-Volatile Memory Express over Fabrics，NVMe over Fabrics)規範的協定向乙太網路固態硬碟105發送讀取/寫入輸入/輸出(input/output，IO)命令。因此，乙太網路固態硬碟105在任何時間所消耗的頻寬量取決於已提交的輸入/輸出命令的數目以及該些命令的資料傳輸大小。對於主機寫入命令而言，乙太網路固態硬碟105將來自遠端主機150的使用者資料傳輸至乙太網路固態硬碟105的本地媒體，且為此會消耗乙太網路進入頻寬。對於主機讀取命令而言，乙太網路固態硬碟105將來自乙太網路固態硬碟105的本地媒體的使用者資料傳輸至遠端主機150，因而會消耗乙太網路外出頻寬。
每一乙太網路固態硬碟105可包括預定數目個命令提交佇列(submission queue，SQ)。乙太網路固態硬碟105可執行仲 裁以為佇列提供服務。在選擇提交佇列之後，乙太網路固態硬碟105自所選擇的提交佇列擷取下一個執行命令。作為命令執行的一部分，乙太網路固態硬碟105向遠端主機150執行所規定的資料傳輸或自遠端主機150執行所規定的資料傳輸。一旦資料傳輸已完成，則乙太網路固態硬碟105可向遠端主機150發送完成訊息。此時，乙太網路固態硬碟105返回至提交佇列仲裁，且以此類推。乙太網路固態硬碟105繼續循環經過對提交佇列進行仲裁的命令執行環，只要所述佇列中存在未決命令即可。
底板管理控制器裝置102可使用一或多個政策表109來管理及/或施行已與乙太網路固態硬碟控制平台100相關聯的一或多個服務層級協議。服務層級協議可與應用於控制平台100中的一或多個乙太網路固態硬碟105的具體頻寬政策有關。頻寬政策可基於一或多個態面，例如但不限於時間態面(日間時間、工作日等)、乙太網路固態硬碟操作參數、乙太網路固態硬碟功耗、快閃媒體技術、使用者訂閱率、成本利用率(即，工作日對假期或週末)、及/或服務提供者的促銷安排。藉由重要產品資料(Vital Product Data，VPD)讀取而自乙太網路固態硬碟獲得的資訊可在本地儲存於底板管理控制器裝置102處，並用於自適應地控制頻寬服務層級協議。在一個實施例中，乙太網路固態硬碟105的狀態及/或參數可由底板管理控制器裝置102使用在系統管理匯流排及/或快速周邊組件互連介面上運行的基於快速非揮發性記憶體管理介面(NVMe Management Interface，NVMe-MI)的協定來讀取。
圖2A至圖2C分別繪示根據本文所揭露主題的用於管理及/或施行乙太網路進入頻寬(B/W)及外出頻寬的示例性政策表。圖2A繪示多個乙太網路固態硬碟的乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議的示例性政策表109a，其中乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議對於表中的每一乙太網路固態硬碟而言為相同的。具體而言，每一乙太網路固態硬碟具有每秒5十億位元的進入頻寬服務層級協議以及每秒10十億位元的外出頻寬服務層級協議。圖2B繪示多個乙太網路固態硬碟的乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議的另一示例性政策表109b，其中乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議對於表中的每一乙太網路固態硬碟而言為不同的。圖2C繪示多個乙太網路固態硬碟的乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議的又一示例性政策表109c，其中乙太網路進入頻寬服務層級協議及外出頻寬服務層級協議對於表中的不同組乙太網路固態硬碟而言為不同的。具體而言，作為第一組的eSSD-0及eSSD-1兩者均具有每秒5十億位元的進入頻寬服務層級協議及每秒5十億位元的外出頻寬服務層級協議；而作為第二組的eSSD-2至eSSD-n分別具有每秒5十億位元的進入頻寬服務層級協議及每秒10十億位元的外出頻寬服務層級協議。
圖3繪示根據本文所揭露主題的用於對服務層級協議政策施行進行初始化的過程300的示例性實施例的流程圖。亦即， 過程300可為底板管理控制器在加電或系統複位時執行以識別系統中的乙太網路固態硬碟並對一或多個服務層級協議進行初始配置的過程。在301處，過程開始。在302處，底板管理控制器判斷是否已識別出系統中的所有乙太網路固態硬碟。若未識別出所有乙太網路固態硬碟，則流程繼續至303，在303中底板管理控制器經由乙太網路固態硬碟的快速非揮發性記憶體管理介面讀取重要產品資料。所述重要產品資料可包括但不限於共用標頭、產品資訊、多記錄資訊、內部使用資訊、底盤資訊區域、及板特定區域(board specific area)。在304處，底板管理控制器基於重要產品資料來識別乙太網路固態硬碟。在305處，底板管理控制器在本地儲存乙太網路固態硬碟的乙太網路固態硬碟參數。流程返回至302，直至已識別出平台中的所有乙太網路固態硬碟，且已在本地儲存與每一乙太網路固態硬碟對應的重要產品資料。
若在302處已識別出平台中的所有乙太網路固態硬碟，則流程繼續至306，在306中底板管理控制器判斷自政策管理表添加、修改還是刪除服務層級協議政策。若將添加服務層級協議政策，則流程繼續至307及310，在307及310中，向政策管理表中添加政策。若將修改服務層級協議政策，則流程繼續至308及310，在308及310中，在政策管理表中修改政策。若將刪除服務層級協議政策，則流程繼續至309及310，在309及310中，自服務層級協議政策管理表刪除政策。系統加電(power up)或系統複位(system reset)時政策變化的一些原因可能是因為一或多個新 的乙太網路固態硬碟可被添加至所述多個乙太網路固態硬碟105中，所述多個乙太網路固態硬碟105中先前存在的一或多個乙太網路固態硬碟可被移除，且所述多個乙太網路固態硬碟105中先前存在的一或多個乙太網路固態硬碟可變為不可操作的。事件(例如但不限於該些事件)可能會啟動不同的政策。另外，例如位元錯誤率(Bit Error Rate，BER)、操作溫度、儲存容量等乙太網路固態硬碟特性可隨著時間而改變，且因而導致需要進行政策改變。此外，可隨著時間對不同的主機及/或應用重新指派一或多個乙太網路固態硬碟105，此可導致需要進行政策改變。可能引起政策改變的又一例子可涉及在不同時間(例如，日間對夜間、或工作日對週末)應用的多個政策。
流程接著繼續至311，在311中基於在310處對政策表的更新來更新乙太網路開關101的配置。流程返回至302。若在306處未添加、修改或刪除任何服務層級協議政策，則流程返回(圖中未示出)至302。
圖4繪示根據本文所揭露主題的用於監控乙太網路固態硬碟的狀態並基於乙太網路固態硬碟的狀態來修改政策表的過程400的示例性實施例的流程圖。過程在401處開始。流程繼續至402，在402中底板管理控制器判斷是否已掃描了系統中的所有乙太網路固態硬碟的(健康)狀態。若未掃描所有乙太網路固態硬碟的(健康)狀態，則流程繼續至403，在403中使用例如快速非揮發性記憶體管理介面健康狀況輪詢來掃描尚未掃描的第一乙太 網路固態硬碟的(健康)狀態。在404處，底板管理控制器讀取乙太網路固態硬碟的智慧(SMART)/健康資訊日誌。在405處，底板管理控制器在本地儲存乙太網路固態硬碟的當前健康狀態。流程返回至402。
若在402處底板管理控制器已掃描了系統中的所有乙太網路固態硬碟的健康狀態，則流程繼續至406，在406中底板管理控制器判斷是否存在任一乙太網路固態硬碟的健康狀態的變化。可由底板管理控制器監控的乙太網路固態硬碟的健康狀態參數可包括但不限於，乙太網路固態硬碟內的資料結構、操作溫度、媒體完整性(即，位元錯誤率)、剩餘壽命、可用的備用容量、總容量、已使用的容量、自預定時間以來讀取/寫入的資料量、自預定時間以來做出響應的主機命令的數目、每日硬碟寫入量(drive writes per day，DWPD)、乙太網路固態硬碟控制器佔用時間、及任何專屬資訊。
若在406處未確定或偵測出任一乙太網路固態硬碟的健康狀態的改變，則流程返回至402。若在406處存在任一乙太網路固態硬碟的健康狀態的改變，則流程繼續至407，在407中底板管理控制器存取與受影響的乙太網路固態硬碟的健康狀態有關的政策表。在406處可能確定為需要政策變化的其他原因可包括：一或多個新的乙太網路固態硬碟可能被添加(即，熱插拔)至所述多個乙太網路固態硬碟105中，所述多個乙太網路固態硬碟105中先前存在的一或多個乙太網路固態硬碟可能被移除(即，熱插 拔)，且所述多個乙太網路固態硬碟105中先前存在的一或多個乙太網路固態硬碟可能已變為不可操作的。事件(例如但不限於該些事件)可使不同的政策變為現用的。另外，如所提及，例如位元錯誤率、操作溫度、儲存容量等乙太網路固態硬碟特性可隨著時間而改變，且因而導致需要進行政策改變。此外，可隨著時間對不同的主機及/或應用重新指派一或多個乙太網路固態硬碟105，此可導致需要進行政策改變。在406處可引起政策改變的又一例子可涉及在不同時間(例如，日間對夜間、或工作日對週末)應用的多個政策。
在408處，基於乙太網路固態硬碟的健康狀態的改變以及與乙太網路固態硬碟的健康狀態有關的政策表的內容來判斷是否應重新配置乙太網路開關。若不應重新配置乙太網路開關，流程返回至402。若應重新配置乙太網路開關，則流程繼續至409，在409中底板管理控制器將乙太網路開關重新程式化為更新的配置。
熟習此項技術者應認識到，可在各種各樣的應用中對本文所闡述的創新型概念進行修改及改變。因此，所主張的主題的範圍不應僅限於以上所論述的任何具體示例性教示內容，而是由以下申請專利範圍來界定。
100:乙太網路固態硬碟控制平台/控制平台
101:乙太網路開關
102:底板管理控制器裝置
103:快速周邊組件互連開關
104:中平面
105a、105b、105n:乙太網路固態硬碟
106:上行鏈路乙太網路埠/上行鏈路埠
107:下行鏈路乙太網路埠/埠/下行鏈路埠
108:乙太網路埠
109:政策表
110:乙太網路
111:快速周邊組件互連匯流排
112:系統管理匯流排
113:管理埠
150:遠端主機/主機
160:管理伺服器

Claims (7)

  1. 一種乙太網路固態硬碟系統，包括：至少一個乙太網路固態硬碟；乙太網路開關，耦合至所述至少一個乙太網路固態硬碟的乙太網路埠；以及控制器，耦合至所述至少一個乙太網路固態硬碟及所述乙太網路開關，其中所述控制器包括底板管理控制器，所述控制器用於：在所述控制器的政策資料結構中儲存政策表中的所述乙太網路固態硬碟的頻寬資訊；以及程式化所述乙太網路開關以向所述乙太網路固態硬碟透過所述乙太網路開關藉由速率限制使用者資料傳遞以提供預定頻寬，其中所述預定頻寬是基於與所述乙太網路固態硬碟相關聯的位元錯誤率及溫度；其中所述乙太網路開關用以透過所述乙太網路開關速率限制至所述乙太網路固態硬碟的使用者資料傳遞。
  2. 如申請專利範圍第1項所述的乙太網路固態硬碟系統，其中所述乙太網路固態硬碟的所述預定頻寬包括所述乙太網路固態硬碟的預定進入頻寬及預定外出頻寬。
  3. 如申請專利範圍第2項所述的乙太網路固態硬碟系統，其中所述預定頻寬是基於與所述乙太網路固態硬碟相關聯的服務層級。
  4. 如申請專利範圍第3項所述的乙太網路固態硬碟系統，其中所述預定頻寬是自適應地基於所述乙太網路固態硬碟的操作參數。
  5. 一種控制乙太網路固態硬碟系統的頻寬的方法，所述方法包括：在控制器處接收多個乙太網路固態硬碟中的至少一個乙太網路固態硬碟的頻寬資訊；在所述控制器政策資料結構中儲存所接收的所述乙太網路固態硬碟的所述頻寬資訊，其中所述控制器包括底板管理控制器；藉由所述控制器針對所述乙太網路固態硬碟透過基於所述乙太網路固態硬碟的所述頻寬資訊程式化乙太網路開關來配置所述乙太網路開關的頻寬容量，所述乙太網路開關耦合至所述乙太網路固態硬碟的乙太網路埠，其中所述乙太網路固態硬碟的所述頻寬容量是基於與所述乙太網路固態硬碟相關聯的位元錯誤率以及溫度；以及基於所述乙太網路固態硬碟的所述頻寬資訊速率限制位於所述乙太網路開關和所述乙太網路固態硬碟之間的使用者資料傳遞；其中至少部分由所述乙太網路開關執行所述速率限制。
  6. 如申請專利範圍第5項所述的方法，其中所述頻寬容量是基於與所述乙太網路固態硬碟相關聯的服務層級。
  7. 如申請專利範圍第6項所述的方法，其中所述頻寬容量 是自適應地基於所述乙太網路固態硬碟的操作參數。
TW107100585A 2017-02-23 2018-01-08 乙太網路固態硬碟系統及控制其頻寬的方法 TWI794198B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201762462901P 2017-02-23 2017-02-23
US62/462,901 2017-02-23
US15/487,431 2017-04-13
US15/487,431 US11543967B2 (en) 2017-02-23 2017-04-13 Method for controlling BW SLA in NVME-of ethernet SSD storage systems

Publications (2)

Publication Number Publication Date
TW201832536A TW201832536A (zh) 2018-09-01
TWI794198B true TWI794198B (zh) 2023-03-01

Family

ID=63167182

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107100585A TWI794198B (zh) 2017-02-23 2018-01-08 乙太網路固態硬碟系統及控制其頻寬的方法

Country Status (5)

Country Link
US (2) US11543967B2 (zh)
JP (1) JP7108426B2 (zh)
KR (1) KR102435004B1 (zh)
CN (1) CN108512777B (zh)
TW (1) TWI794198B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10459665B2 (en) * 2017-04-03 2019-10-29 Samsung Electronics Co., Ltd. System and method of configuring NVMe-oF devices using a baseboard management controller (BMC)
US10733137B2 (en) * 2017-04-25 2020-08-04 Samsung Electronics Co., Ltd. Low latency direct access block storage in NVME-of ethernet SSD
US10275180B2 (en) * 2017-05-08 2019-04-30 Samsung Electronics Co., Ltd. Ethernet SSD system including storage offload engine (SoE) controller and ethernet switch
US10726930B2 (en) * 2017-10-06 2020-07-28 Western Digital Technologies, Inc. Method and system for a storage (SSD) drive-level failure and health prediction leveraging machine learning on internal parametric data
CN109840232B (zh) * 2017-11-28 2022-05-13 华为技术有限公司 存储设备及存储设备的元件管理方法
US20240095196A1 (en) * 2018-03-02 2024-03-21 Samsung Electronics Co., Ltd. Method for supporting erasure code data protection with embedded pcie switch inside fpga+ssd
DE112021001443T5 (de) 2020-03-05 2023-01-12 Fanuc Corporation Bildverarbeitungsvorrichtung, arbeitsanweisungserstellungssystem und arbeitsanweisungserstellungsverfahren
US11770271B2 (en) 2020-08-21 2023-09-26 Samsung Electronics Co., Ltd. Data center
KR20220084844A (ko) 2020-12-14 2022-06-21 삼성전자주식회사 스토리지 장치 및 스토리지 장치의 동작 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090303883A1 (en) * 2008-06-05 2009-12-10 David Kucharczyk Ethernet switch-based network monitoring system and methods
US20140195634A1 (en) * 2013-01-10 2014-07-10 Broadcom Corporation System and Method for Multiservice Input/Output
US9094302B2 (en) * 2012-04-16 2015-07-28 Dell Products, Lp System and method to discover virtual machine instantiations and configure network service level agreements
US20160117105A1 (en) * 2014-10-27 2016-04-28 Sandisk Enterprise Ip Llc Method and System for Throttling Bandwidth Based on Temperature
US20160182389A1 (en) * 2011-06-24 2016-06-23 Dell Products, Lp System and Method for Dynamic Rate Control in Ethernet Fabrics
US20170046097A1 (en) * 2015-08-14 2017-02-16 International Business Machines Corporation Managing temperature of solid state disk devices

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3956786B2 (ja) 2002-07-09 2007-08-08 株式会社日立製作所 記憶装置の帯域制御装置、方法及びプログラム
JP4214919B2 (ja) 2004-01-16 2009-01-28 株式会社日立製作所 帯域制御機能を有するストレージスイッチ
JP2007328604A (ja) 2006-06-08 2007-12-20 Hitachi Ltd 計算機システム、ストレージ管理プログラム及び計算機管理プログラム
US7940785B2 (en) 2007-01-08 2011-05-10 International Business Machines Corporation Ethernet adapter packet management
US7852867B2 (en) * 2007-07-06 2010-12-14 Integrated Deoice Technology, Inc. Integrated memory for storing egressing packet data, replay data and to-be egressed data
WO2009011090A1 (ja) 2007-07-13 2009-01-22 Panasonic Corporation ネットワーク制御装置、画像表示装置、およびネットワーク制御方法
US8713196B1 (en) * 2008-08-12 2014-04-29 Eden Rock Communications, Llc Systems for usage based rate limiting over a shared data link
JP4809413B2 (ja) * 2008-10-08 2011-11-09 株式会社日立製作所 ストレージシステム
US8572271B2 (en) 2009-01-29 2013-10-29 Qualcomm Incorporated Multimedia management system for seamless multimedia content mobility
US8174969B1 (en) * 2009-11-24 2012-05-08 Integrated Device Technology, Inc Congestion management for a packet switch
US9210048B1 (en) 2011-03-31 2015-12-08 Amazon Technologies, Inc. Clustered dispersion of resource use in shared computing environments
US8972611B2 (en) * 2011-08-11 2015-03-03 Cisco Technology, Inc. Multi-server consolidated input/output (IO) device
US10257596B2 (en) * 2012-02-13 2019-04-09 Ciena Corporation Systems and methods for managing excess optical capacity and margin in optical networks
US20130311696A1 (en) 2012-05-18 2013-11-21 Lsi Corporation Storage processor for efficient scaling of solid state storage
US10380041B2 (en) * 2012-08-23 2019-08-13 Dell Products, Lp Fabric independent PCIe cluster manager
US9363315B2 (en) * 2012-08-28 2016-06-07 Skyera, Llc Integrated storage and switching for memory systems
WO2014118969A1 (ja) * 2013-02-01 2014-08-07 株式会社日立製作所 仮想計算機システムおよび仮想計算機システムのデータ転送制御方法
US9396755B2 (en) 2013-02-20 2016-07-19 Kabushiki Kaisha Toshiba Temperature-defined data-storage policy for a hybrid disk drive
US20140337598A1 (en) * 2013-05-07 2014-11-13 Lsi Corporation Modulation of flash programming based on host activity
US10063638B2 (en) 2013-06-26 2018-08-28 Cnex Labs, Inc. NVM express controller for remote access of memory and I/O over ethernet-type networks
US20150378640A1 (en) * 2013-06-26 2015-12-31 Cnex Labs, Inc. Nvm express controller for remote access of memory and i/o over ethernet-type networks
KR20150047785A (ko) 2013-10-25 2015-05-06 삼성전자주식회사 서버 시스템 및 스토리지 시스템
WO2016196766A2 (en) 2015-06-03 2016-12-08 Diamanti, Inc. Enabling use of non-volatile media - express (nvme) over a network
US9619164B2 (en) * 2014-05-06 2017-04-11 Nimble Storage, Inc. Cluster solid state drives
US9477295B2 (en) 2014-05-15 2016-10-25 Dell Products, L.P. Non-volatile memory express (NVMe) device power management
US9436628B2 (en) * 2014-05-30 2016-09-06 Apple Inc. Thermal mitigation using selective I/O throttling
AU2014401914B2 (en) 2014-08-13 2017-05-25 Huawei Technologies Co., Ltd. Storage system, method, and apparatus for processing operation request
US9712898B2 (en) * 2014-08-26 2017-07-18 Intel Corporation Network aggregation in a computing shelf/tray
US9548872B2 (en) * 2014-09-26 2017-01-17 Dell Products, Lp Reducing internal fabric congestion in leaf-spine switch fabric
US9529619B2 (en) * 2014-09-30 2016-12-27 Nicira, Inc. Method of distributing network policies of virtual machines in a datacenter
US9565269B2 (en) * 2014-11-04 2017-02-07 Pavilion Data Systems, Inc. Non-volatile memory express over ethernet
KR101607136B1 (ko) * 2014-12-31 2016-03-29 청주대학교 산학협력단 SiOC 박막을 이용한 유기전계발광소자 및 그 제조방법
US9857995B1 (en) * 2015-03-09 2018-01-02 Western Digital Technologies, Inc. Data storage device and method providing non-volatile memory buffer for real-time primary non-volatile memory protection
US10114778B2 (en) 2015-05-08 2018-10-30 Samsung Electronics Co., Ltd. Multi-protocol IO infrastructure for a flexible storage platform
US9933826B2 (en) * 2015-05-11 2018-04-03 Hewlett Packard Enterprise Development Lp Method and apparatus for managing nodal power in a high performance computer system
JP6381480B2 (ja) 2015-05-12 2018-08-29 東芝メモリ株式会社 半導体装置
US10429909B2 (en) * 2015-06-01 2019-10-01 Hewlett Packard Enterprise Development Lp Managing power in a high performance computing system for resiliency and cooling
US10243791B2 (en) * 2015-08-13 2019-03-26 A10 Networks, Inc. Automated adjustment of subscriber policies
GB2542174B (en) * 2015-09-10 2018-04-04 Openwave Mobility Inc An intermediate network entity for controlling bandwidth for an adaptive bit rate stream
KR20170046097A (ko) * 2015-10-20 2017-04-28 (주)켐옵틱스 저 손실 투과형 파장 가변 광필터
US20170195237A1 (en) * 2015-12-30 2017-07-06 Akamai Technologies, Inc. Distributed quality-of-service (QoS) mechanism in an overlay network having edge regions
US10306344B2 (en) * 2016-07-04 2019-05-28 Huawei Technologies Co., Ltd. Method and system for distributed control of large photonic switched networks
US10263898B2 (en) * 2016-07-20 2019-04-16 Cisco Technology, Inc. System and method for implementing universal cloud classification (UCC) as a service (UCCaaS)
US10122651B2 (en) * 2016-08-31 2018-11-06 Inspeed Networks, Inc. Dynamic bandwidth control

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090303883A1 (en) * 2008-06-05 2009-12-10 David Kucharczyk Ethernet switch-based network monitoring system and methods
US20160182389A1 (en) * 2011-06-24 2016-06-23 Dell Products, Lp System and Method for Dynamic Rate Control in Ethernet Fabrics
US9094302B2 (en) * 2012-04-16 2015-07-28 Dell Products, Lp System and method to discover virtual machine instantiations and configure network service level agreements
US20140195634A1 (en) * 2013-01-10 2014-07-10 Broadcom Corporation System and Method for Multiservice Input/Output
US20160117105A1 (en) * 2014-10-27 2016-04-28 Sandisk Enterprise Ip Llc Method and System for Throttling Bandwidth Based on Temperature
US20170046097A1 (en) * 2015-08-14 2017-02-16 International Business Machines Corporation Managing temperature of solid state disk devices

Also Published As

Publication number Publication date
CN108512777B (zh) 2023-05-23
US11543967B2 (en) 2023-01-03
TW201832536A (zh) 2018-09-01
CN108512777A (zh) 2018-09-07
JP7108426B2 (ja) 2022-07-28
US20230133604A1 (en) 2023-05-04
JP2018137749A (ja) 2018-08-30
US20180239540A1 (en) 2018-08-23
KR102435004B1 (ko) 2022-08-22
KR20180097433A (ko) 2018-08-31

Similar Documents

Publication Publication Date Title
TWI794198B (zh) 乙太網路固態硬碟系統及控制其頻寬的方法
CN108874307B (zh) 以太网固态驱动系统和提供存储卸载功能的方法
Guo et al. RDMA over commodity ethernet at scale
CN104081718B (zh) 用于远程系统管理的网络控制器
US7843906B1 (en) Storage gateway initiator for fabric-backplane enterprise servers
US7990994B1 (en) Storage gateway provisioning and configuring
KR20190074962A (ko) 스토리지 장치용 로컬 매니지먼트 콘솔
US20170339106A1 (en) Technologies for high-performance network fabric security
US8811295B2 (en) Methods and apparatus for priority-based adoption of an access device
US10374942B2 (en) Link aggregation group management
CN101729262B (zh) 非网管型交换机的配置方法和非网管型交换机
CN1604550B (zh) 维持两个网络实体之间的链路的方法和系统
US11677673B1 (en) Low latency flow control in data centers
CN110324265B (zh) 流量分发方法、路由方法、设备及网络系统
US20170244640A1 (en) Offloading of management controller traffic
US8089971B1 (en) Method and system for transmitting flow control information
US11812378B2 (en) User management device, BNG, and BNG user internet access method and system
US20210006509A1 (en) Managing virtual output queues
JP4609331B2 (ja) 複合型情報プラットフォーム装置およびその通信帯域保証方法
Jereczek et al. A lossless network for data acquisition
US11671318B1 (en) Post-deployment updating of network device management switch configurations
CN114356830B (zh) 总线终端控制方法、装置、计算机设备和存储介质
US9003038B1 (en) Systems and methods for bandwidth scavenging among a plurality of applications in a network
CN104410586A (zh) 一种vsu环境下的报文处理方法和装置