WO2019045583A1 - Method of virtualizing data storage systems for data processing and cloud computing centres - Google Patents
Method of virtualizing data storage systems for data processing and cloud computing centres Download PDFInfo
- Publication number
- WO2019045583A1 WO2019045583A1 PCT/RU2017/000450 RU2017000450W WO2019045583A1 WO 2019045583 A1 WO2019045583 A1 WO 2019045583A1 RU 2017000450 W RU2017000450 W RU 2017000450W WO 2019045583 A1 WO2019045583 A1 WO 2019045583A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- network
- storage
- dss
- nodes
- node
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 14
- 238000013500 data storage Methods 0.000 title abstract description 10
- 238000012545 processing Methods 0.000 title abstract description 9
- 238000012546 transfer Methods 0.000 claims abstract description 12
- 238000004891 communication Methods 0.000 claims abstract description 7
- 238000012795 verification Methods 0.000 claims description 2
- 238000007726 management method Methods 0.000 description 15
- 230000005540 biological transmission Effects 0.000 description 4
- 238000001228 spectrum Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- TVZRAEYQIKYCPH-UHFFFAOYSA-N 3-(trimethylsilyl)propane-1-sulfonic acid Chemical compound C[Si](C)(C)CCCS(O)(=O)=O TVZRAEYQIKYCPH-UHFFFAOYSA-N 0.000 description 1
- 241000501478 Plecoptera <stoneflies, order> Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000007596 consolidation process Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
Definitions
- the technical solution relates to the field of data processing and storage systems and is a way to virtualize storage systems (DSS) for deployment in complex networks of data processing centers and cloud computing.
- DSS virtualize storage systems
- SAN storage virtualization
- SDS software-defined storage systems
- VSA StarWind Virtual Storage Appliance
- this solution allows the use of both hardware and 5 soft switches in the network connecting the storage nodes.
- the storage concept provides the following benefits for the user: abstraction from the hardware platform, scalability, simplified storage infrastructure, low cost,
- the claimed technical solution involves the interaction of storage nodes by means of PKS, controlled by one or more PKS controllers, and provides a flexible organization of data storage.
- the claimed technical solution involves the use of a software-configured network as a transport to support the logical storage control network 15 and the logical data transfer network between storage nodes.
- the claimed technical solution describes a method of virtualization of data storage systems for data processing centers and cloud computing, which uses a software-configured network managed by a PKS / OpenFlow controller cluster as a transport network.
- a storage system for a user is represented by a virtual single hard disk, but physically it is a set of storage nodes connected by a network.
- controller and backup controller in hot standby mode configure the switches to connect them to the controllers, specifying the IP addresses and ports of the controllers, connect the storage nodes to the network switches.
- a developed application builds a virtual storage management network and a virtual data transmission network between storage nodes and provides connectivity of storage nodes by calculating the shortest routes and their implementation in the network.
- the application receives the IP and / or MAC address of the storage management node as a parameter. For each of the next reconnecting storage node
- 35 controller application automatically calculates the shortest route to the node management, to other storage nodes and then forms OpenFlow rules and sets these rules in the flow tables of the OpenFlow switches. If the controller detects a switch or link failures, the application automatically rebuilds routes between storage nodes and reconfigures the network by updating the rules on the switches. If the backup controller detects a failure of the main controller, this application on the backup controller restores its last state and continues to maintain control of the virtual storage control network and the virtual data transfer network between storage nodes.
- FIG. Figure 1 illustrates an example of storage system virtualization through a software-configured data center network.
- FIG. 2 illustrates the procedure for connecting new storage nodes in a software-configured data center network.
- PVS Software-Configurable Network
- OpenFlow is a control protocol for processing data transmitted over a data network by routers and switches that implements the technology of a software-configured network.
- the AC address (from Media Access Control) is a unique identifier assigned to each unit of active equipment or some of their interfaces on computer Ethernet networks.
- MAC-learning is the process of populating a switch's MAC address table based on studying the sender's MAC address of any frame included in the switch. If the sender's MAC address is not present in the table, then it is entered into it with reference to the port to which the frame entered.
- Port a natural number recorded in the headers of protocols of the transport layer of the OSI model (TCP, UDP, SCTP, DCCP). Used to define a process — a recipient of a packet within a single host.
- IP address a unique network address of a node in a computer network built on the basis of the TCP / IP protocol stack
- IPv4 is the fourth version of the IP protocol defined in IETF RFC 791.
- Ethernet is a family of standards that define wired connections and electrical signals at the physical layer, frame format, and media access control protocols at the data link layer of the OSI model.
- a switch is a device designed to connect several nodes of a computer network within one or several network segments at the data link layer of the OSI model.
- the claimed technical solution a method of virtualizing data storage for data centers and cloud computing, includes the following main steps.
- the controller application to support storage virtualization using the Dijkstra algorithm calculates the shortest path in the graph describing the network topology from the new node to the storage management node, creates rules for the switches included in this path, and sets these rules to the switches.
- the storage management node performs node authentication checks.
- the application builds another route between nodes for transferring data streams between storage nodes.
- the application automatically rebuilds routes between storage nodes and reconfigures the network by updating the rules on the switches.
- the inventive method of virtualization of data storage systems for data centers and cloud computing is industrially applicable, since its implementation uses known and proven methods and components.
- Pivot3 Virtual SAN Access: http://pivot3.com/solution/disaster-recovery/ 12. StarWind Virtual Storage Appliance. Access:
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
The technical solution relates to the field of data processing and storage centres, and is a method of virtualizing data storage systems (DSS) for deployment in complex networks of data processing and cloud computing centres. According to the claimed method of virtualizing data storage systems for data processing and cloud computing centres, a virtual DSS control network and a virtual network for the transfer of data between DSS nodes are built for an SDN network controller with the aid of a special application, and the connectivity of said DSS nodes is provided by calculating the shortest routes and implementing same in the network. The application receives as a parameter the IP and/or MAC address of the DSS control node. For each subsequent reconnected DSS node the controller application automatically calculates the shortest route to the control node and to other DSS nodes and then generates OpenFlow rules and installs these rules in the flow tables of OpenFlow commutators. If the controller detects commutator or communication channel failures, the application automatically changes the routes between the DSS nodes and reconfigures the network by updating the rules on the commutators. If a backup controller detects a failure of the primary controller, the application restores its last state on the backup controller and continues to support control of the virtual DSS control network and of the virtual network for the transfer of data between DSS nodes.
Description
СПОСОБ ВИРТУАЛИЗАЦИИ СИСТЕМ ХРАНЕНИЯ ДАННЫХ ДЛЯ ЦЕНТРОВ ОБРАБОТКИ ДАННЫХ И ОБЛАЧНЫХ ВЫЧИСЛЕНИЙ METHOD OF VIRTUALIZATION OF DATA STORAGE SYSTEMS FOR DATA PROCESSING CENTERS AND CLOUD CALCULATIONS
ОБЛАСТЬ ТЕХНИКИ TECHNICAL FIELD
Техническое решение относится к области систем обработки и хранения данных и представляет собой способ виртуализации систем хранения данных (СХД) для развертывания в сложных сетях центров обработки данных и облачных вычислений. The technical solution relates to the field of data processing and storage systems and is a way to virtualize storage systems (DSS) for deployment in complex networks of data processing centers and cloud computing.
УРОВЕНЬ ТЕХНИКИ BACKGROUND
В настоящее время современные системы хранения данных разворачиваются в сети, не учитывая особенности и физические характеристики сетевого оборудования и топологию сети, и требуют от сетевой инфраструктуры лишь обеспечения связности узлов СХД. Среди узлов СХД обычно выделяется главный узел управления, к которому подключаются все остальные узлы и получают информацию друг о друге. Данные в СХД дробятся на порции данных и с учетом заданного уровня репликации и физической инфраструктуры обеспечения хранения данных размещаются на узлах СХД. Однако при размещении порций данных в СХД топология сети не учитывается, как не учитывается и частота обращения к ним. At present, modern data storage systems are deployed in the network, disregarding the features and physical characteristics of network equipment and network topology, and require from the network infrastructure only ensuring connectivity of storage nodes. Among the storage nodes, the main control node is usually allocated, to which all other nodes are connected and receive information about each other. The data in the storage system is divided into portions of data and, taking into account the specified level of replication and the physical storage infrastructure, are placed on the storage nodes. However, when placing portions of data in the storage system, the network topology is not taken into account, as well as the frequency of access to them.
Существующие СХД не позволяют отслеживать, по каким маршрутам происходит передача данных между узлами СХД, что может приводить к дисбалансу загрузки каналов передачи данных сети ЦОД и к проблемам обеспечения информационной безопасности. Existing storage systems do not allow tracking the data transfer paths between storage nodes, which can lead to an imbalance in the load of data transmission channels of the data center network and to problems of information security.
Из уровня техники известно множество решений в области виртуализации систем хранения данных (SAN) и программно-определяемых СХД (SDS), например такие как: The prior art knows many solutions in the field of storage virtualization (SAN) and software-defined storage systems (SDS), for example, such as:
1 Dell Nexenta, EMC ScalelO, VPLEX [1], разработчик: Dell EMC; 1 Dell Nexenta, EMC ScalelO, VPLEX [1], developer: Dell EMC;
2 VMware Virtual SAN [2], разработчик VMware; 2 VMware Virtual SAN [2], VMware developer;
3 Spectrum Storage [3], разработчик: IBM; 3 Spectrum Storage [3], developer: IBM;
4 Acronis Storage [4], разработчик: Acronis; 4 Acronis Storage [4], developer: Acronis;
5 StoreVirtual VSA [5], разработчик: HPE; 5 StoreVirtual VSA [5], developer: HPE;
6 ONTAP Select [6], разработчик: NetApp; 6 ONTAP Select [6], developer: NetApp;
7 Red Hat Gluster Storage [7], разработчик Red Hat; 7 Red Hat Gluster Storage [7], developer of Red Hat;
8 SCVM и SDUS [8], разработчик: StoneFly; l
9. SANsymphony [9], разработчик: DataCore; 8 SCVM and SDUS [8], developer: StoneFly; l 9. SANsymphony [9], developer: DataCore;
10. SwiftStack [10], разработчик: SwiftStack; 10. SwiftStack [10], developer: SwiftStack;
1 1. Pivot3 Virtual SAN [11], разработчик: Pivot3; 1 1. Pivot3 Virtual SAN [11], developer: Pivot3;
12. StarWind Virtual Storage Appliance (VSA) [12], разработчик StarWind. Большинство из представленных решений не учитывают особенности и топологию сети, текущее состояние и загрузку каналов связи, посредством которой обеспечивается связность узлов СХД. 12. StarWind Virtual Storage Appliance (VSA) [12], developer of StarWind. Most of the presented solutions do not take into account the features and topology of the network, the current state and the loading of communication channels, through which the connectivity of storage nodes is ensured.
В качестве наиболее близкого аналога можно выделить решение от DELL EMC VPLEX [1] для виртуализации СХД, которое позволяет объединить ресурсы различных дисковых массивов различных производителей в единый логический пул на уровне ЦОД или нескольких географически разнесенных ЦОД. Компания VMware дополнила функционал VPLEX виртуальной сетью передачи данных на основе ПКС, а за связь между ЦОД отвечает туннель VXLAN. As the closest analogue, you can select a solution from DELL EMC VPLEX [1] for storage virtualization, which allows you to combine the resources of different disk arrays of different manufacturers into a single logical pool at the data center level or several geographically dispersed data centers. VMware has added VPLEX functionality to the PKS-based virtual data network, and the VXLAN tunnel is responsible for communication between the data center.
Однако данное техническое решение также не учитывает особенности и топологию сети, текущее состояние и загрузку каналов связи, посредством которой обеспечивается связность узлов СХД. However, this technical solution also does not take into account the features and topology of the network, the current state and the loading of communication channels, by means of which the connectivity of the storage nodes is ensured.
СУЩНОСТЬ ТЕХНИЧЕСКОГО РЕШЕНИЯ ESSENCE OF TECHNICAL SOLUTION
Заявленное техническое решение обеспечивает получение следующих технических результатов: The claimed technical solution provides the following technical results:
- повышение скорости развертывания новых СХД в центрах обработки данных; - increase the speed of deployment of new storage systems in data centers;
- повышение надежности функционирования СХД в ЦОД за счет быстрого восстановления работоспособности СХД как после сбоев СХД, так после сбоев в сети; - improving the reliability of storage systems in the data center due to the rapid recovery of storage systems after failures of storage systems, so after network failures;
- повышение масштабируемости СХД в ЦОД; - increasing the scalability of storage systems in the data center;
- повышение быстродействия обращения к данным СХД за счет оптимизации маршрутов и минимизации задержки на передачу данных; - improving the speed of accessing storage data by optimizing routes and minimizing data transfer delays;
- повышение удобства обслуживания СХД за счет централизованного - increasing the convenience of storage maintenance due to centralized
управления сетью и централизованного управления СХД; network management and centralized storage management;
- повышение гибкости управления СХД за счет возможности гибкой и быстрой реконфигурации ПКС сети и гибкого управления потоками данных; - increasing the flexibility of storage management due to the possibility of flexible and fast reconfiguration of the PCN network and flexible management of data flows;
- обеспечение балансировки нагрузки по каналам связи, которые участвуют в передаче данных между узлами СХД в сети;
- обеспечение балансировки нагрузки с учетом количества запросов к СХД, частоты обращения к чанкам данных и их взаимного расположения по узлам СХД. - ensuring load balancing over communication channels that are involved in data transfer between storage nodes in a network; - ensuring load balancing taking into account the number of requests to the storage system, the frequency of accessing data chunks and their relative location across storage nodes.
Также данное решение позволяет использовать как аппаратные, так и 5 программные коммутаторы в сети, связывающей узлы СХД. Also, this solution allows the use of both hardware and 5 soft switches in the network connecting the storage nodes.
Концепция СХД позволяет получить следующие преимущества для пользователя: абстрагирование от аппаратной платформы, масштабируемость, упрощение инфраструктуры хранения данных, низкая стоимость, The storage concept provides the following benefits for the user: abstraction from the hardware platform, scalability, simplified storage infrastructure, low cost,
ю Заявленное техническое решение предполагает взаимодействие узлов СХД посредством ПКС, находящейся под управлением одного или нескольких ПКС контроллеров, и обеспечивает гибкую организацию хранения данных. The claimed technical solution involves the interaction of storage nodes by means of PKS, controlled by one or more PKS controllers, and provides a flexible organization of data storage.
Заявленное техническое решение предполагает использование программно- конфигурируемой сети в качестве транспорта для поддержки логической сети 15 управления СХД и логической сети передачи данных между узлами СХД. The claimed technical solution involves the use of a software-configured network as a transport to support the logical storage control network 15 and the logical data transfer network between storage nodes.
Заявленное техническое решение описывает способ виртуализации систем хранения данных для центров обработки данных и облачных вычислений, при котором в качестве транспортной сети используется программно- конфигурируемая сеть под управлением кластера ПКС/OpenFlow контроллеров. 20 СХД для пользователя представляется виртуальным единым жестким диском, однако физически представляет собой набор узлов СХД, соединенных сетью. The claimed technical solution describes a method of virtualization of data storage systems for data processing centers and cloud computing, which uses a software-configured network managed by a PKS / OpenFlow controller cluster as a transport network. 20 A storage system for a user is represented by a virtual single hard disk, but physically it is a set of storage nodes connected by a network.
Для реализации способа необходимо построить ПКС сеть из программных или аппаратных коммутаторов с поддержкой протокола OpenFlow, основного To implement the method, it is necessary to build a PKS network from software or hardware switches supporting the OpenFlow protocol, the main
25 контроллера и резервного контроллера в режиме горячего резерва, настроить на коммутаторах их подключение к контроллерам, указав IP адреса и порты контроллеров, подключить узлы СХД к коммутаторам сети. 25 controller and backup controller in hot standby mode, configure the switches to connect them to the controllers, specifying the IP addresses and ports of the controllers, connect the storage nodes to the network switches.
Согласно заявленному способу виртуализации систем хранения данных для центров обработки данных и облачных вычислений, для контроллера ПКС сети зо строят, при помощи разработанного приложения, виртуальную сеть управления СХД и виртуальную сеть передачи данных между узлами СХД и обеспечивают связность узлов СХД за счет вычисления кратчайших маршрутов и их реализацию в сети. Приложение в качестве параметра получает IP и/или МАС-адрес узла управления СХД. Для каждого следующего вновь подключающегося узла СХД According to the claimed storage virtualization method for data centers and cloud computing, for the PKS network controller, a developed application builds a virtual storage management network and a virtual data transmission network between storage nodes and provides connectivity of storage nodes by calculating the shortest routes and their implementation in the network. The application receives the IP and / or MAC address of the storage management node as a parameter. For each of the next reconnecting storage node
35 приложение контроллера автоматически вычисляет кратчайший маршрут до узла з
управления, до других узлов СХД и затем формирует OpenFlow-правила и устанавливает эти правила в таблицы потоков OpenFlow коммутаторов. В случае обнаружения контроллером отказов коммутаторов или каналов связи приложение автоматически перестраивает маршруты между узлами СХД и проводит реконфигурацию сети за счет обновления правил на коммутаторах. В случае обнаружения резервным контроллером отказа основного контроллера это приложение на резервном контроллере восстанавливает свое последнее состояние и продолжает поддерживать управления виртуальной сетью управления СХД и виртуальной сетью передачи данных между узлами СХД. КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ 35 controller application automatically calculates the shortest route to the node management, to other storage nodes and then forms OpenFlow rules and sets these rules in the flow tables of the OpenFlow switches. If the controller detects a switch or link failures, the application automatically rebuilds routes between storage nodes and reconfigures the network by updating the rules on the switches. If the backup controller detects a failure of the main controller, this application on the backup controller restores its last state and continues to maintain control of the virtual storage control network and the virtual data transfer network between storage nodes. BRIEF DESCRIPTION OF THE DRAWINGS
Фиг. 1 иллюстрирует пример виртуализации системы хранения данных посредством программно-конфигурируемой сети центра обработки данных. FIG. Figure 1 illustrates an example of storage system virtualization through a software-configured data center network.
Фиг. 2 иллюстрирует процедуру подключения новых узлов СХД в программно-конфигурируемой сети центра обработки данных. ПОДРОБНОЕ ОПИСАНИЕ FIG. 2 illustrates the procedure for connecting new storage nodes in a software-configured data center network. DETAILED DESCRIPTION
Программно-конфигурируемая сеть (ПКС) — сеть передачи данных, в которой уровень управления сетью отделён от устройств передачи данных и реализуется программно, одна из форм виртуализации вычислительных ресурсов. Software-Configurable Network (PKS) is a data transmission network in which the network management level is separated from data transmission devices and implemented by software, one of the forms of computing resources virtualization.
OpenFlow - протокол управления процессом обработки данных, передающихся по сети передачи данных маршрутизаторами и коммутаторами, реализующий технологию программно-конфигурируемой сети. OpenFlow is a control protocol for processing data transmitted over a data network by routers and switches that implements the technology of a software-configured network.
АС-адрес (от англ. Media Access Control— управление доступом к среде)— уникальный идентификатор, присваиваемый каждой единице активного оборудования или некоторым их интерфейсам в компьютерных сетях Ethernet. The AC address (from Media Access Control) is a unique identifier assigned to each unit of active equipment or some of their interfaces on computer Ethernet networks.
MAC-learning - процесс заполнения таблицы МАС-адресов коммутатора, основанный на изучении МАС-адреса отправителя любого фрейма, входящего в коммутатор. Если МАС-адрес отправителя не присутствует в таблице, то он вносится в нее с привязкой к порту, в который вошел фрейм. MAC-learning is the process of populating a switch's MAC address table based on studying the sender's MAC address of any frame included in the switch. If the sender's MAC address is not present in the table, then it is entered into it with reference to the port to which the frame entered.
Порт (англ. port)— натуральное число, записываемое в заголовках протоколов транспортного уровня модели OSI (TCP, UDP, SCTP, DCCP). Используется для определения процесса— получателя пакета в пределах одного хоста.
IP адрес— уникальный сетевой адрес узла в компьютерной сети, построенной на основе стека протоколов TCP/IP Port (eng. Port) - a natural number recorded in the headers of protocols of the transport layer of the OSI model (TCP, UDP, SCTP, DCCP). Used to define a process — a recipient of a packet within a single host. IP address — a unique network address of a node in a computer network built on the basis of the TCP / IP protocol stack
IPv4 - четвертая версия протокола IP, определенного в IETF RFC 791. IPv4 is the fourth version of the IP protocol defined in IETF RFC 791.
IPv4 multicast - многоадресная рассылка с использованием протокола IPv4. Ethernet - семейство стандартов, определяющих проводные соединения и электрические сигналы на физическом уровне, формат кадров и протоколы управления доступом к среде на канальном уровне модели OSI. IPv4 multicast - Multicast using the IPv4 protocol. Ethernet is a family of standards that define wired connections and electrical signals at the physical layer, frame format, and media access control protocols at the data link layer of the OSI model.
Коммутатор (англ. switch) - устройство, предназначенное для соединения нескольких узлов компьютерной сети в пределах одного или нескольких сегментов сети на канальном уровне модели OSI. A switch is a device designed to connect several nodes of a computer network within one or several network segments at the data link layer of the OSI model.
Заявленное техническое решение, способ виртуализации хранения данных для центров обработки данных и облачных вычислений, включает в себя следующие основные этапы. The claimed technical solution, a method of virtualizing data storage for data centers and cloud computing, includes the following main steps.
Запускают основной и резервный кластеры контроллеров с приложением поддержки виртуализации СХД и указанием IP и/или MAC адреса узла управления СХД. Launch the primary and backup controller clusters with the application supporting storage virtualization and indicating the IP and / or MAC address of the storage management node.
Подключают узел управления СХД к ПКС сети. Connect the storage management node to the PKS network.
Проверяют, что приложение контроллера корректно определило коммутатор ПКС сети, к которому подключен узел управления СХД. Verify that the controller application correctly identified the PKS network switch to which the storage management node is connected.
При подключении нового узла СХД приложение контроллера для поддержки виртуализации СХД с помощью алгоритма Дейкстры вычисляет кратчайший путь в графе, описывающем топологию сети, от нового узла до узла управления СХД, формирует правила для коммутаторов, входящих в этот путь, и устанавливает эти правила на коммутаторы. When a new storage node is connected, the controller application to support storage virtualization using the Dijkstra algorithm calculates the shortest path in the graph describing the network topology from the new node to the storage management node, creates rules for the switches included in this path, and sets these rules to the switches.
Узел управления СХД проводит проверку аутентификации узла. The storage management node performs node authentication checks.
В случае корректной проверки аутентификации узла, приложение строит еще один маршрут между узлами для передачи потоков данных между узлами СХД. In case of correct verification of node authentication, the application builds another route between nodes for transferring data streams between storage nodes.
При подключении следующего узла проверяют, что приложение контроллера корректно определило коммутатор ПКС сети, к которому подключен узел управления СХД. Затем строят дополнительный маршрут для передачи данных до остальных узлов СХД. When the next node is connected, it is verified that the controller application correctly identified the SCC network switch to which the storage management node is connected. Then build an additional route to transfer data to the remaining storage nodes.
Переконфигурируют виртуальную сеть управления СХД и виртуальную сеть передачи данных между узлами СХД с учетом текущей загрузки каналов связи сети.
В случае обнаружения резервным контроллером отказа основного контроллера это приложение на резервном контроллере восстанавливает свое последнее состояние и продолжает поддерживать управления виртуальной сетью управления СХД и виртуальной сетью передачи данных между узлами СХД. Reconfigure the virtual storage management network and virtual data network between storage nodes, taking into account the current load of communication channels of the network. If the backup controller detects a failure of the main controller, this application on the backup controller restores its last state and continues to maintain control of the virtual storage control network and the virtual data transfer network between storage nodes.
В случае обнаружения контроллером отказов коммутаторов или каналов связи приложение автоматически перестраивает маршруты между узлами СХД и проводит реконфигурацию сети за счет обновления правил на коммутаторах. If the controller detects a switch or link failures, the application automatically rebuilds routes between storage nodes and reconfigures the network by updating the rules on the switches.
Заявляемый способ виртуализации систем хранения данных для центров обработки данных и облачных вычислений является промышленно применимым, так как при его реализации используют известные и апробированные методы и компоненты. The inventive method of virtualization of data storage systems for data centers and cloud computing is industrially applicable, since its implementation uses known and proven methods and components.
Хотя данное техническое решение описано конкретным примером его реализации, это описание не является ограничивающим, но приведено лишь для иллюстрации и лучшего понимания существа технического решения, объем которого определяется прилагаемой формулой. Although this technical solution is described by a specific example of its implementation, this description is not limiting, but is given only for illustration and a better understanding of the essence of the technical solution, the scope of which is determined by the attached formula.
Список литературы Bibliography
1. DELL EMC STORAGE. Доступ: https://www.emc.com/en-us/storage/data- storage . htm?n av= 1 #tab3=2 1. DELL EMC STORAGE. Access: https://www.emc.com/en-us/storage/data- storage. htm? n av = 1 # tab3 = 2
2. VMware Virtual SAN. Доступ: http://www.vmware.com/ru/products/virtual- san.html 2. VMware Virtual SAN. Access: http://www.vmware.com/ru/products/virtual- san.html
3. IBM Spectrum Storage. Доступ: http://www- 03.ibm.com/systems/ru/storage/spectrum/ 3. IBM Spectrum Storage. Access: http: // www- 03.ibm.com/systems/ru/storage/spectrum/
4. Acronis Storage. Доступ: http://www.acronis.com/ru-ru/provider/software- storage/ 4. Acronis Storage. Access: http://www.acronis.com/ru-ru/provider/software- storage /
5. Система хранения данных HPE StoreVirtual. Доступ: 5. HPE StoreVirtual Storage System. Access:
https.7/www.hpe.com/ru/ru/storage/storevirtual.html https.7 / www.hpe.com / en / storage / storevirtual.html
6. NetApp ONTAP Select. Программно определяемые сервисы хранения 6. NetApp ONTAP Select. Software Defined Storage Services
данных для гибридного облака. Доступ: http://www.netapp.ru/media/ds- 3769.pdf data for hybrid cloud. Access: http://www.netapp.ru/media/ds-3769.pdf
7. Red Hat Gluster Storage. Доступ: 7. Red Hat Gluster Storage. Access:
https://www.redhat.com/en/technologies/storage/gluster https://www.redhat.com/en/technologies/storage/gluster
8. Applications. Storage Consolidation. Доступ. 8. Applications. Storage Consolidation. Access.
https://stoneflv.com/solutions/applications
9. SANsymphony Software-Defined Storage. Доступ: https://stoneflv.com/solutions/applications 9. SANsymphony Software-Defined Storage. Access:
https://www.datacore.com/products/SANsvmphony.aspx https://www.datacore.com/products/SANsvmphony.aspx
10. Hybrid Cloud Storage Software. Доступ: h ttps ://www. s wiftstack . com/p rod u ct 10. Hybrid Cloud Storage Software. Access: h ttps: // www. s wiftstack. com / p rod u ct
1 1. Pivot3 Virtual SAN. Доступ: http://pivot3.com/solution/disaster-recovery/ 12. StarWind Virtual Storage Appliance. Доступ: 1 1. Pivot3 Virtual SAN. Access: http://pivot3.com/solution/disaster-recovery/ 12. StarWind Virtual Storage Appliance. Access:
https://www.starwindsoftware.com/starwind-storage-appliance
https://www.starwindsoftware.com/starwind-storage-appliance
Claims
ФОРМУЛА ИЗОБРЕТЕНИЯ . Способ виртуализации систем хранения данных для центров обработки данных и облачных вычислений в котором, запускают основной и резервный кластеры контроллеров с приложением поддержки виртуализации СХД и указанием IP и/или MAC адреса узла управления СХД; подключают узел управления СХД к ПКС сети; проверяют, что приложение контроллера корректно определило коммутатор ПКС сети, к которому подключен узел управления СХД; при подключении нового узла СХД приложение контроллера для поддержки виртуализации СХД с помощью алгоритма Дейкстры вычисляет кратчайший путь в графе, описывающем топологию сети, от нового узла до узла управления СХД, формирует правила для коммутаторов, входящих в этот путь, и устанавливает эти правила на коммутаторы; узел управления СХД проводит проверку аутентификации узла; в случае корректной проверки аутентификации узла, приложение строит еще один маршрут между узлами для передачи потоков данных между узлами СХД; при подключении следующего узла проверяют, что приложение контроллера корректно определило коммутатор ПКС сети, к которому подключен узел управления СХД. Затем строят дополнительный маршрут для передачи данных до остальных узлов СХД; переконфигурируют виртуальную сеть управления СХД и виртуальную сеть передачи данных между узлами СХД с учетом текущей загрузки каналов связи сети; в случае обнаружения резервным контроллером отказа основного контроллера это приложение на резервном контроллере восстанавливает свое последнее состояние и продолжает поддерживать управления виртуальной сетью управления СХД и виртуальной сетью передачи данных между узлами СХД; в случае обнаружения контроллером отказов коммутаторов или каналов связи приложение автоматически перестраивает маршруты между узлами СХД и проводит реконфигурацию сети за счет обновления правил на коммутаторах.
CLAIM . The method of virtualization of storage systems for data centers and cloud computing in which, launch the primary and backup clusters of controllers with the application supporting storage virtualization and indicating the IP and / or MAC address of the storage management node; connect the storage management node to the PKS network; check that the controller application correctly identified the PKS network switch to which the storage management node is connected; when a new storage node is connected, the controller application to support storage virtualization using the Dijkstra algorithm calculates the shortest path in the graph describing the network topology from the new node to the storage management node, creates rules for the switches included in this path, and sets these rules to the switches; the storage management node verifies the authentication of the node; in the case of correct verification of node authentication, the application builds another route between nodes to transfer data streams between storage nodes; when the next node is connected, it is checked that the controller application correctly identified the PKS network switch to which the storage management node is connected. Then build an additional route for data transfer to the remaining storage nodes; reconfigure the virtual storage management network and virtual data network between storage nodes taking into account the current load of communication channels of the network; if the backup controller detects the failure of the main controller, this application on the backup controller restores its last state and continues to maintain control of the virtual storage control network and the virtual data transfer network between storage nodes; If the controller detects a switch or link failure, the application automatically rebuilds routes between storage nodes and reconfigures the network by updating the rules on the switches.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/RU2017/000450 WO2019045583A1 (en) | 2017-08-30 | 2017-08-30 | Method of virtualizing data storage systems for data processing and cloud computing centres |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/RU2017/000450 WO2019045583A1 (en) | 2017-08-30 | 2017-08-30 | Method of virtualizing data storage systems for data processing and cloud computing centres |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2019045583A1 true WO2019045583A1 (en) | 2019-03-07 |
Family
ID=65527600
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/RU2017/000450 WO2019045583A1 (en) | 2017-08-30 | 2017-08-30 | Method of virtualizing data storage systems for data processing and cloud computing centres |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2019045583A1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160006663A1 (en) * | 2014-07-02 | 2016-01-07 | Telefonaktiebolaget L M Ericsson (Publ) | Method and system for compressing forward state of a data network |
RU2600104C2 (en) * | 2011-01-11 | 2016-10-20 | Мобикс Вайэлесс Солюшенс Лтд. | System and method for communication with high bandwidth in a network with hybrid mesh topology |
RU2628902C2 (en) * | 2011-09-12 | 2017-08-22 | МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи | Coordination mechanism for cloud choice |
-
2017
- 2017-08-30 WO PCT/RU2017/000450 patent/WO2019045583A1/en active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2600104C2 (en) * | 2011-01-11 | 2016-10-20 | Мобикс Вайэлесс Солюшенс Лтд. | System and method for communication with high bandwidth in a network with hybrid mesh topology |
RU2628902C2 (en) * | 2011-09-12 | 2017-08-22 | МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи | Coordination mechanism for cloud choice |
US20160006663A1 (en) * | 2014-07-02 | 2016-01-07 | Telefonaktiebolaget L M Ericsson (Publ) | Method and system for compressing forward state of a data network |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106416132B (en) | System and method for controlling network switches using switch modeling interfaces at controllers | |
US10270645B2 (en) | Systems and methods for handling link aggregation failover with a controller | |
US10034201B2 (en) | Stateless load-balancing across multiple tunnels | |
CN108243103B (en) | Apparatus, system and method for distributing routing protocol information in a clos network | |
US11398956B2 (en) | Multi-Edge EtherChannel (MEEC) creation and management | |
JP6384696B2 (en) | Forwarding table synchronization method, network device and system | |
EP3226492B1 (en) | Method, system, and apparatus for improving forwarding capabilities during route convergence | |
TW201640866A (en) | Data center network system based on software-defined network and packet forwarding method, address resolution method, routing controller thereof | |
CN106452857A (en) | Method for generating configuration information and network control unit | |
US20190379582A1 (en) | System and method for a single logical ip subnet across multiple independent layer 2 (l2) subnets in a high performance ocmputing environment | |
CN104717081A (en) | Gateway function realization method and device | |
US10015098B2 (en) | Systems and methods to create highly scalable network services | |
JP2020510325A (en) | Virtualization device | |
CN108965134B (en) | Message forwarding method and device | |
KR20140049115A (en) | Method and system of supporting multiple controller in software defined networking | |
WO2013165340A1 (en) | CONVERGED FABRIC FOR FCoE | |
JP5978384B2 (en) | Method for receiving information, method for transmitting information and apparatus thereof | |
WO2022125782A1 (en) | Load balancing based on security parameter index values | |
RU2678452C1 (en) | Method of virtualization of data storage systems for data processing center and cloud computing | |
WO2019045583A1 (en) | Method of virtualizing data storage systems for data processing and cloud computing centres | |
US10367681B2 (en) | Maintenance of data forwarder connection state information | |
JP2023518370A (en) | Dial-up packet processing method, network element, system, network device | |
EP3503474A1 (en) | A method for remotely performing a network function on data exchanged with at least one gateway | |
JP7485677B2 (en) | Systems and methods for supporting heterogeneous and asymmetric dual-rail fabric configurations in high performance computing environments - Patents.com | |
Khatri | Analysis of OpenFlow protocol in local area networks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17923970 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17923970 Country of ref document: EP Kind code of ref document: A1 |