JP2011069098A - Data center - Google Patents

Data center Download PDF

Info

Publication number
JP2011069098A
JP2011069098A JP2009220535A JP2009220535A JP2011069098A JP 2011069098 A JP2011069098 A JP 2011069098A JP 2009220535 A JP2009220535 A JP 2009220535A JP 2009220535 A JP2009220535 A JP 2009220535A JP 2011069098 A JP2011069098 A JP 2011069098A
Authority
JP
Japan
Prior art keywords
building
cpu
data center
infrastructure
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009220535A
Other languages
Japanese (ja)
Other versions
JP5728155B2 (en
Inventor
Hirohisa Fujii
裕久 藤井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nomura Research Institute Ltd
Original Assignee
Nomura Research Institute Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nomura Research Institute Ltd filed Critical Nomura Research Institute Ltd
Priority to JP2009220535A priority Critical patent/JP5728155B2/en
Publication of JP2011069098A publication Critical patent/JP2011069098A/en
Application granted granted Critical
Publication of JP5728155B2 publication Critical patent/JP5728155B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a complete data center which is composed of a building, and which can enhance the easiness, safety, flexibility and extensibility of operations, for example, in the updating of server equipment by enabling an infrastructure corresponding to characteristics to be supplied to a server group split depending on a utilization form, while sharing infrastructure equipment. <P>SOLUTION: This data center includes an infrastructure building 100 which has the infrastructure equipment, a CPU building 200 which is constructed in such a manner as to be connected adjacently to the infrastructure building 100 and which can be removed by itself, and an extension space 300 in which the CPU building 200 can be newly constructed. Each of the CPU buildings 200 houses a plurality of servers which are classified depending on the utilization forms. The infrastructure building 100 supplies a power source and a communication line to each of the CPU buildings 200, additionally supplies air conditioning to each of the CPU buildings 200 by an air-conditioning system, and enables the specifications of the power source, the communication line and the air conditioning for supply to be changed depending on the characteristics of the servers housed in each of the CPU buildings 200. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、データセンターの構築技術に関し、特に、機能や使用目的等が異なる多種多様な利用形態に柔軟に対応可能なデータセンターに適用して有効な技術に関するものである。   The present invention relates to a data center construction technique, and more particularly to a technique that is effective when applied to a data center that can flexibly cope with various usage forms having different functions and purposes of use.

データセンターでは、多数のサーバやルータ等のICT(Information and Communication Technology)機器(以下では単に「サーバ」と記載する場合がある)を、サーバラック等を利用して収納する。一般的に、これらの多数のサーバラック等が収納されるコンピュータ室等は、いわゆる大部屋仕様で構成され、大きなフロアの空いているスペースにサーバラックやその他の機械を配置していく形をとっている。   In a data center, a large number of ICT (Information and Communication Technology) devices such as servers and routers (hereinafter sometimes simply referred to as “servers”) are stored using a server rack or the like. In general, a computer room or the like in which a large number of server racks are stored has a so-called large room specification, and server racks and other machines are arranged in a vacant space on a large floor. ing.

また、大規模なデータセンターでは、収納する多数のサーバは、例えば、自社における社内システムやユーザ(顧客)向けの業務システム等であったり、他の企業等の顧客から社内システムや業務システム等の運用・管理のアウトソーシングを受けたものや、いわゆるハウジングサービス、クラウドコンピューティングによるサービスなどを提供するサーバ群であったりと多種多様である。従って、これらのサーバを収納する大規模なデータセンターでは高い柔軟性や拡張性が必要とされる。   In a large-scale data center, a large number of servers to be stored are, for example, in-house in-house systems and business systems for users (customers), and other companies and other customers have in-house systems and business systems. There are a wide variety of servers, such as those that have been outsourced for operation and management, and so-called housing services and cloud computing services. Therefore, a large-scale data center that accommodates these servers requires high flexibility and expandability.

一方、従来の建造物としてのデータセンターに対して、近年では、輸送用のコンテナやプレハブなどにネットワークや電源、空調装置などを組み込んで、そこにサーバラック等を収納する、いわゆるモジュール(コンテナ)型データセンターが米国などを中心に用いられつつある。このようにデータセンターを移動や増設の容易なモジュール(ユニット)として構成することで、柔軟性や拡張性が大幅に向上し、データセンターの迅速な構築や展開を可能としている。また、過剰なスペースや設備を要しないため、環境負荷も小さくすることができる。   On the other hand, in contrast to the conventional data center as a building, in recent years, a so-called module (container) in which a network, a power supply, an air conditioner, etc. are incorporated into a container or prefabricated for transportation, and a server rack or the like is accommodated there. Type data centers are being used mainly in the United States. By configuring the data center as a module (unit) that can be easily moved and expanded in this way, the flexibility and expandability are greatly improved, and the data center can be quickly constructed and deployed. Further, since excessive space and equipment are not required, the environmental load can be reduced.

また、このようなモジュール型データセンターを複数用いて大規模なデータセンターを構築する際に利用可能な技術として、例えば、米国特許第7278273号明細書(特許文献1)には、輸送用のコンテナに複数のコンピュータを搭載した1つ以上のモジュールと冷却用の空調システムからなるデータセンターが記載されている。また、非特許文献1には、敷地面積が狭い日本の環境に適合させるため、モジュール(ユニット)を縦積みすることで、スペースの有効活用と優れた環境性能、および拡張性と柔軟性、工期短縮などの実現を可能とするデータセンターの技術が記載されている。   Further, as a technique that can be used when constructing a large-scale data center using a plurality of such modular data centers, for example, US Pat. No. 7,278,273 (Patent Document 1) discloses a container for transportation. Describes a data center including one or more modules equipped with a plurality of computers and an air conditioning system for cooling. In addition, Non-Patent Document 1 describes the effective use of space, excellent environmental performance, expandability and flexibility, and construction period by vertically stacking modules (units) to adapt to the Japanese environment where the site area is small. Data center technology that enables shortening and the like is described.

米国特許第7278273号明細書US Pat. No. 7,278,273

“ネスト・クラウド”、[online]、大成建設株式会社、[平成21年9月9日検索]、インターネット<URL:http://www.taisei.co.jp/ss/it/menu01/menu012/menu0123/1245629202176.html>“Nest Cloud”, [online], Taisei Corporation, [Search September 9, 2009], Internet <URL: http://www.taisei.co.jp/ss/it/menu01/menu012/ menu0123 / 1245629202176.html>

上述したように、従来の大規模なデータセンターでは、大部屋仕様のコンピュータ室に多種多様なサーバが配置されていることから、データセンターの稼働中に機器の更新作業などを行う際の作業効率が悪く、また、配線や配管長が増加し、動線も煩雑化するため、非効率で柔軟性や拡張性も低い状態となる場合が多い。   As described above, in a conventional large-scale data center, since a large variety of servers are arranged in a large-room computer room, work efficiency when performing equipment update operations while the data center is in operation In addition, the length of wiring and piping increases, and the flow line becomes complicated, which often results in inefficiency and low flexibility and expandability.

また、機能や使用目的などが異なる多種多様なサーバが混在することによって、局所的に負荷が異なる場所が生じることになり、電源や空調などのインフラをデータセンター内に一律に供給するのでは非効率な状況となっている。例えば、近年におけるサーバの発熱量の増加やサーバ収納の高密度化に伴い、データセンター内でも局所的に大きな空調容量を必要とする箇所が散在するような傾向は大きくなってきている。   In addition, mixing various servers with different functions and purposes of use creates places with different local loads, and it is not possible to supply infrastructure such as power supplies and air conditioning uniformly in the data center. It is an efficient situation. For example, with the recent increase in the amount of heat generated by servers and the increase in the density of server storage, there is an increasing tendency that places that require a large air conditioning capacity locally are scattered in the data center.

一方、いわゆるモジュール(コンテナ)型データセンターは、例えば、ユーザ(顧客)毎や、使用目的毎などに容易に構築することが可能であり、高い柔軟性や拡張性を有する。従って、これらを複数用いて、例えば、特許文献1や非特許文献1に記載されたような技術を用いて大規模なデータセンターを構築することも可能である。   On the other hand, a so-called module (container) type data center can be easily constructed, for example, for each user (customer) or for each purpose of use, and has high flexibility and expandability. Therefore, it is possible to construct a large-scale data center using a plurality of these, for example, using a technique as described in Patent Document 1 and Non-Patent Document 1.

しかしながら、本来、モジュール型データセンター自体は定置的に設置するためのものではなく、また、一般的に小規模利用に適した形で構成されているため、集約してデータセンターとして運用する場合は、全体として逆に非効率となる場合も考えられる。例えば、モジュール型データセンターは、それぞれが空調装置や給電/通信装置など、本来データセンターにおいて共有することで効率化を図るべきインフラ設備を個別に有している、もしくはこれらに個別に供給する必要があり、インフラ設備などのリソースを共有化することにより効率的な運用を図る大規模データセンターのメリットを活かせない場合も生じ得る。   However, the module type data center itself is not intended to be installed in a stationary manner, and is generally configured in a form suitable for small-scale use. On the contrary, it may be inefficient. For example, modular data centers each have or have to supply infrastructure equipment that should originally be shared in the data center, such as air conditioners and power supply / communication devices, to improve efficiency. In some cases, it may not be possible to take advantage of the benefits of a large-scale data center that operates efficiently by sharing resources such as infrastructure facilities.

また、モジュール型データセンターは、一般的には移動可能な構造物であることから、日本においては、その設置・構築には建築基準法をはじめ道路交通法や消防法などクリアしなければならない法律上の規制が多くなる場合があるとされており、結果として容易に構築可能である点やコスト面などでのメリットを全く享受できない場合も生じ得る。   In addition, modular data centers are generally movable structures, so in Japan, laws and regulations such as the Building Standards Act, the Road Traffic Act and the Fire Services Act must be cleared for installation and construction. It is said that there are cases where the above regulations increase, and as a result, there may be a case where it is not possible to enjoy the merit in terms of easy construction and cost.

そこで本発明の目的は、多数の多種多様なサーバを収納し、基本的なインフラ設備のリソースを共有しつつ、機能や使用目的などで分類される利用形態に応じて分割されたサーバ群に対して、それぞれの負荷等の特性に応じたインフラの供給を可能とし、また、サーバ機器や設備等の増設・撤去・更新時等における作業の容易性・安全性や、柔軟性・拡張性を向上させることができる、建造物からなる完結したデータセンターを提供することにある。   Therefore, an object of the present invention is to store a large number of diverse servers, share resources of basic infrastructure facilities, and to a group of servers divided according to usage forms classified according to functions and intended use. It is possible to supply infrastructure according to the characteristics of each load, etc., and improve the ease and safety of work, flexibility, and expandability when adding, removing, and updating server equipment and facilities. It is to provide a complete data center consisting of buildings that can be made.

本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。   The above and other objects and novel features of the present invention will be apparent from the description of this specification and the accompanying drawings.

本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、以下のとおりである。   Of the inventions disclosed in this application, the outline of typical ones will be briefly described as follows.

本発明の代表的な実施の形態によるデータセンターは、空調装置、給電装置、および通信装置を含むインフラ設備を有するインフラ棟と、前記インフラ棟の周囲に、前記インフラ棟に隣接して接続するように建造され、単独で撤去することが可能な、複数のサーバを収納する1つ以上のCPU棟と、前記CPU棟を新たに建造することが可能な敷地である1つ以上の第1の増設スペースとを有し、前記各CPU棟には、それぞれ、利用形態によって分類された複数の前記サーバを収納し、前記インフラ棟は、1つ以上の変電施設から受電し、1つ以上の通信キャリアから通信回線を入線して、前記給電装置および前記通信装置を介して前記各CPU棟に電源および通信回線を供給し、さらに、前記空調装置によって前記各CPU棟に空調を供給し、供給する前記電源、前記通信回線、および前記空調のスペックを、前記各CPU棟に収納される前記サーバの前記利用形態の特性に応じて変更することが可能であることを特徴とするものである。   A data center according to a representative embodiment of the present invention is connected to an infrastructure building having an infrastructure facility including an air conditioner, a power feeding device, and a communication device, and around the infrastructure building adjacent to the infrastructure building. One or more CPU buildings that house a plurality of servers and can be removed independently, and one or more first expansions that are sites where the CPU buildings can be newly constructed Each of the CPU buildings contains a plurality of the servers classified according to usage, and the infrastructure building receives power from one or more substation facilities and one or more communication carriers. From the power supply device and the communication device to supply power and communication lines to the CPU buildings, and the air conditioning device supplies air conditioning to the CPU buildings. The specifications of the power supply, the communication line, and the air conditioning to be supplied can be changed according to the characteristics of the usage mode of the server housed in each CPU building. It is.

本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。   Among the inventions disclosed in the present application, effects obtained by typical ones will be briefly described as follows.

本発明の代表的な実施の形態によれば、建造物からなる完結した大規模データセンターにおいて、基本的なインフラ設備のリソースをインフラ棟にて共有しつつ、機能や使用目的などで分類される利用形態に応じてサーバを収納する建造物としてのCPU棟を適当な単位で分割することにより、負荷等の特性に応じたインフラの効率的な供給が可能となる。また、サーバ機器や設備等の増設・撤去・更新等をCPU棟単位で行うことにより、作業の容易性・安全性や、柔軟性・拡張性を大きく向上させることが可能となる。   According to a typical embodiment of the present invention, in a complete large-scale data center composed of buildings, resources of basic infrastructure facilities are shared by the infrastructure building, and classified according to function, purpose of use, and the like. By dividing the CPU ridge as a building that houses the server according to the usage form in an appropriate unit, it is possible to efficiently supply infrastructure according to characteristics such as load. In addition, by adding, removing, and updating server devices and facilities in units of CPU buildings, it becomes possible to greatly improve the ease and safety of work and the flexibility and expandability.

本発明の一実施の形態であるデータセンターの構成例の概要を示した図である。It is the figure which showed the outline | summary of the structural example of the data center which is one embodiment of this invention. 本発明の一実施の形態であるデータセンターの構成例の概要を示した図である。It is the figure which showed the outline | summary of the structural example of the data center which is one embodiment of this invention. データセンターにおける建物、設備、およびIT機器の更新サイクルの例について示した図である。It is the figure shown about the example of the update cycle of the building in a data center, an installation, and IT apparatus. データセンターの稼働中にサーバを更新する際の更新方法の例について概要を示した図である。It is the figure which showed the outline | summary about the example of the update method at the time of updating a server during operation | movement of a data center.

以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一部には原則として同一の符号を付し、その繰り返しの説明は省略する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. Note that components having the same function are denoted by the same reference symbols throughout the drawings for describing the embodiment, and the repetitive description thereof will be omitted.

[概要]
従来の大規模データセンターでは、上述したように、大部屋仕様のコンピュータ室に多種多様なサーバ機器が収納されていることから、データセンターの稼働中にサーバ機器の更新などを行う際の作業効率が悪く、また、電源や通信などのケーブルの配線や配管長が増加し、動線も煩雑化するため、非効率で柔軟性や拡張性も低い状態となっている場合が多い。
[Overview]
In a conventional large-scale data center, as described above, various server devices are stored in a large-room computer room. Therefore, work efficiency when updating server devices while the data center is in operation, etc. In addition, the wiring and piping length of cables such as power supply and communication increase, and the flow line becomes complicated, so that there are many cases where inefficiency and flexibility and expandability are low.

図3は、データセンターにおける建物、設備、およびIT機器の更新サイクルの例について示した図である。図3の例において、データセンターの建物(建造物)の耐用年数は一般的に約30年程度であり、完成から約30年後に更新が行われることになる。また、データセンターにおけるインフラ設備(空調装置、給電/通信装置等)の耐用年数は一般的に約15年程度である。すなわち、データセンターの建物のライフサイクルの間に1回更新作業が行われることになる。同様に、IT機器(サーバ)の耐用年数は一般的に約5年程度であり、この場合、データセンターの建物のライフサイクルの間に5回更新作業が行われることになる。   FIG. 3 is a diagram illustrating an example of an update cycle of buildings, facilities, and IT equipment in a data center. In the example of FIG. 3, the useful life of a data center building (building) is generally about 30 years, and is updated about 30 years after completion. Further, the useful life of infrastructure facilities (air conditioners, power supply / communication devices, etc.) in data centers is generally about 15 years. That is, the update operation is performed once during the life cycle of the data center building. Similarly, the service life of IT equipment (servers) is generally about 5 years, and in this case, the update operation is performed five times during the life cycle of the data center building.

データセンターの建物を更新する際は、例えば、別の敷地に新たなデータセンターの建物を建造し、同時に新たなインフラ設備およびIT機器を設置して移行することで、現行のデータセンターの稼働を停止することなく更新作業を行うことが可能である。   When renewing a data center building, for example, a new data center building is built on another site, and at the same time, new infrastructure equipment and IT equipment are installed and migrated, thereby operating the current data center. Update work can be performed without stopping.

一方、インフラ設備、およびサーバについては、更新の際には現行のデータセンターの建物内にて行う必要がある。このとき、データセンターとしての稼働を停止することはできないため、データセンターの稼働と並行して更新作業を行う必要がある。ここで、インフラ設備については、一般的にデータセンターにおいては二系統/二重化に加えてさらに予備を備えるなどの冗長構成を有しているため、例えば、一系統ずつ順次更新する等によって更新作業を行うことが考えられる。   On the other hand, infrastructure facilities and servers must be updated in the current data center building. At this time, since the operation as a data center cannot be stopped, it is necessary to perform an update operation in parallel with the operation of the data center. Here, the infrastructure facilities generally have a redundant configuration such as providing a spare in addition to the dual / duplex in the data center. For example, the update operation is performed by sequentially updating one system at a time. It is possible to do it.

図4は、データセンターの稼働中にサーバを更新する際の更新方法の例について概要を示した図である。図中のaの状態では、CPU1およびCPU2(例えば、複数のサーバラックを有し、壁やケージ等で区画された単位)が稼働しており、空き1および空き2の領域(複数のサーバラックを設置して壁やケージ等で区画することが可能なスペース)が用意されている状態を示している。   FIG. 4 is a diagram showing an overview of an example of an update method used when updating a server while the data center is operating. In the state a in the figure, the CPU 1 and CPU 2 (for example, a unit having a plurality of server racks and partitioned by walls, cages, etc.) are operating, and the empty 1 and empty 2 areas (multiple server racks). And a space that can be partitioned by a wall or a cage) is prepared.

ここでCPU1およびCPU2を更新する際、図中のbの状態に示すように、まず、CPU1を更新したCPU1’を、例えば空き1の領域にて新設し(S1)、その後、CPU1を撤去する(S2)。同様に、図中のcの状態に示すように、CPU2を更新したCPU2’を、例えば空き2の領域にて新設し(S3)、その後、CPU2を撤去する(S4)。また、CPU1があった領域を空き1として整備する(S5)。このように、同一場所での更新作業は行わず、複数のサーバからなる単位毎に移設する形で更新していく。   Here, when updating CPU1 and CPU2, as shown in the state of b in the figure, first, CPU1 ′ that has updated CPU1 is newly established in, for example, an empty space 1 (S1), and then CPU1 is removed. (S2). Similarly, as shown in the state of c in the figure, the CPU 2 'updated with the CPU 2 is newly installed, for example, in the space 2 (S3), and then the CPU 2 is removed (S4). Further, the area where the CPU 1 is located is maintained as a vacant 1 (S5). In this way, the update operation is not performed at the same place, and the update is performed by moving to each unit composed of a plurality of servers.

本発明の一実施の形態であるデータセンターは、上記のような更新作業を容易にするため、機能や使用目毎的などによって分類されたサーバ群毎に、移設や撤去などが容易に行えるよう、独立した建造物であるCPU棟に分割して収納する。また、これらの各CPU棟に対して基本的なインフラを供給するインフラ棟を有し、各CPU棟は、それぞれ、インフラ棟に隣接して接続するように建造される。   The data center according to an embodiment of the present invention can be easily relocated or removed for each server group classified according to function or purpose of use in order to facilitate the above update work. Then, it is divided and stored in the CPU building, which is an independent building. Each CPU building has an infrastructure building for supplying basic infrastructure, and each CPU building is constructed so as to be connected adjacent to the infrastructure building.

このように、例えば、社内システムやユーザ(顧客)向けの業務システム、他の顧客企業等から運用・管理のアウトソーシングを受けたシステムや、いわゆるハウジングサービスやクラウドコンピューティングによるサービスなど、サーバの機能や使用目的等などで分類される利用形態に応じて、モジュール(コンテナ)型データセンターの場合よりも大きな単位でサーバを分割してCPU棟に収納することで、柔軟性・拡張性を向上させるとともに、各CPU棟に対して効率的なインフラの供給を可能とする。   In this way, server functions such as in-house systems, business systems for users (customers), systems that have been outsourced for operation and management from other customer companies, so-called housing services and services by cloud computing, etc. In addition to improving the flexibility and expandability by dividing the server into larger units than the module (container) type data center and storing it in the CPU building according to the usage form classified by the purpose of use etc. This enables efficient infrastructure supply to each CPU building.

また、各CPU棟を、移動可能なモジュール型データセンターではなく建造物としてインフラ棟に接続するように建造し、この単位で移設や撤去などを行うことで、柔軟性・拡張性を向上させるとともに、モジュール型データセンターを集約してデータセンターとする場合の課題点を解消することを可能とする。   In addition, each CPU ridge is constructed to connect to the infrastructure ridge as a building rather than a modular data center that can be moved, and this unit can be moved and removed to improve flexibility and expandability. It is possible to solve the problems in the case where the modular data centers are integrated into a data center.

[構成]
図1、および図2は、本発明の一実施の形態であるデータセンターの構成例の概要を示した図である。図1では、本実施の形態のデータセンターを構成する各棟(建造物)の機能的な構成(配置)の一例を上方から見た状態を示しており、図2では、その一部(インフラ棟およびCPU棟)を側面側から見た場合の構成の一例を示している。
[Constitution]
FIG. 1 and FIG. 2 are diagrams showing an outline of a configuration example of a data center according to an embodiment of the present invention. FIG. 1 shows an example of a functional configuration (arrangement) of each building (building) constituting the data center of the present embodiment as viewed from above, and FIG. 2 shows a part (infrastructure). 2 shows an example of the configuration when the building and the CPU building are viewed from the side.

図1において、データセンター1は、例えば、空調装置や給電装置、通信装置などのインフラ設備を有するインフラ棟100を中心に有し、インフラ棟100の周囲に、これに隣接して接続するような形で、複数のサーバを収納する1つ以上のCPU棟200、および、物品の保管やCPU棟200に収納するサーバのキッティング作業などを行うためのスペースを有する1つ以上の倉庫210を有する。   In FIG. 1, the data center 1 has, for example, an infrastructure building 100 having infrastructure facilities such as an air conditioner, a power feeding device, and a communication device, and is connected to the periphery of the infrastructure building 100 adjacent thereto. In this form, it has one or more CPU buildings 200 for storing a plurality of servers, and one or more warehouses 210 having a space for storing articles, kitting work for servers stored in the CPU buildings 200, and the like.

インフラ棟100は、一般的なデータセンターの建屋と同様に耐震/免震構造などを有し、各CPU棟200に対して基本的なインフラを供給する機能を有する建造物である。このため、インフラ棟100は、例えば、受電経路1(141)および受電経路2(142)によって、異なる変電施設(図示しない)から異口径の受電を行う。また、通信キャリア1(151)および通信キャリア2(152)によって、複数のキャリア(図示しない)から通信回線の入線を行う。これらにより、データセンター1が必要とする電源/通信インフラ部分の冗長性を強化することができる。なお、図1の例では電源/通信インフラともに2系統を入力しているが、当然ながら入力系統をさらに増やしてもよい。   The infrastructure building 100 has a seismic / isolation structure, etc., similar to a general data center building, and has a function of supplying basic infrastructure to each CPU building 200. For this reason, the infrastructure building 100 receives power of different diameters from different substation facilities (not shown) by the power receiving path 1 (141) and the power receiving path 2 (142), for example. In addition, communication lines 1 (151) and communication carrier 2 (152) are used to enter communication lines from a plurality of carriers (not shown). As a result, the redundancy of the power supply / communication infrastructure required by the data center 1 can be enhanced. In the example of FIG. 1, two systems are input for both the power supply / communication infrastructure, but the number of input systems may naturally be increased.

これらの電源/通信インフラは、インフラ棟100内の給電装置、および通信装置(図示しない)によって、各CPU棟200に供給される。また、インフラ棟100は、さらに空調装置(図示しない)を有しており、空調についても同様に、各CPU棟200に供給される。インフラ棟100は、各CPU棟200が収納するサーバの機能や使用目的などで分類される利用形態における負荷などの特性に応じて、供給するインフラ(空調、電源、通信)の容量などのスペックを適宜変更したり制御したりすることが可能であるものとする。   These power / communication infrastructures are supplied to each CPU building 200 by a power supply device in the infrastructure building 100 and a communication device (not shown). The infrastructure building 100 further includes an air conditioner (not shown), and air conditioning is similarly supplied to each CPU building 200. The infrastructure building 100 has specifications such as the capacity of the infrastructure (air conditioning, power supply, communication) to be supplied according to the characteristics such as the load in the usage form classified according to the function and purpose of use of the server stored in each CPU building 200. It can be changed or controlled as appropriate.

また、各CPU棟200は、モジュール(コンテナ)型データセンターのような移動可能なユニットではない独立した建造物として構成される。このとき、例えば、あるCPU棟200には自社の社内システム用のサーバ群、別のCPU棟200には顧客企業からアウトソーシングとして受託して運用・管理を行っているサーバ群、さらに別のCPU棟200にはクラウドコンピューティングとしてサービスを提供するサーバ群、といったように、サーバの機能や使用目的、負荷の特性や運用・管理の際のグレードなどで分類される利用形態によって、サーバ群毎に分割して収納する。これにより、インフラ棟100が、各CPU棟200に対して負荷等の特性に応じたインフラの効率的な供給を行うことが可能となる。   Each CPU building 200 is configured as an independent building that is not a movable unit such as a module (container) type data center. At this time, for example, one CPU building 200 has a server group for its own in-house system, another CPU building 200 has a server group that is outsourced and operated and managed by a client company, and another CPU building. 200 is a server group that provides services as cloud computing, such as server functions, purpose of use, load characteristics, grades for operation and management, etc. And store. As a result, the infrastructure building 100 can efficiently supply infrastructure to each CPU building 200 according to characteristics such as load.

また、CPU棟200は、インフラ棟100とは独立した建造物であるため、収納しているサーバ機器を図4に示したような更新方法で更新する際に、CPU棟200単位で空き領域(増設スペース300)の敷地に新たに建造したり、対象のCPU棟200のみを単独で撤去して新たに増設スペース300としたりすることにより、他のCPU棟200(他の利用形態で稼働中のサーバ)に影響を与えずに、更新作業を行うことが可能である。   Further, since the CPU ridge 200 is a building independent of the infrastructure ridge 100, when the stored server device is updated by the update method as shown in FIG. By newly constructing on the site of the expansion space 300) or by removing only the target CPU ridge 200 alone to make a new expansion space 300, other CPU ridges 200 (operating in other usage forms) The update operation can be performed without affecting the server.

また、CPU棟200に対する各種の工事やメンテナンス作業等についても、インフラ棟100や他のCPU棟200に影響を与えずに単独で行うことが可能である。なお、各CPU棟200は、収納するサーバの特性等に応じて、それぞれ異なる耐震/免震構造等を有していたり、異なる建物の大きさであったりしてもよい。   Also, various constructions and maintenance work for the CPU building 200 can be performed independently without affecting the infrastructure building 100 and other CPU buildings 200. Each CPU building 200 may have a different seismic isolation / seismic isolation structure or the like according to the characteristics of the server to be stored, or may have a different building size.

また、これらは、倉庫210についても同様であり、CPU棟200の新設や撤去に応じて、空き領域(増設スペース310)の敷地に新たに建造したり、対象の倉庫210のみを単独で撤去して新たに増設スペース310としたりすることが可能である。このように、CPU棟200や、倉庫210について、棟単位で新設や撤去が可能であるため、データセンター1として高い柔軟性や拡張性を有することができる。   The same applies to the warehouse 210. In response to the establishment or removal of the CPU ridge 200, the warehouse 210 is newly constructed on the site of an empty area (additional space 310) or only the target warehouse 210 is removed alone. It is possible to make a new extension space 310. As described above, since the CPU ridge 200 and the warehouse 210 can be newly established or removed on a ridge basis, the data center 1 can have high flexibility and expandability.

さらに、インフラ棟100の周囲には、例えば、対向する位置にバックヤード110とエントランス120が配置される。バックヤード110は、サーバやその他の機器や物品等を搬入する入口であり、エントランス120は、エントランス120につながるアプローチ130から入ってくる作業者等の人の入口である。なお、これらは、インフラ棟100とは独立した建造物であってもよいし、インフラ棟100の一部であってもよい。   Furthermore, around the infrastructure building 100, for example, a backyard 110 and an entrance 120 are arranged at opposing positions. The backyard 110 is an entrance for carrying in servers, other devices, articles, and the like, and the entrance 120 is an entrance for a person such as a worker who enters from an approach 130 connected to the entrance 120. These may be a structure independent of the infrastructure building 100, or may be a part of the infrastructure building 100.

バックヤード110から搬入した物品等や、エントランスから入った人は、例えば、インフラ棟100の外周に設けられた通路101を通って各CPU棟200や、倉庫210に至ることができる。なお、各CPU棟200や、倉庫210は、例えば、セキュリティ機能を有する扉等を介してインフラ棟100と往来することが可能なように構成される。このように、物品等の搬出入口と人の出入口とを分離することで、これらの動線が不必要に交錯しないようにすることが可能となる。   Articles brought in from the backyard 110 and people entering from the entrance can reach the CPU buildings 200 and the warehouse 210 through the passage 101 provided on the outer periphery of the infrastructure building 100, for example. Each CPU ridge 200 and warehouse 210 are configured to be able to come and go with the infrastructure ridge 100 via, for example, a door having a security function. In this way, by separating the entry / exit port for goods and the like and the entrance / exit for humans, it is possible to prevent these flow lines from being unnecessarily crossed.

また、例えば、エントランス120を挟んでインフラ棟100と対向する側の、アプローチ130の両側には、顧客などの単位毎に管理や事務などの作業を行う1つ以上の事務棟220を有する。事務棟220についても、CPU棟200や倉庫210と同様に、事務棟220単位で空き領域(増設スペース320)の敷地に新たに建造したり、対象の事務棟220のみを単独で撤去して新たに増設スペース320としたりすることが可能である。   Further, for example, one side of the approach 130 on the side facing the infrastructure building 100 across the entrance 120 has one or more office buildings 220 that perform operations such as management and office work for each unit such as a customer. Similarly to the CPU ridge 200 and the warehouse 210, the office ridge 220 is newly constructed on the site of the vacant area (additional space 320) in units of the office ridge 220, or the target office ridge 220 alone is removed and newly created. It is possible to make an additional space 320.

図2においては、インフラ棟100および各CPU棟200は、それぞれ地面に締結された建造物として構成されており、インフラ棟100に対して、各CPU棟200が、例えば、セキュリティ機能を有する扉等(図示しない)を介して互いに往来可能なように接続する形で建造されていることを示している。   In FIG. 2, the infrastructure building 100 and each CPU building 200 are each configured as a structure fastened to the ground, and each CPU building 200 is, for example, a door having a security function with respect to the infrastructure building 100. It is shown that they are constructed so as to be connected to each other via (not shown).

CPU棟200内には、例えば、いわゆるフリーアクセスフロアなどによって構成された二重床構造の上に複数のサーバラック202が収納されている。これらのサーバラック202には、機能や使用目的などの利用形態がある程度共通する多数のサーバが多段に収納されている。また、例えば、これらのサーバに電源を供給するための分電盤201も収納されている。   In the CPU building 200, for example, a plurality of server racks 202 are accommodated on a double floor structure constituted by a so-called free access floor or the like. In these server racks 202, a large number of servers having some common usage forms such as functions and usage purposes are stored in multiple stages. Further, for example, a distribution board 201 for supplying power to these servers is also housed.

CPU棟200、およびCPU棟200内の機器(サーバラック202(サーバ)や分電盤201など)には、インフラ棟100からインフラ(空調、電源、通信)が供給される。例えば、インフラ棟100は空調装置102を有しており、サーバラック202内のサーバを冷却するための冷気を、床下に配置された給気ダクト103等を介して供給する。また、サーバを冷却した後に排出された熱風を、天井部に配置された排気ダクト104等を介して回収する。   Infrastructure (air conditioning, power supply, communication) is supplied from the infrastructure building 100 to the CPU building 200 and the devices (such as the server rack 202 (server) and the distribution board 201) in the CPU building 200. For example, the infrastructure building 100 includes an air conditioner 102, and supplies cool air for cooling the servers in the server rack 202 via an air supply duct 103 or the like disposed under the floor. Further, the hot air discharged after the server is cooled is collected through the exhaust duct 104 or the like disposed on the ceiling.

また、変電施設や通信キャリアから入力した電源/通信インフラを、インフラ棟100内の給電装置および通信装置(図示しない)を介して、床下に配線された電源/通信ケーブル105によって、分電盤201やサーバラック202(およびサーバ)に供給する。   Further, the power distribution / communication infrastructure inputted from the substation facility or communication carrier is supplied to the distribution board 201 by the power supply / communication cable 105 wired under the floor via the power supply device and the communication device (not shown) in the infrastructure building 100. Or the server rack 202 (and server).

なお、空調装置102や、給電装置、通信装置は、各CPU棟200に対して、必要とされるインフラの容量等に応じて供給のレベルや内容等のスペックを制御可能であるものとする。これにより、各CPU棟200によって基本的なインフラ設備を共有しつつ、各CPU棟200に対して効率的にインフラを供給することを可能とする。このとき、空調装置102や、給電装置、通信装置などのインフラ設備を、必要に応じてそれぞれ複数有して対応するようにしてもよい。   It is assumed that the air conditioner 102, the power supply device, and the communication device can control the specifications of the supply level, contents, and the like for each CPU building 200 according to the required infrastructure capacity and the like. Accordingly, it is possible to efficiently supply infrastructure to each CPU building 200 while sharing basic infrastructure facilities among the CPU buildings 200. At this time, a plurality of infrastructure facilities such as an air conditioner 102, a power feeding device, and a communication device may be provided as needed.

以上に説明したように、本発明の一実施の形態であるデータセンターによれば、大規模なデータセンター1において、基本的なインフラ設備のリソースをインフラ棟100にて共有しつつ、機能や使用目的等で分類される利用形態毎に、モジュール(コンテナ)型データセンターの場合よりも大きな単位でサーバを分割してCPU棟200に収納する。これにより、各CPU棟200に対して負荷等の特性に応じたインフラの効率的な供給が可能となる。   As described above, according to the data center which is an embodiment of the present invention, functions and usage are shared in the infrastructure building 100 while sharing resources of basic infrastructure facilities in the large-scale data center 1. The server is divided into units larger than the case of the module (container) type data center and stored in the CPU ridge 200 for each usage form classified according to purpose. Thereby, it is possible to efficiently supply infrastructure to each CPU building 200 according to characteristics such as load.

また、各CPU棟200を、移動可能なモジュール型データセンターではなく建造物としてインフラ棟100に接続するように建造することで、サーバ機器や設備等の増設・撤去・更新等をCPU棟200単位で行うことを可能とする。これにより、サーバ機器の更新作業の容易性・安全性や、データセンターとしての柔軟性・拡張性を大きく向上させるとともに、建造物からなる完結したデータセンターとして、モジュール型データセンターを集約してデータセンターを構築する場合の課題点を解消することができる。   In addition, by constructing each CPU ridge 200 so as to be connected to the infrastructure ridge 100 as a building rather than a movable modular data center, it is possible to add / remove / update server devices and facilities, etc. It is possible to do with. This greatly improves the ease and safety of server device update operations and the flexibility and expandability of the data center, and the modular data center is integrated into the data center as a complete data center. The problems in building a center can be solved.

以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。   As mentioned above, the invention made by the present inventor has been specifically described based on the embodiment. However, the present invention is not limited to the embodiment, and various modifications can be made without departing from the scope of the invention. Needless to say.

例えば、図1および図2に示した各機能(建物)の配置や構成はあくまでも一例であり、インフラ棟110に対して、独立した建造物であるCPU棟200が接続する形で建造されており、また、そのような形でCPU棟200を新たに建造することが可能な増設スペース300を有するような構成である限り、インフラ棟110の形状や、他の建物の配置位置や大きさなどは、敷地条件等に応じて適宜変更することができる。   For example, the arrangement and configuration of each function (building) shown in FIGS. 1 and 2 are merely examples, and the infrastructure building 110 is constructed such that the CPU building 200, which is an independent building, is connected. In addition, as long as the configuration has an additional space 300 that can newly construct the CPU ridge 200 in such a form, the shape of the infrastructure ridge 110, the arrangement position and size of other buildings, etc. It can be changed appropriately according to site conditions.

本発明は、機能や使用目的等が異なる多種多様な利用形態に柔軟に対応可能なデータセンターに適用して有効な技術に関するものである。   The present invention relates to a technique that is effective when applied to a data center that can flexibly cope with various usage forms having different functions and purposes of use.

1…データセンター、
100…インフラ棟、101…通路、102…空調装置、103…給気ダクト、104…排気ダクト、105…電源/通信ケーブル、110…バックヤード、120…エントランス、130…アプローチ、141…受電経路1、142…受電経路2、151…通信キャリア1、152…通信キャリア2、
200…CPU棟、201…分電盤、202…サーバラック、210…倉庫、220…事務棟、
300、310、320…増設スペース。
1 ... Data center,
DESCRIPTION OF SYMBOLS 100 ... Infrastructure building, 101 ... Passage, 102 ... Air conditioning apparatus, 103 ... Air supply duct, 104 ... Exhaust duct, 105 ... Power supply / communication cable, 110 ... Backyard, 120 ... Entrance, 130 ... Approach, 141 ... Power receiving path 1 142 ... Power receiving path 2, 151 ... Communication carrier 1, 152 ... Communication carrier 2,
200 ... CPU building, 201 ... distribution panel, 202 ... server rack, 210 ... warehouse, 220 ... office building,
300, 310, 320 ... additional space.

Claims (5)

多数のサーバを収納するデータセンターであって、
空調装置、給電装置、および通信装置を含むインフラ設備を有するインフラ棟と、
前記インフラ棟の周囲に、前記インフラ棟に隣接して接続するように建造され、単独で撤去することが可能な、複数のサーバを収納する1つ以上のCPU棟と、
前記CPU棟を新たに建造することが可能な敷地である1つ以上の第1の増設スペースとを有し、
前記各CPU棟には、それぞれ、利用形態によって分類された複数の前記サーバを収納し、
前記インフラ棟は、1つ以上の変電施設から受電し、1つ以上の通信キャリアから通信回線を入線して、前記給電装置および前記通信装置を介して前記各CPU棟に電源および通信回線を供給し、さらに、前記空調装置によって前記各CPU棟に空調を供給し、供給する前記電源、前記通信回線、および前記空調のスペックを、前記各CPU棟に収納される前記サーバの前記利用形態の特性に応じて変更することが可能であることを特徴とするデータセンター。
A data center that houses a large number of servers,
An infrastructure building having infrastructure facilities including an air conditioner, a power supply device, and a communication device;
One or more CPU buildings that house a plurality of servers that are built around and connected to the infrastructure building and can be removed independently;
One or more first expansion spaces that are sites where the CPU building can be newly constructed,
Each of the CPU ridges stores a plurality of the servers classified according to usage patterns,
The infrastructure building receives power from one or more substation facilities, enters communication lines from one or more communication carriers, and supplies power and communication lines to the CPU buildings via the power supply device and the communication device. Furthermore, the air conditioning is supplied to each CPU building by the air conditioner, and the specifications of the power source, the communication line, and the air conditioning to be supplied are characteristics of the usage mode of the server stored in each CPU building. A data center characterized in that it can be changed according to the situation.
請求項1に記載のデータセンターにおいて、
さらに、前記インフラ棟の周囲に、前記インフラ棟に隣接して接続するように建造され、単独で撤去することが可能な1つ以上の倉庫と、
前記倉庫を新たに建造することが可能な敷地である1つ以上の第2の増設スペースとを有することを特徴とするデータセンター。
In the data center according to claim 1,
One or more warehouses built around and connected to the infrastructure building and capable of being removed alone;
A data center having one or more second expansion spaces, which are sites where the warehouse can be newly constructed.
請求項1または2に記載のデータセンターにおいて、
さらに、前記インフラ棟の周囲に、前記インフラ棟に隣接して接続するように建造され、前記サーバを含む物品の搬出入口となるバックヤードと、
前記インフラ棟に隣接して接続するように建造され、人の出入口となるエントランスとを有することを特徴とするデータセンター。
In the data center according to claim 1 or 2,
Further, a backyard that is built around the infrastructure building so as to be connected adjacent to the infrastructure building, and serves as a loading / unloading port for articles including the server,
A data center, which is constructed so as to be connected adjacent to the infrastructure building and has an entrance serving as a doorway for people.
請求項3に記載のデータセンターにおいて、
さらに、前記エントランスを挟んで前記インフラ棟と対向する側に建造され、単独で撤去することが可能な1つ以上の事務棟と、
前記事務棟を新たに建造することが可能な敷地である1つ以上の第3の増設スペースとを有することを特徴とするデータセンター。
In the data center according to claim 3,
Furthermore, one or more office buildings that are built on the side facing the infrastructure building across the entrance and can be removed independently;
A data center comprising one or more third expansion spaces that are sites where the office building can be newly constructed.
請求項1〜4のいずれか1項に記載のデータセンターにおいて、
前記CPU棟に収納されている前記サーバを更新する際に、
更新後の前記サーバを収納する前記CPU棟を、前記第1の増設スペースに新たに建造し、更新前の前記サーバを収納していた前記CPU棟を撤去して、新たな前記第1の増設スペースとすることにより更新が可能であることを特徴とするデータセンター。
In the data center according to any one of claims 1 to 4,
When updating the server stored in the CPU building,
The CPU building for storing the updated server is newly built in the first expansion space, the CPU building for storing the server before the update is removed, and the new first expansion is added. A data center that can be updated by using space.
JP2009220535A 2009-09-25 2009-09-25 Data center update method Active JP5728155B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009220535A JP5728155B2 (en) 2009-09-25 2009-09-25 Data center update method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009220535A JP5728155B2 (en) 2009-09-25 2009-09-25 Data center update method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2014085107A Division JP2014132154A (en) 2014-04-17 2014-04-17 Data center update method

Publications (2)

Publication Number Publication Date
JP2011069098A true JP2011069098A (en) 2011-04-07
JP5728155B2 JP5728155B2 (en) 2015-06-03

Family

ID=44014614

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009220535A Active JP5728155B2 (en) 2009-09-25 2009-09-25 Data center update method

Country Status (1)

Country Link
JP (1) JP5728155B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015531037A (en) * 2012-09-04 2015-10-29 アマゾン・テクノロジーズ・インコーポレーテッド Expandable data center with moving walls

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11241516A (en) * 1998-02-23 1999-09-07 Taisei Corp Facilities for factory, laboratory, etc.
JP2001241196A (en) * 2000-02-28 2001-09-04 Shimizu Corp Office system
US7278273B1 (en) * 2003-12-30 2007-10-09 Google Inc. Modular data center
JP2008214969A (en) * 2007-03-05 2008-09-18 Shimizu Corp Method of extending base-isolated building

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11241516A (en) * 1998-02-23 1999-09-07 Taisei Corp Facilities for factory, laboratory, etc.
JP2001241196A (en) * 2000-02-28 2001-09-04 Shimizu Corp Office system
US7278273B1 (en) * 2003-12-30 2007-10-09 Google Inc. Modular data center
JP2008214969A (en) * 2007-03-05 2008-09-18 Shimizu Corp Method of extending base-isolated building

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6013052540; 諏訪浩一,瀧上嘉詞郎: 'データセンターの建築・設備の最新動向' [online] , 20090123, 大成建設株式会社 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015531037A (en) * 2012-09-04 2015-10-29 アマゾン・テクノロジーズ・インコーポレーテッド Expandable data center with moving walls
JP2018003593A (en) * 2012-09-04 2018-01-11 アマゾン・テクノロジーズ・インコーポレーテッド Expandable data center with movable wall

Also Published As

Publication number Publication date
JP5728155B2 (en) 2015-06-03

Similar Documents

Publication Publication Date Title
US10704258B2 (en) Expandable data center with movable wall
US9585282B1 (en) Transverse console switch bridge
EP3053423B1 (en) System and method for forming modular data center
US9258930B2 (en) Expandable data center with side modules
US11026350B2 (en) Modular data center without active cooling
EP2310926B1 (en) Modular computing environments
KR101873264B1 (en) Expandable data center with movable wall
US9795061B2 (en) Data center facility design configuration
Matsuzaki et al. Heuristic algorithm to solve the multi-floor layout problem with the consideration of elevator utilization
US20140240917A1 (en) Cooling circuit system, in particular to be used in a data center, and controlling method thereof
US20210075863A1 (en) Edge computing deployment and management
JP5728155B2 (en) Data center update method
JP2014132154A (en) Data center update method
JP2012230641A (en) Distributed data center configured of container type or module type data center
JP5427836B2 (en) Container type data center
CN210671004U (en) Data center with isolated resources
US11060312B1 (en) Data center network tunnel
Brimble et al. Data centres
Nelson et al. The role of modularity in datacenter design
Gulati et al. CODAC systems arrangement and connectivity
JP2007100338A (en) Production facility
Zahid et al. Optimization of the Automotive Manufacturing Plant Using Systematic Layout Planning (SLP) with Modular Layout
JP2015203886A (en) Equipment storage device and data center
Choi et al. Cloud Datacenter Extension Method using Modular Concept

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120208

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130524

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140417

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140425

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20140523

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150406

R150 Certificate of patent or registration of utility model

Ref document number: 5728155

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R154 Certificate of patent or utility model (reissue)

Free format text: JAPANESE INTERMEDIATE CODE: R154

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250