JP5928087B2 - スイッチ、情報処理装置および通信制御方法 - Google Patents
スイッチ、情報処理装置および通信制御方法 Download PDFInfo
- Publication number
- JP5928087B2 JP5928087B2 JP2012077827A JP2012077827A JP5928087B2 JP 5928087 B2 JP5928087 B2 JP 5928087B2 JP 2012077827 A JP2012077827 A JP 2012077827A JP 2012077827 A JP2012077827 A JP 2012077827A JP 5928087 B2 JP5928087 B2 JP 5928087B2
- Authority
- JP
- Japan
- Prior art keywords
- identifier
- access request
- switch
- pcie
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 17
- 230000010365 information processing Effects 0.000 title claims description 14
- 238000004891 communication Methods 0.000 title claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 36
- 238000012545 processing Methods 0.000 description 31
- 238000006243 chemical reaction Methods 0.000 description 24
- 238000012217 deletion Methods 0.000 description 7
- 230000037430 deletion Effects 0.000 description 7
- 239000000284 extract Substances 0.000 description 7
- 238000012546 transfer Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000012508 change request Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L49/00—Packet switching elements
- H04L49/15—Interconnection of switching modules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/382—Information transfer, e.g. on bus using universal interface adapter
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L49/00—Packet switching elements
- H04L49/25—Routing or path finding in a switch fabric
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L49/00—Packet switching elements
- H04L49/30—Peripheral units, e.g. input or output ports
- H04L49/3009—Header conversion, routing tables or routing tags
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
図1は、実施例1に係る情報処理装置の全体構成例を示す図である。図1に示すように、情報処理装置は、CPU(Central Processing Unit)100、PCIExpressスイッチ(A)〜(E)、管理ユニット200、少なくとも1つのデバイス500を有する。なお、各PCIExpressスイッチ(以下、「PCIeスイッチ」と記載する場合がある)と管理ユニット200は、情報処理装置の外部にあってもよく、情報処理装置に内蔵されていてもよい。
図2は、PCIeスイッチの構成を示すブロック図である。なお、図1に示した各PCIeスイッチは同様の構成を有するので、ここでは、PCIeスイッチ10として説明する。
次に、PCIeスイッチ10が実行する処理の流れを説明する。ここでは、CPU100からパケットを受信した場合の流れと、他のスイッチからパケットを受信した場合の流れとを説明する。
図8は、CPUからパケットを受信した場合の処理の流れを示すフローチャートである。図8に示すように、PCIeスイッチ10のTLP付加部16は、パケットをデコードする(S101)。例えば、TLP付加部16は、第1中継部15が第1入力バッファ14から読み出したパケットを受信する。
図9は、他のスイッチからパケットを受信した場合の処理の流れを示すフローチャートである。図9に示すように、PCIeスイッチ10のTLP識別部21は、入力されたパケットにTLPプレフィックスが付加されているか否かを判定する(S201)。すなわち、TLP識別部21は、第2中継部20が第2入力バッファ19から読み出したパケットが拡張PCIeパケットであるか否かを判定する。
次に、CPU100から出力されたアクセス要求、すなわちパケットがデバイス500に届くまでの流れを説明する。図10は、パケットの流れを説明する図である。図10に示すように、CPU100は、PCIeリンクにのせて、通常のPCIeパケットをデバイス500に向けて送信する(S301)。
図11は、PCIeスイッチを用いた物理構成を示す図である。図11に示すように、実施例2に係る情報処理装置の構成は図1と同様である。具体的には、CPU100から出力されたアクセス要求のパケットは、複数のPCIeスイッチを介してデバイス500に到達する。なお、各PCIeスイッチは、実施例1で説明したPCIeスイッチ10と同様の構成を有するものとする。
一方で、CPU100からは従来と同じPCIeパケットを用いてI/Oデバイスにアクセスすることができる。図12は、図11をCPUから見た場合の論理構成を示す図である。図12に示すように、CPU100は、各PCIeスイッチとは異なり、各I/OデバイスをPCIIDで識別する。なお、ここではPCIIDを用いる例で説明するが、論理アドレスであってもよい。具体的には、CPU100は、I/Oデバイス0にアクセスする場合には、PCIID=1を指定することで、I/Oデバイス0にアクセスすることができる。つまり、CPU100は、PCIID=1を含めたPCIeパケットを送信することで、I/Oデバイス0にデータを書き込んだりすることができる。
次に、図11に示した各PCIeスイッチのテーブル構成を説明する。なお、ここでは、経路変更の説明に用いるテーブルについて説明する。図14は、PCIeスイッチ(A)が保持する内部ネットワークID変換テーブルの例を示す図である。このテーブルは、PCIeスイッチ(A)だけが有していてもよく、他のPCIeスイッチも有していてもよい。図14に示すように、PCIeスイッチ(A)は、「Valid、ホスト番号、PCIID、内部ネットワークID」を対応付けて記憶する。具体的には、PCIeスイッチ(A)は、PCIID=1を内部ネットワークID=6に変換し、PCIID=2を内部ネットワークID=7に変換する情報を保持する。また、PCIeスイッチ(A)は、PCIID=3を内部ネットワークID=8に変換し、PCIID=4を内部ネットワークID=9に変換する情報を保持する。
次に、図16に示したCPU100からI/Oデバイス2への経路でネットワーク障害が発生した例を説明する。図17は、PCIeスイッチのネットワーク障害を示す図である。図17に示すように、PCIeスイッチ(B)とPCIeスイッチ(E)との間のネットワークおよびPCIeスイッチ(C)とPCIeスイッチ(E)との間のネットワークで障害が発生したとする。つまり、PCIeスイッチ(C)のポート2からPCIeスイッチ(E)のポート0への疎通が不能となり、同様に、PCIeスイッチ(B)のポート2からPCIeスイッチ(E)のポート1への疎通が不能となったとする。
実施例1や実施例2では、CPUが1つの例で説明したが、これに限定されるものではなく、CPUの数は複数であってもよい。図3や図4に示すように、各テーブルにCPUを識別するホスト番号を設けることで、実施例1や実施例2と同様の処理を行うことができる。
上記実施例では、PCIeスイッチを用いた場合で説明したが、これに限定されるものではなく、PCIeスイッチと同様の機能を有する他のスイッチについても同様に処理することができる。
また、本実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともできる。あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。
11 PCIID変換テーブル
12 内部ネットワークID変換テーブル
13 経路テーブル
14 第1入力バッファ
15 第1中継部
16 TLP付加部
17 第1ルーティング実行部
18 ブリッジ接続部
19 第2入力バッファ
20 第2中継部
21 TLP識別部
22 第2ルーティング実行部
23 第3ルーティング実行部
24 クロスバ
25 TLP削除部
26 第3中継部
27 第1出力バッファ
28 第4中継部
29 第2出力バッファ
Claims (7)
- プロセッサとデバイスとを有する情報処理装置内で、前記プロセッサと前記デバイスとの間を接続するネットワークを他のスイッチと形成するスイッチにおいて、
前記プロセッサがデバイスの識別に使用する第1識別子と、前記第1識別子に割与えられた論理アドレスの範囲とを対応付けた第1記憶部と、
前記第1識別子と、前記ネットワークで前記デバイスの識別に共通して使用される第2識別子とを対応付けて記憶する第2記憶部と、
前記他のスイッチからアクセス要求を受信した場合に、当該アクセス要求に前記第2識別子が付加されているか否かを判定する判定部と、
前記プロセッサからアクセス要求を受信した場合に、または、前記判定部が前記アクセス要求に前記第2識別子が付加されていないと判定した場合に、当該アクセス要求に含まれる論理アドレスに対応する前記第1識別子を前記第1記憶部から特定し、特定された前記第1識別子に対応する前記第2識別子を前記第2記憶部から特定する特定部と、
前記特定部によって特定された第2識別子を前記アクセス要求に付加して拡張アクセス要求を生成し、前記特定部によって特定された前記第1識別子に対応する前記デバイスに、当該拡張アクセス要求を送信する送信制御部と
を有することを特徴とするスイッチ。 - 前記送信制御部は、前記拡張アクセス要求の宛先が前記他のスイッチである場合に、当該拡張アクセス要求をそのまま送信し、前記拡張アクセス要求の宛先がデバイスである場合に、当該拡張アクセス要求から前記第2識別子を削除して送信することを特徴とする請求項1に記載のスイッチ。
- 前記特定部は、前記判定部が前記アクセス要求に前記第2識別子が付加されていると判定した場合に、当該アクセス要求を前記拡張アクセス要求と判定し、当該拡張アクセス要求に含まれる前記第2識別子を抽出し、前記第2識別子とポート番号とを対応付けて記憶する第3記憶部を参照して、抽出した前記第2識別子に対応するポート番号を特定し、
前記送信制御部は、前記特定部によって特定された前記ポート番号に対応するポートから、当該拡張アクセス要求を送信することを特徴とする請求項1に記載のスイッチ。 - 前記スイッチを管理する管理サーバから、前記第1記憶部または前記第2記憶部に記憶される情報を変更する指示を受信した場合に、前記第1記憶部または前記第2記憶部に記憶される情報を指示された内容に変更する変更制御部をさらに有することを特徴とする請求項1に記載のスイッチ。
- 前記第1記憶部は、PCIExpressを用いて前記デバイスにアクセスするプロセッサが使用する第1識別子と、前記論理アドレスの範囲とを対応付けて記憶し、
前記送信制御部は、前記プロセッサが前記PCIExpressを用いて送信したアクセス要求における前記PCIExpressのTLPプレフィックス領域に、前記特定部によって特定された第2識別子を記載して前記拡張アクセス要求を生成することを特徴とする請求項1に記載のスイッチ。 - プロセッサと、
前記プロセッサとデバイスとの間を接続する複数の内部スイッチと、
前記プロセッサがデバイスの識別に使用する第1識別子と、前記第1識別子に割与えられた論理アドレスの範囲とを対応付けた第1記憶部と、
前記第1識別子と、前記複数の内部スイッチが形成するネットワークで前記デバイスの識別に共通して使用される第2識別子とを対応付けて記憶する第2記憶部と、
前記内部スイッチからアクセス要求を受信した場合に、当該アクセス要求に前記第2識別子が付加されているか否かを判定する判定部と、
前記プロセッサからアクセス要求を受信した場合に、または、前記判定部が前記アクセス要求に前記第2識別子が付加されていないと判定した場合に、当該アクセス要求に含まれる論理アドレスに対応する前記第1識別子を前記第1記憶部から特定し、特定された前記第1識別子に対応する前記第2識別子を前記第2記憶部から特定する特定部と、
前記特定部によって特定された第2識別子を前記アクセス要求に付加して拡張アクセス要求を生成し、前記特定部によって特定された前記第1識別子に対応する前記デバイスに、当該拡張アクセス要求を送信する送信制御部と
を有することを特徴とする情報処理装置。 - プロセッサとデバイスとを有する情報処理装置内で、前記プロセッサと前記デバイスとの間を接続するネットワークを他のスイッチと形成するスイッチが、
前記プロセッサがデバイスの識別に使用する第1識別子と、前記第1識別子に割与えられた論理アドレスの範囲とを対応付けを第1記憶部に記憶し、
前記第1識別子と、前記ネットワークで前記デバイスの識別に共通して使用される第2識別子とを対応付けを記憶する第2記憶部に記憶し、
前記他のスイッチからアクセス要求を受信した場合に、当該アクセス要求に前記第2識別子が付加されているか否かを判定し、
前記プロセッサからアクセス要求を受信した場合に、または、前記アクセス要求に前記第2識別子が付加されていないと判定した場合に、当該アクセス要求に含まれる論理アドレスに対応する前記第1識別子を前記第1記憶部から特定し、特定された前記第1識別子に対応する前記第2識別子を前記第2記憶部から特定し、
特定した第2識別子を前記アクセス要求に付加して拡張アクセス要求を生成し、特定された前記第1識別子に対応する前記デバイスに、当該拡張アクセス要求を送信する
処理を実行することを特徴とする通信制御方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012077827A JP5928087B2 (ja) | 2012-03-29 | 2012-03-29 | スイッチ、情報処理装置および通信制御方法 |
US13/721,127 US9219695B2 (en) | 2012-03-29 | 2012-12-20 | Switch, information processing apparatus, and communication control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012077827A JP5928087B2 (ja) | 2012-03-29 | 2012-03-29 | スイッチ、情報処理装置および通信制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013206390A JP2013206390A (ja) | 2013-10-07 |
JP5928087B2 true JP5928087B2 (ja) | 2016-06-01 |
Family
ID=49234969
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012077827A Active JP5928087B2 (ja) | 2012-03-29 | 2012-03-29 | スイッチ、情報処理装置および通信制御方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9219695B2 (ja) |
JP (1) | JP5928087B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6089835B2 (ja) * | 2013-03-19 | 2017-03-08 | 富士通株式会社 | 情報処理装置及び制御方法 |
US9003090B1 (en) | 2014-03-25 | 2015-04-07 | DSSD, Inc. | PCI express fabric routing for a fully-connected mesh topology |
JP6394062B2 (ja) * | 2014-05-20 | 2018-09-26 | 富士通株式会社 | 情報処理装置およびバス制御方法 |
JP6298534B2 (ja) * | 2014-08-05 | 2018-03-20 | 株式会社アキブシステムズ | 経路制御装置及び経路制御方法並びにコンピュータシステム及びプログラム及びプログラムを格納した記憶媒体 |
JP6355536B2 (ja) * | 2014-11-27 | 2018-07-11 | APRESIA Systems株式会社 | 中継システムおよびスイッチ装置 |
US10162786B2 (en) * | 2014-12-01 | 2018-12-25 | SK Hynix Inc. | Storage node based on PCI express interface |
US10089275B2 (en) * | 2015-06-22 | 2018-10-02 | Qualcomm Incorporated | Communicating transaction-specific attributes in a peripheral component interconnect express (PCIe) system |
CN105119849B (zh) * | 2015-07-21 | 2018-07-31 | 浪潮(北京)电子信息产业有限公司 | 一种交换机架构及应用于交换机架构的数据管理方法 |
CN106844267A (zh) * | 2017-02-10 | 2017-06-13 | 郑州云海信息技术有限公司 | 一种应用在purley平台支持PCIE IOBOX的结构 |
JP7044033B2 (ja) * | 2018-11-06 | 2022-03-30 | 日本電信電話株式会社 | アクセス制御方法、アクセス制御装置、およびデータ処理装置 |
WO2021147046A1 (zh) * | 2020-01-22 | 2021-07-29 | 华为技术有限公司 | 一种PCIe的数据传输方法及装置 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6621818B1 (en) * | 1998-10-19 | 2003-09-16 | Texas Instruments Incorporated | Ring configuration for network switches |
US6512744B1 (en) * | 1999-06-25 | 2003-01-28 | Cisco Technology, Inc. | Virtual-channel merging |
JP2001326693A (ja) * | 2000-05-17 | 2001-11-22 | Nec Corp | 通信装置及び通信制御方法並びに制御プログラム記録媒体 |
US7102996B1 (en) * | 2001-05-24 | 2006-09-05 | F5 Networks, Inc. | Method and system for scaling network traffic managers |
US8285907B2 (en) * | 2004-12-10 | 2012-10-09 | Intel Corporation | Packet processing in switched fabric networks |
US7293129B2 (en) * | 2005-04-22 | 2007-11-06 | Sun Microsystems, Inc. | Flexible routing and addressing |
CN101501660B (zh) * | 2006-08-09 | 2011-11-16 | 日本电气株式会社 | 因特网连接交换机和因特网连接系统 |
KR100757881B1 (ko) * | 2006-09-20 | 2007-09-11 | 삼성전자주식회사 | Nat를 이용한 자동 터널링 방법 및 그 시스템 |
KR100810701B1 (ko) * | 2006-11-09 | 2008-03-07 | 삼성전자주식회사 | 로컬 네트워크의 인터넷 프로토콜 주소의 이동성 관리 방법및 시스템 |
US7886080B2 (en) * | 2007-11-30 | 2011-02-08 | Cisco Technology, Inc. | Management of topology changes in layer two networks |
US7849252B2 (en) * | 2008-05-30 | 2010-12-07 | Intel Corporation | Providing a prefix for a packet header |
US20110110306A1 (en) * | 2008-06-30 | 2011-05-12 | Kenichi Yajima | Network system, mobile gateway, location management server, and communication control method of mobile node |
JP5272265B2 (ja) * | 2008-09-29 | 2013-08-28 | 株式会社日立製作所 | Pciデバイス共有方法 |
US8953603B2 (en) * | 2009-10-28 | 2015-02-10 | Juniper Networks, Inc. | Methods and apparatus related to a distributed switch fabric |
US8402189B2 (en) * | 2010-05-13 | 2013-03-19 | Hitachi, Ltd. | Information processing apparatus and data transfer method |
US9612989B2 (en) * | 2010-12-24 | 2017-04-04 | Hitachi, Ltd. | Computer system and routing control method |
WO2012128282A1 (ja) * | 2011-03-23 | 2012-09-27 | 日本電気株式会社 | 通信制御システム、スイッチノード、及び通信制御方法 |
-
2012
- 2012-03-29 JP JP2012077827A patent/JP5928087B2/ja active Active
- 2012-12-20 US US13/721,127 patent/US9219695B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US9219695B2 (en) | 2015-12-22 |
US20130259053A1 (en) | 2013-10-03 |
JP2013206390A (ja) | 2013-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5928087B2 (ja) | スイッチ、情報処理装置および通信制御方法 | |
JP4670676B2 (ja) | スイッチ及びネットワークブリッジ装置 | |
JP5310175B2 (ja) | スイッチシステム、及びスイッチシステムの制御方法 | |
US10044642B2 (en) | Storage device in which forwarding-function-equipped memory nodes are mutually connected and data processing method | |
JP4998469B2 (ja) | インターコネクション用スイッチおよびシステム | |
US7865654B2 (en) | Programmable bridge header structures | |
JP5958164B2 (ja) | 制御装置、方法及びプログラム、並びにシステム及び情報処理方法 | |
JP5399570B2 (ja) | 計算機システム、それに使用されるスイッチ及びパケット転送制御方法 | |
US20130114615A1 (en) | Switch and flow table controlling method | |
US8683001B2 (en) | Address management device | |
JP5353278B2 (ja) | 通信装置 | |
US9612989B2 (en) | Computer system and routing control method | |
US8401000B2 (en) | Method of processing data packets | |
JPWO2009139489A1 (ja) | Pciエクスプレススイッチ、pciエクスプレスシステム、及びネットワーク制御方法 | |
JP2009140179A (ja) | ストレージシステムおよびルートスイッチ | |
US10305825B2 (en) | Bus control device, relay device, and bus system | |
JP2014241545A (ja) | 通信システム及び通信システムの冗長化の方法 | |
US20090235048A1 (en) | Information processing apparatus, signal transmission method, and bridge | |
US10169279B2 (en) | Input/output control device, input/output control system, and input/output control method for conversion of logical address of instruction into local address of device specified in instruction | |
JP3825692B2 (ja) | コンピュータシステム内に存在しないプロセッサに対する無効化要求を処理する方法及び装置 | |
US11836105B2 (en) | Communication device, information processing system, and communication method | |
WO2011148925A1 (ja) | 半導体装置とネットワークルーティング方法とシステム | |
JP6586374B2 (ja) | 通信装置、経路管理サーバ、通信方法、および仮想ポート割当方法 | |
JP5110156B2 (ja) | スイッチ及びネットワークブリッジ装置 | |
US20070038745A1 (en) | Processing module |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150106 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151021 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151027 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160119 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160329 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160411 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5928087 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |