WO2011083786A1 - 通信制御システム、及び通信制御方法 - Google Patents

通信制御システム、及び通信制御方法 Download PDF

Info

Publication number
WO2011083786A1
WO2011083786A1 PCT/JP2011/050019 JP2011050019W WO2011083786A1 WO 2011083786 A1 WO2011083786 A1 WO 2011083786A1 JP 2011050019 W JP2011050019 W JP 2011050019W WO 2011083786 A1 WO2011083786 A1 WO 2011083786A1
Authority
WO
WIPO (PCT)
Prior art keywords
control
entry
control server
communication
communication device
Prior art date
Application number
PCT/JP2011/050019
Other languages
English (en)
French (fr)
Inventor
正徳 高島
洋一 飛鷹
徹 伊澤
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to CN201180005562.XA priority Critical patent/CN102696205B/zh
Priority to RU2012133437/08A priority patent/RU2523917C2/ru
Priority to EP11731784.2A priority patent/EP2523404A4/en
Priority to JP2011549000A priority patent/JP5743906B2/ja
Priority to CA2786429A priority patent/CA2786429A1/en
Priority to US13/520,773 priority patent/US9432283B2/en
Priority to KR1020127017708A priority patent/KR101514506B1/ko
Publication of WO2011083786A1 publication Critical patent/WO2011083786A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/42Centralised routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/18Loop-free operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/38Flow based routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/48Routing tree calculation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/54Organization of routing tables

Definitions

  • the present invention relates to a communication control system, and more particularly to a communication control system in which a communication device that transfers packets and a control server that determines route information are separated.
  • the network route control in TCP / IP (Transmission Control Protocol / Internet Protocol) and IEEE 802.1 is generally a method in which autonomous route control is performed by exchanging route information between communication devices.
  • the autonomous route control between communication devices has a problem that the reliability of the network is lowered because the route information between the communication devices becomes temporarily inconsistent.
  • Patent Document 1 As a method for dealing with this problem, in Patent Document 1 (US 2006/0092974 A1), a control unit is separated from a communication device, and a plurality of communication devices without a control unit are remotely connected from a control server on which the control unit is mounted. A control method is disclosed. It is also known that by controlling the route of multiple communication devices with a control server, more reliable route control can be realized than autonomous route control by exchanging route information between multiple communication devices. Yes.
  • Non-Patent Document 1 discloses an open flow protocol (OpenFlow Protocol) as a protocol for controlling a communication device from a control server.
  • OpenFlow Protocol an open flow protocol
  • the communication device has a transfer table called a flow table, and the control server can add, rewrite, and delete entries in the transfer table of the communication device.
  • the flow table is a table in which entries defining predetermined processes (actions) to be performed on packets that match predetermined matching conditions (rules) are registered.
  • a packet group (packet series) that conforms to the rule is called a flow.
  • the flow rules are any or all of a destination address (Destination Address), a source address (Source Address), a destination port (Destination Port), and a source port (Source Port) included in the header area of each protocol layer of the packet. It is defined by various combinations using and can be distinguished.
  • the above address includes a MAC address (Media Access Control Address) and an IP address (Internet Protocol Address).
  • Information on an ingress port (Ingress Port) can also be used as a flow rule.
  • the communication device matches the traffic passing through the communication device with the entry registered in the forwarding table for the predetermined search information, and if the search information (for example, the destination IP address) included in both matches, Forward the route according to the entry.
  • the network path can be controlled from the control server using the OpenFlow protocol or the like.
  • FIG. 1 when an entry of a certain transfer table is registered as search information in the communication device 102A as the output destination, the transfer table of the transfer table that already contains the search information in the communication device 102B. If the entry is registered with the communication device 102A as the output destination, traffic that matches the condition will go back and forth between the communication device 102A and the communication device 102B many times.
  • a packet having the destination IP address “192.168.0.1/32” (“/ 32” indicates the network address length) as header information is output as the search information to the communication device 102B. It is assumed that an entry to the effect is registered. At this time, if the communication device 102B already has an entry indicating that the packet having the destination IP address “192.168.0.0/8” in the header information has the communication device 102A as the output destination, The traffic destined for the address “192.168.0.1/32” goes back and forth many times between the communication device 102A and the communication device 102B.
  • FIG. 1 Taking FIG. 1 as an example, after a communication table 102A registers a communication device 102B as an output destination in a certain transfer table 102A, a new transfer table entry cannot be registered in the communication device 102B. The traffic is discarded at the communication device 102B.
  • a packet having the destination IP address “192.168.0.1/32” in the header information as search information is registered after an entry indicating that the communication device 102B is the output destination is registered. If the new forwarding table entry cannot be registered in 102B, the traffic addressed to the IP address “192.168.0.1/32” is discarded by the communication device 102B.
  • the transfer table controlled by the OpenFlow protocol of Non-Patent Document 1 has search priority as shown in FIG. If traffic matches the search information of a lower search priority entry, but matches the search information of a higher search priority entry, the traffic is forwarded according to the higher search priority entry.
  • communication table entries are registered in the order of communication devices 102D, 102B, and 102A.
  • the transfer table of the communication device 102B it is assumed that an entry in the transfer table including search information for a newly registered entry has already been registered with a higher search priority than the newly registered entry.
  • the newly registered entry is not used in the traffic search result.
  • the communication device 102A when an entry is registered with the communication device 102B as an output destination as search information, traffic that matches the condition is reciprocated between the communication devices 102A and 102B many times.
  • the forwarding table of the communication device 102B it is assumed that an entry relating to traffic addressed to the IP address “192.168.0.0/8” has already been registered with a higher search priority than a newly registered entry. .
  • a packet having a destination IP address “192.168.0.1/32” in the header information as search information is newly set to have the communication device 102D as an output destination with a low search priority.
  • the header is the destination IP address “192.168.0.1/32” as the search information.
  • the present invention solves the conventional problems, and when registering / rewriting / deleting entries in the transfer table of the communication device from the control server, the state mismatch between the communication devices, as well as an unintended traffic loop or discard The purpose is to deter.
  • the communication control system of the present invention includes a plurality of communication devices and a control server.
  • Each of the plurality of communication devices matches the received traffic with the entry registered in the forwarding table, and when the information included in the traffic matches the information included in the entry, the traffic is Forward to the route specified in the entry.
  • the control server registers an entry in a transfer table possessed by each communication device, and determines path information for each communication device.
  • each communication device verifies the control instruction content from the control server with respect to a series of control instructions from the control server, and holds the verification result.
  • the control server obtains verification results from each communication device, determines whether a series of controls can be executed in each communication device based on the verification results from each communication device, and can execute a series of controls. If there is, it prompts each communication device to execute a series of controls.
  • the communication device and the control server are computers.
  • an entry is registered in the transfer table possessed by each of a plurality of communication devices from the control server, and path information is determined for each communication device.
  • the received traffic is matched with the entry registered in the forwarding table, and when the information included in the traffic matches the information included in the entry, the traffic is changed to the entry. Forward to the route specified in.
  • the control instruction content from the control server is verified for a series of control instructions from the control server, and the verification result is held.
  • the control server obtains the verification result from each communication device, determines whether a series of control can be executed in each communication device based on the verification result from each communication device, and can execute the series of control. If there is, it prompts each communication device to execute a series of controls.
  • the program of the present invention is a program for causing a computer functioning as each of a communication device and a control server to execute the communication control method described above. Note that the program of the present invention can be stored in a storage device or a storage medium.
  • Communication reliability can be improved in a communication control system in which a communication device that transfers packets and a control server that determines route information are separated.
  • FIG. 1 shows a configuration example of a network system in which the present invention is implemented.
  • This network system includes a control server 101, a communication device 102, and a terminal 103.
  • communication devices 102A to 102D are shown as the communication device 102.
  • Terminals 103A and 103B are shown as the terminal 103.
  • the control server 101 calculates an end-to-end communication path between the terminals 103 based on topology (collection form) configuration information collected from the communication device 102, and an entry for transferring traffic between the terminals 103, Register with the transfer table of the communication device 102. In addition, the control server 101 rewrites or deletes the entry in the transfer table of the communication device 102 based on a change in the route due to a change in topology configuration information, a change in usable bandwidth, or the like.
  • the communication device 102 (communication devices 102A to 102D) constitutes a network topology and transmits traffic between network ends.
  • the forwarding table of the communication device 102 includes search information for traffic flowing through the network and an entry designating the matching traffic forwarding destination, and is controlled by the control server 101.
  • the terminal 103 (terminals 103A and 103B) transmits and receives traffic between ends.
  • control server 101 As an example of the control server 101, a computer such as a PC (personal computer), a thin client server, an appliance, a workstation, a mainframe, and a supercomputer is assumed.
  • PC personal computer
  • thin client server As an example of the control server 101, a computer such as a PC (personal computer), a thin client server, an appliance, a workstation, a mainframe, and a supercomputer is assumed.
  • the communication device 102 As an example of the communication device 102, an open flow switch is assumed. Examples of devices that can be used as OpenFlow switches include relay devices such as routers and switching hubs, and relay computers such as gateways, proxies, firewalls, and load balancers.
  • the communication device 102 may be a multi-layer switch. The multi-layer switch is further classified into each layer of the OSI reference model to be supported. The main types are a layer 3 switch for reading network layer (third layer) data, a layer 4 switch for reading transport layer (fourth layer) data, and a layer 7 for reading application layer (seventh layer) data. There is a switch (application switch).
  • Examples of the terminal 103 include computers such as PCs, thin client terminals, appliances, workstations, mainframes, supercomputers, or mobile phones, car navigation systems (car navigation systems), gadgets (electronic devices), portable game machines, and home use.
  • a game machine, an interactive TV, a digital tuner, a digital recorder, an information home appliance (information home appliance), an OA (Office Automation) device, and the like can be considered.
  • the terminal 103 may be mounted on a moving body such as a vehicle, a ship, or an aircraft.
  • control server 101 the communication device 102, and the terminal 103 may be virtual machines (Virtual Machine (VM)) constructed on physical machines.
  • VM Virtual Machine
  • Examples of networks connecting the control server 101, the communication device 102, and the terminal 103 include the Internet, a LAN (Local Area Network), a wireless LAN (Wireless LAN), a WAN (Wide Area Network), a backbone (Backbone), and a cable.
  • TV (CATV) line fixed telephone network, mobile phone network, WiMAX (IEEE 802.16a), 3G (3rd Generation), leased line, IrDA (Infrared Data Association), Bluetooth (registered trademark), serial communication A line, a data bus, etc. can be considered.
  • FIG. 2 shows a configuration example of the communication device 102.
  • the communication device 102 includes a control server interface unit 1021, a transaction management unit 1022, a table operation unit 1023, a table search unit 1024, a transfer table 1025, a data transfer unit 1026, and an interface 1027.
  • interfaces 1027A and 1027B are shown as the interface 1027.
  • the control server interface unit 1021 terminates the control channel with the control server 101, retrieves a control command from the control server 101, returns an execution result, and accepts and returns an inquiry for a transaction result.
  • a transaction is a collection of a plurality of related processes as one processing unit.
  • An example of this control command is one of OpenFlow protocol messages (OpenFlow Protocol Message), such as a “FlowMod” message for registering an entry from the controller to the switch flow table.
  • the transaction management unit 1022 holds each control instruction as a transaction, holds an execution result and a verification result for the instruction, responds to an inquiry from the control server 101, and executes it for a transaction execution instruction. Or As a technique for executing a transaction waiting for execution, a two-phase commit technique that is widely used can be used.
  • the table operation unit 1023 is a block for executing entry registration / rewriting / deletion for the transfer table 1025.
  • the table search unit 1024 determines whether the new entry is in an inclusion relationship or a partial inclusion relationship with respect to the registered entry of the transfer table 1025, or an entry of the inclusion / partial inclusion relationship Confirms either high or low search priority for the entry and returns the result to the transaction management unit 1022.
  • the entries are managed by numbers, and the search priority is determined in the order of the numbers. Also, search information as shown in FIG. Address) and output port.
  • the forwarding table 1025 includes entry number, transmission source IP address, transmission destination IP address, and output port information.
  • the output port indicates the interface 1027 (interfaces 1027A and 1027B).
  • the data transfer unit 1026 extracts a search key from the traffic input from the interface 1027 (interfaces 1027A and 1027B), searches the transfer table 1025 for the search key, and transfers the traffic according to the search result.
  • the interface 1027 (interfaces 1027A and 1027B) is an interface for communication of the communication device 102, and is connected to other communication devices 102 and the terminal 103 as shown in FIG. 1 to receive and transmit traffic.
  • control server interface unit 1021, the transaction management unit 1022, the table operation unit 1023, the table search unit 1024, the transfer table 1025, and the data transfer unit 1026 are hardware such as a processing device driven by a program and the hardware It is assumed to be realized by software such as a program for driving and executing desired processing and a storage device for storing the software and various data. However, actually, it is not limited to these examples.
  • a CPU Central Processing Unit
  • a microprocessor a microcontroller
  • a semiconductor integrated circuit Integrated Circuit (IC) having a similar function
  • IC Integrated Circuit
  • Examples of the above storage device include a semiconductor storage device such as a RAM (Random Access Memory), a ROM (Read Only Memory), an EEPROM (Electrically Erasable and Programmable Read Only Memory), a HDD (Semiconductor memory device), a HDD eD An auxiliary storage device such as Solid State Drive), a removable disk such as a DVD (Digital Versatile Disk) or an SD memory card (Secure Digital memory card), a storage medium (media), or the like is conceivable. However, actually, it is not limited to these examples.
  • a semiconductor storage device such as a RAM (Random Access Memory), a ROM (Read Only Memory), an EEPROM (Electrically Erasable and Programmable Read Only Memory), a HDD (Semiconductor memory device), a HDD eD
  • An auxiliary storage device such as Solid State Drive
  • a removable disk such as a DVD (Digital Versatile Disk) or an SD memory card (Secure Digital memory card
  • control server interface unit 1021, the data transfer unit 1026, and the interface 1027 have a communication function.
  • a network adapter such as a NIC (Network Interface Card)
  • a communication device such as an antenna
  • a connection port (connector), etc.
  • the communication port can be considered. However, actually, it is not limited to these examples.
  • control server 101 transmits entry data in the format of FIG. 4 to the communication device 102.
  • the communication device 102 stores the received entry data in the transfer table 1025.
  • Step S101 In the communication device 102, the control server interface unit 1021 receives a control command for adding a new entry from the control server 101 via the control channel, and passes it to the transaction management unit 1022.
  • the transaction management unit 1022 registers the status as waiting for verification in the transaction status table of FIG. 5 using the transaction number included in the control command as a key.
  • the transaction state table includes information on a controller ID, a transaction number, a control command, a state, and a rollback method.
  • the controller ID is identification information of the control server. When there is only one control server 101 and it can be uniquely identified, there is no need for controller ID information.
  • the transaction waiting table verification transaction is changed to the verification state, and the entry of the transfer table 1025 is sent to the table search unit 1024.
  • Step S102 The table search unit 1024 refers to the transfer table 1025 and checks whether there is an empty entry in the transfer table 1025. If there is an empty entry, the table search unit 1024 proceeds to the process of step S104. If there is no empty entry, the table search unit 1024 proceeds to the process of step S103.
  • Step S103 When there is no empty entry, the table search unit 1024 notifies the transaction management unit 1022 that there is no empty entry in the transfer table 1025. The transaction management unit 1022 determines that there is no empty entry, moves to the process of step S106, and puts the transaction in a standby state.
  • Step S104 When there is an empty entry, the table search unit 1024 checks whether there is an entry in the transfer table 1025 that has a comprehensive relationship or a partial comprehensive relationship (there is a conflict). When there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict), the table search unit 1024 also checks the priority of the entry. If there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict), the table search unit 1024 proceeds to the process of step S105. Further, when there is no entry having a comprehensive relationship or a partial comprehensive relationship (no conflict), the table search unit 1024 proceeds to the process of step S106 and puts the transaction in a standby state.
  • Step S105 The table search unit 1024 indicates to the transaction management unit 1022 that when there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict), there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict). Notice.
  • the transaction management unit 1022 determines that the state is inclusive / partially inclusive relationship (with conflict), moves to the processing in step S106, and puts the transaction in a standby state.
  • Step S106 The table search unit 1024 places the transaction in a standby state and waits for an instruction from the control server 101.
  • the control server 101 automatically confirms the processing verification result using the transaction number as a key, and makes a determination in the control server 101 based on the result. At this time, the completion of the transaction can be notified from the communication device 102 to the control server 101.
  • Step S107 The control server interface unit 1021 receives a new control command from the control server 101 via the control channel and passes it to the transaction management unit 1022.
  • the control server interface unit 1021 performs processing according to a control command from the control server 101. If the control command is process execution, the process proceeds to step S108. If the control command is a rollback instruction, the process proceeds to step S109.
  • Step S108 When the control command is processing execution, the control server interface unit 1021 reflects the entry in the transfer table 1025 according to the control command from the control server 101.
  • Step S109 When the control command is a rollback instruction, the control server interface unit 1021 performs processing according to the registered rollback function without reflecting the entry in the transfer table 1025 according to the control command from the control server 101.
  • Second Embodiment instead of using the transaction number as the control INDEX (index) in steps S106 and S107 in FIG. 6, the entry in the transfer table 1025 is set as the control INDEX.
  • the forwarding table entry is search information such as an IP address.
  • search information such as an IP address.
  • the transaction management unit 1022 does not wait for processing when there is no empty entry or when there is no entry in a comprehensive relationship or a partial comprehensive relationship (no conflict). Instead, the control command is executed as it is. In this case, the processing verification result can be confirmed as a result of execution, and rollback is also possible.
  • steps S201 to S205 in FIG. 7 are the same as steps S101 to S105 in FIG.
  • Step S201 In the communication device 102, the control server interface unit 1021 receives a control command for adding a new entry from the control server 101 via the control channel, and passes it to the transaction management unit 1022.
  • the transaction management unit 1022 registers the status as waiting for verification in the transaction status table of FIG. 5 using the transaction number included in the control command as a key.
  • the transaction waiting table transaction in the transaction state table is changed to a state being verified, and the entry of the transfer table is sent to the table search unit 1024.
  • Step S202 The table search unit 1024 refers to the transfer table 1025 and checks whether there is an empty entry in the transfer table 1025. If there is an empty entry, the table search unit 1024 proceeds to the process of step S204. If there is no empty entry, the table search unit 1024 proceeds to the process of step S203.
  • Step S203 When there is no empty entry, the table search unit 1024 notifies the transaction management unit 1022 that there is no empty entry in the transfer table 1025. The transaction management unit 1022 determines that there is no empty entry and proceeds to the process of step S206.
  • Step S204 the table search unit 1024 checks whether there is an entry in the transfer table 1025 that has a comprehensive relationship or a partial comprehensive relationship (there is a conflict). Note that the table search unit 1024 also checks the priority of an entry when there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict). If there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict), the table search unit 1024 proceeds to the process of step S205. Further, when there is no entry having a comprehensive relationship or a partial comprehensive relationship (no conflict), the table search unit 1024 proceeds to the process of step S206.
  • Step S205 The table search unit 1024 indicates to the transaction management unit 1022 that when there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict), there is an entry in a comprehensive relationship or a partial comprehensive relationship (there is a conflict). Notice.
  • the transaction management unit 1022 determines that the state is inclusive / partially inclusive (with conflict), and proceeds to the process of step S206.
  • Step S206 The control server interface unit 1021 performs processing according to a control command from the control server 101.
  • the control server interface unit 1021 reflects the entry in the transfer table 1025 according to the control command from the control server 101.
  • the control server interface unit 1021 does not reflect the entry in the transfer table 1025 according to the control command from the control server 101, and performs processing according to the registered rollback function.
  • the control server 101 confirms the processing verification result using the transaction number as a key, and makes a determination in the control server 101 based on the result. At this time, the completion of the transaction can be notified from the communication device 102 to the control server 101.
  • the communication device 102 receives control from a plurality of control servers 101 (control servers 101A and 101B).
  • the transaction status table is as shown in FIG.
  • a transaction is managed by a set of “controller ID” and “transaction number”.
  • the controller ID is identification information of the control server.
  • the controller ID of the control server 101A is “1”
  • the controller ID of the control server 101B is “2”.
  • the transaction number for the transaction for which the control server 101 is an initiator, the number uniquely generated by the control server 101 is used, and for the transaction for which the communication device 102 is an initiator, A number uniquely generated by the communication device 102 is used.
  • Examples of transactions in which the communication device 102 serves as an initiator include a change in interface state and a transaction for notifying the control server 101 of traffic reception.
  • control server 101 since the control server 101 controls a plurality of communication devices 102 group, the control server 101 controls transactions performed by the control server 101 and transactions performed by the communication device 102 as initiators.
  • the communication device 102 and the transaction number are managed as a set.
  • the communication device 102 uniquely generates a transaction number, and when the ID of the communication device 102 is changed or the connection destination control server 101 is changed, the transaction number is newly assigned. At this time, a random number is used as the transaction number.
  • the communication device 102 when there are a plurality of processes in the execution of the same transaction, the communication device 102 performs the process in accordance with the order of the plurality of processes.
  • the present invention is a communication system that controls authorization, route, QoS, etc. of traffic between terminals by adding, rewriting, and deleting a transfer table of a communication device from a control server separated from the communication device.
  • the present invention also relates to a communication device control method for ensuring communication connectivity between terminals by performing operations on transfer tables of a plurality of communication devices while maintaining consistency.
  • the present invention suppresses a state mismatch between communication devices when registering, rewriting, or deleting entries in the transfer table of the communication device from the control server, eliminates unintended traffic loops and discards, and prevents communication.
  • the purpose is to improve reliability.
  • the communication device 102 controls the communication device 102 from the control server 101.
  • the control device 101 verifies the control instruction content, holds the verification result in the communication device 102, the control server 101 acquires the verification result, and a series of control is executed based on the verification result from the plurality of communication devices 102. After determining whether or not it is possible, execution by a plurality of communication devices 102 is prompted.
  • the communication device 102 executes once according to the instruction from the control server 101, and when the control server 101 determines that the control command is abnormal, the execution result is rolled back to the communication device 102.

Abstract

 制御サーバーからの通信機器の遠隔制御を行うシステムの場合、制御サーバーから通信機器の転送テーブルにエントリを書き込むタイミングによっては、トラフィックのループや廃棄が意図せず発生する可能性がある。そこで、制御サーバー101が行った通信機器102に対する転送テーブルのエントリの登録・書換・削除に対して、通信機器102で制御サーバー101からの制御指示内容の検証を行い、通信機器102でその検証結果を保持し、制御サーバー101がその検証結果を取得し、複数の通信機器102からの検証結果を基にして、一連の制御が実行可能かどうか判断した後に、複数の通信機器102での実行を促す。

Description

通信制御システム、及び通信制御方法
 本発明は、通信制御システムに関し、特にパケットを転送する通信機器と経路情報を決定する制御サーバーが分離された通信制御システムに関する。
 TCP/IP(Transmission Control Protocol/Internet Protocol)やIEEE802.1におけるネットワークの経路制御は、通信機器間での経路情報の交換による自律的な経路制御が行われる手法が一般的である。
 一方で、通信機器間の自律的な経路制御では、通信機器間の経路情報が一時的な不一致となることで、ネットワークの信頼性が低下する問題があった。
 この問題に対応する手法として、特許文献1(US 2006/0092974 A1)に、通信機器から制御部を分離して、その制御部を実装した制御サーバーから、制御部のない複数の通信機器を遠隔で制御する手法が開示されている。また、制御サーバーで複数の通信機器の経路を制御することにより、複数の通信機器間で経路情報を交換することによる自律的な経路制御より、信頼性の高い経路制御が実現できることも知られている。
 また、非特許文献1には、制御サーバーから通信機器を制御するプロトコルとして、オープンフロープロトコル(OpenFlow Protocol)が開示されている。オープンフロープロトコルによると、通信機器は、フローテーブルと呼ばれる転送テーブルを有し、制御サーバーは、通信機器の転送テーブルにエントリ(entry)を追加・書換・削除することができる。
 なお、フローテーブルとは、所定のマッチ条件(ルール)に適合するパケットに対して行うべき所定の処理(アクション)を定義したエントリが登録されるテーブルである。ルールに適合するパケット群(パケット系列)をフローと呼ぶ。フローのルールは、パケットの各プロトコル階層のヘッダ領域に含まれる宛先アドレス(Destination Address)、送信元アドレス(Source Address)、宛先ポート(Destination Port)、送信元ポート(Source Port)のいずれか又は全てを用いた様々な組み合わせにより定義され、区別可能である。なお、上記のアドレスには、MACアドレス(Media Access Control Address)やIPアドレス(Internet Protocol Address)を含むものとする。また、上記に加えて、入口ポート(Ingress Port)の情報も、フローのルールとして使用可能である。
 また、通信機器は、所定の検索情報について、通信機器を経由するトラフィックと、転送テーブルに登録されたエントリをマッチングし、両方に含まれる検索情報(例えば宛先IPアドレス)が一致すると、当該トラフィックをエントリに従った経路に転送する。オープンフロープロトコル等を用いて、ネットワークの経路制御を制御サーバーから行うことが可能である。
 しかしながら、制御サーバーからの通信機器の遠隔制御を行う場合、既知の手法により、通信機器が交換することによって発生する経路情報の発振の抑制は可能となるが、制御サーバーから通信機器の転送テーブルにエントリを書き込むタイミングによっては、トラフィックのループや廃棄が意図せず発生する可能性がある。
 例えば、制御サーバーで計算された転送経路に関係なく任意の通信機器の転送テーブルにエントリを書く場合について説明する。
 図1を例にとると、通信機器102Aにおいて、検索情報として、ある転送テーブルのエントリが通信機器102Bを出力先として登録された時に、既に通信機器102Bにおいて、その検索情報を包含する転送テーブルのエントリが通信機器102Aを出力先として登録されている場合、条件に一致するトラフィックは、通信機器102Aと通信機器102Bの間で何度も往復することになる。
 例えば、通信機器102Aにおいて、検索情報として、宛先IPアドレス「192.168.0.1/32」(「/32」は、ネットワークアドレス長を示す)をヘッダ情報に持つパケットは通信機器102Bを出力先とする旨のエントリが登録されたとする。このとき、既に、通信機器102Bにおいて、宛先IPアドレス「192.168.0.0/8」をヘッダ情報に持つパケットは通信機器102Aを出力先とする旨のエントリが登録されている場合、IPアドレス「192.168.0.1/32」宛のトラフィックは、通信機器102Aと通信機器102Bの間で何度も往復することになる。
 また、例えば、制御サーバーで計算された転送経路に関係なく任意の通信機器102の転送テーブルにエントリを書く場合について説明する。
 図1を例にとると、通信機器102Aにおいて、ある転送テーブルのエントリが通信機器102Bを出力先として登録した後に、通信機器102Bにおいて、新規の転送テーブルのエントリが登録できない場合、条件に一致するトラフィックは、通信機器102Bで廃棄されることになる。
 例えば、通信機器102Aにおいて、検索情報として宛先IPアドレス「192.168.0.1/32」をヘッダ情報に持つパケットは通信機器102Bを出力先とする旨のエントリが登録された後に、通信機器102Bにおいて、新規の転送テーブルのエントリが登録できない場合、IPアドレス「192.168.0.1/32」宛のトラフィックは、通信機器102Bで廃棄されることになる。
 非特許文献1のオープンフロープロトコルにより制御される転送テーブルは、図3に示す通り、検索優先度が存在する。トラフィックは、低い検索優先度のエントリの検索情報に一致するとしても、より高い検索優先度のエントリの検索情報に一致する場合、より高い検索優先度のエントリに従って、転送される。
 また、例えば、トラフィックを受信する端末側に近い通信機器102から、通信経路を逆順に辿るように通信機器102に対して転送テーブルにエントリを登録する場合について説明する。
 図1を例にとると、通信機器102D、102B、102Aの順に通信テーブルのエントリが登録される。しかし、既に、通信機器102Bの転送テーブルにおいて、新たに登録されるエントリの検索情報を包含する転送テーブルのエントリが、新たに登録されるエントリより高い検索優先度で登録されているとする。この場合、通信機器102Bにおいて、検索情報として低い検索優先度で通信機器102Dを出力先として新たなエントリが登録されても、新たに登録されたエントリは、トラフィックの検索結果には使用されないため、通信機器102Aにおいて、検索情報として通信機器102Bを出力先としてエントリが登録されると、条件に一致するトラフィックは、通信機器102Aと102Bの間で何度も往復することになる。
 例えば、通信機器102Bの転送テーブルにおいて、既に、IPアドレス「192.168.0.0/8」宛のトラフィックに関するエントリが、新たに登録されるエントリより高い検索優先度で登録されているとする。この場合、通信機器102Bにおいて、検索情報として、宛先IPアドレス「192.168.0.1/32」をヘッダ情報に持つパケットは低い検索優先度で通信機器102Dを出力先とする旨の新たなエントリが登録されても、新たに登録されたエントリは、トラフィックの検索結果には使用されないため、通信機器102Aにおいて、検索情報として、宛先IPアドレス「192.168.0.1/32」をヘッダ情報に持つパケットは通信機器102Bを出力先とする旨のエントリが登録されると、条件に一致するトラフィックは、通信機器102Aと102Bの間で何度も往復することになる。
US 2006/0092974 A1
OpenFlow Switch Specification Version 0.9.0(Wire Protocol 0x98) July 20, 2009 Current Maintainer: Brandon Heller(brandonh@stanford.edu) <http://www.openflowswitch.org/documents/openflow-spec-v0.9.0.pdf>
 本発明は、従来の問題を解決し、制御サーバーからの通信機器の転送テーブルのエントリ等の登録・書換・削除を行う時における、通信機器間での状態不一致、並びに意図しないトラフィックのループや廃棄を抑止することを目的とする。
 本発明の通信制御システムは、複数の通信機器と、制御サーバーとを含む。複数の通信機器の各々は、受信したトラフィックと、転送テーブルに登録されたエントリとをマッチングし、当該トラフィックに包含される情報と当該エントリに包含される情報とが一致すると、当該トラフィックを、当該エントリに規定された経路に転送する。制御サーバーは、各通信機器が持つ転送テーブルにエントリを登録し、各通信機器に対して経路情報を決定する。ここでは、各通信機器は、制御サーバーからの一連の制御指示に対して、制御サーバーからの制御指示内容の検証を行い、検証結果を保持する。また、制御サーバーは、各通信機器から検証結果を取得し、各通信機器からの検証結果を基にして、各通信機器において一連の制御が実行可能かどうか判断し、一連の制御が実行可能であれば、各通信機器に対して一連の制御の実行を促す。なお、通信機器、並びに制御サーバーは、計算機であるものとする。
 本発明の通信制御方法では、制御サーバーから、複数の通信機器の各々が持つ転送テーブルにエントリを登録し、各通信機器に対して経路情報を決定する。また、各通信機器において、受信したトラフィックと、転送テーブルに登録されたエントリとをマッチングし、当該トラフィックに包含される情報と当該エントリに包含される情報とが一致すると、当該トラフィックを、当該エントリに規定された経路に転送する。また、各通信機器において、制御サーバーからの一連の制御指示に対して、制御サーバーからの制御指示内容の検証を行い、検証結果を保持する。また、制御サーバーにおいて、各通信機器から検証結果を取得し、各通信機器からの検証結果を基にして、各通信機器において一連の制御が実行可能かどうか判断し、一連の制御が実行可能であれば、各通信機器に対して一連の制御の実行を促す。
 本発明のプログラムは、通信機器、並びに制御サーバーの各々として機能する計算機に、上記の通信制御方法を実行させるためのプログラムである。なお、本発明のプログラムは、記憶装置や記憶媒体に格納することが可能である。
 パケットを転送する通信機器と、経路情報を決定する制御サーバーが分離された通信制御システムにおいて、通信の信頼性を向上することができる。
ネットワークの構成例を示す図である。 通信機器の構成例を示す図である。 検索優先度順にエントリを並べた転送テーブルの例を示すである。 転送テーブルの構成例を示す図である。 トランザクション状態テーブルの構成例を示す図である。 転送テーブルへのエントリ登録の際の動作(待機あり)を示すフローチャートである。 転送テーブルへのエントリ登録の際の動作(待機なし)を示すフローチャートである。 複数の制御サーバーを有するネットワークにおける通信機器の構成例を示す図である。 複数の制御サーバーを有するネットワークにおけるトランザクション状態テーブルの構成例を示す図である。
 <第1実施形態>
 以下に、本発明の第1実施形態について添付図面を参照して説明する。
 [ネットワークシステムの構成]
 図1は、本発明が実施されるネットワークシステムの構成例を示すものである。
 このネットワークシステムは、制御サーバー101と、通信機器102と、端末103を含む。ここでは、通信機器102として、通信機器102A~102Dを示す。また、端末103として、端末103A、103Bを示す。
 制御サーバー101は、端末103間のエンド間の通信経路を、通信機器102から収集したトポロジー(topology:接続形態)構成情報を基に計算し、端末103間のトラフィックを転送するためのエントリを、通信機器102の転送テーブルに対して登録する。また、制御サーバー101は、トポロジー構成情報の変化や使用可能帯域の変化等による経路の変更を基に、通信機器102の転送テーブルのエントリの書換や削除等を行う。
 通信機器102(通信機器102A~102D)は、ネットワークトポロジーを構成しており、ネットワークのエンド間のトラフィックを伝送する。通信機器102の転送テーブルは、ネットワークを流れるトラフィックの検索情報とその一致したトラフィックの転送先を指定したエントリで構成され、制御サーバー101から制御される。
 端末103(端末103A、103B)は、エンド間のトラフィックの送受信を行う。
 [ハードウェアの例示]
 制御サーバー101の例として、PC(パソコン)、シンクライアントサーバー、アプライアンス(appliance)、ワークステーション、メインフレーム、スーパーコンピュータ等の計算機を想定している。
 通信機器102の例として、オープンフロースイッチを想定している。オープンフロースイッチとして使用可能な機器の例として、ルータ、スイッチングハブ等の中継機器や、ゲートウェイ、プロキシ、ファイアウォール並びにロードバランサ等の中継用の計算機等が考えられる。例えば、通信機器102は、マルチレイヤスイッチ(multi-layer switch)でも良い。マルチレイヤスイッチは、サポートするOSI参照モデルの層毎に、更に細かく分類されている。主な種別としては、ネットワーク層(第3層)のデータを読むレイヤ3スイッチ、トランスポート層(第4層)のデータを読むレイヤ4スイッチ、アプリケーション層(第7層)のデータを読むレイヤ7スイッチ(アプリケーションスイッチ)がある。
 端末103の例として、PC、シンクライアント端末、アプライアンス、ワークステーション、メインフレーム、スーパーコンピュータ等の計算機、又は、携帯電話機、カーナビ(カーナビゲーションシステム)、ガジェット(電子機器)、携帯ゲーム機、家庭用ゲーム機、双方向テレビ、デジタルチューナー、デジタルレコーダー、情報家電(information home appliance)、OA(Office Automation)機器等が考えられる。端末103は、車両や船舶、航空機等の移動体に搭載されていても良い。
 なお、制御サーバー101、通信機器102、及び端末103は、物理マシン上に構築された仮想マシン(Virtual Machine(VM))でも良い。
 制御サーバー101、通信機器102、及び端末103の各々を接続するネットワークの例として、インターネット、LAN(Local Area Network)、無線LAN(Wireless LAN)、WAN(Wide Area Network)、バックボーン(Backbone)、ケーブルテレビ(CATV)回線、固定電話網、携帯電話網、WiMAX(IEEE 802.16a)、3G(3rd Generation)、専用線(lease line)、IrDA(Infrared Data Association)、Bluetooth(登録商標)、シリアル通信回線、データバス等が考えられる。
 但し、実際には、これらの例に限定されない。
 [通信機器の構成]
 図2は、通信機器102の構成例を示すものである。
 通信機器102は、制御サーバーインタフェース部1021と、トランザクション管理部1022と、テーブル操作部1023と、テーブル検索部1024と、転送テーブル1025と、データ転送部1026と、インタフェース1027を備える。ここでは、インタフェース1027として、インタフェース1027A、1027Bを示す。
 制御サーバーインタフェース部1021は、制御サーバー101との制御チャネルを終端して、制御サーバー101からの制御命令を取り出したり、実行結果を返送したり、トランザクション(transaction)結果に対する問い合わせの受付・返送をしたりする。なお、トランザクションとは、関連する複数の処理を一つの処理単位としてまとめたものである。この制御命令の例として、オープンフロープロトコルメッセージ(OpenFlow Protocol Message)の1つであり、コントローラからスイッチのフローテーブルにエントリを登録するための「FlowMod」メッセージ等が考えられる。
 トランザクション管理部1022は、制御命令毎にトランザクションとして保持し、その実行結果やその命令に対する検証結果を保持し、制御サーバー101からの問い合わせに対して応答したり、トランザクションの実行命令に対して実行したりする。実行待ちのトランザクションを実行する手法には、広く一般に使用されている2フェーズコミットの手法を使用することができる。
 テーブル操作部1023は、転送テーブル1025に対してエントリの登録・書換・削除を実行するブロックである。
 テーブル検索部1024は、トランザクション管理部1022からの命令に従って、転送テーブル1025の登録済みエントリに対して、新規エントリが包含関係や一部包含関係になっていないか、包含・一部包含関係のエントリがそのエントリに対して、高・低の検索優先度のいずれかを確認し、その結果をトランザクション管理部1022に返す。
 転送テーブル1025は、図3に示す通り、エントリは番号で管理されており、その番号の順に検索優先度が決まっている、また、図4のような検索情報(例えば、送信元・送信先IPアドレス)、出力ポート等の情報を有する。ここでは、転送テーブル1025は、エントリ番号と、送信元IPアドレスと、送信先IPアドレスと、出力ポートの情報を有する。出力ポートは、インタフェース1027(インタフェース1027A、1027B)を示す。
 データ転送部1026は、インタフェース1027(インタフェース1027A、1027B)から入力されたトラフィックから検索キーを抽出し、その検索キーを転送テーブル1025に対して検索実行し、その検索結果に従ってトラフィックを転送する。
 インタフェース1027(インタフェース1027A、1027B)は、通信機器102の通信用のインタフェースであり、図1のように他の通信機器102や端末103と接続を行い、トラフィックの受信と送信を行う。
 ここでは、制御サーバーインタフェース部1021、トランザクション管理部1022、テーブル操作部1023、テーブル検索部1024、転送テーブル1025、データ転送部1026は、プログラムで駆動される処理装置等のハードウェアと、そのハードウェアを駆動して所望の処理を実行させるプログラム等のソフトウェアと、そのソフトウェアや各種データを格納する記憶装置によって実現されるものとする。但し、実際には、これらの例に限定されない。
 上記の処理装置の例として、CPU(Central Processing Unit)、マイクロプロセッサ(microprocessor)、マイクロコントローラ、或いは、同様の機能を有する半導体集積回路(Integrated Circuit(IC))等が考えられる。但し、実際には、これらの例に限定されない。
 上記の記憶装置の例として、RAM(Random Access Memory)、ROM(Read Only Memory)、EEPROM(Electrically Erasable and Programmable Read Only Memory)やフラッシュメモリ等の半導体記憶装置、HDD(Hard Disk Drive)やSSD(Solid State Drive)等の補助記憶装置、又は、DVD(Digital Versatile Disk)やSDメモリカード(Secure Digital memory card)等のリムーバブルディスクや記憶媒体(メディア)等が考えられる。但し、実際には、これらの例に限定されない。
 また、制御サーバーインタフェース部1021、データ転送部1026、及びインタフェース1027は通信機能を持つ。制御サーバーインタフェース部1021、データ転送部1026、及びインタフェース1027の通信機能を実現するハードウェアの例として、NIC(Network Interface Card)等のネットワークアダプタや、アンテナ等の通信装置、接続口(コネクタ)等の通信ポート等が考えられる。但し、実際には、これらの例に限定されない。
 [転送テーブルへのエントリ登録の際の動作(待機あり)]
 図6を用いて、通信経路の一貫性を保つための動作について説明する。
 ここでは、制御サーバー101は、通信機器102に、図4の形式のエントリーデータを送信する。通信機器102は、受信したエントリーデータを転送テーブル1025に格納する。
 (1)ステップS101
 通信機器102において、制御サーバーインタフェース部1021は、制御サーバー101から、制御チャネル経由で、新規エントリの追加指示の制御命令を受け取り、トランザクション管理部1022に渡す。トランザクション管理部1022は、制御命令に含まれるトランザクション番号をキーに、図5のトランザクション状態テーブルに状態を検証待ちとして登録する。ここでは、トランザクション状態テーブルは、コントローラIDと、トランザクション番号と、制御命令と、状態と、ロールバック方法の情報を有する。コントローラIDは、制御サーバーの識別情報である。制御サーバー101が1台しかなく一意に特定できる場合、コントローラIDの情報はなくても良い。トランザクション状態テーブルの検証待ちトランザクションを、検証中の状態に変更して、転送テーブル1025のエントリをテーブル検索部1024に送付する。
 (2)ステップS102
 テーブル検索部1024は、転送テーブル1025を参照し、転送テーブル1025に空きエントリがあるかどうかを確認する。テーブル検索部1024は、空きエントリがある場合、ステップS104の処理へ移行する。また、テーブル検索部1024は、空きエントリがない場合、ステップS103の処理へ移行する。
 (3)ステップS103
 テーブル検索部1024は、空きエントリがない場合、転送テーブル1025に空きエントリがないことを、トランザクション管理部1022に通知する。トランザクション管理部1022は、状態を空きエントリなしとして、ステップS106の処理へ移行し、トランザクションを待機状態にする。
 (4)ステップS104
 テーブル検索部1024は、空きエントリがある場合、転送テーブル1025に包括関係や一部包括関係にあるエントリがある(コンフリクトがある)かどうかを確認する。テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、当該エントリの優先度も確認する。テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、ステップS105の処理へ移行する。また、テーブル検索部1024は、包括関係や一部包括関係にあるエントリがない(コンフリクトがない)場合、ステップS106の処理へ移行し、トランザクションを待機状態にする。
 (5)ステップS105
 テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)ことを、トランザクション管理部1022に通知する。トランザクション管理部1022は、状態を包括・一部包括関係あり(コンフリクトあり)として、ステップS106の処理へ移行し、トランザクションを待機状態にする。
 (6)ステップS106
 テーブル検索部1024は、トランザクションを待機状態にして、制御サーバー101からの指示を待つ。制御サーバー101は、自動的に、トランザクション番号をキーに、処理検証結果を確認し、その結果を基に制御サーバー101内で判断を行う。このとき、トランザクション完了を、通信機器102から制御サーバー101に通知することも可能である。
 (7)ステップS107
 制御サーバーインタフェース部1021は、制御サーバー101から、制御チャネル経由で、新たな制御命令を受け取り、トランザクション管理部1022に渡す。制御サーバーインタフェース部1021は、制御サーバー101からの制御命令に従って処理を行う。制御命令が処理実行であれば、ステップS108の処理へ移行する。制御命令がロールバック指示であれば、ステップS109の処理へ移行する。
 (8)ステップS108
 制御サーバーインタフェース部1021は、制御命令が処理実行である場合、制御サーバー101からの制御命令に従って、転送テーブル1025にエントリを反映させる。
 (9)ステップS109
 制御サーバーインタフェース部1021は、制御命令がロールバック指示である場合、制御サーバー101からの制御命令に従って、転送テーブル1025にはエントリを反映させず、登録されたロールバック関数に従った処理を行う。
 <第2実施形態>
 本実施形態では、図6のステップS106、ステップS107において、トランザクション番号を制御のINDEX(索引)とする代わりに、転送テーブル1025のエントリを制御のINDEXとする。
 転送テーブルのエントリとは、IPアドレス等の検索情報である。同じ検索情報が存在すると特定が難しくなるため、転送テーブルのエントリ(検索情報)には重複しない情報を使用すると好適である。
 これにより、トランザクション番号を省略することが可能になる。
 <第3実施形態>
 本実施形態では、図7に示す通り、トランザクション管理部1022は、空きエントリがない場合や、包括関係や一部包括関係にあるエントリがない(コンフリクトがない)場合に、処理を待機するのではなく、そのまま制御命令を実行する。この場合、実行した結果、処理検証結果を確認でき、ロールバックすることも可能である。
 [転送テーブルへのエントリ登録の際の動作(待機なし)]
 図7を用いて、本実施形態において、通信経路の一貫性を保つための動作について説明する。なお、図7のステップS201~S205は、図6のステップS101~S105と同じである。
 (1)ステップS201
 通信機器102において、制御サーバーインタフェース部1021は、制御サーバー101から、制御チャネル経由で、新規エントリの追加指示の制御命令を受け取り、トランザクション管理部1022に渡す。トランザクション管理部1022は、制御命令に含まれるトランザクション番号をキーに、図5のトランザクション状態テーブルに状態を検証待ちとして登録する。トランザクション状態テーブルの検証待ちトランザクションを、検証中の状態に変更して、転送テーブルのエントリをテーブル検索部1024に送付する。
 (2)ステップS202
 テーブル検索部1024は、転送テーブル1025を参照し、転送テーブル1025に空きエントリがあるかどうかを確認する。テーブル検索部1024は、空きエントリがある場合、ステップS204の処理へ移行する。また、テーブル検索部1024は、空きエントリがない場合、ステップS203の処理へ移行する。
 (3)ステップS203
 テーブル検索部1024は、空きエントリがない場合、転送テーブル1025に空きエントリがないことを、トランザクション管理部1022に通知する。トランザクション管理部1022は、状態を空きエントリなしとして、ステップS206の処理へ移行する。
 (4)ステップS204
 テーブル検索部1024は、空きエントリがある場合、転送テーブル1025に包括関係や一部包括関係にあるエントリがある(コンフリクトがある)かどうかを確認する。なお、テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、当該エントリの優先度も確認する。テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、ステップS205の処理へ移行する。また、テーブル検索部1024は、包括関係や一部包括関係にあるエントリがない(コンフリクトがない)場合、ステップS206の処理へ移行する。
 (5)ステップS205
 テーブル検索部1024は、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)場合、包括関係や一部包括関係にあるエントリがある(コンフリクトがある)ことを、トランザクション管理部1022に通知する。トランザクション管理部1022は、状態を包括・一部包括関係あり(コンフリクトあり)として、ステップS206の処理へ移行する。
 (6)ステップS206
 制御サーバーインタフェース部1021は、制御サーバー101からの制御命令に従って処理を行う。制御サーバーインタフェース部1021は、制御命令が処理実行である場合、制御サーバー101からの制御命令に従って、転送テーブル1025にエントリを反映させる。また、制御サーバーインタフェース部1021は、制御命令がロールバック指示である場合、制御サーバー101からの制御命令に従って、転送テーブル1025にはエントリを反映させず、登録されたロールバック関数に従った処理を行う。制御サーバー101は、トランザクション番号をキーに、処理検証結果を確認し、その結果を基に制御サーバー101内で判断を行う。このとき、トランザクション完了を、通信機器102から制御サーバー101に通知することも可能である。
 <第4実施形態>
 本実施形態では、図8に示す通り、通信機器102は、複数の制御サーバー101(制御サーバー101A、101B)から制御を受ける。この場合、図9に示す通りのトランザクション状態テーブルになる。本実施形態では、トランザクションは、「コントローラID」と「トランザクション番号」の組で管理される。コントローラIDは、制御サーバーの識別情報である。ここでは、制御サーバー101AのコントローラIDを「1」とし、制御サーバー101BのコントローラIDを「2」とする。
 <第5実施形態>
 本実施形態では、トランザクション番号には、制御サーバー101がイニシエーター(initiator)となるトランザクションに関しては、制御サーバー101が独自に生成した番号を使用し、通信機器102がイニシエーターとなるトランザクションについては、通信機器102が独自に生成した番号を使用する。通信機器102がイニシエーターとなるトランザクションの例として、インタフェースの状態の変化や、トラフィック受信を制御サーバー101へ通知するトランザクション等がある。
 <第6実施形態>
 本実施形態では、制御サーバー101が複数の通信機器102群を制御するため、制御サーバー101がイニシエーターとなって行うトランザクションも、通信機器102がイニシエーターとなって行うトランザクションも、制御サーバー101では、通信機器102とトランザクション番号の組で管理される。
 <第7実施形態>
 本実施形態では、通信機器102は、トランザクション番号を独自に生成し、通信機器102のIDが変更されたときや、接続先制御サーバー101が変更されたときには、トランザクション番号を新たに振り直す。このとき、トランザクション番号には、ランダムな番号を使用する。
 <第8実施形態>
 本実施形態では、通信機器102は、同一トランザクションの実行に複数の処理が存在するとき、それらの複数の処理の順序を守って処理を行う。
 <追記>
 なお、上記の各実施形態は、組み合わせて実施することも可能である。
 <まとめ>
 以上のように、本発明は、通信機器と分離された制御サーバーから通信機器の転送テーブルを追加・書換・削除することにより、端末間のトラフィックの認可・経路・QoS等を制御する通信システムにおいて、一貫性を保って複数の通信機器の転送テーブルに対する操作を行うことにより、端末間の通信の接続性を確保するための通信機器の制御方式に関する。
 本発明は、制御サーバーからの通信機器の転送テーブルのエントリ等の登録・書換・削除を行うときに、通信機器間での状態不一致を抑止し、意図しないトラフィックのループや廃棄をなくし、通信の信頼性を向上することを目的とする。
 本発明の手法では、制御サーバー101が行った通信機器102に対する転送テーブルのエントリの登録・書換・削除やインタフェースのUP/DOWNの制御等の制御指示に対して、通信機器102で制御サーバー101からの制御指示内容の検証を行い、通信機器102でその検証結果を保持し、制御サーバー101がその検証結果を取得し、複数の通信機器102からの検証結果を基にして、一連の制御が実行可能かどうか判断した後に、複数の通信機器102での実行を促す。
 もしくは、制御サーバー101からの指示に従って、通信機器102はいったん実行し、制御サーバー101は制御命令が異常であると判断した場合、通信機器102に対して、実行結果をロールバックする。
 以上、本発明の実施形態を詳述してきたが、実際には、上記の実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の変更があっても本発明に含まれる。
 なお、本出願は、日本出願番号2010-001292に基づく優先権を主張するものであり、日本出願番号2010-001292における開示内容は引用により本出願に組み込まれる。

Claims (10)

  1.  受信したトラフィックと、転送テーブルに登録されたエントリとをマッチングし、当該トラフィックに包含される情報と当該エントリに包含される情報とが一致すると、当該トラフィックを、当該エントリに規定された経路に転送する複数の通信機器と、
     前記複数の通信機器の各々が持つ転送テーブルにエントリを登録し、前記各通信機器に対して経路情報を決定する制御サーバーと
    を含み、
     前記各通信機器は、前記制御サーバーからの一連の制御指示に対して、前記制御サーバーからの制御指示内容の検証を行い、検証結果を保持し、
     前記制御サーバーは、前記各通信機器から検証結果を取得し、前記各通信機器からの検証結果を基にして、前記各通信機器において一連の制御が実行可能かどうか判断し、一連の制御が実行可能であれば、前記各通信機器に対して一連の制御の実行を促す
     通信制御システム。
  2.  請求項1に記載の通信制御システムであって、
     前記各通信機器は、前記制御サーバーからの一連の制御指示に従って、一旦、一連の制御を実行し、
     前記制御サーバーは、前記制御サーバーからの制御指示内容が異常であると判断した場合、前記各通信機器に対して、実行結果のロールバックの実行を促す
     通信制御システム。
  3.  請求項1又は2に記載の通信制御システムであって、
     前記各通信機器は、前記制御サーバーから、転送テーブルへの新規エントリの追加指示の制御命令を受け取った際、前記転送テーブルを参照し、前記転送テーブルに空きエントリがあるかどうかを確認し、空きエントリがある場合、前記転送テーブルに包括・一部包括関係にあるエントリがあるかどうかを確認し、包括・一部包括関係にあるエントリがある場合、当該エントリの優先度を確認し、前記制御サーバーからの制御命令を実行する
     通信制御システム。
  4.  請求項3に記載の通信制御システムであって、
     前記各通信機器は、空きエントリがない場合、もしくは包括・一部包括関係にあるエントリの有無を確認した場合、一連の制御を待機状態にして、前記制御サーバーからの指示を待ち、前記制御サーバーから新たな制御命令を受け取り、新たな制御命令が処理実行である場合、前記制御サーバーからの制御命令に従って、前記転送テーブルにエントリを追加し、新たな制御命令がロールバック指示である場合、前記制御サーバーからの制御命令に従って、前記転送テーブルにはエントリを追加せず、ロールバック関数に従った処理を行う
     通信制御システム。
  5.  請求項1乃至4のいずれか一項に記載の通信制御システムにおいて、通信機器及び制御サーバーのいずれかとして使用される計算機。
  6.  制御サーバーから、複数の通信機器の各々が持つ転送テーブルにエントリを登録し、前記各通信機器に対して経路情報を決定することと、
     前記各通信機器において、受信したトラフィックと、転送テーブルに登録されたエントリとをマッチングし、当該トラフィックに包含される情報と当該エントリに包含される情報とが一致すると、当該トラフィックを、当該エントリに規定された経路に転送することと、
     前記各通信機器において、前記制御サーバーからの一連の制御指示に対して、前記制御サーバーからの制御指示内容の検証を行い、検証結果を保持することと、
     前記制御サーバーにおいて、前記各通信機器から検証結果を取得し、前記各通信機器からの検証結果を基にして、前記各通信機器において一連の制御が実行可能かどうか判断し、一連の制御が実行可能であれば、前記各通信機器に対して一連の制御の実行を促すことと
    を含む
     通信制御方法。
  7.  請求項6に記載の通信制御方法であって、
     前記各通信機器において、前記制御サーバーからの一連の制御指示に従って、一旦、一連の制御を実行することと、
     前記制御サーバーにおいて、前記制御サーバーからの制御指示内容が異常であると判断した場合、前記各通信機器に対して、実行結果のロールバックの実行を促すことと
    を更に含む
     通信制御方法。
  8.  請求項6又は7に記載の通信制御方法であって、
     前記各通信機器において、
     前記制御サーバーから、転送テーブルへの新規エントリの追加指示の制御命令を受け取った際、前記転送テーブルを参照し、前記転送テーブルに空きエントリがあるかどうかを確認することと、
     空きエントリがある場合、前記転送テーブルに包括・一部包括関係にあるエントリがあるかどうかを確認することと、
     包括・一部包括関係にあるエントリがある場合、当該エントリの優先度を確認することと、
     前記制御サーバーからの制御命令を実行することと
    を更に含む
     通信制御方法。
  9.  請求項8に記載の通信制御方法であって、
     前記各通信機器において、
     空きエントリがない場合、もしくは包括・一部包括関係にあるエントリの有無を確認した場合、一連の制御を待機状態にして、前記制御サーバーからの指示を待つことと、
     前記制御サーバーから新たな制御命令を受け取ることと、
     新たな制御命令が処理実行である場合、前記制御サーバーからの制御命令に従って、前記転送テーブルにエントリを追加することと、
     新たな制御命令がロールバック指示である場合、前記制御サーバーからの制御命令に従って、前記転送テーブルにはエントリを追加せず、ロールバック関数に従った処理を行うことと
    を更に含む
     通信制御方法。
  10.  請求項6乃至9のいずれか一項に記載の通信制御方法を、通信機器及び制御サーバーのいずれかとして機能する計算機に実行させるためのプログラムを記憶した記憶媒体。
PCT/JP2011/050019 2010-01-06 2011-01-04 通信制御システム、及び通信制御方法 WO2011083786A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
CN201180005562.XA CN102696205B (zh) 2010-01-06 2011-01-04 通信控制系统和通信控制方法
RU2012133437/08A RU2523917C2 (ru) 2010-01-06 2011-01-04 Система управления связью и способ управления связью
EP11731784.2A EP2523404A4 (en) 2010-01-06 2011-01-04 COMMUNICATION CONTROL SYSTEM AND COMMUNICATION CONTROL METHOD
JP2011549000A JP5743906B2 (ja) 2010-01-06 2011-01-04 通信制御システム
CA2786429A CA2786429A1 (en) 2010-01-06 2011-01-04 Communication control system and communication control method
US13/520,773 US9432283B2 (en) 2010-01-06 2011-01-04 Communication control system and communication control method
KR1020127017708A KR101514506B1 (ko) 2010-01-06 2011-01-04 통신 제어 시스템 및 통신 제어 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010001292 2010-01-06
JP2010-001292 2010-01-06

Publications (1)

Publication Number Publication Date
WO2011083786A1 true WO2011083786A1 (ja) 2011-07-14

Family

ID=44305522

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/050019 WO2011083786A1 (ja) 2010-01-06 2011-01-04 通信制御システム、及び通信制御方法

Country Status (9)

Country Link
US (1) US9432283B2 (ja)
EP (1) EP2523404A4 (ja)
JP (1) JP5743906B2 (ja)
KR (1) KR101514506B1 (ja)
CN (2) CN102696205B (ja)
CA (1) CA2786429A1 (ja)
RU (1) RU2523917C2 (ja)
TW (1) TWI501599B (ja)
WO (1) WO2011083786A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013035342A1 (en) * 2011-09-09 2013-03-14 Nec Corporation Network management service system, control apparatus, method, and program
WO2013146785A1 (ja) * 2012-03-28 2013-10-03 日本電気株式会社 通信システム、通信装置、制御装置、通信装置の制御方法及びプログラム
WO2014098114A1 (ja) * 2012-12-19 2014-06-26 日本電気株式会社 パケット処理装置、フローエントリの配置方法及びプログラム
EP2816789A4 (en) * 2012-02-16 2015-11-04 Ntt Docomo Inc MOBILE COMMUNICATION SYSTEM, COMMUNICATION SYSTEM, CONTROL NUMBERS, CALL PROCESSING NODES AND COMMUNICATION CONTROL METHOD
US20160021598A1 (en) * 2013-03-14 2016-01-21 Nec Corporation Communication network and data transmission and reception method thereof
RU2785586C1 (ru) * 2021-12-28 2022-12-09 Федеральное государственное казенное военное образовательное учреждение высшего образования "Военный учебно-научный центр Военно-воздушных сил "Военно-воздушная академия имени профессора Н.Е. Жуковского и Ю.А. Гагарина" (г. Воронеж) Министерства обороны Российской Федерации Устройство оценки эффективности информационного обмена системы связи с учетом информационных потерь

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013042358A1 (en) * 2011-09-21 2013-03-28 Nec Corporation Communication apparatus, communication system, communication control method, and program
WO2013042598A1 (en) * 2011-09-22 2013-03-28 Nec Corporation Communication terminal, communication method, and program
PT2911346T (pt) * 2012-11-13 2017-08-18 Huawei Tech Co Ltd Método e dispositivo de rede para estabelecimento de um grupo virtual
CN103857004A (zh) * 2012-12-03 2014-06-11 华为技术有限公司 处理无线网络用户接入的方法、装置及系统
CN103067476B (zh) * 2012-12-25 2015-08-19 浙江大学 一种基于虚拟机的动态网络重构方法
KR20140106235A (ko) * 2013-02-26 2014-09-03 한국전자통신연구원 오픈플로우 스위치 및 그 패킷 처리 방법
CN103246219B (zh) * 2013-04-28 2015-09-16 付弦 一种控制方法及系统
WO2014205812A1 (zh) * 2013-06-28 2014-12-31 华为技术有限公司 组表项的添加方法和交换机
US9712431B2 (en) 2013-07-17 2017-07-18 Kt Corporation Methods for managing transaction in software defined network
JP6221501B2 (ja) * 2013-08-19 2017-11-01 富士通株式会社 ネットワークシステム、その制御方法、ネットワーク制御装置及びその制御プログラム
JP6260285B2 (ja) * 2014-01-10 2018-01-17 富士通株式会社 制御装置および転送制御方法
CN105099920A (zh) * 2014-04-30 2015-11-25 杭州华三通信技术有限公司 一种设置sdn流表项的方法和装置
US9692684B2 (en) * 2014-09-05 2017-06-27 Telefonaktiebolaget L M Ericsson (Publ) Forwarding table precedence in SDN
WO2016108711A1 (ru) * 2014-12-29 2016-07-07 Некоммерческое Партнерство "Центр Прикладных Исследований Компьютерных Сетей Устройство для приема и передачи данных с возможностью осуществления взаимодействия с openflow контроллером
RU2584471C1 (ru) * 2014-12-30 2016-05-20 Некоммерческое Партнерство "Центр Прикладных Исследований Компьютерных Сетей" УСТРОЙСТВО ДЛЯ ПРИЕМА И ПЕРЕДАЧИ ДАННЫХ С ВОЗМОЖНОСТЬЮ ОСУЩЕСТВЛЕНИЯ ВЗАИМОДЕЙСТВИЯ С OpenFlow КОНТРОЛЛЕРОМ
US9467378B1 (en) * 2015-03-01 2016-10-11 Netronome Systems, Inc. Method of generating subflow entries in an SDN switch
US10439932B2 (en) * 2016-10-05 2019-10-08 Avago Technologies International Sales Pte. Limited System and method for flow rule management in software-defined networks
CN107590028B (zh) * 2017-09-14 2021-05-11 广州华多网络科技有限公司 一种信息处理的方法、服务器
JP7151548B2 (ja) * 2019-02-26 2022-10-12 富士通株式会社 異常検知プログラム、異常検知方法及び異常検知装置
CN112822114B (zh) * 2021-04-19 2021-07-02 军事科学院系统工程研究院网络信息研究所 一种基于行为树的路由控制方法、系统和介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002176433A (ja) * 2000-12-05 2002-06-21 Mitsubishi Electric Corp 伝送品質制御システムおよび伝送品質制御方法
JP2006135970A (ja) * 2004-11-01 2006-05-25 Lucent Technol Inc SoftRouter動的バインディング・プロトコル
JP2007184969A (ja) * 2007-02-26 2007-07-19 Fujitsu Ltd 配信経路制御装置
WO2008126179A1 (ja) * 2007-03-15 2008-10-23 Fujitsu Limited ネットワーク検証システム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3448470B2 (ja) * 1997-09-26 2003-09-22 日本電信電話株式会社 Ipアドレス検索テーブル作成方法
JP3469501B2 (ja) * 1999-03-31 2003-11-25 富士通株式会社 ネットワーク機器制御装置及び通信システム
JP3626056B2 (ja) * 1999-12-13 2005-03-02 三菱電機株式会社 2分検索装置及び2分検索方法
CN100359885C (zh) 2002-06-24 2008-01-02 武汉烽火网络有限责任公司 以策略流方式转发数据的方法和数据转发设备
NO318843B1 (no) * 2002-11-13 2005-05-09 Telenor Asa AHN-nettverk
JP2004304523A (ja) * 2003-03-31 2004-10-28 Japan Telecom Co Ltd パケット通信システム並びにそれに用いられる通信ルート切替え制御サーバ及びパケット中継装置
JP2004336427A (ja) * 2003-05-08 2004-11-25 Mitsubishi Electric Corp 検索回路およびパケット転送装置
US7437354B2 (en) * 2003-06-05 2008-10-14 Netlogic Microsystems, Inc. Architecture for network search engines with fixed latency, high capacity, and high throughput
US7496886B2 (en) * 2004-09-30 2009-02-24 Microsoft Corporation Method and system for providing cross project commitments
US7715382B2 (en) 2004-11-01 2010-05-11 Alcatel-Lucent Usa Inc. Softrouter
US9014181B2 (en) 2004-11-01 2015-04-21 Alcatel Lucent Softrouter separate control network
WO2006073066A1 (ja) 2005-01-05 2006-07-13 Nec Corporation 通信装置、ルーティング方法及びプログラム
JP2007142609A (ja) 2005-11-16 2007-06-07 Nec Corp パス経路設定システム及びその方法並びにそれに用いるノード及びプログラム
JP2007184696A (ja) 2006-01-05 2007-07-19 Blitz:Kk 車両用電子制御システム
JP2008079175A (ja) * 2006-09-25 2008-04-03 Alaxala Networks Corp フレーム転送システム
FR2919138A1 (fr) * 2007-07-20 2009-01-23 France Telecom Point d'acces et noeud pour controler le routage dans un reseau hybride.
JP2009232053A (ja) * 2008-03-21 2009-10-08 Nec Corp Atm/ip優先制御装置、及びatm/ip優先制御方法
US8756675B2 (en) 2008-08-06 2014-06-17 Silver Spring Networks, Inc. Systems and methods for security in a wireless utility network
US8144732B2 (en) 2008-12-31 2012-03-27 Mediatek Inc. Method for boosting downlink transmission to mobile station and system utilizing the same
JP2011070364A (ja) * 2009-09-25 2011-04-07 Nec Corp 運用管理サーバ、ロールバック実行方法およびロールバック実行プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002176433A (ja) * 2000-12-05 2002-06-21 Mitsubishi Electric Corp 伝送品質制御システムおよび伝送品質制御方法
JP2006135970A (ja) * 2004-11-01 2006-05-25 Lucent Technol Inc SoftRouter動的バインディング・プロトコル
JP2007184969A (ja) * 2007-02-26 2007-07-19 Fujitsu Ltd 配信経路制御装置
WO2008126179A1 (ja) * 2007-03-15 2008-10-23 Fujitsu Limited ネットワーク検証システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2523404A4 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013035342A1 (en) * 2011-09-09 2013-03-14 Nec Corporation Network management service system, control apparatus, method, and program
JP2014526809A (ja) * 2011-09-09 2014-10-06 日本電気株式会社 ネットワーク管理サービスシステム、制御装置、方法およびプログラム
US9544194B2 (en) 2011-09-09 2017-01-10 Nec Corporation Network management service system, control apparatus, method, and program
EP2816789A4 (en) * 2012-02-16 2015-11-04 Ntt Docomo Inc MOBILE COMMUNICATION SYSTEM, COMMUNICATION SYSTEM, CONTROL NUMBERS, CALL PROCESSING NODES AND COMMUNICATION CONTROL METHOD
US9451483B2 (en) 2012-02-16 2016-09-20 Ntt Docomo, Inc. Mobile communication system, communication system, control node, call-processing node, and communication control method
WO2013146785A1 (ja) * 2012-03-28 2013-10-03 日本電気株式会社 通信システム、通信装置、制御装置、通信装置の制御方法及びプログラム
US10454805B2 (en) 2012-03-28 2019-10-22 Nec Corporation Communication system, communication apparatus, control apparatus, communication apparatus control method and program
JP5967222B2 (ja) * 2012-12-19 2016-08-10 日本電気株式会社 パケット処理装置、フローエントリの配置方法及びプログラム
US20150326477A1 (en) * 2012-12-19 2015-11-12 Nec Corporation Packet processing apparatus, flow entry configuration method and program
CN104871501A (zh) * 2012-12-19 2015-08-26 日本电气株式会社 分组处理装置、流表项配置方法和程序
KR101746316B1 (ko) 2012-12-19 2017-06-12 닛본 덴끼 가부시끼가이샤 패킷 처리 장치, 플로 엔트리 배치 방법 및 프로그램
US9876716B2 (en) 2012-12-19 2018-01-23 Nec Corporation Packet processing apparatus, flow entry configuration method and program
WO2014098114A1 (ja) * 2012-12-19 2014-06-26 日本電気株式会社 パケット処理装置、フローエントリの配置方法及びプログラム
US20160021598A1 (en) * 2013-03-14 2016-01-21 Nec Corporation Communication network and data transmission and reception method thereof
US9825848B2 (en) * 2013-03-14 2017-11-21 Nec Corporation Communication network and data transmission and reception method thereof
RU2785586C1 (ru) * 2021-12-28 2022-12-09 Федеральное государственное казенное военное образовательное учреждение высшего образования "Военный учебно-научный центр Военно-воздушных сил "Военно-воздушная академия имени профессора Н.Е. Жуковского и Ю.А. Гагарина" (г. Воронеж) Министерства обороны Российской Федерации Устройство оценки эффективности информационного обмена системы связи с учетом информационных потерь

Also Published As

Publication number Publication date
TW201201550A (en) 2012-01-01
RU2523917C2 (ru) 2014-07-27
EP2523404A1 (en) 2012-11-14
KR101514506B1 (ko) 2015-04-22
CN102696205B (zh) 2015-03-04
CN104270314A (zh) 2015-01-07
CN102696205A (zh) 2012-09-26
JPWO2011083786A1 (ja) 2013-05-13
TWI501599B (zh) 2015-09-21
JP5743906B2 (ja) 2015-07-01
CA2786429A1 (en) 2011-07-14
RU2012133437A (ru) 2014-02-27
US20130046882A1 (en) 2013-02-21
EP2523404A4 (en) 2016-09-28
US9432283B2 (en) 2016-08-30
KR20120102755A (ko) 2012-09-18

Similar Documents

Publication Publication Date Title
JP5743906B2 (ja) 通信制御システム
JP5621778B2 (ja) コンテンツベーススイッチシステム、及びコンテンツベーススイッチ方法
US9590923B2 (en) Reliable link layer for control links between network controllers and switches
TWI472187B (zh) 網路系統、控制器、網路管理方法、儲存媒體、通信系統及通信方法
JP5652630B2 (ja) ネットワークシステム、スイッチ、及び接続端末検知方法
US9143447B2 (en) Closed loop formation preventing system and closed loop formation preventing method
JP5994851B2 (ja) 転送装置の制御装置、転送装置の制御方法、通信システムおよびプログラム
US20130282867A1 (en) Information system, control apparatus, method of providing virtual network, and program
EP2688255A1 (en) Network system, and policy route configuration method
JPWO2012133060A1 (ja) ネットワークシステム、及びvlanタグ情報取得方法
US20130170503A1 (en) Switch system, and data forwarding method
JP6007972B2 (ja) 通信ノード、パケット処理方法及びプログラム
JP5911108B2 (ja) コンピュータシステム、サーバ、オープンフローコントローラ及び通信方法
JP2018093358A (ja) 経路探索システム、経路探索方法及び経路探索プログラム
JP5682846B2 (ja) ネットワークシステム、パケット処理方法、及び記憶媒体
WO2014126094A1 (ja) 通信システム、通信方法、制御装置、制御装置の制御方法及びプログラム
JP5747997B2 (ja) 制御装置、通信システム、仮想ネットワークの管理方法およびプログラム
JP2016046755A (ja) 通信装置、通信システム、通信制御プログラム、及び通信制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11731784

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2011549000

Country of ref document: JP

ENP Entry into the national phase

Ref document number: 2786429

Country of ref document: CA

ENP Entry into the national phase

Ref document number: 20127017708

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 5996/CHENP/2012

Country of ref document: IN

Ref document number: 2011731784

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2012133437

Country of ref document: RU

WWE Wipo information: entry into national phase

Ref document number: 13520773

Country of ref document: US