WO2018079440A1 - チェイン構築装置、試験装置、試験システム、方法および記録媒体 - Google Patents

チェイン構築装置、試験装置、試験システム、方法および記録媒体 Download PDF

Info

Publication number
WO2018079440A1
WO2018079440A1 PCT/JP2017/038023 JP2017038023W WO2018079440A1 WO 2018079440 A1 WO2018079440 A1 WO 2018079440A1 JP 2017038023 W JP2017038023 W JP 2017038023W WO 2018079440 A1 WO2018079440 A1 WO 2018079440A1
Authority
WO
WIPO (PCT)
Prior art keywords
service function
chain
test
function chain
service
Prior art date
Application number
PCT/JP2017/038023
Other languages
English (en)
French (fr)
Inventor
晋哉 石田
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US16/342,591 priority Critical patent/US20190260647A1/en
Priority to JP2018547629A priority patent/JPWO2018079440A1/ja
Priority to EP17865742.5A priority patent/EP3534573A4/en
Publication of WO2018079440A1 publication Critical patent/WO2018079440A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852Delays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level
    • H04L43/0888Throughput
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/20Arrangements for monitoring or testing data switching networks the monitoring system or the monitored elements being virtualised, abstracted or software-defined entities, e.g. SDN or NFV
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/50Testing arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Definitions

  • the present invention relates to a technique for testing a service function chain.
  • VNF Virtual Network Function
  • a communication carrier can flexibly provide a communication service to a user by configuring a service function chain by combining VNFs having desired functions.
  • the service function chain connects the user's transmission and reception ends via the VNF provided in the data center in the carrier network.
  • FIG. 14 shows an outline of the service chain as a specific example.
  • the communication end of the user is connected to the carrier network by a wired or wireless medium.
  • a plurality of data centers are installed in the carrier network.
  • the service function chain C100 that connects the communication ends of users passes through each data center on the way through the carrier network, and passes through the VNF operating in each data center.
  • VNF operates in the form of such a virtual machine or container.
  • a plurality of racks a to c are included in one data center of FIG. 14 as shown in FIG.
  • the VNF of the service function chain C100 is operating on the servers included in the racks a and b.
  • the service function chain C100 passes through the gateway of this data center, passes through the VNFs of racks a and b, passes through the gateway again, and goes out of this data center. At this time, between the racks and between the rack and the gateway is relayed by the network in the data center.
  • Non-Patent Document 1 An example of a technique related to such a service function chain test is described in Non-Patent Document 1.
  • packets are classified according to a policy by a packet classification unit, and packets classified by a packet transfer unit are sent to an appropriate service function chain.
  • This related technique tests the service function chain by a tester.
  • the tester outputs a packet as the transmission source of the test traffic.
  • the output packet is classified by the packet classification unit, and is transferred along the predetermined transfer path to the VNF associated with the classification result by the packet transfer unit.
  • the packet output from the VNF is sent to the packet classification means, and is classified again, and then transferred to the next VNF by the packet transfer means, or transferred to the next VNF without being classified.
  • the packet output by the VNF at the end of the service chain is transferred to the tester.
  • the tester performs a continuity test on the service function chain by receiving the transmitted packet from the end of the service function chain. Further, the tester compares the packet transmission time and the reception time to calculate a delay, or calculates the throughput by measuring the number of packets and the amount of data that arrive at a certain time.
  • the problem with the operation mode as described above is that the VNF or application embedded in the service function chain by the user using the computer resource provided from the communication carrier is not managed by the communication carrier. That is, the user himself must maintain the VNF or application to continue to operate as expected. Since it is deployed in the network of the communication carrier, the user cannot directly input communication traffic for testing the VNF or application to the test object. In addition, the user cannot know details in the carrier network including the specific configuration of the service function chain.
  • Non-Patent Document 1 a tester such as Non-Patent Document 1 is incorporated in the service function chain in advance.
  • preparing a tester for each chain is not practical in terms of cost.
  • an object of the present invention is to provide a technique for more easily performing a test on a test target included in a service function chain.
  • the chain construction apparatus includes a chain design unit that designs a service function chain configured by a series of service functions included in a communication network based on a request for a communication service, and a service function that configures the service function chain.
  • test apparatus of the present invention generates test traffic and inputs the service function chain to the service function chain and the test service function chain constructed by the chain construction apparatus described above, thereby providing the service function chain.
  • a traffic generation and measurement means for measuring the state and performance of the test service function chain, and a measurement result comparison means for comparing measurement results for the service function chain and the test service function chain.
  • test system of the present invention includes the above-described chain construction device, a packet classification unit that classifies which service function chain a packet is distributed to in the communication network, and a service function chain classified by the packet classification unit.
  • Packet transfer means for controlling the communication network to transfer the packet along a transfer path.
  • a computer device designs a service function chain configured by a series of service functions included in a communication network based on a request for a communication service, and the service function of the service function chain is configured.
  • a service function chain for testing that does not pass through a service function that is not subject to the test through a service function that is subject to the test is designed, and the service function chain and the test service function chain are constructed in the communication network. .
  • the program of the present invention includes a chain design step for designing a service function chain configured by a series of service functions included in a communication network based on a request for a communication service, and a service function for configuring the service function chain.
  • a computer apparatus is caused to execute a chain construction step to be constructed in the communication network.
  • the program may be stored in a storage medium.
  • the computer device generates test traffic and inputs the service traffic to the service function chain and the test service function chain constructed by the above-described method.
  • the state and performance of the service function chain and the test service function chain are measured, and the measurement results for the service function chain and the test service function chain are compared.
  • Another program of the present invention generates test traffic and inputs it to the service function chain and the test service function chain constructed by causing the computer device to execute the above-described program.
  • the traffic generation measurement step for measuring the state and performance of the service function chain and the test service function chain, and the measurement result comparison step for comparing the measurement results for the service function chain and the test service function chain, Cause the computer device to execute.
  • the present invention can provide a technique for more easily performing a test on a test target included in a service function chain.
  • test system 1 The configuration of a test system 1 as the first embodiment of the present invention is shown in FIG.
  • the test system 1 includes a chain construction device 100, a packet classification unit 110, and a packet transfer unit 120.
  • the chain construction device 100 also includes a chain design unit 101, a test chain design unit 102, and a chain construction unit 103.
  • the test system 1 is connected to a communication network 900.
  • the communication network 900 provides a communication service using a service function chain.
  • the service function chain connects the communication ends U100 to U200 of users accommodated in the communication network 900 by a series of service functions 901.
  • the service function chain is also simply referred to as a chain.
  • the service function 901 is a function provided by using computer resources included in the communication network 900.
  • the service function 901 is realized as a VNF or an application.
  • the service function 901 includes a service function 901 provided by a communication carrier who is an administrator of the communication network 900.
  • a user-specific service function 901 using a computer resource in the communication network 900 may be introduced.
  • the type of service provided by a certain service function 901 may be the same as or different from the type of service provided by another service function 901.
  • FIG. 1 shows three service functions 901, the number of service functions 901 in the communication network 900 is not limited to three. Further, FIG.
  • the service function chain is configured by a series of all three service functions 901 included in the communication network 900.
  • the service function chain can be configured by a series of service functions 901 selected from service functions 901 that can be provided in the communication network 900.
  • the chain construction device 100 is a device for constructing a service function chain in the communication network 900.
  • the packet classification unit 110 classifies which service function chain the packet is distributed to in the communication network 900.
  • the packet transfer unit 120 controls the communication network 900 so as to transfer the classified packets along the transfer path of the distributed service function chain. Specifically, the packet transfer unit 120 holds packet transfer rules and controls each physical or logical switch in the communication network 900.
  • the test system 1 can be configured by a computer device including hardware elements as shown in FIG.
  • the test system 1 includes a CPU (Central Processing Unit) 1001, a memory 1002, an output device 1003, an input device 1004, and a network interface 1005.
  • the memory 1002 includes a RAM (Random Access Memory), a ROM (Read Only Memory), an auxiliary storage device (such as a hard disk), and the like.
  • the output device 1003 is configured by a device that outputs information, such as a display device or a printer.
  • the input device 1004 is configured by a device that receives an input of a user operation, such as a keyboard or a mouse.
  • a network interface 1005 is an interface connected to the communication network 900.
  • each functional block of the test system 1 includes a CPU 1001 that reads and executes a computer program stored in the memory 1002 and controls each unit.
  • each functional block configuring the test system 1 may not be realized on a physically identical computer apparatus including hardware elements as illustrated in FIG.
  • each functional block constituting the test system 1 may be realized by being distributed among a plurality of physical, logical, or virtual servers.
  • the network system includes a communication network 900 and one or more data centers 9001.
  • the number of data centers 9001 may be one or more and is not limited to three.
  • one data center 9001 includes one or more racks 9002 and a gateway 9003 as shown in FIG.
  • racks 9002 may be one or more, and is not limited to three.
  • one rack 9002 includes a switch 9004 and one or more computer resources 9005.
  • the switch 9004 may be a hardware element, but may be realized as software on the computer resource 9005.
  • the computer resource 9005 is configured by a physical server or a resource that can logically configure a computer.
  • the computer resource 9005 can communicate with the outside via a communication network in the data center 9001, a switch 9004, and a gateway 9003.
  • the service function 901 is realized by the computer resource 9005.
  • FIG. 4 shows three computer resources 9005, but the number of computer resources 9005 included in one rack 9002 may be one or more, and is not limited to three.
  • the configuration of the communication network 900 is not limited to the configurations shown in FIGS.
  • the chain design unit 101 designs a service function chain constituted by a series of service functions 901 included in the communication network 900 based on a request for communication services.
  • the chain design unit 101 may acquire information representing a chain configuration as a request for a communication service, and design a service function chain based on the information representing the chain configuration.
  • the chain design unit 101 includes a GUI (Graphical User Interface) capable of creating / editing a chain configuration and an editor capable of creating / editing the chain configuration in a structured text format. You may acquire the information showing.
  • the chain design unit 101 may design a service function chain by acquiring chain requirement information as a communication service request and automatically calculating the chain configuration based on the acquired requirement information.
  • the chain requirement information may include, for example, information indicating the type of service function 901 desired to be included in the chain.
  • the communication service request is typically input by a user or administrator of the communication network 900.
  • a service function chain designed based on a communication service request may include a service function 901 introduced by a user.
  • the service function 901 introduced by the user is different from the service function 901 provided by the administrator of the communication network 900 or the like.
  • the service function 901 introduced by the user is newly introduced separately from the service function 901 provided by the administrator or the like based on the communication service request input by the user.
  • the chain design unit 101 outputs configuration information of the designed service function chain.
  • the service function chain configuration information includes, for example, information indicating the type and number of service functions 901, arrangement locations, transfer paths between the service functions 901, and the like.
  • the output format may be data or a file on the memory 1002, or may be a communication protocol message.
  • the test chain design unit 102 designs a test service function chain for the service function chain designed by the chain design unit 101.
  • the test service function chain is a chain having a configuration in which, among the service functions 901 constituting the service function chain, the service function 901 that is a test target is not passed through the service function 901 that is not the test target.
  • information indicating which service function 901 is a test target may be determined by an input by a user or an administrator.
  • the service function chain 901 introduced by the user may be included in the service function chain, the service function 901 introduced by the user may be applied as a test target.
  • the test chain design unit 102 may generate a test service function chain that passes only the service function 901 for each service function 901 to be tested. In this case, as many test service function chains as the number of service functions 901 to be tested are generated.
  • the test chain design unit 102 may generate a test service function chain that passes through some or all of the service functions 901 to be tested and does not pass through the other service functions 901. The test chain design unit 102 may generate both of these test service function chains.
  • test chain design unit 102 outputs configuration information of the designed test service function chain.
  • An example of the configuration information and output format of the test service function chain is the same as the configuration information of the service function chain described above.
  • the chain construction unit 103 constructs a service function chain and a test service function chain in the communication network 900. For example, the chain construction unit 103 generates an instance of the service function 901 included in each chain using the computer resource 9005. Further, for example, the chain construction unit 103 performs settings related to network control for transferring packets between the service functions 901 along the transfer path of the corresponding chain. These construction processes are performed on the packet classification unit 110 and the packet transfer unit 120. For example, the chain construction unit 103 can construct a service function chain and a test service function chain using a known technique described in Non-Patent Document 1.
  • the chain design unit 101 acquires a communication service request (step S11).
  • the chain design unit 101 may acquire information representing the configuration of a chain as a request for a communication service via a GUI or an editor. Alternatively, as described above, the chain design unit 101 may acquire chain requirement information as a request for a communication service.
  • the chain design unit 101 designs a service function chain based on the communication service request (step S12).
  • test chain design unit 102 designs a test service function chain for the chain designed by the chain design unit 101 (step S13).
  • the test service function chain is a chain that does not pass through the service function 901 that is the test target and does not pass through the service function 901 that is not the test target, among the service functions 901 that constitute the service function chain.
  • the service function chain includes the service function 901 introduced by the user, the corresponding service function 901 is a test target.
  • the chain construction unit 103 constructs the service function chain designed in step S12 and the test service function chain designed in step S13 in the communication network 900 (step S14).
  • the chain construction device 100 ends the operation.
  • the chain design unit 101 acquires information representing the configuration of the service function chain shown in FIG. 6 as a communication service request (step S11).
  • VNF 901a a VNF 901b
  • VNF 901c a VNF 901c
  • the VNF 901b is a service function 901 introduced by the user.
  • the VNFs 901a and 901c are service functions 901 provided by a communication carrier that manages the communication network 900.
  • step S12 the chain design unit 101 designs the chain C1000 as shown in FIG. 7 in order to realize the configuration of the service function chain shown in FIG. 6 (step S12).
  • switches 9004a to 9004c are switches 9004 for switching input / output traffic of VNFs 901a to 901c, respectively. These switches 9004a to 9004c are implemented as hardware or software operating on a computer in a rack 9002 in which the corresponding VNFs 901a to 901c are provided.
  • switches 9004a and 9004b and the switches 9004b and 9004c are connected as follows.
  • switches 9004a and 9004b are connected by a network in the data center 9001.
  • the connection between switches 9004b and 9004c is similar.
  • switches 9004a and 9004b are connected by one or more paths passing through both the data center 9001 network and the data center 9001 network.
  • the connection between switches 9004b and 9004c is similar.
  • VNFs 901a and 901b at both ends may exist in the same rack 9002.
  • the switches 9004a and 9004b are constituted by the same switch 9004. Therefore, the path from VNF 901a to 901b is folded back by the switch 9004a, such as VNF 901a-switch 9004a-VNF 901b.
  • step S11 the chain design unit 101 calculates the location where each of the VNFs 901a to 901c is arranged and a set of routes that follow them in order.
  • the chain design unit 101 outputs the configuration information of the chain C1000.
  • test chain design unit 102 designs a chain C2000 shown in FIG. 8 as a test service function chain for the chain C1000 designed as shown in FIG. 7 (step S13).
  • the test chain design unit 102 extracts the VNF 901b introduced by the user as a test target in the chain C1000.
  • the fact that the VNF 901b is introduced by the user can be extracted by referring to the configuration information of the chain C1000.
  • the test chain design unit 102 calculates a path (transfer path) that passes through the VNF 901b extracted as a test target and does not pass through the VNFs 901a and 901c in the chain C1000.
  • the test chain design unit 102 designs a chain C2000 having the calculated path.
  • the chain C2000 designed in this way passes through a path in which the folded portions of the VNFs 901a and 901c that do not pass are removed from the path of the chain C1000.
  • the chain construction unit 103 constructs chains C1000 and C2000 in the communication network 900 (step S14). As described above, for example, the chain construction unit 103 may construct these chains using the technique described in Non-Patent Document 1.
  • the test system according to the first embodiment of the present invention can more easily perform a test on a test target included in a service function chain.
  • the chain design unit designs a service function chain configured by a series of service functions included in the communication network, based on a communication service request. Then, for the designed service function chain, the test chain design unit designs a test service function chain.
  • the test service function chain is a chain that passes through a service function to be tested among service functions constituting the designed service function chain and does not pass through a service function not to be tested. This is because the chain construction unit constructs the service function chain and the test service function chain in the communication network.
  • a service function chain for testing that passes only a user-specific service function is constructed among service function chains that realize a request for a communication service from a user. Therefore, the user can directly input traffic to the unique service function provided in the carrier network, and can easily perform the test.
  • FIG. 9 shows the configuration of a test system 2 as a second embodiment of the present invention.
  • the test system 2 includes a test apparatus 200 in addition to the same configuration as the test system 1 as the first embodiment of the present invention.
  • the test apparatus 200 includes a traffic generation measurement unit 201 and a measurement result comparison unit 202.
  • the test device 200 is a device that performs a test using the service function chain constructed by the chain construction device 100 and the test service function chain.
  • the test apparatus 200 is connected to the communication end of the service function chain.
  • the test apparatus 200 is connected to the communication end U100, but may be connected to the communication end U200.
  • the test apparatus 200 may be connected to the communication terminals U100 and U200, respectively.
  • the test apparatus 200 includes a CPU 2001, a memory 2002, an output apparatus 2003, an input apparatus 2004, and a connection interface 2005.
  • the memory 2002 includes a RAM, a ROM, an auxiliary storage device, and the like.
  • the output device 2003 is configured by a device that outputs information, such as a display device or a printer.
  • the input device 2004 is configured by a device that receives an input of a user operation, such as a keyboard and a mouse.
  • the connection interface 2005 is an interface connected to the communication end U100.
  • each functional block of the test apparatus 200 is configured by a CPU 2001 that reads and executes a computer program stored in the memory 2002 to control each unit.
  • test apparatus 200 may be realized on a computer apparatus that constitutes the communication end U100. In that case, the test apparatus 200 may not include the connection interface 2005.
  • the hardware configuration of the test apparatus 200 and each functional block thereof is not limited to the above-described configuration.
  • the traffic generation / measurement unit 201 generates and inputs test traffic to the service function chain and the test service function chain. Then, the traffic generation measurement unit 201 acquires the traffic output from each chain via the communication end U100. Thereby, the traffic generation measurement unit 201 measures the state and performance of each chain.
  • the measurement result comparison unit 202 compares the measurement results for each chain. For example, the measurement result comparison unit 202 outputs the comparison result to the output device 2003.
  • test system 2 configured as described above will be described with reference to FIG.
  • test system 2 has already executed the operation shown in FIG. 5 as in the first embodiment of the present invention. That is, it is assumed that a service function chain based on a communication service request and a test service function chain corresponding to the service function chain have already been constructed.
  • the traffic generation measurement unit 201 generates and inputs test traffic to the service function chain and the test service function chain, and measures the state and performance of each chain ( Step S21).
  • the measurement result comparison unit 202 compares the measurement results for each chain and outputs the comparison result (step S22).
  • test system 2 finishes the operation.
  • the traffic generation measurement unit 201 generates test traffic, inputs it to the chains C1000 and C2000, and receives response traffic (step S21).
  • the measurement for each chain is performed after the traffic input to one chain has been received and received, and then the traffic is input to the other chain.
  • the measurement for each chain may be performed in parallel.
  • the measurement result comparison unit 202 compares the measurement result of the chain C1000 and the measurement result of the chain C2000, and outputs the comparison result (step S22).
  • the measurement result comparison unit 202 calculates a delay difference obtained by subtracting the delay time of the chain C2000 from the delay time of the chain C1000. Based on the delay difference, the delay of the section provided by the communication carrier other than the VNF 901b to be tested can be estimated. Further, by comparing this delay difference with the delay time of the chain C2000, the position of the delay bottleneck can be estimated. In this way, the measurement result comparison unit 202 outputs, for example, information representing the delay of the section provided by the communication carrier and the position of the bottleneck of the delay.
  • the test system according to the second embodiment of the present invention can more easily perform the test on the test target included in the service function chain.
  • the present embodiment includes a test apparatus in addition to the same configuration as that of the first embodiment of the present invention.
  • the traffic generation and measurement unit measures the state and performance of each chain by generating and inputting the test traffic to the service function chain and the test service function chain. .
  • the measurement result comparison unit compares the measurement results for each chain.
  • each chain is configured with a difference whether or not it goes through a service function provided by the carrier. Since the present embodiment compares and outputs the measurement results of each chain, the user can easily distinguish between a problem in the carrier network and a problem due to the user's own service function. As a result, the user can easily perform troubleshooting and detailed performance evaluation regarding the service function chain including the service function unique to the user.
  • FIG. 12 shows the configuration of a test system 3 as a third embodiment of the present invention.
  • the test system 3 is different from the test system 2 as the second embodiment of the present invention in that a test apparatus 210 is included instead of the test apparatus 200.
  • the test apparatus 210 further includes an abnormality detection unit 213 in addition to the same configuration as the test apparatus 200.
  • test system 3 and each functional block thereof can be configured in substantially the same manner as the hardware configuration in the first and second embodiments of the present invention described with reference to FIGS. 2 and 10.
  • the hardware configuration of the test system 3 and each functional block thereof is not limited to the above-described configuration.
  • the abnormality detection unit 213 detects an abnormal state of the service function 901 to be tested based on the comparison result by the measurement result comparison unit 202.
  • the abnormality detection unit 213 may hold one or a plurality of boundary values for defining a normal value or an abnormal value range with respect to a value representing the comparison result.
  • This boundary value may be given in advance as a fixed value, or may be dynamically updated using a value measured in a past test or a statistical value derived therefrom.
  • the abnormality detection unit 213 when detecting an abnormal state of the service function 901 to be tested, the abnormality detection unit 213 outputs information indicating an abnormal state. For example, the abnormality detection unit 213 may output information indicating an abnormal state to the output device 1003. Further, for example, the abnormality detection unit 213 may output information indicating an abnormal state as a notification message by a message protocol or e-mail. Further, the abnormality detection unit 213 may output information indicating an abnormal state by calling a standby RPC (remote procedure call) of the user system. Further, the abnormality detection unit 213 may write a state representing an abnormal state as a message such as a log to a local or remote storage or file.
  • RPC remote procedure call
  • the abnormality detection unit 213 may repeatedly determine the abnormal state by controlling the traffic generation measurement unit 201 and the measurement result comparison unit 202 so as to repeatedly perform measurement and comparison. In that case, the abnormality detection unit 213 may control to perform the next measurement after waiting for a predetermined time after determining the abnormal state, or may control to perform the measurement at each predetermined timing. .
  • test system 3 configured as described above will be described with reference to FIG.
  • a service function chain based on a communication service request and a test service function chain corresponding to the service function chain have already been constructed.
  • test system 3 executes steps S21 to S22 as in the second embodiment of the present invention. Thereby, measurement and comparison are performed for each chain.
  • the abnormality detection unit 213 determines whether or not the service function 901 to be tested is in an abnormal state based on the comparison result in step S22 (step S31).
  • the abnormality detection unit 213 uses one or more boundary values for defining a normal value or a range of abnormal values, and whether the value range includes a value representing the comparison result of step S22. It may be determined whether or not.
  • step S31 when it is determined that there is no abnormal state (No in step S31), the operation of the test system 3 proceeds to step S33.
  • step S31 if it is determined that the state is abnormal (Yes in step S31), the abnormality detection unit 213 outputs that the state is abnormal (step S32).
  • step S33 when the predetermined end condition is not satisfied (No in step S33), the test system 3 repeats the operation from step S21.
  • step S33 when the predetermined termination condition is satisfied (Yes in step S33), the test system 3 terminates the operation.
  • the test system according to the third embodiment of the present invention can more easily detect the abnormal state of the test target included in the service function chain.
  • the abnormality detection unit detects the abnormal state of the service function to be tested based on the comparison result by the measurement result comparison unit It is because it detects.
  • the present embodiment detects an abnormal state of a unique service function, the user can quickly take measures such as troubleshooting and chain redesign.
  • the example has been described mainly in which the service function to be tested in the service function chain is a user-specific service function.
  • the service function to be tested is not limited to the service function unique to the user.
  • each functional block of each embodiment of the present invention described above is realized by a CPU that executes a computer program stored in a memory.
  • the present invention is not limited to this, and some, all, or a combination of each functional block may be realized by dedicated hardware.
  • each device described with reference to each flowchart is stored in a computer storage device (storage medium) as a computer program of the present invention. Then, the computer program may be read and executed by the CPU.
  • the present invention is constituted by the code of the computer program or a storage medium.

Abstract

サービスファンクションチェインに含まれる試験対象に対する試験をより容易に実施する技術を提供すること。チェイン構築装置100は、通信サービスの要求に基づいて、通信ネットワーク900に含まれるサービス機能901の連なりによって構成されるサービスファンクションチェインを設計するチェイン設計部101と、サービスファンクションチェインを構成するサービス機能901のうちテストの対象となるサービス機能901を経由しテストの対象とならないサービス機能901を経由しないテスト用サービスファンクションチェインを設計するテスト用チェイン設計部102と、サービスファンクションチェインおよびテスト用サービスファンクションチェインを通信ネットワーク900内に構築するチェイン構築部103とを備える。

Description

チェイン構築装置、試験装置、試験システム、方法および記録媒体
 本発明は、サービスファンクションチェインを試験する技術に関する。
 通信キャリアは、通信サービスの構築を、旧来のハードウェアアプライアンスを用いた形態から、VNF(Virtual Network Function)を用いた形態へ移行しつつある。VNFは、汎用の計算機サーバで稼動してネットワーク機能を実現するソフトウェアである。通信キャリアは、所望の機能をもつVNFを組み合わせてサービスファンクションチェインを構成することで、ユーザに対して通信サービスを柔軟に提供できる。
 サービスファンクションチェインは、ユーザの送受信端を、キャリア網内のデータセンタに配備されたVNFを経由しながら繋ぐ。図14に、サービスチェインの概形を具体例で示す。ユーザの通信端は、キャリア網に有線もしくは無線媒体によって接続している。キャリア網の中には、複数のデータセンタが設置されている。ユーザの通信端間を繋ぐサービスファンクションチェインC100は、キャリア網を通る途上で各データセンタを通っており、各データセンタ内で稼動しているVNFを経由する。
 また、データセンタの内部には、複数のサーバが備わっている。各サーバのCPU(Central Processing Unit)、GPU(Graphics Processing Unit)、メモリ、ストレージなどの計算機リソースは、仮想マシンやコンテナという形態で使用される。VNFは、このような仮想マシンもしくはコンテナの形態で動作する。例えば、図14の1つのデータセンタ内において、図15のように、複数のラックa~cが含まれるとする。また、ラックaおよびbにそれぞれ含まれるサーバ上で、サービスファンクションチェインC100のVNFが稼動しているとする。この場合、サービスファンクションチェインC100は、このデータセンタのゲートウェイを通り、ラックaおよびbのVNFを経由して、再びゲートウェイを通って、このデータセンタの外部に出る。このとき、ラック間、並びに、ラックおよびゲートウェイの間は、このデータセンタ内のネットワークで中継される。
 ここで、VNFを用いても、通信サービス、すなわちサービスファンクションチェインの設計・構築時および運用中に所望のサービス品質を維持するために、試験環境が必要であることは、旧来と変わらない。
 このようなサービスファンクションチェインの試験に関連する技術の一例が、非特許文献1に記載されている。この関連技術は、パケット分類手段によってポリシに従ってパケットを分類し、パケット転送手段によって分類したパケットを適切なサービスファンクションチェインへ送出する。そして、この関連技術は、テスタによって、サービスファンクションチェインを試験する。
 具体的には、テスタは、試験用トラヒックの送信元としてパケットを出力する。出力されたパケットは、パケット分類手段によって分類され、パケット転送手段によって、分類結果と関連づけられたVNFに対して、所定の転送パスに沿って転送される。VNFから出力されるパケットは、パケット分類手段に送られ、再度分類された後、パケット転送手段によって次のVNFへ転送されるか、分類を経ずに次のVNFへ転送される。サービスチェインの末尾のVNFが出力したパケットは、テスタに転送される。テスタは、送出したパケットをサービスファンクションチェインの末尾から受信することで、サービスファンクションチェインの導通試験を行う。また、テスタは、パケットの送信時刻と受信時刻とを比較して遅延を算出したり、ある時間で到着するパケット数・データ量を測ることによってスループットを算出したりする。
 ところで、通信キャリアが自身のネットワークにおいて、通信リソースのみならず、計算機リソースも提供するMEC(Mobile Edge Computing)のようなアーキテクチャが議論されている。このようなアーキテクチャでは、ユーザが独自のVNFまたはアプリケーションをサービスファンクションチェインの一部として、通信キャリアのネットワーク内に埋め込むような運用形態が考えられる。
R. Gu, C. Li, and H. Assarpour, "Test Report of Service Function Chain with NSH in Cloud Datacenter," IETF I-D: draft-gu-sfc-test-report-sfc-nsh-00, October 2015.
 前述のような運用形態における問題点は、ユーザが通信キャリアから提供される計算機リソースを用いてサービスファンクションチェインに埋め込んだVNFまたはアプリケーションが、通信キャリアの管理外になる、ということである。つまり、ユーザ自身が、そのVNFまたはアプリケーションが期待通りに動作し続けるようメンテナンスしなければならない。通信キャリアのネットワーク内に配備しているため、ユーザは、そのVNFまたはアプリケーションを試験するための通信トラヒックを試験対象に対して直接入力することはできない。また、ユーザは、サービスファンクションチェインの具体的な構成を含む、キャリア網内の詳細を知ることもできない。
 ここで、このような運用形態においても、非特許文献1のようなテスタを、サービスファンクションチェインに予め組み込んでおくことが考えられる。しかしながら、チェインごとにテスタを用意することは、費用面で現実的ではない。また、テスタの数を減らし、チェイン間で試験の度に組替えることも考えられるが、チェインの運用が非常に煩雑になる。
 したがって、このような運用形態でサービスファンクションチェインを試験するには、サービスファンクションチェインの両端から試験用トラヒックを流さざるを得ない。しかしながら、この場合、ユーザは、試験対象単体での試験を行うことはできない。また、この場合、試験トラヒックが試験対象となるVNFまたはアプリケーションの前後のチェインの影響を受けるため、問題箇所の切り分けが困難になる。
 本発明は、上述の課題を解決するためになされたものである。すなわち、本発明は、サービスファンクションチェインに含まれる試験対象に対する試験をより容易に実施する技術を提供することを目的とする。
 本発明のチェイン構築装置は、通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計するチェイン設計手段と、前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計するテスト用チェイン設計手段と、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築するチェイン構築手段と、を備える。
 また、本発明の試験装置は、上述のチェイン構築装置によって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測するトラヒック生成計測手段と、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する計測結果比較手段と、を備える。
 また、本発明の試験システムは、上述のチェイン構築装置と、前記通信ネットワークにおいてパケットをいずれのサービスファンクションチェインに振り分けるかを分類するパケット分類手段と、前記パケット分類手段によって分類されたサービスファンクションチェインの転送パスに沿って前記パケットを転送するよう前記通信ネットワークを制御するパケット転送手段と、を備える。
 また、本発明の方法は、コンピュータ装置が、通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計し、前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計し、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築する。
 また、本発明のプログラムは、通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計するチェイン設計ステップと、前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計するテスト用チェイン設計ステップと、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築するチェイン構築ステップと、をコンピュータ装置に実行させる。当該プログラムは記憶媒体に格納されていてもよい。
 また、本発明の他の方法は、コンピュータ装置が、上述の方法によって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測し、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する。
 また、本発明の他のプログラムは、上述のプログラムをコンピュータ装置に実行させることによって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測するトラヒック生成計測ステップと、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する計測結果比較ステップと、をコンピュータ装置に実行させる。
 本発明は、サービスファンクションチェインに含まれる試験対象に対する試験をより容易に実施する技術を提供することができる。
本発明の第1の実施の形態としての試験システムの構成を示すブロック図である。 本発明の第1の実施の形態としての試験システムのハードウェア構成の一例を示す図である。 本発明の第1の実施の形態における通信ネットワークの構成の具体例を示す図である。 本発明の第1の実施の形態におけるデータセンタの構成の具体例を示す図である。 本発明の第1の実施の形態におけるチェイン構築装置の動作を説明するフローチャートである。 本発明の第1の実施の形態の具体例において要求されるサービスファンクションチェインの構成を示す図である。 本発明の第1の実施の形態の具体例において設計されたサービスファンクションチェインの構成を示す図である。 本発明の第1の実施の形態の具体例において設計されたテスト用サービスファンクションチェインの構成を示す図である。 本発明の第2の実施の形態としての試験システムの構成を示すブロック図である。 本発明の第2の実施の形態における試験装置のハードウェア構成の一例を示す図である。 本発明の第2の実施の形態における試験装置の動作を説明するフローチャートである。 本発明の第3の実施の形態としての試験システムの構成を示すブロック図である。 本発明の第3の実施の形態における試験装置の動作を説明するフローチャートである。 サービスファンクションチェインの概形を具体的に説明する図である。 サービスファンクションチェインの概形を具体的に説明する他の図である。
 以下、本発明の実施の形態について、図面を参照して詳細に説明する。
 (第1の実施の形態)
 本発明の第1の実施の形態としての試験システム1の構成を図1に示す。図1において、試験システム1は、チェイン構築装置100と、パケット分類部110と、パケット転送部120とを含む。また、チェイン構築装置100は、チェイン設計部101と、テスト用チェイン設計部102と、チェイン構築部103とを含む。また、試験システム1は、通信ネットワーク900に接続される。
 ここで、通信ネットワーク900は、サービスファンクションチェインによる通信サービスを提供する。サービスファンクションチェインは、通信ネットワーク900に収容されるユーザの通信端U100からU200までを、サービス機能901の連なりによって繋ぐ。以降、サービスファンクションチェインを、単にチェインとも記載する。
 サービス機能901は、通信ネットワーク900に含まれる計算機リソースを用いて提供される機能である。例えば、サービス機能901は、VNFまたはアプリケーションとして実現される。また、サービス機能901としては、通信ネットワーク900の管理者である通信キャリアにより提供されるサービス機能901がある。また、他のサービス機能901として、通信ネットワーク900内の計算機リソースを用いたユーザ独自のサービス機能901が導入される場合もある。ここで、あるサービス機能901が提供するサービスの種類は、他のサービス機能901が提供するサービスの種類と同一であってもよいし、異なっていてもよい。なお、図1には、3つのサービス機能901を示したが、通信ネットワーク900におけるサービス機能901の数は、3つに限定されない。また、図1では、サービスファンクションチェインが、通信ネットワーク900に含まれる3つのサービス機能901の全ての連なりによって構成される例を示している。ただし、サービスファンクションチェインは、通信ネットワーク900において提供可能なサービス機能901のうち選択されたサービス機能901の連なりによって構成可能である。
 チェイン構築装置100は、通信ネットワーク900におけるサービスファンクションチェインを構築する装置である。
 パケット分類部110は、通信ネットワーク900においてパケットをいずれのサービスファンクションチェインに振り分けるかを分類する。
 パケット転送部120は、分類されたパケットを、振り分けられたサービスファンクションチェインの転送パスに沿ってパケットを転送するよう、通信ネットワーク900を制御する。具体的には、パケット転送部120は、パケットの転送ルールを保持し、通信ネットワーク900内の各物理的または論理的なスイッチを制御する。
 ここで、試験システム1は、図2に示すようなハードウェア要素を含むコンピュータ装置によって構成可能である。図2において、試験システム1は、CPU(Central Processing Unit)1001、メモリ1002、出力装置1003、入力装置1004、および、ネットワークインタフェース1005を含む。メモリ1002は、RAM(Random Access Memory)、ROM(Read Only Memory)、補助記憶装置(ハードディスク等)等によって構成される。出力装置1003は、ディスプレイ装置やプリンタ等のように、情報を出力する装置によって構成される。入力装置1004は、キーボードやマウス等のように、ユーザ操作の入力を受け付ける装置によって構成される。ネットワークインタフェース1005は、通信ネットワーク900に接続するインタフェースである。この場合、試験システム1の各機能ブロックは、メモリ1002に格納されるコンピュータ・プログラムを読み込んで実行して各部を制御するCPU1001によって構成される。
 なお、試験システム1のハードウェア構成は、図2に示した構成に限定されない。例えば、試験システム1を構成する各機能ブロックは、図2に示したようなハードウェア要素を備える物理的に同一のコンピュータ装置上に実現されていなくてもよい。例えば、試験システム1を構成する各機能ブロックは、複数の物理的、論理的または仮想的なサーバに分散して実現されていてもよい。
 また、通信ネットワーク900およびサービス機能901を含むネットワークシステムの構成の一例を図3~図4に示す。図3において、ネットワークシステムは、通信ネットワーク900と、1つ以上のデータセンタ9001とを含む。ここで、図3には、3つのデータセンタ9001を示しているが、データセンタ9001の数は、1以上であればよく、3つに限定されない。
 また、1つのデータセンタ9001は、図4に示すように、1つ以上のラック9002と、ゲートウェイ9003とを含む。ここで、図4には、3つのラック9002を示しているが、1つのデータセンタ9001に含まれるラック9002の数は、1以上であればよく、3つに限定されない。
 また、1つのラック9002は、スイッチ9004と、1つ以上の計算機リソース9005とを含む。スイッチ9004は、ハードウェア要素であってもよいが、計算機リソース9005上にソフトウェアとして実現されていてもよい。また、計算機リソース9005は、物理サーバまたは論理的に計算機を構成可能なリソースによって構成される。また、計算機リソース9005は、データセンタ9001内の通信ネットワーク、スイッチ9004およびゲートウェイ9003を介して、外部と通信可能である。このとき、サービス機能901は、計算機リソース9005によって実現される。ここで、図4には、3つの計算機リソース9005を示しているが、1つのラック9002に含まれる計算機リソース9005の数は、1以上であればよく、3つに限定されない。
 なお、通信ネットワーク900の構成は、図3~図4に示した構成に限定されない。
 次に、チェイン構築装置100の各機能ブロックの詳細について説明する。
 チェイン設計部101は、通信サービスの要求に基づいて、通信ネットワーク900に含まれるサービス機能901の連なりによって構成されるサービスファンクションチェインを設計する。
 例えば、チェイン設計部101は、チェインの構成を表す情報を通信サービスの要求として取得し、チェインの構成を表す情報に基づいて、サービスファンクションチェインを設計してもよい。この場合、チェイン設計部101は、チェインの構成を作成・編集可能なGUI(Graphical User Interface)や、チェインの構成を構造的なテキスト形式で作成・編集可能なエディタを備えることにより、チェインの構成を表す情報を取得してもよい。あるいは、チェイン設計部101は、チェインの要件情報を通信サービスの要求として取得し、取得した要件情報に基づいて自動的にチェインの構成を計算することにより、サービスファンクションチェインを設計してもよい。チェインの要件情報とは、例えば、チェインに含めたいサービス機能901の種類を表す情報を含んでいてもよい。なお、通信サービスの要求は、典型的には、通信ネットワーク900のユーザや管理者により入力される。
 このとき、例えば、通信のサービス要求に基づいて、設計されたサービスファンクションチェインは、ユーザによって導入されるサービス機能901を含む場合もある。ユーザによって導入されるサービス機能901は、通信ネットワーク900の管理者等により提供されるサービス機能901とは異なっている。たとえば、ユーザによって導入されるサービス機能901は、ユーザによって入力された通信サービスの要求に基づき、管理者等により提供されるサービス機能901とは別に、新たに導入される。
 また、チェイン設計部101は、設計したサービスファンクションチェインの構成情報を出力する。サービスファンクションチェインの構成情報は、例えば、サービス機能901の種類、数、配置場所、サービス機能901間の転送パス等をそれぞれ表す情報を含む。出力のフォーマットは、メモリ1002上のデータやファイルであってもよいし、通信プロトコルのメッセージであってもよい。
 テスト用チェイン設計部102は、チェイン設計部101によって設計されたサービスファンクションチェインに対してテスト用サービスファンクションチェインを設計する。テスト用サービスファンクションチェインは、サービスファンクションチェインを構成するサービス機能901のうち、テストの対象となるサービス機能901を経由しテストの対象とならないサービス機能901を経由しない構成のチェインである。
 なお、いずれのサービス機能901がテストの対象となるかを表す情報は、ユーザまたは管理者による入力により決定されてもよい。あるいは、ユーザによって導入されるサービス機能901がサービスファンクションチェインに含まれる場合、ユーザによって導入される当該サービス機能901が、テストの対象として適用されてもよい。
 また、サービスファンクションチェインに、テストの対象となる複数のサービス機能901が含まれる場合について説明する。この場合、テスト用チェイン設計部102は、テストの対象となる各サービス機能901について、そのサービス機能901だけを経由するテスト用サービスファンクションチェインを生成してもよい。この場合、テストの対象となるサービス機能901の数だけ、テスト用サービスファンクションチェインが生成される。また、テスト用チェイン設計部102は、複数のテストの対象となるサービス機能901の一部または全てを経由し、他のサービス機能901を経由しないテスト用のサービスファンクションチェインを生成してもよい。また、テスト用チェイン設計部102は、これらの両方のテスト用サービスファンクションチェインを生成してもよい。
 また、テスト用チェイン設計部102は、設計したテスト用サービスファンクションチェインの構成情報を出力する。テスト用サービスファンクションチェインの構成情報および出力のフォーマットの一例は、前述したサービスファンクションチェインの構成情報と同様である。
 チェイン構築部103は、サービスファンクションチェインおよびテスト用サービスファンクションチェインを、通信ネットワーク900内に構築する。例えば、チェイン構築部103は、それぞれのチェインに含まれるサービス機能901のインスタンスを、計算機リソース9005を用いて生成する。また、例えば、チェイン構築部103は、該当するチェインの転送パスに沿ってパケットをサービス機能901間で転送するためのネットワーク制御に関する設定を行う。これらの構築処理は、パケット分類部110およびパケット転送部120に対して行われる。例えば、チェイン構築部103は、非特許文献1に記載された公知の技術を用いて、サービスファンクションチェインおよびテスト用サービスファンクションチェインを構築可能である。
 以上のように構成されたチェイン構築装置100の動作を、図5を参照して説明する。
 図5では、まず、チェイン設計部101は、通信サービスの要求を取得する(ステップS11)。
 前述のように、チェイン設計部101は、GUIやエディタを介して、チェインの構成を表す情報を、通信サービスの要求として取得してもよい。あるいは、前述のように、チェイン設計部101は、チェインの要件情報を、通信サービスの要求として取得してもよい。
 次に、チェイン設計部101は、通信サービスの要求に基づいて、サービスファンクションチェインを設計する(ステップS12)。
 次に、テスト用チェイン設計部102は、チェイン設計部101によって設計されたチェインに対してテスト用サービスファンクションチェインを設計する(ステップS13)。
 前述のように、テスト用サービスファンクションチェインは、サービスファンクションチェインを構成するサービス機能901のうち、テストの対象となるサービス機能901を経由しテストの対象とならないサービス機能901を経由しないチェインである。
 また、前述のように、サービスファンクションチェインに、ユーザによって導入されたサービス機能901が含まれる場合、該当するサービス機能901が、テストの対象となる。
 次に、チェイン構築部103は、ステップS12で設計されたサービスファンクションチェインと、ステップS13で設計されたテスト用サービスファンクションチェインとを、通信ネットワーク900内に構築する(ステップS14)。
 以上で、チェイン構築装置100は、動作を終了する。
 次に、チェイン構築装置100の動作を具体例で示す。
 この具体例では、チェイン設計部101は、通信サービスの要求として、図6に示すサービスファンクションチェインの構成を表す情報を取得したとする(ステップS11)。
 図6に示すサービスファンクションチェインの構成は、VNF901a、VNF901b、VNF901cを含む。ここで、VNF901bは、ユーザによって導入されるサービス機能901であるとする。また、VNF901aおよび901cは、通信ネットワーク900を管理する通信キャリアによって提供されるサービス機能901であるとする。
 次に、チェイン設計部101は、図6に示すサービスファンクションチェインの構成を実現するため、図7に示すようにチェインC1000を設計したとする(ステップS12)。
 図7において、スイッチ9004a~9004cは、それぞれ、VNF901a~901cの入出力トラヒックをスイッチングするためのスイッチ9004である。これらのスイッチ9004a~9004cは、対応するVNF901a~901cが配備されたラック9002内に、ハードウェアもしくは計算機上で動作するソフトウェアとして実装されている。
 なお、図7では簡略化して示しているが、スイッチ9004aおよび9004b、並びに、スイッチ9004bおよび9004cの間は、次のように接続される。
 まず、両端のVNF901aおよび901bが同一データセンタ9001内の異なるラック9002に存在する場合について説明する。この場合、スイッチ9004aおよび9004bの間は、データセンタ9001内ネットワークによって接続される。スイッチ9004bおよび9004cの間の接続も同様である。
 また、両端のVNF901aおよび901bが異なるデータセンタ9001内に存在する場合について説明する。この場合、スイッチ9004aおよび9004bの間は、双方のデータセンタ9001内ネットワークおよびデータセンタ9001間ネットワーク内を通る1以上の経路によって接続される。スイッチ9004bおよび9004cの間の接続も同様である。
 なお、両端のVNF901aおよび901bが同一ラック9002内に存在する場合がある。この場合、スイッチ9004aおよび9004bが同一のスイッチ9004により構成される。したがって、VNF901aから901bへの経路は、VNF901a-スイッチ9004a-VNF901b、というように、スイッチ9004aで折り返す形となる。
 このように、ステップS11において、チェイン設計部101は、各VNF901a~901cが配置される場所と、それらを順に辿る経路の組とを計算する。そして、チェイン設計部101は、チェインC1000の構成情報を出力する。
 次に、テスト用チェイン設計部102は、図7に示すように設計されたチェインC1000に対するテスト用サービスファンクションチェインとして、図8に示すチェインC2000を設計する(ステップS13)。
 具体的には、テスト用チェイン設計部102は、チェインC1000におけるテストの対象として、ユーザによって導入されたVNF901bを抽出する。VNF901bがユーザによって導入されたものであることは、チェインC1000の構成情報を参照することにより抽出可能である。そして、テスト用チェイン設計部102は、チェインC1000において、テストの対象として抽出したVNF901bを経由し、VNF901aおよび901cを経由しない経路(転送パス)を計算する。そして、テスト用チェイン設計部102は、計算した経路を持つチェインC2000を設計する。
 このようにして設計されたチェインC2000は、チェインC1000の経路のうち、経由しないVNF901aおよび901cの折り返し部分を除去した経路を通る。
 次に、チェイン構築部103は、通信ネットワーク900にチェインC1000およびC2000を構築する(ステップS14)。前述のように、例えば、チェイン構築部103は、非特許文献1に記載された技術を用いてこれらのチェインを構築すればよい。
 以上で、具体例の説明を終了する。
 次に、本発明の第1の実施の形態の効果について述べる。
 本発明の第1の実施の形態としての試験システムは、サービスファンクションチェインに含まれる試験対象に対する試験をより容易に実施することができる。
 その理由について説明する。本実施の形態では、チェイン設計部が、通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計する。そして、設計されたサービスファンクションチェインに対して、テスト用チェイン設計部が、テスト用サービスファンクションチェインを設計する。テスト用サービスファンクションチェインは、設計されたサービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由しテストの対象とならないサービス機能を経由しないチェインである。そして、チェイン構築部が、サービスファンクションチェインおよびテスト用サービスファンクションチェインを通信ネットワーク内に構築するからである。
 このように、本実施の形態は、ユーザからの通信サービスの要求を実現するサービスファンクションチェインのうち、ユーザ独自のサービス機能のみを経由するテスト用サービスファンクションチェインを構築する。したがって、ユーザは、キャリア網内に配備した独自のサービス機能に対して、直接トラヒックを入力することができ、試験を容易に行うことができる。
 (第2の実施の形態)
 次に、本発明の第2の実施の形態について図面を参照して詳細に説明する。なお、本実施の形態の説明において参照する各図面において、本発明の第1の実施の形態と同一の構成および同様に動作するステップには同一の符号を付して本実施の形態における詳細な説明を省略する。
 まず、本発明の第2の実施の形態としての試験システム2の構成を図9に示す。図9において、試験システム2は、本発明の第1の実施の形態としての試験システム1と同一の構成に加えて、試験装置200を含む。試験装置200は、トラヒック生成計測部201と、計測結果比較部202とを含む。
 試験装置200は、チェイン構築装置100によって構築されたサービスファンクションチェインおよびテスト用サービスファンクションチェインを用いて、試験を行う装置である。また、試験装置200は、サービスファンクションチェインの通信端に接続される。なお、図9では、試験装置200は、通信端U100に接続されているが、通信端U200に接続されていてもよい。また、通信端U100およびU200に、それぞれ試験装置200が接続されていてもよい。
 ここで、試験装置200のハードウェア構成の一例を図10に示す。図10において、試験装置200は、CPU2001、メモリ2002、出力装置2003、入力装置2004、および、接続インタフェース2005を含む。メモリ2002は、RAM、ROM、補助記憶装置等によって構成される。出力装置2003は、ディスプレイ装置やプリンタ等のように、情報を出力する装置によって構成される。入力装置2004は、キーボードやマウス等のように、ユーザ操作の入力を受け付ける装置によって構成される。接続インタフェース2005は、通信端U100に接続するインタフェースである。この場合、試験装置200の各機能ブロックは、メモリ2002に格納されるコンピュータ・プログラムを読み込んで実行して各部を制御するCPU2001によって構成される。なお、試験装置200は、通信端U100を構成するコンピュータ装置上に実現されてもよい。その場合、試験装置200は、接続インタフェース2005を含んでいなくてもよい。ただし、試験装置200およびその各機能ブロックのハードウェア構成は、上述の構成に限定されない。
 次に、試験装置200の各機能ブロックの詳細について説明する。
 トラヒック生成計測部201は、サービスファンクションチェイン、および、そのテスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力する。そして、トラヒック生成計測部201は、それぞれのチェインから出力されたトラヒックを、通信端U100を介して取得する。これにより、トラヒック生成計測部201は、各チェインの状態や性能を計測する。
 計測結果比較部202は、各チェインに対する計測結果を比較する。そして、例えば、計測結果比較部202は、比較結果を出力装置2003に出力する。
 以上のように構成された試験システム2の動作について、図11を参照して説明する。
 なお、以下の動作の前に、試験システム2は、本発明の第1の実施の形態と同様に図5に示した動作を実行済みであるものとする。すなわち、通信サービスの要求に基づくサービスファンクションチェインと、それに対するテスト用サービスファンクションチェインが既に構築されているものとする。
 図11では、まず、トラヒック生成計測部201は、サービスファンクションチェイン、および、そのテスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力し、各チェインの状態や性能を計測する(ステップS21)。
 次に、計測結果比較部202は、各チェインに対する計測結果を比較し、比較結果を出力する(ステップS22)。
 以上で、試験システム2は、動作を終了する。
 次に、試験システム2の動作を具体例で示す。この具体例では、本発明の第1の実施の形態の動作の具体例で説明したように、図7に示したチェインC1000および図8に示したチェインC2000が構築されているものとする。
 まず、トラヒック生成計測部201は、試験用トラヒックを生成し、チェインC1000およびC2000に対して入力し、応答トラヒックを受信する(ステップS21)。
 なお、このとき、各チェインに対する計測は、一方のチェインへのトラヒックの入力から受信までが終了後、他方のチェインへのトラヒックの入力が行われることが望ましい。ただし、測定する性能に影響を及ぼさない、もしくは、無視できるほど影響が小さい場合は、各チェインに対する測定が、並行して行われてもよい。
 次に、計測結果比較部202は、チェインC1000の計測結果およびチェインC2000の計測結果を比較し、比較結果を出力する(ステップS22)。
 例えば、遅延時間を比較することを想定する。この場合、計測結果比較部202は、チェインC1000の遅延時間からチェインC2000の遅延時間を減じた遅延差を算出する。遅延差により、テストの対象となるVNF901b以外の、通信キャリアによって提供されている区間の遅延が推定可能である。また、この遅延差とチェインC2000の遅延時間とを比較することにより、遅延のボトルネックの位置が推定可能である。計測結果比較部202は、このようにして、例えば、通信キャリアによって提供されている区間の遅延や、遅延のボトルネックの位置をそれぞれ表す情報を出力する。
 以上で、具体例の説明を終了する。
 次に、本発明の第2の実施の形態の効果について述べる。
 本発明の第2の実施の形態としての試験システムは、サービスファンクションチェインに含まれる試験対象に対する試験を、さらに容易に実施することができる。
 その理由について説明する。本実施の形態は、本発明の第1の実施の形態と同様の構成に加えて、試験装置を備えるからである。そして、試験装置では、トラヒック生成計測部が、サービスファンクションチェイン、および、そのテスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、各チェインの状態や性能を計測する。そして、計測結果比較部が、各チェインに対する計測結果を比較するからである。
 このように、本実施の形態は、ユーザからの通信サービスの要求を実現するサービスファンクションチェインを構築することに加えて、構築したチェインの構成におけるユーザ独自のサービス機能のみを経由するテスト用サービスファンクションチェインも構築する。つまり、それぞれのチェインは、キャリアが提供するサービス機能を経由するか否かという違いで構成されている。そして、本実施の形態は、各チェインの計測結果を比較して出力するので、ユーザは、キャリア網内の問題と、ユーザ独自のサービス機能による問題との切り分けを容易に行うことができる。その結果、ユーザは、ユーザ独自のサービス機能を含むサービスファンクションチェインに関して、トラブルシューティングや詳細な性能評価を容易に行うことができる。
 (第3の実施の形態)
 次に、本発明の第3の実施の形態について図面を参照して詳細に説明する。なお、本実施の形態の説明において参照する各図面において、本発明の第2の実施の形態と同一の構成および同様に動作するステップには同一の符号を付して本実施の形態における詳細な説明を省略する。
 まず、本発明の第3の実施の形態としての試験システム3の構成を図12に示す。図12において、試験システム3は、本発明の第2の実施の形態としての試験システム2に対して、試験装置200に替えて試験装置210を含む点が異なる。試験装置210は、試験装置200と同一の構成に加えて、さらに、異常検知部213を含む。
 なお、試験システム3およびその各機能ブロックは、図2および図10を参照して説明した本発明の第1および第2の実施の形態におけるハードウェア構成と略同様に構成可能である。ただし、試験システム3およびその各機能ブロックのハードウェア構成は、上述の構成に限定されない。
 次に、試験装置210の異常検知部213について説明する。
 異常検知部213は、計測結果比較部202による比較結果に基づいて、テストの対象となるサービス機能901の異常状態を検知する。
 例えば、異常検知部213は、比較結果を表す値に対して、正常値もしくは異常値の値域を規定するための1つまたは複数の境界値を保持していてもよい。この境界値は、固定値として予め与えられていてもよいし、過去の試験で測定された値もしくはそれらから導出される統計値などを用い、動的に更新されても構わない。
 また、異常検知部213は、テストの対象となるサービス機能901の異常状態を検知した場合、異常状態であることを表す情報を出力する。例えば、異常検知部213は、出力装置1003に対して異常状態を表す情報を出力してもよい。また、例えば、異常検知部213は、メッセージプロトコルや電子メールによる通知メッセージとして、異常状態を表す情報を出力してもよい。また、異常検知部213は、ユーザシステムの待ち受け用RPC(remote procedure call)の呼び出しにより、異常状態を表す情報を出力してもよい。また、異常検知部213は、ローカルまたはリモートのストレージやファイルに対して、ログなどのメッセージとして異常状態を表す状態を書き込んでもよい。
 また、異常検知部213は、計測および比較を繰り返し行うよう、トラヒック生成計測部201および計測結果比較部202を制御して、異常状態の判断を繰り返し行ってもよい。その場合、異常検知部213は、異常状態の判断後、所定時間待機してから次の計測を行うよう制御してもよいし、あらかじめ定められたタイミング毎に計測を行うよう制御してもよい。
 以上のように構成された試験システム3の動作について、図13を参照して説明する。なお、ここでは、本発明の第2の実施の形態と同様に、通信サービスの要求に基づくサービスファンクションチェインと、それに対するテスト用サービスファンクションチェインとが、既に構築されているものとする。
 まず、試験システム3は、本発明の第2の実施の形態と同様にステップS21~S22を実行する。これにより、各チェインに対する計測および比較が行われる。
 次に、異常検知部213は、ステップS22の比較結果に基づいて、テストの対象となるサービス機能901が異常状態であるか否かを判断する(ステップS31)。
 前述のように、例えば、異常検知部213は、正常値もしくは異常値の値域を規定するための1つまたは複数の境界値を用いて、ステップS22の比較結果を表す値が値域に含まれるか否かを判断してもよい。
 ここで、異常状態でないと判断した場合(ステップS31でNo)、試験システム3の動作は、ステップS33に進む。
 一方、異常状態であると判断した場合(ステップS31でYes)、異常検知部213は、異常状態であることを出力する(ステップS32)。
 次に、所定の終了条件を満たしていない場合(ステップS33でNo)、試験システム3は、ステップS21からの動作を繰り返す。
 一方、所定の終了条件を満たしている場合(ステップS33でYes)、試験システム3は動作を終了する。
 次に、本発明の第3の実施の形態の効果について述べる。
 本発明の第3の実施の形態としての試験システムは、サービスファンクションチェインに含まれる試験対象に対して、より容易にその異常状態を検知することができる。
 その理由について説明する。本実施の形態は、本発明の第2の実施の形態と同様の構成に加えて、異常検知部が、計測結果比較部による比較結果に基づいて、テストの対象となるサービス機能の異常状態を検知するからである。
 このように、本実施の形態は、独自のサービス機能の異常状態を検知するので、ユーザは、トラブルシューティングやチェインの再設計などの対応を迅速に行うことができる。
 なお、上述した本発明の各実施の形態において、具体例として、サービスファンクションチェインに含まれるサービス機能が3つである例について説明した。これに限らず、各実施の形態は、サービスファンクションチェインに含まれるサービス機能がいくつであっても適用可能である。
 また、上述した本発明の各実施の形態において、サービスファンクションチェインにおいてテストの対象となるサービス機能が、ユーザ独自のサービス機能である例を中心に説明した。ただし、テストの対象となるサービス機能は、ユーザ独自のサービス機能に限定されない。
 また、上述した本発明の各実施の形態の各機能ブロックが、メモリに記憶されたコンピュータ・プログラムを実行するCPUによって実現される例を中心に説明した。これに限らず、各機能ブロックの一部、全部、または、それらの組み合わせが、専用のハードウェアにより実現されていてもよい。
 また、上述した本発明の各実施の形態において、各フローチャートを参照して説明した各装置の動作を、本発明のコンピュータ・プログラムとしてコンピュータの記憶装置(記憶媒体)に格納しておく。そして、係るコンピュータ・プログラムを当該CPUが読み出して実行するようにしてもよい。そして、このような場合において、本発明は、係るコンピュータ・プログラムのコードあるいは記憶媒体によって構成される。
 また、上述した各実施の形態は、適宜組み合わせて実施されることが可能である。
 また、本発明は、上述した各実施の形態に限定されず、本願発明のスコープ内で当業者が理解し得る様々な態様で実施されることが可能である。
 この出願は2016年10月27日に出願された日本出願特願2016-210191を基礎とする優先権を主張し、その開示の全てをここに取り込む。
 1、2、3  試験システム
 100  チェイン構築装置
 101  チェイン設計部
 102  テスト用チェイン設計部
 103  チェイン構築部
 110  パケット分類部
 120  パケット転送部
 200、210  試験装置
 201  トラヒック生成計測部
 202  計測結果比較部
 213  異常検知部
 900  通信ネットワーク
 901  サービス機能
 1001、2001  CPU
 1002、2002  メモリ
 1003、2003  出力装置
 1004、2004  入力装置
 1005  ネットワークインタフェース
 2005  接続インタフェース
 9001  データセンタ
 9002  ラック
 9003  ゲートウェイ
 9004  スイッチ
 9005  計算機リソース

Claims (10)

  1.  通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計するチェイン設計手段と、
     前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計するテスト用チェイン設計手段と、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築するチェイン構築手段と、
     を備えたチェイン構築装置。
  2.  前記チェイン設計手段は、ユーザによって導入されるサービス機能を含む前記サービスファンクションチェインを設計し、
     前記テスト用チェイン設計手段は、前記ユーザによって導入される前記サービス機能を前記テストの対象として前記テスト用サービスファンクションチェインを設計することを特徴とする請求項1に記載のチェイン構築装置。
  3.  請求項1または請求項2に記載のチェイン構築装置によって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測するトラヒック生成計測手段と、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する計測結果比較手段と、
     を備えた試験装置。
  4.  前記計測結果比較手段による比較結果に基づいて、前記テストの対象となるサービス機能の異常状態を検知する異常検知手段をさらに備えたことを特徴とする請求項3に記載の試験装置。
  5.  請求項1または請求項2に記載のチェイン構築装置と、
     前記通信ネットワークにおいてパケットをいずれのサービスファンクションチェインに振り分けるかを分類するパケット分類手段と、
     前記パケット分類手段によって分類されたサービスファンクションチェインの転送パスに沿って前記パケットを転送するよう前記通信ネットワークを制御するパケット転送手段と、
     を備えた試験システム。
  6.  請求項3または請求項4に記載の試験装置をさらに備えたことを特徴とする請求項5に記載の試験システム。
  7.  コンピュータ装置が、
     通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計し、
     前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計し、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築する方法。
  8.  通信サービスの要求に基づいて、通信ネットワークに含まれるサービス機能の連なりによって構成されるサービスファンクションチェインを設計するチェイン設計ステップと、
     前記サービスファンクションチェインを構成するサービス機能のうちテストの対象となるサービス機能を経由し前記テストの対象とならないサービス機能を経由しないテスト用サービスファンクションチェインを設計するテスト用チェイン設計ステップと、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインを前記通信ネットワーク内に構築するチェイン構築ステップと、
     をコンピュータ装置に実行させるプログラムを格納する記憶媒体。
  9.  コンピュータ装置が、
     請求項7に記載の方法によって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測し、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する方法。
  10.  請求項8に記載のプログラムをコンピュータ装置に実行させることによって構築された前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対して、試験用トラヒックを生成してそれぞれ入力することにより、前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインの状態や性能を計測するトラヒック生成計測ステップと、
     前記サービスファンクションチェインおよび前記テスト用サービスファンクションチェインに対する計測結果を比較する計測結果比較ステップと、
     をコンピュータ装置に実行させるプログラムを格納する記憶媒体。
PCT/JP2017/038023 2016-10-27 2017-10-20 チェイン構築装置、試験装置、試験システム、方法および記録媒体 WO2018079440A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/342,591 US20190260647A1 (en) 2016-10-27 2017-10-20 Chain building device, testing device, testing system, method, and recording medium
JP2018547629A JPWO2018079440A1 (ja) 2016-10-27 2017-10-20 チェイン構築装置、試験装置、試験システム、方法およびプログラム
EP17865742.5A EP3534573A4 (en) 2016-10-27 2017-10-20 CHAIN CONSTRUCTION DEVICE, TEST DEVICE, TEST SYSTEM, METHOD AND RECORDING MEDIUM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016210191 2016-10-27
JP2016-210191 2016-10-27

Publications (1)

Publication Number Publication Date
WO2018079440A1 true WO2018079440A1 (ja) 2018-05-03

Family

ID=62024880

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/038023 WO2018079440A1 (ja) 2016-10-27 2017-10-20 チェイン構築装置、試験装置、試験システム、方法および記録媒体

Country Status (4)

Country Link
US (1) US20190260647A1 (ja)
EP (1) EP3534573A4 (ja)
JP (1) JPWO2018079440A1 (ja)
WO (1) WO2018079440A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021015021A1 (ja) * 2019-07-19 2021-01-28 ソニー株式会社 通信装置及び通信方法
WO2022003820A1 (ja) * 2020-06-30 2022-01-06 日本電信電話株式会社 性能監視装置、プログラムおよび性能監視方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10700946B2 (en) * 2017-08-08 2020-06-30 Amdocs Development Limited System, method, and computer program for automatically certifying a virtual network function (VNF) for use in a network function virtualization (NFV) based communication network
CN110545228B (zh) * 2019-07-26 2020-11-20 北京邮电大学 服务功能链请求处理方法及系统
US11863651B2 (en) * 2021-11-10 2024-01-02 At&T Intellectual Property I, L.P. Network service functions API

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011048613A (ja) * 2009-08-27 2011-03-10 Nec Corp デバッグ仲介装置、デバッグシステム及びそのデバッグ方法
US20150149812A1 (en) * 2013-11-22 2015-05-28 Telefonaktiebolaget L M Ericsson (Publ) Self-Debugging Router Platform

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105591768B (zh) * 2014-10-21 2019-11-29 中兴通讯股份有限公司 故障检测方法及装置
KR101802037B1 (ko) * 2014-11-28 2017-11-27 주식회사 케이티 Sdn 환경에서 서비스 기능 체이닝을 위한 oam 메시지 전송 방법 및 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011048613A (ja) * 2009-08-27 2011-03-10 Nec Corp デバッグ仲介装置、デバッグシステム及びそのデバッグ方法
US20150149812A1 (en) * 2013-11-22 2015-05-28 Telefonaktiebolaget L M Ericsson (Publ) Self-Debugging Router Platform

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3534573A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021015021A1 (ja) * 2019-07-19 2021-01-28 ソニー株式会社 通信装置及び通信方法
US11743322B2 (en) 2019-07-19 2023-08-29 Sony Group Corporation Communication device and communication method
WO2022003820A1 (ja) * 2020-06-30 2022-01-06 日本電信電話株式会社 性能監視装置、プログラムおよび性能監視方法

Also Published As

Publication number Publication date
EP3534573A1 (en) 2019-09-04
EP3534573A4 (en) 2020-07-29
JPWO2018079440A1 (ja) 2019-09-19
US20190260647A1 (en) 2019-08-22

Similar Documents

Publication Publication Date Title
WO2018079440A1 (ja) チェイン構築装置、試験装置、試験システム、方法および記録媒体
EP3375144B1 (en) Methods, systems, and computer readable media for testing network function virtualization (nfv)
US10581717B2 (en) Automated virtual network function test controller
US11695642B2 (en) Virtualized network service management and diagnostics
US10742527B2 (en) Deep packet inspection virtual function
US11398968B2 (en) Methods, systems, and computer readable media for testing virtualized network functions and related infrastructure
US11455184B2 (en) End-to-end validation of virtual machines
US20160269482A1 (en) Providing agentless application performance monitoring (apm) to tenant applications by leveraging software-defined networking (sdn)
EP4328754A2 (en) Techniques to isolating a portion of an online computing service
US20200195553A1 (en) System and method for measuring performance of virtual network functions
CN103916264A (zh) 优化物理网络的虚拟网络
US7487416B2 (en) Self test device and self test method for reconfigurable device mounted board
US9160653B2 (en) Dynamic redirection of network traffic within a system under test
US11770323B2 (en) Unified interface and tracing tool for network function virtualization architecture
KR102118487B1 (ko) 지속적인 통합 및 배포를 위한 컨테이너 기반 애플리케이션의 자동 품질검사 시스템 및 방법
KR20170133781A (ko) 가상 인프라 스트럭처의 시험 및 진단 장치 및 방법
CN114365461B (zh) 用于在网络设备上提供流量生成的系统和方法
US20230040284A1 (en) Trust related management of artificial intelligence or machine learning pipelines
KR20170044320A (ko) 분산 컴퓨팅 기반의 어플리케이션 객체 분석 방법, 이를 수행하는 어플리케이션 객체 분석 서버 및 이를 저장하는 기록매체
KR20190116512A (ko) 네트워크 구축 장치, 네트워크 구축 방법, 및 컴퓨터 판독가능 기록 매체에 저장된 프로그램
Yi et al. SDN/NFV‐enabled performance estimation framework for SFC optimization
Yungaicela-Naula et al. Misconfiguration in O-RAN: Analysis of the impact of AI/ML
Khalil et al. Dependability: Enablers in 5G Campus Networks for Industry 4.0
Mathieu et al. Monitoring and securing new functions deployed in a virtualized networking environment
Duarte et al. Workshop on Dependability Issues on SDN and NFV (DISN)

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17865742

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018547629

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017865742

Country of ref document: EP

Effective date: 20190527