WO2023238354A1 - トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム - Google Patents

トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム Download PDF

Info

Publication number
WO2023238354A1
WO2023238354A1 PCT/JP2022/023372 JP2022023372W WO2023238354A1 WO 2023238354 A1 WO2023238354 A1 WO 2023238354A1 JP 2022023372 W JP2022023372 W JP 2022023372W WO 2023238354 A1 WO2023238354 A1 WO 2023238354A1
Authority
WO
WIPO (PCT)
Prior art keywords
flow
statistical data
data
traffic
traffic amount
Prior art date
Application number
PCT/JP2022/023372
Other languages
English (en)
French (fr)
Inventor
千晴 森岡
裕平 林
賢杜 山田
勇樹 三好
晶規 古田
里美 井上
篤史 須藤
Original Assignee
日本電信電話株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電信電話株式会社 filed Critical 日本電信電話株式会社
Priority to PCT/JP2022/023372 priority Critical patent/WO2023238354A1/ja
Publication of WO2023238354A1 publication Critical patent/WO2023238354A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/02Capturing of monitoring data

Definitions

  • the present invention relates to a traffic monitoring device, a traffic monitoring method, and a traffic monitoring program.
  • xFlow technology which aggregates and analyzes traffic by transferring flow statistical information calculated from packet header information and the header part itself (header sample).
  • IPFIX w/IE315 Non-Patent Document 1
  • sFlow Non-Patent Document 2
  • NW network
  • NW network device tFlow
  • IPFIX non-patent documents 4 to 9
  • the NW devices on the network can also transmit IF statistical information such as the total traffic amount and the total number of packets for each interface (hereinafter referred to as "IF") of the NW device at fixed time intervals using telemetry.
  • IF the total traffic amount and the total number of packets for each interface
  • IPFIX IP Flow Information Export
  • IPFIX Information Model for IP Flow Information Export
  • online [Retrieved May 24, 2020]
  • B. Trammell 1 other person, “Guidelines for Authors and Reviewers of IP Flow Information Export (IPFIX) Information Elements”, [online], [Retrieved May 24, 2020], Internet ⁇ URL: https:// www.rfc-editor.org/rfc/rfc7013.txt> S.
  • the traffic monitoring device of the present invention uses IF statistical data, which is statistical information for each IF acquired from network devices, and flow statistical data, which is statistical information calculated from sampled packets.
  • an acquisition unit that acquires the IF statistical data and the flow statistical data from an external storage device that accumulates the IF statistical data, the total traffic amount for each IF calculated from the IF statistical data, and the flow calculated from the flow statistical data; and a first calculation unit that calculates the total traffic amount for each individual flow based on the total traffic amount for each flow.
  • the present invention makes it possible to estimate the total traffic amount for each flow based on statistical information for each IF collected by telemetry and flow statistical information of sampled header samples without collecting header samples of all packets. be effective.
  • FIG. 1 is a diagram illustrating an example of an overview of traffic monitoring according to an embodiment.
  • FIG. 2 is a diagram illustrating an example of the device configuration of the data lake and traffic monitoring device according to the embodiment.
  • FIG. 3 is a data table diagram showing an example of IF statistical data collected by the data lake according to the embodiment.
  • FIG. 4 is a data table diagram showing an example of flow statistical data that the traffic monitoring device according to the embodiment acquires from the data lake.
  • FIG. 5 is a diagram illustrating an example of calculating the total traffic amount for each flow according to the embodiment.
  • FIG. 6 is a diagram illustrating an example of calculating the total amount of traffic for each flow in a NW device in an area other than the representative area according to the embodiment.
  • FIG. 1 is a diagram illustrating an example of an overview of traffic monitoring according to an embodiment.
  • FIG. 2 is a diagram illustrating an example of the device configuration of the data lake and traffic monitoring device according to the embodiment.
  • FIG. 3 is a data table diagram showing an example of
  • FIG. 7 is a flowchart of data collection and unified management by the data lake according to the embodiment.
  • FIG. 8 is a flowchart of calculation of the total amount of traffic for each flow in the NW device in the representative area by the traffic monitoring device according to the embodiment.
  • FIG. 9 is a flowchart of calculation of the total amount of traffic for each flow in NW devices in other areas by the traffic monitoring device according to the embodiment.
  • FIG. 10 is a diagram illustrating an example of a computer on which the data lake and traffic monitoring device according to the embodiment is implemented.
  • the total traffic amount is defined as "the sum of the traffic amounts of all packets that meet a predetermined condition”
  • the "traffic amount per flow of sampling packets that meet a predetermined condition” is defined as “total traffic amount”.
  • the total traffic volume of all flows is defined as the total traffic volume of all flows, and the sum of the traffic volume of sampling packets that meet a predetermined condition for each flow, only for monitored flows, is defined as the total traffic volume of all flows.
  • the total amount of traffic is defined as “total traffic volume” and is unified below.
  • a data lake 10 (hereinafter simply referred to as "data lake 10"), which is an external storage device, encapsulates telemetry data 50 from a NW device 40 from a format conversion device 30 in a network where a plurality of service networks overlap. Flow statistics of xFlow packets 52 are collected and centrally managed. Furthermore, the traffic monitoring device 20 stores IF statistical data 55 including information such as the total traffic amount per IF, and flow statistical data 56 including information such as the traffic amount per flow of sampled encapsulated packets. Traffic is monitored by acquiring data from the data lake 10 based on conditions and calculating the total amount of traffic for each flow of applications, services, etc. to be monitored.
  • FIG. 1 is a diagram illustrating an example of an overview of traffic monitoring according to an embodiment.
  • the NW device 40 which is a communication device on the network, transmits telemetry data 50 to the data lake 10.
  • the telemetry data 50 includes "NW device identification information", “NW device IF identification information”, “time information”, “received traffic amount”, “transmitted traffic amount” acquired by telemetry, It includes "number of received packets" and "number of transmitted packets".
  • the number of NW devices 40 in the network is not limited, and may include a plurality of NW devices as required for the network configuration.
  • the telemetry data 50 may include information other than the information described above.
  • the NW device 40 transmits the xFlow packet 51 of the sampled encapsulated packet to the format conversion device 30.
  • the xFlow packet 51 mentioned above includes "header sample of encapsulated packet", “sampling rate”, “time information”, “NW device identification information”, “NW device IF identification information”, and “communication direction”. "Packet size before sampling” is included. Note that the xFlow packet 51 may include information other than the information described above.
  • the format conversion device 30 that has received the xFlow packet 51 calculates statistical information for each flow from the xFlow packet 51 and transmits the flow statistics xFlow packet 52 to the data lake 10.
  • the aforementioned flow statistics xFlow packet 52 includes "flow information including outer header information, inner header information, etc.” and “traffic amount of inner packets, traffic amount of packets including outer header, and number of packets calculated for each flow.” "flow statistical information including”, “time information”, “sampling rate”, "NW device identification information”, “NW device IF identification information", and "communication direction”. Note that the flow statistics xFlow packet 52 may include information other than the information described above.
  • the data lake 10 includes NW topology information 53, NW device information 54 such as the IF and IP address of the NW devices constituting the network, information included in the telemetry data 50 (hereinafter referred to as IF statistical data 55), and flow Information included in the statistics xFlow packet 52 (hereinafter referred to as flow statistics data 56) is centrally managed.
  • the traffic monitoring device 20 acquires the IF statistical data 55 and the flow statistical data 56 from the data lake 10 based on predetermined conditions. Subsequently, the traffic monitoring device 20 calculates an estimated value of the total amount of traffic for each flow of the monitored application, service, etc., based on the acquired IF statistical data 55 and flow statistical data 56.
  • FIG. 2 The configurations of the data lake 10 and traffic monitoring device 20 according to the embodiment will be described using FIG. 2. As shown in FIG. 2, the present invention is realized by a device configuration including a data lake 10 and a traffic monitoring device 20. The detailed functions of each part are described below.
  • the data lake 10 includes a communication section 11, a storage section 12, and a control section 13. Although not shown, the data lake 10 may include an input unit (for example, a keyboard, a mouse, etc.) that accepts various operations, and a display unit (for example, a display) for displaying various information.
  • an input unit for example, a keyboard, a mouse, etc.
  • a display unit for example, a display
  • the data lake 10 is a device that can centrally store structured data and unstructured data.
  • structured data with regularity such as XML files and CSV files
  • unstructured data such as image files, document files, video files, and e-mails can be stored in their original format.
  • the data lake 10 may have a function of storing only structured data.
  • the communication unit 11 of the data lake 10 is implemented by a NIC (Network Interface Card) or the like, and controls communication via a telecommunication line such as a LAN (Local Area Network) or the Internet.
  • the storage unit 12 of the data lake 10 stores data and programs necessary for various processing by the control unit 13. Furthermore, the storage unit 12 includes an IF statistical data storage unit 121 and a flow statistical data storage unit 122.
  • the storage unit 12 is realized by a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory, or a storage device such as a hard disk or an optical disk.
  • the IF statistical data storage unit 121 stores IF statistical data 55 based on information included in the telemetry data 50 transmitted from the NW device 40.
  • the flow statistics data storage unit 122 stores flow statistics data 56 based on information included in the flow statistics xFlow packet 52 transmitted from the format conversion device 30.
  • the control unit 13 of the data lake 10 includes a collection unit 131.
  • the control unit 13 has an internal memory for temporarily storing programs and processing data that define various processing procedures, etc., and includes electronic circuits such as a CPU (Central Processing Unit) and an MPU (Micro Processing Unit), and an ASIC. This is realized by an integrated circuit such as an application specific integrated circuit (Application Specific Integrated Circuit) or a field programmable gate array (FPGA).
  • CPU Central Processing Unit
  • MPU Micro Processing Unit
  • ASIC Application Specific Integrated Circuit
  • FPGA field programmable gate array
  • Collection unit 131 Based on the information included in the telemetry data 50 transmitted from the NW device 40, the collection unit 131, based on the IF statistical data 55 and the information included in the flow statistics xFlow packet 52 transmitted from the format conversion device 30, Flow statistics data 56 is collected. Note that the data collected by the collection unit 131 is not limited to the above-mentioned information, and other information may be collected.
  • the traffic monitoring device 20 includes a communication section 21, a storage section 22, and a control section 23.
  • the traffic monitoring device 20 may include an input unit (for example, a keyboard, a mouse, etc.) for accepting various operations, and a display unit (for example, a display) for displaying various information. .
  • the communication unit 21 of the traffic monitoring device 20 is implemented by a NIC or the like, and controls communication via a telecommunication line such as a LAN or the Internet.
  • the traffic monitoring device 20 acquires data via the communication unit 11 of the data lake 10 described above and the communication unit 21 of the traffic monitoring device 20.
  • the storage unit 22 of the traffic monitoring device 20 stores data and programs necessary for various processing by the control unit 23.
  • the storage unit 22 is realized by a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory, or a storage device such as a hard disk or an optical disk.
  • the control unit 23 of the traffic monitoring device 20 includes an acquisition unit 231, a first calculation unit 232, and a second calculation unit 233.
  • the control unit 23 has an internal memory for temporarily storing programs and processing data that define various processing procedures, and is realized by an electronic circuit such as a CPU or MPU, or an integrated circuit such as an ASIC or FPGA. .
  • the acquisition unit 231 acquires data from the data lake 10, which is an external storage device, that stores IF statistical data 55, which is statistical information for each IF acquired from the network device, and flow statistical data 56, which is statistical information calculated from sampled packets. IF statistical data 55 and flow statistical data 56 are acquired based on predetermined acquisition conditions. Then, the acquisition unit 231 acquires the NW device identification information, the IF identification information, the IF statistical data 55 and the flow statistical data 56 in which the communication direction is the same and the measurement time is within a predetermined period from the data lake 10. .
  • the data acquisition conditions may include conditions other than those described above.
  • the traffic amount obtained from the flow statistical data 56 may be the "traffic amount of inner packets" or the "traffic amount of packets including the outer header.”
  • the acquisition unit 231 may identify the same NW device with different identification information. If expressed, the above data can be acquired from the data lake 10 by storing identification information for the same attribute in the IF statistical data 55 and flow statistical data 56 in advance in association with each other in the management device.
  • the first calculation unit 232 calculates that the NW device identification information and the IF identification information, which are information included in the IF statistical data 55 acquired by the acquisition unit 231 in paragraph number 0033, have the same communication direction and a predetermined measurement time. The total amount of traffic for each IF within the period is added up to calculate the total amount of traffic for the IF in a predetermined measurement period. In addition, in paragraph number 0033, when acquiring the "traffic amount of inner packets" from the flow statistical data 56, the traffic of inner packets per IF calculated based on the total traffic amount per IF and the total number of packets per IF of the IF statistical data 55. The total amount is added up for a predetermined measurement period to calculate the total traffic amount of the IF for the predetermined measurement period.
  • the first calculation unit 232 calculates the total traffic amount for a predetermined measurement period of the flow unit traffic amount of sampling packets, which is information included in the flow statistical data 56 acquired by the acquisition unit 231 in paragraph number 0033, and the aforementioned Based on the total traffic amount of the IF, an estimated value of the total traffic amount for each individual flow of monitored applications, services, etc. is calculated.
  • the traffic monitoring device 20 identifies the flow of an application or service to be monitored by using Outer header information and Inner header information, which are information included in the flow statistical data 56, alone or in combination.
  • the acquisition unit 231 acquires the IF statistical data 55 and the flow statistical data 56, and the first calculation unit 232 calculates the total traffic amount of the application k to be monitored in the NW device in the representative area.
  • the acquisition conditions for the IF statistical data 55 and the flow statistical data 56 are the measurement period "T1 to T2", the NW device identification information "NE1", the IF identification information "IF1", and the communication direction " "Down” and explain.
  • the acquisition unit 231 acquires the IF statistical data 55 that matches the data acquisition conditions described above from the data lake 10.
  • FIG. 3 is an example of the IF statistical data 55 acquired by the acquisition unit 231.
  • the acquisition unit 231 stores the data in the first row of the table as start time “T1”, end time “T1_3”, and NW device identification information “ IF statistical data 55 is acquired for the IF identification information "IF1", the total downlink IF unit traffic (byte) "X1", and the total number of downlink IF unit packets "N1".
  • the acquisition unit 231 acquires the IF statistical data 55 in the upstream direction.
  • the acquisition unit 231 acquires flow statistical data 56 that matches the data acquisition conditions described above from the data lake 10.
  • FIG. 4 is an example of the flow statistical data 56 that the acquisition unit 231 acquires.
  • the acquisition unit 231 stores the data in the first row of the table as start time "T1", end time "T1_1", and NW device identification information " NE1'', IF identification information ⁇ IF1'', communication direction ⁇ down'', sampling rate ⁇ 10,000'', outer header information ⁇ f1_out'', inner header information ⁇ f1_in', and the traffic amount per flow (byte). ) is "100" and the number of packets per flow is "10".
  • the outer header information is displayed as "f1_out” and the inner header information is displayed as "f1_in” in FIG. 4, but the actual outer header information includes the source IP address, source port number, and , a 5tuple including a destination IP address, a destination port number, and a protocol number, an MPLS (Multi-Protocol Label Switching) label, etc., and the actual inner header information includes the above-mentioned 5tuples.
  • MPLS Multi-Protocol Label Switching
  • the traffic monitoring device 20 identifies the flow of the application or service to be monitored by using the port number, source IP address, etc. included in the 5 tuples of the above-mentioned Outer header information and Inner header information, either singly or in combination. Note that the combination of information such as 5tuples for specifying a flow is not limited to the information and combinations described above, and it is possible to specify a flow using other information and combinations.
  • the first calculation unit 232 calculates whether the NW device identification information and the IF identification information of the flow statistical data 56 of the sampling packet acquired by the acquisition unit 231 in paragraph number 0039 for the NW device in the representative area have the same communication direction and , all flow unit traffic amounts (bytes) whose measurement times are within a predetermined period are added up to calculate the total traffic amount Sa of all flows.
  • the first calculation unit 232 extracts the data of the application k to be monitored based on the inner header information such as the port number of the inner header and the server side IP address included in the flow statistical data 56 mentioned above, and extracts the data of the application k to be monitored. A total traffic amount Sk for each k flow is calculated.
  • the first calculation unit 232 uses the total traffic amount Sa of all flows, the total traffic amount Sk of application k, and the total traffic amount (byte) XA of the IF calculated in paragraph number 0035 to calculate the representative
  • the total traffic amount ⁇ of application k in the NW devices in the area is calculated. For example, it is calculated using the following formula (1).
  • the first calculation unit 232 can calculate the total traffic amount ⁇ of the application m in the NW device in the representative area using the total traffic amount Sm of the application m.
  • the second calculation unit 233 calculates the total traffic amount for each IF and the total traffic amount for each flow in the NW device in the representative area calculated by the first calculation unit 232, and the total traffic amount for each IF in the NW device in any area other than the representative area. , the estimated value of the total amount of traffic for each flow in the NW device in the arbitrary area is calculated.
  • the traffic amount for each application flow in the NW device in other areas is An example of calculating the total amount of traffic will be explained. Furthermore, since the topology of carrier networks is designed so that network equipment is used uniformly based on user distribution, the geographical trend differences in traffic observed at core routers are small, and the difference between the representative area where the flow statistical data 56 was obtained and the The application flow distribution is almost the same in other areas.
  • the acquisition unit 231 acquires IF statistical data 55 in NW devices in areas other than the representative area. Data acquisition conditions and communication direction of IF statistical data 55 that match the NW device identification information and IF identification information of NW devices in other areas and that are obtained when calculating the total traffic amount ⁇ of application k in the NW device in the representative area. IF statistical data 55 with matching measurement periods is acquired. Next, the first calculation unit 232 derives the total traffic amount (bytes) YB of the IF in a predetermined measurement period from the acquired IF statistical data 55 in the NW devices in other areas.
  • the second calculation unit 233 calculates the total traffic amount ⁇ of the application k in the NW device in the representative area, calculated by the first calculation unit 232, and the total traffic amount XA for each IF in the NW device in the representative area. , the total traffic amount YB for each IF in the NW device in the other area, and the total traffic amount ⁇ ' of the application k in the NW device in the other area is calculated. For example, it is calculated using the following formula (2).
  • the second calculation unit 233 can calculate the total traffic amount ⁇ ' of the application m in the NW device in another area using the total traffic amount ⁇ of the application m in the NW device in the representative area.
  • the format conversion device 30 collects header samples from the xFlow packet 51 (step S11).
  • the data lake 10 collects telemetry data 50 from the NW device 40 and flow statistics xFlow packets 52 from the format conversion device 30 (step S12).
  • the data lake 10 centrally manages the NW topology information 53, the NW device information 54, the IF statistical data 55, and the flow statistical data 56 (step S13).
  • the acquisition unit 231 acquires the IF statistical data 55 and flow statistical data 56 in the NW devices in the representative area from the data lake 10 based on predetermined conditions (step S21).
  • the first calculation unit 232 calculates the total traffic amount XA for each IF in the NW device in the representative area based on the IF statistical data 55 (step S22).
  • the first calculation unit 232 calculates the total traffic amount Sa of all flows and the total traffic amount Sk of the application k to be monitored, based on the flow statistical data 56 (step S23).
  • the first calculation unit 232 uses the total traffic amount XA for each IF in the NW device in the representative area, the total traffic amount Sa of all flows, and the total traffic amount Sk of the application k to be monitored to calculate the total traffic amount in the representative area.
  • the total traffic amount ⁇ of application k in the NW device is calculated and held (step S24).
  • the acquisition unit 231 acquires IF statistical data 55 in NW devices in other areas from the data lake 10 based on predetermined conditions (step S31).
  • the first calculation unit 232 calculates the total traffic amount YB for each IF in the NW devices in other areas (step S32).
  • the second calculation unit 233 obtains the total traffic amount ⁇ of the application k in the NW device in the representative area, which was calculated in advance by the first calculation unit 232 (S24 in FIG. 8) (step S33).
  • the second calculation unit 233 calculates the total traffic amount YB for each IF in the NW devices in other areas, the total traffic amount ⁇ of application k in the NW devices in the representative area, and the total traffic amount XA for each IF in the NW devices in the representative area.
  • the total traffic amount ⁇ ' of the application k in the NW device in the other area is calculated using (step S34).
  • the data lake 10 collects and centrally manages the telemetry data 50 transmitted by the NW device 40 and the flow statistics xFlow packets 52 transmitted by the format conversion device 30.
  • the traffic monitoring device 20 acquires the IF statistical data 55 and flow statistical data 56 accumulated in the data lake 10 based on predetermined conditions, and calculates the total traffic amount for each flow of the application or service to be monitored. do. Therefore, according to the present invention, the following effects are achieved.
  • traffic monitoring device 20 can calculate the total amount of traffic for each flow of an application or service to be monitored, it is possible to monitor traffic for each flow to be monitored in order to detect anomalies in applications, services, etc.
  • the traffic monitoring device 20 uses flow statistical data 56 of sampled header samples and IF statistical data 55, which is telemetry data with a small amount of data, without collecting header samples of all packets. Calculate the total traffic amount for each service flow. Therefore, the traffic monitoring device 20 can calculate the target total traffic amount using a method that places less load on the network.
  • the traffic monitoring device 20 collects header samples only from NW devices in the representative area, and only acquires IF statistical data 55 for NW devices in other areas other than the representative area, and collects header samples of the applications and services to be monitored. Since the total amount of traffic for each flow can be calculated, the load on the network and the load on the NW device can be reduced.
  • each component of each device shown in the drawings is functionally conceptual, and does not necessarily need to be physically configured as shown in the drawings.
  • the specific form of distributing and integrating each device is not limited to what is shown in the diagram, and all or part of the devices can be functionally or physically distributed or integrated in arbitrary units depending on various loads, usage conditions, etc. Can be integrated and configured.
  • all or any part of each processing function performed by each device can be realized by a CPU and a program that is analyzed and executed by the CPU, or can be realized as hardware using wired logic.
  • the data lake 10 and the traffic monitoring device 20 can be implemented as package software or online software by installing a traffic monitoring program that executes the above-described data collection and traffic monitoring on a desired computer.
  • a traffic monitoring program that executes the above-described data collection and traffic monitoring on a desired computer.
  • the information processing device can function as the data lake 10 and the traffic monitoring device 20.
  • the information processing device referred to here includes a desktop or notebook personal computer.
  • information processing devices include mobile communication terminals such as smartphones, mobile phones, and PHSs (Personal Handyphone Systems), as well as slate terminals such as PDAs (Personal Digital Assistants).
  • FIG. 10 is a diagram showing an example of a computer on which the data lake 10 and the traffic monitoring device 20 are implemented.
  • Computer 1000 includes, for example, a memory 1010 and a CPU 1020.
  • the computer 1000 also includes a hard disk drive interface 1030, a disk drive interface 1040, a serial port interface 1050, a video adapter 1060, and a network interface 1070. These parts are connected by a bus 1080.
  • the memory 1010 includes a ROM (Read Only Memory) 1011 and a RAM 1012.
  • the ROM 1011 stores, for example, a boot program such as BIOS (Basic Input Output System).
  • Hard disk drive interface 1030 is connected to hard disk drive 1090.
  • Disk drive interface 1040 is connected to disk drive 1100.
  • Serial port interface 1050 is connected to, for example, mouse 1110 and keyboard 1120.
  • Video adapter 1060 is connected to display 1130, for example.
  • the hard disk drive 1090 stores, for example, an OS 1091, an application program 1092, a program module 1093, and program data 1094. That is, a program that defines each process of the data lake 10 and the traffic monitoring device 20 is implemented as a program module 1093 in which code executable by a computer is written. Program module 1093 is stored in hard disk drive 1090, for example. For example, a program module 1093 for executing processing similar to the functional configuration of the data lake 10 and the traffic monitoring device 20 is stored in the hard disk drive 1090. Note that the hard disk drive 1090 may be replaced by an SSD (Solid State Drive).
  • SSD Solid State Drive
  • the setting data used in the processing of the embodiment described above is stored as program data 1094 in, for example, the memory 1010 or the hard disk drive 1090. Then, the CPU 1020 reads out the program module 1093 and program data 1094 stored in the memory 1010 and the hard disk drive 1090 to the RAM 1012 as necessary, and executes the processing of the embodiment described above.
  • program module 1093 and the program data 1094 are not limited to being stored in the hard disk drive 1090, but may be stored in a removable storage medium, for example, and read by the CPU 1020 via the disk drive 1100 or the like.
  • program module 1093 and program data 1094 may be stored in another computer connected via a network (LAN, WAN (Wide Area Network), etc.). The program module 1093 and program data 1094 may then be read by the CPU 1020 from another computer via the network interface 1070.
  • LAN Local Area Network
  • WAN Wide Area Network

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

トラヒック監視装置(20)は、ネットワーク装置から取得したIF単位の統計情報であるIF統計データ及びサンプリングしたパケットから算出した統計情報であるフロー統計データを蓄積する外部の記憶装置から、IF統計データと、フロー統計データとを、取得し、IF統計データから算出したIFごとのトラヒック総量と、フロー統計データから算出したフローごとの合計トラヒック量に基づいて、個別のフローごとのトラヒック総量を算出する。

Description

トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム
 本発明は、トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラムに関する。
 近年、アプリケーションやサービス等の障害や異常検知等のために、トラヒック収集及び分析の重要性が高まっている。そのための技術として、パケットのヘッダ情報から算出したフロー統計情報や、ヘッダ部分そのもの(ヘッダサンプル)を転送することにより、トラヒックの集計及び分析を行うxFlow技術が知られている。このxFlow技術のうち、ヘッダサンプルを切り取って転送する方式のIPFIX w/IE315(非特許文献1)や、sFlow(非特許文献2)が知られている。また、パケットのヘッダ情報から算出したフロー統計情報を転送する方式のネットワーク(以下、「NW」)装置tFlow(非特許文献3)や、IPFIX(非特許文献4から9)が知られている。
 他方、カプセル化パケットの分析手法として、サンプリングしたカプセル化パケットのヘッダサンプルを解析し、Outer/Innerヘッダ情報等のフロー情報及びフロー単位に算出したトラヒック量やパケット数等のフロー統計情報を送信する、フォーマット変換装置が知られている(特許文献1及び非特許文献10参照)。
 さらに、ネットワーク上のNW装置等は、テレメトリにより一定時間間隔でNW装置のインタフェース(以下、「IF」)単位のトラヒック総量や、パケット総数等のIF統計情報を送信することもできる。
特開2021-090161号公報
S. Kashima, 他2名, 「Information Elements for Data Link Layer Traffic Measurement」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7133.html> Peter Phaal,  他1名, 「sFlow Version 5」,  [online],  [令和4年5月24日検索], インターネット<URL:https://sflow.org/sflow_version_5.txt> B. Claise, 「Cisco Systems NetFlow Services Export Version 9」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc3954.txt> B. Trammell, 他1名, 「Bidirectional Flow Export Using IP Flow Information Export (IPFIX)」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc5103.txt> B. Claise, 他2名, 「Specification of the IP Flow Information Export (IPFIX) Protocol for the Exchange of Flow Information」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7011.txt> B. Claise, 他1名, 「Information Model for IP Flow Information Export (IPFIX)」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7012.txt> B. Trammell, 他1名, 「Guidelines for Authors and Reviewers of IP Flow Information Export (IPFIX) Information Elements」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7013.txt> S. D'Antonio, 他3名, 「Flow Selection Techniques」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7014.txt> B. Trammell, 他2名, 「Flow Aggregation for the IP Flow Information Export (IPFIX) Protocol」,  [online],  [令和4年5月24日検索], インターネット<URL:https://www.rfc-editor.org/rfc/rfc7015.txt> 西岡、他「複数事業者を収容するキャリア網のトラヒックを可視化するFast xFlow Proxy の提案」電子情報通信学会 2021年3月 総合大会 B-6-33
 しかしながら、従来技術では、全パケットのヘッダサンプルを収集することなく、サンプリングされたヘッダサンプルのフロー統計情報及びテレメトリで収集するIF単位の統計情報に基づいて、フローごとのトラヒック総量を推定することができなかった。
 例えば、アプリケーションやサービスに起因するトラヒック異常検知等を行う場合は、アプリケーションやサービスのフローごとでのトラヒック総量の監視が必要である。しかし、xFlow技術によりパケットのサンプリングを行い、ヘッダサンプルを得る方法では、サンプリングされていない全パケットのフローごとのトラヒック総量を算出することはできない。他方で、サンプリングではなく全パケットのヘッダサンプルを収集する方法は、フローごとのトラヒック総量を算出できるが、転送されるヘッダサンプルが増加し、ネットワーク負荷の著しい増加が懸念される。
 また、テレメトリを用いてNW装置からIF単位の統計情報を収集する方法では、NW装置からIF単位のトラヒック総量を収集することは可能であるが、前述のIF単位のトラヒック総量からフローごとのトラヒック総量を算出することはできない。
 上記の課題を解決し目的を達成するために、本発明のトラヒック監視装置は、ネットワーク装置から取得したIF単位の統計情報であるIF統計データ及びサンプリングしたパケットから算出した統計情報であるフロー統計データを蓄積する外部の記憶装置から、前記IF統計データと、前記フロー統計データとを、取得する取得部と、前記IF統計データから算出したIFごとのトラヒック総量と、前記フロー統計データから算出したフローごとの合計トラヒック量に基づいて、個別のフローごとのトラヒック総量を算出する第1算出部と、を備えることを特徴とする。
 本発明は、全パケットのヘッダサンプルを収集することなく、テレメトリで収集するIF単位の統計情報及びサンプリングされたヘッダサンプルのフロー統計情報に基づいて、フローごとのトラヒック総量を推定可能となる、という効果を奏する。
図1は、実施形態に係るトラヒック監視の概要の一例を示す図である。 図2は、実施形態に係るデータレイク及びトラヒック監視装置の装置構成の一例を示す図である。 図3は、実施形態に係るデータレイクが収集するIF統計データの一例を示すデータテーブル図である。 図4は、実施形態に係るトラヒック監視装置がデータレイクから取得するフロー統計データの一例を示すデータテーブル図である。 図5は、実施形態に係るフローごとのトラヒック総量算出の一例を示す図である。 図6は、実施形態に係る代表エリア以外の他エリアのNW装置におけるフローごとのトラヒック総量算出の一例を示す図である。 図7は、実施形態に係るデータレイクによるデータ収集及び一元管理のフローチャートである。 図8は、実施形態に係るトラヒック監視装置による代表エリアのNW装置におけるフローごとのトラヒック総量算出のフローチャートである。 図9は、実施形態に係るトラヒック監視装置による他エリアのNW装置におけるフローごとのトラヒック総量算出のフローチャートである。 図10は、実施形態に係るデータレイク及びトラヒック監視装置が実現されるコンピュータの一例を示す図である。
 以下、図面を参照しながら、本発明を実施するための形態(以下、「実施形態」)について説明する。なお、本発明は、本実施形態に限定されない。また、本発明の実施形態においては、「所定の条件が合致する全パケットのトラヒック量を合算した値」を「トラヒック総量」と定義し、「所定の条件が合致するサンプリングパケットのフロー単位のトラヒック量をすべて合算した値」を「全フローの合計トラヒック量」と定義し、「所定の条件が合致するサンプリングパケットのフロー単位のトラヒック量を、監視対象のフローのみ合算した値」を「フローごとの合計トラヒック量」と定義し、以下統一して記載する。
〔1.概要〕
 本発明は、外部の記憶装置であるデータレイク10(以下、単に「データレイク10」)が、複数のサービスネットワークが重畳したネットワークにおいて、NW装置40からテレメトリデータ50を、フォーマット変換装置30からカプセル化パケットのフロー統計xFlowパケット52を収集し、一元管理する。また、トラヒック監視装置20は、IF単位のトラヒック総量等の情報を含むIF統計データ55と、サンプリングされたカプセル化パケットのフロー単位のトラヒック量等の情報を含むフロー統計データ56とを、所定の条件に基づいてデータレイク10から取得し、監視対象のアプリケーションやサービス等のフローごとのトラヒック総量を算出して、トラヒック監視をする。
〔2.実施形態に係るトラヒック監視の一例〕
 まず、図1を用いてデータレイク10と、トラヒック監視装置20と、が行う処理についての一例を説明する。図1は、実施形態に係るトラヒック監視の概要の一例を示す図である。図1では、まずネットワーク上の通信機器であるNW装置40が、テレメトリデータ50をデータレイク10に送信する。なお、テレメトリデータ50には、テレメトリで取得した「NW装置識別情報」と、「NW装置のIF識別情報」と、「時刻情報」と、「受信トラヒック量」と、「送信トラヒック量」と、「受信パケット数」と、「送信パケット数」と、が含まれる。なお、ネットワーク内におけるNW装置40の台数は限定されるものではなく、ネットワーク構成に必要な台数が複数台含まれていてよい。また、テレメトリデータ50には、前述した情報以外の情報が含まれていてよい。
 続いて、NW装置40が、サンプリングしたカプセル化パケットのxFlowパケット51を、フォーマット変換装置30へ送信する。前述のxFlowパケット51には、「カプセル化パケットのヘッダサンプル」と、「サンプリングレート」と、「時刻情報」と、「NW装置識別情報」と、「NW装置のIF識別情報」「通信方向」「サンプリング前のパケットサイズ」と、が含まれる。なお、xFlowパケット51には、前述した情報以外の情報が含まれていてよい。
 次に、xFlowパケット51を受信したフォーマット変換装置30は、xFlowパケット51からフロー単位に統計情報を算出し、フロー統計xFlowパケット52をデータレイク10に送信する。前述のフロー統計xFlowパケット52には、「Outerヘッダ情報、Innerヘッダ情報等を含むフロー情報」と、「フロー単位に算出した、Innerパケットのトラヒック量、Outerヘッダを含むパケットのトラヒック量、パケット数等を含むフロー統計情報」と、「時刻情報」と、「サンプリングレート」と、「NW装置識別情報」と、「NW装置のIF識別情報」と、「通信方向」と、を含む。なお、フロー統計xFlowパケット52には、前述した情報以外の情報が含まれていてよい。
 そして、データレイク10は、NWトポロジ情報53と、ネットワークを構成するNW装置のIFやIPアドレス等のNW装置情報54と、テレメトリデータ50に含まれる情報(以下、IF統計データ55)と、フロー統計xFlowパケット52に含まれる情報(以下、フロー統計データ56)とを一元管理する。
 次に、トラヒック監視装置20は、所定の条件に基づいてIF統計データ55及びフロー統計データ56を、データレイク10から取得する。続いて、トラヒック監視装置20は、取得したIF統計データ55及びフロー統計データ56に基づいて、監視対象のアプリケーションやサービス等のフローごとのトラヒック総量の推定値を算出する。
〔3.データレイク及びトラヒック監視装置の構成例〕
 実施形態に係るデータレイク10及びトラヒック監視装置20の構成について、図2を用いて説明する。図2に示すように、本発明は、データレイク10と、トラヒック監視装置20と、を含む装置構成で実現される。以下に、各部の詳細な機能について記載する。
(データレイク10)
 データレイク10は、通信部11と、記憶部12と、制御部13と、を有する。なお、図示していないが、データレイク10は、各種操作を受け付ける入力部(例えば、キーボードやマウス等)や、各種情報を表示するための表示部(例えば、ディスプレイ等)を備えてもよい。
 またデータレイク10は、構造化データと非構造化データを一元的に保存可能な装置である。例えば、XMLファイルやCSVファイルのように規則性を有する構造化データや、画像ファイルや、文書ファイルや、動画ファイルや、電子メール等の非構造化データを、そのままの形式で格納することができる。なお、データレイク10は、構造化データのみを格納する機能を有していてもよい。
(通信部11)
 データレイク10の通信部11は、NIC(Network Interface Card)等で実現され、LAN(Local Area Network)やインターネット等の電気通信回線を介して通信を制御する。後述のトラヒック監視装置20は、データレイク10の通信部11と、トラヒック監視装置20の通信部21とを介して、データを取得する。
(記憶部12)
 データレイク10の記憶部12は、制御部13による各種処理に必要なデータおよびプログラムを格納する。また、記憶部12は、IF統計データ記憶部121と、フロー統計データ記憶部122と、を有する。そして、記憶部12は、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、又は、ハードディスク、光ディスク等の記憶装置等で実現する。
(IF統計データ記憶部121)
 IF統計データ記憶部121は、NW装置40から送信される、テレメトリデータ50に含まれる情報に基づいてIF統計データ55を記憶する。
(フロー統計データ記憶部122)
 フロー統計データ記憶部122は、フォーマット変換装置30から送信される、フロー統計xFlowパケット52に含まれる情報に基づいてフロー統計データ56を記憶する。
(制御部13)
 データレイク10の制御部13は、収集部131を有する。制御部13は、各種の処理手順等を規定したプログラムや処理データを一時的に格納するための内部メモリを有し、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等の電子回路やASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路によって実現される。
(収集部131)
 収集部131は、NW装置40から送信されるテレメトリデータ50に含まれる情報に基づいて、IF統計データ55と、フォーマット変換装置30から送信されるフロー統計xFlowパケット52に含まれる情報に基づいて、フロー統計データ56とを、収集する。なお、収集部131が収集するデータは、前述の情報に限定されるものではなく、それ以外の情報を収集してよい。
(トラヒック監視装置20)
 次に、トラヒック監視装置20の説明を行う。トラヒック監視装置20は、通信部21と、記憶部22と、制御部23を有する。なお、図示していないが、トラヒック監視装置20は、各種操作を受け付ける入力部(例えば、キーボードやマウス等)や、各種情報を表示するための表示部(例えば、ディスプレイ等)を備えてもよい。
(通信部21)
 トラヒック監視装置20の通信部21は、NIC等で実現され、LANやインターネット等の電気通信回線を介して通信を制御する。トラヒック監視装置20は、前述したデータレイク10の通信部11と、トラヒック監視装置20の通信部21とを介して、データを取得する。
(記憶部22)
 トラヒック監視装置20の記憶部22は、制御部23による各種処理に必要なデータおよびプログラムを格納する。そして、記憶部22は、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、又は、ハードディスク、光ディスク等の記憶装置等で実現する。
(制御部23)
 トラヒック監視装置20の制御部23は、取得部231と、第1算出部232と、第2算出部233とを、有する。制御部23は、各種の処理手順等を規定したプログラムや処理データを一時的に格納するための内部メモリを有し、CPUやMPU等の電子回路やASICやFPGA等の集積回路によって実現される。
(取得部231)
 取得部231は、ネットワーク装置から取得したIF単位の統計情報であるIF統計データ55及びサンプリングしたパケットから算出した統計情報であるフロー統計データ56を蓄積する外部の記憶装置であるデータレイク10から、所定の取得条件に基づいて、IF統計データ55と、フロー統計データ56とを、取得する。そして、取得部231は、NW装置識別情報と、IF識別情報と、通信方向が同一かつ、測定時刻が所定の期間内であるIF統計データ55及びフロー統計データ56を、データレイク10から取得する。なお、データ取得条件には上記以外の条件が含まれていてよい。また、フロー統計データ56で取得するトラヒック量は、「Innerパケットのトラヒック量」であってもよいし、「Outerヘッダを含むパケットのトラヒック量」であってもよい。
 ここで、取得部231は、データレイク10において、IF統計データ55とフロー統計データ56とで同じ属性に対して異なる表現の情報を保持している場合、例えば、同じNW装置を異なる識別情報で表現している場合は、管理装置で予め、IF統計データ55とフロー統計データ56における同じ属性に対する識別情報を対応づけて保持しておくことにより、上記データをデータレイク10から取得できる。
(第1算出部232)
 第1算出部232は、段落番号0033で取得部231が取得するIF統計データ55に含まれる情報である、NW装置識別情報と、IF識別情報と、通信方向が同一かつ、測定時刻が所定の期間内のIF単位のトラヒック総量を合算して、所定の測定期間の当該IFのトラヒック総量を算出する。なお、段落番号0033においてフロー統計データ56で「Innerパケットのトラヒック量」を取得する場合は、IF統計データ55のIF単位トラヒック総量とIF単位パケット総数に基づいて算出したIF単位のInnerパケットのトラヒック総量を所定の測定期間について合算して、所定の測定期間の当該IFのトラヒック総量を算出する。
 また、第1算出部232は、同じく段落番号0033で取得部231が取得するフロー統計データ56に含まれる情報であるサンプリングパケットのフロー単位トラヒック量の所定の測定期間の合計トラヒック量と、前述の当該IFのトラヒック総量に基づいて、監視対象のアプリケーションやサービス等の個別のフローごとのトラヒック総量の推定値を算出する。トラヒック監視装置20は、監視対象のアプリケーションやサービスのフローを、フロー統計データ56に含まれる情報であるOuterヘッダ情報およびInnerヘッダ情報を単独もしくは複数を組み合わせて、特定する。
 続いて、図3から図5を用いて、取得部231によるIF統計データ55及びフロー統計データ56の取得と、第1算出部232による代表エリアのNW装置における監視対象のアプリケーションkのトラヒック総量の推定値を算出する、一例を説明する。なお、本例示においては、IF統計データ55及びフロー統計データ56の取得条件は、測定期間「T1からT2」と、NW装置識別情報「NE1」と、IF識別情報「IF1」と、通信方向「下り」と設定し説明する。
 まず、取得部231は、前述したデータ取得条件と合致するIF統計データ55をデータレイク10から取得する。図3は取得部231が取得するIF統計データ55の一例であり、例えば、取得部231は、テーブル1行目データが開始時刻「T1」で、終了時刻「T1_3」で、NW装置識別情報「NE1」で、IF識別情報「IF1」で、下り方向のIF単位トラヒック総量(byte)「X1」で、下り方向のIF単位パケット総数「N1」の、IF統計データ55を取得する。なお、取得部231は、取得条件で通信方向「上り」と設定する場合には、上り方向のIF統計データ55を取得する。
 次に、取得部231は、前述のデータ取得条件と合致するフロー統計データ56を、データレイク10から取得する。図4は取得部231が取得するフロー統計データ56の一例であり、例えば、取得部231は、テーブル1行目データが開始時刻「T1」で、終了時刻「T1_1」で、NW装置識別情報「NE1」で、IF識別情報「IF1」で、通信方向「下り」で、サンプリングレート「10,000」で、Outerヘッダ情報「f1_out」で、Innerヘッダ情報「f1_in」で、フロー単位トラヒック量(byte)「100」で、フロー単位パケット数「10」で、というフロー統計データ56を取得する。
 なお、図4で本例示のOuterヘッダ情報は「f1_out」と、Innerヘッダ情報は「f1_in」と表示しているが、実際のOuterヘッダ情報には、送信元IPアドレスと、送信元ポート番号と、宛先IPアドレスと、宛先ポート番号と、プロトコル番号とを含む5tupleや、MPLS(Multi-Protocol Label Switching)ラベル等が含まれ、実際のInnerヘッダ情報には、前述の5tuple等が含まれる。
 トラヒック監視装置20は、前述のOuterヘッダ情報および、Innerヘッダ情報の5tupleに含まれるポート番号や送信元IPアドレス等を単独もしくは複数を組み合わせて、監視対象のアプリケーションやサービスのフローを特定する。なおフローを特定するための5tuple等の情報の組み合わせは、前述した情報や組み合わせに限定されるものではなく、その他の情報や組み合わせでフローを特定することができる。
 続いて、図5において、代表エリアのNW装置におけるアプリケーションkのトラヒック総量αを算出する一例を説明する。まず、第1算出部232は、代表エリアのNW装置について段落番号0039で取得部231が取得したサンプリングパケットのフロー統計データ56の、NW装置識別情報と、IF識別情報と、通信方向が同一かつ、測定時刻が所定の期間内であるフロー単位トラヒック量(byte)をすべて合算し、全フローの合計トラヒック量Saを算出する。続いて、第1算出部232は、前述のフロー統計データ56に含まれるInnerヘッダのポート番号やサーバ側IPアドレス等のInnerヘッダ情報に基づいて、監視対象のアプリケーションkのデータを抽出し、アプリケーションkのフローごとの合計トラヒック量Skを算出する。
 次に、第1算出部232は、全フローの合計トラヒック量Saと、アプリケーションkの合計トラヒック量Skと、段落番号0035で算出した当該IFのトラヒック総量(byte)XAと、を用いて、代表エリアのNW装置におけるアプリケーションkのトラヒック総量αを算出する。例えば、下記式(1)を用いて計算する。
Figure JPOXMLDOC01-appb-M000001
 なお、前述の計算式(1)のSkには、他のアプリケーションのフローごとの合計トラヒック量を代入してよい。例えば、第1算出部232は、アプリケーションmの合計トラヒック量Smを用いて、代表エリアのNW装置におけるアプリケーションmのトラヒック総量βを算出できる。
(第2算出部233)
 第2算出部233は、第1算出部232が算出した代表エリアのNW装置におけるIFごとのトラヒック総量及びフローごとのトラヒック総量と、代表エリア以外の任意エリアのNW装置におけるIFごとのトラヒック総量と、に基づいて、任意エリアのNW装置におけるフローごとのトラヒック総量の推定値を算出する。
 以下、図6において、代表エリアのNW装置におけるIF統計データ55及びフロー統計データ56に基づいて算出した、各アプリケーションのフローごとのトラヒック総量を用いて、他エリアのNW装置における各アプリケーションのフローごとのトラヒック総量を算出する例を説明する。なお、キャリア網はユーザ分布に基づいてネットワーク設備が均一に使用されるようトポロジ設計が行われるため、コアルータで観測されるトラヒックの地理的傾向差は小さく、フロー統計データ56を取得した代表エリアと他エリアとでアプリケーションのフロー分布はほぼ同じとなる。
 まず、取得部231は、代表エリア以外の他エリアのNW装置におけるIF統計データ55を取得する。他エリアのNW装置のNW装置識別情報とIF識別情報に合致し、かつ代表エリアのNW装置におけるアプリケーションkのトラヒック総量αを算出する際に取得したIF統計データ55のデータ取得条件と通信方向および測定期間が合致するIF統計データ55を取得する。次に、第1算出部232は、取得した前述の他エリアのNW装置におけるIF統計データ55について、所定の測定期間の当該IFのトラヒック総量(byte)YBを導出する。続けて、第2算出部233は、第1算出部232が算出した、前述の代表エリアのNW装置におけるアプリケーションkのトラヒック総量αと、前述の代表エリアのNW装置におけるIFごとのトラヒック総量XAと、他エリアのNW装置におけるIFごとのトラヒック総量YBと、を用いて、他エリアのNW装置におけるアプリケーションkのトラヒック総量α’を算出する。例えば、下記式(2)を用いて計算する。
Figure JPOXMLDOC01-appb-M000002
 なお、前述の計算式(2)のαには、他のアプリケーションにおけるフローごとのトラヒック総量を代入してよい。例えば、第2算出部233は、代表エリアのNW装置におけるアプリケーションmのトラヒック総量βを用いて、他エリアのNW装置におけるアプリケーションmのトラヒック総量β’を算出できる。
〔4.トラヒック監視方法の手順〕
 次に、図7から図9を用いて、データレイク10及びトラヒック監視装置20によるトラヒック監視方法の手順について説明する。まず、図7を用いて、データレイク10がデータを収集し、一元管理する手順を説明する。
 図7では、フォーマット変換装置30が、xFlowパケット51からヘッダサンプルを収集する(工程S11)。次に、データレイク10が、NW装置40からテレメトリデータ50を、フォーマット変換装置30からフロー統計xFlowパケット52を、収集する(工程S12)。そして、データレイク10は、NWトポロジ情報53と、NW装置情報54と、IF統計データ55と、フロー統計データ56とを、一元管理する(工程S13)。
 次に、図8を用いて、トラヒック監視装置20による代表エリアのNW装置におけるフローごとのトラヒック総量算出の手順について説明する。まず、取得部231は、所定の条件に基づいて代表エリアのNW装置におけるIF統計データ55及びフロー統計データ56を、データレイク10から取得する(工程S21)。次に、第1算出部232は、IF統計データ55に基づいて、代表エリアのNW装置におけるIFごとのトラヒック総量XAを算出する(工程S22)。第1算出部232は、フロー統計データ56に基づいて、全フローの合計トラヒック量Saと、監視対象のアプリケーションkの合計トラヒック量Skとを、算出する(工程S23)。さらに、第1算出部232は、代表エリアのNW装置におけるIFごとのトラヒック総量XAと、全フローの合計トラヒック量Saと、監視対象のアプリケーションkの合計トラヒック量Skと、を用いて、代表エリアのNW装置におけるアプリケーションkのトラヒック総量αを算出し、保持する(工程S24)。
 続いて、図9を用いて、トラヒック監視装置20による他エリアのNW装置におけるトラヒック総量算出の手順について説明する。まず、取得部231は、所定の条件に基づいて他エリアのNW装置におけるIF統計データ55を、データレイク10から取得する(工程S31)。次に、第1算出部232が、他エリアのNW装置におけるIFごとのトラヒック総量YBを算出する(工程S32)。続いて、第2算出部233は、第1算出部232が事前に算出した(図8のS24)、代表エリアのNW装置におけるアプリケーションkのトラヒック総量αを取得する(工程S33)。続けて、第2算出部233が、他エリアのNW装置におけるIFごとのトラヒック総量YBと、代表エリアのNW装置におけるアプリケーションkのトラヒック総量αと、代表エリアのNW装置におけるIFごとのトラヒック総量XAと、を用いて、他エリアのNW装置におけるアプリケーションkのトラヒック総量α’を算出する(工程S34)。
〔5.効果〕
 前述してきたように、本発明において、データレイク10は、NW装置40が送信するテレメトリデータ50と、フォーマット変換装置30が送信するフロー統計xFlowパケット52とを、収集し、一元管理する。また、トラヒック監視装置20が、データレイク10に蓄積しているIF統計データ55及びフロー統計データ56を、所定の条件に基づいて取得し、監視対象のアプリケーションやサービスのフローごとのトラヒック総量を算出する。そのため、本発明によれば、下記の効果を奏する。
〔5-1.フローごとのトラヒック監視〕
 トラヒック監視装置20は、監視対象のアプリケーションやサービス等のフローごとのトラヒック総量を算出できるため、アプリケーションやサービス等の異常検知のための、監視対象のフローごとのトラヒック監視が可能である。
〔5-2.低負荷な方法によるフローごとのトラヒック総量算出〕
 トラヒック監視装置20は、全パケットのヘッダサンプルを収集することなく、サンプリングされたヘッダサンプルのフロー統計データ56と、データ量の少ないテレメトリデータであるIF統計データ55を用いて、監視対象のアプリケーションやサービスのフローごとのトラヒック総量を算出する。そのため、トラヒック監視装置20は、ネットワークへの負荷が低い方法で目的のトラヒック総量を算出できる。
〔5-3.ネットワーク全体のトラヒック量の削減〕
 トラヒック監視装置20は、収集するヘッダサンプルが代表エリアのNW装置のみであり、代表エリア以外の他エリアのNW装置については、IF統計データ55を取得するのみで、監視対象のアプリケーションやサービス等のフローごとのトラヒック総量を算出可能であるため、ネットワークへの負荷およびNW装置への負荷を削減することができる。
〔6.ハードウェア構成〕
 図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示のように構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況等に応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。さらに、各装置にて行われる各処理機能は、その全部又は任意の一部が、CPU及び当該CPUにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
 また、本実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部又は一部を公知の方法で手動的に行うこともできる。この他、図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。 
[プログラム]
 一実施形態として、データレイク10及びトラヒック監視装置20は、パッケージソフトウェアやオンラインソフトウェアとして、前述したデータの収集及びトラヒック監視を実行するトラヒック監視プログラムを、所望のコンピュータにインストールさせることによって実装できる。例えば、上記のトラヒック監視プログラムを情報処理装置に実行させることにより、情報処理装置をデータレイク10及びトラヒック監視装置20として機能させることができる。ここで言う情報処理装置には、デスクトップ型又はノート型のパーソナルコンピュータが含まれる。また、その他にも、情報処理装置にはスマートフォン、携帯電話機やPHS(Personal Handyphone System)等の移動体通信端末、さらには、PDA(Personal Digital Assistant)等のスレート端末等がその範疇に含まれる。
 図10は、データレイク10及びトラヒック監視装置20が実現されるコンピュータの一例を示す図である。コンピュータ1000は、例えば、メモリ1010、CPU1020を有する。また、コンピュータ1000は、ハードディスクドライブインタフェース1030、ディスクドライブインタフェース1040、シリアルポートインタフェース1050、ビデオアダプタ1060、ネットワークインタフェース1070を有する。これらの各部は、バス1080によって接続される。
 メモリ1010は、ROM(Read Only Memory)1011及びRAM1012を含む。ROM1011は、例えば、BIOS(Basic Input Output System)等のブートプログラムを記憶する。ハードディスクドライブインタフェース1030は、ハードディスクドライブ1090に接続される。ディスクドライブインタフェース1040は、ディスクドライブ1100に接続される。例えば磁気ディスクや光ディスク等の着脱可能な記憶媒体が、ディスクドライブ1100に挿入される。シリアルポートインタフェース1050は、例えばマウス1110、キーボード1120に接続される。ビデオアダプタ1060は、例えばディスプレイ1130に接続される。
 ハードディスクドライブ1090は、例えば、OS1091、アプリケーションプログラム1092、プログラムモジュール1093、プログラムデータ1094を記憶する。すなわち、データレイク10及びトラヒック監視装置20の各処理を規定するプログラムは、コンピュータにより実行可能なコードが記述されたプログラムモジュール1093として実装される。プログラムモジュール1093は、例えばハードディスクドライブ1090に記憶される。例えば、データレイク10及びトラヒック監視装置20における機能構成と同様の処理を実行するためのプログラムモジュール1093が、ハードディスクドライブ1090に記憶される。なお、ハードディスクドライブ1090は、SSD(Solid State Drive)により代替されてもよい。
 また、前述した実施形態の処理で用いられる設定データは、プログラムデータ1094として、例えばメモリ1010やハードディスクドライブ1090に記憶される。そして、CPU1020は、メモリ1010やハードディスクドライブ1090に記憶されたプログラムモジュール1093やプログラムデータ1094を必要に応じてRAM1012に読み出して、前述した実施形態の処理を実行する。
 なお、プログラムモジュール1093やプログラムデータ1094は、ハードディスクドライブ1090に記憶される場合に限らず、例えば着脱可能な記憶媒体に記憶され、ディスクドライブ1100等を介してCPU1020によって読み出されてもよい。あるいは、プログラムモジュール1093及びプログラムデータ1094は、ネットワーク(LAN、WAN(Wide Area Network)等)を介して接続された他のコンピュータに記憶されてもよい。そして、プログラムモジュール1093及びプログラムデータ1094は、他のコンピュータから、ネットワークインタフェース1070を介してCPU1020によって読み出されてもよい。
〔7.その他〕
 以上、本発明者によってなされた発明を適用した実施形態について説明したが、本実施形態による本発明の開示の一部をなす記述および図面により本発明は限定されることはない。すなわち、本実施形態に基づいて当業者等によりなされる他の実施形態、実施例および運用技術等はすべて本発明の範疇に含まれる。
 10   データレイク
 11   通信部
 12   記憶部
 121  IF統計データ記憶部
 122  フロー統計データ記憶部
 13   制御部
 131  収集部
 20   トラヒック監視装置
 21   通信部
 22   記憶部
 23   制御部
 231  取得部
 232  第1算出部
 233  第2算出部
 30   フォーマット変換装置
 40   NW装置
 50   テレメトリデータ
 51   xFlowパケット
 52   フロー統計xFlowパケット
 53   NWトポロジ情報
 54   NW装置情報
 55   IF統計データ
 56   フロー統計データ
 XA   代表エリアのNW装置におけるIFごとのトラヒック総量
 YB   他エリアのNW装置におけるIFごとのトラヒック総量
 α    代表エリアのNW装置におけるアプリケーションkのトラヒック総量
 α’   他エリアのNW装置におけるアプリケーションkのトラヒック総量
 β    代表エリアのNW装置におけるアプリケーションmのトラヒック総量
 β’   他エリアのNW装置におけるアプリケーションmのトラヒック総量
 Sk   アプリケーションkの合計トラヒック量
 Sm   アプリケーションmの合計トラヒック量
 Sa   全フローの合計トラヒック量
 1000 コンピュータ
 1010 メモリ
 1011 ROM
 1012 RAM
 1020 CPU
 1030 ハードディスクドライブインタフェース
 1040 ディスクドライブインタフェース
 1050 シリアルポートインタフェース
 1060 ビデオアダプタ
 1070 ネットワークインタフェース
 1080 バス
 1090 ハードディスクドライブ
 1091 OS
 1092 アプリケーションプログラム
 1093 プログラムモジュール
 1094 プログラムデータ
 1100 ディスクドライブ
 1110 マウス
 1120 キーボード

Claims (4)

  1.  ネットワーク装置から取得したIF単位の統計情報であるIF統計データ及びサンプリングしたパケットから算出した統計情報であるフロー統計データを蓄積する外部の記憶装置から、前記IF統計データと、前記フロー統計データとを、取得する取得部と、
     前記IF統計データから算出したIFごとのトラヒック総量と、前記フロー統計データから算出したフローごとの合計トラヒック量に基づいて、個別のフローごとのトラヒック総量を算出する第1算出部と、
     を備えることを特徴とするトラヒック監視装置。
  2.  代表エリアのNW装置における前記IFごとのトラヒック総量及び前記フローごとのトラヒック総量と、代表エリア以外の任意エリアのNW装置における前記IFごとのトラヒック総量と、に基づいて、前記任意エリアのNW装置における前記フローごとのトラヒック総量を算出する第2算出部を、さらに有する、
     ことを特徴とする、請求項1に記載のトラヒック監視装置。
  3.  ネットワーク装置から取得したIF単位の統計情報であるIF統計データ及びサンプリングしたパケットから算出した統計情報であるフロー統計データを蓄積する外部の記憶装置から、前記IF統計データと、前記フロー統計データとを、取得する工程と、
     前記IF統計データから算出したIFごとのトラヒック総量と、前記フロー統計データから算出したフローごとの合計トラヒック量に基づいて、個別のフローごとのトラヒック総量を算出する工程と、
     を含むことを特徴とするトラヒック監視方法。
  4.  方法をコンピュータに実行させるトラヒック監視プログラムであって、
     ネットワーク装置から取得したIF単位の統計情報であるIF統計データ及びサンプリングしたパケットから算出した統計情報であるフロー統計データを蓄積する外部の記憶装置から、前記IF統計データと、前記フロー統計データとを、取得するステップと、
     前記IF統計データから算出したIFごとのトラヒック総量と、前記フロー統計データから算出したフローごとの合計トラヒック量に基づいて、個別のフローごとのトラヒック総量を算出するステップと、
     を実行させることを特徴とするトラヒック監視プログラム。
PCT/JP2022/023372 2022-06-09 2022-06-09 トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム WO2023238354A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/023372 WO2023238354A1 (ja) 2022-06-09 2022-06-09 トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/023372 WO2023238354A1 (ja) 2022-06-09 2022-06-09 トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム

Publications (1)

Publication Number Publication Date
WO2023238354A1 true WO2023238354A1 (ja) 2023-12-14

Family

ID=89117818

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/023372 WO2023238354A1 (ja) 2022-06-09 2022-06-09 トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム

Country Status (1)

Country Link
WO (1) WO2023238354A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009231890A (ja) * 2008-03-19 2009-10-08 Alaxala Networks Corp パケット中継装置およびトラフィックモニタシステム
JP2011151514A (ja) * 2010-01-20 2011-08-04 Hitachi Ltd トラフィック量監視システム
WO2021149245A1 (ja) * 2020-01-24 2021-07-29 日本電信電話株式会社 変換装置、変換方法及び変換プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009231890A (ja) * 2008-03-19 2009-10-08 Alaxala Networks Corp パケット中継装置およびトラフィックモニタシステム
JP2011151514A (ja) * 2010-01-20 2011-08-04 Hitachi Ltd トラフィック量監視システム
WO2021149245A1 (ja) * 2020-01-24 2021-07-29 日本電信電話株式会社 変換装置、変換方法及び変換プログラム

Similar Documents

Publication Publication Date Title
JP4774357B2 (ja) 統計情報収集システム及び統計情報収集装置
US9577906B2 (en) Scalable performance monitoring using dynamic flow sampling
Su et al. CeMon: A cost-effective flow monitoring system in software defined networks
US8005935B2 (en) Methods and computer program products for managing application performance on a network
US20170171050A1 (en) A system and method for integrating legacy flow-monitoring systems with sdn networks
US9634851B2 (en) System, method, and computer readable medium for measuring network latency from flow records
JPWO2012098786A1 (ja) ネットワークシステム、コントローラ、スイッチ、及びトラフィック監視方法
So-In A survey of network traffic monitoring and analysis tools
Gulenko et al. A practical implementation of in-band network telemetry in open vswitch
WO2018223825A1 (zh) 数据流的处理方法和设备
Jia et al. Reducing and balancing flow table entries in software-defined networks
Feamster Revealing utilization at Internet interconnection points
EP3163801A1 (en) Packet collection method and system, network device and network management centre
Yan et al. A network management system for handling scientific data flows
WO2023238354A1 (ja) トラヒック監視装置、トラヒック監視方法及びトラヒック監視プログラム
JP5684748B2 (ja) ネットワーク品質監視装置及びネットワーク品質監視方法
US10103950B2 (en) Hub filtering
JP2008219383A (ja) ネットワーク監視システム、方法及びプログラム
JP4938042B2 (ja) フロー情報送信装置、中間装置、フロー情報送信方法およびプログラム
JP2013240017A (ja) ネットワーク遅延測定装置及びネットワーク遅延測定方法
Nugroho et al. Mapping of quality of service parameter with monitoring end-to-end method of ITU-T Y. 1541 standard in the hotspot area
He et al. A low-cost measurement framework in software defined networks
Sahni et al. Real time monitoring and analysis of available bandwidth in cellular network-using big data analytics
CN112436951A (zh) 一种预知流量路径的方法和装置
KR20180015916A (ko) Sdn 기반 네트워크에서의 플로우 트래픽 모니터링 장치 및 그 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22945855

Country of ref document: EP

Kind code of ref document: A1