JP2009071684A - Network test planning device, network test planning method, network test planning program and network monitoring system - Google Patents

Network test planning device, network test planning method, network test planning program and network monitoring system Download PDF

Info

Publication number
JP2009071684A
JP2009071684A JP2007239354A JP2007239354A JP2009071684A JP 2009071684 A JP2009071684 A JP 2009071684A JP 2007239354 A JP2007239354 A JP 2007239354A JP 2007239354 A JP2007239354 A JP 2007239354A JP 2009071684 A JP2009071684 A JP 2009071684A
Authority
JP
Japan
Prior art keywords
test
parameter
base
parallel
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007239354A
Other languages
Japanese (ja)
Other versions
JP4977564B2 (en
Inventor
Kazuhiro Kawabe
和宏 河辺
Junichi Minemura
潤一 峯村
Masahiro Iwano
正博 岩野
Shinsuke Matsui
信祐 松井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Networks Co Ltd
Original Assignee
Oki Networks Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Networks Co Ltd filed Critical Oki Networks Co Ltd
Priority to JP2007239354A priority Critical patent/JP4977564B2/en
Publication of JP2009071684A publication Critical patent/JP2009071684A/en
Application granted granted Critical
Publication of JP4977564B2 publication Critical patent/JP4977564B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Monitoring And Testing Of Exchanges (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Telephonic Communication Services (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To permit simultaneous execution of a plurality of testings in parallel under a restriction that the loading conditions of testing terminals are constant. <P>SOLUTION: The network test planning device works out the plan of communication quality test executed with respect to all combinations among (n) sets of bases in total. The device is provided with an origination side base determining means for determining the base of origination side of the test in accordance with a parameter (i) which specifies the order of parallel tests, a parameter (j) which specifies either one test in the parallel tests and a parameter (n), a destination side base determining means for determining the base of destination side of the test in accordance with the parameters (i), (j), (n), a test adding means for adding a pair of determined origination side base and destination side base to a test planning list, a parameter changing means in parallel test for sequentially changing the parameter (j) among a plurality of kinds of values during a period wherein the parameter (i) keeps the same value and a parameter changing means in parallel test for sequentially changing the parameter (i) among a plurality of kinds of values. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、ネットワーク試験計画装置、ネットワーク試験計画方法、ネットワーク試験計画プログラム及びネットワーク監視システムに関し、例えば、VoIP(Voice over Internet Protocol)を適用したIPネットワークを介した音声通信での音声品質(以下、音質と呼ぶ)の定常的監視に適用し得るものである。   The present invention relates to a network test planning device, a network test planning method, a network test planning program, and a network monitoring system. For example, voice quality (hereinafter referred to as voice quality) in voice communication over an IP network to which VoIP (Voice over Internet Protocol) is applied. It can be applied to regular monitoring of sound quality.

ネットワークの監視には、特許文献1に記載されているように、各装置(例えば、パケット交換機)の状況を監視し、各装置の状況を収集するものがあった。   In network monitoring, as described in Japanese Patent Application Laid-Open No. H10-228707, there is one that monitors the status of each device (for example, a packet switch) and collects the status of each device.

VoIPにおいて、音声品質は、ITU−T G.107で勧告された評価モデルにおける評価値(R値)に従って評価される(非特許文献1参照)。
特開平7−162420号公報 小泉修著、「図解でわかる VoIPのすべて」、株式会社日本実業出版社、2003年発行、pp.353−354
In VoIP, the voice quality is ITU-T G. Evaluation is performed according to the evaluation value (R value) in the evaluation model recommended in 107 (see Non-Patent Document 1).
JP-A-7-162420 Oizumi Osamu, “All About VoIP with Illustrations”, Nihon Jitsugyo Publishing Co., Ltd., 2003, pp. 353-354

しかしながら、特許文献1に記載の監視方法は、IPネットワークを利用した通信システムに対するものではない。特許文献1の記載の監視システムが対象としているネットワークは、そのパケット交換機間の経路はほぼ1本道である。IPネットワークでは、発呼時のネットワーク状況などによって、具体的な経路が変化し、同一の呼に係るパケットであってもパケットによって経路が変化する。そのため、IPネットワークを利用した通信システムを対象としていない、特許文献1に記載の監視方法を、IPネットワークを利用した通信システムに適用することはできない。   However, the monitoring method described in Patent Document 1 is not for a communication system using an IP network. In the network targeted by the monitoring system described in Patent Document 1, there is almost one route between the packet switches. In an IP network, a specific route changes depending on a network condition at the time of outgoing call, and even a packet related to the same call changes depending on the packet. Therefore, the monitoring method described in Patent Document 1 that is not intended for a communication system using an IP network cannot be applied to a communication system using an IP network.

ITU−T G.107で規定されているR値は、送話器−端末−IPネットワーク−端末―受話器といった経路を経た信号を評価するものであり、言い換えると、2点間の音質を表現するものである。2点間の音質評価を、IPネットワークの音質評価とすることはできない。   ITU-T G. The R value defined in 107 evaluates a signal that has passed through a route such as a transmitter-terminal-IP network-terminal-receiver, in other words, represents a sound quality between two points. A sound quality evaluation between two points cannot be a sound quality evaluation of an IP network.

IPネットワークの音質を評価するためには、2点間の音質評価を、複数の2点間の組み合わせに対して実行しなければならない。複数の2点間の組み合わせの音声品質を、トラヒックの発生を待って得るならば、日々若しくは時々刻々変化しているネットワークのトラヒックの影響を正しく反映させた計測値を得ることができない。そのため、複数の2点間の組み合わせの音声品質を試験によって得ることが好ましい。しかし、なんら計画なしに、複数の2点間の組み合わせについて、音質を評価する試験を実行したならば、例えば、ネットワーク上のある装置(例えば、IP−PBX)が過負荷になって、通常の通信に悪影響を及ぼす恐れがある。   In order to evaluate the sound quality of an IP network, a sound quality evaluation between two points must be performed on a combination of a plurality of two points. If the voice quality of a combination of a plurality of two points is obtained while traffic is generated, it is not possible to obtain a measurement value that correctly reflects the influence of network traffic that changes daily or from moment to moment. Therefore, it is preferable to obtain the voice quality of a combination between a plurality of two points by a test. However, if a test for evaluating sound quality is performed on a combination between two points without any plan, for example, a certain device (for example, IP-PBX) on the network is overloaded, May adversely affect communications.

そのため、日々若しくは時々刻々変化しているIPネットワークのトラヒックを正しく反映させた品質評価値を、試験によって過負荷となる装置を生じさせることなく得ることができるネットワーク試験計画装置、ネットワーク試験計画方法、ネットワーク試験計画プログラムが望まれており、また、そのようなネットワーク試験計画装置、ネットワーク試験計画方法、ネットワーク試験計画プログラムを適用したネットワーク監視システムも望まれている。   Therefore, a network test planning device, a network test planning method, and a network test planning method that can obtain a quality evaluation value that correctly reflects the traffic of the IP network that changes daily or from time to time without causing an overloaded device due to the test, A network test planning program is desired, and a network monitoring system to which such a network test planning device, a network test planning method, and a network test planning program are applied is also desired.

第1の本発明は、試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画装置であって、(1)並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定める発信側拠点決定手段と、(2)パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定める着信側拠点決定手段と、(3)上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加する試験追加手段と、(4)パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させる並行試験内パラメータ変更手段と、(5)パラメータiを、(n−1)種類の値の中で順次変化させる並行試験パラメータ変更手段とを備えることを特徴とする。   The first aspect of the present invention is a network test planning apparatus for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided, and (1) a sequence of parallel tests Of the test in accordance with a parameter i defining one of a plurality of tests in a parallel test, and a parameter n taking n when n is an even number and n + 1 when n is an odd number. (2) Calling site determination means for determining the receiving site of the test according to parameter i, parameter j, and parameter n, and (3) Determination of the calling site And a test addition means for adding a pair of a caller base and a callee base determined by the callee base determination means to the test plan list, and (4) parameter i takes the same value. Parameter change in parallel test to change parameter j sequentially in n / 2 values when n is even and (n + 1) / 2 values when n is odd And (5) parallel test parameter changing means for sequentially changing the parameter i among (n-1) types of values.

第2の本発明は、試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画方法であって、発信側拠点決定手段、着信側拠点決定手段、試験追加手段、並行試験内パラメータ変更手段及び並行試験パラメータ変更手段とを備え、(1)上記発信側拠点決定手段は、並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定め、(2)上記着信側拠点決定手段は、パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定め、(3)上記試験追加手段は、上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加し、(4)上記並行試験内パラメータ変更手段は、パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させ、(5)上記並行試験パラメータ変更手段は、パラメータiを、(n−1)種類の値の中で順次変化させることを特徴とする。   A second aspect of the present invention is a network test plan method for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided, comprising: A side base determination means, a test addition means, a parallel test parameter change means, and a parallel test parameter change means. (1) The transmission side base determination means includes a parameter i that defines the order of parallel tests, (2) The incoming call is determined according to a parameter j that defines one of a plurality of tests and a parameter n that takes n when n is an even number and takes n + 1 when n is an odd number. The side base determining means determines the base of the test receiving side according to the parameter i, the parameter j, and the parameter n. (3) The test adding means determines the transmitting side base And the pair of the caller base and the callee base determined by the callee base determination means are added to the test plan list. (4) In the parallel test parameter changing means, the parameter i has the same value. In the period, the parameter j is sequentially changed in n / 2 types of values when n is an even number, and (n + 1) / 2 types of values when n is an odd number. The test parameter changing means is characterized in that the parameter i is sequentially changed among (n-1) kinds of values.

第3の本発明は、試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画プログラムあって、コンピュータを、(1)並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定める発信側拠点決定手段と、(2)パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定める着信側拠点決定手段と、(3)上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加する試験追加手段と、(4)パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させる並行試験内パラメータ変更手段と、(5)パラメータiを、(n−1)種類の値の中で順次変化させる並行試験パラメータ変更手段として機能させることを特徴とする。   According to a third aspect of the present invention, there is provided a network test plan program for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided, and (1) a parallel test Of the test, a parameter j that defines one of a plurality of tests in the parallel test, and a parameter n that takes n when n is even and takes n + 1 when n is odd. A transmitting site determining means for determining a transmitting site, (2) a receiving site determining means for determining a test receiving site according to parameter i, parameter j, and parameter n, and (3) the transmitting side. A test addition means for adding a pair of a transmission-side base and a reception-side base determined by the base determination means and the reception-side base determination means to the test plan list; In the period when i takes the same value, the parameter j is set to n / 2 types of values when n is an even number, and (n + 1) / 2 types of values when n is an odd number, A parallel test parameter changing unit that sequentially changes, and (5) a parameter i that functions as a parallel test parameter changing unit that sequentially changes the parameter i among (n-1) types of values.

第4の本発明のネットワーク監視システムは、(1)各拠点にそれぞれ設けられた試験端末と、(2)第1の本発明のネットワーク試験計画装置と、(3)上記ネットワーク試験計画装置における試験計画リストに従い、並行試験における複数の試験でのそれぞれの発信側拠点の上記試験端末から、着信側拠点の試験端末への試験通信を指示する試験指示手段と、(4)着信側拠点の試験端末から、通信品質に関係する情報を収集、保存する情報収集手段とを有することを特徴とする。   A network monitoring system according to a fourth aspect of the present invention includes: (1) a test terminal provided at each site; (2) a network test plan apparatus according to the first aspect of the present invention; and (3) a test in the network test plan apparatus. A test instruction means for instructing test communication from the test terminal at each of the transmitting bases to the test terminal at the receiving base in a plurality of tests in the parallel test according to the plan list; and (4) a test terminal at the receiving base. And information collecting means for collecting and storing information related to communication quality.

本発明によれば、試験端末の負荷状況が一定という制約を満たしながら、並行して複数の試験を同時に行うことできるようになる。   According to the present invention, it is possible to simultaneously perform a plurality of tests while satisfying the constraint that the load state of the test terminal is constant.

(A)主たる実施形態
以下、本発明によるネットワーク試験計画装置、ネットワーク試験計画方法、ネットワーク試験計画プログラム及びネットワーク監視システムの一実施形態を、図面を参照しながら詳述する。この実施形態は、VoIP通信システム(例えば、IP電話システム)のネットワークを監視対象としているものである。
(A) Main Embodiment Hereinafter, an embodiment of a network test planning device, a network test planning method, a network test planning program, and a network monitoring system according to the present invention will be described in detail with reference to the drawings. In this embodiment, a network of a VoIP communication system (for example, an IP telephone system) is targeted for monitoring.

(A−1)実施形態の構成
図1は、この実施形態に係るネットワーク監視システムの構成を示すブロック図である。
(A-1) Configuration of Embodiment FIG. 1 is a block diagram showing a configuration of a network monitoring system according to this embodiment.

図1において、実施形態のネットワーク監視システム10は、試験指示端末11、音声情報収集サーバ12、複数(図1ではn個)の擬似呼処理端末13−1〜13−n及びデータベース14を有している。なお、監視対象のIPネットワーク内には、複数(図1ではm個)のIP−PBX15−1〜15−mが存在している。   1, the network monitoring system 10 according to the embodiment includes a test instruction terminal 11, a voice information collection server 12, a plurality (n pieces in FIG. 1) of pseudo call processing terminals 13-1 to 13-n, and a database 14. ing. Note that a plurality (m pieces in FIG. 1) of IP-PBXs 15-1 to 15-m exist in the monitored IP network.

試験指示端末11は、Webブラウザなどが搭載されたオペレータが操作可能な端末であり、例えば、以下の機能(a)〜(c)等を担っているものである。すなわち、(a)擬似呼処理端末13−1〜13−nのURI(SIP−URI)などの設定、(b)マトリックス試験や1コール試験の試験指示及び試験結果の収集、(c)試験結果の参照、等を担っている。   The test instruction terminal 11 is a terminal that can be operated by an operator equipped with a Web browser and the like, and, for example, bears the following functions (a) to (c). (A) Setting of URI (SIP-URI) of pseudo call processing terminals 13-1 to 13-n, (b) Collection of test instructions and test results of matrix test and one call test, (c) Test results It is responsible for reference.

ここで、「マトリックス試験」とは、定期的な定点観測のために行う試験であり、「1コール試験」とは、割り込みによって指示された擬似呼処理端末間で発着を行う試験である。この実施形態は、マトリックス試験に関して特徴を有しており、以下では、主に、マトリックス試験の面から説明を行う。いずれの試験も、一対の擬似呼処理端末が試験対象となり、マトリックス試験では、その一対の擬似呼処理端末が順次変化していき、1コール試験では、その一対の擬似呼処理端末が指定された一対だけである。   Here, the “matrix test” is a test that is performed for periodic fixed-point observation, and the “1 call test” is a test that is performed between incoming and outgoing pseudo call processing terminals designated by interruption. This embodiment has features relating to the matrix test, and the following description will be given mainly from the aspect of the matrix test. In each test, a pair of pseudo call processing terminals is a test target, and in the matrix test, the pair of pseudo call processing terminals change sequentially, and in one call test, the pair of pseudo call processing terminals is designated. There is only one pair.

音声情報収集サーバ12は、基本的には、試験対象の擬似呼処理端末13−N(Nは1〜n)への試験指示と、試験対象の擬似呼処理端末からの試験結果の収集とを行うものであり、試験結果等をデータベース14に格納させるものである。音声情報収集サーバ12は、例えば、通信構成を除けば、CPU及びCPUが実行するプログラムによって実現されているが、機能的には、試験計画部12A、試験指示部12B及び試験結果受信部12Cを有している。試験計画部12Aは、実施形態のネットワーク試験計画装置に該当する。   The voice information collection server 12 basically collects test instructions from the test target pseudo call processing terminal 13-N (N is 1 to n) and collects test results from the test target pseudo call processing terminal. The test results are stored in the database 14. The audio information collection server 12 is realized by, for example, a CPU and a program executed by the CPU except for the communication configuration. Functionally, the voice information collection server 12 includes a test planning unit 12A, a test instruction unit 12B, and a test result receiving unit 12C. Have. The test plan unit 12A corresponds to the network test plan apparatus of the embodiment.

試験計画部12Aは、マトリックス試験の試験計画を策定するものであり、この実施形態の大きな特徴をなしているものである。試験計画部12Aの詳細については、動作の説明の項で明らかにする。   The test plan unit 12A is for formulating a test plan for a matrix test, and is a major feature of this embodiment. Details of the test plan unit 12A will be clarified in the description of the operation.

試験指示部12Bは、試験計画部12Aが策定したマトリックス試験の試験計画に従って、時間制御を行いながら、擬似呼処理端末13−Nに試験を指示するものである。なお、試験指示部12Bは、1コール試験についても指示を適宜行うものである。   The test instruction unit 12B instructs the pseudo call processing terminal 13-N to perform a test while performing time control in accordance with the test plan for the matrix test formulated by the test plan unit 12A. Note that the test instruction unit 12B appropriately gives instructions for the one-call test.

試験結果受信部12Cは、擬似呼処理端末13−Nからの試験結果を受信し、その結果をデータベース14に保存するものである。   The test result receiving unit 12 </ b> C receives the test result from the pseudo call processing terminal 13 -N and stores the result in the database 14.

各擬似呼処理端末13−Nは、ネットワーク的に異なる拠点(例えば、東京、大阪、福岡など)に配置されるものである。各擬似呼処理端末13−Nは、試験指示部12Bによる試験指示に従って、VoIP通信システム(例えば、IP電話システム)の端末(IP電話端末)として振る舞って試験を実行するものである。各擬似呼処理端末13−Nは、IP電話における音声情報(R値、パケット遅延、送受信パケット数など)の記録を行うものであり、擬似呼処理端末13−Nは、IP電話終了時に、試験結果を試験結果受信部12Cに対して送信するものである。   Each pseudo call processing terminal 13-N is arranged in a different network base (for example, Tokyo, Osaka, Fukuoka, etc.). Each pseudo call processing terminal 13-N behaves as a terminal (IP telephone terminal) of a VoIP communication system (for example, IP telephone system) in accordance with a test instruction from the test instruction unit 12B and executes a test. Each pseudo call processing terminal 13-N records voice information (R value, packet delay, number of transmitted / received packets, etc.) in the IP phone, and the pseudo call processing terminal 13-N performs a test at the end of the IP phone. The result is transmitted to the test result receiving unit 12C.

データベース14は、試験結果受信部12Cから与えられた試験結果を保存するものである。データベース14は、音声情報収集サーバ12と一体のものであっても良く、また、別体のものであっても良い。図1では、試験指示端末11が、音声情報収集サーバ12を介してデータベース14の試験結果の参照等を実行できるものを示しているが、試験指示端末11が、音声情報収集サーバ12を介することなくデータベース14の試験結果の直接参照できるようにしても良い。また、図1では、擬似呼処理端末13−Nが得た試験結果を、音声情報収集サーバ12を介してデータベース14に与えるものを示しているが、擬似呼処理端末13−Nが、音声情報収集サーバ12を介することなく試験結果を直接データベース14に与えるようにしても良い。   The database 14 stores the test result given from the test result receiving unit 12C. The database 14 may be integrated with the audio information collection server 12 or may be separate. Although FIG. 1 shows that the test instruction terminal 11 can execute the reference of the test result of the database 14 via the voice information collection server 12, the test instruction terminal 11 passes through the voice information collection server 12. Alternatively, the test results in the database 14 may be directly referred to. Further, FIG. 1 shows that the test result obtained by the pseudo call processing terminal 13-N is given to the database 14 via the voice information collection server 12, but the pseudo call processing terminal 13-N The test result may be directly given to the database 14 without going through the collection server 12.

上述したように、IPネットワーク内には、複数のIP−PBX15−1〜15−mが存在し、各IP−PBX15−M(Mは1〜m)は、収容している擬似呼処理端末13−Nに係る擬似呼の呼制御をも行うものである。   As described above, there are a plurality of IP-PBXs 15-1 to 15-m in the IP network, and each IP-PBX 15-M (M is 1 to m) accommodates the pseudo call processing terminal 13 accommodated therein. It also performs call control of pseudo calls related to -N.

(A−2)実施形態の動作
次に、実施形態に係るネットワーク監視システムの動作、特に、マトリックス試験の計画動作について説明する。
(A-2) Operation of Embodiment Next, the operation of the network monitoring system according to the embodiment, particularly the planning operation of the matrix test will be described.

ネットワークトラフィックは、日々若しくは時々刻々変更されているものであり、計測(試験)時点で音質が問題ないとしても、恒久的に問題が発生しないものではない。そのため、VoIP通信システムで、一定の品質を維持するためには、ネットワーク構成を考慮した拠点(場所)ごとで行う定期的、定点観測が必要となる。すなわち、ネットワーク構成が異なる箇所(拠点)に観測点(擬似呼処理端末13−1〜13−n)を設置し、その結果を監視する必要がある。各拠点間での接続は、n個の地点での相互接続であるため、n×(n−1)の通り数が存在する。   Network traffic is changed day by day or from moment to moment, and even if there is no problem in sound quality at the time of measurement (test), it does not cause a permanent problem. Therefore, in order to maintain a certain quality in the VoIP communication system, periodic and fixed-point observations are required at each base (location) considering the network configuration. That is, it is necessary to install observation points (pseudo call processing terminals 13-1 to 13-n) at locations (bases) having different network configurations and monitor the results. Since the connection between the bases is an interconnection at n points, there are n × (n−1) number.

定点観測では、同一条件での試験が必要である。そのため、定点観測で擬似的に音声通話を行う各擬似呼の負荷状況が同一でなければならない。すなわち、擬似呼処理端末13−1〜13−nは、複数のIP電話の同時発着を行ってはならない。マトリックス試験計画では、各擬似呼処理端末13−1〜13−nが同時にIP電話の発着が行われないように計画を行う必要がある。   For fixed-point observation, tests under the same conditions are required. For this reason, the load status of each pseudo call for performing a pseudo voice call by fixed point observation must be the same. In other words, the pseudo call processing terminals 13-1 to 13-n must not simultaneously make and receive a plurality of IP phones. In the matrix test plan, it is necessary to plan so that the pseudo call processing terminals 13-1 to 13-n do not make and receive IP telephones at the same time.

この実施形態の試験計画部12Aによる試験計画は、マトリックス試験と1コール試験が混合されている状態でも、各擬似呼処理端末13−1〜13−nが同時にIP電話の発着が行われないように計画を行う手法である。1コール試験は、IP電話での品質問題が発見され、その問題を解決できたか否かを測定する目的などのために行うものであり、一方向の試験であっても良いが、マトリックス試験は、各拠点間で相互に音声通話を行う試験であるが、送信側と受信側を変更する必要があるため、同一の2拠点間の試験でも、送信側及び受信側を入れ替えた2試験を実行する。   The test plan by the test plan unit 12A of this embodiment is such that each pseudo call processing terminal 13-1 to 13-n does not make and receive an IP phone at the same time even when the matrix test and the one-call test are mixed. It is a method to plan in the next. The one-call test is performed for the purpose of measuring whether or not a quality problem in an IP phone has been found and solved, and may be a one-way test. In this test, each site makes a voice call to each other. However, since it is necessary to change the transmitting side and the receiving side, two tests are performed in which the transmitting side and the receiving side are interchanged even in the same two sites. To do.

試験計画部12Aにおいては、マトリックス試験の試験順序を決定する。図2に示すネットワーク試験計画プログラムPは、試験計画部12Aの主要部を構成しているマトリックス試験の試験順序を算出するプログラムであり、オブジェクト指向言語Java(登録商標)によって記述されている。   In the test plan unit 12A, the test order of the matrix test is determined. The network test plan program P shown in FIG. 2 is a program for calculating the test order of the matrix test that constitutes the main part of the test plan unit 12A, and is described in the object-oriented language Java (registered trademark).

図2のプログラムP中のnは、擬似呼処理端末(定点観測点)の数を示しており、オペレータが試験指示端末11を用いて入力したり、又は、オペレータが試験指示端末11を用いて入力した各擬似呼処理端末13−1〜13−nの情報から端末数を集計して得たりする。   2 in the program P of FIG. 2 indicates the number of pseudo call processing terminals (fixed-point observation points), and the operator inputs using the test instruction terminal 11 or the operator uses the test instruction terminal 11. The total number of terminals is obtained from the information of the input pseudo call processing terminals 13-1 to 13-n.

ネットワーク試験計画プログラムPにおける各行の処理、機能は、以下の通りである。   The processing and functions of each line in the network test plan program P are as follows.

1行目:擬似呼処理端末の個数(n)の初期値を設定している。図2の例の場合、擬似呼処理端末数として8個が設定されている。   First line: An initial value of the number (n) of pseudo call processing terminals is set. In the case of the example of FIG. 2, eight are set as the number of pseudo call processing terminals.

2行目:擬似呼処理端末の個数の初期値nをパラメータorgNとして保存している。パラメータorgNは、後述する13行目の条件判定で利用される。   Second line: An initial value n of the number of pseudo call processing terminals is stored as a parameter orgN. The parameter orgN is used for condition determination on the 13th line described later.

3行目:擬似呼処理端末数nが奇数の場合だけ、1だけnを大きくしている。「%」はモジュロを表しており、前半の判定式は、nが偶数か否かを意味している。そして、nが偶数のときにnを維持し、nが奇数のときだけ、nを1だけ大きくしている。   Third line: n is increased by 1 only when the number n of pseudo call processing terminals is an odd number. “%” Represents modulo, and the judgment formula in the first half means whether n is an even number or not. Then, n is maintained when n is an even number, and n is increased by 1 only when n is an odd number.

4行目:試験計画リストtestListを作成している。   Fourth line: A test plan list testList is created.

5行及び20行目:パラメータiを0から1ずつ変化させながら、6行目〜19行目の処理を繰り返し、iがn−1に達すると6行目〜19行目の処理を実行しないことを規定している。発側UAC及び着側UASを入れ替えただけの2回の試験順序の策定を1回とカウントするならば、策定回数を(n−1)回にすることを規定している。   5th and 20th lines: While changing the parameter i from 0 to 1, the process from the 6th line to the 19th line is repeated, and when i reaches n−1, the process from the 6th line to the 19th line is not executed. It stipulates. It is specified that the number of times of formulation is (n-1) times if the number of formulation of the test sequence of two times by simply replacing the originating UAC and the terminating UAS is counted as one.

6行目:1回の策定における前半試験のリストオブジェクトsameExecutableList1を生成している。   6th line: A list object sameExecutableList1 of the first half test in one formulation is generated.

7行目:1回の策定における後半試験のリストオブジェクトsameExecutableList2を生成している。   7th line: A list object nameExecutableList2 of the latter half test in one formulation is generated.

8行目:試験計画リストtestListに前半試験のリストオブジェクトsameExecutableList1を設定(追加)している。   8th line: The list object sameExecutableList1 of the first half test is set (added) to the test plan list testList.

9行目:試験計画リストtestListに後半試験のリストオブジェクトsameExecutableList2を設定(追加)している。8行目及び9行目の処理により、試験計画リストtestListには、発側UAC及び着側UASを入れ替えた2回の試験順序が設定(追加)されることになる。   9th line: The list object nameExecutableList2 of the second half test is set (added) to the test plan list testList. By the processes on the 8th and 9th lines, the test plan list testList is set (added) with two test sequences in which the originating UAC and the terminating UAS are replaced.

10行及び19行目:パラメータjを0から1ずつ変化させながら、11行目〜18行目の処理を繰り返し、jがn/2に達すると11行目〜18行目の処理を実行しないことを規定している。前半試験又は後半試験のタイミングでは、発信側及び着信側が異なる複数の組(n/2組)について、同時に試験が可能であり、この実施形態では複数の組について同時に試験を実行することとしている。10行目が繰り返しを規定する、11行目〜18行目の処理を繰り返すことによって、同時に実行する試験の組が定まっていく。   10th and 19th lines: While changing the parameter j from 0 to 1, the process from the 11th line to the 18th line is repeated. When j reaches n / 2, the process from the 11th line to the 18th line is not executed. It stipulates. At the timing of the first half test or the second half test, it is possible to simultaneously test a plurality of sets (n / 2 sets) in which the transmission side and the reception side are different. In this embodiment, the test is executed on a plurality of sets at the same time. By repeating the processing of the 11th to 18th lines, where the 10th line defines the repetition, the set of tests to be executed simultaneously is determined.

11行目:1回の策定における前半試験での発信側の擬似呼処理端末番号uacを計算している。計算に供する関数c(i,j,n)は、後述する21行〜23行目で規定されている関数に従っている。   11th line: The pseudo call processing terminal number uac on the caller side in the first half test in one formulation is calculated. The function c (i, j, n) used for the calculation follows the function defined in the 21st to 23rd lines to be described later.

12行目:1回の策定における前半試験での着信側の擬似呼処理端末番号uasを計算している。計算に供する関数c(i,n−1−j,n)は、後述する21行〜23行目で規定されている関数に従っている。   12th line: The pseudo call processing terminal number uas on the called side in the first half test in one formulation is calculated. The function c (i, n-1-j, n) used for the calculation follows the function defined in the 21st to 23rd lines to be described later.

13行及び14行目:擬似呼処理端末の設定個数nが奇数の場合に、nを1だけ大きくしたことで、11行目又は12行目で計算された端末番号uac、uasが実際に割当て可能な端末の最大値番号より大きくなっていた場合には、計算された端末番号uac、uasでなる組は、マトリックス試験対象から除外する。   13th and 14th lines: When the set number n of pseudo call processing terminals is an odd number, the terminal numbers uac and uas calculated in the 11th or 12th line are actually assigned by increasing n by 1. If it is larger than the maximum number of possible terminals, the set consisting of the calculated terminal numbers uac and uas is excluded from the matrix test target.

15行及び16行目:11行目で計算された端末番号uacの端末を発信側、12行目で計算された端末番号uasの端末を着信側とする組の試験が実行可能な場合、その組の試験を前半試験のリストオブジェクトsameExecutableList1に追加する。   15th and 16th lines: When a test of a set in which the terminal having the terminal number uac calculated in the 11th line is the calling side and the terminal having the terminal number uas being calculated in the 12th line is executable, Add the set of tests to the list object sameExecutableList1 of the first half test.

17行及び18行目:12行目で計算された端末番号uasの端末を発信側、11行目で計算された端末番号uacの端末を着信側とする組の試験が実行可能な場合、その組の試験を後半試験のリストオブジェクトsameExecutableList2に追加する。   17th and 18th lines: When a test of a set in which the terminal of the terminal number uas calculated in the 12th line is a caller side and the terminal of the terminal number uac calculated in the 11th line is a callee side is executable, Add the set of tests to the list object sameExecutableList2 of the second half test.

21行〜23行目:端末番号uac、uasの計算で利用される関数c(int r,int i,int n)を定義している。この関数c(int r,int i,int n)は、2番目のパラメータiが3番目のパラメータnから1だけ小さい数に等しいときにはパラメータiの値を出力(返信)し、これ以外のときには、(r+i)を(n−1)で割った余りを出力(返信)する関数である。   21st line to 23rd line: Defines a function c (int r, int i, int n) used in the calculation of terminal numbers uac and uas. The function c (int r, int i, int n) outputs (replies) the value of the parameter i when the second parameter i is equal to a number smaller by 1 than the third parameter n, otherwise, This function outputs (replies) the remainder obtained by dividing (r + i) by (n-1).

図3は、ネットワーク試験計画プログラムPにより、算出されたマトリックス試験の順序例を示している。図3における数字0〜7は、各擬似呼処理端末13−1〜13−nの試験計画上での割当番号を示している。UACは発側、UASは着側を示している。   FIG. 3 shows an example of the order of matrix tests calculated by the network test planning program P. Numbers 0 to 7 in FIG. 3 indicate allocation numbers on the test plan of the pseudo call processing terminals 13-1 to 13-n. UAC indicates the originating side and UAS indicates the terminating side.

各擬似呼処理端末13−1〜13−nの識別番号が通し番号でない場合には、通し番号である割当番号に変換する必要があり、その場合には、識別番号と割当番号との対応を管理しておく必要がある。各擬似呼処理端末13−1〜13−nの識別番号が通し番号でない場合には、例えば、各擬似呼処理端末13−1〜13−nの識別番号を、昇順又は降順でソーティングし、通し番号である割当番号に対応付けるようにすれば良い。   If the identification numbers of the pseudo call processing terminals 13-1 to 13-n are not serial numbers, it is necessary to convert them into assigned numbers that are serial numbers. In this case, the correspondence between the identification numbers and the assigned numbers is managed. It is necessary to keep. If the identification numbers of the pseudo call processing terminals 13-1 to 13-n are not serial numbers, for example, the identification numbers of the pseudo call processing terminals 13-1 to 13-n are sorted in ascending or descending order, What is necessary is just to make it match | combine with a certain allocation number.

図3の例の場合、擬似呼処理端末の個数(n)として8個が設定される。偶数であるのでそのまま適用される。   In the case of the example of FIG. 3, eight are set as the number (n) of pseudo call processing terminals. Since it is an even number, it is applied as it is.

5行目におけるパラメータiが0のときに、図3の試験順序「1」、「2」の行が形成される。試験順序「1」の行への書込みは、15行及び16行目の処理によってなされ、試験順序「2」の行への書込みは、17行及び18行目の処理によってなされる。図3の同一行に係る同時試験における「試験1」は、パラメータjが0のときに決定されたものであり、同様に、「試験2」〜「試験4」はそれぞれ、パラメータjが1、2、3のときに決定されたものである。   When the parameter i in the fifth row is 0, the rows of the test order “1” and “2” in FIG. 3 are formed. Writing to the row of the test order “1” is performed by the processing of the 15th and 16th rows, and writing to the row of the test order “2” is performed by the processing of the 17th and 18th rows. “Test 1” in the simultaneous test related to the same row in FIG. 3 is determined when the parameter j is 0, and similarly, “test 2” to “test 4” have the parameter j of 1, 2 and 3 are determined.

図3の例の場合、並行(並列)に4つの試験を実施することが可能であることを示しており、その並行試験を14回繰り返すことで、全ての2拠点間試験(マトリックス試験)を実施することが可能であることを示している。すなわち、図3に示すマトリックス試験計画の順序に従って、試験を実行することにより、全ての2拠点間試験を実施することができる。   In the case of the example in FIG. 3, it is shown that four tests can be performed in parallel (in parallel), and all the tests between two sites (matrix tests) are performed by repeating the parallel test 14 times. It shows that it can be implemented. That is, all the tests between the two sites can be performed by executing the tests according to the order of the matrix test plan shown in FIG.

マトリックス試験では、擬似呼処理端末間の全ての組み合わせについて試験を行うことが理想である。しかし、場合によっては、拠点間で、ほとんど電話(セッション確立)が行われない区間が存在する。この実施形態の場合、そのような区間の擬似呼処理端末間試験を、マトリックス試験計画から除外可能としている。   In the matrix test, it is ideal to test all combinations between pseudo call processing terminals. However, in some cases, there is a section in which telephone calls (session establishment) are hardly performed between bases. In the case of this embodiment, the test between pseudo call processing terminals in such a section can be excluded from the matrix test plan.

図4は、試験計画部12Aが、試験指示端末11を介して、オペレータに提示し、マトリックス試験計画から除外する擬似呼処理端末間試験(逆に見れば、マトリックス試験計画に含める擬似呼処理端末間試験)を指定させるための表示画面例を示している。図4の表示画面例では、擬似呼処理端末の識別番号を表示してもオペレータが直ちに理解し難いため、擬似呼処理端末の識別番号に代え、擬似呼処理端末が設けられている拠点の地名を表示している。また、図4の表示画面例は、オペレータが、発側(発信側)の拠点地名と着側(着信側)の拠点地名との交点のチェックボックスにマークを付与することにより、マトリックス試験計画に含める擬似呼処理端末間試験を指示させ、チェックボックスにマークを付与しないことにより、マトリックス試験計画から除外する擬似呼処理端末間試験を指示させるものである。   FIG. 4 shows an inter-pseudo call processing terminal test that the test plan unit 12A presents to the operator via the test instruction terminal 11 and is excluded from the matrix test plan (in reverse terms, the pseudo call processing terminal included in the matrix test plan) The example of a display screen for designating an interim test) is shown. In the example of the display screen of FIG. 4, even if the identification number of the pseudo call processing terminal is displayed, it is difficult for the operator to understand immediately. Therefore, the place name where the pseudo call processing terminal is provided is used instead of the identification number of the pseudo call processing terminal. Is displayed. In addition, the display screen example of FIG. 4 shows that the operator adds a mark to the check box at the intersection of the site name on the calling side (calling side) and the site name on the called side (called side), so that the matrix test plan By instructing the inter-pseudo call processing terminal test to be included and not adding a mark to the check box, the pseudo call processing inter-terminal test to be excluded from the matrix test plan is instructed.

例えば、試験計画部12Aは、試験計画モードが指示され、各擬似呼処理端末13−1〜13−nの情報を入力させたが、図2に示すプログラムPを起動する前の状態において、図4の表示画面を表示させ、マトリックス試験計画から除外する擬似呼処理端末間試験を指示させる。また例えば、試験計画部12Aは、図2に示すプログラムPを実行し、マトリックス試験計画を得た状態で、マトリックス試験計画から除外する擬似呼処理端末間試験があるかをオペレータに質問し、オペレータが、試験指示端末11から、除外する擬似呼処理端末間試験があることを入力したときに、図4の表示画面例を表示させ、マトリックス試験計画から除外する擬似呼処理端末間試験を指示させるようにしても良い。   For example, the test plan unit 12A is instructed in the test plan mode and inputs information on each of the pseudo call processing terminals 13-1 to 13-n. In the state before starting the program P shown in FIG. 4 is displayed to instruct a pseudo call processing inter-terminal test to be excluded from the matrix test plan. Further, for example, the test plan unit 12A executes the program P shown in FIG. 2 and asks the operator whether there is a pseudo-call processing terminal test to be excluded from the matrix test plan in a state where the matrix test plan is obtained. However, when it is input from the test instruction terminal 11 that there is an inter-pseudo call processing terminal test to be excluded, the display screen example of FIG. 4 is displayed to instruct the pseudo call processing inter-terminal test to be excluded from the matrix test plan. You may do it.

図2及び図3は、擬似呼処理端末の個数(拠点数)が8個の場合のものであるが、図4は、説明の簡単化のために、擬似呼処理端末の個数(拠点数)が3個の場合を示している。図4は、東京、大阪、福岡の3拠点に設置されている擬似呼処理端末間の試験のうち、東京発福岡着間の試験、並びに、福岡発東京着間の試験を除いた場合を示している。   2 and 3 are for the case where the number of pseudo call processing terminals (number of bases) is 8, FIG. 4 shows the number of pseudo call processing terminals (number of bases) for the sake of simplicity of explanation. Shows the case of three. FIG. 4 shows the case where the test between Tokyo and Fukuoka and the test between Fukuoka and Tokyo are excluded from the tests between the pseudo call processing terminals installed at three locations in Tokyo, Osaka and Fukuoka. ing.

例えば、除外する擬似呼処理端末間試験の指示タイミングを問わず、図2に示すようなプログラムPを実行し、図3に示すようなマトリックス試験計画の結果を得た後、マトリックス試験計画の結果から、指示された擬似呼処理端末間試験を除外する(図3の該当欄を空欄とする)ようにしても良い。また例えば、除外する擬似呼処理端末間試験の指示タイミングが、プログラムPの実行前である場合には、プログラムPの15行目又は17行目の算出された発信側及び着信側の組についての試験が実行可能か否かの判定時に、除外する擬似呼処理端末間試験か否かを確認するようにしても良い。   For example, after executing the program P as shown in FIG. 2 and obtaining the result of the matrix test plan as shown in FIG. Thus, the instructed pseudo call processing inter-terminal test may be excluded (the corresponding column in FIG. 3 is left blank). Also, for example, if the instruction timing of the pseudo call processing inter-terminal test to be excluded is before the execution of the program P, the calculated sending side and receiving side set for the 15th or 17th line of the program P When determining whether or not the test can be executed, it may be confirmed whether or not the pseudo call processing inter-terminal test is excluded.

音声品質を計測するためには、ある程度以上の長さの音声信号を送信しなければならない。また、同一の擬似呼処理端末13−Nで、同時に、複数の通話を行う試験は望ましくない。以上の条件から、一日に動作できる試験数の上限Tは、次の(1)式で求めることができる(計算で求められたT
小数点以下の値を有する場合には、その整数部分が試験数の上限となる)。なお、(1)式におけるC(秒)は、試験時間(=試験指示+通話時間+試験結果送信時間)である。
In order to measure the voice quality, a voice signal having a certain length or more must be transmitted. In addition, a test in which a plurality of calls are made simultaneously with the same pseudo call processing terminal 13-N is not desirable. From the above conditions, the upper limit T of the number of tests that can be operated in one day can be obtained by the following equation (1) (T
If it has a value after the decimal point, the integer part is the upper limit of the number of tests). Note that C (seconds) in the equation (1) is a test time (= test instruction + call time + test result transmission time).

T=24×60×60÷C …(1)
ここで、マトリックス試験は、上述したように、並列に実行できる試験があるため、1コール試験を1日に実行できる回数をO回(上限)とし、擬似呼処理端末がn個存在している場合、マトリックス試験の1日に繰り返し可能回数(最大数)Rは、次の(2)式で求めることができる。
T = 24 × 60 × 60 ÷ C (1)
Here, since the matrix test includes tests that can be executed in parallel as described above, the number of times that one call test can be executed per day is O times (upper limit), and there are n pseudo call processing terminals. In this case, the number of repetitions (maximum number) R that can be repeated in one day of the matrix test can be obtained by the following equation (2).

R=(T−O)÷((M−1)×2)
nが奇数の場合、M=n+1
nが偶数の場合、M=n …(2)
図5は、試験時間Cが60秒、1日に動作可能な1コール試験の上限数Oが50試験の場合において、(2)式に従って、擬似呼処理端末の個数nにより計算したマトリックス試験の最大繰り返し回数である。このような計算により、利用者に対して、一日に動作するマトリックス試験の回数あるいは試験間隔の上限を提示することが可能である。例えば、擬似呼処理端末が8個存在する場合、マトリクス試験は99.29回、すなわち、1日に実行できる上限は99回であり、最低試験間隔は14分間隔(24×60÷99の整数部分)となる。
R = (T−O) ÷ ((M−1) × 2)
When n is an odd number, M = n + 1
When n is an even number, M = n (2)
FIG. 5 shows a matrix test calculated by the number n of pseudo call processing terminals according to the equation (2) when the test time C is 60 seconds and the upper limit number O of one call test operable in one day is 50 tests. The maximum number of repetitions. With such a calculation, it is possible to present the upper limit of the number of times of the matrix test operating in one day or the test interval to the user. For example, if there are 8 pseudo call processing terminals, the matrix test is 99.29 times, that is, the upper limit that can be executed in a day is 99 times, and the minimum test interval is an interval of 14 minutes (24 × 60 ÷ 99 integer) Part).

試験計画部12Aは、試験間隔毎に、図2に示すプログラムPを実行することによって得たマトリックス試験の試験計画結果(図3参照)を、試験指示部12Bの低優先度キューに設定する。ここで、試験指示部12Bは、低優先度キュー及び高優先度キューを実装しており、試験計画部12Aで作成されたマトリックス試験の試験順序(試験計画結果)は低優先度キューに入れられ、1コール試験の指示は高優先度キューに入れられる。   The test plan unit 12A sets the test plan result of the matrix test (see FIG. 3) obtained by executing the program P shown in FIG. 2 in the low priority queue of the test instruction unit 12B at each test interval. Here, the test instruction unit 12B implements a low priority queue and a high priority queue, and the test order (test plan result) of the matrix test created by the test plan unit 12A is put in the low priority queue. 1 call test indication is placed in the high priority queue.

図6は、試験指示部12Bによる試験指示動作を示すフローチャートである。試験指示部12Bは、試験間隔毎に、図6に示すタスク(ルーチン)を起動する。   FIG. 6 is a flowchart showing a test instruction operation by the test instruction unit 12B. The test instruction unit 12B starts a task (routine) shown in FIG. 6 at each test interval.

試験指示部12Bは、図6に示すタスクを起動するとまず、高優先度キューから1コール試験を取り出そうとし(ステップ21)、1コール試験が存在するか否かを判別する(ステップ22)。   When the test instructing unit 12B starts the task shown in FIG. 6, first, it tries to take out one call test from the high priority queue (step 21), and determines whether or not one call test exists (step 22).

1コール試験が存在する場合には、試験指示部12Bは、1コール試験の指示を行う(ステップ23)。例えば、試験指示部12Bは、1コール試験の送信側の擬似呼処理端末13−iに対して、受信先のSIP−URI、利用するSIPサーバ(例えば、IP−PBX)、試験結果の送信先アドレスを指定した1コール試験の指示を行う。その後、スリープ時間を算出してその時間だけスリープする(ステップ29)。スリープ時間は、今回に図6の処理を起動したタイミングから、スリープ時間が経過して次回に図6の処理を起動するタイミングまでの時間が、試験間隔になるように定められる。   If there is a one-call test, the test instruction unit 12B instructs the one-call test (step 23). For example, the test instruction unit 12B, for the pseudo call processing terminal 13-i on the transmission side of the one-call test, receives the SIP-URI of the reception destination, the SIP server to be used (for example, IP-PBX), and the transmission destination of the test result. Instructs the one-call test with the specified address. Thereafter, the sleep time is calculated and sleep is performed for that time (step 29). The sleep time is determined such that the time from the timing when the processing of FIG. 6 is activated this time until the timing when the processing of FIG.

なお、試験の発信側及び着信側が特定された場合には、受信先のSIP−URI、利用するSIPサーバなどが特定されるようになされており、その特定のための情報を、音声情報収集サーバ12は内蔵している。   In addition, when the transmission side and the reception side of the test are specified, the SIP-URI of the reception destination, the SIP server to be used, and the like are specified, and information for the specification is used as the voice information collection server. 12 is built-in.

ステップ22の判定により、1コール試験が存在しないという結果を得ると、試験指示部12Bは、低優先度キューからマトリックス試験計画結果を取り出す(ステップ24)。そして、マトリックス試験計画結果において、実行していない並行試験のデータが残っているか否かを判定し(ステップ25)、データが残っていれば、その先頭側から、並行して実行できる試験の情報を取得する(ステップ26)。試験指示部12Bは、取得された並行試験のそれぞれの送信側の擬似呼処理端末に対して、受信先のSIP−URI、利用するSIPサーバ、試験結果の送信先アドレスを指定した試験の指示を行う(ステップ27)。その後、ステップ26で取り出した試験の情報をリストから削除した後(ステップ28)、ステップ25に戻る。   If it is determined in step 22 that the result is that there is no one-call test, the test instruction unit 12B extracts the matrix test plan result from the low priority queue (step 24). Then, in the matrix test plan result, it is determined whether or not the data of the parallel test that has not been executed remains (step 25). If the data remains, information on the test that can be executed in parallel from the head side is determined. Is acquired (step 26). The test instruction unit 12B gives a test instruction specifying the SIP-URI of the reception destination, the SIP server to be used, and the transmission destination address of the test result to each of the transmission side pseudo call processing terminals of the acquired parallel test. Perform (step 27). Thereafter, the test information taken out in step 26 is deleted from the list (step 28), and the process returns to step 25.

並行して実行できる試験の指示など(ステップ25〜28のループ処理)が繰り返し実行され、全ての並行試験の指示が終了した後にステップ25に戻ってきたときには、実行していない並行試験のデータが残っていないと判定される。このときには、試験指示部12Bは、スリープ時間を算出してその時間だけスリープする(ステップ29)。   When a test instruction or the like that can be executed in parallel (loop processing in steps 25 to 28) is repeatedly executed and the process returns to step 25 after completion of all the parallel test instructions, data of the parallel test that is not being executed is stored. It is determined that it does not remain. At this time, the test instruction unit 12B calculates the sleep time and sleeps for that time (step 29).

(A−3)実施形態の効果
上記実施形態によれば、マトリックス試験の計画作成により、擬似呼処理端末の負荷状況が一定という制約を満たしながら、並行して複数の試験を同時に行うことできる。
(A-3) Effect of Embodiment According to the above-described embodiment, a plurality of tests can be performed in parallel while satisfying the constraint that the load status of the pseudo call processing terminal is constant by creating a matrix test plan.

擬似呼処理端末がn個の場合、(n−1)×nの試験が存在する。これらの試験を並列でなく実行した場合、(n−1)×n×C秒だけかかる(Cは試験時間)。上記実施形態の方法を用いた場合には、nが偶数のときに(n−1)×2×C秒、nが奇数のときにn×2×C秒だけかかる。擬似呼処理端末の個数nは2以上であるため、nが2である場合以外は全て高速化される。例えば、nが8、Cが60秒の場合、非並列処理では(8−1)×8×60=56分(3360秒)、並列処理では(8−1)×2×60=14分(840秒)となり、並列処理は1/4で1回のマトリックス試験が終了する。   When there are n pseudo call processing terminals, there are (n−1) × n tests. If these tests are run in parallel, it takes (n-1) × n × C seconds (C is the test time). When the method of the above embodiment is used, it takes (n−1) × 2 × C seconds when n is an even number, and only n × 2 × C seconds when n is an odd number. Since the number n of pseudo call processing terminals is 2 or more, all speeds are increased except when n is 2. For example, when n is 8 and C is 60 seconds, (8-1) × 8 × 60 = 56 minutes (3360 seconds) in non-parallel processing, and (8-1) × 2 × 60 = 14 minutes in parallel processing ( 840 seconds), and the parallel processing is 1/4, and one matrix test is completed.

マトリックス試験の観測により、問題発生前後の時間とネットワーク位置がはっきりするため、その時点でのネットワーク変更(オフィスレイアウト変更を含む)、トラフィックの変化(有線・無線ノイズを含む)などの要因の変化との関連を把握するための情報源となる。   Matrix test observations clarify the time before and after the problem and the network location. Changes in factors such as network changes (including office layout changes) and traffic changes (including wired and wireless noise) at that time It becomes a source of information for grasping the relationship.

(B)他の実施形態
上記実施形態は、VoIPを適用したIPネットワークの音声品質の定常的監視に適用したものであったが、他のネットワークの監視にも、本発明を適用することができる。
(B) Other Embodiments The above embodiment has been applied to regular monitoring of voice quality of an IP network to which VoIP is applied. However, the present invention can also be applied to monitoring of other networks. .

また、上記実施形態では、音声情報収集サーバ12が、試験計画部12A、試験指示部12B及び試験結果受信部12Cを有するものを示したが、試験計画部12A、試験指示部12B及び試験結果受信部12Cが複数のサーバに分散して設けられていても良い。   In the above embodiment, the voice information collection server 12 has the test plan unit 12A, the test instruction unit 12B, and the test result reception unit 12C. However, the test plan unit 12A, the test instruction unit 12B, and the test result reception are shown. The unit 12C may be distributed and provided in a plurality of servers.

さらに、上記実施形態では、擬似呼処理端末が発信側にも着信側にもなり得るものを示したが、各拠点にそれぞれ、発信専用の端末と着信専用の端末とを設けてマトリックス試験を実行するようにしても良い。このような場合には、例えば、図3における試験順序「1」及び「2」の各試験をも並行処理することができる。   Furthermore, in the above embodiment, the pseudo call processing terminal has been shown to be either a caller side or a callee side. However, a matrix test is performed by providing a dedicated caller terminal and a dedicated caller terminal at each site. You may make it do. In such a case, for example, the tests of the test orders “1” and “2” in FIG. 3 can be processed in parallel.

さらにまた、上記実施形態では、1コール試験については並列した処理を実行しないものを示したが、高優先度キューに複数の1コール試験がキューイングされており、発信端末及び着信端末がオーバーラップしていない場合には、1コール試験についても並列処理を実行させるようにしても良い。   Furthermore, in the above embodiment, although one call test is not executed in parallel, a plurality of one call tests are queued in the high priority queue, and the calling terminal and the receiving terminal overlap. If not, parallel processing may also be executed for the one-call test.

実施形態に係るネットワーク監視システムの構成を示すブロック図である。It is a block diagram which shows the structure of the network monitoring system which concerns on embodiment. 実施形態のネットワーク試験計画プログラムを示す説明図である。It is explanatory drawing which shows the network test plan program of embodiment. 図2のネットワーク試験計画プログラムの実行により計画されたマトリックス試験計画順序例を示す説明図である。It is explanatory drawing which shows the example of a matrix test plan order planned by execution of the network test plan program of FIG. 実施形態のマトリックス試験計画から除外する擬似呼処理端末間試験を指定させるための表示画面例を示す説明図である。It is explanatory drawing which shows the example of a display screen for designating the test between pseudo call processing terminals excluded from the matrix test plan of embodiment. 実施形態における擬似呼処理端末数とマトリックス試験の最大繰り返し回数との関係を示す説明図である。It is explanatory drawing which shows the relationship between the number of pseudo call processing terminals and the maximum number of repetitions of a matrix test in embodiment. 実施形態の試験指示部による試験指示動作を示すフローチャートである。It is a flowchart which shows the test instruction | indication operation | movement by the test instruction | indication part of embodiment.

符号の説明Explanation of symbols

10…ネットワーク監視システム、11…試験指示端末、12…音声情報収集サーバ、12A…試験計画部(ネットワーク試験計画装置)、12B…試験指示部、12C…試験結果受信部、13−1〜13−n…擬似呼処理端末、14…データベース、15−1〜15−m…IP−PBX。   DESCRIPTION OF SYMBOLS 10 ... Network monitoring system, 11 ... Test instruction | indication terminal, 12 ... Audio | voice information collection server, 12A ... Test plan part (network test plan apparatus), 12B ... Test instruction part, 12C ... Test result receiving part, 13-1-13- n ... pseudo call processing terminal, 14 ... database, 15-1 to 15-m ... IP-PBX.

Claims (6)

試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画装置であって、
並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定める発信側拠点決定手段と、
パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定める着信側拠点決定手段と、
上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加する試験追加手段と、
パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させる並行試験内パラメータ変更手段と、
パラメータiを、(n−1)種類の値の中で順次変化させる並行試験パラメータ変更手段と
を備えることを特徴とするネットワーク試験計画装置。
A network test planning device for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided,
According to a parameter i that defines the order of parallel tests, a parameter j that defines any of a plurality of tests in the parallel test, and a parameter n that takes n when n is even and takes n + 1 when n is odd, A sending site determination means for determining a test sending site;
A receiving site determination means for determining a test receiving site according to the parameter i, the parameter j, and the parameter n;
A test addition means for adding a pair of a caller base and a callee base determined by the caller base determination means and the callee base determination means to a test plan list;
In the period in which the parameter i takes the same value, the parameter j is set to n / 2 types of values when n is an even number, and (n + 1) / 2 types of values when n is an odd number. Means for changing parameters in parallel tests to change sequentially;
A network test planning device comprising: parallel test parameter changing means for sequentially changing the parameter i among (n-1) types of values.
上記発信側拠点決定手段によって決定された発信側拠点を着信側拠点とし、上記着信側拠点決定手段によって決定された着信側拠点を発信側拠点とした対を試験計画リストに追加する逆方向試験追加手段をさらに有することを特徴とする請求項1に記載のネットワーク試験計画装置。   Reverse test addition that adds a pair with the calling site determined by the calling site determination unit as the receiving site and the receiving site determined by the receiving site determination unit as the calling site is added to the test plan list The network test planning apparatus according to claim 1, further comprising means. 試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画方法であって、
発信側拠点決定手段、着信側拠点決定手段、試験追加手段、並行試験内パラメータ変更手段及び並行試験パラメータ変更手段とを備え、
上記発信側拠点決定手段は、並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定め、
上記着信側拠点決定手段は、パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定め、
上記試験追加手段は、上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加し、
上記並行試験内パラメータ変更手段は、パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させ、
上記並行試験パラメータ変更手段は、パラメータiを、(n−1)種類の値の中で順次変化させる
ことを特徴とするネットワーク試験計画方法。
A network test plan method for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided,
A transmission side base determination means, a reception side base determination means, a test addition means, a parallel test parameter change means and a parallel test parameter change means,
The originating site determination means includes a parameter i that defines the order of parallel tests, a parameter j that defines one of a plurality of tests in the parallel test, and n when n is an even number and n is an odd number. According to the parameter n taking n + 1, the base of the test originator is determined,
The destination-side base determination means determines the base of the test receiver side according to the parameter i, the parameter j, and the parameter n,
The test adding means adds a pair of the calling site and the called site determined by the calling site determining unit and the called site determining unit to the test plan list,
In the parallel test parameter changing means, the parameter i is a period in which the parameter i takes the same value, and the parameter j is set to n / 2 types of values when n is an even number, and (n + 1) when n is an odd number. / Change sequentially between the two types of values,
The parallel test parameter changing means sequentially changes the parameter i among (n-1) types of values.
逆方向試験追加手段が、上記発信側拠点決定手段によって決定された発信側拠点を着信側拠点とし、上記着信側拠点決定手段によって決定された着信側拠点を発信側拠点とした対を試験計画リストに追加することを特徴とする請求項3に記載のネットワーク試験計画方法。   The test plan list includes a pair in which the reverse direction test adding means sets the calling base determined by the calling base determining means as the receiving base and the receiving base determined by the receiving base determination means as the calling base. The network test planning method according to claim 3, further comprising: 試験端末が設けられている全n個の拠点間の全ての組み合わせについて実行する通信品質試験の計画を策定するネットワーク試験計画プログラムあって、
コンピュータを、
並行試験の順序を規定するパラメータiと、並行試験における複数の試験のいずれかを規定するパラメータjと、nが偶数のときにnをとりnが奇数のときにn+1をとるパラメータnとに従って、試験の発信側の拠点を定める発信側拠点決定手段と、
パラメータiと、パラメータjと、パラメータnとに従って、試験の着信側の拠点を定める着信側拠点決定手段と、
上記発信側拠点決定手段及び上記着信側拠点決定手段によって決定された発信側拠点及び着信側拠点の対を試験計画リストに追加する試験追加手段と、
パラメータiが同一値をとっている期間で、パラメータjを、nが偶数のときにn/2種類の値の中で、nが奇数のときに(n+1)/2種類の値の中で、順次変化させる並行試験内パラメータ変更手段と、
パラメータiを、(n−1)種類の値の中で順次変化させる並行試験パラメータ変更手段として機能させる
ことを特徴とするネットワーク試験計画プログラム。
There is a network test plan program for formulating a communication quality test plan to be executed for all combinations among all n sites where test terminals are provided,
Computer
According to a parameter i that defines the order of parallel tests, a parameter j that defines any of a plurality of tests in the parallel test, and a parameter n that takes n when n is even and takes n + 1 when n is odd, A sending site determination means for determining a test sending site;
A receiving site determination means for determining a test receiving site according to the parameter i, the parameter j, and the parameter n;
A test addition means for adding a pair of a caller base and a callee base determined by the caller base determination means and the callee base determination means to a test plan list;
In the period in which the parameter i takes the same value, the parameter j is set to n / 2 types of values when n is an even number, and (n + 1) / 2 types of values when n is an odd number. Means for changing parameters in parallel tests to change sequentially;
A network test planning program that functions as a parallel test parameter changing means for sequentially changing the parameter i among (n-1) types of values.
各拠点にそれぞれ設けられた試験端末と、
請求項1又は2に記載のネットワーク試験計画装置と、
上記ネットワーク試験計画装置における試験計画リストに従い、並行試験における複数の試験でのそれぞれの発信側拠点の上記試験端末から、着信側拠点の試験端末への試験通信を指示する試験指示手段と、
着信側拠点の試験端末から、通信品質に関係する情報を収集、保存する情報収集手段と
を有することを特徴とするネットワーク監視システム。
Test terminals installed at each site,
The network test planning device according to claim 1 or 2,
According to the test plan list in the network test plan device, a test instruction means for instructing test communication from the test terminal at each of the originating bases in a plurality of tests in the parallel test to the test terminal at the terminating base,
A network monitoring system comprising: information collection means for collecting and storing information related to communication quality from a test terminal at a receiving site.
JP2007239354A 2007-09-14 2007-09-14 Network test planning device, network test planning method, network test planning program, and network monitoring system Active JP4977564B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007239354A JP4977564B2 (en) 2007-09-14 2007-09-14 Network test planning device, network test planning method, network test planning program, and network monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007239354A JP4977564B2 (en) 2007-09-14 2007-09-14 Network test planning device, network test planning method, network test planning program, and network monitoring system

Publications (2)

Publication Number Publication Date
JP2009071684A true JP2009071684A (en) 2009-04-02
JP4977564B2 JP4977564B2 (en) 2012-07-18

Family

ID=40607467

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007239354A Active JP4977564B2 (en) 2007-09-14 2007-09-14 Network test planning device, network test planning method, network test planning program, and network monitoring system

Country Status (1)

Country Link
JP (1) JP4977564B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011071127A1 (en) * 2009-12-11 2011-06-16 日本電気株式会社 Usable bandwidth measurement method, usable bandwidth measurement system, terminal device, and computer-readable recording medium
JP2014017768A (en) * 2012-07-11 2014-01-30 Toshiba Mitsubishi-Electric Industrial System Corp Phone testing system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03188722A (en) * 1989-12-19 1991-08-16 Fujitsu Ltd Pseudo pattern generating/confirming circuit
JPH09214606A (en) * 1996-02-01 1997-08-15 Fujitsu Ltd Method and device for automatically selecting test line
JPH1127268A (en) * 1997-07-04 1999-01-29 Mitsubishi Heavy Ind Ltd Communication performance evaluation system
JP2005311906A (en) * 2004-04-23 2005-11-04 Ntt Communications Kk Apparatus for acquiring basic data for voice quality calculation and program therefor
JP2007027953A (en) * 2005-07-13 2007-02-01 Oki Electric Ind Co Ltd Method for testing connection of ip telephone

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03188722A (en) * 1989-12-19 1991-08-16 Fujitsu Ltd Pseudo pattern generating/confirming circuit
JPH09214606A (en) * 1996-02-01 1997-08-15 Fujitsu Ltd Method and device for automatically selecting test line
JPH1127268A (en) * 1997-07-04 1999-01-29 Mitsubishi Heavy Ind Ltd Communication performance evaluation system
JP2005311906A (en) * 2004-04-23 2005-11-04 Ntt Communications Kk Apparatus for acquiring basic data for voice quality calculation and program therefor
JP2007027953A (en) * 2005-07-13 2007-02-01 Oki Electric Ind Co Ltd Method for testing connection of ip telephone

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011071127A1 (en) * 2009-12-11 2011-06-16 日本電気株式会社 Usable bandwidth measurement method, usable bandwidth measurement system, terminal device, and computer-readable recording medium
US9059914B2 (en) 2009-12-11 2015-06-16 Nec Corporation Usable bandwidth measurement method, usable bandwidth measurement system, terminal device, and computer-readable recording medium
JP5741446B2 (en) * 2009-12-11 2015-07-01 日本電気株式会社 Usable bandwidth measuring method, usable bandwidth measuring system, terminal device and program
JP2014017768A (en) * 2012-07-11 2014-01-30 Toshiba Mitsubishi-Electric Industrial System Corp Phone testing system

Also Published As

Publication number Publication date
JP4977564B2 (en) 2012-07-18

Similar Documents

Publication Publication Date Title
CA2656500C (en) Method and system for network path discrimination
US20050271029A1 (en) Methods, apparatus and computer program products for testing a voice over Internet protocol communication system
EP1267555A2 (en) Measuring speech quality
US20060274664A1 (en) Characterization of Voice over Internet Protocol (VoIP) network
WO2004086741A1 (en) Talking quality evaluation system and device for evaluating talking quality
US20050261895A1 (en) Methods and devices for correlating audio sample comparisons and network performance statistics
JP2011508514A (en) Automatic configuration of Internet Protocol service quality assurance router
JP4977564B2 (en) Network test planning device, network test planning method, network test planning program, and network monitoring system
US20060187824A1 (en) Method and apparatus for measuring data transport quality over an Internet Protocol
JP5152110B2 (en) Packet analysis method, program, and apparatus
JP2011030051A (en) Network quality measuring system and method, and program
JP5051368B2 (en) Communication terminal and communication progress display method in communication terminal
JP4327685B2 (en) User experience quality monitoring method, user experience quality monitoring apparatus, estimation model generation method, and estimation model generation apparatus
JP4536415B2 (en) Basic data device, program, voice quality calculation method, and voice quality calculation system
JP4325731B2 (en) Delay time measuring device, jitter tolerance measuring device, and speech quality evaluation device using them
JP2012257048A (en) Fault information collection system, voice communication terminal and fault information collection method
WO2023144898A1 (en) Voice recognition system, voice recognition method, and program
JP6600325B2 (en) Gateway device and communication method thereof
JP2006041773A (en) Ip phone system and ip phone
JP6407491B2 (en) Communication device
JP2006222666A (en) VoIP PHONE SYSTEM
Biyani et al. Early estimation of voice over ip quality
Rezac et al. Interactive video audio system and its performance evaluation
JP2007150774A (en) Telephone voice quality evaluation system
JP6413497B2 (en) COMMUNICATION DEVICE AND CONDUCTIVE TEST METHOD FOR COMMUNICATION DEVICE

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100713

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20101129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120316

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120403

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120416

R150 Certificate of patent or registration of utility model

Ref document number: 4977564

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150420

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250