JP3910969B2

JP3910969B2 - Multi-point communication total quality estimation apparatus, method, quality monitoring apparatus, and method

Info

Publication number: JP3910969B2
Application number: JP2004086898A
Authority: JP
Inventors: 征貴増田; 聡子富永
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 2004-03-24
Filing date: 2004-03-24
Publication date: 2007-04-25
Anticipated expiration: 2024-03-24
Also published as: JP2005277683A

Description

本発明は、パケット通信技術に関し、特に多地点間で行われるコミュニケーションに対するユーザの体感品質を推定する技術に関する。 The present invention relates to a packet communication technique, and more particularly to a technique for estimating a user's quality of experience for communication performed between multiple points.

ＩＰ電話や映像配信等のようなリアルタイム系アプリケーションサービスの普及に伴い、これらリアルタイム系アプリケーションサービスで提供されるサービス品質を推定する技術が注目されている。
このようなリアルタイム系アプリケーションサービスでは、そのサービス品質を評価し管理するため、パケットレベルで容易に計測可能で客観的な値を示すネットワーク品質だけでなく、サービスを利用するユーザが感じる主観的な品質すなわちユーザ体感品質が重要となる。 With the widespread use of real-time application services such as IP telephones and video distribution, attention has been focused on techniques for estimating the quality of services provided by these real-time application services.
In such a real-time application service, the service quality is evaluated and managed, so not only the network quality that can be easily measured at the packet level and showing objective values, but also the subjective quality felt by the user using the service. That is, the user experience quality is important.

現在、このようなリアルタイム系アプリケーションサービスで用いられる、One-to-OneやOne-to-Anyといった形態での通信において、容易に計測可能で客観的なネットワーク品質からユーザ体感品質を推定・管理する技術が研究されている。
その１つとして、発明者らは、例えばＶｏＩＰなど、パケット網におけるリアルタイム系アプリケーションの音声に対する主観的なユーザ体感品質推定技術や、それを利用したネットワーク管理技術を提案した（例えば、特許文献１、特許文献２など参照）。 Estimate and manage user experience quality from objective network quality that can be easily measured in communication in the form of One-to-One and One-to-Any currently used in such real-time application services. Technology is being researched.
As one of them, the inventors proposed a subjective user experience quality estimation technique for a voice of a real-time application in a packet network such as VoIP, and a network management technique using the same (for example, Patent Document 1, (See Patent Document 2).

このユーザ体感品質推定技術では、まず、ＩＰ電話のようなOne-to-Oneの通信や、映像配信のようなOne-to-Anyの通信（１ユーザのみに着目すればOne-to-Oneの通信）において、着目した任意の１ユーザと通信相手とを結ぶ経路上でネットワーク品質を測定・監視する。
そして、予め生成しておいた測定結果とユーザ体感品質評価値との関係を示す推定モデルを参照して、当該経路での測定結果に対応するユーザ体感品質評価値を、着目したユーザの体感品質として推定するものである。 In this user experience quality estimation technology, first of all, one-to-one communication such as IP phone and one-to-any communication such as video distribution (one-to-one if you focus on only one user) In communication), the network quality is measured and monitored on a route connecting any one noted user and a communication partner.
Then, referring to an estimation model that shows a relationship between the measurement result and the user experience quality evaluation value generated in advance, the user experience quality evaluation value corresponding to the measurement result on the route is used as the user experience quality. Is estimated.

なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
特開２００２−０６４５３９号公報特開２００４−０２３５９４号公報 The applicant has not yet found prior art documents related to the present invention by the time of filing other than the prior art documents specified by the prior art document information described in this specification.
JP 2002-064539 A JP 2004-023594 A

リアルタイム系アプリケーションサービスの１つとして、例えば、多地点ＴＶ会議や多地点ＩＰ電話会議などの多地点コミュニケーションサービスがある。この種の多地点コミュニケーションサービスでは、パケット網を介して複数の端末がAny-to-Anyの形態で多地点間でのパケット通信を行うため、パケットが通る経路が異なる。そのため、経路ごとにネットワーク品質、例えば、損失率、遅延量、遅延揺らぎ等、ネットワークの物理的（回線速度等）要因や背景負荷（他のトラヒックの利用状況）による現象が異なる。 As one of the real-time application services, for example, there is a multipoint communication service such as a multipoint TV conference or a multipoint IP conference call. In this type of multipoint communication service, since a plurality of terminals perform packet communication between multipoints in an Any-to-Any form via a packet network, the route through which the packet passes is different. For this reason, network quality, for example, a loss rate, a delay amount, delay fluctuation, and the like, a phenomenon caused by a physical (line speed, etc.) factor of the network and a background load (usage of other traffic) are different.

しかしながら、従来技術では、任意の１ユーザに着目した場合、そのユーザと通信相手間の経路上のネットワーク品質に基づきユーザ体感品質を推定するものとなっているため、多地点間でのパケット通信を行う多地点コミュニケーションサービスのように、複数ユーザのメディアデータが、ネットワーク上の複数経路から転送され、それぞれの経路に品質差がある場合には容易に適用できず、メディア全体のユーザ体感品質を推定・監視することができないという問題点があった。
本発明はこのような課題を解決するためのものであり、多地点間で行われるコミュニケーションについてユーザが体感する総合的な品質を推定し監視できる多地点コミュニケーションサービスの総合品質推定装置、方法、品質監視装置、および方法を提供することを目的としている。 However, in the conventional technology, when attention is paid to an arbitrary user, the user experience quality is estimated based on the network quality on the route between the user and the communication partner, so packet communication between multiple points is performed. Like multi-point communication services, media data of multiple users is transferred from multiple routes on the network, and when there is a quality difference between each route, it cannot be easily applied, and the user experience quality of the entire media is estimated・ There was a problem that monitoring was impossible.
The present invention is intended to solve such problems, and is a multipoint communication service total quality estimation apparatus, method, and quality that can estimate and monitor the overall quality that a user feels about communication between multipoints. It is an object to provide a monitoring device and method.

このような目的を達成するために、本発明にかかる総合品質推定装置は、パケット網上で相互に呼接続して多地点コミュニケーションを行う複数の端末ごとに設けられて、当該端末で多地点コミュニケーションを利用するユーザが他の端末との各呼について総合的に体感する総合品質を推定する総合品質推定装置であって、他の端末に設けられた総合品質推定装置と制御パケットを送受信することにより、各呼に関する各種品質管理情報をやり取りする品質管理情報通信手段と、品質管理情報通信手段により取得した各呼に関する品質管理情報に基づき所望の総合品質における各呼の重要度を示す重み情報をそれぞれ生成する重み情報生成手段と、重み情報生成手段で生成された重み情報を用いて、各呼についてユーザが個別に体感するユーザ体感品質値を補正して平均化することにより、所望の総合品質値を推定する総合品質推定手段とを備えることを特徴とするものである。 In order to achieve such an object, an overall quality estimation apparatus according to the present invention is provided for each of a plurality of terminals that perform call connection with each other on a packet network and perform multipoint communication. Is a total quality estimation device that estimates the total quality that a user who uses the terminal feels about each call with another terminal, by transmitting and receiving control packets to and from the total quality estimation device provided in the other terminal , Quality management information communication means for exchanging various quality management information about each call, and weight information indicating the importance of each call in desired overall quality based on the quality management information about each call acquired by the quality management information communication means, respectively by using the weight information generation means for generating for a weight information generated by the weight information generating means, the user individually felt user for each call By averaging to correct the QoE value, it is characterized in that and a comprehensive quality estimation means for estimating a desired overall quality value.

より具体的には、各呼に関するネットワーク品質値を測定する品質測定手段をさらに備え、重み情報生成手段で、品質管理情報通信手段により品質管理情報として取得した各呼に関するネットワーク品質値に基づき重み情報を生成するようにしてもよい。 More specifically, it further comprises quality measuring means for measuring a network quality value for each call, and the weight information generating means is weight information based on the network quality value for each call acquired as quality management information by the quality management information communication means. May be generated.

あるいは、呼ごとに、当該呼からユーザが個別に体感するユーザ体感品質値を推定するユーザ体感品質推定手段をさらに備え、重み情報生成手段で、品質管理情報通信手段により品質管理情報として取得した各呼に関するユーザ体感品質値に基づき重み情報を生成するようにしてもよい。 Alternatively, for each call, it further comprises user experience quality estimation means for estimating a user experience quality value that the user individually feels from the call, and each weight information generation means obtained as quality management information by the quality management information communication means You may make it produce | generate weight information based on the user experience quality value regarding a call.

この際、重み情報生成手段で、各ユーザ体感品質値のうち最大値を基準値とし、その基準値と他のユーザ体感品質値との差の大きさに基づきそれぞれの重み情報を生成するようにしてもよい。 At this time, the weight information generating means uses the maximum value of each user experience quality value as a reference value, and generates each weight information based on the difference between the reference value and another user experience quality value. May be.

また、本発明にかかる総合品質推定方法は、パケット網上で相互に呼接続して多地点コミュニケーションを行う複数の端末ごとに設けられた総合品質推定装置で、当該端末で多地点コミュニケーションを利用するユーザが他の端末との各呼について総合的に体感する総合品質を推定する総合品質推定方法であって、他の端末に設けられた総合品質推定装置と制御パケットを送受信することにより、各呼に関する各種品質管理情報をやり取りする品質管理情報通信ステップと、品質管理情報通信ステップにより取得した各呼に関する品質管理情報に基づき所望の総合品質における各呼の重要度を示す重み情報をそれぞれ生成する重み情報生成ステップと、重み情報生成ステップで生成された重み情報を用いて、各呼についてユーザが個別に体感するユーザ体感品質値を補正して平均化することにより、所望の総合品質値を推定する総合品質推定ステップとを備えるものである。 The total quality estimation method according to the present invention is a total quality estimation apparatus provided for each of a plurality of terminals that perform call connection to each other on a packet network and perform multipoint communication. The terminal uses multipoint communication. A total quality estimation method for estimating a total quality that a user generally feels about each call with another terminal, by transmitting and receiving a control packet to and from a total quality estimation device provided in the other terminal A quality management information communication step for exchanging various types of quality management information, and weights for generating weight information indicating the importance of each call in the desired overall quality based on the quality management information for each call acquired in the quality management information communication step using the information generating step, the weight information generated by the weight information generating step, for each call the user individually experience By averaging to correct the QoE value that is one and a comprehensive quality estimation step of estimating the desired overall quality value.

より具体的には、各呼に関するネットワーク品質値を測定する品質測定ステップをさらに備え、重み情報生成ステップで、品質管理情報通信ステップにより品質管理情報として取得した各呼に関するネットワーク品質値に基づき重み情報を生成するようにしてもよい。 More specifically, a quality measurement step for measuring a network quality value for each call is further provided, and the weight information based on the network quality value for each call acquired as quality management information by the quality management information communication step in the weight information generation step. May be generated.

あるいは、呼ごとに、当該呼からユーザが個別に体感するユーザ体感品質値を推定するユーザ体感品質推定ステップをさらに備え、重み情報生成ステップで、品質管理情報通信ステップにより品質管理情報として取得した各呼に関するユーザ体感品質値に基づき重み情報を生成するようにしてもよい。 Alternatively, for each call, a user experience quality estimation step for estimating a user experience quality value individually experienced by the user from the call is further provided. In the weight information generation step, each acquired as quality management information by the quality management information communication step You may make it produce | generate weight information based on the user experience quality value regarding a call.

この際、重み情報生成ステップで、各ユーザ体感品質値のうち最大値を基準値とし、その基準値と他のユーザ体感品質値との差の大きさに基づきそれぞれの重み情報を生成するようにしてもよい。 At this time, in the weight information generation step, the maximum value among the user experience quality values is used as a reference value, and each weight information is generated based on the difference between the reference value and other user experience quality values. May be.

また、本発明にかかる品質監視装置は、パケット網に接続されて、パケット網上で相互に呼接続した複数の端末間で行われる多地点コミュニケーションの品質監視管理を行う品質監視装置であって、上記総合品質推定方法のいずれかを用いて端末ごとに推定された総合品質値と所定の目標品質値とをそれぞれ比較して品質を監視する監視手段と、総合品質値のいずれかが目標品質値を満足していない場合は、多地点コミュニケーションの品質低下を通知する警報を出力する警報手段とを備えるものである。 The quality monitoring apparatus according to the present invention is a quality monitoring apparatus for performing quality monitoring management of multipoint communication performed between a plurality of terminals connected to each other on a packet network by being connected to the packet network, Monitoring means for monitoring the quality by comparing the total quality value estimated for each terminal with any one of the above total quality estimation methods and a predetermined target quality value, and any of the total quality values is the target quality value Is not provided, alarm means for outputting an alarm for notifying the deterioration of the quality of multipoint communication is provided.

これに加え、品質劣化の調査について、総合品質値のいずれかが目標品質値を満足していない場合は、当該総合品質値が目標品質値を満足するまで、当該総合品質値の算出に用いた各ユーザ体感品質値のうち最低値を示すユーザ体感品質値を除外して当該総合品質値の再計算を繰り返し、当該総合品質値が目標品質値を満足した時点で、それまでに除外したユーザ体感品質値に対応する呼または端末を総合品質劣化要因として通知する品質劣化調査手段を備えることを特徴とするものである。 In addition to this, if any of the total quality values does not satisfy the target quality value, the quality degradation survey was used to calculate the total quality value until the total quality value satisfied the target quality value. The user experience quality value indicating the lowest value is excluded from each user experience quality value, and the total quality value is repeatedly recalculated. When the total quality value satisfies the target quality value, the user experience excluded so far It is characterized by comprising quality deterioration investigation means for notifying a call or terminal corresponding to the quality value as an overall quality deterioration factor.

また、本発明にかかる品質監視方法は、パケット網に接続された品質監視装置で、パケット網上で相互に呼接続した複数の端末間で行われる多地点コミュニケーションの品質監視を行う品質監視方法であって、上記総合品質推定方法のいずれかを用いて端末ごとに推定された総合品質値と所定の目標品質値とをそれぞれ比較して品質を監視する監視ステップと、総合品質値のいずれかが目標品質値を満足していない場合は、多地点コミュニケーションの品質低下を通知する警報を出力する警報ステップとを備えるものである。 The quality monitoring method according to the present invention is a quality monitoring method for monitoring the quality of multipoint communication performed between a plurality of terminals connected to each other on a packet network by a quality monitoring apparatus connected to the packet network. A monitoring step for monitoring the quality by comparing the total quality value estimated for each terminal with any one of the total quality estimation methods and a predetermined target quality value, and any of the total quality values If the target quality value is not satisfied, an alarm step for outputting an alarm for notifying the deterioration of the quality of multipoint communication is provided.

これに加え、品質劣化の調査について、総合品質値のいずれかが目標品質値を満足していない場合は、当該総合品質値が目標品質値を満足するまで、当該総合品質値の算出に用いた各ユーザ体感品質値のうち最低値を示すユーザ体感品質値を除外して当該総合品質値の再計算を繰り返し、当該総合品質値が目標品質値を満足した時点で、それまでに除外したユーザ体感品質値に対応する呼または端末を総合品質劣化要因として通知する品質劣化調査ステップを備えることを特徴とするものである。 In addition to this, if any of the total quality values does not satisfy the target quality value, the quality degradation survey was used to calculate the total quality value until the total quality value satisfied the target quality value. The user experience quality value indicating the lowest value is excluded from each user experience quality value, and the total quality value is repeatedly recalculated. When the total quality value satisfies the target quality value, the user experience excluded so far It is characterized by comprising a quality deterioration investigation step for notifying a call or terminal corresponding to the quality value as an overall quality deterioration factor.

本発明によれば、多地点コミュニケーションを構成する端末のうちの任意の端末と他の端末との各呼についてユーザが体感するユーザ体感品質値が、他の端末に設けられた総合品質推定装置と制御パケットが送受信されて各呼に関する各種品質管理情報がやり取りされ、これら各呼に関する品質管理情報に基づき所望の総合品質における各呼の重要度を示す重み情報がそれぞれ生成され、これら重み情報により補正されて平均化され総合品質推定値として求められるため、多地点コミュニケーションサービスのように、複数ユーザのメディアデータがネットワーク上の複数経路から転送されるとともにそれぞれの経路に品質差がある場合でも、メディア全体の品質をユーザが体感する品質として容易に推定できる。
また、各端末での総合品質値に基づき、品質管理情報で多地点コミュニケーションの品質を一元的に監視でき、必要に応じて品質管理者が品質劣化に対応することができる。
According to the present invention, an overall quality estimation device in which a user experience quality value that a user feels about each call between an arbitrary terminal and other terminals that constitute multipoint communication is provided in another terminal; Various quality management information related to each call is exchanged by transmitting / receiving control packets, weight information indicating the importance of each call in the desired overall quality is generated based on the quality management information related to each call, and corrected by these weight information Therefore, even if media data of multiple users are transferred from multiple routes on the network and there is a quality difference between the routes, as in multipoint communication services, the media quality is calculated. The overall quality can be easily estimated as the quality experienced by the user.
In addition, based on the total quality value at each terminal, the quality of multipoint communication can be centrally monitored with the quality management information, and the quality manager can cope with quality degradation as necessary.

次に、本発明の実施の形態について図面を参照して説明する。
［第１の実施の形態］
まず、図１を参照して、本発明の一実施の形態にかかる総合品質推定装置が適用される総合品質推定システムについて説明する。図１は本発明の一実施の形態にかかる総合品質推定装置が適用される総合品質推定システムの構成例である。 Next, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
First, an overall quality estimation system to which an overall quality estimation apparatus according to an embodiment of the present invention is applied will be described with reference to FIG. FIG. 1 is a configuration example of an overall quality estimation system to which an overall quality estimation apparatus according to an embodiment of the present invention is applied.

この総合品質推定システムは、パケット網５を介して多地点コミュニケーションを行う複数のアプリケーション端末２（２Ａ〜２Ｄ）について、それぞれのアプリケーション端末２を利用するユーザが他のすべてのアプリケーション端末２との多地点コミュニケーションで実際に体感する総合的な品質を推定し監視するシステムである。
この総合品質推定システムには、アプリケーション端末２ごとに設けられて、当該アプリケーション端末２で多地点コミュニケーションを利用するユーザが体感する総合品質を推定する総合品質推定装置１Ａ〜１Ｄと、アプリケーション端末２Ａ〜２Ｄでの総合品質値を監視して多地点コミュニケーション全体の品質監視を行う品質監視装置３とから構成されている。 In this total quality estimation system, for a plurality of application terminals 2 (2A to 2D) that perform multipoint communication via the packet network 5, a user who uses each application terminal 2 is connected to all other application terminals 2 in many ways. It is a system that estimates and monitors the overall quality actually experienced by point communication.
In this total quality estimation system, total quality estimation devices 1A to 1D that are provided for each application terminal 2 and estimate the total quality experienced by a user who uses multipoint communication on the application terminal 2, and application terminals 2A to 2D It comprises a quality monitoring device 3 that monitors the overall quality value in 2D and monitors the quality of the entire multipoint communication.

アプリケーション端末２は、全体としてコンピュータからなり、各種アプリケーション（ソフトウェア）をコンピュータで実行することにより、各種コミュニケーション機能を実現する。この際、アプリケーションとしてリアルタイム系アプリケーションを実行することにより、パケット網５を介して他のアプリケーション端末２とパケット通信を行い、多地点ＴＶ会議や多地点ＩＰ電話会議などの多地点コミュニケーションを実現する。 The application terminal 2 includes a computer as a whole, and implements various communication functions by executing various applications (software) on the computer. At this time, by executing a real-time application as an application, packet communication is performed with another application terminal 2 via the packet network 5 to realize multipoint communication such as a multipoint TV conference or a multipoint IP telephone conference.

［総合品質推定装置］
次に、図２を参照して、本実施の形態にかかる総合品質推定装置１について説明する。図２は、本実施の形態にかかる総合品質推定装置１の構成を示すブロック図である。
この総合品質推定装置１（１Ａ〜１Ｄ）は、全体としてコンピュータからなり、通信インターフェース部（以下、通信Ｉ／Ｆ部という）１１、記憶部１２、および制御部１３が設けられている。 [Total quality estimation device]
Next, the total quality estimation apparatus 1 according to the present embodiment will be described with reference to FIG. FIG. 2 is a block diagram showing a configuration of the overall quality estimation apparatus 1 according to the present embodiment.
The overall quality estimation apparatus 1 (1A to 1D) is composed of a computer as a whole, and includes a communication interface unit (hereinafter referred to as a communication I / F unit) 11, a storage unit 12, and a control unit 13.

通信Ｉ／Ｆ部１１は、パケット網５を介して他の装置とパケット通信を行う回路部である。
記憶部１２は、メモリやハードディスクなどの記憶装置からなり、制御部１３での処理に用いる各種情報やプログラムを記憶する。 The communication I / F unit 11 is a circuit unit that performs packet communication with other devices via the packet network 5.
The storage unit 12 includes a storage device such as a memory or a hard disk, and stores various types of information and programs used for processing in the control unit 13.

制御部１３は、ＣＰＵなどのマイクロプロセッサとその周辺回路からなり、記憶部１２のプログラムを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させて各種機能手段を実現する機能部である。
制御部１３で実現される機能手段としては、品質管理情報通信手段１３Ａ、重み情報生成手段１３Ｂ、ユーザ体感品質生成手段１３Ｃ、総合品質推定手段１３Ｄ、品質測定手段１３Ｅ、ユーザ体感品質推定手段１３Ｆ、および情報管理手段１３Ｇがある。 The control unit 13 is composed of a microprocessor such as a CPU and its peripheral circuits, and is a functional unit that implements various functional means by cooperating the hardware and the program by reading and executing the program of the storage unit 12. is there.
Functional means realized by the control unit 13 include quality management information communication means 13A, weight information generation means 13B, user experience quality generation means 13C, total quality estimation means 13D, quality measurement means 13E, user experience quality estimation means 13F, And information management means 13G.

品質管理情報通信手段１３Ａは、他のアプリケーション端末２に設けられた総合品質推定装置１と、通信Ｉ／Ｆ部１１およびパケット網５を介して制御パケットを送受信することにより、多地点コミュニケーションを構成する他のアプリケーション端末との間の各に関する各種品質管理情報をやり取りする機能手段である。
重み情報生成手段１３Ｂは、品質管理情報通信手段１３Ａにより他のアプリケーション端末２の総合品質推定装置１から取得した各呼に関する品質管理情報に基づき、総合品質を推定する上での、他のアプリケーション端末２との呼の重要度を示す重み情報をそれぞれ得る機能手段である。 The quality management information communication unit 13A configures multipoint communication by transmitting and receiving control packets to and from the overall quality estimation apparatus 1 provided in the other application terminal 2 via the communication I / F unit 11 and the packet network 5. It is a functional means for exchanging various types of quality control information with each other application terminal.
The weight information generating unit 13B uses other application terminals for estimating the total quality based on the quality management information regarding each call acquired from the total quality estimation device 1 of the other application terminal 2 by the quality management information communication unit 13A. 2 is a functional means for obtaining weight information indicating the importance of the call 2.

ユーザ体感品質生成手段１３Ｃは、品質管理情報通信手段１３Ａにより他のアプリケーション端末２の総合品質推定装置１から取得した各呼に関する品質管理情報に基づき、各呼からユーザが個別に体感するユーザ体感品質値をそれぞれ生成する機能手段である。
総合品質推定手段１３Ｄは、総合品質における各呼の重要度を示す重み情報を用いて、各呼についてユーザが個別に体感するユーザ体感品質値を補正して平均化することにより、所望の総合品質値を推定する機能手段である。具体的には、ユーザ体感品質生成手段１３Ｃにより生成されたユーザ体感品質値を、重み情報生成手段１３Ｂから得られる重み情報を用いて補正する補正手段と、補正されたユーザ体感品質を平均化して総合品質値の推定値として出力する平均化手段とからなる。 The user experience quality generation means 13C is based on the quality management information regarding each call acquired from the total quality estimation device 1 of the other application terminal 2 by the quality management information communication means 13A, and the user experience quality that the user individually experiences from each call. It is a functional means for generating each value.
The total quality estimation means 13D corrects and averages the user experience quality values that the user individually senses for each call using the weight information indicating the importance of each call in the overall quality, thereby obtaining the desired overall quality. It is a functional means for estimating the value. Specifically, the correction means for correcting the user experience quality value generated by the user experience quality generation means 13C using the weight information obtained from the weight information generation means 13B, and the corrected user experience quality are averaged. And averaging means for outputting the estimated value of the total quality value.

品質測定手段１３Ｅは、対応するアプリケーション端末２で送受信するパケットをキャプチャして、多地点コミュニケーションでやり取りするパケットに基づき各呼ごとにネットワーク品質値を測定する機能手段である。
なお、各呼から取得されるネットワーク品質値としては、例えば、損失率、遅延量、遅延揺らぎ等、ネットワークの物理的（回線速度等）要因や背景負荷（他のトラヒックの利用状況）などがある。 The quality measuring unit 13E is a functional unit that captures a packet transmitted and received by the corresponding application terminal 2 and measures a network quality value for each call based on a packet exchanged by multipoint communication.
Note that network quality values acquired from each call include, for example, loss factors, delay amounts, delay fluctuations, etc., network physical (line speed, etc.) factors, background loads (usage of other traffic), and the like. .

ユーザ体感品質推定手段１３Ｆは、品質測定手段１３Ｅで得られたネットワーク品質に基づいて、呼ごとに、当該呼からユーザが個別に体感するユーザ体感品質値を推定する機能手段である。
情報管理手段１３Ｇは、上記各手段で得られた任意の情報を、ネットワーク管理の標準規格ＭＩＢ（Management Information Base）で規定されたＭＩＢ情報として管理し、あるいは当該アプリケーション端末２へ登録する機能手段である。 The user experience quality estimation unit 13F is a function unit that estimates, based on the network quality obtained by the quality measurement unit 13E, a user experience quality value that the user individually experiences from the call.
The information management unit 13G is a functional unit that manages arbitrary information obtained by each of the above units as MIB information defined by a network management standard MIB (Management Information Base), or registers it in the application terminal 2. is there.

［品質監視装置］
次に、図３を参照して、本実施の形態にかかる品質監視装置３について説明する。図３は品質監視装置３の構成を示すブロック図である。
この品質監視装置３は、全体としてコンピュータからなり、通信インターフェース部（以下、通信Ｉ／Ｆ部という）３１、記憶部３２、および制御部３３が設けられている。 [Quality monitoring device]
Next, the quality monitoring apparatus 3 according to the present embodiment will be described with reference to FIG. FIG. 3 is a block diagram showing the configuration of the quality monitoring device 3.
The quality monitoring device 3 is composed of a computer as a whole, and is provided with a communication interface unit (hereinafter referred to as a communication I / F unit) 31, a storage unit 32, and a control unit 33.

通信Ｉ／Ｆ部３１は、パケット網５を介して他の装置とパケット通信を行う回路部である。
記憶部３２は、メモリやハードディスクなどの記憶装置からなり、制御部３３での処理に用いる各種情報やプログラムを記憶する。 The communication I / F unit 31 is a circuit unit that performs packet communication with other devices via the packet network 5.
The storage unit 32 includes a storage device such as a memory or a hard disk, and stores various types of information and programs used for processing in the control unit 33.

制御部３３は、ＣＰＵなどのマイクロプロセッサとその周辺回路からなり、記憶部３２のプログラムを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させて各所機能手段を実現する機能部である。
制御部３３で実現される機能手段としては、監視手段３３Ａ、警報手段３３Ｂ、品質劣化調査手段３３Ｃ、情報取得手段３３Ｄ、および総合品質生成手段３３Ｅがある。 The control unit 33 includes a microprocessor such as a CPU and its peripheral circuits. The control unit 33 is a functional unit that realizes functional units at various locations by cooperating the hardware and the program by reading and executing the program of the storage unit 32. is there.
As functional means realized by the control unit 33, there are a monitoring means 33A, an alarm means 33B, a quality deterioration investigation means 33C, an information acquisition means 33D, and an overall quality generation means 33E.

監視手段３３Ａは、各総合品質推定装置１で得られた各アプリケーション端末２ごとに推定された総合品質値と所定の目標品質値とをそれぞれ比較して品質を監視する機能手段である。
警報手段３３Ｂは、総合品質値のいずれかが目標品質値を満足していない場合は、多地点コミュニケーションの品質低下を通知する警報を出力する機能手段である。 The monitoring unit 33A is a functional unit that monitors the quality by comparing the total quality value estimated for each application terminal 2 obtained by each total quality estimation device 1 with a predetermined target quality value.
The alarm means 33B is a functional means for outputting an alarm for notifying the deterioration of the quality of multipoint communication when any of the total quality values does not satisfy the target quality value.

品質劣化調査手段３３Ｃは、総合品質値のいずれかが目標品質値を満足していない場合は、当該総合品質値が目標品質値を満足するまで、当該総合品質値の算出に用いた各ユーザ体感品質値のうち最低値を示すユーザ体感品質値を除外して当該総合品質値の再計算を繰り返し、当該総合品質値が目標品質値を満足した時点で、それまでに除外したユーザ体感品質値に対応する端末を総合品質劣化要因として通知する機能手段である。 If any of the total quality values does not satisfy the target quality value, the quality deterioration investigation means 33C will determine each user experience used for calculating the total quality value until the total quality value satisfies the target quality value. The user experience quality value indicating the lowest value among the quality values is excluded, and the total quality value is repeatedly recalculated. When the total quality value satisfies the target quality value, the user experience quality value excluded so far This is a functional means for notifying the corresponding terminal as a total quality deterioration factor.

情報取得手段３３Ｄは、自装置で得られた各種情報をＭＩＢ情報として管理する総合品質推定装置１、または総合品質推定装置１で得られた各種情報をＭＩＢ情報として管理するアプリケーション端末２から、監視手段３３Ａで用いる総合品質値や当該アプリケーション端末２に関する品質管理情報などの各種情報を取得する機能手段である。
総合品質生成手段３３Ｅは、情報取得手段３３Ｄで取得された品質管理情報に基づき監視手段３３Ａで用いる総合品質値を生成する機能手段である。 The information acquisition means 33D monitors from the overall quality estimation device 1 that manages various information obtained by the own device as MIB information, or from the application terminal 2 that manages various information obtained by the overall quality estimation device 1 as MIB information. This is a functional means for acquiring various types of information such as the overall quality value used in the means 33A and the quality management information related to the application terminal 2.
The total quality generation unit 33E is a functional unit that generates a total quality value used by the monitoring unit 33A based on the quality management information acquired by the information acquisition unit 33D.

［総合品質推定装置の動作］
次に、図４を参照して、本発明の第１の実施の形態にかかる総合品質推定装置１の動作について説明する。図４は、本発明の第１の実施の形態にかかる総合品質推定装置１の動作を示すシーケンス図である。ここでは、アプリケーション端末２Ａ〜２Ｄが多地点コミュニケーションとして４者ＩＰ電話会議を行っている状態で、総合品質推定装置１Ａにおいて、対応するアプリケーション端末２Ａに関する総合品質値を推定する場合を例として説明する。 [Operation of total quality estimation device]
Next, the operation of the overall quality estimation apparatus 1 according to the first embodiment of the present invention will be described with reference to FIG. FIG. 4 is a sequence diagram showing the operation of the overall quality estimation apparatus 1 according to the first embodiment of the present invention. Here, a case will be described as an example in which the total quality value related to the corresponding application terminal 2A is estimated in the total quality estimation device 1A in a state where the application terminals 2A to 2D are performing a four-party IP conference call as multipoint communication. .

まず、各総合品質推定装置１Ｂ，１Ｃ，１Ｄは、品質測定手段１３Ｅにより、対応するアプリケーション端末２Ｂ，２Ｃ，２Ｄで送受信するパケットをキャプチャして、多地点コミュニケーションでやり取りするパケットに基づき各呼ごとにネットワーク品質値を測定する（ステップ１００）。
そして、品質測定手段１３Ｅで得られたネットワーク品質値を品質管理情報として、それぞれ品質管理情報通信手段１３Ａにより総合品質推定装置１Ａへ通知する（ステップ１０１）。 First, each total quality estimation device 1B, 1C, 1D captures a packet transmitted / received by the corresponding application terminal 2B, 2C, 2D by the quality measuring means 13E, and each call is based on a packet exchanged by multipoint communication. The network quality value is measured (step 100).
Then, the network quality value obtained by the quality measuring means 13E is notified to the overall quality estimation apparatus 1A by the quality management information communication means 13A as quality management information (step 101).

総合品質推定装置１Ａは、各総合品質推定装置１Ｂ，１Ｃ，１Ｄからの品質管理情報を品質管理情報通信手段１３Ａで取得し、重み情報生成手段１３Ｂで、これら品質管理情報ここではネットワーク品質値に基づき重み情報を生成する（ステップ１０２）。
また、ユーザ体感品質生成手段１３Ｃにより、上記品質管理情報に基づき個々の呼からユーザが個別に体感するユーザ体感品質値を生成する（ステップ１０３）。
そして、総合品質推定手段１３Ｄにより、各ユーザ体感品質値をそれぞれ対応する重み情報により補正して平均化することにより、所望の総合品質値を推定し（ステップ１０４）、一連の総合品質値推定動作を終了する。 The overall quality estimation apparatus 1A acquires the quality management information from each of the overall quality estimation apparatuses 1B, 1C, and 1D by the quality management information communication unit 13A, and the weight information generation unit 13B converts these quality management information to the network quality value here. Based on this, weight information is generated (step 102).
Further, the user experience quality generation means 13C generates a user experience quality value that the user can individually experience from each call based on the quality management information (step 103).
Then, the total quality estimation means 13D estimates the desired total quality value by correcting each user experience quality value with the corresponding weight information and averaging it (step 104), and a series of total quality value estimation operations Exit.

図５は、本発明の第１の実施の形態にかかる総合品質値推定動作を示す説明図である。
各アプリケーション端末２Ａ〜２Ｄは、他のアプリケーション端末２と相互に呼接続することにより、多地点コミュニケーションとして４者ＩＰ電話会議を実現している。この場合、アプリケーション端末２Ａと、他のアプリケーション端末２Ｂ，２Ｃ，２Ｄとの間には、呼４ＡＢ，４ＡＣ，４ＡＤがそれぞれ確立されることになる。 FIG. 5 is an explanatory diagram showing an overall quality value estimation operation according to the first embodiment of the present invention.
Each of the application terminals 2A to 2D realizes a four-party IP conference call as multipoint communication by making a call connection with another application terminal 2. In this case, calls 4AB, 4AC, and 4AD are established between the application terminal 2A and the other application terminals 2B, 2C, and 2D, respectively.

ここで、図４のステップ１０２で得られた各呼４ＡＢ，４ＡＣ，４ＡＤの重み情報をＷ(1)，Ｗ(2)，Ｗ(3)とし、図４のステップ１０３で得られた呼４ＡＢ，４ＡＣ，４ＡＤのユーザ体感品質値をＳ(1)，Ｓ(2)，Ｓ(3)とした場合、アプリケーション端末２Ａで多地点コミュニケーションを行うユーザが体感する総合品質Ｓａは、次の式（１）により求める。
Ｓａ＝(S(1)×W(1)＋S(2)×W(2)＋S(3)×W(3))／(W(1)＋W(2)＋W(3)）…（１） Here, the weight information of each call 4AB, 4AC, 4AD obtained in step 102 of FIG. 4 is set to W (1), W (2), W (3), and call 4AB obtained in step 103 of FIG. , 4AC, 4AD, when the user experience quality values are S (1), S (2), S (3), the total quality Sa experienced by the user who performs multipoint communication on the application terminal 2A is expressed by the following equation ( Obtained by 1).
Sa = (S (1) × W (1) + S (2) × W (2) + S (3) × W (3)) / (W (1) + W (2) + W (3)) (1)

この式（１）では、多地点コミュニケーションの品質を評価する上で、呼４ＡＢ，４ＡＣ，４ＡＤにおける品質がどの程度重要かを重み情報に基づき指定し、呼４ＡＢ，４ＡＣ，４ＡＤごとに得られたユーザ体感品質をそれぞれの重み情報を乗ずることで補正するとともに、その総和を重み情報の総和で除することによりその平均値を求めている。
したがって、例えば各重み情報がＷ(1)：Ｗ(2)：Ｗ(3)＝1.2：0.9：0.9で、ユーザ体感品質がＳ(1)＝3.6，Ｓ(2)＝3.2，Ｓ(3)＝3.7の場合、総合品質はＳａ＝3.51となる。 In this formula (1), in evaluating the quality of multipoint communication, the importance of the quality of the call 4AB, 4AC, 4AD is designated based on the weight information, and obtained for each call 4AB, 4AC, 4AD. The user experience quality is corrected by multiplying each weight information, and the average value is obtained by dividing the sum by the sum of the weight information.
Therefore, for example, each weight information is W (1): W (2): W (3) = 1.2: 0.9: 0.9, and the user experience quality is S (1) = 3.6, S (2) = 3.2, S (3 ) = 3.7, the total quality is Sa = 3.51.

このように、各呼からユーザが体感するユーザ体感品質値を、当該呼に関する重み情報により補正して平均化することにより、所望の総合品質値を推定するようにしたので、多地点コミュニケーションサービスのように、複数ユーザのメディアデータがネットワーク上の複数経路から転送されるとともにそれぞれの経路に品質差がある場合でも、メディア全体の品質をユーザが体感する品質として容易に推定できる。 Thus, since the user experience quality value experienced by the user from each call is corrected and averaged by correcting the weight information related to the call, the desired overall quality value is estimated. Thus, even when media data of a plurality of users are transferred from a plurality of routes on the network and there is a quality difference between the routes, the quality of the entire media can be easily estimated as the quality experienced by the user.

なお、重み情報Ｗ(1)，Ｗ(2)，Ｗ(3)については、各呼４ＡＢ，４ＡＣ，４ＡＤごとのネットワーク品質、例えば、送信パケット数を用いてその送信データ量が多い呼を重要視するようにしてもよい。この他ネットワーク品質として、損失パケット数、紛失パケット数、遅着パケット数、無効パケット率、損失パケット率、パケット遅延量、パケット遅延揺らぎ量などを用いて重み情報を生成してもよい。
この際、ネットワーク品質は、対地ごとに分類されたパケットから測定されるが、例えば映像や音声などメディアデータの種類で分類されたパケットから測定することにより、メディアごと、例えば映像と音声ごとに、詳細な総合品質を得ることができる。 For the weight information W (1), W (2), W (3), it is important to use a network quality for each call 4AB, 4AC, 4AD, for example, a call with a large amount of transmission data using the number of transmission packets. You may make it look. As other network quality, weight information may be generated using the number of lost packets, the number of lost packets, the number of late arrival packets, the invalid packet rate, the lost packet rate, the packet delay amount, the packet delay fluctuation amount, and the like.
At this time, the network quality is measured from the packet classified for each ground, but by measuring from the packet classified by the type of media data such as video and audio, for example, for each media, for example, for each video and audio, Detailed overall quality can be obtained.

また、ユーザ体感品質Ｓ(1)，Ｓ(2)，Ｓ(3)については、それぞれアプリケーション端末２Ａと他のアプリケーション端末２Ｂ，２Ｃ，２Ｄとを結ぶ呼４ＡＢ，４ＡＣ，４ＡＤに関する個別のユーザ体感品質、すなわちOne-to-Oneの通信形態のユーザ体感品質と見なせることから、公知の技術を用いて求めることができる。例えば前述した特許文献１では、予め生成しておいた測定結果とユーザ体感品質評価値（ＭＯＳ値）との関係を示す推定モデルを参照して、当該呼でのネットワーク品質の測定結果に対応するユーザ体感品質値を、着目したユーザの体感品質として推定している。 The user experience qualities S (1), S (2), and S (3) are individual user experiences related to the calls 4AB, 4AC, and 4AD connecting the application terminal 2A and the other application terminals 2B, 2C, and 2D, respectively. Since it can be regarded as the quality, that is, the user experience quality of the one-to-one communication form, it can be obtained using a known technique. For example, in Patent Document 1 described above, an estimation model indicating a relationship between a measurement result generated in advance and a user experience quality evaluation value (MOS value) is referred to, and the measurement result of the network quality in the call is dealt with. The user experience quality value is estimated as the experience quality of the focused user.

なお、以上では、総合品質推定装置１Ａに着目して、アプリケーション端末２Ａでの総合品質を推定する場合について説明したが、実際には、図４のステップ１００において、各総合品質推定装置１Ａ〜１Ｄで品質測定が行われて、ステップ１０１で各総合品質推定装置１Ａ〜１Ｄ相互間で各種品質管理情報がやり取りされ、総合品質推定装置１Ｂ，１Ｃ，１Ｄにおいても総合品質推定装置１Ａと同様にしてアプリケーション端末２Ｂ，２Ｃ，２Ｄでの総合品質が推定される。これにより、メディア全体の品質が多角的に評価できる。 In the above, the case where the total quality at the application terminal 2A is estimated has been described focusing on the total quality estimation device 1A, but actually, in step 100 of FIG. 4, each of the total quality estimation devices 1A to 1D. In step 101, various quality management information is exchanged between the overall quality estimation devices 1A to 1D, and the overall quality estimation devices 1B, 1C, and 1D are also similar to the overall quality estimation device 1A. The overall quality at the application terminals 2B, 2C, 2D is estimated. Thereby, the quality of the whole media can be evaluated from various angles.

また、他のアプリケーション端末２Ｂ，２Ｃ，２Ｄの総合品質推定装置１Ｂ，１Ｃ，１Ｄから通知されたネットワーク品質値に基づき、総合品質推定装置１Ａで重み情報を生成する場合について説明したが、これに限定されるものではなく、予め各アプリケーション端末２Ｂ，２Ｃ，２Ｄに割り当てられた総合品質に対する重要度を示す重要度情報を総合品質推定装置１Ｂ，１Ｃ，１Ｄの記憶部１２で記憶しておき、その重要度情報を重み情報として総合品質推定装置１Ａへ通知するようにしてもよい。これにより、ユーザの意図を適切に反映できるとともに、総合品質推定装置１Ａで重み情報を生成する必要がなくなり、処理負担が軽減される。 Moreover, although the case where weight information was produced | generated in 1 A of total quality estimation apparatuses was demonstrated based on the network quality value notified from the total quality estimation apparatuses 1B, 1C, and 1D of other application terminals 2B, 2C, and 2D, The degree of importance information indicating the degree of importance for the overall quality assigned to each application terminal 2B, 2C, 2D is stored in advance in the storage unit 12 of the overall quality estimation devices 1B, 1C, 1D, The importance level information may be notified to the overall quality estimation apparatus 1A as weight information. As a result, it is possible to appropriately reflect the user's intention, and it is not necessary to generate weight information in the overall quality estimation apparatus 1A, thereby reducing the processing burden.

［第２の実施の形態］
次に、図６を参照して、本発明の第２の実施の形態にかかる総合品質推定装置１の動作について説明する。なお、装置の構成については、前述した第１の実施の形態（図２参照）と同様であり、その説明は省略する。
図６は、本発明の第２の実施の形態にかかる総合品質推定装置１の動作を示すシーケンス図である。ここでは、アプリケーション端末２Ａ〜２Ｄが多地点コミュニケーションとして４者ＩＰ電話会議を行っている状態で、総合品質推定装置１Ａにおいて、対応するアプリケーション端末２Ａに関する総合品質値を推定する場合を例として説明する。 [Second Embodiment]
Next, the operation of the overall quality estimation apparatus 1 according to the second embodiment of the present invention will be described with reference to FIG. The configuration of the apparatus is the same as that of the first embodiment (see FIG. 2) described above, and a description thereof is omitted.
FIG. 6 is a sequence diagram showing an operation of the overall quality estimation apparatus 1 according to the second embodiment of the present invention. Here, a case will be described as an example in which the total quality value related to the corresponding application terminal 2A is estimated in the total quality estimation device 1A in a state where the application terminals 2A to 2D are performing a four-party IP conference call as multipoint communication. .

前述した第１の実施の形態では、呼４ＡＢ，４ＡＣ，４ＡＤに関する重み情報を、それぞれの呼に関するネットワーク品質の測定値から算出する場合を例として説明した。本実施の形態では、呼４ＡＢ，４ＡＣ，４ＡＤに関する重み情報を、それぞれの呼に関するユーザ体感品質値から算出する場合について説明する。 In the first embodiment described above, the case where the weight information related to the calls 4AB, 4AC, and 4AD is calculated from the measured values of the network quality related to the respective calls has been described as an example. In the present embodiment, a case will be described in which the weight information regarding the calls 4AB, 4AC, and 4AD is calculated from the user experience quality values regarding the respective calls.

まず、各総合品質推定装置１Ｂ，１Ｃ，１Ｄは、品質測定手段１３Ｅにより、対応するアプリケーション端末２Ｂ，２Ｃ，２Ｄで送受信するパケットをキャプチャして、多地点コミュニケーションでやり取りするパケットに基づき各呼ごとにネットワーク品質値を測定する（ステップ１１０）。
そして、ユーザ体感品質推定手段１３Ｆにより、上記ネットワーク品質値から当該呼のユーザ体感品質値を推定し（ステップ１１１）、上記ユーザ体感品質値とを品質管理情報として、それぞれ品質管理情報通信手段１３Ａにより総合品質推定装置１Ａへ通知する（ステップ１１２）。 First, each total quality estimation device 1B, 1C, 1D captures a packet transmitted / received by the corresponding application terminal 2B, 2C, 2D by the quality measuring means 13E, and each call is based on a packet exchanged by multipoint communication. The network quality value is measured (step 110).
Then, the user experience quality estimation unit 13F estimates the user experience quality value of the call from the network quality value (step 111), and the user experience quality value is used as quality management information by the quality management information communication unit 13A. Notification is made to the overall quality estimation apparatus 1A (step 112).

総合品質推定装置１Ａは、各総合品質推定装置１Ｂ，１Ｃ，１Ｄからの品質管理情報を品質管理情報通信手段１３Ａで取得し、重み情報生成手段１３Ｂで、これら品質管理情報ここではユーザ体感品質値に基づき重み情報を生成する（ステップ１１３）。
そして、総合品質推定手段１３Ｄにより、上記品質管理情報として通知された各ユーザ体感品質値をそれぞれ対応する重み情報により補正して平均化することにより、所望の総合品質値を推定し（ステップ１１４）、一連の総合品質推定動作を終了する。 The overall quality estimation device 1A acquires the quality management information from each of the overall quality estimation devices 1B, 1C, and 1D by the quality management information communication unit 13A, and the weight information generation unit 13B uses the quality management information, here the user experience quality value. The weight information is generated based on (Step 113).
Then, a desired total quality value is estimated by correcting and averaging each user experience quality value notified as the quality management information by the corresponding weight information by the total quality estimation means 13D (step 114). The series of overall quality estimation operations is terminated.

図７は、本発明の第２の実施の形態にかかる総合品質値推定動作を示す説明図である。
各アプリケーション端末２Ａ〜２Ｄは、他のアプリケーション端末２と相互に呼接続することにより、多地点コミュニケーションとして４者ＩＰ電話会議を実現している。この場合、アプリケーション端末２Ａと、他のアプリケーション端末２Ｂ，２Ｃ，２Ｄとの間には、呼４ＡＢ，４ＡＣ，４ＡＤがそれぞれ確立されることになる。 FIG. 7 is an explanatory diagram showing an overall quality value estimation operation according to the second embodiment of the present invention.
Each of the application terminals 2A to 2D realizes a four-party IP conference call as multipoint communication by making a call connection with another application terminal 2. In this case, calls 4AB, 4AC, and 4AD are established between the application terminal 2A and the other application terminals 2B, 2C, and 2D, respectively.

ここで、図６のステップ１１２で通知された各呼４ＡＢ，４ＡＣ，４ＡＤに関するユーザ体感品質値をＳ(1)，Ｓ(2)，Ｓ(3)とした場合、そのうち基準となるユーザ体感品質値を基準値Ｓrefとして選択する。例えば式（２）では、各ユーザ体感品質値Ｓ(1)，Ｓ(2)，Ｓ(3)のうち、最大値を示すものをＳrefとしている。
Ｓref＝ｍａｘ（Ｓ(1)，Ｓ(2)，Ｓ(3)）…（２） Here, when the user experience quality values regarding the calls 4AB, 4AC, and 4AD notified in step 112 of FIG. 6 are S (1), S (2), and S (3), the user experience quality that is the reference among them. The value is selected as the reference value Sref. For example, in equation (2), among the user experience quality values S (1), S (2), and S (3), the one indicating the maximum value is set as Sref.
Sref = max (S (1), S (2), S (3)) (2)

次に、式（３）に示すように、各ユーザ体感品質値Ｓ(1)，Ｓ(2)，Ｓ(3)と基準値Ｓrefとの品質差の大きさに基づきそれぞれの重み情報Ｗ(1)，Ｗ(2)，Ｗ(3)を求めている。ここで、ΔＳは単位品質値、ΔＷは単位重み値を示している。
Ｗ(ｉ)＝（Ｓref−Ｓ(ｉ））／ΔＳ×ΔＷ，（ｉ＝１，２，３）…（３）
但し、この式（３）は、上記品質差Ｓref−Ｓ(ｉ）が大きく、所定のしきい値Ｓth以上の場合にのみ適用されることとする。 Next, as shown in the equation (3), the respective weight information W () based on the magnitude of the quality difference between the user experience quality values S (1), S (2), S (3) and the reference value Sref. 1), W (2), W (3) are obtained. Here, ΔS represents a unit quality value, and ΔW represents a unit weight value.
W (i) = (Sref−S (i)) / ΔS × ΔW, (i = 1, 2, 3) (3)
However, this equation (3) is applied only when the quality difference Sref−S (i) is large and is equal to or greater than a predetermined threshold value Sth.

すなわち、この式（３）では、各ユーザ体感品質値Ｓ(1)，Ｓ(2)，Ｓ(3)と基準値Ｓrefとの品質差がしきい値Ｓth以上の場合には、重み付けの対象であると判断し、その品質差の大きさについて単位品質値ΔＳあたり単位重み値ΔＷの割合で重み情報を決定している。
このようにして、ユーザ体感品質値のいずれかについて重み情報が与えられた後、重み情報が与えられていないユーザ体感品質値について、式（４）により、全重み情報の平均値が１になるよう調整する。ここで、Ｗｓは重み付けが行われた各重み情報の総和、Ｗｎは全重み情報の数すなわち各重み情報を１と仮定したときの重み情報の総和、Ｎｒは重み付けが行われなかった重み情報の数を示す。
Ｗ（ｉ）＝（Ｗｎ−Ｗｓ）／Ｎｒ（ｉ＝１，２，３）…（４）
この式（４）により、式（３）で重み情報が与えられなかったユーザ体感品質に対して、均等に重み付けが行われることになる。 That is, in this equation (3), if the quality difference between each user experience quality value S (1), S (2), S (3) and the reference value Sref is equal to or greater than the threshold value Sth, the weighting target The weight information is determined by the ratio of the unit weight value ΔW per unit quality value ΔS for the magnitude of the quality difference.
In this way, after the weight information is given for any of the user experience quality values, the average value of all the weight information is 1 for the user experience quality value for which no weight information is given according to the equation (4). Adjust as follows. Here, Ws is the sum of the weight information that has been weighted, Wn is the total number of weight information, that is, the sum of the weight information when each weight information is assumed to be 1, and Nr is the weight information that has not been weighted. Indicates a number.
W (i) = (Wn−Ws) / Nr (i = 1, 2, 3) (4)
According to this equation (4), the user experience quality for which weight information is not given in equation (3) is weighted equally.

そして、上記重み情報Ｗ(1)：Ｗ(2)：Ｗ(3)を用いて、第１の実施の形態と同様に、式（１）により総合品質Ｓａが算出される。
したがって、例えばしきい値Ｓth＝0.3、単位品質値ΔＳ＝0.1、単位重み値ΔＷ＝0.1とし、ユーザ体感品質がＳ(1)＝3.6，Ｓ(2)＝3.2，Ｓ(3)＝3.7の場合、各重み情報はＷ(1)：Ｗ(2)：Ｗ(3)＝0.9：1.2：0.9となり、総合品質はＳａ＝3.47となる。 Then, using the weight information W (1): W (2): W (3), as in the first embodiment, the total quality Sa is calculated by the equation (1).
Therefore, for example, the threshold value Sth = 0.3, the unit quality value ΔS = 0.1, the unit weight value ΔW = 0.1, and the user experience quality is S (1) = 3.6, S (2) = 3.2, S (3) = 3.7. In this case, each weight information is W (1): W (2): W (3) = 0.9: 1.2: 0.9, and the total quality is Sa = 3.47.

このように、呼４ＡＢ，４ＡＣ，４ＡＤに関する重み情報を、それぞれの呼に関するユーザ体感品質値から算出するようにしたので、総合品質を左右する重みとして、測定で得られるネットワーク品質ではなくユーザが実際に体感する品質を利用でき、よりユーザの体感に近しい総合品質を得ることができる。
また、各ユーザ体感品質値Ｓ(1)，Ｓ(2)，Ｓ(3)と基準値Ｓrefとの品質差の大きさに基づき重みを決定するようにしたので、多地点コミュニケーションのうち品質の悪い呼に総合品質が大きく影響を受けるというポリシを実現でき、ユーザが受ける印象を総合品質に対して的確に反映できる。 As described above, the weight information related to the calls 4AB, 4AC, and 4AD is calculated from the user experience quality values related to the respective calls, so that the user actually uses the network quality obtained by measurement as the weight that affects the overall quality. Therefore, it is possible to obtain a quality that is closer to the user's experience.
In addition, since the weight is determined based on the quality difference between the user experience quality values S (1), S (2), S (3) and the reference value Sref, the quality of the multipoint communication is improved. The policy that the overall quality is greatly affected by a bad call can be realized, and the impression received by the user can be accurately reflected on the overall quality.

［第３の実施の形態］
次に、図８を参照して、本発明の第３の実施の形態にかかる品質監視装置３の動作について説明する。なお、装置の構成については、前述した第１の実施の形態（図２参照）と同様であり、その説明は省略する。
図８は、本発明の第３の実施の形態にかかる品質監視装置３の品質監視動作を示すフローチャートである。本実施の形態では、アプリケーション端末２Ａ〜２Ｄが多地点コミュニケーションとして４者ＩＰ電話会議を行っている状態で、各アプリケーション端末２Ａ〜２Ｄでの総合品質値に基づき、品質監視情報３で多地点コミュニケーションの品質を管理するようにしたものである。 [Third Embodiment]
Next, the operation of the quality monitoring apparatus 3 according to the third embodiment of the present invention will be described with reference to FIG. The configuration of the apparatus is the same as that of the first embodiment (see FIG. 2) described above, and a description thereof is omitted.
FIG. 8 is a flowchart showing the quality monitoring operation of the quality monitoring apparatus 3 according to the third embodiment of the present invention. In the present embodiment, multipoint communication is performed using quality monitoring information 3 based on the total quality value in each of application terminals 2A to 2D in a state where application terminals 2A to 2D are conducting a four-party IP conference call as multipoint communication. It is intended to manage the quality of.

品質監視装置３の制御部３３では、まず、情報取得手段３３Ｄにより、任意の総合品質推定装置１からパケット網５および通信Ｉ／Ｆ部３１を介して、当該アプリケーション端末２から各種品質監視情報を取得し（ステップ２００）、総合品質生成手段３３Ｅにより、当該アプリケーション端末２における総合品質値を推定する（ステップ２０１）。ここでは、前述した第１および第２の実施の形態を用いて総合品質値を推定すればよい。 In the control unit 33 of the quality monitoring device 3, first, the information acquisition unit 33 </ b> D receives various quality monitoring information from the application terminal 2 via the packet network 5 and the communication I / F unit 31 from any total quality estimation device 1. Obtaining (step 200), the total quality value in the application terminal 2 is estimated by the total quality generating means 33E (step 201). Here, the overall quality value may be estimated using the first and second embodiments described above.

そして、監視手段３３Ａにより、各総合品質推定値のそれぞれと予め設定されている品質目標値とを比較する（ステップ２０２）。
ここで、総合品質推定値が品質目標値を満足している場合は（ステップ２０２：ＹＥＳ）、当該アプリケーション端末２における多地点コミュニケーションの品質が正常と判断し（ステップ２０３）、ステップ２００へ戻って、次のアプリケーション端末２での品質監視の処理へ移行する。 Then, the monitoring means 33A compares each total quality estimated value with a preset quality target value (step 202).
Here, when the total quality estimated value satisfies the quality target value (step 202: YES), it is determined that the quality of multipoint communication in the application terminal 2 is normal (step 203), and the process returns to step 200. Then, the process proceeds to the quality monitoring process in the next application terminal 2.

一方、ステップ２０１において、総合品質推定値が品質目標値を満足していない場合は（ステップ２０２：ＮＯ）、品質管理者に対してアラーム音や警報表示などにより、品質劣化の旨を警報し（ステップ２０４）、ステップ２００へ戻って、次のアプリケーション端末２での品質監視の処理へ移行する。
これにより、各アプリケーション端末２Ａ〜２Ｄでの総合品質値に基づき、品質監視装置３で多地点コミュニケーションの品質を一元的に管理でき、必要に応じて品質管理者が品質劣化に対応することができる。 On the other hand, if the total quality estimated value does not satisfy the quality target value in step 201 (step 202: NO), the quality manager is warned of the quality deterioration by an alarm sound or warning display ( Step 204), returning to Step 200, the process proceeds to the quality monitoring process in the next application terminal 2.
Thereby, based on the total quality value in each application terminal 2A-2D, the quality monitoring apparatus 3 can manage the quality of multipoint communication centrally, and a quality manager can respond to quality degradation as needed. .

なお、品質劣化調査手段３３Ｃにより、どのアプリケーション端末２または呼が品質劣化の原因であるかをステップ２１０〜２１３により調査してもよい。
まず、当該総合品質値の算出に用いた各ユーザ体感品質値のうち最低値を示すユーザ体感品質値を除外し（ステップ２１０）、総合品質生成手段３３Ｅで、残りのユーザ体感品質値で当該総合品質値の再計算を行う（ステップ２１１）。 Note that it is possible to investigate which application terminal 2 or call is the cause of the quality degradation by steps 210 to 213 by the quality degradation investigation means 33C.
First, the user experience quality value indicating the lowest value is excluded from the user experience quality values used for the calculation of the overall quality value (step 210), and the overall quality generation means 33E uses the remaining user experience quality values as the overall experience values. The quality value is recalculated (step 211).

そして、品質劣化調査手段３３Ｃにより、再計算により得られた総合品質値と目標品質値とを比較し、満足していない場合は（ステップ２１２：ＮＯ）、ステップ２１０へ戻って、最低ユーザ体感品質値の除外および再計算を繰り返し行う。
一方、ステップ２１２において、再計算により得られた総合品質値が目標品質値を満足した場合は（ステップ２１２：ＹＥＳ）、それまでに除外したユーザ体感品質値に対応するアプリケーション端末または呼を、総合品質の劣化要因として品質管理者に通知し（ステップ２１３）、ステップ２００へ戻って、次のアプリケーション端末２での品質監視の処理へ移行する。 Then, the overall quality value obtained by recalculation is compared with the target quality value by the quality degradation investigation means 33C, and if not satisfied (step 212: NO), the process returns to step 210 to return to the minimum user experience quality Repeat excluding and recalculating values.
On the other hand, if the total quality value obtained by recalculation satisfies the target quality value in step 212 (step 212: YES), the application terminal or call corresponding to the user experience quality value excluded so far is The quality manager is notified of the quality degradation factor (step 213), and the process returns to step 200 to shift to the quality monitoring process in the next application terminal 2.

このように、総合品質推定値が品質目標値を満足していない場合は、当該総合品質値の算出に用いた最低ユーザ体感品質値の除外および再計算を繰り返し行うことにより、総合品質の劣化要因となっているアプリケーション端末または呼を調査するようにしたので、劣化要因を直ちに特定することができ、品質劣化に対して迅速に対応することができる。 In this way, when the total quality estimate does not satisfy the quality target value, it is possible to cause degradation of the total quality by repeatedly excluding and recalculating the minimum user experience quality value used to calculate the total quality value. Since the application terminal or the call is checked, the deterioration factor can be immediately identified, and the quality deterioration can be quickly dealt with.

以上では、品質劣化調査を前提として、品質監視装置３で総合品質を推定する場合を例として説明したが、品質劣化調査を行わない場合には、図８のステップ２００で各総合品質推定装置１から総合品質推定値を取得すればよく、図８のステップ２０１並びに総合品質生成手段３３Ｅを省くことができる。
なお、総合品質推定装置１に、外部からの指示に応じて総合品質推定値を再計算する機能が備えられている場合には、図８のステップ２１１における総合品質推定値の再計算を品質監視装置３から総合品質推定装置１へ依頼するようにしてもよい。これにより、図８のステップ２０１並びに総合品質生成手段３３Ｅを省いた場合でも、品質劣化調査を行うことができる。 In the above description, the case where the quality monitoring apparatus 3 estimates the total quality is described as an example on the premise of the quality deterioration investigation. However, when the quality deterioration investigation is not performed, each of the total quality estimation apparatuses 1 in step 200 in FIG. From this, it is sufficient to obtain the total quality estimated value, and the step 201 and the total quality generating means 33E in FIG. 8 can be omitted.
If the total quality estimation apparatus 1 has a function of recalculating the total quality estimated value in accordance with an instruction from the outside, the recalculation of the total quality estimated value in step 211 in FIG. You may make it request from the apparatus 3 to the comprehensive quality estimation apparatus 1. FIG. Thereby, even when the step 201 and the total quality generation means 33E of FIG. 8 are omitted, the quality deterioration investigation can be performed.

［品質管理情報の通知］
以上で説明した第１および第２の実施の形態では、総合品質推定装置１相互間で各種品質管理情報をやり取りする必要がある。
ネットワーク機器間で、各種管理情報をやり取りするプロトコルとして、ＩＥＴＦｄｒａｆｔＲＴＣＰＸＲのような規定がある。しかし、このプロトコルは、パケットの挙動や端末の受信状態などの管理情報を通信相手に送るためのものであり、One-to-OneやOne-to-Anyの通信形態が前提となっており、Any-to-Anyの通信形態には適用できない。 [Notification of quality control information]
In the first and second embodiments described above, various quality management information needs to be exchanged between the comprehensive quality estimation apparatuses 1.
As a protocol for exchanging various types of management information between network devices, there is a specification such as IETF draft RTCP XR. However, this protocol is for sending management information such as packet behavior and terminal reception status to the communication partner, and assumes one-to-one and one-to-any communication modes. Not applicable to any-to-any communication mode.

ここで、音声や動画などのデータストリームをリアルタイムに配送するためのデータ転送プロトコルとしてＲＴＰ（Real-time Transport Protocol）があり、ＲＴＣＰはＲＴＰでデータを送受信するためのセッションを制御するプロトコルである。
本発明では、このようなＲＴＣＰ（RTP Control Protocol）を用いた制御用パケットを、品質管理情報転送用の制御パケットとして用いる。これにより、既存のプロトコルにしたがって、Any-to-Anyの通信形態であっても、総合品質推定装置１の品質管理情報通信手段１３Ａで容易に各種品質管理情報をやり取りすることができる。なお、制御用パケットについては、上記のようなＲＴＣＰを利用せず、独自方式のものを利用してもよい。 Here, there is RTP (Real-time Transport Protocol) as a data transfer protocol for delivering data streams such as voice and moving images in real time, and RTCP is a protocol for controlling a session for transmitting and receiving data by RTP.
In the present invention, such a control packet using RTCP (RTP Control Protocol) is used as a control packet for transferring quality management information. Thereby, according to the existing protocol, even if it is an Any-to-Any communication form, various quality management information can be easily exchanged by the quality management information communication means 13A of the comprehensive quality estimation apparatus 1. As for the control packet, a unique packet may be used without using RTCP as described above.

また、第３の実施の形態では、総合品質推定装置１と品質監視装置との間でも品質管理情報をやり取りする必要がある。この場合には、ＭＩＢ（Management Information Base）情報を利用できる。
まず、総合品質推定装置１の情報管理手段１３Ｇで、上記各手段で得られた任意の情報を、ネットワーク管理の標準規格ＭＩＢで規定されたＭＩＢ情報として管理し、あるいは対応するアプリケーション端末２へ登録しておく。 In the third embodiment, it is necessary to exchange quality management information between the overall quality estimation apparatus 1 and the quality monitoring apparatus. In this case, MIB (Management Information Base) information can be used.
First, the information management means 13G of the overall quality estimation apparatus 1 manages any information obtained by the above means as MIB information defined by the network management standard MIB, or registers it in the corresponding application terminal 2. Keep it.

品質監視装置３では、パケット網５を介して所望の総合品質推定装置１あるいはアプリケーション端末２へアクセスし、ＳＮＭＰ（Simple Network Management Protocol）などのプロトコルにより所望の品質管理情報を取得すればよい。
ＳＮＭＰは、ＴＣＰ／ＩＰネットワークにおいて、ルータやコンピュータ、端末など、ネットワークに接続された通信機器をネットワーク経由で監視・制御するためのプロトコルである。制御の対象となる機器はＭＩＢと呼ばれる管理情報データベースを持っており、管理を行う機器は対象機器のＭＩＢ情報を参照して適切な設定を行うことができる。 The quality monitoring device 3 may access the desired total quality estimation device 1 or the application terminal 2 via the packet network 5 and obtain desired quality management information using a protocol such as SNMP (Simple Network Management Protocol).
SNMP is a protocol for monitoring and controlling communication devices connected to a network, such as routers, computers, and terminals, in a TCP / IP network. The device to be controlled has a management information database called MIB, and the device to be managed can make appropriate settings with reference to the MIB information of the target device.

なお、ＭＩＢ情報については、多地点コミュニケーションサービスに参加している各アプリケーション端末２や総合品質推定装置１の間を流通しているため、サービスに参加しているユーザ自身が、各種品質管理情報を確認して自身のアプリケーション端末の設定を変更することも可能である。
また、同様の理由で、多地点コミュニケーションサービスに参加している各アプリケーション端末２の中間地点で、これら制御パケットをキャプチャし、多地点コミュニケーションの品質監視を行うことも可能である。 Since MIB information is distributed among the application terminals 2 and the overall quality estimation device 1 participating in the multipoint communication service, the user himself / herself participating in the service can provide various quality management information. It is also possible to check and change the settings of its own application terminal.
For the same reason, it is also possible to capture these control packets at the intermediate point of each application terminal 2 participating in the multipoint communication service and to monitor the quality of the multipoint communication.

なお、以上の各実施の形態では、総合品質推定装置１がアプリケーション端末２に別装置として併設されている場合を前提として説明したが、総合品質推定装置１をアプリケーションの１つとして、アプリケーション端末２内に実装するようにしてもよい。より具体的には、図１の制御部１３に記載されている各機能手段を実現するプログラムを、アプリケーション端末２のコンピュータで実行することにより実現できる。
また、品質監視装置３についても同様であり、アプリケーション端末２内に実装するようにしてもよい。 In each of the above embodiments, the description has been made on the assumption that the total quality estimation device 1 is provided as a separate device in the application terminal 2. However, the total quality estimation device 1 is regarded as one of the applications, and the application terminal 2 You may make it mount in. More specifically, it can be realized by executing a program for realizing each functional unit described in the control unit 13 of FIG.
The same applies to the quality monitoring device 3 and may be implemented in the application terminal 2.

本発明の第１の実施の形態にかかる総合品質推定システムの構成を示すブロック図である。It is a block diagram which shows the structure of the comprehensive quality estimation system concerning the 1st Embodiment of this invention. 本発明の第１の実施の形態にかかる総合品質推定装置の構成を示すブロック図である。It is a block diagram which shows the structure of the comprehensive quality estimation apparatus concerning the 1st Embodiment of this invention. 本発明の第１の実施の形態にかかる品質監視装置の構成を示すブロック図である。It is a block diagram which shows the structure of the quality monitoring apparatus concerning the 1st Embodiment of this invention. 本発明の第１の実施の形態にかかる総合品質推定装置の動作を示すシーケンス図である。It is a sequence diagram which shows operation | movement of the comprehensive quality estimation apparatus concerning the 1st Embodiment of this invention. 本発明の第１の実施の形態にかかる総合品質推定装置の動作を示す説明図である。It is explanatory drawing which shows operation | movement of the comprehensive quality estimation apparatus concerning the 1st Embodiment of this invention. 本発明の第２の実施の形態にかかる総合品質推定装置の動作を示すシーケンス図である。It is a sequence diagram which shows operation | movement of the comprehensive quality estimation apparatus concerning the 2nd Embodiment of this invention. 本発明の第２の実施の形態にかかる総合品質推定装置の動作を示す説明図である。It is explanatory drawing which shows operation | movement of the comprehensive quality estimation apparatus concerning the 2nd Embodiment of this invention. 本発明の第３の実施の形態にかかる品質監視装置の動作を示すフローチャート図である。It is a flowchart figure which shows operation | movement of the quality monitoring apparatus concerning the 3rd Embodiment of this invention.

Explanation of symbols

１，１Ａ，１Ｂ，１Ｃ，１Ｄ…総合品質推定装置、２，２Ａ，２Ｂ，２Ｃ，２Ｄ…アプリケーション端末、３…品質監視装置、５…パケット網、１１…通信Ｉ／Ｆ部、１２…記憶部、１３…制御部、１３Ａ…品質管理情報通信手段、１３Ｂ…重み情報生成手段、１３Ｃ…ユーザ体感品質生成手段、１３Ｄ…総合品質推定手段、１３Ｅ…品質測定手段、１３Ｆ…ユーザ体感品質推定手段、１３Ｇ…情報管理手段、３１…通信Ｉ／Ｆ部、３２…記憶部、３３…制御部、３３Ａ…監視手段、３３Ｂ…警報手段、３３Ｃ…品質劣化調査手段、３３Ｄ…情報取得手段、３３Ｅ…総合品質生成手段。
1, 1A, 1B, 1C, 1D ... Comprehensive quality estimation device, 2, 2A, 2B, 2C, 2D ... Application terminal, 3 ... Quality monitoring device, 5 ... Packet network, 11 ... Communication I / F unit, 12 ... Memory 13, control unit, 13 A, quality management information communication means, 13 B, weight information generation means, 13 C, user experience quality generation means, 13 D, comprehensive quality estimation means, 13 E, quality measurement means, 13 F, user experience quality estimation means , 13G ... information management means, 31 ... communication I / F section, 32 ... storage section, 33 ... control section, 33A ... monitoring means, 33B ... alarm means, 33C ... quality deterioration investigation means, 33D ... information acquisition means, 33E ... Total quality generation means.

Claims

Provided for each of a plurality of terminals that perform multipoint communication by connecting to each other on a packet network, and a user who uses the multipoint communication at the terminal comprehensively experiences each call with another terminal An overall quality estimation device for estimating quality,
Quality management information communication means for exchanging various types of quality management information related to each call by transmitting and receiving control packets to and from the overall quality estimation device provided in the other terminal,
Weight information generating means for generating weight information indicating the importance of each call in desired overall quality based on the quality management information regarding each call acquired by the quality management information communication means;
Total quality estimation for estimating a desired total quality value by correcting and averaging user experience quality values that the user individually feels for each call using the weight information generated by the weight information generation means Overall quality estimation device characterized by comprising a means.

In the comprehensive quality estimation apparatus according to claim 1 ,
Quality measuring means for measuring a network quality value for each call;
The weight information generating unit generates the weight information based on a network quality value related to each call acquired as the quality management information by the quality management information communication unit.

In the comprehensive quality estimation apparatus according to claim 1 ,
A user experience quality estimation means for estimating a user experience quality value that a user individually feels from the call for each call;
The weight information generation unit generates the weight information based on a user experience quality value regarding each call acquired as the quality management information by the quality management information communication unit.

In the comprehensive quality estimation apparatus according to claim 3 ,
The weight information generating means uses the maximum value among the user experience quality values as a reference value, and generates each weight information based on a difference between the reference value and another user experience quality value. An overall quality estimation device.

A general quality estimation device provided for each of a plurality of terminals that perform call connection with each other on a packet network, and a user who uses the multipoint communication at the terminal performs a comprehensive call for each terminal. An overall quality estimation method for estimating the overall quality to be experienced physically,
A quality management information communication step of exchanging various types of quality management information related to each call by transmitting and receiving a control packet to and from a comprehensive quality estimation device provided in the other terminal;
A weight information generation step for generating weight information indicating the importance of each call in desired overall quality based on the quality management information regarding each call acquired in the quality management information communication step;
Using the weight information generated in the weight information generation step, a total quality estimation for estimating a desired total quality value by correcting and averaging the user experience quality values that the user individually experiences for each call. Overall quality estimation method characterized by comprising the steps.

The overall quality estimation method according to claim 5 ,
A quality measuring step of measuring a network quality value for each call;
The weight information generation step generates the weight information based on a network quality value related to each call acquired as the quality management information in the quality management information communication step.

The overall quality estimation method according to claim 5 ,
A user experience quality estimation step for estimating a user experience quality value that the user individually feels from the call for each call;
The weight information generation step generates the weight information based on a user experience quality value related to each call acquired as the quality management information in the quality management information communication step.

The overall quality estimation method according to claim 7 ,
The weight information generation step uses the maximum value among the user experience quality values as a reference value, and generates each weight information based on the difference between the reference value and another user experience quality value. A comprehensive quality estimation method.

A quality monitoring device for performing quality monitoring management of multipoint communication performed between a plurality of terminals connected to a packet network and connected to each other on the packet network,
A monitoring means for monitoring the quality by comparing the total quality value estimated for each terminal with a predetermined target quality value using the total quality estimation method according to any one of claims 5 to 8. When,
If any of the total quality values does not satisfy the target quality value, alarm means for outputting an alarm for notifying the deterioration of the quality of the multipoint communication ;
If any of the total quality values does not satisfy the target quality value, the user experience quality values used for calculating the total quality value until the total quality value satisfies the target quality value. The user experience quality value indicating the lowest value is excluded, the recalculation of the total quality value is repeated, and when the total quality value satisfies the target quality value, the call corresponding to the user experience quality value excluded so far Alternatively, a quality monitoring apparatus comprising quality deterioration investigation means for notifying a terminal as a general quality deterioration factor .

A quality monitoring method connected to a packet network for monitoring the quality of multipoint communications performed between a plurality of terminals connected to each other on the packet network,
A monitoring step of monitoring the quality by comparing the total quality value estimated for each terminal with a predetermined target quality value using the total quality estimation method according to any one of claims 5 to 8. When,
If any of the total quality values does not satisfy the target quality value, an alarm step for outputting an alarm for notifying the deterioration of the quality of the multipoint communication ;
If any of the total quality values does not satisfy the target quality value, the user experience quality values used for calculating the total quality value until the total quality value satisfies the target quality value. The user experience quality value indicating the lowest value is excluded, the recalculation of the total quality value is repeated, and when the total quality value satisfies the target quality value, the call corresponding to the user experience quality value excluded so far Or a quality deterioration investigation step of notifying the terminal as a general quality deterioration factor .