JP2006080783A - User body-sensible quality monitor and method - Google Patents
User body-sensible quality monitor and method Download PDFInfo
- Publication number
- JP2006080783A JP2006080783A JP2004261472A JP2004261472A JP2006080783A JP 2006080783 A JP2006080783 A JP 2006080783A JP 2004261472 A JP2004261472 A JP 2004261472A JP 2004261472 A JP2004261472 A JP 2004261472A JP 2006080783 A JP2006080783 A JP 2006080783A
- Authority
- JP
- Japan
- Prior art keywords
- quality
- user experience
- information
- call
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、パケット通信技術に関し、パケット網で実行されているリアルタイム系アプリケーションに対するユーザの体感品質を監視する技術に関する。 The present invention relates to a packet communication technique, and relates to a technique for monitoring a user's quality of experience for a real-time application running on a packet network.
IP電話や映像配信などのようなリアルタイム系のメディア情報を取り扱うサービスでは、メディア情報の転送に用いる例えばIP網などの中継網自体で通信品質が保証されない。このため、このようなサービスを利用する際に用いられるリアルタイム系アプリケーションについての品質管理技術が必要とされている。
従来、このようなリアルタイム系アプリケーションの品質を管理する技術として、メディア情報に関する例えばパケット損失率などの通信状況を示すネットワーク品質に代えて、実際にリアルタイム系アプリケーションを利用するユーザレベルでの品質すなわちユーザ体感品質を推定する技術が提案されている(例えば、非特許文献1、特許文献1,2など参照)。
In a service that handles real-time media information such as IP telephone and video distribution, the communication quality is not guaranteed in a relay network itself such as an IP network used for transferring media information. For this reason, a quality control technique for a real-time application used when using such a service is required.
Conventionally, as a technique for managing the quality of such a real-time application, the quality at the user level that actually uses the real-time application, that is, the user instead of the network quality indicating the communication status such as the packet loss rate related to the media information, that is, the user Techniques for estimating the quality of experience have been proposed (see, for example, Non-Patent Document 1, Patent Documents 1 and 2).
近年、これらリアルタイム系アプリケーションのユーザ体感品質に関する管理技術として、大規模ネットワーク中のコアノードやエッジノード、具体的には中継機能を保持するルータなどの機器で、当該ノードを通過するデータ量や回線使用率などの統計的な情報を用いて、ネットワーク品質を管理するのみではなく、リアルタイム系アプリケーションをパッシブ測定によって、呼(フロー)ごとにCall-by-callで監視する技術が検討されている(例えば非特許文献2など参照)。 In recent years, as a management technology related to the user experience quality of these real-time applications, the amount of data passing through the node and the use of lines in devices such as core nodes and edge nodes in a large-scale network, specifically routers that have a relay function. In addition to managing network quality using statistical information such as rates, technologies that monitor call-by-call for each call (flow) by passive measurement of real-time applications are being studied (for example, (See Non-Patent Document 2, etc.).
なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
しかしながら、このような従来技術は、リアルタイム系アプリケーション実行中のユーザ端末間で、ユーザ体感品質に関する情報含む品質情報を転送する技術であって、ユーザ端末にMIB(Management Information Base)として記録されたこれらの情報をSNMP(Simple Network Management Protocol)を利用することで、ネットワーク管理者が品質監視することを実現するものであった。そのため、リアルタイム系アプリケーションのユーザ体感品質を、中継網上で呼(フロー)ごとにCall-by-callで詳細かつリアルタイムに監視することができないという問題点があった。 However, such a conventional technique is a technique for transferring quality information including information related to user experience quality between user terminals that are executing a real-time application, and these are recorded as MIB (Management Information Base) on the user terminals. By using SNMP (Simple Network Management Protocol) for this information, the network administrator can monitor the quality. For this reason, the user experience quality of real-time applications cannot be monitored in detail and in real time by call-by-call for each call (flow) on the relay network.
なお、ユーザ端末や中継網上の各ノード付近にプローブを設け、リアルタイム系アプリケーションを実現するためのプロトコルである、RTP(Real time Transport Protocol ),RTCP(RTP Control Protocol),RTSP(Real Time Streaming Protocol)などのパケットをキャプチャして、パケットレベルでのアプリケーション品質を監視する技術も検討されている。 It should be noted that a probe is provided near each node on the user terminal or the relay network, and is a protocol for realizing a real-time application, such as RTP (Real time Transport Protocol), RTCP (RTP Control Protocol), RTSP (Real Time Streaming Protocol). ) And the like, and a technique for monitoring application quality at the packet level is also being studied.
しかし、このような技術はパケットレベルでの品質監視に留まっており、リアルタイム系アプリケーションに対するユーザ体感品質を監視できる技術ではない。そのため、これらの監視結果をネットワーク上のQoS制御や設備変更にフィードバックする際に、リアルタイム系アプリケーションに応じた詳細な改善点を指摘することができなかった。したがって、リアルタイム系アプリケーションの呼ごとに得たユーザ体感品質、そのユーザ体感品質の品質劣化要因、さらには中継網上における品質劣化対地など、詳細な品質管理情報を、ネットワーク上のQoS制御に効率よくフィードバックすることができないという問題点があった。 However, such technology is limited to quality monitoring at the packet level, and is not a technology that can monitor the user experience quality for real-time applications. Therefore, when these monitoring results are fed back to QoS control or equipment change on the network, it has been impossible to point out detailed improvements according to real-time applications. Therefore, detailed quality management information, such as the quality of user experience obtained for each call of a real-time application, the quality degradation factor of the quality of user experience, and the quality degradation ground on the relay network, can be efficiently used for QoS control on the network. There was a problem that feedback was not possible.
本発明はこのような課題を解決するためのものであり、リアルタイム系アプリケーションのユーザ体感品質、さらにはユーザ体感品質から得られる品質管理情報を、中継網上で呼ごとに詳細かつリアルタイムに監視することができるユーザ体感品質監視装置および方法を提供することを目的としている。 The present invention is intended to solve such problems, and monitors the user experience quality of a real-time application and further quality management information obtained from the user experience quality on a relay network in detail and in real time. An object of the present invention is to provide a user experience quality monitoring apparatus and method.
このような目的を達成するために、本発明にかかるユーザ体感品質監視装置は、リアルタイム系アプリケーションで用いる中継網を構成する中継ノードごとに設けられ、中継ノードを通過するリアルタイム系アプリケーションのパケットからリアルタイム系アプリケーションを使用するユーザが体感するユーザ体感品質を監視するユーザ体感品質監視装置であって、リアルタイム系アプリケーションの通信品質を示す品質情報と、リアルタイム系アプリケーションの品質情報からユーザ体感品質を推定するためのユーザ体感品質推定モデルとを記憶する記憶部と、当該ユーザ体感品質監視装置が設けられている中継ノードを通過する通過パケットのうちリアルタイム系アプリケーションの制御用パケットを逐次キャプチャし、制御用パケットから当該リアルタイム系アプリケーションの品質情報を抽出し、当該呼に関する分類情報と関連付けて記憶部へ格納する制御用パケットキャプチャ手段と、記憶部の品質推定モデルに基づいて、リアルタイム系アプリケーションの呼ごとに、当該呼に関する記憶部の品質情報から当該呼のユーザ体感品質をそれぞれ推定するユーザ体感品質推定手段とを備えている。 In order to achieve such an object, a user experience quality monitoring apparatus according to the present invention is provided for each relay node that constitutes a relay network used in a real-time application, and real-time from a packet of a real-time application passing through the relay node. A user experience quality monitoring device for monitoring a user experience quality experienced by a user using a system application, for estimating a user experience quality from quality information indicating communication quality of a real time system application and quality information of a real time system application A storage unit that stores a user experience quality estimation model of the user, and sequentially captures control packets for a real-time application among passing packets that pass through a relay node provided with the user experience quality monitoring device. For each call of the real-time application based on the control packet capture means that extracts the quality information of the real-time application and stores it in the storage unit in association with the classification information related to the call, and the quality estimation model of the storage unit, User experience quality estimation means for estimating the user experience quality of the call from the quality information of the storage unit related to the call.
この際、品質要素ごとにユーザ体感品質を得る場合には、記憶部で、リアルタイム系アプリケーションのユーザ体感品質を構成する複数の品質要素ごとに、当該品質要素の品質情報から当該品質要素に関するユーザ体感要素品質を推定する品質要素推定モデルをそれぞれ記憶し、ユーザ体感品質推定手段で、任意の呼についてユーザ体感品質を推定する際、品質要素ごとに、記憶部の当該品質要素の品質要素推定モデルに基づいて、当該呼に関する記憶部の当該品質要素の品質情報から当該品質要素のユーザ体感要素品質を推定するようにしてもよい。 At this time, when obtaining the user experience quality for each quality factor, the storage unit, for each of a plurality of quality factors constituting the user experience quality of the real-time application, the user experience related to the quality factor from the quality information of the quality factor. Each of the quality factor estimation models for estimating the element quality is stored, and when the user experience quality estimation means estimates the user experience quality for an arbitrary call, the quality factor estimation model of the quality element of the storage unit is stored for each quality element. Based on the quality information of the quality factor in the storage unit related to the call, the user experience factor quality of the quality factor may be estimated.
また、各品質要素を総合したユーザ体感品質を得る場合には、記憶部で、リアルタイム系アプリケーションの各ユーザ体感要素品質からこれらを総合したユーザ体感総合品質を推定する総合品質推定モデルを記憶し、ユーザ体感品質推定手段で、任意の呼についてユーザ体感品質を推定する際、記憶部の総合品質推定モデルに基づいて、当該呼に関する各ユーザ体感要素品質からユーザ体感総合品質を推定するようにしてもよい。 In addition, when obtaining the user experience quality that integrates each quality element, the storage unit stores an overall quality estimation model that estimates the user experience overall quality that combines these from each user experience element quality of the real-time application, When the user experience quality estimation means estimates the user experience quality for an arbitrary call, based on the overall quality estimation model of the storage unit, the user experience comprehensive quality may be estimated from each user experience element quality related to the call. Good.
また、品質劣化要因を特定する場合、記憶部で、品質要素ごとに当該品質要素のユーザ体感要素品質に対する目標値をそれぞれ記憶するとともに、品質情報を仲立ちとして品質要素とその品質劣化要因となるネットワーク品質との関連付けを示す品質劣化要因特定モデルを記憶し、任意の呼のユーザ体感要素品質のうち記憶部の当該目標値を満足していないユーザ体感要素品質について、記憶部の品質劣化要因特定モデルに基づき、当該品質要素に対応する品質情報を特定し、特定した品質情報のうち所定の目標値を満足していない品質情報に関連付けられているネットワーク品質を当該ユーザ体感要素品質の品質劣化要因として特定する品質劣化要因特定手段をさらに設けてもよい。 In addition, when specifying the quality degradation factor, the storage unit stores the target value for the user experience element quality of each quality element for each quality element, and the quality element and the quality degradation factor network with the quality information as an intermediary Stores a quality deterioration factor identification model indicating an association with quality, and stores a quality deterioration factor identification model of a storage unit for a user experience element quality that does not satisfy the target value of the storage unit among user experience element qualities of an arbitrary call The quality information corresponding to the quality factor is identified based on the network quality associated with the quality information that does not satisfy the predetermined target value among the identified quality information as the quality degradation factor of the user experience factor quality. You may further provide the quality degradation factor specific means to identify.
また、品質劣化対地を特定する場合、各呼のユーザ体感品質を中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定手段をさらに設けてもよい。 In addition, when specifying the quality degradation ground, the user experience quality of each call is classified and classified for each transfer path section between the relay node and the adjacent relay node, and a predetermined user experience quality target is obtained for the statistical result. You may further provide the quality degradation ground identification means which identifies whether the said transfer path area is a quality degradation ground by comparing with a value.
あるいは、各呼のユーザ体感品質を中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより品質劣化の有無をそれぞれ評価し、各転送経路区間のうち品質劣化ありと評価された転送経路区間に対する、当該対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定手段をさらに設けてもよい。 Alternatively, the user experience quality of each call is classified for each transfer path section between the relay node and its adjacent relay node, statistically processed, and the statistical result is compared with a predetermined user experience quality target value. Whether or not the transfer path section is a quality-degraded ground according to the match / mismatch with the evaluation at the opposite relay node with respect to the transfer path section evaluated as having quality deterioration among the transfer path sections. You may further provide the quality degradation ground identification means which identifies these.
また、本発明にかかるユーザ体感品質監視方法は、リアルタイム系アプリケーションで用いる中継網を構成する中継ノードごとに設けられたユーザ体感品質監視装置で、中継ノードを通過するリアルタイム系アプリケーションのパケットからリアルタイム系アプリケーションを使用するユーザが体感するユーザ体感品質を監視するユーザ体感品質監視方法であって、リアルタイム系アプリケーションの通信品質を示す品質情報と、リアルタイム系アプリケーションの品質情報からユーザ体感品質を推定するためのユーザ体感品質推定モデルとを記憶部で記憶するステップと、当該ユーザ体感品質監視装置が設けられている中継ノードを通過する通過パケットのうちリアルタイム系アプリケーションの制御用パケットを逐次キャプチャし、制御用パケットから当該リアルタイム系アプリケーションの品質情報を抽出し、当該呼に関する分類情報と関連付けて記憶部へ格納する制御用パケットキャプチャステップと、記憶部の品質推定モデルに基づいて、リアルタイム系アプリケーションの呼ごとに、当該呼に関する記憶部の品質情報から当該呼のユーザ体感品質をそれぞれ推定するユーザ体感品質推定ステップとを備えている。 The user experience quality monitoring method according to the present invention is a user experience quality monitoring apparatus provided for each relay node that constitutes a relay network used in a real time system application. A user experience quality monitoring method for monitoring a user experience quality experienced by a user using an application for estimating a user experience quality from quality information indicating communication quality of a real time application and quality information of a real time application The step of storing the user experience quality estimation model in the storage unit, and sequentially capturing and controlling the control packets of the real time system application among the passing packets passing through the relay node provided with the user experience quality monitoring device. For each call of the real-time application based on the packet capture step for control that extracts the quality information of the real-time application from the packet and stores it in the storage unit in association with the classification information related to the call, and the quality estimation model of the storage unit And a user experience quality estimation step for estimating the user experience quality of the call from the quality information of the storage unit related to the call.
この際、品質要素ごとにユーザ体感品質を得る場合には、記憶ステップで、リアルタイム系アプリケーションのユーザ体感品質を構成する複数の品質要素ごとに、当該品質要素の品質情報から当該品質要素に関するユーザ体感要素品質を推定する品質要素推定モデルをそれぞれ記憶部で記憶し、ユーザ体感品質推定ステップで、任意の呼についてユーザ体感品質を推定する際、品質要素ごとに、記憶部の当該品質要素の品質要素推定モデルに基づいて、当該呼に関する記憶部の当該品質要素の品質情報から当該品質要素のユーザ体感要素品質を推定するようにしてもよい。 At this time, when obtaining the user experience quality for each quality element, in the storage step, for each of a plurality of quality elements constituting the user experience quality of the real-time application, the user experience regarding the quality element is obtained from the quality information of the quality element. The quality factor estimation model for estimating the element quality is stored in the storage unit, and when the user experience quality is estimated for an arbitrary call in the user experience quality estimation step, for each quality element, the quality element of the quality element in the storage unit Based on the estimation model, the user experience element quality of the quality element may be estimated from the quality information of the quality element of the storage unit related to the call.
また、各品質要素を総合したユーザ体感品質を得る場合には、記憶ステップで、リアルタイム系アプリケーションの各ユーザ体感要素品質からこれらを総合したユーザ体感総合品質を推定する総合品質推定モデルを記憶部で記憶し、ユーザ体感品質推定ステップで、任意の呼についてユーザ体感品質を推定する際、記憶部の総合品質推定モデルに基づいて、当該呼に関する各ユーザ体感要素品質からユーザ体感総合品質を推定するようにしてもよい。 In addition, when obtaining the user experience quality that integrates each quality element, in the storage step, the storage unit generates an overall quality estimation model that estimates the user experience overall quality that combines these from each user experience element quality of the real-time application. When storing and estimating the user experience quality for an arbitrary call in the user experience quality estimation step, based on the overall quality estimation model of the storage unit, the user experience comprehensive quality is estimated from each user experience element quality related to the call. It may be.
また、品質劣化要因を特定する場合、記憶ステップで、品質要素ごとに当該品質要素のユーザ体感要素品質に対する目標値をそれぞれ記憶部で記憶するとともに、品質情報を仲立ちとして品質要素とその品質劣化要因となるネットワーク品質との関連付けを示す品質劣化要因特定モデルを記憶部で記憶し、任意の呼のユーザ体感要素品質のうち記憶部の当該目標値を満足していないユーザ体感要素品質について、記憶部の品質劣化要因特定モデルに基づき、当該品質要素に対応する品質情報を特定し、特定した品質情報のうち所定の目標値を満足していない品質情報に関連付けられているネットワーク品質を当該ユーザ体感要素品質の品質劣化要因として特定する品質劣化要因特定ステップをさらに設けてもよい。 In addition, when specifying the quality degradation factor, in the storage step, the target value for the user experience element quality of the quality element is stored in the storage unit for each quality element, and the quality element and its quality degradation factor are interpolated with the quality information. A storage unit stores a quality degradation factor specific model indicating an association with network quality, and stores a user experience element quality that does not satisfy the target value of the storage unit among user experience element qualities of an arbitrary call. Based on the quality degradation factor identification model, the quality information corresponding to the quality element is identified, and the network quality associated with the quality information that does not satisfy the predetermined target value among the identified quality information is determined as the user experience element. You may further provide the quality degradation factor specific step specified as a quality degradation factor of quality.
また、品質劣化対地を特定する場合、各呼のユーザ体感品質を中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定ステップをさらに設けてもよい。 In addition, when specifying the quality degradation ground, the user experience quality of each call is classified and classified for each transfer path section between the relay node and the adjacent relay node, and a predetermined user experience quality target is obtained for the statistical result. You may further provide the quality degradation ground specific step which identifies whether the said transfer path area is a quality degradation ground by comparing with a value.
あるいは、各呼のユーザ体感品質を中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより品質劣化の有無をそれぞれ評価し、各転送経路区間のうち品質劣化ありと評価された転送経路区間に対する、当該対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定ステップをさらに設けてもよい。 Alternatively, the user experience quality of each call is classified for each transfer path section between the relay node and its adjacent relay node, statistically processed, and the statistical result is compared with a predetermined user experience quality target value. Whether or not the transfer path section is a quality-degraded ground according to the match / mismatch with the evaluation at the opposite relay node with respect to the transfer path section evaluated as having quality deterioration among the transfer path sections. You may further provide the quality degradation ground identification step which identifies these.
本発明によれば、中継ノードごとに設けたユーザ体感品質監視装置で、制御用パケットキャプチャ手段により、当該中継ノードを通過する通過パケットのうちリアルタイム系アプリケーションの制御用パケットがキャプチャされ、その制御用パケットからユーザ体感品質の推定に用いる品質情報が抽出されて、当該呼に関する分類情報と関連付けて記憶部へ格納され、ユーザ体感品質推定手段により、記憶部のユーザ体感品質推定モデルに基づき各呼の品質情報から所望のユーザ体感品質が推定されるため、リアルタイム系アプリケーションのユーザ体感品質を、中継網上で呼ごとに詳細かつリアルタイムに監視することができる。 According to the present invention, in the user experience quality monitoring apparatus provided for each relay node, the control packet capture unit captures the control packet for the real-time application among the passing packets passing through the relay node, and for the control Quality information used for estimating the user experience quality is extracted from the packet, stored in the storage unit in association with the classification information related to the call, and the user experience quality estimation unit determines each call based on the user experience quality estimation model of the storage unit. Since the desired user experience quality is estimated from the quality information, the user experience quality of the real-time application can be monitored in detail and in real time for each call on the relay network.
したがって、リアルタイム系アプリケーションの呼ごとに得たユーザ体感品質、さらにはこれらユーザ体感品質に関する品質劣化要因や、これらユーザ体感品質に関する中継網上における品質劣化対地など、リアルタイム系アプリケーションに関する極めて詳細な品質管理情報を、ネットワーク上のQoS制御に効率よくフィードバックすることができ、リアルタイム系アプリケーションに対応したネットワーク品質管理を実現できる。
また、このような詳細な品質管理情報に基づき、品質劣化が確認された場合の対応として、極めて具体的な対応を早急に行うことができ、中継網に対してより適切かつ高度な品質管理サービスを提供できる。
Therefore, the user experience quality obtained for each call of the real-time application, as well as the quality degradation factors related to the user experience quality, and the quality degradation ground on the relay network related to the user experience quality, extremely detailed quality control related to the real-time application. Information can be efficiently fed back to QoS control on the network, and network quality management corresponding to real-time applications can be realized.
Also, based on such detailed quality management information, it is possible to take a very specific action as soon as possible when quality degradation is confirmed, and to provide a more appropriate and advanced quality management service for the relay network. Can provide.
次に、本発明の実施の形態について図面を参照して説明する。
[第1の実施の形態]
まず、図1を参照して、本発明の第1の実施の形態にかかるユーザ体感品質監視装置について説明する。図1は、本発明の第1の実施の形態にかかるユーザ体感品質監視装置が適用される中継網の構成例を示すブロック図である。
この中継網40は、パケット通信網からなり、各種パケットを中継転送する中継ノード20(20A〜20E)と、これら中継ノード20間を接続するリンク40A〜40Dとから構成されている。
Next, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
First, a user experience quality monitoring apparatus according to a first embodiment of the present invention will be described with reference to FIG. FIG. 1 is a block diagram showing a configuration example of a relay network to which the user experience quality monitoring apparatus according to the first embodiment of the present invention is applied.
The
中継ノード20のうち、中継ノード20A〜20Dは、それぞれリアルタイム系アプリケーションを利用可能なユーザ端末30を収容するエッジノードである。また中継ノード20Eは、リンク40A〜40Dを介して各中継ノード20A〜20Dと接続され、これら中継ノード20A〜20D間でやり取りするパケットを中継転送するコアノードである。
ユーザ体感品質監視装置10(10A〜10E)は、これら中継ノード20(20A〜20E)ごとに設けられ、当該中継ノード20を介して実行されているリアルタイム系アプリケーションのユーザ体感品質を監視する装置である。
Among the
The user experience quality monitoring apparatus 10 (10A to 10E) is an apparatus that is provided for each of the relay nodes 20 (20A to 20E) and monitors the user experience quality of a real-time application that is executed via the
本実施の形態は、ユーザ体感品質監視装置10により、リアルタイム系アプリケーション実行中に当該中継ノード20を通過する制御用パケットを逐次キャプチャし、各呼(フロー)の制御用パケットに格納されている品質情報に基づき、リアルタイム系アプリケーションを利用しているユーザが実際に体感するユーザ体感品質を呼ごとにCall-by-callで推定し、詳細かつリアルタイムにリアルタイム系アプリケーションのユーザ体感品質を監視するようにしたものである。
In this embodiment, the user experience
[ユーザ体感品質監視装置]
次に、図2を参照して、本発明の第1の実施の形態にかかるユーザ体感品質監視装置10について説明する。図2は、本発明の第1の実施の形態にかかるユーザ体感品質監視装置の構成を示すブロック図である。
このユーザ体感品質監視装置10は、全体として通信機能を有する情報処理装置からなり、通信インターフェース部(以下、通信I/F部という)11、記憶部12、および演算処理部13が設けられている。
[User experience quality monitoring device]
Next, the user experience
The user experience
通信I/F部11は、中継ノード20や中継網40との間で各種パケットを送受信する回路部である。
記憶部12は、ハードディスクやメモリからなり、演算処理部13での処理動作に用いる各種情報およびプログラム12Pを記憶する記憶装置である。これら情報およびプログラムは、通信I/F部11を介して外部の装置や記録媒体から予め取り込まれ記憶部12に格納される。
The communication I /
The
記憶部12で記憶する各種情報としては、制御用パケット管理データベース(以下、制御用パケット管理DBという)12A、品質情報管理データベース(以下、品質情報管理DBという)12B、品質要素推定モデル12C、総合品質推定モデル12D、およびユーザ体感品質管理データベース(以下、ユーザ体感品質管理DBという)12Eがある。
Various information stored in the
制御用パケット管理DB12Aは、当該ユーザ体感品質監視装置10が設けられている中継ノード20からキャプチャした、当該中継ノード20を経由するリアルタイム系アプリケーションの制御用パケットを蓄積して管理する情報である。
品質情報管理DB12Bは、制御用パケット管理DB12Aで管理している制御用パケットから抽出した品質情報を、当該リアルタイム系アプリケーションの呼(フロー)に関する分類情報と関連付けて管理する情報である。
The control
The quality
品質要素推定モデル12Cは、品質情報管理DB12Bで管理されている品質情報からユーザ体感品質を推定するための数式やパラメータからなる推定モデルである。ここでは、受聴品質、遅延、映像など、リアルタイム系アプリケーションのユーザ体感品質を構成する複数の品質要素ごとに、これら品質要素に関する個別のユーザ体感品質すなわちユーザ体感要素品質をそれぞれ推定する複数のモデルが管理されている。
総合品質推定モデル12Dは、各ユーザ体感要素品質や品質情報管理DB12Bで管理されている品質情報から、各品質要素を総合評価したユーザ体感品質すなわちユーザ体感総合品質を推定するための数式やパラメータからなる推定モデルである。
The quality
The overall
ユーザ体感品質管理DB12Eは、品質要素推定モデル12Cを用いて推定されたユーザ体感要素品質や、総合品質推定モデル12Dを用いて推定されたユーザ体感総合品質を、当該中継ノード20を経由するリアルタイム系アプリケーションの呼ごとに管理する情報である。
The user experience
演算処理部13は、CPUなどのマイクロプロセッサとその周辺回路を有し、記憶部12からプログラム12Pを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させることにより各種機能手段を構成する。
この機能手段としては、制御用パケットキャプチャ手段13A、およびユーザ体感品質推定手段13Bがある。
The
As this functional means, there is a control packet capture means 13A and a user experience quality estimation means 13B.
制御用パケットキャプチャ手段13Aは、当該ユーザ体感品質監視装置10が設けられている中継ノード20を通過する各種パケットを通信I/F部11でキャプチャし、これらパケットのうちリアルタイム系アプリケーションの所望の呼で用いられる制御用パケットを選択して、記憶部12の制御用パケット管理DB12Aへ一旦格納する機能と、制御用パケット管理DB12Aで管理されている各制御用パケットから品質情報を抽出し、当該制御用パケットの送信元アドレスや宛先アドレスからなる対地情報などの当該呼に関する分類情報と関連付けて、記憶部12の品質情報管理DB12Bへ格納する機能とを有している。
The control packet capture means 13A captures various packets passing through the
ユーザ体感品質推定手段13Bは、記憶部12の品質要素推定モデル12Cに基づいて、記憶部12の品質情報管理DB12Bで管理されている品質情報から、各ユーザ体感要素品質を呼ごとに推定する機能と、記憶部12の総合品質推定モデル12Dに基づいて、上記推定された各ユーザ体感要素品質から、ユーザ体感総合品質を呼ごとに推定する機能とを有している。
The user experience quality estimation means 13B is a function for estimating each user experience element quality for each call from the quality information managed by the quality
[第1の実施の形態の動作]
次に、図3〜図5を参照して、本発明の第1の実施の形態にかかるユーザ体感品質監視装置10のユーザ体感品質推定動作について説明する。図3は、本発明の第1の実施の形態にかかるユーザ体感品質監視装置10でのユーザ体感品質推定動作の概略フローを示す説明図である。図4は、本発明の第1の実施の形態にかかるユーザ体感品質監視装置10でのパケットキャプチャ処理を示すフローチャートである。図5は、本発明の第1の実施の形態にかかるユーザ体感品質監視装置10でのユーザ体感品質推定処理を示すフローチャートである。
[Operation of First Embodiment]
Next, the user experience quality estimation operation of the user experience
ユーザ体感品質監視装置10は、リアルタイム系アプリケーションのユーザ体感品質を呼ごとに監視するため、演算処理部13で、常時、図3に示すユーザ体感品質推定動作の動作フローを実行し、得られた各呼のユーザ体感品質を記憶部12のユーザ体感品質目標値12Fに基づき監視する。そして、演算処理部13により、定期的にあるいはその比較結果に応じて、得られたユーザ体感品質やその評価結果を所定の管理システムへ通信I/F部11を介して通知し、あるいは当該ユーザ体感品質監視装置10からオペレータへ報知する。
In order to monitor the user experience quality of the real-time system application for each call, the user experience
ユーザ体感品質監視装置10の演算処理部13は、図3の動作フローに基づきユーザ体感品質を推定する際、まず、制御用パケットキャプチャ手段13Aで、図4のパケットキャプチャ処理を実行することにより、ユーザ体感品質の推定に必要な品質情報を収集する。
制御用パケットキャプチャ手段13Aは、図4のパケットキャプチャ処理において、まず、当該ユーザ体感品質監視装置10が設けられている中継ノード20を通過するすべての通過パケット15をキャプチャする(ステップ100)。
When estimating the user experience quality based on the operation flow of FIG. 3, the
In the packet capture process of FIG. 4, the control packet capture means 13A first captures all the passing
そして、その通過パケット15のヘッダ部に記述されているプロトコル情報やポート情報を参照して、所望のリアルタイム系アプリケーション用のパケットに該当するかどうか確認し(ステップ101)、該当しない場合は(ステップ101:NO)、ステップ100へ戻って次の通過パケット15の処理を行う。
一方、通過パケット15が所望のリアルタイム系アプリケーション用のパケットに該当する場合(ステップ101:YES)、同じくプロトコル情報やポート情報を参照して、その通過パケット15が制御用パケットに該当するかどうか確認し(ステップ102)、該当しない場合は(ステップ102:NO)、ステップ100へ戻って次の通過パケット15の処理を行う。
Then, referring to the protocol information and port information described in the header part of the passing
On the other hand, when the passing
ここで、通過パケット15が制御用パケットに該当する場合(ステップ102:YES)、当該制御用パケットを記憶部12の制御パケット管理DB12Aへ一旦格納する(ステップ103)。
次に、制御用パケットキャプチャ手段13Aは、制御パケット管理DB12Aに格納されている各制御用パケットから、ユーザ体感品質の推定に用いる品質情報を抽出し(ステップ104)、抽出した品質情報を、当該制御用パケットの対地情報など当該呼に関する分類情報と関連付けて、記憶部12の品質情報管理DB12Bへ格納し(ステップ105)、ステップ100へ戻って次の通過パケット15の処理を行う。
If the passing
Next, the control packet capture means 13A extracts quality information used for estimation of the user experience quality from each control packet stored in the control
制御用パケットとしては、例えば前述した非特許文献2で規定されているRTCP(RTP Control Protocol)の制御用パケットがある。RTCPは、リアルタイム系メディア情報の転送制御に用いる品質情報を通知するためのプロトコルであり、同じくリアルタイム系メディア情報の転送を行うためのプロトコルであるRTP(Real time Transport Protocol:RFC 1889)と組み合わせて使用される。特に、RTCPでは、データのフロー(送受信)制御および送信者と受信者の情報を記述するために用いられる。 An example of the control packet is an RTCP (RTP Control Protocol) control packet defined in Non-Patent Document 2 described above. RTCP is a protocol for reporting quality information used for transfer control of real-time media information, and is combined with RTP (Real time Transport Protocol: RFC 1889), which is also a protocol for transferring real-time media information. used. In particular, RTCP is used to control data flow (transmission / reception) and to describe information about a sender and a receiver.
RTPは、リアルタイムで映像や音声などのメディア情報を運ぶパケットに時間的な情報を付加して転送するプロトコルであるが、データを転送する機能のみであり、通信の状況を伝えるような仕組みをもっていない。RTCPはこのようなRTPと組み合わせて用いられ、RTPが持っていない機能を補完する。具体的には、メディア情報の受信側がRTCPの制御用パケットを定期的に返送することで、送信側の伝送レート等の調整を行う。RTCPの制御用パケットで通知される品質情報としては、損失パケット情報のほか、バッファ溢れ情報、劣化隠蔽情報、バッファリング遅延情報、バッファサイズ情報、遅延情報などがある。 RTP is a protocol that adds temporal information to a packet carrying media information such as video and audio in real time and transfers it, but it has only a function to transfer data and does not have a mechanism to convey the communication status. . RTCP is used in combination with such RTP, and complements the functions that RTP does not have. Specifically, the media information receiving side periodically returns RTCP control packets to adjust the transmission rate on the transmitting side. The quality information notified by the RTCP control packet includes lost packet information, buffer overflow information, deterioration concealment information, buffering delay information, buffer size information, delay information, and the like.
なお、図4では、ステップ100〜103の処理と、ステップ104,105の処理とが連続して実行される場合を例として説明したが、これら2つの処理を並行させて実行してもよい。これにより、パケット転送速度が高い場合でも、通過パケット15を欠落させることなくスムーズに蓄積させることができる。
In addition, although FIG. 4 demonstrated as an example the case where the process of steps 100-103 and the process of step 104,105 were performed continuously, you may perform these two processes in parallel. Thereby, even when the packet transfer rate is high, the passing
次に、演算処理部13は、ユーザ体感品質推定手段13Bで、図5のユーザ体感品質推定処理を実行することにより、図4のパケットキャプチャ処理で収集した品質情報から呼ごとに所望のユーザ体感品質を推定する。
ユーザ体感品質推定手段13Bは、図5のユーザ体感品質推定処理において、まず、記憶部12の品質情報管理DB12Bから、各品質情報に関連付けられている対地情報などの分類情報に基づいて、所望の呼に関する任意の品質要素の品質情報を取得し(ステップ110)、記憶部12から当該品質要素の品質要素推定モデル12Cを取得する(ステップ111)。そして、この品質要素推定モデル12Cに基づき、上記品質情報からユーザ体感要素品質を推定する(ステップ112)。
Next, the
In the user experience quality estimation process of FIG. 5, first, the user experience
本実施の形態で、ユーザ体感品質の推定に用いる推定モデルは、例えば前述した特許文献1,2に開示されている公知の推定モデルと同等であり、予め実施した実験などにより、中継網から実測されたネットワーク品質とリアルタイム系アプリケーションを使用するユーザが実際に体感したユーザ体感品質との関係を、数式やパラメータでモデル化したものである。 In this embodiment, the estimation model used for the estimation of the user experience quality is equivalent to, for example, the known estimation model disclosed in Patent Documents 1 and 2 described above. The relationship between the network quality and the user experience quality actually experienced by the user using the real-time application is modeled by mathematical formulas and parameters.
この際、従来の推定モデルでは、1種類の品質パラメータ、具体的には無効パケット率によって、音声であれば受聴品質などの1つの品質要素のユーザ体感品質を推定するモデルを適用していた。
これに対して、本実施の形態では、リアルタイム系アプリケーションのユーザ体感品質をより詳細に監視するため、複数の品質要素についてそれぞれ別個の推定モデルすなわち品質要素推定モデルを予め用意し、品質要素ごとに、対応する品質要素推定モデルを用いて、当該品質要素に関する品質情報から所望のユーザ体感要素品質を推定している。
At this time, in the conventional estimation model, a model for estimating the user experience quality of one quality factor such as listening quality for speech is applied by one type of quality parameter, specifically, the invalid packet rate.
On the other hand, in this embodiment, in order to monitor the user experience quality of the real-time application in more detail, a separate estimation model, that is, a quality factor estimation model, is prepared for each of the plurality of quality factors in advance. The desired user experience element quality is estimated from the quality information regarding the quality element using the corresponding quality element estimation model.
例えば、リアルタイム系アプリケーションで音声通信を行う場合には、受聴品質だけでなく音声が伝達される際の遅延についても品質要素の1つとし、これら受信品質と遅延とについて個別の品質要素推定モデルを用意して、それぞれのユーザ体感要素品質を推定している。また、リアルタイム系アプリケーションで音声映像通信を行う場合には、さらに映像に関する品質要素が加えられ、その品質要素推定モデルにより映像に関するユーザ体感要素品質が推定されることになる。 For example, when voice communication is performed in a real-time application, not only the listening quality but also the delay when voice is transmitted is one of the quality factors, and individual quality factor estimation models for these reception quality and delay are used. Prepared to estimate each user experience element quality. In addition, when audio-video communication is performed using a real-time application, a quality factor related to video is further added, and the user experience factor quality related to video is estimated by the quality factor estimation model.
図6は、受聴品質に関するユーザ体感要素品質の推定に用いる品質要素推定モデルの一例を示すグラフである。図7は、遅延に関するユーザ体感要素品質の推定に用いる品質要素推定モデルの一例を示すグラフである。
これらグラフでは、横軸に当該品質要素に関する品質情報の値がとられ、縦軸には、当該品質要素のユーザ体感品質の値がとられている。
FIG. 6 is a graph showing an example of a quality factor estimation model used for estimating user experience factor quality related to listening quality. FIG. 7 is a graph showing an example of a quality factor estimation model used for estimation of user experience factor quality related to delay.
In these graphs, the horizontal axis represents the value of quality information related to the quality element, and the vertical axis represents the value of the user experience quality of the quality element.
したがって、実測により得られた両者の関係をグラフにプロットし、その特性を代表する関数を導出することにより、品質要素推定モデルが得られる。図6では、受聴品質に関する品質情報a(QIcapa)から受聴品質を示す品質要素A(SQEcmpA)を算出する関数f(QIcapa)が品質要素推定モデルとして導出されている。また、図7では、遅延に関する品質情報b(QIcapb)から遅延を示す品質要素B(SQEcmpB)を算出する関数g(QIcapb)が品質要素推定モデルとして導出されている。 Therefore, a quality factor estimation model can be obtained by plotting the relationship between the two obtained by actual measurement on a graph and deriving a function representative of the characteristic. In FIG. 6, the function f (QIcap a ) for calculating the quality factor A (SQEcmpA) indicating the listening quality from the quality information a (QIcap a ) regarding the listening quality is derived as the quality factor estimation model. In FIG. 7, a function g (QIcap b ) for calculating a quality factor B (SQEcmpB) indicating a delay from quality information b (QIcap b ) relating to the delay is derived as a quality factor estimation model.
このようにして、ステップ110〜112が繰り返し実行されて、品質推定の対象となる所望の呼について、それぞれの品質要素ごとにユーザ体感要素品質が推定される。
そして、得られたユーザ体感要素品質をそれぞれの呼の対地情報などの分類情報と関連付けて、記憶部12のユーザ体感品質管理DB12Eへ格納する(ステップ113)。
In this way, Steps 110 to 112 are repeatedly executed, and the user experience element quality is estimated for each quality element for a desired call to be subjected to quality estimation.
Then, the obtained user experience element quality is associated with classification information such as ground information of each call and stored in the user experience
次に、ユーザ体感品質推定手段13Bは、記憶部12から総合品質推定モデル12Dを取得し(ステップ114)、この総合品質推定モデル12Dに基づき、前述のステップ110〜113で得られた各品質要素のユーザ体感要素品質から、ユーザ体感総合品質を推定する(ステップ115)。
本実施の形態におけるユーザ体感総合品質は、各ユーザ体感要素品質を統合して、当該リアルタイム系アプリケーションに関するユーザ体感品質を総合的に評価するためのものであり、ユーザ体感要素品質と同様にして予め生成した推定モデルを用いて推定する。
Next, the user experience quality estimation means 13B acquires the overall
The user experience total quality in the present embodiment is for integrating each user experience element quality and comprehensively evaluating the user experience quality related to the real-time application. Estimation is performed using the generated estimation model.
例えば、リアルタイム系アプリケーションで音声通信を行う場合、前述した図6および図7で示した品質要素Aすなわち受聴品質SQEcmpAと、品質要素Bすなわち遅延SQEcmpBとをパラメータとして、所望の総合品質SQEを求める関数h(SQEcmpA,SQEcmpB)を導出し、これを総合品質推定モデル12Dとして用いればよい。
なお、総合品質推定モデル12Dに関しては、例えば、音声品質推定であれば、前述した非特許文献1のITU−T勧告 G.107 E−modelなどを適用しても構わない。
For example, when voice communication is performed in a real-time application, a function for obtaining a desired overall quality SQE using the quality factor A, that is, the listening quality SQEcmpA and the quality factor B, that is, the delay SQEcmpB shown in FIGS. h (SQEcmpA, SQEcmpB) may be derived and used as the total
Regarding the overall
また、関数hは、個々の品質要素推定モデル12Cすなわち関数f(QIcapa)と関数g(QIcapb)を用いて、h{f(QIcapa),g(QIcapb)}と表すこともできる。
したがって、前述したステップ115において、各品質要素のユーザ体感要素品質ではなく、品質要素推定モデル12Cと総合品質推定モデル12Dとを用いて、元の品質情報からユーザ体感総合品質を求めてもよく、この場合、品質要素推定モデル12Cと総合品質推定モデル12Dとを予め合成したものを総合品質推定モデル12Dとして用いてもよい。
The function h can also be expressed as h {f (QIcapa), g (QIcapb)} using the individual quality
Therefore, in
このようにして得られたユーザ体感総合品質をそれぞれの対地情報などの分類情報と関連付けて、記憶部12のユーザ体感品質管理DB12Eへ格納する(ステップ116)。
これにより、所望の呼に関するユーザ体感要素品質とユーザ体感総合品質とが推定され、前述したステップ110〜116が繰り返し実行されて、推定対象となる各呼についてユーザ体感要素品質とユーザ体感総合品質とが推定され、記憶部12のユーザ体感品質管理DB12Eへ格納される。
The user experience total quality thus obtained is stored in the user experience
As a result, the user experience element quality and the user experience total quality related to the desired call are estimated, and the above-described
このように、本実施の形態では、中継網40を構成する中継ノード20ごとに設けたユーザ体感品質監視装置10で、制御用パケットキャプチャ手段13Aにより、当該中継ノード20を通過する通過パケットのうちリアルタイム系アプリケーションの制御用パケットをキャプチャし、その制御用パケットからユーザ体感品質の推定に用いる品質情報を抽出して、当該呼に関する分類情報と関連付けて記憶部12の品質情報管理DB12Bへ格納し、ユーザ体感品質推定手段13Bにより、品質推定モデルに基づき各呼の品質情報から所望のユーザ体感品質を推定するようにしたので、推定された各呼のユーザ体感品質に基づき、リアルタイム系アプリケーションのユーザ体感品質を、中継網上で呼ごとに詳細かつリアルタイムに監視することができる。
As described above, in the present embodiment, the user experience
また、それぞれのリアルタイム系アプリケーションのユーザ体感品質を構成する品質要素ごとに、その品質要素推定モデルを用いて、当該品質要素に関する品質情報からユーザ体感品質としてユーザ体感要素品質をそれぞれ推定するようにしたので、ユーザ体感品質目標値12Fで各品質要素ごとに個別の目標値を設定しておくことにより、リアルタイム系アプリケーションの呼ごとのユーザ体感品質を、品質要素ごとにより詳細に監視することができる。
また、総合品質推定モデルを用いて、リアルタイム系アプリケーションのユーザ体感総合品質を推定するようにしたので、ユーザ体感品質目標値12Fで総合品質の目標値を設定しておくことにより、ユーザ体感品質に対する総合評価に基づき、リアルタイム系アプリケーションのユーザ体感品質を監視できる。
In addition, for each quality factor constituting the user experience quality of each real-time application, the user experience element quality is estimated as the user experience quality from the quality information related to the quality element using the quality element estimation model. Therefore, by setting an individual target value for each quality factor with the user experience
In addition, since the user experience overall quality of the real-time application is estimated using the overall quality estimation model, by setting the target value of the overall quality with the user experience
[第2の実施の形態]
次に、図8を参照して、本発明の第2の実施の形態にかかるユーザ体感品質監視装置について説明する。図8は、本発明の第2の実施の形態にかかるユーザ体感品質監視装置の構成を示すブロック図であり、図1と同じまたは同等部分には同一符号を付してある。
本実施の形態では、前述した第1の実施の形態で得られた各ユーザ体感要素品質から、ネットワーク品質レベルで品質劣化要因を特定するようにしたものである。
[Second Embodiment]
Next, a user experience quality monitoring apparatus according to the second embodiment of the present invention will be described with reference to FIG. FIG. 8 is a block diagram showing the configuration of the user experience quality monitoring apparatus according to the second embodiment of the present invention, in which the same or equivalent parts as in FIG.
In the present embodiment, the quality degradation factor is specified at the network quality level from the user experience element qualities obtained in the first embodiment described above.
本実施の形態にかかるユーザ体感品質監視装置10は、前述した第1の実施の形態(図2参照)の構成を有しており、さらに演算処理部13に品質劣化要因特定手段13Cが追加されているとともに、記憶部12に品質劣化要因特定モデル12Gが追加されている。なお、前述した第1の実施の形態と同等部分についての説明は省略する。
The user experience
記憶部12の品質劣化要因特定モデル12Gは、リアルタイム系アプリケーションごとに設けられ、品質情報を仲立ちとして品質要素とその劣化要因となるネットワーク品質とを関連付けるためのモデルである。図9は、音声通信に用いられるリアルタイム系アプリケーションにおける品質劣化要因特定モデルの一例である。
図9の品質劣化要因特定モデル12Gでは、品質要素の種別の1つである「受聴品質」が、制御用パケットから抽出される各種品質情報のうち「損失パケット情報」、「バッファ溢れ情報」、「劣化隠蔽情報」、および「バッファサイズ情報」という種別に関連付けられており、もう1つの品質要素である「遅延」が、各種品質情報のうち「バッファリング遅延情報」、「バッファサイズ情報」、および「遅延」という種別に関連付けられている。
The quality degradation
In the quality degradation
次に、品質情報の種別のうち「損失パケット情報」は、ネットワーク品質の種別うち「パケット損失」という劣化要因に関連付けられている。また、品質情報の種別のうち「バッファ溢れ情報」、「劣化隠蔽情報」、「バッファリング遅延情報」、「バッファサイズ情報」、および「遅延」は、ネットワーク品質の種別のうち「遅延揺らぎ」という劣化要因に関連付けられている。このうち「遅延」については、ネットワーク品質の種別のうち「遅延」という劣化要因に関連付けられている。
これら関連付けに関する規則は、例えば提供サービスの内容や管理者のポリシーなどに基づきリアルタイム系アプリケーションごとに個別に決定される。
Next, “lost packet information” among the types of quality information is associated with a deterioration factor “packet loss” among the types of network quality. Among the types of quality information, “buffer overflow information”, “deterioration concealment information”, “buffering delay information”, “buffer size information”, and “delay” are “delay fluctuation” among types of network quality. Associated with deterioration factors. Among these, “delay” is associated with a deterioration factor of “delay” among types of network quality.
The rules regarding these associations are individually determined for each real-time application based on, for example, the contents of the provided service and the administrator's policy.
演算処理部13の品質劣化要因特定手段13Cは、記憶部12の品質劣化要因特定モデル12Gを用いて、ユーザ体感品質推定手段13Bで推定した各呼のユーザ体感要素品質ごとに、当該品質の劣化要因を特定する機能を有しており、その特定結果を当該ユーザ体感要素品質に関連付けて記憶部12のユーザ体感品質管理DB12Eへ格納する。
The quality deterioration
[第2の実施の形態の動作]
次に、図10および図11を参照して、本発明の第2の実施の形態にかかるユーザ体感品質監視装置10の品質劣化要因特定動作について説明する。図10は、本発明の第2の実施の形態にかかるユーザ体感品質監視装置10での品質劣化要因特定動作の概略フローを示す説明図である。図11は、本発明の第2の実施の形態にかかるユーザ体感品質監視装置10での品質劣化要因特定処理を示すフローチャートである。
[Operation of Second Embodiment]
Next, the quality deterioration factor specifying operation of the user experience
ユーザ体感品質監視装置10の演算処理部13は、前述した第1の実施の形態により、リアルタイム系アプリケーションの呼ごとにユーザ体感要素品質を推定した後、品質劣化要因特定手段13Cで、図11の品質劣化要因特定処理を実行することにより、劣化したユーザ体感要素品質に関する品質劣化要因を特定する。
品質劣化要因特定手段13Cは、図11の品質劣化要因特定処理において、まず、記憶部12のユーザ体感品質管理DB12Eから、処理対象となる呼のユーザ体感要素品質のいずれかを取得し(ステップ120)、記憶部12のユーザ体感品質目標値12Fを参照して、対応する品質要素の目標値と比較する(ステップ121)。
The
In the quality deterioration factor specifying process of FIG. 11, the quality deterioration
ここで、当該ユーザ体感要素品質が目標値を満足していない場合(ステップ122:YES)、記憶部12から品質劣化要因特定モデル12Gを取得し(ステップ123)、この品質劣化要因特定モデル12Gに基づき、当該品質要素と関連付けられている品質情報を特定する(ステップ124)。
次に、品質劣化要因特定手段13Cは、所定の要因振り分けアルゴリズムに基づき、これら品質情報と関連付けられているいずれかのネットワーク品質を、当該ユーザ体感要素品質の品質劣化要因として特定する。
Here, when the user experience element quality does not satisfy the target value (step 122: YES), the quality deterioration
Next, the quality deterioration
この要因振り分けアルゴリズムでは、まず、ステップ124で特定された品質情報を、記憶部12の品質情報管理DB12Bからそれぞれ取得し(ステップ125)、品質情報ごとにそれぞれの品質情報目標値と比較し、品質劣化している品質情報を選択する(ステップ126)。このとき比較に用いる品質情報目標値は、記憶部12に予め格納しておいてもよく、あるいはユーザ体感品質目標値12Fから逆算したものを用いてもよい。図12は、受聴品質に関する品質要素目標値と品質情報目標値との関係を示す説明図である。図13は、遅延に関する品質要素目標値と品質情報目標値との関係を示す説明図である。それぞれユーザ体感要素品質を評価するための品質要素目標値から推定モデルを逆に辿ることにより、品質情報における目標値として品質情報目標値を得ることができる。
In this factor distribution algorithm, first, the quality information specified in
このようにして、品質情報目標値を満足していない品質情報を選択した後、選択された品質情報に関連付けされているネットワーク品質を、品質劣化要因特定モデル12Gに基づき当該ユーザ体感要素品質の品質劣化要因として特定し(ステップ127)、その特定結果すなわち品質劣化要因を当該ユーザ体感要素品質に関連付けて、ユーザ体感品質管理DB12Eへ格納する(ステップ128)。
In this way, after selecting quality information that does not satisfy the quality information target value, the network quality associated with the selected quality information is converted into the quality of the user experience element quality based on the quality degradation
また、ステップ122において、当該ユーザ体感要素品質が品質目標値を満足している場合(ステップ122:YES)、品質劣化要因なしと特定し(ステップ129)、その特定結果を当該ユーザ体感要素品質に関連付けて、ユーザ体感品質管理DB12Eへ格納する(ステップ128)。
これにより、所望の呼の任意のユーザ体感要素品質に関する品質劣化要因の特定処理が終了し、ステップ120へ戻って、前述したステップ120〜129が各呼のユーザ体感要素品質ごとに繰り返し実行される。
In
As a result, the process of identifying the quality deterioration factor related to the desired user experience element quality of the desired call is completed, and the process returns to step 120, and the above-described
このように、本実施の形態では、ユーザ体感品質監視装置10で、品質劣化要因特定手段13Cにより、前述した第1の実施の形態で推定された各呼のユーザ体感要素品質のうち、それぞれの品質要素目標値を満足していないものについて、記憶部12の品質劣化要因特定モデル12Gで関連付けられている品質情報を特定し、この品質情報のうちそれぞれの品質情報目標値を満足していないものについて、当該品質情報に関連付けられているネットワーク品質を当該ユーザ体感要素品質の品質劣化要因として特定するようにしたので、個々のユーザ体感品質についての善し悪しだけでなく、その品質劣化要因をネットワーク品質レベルで特定することができる。したがって、品質劣化が確認された場合の対応として、この品質劣化要因に基づき具体的な対応を早急に行うことができ、中継網に対してより適切かつ高度な品質管理サービスを提供できる。
As described above, in the present embodiment, the user experience
[第3の実施の形態]
次に、図14を参照して、本発明の第3の実施の形態にかかるユーザ体感品質監視装置について説明する。図14は、本発明の第3の実施の形態にかかるユーザ体感品質監視装置の構成を示すブロック図であり、図1と同じまたは同等部分には同一符号を付してある。
本実施の形態では、前述した第1の実施の形態で得られた呼ごとのユーザ体感品質から、中継網40における品質劣化対地を特定するようにしたものである。
[Third Embodiment]
Next, a user experience quality monitoring apparatus according to a third embodiment of the present invention will be described with reference to FIG. FIG. 14 is a block diagram showing the configuration of the user experience quality monitoring apparatus according to the third embodiment of the present invention, in which the same or equivalent parts as in FIG.
In the present embodiment, the quality degradation ground in the
本実施の形態にかかるユーザ体感品質監視装置10は、前述した第1の実施の形態(図2参照)の構成を有しており、さらに演算処理部13に品質劣化対地特定手段13Dが追加されているとともに、記憶部12に品質劣化対地評価結果12Hが追加されている。なお、前述した第1の実施の形態と同等部分についての説明は省略する。
The user experience
演算処理部13の品質劣化対地特定手段13Dは、ユーザ体感品質推定手段13Bで推定した各呼のユーザ体感品質をリアルタイム系アプリケーションの各転送経路区間(有向リンク)ごとに分類して統計処理し、その統計結果について記憶部12のユーザ体感品質目標値12Fでそれぞれ評価し、その評価結果を記憶部12の品質劣化対地評価結果12Hへ格納する機能と、各転送経路区間のうち評価結果が品質劣化ありを示す転送経路区間に対する、対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定する機能とを有している。
The quality degradation
[第3の実施の形態の動作]
次に、図15および図16を参照して、本発明の第3の実施の形態にかかるユーザ体感品質監視装置10の品質劣化対地特定動作について説明する。図15は、本発明の第3の実施の形態にかかるユーザ体感品質監視装置10での品質劣化対地特定動作の概略フローを示す説明図である。図16は、本発明の第3の実施の形態にかかるユーザ体感品質監視装置10での品質劣化対地特定処理を示すフローチャートである。
[Operation of Third Embodiment]
Next, with reference to FIG. 15 and FIG. 16, the quality deterioration ground identification operation | movement of the user experience
ユーザ体感品質監視装置10の演算処理部13は、前述した第1の実施の形態により、リアルタイム系アプリケーションの呼ごとにユーザ体感要素品質を推定した後、品質劣化対地特定手段13Dで、図16の品質劣化対地特定処理を実行することにより、劣化したユーザ体感要素品質に関する品質劣化対地を特定する。
品質劣化対地特定手段13Dは、図16の品質劣化対地特定処理において、まず、記憶部12のユーザ体感品質管理DB12Eから、各呼のユーザ体感品質をそれぞれ取得し(ステップ130)、それぞれのユーザ体感品質の経路情報に基づき、中継網40上における当該中継ノード20とその隣接中継ノード20との間の転送経路区間(有向リンク)ごとに分類する(ステップ131)。
The
In the quality deterioration ground identification process of FIG. 16, the quality degradation ground identification means 13D first acquires the user experience quality of each call from the user experience
この際、各呼のユーザ体感品質は、当該中継ノード20を通過する転送経路に対応するものであり、当該中継ノードから見た場合、当該中継ノードへ向かう転送経路区間と当該中継ノードから出て行く転送経路区間を通過することになる。したがって、1つのユーザ体感品質は、上記2つの転送経路区間へそれぞれ分類されることになる。
At this time, the user experience quality of each call corresponds to the transfer route passing through the
次に、転送経路区間ごとに分類されたそれぞれのユーザ体感品質の値について、平均値、分散、標準偏差、最大/最小値などの統計処理し(ステップ132)、得られた統計結果について、記憶部12のユーザ体感品質目標値12Fと比較して品質劣化の有無を評価する(ステップ133)。そして、各転送経路区間の評価結果を、記憶部12の品質劣化対地評価結果12Hへ格納する(ステップ134)。
Next, statistical processing such as an average value, variance, standard deviation, maximum / minimum value is performed for each value of user experience quality classified for each transfer path section (step 132), and the obtained statistical result is stored. The presence or absence of quality degradation is evaluated by comparing with the user experience
図17に、中継ノード20Eで得られた品質劣化対地評価結果12Hの一例を示す。ここでは、中継ノード20Eに接続されているリンク40A〜40Dに対応した有向の転送経路区間「A→E」,「B→E」,「C→E」,「D→E」,「E→A」,「E→B」,「E→C」,「E→D」ごとに、「総合品質」,「品質要素A」,「品質要素B」に対する評価結果として、品質劣化の有無を示す「×:品質劣化あり」,「○:品質劣化なし」が格納されている。
これにより、各呼のユーザ体感品質から各転送経路区間に対する品質劣化の有無を得ることができる。
FIG. 17 shows an example of the quality degradation
As a result, it is possible to obtain the presence or absence of quality deterioration for each transfer path section from the user experience quality of each call.
品質劣化対地特定手段13Dは、このようにして各転送経路区間の評価結果を品質劣化対地評価結果12Hへ格納した後、品質劣化ありと評価されてリアルタイム系アプリケーションを実行する上でボトルネックとなる転送経路すなわち「×」が存在するか確認し(ステップ135)、存在しない場合は(ステップ135:NO)、一連の品質劣化対地特定処理を終了する。
一方、図17の「総合品質」および「品質要素A」における転送経路区間「B→E」のように、ボトルネックとなる転送経路区間「×」が存在する場合(ステップ135:YES)、当該転送経路区間に対する評価結果をボトルネック情報16として当該対向ノードへ通知して問い合わせを行う(ステップ136)。
The quality degradation ground identification means 13D stores the evaluation result of each transfer path section in the quality degradation
On the other hand, when there is a transfer path section “x” that becomes a bottleneck, such as the transfer path section “B → E” in “total quality” and “quality element A” in FIG. 17 (step 135: YES), An inquiry is made by notifying the opposite node of the evaluation result for the transfer path section as bottleneck information 16 (step 136).
これにより、例えば転送経路区間「B→E」については、中継ノード20Eの対向ノードとなる中継ノード20Bへ中継ノード20Eから問い合わせが行われ、これに応じて中継ノード20Bで上記と同様にして当該転送経路区間について評価した評価結果と中継ノード20Eでの評価結果とが比較され、その一致不一致が返送される。
品質劣化対地特定手段13Dは、対向ノードから評価一致が返送されてきた場合(ステップ137:YES)、当該転送経路区間の両端の中継ノードで当該転送経路区間の品質劣化が確認されたことから、当該転送経路区間を品質劣化対地として特定し(ステップ138)、品質劣化対地評価結果12Hの当該転送経路区間に対する評価を確定して(ステップ139)、一連の品質劣化対地特定処理を終了する。
As a result, for example, for the transfer route section “B → E”, an inquiry is made from the
When the evaluation match is returned from the opposite node (step 137: YES), the quality degradation
また、ステップ137において、対向ノードから評価不一致が返送されてきた場合(ステップ137:NO)、当該転送経路区間の両端の中継ノードで当該転送経路区間の品質劣化が確認されなかったことから、当該転送経路区間を品質劣化対地ではないと判断し、品質劣化対地評価結果12Hの当該転送経路に対する評価を確定して(ステップ139)、一連の品質劣化対地特定処理を終了する。
In addition, when an evaluation mismatch is returned from the opposite node in Step 137 (Step 137: NO), the quality degradation of the transfer path section has not been confirmed at the relay nodes at both ends of the transfer path section. It is determined that the transfer path section is not the quality degradation ground, the evaluation of the quality degradation
このように、本実施の形態では、ユーザ体感品質監視装置10で、品質劣化対地特定手段13Dにより、前述した第1の実施の形態で推定された各呼のユーザ体感品質をリアルタイム系アプリケーションの転送経路区間ごとに分類して統計処理し、その統計結果についてユーザ体感品質目標値12Fでそれぞれ評価するようにしたので、呼ごとのユーザ体感品質についての善し悪しだけでなく、その品質劣化対地を中継網上の転送経路区間レベルで特定することができる。したがって、品質劣化が確認された場合の対応として、この品質劣化対地に基づき具体的な対応を早急に行うことができ、中継網に対してより適切かつ高度な品質管理サービスを提供できる。
As described above, in this embodiment, the user experience
この際、1つの呼で得られたユーザ体感品質だけでなく、複数の呼で得られたユーザ体感品質を統計処理した結果に基づき、各転送経路区間について品質評価を行うようにしたので、個々の呼やリアルタイム系アプリケーションの偏りからの影響を抑制でき、より信頼性の高い品質評価を実現できる。
また、各転送経路区間のうち品質劣化ありを示す転送経路区間に対する、対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定するようにしたので、各転送経路区間について、その一端の中継ノードだけでなくその両端の中継ノードでの評価を統合することができ、より信頼性の高い品質評価を実現できる。
At this time, not only the user experience quality obtained by one call but also the user experience quality obtained by a plurality of calls is subjected to statistical processing, so that the quality evaluation is performed for each transfer route section. Can suppress the impact of calls and real-time application bias, and achieve more reliable quality evaluation.
In addition, since the transfer path section indicating that there is quality degradation in each transfer path section, it is determined whether or not the transfer path section is a quality degradation ground according to the match / mismatch with the evaluation at the opposite relay node. In addition, for each transfer path section, it is possible to integrate evaluations not only at the relay node at one end but also at the relay nodes at both ends thereof, thereby realizing a more reliable quality evaluation.
また、本実施の形態では、品質劣化対地を特定する際、ユーザ体感品質として各ユーザ体感要素品質さらにはユーザ体感総合品質について、その品質劣化有無を個別に評価するようにしたので、それぞれの品質ごと品質劣化対地を特定することができ、特定された各品質劣化対地について、より詳細な品質劣化特性を容易に把握できる。なお、品質劣化対地の特定については、必ずしもこれらユーザ体感要素品質さらにはユーザ体感総合品質ごとに特定する必要はなく、いずれか1つの品質要素を用いて品質劣化対地を特定するようにしてもよい。 Further, in the present embodiment, when the quality degradation ground is specified, since the user experience element quality and further the user experience overall quality are individually evaluated as the user experience quality, the presence or absence of the quality deterioration is individually evaluated. Thus, it is possible to identify the quality degradation ground, and it is possible to easily grasp more detailed quality degradation characteristics for each identified quality degradation ground. Note that it is not always necessary to specify the user experience element quality or the user experience total quality for the specification of the quality deterioration ground, and the quality deterioration ground may be specified using any one of the quality elements. .
また、図16のステップ136,137において、任意の転送経路区間に関する評価結果を特定する際、ボトルネック情報16により対向する中継ノードへ評価結果を通知して、対向する中継ノードで両者の評価結果を比較し、その評価結果の一致不一致を返送してもらうようにしたので、当該転送経路区間に関する品質劣化の有無を少ないやり取りで両端の中継ノード間で共有することができ、品質管理処理による中継網のトラフィックへの影響を最小限に抑制できる。なお、トラフィックに余裕がある場合には、所定の要求指示により対向する中継ノードから当該転送経路区間に関する評価結果を取得して自己の評価結果とを比較し、その一致不一致により当該経路区間の品質劣化有無を判断するとともに、その判断結果を対向する中継ノードへ通知するようにしてもよい。
Also, in
また、本実施の形態では、前述した第1の実施の形態に適用した場合を例として説明したが、前述した第2の実施の形態に適用してもよい。この場合には、各呼のユーザ体感要素品質に関する品質劣化要因が特定されるため、前述したボトルネック情報で当該転送経路区間を通過する呼の品質劣化要因を対向する中継ノードへ相互に通知することにより、品質劣化対地を中継網上の転送経路区間レベルで特定できるだけでなく、その品質劣化要因も併せて特定することができる。したがって、品質劣化が確認された場合の対応として、これら品質劣化対地および品質劣化要因に基づき極めて具体的な対応を早急に行うことができ、中継網に対してより適切かつ高度な品質管理サービスを提供できる。 In the present embodiment, the case where the present invention is applied to the above-described first embodiment has been described as an example. However, the present embodiment may be applied to the above-described second embodiment. In this case, since the quality degradation factor related to the user experience factor quality of each call is specified, the quality degradation factor of the call passing through the transfer path section is mutually notified to the opposite relay node by the bottleneck information described above. As a result, not only can the quality degradation ground be specified at the transfer path section level on the relay network, but also the quality degradation factor can be identified. Therefore, as a response when quality degradation is confirmed, it is possible to immediately take a very specific response based on the quality degradation ground and quality degradation factors, and to provide a more appropriate and advanced quality management service for the relay network. Can be provided.
なお、以上の各実施の形態では、中継網40において、中継ノード20とは別個の装置としてユーザ体感品質監視装置10を実装した場合を例として説明したが、これに限定されるものではない。例えば、前述したユーザ体感品質監視装置10の演算処理部11で実現される各機能手段を中継ノード20内の演算処理部で実現し、また記憶部12で記憶される各種情報を中継ノード20内の記憶部で記憶することにより、ユーザ体感品質監視装置10の各種機能を中継ノード20内部に実装してもよく、前述と同様の作用効果が得られる。
In each of the above embodiments, the case where the user experience
10,10A,10B,10C,10D,10E…ユーザ体感品質監視装置、11…通信I/F部、12…記憶部、12A…制御パケット管理DB、12B…品質情報管理DB、12C…品質要素推定モデル、12D…総合品質推定モデル、12E…ユーザ体感品質管理DB、12F…ユーザ体感品質目標値、12G…品質劣化要因特定モデル、12H…品質劣化対地評価結果、13…演算処理部、13A…制御用パケットキャプチャ手段、13B…ユーザ体感品質推定手段、13C…品質劣化要因特定手段、13D…品質劣化対地特定手段、15…通過パケット、16…ボトルネック情報、20,20A,20B,20C,20D,20E…中継ノード、30…ユーザ端末、40…中継網、40A,40B,40C,40D…リンク。
DESCRIPTION OF
Claims (12)
前記リアルタイム系アプリケーションの通信品質を示す前記品質情報と、前記リアルタイム系アプリケーションの品質情報からユーザ体感品質を推定するためのユーザ体感品質推定モデルとを記憶する記憶部と、
当該ユーザ体感品質監視装置が設けられている中継ノードを通過する通過パケットのうち前記リアルタイム系アプリケーションの制御用パケットを逐次キャプチャし、前記制御用パケットから当該リアルタイム系アプリケーションの品質情報を抽出し、当該呼に関する分類情報と関連付けて前記記憶部へ格納する制御用パケットキャプチャ手段と、
前記記憶部の品質推定モデルに基づいて、前記リアルタイム系アプリケーションの呼ごとに、当該呼に関する前記記憶部の品質情報から当該呼のユーザ体感品質をそれぞれ推定するユーザ体感品質推定手段と
を備えることを特徴とするユーザ体感品質監視装置。 A user experience quality that is provided for each relay node constituting a relay network used in a real time application and monitors a user experience quality experienced by a user using the real time application from a packet of the real time application that passes through the relay node. A monitoring device,
A storage unit that stores the quality information indicating the communication quality of the real-time application and a user experience quality estimation model for estimating the user experience quality from the quality information of the real-time application;
Of the passing packets passing through the relay node provided with the user experience quality monitoring device, sequentially capture the control packet of the real-time application, extract quality information of the real-time application from the control packet, Control packet capture means for storing in the storage unit in association with classification information relating to the call;
User experience quality estimation means for estimating the user experience quality of the call from the quality information of the storage unit related to the call for each call of the real-time application based on the quality estimation model of the storage unit. A user experience quality monitoring device.
前記記憶部は、前記リアルタイム系アプリケーションのユーザ体感品質を構成する複数の品質要素ごとに、当該品質要素の品質情報から当該品質要素に関するユーザ体感要素品質を推定する品質要素推定モデルをそれぞれ記憶し、
前記ユーザ体感品質推定手段は、任意の呼についてユーザ体感品質を推定する際、前記品質要素ごとに、前記記憶部の当該品質要素の品質要素推定モデルに基づいて、当該呼に関する前記記憶部の当該品質要素の品質情報から当該品質要素のユーザ体感要素品質を推定する
ことを特徴とするユーザ体感品質監視装置。 In the user experience quality monitoring apparatus according to claim 1,
The storage unit stores, for each of a plurality of quality elements constituting the user experience quality of the real-time application, a quality element estimation model for estimating a user experience element quality related to the quality element from quality information of the quality element,
When estimating the user experience quality for an arbitrary call, the user experience quality estimation means, for each quality element, based on a quality factor estimation model of the quality element of the storage unit, A user experience quality monitoring apparatus characterized by estimating a user experience element quality of a quality element from quality information of the quality element.
前記記憶部は、前記リアルタイム系アプリケーションの各ユーザ体感要素品質からこれらを総合したユーザ体感総合品質を推定する総合品質推定モデルを記憶し、
前記ユーザ体感品質推定手段は、任意の呼についてユーザ体感品質を推定する際、前記記憶部の総合品質推定モデルに基づいて、当該呼に関する前記各ユーザ体感要素品質からユーザ体感総合品質を推定する
ことを特徴とするユーザ体感品質監視装置。 In the user experience quality monitoring apparatus according to claim 2,
The storage unit stores an overall quality estimation model for estimating a user experience comprehensive quality obtained by combining these from each user experience element quality of the real-time application,
When estimating the user experience quality for an arbitrary call, the user experience quality estimation means estimates the user experience overall quality from the user experience element quality related to the call based on the overall quality estimation model of the storage unit. A user experience quality monitoring device.
前記記憶部は、前記品質要素ごとに当該品質要素のユーザ体感要素品質に対する目標値をそれぞれ記憶するとともに、前記品質情報を仲立ちとして前記品質要素とその品質劣化要因となるネットワーク品質との関連付けを示す品質劣化要因特定モデルを記憶し、
任意の呼のユーザ体感要素品質のうち前記記憶部の当該目標値を満足していないユーザ体感要素品質について、前記記憶部の品質劣化要因特定モデルに基づき、当該品質要素に対応する品質情報を特定し、特定した品質情報のうち所定の目標値を満足していない品質情報に関連付けられているネットワーク品質を当該ユーザ体感要素品質の品質劣化要因として特定する品質劣化要因特定手段をさらに備える
ことを特徴とするユーザ体感品質監視装置。 In the user experience quality monitoring apparatus according to claim 2,
The storage unit stores, for each quality element, a target value for the user experience element quality of the quality element, and indicates an association between the quality element and a network quality that is a factor of quality deterioration with the quality information as an intermediary Store the quality degradation factor identification model,
For the user experience element quality that does not satisfy the target value of the storage unit among the user experience element qualities of an arbitrary call, the quality information corresponding to the quality element is specified based on the quality deterioration factor specification model of the storage unit And a quality deterioration factor specifying means for specifying the network quality associated with the quality information that does not satisfy the predetermined target value among the specified quality information as a quality deterioration factor of the user experience element quality. A user experience quality monitoring device.
前記各呼のユーザ体感品質を前記中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定手段をさらに備えることを特徴とするユーザ体感品質監視装置。 In the user experience quality monitoring apparatus according to claim 1,
By classifying the user experience quality of each call for each transfer route section between the relay node and the adjacent relay node, and statistically processing the statistical result, and comparing the statistical result with a predetermined user experience quality target value, A user experience quality monitoring apparatus, further comprising a quality degradation ground identification means for identifying whether or not the transfer path section is a quality degradation ground.
前記各呼のユーザ体感品質を前記中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより品質劣化の有無をそれぞれ評価し、各転送経路区間のうち品質劣化ありと評価された転送経路区間に対する、当該対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定手段をさらに備えることを特徴とするユーザ体感品質監視装置。 In the user experience quality monitoring apparatus according to claim 1,
The user experience quality of each call is classified for each transfer path section between the relay node and its adjacent relay node, statistically processed, and the statistical result is compared with a predetermined user experience quality target value to degrade the quality. Whether or not the transfer path section is a quality-degraded ground according to the match / mismatch with the evaluation at the opposite relay node for the transfer path section evaluated as having quality deterioration among the transfer path sections. A user experience quality monitoring apparatus further comprising a quality deterioration ground identification means for identifying the above.
前記リアルタイム系アプリケーションの通信品質を示す前記品質情報と、前記リアルタイム系アプリケーションの品質情報からユーザ体感品質を推定するためのユーザ体感品質推定モデルとを記憶部で記憶するステップと、
当該ユーザ体感品質監視装置が設けられている中継ノードを通過する通過パケットのうち前記リアルタイム系アプリケーションの制御用パケットを逐次キャプチャし、前記制御用パケットから当該リアルタイム系アプリケーションの品質情報を抽出し、当該呼に関する分類情報と関連付けて前記記憶部へ格納する制御用パケットキャプチャステップと、
前記記憶部の品質推定モデルに基づいて、前記リアルタイム系アプリケーションの呼ごとに、当該呼に関する前記記憶部の品質情報から当該呼のユーザ体感品質をそれぞれ推定するユーザ体感品質推定ステップと
を備えることを特徴とするユーザ体感品質監視方法。 A user experience experienced by a user using the real-time application from a packet of the real-time application that passes through the relay node in a user experience quality monitoring device provided for each relay node constituting the relay network used in the real-time application A user experience quality monitoring method for monitoring quality,
Storing the quality information indicating the communication quality of the real-time application and a user experience quality estimation model for estimating the user experience quality from the quality information of the real-time application in a storage unit;
Of the passing packets passing through the relay node provided with the user experience quality monitoring device, sequentially capture the control packet of the real-time application, extract quality information of the real-time application from the control packet, A packet capture step for control stored in the storage unit in association with classification information about a call;
A user experience quality estimation step for estimating the user experience quality of the call from the quality information of the storage unit related to the call for each call of the real-time application based on the quality estimation model of the storage unit. Characteristic user experience quality monitoring method.
前記記憶ステップは、前記リアルタイム系アプリケーションのユーザ体感品質を構成する複数の品質要素ごとに、当該品質要素の品質情報から当該品質要素に関するユーザ体感要素品質を推定する品質要素推定モデルをそれぞれ前記記憶部で記憶し、
前記ユーザ体感品質推定ステップは、任意の呼についてユーザ体感品質を推定する際、前記品質要素ごとに、前記記憶部の当該品質要素の品質要素推定モデルに基づいて、当該呼に関する前記記憶部の当該品質要素の品質情報から当該品質要素のユーザ体感要素品質を推定する
ことを特徴とするユーザ体感品質監視方法。 In the user experience quality monitoring method according to claim 7,
For each of a plurality of quality elements constituting the user experience quality of the real-time application, the storage step stores a quality element estimation model for estimating a user experience element quality related to the quality element from quality information of the quality element. Remember with
In the user experience quality estimation step, when estimating the user experience quality for an arbitrary call, for each quality element, based on a quality factor estimation model of the quality element in the storage unit, the storage unit related to the call A user experience quality monitoring method, comprising: estimating a user experience element quality of a quality element from quality element quality information.
前記記憶ステップは、前記リアルタイム系アプリケーションの各ユーザ体感要素品質からこれらを総合したユーザ体感総合品質を推定する総合品質推定モデルを前記記憶部で記憶し、
前記ユーザ体感品質推定ステップは、任意の呼についてユーザ体感品質を推定する際、前記記憶部の総合品質推定モデルに基づいて、当該呼に関する前記各ユーザ体感要素品質からユーザ体感総合品質を推定する
ことを特徴とするユーザ体感品質監視方法。 The user experience quality monitoring method according to claim 8,
The storage step stores, in the storage unit, an overall quality estimation model for estimating a user experience total quality obtained by combining these from each user experience element quality of the real-time application,
In the user experience quality estimation step, when estimating the user experience quality for an arbitrary call, based on the overall quality estimation model of the storage unit, the user experience quality is estimated from each user experience element quality related to the call. A user experience quality monitoring method.
前記記憶ステップは、前記品質要素ごとに当該品質要素のユーザ体感要素品質に対する目標値をそれぞれ前記記憶部で記憶するとともに、前記品質情報を仲立ちとして前記品質要素とその品質劣化要因となるネットワーク品質との関連付けを示す品質劣化要因特定モデルを前記記憶部で記憶し、
任意の呼のユーザ体感要素品質のうち前記記憶部の当該目標値を満足していないユーザ体感要素品質について、前記記憶部の品質劣化要因特定モデルに基づき、当該品質要素に対応する品質情報を特定し、特定した品質情報のうち所定の目標値を満足していない品質情報に関連付けられているネットワーク品質を当該ユーザ体感要素品質の品質劣化要因として特定する品質劣化要因特定ステップをさらに備える
ことを特徴とするユーザ体感品質監視方法。 The user experience quality monitoring method according to claim 8,
The storage step stores, for each quality element, a target value for the user experience element quality of the quality element in the storage unit, and the quality information and network quality that is a factor of quality degradation with the quality information as an intermediary. A quality degradation factor identification model indicating the association of
For the user experience element quality that does not satisfy the target value of the storage unit among the user experience element qualities of an arbitrary call, the quality information corresponding to the quality element is specified based on the quality deterioration factor specification model of the storage unit And further comprising a quality deterioration factor specifying step for specifying the network quality associated with the quality information that does not satisfy the predetermined target value among the specified quality information as a quality deterioration factor of the user experience element quality. The user experience quality monitoring method.
前記各呼のユーザ体感品質を前記中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定ステップをさらに備えることを特徴とするユーザ体感品質監視方法。 In the user experience quality monitoring method according to claim 7,
By classifying the user experience quality of each call for each transfer route section between the relay node and the adjacent relay node, and statistically processing the statistical result, and comparing the statistical result with a predetermined user experience quality target value, A user experience quality monitoring method, further comprising a quality degradation ground identification step for identifying whether or not the transfer path section is quality degradation ground.
前記各呼のユーザ体感品質を前記中継ノードとその隣接中継ノードとの間の転送経路区間ごとに分類して統計処理し、その統計結果について所定のユーザ体感品質目標値と比較することにより品質劣化の有無をそれぞれ評価し、各転送経路区間のうち品質劣化ありと評価された転送経路区間に対する、当該対向中継ノードでの評価との一致不一致に応じて、当該転送経路区間が品質劣化対地か否かを特定する品質劣化対地特定ステップをさらに備えることを特徴とするユーザ体感品質監視方法。
In the user experience quality monitoring method according to claim 7,
The user experience quality of each call is classified for each transfer path section between the relay node and its adjacent relay node, statistically processed, and the statistical result is compared with a predetermined user experience quality target value to degrade the quality. Whether or not the transfer path section is a quality-degraded ground according to the match / mismatch with the evaluation at the opposite relay node with respect to the transfer path section evaluated as having quality deterioration among the transfer path sections. A user experience quality monitoring method, further comprising a quality deterioration ground identification step for identifying the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004261472A JP4287338B2 (en) | 2004-09-08 | 2004-09-08 | User experience quality monitoring apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004261472A JP4287338B2 (en) | 2004-09-08 | 2004-09-08 | User experience quality monitoring apparatus and method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006080783A true JP2006080783A (en) | 2006-03-23 |
JP4287338B2 JP4287338B2 (en) | 2009-07-01 |
Family
ID=36159887
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004261472A Expired - Fee Related JP4287338B2 (en) | 2004-09-08 | 2004-09-08 | User experience quality monitoring apparatus and method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4287338B2 (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007329774A (en) * | 2006-06-08 | 2007-12-20 | Nippon Telegr & Teleph Corp <Ntt> | User's bodily sensation quality estimating apparatus, method, and program |
JP2007329773A (en) * | 2006-06-08 | 2007-12-20 | Nippon Telegr & Teleph Corp <Ntt> | Packet loss characteristic analysis apparatus, method, and program |
JP2010517468A (en) * | 2007-01-31 | 2010-05-20 | トムソン ライセンシング | Dynamic grouping and content delivery method, apparatus and system |
JP2013509016A (en) * | 2009-10-16 | 2013-03-07 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | Network management system and method for identifying and accessing quality of service results within a communication network |
JP2014049833A (en) * | 2012-08-30 | 2014-03-17 | Hitachi Ltd | Communication system |
JP2016139848A (en) * | 2015-01-26 | 2016-08-04 | 日本電信電話株式会社 | Voice quality estimation device, method and program |
KR20170110105A (en) * | 2015-01-27 | 2017-10-10 | 노키아 솔루션스 앤드 네트웍스 오와이 | Traffic Flow Monitoring |
-
2004
- 2004-09-08 JP JP2004261472A patent/JP4287338B2/en not_active Expired - Fee Related
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4634339B2 (en) * | 2006-06-08 | 2011-02-16 | 日本電信電話株式会社 | User experience quality estimation apparatus, method, and program |
JP2007329773A (en) * | 2006-06-08 | 2007-12-20 | Nippon Telegr & Teleph Corp <Ntt> | Packet loss characteristic analysis apparatus, method, and program |
JP2007329774A (en) * | 2006-06-08 | 2007-12-20 | Nippon Telegr & Teleph Corp <Ntt> | User's bodily sensation quality estimating apparatus, method, and program |
JP4584870B2 (en) * | 2006-06-08 | 2010-11-24 | 日本電信電話株式会社 | Packet loss characteristic analysis apparatus, method, and program |
US8572643B2 (en) | 2007-01-31 | 2013-10-29 | Thomson Licensing | Method, apparatus and system for dynamic grouping and content distribution |
JP2010517468A (en) * | 2007-01-31 | 2010-05-20 | トムソン ライセンシング | Dynamic grouping and content delivery method, apparatus and system |
JP2013509016A (en) * | 2009-10-16 | 2013-03-07 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | Network management system and method for identifying and accessing quality of service results within a communication network |
US9015312B2 (en) | 2009-10-16 | 2015-04-21 | Telefonaktiebolaget L M Ericsson (Publ) | Network management system and method for identifying and accessing quality of service issues within a communications network |
JP2014049833A (en) * | 2012-08-30 | 2014-03-17 | Hitachi Ltd | Communication system |
JP2016139848A (en) * | 2015-01-26 | 2016-08-04 | 日本電信電話株式会社 | Voice quality estimation device, method and program |
KR20170110105A (en) * | 2015-01-27 | 2017-10-10 | 노키아 솔루션스 앤드 네트웍스 오와이 | Traffic Flow Monitoring |
JP2018504050A (en) * | 2015-01-27 | 2018-02-08 | ノキア ソリューションズ アンド ネットワークス オサケユキチュア | Traffic flow monitoring |
KR102029849B1 (en) | 2015-01-27 | 2019-10-08 | 노키아 솔루션스 앤드 네트웍스 오와이 | Traffic flow monitoring |
Also Published As
Publication number | Publication date |
---|---|
JP4287338B2 (en) | 2009-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10637767B2 (en) | Determination and use of link performance measures | |
JP5051252B2 (en) | Network failure detection system | |
JP4986243B2 (en) | Transmitting apparatus, method and program for controlling number of layers of media stream | |
US7561517B2 (en) | Passive route control of data networks | |
JP4607254B2 (en) | Network monitoring device, bus system monitoring device, method, and program | |
US10250474B2 (en) | Calculating latency in computer networks | |
US7222190B2 (en) | System and method to provide routing control of information over data networks | |
US9398347B2 (en) | Systems and methods for measuring quality of experience for media streaming | |
US8780716B2 (en) | System and method for service assurance in IP networks | |
US9294973B2 (en) | Peer-based handoff performance measurement | |
US20190182103A1 (en) | In-situ oam (ioam) network risk flow-based "topo-gram" for predictive flow positioning | |
US20060140132A1 (en) | Apparatus and method for performance management in MPLS network | |
US7610327B2 (en) | Method of automatically baselining business bandwidth | |
JP4523395B2 (en) | User experience quality monitoring apparatus and method | |
KR20150090216A (en) | Monitoring encrypted sessions | |
JP2015089138A (en) | Congestion avoidance and fairness in data networks with multiple traffic sources | |
KR20200116504A (en) | Data processing methods, servers and data collection devices | |
JP4287338B2 (en) | User experience quality monitoring apparatus and method | |
WO2010001795A1 (en) | Quality degradation position estimating apparatus, method and communication network system | |
US7881210B2 (en) | Method and apparatus for identifying label distribution protocol flapping events | |
JP6760895B2 (en) | Network measurement system and network measurement method | |
Lindner | Advances for Resilient Real-Time Networks using Network Softwarization | |
Khanchi et al. | Continuous one-way available bandwidth change detection in high definition video conferencing | |
JP5039674B2 (en) | Network system and QoS guarantee method | |
Rajiullah et al. | Performance analysis and improvement of PR-SCTP for small messages |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060801 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081209 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090324 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090326 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130403 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140403 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |