JP2017005476A - Quality management device, quality management method and program - Google Patents

Quality management device, quality management method and program Download PDF

Info

Publication number
JP2017005476A
JP2017005476A JP2015116994A JP2015116994A JP2017005476A JP 2017005476 A JP2017005476 A JP 2017005476A JP 2015116994 A JP2015116994 A JP 2015116994A JP 2015116994 A JP2015116994 A JP 2015116994A JP 2017005476 A JP2017005476 A JP 2017005476A
Authority
JP
Japan
Prior art keywords
reading time
target value
quality
website
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015116994A
Other languages
Japanese (ja)
Other versions
JP6353815B2 (en
Inventor
史弥 小林
Fumiya Kobayashi
史弥 小林
銀河 川口
Ginga Kawaguchi
銀河 川口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2015116994A priority Critical patent/JP6353815B2/en
Publication of JP2017005476A publication Critical patent/JP2017005476A/en
Application granted granted Critical
Publication of JP6353815B2 publication Critical patent/JP6353815B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To accurately identify an area in which QoE is reduced, by estimating the QoE that is varied in accordance with user context.SOLUTION: A quality management device which manages a quality of a facility of a mobile information communication service based on the QoE comprises: a target value list storage unit for a reading time for creating and holding a target value list of the reading time that determines a target value of the reading time for each facility based on a target value of a reading time of a web site that is set to a combination of user context and the web site and a facility list indicating user context corresponding to the facility of the mobile information communication service; a reading time acquisition unit for acquiring a measured reading time that is actually required for a user to read the web site via the facility of the mobile information communication service; and a quality management unit for quantizing the quality of the facility of the mobile information communication service by comparing the target value of the reading time that is determined on the target value list of the reading time with the measured reading time.SELECTED DRAWING: Figure 1

Description

本発明は、品質管理装置、品質管理方法及びプログラムに関し、特に、ユーザ体感品質（QoE：Quality of Experience）に基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理し、QoEの低下しているエリアを推定する技術に関する。   The present invention relates to a quality management device, a quality management method, and a program, and in particular, manages the quality of equipment that accommodates users of mobile information communication services based on the quality of experience (QoE) and reduces QoE. It is related with the technology to estimate the area.

モバイル情報通信サービスにおいて、ユーザ満足度の高いサービスを提供するためには、QoEが低下しているエリアを迅速に特定し、QoEの低下に対処することが重要である。QoEを求めるための様々な手法が提案されているが（非特許文献１及び２参照）、これまでは、QoEの低下への対処として、ネットワークの物理性能（スループット等）を計測し、その物理性能の低下しているエリアに対する対処が優先されていた。   In mobile information and communication services, in order to provide services with high user satisfaction, it is important to quickly identify areas where QoE is decreasing and deal with the decrease in QoE. Various methods for obtaining QoE have been proposed (see Non-Patent Documents 1 and 2), but until now, as a countermeasure to the decrease in QoE, the physical performance (throughput, etc.) of the network is measured and the physical Priority was given to dealing with areas with degraded performance.

Katarzyne Wac et.al., "Studying the experience of mobile applications used in different contexts of daily life," W-MUST '11 Proceedings of the first ACM SIGCOMM workshop on Measurements up the stack, pp. 7-12, Aug. 2011.Katarzyne Wac et.al., "Studying the experience of mobile applications used in different contexts of daily life," W-MUST '11 Proceedings of the first ACM SIGCOMM workshop on Measurements up the stack, pp. 7-12, Aug. 2011 . 茂樹直道、廣津登志夫、浅井大史、福田健介、"高機能携帯端末を用いた実空間通信品質収集環境、" 情報処理学会 第75回全国大会、2013年3月.Naoki Shigeki, Toshio Awazu, Daifumi Asai, Kensuke Fukuda, "Real Space Communication Quality Collection Environment Using High-Functional Mobile Devices," IPSJ 75th National Convention, March 2013. "Navigation Timing," W3C, Dec.2012, インターネット＜URL http://www.w3.org/TR/2012/REC-navigation-timing-20121217/＞"Navigation Timing," W3C, Dec.2012, Internet <URL http://www.w3.org/TR/2012/REC-navigation-timing-20121217/>

一方、QoEはネットワークの物理性能だけでなく、ユーザ・コンテキスト（電車で利用中／自宅で利用中等）によって変動する。例えば、ネットワークの物理性能が同一であっても、ユーザが電車でウェブサイトを読み込むときの読込時間がユーザにとって許容できるか許容できないかを示すQoEは、ユーザが自宅でウェブサイトを読み込むときの読込時間がユーザにとって許容できるか許容できないかを示すQoEとは異なる。従って、物理性能の低下しているエリアに対して対処したとしても、QoEが向上されない場合がある。   On the other hand, QoE varies depending not only on the physical performance of the network but also on the user context (used by train / used at home, etc.). For example, even if the physical performance of the network is the same, QoE, which indicates whether the load time when the user loads the website on the train is acceptable or unacceptable for the user, is read when the user loads the website at home. Different from QoE, which indicates whether time is acceptable or unacceptable for the user. Therefore, QoE may not be improved even if an area where physical performance is degraded is dealt with.

本発明は上記の点に鑑みてなされたものであり、ユーザ・コンテキストによって変動するQoEを推定して、QoEの低下しているエリアを的確に捉える品質管理装置、品質管理方法及びプログラムを実現することを目的とする。   The present invention has been made in view of the above points, and realizes a quality management apparatus, a quality management method, and a program that accurately estimate an area where QoE is reduced by estimating QoE that varies depending on a user context. For the purpose.

本発明の一形態に係る品質管理装置は、
ウェブサイトの読込時間に関するQoEに基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理する品質管理装置であって、
ユーザ・コンテキスト及びウェブサイトの組み合わせに対して設定されたウェブサイトの読込時間の目標値と、前記モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リストとに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リストを作成し保持する読込時間の目標値リスト保存部と、
実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得する読込時間取得部と、
前記読込時間の目標値リストに定められた読込時間の目標値と、前記実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化する品質管理部と、
を有することを特徴とする。 A quality control device according to one aspect of the present invention is
A quality management device that manages the quality of facilities that accommodate users of mobile information and communication services based on QoE related to website loading time,
Reading for each facility based on the target value of the website reading time set for the combination of the user context and the website and the facility list indicating the user context corresponding to the facility of the mobile information communication service A reading time target value list storage unit for creating and holding a reading time target value list for determining a time target value; and
A reading time acquisition unit that actually acquires the actual reading time required for reading the website via the mobile information communication service facility;
A quality control unit that compares the target value of the read time determined in the target value list of the read time with the measured read time and quantifies the quality of the equipment of the mobile information communication service;
It is characterized by having.

本発明の一形態に係る品質管理方法は、
ウェブサイトの読込時間に関するQoEに基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理する品質管理装置における品質管理方法であって、
ユーザ・コンテキスト及びウェブサイトの組み合わせに対して設定されたウェブサイトの読込時間の目標値と、前記モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リストとに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リストを作成するステップと、
実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得するステップと、
前記読込時間の目標値リストに定められた読込時間の目標値と、前記実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化するステップと、
を有することを特徴とする。 A quality control method according to an aspect of the present invention includes:
A quality management method in a quality management device that manages the quality of facilities that accommodate users of mobile information communication services based on QoE related to website loading time,
Reading for each facility based on the target value of the website reading time set for the combination of the user context and the website and the facility list indicating the user context corresponding to the facility of the mobile information communication service Creating a read time target value list that defines a time target value;
Actually acquiring the actual reading time required for the user to read the website through the mobile information communication service facility;
Comparing the target value of the reading time determined in the target value list of the reading time with the actually measured reading time, and quantifying the quality of the equipment of the mobile information communication service;
It is characterized by having.

本発明の一形態に係るプログラムは、
ウェブサイトの読込時間に関するQoEに基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理するために、コンピュータを、
ユーザ・コンテキスト及びウェブサイトの組み合わせに対して設定されたウェブサイトの読込時間の目標値と、前記モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リストとに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リストを作成し保持する読込時間の目標値リスト保存手段、
実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得する読込時間取得手段、及び
前記読込時間の目標値リストに定められた読込時間の目標値と、前記実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化する品質管理手段、
として機能させることを特徴とする。 A program according to one aspect of the present invention is:
Based on QoE on website loading time, computers to manage the quality of facilities that accommodate users of mobile telecommunications services,
Reading for each facility based on the target value of the website reading time set for the combination of the user context and the website and the facility list indicating the user context corresponding to the facility of the mobile information communication service Reading time target value list storage means for creating and holding a reading time target value list for determining a time target value,
Read time acquisition means for actually acquiring the actual read time required for reading the website via the mobile information communication service facility, and the target value of the read time defined in the target value list of the read time and , Quality management means for comparing the measured reading time and quantifying the quality of the mobile information communication service equipment,
It is made to function as.

本発明によれば、ユーザ・コンテキストによって変動するQoEを推定して、QoEの低下しているエリアを的確に捉えることが可能になる。   According to the present invention, it is possible to estimate QoE that varies depending on the user context and accurately capture an area where QoE is reduced.

本発明の実施例に係る品質管理装置の機能ブロック図Functional block diagram of a quality control apparatus according to an embodiment of the present invention 本発明の実施例に係る品質管理装置における品質管理方法のフローチャートFlowchart of a quality management method in a quality management apparatus according to an embodiment of the present invention 主観評価実験結果の例（ユーザ・コンテキストが電車である場合）Example of subjective evaluation results (when user context is a train) 主観評価実験結果の例（ユーザ・コンテキストが住宅街である場合）Example of subjective evaluation test results (when user context is residential area) 読込時間と読込時間を許容できないユーザの割合の関係の一例Example of relationship between read time and percentage of users who cannot allow read time 閾値リストの一例Example of threshold list 設備リストの一例Example of equipment list 読込時間の目標値リストの一例Example of reading time target value list ＰＣＩ：αの読込時間の目標値と実測読込時間の一例PCI: Example of target value of α reading time and actual reading time ＰＣＩ：βの読込時間の目標値と実測読込時間の一例PCI: An example of target value for β reading time and actual reading time

以下、図面を参照して本発明の実施例について説明する。   Embodiments of the present invention will be described below with reference to the drawings.

本発明の実施例では、ウェブサイトの読込時間に関するQoEに基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理する品質管理装置について説明する。モバイル情報通信サービスでは、複数の基地局によってユーザに対するサービスが提供される。本発明の実施例では、基地局／セルごとにユーザ・コンテキストが定められていることを想定する。ユーザ・コンテキストとは、ユーザがモバイル情報通信サービスを利用するときの利用環境を示し、例えば、電車、住宅街、オフィス街等の利用環境が挙げられる。実際には１つのセルに接続するユーザの中に、定められたユーザ・コンテキストと異なるコンテキストを持つユーザが含まれる可能性があるが、ここでは無視できる誤差として扱う。   In an embodiment of the present invention, a quality management apparatus that manages the quality of equipment that accommodates users of mobile information communication services based on QoE related to website reading time will be described. In the mobile information communication service, services for users are provided by a plurality of base stations. In an embodiment of the present invention, it is assumed that a user context is defined for each base station / cell. The user context indicates a usage environment when the user uses the mobile information communication service, and examples thereof include a usage environment such as a train, a residential area, and an office area. Actually, there is a possibility that a user having a context different from the defined user context is included in the users connected to one cell, but this is treated as a negligible error here.

＜品質管理装置の構成＞
図１は、本発明の実施例に係る品質管理装置１００の機能ブロック図である。品質管理装置１００は、ウェブサイトの読込時間が許容できるか許容できないかを示すQoEに基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理し、QoEの低下しているエリアを検出する装置である。 <Configuration of quality control device>
FIG. 1 is a functional block diagram of a quality management apparatus 100 according to an embodiment of the present invention. The quality management device 100 manages the quality of the facility accommodating the user of the mobile information communication service based on QoE indicating whether the website read time is acceptable or unacceptable, and detects an area where the QoE decreases. Device.

品質管理装置１００は、プロセッサ等のＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）等のメモリ装置、ハードディスク等の記憶装置等から構成されたコンピュータでもよい。例えば、品質管理装置１００の機能及び処理は、記憶装置又はメモリ装置に格納されているデータやプログラムをＣＰＵが実行することによって実現される。   The quality control device 100 may be a computer configured by a CPU (Central Processing Unit) such as a processor, a memory device such as a RAM (Random Access Memory) and a ROM (Read Only Memory), a storage device such as a hard disk, and the like. For example, the functions and processing of the quality management device 100 are realized by the CPU executing data and programs stored in the storage device or the memory device.

品質管理装置１００は、QoE−読込時間マッピング部１１０と、読込時間の目標値リスト保存部１２０と、読込時間取得部１３０と、品質管理部１４０とを備えている。   The quality management apparatus 100 includes a QoE-reading time mapping unit 110, a reading time target value list storage unit 120, a reading time acquisition unit 130, and a quality management unit 140.

QoE−読込時間マッピング部１１０は、ユーザ・コンテキスト及びウェブサイトごとに、QoEとウェブサイトの読込時間の目標値との関係を計算する。具体的には、QoE−読込時間マッピング部１１０は、ユーザ・コンテキスト及びウェブサイトの組み合わせに対して、読込時間と、読込時間を許容できるか許容できないかを示すユーザの主観評価値とを受け取る。そして、QoE−読込時間マッピング部１１０は、ユーザ・コンテキストごとに読込時間を許容できないユーザの割合を算出し、読込時間を許容できないユーザの割合が所定の閾値を超える読込時間の目標値を算出し、ユーザ・コンテキストごとのウェブサイトの読込時間の目標値を示す閾値リスト１１１を生成する。   The QoE-reading time mapping unit 110 calculates the relationship between the QoE and the target value of the reading time of the website for each user context and website. Specifically, the QoE-reading time mapping unit 110 receives a reading time and a user's subjective evaluation value indicating whether the reading time is acceptable or unacceptable for the combination of the user context and the website. Then, the QoE-reading time mapping unit 110 calculates the ratio of users who cannot allow the reading time for each user context, and calculates the target value of the reading time where the ratio of users who cannot allow the reading time exceeds a predetermined threshold. The threshold value list 111 indicating the target value of the website reading time for each user context is generated.

読込時間の目標値リスト保存部１２０は、閾値リスト１１１と、モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リスト１２１とに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リスト１２３を作成し保持する。   The read time target value list storage unit 120 sets the read time target value for each equipment based on the threshold list 111 and the equipment list 121 indicating the user context corresponding to the equipment of the mobile information communication service. The target value list 123 is created and held.

なお、読込時間の目標値リスト保存部１２０は、QoE−読込時間マッピング部１１０から閾値リスト１１１を受け取らずに、ユーザ・コンテキスト及びウェブサイトの組み合わせに対して、読込時間と、読込時間を許容できるか許容できないかを示すユーザの主観評価値とを入力として、ユーザ・コンテキストごとに読込時間を許容できないユーザの割合を算出し、ユーザ・コンテキストごとのウェブサイトの読込時間の目標値を設定してもよい。   The read time target value list storage unit 120 can accept the read time and the read time for the combination of the user context and the website without receiving the threshold list 111 from the QoE-read time mapping unit 110. The user's subjective evaluation value indicating whether it is unacceptable is used as an input, the percentage of users who cannot accept the reading time for each user context is calculated, and the target value of the website reading time for each user context is set. Also good.

読込時間取得部１３０は、実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得する。   The reading time acquisition unit 130 acquires the actual reading time required for the user to actually read the website via the mobile information communication service facility.

品質管理部１４０は、読込時間の目標値リスト１２３に定められた読込時間の目標値と、実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化する。例えば、実測読込時間が読込時間の目標値より長い通信セッションの割合等に基づいて設備の品質を定量化し、定量化された設備の品質を互いに比較することにより、品質低下の原因となる設備を抽出することができる。   The quality management unit 140 compares the target value of the read time determined in the target value list 123 of the read time with the actually measured read time, and quantifies the quality of the mobile information communication service equipment. For example, by quantifying the quality of equipment based on the proportion of communication sessions where the actual reading time is longer than the target value of the reading time, and comparing the quantified equipment quality with each other, the equipment that causes the quality degradation Can be extracted.

＜品質管理装置における動作＞
図２は、本発明の実施例に係る品質管理装置１００における品質管理方法のフローチャートである。以下、図２に従って品質管理装置１００における動作を説明する。 <Operation in quality control device>
FIG. 2 is a flowchart of the quality management method in the quality management apparatus 100 according to the embodiment of the present invention. Hereinafter, the operation of the quality management apparatus 100 will be described with reference to FIG.

QoE−読込時間マッピング部１１０にて、ユーザ・コンテキスト（電車、住宅街等）及びウェブサイトごとに、読込時間と、読込時間を許容できないユーザの割合の関係を明らかにする（Ｓ１１０）。読込時間は、例えば、非特許文献３に示される"navigationStart"から"loadEventEnd"までの時間としてもよい。   The QoE-reading time mapping unit 110 clarifies the relationship between the reading time and the percentage of users who cannot allow the reading time for each user context (train, residential area, etc.) and website (S110). The reading time may be, for example, the time from “navigationStart” to “loadEventEnd” shown in Non-Patent Document 3.

QoE−読込時間マッピング部１１０では、例えば、図３及び図４に示す主観評価実験結果を入力として、図５に示す読込時間と読込時間を許容できないユーザの割合との関係を計算し、図６に示す閾値リスト１１１を出力する。図３は、主観評価実験によって得られた、ウェブサイト(A)というターゲット・ウェブサイトを、電車というユーザ・コンテキストで閲覧した際の、読込時間と読込時間を許容できないユーザの割合を示す表である。また、図４は、主観評価実験によって得られた、ウェブサイト(A)というターゲット・ウェブサイトを、住宅街というユーザ・コンテキストで閲覧した際の、読込時間と読込時間を許容できないユーザの割合を示す表である。図３及び図４を作成するための主観評価実験手法は、非特許文献１又は非特許文献２などに示される既存手法を用いることを想定するが、これらに限定しない。ターゲット・ウェブサイトは、例えば、アクセス・ユーザ数が多いウェブサイトなどをあらかじめ指定する。ターゲット・ウェブサイトは１つでもよいし、複数でもよい。また、ユーザ・コンテキストもあらかじめ指定する。図３及び図４の例では電車と住宅街の２パターンであるが、３パターン以上としてもよい。   The QoE-reading time mapping unit 110 calculates the relationship between the reading time shown in FIG. 5 and the percentage of users who cannot tolerate the reading time, for example, using the subjective evaluation experiment results shown in FIG. 3 and FIG. 4 as input. The threshold list 111 shown in FIG. FIG. 3 is a table showing the reading time and the percentage of users who cannot tolerate the reading time when the target website called the website (A) is browsed in the user context called train, which is obtained by the subjective evaluation experiment. is there. In addition, FIG. 4 shows the reading time and the percentage of users who cannot tolerate the reading time when the target website called the website (A) obtained by the subjective evaluation experiment is viewed in the user context of the residential area. It is a table | surface which shows. The subjective evaluation experiment method for creating FIGS. 3 and 4 is assumed to use the existing method shown in Non-Patent Document 1, Non-Patent Document 2, or the like, but is not limited thereto. As the target website, for example, a website having a large number of access users is designated in advance. There may be one or more target websites. The user context is also specified in advance. In the example of FIGS. 3 and 4, there are two patterns of train and residential area, but three or more patterns may be used.

QoE−読込時間マッピング部１１０は、これらの主観評価実験結果を、図５に示すような散布図にプロットすることができる。各プロットの間は、例えば、２区間移動平均により近似値を求めることができる。   The QoE-reading time mapping unit 110 can plot these subjective evaluation experiment results in a scatter diagram as shown in FIG. Between each plot, for example, an approximate value can be obtained by a two-section moving average.

更に、QoE−読込時間マッピング部１１０は、図５に基づき、読込時間を許容できないユーザの割合が３割以上となる読込時間の閾値を示す閾値リスト１１１を生成する。図６に生成された閾値リスト１１１の一例を示す。図６は、例としてウェブサイト(A)の読込時間を許容できないユーザの割合の基準を３割として作成しているが、この基準値は任意に設定してよい。ウェブサイト(B)に対する閾値リスト１１１も同様に生成できる。   Furthermore, the QoE-reading time mapping unit 110 generates a threshold value list 111 indicating the read time thresholds at which the ratio of users who cannot allow the read time is 30% or more based on FIG. FIG. 6 shows an example of the threshold list 111 generated. In FIG. 6, as an example, the standard of the ratio of users who cannot allow the reading time of the website (A) is set as 30%, but this standard value may be set arbitrarily. The threshold list 111 for the website (B) can be similarly generated.

次に、読込時間の目標値リスト保存部１２０にて、基地局／セルごとのユーザ・コンテキスト（電車、住宅街等）に応じた読込時間の目標値を設定する（Ｓ１２０）。   Next, the reading time target value list storage unit 120 sets a reading time target value corresponding to the user context (train, residential area, etc.) for each base station / cell (S120).

読込時間の目標値リスト保存部１２０では、図６に示す閾値リスト１１１と、図７に示す設備リスト１２１を入力として、図８に示す読込時間の目標値リスト１２３を出力する。図７は、基地局／セル（ＰＣＩ：Physical Cell IDで判別）に対応するユーザ・コンテキストを定めるリストであり、あらかじめ与えられるものとする。本発明の実施例では、前提として、基地局／セルごとに、ユーザ・コンテキストが定められていることを想定する。上記のように、実際には１つのセルに接続するユーザの中に、定められたユーザ・コンテキストと異なるコンテキストを持つユーザが含まれることが予想されるが、ここでは無視できる誤差として扱う。図８は、基地局／セル及びウェブサイトごとの読込時間の目標値リスト１２３である。図８の例では、ＰＣＩ：αの場合は電車移動中のユーザをターゲットとする設備であり、ウェブサイト(A)の読込時間は5.5秒、ウェブサイト(B)の読込時間は6.0秒以内でなければ、読込時間を許容できないユーザが３割以上となることを示す。   The reading time target value list storage unit 120 receives the threshold value list 111 shown in FIG. 6 and the equipment list 121 shown in FIG. 7 as inputs, and outputs a reading time target value list 123 shown in FIG. FIG. 7 is a list that defines user contexts corresponding to base stations / cells (determined by PCI: Physical Cell ID), and is given in advance. In an embodiment of the present invention, it is assumed that a user context is defined for each base station / cell. As described above, it is expected that users having a different context from the defined user context are actually included in the users connected to one cell, but this is treated as a negligible error here. FIG. 8 is a target value list 123 of the reading time for each base station / cell and website. In the example of FIG. 8, in the case of PCI: α, it is a facility targeting users who are moving on the train. The reading time of the website (A) is 5.5 seconds and the reading time of the website (B) is within 6.0 seconds. If not, it indicates that 30% or more of users cannot accept the reading time.

次に、読込時間取得部１３０にて、実際にユーザがターゲット・ウェブサイトの読込にかかった時間（以下、実測読込時間）を収集する（Ｓ１３０）。実測読込時間は、例えば、非特許文献３に示されるように、ブラウザのAPI（Application Programming Interface）を用いて取得できる、"navigationStart"から"loadEventEnd"までの時間とするほか、通信事業者の設備に測定器を設置する等を想定するが、これらに限定しない。   Next, the reading time acquisition unit 130 collects the time actually taken by the user to read the target website (hereinafter, measured reading time) (S130). The actual reading time is, for example, the time from “navigationStart” to “loadEventEnd”, which can be acquired using the API (Application Programming Interface) of the browser, as shown in Non-Patent Document 3, as well as the facilities of the communication carrier. However, the present invention is not limited to this.

次に、品質管理部１４０において、実測読込時間が読込時間の目標値より長かった割合等を基準として、設備故障／性能不足が疑われる設備を抽出する（Ｓ１４０）。図９及び図１０は、それぞれＰＣＩ：α、ＰＣＩ：βで実測読込時間が読込時間の目標値より長い通信セッションの割合（以下、QoE低下率）を示す。実測読込時間及び各ウェブサイトの利用回数が同一であっても、ＰＣＩがターゲットとするユーザ・コンテキストが異なるため、QoE低下率はＰＣＩ：αが５割（ウェブサイトにアクセスした6セッション中、3セッションが読込時間の目標値より実測読込時間が長い）となり、ＰＣＩ：βが約２割（6セッション中1セッション≒２割）となる。この場合、ＰＣＩ：αのほうが、ＰＣＩ：βよりもQoEが低下していると言える。   Next, the quality management unit 140 extracts equipment suspected of equipment failure / insufficient performance based on the ratio of the actual reading time being longer than the target value of the reading time (S140). FIG. 9 and FIG. 10 show the ratios of communication sessions (hereinafter referred to as QoE reduction rate) in which the actual reading time is longer than the target value of the reading time with PCI: α and PCI: β, respectively. Even if the actual reading time and the number of times each website is used are the same, the user context targeted by PCI is different, so the QoE reduction rate is 50% for PCI: α (3 out of 6 sessions accessing the website). Session is longer than the target value of reading time), and PCI: β is about 20% (1 out of 6 sessions≈20%). In this case, it can be said that QoE is lower in PCI: α than in PCI: β.

従って、ＰＣＩ：βの設備である基地局よりも、ＰＣＩ：αの設備である基地局を優先的に改修・増強することで、QoEの向上が期待できることが分かる。   Therefore, it can be seen that improvement of QoE can be expected by renovating and enhancing the base station having the PCI: α facility preferentially over the base station having the PCI: β facility.

＜本発明の実施例の効果＞
以上説明したように、本発明の実施例によれば、ユーザ・コンテキストによって変動するQoEを推定して、QoEの低下しているエリアを的確に捉えることが可能になる。 <Effect of the embodiment of the present invention>
As described above, according to the embodiment of the present invention, it is possible to estimate the QoE that varies depending on the user context and accurately grasp the area where the QoE is reduced.

本発明の実施例に係る品質管理装置により、モバイル情報通信サービスの各基地局／セル等の設備を利用しているユーザのQoEが定量化される。通信事業者は、定量化された各設備のユーザのQoEを比較し、QoEが低い設備を優先的に改修・増強することで、QoE低下頻度を効率的に低減させられることが期待できる。この場合、故障等によって通信品質及びQoEが低下している設備を、ユーザの申告等を待たずに発見できるため、故障等から修理着手までの時間を短縮できる。   The quality control apparatus according to the embodiment of the present invention quantifies the QoE of a user who uses equipment such as each base station / cell of the mobile information communication service. Telecom operators can expect to efficiently reduce the frequency of QoE reduction by comparing the quantified users' QoE and preferentially refurbishing and enhancing facilities with low QoE. In this case, since the equipment whose communication quality and QoE are reduced due to a failure or the like can be found without waiting for the user's report or the like, the time from the failure to the repair start can be shortened.

説明の便宜上、本発明の実施例に係る品質管理装置は機能的なブロック図を用いて説明しているが、本発明の実施例に係る品質管理装置は、ハードウェア、ソフトウェアまたはそれらの組み合わせで実現されてもよい。例えば、本発明の実施例は、コンピュータに対して本発明の実施例に係る品質管理装置の各機能を実現させるプログラム、コンピュータに対して本発明の実施例に係る方法の各手順を実行させるプログラム等により、実現されてもよい。また、各機能部が必要に応じて組み合わせて使用されてもよい。また、本発明の実施例に係る方法は、実施例に示す順序と異なる順序で実施されてもよい。   For convenience of explanation, the quality management apparatus according to the embodiment of the present invention is described using a functional block diagram. However, the quality management apparatus according to the embodiment of the present invention may be hardware, software, or a combination thereof. It may be realized. For example, an embodiment of the present invention is a program that causes a computer to implement each function of the quality control apparatus according to the embodiment of the present invention, and a program that causes a computer to execute each procedure of the method according to the embodiment of the present invention. Or the like. In addition, the functional units may be used in combination as necessary. In addition, the method according to the embodiment of the present invention may be performed in an order different from the order shown in the embodiment.

以上、ユーザ・コンテキストによって変動するQoEを推定して、QoEの低下しているエリアを的確に捉えるための手法について説明したが、本発明は、上記の実施例に限定されることなく、特許請求の範囲内において、種々の変更・応用が可能である。   As described above, the method for estimating the QoE that varies depending on the user context and accurately grasping the area where the QoE is reduced has been described. However, the present invention is not limited to the above-described embodiments, and is claimed. Various modifications and applications are possible within the range of.

１００ 品質管理装置
１１０ QoE−読込時間マッピング部
１１１ 閾値リスト
１２０ 読込時間の目標値リスト保存部
１２１ 設備リスト
１２３ 読込時間の目標値リスト
１３０ 読込時間取得部
１４０ 品質管理部 DESCRIPTION OF SYMBOLS 100 Quality control apparatus 110 QoE-reading time mapping part 111 Threshold list 120 Reading time target value list preservation | save part 121 Equipment list 123 Reading time target value list 130 Reading time acquisition part 140 Quality management part

Claims (6)

ウェブサイトの読込時間に関するユーザ体感品質（QoE）に基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理する品質管理装置であって、
ユーザ・コンテキスト及びウェブサイトの組み合わせに対して設定されたウェブサイトの読込時間の目標値と、前記モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リストとに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リストを作成し保持する読込時間の目標値リスト保存部と、
実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得する読込時間取得部と、
前記読込時間の目標値リストに定められた読込時間の目標値と、前記実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化する品質管理部と、
を有する品質管理装置。 A quality management device that manages the quality of facilities that accommodate users of mobile information communication services based on user experience quality (QoE) related to website loading time,
Reading for each facility based on the target value of the website reading time set for the combination of the user context and the website and the facility list indicating the user context corresponding to the facility of the mobile information communication service A reading time target value list storage unit for creating and holding a reading time target value list for determining a time target value; and
A reading time acquisition unit that actually acquires the actual reading time required for reading the website via the mobile information communication service facility;
A quality control unit that compares the target value of the read time determined in the target value list of the read time with the measured read time and quantifies the quality of the equipment of the mobile information communication service;
Having a quality control device. ユーザ・コンテキスト及びウェブサイトの組み合わせに対して、読込時間と、前記読込時間を許容できるか許容できないかを示すユーザの主観評価値とを入力として、ユーザ・コンテキストごとに前記読込時間を許容できないユーザの割合を算出し、前記読込時間を許容できないユーザの割合が所定の閾値を超える読込時間の目標値を算出し、ユーザ・コンテキストごとのウェブサイトの読込時間の目標値を示す閾値リストを生成するQoE−読込時間マッピング部を更に有する、請求項１に記載の品質管理装置。   A user who cannot accept the reading time for each user context by inputting the reading time and the user's subjective evaluation value indicating whether the reading time is acceptable or unacceptable for the combination of the user context and the website. And calculating a target value of the reading time in which the ratio of the users who cannot allow the reading time exceeds a predetermined threshold value, and generating a threshold list indicating the target value of the reading time of the website for each user context The quality control apparatus according to claim 1, further comprising a QoE-reading time mapping unit. 前記読込時間の目標値リスト保存部は、ユーザ・コンテキスト及びウェブサイトの組み合わせに対して、読込時間と、前記読込時間を許容できるか許容できないかを示すユーザの主観評価値とを入力として、ユーザ・コンテキストごとに前記読込時間を許容できないユーザの割合を算出し、ユーザ・コンテキストごとのウェブサイトの読込時間の目標値を設定する、請求項１に記載の品質管理装置。   The reading time target value list storage unit receives, as inputs, a reading time and a user's subjective evaluation value indicating whether the reading time is acceptable or unacceptable for a combination of a user context and a website. The quality management apparatus according to claim 1, wherein a ratio of users who cannot tolerate the reading time for each context is calculated, and a target value for the reading time of the website for each user context is set. 前記品質管理部は、前記モバイル情報通信サービスの設備ごとに、前記実測読込時間が前記読込時間の目標値リストに定められた読込時間の目標値より長い通信セッションの割合を求め、品質低下の原因となる設備を抽出する、請求項１乃至３のうちいずれか１項に記載の品質管理装置。   The quality management unit obtains a ratio of communication sessions for each facility of the mobile information communication service, in which the actual reading time is longer than the reading time target value defined in the reading time target value list, and causes the quality deterioration. The quality control apparatus of any one of Claims 1 thru | or 3 which extracts the equipment which becomes. ウェブサイトの読込時間に関するユーザ体感品質（QoE）に基づき、モバイル情報通信サービスのユーザを収容する設備の品質を管理する品質管理装置における品質管理方法であって、
ユーザ・コンテキスト及びウェブサイトの組み合わせに対して設定されたウェブサイトの読込時間の目標値と、前記モバイル情報通信サービスの設備に対応するユーザ・コンテキストを示す設備リストとに基づいて、設備ごとの読込時間の目標値を定める読込時間の目標値リストを作成するステップと、
実際にユーザが前記モバイル情報通信サービスの設備を介してウェブサイトの読込みに要した実測読込時間を取得するステップと、
前記読込時間の目標値リストに定められた読込時間の目標値と、前記実測読込時間とを比較し、前記モバイル情報通信サービスの設備の品質を定量化するステップと、
を有する品質管理方法。 A quality management method in a quality management apparatus that manages the quality of facilities that accommodate users of mobile information communication services based on user experience quality (QoE) related to website loading time,
Reading for each facility based on the target value of the website reading time set for the combination of the user context and the website and the facility list indicating the user context corresponding to the facility of the mobile information communication service Creating a read time target value list that defines a time target value;
Actually acquiring the actual reading time required for the user to read the website through the mobile information communication service facility;
Comparing the target value of the reading time determined in the target value list of the reading time with the actually measured reading time, and quantifying the quality of the equipment of the mobile information communication service;
Having a quality control method. コンピュータを、請求項１乃至４に記載の品質管理装置における各手段として機能させるためのプログラム。   The program for functioning a computer as each means in the quality control apparatus of Claims 1 thru | or 4.
JP2015116994A 2015-06-09 2015-06-09 Quality control device, quality control method and program Active JP6353815B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015116994A JP6353815B2 (en) 2015-06-09 2015-06-09 Quality control device, quality control method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015116994A JP6353815B2 (en) 2015-06-09 2015-06-09 Quality control device, quality control method and program

Publications (2)

Publication Number Publication Date
JP2017005476A true JP2017005476A (en) 2017-01-05
JP6353815B2 JP6353815B2 (en) 2018-07-04

Family

ID=57754458

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015116994A Active JP6353815B2 (en) 2015-06-09 2015-06-09 Quality control device, quality control method and program

Country Status (1)

Country Link
JP (1) JP6353815B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107018408A (en) * 2017-01-19 2017-08-04 湖南大学 The Quality of experience appraisal procedure of mobile terminal HTTP video flowings
JPWO2020240669A1 (en) * 2019-05-27 2020-12-03

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012100091A (en) * 2010-11-02 2012-05-24 Fujitsu Ltd Base station, detection device, communication system, and detection method
JP2014165828A (en) * 2013-02-27 2014-09-08 Kddi Corp Communication terminal, quality management system, and computer program
JP2015065602A (en) * 2013-09-26 2015-04-09 株式会社日立製作所 Analysis server and mobile network system
JP2015106220A (en) * 2013-11-29 2015-06-08 Kddi株式会社 Sensory communication quality estimation device and sensory communication quality estimation program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012100091A (en) * 2010-11-02 2012-05-24 Fujitsu Ltd Base station, detection device, communication system, and detection method
JP2014165828A (en) * 2013-02-27 2014-09-08 Kddi Corp Communication terminal, quality management system, and computer program
JP2015065602A (en) * 2013-09-26 2015-04-09 株式会社日立製作所 Analysis server and mobile network system
JP2015106220A (en) * 2013-11-29 2015-06-08 Kddi株式会社 Sensory communication quality estimation device and sensory communication quality estimation program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107018408A (en) * 2017-01-19 2017-08-04 湖南大学 The Quality of experience appraisal procedure of mobile terminal HTTP video flowings
JPWO2020240669A1 (en) * 2019-05-27 2020-12-03
JP7302657B2 (en) 2019-05-27 2023-07-04 日本電信電話株式会社 Quality estimation device, model construction method, estimation method, and program

Also Published As

Publication number Publication date
JP6353815B2 (en) 2018-07-04

Similar Documents

Publication Publication Date Title
US11019114B2 (en) Method and system for application security evaluation
US10248782B2 (en) Systems and methods for access control to web applications and identification of web browsers
CN107005438B (en) Methods, systems, and media for generating dynamically scalable network load
US9053322B2 (en) Computing environment security method and electronic computing system
US10205734B2 (en) Network sampling based path decomposition and anomaly detection
CN108073506B (en) Test method and device
US20200380165A1 (en) Systems, methods, and devices for obfuscation of browser fingerprint data on the world wide web
CN105871947B (en) The method and device of cross-domain request data
CN111104675A (en) Method and device for detecting system security vulnerability
US11816249B2 (en) System and method for dynamic management of private data
US9037716B2 (en) System and method to manage a policy related to a network-based service
US10757214B2 (en) Crowd sourced online application cache management
JP6353815B2 (en) Quality control device, quality control method and program
CN111193792A (en) Message transmission method and device, electronic equipment and storage medium
AU2014359172A1 (en) Network server system, client device, computer program product and computer-implemented method
JP5957419B2 (en) QoE estimation apparatus, QoE estimation method and program
JP6259779B2 (en) Web browsing quality management apparatus, method and program thereof
WO2017159490A1 (en) Communication analysis device, communication analysis method, and program recording medium
EP3593493B1 (en) Prediction of a performance indicator
CN106484601B (en) User data analysis method and system for client
JP6199844B2 (en) Suspicious part estimation device and suspected part estimation method
CN111767542A (en) Unauthorized detection method and device
Akhtar et al. DBit: Assessing statistically significant differences in CDN performance
Luan et al. An improved Pareto distribution for modelling the fault data of open source software
JPWO2018173481A1 (en) Service configuration design apparatus and service configuration design method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170620

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180531

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180605

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180611

R150 Certificate of patent or registration of utility model

Ref document number: 6353815

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150