JP2016502785A - 通信サービスのユーザ体感品質評価方法及びシステム - Google Patents

通信サービスのユーザ体感品質評価方法及びシステム Download PDF

Info

Publication number
JP2016502785A
JP2016502785A JP2015540029A JP2015540029A JP2016502785A JP 2016502785 A JP2016502785 A JP 2016502785A JP 2015540029 A JP2015540029 A JP 2015540029A JP 2015540029 A JP2015540029 A JP 2015540029A JP 2016502785 A JP2016502785 A JP 2016502785A
Authority
JP
Japan
Prior art keywords
qoe
sub
kqi
evaluated
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015540029A
Other languages
English (en)
Other versions
JP6173474B2 (ja
Inventor
榮慧 羅
榮慧 羅
Original Assignee
中興通訊股▲分▼有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中興通訊股▲分▼有限公司 filed Critical 中興通訊股▲分▼有限公司
Publication of JP2016502785A publication Critical patent/JP2016502785A/ja
Application granted granted Critical
Publication of JP6173474B2 publication Critical patent/JP6173474B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5003Managing SLA; Interaction between SLA and QoS
    • H04L41/5009Determining service level performance parameters or violations of service level contracts, e.g. violations of agreed response time or mean time between failures [MTBF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5061Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the interaction between service providers and their network customers, e.g. customer relationship management
    • H04L41/5067Customer-centric QoS measurements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本発明は、評価すべきサービスのSub−QoE指標とIn−QoE指標を作成することと、KQIとCEIの定量的関係モデルを構築することと、評価すべき領域に評価すべきサービスに対して統計されたKQI値を前記KQIとCEIとの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をユーザ体感品質評価値とすることとを含む通信サービスのユーザ体感品質評価方法を開示する。本発明の実施形態は、同時に通信サービスのユーザ体感品質評価システムを開示する。本発明の実施形態の技術的解決手段を適用して、固定モデル方程式でフィットされたKQI/KPI−QoE定量的関係モデルが異なる領域、異なるユーザグループのために構成されることによりユーザ体感品質評価誤差が大きい問題、及び単にユーザ調査方法を用いてユーザ体感品質を取得することによりリアルタイムに監視できず、コストが高い問題を解決する。

Description

本発明は、通信技術分野に関し、特に通信サービスのユーザ体感品質(QoE:Quality of Experience)評価方法及びシステムに関する。
現在、通信技術の発展に伴い、移動通信ネットワークは、ますます豊かな移動通信サービスとアプリケーションをユーザに提供でき、移動通信サービスのユーザ体感品質を評価する場合、通常、固定されたモデル方程式でキー品質指標(KQI:Key Quantity Indicators)/キー性能指標(KPI:Key Performance Indicators)−QoE定量的関係(Quantitative relation)モデル又は曲線をフィット又は構築し、さらに統計されたKQI値又はKPI値をこの定量的関係モデルに代入し、計算されたQoEをユーザ体感品質の評価結果とする。経済状況、人間環境と人口規模によって、異なる領域、異なるユーザグループに対応するKQI/KPI−QoE定量的関係モデルの違いが一般的に大きく、固定されたモデル方程式でフィットしてKQI/KPI−QoE定量的関係モデルを構築する方法により、ユーザ体感品質評価誤差が大きい。
同時に、現在アプリケーションされる、単にユーザ調査を通じてユーザ体感品質を取得する方法により、ユーザ体感品質のリアルタイムな監視を実現できず、時間遅延が大きく、且つコストが高い。
上述したように、関連技術において、異なるモデルによるユーザ体感品質評価誤差が大きく、及びユーザ体感品質をリアルタイムに監視できない問題に対して、効果的な解決策がない。
これを鑑みて、本発明の実施形態の主な目的は、関連技術においてKQI/KPI−QoE定量的関係モデルによるユーザ体感品質評価誤差が大きく、及び単にユーザ調査を通じてユーザ体感品質を取得することにより、ユーザ体感品質をリアルタイムに監視できない問題を解決するように、通信サービスのユーザ体感品質評価方法及びシステムを提供することにある。
上記目的を達成するために、本実施形態の技術的解決手段は、以下のように実現される。
本発明の実施形態に係る通信サービスのユーザ体感品質評価方法は、
ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出し、ユーザアプリケーション嗜好情報に基づいて、サブ体感品質(Sub−QoE:Subordinate Quality of Experience)指標と全体体感品質(In−QoE:Independent Quality of Experience)指標を含んでいる評価すべきサービスの体感品質指標(CEI:Customer Experience Indicator)グループを作成することと、
評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びキー品質指標(KQI)値を受信し、そして前記Sub−QoE指標値、In−QoE指標値及びKQI値を用いてKQIとCEIの定量的関係モデルを構築することと、
評価すべき領域において評価すべきサービスに対して統計されたKQI値を、前記KQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE指標値とIn−QoE指標値をQoE評価結果とすることとを含む。
好ましくは、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値とKQI値を用いて、KQIとCEIの定量的関係モデルを構築することは、
評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することを含む。
好ましくは、前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性を含む。
好ましくは、前記KQIとSub−QoE指標の定量的関係モデルを構築する前に、前記方法は、
評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングして、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成することをさらに含む。
好ましくは、前記KQIとSub−QoE指標の定量的関係モデルを構築する前に、前記方法は、
前記作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのアクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けて、Sub−QoE指標とKQIの関連関係に応じてKQIとSub−QoE指標の定量的関係モデルを構築することをさらに含む。
好ましくは、前記Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築する前に、前記方法は、
ユーザの評価すべきサービスの具体的なアプリケーションに対する嗜好の品質特性に基づいて作成された前記アクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、前記評価すべきサービスのIn−QoE指標に関連付けて、Sub−QoE指標とIn−QoE指標の関連関係に応じてSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することをさらに含む。
本発明の実施形態に係る通信サービスのユーザ体感品質評価システムは、
ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出して記憶し、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を受信して記憶し、評価すべき領域において評価すべきサービスに対して統計されたKQI値を受信して記憶するように構成される基礎データ抽出及び記憶モジュールと、
基礎データ抽出及び記憶モジュールにより受信されて記憶されたユーザアプリケーション嗜好情報に基づいて、Sub−QoE指標とIn−QoE指標を含んでいる評価すべきサービスのCEIグループを作成するように構成されるCEIグループ作成モジュールと、
評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとCEIの定量的関係モデルを構築するように構成される定量的関係モデル構築モジュールと、
基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべき領域において評価すべきサービスに対して統計されたKQI値を、定量的関係モデル構築モジュールにより構築されたKQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE指標値とIn−QoE値をQoE評価結果とするように構成されるユーザ体感品質評価モジュールとを含む。
好ましくは、前記定量的関係モデル構築モジュールは、さらに、基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成される。
好ましくは、前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性を含む。
好ましくは、前記CEIグループ作成モジュールは、さらに、基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングして、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成するように構成される。
好ましくは、関連付けモジュールは、CEIグループ作成モジュールにより作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、アクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けるように構成され、
前記定量的関係モデル構築モジュールは、さらに、関連付けモジュールにより確立されたKQIとSub−QoE指標の関連関係に応じて、KQIとSub−QoE指標の定量的関係モデルを構築するように構成される。
好ましくは、前記関連付けモジュールは、さらに、CEIグループ作成モジュールが評価すべきサービスに対して作成したアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのIn−QoE指標に関連付けるように構成され、
前記定量的関係モデル構築モジュールは、さらに、関連付けモジュールにより確立されたSub−QoE指標とIn−QoE指標の関連関係に応じて、Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成される。
本実施形態において、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとCEIの定量的関係モデルを構築し、評価すべき領域において評価すべきサービスに対して統計されたKQI値を前記KQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をQoE評価値とし、且つ、前記Sub−QoE指標が評価すべき領域における評価すべきサービスのユーザ嗜好に基づいて作成され、このようにして、実際のSub−QoE指標値、In−QoE値とKQI値に基づいて構築されたKQIとCEIの定量的関係モデルは、評価すべき領域における評価すべきサービスのユーザ体感品質を正確に反映でき、固定モデル方程式でフィットされたKQI/KPI−QoE定量的関係モデルが異なる領域、異なるユーザグループ間の人間、経済などの要因の違いに適応できないのでユーザ体感品質評価誤差が大きくなる問題を避け、且つユーザ体感品質をリアルタイムに監視でき、ユーザ体感品質のリアルタイム性を強化し、且つ実現コストが低い。
本発明の実施形態に係る通信サービスのユーザ体感品質評価方法の実現プロセスを示す図である。 本発明の実施形態に係る遺伝的アルゴリズムによりKQI−CEI定量的関係モデルを構築する実現プロセスを示す図である。 本発明の実施形態に係る通信サービスのユーザ体感品質評価システムの構成構造図である。 本発明の実施形態に係る通信サービスのユーザ体感品質評価の実現プロセスを示す図一である。 本発明の実施形態に係る通信サービスのユーザ体感品質評価の実現プロセスを示す図二である。
以下、図面及び具体的な実施形態を参照して本発明をさらに詳しく説明する。
本発明の実施形態において通信サービスのユーザ体感品質評価方法が記載され、図1が本発明の実施形態に係る通信サービスのユーザ体感品質評価方法の実現プロセスを示すであり、図1に示すように、以下のステップを含む。
ステップ101において、ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出し、ユーザアプリケーション嗜好情報に基づいて、Sub−QoE指標とIn−QoE指標を含んでいる評価すべきサービスのCEIグループを作成する。
ここで、前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性を含む。
好ましい実施形態として、評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングし、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成する。
ここで、前記Sub−QoE指標が評価すべきサービスの具体的なアプリケーションに対するユーザの異なる方面の体感品質指標であり、前記In−QoE指標が評価すべきサービスの具体的なアプリケーションに対するユーザの全体体感品質指標である。
ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出する操作、及びユーザアプリケーション嗜好情報に基づいて評価すべきサービスのCEIグループを作成する操作は、ユーザ体感品質評価システムの基礎データ抽出及び記憶モジュールとCEIグループ作成モジュールによって対応して完了され、前記基礎データ抽出及び記憶モジュールとCEIグループ作成モジュールが同じ装置に位置してよく、異なる装置に分布してもよいと説明すべきである。
ステップ102において、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を受信し、そして前記Sub−QoE指標値、In−QoE指標値及びKQI値を用いてKQIとCEIの定量的関係モデルを構築する。
前記Sub−QoE指標値、In−QoE指標値がユーザ調査を通じて取得され、前記KQI値がKQI統計システムから読み取られる。
好ましい実施形態として、Sub−QoE指標値、In−QoE指標値及びKQI値を用いてKQIとCEIの定量的関係モデルを構築することは、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することを含む。
ここで、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を受信する操作、及び前記Sub−QoE指標値、In−QoE指標値及びKQI値を用いてKQIとCEIの定量的関係モデルを構築する操作は、ユーザ体感品質評価システムの基礎データ抽出及び記憶モジュールと定量的関係モデル構築モジュールによって対応して完了され、前記定量的関係モデル構築モジュールは、ステップ101における前記ユーザ体感品質評価システムの基礎データ抽出及び記憶モジュール、CEIグループ作成モジュールと同じ装置に位置してよく、前記基礎データ抽出及び記憶モジュール、CEIグループ作成モジュールと異なる装置に位置してもよい。
好ましい実施形態として、KQIとSub−QoE指標の定量的関係モデルを構築する前に、
前記作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのアクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けて、Sub−QoE指標とKQIの関連関係に応じてKQIとSub−QoE指標の定量的関係モデルを構築することをさらに含む。
好ましい実施形態として、Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築する前に、
評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性に基づいて、作成された前記アクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、前記評価すべきサービスのIn−QoE指標に関連付けて、Sub−QoE指標とIn−QoE指標の関連関係に応じてSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することをさらに含む。
作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、前記評価すべきサービスのアクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付ける操作、及び前記アクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、前記評価すべきサービスのIn−QoE指標に関連付ける操作は、ユーザ体感品質評価システムの関連付けモジュールによって完了され、前記関連付けモジュールがユーザ体感品質評価システムの基礎データ抽出及び記憶モジュール、CEIグループ作成モジュール及び定量的関係モデル構築モジュールと同じ装置に位置してよく、前記基礎データ抽出及び記憶モジュール、CEIグループ作成モジュール及び定量的関係モデル構築モジュールと異なる装置に位置してもよいと説明すべきである。
ここで、1つの前記Sub−QoEに関連付けられているKQIは、1つ以上であってよい。例えば、1つの前記Sub−QoEに関連付けられているKQIが1つである場合、上記のプロセスにおいて対応してKQIとSub−QoE指標の1対1の定量的関係モデルを構築し、1つの前記Sub−QoEに関連付けられているKQIが複数である場合、上記のプロセスにおいて対応してKQIとSub−QoE指標の多対1の定量的関係モデルを構築する。
ここで、前記KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルは、遺伝的アルゴリズムにより適応的に構築されることができる。
以下、KQI−CEI定量的関係モデルの構築をさらに詳しく説明し、図2が本発明の実施形態に係る遺伝的アルゴリズムによりKQI−CEI定量的関係モデルを構築する実現プロセスを示す図であり、図2に示すように、以下のステップを含む。
ステップ201において、解空間を定義し、個体群を初期化する。
前記解空間は、前記KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築するすべての可能な関数モデルを含む。
前記解空間は、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルに関する可能性がある演算子セット、変数記号セット及びデータセット構成を含む。ここで、前記演算子セットは、前記定量的関係モデルに関する様々な関数演算子を含み、加算、減算、乗算、除算、指数、対数などを含むが、これらに限られない。前記変数記号セットは、前記定量的関係モデルに関する可能性がある変数を含み、Sub−QoE指標、In−QoE指標及びKQIを含む。前記データセットは、前記定量的関係モデルに関する様々な定数の値の範囲であって、定数項、指数項及び係数項などを含むが、これらに限られなく、ここで、前記様々な定数の最大値の範囲が前記データセットに具体的に対応するデータタイプに応じて設定され、例えば、前記データセットが対応するKQI「ウェブにおける第一要素の開き成功率」関連値である場合、当該データセットの値の範囲が0〜100%であってよい。
ここで、定義された解空間に基づいて個体群初期化の処理を行い、当該処理により一定の数量の個体からなる個体群が生成され、個体群の数量が一般的に数十〜数百であって、実際の状況に応じて選択されることができる。
ここで、前記個体が1つの「KQIとSub−QoE指標の定量的関係モデル関数」、又は1つの「Sub−QoE指標とIn−QoE指標の定量的関係モデル関数」である。
ステップ202において、個体群の適応度合を評価する。
即ち、適応度合に応じて個体群をソートし、前記適応度合が前記個体モデル曲線フィット効果の特性評価である。
ステップ203において、現在の個体群から所定数の適応度合が最も高い個体を選択する。
ステップ204において、現在の処理が終止条件に達するかどうかを判定し、達すれば、ステップ205を実行し、即ちステップ203において選択された適応度合が最も高い個体をモデル曲線フィット結果として出力し、当該モデル曲線に対応する定量的関係モデルを、構築された定量的関係モデルとし、そうでなければ、ステップ206に移行する。
前記終止条件は、以下の条件の1つ以上を含む。
(1)繁殖の最大回数に達する
ここで、前記繁殖の最大回数は、モデルフィット正確さ及び処理時間と正の相関関係がある;
(2)処理時間によって約束された最大時間に達する
ここで、前記処理時間は、モデルフィット正確さと正の相関関係がある;
(3)個体群における最適な個体モデル曲線フィット誤差が約束値以下であり、又は適応度合が約束値以上である。
ステップ206において、選択された個体に対してハイブリッド操作を行う。
ここで、親個体を2つずつランダムにペアリングして、ハイブリッドペアリングプールを形成し、各ペアの親個体が設定された確率の条件でハイブリッドを行う。
ステップ207において、個体群における各個体に対して、設定された確率の条件で変異操作を行う。
ステップ208において、個体群を更新し、その後再帰的にステップ202を呼び出す。
即ち、親個体群における適応度合の低い個体が、ハイブリッドと変異が完了された子個体に置き換えられる。
ステップ103において、評価すべき領域において評価すべきサービスに対して統計されたKQI値を前記KQIとCEIの定量的関係モデルに代入し、出力されたSub−QoE値とIn−QoE値をQoE評価結果とする。
ここで、評価すべき領域において評価すべきサービスに対するKQI値を統計し、統計の次元が実際の需要に応じて確定され、ユーザ次元、カスタムユーザーグループ次元、カスタムセル組み合わせ次元、無線ネットワークコントローラ(RNC:Radio Network Controller)次元、サービスプロバイダ(SP:Services Provider)次元及びネットワーク全体次元を含むが、これらに限られない。
ここで、評価すべき領域において評価すべきサービスに対して統計されたKQI値を前記KQIとCEIの定量的関係モデルに代入し、出力されたSub−QoE値とIn−QoE値を前記KQIと同じ統計次元のQoE評価結果とする操作は、ユーザ体感品質評価システムのユーザ体感品質評価モジュールによって完了され、前記ユーザ体感品質評価モジュールがステップ102における前記関連付けモジュール、基礎データ抽出及び記憶モジュール、CEIグループ作成モジュール及び定量的関係モジュールと同じ装置に位置してよく、前記関連付けモジュール、基礎データ抽出及び記憶モジュール、CEIグループ作成モジュール及び定量的関係モデル構築モジュールと異なる装置に分布してもよい。
本実施形態において通信サービスのユーザ体感品質評価システムが記載され、図3が本発明の実施形態に係る通信サービスのユーザ体感品質評価システムの構成構造図であり、図3に示すように、前記システムは、基礎データ抽出及び記憶モジュール31、CEIグループ作成モジュール32、定量的関係モデル構築モジュール33、及びユーザ体感品質評価モジュール34を含む。
基礎データ抽出及び記憶モジュール31は、ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出して記憶し、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を受信して記憶し、評価すべき領域において評価すべきサービスに対して統計されたKQI値を受信して記憶するように構成される。
CEIグループ作成モジュール32は、基礎データ抽出及び記憶モジュール31により受信されて記憶されたユーザアプリケーション嗜好情報に基づいて、Sub−QoE指標とIn−QoE指標を含んでいる評価すべきサービスのCEIグループを作成するように構成される。
定量的関係モデル構築モジュール33は、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとCEIの定量的関係モデルを構築するように構成される。
ユーザ体感品質評価モジュール34は、基礎データ抽出及び記憶モジュール31により受信されて記憶された、評価すべき領域において評価すべきサービスに対して統計されたKQI値を、定量的関係モデル構築モジュールにより構築されたKQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をQoE評価結果とするように構成される。
ここで、前記定量的関係モデル構築モジュール33は、さらに、基礎データ抽出及び記憶モジュール31により受信されて記憶された、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成される。
ここで、前記定量的関係モデル構築モジュール33は、遺伝的アルゴリズムにより適応的にKQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することができる。
ここで、前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性を含む。
ここで、前記CIEグループ作成モジュール32は、さらに、基礎データ抽出及び記憶モジュール31により抽出されて記憶された、評価すべきサービスの具体的なアプリケーションに対するユーザ嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングし、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成するように構成される。
ここで、前記システムは、
CEIグループ作成モジュール32が評価すべきサービスに対して構築したアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、アクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けるように構成される関連付けモジュール35をさらに含む。
前記定量的関係モデル構築モジュール33は、さらに、KQIとSub−QoE指標関連付けモジュール35により確立されたKQIとSub−QoE指標の関連関係に応じて、KQIとSub−QoE指標の定量的関係モデルを構築するように構成される。
例えば、1つの前記Sub−QoEに関連付けられているKQIが1つだけである場合、前記定量的関係モデル構築モジュール33は、対応してKQIとSub−QoE指標の1対1の定量的関係モデルを構築する。1つの前記Sub−QoEに関連付けられているKQIが複数である場合、前記定量的関係モデル構築モジュール33は、対応してKQIとSub−QoE指標の多対1の定量的関係モデルを構築する。
ここで、前記関連付けモジュール35は、さらに、CEIグループ作成モジュール32が評価すべきサービスに対して作成したクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのIn−QoE指標に関連付けるように構成される。
前記定量的関係モデル構築モジュール33は、さらに、関連付けモジュール35により確立されたSub−QoE指標とIn−QoE指標の関連関係に応じて、Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成される。
ここで、前記定量的関係モデル構築モジュール33は、遺伝的アルゴリズムにより適応的にKQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することができる。
ユーザ体感品質評価システムの基礎データ抽出及び記憶モジュール31、CEIグループ作成モジュール32、定量的関係モデル構築モジュール33、ユーザ体感品質評価モジュール34及び関連付けモジュール35は、同じ装置に位置してよく、異なる装置に分布してよいと説明すべきである。
実際の適用において、前記ユーザ体感品質評価システムの基礎データ抽出及び記憶モジュール31、CEIグループ作成モジュール32、定量的関係モデル構築モジュール33、ユーザ体感品質評価モジュール34及び関連付けモジュール35は、いずれも前記ユーザ体感品質評価システムが位置するまたは分布する装置における中央処理装置(CPU:Central Processing Unit)、デジタル信号プロセッサ(DSP:Digital Signal Processor)又はフィールドプログラマブルゲートアレイ(FPGA:Field Programmable Gate Array)によって実現されることができる。
以下、さらに通信サービスのユーザ体感品質を評価することを例として、本発明の実施形態に記載された通信サービスのユーザ体感品質評価方法をさらに詳しく説明し、図4が本発明の実施形態に係る通信サービスのユーザ体感品質評価方法の実現プロセスを示す図であり、図4に示すように、以下のステップを含む。
ステップ401において、ユーザアプリケーション嗜好情報に基づいて、評価すべきサービスのCEIグループを作成する。
表1は評価すべきウェブ情報ブラウジングサービス、オンラインビデオサービス及びダウンロードサービスのユーザアプリケーション嗜好情報を示す。
Figure 2016502785
ユーザの評価すべきサービスに対するアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスに対するユーザ嗜好の品質特性を含む。
例えば、ウェブ情報ブラウジングサービスのCEIグループを作成する場合、表1から分かるように、ウェブ情報ブラウジングサービスに対応するユーザ嗜好の品質特性は、ウェブを開くことができるかどうか及びウェブを開く時間である。従って、ウェブを開くことができるかどうか及びウェブを開く時間をそれぞれアクセシビリティ、保持性及び完全性にマッピングすることにより、以下のSub−QoE指標を作成できる。
ウェブ初期表示成功率満足指数:「アクセスしたいウェブサイトを入力してEnterキーを押した後、ウェブに内容が表示されること、又はウェブブラウザが、ウェブがダウンロードされていることを表示することを見ることができる」に対する体感品質指標であって、当該指標がアクセシビリティSub−QoE指標である。
ウェブ初期表示遅延満足指数:「アクセスしたいウェブサイトを入力して、ウェブに内容が表示されること、又はウェブブラウザが、ウェブがダウンロードされていることを表示することを見ることができるまでEnterキーを押す」に対する体感品質指標であって、当該指標がアクセシビリティSub−QoE指標である。
ウェブブラウジング中断満足指数:ユーザがウェブに対してダウンロードを完了できないことに対する体感品質指標であって、当該指標が保持性Sub−QoE指標である。
ウェブダウンロード速度満足指数:ウェブがウェブ内容を完全に表示する速度に対する体感品質指標であって、当該指標が完全性Sub−QoE指標である。
ステップ402において、作成されたSub−QoE指標に関連付けられたKQIを確定する。
ここで、1つの前記Sub−QoE指標に関連付けられるKQIは、1つ以上であってよい。
Figure 2016502785
それに応じて、ウェブ情報ブラウジングサービスに対応するKQIは、表2に示される。
まず、評価すべきサービスのアクセシビリティ、保持性及び完全性からSub−QoE指標をKQIに関連付け、アクセシビリティを例として、ステップ301で作成されたアクセシビリティSub−QoE指標「ウェブ初期表示成功率満足指数」と「ウェブ初期表示遅延満足指数」を、表2に示すKQI「ウェブにおける第一要素の開き成功率」と「ウェブにおける第一要素の開き遅延」に関連付ける。
アクセシビリティSub−QoE指標とKQIが唯一ではないので、上記の関連関係において、ウェブ情報ブラウジングサービスに対するユーザ嗜好の品質特性に基づいて、さらにSub−QoE指標とKQI指標の具体的な関連関係を確立し、ウェブ情報ブラウジングサービス嗜好の品質特性「ウェブを開くことができるかどうか」に基づいて、Sub−QoE指標「ウェブ初期表示成功率満足指数」がKQI「ウェブにおける第一要素の開き成功率」のみに関連付けられ、Sub−QoE指標「ウェブ初期表示遅延満足指数」が「ウェブにおける第一要素の開き遅延」のみに関連付けられると確定する。
それに応じて、完全性Sub−QoE指標がKQI「ウェブサービス未完了率」に関連付けられ、保持性Sub−QoE指標がKQI「ウェブダウンロード平均速度」に関連付けられる。
ステップ403において、ユーザ調査を通じて、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値とIn−QoE指標値を取得する。
ステップ404において、評価すべきサービスのKQI値を統計する。
前記KQI値がステップ403における前記ユーザに対応する評価すべきサービスのKQI値であって、関連技術のKQI統計システムにより取得される。
ステップ405において、ステップ403で取得されたSub−QoE指標値、In−QoE指標値とステップ404で統計されたKQI値を用いて、評価すべき領域におけるKQIとCEIに対する定量的関係モデルを構築し、その後ステップ406を実行する。
このステップにおいて、遺伝的アルゴリズムにより、適応的にKQIとCEIの定量的関係モデル、即ちKQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築する。
本実施形態において、国内のある都市のウェブ情報ブラウジングサービスの実際のSub−QoE指標値、In−QoE指標値とKQI値に基づいて、対応するモデルを構築し、ステップ402でSub−QoE指標「ウェブ初期表示成功率満足指数」とKQI「ウェブにおける第一要素の開き成功率」の1対1の関連関係が確立されたので、Sub−QoE指標「ウェブ初期表示成功率満足指数」と「ウェブにおける第一要素の開き成功率」の1対1の定量的関係モデルを構築し、前記遺伝的アルゴリズムに関するパラメータは、以下のように設定される。
(1)演算子セットが{+、−、*、/、^、exp、log};
(2)変数記号セットX={x,y}、ここで、xがKQI「ウェブにおける第一要素の開き成功率」を表し、yがSub−QoE指標「ウェブ初期表示成功率満足指数」を表す;
(3)データセットc={-10<c<10}、最大パワーが6であり、個体群規模が80であり、最大繁殖回数が10000である。
前記データセットの値の範囲、最大パワー、個体群規模及び最大繁殖回数は、所望の評価時間に基づいて確定され、前記データセットの値の範囲、最大パワー、個体群規模及び最大繁殖回数は、所望の評価時間と正の相関関係がある。
定量的関係モデルの構築結果は、次の通りである。
y=(54.9051+exp(exp(x))+x−1/(x^x)^(8.7384))/((((((((((((((((((x)^((−0.1652+x)*x))^(1.3771*x))^x)^x)^x)^(1.3771))^(1.3771*x))^x)^(1.3771))^x)^(1.3771))^x)^(1.3771))^(1.3771*((((((((((((x)^((−0.1652+x)*x))^(1.3771*x))^x)^x)^x)^(1.3771))^(1.3771*x))^x)^(1.3771))^x)^(1.3771))^x))^(((((((((((((x)^((−0.1652+x)*x))^(1.3771*x))^x)^x)^x)^(1.3771))^(1.3771*x))^x)^(1.3771))^x)^(1.3771))^x))^(1.3771))^ x)
ステップ406において、評価すべき領域におけるネットワーク全体次元のKQI値を統計する。
前記ネットワーク全体次元のKQI値が関連技術におけるKQI統計システムにより取得される。
ステップ407において、評価すべき領域におけるネットワーク全体次元のユーザ体感品質を計算する。
ステップ406で統計されたネットワーク全体次元のKQI値を前記KQIとSub−QoE指標の定量的関係モデルに代入し、Sub−QoE評価値を計算して得て、前記Sub−QoE評価値を前記Sub−QoE指標とIn−QoE指標の定量的関係モデルに代入し、In−QoE評価値を計算して得る。前記計算されたSub−QoE評価値とIn−QoE評価値は、即ちネットワーク全体次元の体感評価結果である。
Figure 2016502785
表3に示すように、国内のある都市のウェブ情報ブラウジングサービスのネットワーク全体次元のユーザ体感品質評価結果である。
以下、さらに通信サービスのユーザ体感品質を評価することを例として、本発明の実施形態に記載される通信サービスのユーザ体感品質評価方法をさらに詳しく説明し、図5が本発明の実施形態に係る通信サービスのユーザ体感品質評価のもう一つの実施形態の実現プロセスを示す図二であって、図5に示すように、以下のステップを含む。
ステップ501において、ユーザアプリケーション嗜好情報に基づいて、評価すべきサービスのCEIグループを作成する。
ステップ502において、作成されたSub−QoE指標に関連付けられたKQIを確定する。
ここで、1つの前記Sub−QoE指標に関連付けられるKQIは、1つ以上であってよい。
ステップ503において、ユーザ調査を通じて、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値とIn−QoE値を取得する。
ステップ504において、前記評価すべきサービスのKQI値を統計する。
ステップ505において、前記実際のSub−QoE指標値、In−QoE指標値とKQI値を用いて、評価すべき領域におけるKQIとCEIの定量的関係モデルを構築する。
このステップにおいて、遺伝的アルゴリズムにより、適応的にKQIとCEIの定量的関係モデル、即ちSub−QoE指標とKQIの定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築する。
ここで、本実施形態は、実施形態一の評価すべき領域と同じであるので、ステップ501〜505の処理は、実施形態一のステップ401〜405の処理と同じである。
ステップ506において、評価すべき領域における重要人物(VIP:Very Important Person)ユーザグループのKQI値を統計する。
前記VIPユーザグループは、場合需要に応じて定義されることができ、一定の数のVIPユーザグループからなる多次元の評価すべきグループである。
本実施形態において、前記VIPユーザグループは、オペレータより提供された600人のユーザから構成される。
ステップ507において、前記評価すべき領域における重要人物VIPグループのユーザ体感品質を計算する。
前記統計されたKQI値を前記Sub−QoE値指標とKQIの定量的関係モデルに代入すると、Sub−QoE評価値を計算して得ることができる。前記Sub−QoE評価値を前記In−QoE指標とSub−QoE指標の定量的関係モデルに代入すると、In−QoE値を計算して得る。前記計算されたSub−QoE評価値とIn−QoE評価値は、VIPユーザグループ次元ユーザ体感品質評価結果とされる。
表4に示すように、国内のある都市のウェブ情報ブラウジングサービスのVIPユーザグループ次元のユーザ体感品質評価結果である。
Figure 2016502785
上記は、本発明の好ましい実施形態に過ぎず、本発明の保護範囲を限定することに用いられるものではない。
本発明の実施形態において、評価すべきサービスのSub−QoE指標とIn−QoE指標を作成し、KQIとCEIの定量的関係モデルを構築し、評価すべき領域において評価すべきサービスに対して統計されたKQI値を前記KQIとCEIとの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をユーザ体感品質評価値とする。本発明の実施形態の技術的解決手段を適用して、固定モデル方程式でフィットされたKQI/KPI−QoE定量的関係モデルが異なる領域、異なるユーザグループのために構成されることによりユーザ体感品質評価誤差が大きい問題、及び単にユーザ調査方法を用いてユーザ体感品質を取得することによりリアルタイムに監視できなく、コストが高い問題を解決する。
31・・・基礎データ抽出及び記憶モジュール、
32・・・CEIグループ作成モジュール、
33・・・定量的関係モデル構築モジュール、
34・・・ユーザ体感品質評価モジュール。

Claims (12)

  1. 通信サービスのユーザ体感品質(QoE)評価方法であって、
    ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出し、ユーザアプリケーション嗜好情報に基づいて、サブ体感品質(Sub−QoE)指標と全体体感品質(In−QoE)指標を含んでいる評価すべきサービスの体感品質指標(CEI)グループを作成することと、
    評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びキー品質指標(KQI)値を受信し、そして前記Sub−QoE指標値、In−QoE指標値及びKQI値を用いてKQIとCEIの定量的関係モデルを構築することと、
    評価すべき領域において評価すべきサービスに対して統計されたKQI値を、前記KQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をQoE評価結果とすることとを含む、前記方法。
  2. 前記評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとCEIの定量的関係モデルを構築することは、
    評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することを含むことを特徴とする
    請求項1に記載の方法。
  3. 前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザの嗜好の品質特性を含むことを特徴とする
    請求項2に記載の方法。
  4. 前記KQIとSub−QoE指標の定量的関係モデルを構築する前に、前記方法は、
    評価すべきサービスの具体的なアプリケーションに対するユーザの嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングして、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成することをさらに含むことを特徴とする
    請求項3に記載の方法。
  5. 前記KQIとSub−QoE指標の定量的関係モデルを構築する前に、前記方法は、
    前記作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのアクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けて、Sub−QoE指標とKQIの関連関係に応じてKQIとSub−QoE指標の定量的関係モデルを構築することをさらに含むことを特徴とする
    請求項4に記載の方法。
  6. 前記Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築する前に、前記方法は、
    評価すべきサービスの具体的なアプリケーションに対するユーザの嗜好の品質特性に基づいて作成された前記アクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、前記評価すべきサービスのIn−QoE指標に関連付けて、Sub−QoE指標とIn−QoE指標の関連関係に応じてSub−QoE指標とIn−QoE指標の定量的関係モデルを構築することをさらに含むことを特徴とする
    請求項4又は5に記載の方法。
  7. ユーザ行動の基礎データからユーザアプリケーション嗜好情報を抽出して記憶し、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のサブ体感品質(Sub−QoE)指標値、全体体感品質(In−QoE)指標値とキー品質指標(KQI)値を受信して記憶し、評価すべき領域において評価すべきサービスに対して統計されたKQI値を受信して記憶するように構成される基礎データ抽出及び記憶モジュールと、
    基礎データ抽出及び記憶モジュールにより受信されて記憶されたユーザアプリケーション嗜好情報に基づいて、Sub−QoE指標とIn−QoE指標を含んでいる評価すべきサービスの体感品質指標(CEI)グループを作成するように構成されるCEIグループ作成モジュールと、
    評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE指標値及びKQI値を用いて、KQIとCEIの定量的関係モデルを構築するように構成される定量的関係モデル構築モジュールと、
    基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべき領域において評価すべきサービスに対して統計されたKQI値を、定量的関係モデル構築モジュールにより構築されたKQIとCEIの定量的関係モデルに代入し、計算されたSub−QoE値とIn−QoE値をQoE評価結果とするように構成されるユーザ体感品質評価モジュールとを含む通信サービスのユーザ体感品質システム。
  8. 前記定量的関係モデル構築モジュールは、さらに、基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべき領域における評価すべきサービスのシングルユーザに対する実際のSub−QoE指標値、In−QoE値及びKQI値を用いて、KQIとSub−QoE指標の定量的関係モデル、及びSub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成されることを特徴とする
    請求項7に記載のシステム。
  9. 前記ユーザアプリケーション嗜好情報は、評価すべきサービスの具体的なアプリケーション、及び前記評価すべきサービスの具体的なアプリケーションに対するユーザの嗜好の品質特性を含むことを特徴とする
    請求項8に記載のシステム。
  10. 前記CEIグループ作成モジュールは、さらに、基礎データ抽出及び記憶モジュールにより受信されて記憶された、評価すべきサービスの具体的なアプリケーションに対するユーザの嗜好の品質特性に基づいて、前記品質特性をそれぞれ評価すべきサービスのアクセシビリティ、保持性及び完全性にマッピングして、前記品質特性を反映するアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を作成するように構成されることを特徴とする
    請求項9に記載のシステム。
  11. 前記システムは、さらに、CEIグループ作成モジュールにより作成されたアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、アクセシビリティKQI、保持性KQI及び完全性KQIに対応して関連付けるように構成される関連付けモジュールを含み、
    前記定量的関係モデル構築モジュールは、さらに、関連付けモジュールにより確立されたKQIとSub−QoE指標の関連関係に応じて、KQIとSub−QoE指標の定量的関係モデルを構築するように構成されることを特徴とする
    請求項10に記載のシステム。
  12. 前記関連付けモジュールは、さらに、CEIグループ作成モジュールが評価すべきサービスに対して作成したアクセシビリティSub−QoE指標、保持性Sub−QoE指標及び完全性Sub−QoE指標を、評価すべきサービスのIn−QoE指標に関連付けるように構成され、
    前記定量的関係モデル構築モジュールは、さらに、関連付けモジュールにより確立されたSub−QoE指標とIn−QoE指標の関連関係に応じて、Sub−QoE指標とIn−QoE指標の定量的関係モデルを構築するように構成されることを特徴とする
    請求項10又は11に記載のシステム。
JP2015540029A 2012-11-06 2013-09-17 通信サービスのユーザ体感品質評価方法及びシステム Expired - Fee Related JP6173474B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201210438365.3A CN103812671B (zh) 2012-11-06 2012-11-06 一种通信业务用户感知度评估方法及系统
CN201210438365.3 2012-11-06
PCT/CN2013/083698 WO2014071776A1 (zh) 2012-11-06 2013-09-17 通信业务用户感知度评估方法及系统

Publications (2)

Publication Number Publication Date
JP2016502785A true JP2016502785A (ja) 2016-01-28
JP6173474B2 JP6173474B2 (ja) 2017-08-02

Family

ID=50684023

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015540029A Expired - Fee Related JP6173474B2 (ja) 2012-11-06 2013-09-17 通信サービスのユーザ体感品質評価方法及びシステム

Country Status (4)

Country Link
EP (1) EP2919416B1 (ja)
JP (1) JP6173474B2 (ja)
CN (1) CN103812671B (ja)
WO (1) WO2014071776A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105791046A (zh) * 2014-12-26 2016-07-20 中兴通讯股份有限公司 用户体验质量QoE评估方法、装置、终端及服务器
US10546241B2 (en) 2016-01-08 2020-01-28 Futurewei Technologies, Inc. System and method for analyzing a root cause of anomalous behavior using hypothesis testing
US10332056B2 (en) 2016-03-14 2019-06-25 Futurewei Technologies, Inc. Features selection and pattern mining for KQI prediction and cause analysis
CN107979478B (zh) * 2016-10-21 2020-03-31 华为技术有限公司 一种客户体验指标的确定方法及装置
CN109614414B (zh) * 2018-09-11 2023-05-23 创新先进技术有限公司 一种用户信息的确定方法及装置
CN113343573B (zh) * 2021-06-18 2022-03-29 烽火通信科技股份有限公司 基于回溯搜索算法的用户感知度评估方法与电子设备
CN113840316B (zh) * 2021-09-30 2024-04-30 中国联合网络通信集团有限公司 无线网络维护方法、装置、设备和计算机可读存储介质
CN114037340B (zh) * 2021-11-24 2024-06-04 天津大学 一种基于服务吸引力模型的跨界服务效能评估方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157223A (ja) * 2004-11-26 2006-06-15 Nippon Telegr & Teleph Corp <Ntt> ユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末
US20120195424A1 (en) * 2011-01-31 2012-08-02 Empire Technology Development Llc Measuring quality of experience in telecommunication system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012051852A1 (zh) * 2010-10-20 2012-04-26 中兴通讯股份有限公司 一种基于分组指标体系的服务质量监控方法和系统
CN102104900A (zh) * 2011-01-27 2011-06-22 大唐移动通信设备有限公司 用户感知的分析方法及设备
CN102104901B (zh) * 2011-02-11 2014-09-10 大唐移动通信设备有限公司 一种获取关键性能指标的方法和装置
CN102457339A (zh) * 2012-02-08 2012-05-16 国家无线电监测中心 一种无线电发射设备监测系统及方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157223A (ja) * 2004-11-26 2006-06-15 Nippon Telegr & Teleph Corp <Ntt> ユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末
US20120195424A1 (en) * 2011-01-31 2012-08-02 Empire Technology Development Llc Measuring quality of experience in telecommunication system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
林孝典他: "マルチメディア通信サービスのQoE評価技術に関する動向と課題", 電子情報通信学会論文誌(J91−A)第6号, JPN6016030541, 1 June 2008 (2008-06-01), pages 600 - 612, ISSN: 0003571459 *

Also Published As

Publication number Publication date
CN103812671B (zh) 2016-12-21
EP2919416A4 (en) 2015-11-25
WO2014071776A1 (zh) 2014-05-15
EP2919416B1 (en) 2017-05-10
CN103812671A (zh) 2014-05-21
EP2919416A1 (en) 2015-09-16
JP6173474B2 (ja) 2017-08-02

Similar Documents

Publication Publication Date Title
JP6173474B2 (ja) 通信サービスのユーザ体感品質評価方法及びシステム
US11531867B2 (en) User behavior prediction method and apparatus, and behavior prediction model training method and apparatus
KR102121360B1 (ko) 사용자 신용 점수를 최적화하기 위한 방법 및 장치
US20190147461A1 (en) Methods and apparatus to estimate total audience population distributions
CN107798027B (zh) 一种信息热度预测方法、信息推荐方法及装置
CN105657003B (zh) 一种信息处理方法和服务器
US11562015B2 (en) Methods and apparatus for estimating total unique audiences
WO2018130201A1 (zh) 确定关联账号的方法、服务器及存储介质
US20120323623A1 (en) System and method for assigning an incident ticket to an assignee
CN110019382B (zh) 用户亲密度指数确定方法、装置、存储介质及电子设备
US20120323640A1 (en) System and method for evaluating assignee performance of an incident ticket
CN105590240A (zh) 一种品牌广告效果优化的离散计算方法
CN104239421B (zh) 一种推送应用到终端的方法和系统
JP6400834B2 (ja) 推薦装置、推薦決定方法、およびコンピュータプログラム
WO2018121335A1 (zh) 实时数据处理方法和装置
Chan et al. Modelling customer satisfaction for product development using genetic programming
CN111027197B (zh) 一种电力设备仿真分析系统及方法
CN109120955B (zh) 一种直播间的推荐方法以及相关设备
CN105610698B (zh) 事件结果的处理方法和装置
CN111369324B (zh) 一种目标信息确定方法、装置、设备及可读存储介质
CN113724006A (zh) 用于用户体验旅程的信息处理方法及装置
CN107908676A (zh) 一种数据展示更新方法、终端及计算机可读介质
US9536199B1 (en) Recommendations based on device usage
CN113393270A (zh) 广告点位贡献值的确定方法和装置、电子设备和存储介质
CN110968291B (zh) 一种基于最优树调整应用程序功能菜单的方法及装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160816

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161107

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170509

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170516

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170606

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170704

R150 Certificate of patent or registration of utility model

Ref document number: 6173474

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees