CN104160659A - 在通信网络中的服务接入体验质量问题的预测和根本原因推荐 - Google Patents
在通信网络中的服务接入体验质量问题的预测和根本原因推荐 Download PDFInfo
- Publication number
- CN104160659A CN104160659A CN201380013853.2A CN201380013853A CN104160659A CN 104160659 A CN104160659 A CN 104160659A CN 201380013853 A CN201380013853 A CN 201380013853A CN 104160659 A CN104160659 A CN 104160659A
- Authority
- CN
- China
- Prior art keywords
- line
- management
- fcaps
- data
- qoe
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 title description 11
- 238000000034 method Methods 0.000 claims abstract description 39
- 238000012549 training Methods 0.000 claims abstract description 26
- 230000006870 function Effects 0.000 claims description 23
- 230000015654 memory Effects 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 21
- 238000012790 confirmation Methods 0.000 claims description 10
- 238000011156 evaluation Methods 0.000 claims description 10
- 239000000284 extract Substances 0.000 claims description 6
- 238000004458 analytical method Methods 0.000 abstract description 18
- 238000012517 data analytics Methods 0.000 abstract 1
- 230000008569 process Effects 0.000 description 8
- 238000003860 storage Methods 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 4
- 238000006116 polymerization reaction Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000009189 diving Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000013179 statistical model Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/02—Standardisation; Integration
- H04L41/0213—Standardised network management protocols, e.g. simple network management protocol [SNMP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/04—Network management architectures or arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/04—Network management architectures or arrangements
- H04L41/052—Network management architectures or arrangements using standardised network management architectures, e.g. telecommunication management network [TMN] or unified network management architecture [UNMA]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/147—Network analysis or design for predicting network behaviour
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5061—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the interaction between service providers and their network customers, e.g. customer relationship management
- H04L41/5067—Customer-centric QoS measurements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/142—Network analysis or design using statistical or mathematical methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/16—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using machine learning or artificial intelligence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/34—Signalling channels for network management communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/04—Arrangements for maintaining operational condition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Medical Informatics (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- General Business, Economics & Management (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Environmental & Geological Engineering (AREA)
- Probability & Statistics with Applications (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Algebra (AREA)
- Pure & Applied Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Debugging And Monitoring (AREA)
- Telephonic Communication Services (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明的实施例利用高级的统计数据分析学来预测和提供用于针对在诸如3G/4G网络的网络中的服务接入QoE问题的根本原因分析的推荐。使用FCAPS作为预测器变量，实施例被配置成将问题设立为预测性回归或分类问题来估计服务接入QoE相关的指标。某些实施例使用来自RAN日志的网络撤销登记信息基于例如树和集成方法执行各种非线性统计建模算法的训练和调谐。
Description
相关申请的交叉引用
本申请要求在2012年3月12日提交的美国临时申请号61/609,529的权益。通过引用该较早提交的申请的全部内容将该较早提交的申请的内容并入本文。
技术领域
本发明的实施例一般地涉及通信网络，并且更具体地涉及网络管理和操作，以及数据分析学和机器学习。
背景技术
通信网络提供网络性能数据来使能网络的监视和管理。故障、配置、管理、性能和安全（FCAPS）是国际标准化组织（ISO）的电信管理网络模型和针对网络管理的框架。故障、配置、管理、性能和安全是ISO模型将网络管理任务限定到其中的管理类别。
故障管理被用于识别、隔离、修正和日志记录在通信网络中发生的故障。故障管理可以使用趋势分析来预测差错，使得网络一直是可用的。
配置管理可以包括从网络设备收集和存储配置、标识简化设备的配置的方式、跟踪配置改变以及作扩张和定标（scaling）的计划。
计费管理基于用户或客户的使用统计向用户或客户开账单。计费管理也可以确保强制执行使用配额。
性能管理监视和确定网络的效率，并且可以针对未来的需要准备网络。网络性能包括例如吞吐量、百分比利用、差错率和响应时间。
安全管理一般是指用于控制对网络的元素的接入的过程。这些过程可以包括例如认证和加密。
出于异常原因的由消费者或用户使用的服务/设备的撤销登记引起服务接入问题，并且可以显著地影响用户的体验质量（QoE）。因此，网络服务提供商将FCAPS数据用于针对异常网络撤销登记的修正活动的监视、分析和执行。当会话在进行中时或者在会话在进行中的期间的切换时，这样的事件可以例如在网络进入/会话建立的期间发生。可以由移动设备或站、无线电接入网络（RAN）中的网络元素、核心网和/或服务实体发起网络撤销登记。
发明内容
一个实施例涉及一种方法，所述方法包括接收故障、配置、管理、性能和安全（FCAPS）数据，以及接收会话日志。该方法也包括将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线的根本原因推荐的输入集合和输出集合中。然后，所述方法可以包括基于输出集合的、被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型的离线训练、评价和证实，以及利用训练的、评价的和证实的模型来执行预测功能以提供针对服务接入体验质量（QoE）问题的离线根本原因推荐。
另一实施例涉及一种装置。所述装置包括至少一个处理器和包括计算机程序代码的至少一个存储器。所述至少一个存储器和计算机程序代码利用至少一个处理器使得装置至少来接收故障、配置、管理、性能和安全（FCAPS）数据，以及接收会话日志。进一步使得装置来将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线的根本原因推荐的输入集合和输出集合中。也使得装置来基于输出集合离线地训练、评价和证实被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型，并且利用训练的、评价的和证实的模型来执行预测功能以提供针对服务接入体验质量（QoE）问题的离线根本原因推荐。
另一实施例包括一种装置。所述装置包括用于接收故障、配置、管理、性能和安全（FCAPS）数据以及接收会话日志的装置。所述装置也包括用于将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线根本原因推荐的输入集合和输出集合中的装置。所述装置可以进一步包括用于基于输出集合的、被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型的离线训练、评价和证实的装置，以及用于利用训练的、评价的和证实的模型来执行预测功能以提供针对服务接入体验质量（QoE）问题的离线根本原因推荐的装置。
另一实施例涉及在计算机可读介质上实现的计算机程序。所述计算机程序被配置成控制处理器来执行过程。所述过程包括接收故障、配置、管理、性能和安全（FCAPS）数据以及接收会话日志。所述过程也包括将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线根本原因推荐的输入集合和输出集合中。然后所述过程可以包括基于输出集合的、被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型的离线训练、评价和证实，以及利用训练的、评价的和证实的模型来执行预测功能以提供针对服务接入体验质量（QoE）问题的离线根本原因推荐。
附图说明
为了对本发明的适当的理解，应该参考附图，其中：
图1图示了根据本发明的一个实施例的系统；
图2图示了根据一个实施例的方法的流程图；以及
图3图示了根据一个实施例的装置。
具体实施方式
将容易地理解，如在本文的图中一般地描述和图示的那样，可以在各种不同的配置中布置和设计本发明的部件。因此，如在附图中表示的那样，预测和提供用于针对在通信网络中的服务接入体验质量问题的根本原因分析的推荐的系统、方法、装置和计算机程序产品的实施例的以下详细的描述不意图限制本发明的范围，而是仅表示本发明的选择的实施例。
如果期望，则可以以不同的顺序和/或彼此同时地执行以下讨论的不同功能。更进一步地，如果期望，则一个或多个的描述的功能可以是可选的，或者可以被组合。同样，以下描述应被认为仅是本发明的原理、教导和实施例的说明，并且不是它们的限制。
服务提供商可以从在RAN处收集的日志提取网络撤销登记信息，并且可以执行分析来标识根本原因网络撤销登记问题。然而，服务提供商和卖方至少面临该方法的以下问题。
诸如网络撤销登记信息的从网络收集的所有的数据被后处理和人工地分析。数据的大小使这样的分析非常困难并且耗时。例如，取决于网络，存在许多类型的撤销登记。微波接入全球互操作性（WiMax）网络具有可以被报告为撤销登记的原因/种类的309个不同的撤销登记（DEREG）代码。在长期演进（LTE）网络中，仅无线电资源控制（RRC）就具有25个或更多针对释放/拒绝的原因（例如拒绝（1）、释放（6）、故障（8）、协议差错原因（（6）、RAT间改变故障（4）……等等）。
附加地，市场的大小可以使处理撤销登记问题困难。例如，芝加哥城市具有3500个WiMax接入点（AP），它们对于3个星期的持续时间生成2.5 GB PM统计数据和1.5 GB的撤销登记日志。
因此，每个卖方/服务提供商/客户必须采取特别的步骤来监视撤销登记。通常，数据库被开发来管理数据和呈现报告。
客户拥有设备（CPE）撤销登记关键性能指标（KPI）在根本原因分析中是不足的。含义模糊的原因代码需要特别的分析并且需要频繁地接进卖方的专门知识，由此在卖方利润上施加消耗。这样，针对所有关键客户需要软件分析和测试（SWAT）团队。
而且，由于时间和成本，使得传统统计方法表现效率低，以及甚至简单地无能力甚至标识根本原因的骤降（nose dive）的区域。
鉴于上述，本发明的某些实施例呈现完全的技术方案来提供用于通信网络的智能网络管理功能性，其使用不同的机器学习算法作为建模引擎。某些实施例使用网络统计作为输入对用户体验的中断（outage）和撤销登记进行建模，并且提供在线推荐和可视化工具两者，以及离线报告生成引擎。
一个实施例利用高级的统计数据分析学来预测和提供用于针对在诸如3G/4G网络的网络中的服务接入QoE问题的根本原因分析的推荐。使用FCAPS数据作为预测器变量，某些实施例被配置成将问题设立为预测性的回归或者分类问题，来估计服务接入QoE相关的指标。某些实施例基于例如树和集成方法（ensemble method）使用来自RAN日志的网络撤销登记信息来执行各种非线性统计建模算法的训练和调谐。
如在图1中图示的那样，实施例可以包括两个模块，离线模块100和在线预测模块110。在某些实施例中，离线模块100和在线预测模块110可以包括被配置成由在硬件中实施的处理器执行的软件代码或者可执行的指令。同样，离线模块100和在线预测模块110可以是硬件和软件的组合。在其他实施例中，可以在硬件中，诸如在专用集成电路（ASIC）、可编程门阵列（PGA）、现场可编程门阵列（FPGA）等等中完全地实施离线模块100和在线预测模块110。
离线模块100包括基于由服务器收集的历史数据的统计模型训练和调谐。在一个实施例中，离线模块100被配置成输出用于各种类别的服务接入QoE问题的根本原因推荐。在线预测模块110使用由离线模块100提供的调谐的模型来输出使用实时数据的估计的服务接入QoE指标。
图2图示了根据一个实施例的、离线模块100和在线预测模块110的功能性。根据该实施例，在线预测模块110收集包括FCAPS数据的网络数据，准备预测器变量，执行聚合（aggregation）来以选择的间隔生成样本，并且将输入数据准备和提供到离线模块100。离线模块100从会话日志提取撤销登记条目。然后离线模块100可以执行聚合来以设置的间隔生成样本，执行高级别的QoE服务接入分类，准备输出数据并且针对每个类别准备训练和证实评价集合。然后，离线模块100可以执行训练功能，执行证实功能，执行评价功能以及更新模型。
在实施例中，更新的模型被提供到在线预测模块110，所述在线预测模块110使用由离线模块100提供的更新的模型来输出实时预测结果，即使用实时数据的估计的服务接入QoE指标。
更具体地，图2图示了可以由在线模块110结合离线模块100执行的方法的流程图的一个示例。在该示例中，方法在200处开始，并且在210处收集网络FCAPS数据205。在215处，方法可以包括准备预测器变量，并且在220处执行聚合来以（一个或多个）选择的间隔生成样本。在225处，准备输入数据集合。然后，在235处，方法可以进行到从会话日志233提取撤销登记条目。在240处，方法可以包括执行聚合来以（一个或多个）设置的间隔生成样本，并且在245处执行高级别的QoE服务接入分类。方法可以包括在250处准备输出数据集合。在实施例中，在数据库300中存储输入数据和输出数据集合。方法可以进一步包括在255处针对如在步骤245中分类的每个类别准备训练、证实和评价设置。在260、265和270处，可以执行和利用训练功能、证实功能和评价功能来更新模型400。然后，更新的模型400可以被用于在230处执行预测功能。在一个实施例中，预测功能的结果也可以被存储在数据库300中。
因此，本发明的实施例提供生成、创建和/或提供用于在通信网络中的服务接入QoE相关问题的预测和根本原因推荐的方法、装置和/或计算机程序产品。一个实施例使用FCAPS数据作为预测器变量应用高级统计数据分析学，并且将问题设立为预测性的回归或者分类问题来估计服务接入QoE相关的指标。某些实施例出于离线地训练、评价和证实模型用于针对服务接入QoE问题的根本原因分析的推荐的生成的目的，利用历史FCAPS数据来创建输入集合以及利用来自RAN日志的信息来创建输出集合。然后，实施例可以以实时FCAPS数据应用离线创建的模型，以便预测服务接入QoE问题。然后，可以提供该信息用于针对根本原因分析的可视化、离线分析、监视和深潜（deep dive）。
一个实施例涉及用于在通信网络中的服务接入QoE问题的预测和根本原因推荐的方法。方法包括在离线（历史的）和在线模式中从网络管理实体接收和利用FCAPS数据，并且从网络元素接收会话日志。方法进一步包括将数据分类、分割和准备到输入和输出集合中，使得数据可以被用于生成离线和在线预测，并且可以被用于提供根本原因推荐。所述方法也可以包括模型的离线训练、评价和证实，使用机器学习算法与监督以及未监督的方法的组合建立所述模型，其中所述模型被建立用于在服务接入QoE问题的区域中学习。所述方法进一步包括将训练的模型用于针对服务接入QoE问题的离线根本原因推荐和可视化，以及针对用于服务接入QoE问题的在线预测和可视化利用离线训练的模型和其结果。
在某些实施例中，本文描述的任何方法的功能性可以由在存储器或者其他计算机可读的或有形的介质中存储并且由处理器执行的软件实施。在其他实施例中，可以由硬件例如通过专用集成电路（ASIC）、可编程门阵列（PGA）、现场可编程门阵列（FPGA）或者硬件和软件的任何其他组合的使用执行所述功能性。
上文提及的计算机可读介质可以至少部分地由传输线、压缩盘、数字视频盘、磁盘、全息盘或带、闪存、磁阻存储器、集成电路或者任何其他数字处理装置存储器设备实现。
图3图示了根据一个实施例的装置10。在实施例中，装置10可以是被配置成预测和提供用于针对在网络中的服务接入QoE问题的根本原因分析的推荐的网络元素或实体。例如，根据实施例，装置10可以是网络元素，诸如在网络管理域中的应用服务器。在某些实施例中，由装置10提供的功能性将驻留在网络管理系统或元素管理系统的客户体验管理（CEM）和/或操作支持系统（OSS）层或者链接到诸如OSS、核和RAN的网络的其他元素的应用服务器中。
装置10包括用于处理信息和执行指令或操作的处理器22。处理器22可以是任何类型的通用或专用处理器。虽然在图3中示出了单个处理器22，但是根据其他实施例可以利用多个处理器。事实上，作为示例，处理器22可以包括通用计算机、专用计算机、微处理器、数字信号处理器（“DSP”）、现场可编程门阵列（“FPGA”）、专用集成电路（“ASIC”）和基于多核处理器架构的处理器中的一个或多个。
装置10进一步包括耦合到处理器22的存储器14，用于存储信息和可以由处理器22执行的指令。存储器14可以是一个或多个存储器并且可以是适于本地应用环境的任何类型，并且可以使用诸如基于半导体的存储器设备、磁存储器设备和系统、光存储器设备和系统、固定存储器和可移除存储器的任何适合的易失性或非易失性数据存储器技术实施所述存储器14。例如，存储器14可以由随机访问存储器（“RAM”）、只读存储器（“ROM”）、诸如磁盘或光盘的静态存储或者任何其他类型的非瞬时性机器或计算机可读介质的任何组合组成。存储在存储器14中的指令可以包括程序指令或计算机程序代码，当由处理器22执行时，所述程序指令或计算机程序代码使得装置10能够执行如本文描述的任务。
装置10也可以包括用于将信号和/或数据传输到装置10并且从装置10接收信号和/或数据的一个或多个天线（未示出）。装置10可以进一步包括收发机28，所述收发机28将信息调制到载波波形上用于由（一个或多个）天线传输，并且将经由（一个或多个）天线接收的信息解调用于由装置10的其他元素进一步地处理。在其他实施例中，收发机28可以能够直接地传输和接收信号或数据。
处理器22可以执行与装置10的操作相关联的功能，包括但不限于，天线增益/相位参数的预编码、形成通信消息的单独比特的编码和解码、信息的格式化和装置10的总体控制，包括涉及通信资源的管理的过程。
在实施例中，存储器14存储当由处理器22执行时提供功能性的软件模块。模块可以包括上文讨论的离线模块100和在线预测模块。模块也可以包括针对装置10提供操作系统功能性的操作系统15。存储器也可以存储诸如应用或程序的一个或多个功能模块18以针对装置10提供附加的功能性。装置10的部件可以在硬件中实施或者实施为硬件和软件的任何适合的组合。
根据一个实施例，装置10可以被配置成在离线（历史的）和在线模式中从网络管理实体接收和利用FCAPS数据，并且被配置成从网络元素接收会话日志。装置10可以被进一步配置成将数据分类、分割和准备到输入和输出集合中，使得数据可以被利用来生成离线和在线预测并且提供根本原因推荐。装置10也可以被配置成离线地训练、评价和证实模型，使用机器学习算法与监督以及未监督的方法的组合建立所述模型，其中所述模型被建立用于在服务接入QoE问题的区域中学习。然后，装置10可以将训练的模型用于针对服务接入QoE问题的离线根本原因推荐和可视化。进一步地，装置10可以利用离线训练的模型并且将其结果应用于服务接入QoE问题的在线预测和可视化。
鉴于上述，本发明的实施例可以辅助管理的服务提供商（GNOC/SOC）、优化服务提供商和操作者建立专家系统来理解影响最终用户服务的主要指标（leading indicator）以及将显著的效率引入执行网络管理问题的根本原因分析中。可以在向操作者提供的工具中采用本发明的实施例。附加地，实施例将虑及从前的（onetime）分析的性能来产生报告。重要的是，实施例将导致较快的根本原因分析和来自GNOC/SOC的多卖方网络的较好的监视。因此，通过缩短根本原因分析的时间，将减少进入解决现场问题的利润消耗。较短的分析周期也将导致对客户的问题的较快的响应时间。
应注意，在本说明书中描述的某些功能特征已经被呈现为模块、功能或应用，以便更特别地强调它们的实施独立性。例如，模块、功能或应用可以被实施为包括常规VLSI电路或门阵列、诸如逻辑芯片、晶体管或其他分立部件的现成的半导体的硬件电路。模块、功能或应用也可以在诸如现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等等的可编程硬件设备中实施。
也可以在用于由各种类型的处理器执行的软件中部分或者完全地实施模块、功能和应用。可执行代码的标识的模块可以例如包括计算机指令的一个或多个物理或逻辑的块，其可以例如被组织为对象、过程或功能。然而，标识的模块的可执行不必物理地定位在一起，但是可以包括存储在不同的位置中的全异的（disparate）指令，当其逻辑地结合到一起时，包括模块并且实现其所述的用途。
的确，可执行代码的模块可以是单个指令，或者许多指令，并且甚至可以分布在若干不同的代码段上、分布在不同程序之中以及跨若干存储器设备分布。类似地，在本文中，操作数据可以在模块之内被标识和图示，并且可以以任何适合的形式实现，以及被组织在任何适合类型的数据结构之内。操作数据可以被收集为单个数据集合，或者可以分布在不同位置上，包括分布在不同存储器设备上，并且可以至少部分地仅作为在系统或网络上的电子信号存在。
可以在一个或多个实施例中以任何适合的方式组合本发明的描述的特征、优势和特性。相关技术领域的技术人员将认识到，可以在没有特定实施例的具体特征或优势中的一个或多个的情况下实行本发明。在其他情况下，可以在某些实施例中认识到可能不在本发明的所有实施例中存在的附加特征和优势。
本领域普通技术人员将容易理解可以以不同顺序的步骤和/或以不同于公开的那些配置的配置中的硬件实行如上文讨论的本发明。因此，虽然已经基于这些优选的实施例描述了本发明，但是本领域技术人员将清楚在保持在本发明的精神和范围内时，某些修改、变型和替代结构将是清楚的。因此，为了确定本发明的范围和边界，应该参考所附的权利要求书。
Claims (18)
1. 一种方法，其包括：
接收故障、配置、管理、性能和安全（FCAPS）数据；
接收会话日志；
将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线根本原因推荐的输入集合和输出集合中；
基于输出集合，对被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型进行离线训练、评价和证实；以及
利用训练的、评价的和证实的模型来执行预测功能以提供用于服务接入体验质量（QoE）问题的离线根本原因推荐。
2. 根据权利要求1所述的方法，其中故障、配置、管理、性能和安全（FCAPS）数据的接收包括在在线和离线模式中从至少一个网络管理实体接收故障、配置、管理、性能和安全（FCAPS）数据。
3. 根据权利要求1所述的方法，其中会话日志的接收包括从至少一个网络元素接收会话日志。
4. 根据权利要求1所述的方法，进一步包括从会话日志提取撤销登记条目。
5. 根据权利要求1所述的方法，进一步包括将输入集合和输出集合存储在数据库中。
6. 根据权利要求1所述的方法，其中由在线模块准备输入集合并且由离线模块准备输出集合。
7. 一种装置，其包括：
至少一个处理器；以及
包括计算机程序代码的至少一个存储器，
所述至少一个存储器和计算机程序代码利用至少一个处理器被配置成使得装置至少：
接收故障、配置、管理、性能和安全（FCAPS）数据；
接收会话日志；
将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线根本原因推荐的输入集合和输出集合中；
基于输出集合，对被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型进行离线训练、评价和证实；以及
利用训练的、评价的和证实的模型来执行预测功能以提供用于服务接入体验质量（QoE）问题的离线根本原因推荐。
8. 根据权利要求7所述的装置，其中至少一个存储器和计算机程序代码被利用至少一个处理器进一步配置成使得装置在在线和离线模式中从至少一个网络管理实体接收故障、配置、管理、性能和安全（FCAPS）数据。
9. 根据权利要求7所述的装置，其中至少一个存储器和计算机程序代码被利用至少一个处理器进一步配置成使得装置来从至少一个网络元素接收会话日志。
10. 根据权利要求7所述的装置，其中至少一个存储器和计算机程序代码被利用至少一个处理器进一步配置成使得装置从会话日志提取撤销登记条目。
11. 根据权利要求7所述的装置，其中至少一个存储器和计算机程序代码被利用至少一个处理器进一步配置成使得装置将输入集合和输出集合存储在数据库中。
12. 根据权利要求7所述的装置，其中装置进一步包括被配置成准备输入集合的在线模块以及被配置成准备输出集合的离线模块。
13. 一种包含在计算机可读介质上的计算机程序，其中计算机程序被配置成控制处理器来执行过程，其包括：
接收故障、配置、管理、性能和安全（FCAPS）数据；
接收会话日志；
将故障、配置、管理、性能和安全（FCAPS）数据分类、分割和准备到被配置用于生成离线和在线预测并且用于提供服务接入体验质量（QoE）问题的离线根本原因推荐的输入集合和输出集合中；
基于输出集合，对被配置用于在服务接入体验质量（QoE）问题的区域中学习的模型进行离线训练、评价和证实；以及
利用训练的、评价的和证实的模型来执行预测功能以提供用于服务接入体验质量（QoE）问题的离线根本原因推荐。
14. 根据权利要求13所述的计算机程序，其中故障、配置、管理、性能和安全（FCAPS）数据的接收包括在在线和离线模式中从至少一个网络管理实体接收故障、配置、管理、性能和安全（FCAPS）数据。
15. 根据权利要求13所述的计算机程序，其中会话日志的接收包括从至少一个网络元素接收会话日志。
16. 根据权利要求13所述的计算机程序，进一步包括从会话日志提取撤销登记条目。
17. 根据权利要求13所述的计算机程序，进一步包括将输入集合和输出集合存储在数据库中。
18. 根据权利要求13所述的计算机程序，其中由在线模块准备输入集合并且由离线模块准备输出集合。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201261609529P | 2012-03-12 | 2012-03-12 | |
| US61/609529 | 2012-03-12 | ||
| PCT/EP2013/055053 WO2013135734A1 (en) | 2012-03-12 | 2013-03-12 | Prediction and root cause recommendations of service access quality of experience issues in communication networks |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104160659A true CN104160659A (zh) | 2014-11-19 |
| CN104160659B CN104160659B (zh) | 2018-06-26 |
Family
ID=47891689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201380013853.2A Expired - Fee Related CN104160659B (zh) | 2012-03-12 | 2013-03-12 | 用于通信网络的管理和操作的方法和装置 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US9152925B2 (zh) |
| EP (1) | EP2826206A1 (zh) |
| JP (1) | JP6141889B2 (zh) |
| KR (1) | KR101676743B1 (zh) |
| CN (1) | CN104160659B (zh) |
| WO (1) | WO2013135734A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110472809A (zh) * | 2018-05-09 | 2019-11-19 | 国际商业机器公司 | 计算环境技术问题的根本原因和预测分析 |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130030760A1 (en) * | 2011-07-27 | 2013-01-31 | Tom Thuy Ho | Architecture for analysis and prediction of integrated tool-related and material-related data and methods therefor |
| US20130173332A1 (en) * | 2011-12-29 | 2013-07-04 | Tom Thuy Ho | Architecture for root cause analysis, prediction, and modeling and methods therefor |
| AU2014259538B2 (en) | 2013-11-08 | 2015-12-10 | Accenture Global Services Limited | Network node failure predictive system |
| US20160021173A1 (en) * | 2014-07-16 | 2016-01-21 | TUPL, Inc. | Resource management in a big data environment |
| CN106134215A (zh) * | 2015-01-05 | 2016-11-16 | 华为技术有限公司 | 用户体验质量QoE预测装置、网络设备和方法 |
| GB201502371D0 (en) * | 2015-02-13 | 2015-04-01 | Bae Systems Plc | Provision, configuration and use of a telecommunications network |
| AU2016203497B2 (en) * | 2015-06-22 | 2017-05-11 | Accenture Global Services Limited | Wi-fi access point performance management |
| EP3131234B1 (en) | 2015-08-14 | 2018-05-02 | Accenture Global Services Limited | Core network analytics system |
| US10135701B2 (en) | 2016-02-19 | 2018-11-20 | At&T Intellectual Property I, L.P. | Context-aware virtualized control decision support system for providing quality of experience assurance for internet protocol streaming video services |
| US10708795B2 (en) * | 2016-06-07 | 2020-07-07 | TUPL, Inc. | Artificial intelligence-based network advisor |
| EP3316584A1 (en) * | 2016-10-25 | 2018-05-02 | Thomson Licensing | Method for anticipating and diagnosing reception problems in a stand-alone set top box based on a built-in self-learning failure prediction model and corresponding apparatus |
| EP3331198A1 (en) * | 2016-12-02 | 2018-06-06 | Alcatel Lucent | Method and device for monitoring a dsl network |
| US10171510B2 (en) * | 2016-12-14 | 2019-01-01 | CyberSaint, Inc. | System and method for monitoring and grading a cybersecurity framework |
| CN106851714B (zh) * | 2017-01-05 | 2020-05-12 | 中国铁道科学研究院集团有限公司通信信号研究所 | 一种基于自学习模式的车地无线通信质量评估方法 |
| EP3454506B1 (en) * | 2017-09-07 | 2020-03-04 | Nokia Solutions and Networks Oy | Method and device for monitoring a telecommunication network |
| CN109412849B (zh) * | 2018-10-23 | 2022-01-04 | 日海通信服务有限公司 | 一种智能通信网络维护方法及系统 |
| CN113661727B (zh) | 2019-02-19 | 2022-04-01 | 诺基亚通信公司 | 用于无线网络的无线电接入网(ran)节点的神经网络的配置 |
| US20230129123A1 (en) * | 2021-10-26 | 2023-04-27 | Dell Products L.P. | Monitoring and Management System for Automatically Generating an Issue Prediction for a Trouble Ticket |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040153533A1 (en) * | 2000-07-13 | 2004-08-05 | Lewis Lundy M. | Method and apparatus for a comprehensive network management system |
| CN101282237A (zh) * | 2008-05-27 | 2008-10-08 | 中山大学 | 一种基于snmp协议的综合网管系统 |
| CN101416442A (zh) * | 2003-10-31 | 2009-04-22 | Ut斯达康公司 | 用于使用存在和即时消息接发技术的网络管理系统的系统及设备 |
| US20100131650A1 (en) * | 2008-11-26 | 2010-05-27 | Chou Lan Pok | Methods and Apparatus to Support Network Policy Managers |
| CN102118803A (zh) * | 2011-04-14 | 2011-07-06 | 北京邮电大学 | 一种基于QoE预测的移动通信系统视频跨层调度方法 |
| CN102185709A (zh) * | 2011-04-22 | 2011-09-14 | 赛特斯网络科技(南京)有限责任公司 | 一体化网络服务质量保障管理系统 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4149178B2 (ja) * | 2001-03-09 | 2008-09-10 | 松下電器産業株式会社 | リモートメンテナンスシステム |
| US8620314B2 (en) * | 2005-03-10 | 2013-12-31 | Qualcomm Incorporated | Apparatus and methods for determining connection quality of a wireless device on a wireless communications network |
| EP1907996B1 (en) * | 2005-07-28 | 2014-06-04 | Siemens Aktiengesellschaft | Load prediction based on-line and off-line training of neural networks |
| JP4748226B2 (ja) * | 2009-02-04 | 2011-08-17 | 沖電気工業株式会社 | 品質劣化検知装置、有線無線判定装置 |
| US9021304B2 (en) * | 2010-03-11 | 2015-04-28 | Nec Corporation | Fault analysis rule extraction device, fault analysis rule extraction method and storage medium |
| JP5214656B2 (ja) * | 2010-03-29 | 2013-06-19 | 株式会社東芝 | 評価装置および評価プログラム |
| BR112012029162A2 (pt) | 2010-05-14 | 2017-02-21 | Telefonica Sa | método para calcular a percepção de experiência de usuário da qualidade dos serviços monitorados integrados em operadores de telecomunicações |
-
2013
- 2013-03-12 EP EP13709877.8A patent/EP2826206A1/en not_active Withdrawn
- 2013-03-12 WO PCT/EP2013/055053 patent/WO2013135734A1/en active Application Filing
- 2013-03-12 US US13/796,354 patent/US9152925B2/en not_active Expired - Fee Related
- 2013-03-12 JP JP2014561426A patent/JP6141889B2/ja not_active Expired - Fee Related
- 2013-03-12 KR KR1020147028531A patent/KR101676743B1/ko active IP Right Grant
- 2013-03-12 CN CN201380013853.2A patent/CN104160659B/zh not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040153533A1 (en) * | 2000-07-13 | 2004-08-05 | Lewis Lundy M. | Method and apparatus for a comprehensive network management system |
| CN101416442A (zh) * | 2003-10-31 | 2009-04-22 | Ut斯达康公司 | 用于使用存在和即时消息接发技术的网络管理系统的系统及设备 |
| CN101282237A (zh) * | 2008-05-27 | 2008-10-08 | 中山大学 | 一种基于snmp协议的综合网管系统 |
| US20100131650A1 (en) * | 2008-11-26 | 2010-05-27 | Chou Lan Pok | Methods and Apparatus to Support Network Policy Managers |
| CN102118803A (zh) * | 2011-04-14 | 2011-07-06 | 北京邮电大学 | 一种基于QoE预测的移动通信系统视频跨层调度方法 |
| CN102185709A (zh) * | 2011-04-22 | 2011-09-14 | 赛特斯网络科技(南京)有限责任公司 | 一体化网络服务质量保障管理系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110472809A (zh) * | 2018-05-09 | 2019-11-19 | 国际商业机器公司 | 计算环境技术问题的根本原因和预测分析 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015516620A (ja) | 2015-06-11 |
| US9152925B2 (en) | 2015-10-06 |
| WO2013135734A1 (en) | 2013-09-19 |
| KR101676743B1 (ko) | 2016-11-16 |
| JP6141889B2 (ja) | 2017-06-07 |
| KR20140145151A (ko) | 2014-12-22 |
| US20130238534A1 (en) | 2013-09-12 |
| EP2826206A1 (en) | 2015-01-21 |
| CN104160659B (zh) | 2018-06-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104160659A (zh) | 在通信网络中的服务接入体验质量问题的预测和根本原因推荐 | |
| US11271796B2 (en) | Automatic customer complaint resolution | |
| EP3465459B1 (en) | Artificial intelligence-based network advisor | |
| US9069338B2 (en) | Systems and methods for statistical control and fault detection in a building management system | |
| US20110161124A1 (en) | Method and system for enterprise building automation | |
| US20200117151A1 (en) | Outage and switch management for a power grid system | |
| CN105868936B (zh) | 一种应用于变电设备一体化运维检修的智能运检系统 | |
| US10454787B2 (en) | Timeline zoom and service level agreement validation | |
| CN111654321B (zh) | 卫星网络的管理方法、装置及电子设备 | |
| US8938314B2 (en) | Smart energy consumption management | |
| CN105210089A (zh) | 生产模拟 | |
| CN112163952A (zh) | 智慧供应链AIOT SaaS信息平台 | |
| CN109871966A (zh) | 故障维修管理方法及系统 | |
| WO2018129184A1 (en) | System and methods for dental practice planning and management | |
| WO2023082871A1 (zh) | 流业务建模方法、装置、平台、电子设备和存储介质 | |
| CN114757448B (zh) | 一种基于数据空间模型的制造环节间最优价值链构建方法 | |
| CN111199328B (zh) | 一种宽带业务处理系统、方法和装置 | |
| CN114118922A (zh) | 基于Websocket的排产计划生成方法及装置 | |
| Huttunen | The role of data in firm performance: A techno-economic view | |
| JP2023550706A (ja) | 無線ネットワークパフォーマンス最適化システムおよび方法 | |
| CN114500592A (zh) | 一种基于区块链的物联网设备数据存储及管理系统 | |
| US20160086114A1 (en) | Service-based consulting framework | |
| CN107888670B (zh) | 一种基于物联网的智能社区信息亭平台 | |
| Lazzarini et al. | E-maintenance for household and similar appliances | |
| Zhao et al. | Operation and maintenance strategy of radio transmission equipment based on big data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180626 Termination date: 20200312 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |