CN113240270B

CN113240270B - 渠道商运用大数据、预测算法选择供应商的方法及系统

Info

Publication number: CN113240270B
Application number: CN202110516555.1A
Authority: CN
Inventors: 周书田; 孙政; 洪锋; 田景瑞; 纪晨阳
Original assignee: Qingdao Wangxin Information Technology Co ltd
Current assignee: Qingdao Wangxin Information Technology Co ltd
Priority date: 2021-05-12
Filing date: 2021-05-12
Publication date: 2022-08-26
Anticipated expiration: 2041-05-12
Also published as: CN113240270A

Abstract

本发明涉及一种渠道商运用大数据、预测算法选择供应商的方法及系统，属于大数据通信技术领域。本发明所述的渠道商首先设定多种维度属性，然后将维度属性进行组合，最后将每种组合形式映射成一种虚拟通道；渠道商的大数据平台会收集每个供应商的反馈数据，然后按照设定的虚拟通道，从反馈数据中分析得到每个供应商每种虚拟通道的质量状况；渠道商在收集一段时间的虚拟通道的指标后，运用预测技术，预测每个虚拟通道在未来一段时间的质量状况；未来终端用户的数据到达渠道商时，渠道商首先分析出终端用户发送数据对应的虚拟通道，然后结合设定的目标函数，选择最佳供应商；方法在复杂不稳定通道中，基于质量评判和预测，提高数据传输效率。

Description

渠道商运用大数据、预测算法选择供应商的方法及系统

技术领域

本发明涉及一种渠道商运用大数据、预测算法选择供应商的方法及系统，属于大数据通信技术领域。

背景技术

如今，通过不稳定数据通道(或者网络)传输数据时，没有利用数据带来的额外信息帮助选择通道。但是在很多情况下，这些额外的信息将会帮助渠道商选择较好的供应商(或者通道)，从而提高传输速度、成功率，并且降低费用。因此，尚需要提供一种利用这些额外信息的大数据平台解决渠道商择供应商的技术方案。

发明内容

针对现有技术存在的上述缺陷，本发明提出了一种渠道商运用大数据、预测算法选择供应商的方法及系统。

本发明所述的渠道商运用大数据、预测算法选择供应商的方法，应用于终端用户与供应商之间的渠道商所在大数据平台，渠道商首先设定多种维度属性，然后将维度属性进行组合，最后将每种组合形式映射成一种虚拟通道，渠道商的大数据平台会收集每个供应商的反馈数据，然后按照设定的虚拟通道，从反馈数据中分析得到每个供应商每种虚拟通道的质量状况；渠道商在收集一段时间的虚拟通道的指标后，预测每个虚拟通道在未来一段时间的质量状况，未来终端用户的数据到达渠道商时，渠道商首先分析出终端用户发送数据对应的虚拟通道，然后结合设定的目标函数，选择最佳供应商，其中：

维度属性是从终端用户数据的元数据中提取的，维度属性对终端用户和供应商是透明的；

维度属性组合的虚拟通相关的数据维护在渠道商；

渠道商维护虚拟通道相关数据，并获取数据的元数据；

渠道商收集供应商的反馈信息，每隔一段时间汇总一下反馈信息；

渠道商所在大数据平台，每隔一段时间计算和分析过去一段时间每个供应商的每个虚拟通道的质量状况；

基于虚拟通道上的历史质量状况数据，使用预测算法，虚拟通道上的未来一段时间的质量状况；

基于预测算法得到的预测数据，以及最终的目标函数，给数据选择未来一段时间内最佳的供应商。

优选地，维护维度属性不影响终端用户原始数据，对于终端用户和供应商都是透明的。

虚拟通道是维度属性的组合。例如有两个维度：[地区，运营商]，那么[北京，移动]就表示一个虚拟通道，[北京，电信]表示另一个虚拟通道。

对于每一个供应商，渠道商会分析供应商在每个虚拟通道上的质量。

优选地，所述大数据平台的预测算法采用时间序列分析算法，包括ARIMA算法、KALMAN滤波算法、长短时记忆神经网络算法。

优选地，所述预测数据包括平均耗时、成功率、推送最佳、追踪拐点值。

优选地，所述供应商的质量的评判标准包括传输平均用时、方差、成功率、成本。

优选地，所述大数据平台的预测算法具体包括如下小步：

步骤一：设定维度属性，将维度属性的组合映射成虚拟通道；

步骤二：利用流式计算，基于终端用户发送数据的元数据，以及供应商的反馈数据，计算每个时段每个供应商每个虚拟通道的质量，质量的评判标准包括但是不限于传输平均用时、方差、成功率、成本；

步骤三：基于每个虚拟通道上的历史数据，使用预测算法，给出下一段时间的预测数据；

步骤四：基于最终的目标函数，以及预测数据，决定未来一段时间终端用户发送的数据对应的虚拟通道以及最终的供应商。

本发明所述的渠道商运用大数据、预测算法选择供应商的系统，包括：

终端用户，是数据发送的主体，发送的数据可以不包含额外的信息，所有质量数据、维度数据、虚拟通道信息维护在渠道商；终端不需要感知虚拟通道的存在；

渠道商，针对每个实际供应商设定和维护虚拟通道，渠道商基于大数据平台和预测算法给用户数据选择未来一段时间内最佳的供应商或多个备选供应商；

供应商，用于提供给渠道商若干个可供选择的质量不稳定的虚拟通道。

至少一个处理器；

至少一个存储器，用于存储大数据平台；

当大数据平台被至少一个处理器执行，使得至少一个处理器实现如权利要求1～6任一项所述的一种渠道商运用大数据、预测算法选择供应商的方法。

本发明的有益效果是：本发明所述的渠道商运用大数据、预测算法选择供应商的方法及系统，在多个复杂不稳定虚拟通道中传输数据时，基于质量评判和预测，提高数据传输效率。

附图说明

图1是本发明的原理流程框图。

图2是本发明的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例1：

如图1所示，本发明所述的渠道商运用大数据、预测算法选择供应商的方法，应用于用户终端与供应商之间的渠道商所在大数据平台，根渠道商首先设定多种维度属性，然后将维度属性进行组合，最后将每种组合形式映射成一种虚拟通道。渠道商的大数据平台会收集每个供应商的反馈数据，然后按照设定的虚拟通道，从反馈数据中分析得到每个供应商每种虚拟通道的质量状况。渠道商在收集一段时间的虚拟通道的指标后，运用预测技术，预测每个虚拟通道在未来一段时间的质量状况。未来终端用户的数据到达渠道商时，渠道商首先分析出终端用户发送数据对应的虚拟通道，然后结合设定的目标函数，选择最佳供应商。其中：

维度属性是从终端用户数据的元数据中提取的，维度属性对终端用户和供应商是透明的。

渠道商维护虚拟通道(维度属性组合)相关的数据。

渠道商除了维护虚拟通道相关数据，还需要知道一些数据的元数据。

渠道商收集供应商的反馈信息，每隔一段时间汇总一下反馈信息。

所述元数据基本属性包括发送起始时间、是否发送成功、回复时间等；

数据源的属性字段的维度属性包括运营商、地区、额度；

所述大数据平台的预测算法采用时间序列分析算法，包括ARIMA算法、KALMAN滤波算法、长短时记忆神经网络算法。

ARIMA算法：平稳时间序列的偏相关系数φk和自相关系数rk均不截尾，但较快收敛到0，则该时间序列可能是ARMA(p，q)模型。

KALMAN滤波算法：Kalman滤波是一种递归过程，主要有两个更新过程：时间更新和观测更新，其中时间更新主要包括状态预测和协方差预测，主要是对系统的预测，而观测更新主要包括计算卡尔曼增益、状态更新和协方差更新，因此整个递归过程主要包括五个方面的计算：1)状态预测；2)协方差预测；3)卡尔曼增益；4)状态更新；5)协方差更新。

长短时记忆神经网络算法：一种特殊的递归神经网络，递归神经网络就是网络能够解决时间序列问题的预测。所谓递归神经网络就是网络中具有循环结构。递归神经网路从某种程度来说和传统的神经网络并非完全不同。可以将递归神经网络想象成有多层相同网络结构的神经网络，每一层将信息传递给下一层。

所述预测数据包括平均耗时、成功率、推送最佳、追踪拐点值。

所述供应商的质量的评判标准包括传输平均用时、方差、成功率、成本。

所述大数据平台的预测算法具体包括如下小步：

步骤一：收集每条数据源的基本属性和维度属性；

步骤二：将数据源放入大数据平台，利用流式计算，计算每个时段单一维度或维度组合在每个虚拟通道上的质量，质量的评判标准包括传输平均用时、方差、成功率、成本；

步骤三：基于单个维度或者维度组合在每个虚拟通道上的历史数据，使用预测算法，给出下一段时间的预测数据；

步骤四：基于最终的目标函数，以及预测数据，决定未来一段时间该维度组合是否选择某条虚拟通道。

实施例2：

如图2所示，本发明所述的渠道商运用大数据、预测算法选择供应商的系统，包括：

用户终端，用于发送和上传带有基本属性和维度属性的数据源；

渠道商，用于划分数据源为多个虚拟通道，渠道商基于大数据平台和预测算法给用户数据选择未来一段时间内最佳的供应商；

至少一个处理器；

至少一个存储器，用于存储大数据平台；

当大数据平台被至少一个处理器执行，使得至少一个处理器实现所述的渠道商运用大数据、预测算法选择供应商的方法。

最佳虚拟通道可能有多个，而这些虚拟通道可能会对应多个真实供应商。大数据平台追踪所有虚拟通道质量状况，并结合目标函数，挑选所有符合要求的虚拟通道所对应的真实供应商。

实施例3:

本发明所述的用户终端，例如手机，进行充值操作。需要指出的是，渠道商充值过程是不稳地的，存在供应商充值失败的可能性。当这个订单到了渠道商的系统，渠道商立即知道充值金额，然后渠道商解析手机号，得到用户终端是哪个ISP和哪个省份的，即获得发送数据的维度信息。

渠道商的虚拟通道是每个真实供应商在[ISP_省份_面值]这三个维度的组合。这种组合大概有几千种，所以虚拟通道有几千种。比如渠道商有10个供应商，ISP包括移动、联通、电信三家，省份34个，面值统计[30，50，100]三种。从而虚拟通道有10*3*34*3＝3060种。渠道商通过大数据技术，分析虚拟通道在每个真实供应商的表现。比如，在10:05分通过10:00之前的数据，预测10:05～11:05的虚拟通道的状况，当订单在10:05之后到来时，渠道商首先挑选适合的虚拟通道，然后再把虚拟通道对应的真实供应商找到，最后把订单交给供应商。

本发明可广泛运用于大数据通信场合。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。

尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims

1.一种渠道商运用大数据、预测算法选择供应商的方法，应用于数据传输中，终端用户与供应商之间的渠道商所在大数据平台，其特征在于，渠道商首先设定多种维度属性，然后将维度属性进行组合，最后将每种组合形式映射成一种虚拟通道，渠道商的大数据平台会收集每个供应商的反馈数据，然后按照设定的虚拟通道，从反馈数据中分析得到每个供应商每种虚拟通道的质量状况；渠道商在收集一段时间的虚拟通道的指标后，预测每个虚拟通道在未来一段时间的质量状况，未来终端用户的数据到达渠道商时，渠道商首先分析出终端用户发送数据对应的虚拟通道，然后结合设定的目标函数，选择最佳供应商，其中：

维度属性组合的虚拟通道相关的数据维护在渠道商；

渠道商维护虚拟通道相关数据，并获取数据的元数据；

渠道商所在大数据平台，每隔一段时间计算和分析过去每个供应商的每个虚拟通道的质量状况；

基于预测算法得到的预测数据，以及最终的目标函数，给数据选择未来一段时间内最佳的供应商；预测数据包括平均耗时、成功率、推送最佳、追踪拐点值；所述供应商的质量的评判标准包括传输平均用时、方差、成功率、成本。

2.根据权利要求1所述的渠道商运用大数据、预测算法选择供应商的方法，其特征在于，维护维度属性不影响终端用户原始数据，对于终端用户和供应商都是透明的。

3.根据权利要求1所述的渠道商运用大数据、预测算法选择供应商的方法，其特征在于，所述大数据平台的预测算法采用时间序列分析算法，包括ARIMA算法、KALMAN滤波算法、长短时记忆神经网络算法。

4.根据权利要求1所述的渠道商运用大数据、预测算法选择供应商的方法，其特征在于，所述大数据平台的预测算法具体包括如下小步：

5.一种应用权利要求1所记载的渠道商运用大数据、预测算法选择供应商的方法的系统，其特征在于，包括：

6.一种渠道商运用大数据、预测算法选择供应商的系统，其特征在于，包括：

至少一个处理器；

至少一个存储器，用于存储大数据平台；

当大数据平台被至少一个处理器执行，使得至少一个处理器实现如权利要求1～4任一项所述的一种渠道商运用大数据、预测算法选择供应商的方法。