CN107370764A - 一种音视频通信系统及音视频通信方法 - Google Patents

一种音视频通信系统及音视频通信方法 Download PDF

Info

Publication number
CN107370764A
CN107370764A CN201710792789.2A CN201710792789A CN107370764A CN 107370764 A CN107370764 A CN 107370764A CN 201710792789 A CN201710792789 A CN 201710792789A CN 107370764 A CN107370764 A CN 107370764A
Authority
CN
China
Prior art keywords
communication
training sample
clients
communication channel
characteristic value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710792789.2A
Other languages
English (en)
Other versions
CN107370764B (zh
Inventor
冯巍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201710792789.2A priority Critical patent/CN107370764B/zh
Publication of CN107370764A publication Critical patent/CN107370764A/zh
Application granted granted Critical
Publication of CN107370764B publication Critical patent/CN107370764B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00—Arrangements affording multiple use of the transmission path
    • H04L5/003—Arrangements for allocating sub-channels of the transmission path
    • H04L5/0058—Allocation criteria
    • H04L5/0064—Rate requirement of the data, e.g. scalable bandwidth, data priority

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请公开了一种音视频通信系统及音视频通信方法，其中，音视频通信系统的服务器通过训练样本库确定每两个客户端之间通信通道的各特征值对应的权重值，从而为在接收到客户端的通信请求后，为通信双方客户端选择较为稳定的通信通道提供依据，具体地，服务器在接收到客户端的通信请求后，根据通信请求中的通信双方客户端的各特征值和各特征值对应的权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给通信请求中的通信双方客户端，客户端根据接收的服务器下发的通信通道优先级确定通信通道进行通信，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。

Description

一种音视频通信系统及音视频通信方法
技术领域
本申请涉及通信技术领域，更具体地说，涉及一种音视频通信系统及音视频通信方法。
背景技术
网络穿透技术(Network Address Translation，NAT)，又称为网络地址转换或网络地址翻译技术，是通信技术领域的重要技术之一。在网络穿透技术中，互动式连接建立协议(Interactive Connectivity Establishment，ICE)是其中应用最为广泛的网络穿透技术之一，ICE广泛应用于音视频通话等应用中。其基本思想是通话双方优先选择点对点的通信通道传输音视频数据，在点对点通信通道不可达的情况下使用转发服务器通信通道来转发通话双方的数据。
但是在很多情况下，由于通信双方所处的通信环境的差异(例如通信双方分别处在不同网络运营商的网络环境中)，使得利用ICE方式选择的通信通道并不稳定，存在速率慢且延时大的问题，会降低用户的通话质量和用户体验。
发明内容
为解决上述技术问题，本发明提供了一种音视频通信系统及音视频通信方法，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。
为实现上述技术目的，本发明实施例提供了如下技术方案：
一种音视频通信系统，包括：服务器和至少两个客户端，其中，
所述服务器用于根据训练样本库确定每两个所述客户端之间的通信通道的各特征值及每个特征值对应的权重值，和用于接收各所述客户端的通信请求，根据所述通信请求对应的通信双方客户端的每个通信通道的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端的一次通信过程中的日志数据；
所述客户端，用于发送所述通信请求，和用于接收所述服务器下发的通信通道优先级，并根据接收到的所述通信通道优先级确定进行通信的通信通道。
可选的，所述通信双方客户端的一次通信过程中的日志数据包括通信双方客户端通信过程基于的通信通道、多个特征值和多个网络环境信息。
可选的，所述服务器根据训练样本库确定每两个所述客户端之间的通信通道各特征值对应的权重值的过程具体包括：
对所述训练样本库中的所有训练样本分别进行评分；
将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值。
可选的，所述服务器对所述训练样本库中的所有训练样本分别进行评分的具体过程包括：
根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
将每个所述训练样本中各所述特征值的评分的平均值作为所述训练样本的评分。
可选的，所述服务器将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值的具体过程包括：
在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入第一预设公式进行迭代；
判断所述通信双方客户端的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端的特征值，如果否，则继续进行迭代直至所述通信双方客户端的特征值对应的权重收敛；
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
可选的，所述服务器根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级的具体过程包括：
将所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端之间的通信通道的优先级；
所述第二预设公式为：其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
可选的，所述客户端还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器；
所述服务器还用于接收所述客户端上传的训练样本，并将所述客户端上传的训练样本放入所述训练样本库中。
一种音视频通信方法，应用于服务器，所述音视频通信方法包括：
根据训练样本库确定每两个所述客户端之间的通信通道的各特征值及每个特征值对应的权重值；
接收各所述客户端的通信请求；
根据所述通信请求对应的通信双方客户端的每个通信通道的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级；
将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端的一次通信过程中的日志数据。
可选的，所述通信双方客户端的一次通信过程中的日志数据包括通信双方客户端通信过程基于的通信通道、多个特征值和多个网络环境信息。
可选的，所述根据训练样本库确定每两个客户端之间的通信通道各特征值对应的权重值包括：
对所述训练样本库中的所有训练样本分别进行评分；
将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值。
可选的，所述对所述训练样本库中的所有训练样本分别进行评分包括：
根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
将每个所述训练样本中各所述特征值的评分的平均值作为所述训练样本的评分。
可选的，所述将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值包括：
在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入第一预设公式进行迭代；
判断所述通信双方客户端的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端的特征值；如果否，则继续进行迭代直至所述通信双方客户端的特征值对应的权重收敛；
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
可选的，所述根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级包括：
将所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端之间的通信通道的优先级；
所述第二预设公式为：其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
可选的，当所述客户端还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器时，还包括：
接收所述客户端上传的训练样本；
将所述客户端上传的训练样本放入所述训练样本库中。
一种音视频通信方法，应用于客户端，所述音视频通信方法包括：
发送所述通信请求；
接收服务器下发的通信通道优先级；
根据接收到的所述通信通道优先级确定进行通信的通信通道。
可选的，还包括：
记录当前通信过程中的日志数据；
在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器。
从上述技术方案可以看出，本发明实施例提供了一种音视频通信系统及音视频通信方法，其中，所述音视频通信系统的服务器通过训练样本库确定每两个所述客户端之间的通信通道的各特征值对应的权重值，从而为在接收到客户端的通信请求后，为通信双方客户端选择较为稳定的通信通道提供依据，具体地，所述服务器在接收到所述客户端的通信请求后，根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求中的通信双方客户端，所述客户端根据接收的所述服务器下发的通信通道优先级确定通信通道进行通信，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请的一个实施例提供的一种音视频通信系统的结构示意图；
图2为本申请的一个实施例提供的一种音视频通信方法的流程示意图；
图3为本申请的另一个实施例提供的一种音视频通信方法的流程示意图；
图4为本申请的又一个实施例提供的一种音视频通信方法的流程示意图；
图5为本申请的再一个实施例提供的一种音视频通信方法的流程示意图；
图6为本申请的一个优选实施例提供的一种音视频通信方法的流程示意图；
图7为本申请的另一个优选实施例提供的一种音视频通信方法的流程示意图；
图8本申请的一个具体实施例提供的一种音视频通信方法的流程示意图；
图9为本申请的另一个具体实施例提供的一种音视频通信方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本申请实施例提供了一种音视频通话系统，如图1所示，包括：服务器200和至少两个客户端100，其中，
所述服务器200用于根据训练样本库确定每两个所述客户端100之间的通信通道的各特征值及每个特征值对应的权重值，和用于接收各所述客户端100的通信请求，根据所述通信请求对应的通信双方客户端100的各特征值和各特征值对应的所述权重值确定通信双方客户端100之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端100；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端100的一次通信过程中的日志数据；
所述客户端100，用于发送所述通信请求，和用于接收所述服务器200下发的通信通道优先级，并根据接收到的所述通信通道优先级确定进行通信的通信通道。
需要说明的是，所述通信请求包括：通信双方客户端100的状态信息。所述训练样本库根据以往各个客户端100之间的大量的通信过程中的日志数据生成，每两个客户端100的一次通信过程都可以作为一个训练样本放入所述训练样本库中，由于每个训练样本都是用来描述一个通信通道在一个通信环境中的具体表现，因此一般只将两个客户端100之间的一次通信过程作为一个训练样本，而不会将两个客户端100之间的多次通信过程作为一个训练样本，这是因为多次通信过程中，两个客户端100采用的通信通道和所处的通信环境均有可能不同，如果将多次通信过程作为一个训练样本，可能会使得训练样本无法描述一个通信通道在一个通信环境中的具体表现；
所述训练样本库可以根据客户端100之间的训练样本的增加实时更新，也可以每隔一段时间，根据客户端100之间的训练样本的增加进行更新，从而使得所述音视频通信系统中的每两个所述客户端100之间的通信通道的各特征值对应的权重值可以得到一定程度上的更新，在接收到所述客户端100的通信请求后，根据所述通信请求中的通信双方客户端100的各特征值和各特征值对应的所述权重值确定通信双方客户端100之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求中的通信双方客户端100，所述客户端100根据接收的所述服务器200下发的通信通道优先级确定通信通道进行通信，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。
优选的，所述客户端100从接收到的所述通信通道优先级中优先级排序较高的通信通道中进行选择并进行通信，以使客户端100选择的进行通信的通信通道具有相对较好的稳定性，从而提升通信双方客户端100的通信质量；更优选的，所述客户端100将接收到的所述通信通道优先级中优先级排序最高的通信通道作为接下来进行通信的通信通道，以使客户端100选择的进行通信的通信通道具有相对最好的稳定性，从而提升通信双方客户端100的通信质量。
在上述实施例的基础上，在本申请的一个实施例中，所述通信双方客户端100的一次通信过程中的日志数据包括通信双方客户端100通信过程基于的通信通道、多个特征值和多个网络环境信息。
需要说明的是，所述客户端100的网络环境信息包括但不限于所述客户端100使用的网络类型、网络运营商和地理位置。所述网络类型包括但不限于2G网络、3G网络、4G网络、WIFI网络和有线网络。所述特征值是指所述网络环境信息中各个参数对应的特征值，这些特征值根据预定的参数确定。
具体地，例如，以网络类型为例，与各个网络类型对应的特征值参考表1。
表1：各个网络类型对应的特征值
网络类型 特征值
未知 0
2G 0.2
3G 0.4
4G 0.8
WIFI 0.8
有线 1
本申请对所述网络环境信息中各个参数具体对应的特征值并不做限定，具体视实际情况而定。
在上述实施例的基础上，在本申请的另一个实施例中，所述服务器200根据训练样本库确定每两个所述客户端100之间的通信通道各特征值对应的权重值的过程具体包括：
对所述训练样本库中的所有训练样本分别进行评分；
将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端100的特征值代入线性回归模型中进行训练，获得通信双方客户端100之间各通信通道的各特征值对应的权重值。
具体地，本申请的一个实施例提供了一种服务器200对所述训练样本库中的所有训练样本分别进行评分的具体过程，包括：
根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
将每个所述训练样本中各所述特征值的评分的平均值作为所述训练样本的评分。
需要说明的是，通信双方客户端100的一次通信过程中的日志数据通常包括如下几部分：通话质量数据、网络环境信息和使用的通信通道；其中，所述通话质量数据包括但不限于传输码率、丢包率、延时和显示帧率；所述网络环境信息包括但不限于网络类型、网络运营商、地理位置；所述通信通道包括点对点通信通道和转发服务器通信通道。
以传输码率为例，设立一个根据用户体验确定的与传输码率对应的预设阈值，例如600kbps，即每秒600kbit，如果在训练样本中的传输码率高于此预设阈值，则该项的特征值对应的评分为满分(1.0)；如果训练样本中的传输码率小于此预设阈值，则该按照训练样本中的传输码率与预设阈值的比值进行评分，例如训练样本中的传输码率为300kbps，则传输码率这项特征值对应的评分为300/600＝0.5。显示帧率与传输码率一样，也是越高越好，假设显示帧率的预设阈值为15fps。而对于丢包率和延时这两个特征值是值越低评分越高，如果训练样本中这两个特征值对应的数值低于预设阈值则评分为满分(1.0)，超过预设阈值则按照预设阈值与训练样本中实际值的比例进行评分，例如丢包率的预设阈值假设为2％，则如果训练样本中的丢包率为5％，则丢包率该项特征值的评分为2％/5％＝0.4。
假设某一训练样本中特征值包括：传输码率、显示帧率、丢包率和延时；其中，传输码率的评分为0.8，显示帧率的评分为0.7，丢包率的评分为0.9，延时的评分为0.8，则最后该训练样本的评分为(0.8+0.7+0.9+0.8)/4＝0.8。
在上述实施例的基础上，在本申请的又一个实施例中，所述服务器200将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端100的特征值代入线性回归模型中进行训练，获得通信双方客户端100之间各通信通道的各特征值对应的权重值的具体过程包括：
在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端100的特征值代入第一预设公式进行迭代；
判断所述通信双方客户端100的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端100的特征值，如果否，则继续进行迭代直至所述通信双方客户端100的特征值对应的权重收敛；
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
需要说明的是，判断所述通信双方客户端100的特征值对应的权重是否收敛的条件可以是所述通信双方客户端100的特征值对应的权重在两次迭代计算之间差值小于一定阈值，这个阈值可以是0.0001，即还可以是0.000001，即阈值的确定对迭代次数和迭代精度有一定影响，越小的阈值意味着更高的迭代精度和更多的迭代次数，而相应的，越大的预支意味着较低的迭代精度和较少的迭代次数，因此阈值的确定往往需要在迭代精度和迭代次数之间平衡后选择，在保证效率(一定数量的迭代次数)的同时具有符合要求的迭代精度，本申请对该阈值的具体取值并不做限定，具体视实际情况而定。
在上述实施例的基础上，在本申请的一个具体实施例中，所述服务器200根据所述通信请求中的通信双方客户端100的各特征值和各特征值对应的所述权重值确定通信双方客户端100之间的通信通道的优先级的具体过程包括：
将所述通信请求中的通信双方客户端100的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端100之间的通信通道的优先级；
所述第二预设公式为：其中，其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
在上述实施例的基础上，在本申请的一个优选实施例中，所述客户端100还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器200；
所述服务器200还用于接收所述客户端100上传的训练样本，并将所述客户端100上传的训练样本放入所述训练样本库中。
需要说明的是，在本实施例中，所述客户端100可以主动收集当前通信过程中的日志数据，并将收集的通信过程中的日志数据作为训练样本扩充所述训练样本库，而不需要人为寻找训练样本对所述训练样本库进行更新，从而降低工作人员的劳动强度。
相应的，本申请实施例还提供了一种音视频通信方法，如图2所示，应用于服务器，所述音视频通信方法包括：
S101：根据训练样本库确定每两个所述客户端之间的通信通道的各特征值及每个特征值对应的权重值；
S102：接收各所述客户端的通信请求；
S103：根据所述通信请求对应的通信双方客户端的每个通信通道的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级；
S104：将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端的一次通信过程中的日志数据。
需要说明的是，所述通信请求包括：通信双方客户端的状态信息。所述训练样本库根据以往各个客户端之间的大量的通信过程中的日志数据生成，每两个客户端的一次通信过程都可以作为一个训练样本放入所述训练样本库中，由于每个训练样本都是用来描述一个通信通道在一个通信环境中的具体表现，因此一般只将两个客户端100之间的一次通信过程作为一个训练样本，而不会将两个客户端100之间的多次通信过程作为一个训练样本，这是因为多次通信过程中，两个客户端100采用的通信通道和所处的通信环境均有可能不同，如果将多次通信过程作为一个训练样本，可能会使得训练样本无法描述一个通信通道在一个通信环境中的具体表现；
所述训练样本库可以根据客户端之间的训练样本的增加实时更新，也可以每隔一段时间，根据客户端之间的训练样本的增加进行更新，从而使得所述音视频通信系统中的每两个所述客户端之间的通信通道的各特征值对应的权重值可以得到一定程度上的更新，在接收到所述客户端的通信请求后，根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求中的通信双方客户端，所述客户端根据接收的所述服务器下发的通信通道优先级确定通信通道进行通信，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。
在上述实施例的基础上，在本申请的一个实施例中，所述通信双方客户端的一次通信过程中的日志数据包括使用的通信通道、多个特征值和多个网络环境信息。
需要说明的是，所述客户端的网络环境信息包括但不限于所述客户端使用的网络类型、网络运营商和地理位置。所述网络类型包括但不限于2G网络、3G网络、4G网络、WIFI网络和有线网络。所述特征值是指所述网络环境信息中各个参数对应的特征值，这些特征值根据预定的参数确定。
具体地，例如，以网络类型为例，与各个网络类型对应的特征值参考表1。
表1：各个网络类型对应的特征值
网络类型 特征值
未知 0
2G 0.2
3G 0.4
4G 0.8
WIFI 0.8
有线 1
本申请对所述网络环境信息中各个参数具体对应的特征值并不做限定，具体视实际情况而定。
在上述实施例的基础上，在本申请的另一个实施例中，如图3所示，所述根据训练样本库确定每两个客户端之间的通信通道各特征值对应的权重值包括：
S1011：对所述训练样本库中的所有训练样本分别进行评分；
S1012：将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值。
具体地，如图4所示，所述对所述训练样本库中的所有训练样本分别进行评分包括：
S10111：根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
S10112：将每个所述训练样本中各所述特征值的评分平均值作为所述训练样本的评分。
需要说明的是，通信双方客户端的一次通信过程中的日志数据通常包括如下几部分：通话质量数据、网络环境信息和使用的通信通道；其中，所述通话质量数据包括但不限于传输码率、丢包率、延时和显示帧率；所述网络环境信息包括但不限于网络类型、网络运营商、地理位置；所述通信通道包括点对点通信通道和转发服务器通信通道。
以传输码率为例，设立一个根据用户体验确定的与传输码率对应的预设阈值，例如600kbps，即每秒600kbit，如果在训练样本中的传输码率高于此预设阈值，则该项的特征值对应的评分为满分(1.0)；如果训练样本中的传输码率小于此预设阈值，则该按照训练样本中的传输码率与预设阈值的比值进行评分，例如训练样本中的传输码率为300kbps，则传输码率这项特征值对应的评分为300/600＝0.5。显示帧率与传输码率一样，也是越高越好，假设显示帧率的预设阈值为15fps。而对于丢包率和延时这两个特征值是值越低评分越高，如果训练样本中这两个特征值对应的数值低于预设阈值则评分为满分(1.0)，超过预设阈值则按照预设阈值与训练样本中实际值的比例进行评分，例如丢包率的预设阈值假设为2％，则如果训练样本中的丢包率为5％，则丢包率该项特征值的评分为2％/5％＝0.4。
假设某一训练样本中特征值包括：传输码率、显示帧率、丢包率和延时；其中，传输码率的评分为0.8，显示帧率的评分为0.7，丢包率的评分为0.9，延时的评分为0.8，则最后该训练样本的评分为(0.8+0.7+0.9+0.8)/4＝0.8。
在上述实施例的基础上，在本申请的又一个实施例中，如图5所示，所述将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值包括：
S10121：在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入第一预设公式进行迭代；
S10122：判断所述通信双方客户端的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端的特征值；如果否，则继续进行迭代直至所述通信双方客户端的特征值对应的权重收敛。
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
需要说明的是，判断所述通信双方客户端的特征值对应的权重是否收敛的条件可以是所述通信双方客户端的特征值对应的权重在两次迭代计算之间差值小于一定阈值，这个阈值可以是0.0001，即还可以是0.000001，即阈值的确定对迭代次数和迭代精度有一定影响，越小的阈值意味着更高的迭代精度和更多的迭代次数，而相应的，越大的预支意味着较低的迭代精度和较少的迭代次数，因此阈值的确定往往需要在迭代精度和迭代次数之间平衡后选择，在保证效率(一定数量的迭代次数)的同时具有符合要求的迭代精度，本申请对该阈值的具体取值并不做限定，具体视实际情况而定。
在上述实施例的基础上，在本申请的一个具体实施例中，如图6所示，所述根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级包括：
S1031：将所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端之间的通信通道的优先级；
所述第二预设公式为：其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
在上述实施例的基础上，在本申请的一个优选实施例中，如图7所示，当所述客户端还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器时，所述音视频通信方法还包括：
S105：接收所述客户端上传的训练样本；
S106：将所述客户端上传的训练样本放入所述训练样本库中。
需要说明的是，在本实施例中，所述客户端可以主动收集当前通信过程中的日志数据，并将收集的通信过程中的日志数据作为训练样本扩充所述训练样本库，而不需要人为寻找训练样本对所述训练样本库进行更新，从而降低工作人员的劳动强度。
相应的，本申请实施例还提供了一种音视频通信方法，如图8所示，应用于客户端，所述音视频通信方法包括：
S201：发送所述通信请求；
S202：接收服务器下发的通信通道优先级；
S203：根据接收到的所述通信通道优先级确定通信通道进行通信；
所述通信请求包括：通信双方客户端的状态信息。
优选的，所述客户端从接收到的所述通信通道优先级中优先级排序较高的通信通道中进行选择并进行通信，以使客户端选择的进行通信的通信通道具有相对较好的稳定性，从而提升通信双方客户端的通信质量；更优选的，所述客户端将接收到的所述通信通道优先级中优先级排序最高的通信通道作为接下来进行通信的通信通道，以使客户端选择的进行通信的通信通道具有相对最好的稳定性，从而提升通信双方客户端的通信质量。
在上述实施例的基础上，在本申请的一个实施例中，如图9所示，所述音视频通信方法还包括：
S204：记录当前通信过程中的日志数据；
S205：在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器。
需要说明的是，在本实施例中，所述客户端可以主动收集当前通信过程中的日志数据，并将收集的通信过程中的日志数据作为训练样本扩充所述训练样本库，而不需要人为寻找训练样本对所述训练样本库进行更新，从而降低工作人员的劳动强度。
综上所述，本申请实施例提供了一种音视频通信系统及音视频通信方法，其中，所述音视频通信系统的服务器通过训练样本库确定每两个所述客户端之间的通信通道的各特征值对应的权重值，从而为在接收到客户端的通信请求后，为通信双方客户端选择较为稳定的通信通道提供依据，具体地，所述服务器在接收到所述客户端的通信请求后，根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求中的通信双方客户端，所述客户端根据接收的所述服务器下发的通信通道优先级确定通信通道进行通信，以实现提升选择的通信通道的稳定性，从而提升通信通道的速率，降低延时，进而提升用户的通话质量和用户体验。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (16)

1.一种音视频通信系统，其特征在于，包括：服务器和至少两个客户端，其中，
所述服务器用于根据训练样本库确定每两个所述客户端之间的通信通道的各特征值及每个特征值对应的权重值，和用于接收各所述客户端的通信请求，根据所述通信请求对应的通信双方客户端的通信通道的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级，并将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端的一次通信过程中的日志数据；
所述客户端，用于发送所述通信请求，和用于接收所述服务器下发的通信通道优先级，并根据接收到的所述通信通道优先级确定进行通信的通信通道。
2.根据权利要求1所述的系统，其特征在于，所述通信双方客户端的一次通信过程中的日志数据包括通信双方客户端通信过程基于的通信通道、多个特征值和多个网络环境信息。
3.根据权利要求2所述的系统，其特征在于，所述服务器根据训练样本库确定每两个所述客户端之间的通信通道各特征值对应的权重值的过程具体包括：
对所述训练样本库中的所有训练样本分别进行评分；
将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值。
4.根据权利要求3所述的系统，其特征在于，所述服务器对所述训练样本库中的所有训练样本分别进行评分的具体过程包括：
根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
将每个所述训练样本中各所述特征值的评分的平均值作为所述训练样本的评分。
5.根据权利要求3所述的系统，其特征在于，所述服务器将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值的具体过程包括：
在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入第一预设公式进行迭代；
判断所述通信双方客户端的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端的特征值，如果否，则继续进行迭代直至所述通信双方客户端的特征值对应的权重收敛；
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
6.根据权利要求1所述的系统，其特征在于，所述服务器根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级的具体过程包括：
将所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端之间的通信通道的优先级；
所述第二预设公式为：其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
7.根据权利要求1所述的系统，其特征在于，所述客户端还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器；
所述服务器还用于接收所述客户端上传的训练样本，并将所述客户端上传的训练样本放入所述训练样本库中。
8.一种音视频通信方法，其特征在于，应用于服务器，所述音视频通信方法包括：
根据训练样本库确定每两个所述客户端之间的通信通道的各特征值及每个特征值对应的权重值；
接收各所述客户端的通信请求；
根据所述通信请求对应的通信双方客户端的每个通信通道的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级；
将确定的通信通道的优先级下发给所述通信请求对应的通信双方客户端；
所述训练样本库包括多个训练样本，每个所述训练样本包括通信双方客户端的一次通信过程中的日志数据。
9.根据权利要求8所述的方法，其特征在于，所述通信双方客户端的一次通信过程中的日志数据包括通信双方客户端通信过程基于的通信通道、多个特征值和多个网络环境信息。
10.根据权利要求9所述的方法，其特征在于，所述根据训练样本库确定每两个客户端之间的通信通道各特征值对应的权重值包括：
对所述训练样本库中的所有训练样本分别进行评分；
将所述训练样本库中的所有训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值。
11.根据权利要求10所述的方法，其特征在于，所述对所述训练样本库中的所有训练样本分别进行评分包括：
根据所述训练样本库中每个训练样本中的各特征值和各特征值对应的预设阈值计算各所述特征值的评分；
将每个所述训练样本中各所述特征值的评分的平均值作为所述训练样本的评分。
12.根据权利要求10所述的方法，其特征在于，所述将所述训练样本库中的所有训练样本的评分及所述训练样本中通信双方客户端的特征值代入线性回归模型中进行训练，获得通信双方客户端之间各通信通道的各特征值对应的权重值包括：
在所述训练样本库中抽取每个通信通道下所有的训练样本，将每个所述训练样本的评分及每个所述训练样本中通信双方客户端的特征值代入第一预设公式进行迭代；
判断所述通信双方客户端的特征值对应的权重是否收敛，如果是，则根据收敛的权重确定所述通信双方客户端的特征值；如果否，则继续进行迭代直至所述通信双方客户端的特征值对应的权重收敛；
所述第一预设公式为：其中，mk表示所述训练样本库中第k个通信通道的训练样本总数，表示第t次迭代后第k个通信通道第j个特征值的权重，x(k,i)表示第k个通信通道的第i个训练样本，表示第k个通信通道第i个训练样本的第j个特征值，y(k,i)表示第k个通信通道第i个训练样本对应的评分，n为特征值总数，α为学习因子。
13.根据权利要求8所述的方法，其特征在于，所述根据所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值确定通信双方客户端之间的通信通道的优先级包括：
将所述通信请求中的通信双方客户端的各特征值和各特征值对应的所述权重值代入第二预设公式计算获得通信双方客户端之间的通信通道的优先级；
所述第二预设公式为：其中，y(k)表示第k个通信通道的优先级，表示第k个通信通道的第j个特征值对应的权重值，表示第k个通信通道的第j个特征值，n表示特征值的数量。
14.根据权利要求8所述的方法，其特征在于，当所述客户端还用于记录当前通信过程中的日志数据，并在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器时，还包括：
接收所述客户端上传的训练样本；
将所述客户端上传的训练样本放入所述训练样本库中。
15.一种音视频通信方法，其特征在于，应用于客户端，所述音视频通信方法包括：
发送所述通信请求；
接收服务器下发的通信通道优先级；
根据接收到的所述通信通道优先级确定进行通信的通信通道。
16.根据权利要求15所述的方法，其特征在于，还包括：
记录当前通信过程中的日志数据；
在当前通信完成后，将记录的通信过程中的日志数据作为训练样本上传给所述服务器。
CN201710792789.2A 2017-09-05 2017-09-05 一种音视频通信系统及音视频通信方法 Active CN107370764B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710792789.2A CN107370764B (zh) 2017-09-05 2017-09-05 一种音视频通信系统及音视频通信方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710792789.2A CN107370764B (zh) 2017-09-05 2017-09-05 一种音视频通信系统及音视频通信方法

Publications (2)

Publication Number Publication Date
CN107370764A true CN107370764A (zh) 2017-11-21
CN107370764B CN107370764B (zh) 2020-06-05

Family

ID=60311249

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710792789.2A Active CN107370764B (zh) 2017-09-05 2017-09-05 一种音视频通信系统及音视频通信方法

Country Status (1)

Country Link
CN (1) CN107370764B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112600878A (zh) * 2020-11-30 2021-04-02 新华三大数据技术有限公司 一种数据传输方法及装置
CN116175542A (zh) * 2021-11-28 2023-05-30 梅卡曼德（北京）机器人科技有限公司 抓取控制方法、装置、电子设备和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5884037A (en) * 1996-10-21 1999-03-16 International Business Machines Corporation System for allocation of network resources using an autoregressive integrated moving average method
CN101014022A (zh) * 2007-02-13 2007-08-08 北京亿企通信息技术有限公司 一种在即时通信工具中传输文件的方法、装置和系统
CN102215121A (zh) * 2010-04-07 2011-10-12 苹果公司 用于建立和利用备份通信信道的装置和方法
CN104410509A (zh) * 2014-10-16 2015-03-11 宁波菊风系统软件有限公司 一种基于质量评价的多路径数据传输方法
CN105306867A (zh) * 2014-06-05 2016-02-03 掌赢信息科技（上海）有限公司 增强端对端视频传输质量方法、装置及系统
CN105634787A (zh) * 2014-11-26 2016-06-01 华为技术有限公司 网络关键指标的评估方法、预测方法及装置和系统
CN105681445A (zh) * 2016-02-04 2016-06-15 福建星网锐捷通讯股份有限公司 数据的点对点传输路径选择方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5884037A (en) * 1996-10-21 1999-03-16 International Business Machines Corporation System for allocation of network resources using an autoregressive integrated moving average method
CN101014022A (zh) * 2007-02-13 2007-08-08 北京亿企通信息技术有限公司 一种在即时通信工具中传输文件的方法、装置和系统
CN102215121A (zh) * 2010-04-07 2011-10-12 苹果公司 用于建立和利用备份通信信道的装置和方法
CN105306867A (zh) * 2014-06-05 2016-02-03 掌赢信息科技（上海）有限公司 增强端对端视频传输质量方法、装置及系统
CN104410509A (zh) * 2014-10-16 2015-03-11 宁波菊风系统软件有限公司 一种基于质量评价的多路径数据传输方法
CN105634787A (zh) * 2014-11-26 2016-06-01 华为技术有限公司 网络关键指标的评估方法、预测方法及装置和系统
CN105681445A (zh) * 2016-02-04 2016-06-15 福建星网锐捷通讯股份有限公司 数据的点对点传输路径选择方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112600878A (zh) * 2020-11-30 2021-04-02 新华三大数据技术有限公司 一种数据传输方法及装置
CN112600878B (zh) * 2020-11-30 2022-04-01 新华三大数据技术有限公司 一种数据传输方法及装置
CN116175542A (zh) * 2021-11-28 2023-05-30 梅卡曼德（北京）机器人科技有限公司 抓取控制方法、装置、电子设备和存储介质
CN116175542B (zh) * 2021-11-28 2024-01-26 梅卡曼德（北京）机器人科技有限公司 确定夹具抓取顺序的方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN107370764B (zh) 2020-06-05

Similar Documents

Publication Publication Date Title
CN110809306B (zh) 一种基于深度强化学习的终端接入选择方法
US9609575B2 (en) Intelligent routing of network packets on telecommunication devices
CN104767629A (zh) 分配服务节点的方法、装置及系统
CA2480995A1 (en) Methods and apparatus for selecting a wireless network based on quality of service (qos) criteria associated with an application
CN107479401A (zh) 家电设备及其控制方法、装置、系统及可读存储介质
CN106911487B (zh) 一种进行语音聊天的方法和装置
CN105991707B (zh) 多媒体交互方法、服务器及系统
CN107370764B (zh) 一种音视频通信系统及音视频通信方法
Zhang et al. Social network enhanced device-to-device communication underlaying cellular networks
CN108293200B (zh) 设备吞吐量确定
CN105025525B (zh) 一种多信道无线局域网的信道负载均衡系统及方法
CN104284397A (zh) 基于通信终端的网络选择方法、装置及终端
CN103874019A (zh) 语音交互方法和装置
CN110072011B (zh) 调整码率方法及相关产品
CN105830415A (zh) 用于管理媒体流的方法、无线通信设备和基站设备
CN106576227A (zh) Dmr/pdt集群和dmr/pdt常规互联互通的方法、装置及系统
CN103763206A (zh) 一种网络调度方法及网关
CN106027599B (zh) 一种数据传输通道建立方法、系统和服务器
CN110169134A (zh) 无线质量支持视频体验的检测方法及装置
KR20220049778A (ko) 복수의 음성 인식 단말을 이용하여 음성 인식 서비스를 제공하는 서버, 음성 인식 단말 및 방법
CN110798379B (zh) 一种VoIP信令网关识别方法、装置及可读存储介质
CN103220314A (zh) 用于采集和获取雨量分布信息的方法和设备
CN116250288A8 (zh) 一种公共陆地移动网络选择方法及装置
CN104883715A (zh) 一种移动切换管理系统、方法及主控制器、边缘控制器
CN108156659A (zh) 家电设备的定位方法、装置、家电设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant