CN110351014B - 数据处理方法、装置、计算机可读存储介质和计算机设备 - Google Patents
数据处理方法、装置、计算机可读存储介质和计算机设备 Download PDFInfo
- Publication number
- CN110351014B CN110351014B CN201910629589.4A CN201910629589A CN110351014B CN 110351014 B CN110351014 B CN 110351014B CN 201910629589 A CN201910629589 A CN 201910629589A CN 110351014 B CN110351014 B CN 110351014B
- Authority
- CN
- China
- Prior art keywords
- data
- network
- terminal
- network environment
- network quality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
- H04L1/0014—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the source coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
- H04L43/0864—Round trip delays
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Environmental & Geological Engineering (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请涉及大数据,提供一种数据处理方法、装置、计算机可读存储介质和计算机设备,所述方法包括:当接收到终端发送的数据获取请求时,调用信息获取接口获取与终端对应的终端网络环境信息;提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围;基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重;按照参考权重对各个网络质量范围进行加权处理,得到终端对应的目标网络质量范围;基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包;将数据资源包发送至终端,能够根据用户网络环境的网络质量自适应地对数据资源进行动态调整。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种数据处理方法、装置、计算机可读存储介质和计算机设备。
背景技术
随着计算机技术领域的高速发展,越来越多的人在网上获取自己所需的数据资源,例如观看视频,查看图片,听音频等。但网络环境的网络质量并不是一成不变的,如何针对终端的网络质量动态地调整数据资源,这是亟需解决的一个问题。
传统地服务器在发送数据资源时,不会去考虑用户网络环境的网络质量,这会导致有些用户在网络质量较差的环境下访问数据资源时会存在无法加载,加载速度慢的情况,无法根据用户网络环境的网络质量对数据资源进行动态调整。
发明内容
基于此,有必要针对上述技术问题,提供一种数据处理方法、装置、计算机设备和存储介质,能够根据用户网络环境的网络质量自适应地对数据资源进行动态调整。
一种数据处理方法,所述方法包括:
当接收到终端发送的数据获取请求时,调用信息获取接口获取与所述终端对应的终端网络环境信息;所述终端网络环境信息包括至少两种网络环境参考数据;
提取各个所述网络环境参考数据对应的特征数据,并从映射表中确定各个所述特征数据对应的网络质量范围;
基于所述特征数据对应的网络质量范围确定各个所述网络环境参考数据的参考权重;
按照所述参考权重对各个所述网络质量范围进行加权处理,得到所述终端对应的目标网络质量范围;
基于所述目标网络质量范围对应的网络质量级别生成与所述数据获取请求对应的数据资源包;
将所述数据资源包发送至所述终端。
在其中一个实施例中,所述方法还包括:
获取与各所述网络环境参考数据对应的特征提取方式;
按照各所述网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据;
根据映射表中确定各个所述特征数据对应的网络质量范围。
在其中一个实施例中,所述方法还包括:
当所述目标网络质量范围对应的网络质量级别为非正常网络级别时,基于所述非正常网络级别生成与所述数据获取请求对应的第一数据资源包;生成的所述第一数据资源包的数据质量与所述非正常网络级别表示的网络质量相匹配;
当所述目标网络质量范围对应的网络质量级别为正常网络级别时,基于所述正常网络级别生成与所述数据获取请求对应的第二数据资源包;生成的所述第二数据资源包的数据质量与所述正常网络级别表示的网络质量相匹配。
在其中一个实施例中,所述方法还包括:
按照预设检测时间间隔获取与所述终端对应的更新后的终端网络环境信息;所述更新后的终端网络环境信息包括至少两种网络环境参考数据;
继续执行所述提取各所述网络环境参考数据的特征数据,并从映射表中确定各所述特征数据对应的网络质量范围的步骤。
在其中一个实施例中,所述方法还包括:
调用所述信息获取接口将下行测试数据发送至所述终端,接收所述终端返回的上行测试数据;
根据所述下行测试数据的发送时间和所述上行测试数据的接收时间计算得到所述数据往返时间。
一种数据处理装置,所述装置包括:
环境信息获取模块,用于当接收到终端发送的数据获取请求时,调用信息获取接口获取与所述终端对应的终端网络环境信息;所述终端网络环境信息包括至少两种网络环境参考数据;
第一范围获取模块,用于提取各个所述网络环境参考数据对应的特征数据,并从映射表中确定各个所述特征数据对应的网络质量范围;
参考权重获取模块,用于基于所述特征数据对应的网络质量范围确定各个所述网络环境参考数据的参考权重;
第二范围获取模块,用于按照所述参考权重对各个所述网络质量范围进行加权处理,得到所述终端对应的目标网络质量范围;
数据生成模块,用于基于所述目标网络质量范围对应的网络质量级别生成与所述数据获取请求对应的数据资源包;
数据处理模块,用于将所述数据资源包发送至所述终端。
在其中一个实施例中,所述装置还包括:
方式获取模块,用于获取与各所述网络环境参考数据对应的特征提取方式;
数据提取模块,用于按照各所述网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据;
范围确定模块,用于根据映射表中确定各个所述特征数据对应的网络质量范围。
在其中一个实施例中,所述装置还包括:
第一判断模块,用于当所述目标网络质量范围对应的网络质量级别为非正常网络级别时,基于所述非正常网络级别生成与所述数据获取请求对应的第一数据资源包;生成的所述第一数据资源包的数据质量与所述非正常网络级别表示的网络质量相匹配;
第二判断模块,用于当所述目标网络质量范围对应的网络质量级别为正常网络级别时,基于所述正常网络级别生成与所述数据获取请求对应的第二数据资源包;生成的所述第二数据资源包的数据质量与所述正常网络级别表示的网络质量相匹配。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述方法的步骤。
上述数据处理方法、装置、计算机可读存储介质和计算机设备,服务器提取各网络环境参考数据的特征数据,并从映射表中确定各特征数据对应的网络质量范围,能够得到每一种网络环境参考数据对应的特征数据的网络数据范围,再基于特征数据对应的网络质量范围确定各网络环境参考数据的参考权重,能够准确且客观地评估每种网络环境参考数据所对应的参考权重,并通过该参考权重进一步对各个特征数据对应的网络权重范围进行加权处理,得到终端对应的目标网络质量范围,服务器根据目标网络质量范围对应的网络质量级别生成对应的数据资源包,实现根据用户的网络质量级别动态且自适应的调整数据资源包,并将数据资源包发送至终端,服务器通过准确地获取终端对应的网络质量级别,再基于网络质量级别能够自适应地对数据资源进行动态调整。
附图说明
图1为一个实施例中数据处理方法的应用环境图;
图2为一个实施例中数据处理方法的流程示意图;
图3为又一个实施例中数据处理方法的流程示意图;
图4为再一个实施例中数据处理方法的流程示意图;
图5为一个实施例中数据处理装置的结构框图;
图6为一个实施例中计算机设备的结构框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本发明实施例中所提供的数据处理方法可以应用于如图1所示的应用环境中,该数据处理方法应用于数据处理系统。该数据处理系统包括终端110、服务器120。终端110和服务器120通过网络连接,终端110具体可以是台式终端或移动终端,移动终端具体可以是手机、平板电脑、笔记本电脑等中的至少一种。服务器120可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
基于上述数据处理系统,当服务器120接收到终端110发送的数据获取请求时,服务器120调用信息获取接口获取与终端110对应的终端网络环境信息,终端网络环境信息包括至少两种网络环境参考数据,服务器120提取各个网络环境参考数据对应的特征数据,服务器120从映射表中确定各个特征数据对应的网络质量范围,服务器120基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重,服务器120按照参考权重对各个网络质量范围进行加权处理,得到终端110对应的目标网络质量范围,服务器120基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包,服务器120将数据资源包发送至终端110。
在一个实施例中,如图2所示,提供了一种数据处理方法。本实施例主要以该方法应用于上述图1中的服务器120来举例说明。参照图2,该数据处理方法具体包括如下步骤:
S202,当接收到终端发送的数据获取请求时,调用信息获取接口获取与终端对应的终端网络环境信息;终端网络环境信息包括至少两种网络环境参考数据。
其中,数据获取请求是指终端发送至服务器用于请求接收相应数据的请求,信息获取接口是指存储于终端的应用程序接口,应用程序接口是一组定义、程序及协议的集合,通过应用程序接口实现计算机软件之间的相互通信。终端网络环境信息是指与终端对应的网络环境信息,网络环境信息用于表征终端当前的网络状况,网络环境参考数据是指判断终端网络环境时所使用的参考数据,网络环境参考数据为至少两种。
在一个实施例中,用户可在终端触发相应的资源请求指令,资源请求指令是指用户在终端触发的用于请求相应资源的指令。终端根据用户触发的资源请求指令生成数据获取请求,并将该数据获取请求发送至服务器,服务器调用信息获取接口获取与终端对应的终端网络环境信息,终端网络环境信息包括但不限于网络连接速率、数据往返时间、数据保护模式,网络连接速率是指终端在当前网络状况进行数据交互时所达到的速率信息,数据往返时间是指数据经过上行以及下行传输这一过程所需要的时间,数据保护模式是指对当前终端所存储的数据进行保护的模式。
S204,提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围。
其中,各个网络环境参考数据为至少两种,与各个网络环境参考数据对应的特征数据为至少两种。特征数据是指与各个网络环境参考数据对应的具有特征性意义的数据,特征数据包括但不限于某一特定时间段内数据连接的速率信息、数据保护模式的开启或关闭、特定时间段内数据往返的时间信息。映射表是指存储由各个特征数据与网络质量范围间对应关系的表,网络质量范围是指与各个网络环境参考数据对应的用于表征网络状况的质量范围。
具体地,各个特征数据对应的网络质量范围可为并集或交集关系,映射表可以是预先存储至服务器的表,也可以是其他终端自定义生成并将该映射表发送至服务器进行存储的。映射表中存储有大量特征数据与网络质量范围间的映射关系,服务器提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围。
在一个实施例中,当服务器在映射表中没有找到相同或相似的特征数据时,服务器调用信息获取接口重新获取终端对应的终端网络环境信息,并从服务器获取的至少两种网络环境参考数据中按照预设特征提取方式提取对应的特征数据,服务器进一步根据该重新提取的特征数据确定对应的网络质量范围。
S206,基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重。
其中,参考权重是指各个网络环境参考数据对应的权重占比信息。各个网络环境参考数据的参考权重是指该网络环境参考数据在整体评价中的相对重要程度,参考权重的表现形式包括但不限于百分比形式、数值形式、概率分布形式等。
在一个实施例中,服务器确定各个网络环境参考数据的参考权重可采用客观赋权法,客观赋权法包括但不限于主成份分析法和熵值法等,服务器根据主成份分析法确定参考权重主要包括以下步骤:(1)首先将数据标准化,这是考虑到不同数据间的量纲不一致,因而需要无量纲化。(2)对标准化后的数据进行因子分析(主成分方法),使用方差最大化旋转。(3)写出主因子得分和每个主因子的方程贡献率。(4)求出指标权重,即各个网络环境参考数据的参考权重。熵值法是指用来判断某个指标的离散程度的数学方法。离散程度越大,对该指标对综合评价的影响越大。可以用熵值判断某个指标的离散程度,服务器根据该离散程度进一步确定各个网络环境参考数据的参考权重。
S208,按照参考权重对各个网络质量范围进行加权处理,得到终端对应的目标网络质量范围。
其中,加权处理是指服务器根据参考权重对各个网络质量范围进行赋予权重的过程,目标网络质量范围是用于表征终端的网络状况的质量范围。目标网络质量范围的表现形式包括但不限于百分比形式和数值形式等,目标网络质量范围表征了终端当前的网络状况。
具体地,服务器按照参考权重对各个网络质量范围进行加权处理,可以理解的是,服务器首先获取各个网络质量范围,并根据参考权重对网络质量范围进行加权处理,其中加权处理具体可为加权求和处理,得到目标网络质量范围。例如,假定有n个网络质量范围x1,x2,x3....xn,对应权系数为p1,p2,p3....pn则其加权和为:S=p1*x1+p2*x2+p3*x3+...+pn*xn=∑(pi*xi),其中S为与终端对应的目标网络质量范围。
S210,基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包。
其中,网络质量级别是指终端当前网络状况所对应的质量级别信息,数据资源包是指携带有与数据获取请求对应的数据的资源包。在一个实施例中,服务器将获取质量级别表,质量级别表是指存储有目标网络质量范围与网络质量级别间的映射关系的表,服务器根据该质量级别表确定与目标网络质量范围对应的网络质量级别。可以理解的是,网络质量级别包括但不限于正常网络质量级别和非正常网络级别,其中正常网络质量级别和非正常网络级别可进一步细分为高等级、中等级和低等级。
具体地,服务器基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源,当网络质量界别为高等级时,服务器将生成与高等级网络质量对应的数据资源包,可以理解的是,与高等级网络质量对应的数据资源包可以是压缩量较小的数据资源包,当网络质量级别为低等级时,服务器将生成与低等级网络质量对应的数据资源包,可以理解的是,与低等级网络质量对应的数据资源包可以是压缩量较多的数据资源包,以此类推。
在一个实施例中,数据资源包括但不限于视频资源、音频资源和图片资源等。当数据资源为视频类资源,且网络质量级别为高等级时,服务器将生成与高等级网络质量对应的压缩量较小的视频资源,该视频资源为清晰度较高的视频资源,当网络质量界别为低等级时,服务器将生成与低等级网络质量对应的压缩量较多的视频资源,该视频资源为清晰度较低清的视频资源。
S212,将数据资源包发送至终端。
在一个实施例中,当数据资源包为视频类资源包时,终端接收的数据为视频;当数据资源包为音频类资源包时,终端接收的数据为音频;当数据资源包为图片类数据资源包时,终端接收的数据为图片。
本实施例中,服务器提取各网络环境参考数据的特征数据,并从映射表中确定各特征数据对应的网络质量范围,能够得到每一种网络环境参考数据对应的特征数据的网络数据范围,再基于特征数据对应的网络质量范围确定各网络环境参考数据的参考权重,能够准确且客观地评估每种网络环境参考数据所对应的参考权重,并通过该参考权重进一步对各个特征数据对应的网络权重范围进行加权处理,得到终端对应的目标网络质量范围,服务器根据目标网络质量范围对应的网络质量级别生成对应的数据资源包,实现根据用户的网络质量级别动态且自适应的调整数据资源包,并将数据资源包发送至终端,服务器通过准确地获取终端对应的网络质量级别,再基于网络质量级别能够自适应地对数据资源进行动态调整。
在一个实施例中,步骤204还包括:获取与各网络环境参考数据对应的特征提取方式;按照各网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据;根据映射表中确定各个特征数据对应的网络质量范围。
其中,特征提取方式是指服务器从网络环境参考数据中提取特征数据时所采用的提取方式,可以理解的是,不同的网络环境参考数据存在相同或不同的特征提取方式。在一个实施例中,特征提取方式可由服务器在线获取,或由其他终端自定义生成并发送至服务器,服务器通过获取特征提取方式,并按照各网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据,再根据映射表确定各个特征数据对应的网络质量范围。
具体地,当网络环境参考数据为网络连接速率时,与网络连接速率对应的特征提取方式可为某一特定时间段内的网络连接速率,当网络环境参考数据为数据往返时间时,与数据往返时间对应的特征提取方式可为某一特定时间段内数据从上行数据到下行数据所需的时间信息,当网络环境参考数据为数据保护模式时,与数据保护模式对应的特征提取方式可为某一特定时间段内数据保护模式的开启或关闭。
本实施例中,服务器通过获取与各网络环境参考数据对应的特征提取方式,并按照各网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据,再根据映射表中确定各个特征数据对应的网络质量范围,能够对不同的网络环境参考数据采用不同的特征提取方式,进一步提高服务器根据特征数据确定的网络质量范围的准确性,通过准确的网络质量范围,能够使得服务器确定与终端对应的目标网络质量范围时更加便捷且准确,以此自适应的将合适的数据资源包发送至终端。
在一个实施例中,如图3所示,步骤210还包括:
S210A,当目标网络质量范围对应的网络质量级别为非正常网络级别时,基于非正常网络级别生成与数据获取请求对应的第一数据资源包;生成的第一数据资源包的数据质量与非正常网络级别表示的网络质量相匹配。
其中,第一数据资源包是指压缩量较多且失真率较高的数据资源包,当目标网络质量范围对应的网络质量级别为非正常网络级别时,服务器基于非正常网络级别生成与数据获取请求对应的第一数据资源包,生成的第一数据资源包的数据质量与非正常网络级别表示的网络质量相匹配。
在一个实施例中,当数据资源为视频类数据资源时,终端对应的网络质量级别为非正常网络级别,服务器将生成与非正常网络级别相匹配的第一视频数据资源包,该第一视频数据资源包为压缩量较多且失真率较高的数据资源包,当终端根据该第一视频数据资源包接收视频时,该视频为清晰度较低的视频。可以理解的是,当数据资源为音频类数据资源和图片类数据资源时可依次类推。
S210B,当目标网络质量范围对应的网络质量级别为正常网络级别时,基于正常网络级别生成与数据获取请求对应的第二数据资源包;生成的第二数据资源包的数据质量与正常网络级别表示的网络质量相匹配。
其中,第二数据资源包是指压缩量较小且失真率较低的数据资源包,当目标网络质量范围对应的网络质量级别为正常网络级别时,服务器基于正常网络级别生成与数据获取请求对应的第二数据资源包,生成的第二数据资源包的数据质量与正常网络级别标识的网络质量相匹配。
在一个实施例中,当数据资源为音频类数据资源,终端对应的网络质量级别为正常网络级别时,服务器将生成与正常网络级别相匹配的第二音频数据资源包,该第二音频数据资源包为压缩量较小且失真率较低的数据资源包,当终端根据该第一音频数据资源包接收对应音频时,该音频为经过压缩后的音频。
在一个实施例中,对于图片的压缩方式可使用更换图片格式,质量压缩,采样率压缩,缩放压缩等方式。图片常用格式的压缩转换为png,jpeg和webp间格式的转换。质量压缩不会改变图片在内存中的大小,仅仅会减小图片所占用的磁盘空间的大小,质量压缩的原理是通过改变图片的位深和透明度来减小图片占用的磁盘空间大小,可用于想保持图片质量的同时减小图片所占用的磁盘空间大小的情况。采样率压缩是通过设置BitmapFactory.Options.inSample Size,来减小图片的分辨率,进而减小图片所占用的磁盘空间和内存大小。缩放压缩通过减少图片的像素来降低图片的磁盘空间大小和内存大小,可以用于缓存缩略图。进一步地,对于视频的压缩方式可采用有损压缩和无损压缩、对称编码和不对称编码、空间压缩和时间压缩。对于音频的压缩方式可采用将每一个音频声道中的音频采样信号映射到频域中,这种时域到频域的映射可通过子带滤波器实现。即去除音频信号的冗余信息。
本实施例中,当目标网络质量范围对应的网络质量级别为非正常网络级别时,基于非正常网络级别生成与数据获取请求对应的第一数据资源包,生成的第一数据资源包的数据质量与非正常网络级别表示的网络质量相匹配,当目标网络质量范围对应的网络质量级别为正常网络级别时,基于正常网络级别生成与数据获取请求对应的第二数据资源包,生成的第二数据资源包的数据质量与正常网络级别表示的网络质量相匹配,能够根据终端的网络质量级别自适应的调整数据资源,使得终端能够在接收该数据资源时不易出现卡顿或连接失败的情况。
在一个实施例中,该方法还包括:按照预设检测时间间隔获取与终端对应的更新后的终端网络环境信息;更新后的终端网络环境信息包括至少两种网络环境参考数据;继续执行提取各网络环境参考数据的特征数据,并从映射表中确定各特征数据对应的网络质量范围的步骤。
其中,预设检测时间间隔用于定时获取终端对应的终端网络环境信息,以此实现服务器根据终端实时的网络质量级别调整对应的数据资源。具体地,服务器按照预设检测时间间隔获取与终端对应的更新后的网络环境信息,更新后的网络环境信息包括至少两种网络环境参考数据,再继续执行提取各网络环境参考数据的特征数据,并从映射表中确定各特征数据对应的网络质量范围的步骤。
本实施例中,服务器根据预设检测时间间隔获取更新后的终端网络环境信息,能够实时地确定终端当前的网络质量级别,并根据更新后的网络质量级别实时生成对应的数据资源包,并将更新后的数据资源包发送至终端,以使终端根据更新后的数据资源包接收更新后的数据,通过对网络质量级别的实时更新,并根据实时更新的网络质量级别实时生成对应的数据资源包,能够根据用户网络环境的网络质量自适应地对数据资源进行动态调整。
在一个实施例中,如图4所示,终端网络环境信息包括数据往返时间,步骤202还包括:
S202A,调用信息获取接口将下行测试数据发送至终端,接收终端返回的上行测试数据。
S202B,根据下行测试数据的发送时间和上行测试数据的接收时间计算得到数据往返时间。
其中,下行测试数据是指由服务器发送至终端的用于进行测试的数据,上行测试数据是指终端发送至服务器的用于进行测试的数据。服务器通过调用信息获取接口将下行测试数据发送至终端,并接收终端返回的上行测试数据,并根据下行测试数据的发送时间和上行测试数据的接收时间计算得到数据往返时间。
本实施例中,服务器通过调用信息获取接口将下行测试数据发送至终端,并接收终端返回的上行测试数据,再根据下行测试数据的发送时间和上行测试数据的接收时间计算得到数据往返时间,能够准确地获取数据往返时间,根据数据往返时间能够进一步确定与该类网络环境参考数据对应的网络质量范围。
在一个实施例中,终端网络环境信息包括网络连接速率,服务器调用信息获取接口获取与终端对应的网络连接类型,根据网络连接类型确定终端的网络连接速率。网络连接类型是指终端当前连接的网络类型,网络连接类型包括但不限于2G、3G、4G和5G连接。可以理解的是,各个网络连接类型对应不同的网络连接速率,服务器根据该网络连接类型确定终端的网络连接速率,根据网络连接速率能够进一步确定与该类网络环境参考数据对应的网络质量范围。
在一个实施例中,在服务器向终端返回数据资源包时,在终端可边显示边下载,需在终端和服务器之间添加一层代理对象,代理对象是指控制对于原对象的访问,即终端不直接操控原对象,而是通过代理对象间接地操控原对象。故终端不直接访问服务器,而是访问代理对象,代理对象去访问服务器获得数据,之后返回至终端,同时代理对象根据一定的规则缓存数据。可以理解的是,代理对象接收终端的请求,并根据请求向服务器请求本地没有获取的数据,再缓存向服务器请求的数据到本地,如果向服务器的请求出现错误,将通知至终端,以便于终端对用户进行提示。
具体地,当数据资源包为视频类数据资源包时,包括以下步骤:1.当开始播放视频时,通过视频url判断本地cache中是否已经缓存当前视频,如果有,则直接播放本地cache中视频。2.如果本地cache中没有视频,则视频播放器向代理请求数据3.加载视频时展示正在加载的提示。4.如果可以正常播放视频,则去掉加载提示,播放视频,如果加载失败,去掉加载提示并显示失败提示。5.在播放过程中如果由于网络过慢或拖拽原因导致没有播放数据时,要展示加载提示,跳转到第4步。
如图5所示,为一实施例中的数据处理装置的示意图,该装置包括:
环境信息获取模块302,用于当接收到终端发送的数据获取请求时,调用信息获取接口获取与终端对应的终端网络环境信息;终端网络环境信息包括至少两种网络环境参考数据;
第一范围获取模块304,用于提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围;
参考权重获取模块306,用于基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重;
第二范围获取模块308,用于按照参考权重对各个网络质量范围进行加权处理,得到终端对应的目标网络质量范围;
数据生成模块310,用于基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包;
数据处理模块312,用于将数据资源包发送至终端。
在一个实施例中,数据处理模块包括:方式获取模块,用于获取与各网络环境参考数据对应的特征提取方式,数据提取模块,用于按照各网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据,范围确定模块,用于根据映射表中确定各个特征数据对应的网络质量范围。
在一个实施例中,该装置还包括:第一判断模块,用于当目标网络质量范围对应的网络质量级别为非正常网络级别时,基于非正常网络级别生成与数据获取请求对应的第一数据资源包,生成的第一数据资源包的数据质量与非正常网络级别表示的网络质量相匹配,第二判断模块,用于当目标网络质量范围对应的网络质量级别为正常网络级别时,基于正常网络级别生成与数据获取请求对应的第二数据资源包,生成的第二数据资源包的数据质量与正常网络级别表示的网络质量相匹配。
在一个实施例中,数据接收模块用于按照预设检测时间间隔获取与终端对应的更新后的终端网络环境信息,更新后的终端网络环境信息包括至少两种网络环境参考数据,继续执行提取各网络环境参考数据的特征数据,并从映射表中确定各特征数据对应的网络质量范围的步骤。
在一个实施例中,数据接收模块用于调用信息获取接口将下行测试数据发送至终端,接收终端返回的上行测试数据,根据下行测试数据的发送时间和上行测试数据的接收时间计算得到数据往返时间。
关于数据处理装置的具体限定可以参见上文中对于数据处理方法的限定,在此不再赘述。上述数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。该处理器可以为中央处理单元(CPU)、微处理器、单片机等。上述数据处理装置可以实现为一种计算机程序的形式。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,也可以是终端。当该计算机设备为服务器时,其内部结构图可以如图6所示。当该计算机设备为终端时,其内部结构包括显示屏、输入装置、摄像头、声音采集装置和扬声器等。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据处理方法。本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
其中,处理器执行程序时实现以下步骤:当接收到终端发送的数据获取请求时,调用信息获取接口获取与终端对应的终端网络环境信息,终端网络环境信息包括至少两种网络环境参考数据,提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围,基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重,按照参考权重对各个网络质量范围进行加权处理,得到终端对应的目标网络质量范围,基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包,将数据资源包发送至终端。
上述对于计算机设备的限定可以参见上文中对于数据处理方法的具体限定,在此不再赘述。
请继续参阅图6,还提供一种计算机可读存储介质,其上存储有计算机程序,如图6中所示的非易失性存储介质,其中,该程序被处理器执行时实现以下步骤:当接收到终端发送的数据获取请求时,调用信息获取接口获取与终端对应的终端网络环境信息,终端网络环境信息包括至少两种网络环境参考数据,提取各个网络环境参考数据对应的特征数据,并从映射表中确定各个特征数据对应的网络质量范围,基于特征数据对应的网络质量范围确定各个网络环境参考数据的参考权重,按照参考权重对各个网络质量范围进行加权处理,得到终端对应的目标网络质量范围,基于目标网络质量范围对应的网络质量级别生成与数据获取请求对应的数据资源包,将数据资源包发送至终端。
上述对于计算机可读存储介质的限定可以参见上文中对于数据处理方法的具体限定,在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种数据处理方法,所述方法包括:
当接收到终端发送的数据获取请求时,调用信息获取接口获取与所述终端对应的终端网络环境信息;所述终端网络环境信息包括至少两种网络环境参考数据,所述至少两种网络环境参考数据包括网络连接速率、数据往返时间以及数据保护模式,所述数据保护模式是指对当前终端所存储的数据进行保护的模式;
提取各个所述网络环境参考数据对应的特征数据,并从映射表中确定各个所述特征数据对应的网络质量范围;
基于所述特征数据对应的网络质量范围确定各个所述网络环境参考数据的参考权重;
按照所述参考权重对各个所述网络质量范围进行加权处理,得到所述终端对应的目标网络质量范围;
当所述目标网络质量范围对应的网络质量级别为非正常网络级别时,基于所述非正常网络级别生成与所述数据获取请求对应的压缩量较大且失真率较高的第一数据资源包;
当所述目标网络质量范围对应的网络质量级别为正常网络级别时,基于所述正常网络级别生成与所述数据获取请求对应的压缩量较小且失真率较低的第二数据资源包;
将所述第一数据资源包或所述第二数据资源包发送至所述终端。
2.根据权利要求1所述的方法,其特征在于,所述提取各个所述网络环境参考数据对应的特征数据,并从映射表中确定各个所述特征数据对应的网络质量范围包括:
获取与各所述网络环境参考数据对应的特征提取方式;
按照各所述网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据;
从映射表中确定各个所述特征数据对应的网络质量范围。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
按照预设检测时间间隔获取与所述终端对应的更新后的终端网络环境信息;所述更新后的终端网络环境信息包括至少两种网络环境参考数据;
继续执行所述提取各个所述网络环境参考数据的特征数据,并从映射表中确定各所述特征数据对应的网络质量范围的步骤。
4.根据权利要求1所述的方法,其特征在于,所述调用信息获取接口获取与所述终端对应的终端网络环境信息包括:
调用所述信息获取接口将下行测试数据发送至所述终端,接收所述终端返回的上行测试数据;
根据所述下行测试数据的发送时间和所述上行测试数据的接收时间计算得到所述数据往返时间。
5.根据权利要求1所述的方法,其特征在于,所述调用信息获取接口获取与所述终端对应的终端网络环境信息,包括:
调用所述信息获取接口获取与所述终端对应的网络连接类型,根据所述网络连接类型确定所述终端的网络连接速率,所述网络连接类型对应的网络连接包括2G、3G、4G和5G连接中至少一项。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述数据保护模式对应的特征数据为所述数据保护模式的开启或关闭。
7.一种数据处理装置,其特征在于,所述装置包括:
环境信息获取模块,用于当接收到终端发送的数据获取请求时,调用信息获取接口获取与所述终端对应的终端网络环境信息;所述终端网络环境信息包括至少两种网络环境参考数据,所述至少两种网络环境参考数据包括网络连接速率、数据往返时间以及数据保护模式,所述数据保护模式是指对当前终端所存储的数据进行保护的模式;
第一范围获取模块,用于提取各个所述网络环境参考数据对应的特征数据,并从映射表中确定各个所述特征数据对应的网络质量范围;
参考权重获取模块,用于基于所述特征数据对应的网络质量范围确定各个所述网络环境参考数据的参考权重;
第二范围获取模块,用于按照所述参考权重对各个所述网络质量范围进行加权处理,得到所述终端对应的目标网络质量范围;
数据生成模块,用于当所述目标网络质量范围对应的网络质量级别为非正常网络级别时,基于所述非正常网络级别生成与所述数据获取请求对应的压缩量较大且失真率较高的第一数据资源包;当所述目标网络质量范围对应的网络质量级别为正常网络级别时,基于所述正常网络级别生成与所述数据获取请求对应的压缩量较小且失真率较低的第二数据资源包;
数据处理模块,用于将所述第一数据资源包或所述第二数据资源包发送至所述终端。
8.根据权利要求7所述的装置,其特征在于,所述数据处理模块包括:
方式获取模块,用于获取与各所述网络环境参考数据对应的特征提取方式;
数据提取模块,用于按照各所述网络环境参考数据对应的特征提取方式提取各个对应的网络环境参考数据的特征数据;
范围确定模块,用于从映射表中确定各个所述特征数据对应的网络质量范围。
9.一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如权利要求1至6中任一项所述方法的步骤。
10.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至6中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910629589.4A CN110351014B (zh) | 2019-07-12 | 2019-07-12 | 数据处理方法、装置、计算机可读存储介质和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910629589.4A CN110351014B (zh) | 2019-07-12 | 2019-07-12 | 数据处理方法、装置、计算机可读存储介质和计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110351014A CN110351014A (zh) | 2019-10-18 |
CN110351014B true CN110351014B (zh) | 2022-10-21 |
Family
ID=68175117
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910629589.4A Active CN110351014B (zh) | 2019-07-12 | 2019-07-12 | 数据处理方法、装置、计算机可读存储介质和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110351014B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111128193B (zh) * | 2019-12-27 | 2023-06-02 | 科大讯飞股份有限公司 | 语音交互方法、网络分析端及客户端 |
CN114760491A (zh) * | 2022-04-18 | 2022-07-15 | 北京金山云网络技术有限公司 | 直播数据的传输系统、方法和装置、电子设备、存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016101163A1 (zh) * | 2014-12-24 | 2016-06-30 | 华为技术有限公司 | 统一机器到机器系统中数据传输的方法和公共服务实体 |
WO2017036394A1 (zh) * | 2015-09-02 | 2017-03-09 | 腾讯科技(深圳)有限公司 | WiFi资源的处理方法和系统 |
WO2017173903A1 (zh) * | 2016-04-08 | 2017-10-12 | 中国移动通信有限公司研究院 | 一种视频通话实现方法、终端及计算机存储介质 |
CN108124273A (zh) * | 2017-11-17 | 2018-06-05 | 上海连尚网络科技有限公司 | 一种信息获取的方法、设备及介质 |
CN108650041A (zh) * | 2018-04-11 | 2018-10-12 | 维沃移动通信有限公司 | 一种信号质量显示方法及移动终端 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101755433B1 (ko) * | 2010-12-24 | 2017-07-11 | 삼성전자주식회사 | 화질 개선이 가능한 영상 통화 방법 및 이를 지원하는 영상 통화 장치 |
-
2019
- 2019-07-12 CN CN201910629589.4A patent/CN110351014B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016101163A1 (zh) * | 2014-12-24 | 2016-06-30 | 华为技术有限公司 | 统一机器到机器系统中数据传输的方法和公共服务实体 |
WO2017036394A1 (zh) * | 2015-09-02 | 2017-03-09 | 腾讯科技(深圳)有限公司 | WiFi资源的处理方法和系统 |
WO2017173903A1 (zh) * | 2016-04-08 | 2017-10-12 | 中国移动通信有限公司研究院 | 一种视频通话实现方法、终端及计算机存储介质 |
CN108124273A (zh) * | 2017-11-17 | 2018-06-05 | 上海连尚网络科技有限公司 | 一种信息获取的方法、设备及介质 |
CN108650041A (zh) * | 2018-04-11 | 2018-10-12 | 维沃移动通信有限公司 | 一种信号质量显示方法及移动终端 |
Also Published As
Publication number | Publication date |
---|---|
CN110351014A (zh) | 2019-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9712854B2 (en) | Cost-aware cloud-based content delivery | |
EP3055983B1 (en) | Predicting call quality | |
US9537926B1 (en) | Network page latency reduction | |
US20110221965A1 (en) | Degrading a video | |
CN110351014B (zh) | 数据处理方法、装置、计算机可读存储介质和计算机设备 | |
CN113407286B (zh) | 一种服务器远程管理方法及装置 | |
CN113117326B (zh) | 一种帧率控制方法和装置 | |
CN112732553A (zh) | 图像测试方法、装置、电子设备及存储介质 | |
US9202269B2 (en) | User terminal device, server device, system and method for assessing quality of media data | |
WO2019062404A1 (zh) | 应用程序的处理方法、装置、存储介质及电子设备 | |
CN114071190B (zh) | 云应用视频流处理方法、相关装置及计算机程序产品 | |
US20240098316A1 (en) | Video encoding method and apparatus, real-time communication method and apparatus, device, and storage medium | |
Zou et al. | Perceptual video quality metric for compression artefacts: from two‐dimensional to omnidirectional | |
CN109729375B (zh) | 一种交互数据分发控制方法、装置、设备及存储介质 | |
CN110781500A (zh) | 一种数据风控系统以及方法 | |
US10944493B2 (en) | Monitoring video broadcasts | |
US10764578B2 (en) | Bit rate optimization system and method | |
WO2017058207A1 (en) | Optimization of media presentations | |
CN111831239B (zh) | 一种虚拟桌面残影消除方法、装置、电子设备及存储介质 | |
CN113066068B (zh) | 图像评估方法及装置 | |
CN110913088B (zh) | 一种用于im软件平台的图片传输方法和系统 | |
CN115240209A (zh) | 水印识别方法和装置 | |
CN114219729A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN114500991A (zh) | 基于视频会议的音频交流可行性测试方法和装置 | |
CN116996681A (zh) | 一种编码码率的确定方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |