CN116471425B - 一种基于大数据分析的多媒体数据管理系统 - Google Patents
一种基于大数据分析的多媒体数据管理系统 Download PDFInfo
- Publication number
- CN116471425B CN116471425B CN202310426483.0A CN202310426483A CN116471425B CN 116471425 B CN116471425 B CN 116471425B CN 202310426483 A CN202310426483 A CN 202310426483A CN 116471425 B CN116471425 B CN 116471425B
- Authority
- CN
- China
- Prior art keywords
- data
- transmission
- monitoring
- multimedia
- multimedia data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007405 data analysis Methods 0.000 title claims abstract description 17
- 238000013523 data management Methods 0.000 title claims abstract description 10
- 230000005540 biological transmission Effects 0.000 claims abstract description 139
- 238000012544 monitoring process Methods 0.000 claims abstract description 109
- 238000000034 method Methods 0.000 claims abstract description 27
- 230000011218 segmentation Effects 0.000 claims abstract description 23
- 238000005457 optimization Methods 0.000 claims abstract description 22
- 238000004458 analytical method Methods 0.000 claims description 33
- 238000012937 correction Methods 0.000 claims description 15
- 238000011156 evaluation Methods 0.000 claims description 14
- 238000013441 quality evaluation Methods 0.000 claims description 10
- 238000004364 calculation method Methods 0.000 claims description 8
- 108700041286 delta Proteins 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 230000006833 reintegration Effects 0.000 claims description 3
- 101100518501 Mus musculus Spp1 gene Proteins 0.000 claims description 2
- 230000002159 abnormal effect Effects 0.000 claims description 2
- 101100370014 Neurospora crassa (strain ATCC 24698 / 74-OR23-1A / CBS 708.71 / DSM 1257 / FGSC 987) tof-1 gene Proteins 0.000 claims 1
- 230000010354 integration Effects 0.000 abstract description 2
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/41—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/43—Querying
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25875—Management of end-user data involving end-user authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25891—Management of end-user data being end-user preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26283—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for associating distribution time parameters to content, e.g. to generate electronic program guide data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computer Security & Cryptography (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种基于大数据分析的多媒体数据管理系统,本发明涉及数据传输技术领域,本发明通过设置信息采集单元对访问用户的键入检索数据采集,中控平台依据访问用户的键入检索数据在云端服务器中获取当前访问用户的预访问多媒体数据并将其传输到显示单元供给访问用户进行查看,监控优化单元对当前访问用户传输多媒体数据包的过程进行监控并依据其传输单元对传输多媒体数据包分割规则进行优化,一方面减少了需要重传占用的网络资源,另一方面细化了传输多媒体数据包的数据容量大小,且监控优化单元动态的对多媒体数据包的监控传输周期进行调整,减少了多媒体数据丢失的数据容量大小,便于后期进行多媒体数据包的整合和查看。
Description
技术领域
本发明涉及数据传输技术领域,具体为一种基于大数据分析的多媒体数据管理系统。
背景技术
随着多媒体技术的迅猛发展,以及计算机网络的普及,基于计算机网络的多媒体数据服务已经成为可能。数字化的多媒体数据服务必然成为以后广播/电信服务业中重要的业务,而多媒体数据服务的不断发展,带来的是庞大的多媒体数据,如何对其进行高效的管理是多媒体数据服务迅速发展的关键;
针对多媒体数据的管理主要从多媒体数据的收集整理、组织、存储、维护、检索、传输等方面进行管理;
当下一种对多媒体数据的管理是对多媒体数据的传输进行管理,多媒体数据在传输的过程中往往会因为各种原因导致多媒体数据丢失,针对丢失的多媒体数据通常对其进行重传处理,而现有的重传机制无法基于当前的丢包情况动态的调整后期传输多媒体数据包的容量大小,且基于丢失的多媒体数据包通常是设定一个定时器,时间一到就将当前时间段内所有丢失的多媒体数据包进行传输,这样的方式如何当前丢失情况严重,将会极大地造成重传网络资源的浪费;
为了解决上述问题,本发明提出了一种解决方案。
发明内容
针对现有技术的不足,本发明提供了一种基于大数据分析的多媒体数据管理系统,解决了现有的重传机制无法基于当前的丢包情况动态的调整后期传输多媒体数据包的容量大小,且基于丢失的多媒体数据包通常是设定一个定时器,时间一到就将当前时间段内所有丢失的多媒体数据包进行传输,这样的方式如何当前丢失情况严重,将会极大地造成重传网络资源的浪费的问题。
为实现以上目的,本发明通过以下技术方案予以实现:
一种基于大数据分析的多媒体数据管理系统,包括:
客户端模块,用于访问用户访问多媒体数据,所述客户端模块包括信息采集单元和显示单元,所述信息采集单元用于获取访问用户的身份信息和该访问用户所键入的检索信息;
所述信息采集单元获取访问用户的身份信息和检索信息后,依据该访问用户的身份信息和检索信息生成当前访问用户的检索索引数据;
云端服务器,云端存储多媒体数据,所述云端服务器中存储有允许公开访问的多媒体数据,所述云端服务器将当前访问用户的检索索引数据作为查询条件在云端服务器内查询获取相关的多媒体数据并依据其和当前访问用户的检索索引数据生成当前访问用户的访问多媒体数据;
中控平台,对多媒体数据的传输进行管理,所述中控平台包括监控优化单元和重传单元,所述监控优化单元中存储有传输多媒体数据的修正评测值;
所述中控平台接收到客户端模块传输的当前访问用户的检索索引数据后对其进行临时存储;
数据分析模块,按照一定的分析步骤对多媒体数据的传输过程进行分析生成传输多媒体数据的修正评测值。
进一步的,所述监控优化单元中存储有传输多媒体数据的修正评测值,所述监控优化单元对传输多媒体数据的修正评测值周期性更新。
进一步的,所述中控平台还包括传输单元,所述传输单元按照一定的传输步骤将当前访问用户的访问多媒体数据进行传输,具体传输步骤如下:
S11:获取当前访问用户访问多媒体数据的数据大小,标记为K;
S12:按照一定的分割规则对当前访问用户访问多媒体数据进行分割生成若干个多媒体传输数据包,具体分割规则如下:
S121:若K<Kmin,则将当前访问用户访问多媒体数据进行等分为若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L1;
S122:若Kmin≤K≤Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L2;
S123:若K>Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L3;
所述L1、L2和L3为预设分割值,所述Kmin和Kmax分别为预设分割标准临界最小值和分割标准临界最大值;
所述传输单元依据每个多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输媒体数据包。
进一步的,所述传输单元生成监控指令并将其传输到监控优化单元,所述监控优化单元接收到传输单元传输的监控指令后按照一定的监控优化规则对当前访问用户访问多媒体数据分割的多个待传输数据包的传输过程进行监控优化,具体的监控优化规则如下:
S21:所述监控优化单元获取一个监控传输周期内待传输数据包的丢包量,标记为m,所述初始的监控传输周期是从监控优化单元监控到第一个待传输数据包丢失开始经过监控时延时间Q1结束,初始监控时延时间Q1的值为预设阈值;
S22:若0≤m<n1,所述监控优化单元不做任何处理,所述n1为预设阈值;
反之,所述监控优化单元获取当前监控传输周期内待传输数据包丢失的时间差值,标记为M1、M2、...、Mm,m≥1;
S23:利用公式1≤q≤m计算获取当前监控传输周期内待传输数据包丢失时间差值的离散值Q,将Q和Q1进行大小比较,若Q≥Q1,则按照|Mq-M|从大到小的顺序依次删除对应的Mq值并计算生意Mq的离散值Q,将Q再次与Q1进行的大小比较,直至Q<Q1,所述Q1为预设阈值,所述M为参与离散值计算当前监控传输周期内待传输数据包丢失时间差值的均值,将其重新标定为时差值,标记为N1;
S24:利用公式计算获取当前监控传输周期内待传输数据包的分割修正率R1,所述β1和λ1为预设因子;
利用公式计算获取当前监控传输周期内待传输数据包的时延修正率R2,所述LN为当前待传输数据包的数据大小,所述β2、δ1和δ2为预设因子,所述LN为当前待传输数据包的数据大小;
S25:利用公式T1=LN×(1-R1)计算获取当前待传输数据包的优化分割量T1,所述优化分割单元将当前该访问用户访问多媒体数据的优化分割量T1传输到传输单元,所述传输单元接收到优化分割单元传输的当前该访问用户访问多媒体数据的优化分割量T1后对剩余未传输的多媒体数据包进行重新整合分割生成新的待传输的多媒体数据包,一个所述新的待传输的多媒体数据包的数据大小为T1;
所述传输单元依据每个新的多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输优化数据包并将其传输到客户端模块;
S26:利用公式U1=Q1×(1-R2)计算获取当前监控优化单元基于当前访问用户监控传输周期的新的监控时延时间Q1的值;
所述监控优化单元将监控传输周期的监控时延时间Q1的值更新为U1,所述监控优化单元依据新的监控时延时间Q1的值生成新的监控传输周期对当前访问用户的新的待传输优化数据包的传输过程进行监控。
进一步的,所述访问用户键入的检索信息用于访问用户访问查询其需要查询的多媒体数据。
进一步的,所述重传单元将一个监控传输周期内的所有丢失的待传输数据包重新传输到客户端模块。
进一步的,所述重传单元将一个监控传输周期内所有丢失的待传输优化数据包重新传输到客户端模块。
有益效果
本发明的有益效果:
本发明通过设置信息采集单元对访问用户的键入检索数据采集,中控平台依据访问用户的键入检索数据在云端服务器中获取当前访问用户的预访问多媒体数据并将其传输到显示单元供给访问用户进行查看,监控优化单元对当前访问用户传输多媒体数据包的过程进行监控并依据其传输单元对传输多媒体数据包分割规则进行优化,一方面减少了需要重传占用的网络资源,另一方面细化了传输多媒体数据包的数据容量大小,且监控优化单元动态的对多媒体数据包的监控传输周期进行调整,减少了多媒体数据丢失的数据容量大小,便于后期进行多媒体数据包的整合和查看。
附图说明
下面结合附图对本发明作进一步的说明。
图1是本发明的系统框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本申请提供了一种基于大数据分析的多媒体数据管理系统,包括客户端模块、中控平台、云端服务器和数据分析模块;
客户端模块,所述客户端模块用于访问用户访问多媒体数据,所述客户端模块包括信息采集单元和显示单元;
所述信息采集单元用于获取访问用户的身份信息和该访问用户所键入的检索信息,所述访问用户键入的检索信息用于访问用户访问查询其需要查询的多媒体数据;
所述信息采集单元获取访问用户的身份信息和检索信息后,依据该访问用户的身份信息和检索信息生成当前访问用户的检索索引数据,所述客户端模块将当前访问用户的检索索引数据传输到中控平台和云端服务器;
所述中控平台用于对多媒体数据的传输进行管理,所述中控平台包括传输单元、重传单元和监控优化单元;所述中控平台接收到客户端模块传输的当前访问用户的检索索引数据其进行临时存储;
所述云端服务器用于云端存储多媒体数据,所述云端服务器中存储有允许公开访问的多媒体数据,所述云端服务器接收到客户端模块传输的当前访问用户的检索索引数据后将当前访问用户的检索索引数据作为查询条件在云端服务器内查询获取相关的多媒体数据并依据其和当前访问用户的检索索引数据生成当前访问用户的访问多媒体数据,所述云端服务器将当前访问用户的访问多媒体数据传输到中控平台;
所述中控平台接收到云端服务器传输的当前访问用户的访问多媒体数据后获取其内存储的当前访问用户的检索索引数据和客户端模块传输的该访问用户的检索索引数据进行比对,比对一致后所述中控平台生成传输指令并将其传输到传输单元,所述传输单元接收到中控平台传输的传输指令后按照一定的传输步骤将当前访问用户的访问多媒体数据传输到客户端模块,具体的传输步骤如下;
S11:获取当前访问用户访问多媒体数据的数据大小,标记为K;
S12:按照一定的分割规则对当前访问用户访问多媒体数据进行分割生成若干个多媒体传输数据包,具体分割规则如下:
S121:若K<Kmin,则将当前访问用户访问多媒体数据进行等分为若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L1;
S122:若Kmin≤K≤Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L2;所述L2为预设分割量,所述Kmax为预设分割标准临界最大值;
S123:若K>Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L3;
所述L1、L2和L3为预设分割值,所述Kmin和Kmax分别为预设分割标准临界最小值和分割标准临界最大值;
所述传输单元依据每个多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输媒体数据包并将其传输到客户端模块;
所述传输单元生成监控指令并将其传输到监控优化单元,所述监控优化单元接收到传输单元传输的监控指令后按照一定的监控规则对当前访问用户访问多媒体数据分割的多个待传输数据包的传输过程进行监控优化,具体优化规则如下:
S21:所述监控优化单元获取一个监控传输周期内待传输数据包的丢包量,标记为m,所述初始的监控传输周期是从监控优化单元监控到第一个待传输数据包丢失开始经过监控时延时间Q1结束,初始监控时延时间Q1的值为预设阈值;
S22:若0≤m<n1,所述监控优化单元不做任何处理,所述n1为预设阈值;
反之,所述监控优化单元获取当前监控传输周期内待传输数据包丢失的时间差值,标记为M1、M2、...、Mm,m≥1;
S23:利用公式1≤q≤m计算获取当前监控传输周期内待传输数据包丢失时间差值的离散值Q,将Q和Q1进行大小比较,若Q≥Q1,则按照|Mq-M|从大到小的顺序依次删除对应的Mq值并计算生意Mq的离散值Q,将Q再次与Q1进行的大小比较,直至Q<Q1,所述Q1为预设阈值,所述M为参与离散值计算当前监控传输周期内待传输数据包丢失时间差值的均值,将其重新标定为时差值,标记为N1;
S24:利用公式计算获取当前监控传输周期内待传输数据包的分割修正率R1,所述β1和λ1为预设因子;
利用公式计算获取当前监控传输周期内待传输数据包的时延修正率R2,所述LN为当前待传输数据包的数据大小,所述β2、δ1和δ2为预设因子,所述LN为当前待传输数据包的数据大小;
S25:利用公式T1=LN×(1-R1)计算获取当前待传输数据包的优化分割量T1,所述优化分割单元将当前该访问用户访问多媒体数据的优化分割量T1传输到传输单元,所述传输单元接收到优化分割单元传输的当前该访问用户访问多媒体数据的优化分割量T1后对剩余未传输的多媒体数据包进行重新整合分割生成新的待传输的多媒体数据包,一个所述新的待传输的多媒体数据包的数据大小为T1;
所述传输单元依据每个新的多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输优化数据包并将其传输到客户端模块;
S26:利用公式U1=Q1×(1-R2)计算获取当前监控优化单元基于当前访问用户监控传输周期的新的监控时延时间Q1的值;
所述监控优化单元将监控传输周期的监控时延时间Q1的值更新为U1,所述监控优化单元依据新的监控时延时间Q1的值生成新的监控传输周期对当前访问用户的新的待传输优化数据包的传输过程进行监控;
所述重传单元将一个监控传输周期内的所有丢失的待传输数据包重新传输到客户端模块;所述重传单元将一个监控传输周期内所有丢失的待传输优化数据包重新传输到客户端模块;
所述客户端模块接收到传输单元传输的当前访问用户待传输数据包和待传输优化数据包后将其传输到显示单元;所述客户端模块接收到传输单元传输的当前访问用户的待传输优化数据包后将其传输到显示单元;
所述显示单元接收到客户端模块传输的当前访问用户待传输数据包和待传输优化数据包后对其进行整合并显示给访问用户进行查看;
所述数据分析模块用于周期性对多媒体数据的传输过程进行分析,具体的分析步骤如下:
S31:首先选定访问用户的访问多媒体数据为待解析媒体访问数据,将其内数据大小大于P1的待解析数据重新标定为待解析媒体数据,所述P1为预设阈值;
S32:进行解析段划分,将一个解析周期划分为a个等时长的解析段,将一个解析周期的a个解析段标记为A1、A2、...、Aa,a>1;在本实施例中,所述一个完整的解析周期是从待解析媒体数据开始传输开始到完整传输结束;
S33;以一个解析段为例,获取该解析周期一个解析段内传输一个待解析媒体数据的丢包率,标记为B1和传输速率,标记为C1;获取待解析周期一个解析段内传输该待解析媒体的数据大小,标记为D1;
利用公式计算获取该解析周期一个解析段内传输该待解析媒体数据的过程质量反应数E1,所述ɑ1、ɑ2、η1为预设系数;
S34:按照一定的计算步骤计算获取该解析周期a个解析段内传输该待媒体的过程质量评测值H1;
S341:按照S42到S43计算获取该解析周期a个解析段内传输该待解析媒体数据的过程质量反应数E1、E2、...、Ea;
利用公式1≤f≤a计算获取该解析周期a个解析段内传输该待解析媒体数据过程质量反应数的离散值F,将F和F1进行大小比较,若F≥F1,则按照|Ef-E|从大到小的顺序一次删除对应的Ef值,并计算剩余Ef的离散值F,并再次将F和F1进行大小比较,直至F<F1,所述F1为预设阈值,所述E为参与离散值计算的该解析周期a个解析段内传输该待解析媒体数据过程质量反应数的平均值,将其重新标定为该解析媒体数据的传输质量数,标记为G1;
获取参与离散值计算的该解析周期a个解析段内传输该待解析媒体数据过程质量反应数被删除且大于传输质量数的解析段的个数,将其重新标定为异常质量数,G2;
S342:利用公式计算获取该解析周期a个解析段内传输该待媒体的过程质量评测值H1;
S35:按照S32到S34,计算获取h个待解析媒体数据的过程质量评测值H1、H2、...、Hh,h>1;
利用公式1≤i≤h计算获取h个待解析媒体数据过程质量评测值的离散值I,将I和I1进行大小比较,若I≥I1,则按照|Hi-H|从大到小依次删除对应的Hi值并计算剩余Hi的离散值I,将I再次与I1进行大小比较,直至I<I1,所述I1为预设阈值,所述H为参与离散值计算的h个待解析媒体数据过程质量评测值的平均值,将其重新标定为修正评测值,标记为J;
所述数据分析模块将当前周期对多媒体数据的传输过程进行分析生成的传输多媒体数据的修正评测值传输到中控平台,所述中控平台接收到数据分析模块当前传输的传输多媒体数据的修正评测值后对监控优化单元中存储的传输多媒体数据的修正评测值进行更新存储;
同时本说明书中未作详细描述的内容均属于本领域技术人员公知的现有技术。
以上实施例仅用以说明本发明的技术方法而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方法进行修改或等同替换,而不脱离本发明技术方法的精神和范围。
Claims (5)
1.一种基于大数据分析的多媒体数据管理系统,其特征在于,包括:
客户端模块,用于访问用户访问多媒体数据,所述客户端模块包括信息采集单元和显示单元,所述信息采集单元用于获取访问用户的身份信息和该访问用户所键入的检索信息;
所述信息采集单元获取访问用户的身份信息和检索信息后,依据该访问用户的身份信息和检索信息生成当前访问用户的检索索引数据;
云端服务器,云端存储多媒体数据,所述云端服务器中存储有允许公开访问的多媒体数据,所述云端服务器将当前访问用户的检索索引数据作为查询条件在云端服务器内查询获取相关的多媒体数据并依据其和当前访问用户的检索索引数据生成当前访问用户的访问多媒体数据;
中控平台,对多媒体数据的传输进行管理,所述中控平台包括监控优化单元、重传单元和传输单元,所述监控优化单元中存储有传输多媒体数据的修正评测值;
所述中控平台接收到客户端模块传输的当前访问用户的检索索引数据后对其进行临时存储;
数据分析模块,按照一定的分析步骤对多媒体数据的传输过程进行分析生成传输多媒体数据的修正评测值,具体如下:
S31:首先选定访问用户的访问多媒体数据为待解析媒体访问数据,将其内数据大小大于P1的待解析数据重新标定为待解析媒体数据,所述P1为预设阈值;
S32:进行解析段划分,将一个解析周期划分为a个等时长的解析段,将一个解析周期的a个解析段标记为A1、A2、...、Aa,a>1;其中,一个完整的解析周期是从待解析媒体数据开始传输开始到完整传输结束;
S33;以一个解析段为例,获取该解析周期一个解析段内传输一个待解析媒体数据的丢包率,标记为B1和传输速率,标记为C1;获取待解析周期一个解析段内传输该待解析媒体的数据大小,标记为D1;
利用公式计算获取该解析周期一个解析段内传输该待解析媒体数据的过程质量反应数E1,所述ɑ1、ɑ2、η1为预设系数;
S34:按照一定的计算步骤计算获取该解析周期a个解析段内传输该待解析媒体数据的过程质量评测值H1;
S341:按照S42到S43计算获取该解析周期a个解析段内传输该待解析媒体数据的过程质量反应数E1、E2、...、Ea;
利用公式,1≤f≤a计算获取该解析周期a个解析段内传输该待解析媒体数据过程质量反应数的离散值F,将F和F1进行大小比较,若F≥F1,则按照|Ef-E|从大到小的顺序一次删除对应的Ef值,并计算剩余Ef的离散值F,并再次将F和F1进行大小比较,直至F<F1,所述F1为预设阈值,所述E为参与离散值计算的该解析周期a个解析段内传输该待解析媒体数据过程质量反应数的平均值,将其重新标定为该解析媒体数据的传输质量数,标记为G1;
获取参与离散值计算的该解析周期a个解析段内传输该待解析媒体数据过程质量反应数被删除且大于传输质量数的解析段的个数,将其重新标定为异常质量数,G2;
S342:利用公式计算获取该解析周期a个解析段内传输该待解析媒体数据的过程质量评测值H1;
S35:按照S32到S34,计算获取h个待解析媒体数据的过程质量评测值H1、H2、...、Hh,h>1;
利用公式,1≤i≤h计算获取h个待解析媒体数据过程质量评测值的离散值I,将I和I1进行大小比较,若I≥I1,则按照|Hi-H|从大到小依次删除对应的Hi值并计算剩余Hi的离散值I,将I再次与I1进行大小比较,直至I<I1,所述I1为预设阈值,所述H为参与离散值计算的h个待解析媒体数据过程质量评测值的平均值,将其重新标定为修正评测值,标记为J;
所述传输单元生成监控指令并将其传输到监控优化单元,所述监控优化单元接收到传输单元传输的监控指令后按照一定的监控优化规则对当前访问用户访问多媒体数据分割的多个待传输数据包的传输过程进行监控优化,具体的监控优化规则如下:
S21:所述监控优化单元获取一个监控传输周期内待传输数据包的丢包量,标记为m,初始的监控传输周期是从监控优化单元监控到第一个待传输数据包丢失开始经过监控时延时间Q1结束,初始监控时延时间Q1的值为预设阈值;
S22:若0≤m<n1,所述监控优化单元不做任何处理,所述n1为预设阈值;
反之,所述监控优化单元获取当前监控传输周期内待传输数据包丢失的时间差值,标记为M1、M2、...、Mm,m≥1;
S23:利用公式,1≤q≤m计算获取当前监控传输周期内待传输数据包丢失时间差值的离散值Q,将Q和Q1进行大小比较,若Q≥Q1,则按照|Mq-M|从大到小的顺序依次删除对应的Mq值并计算获取Mq的离散值Q,将Q再次与Q1进行的大小比较,直至Q<Q1,所述Q1为预设阈值,所述M为参与离散值计算当前监控传输周期内待传输数据包丢失时间差值的均值,将其重新标定为时差值,标记为N1;
S24:利用公式计算获取当前监控传输周期内待传输数据包的分割修正率R1,所述β1和λ1为预设因子;
利用公式计算获取当前监控传输周期内待传输数据包的时延修正率R2,所述LN为当前待传输数据包的数据大小,所述β2、δ1和δ2为预设因子,所述J为当前监控优化单元中存储的传输多媒体数据的修正评测值;
S25:利用公式计算获取当前待传输数据包的优化分割量T1,所述优化分割单元将当前该访问用户访问多媒体数据的优化分割量T1传输到传输单元,所述传输单元接收到优化分割单元传输的当前该访问用户访问多媒体数据的优化分割量T1后对剩余未传输的多媒体数据包进行重新整合分割生成新的待传输的多媒体数据包,一个所述新的待传输的多媒体数据包的数据大小为T1;
所述传输单元依据每个新的多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输优化数据包并将其传输到客户端模块;
S26:利用公式计算获取当前监控优化单元基于当前访问用户监控传输周期的新的监控时延时间U1的值;
所述监控优化单元将监控传输周期的监控时延时间Q1的值更新为U1,所述监控优化单元依据新的监控时延时间U1的值生成新的监控传输周期对当前访问用户的新的待传输优化数据包的传输过程进行监控。
2.根据权利要求1所述的一种基于大数据分析的多媒体数据管理系统,其特征在于,所述监控优化单元中存储有传输多媒体数据的修正评测值,所述监控优化单元对传输多媒体数据的修正评测值周期性更新。
3.根据权利要求1所述的一种基于大数据分析的多媒体数据管理系统,其特征在于,所述传输单元按照一定的传输步骤将当前访问用户的访问多媒体数据进行传输,具体传输步骤如下:
S11:获取当前访问用户访问多媒体数据的数据大小,标记为K;
S12:按照一定的分割规则对当前访问用户访问多媒体数据进行分割生成若干个多媒体传输数据包,具体分割规则如下:
S121:若K<Kmin,则将当前访问用户访问多媒体数据进行等分为若干个多媒体传输数据包,一个多媒体传输数据包的数据大小为L1;
S122:若Kmin≤K≤Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,一个多媒体传输数据包的数据大小为L2;
S123:若K>Kmax,则将当前访问用户访问多媒体数据进行等分生成若干个多媒体传输数据包,所述一个多媒体传输数据包的数据大小为L3;
所述L1、L2和L3为预设分割值,所述Kmin和Kmax分别为预设分割标准临界最小值和分割标准临界最大值;
所述传输单元依据每个多媒体传输数据包在当前访问用户访问多媒体数据的顺序对应生成若干个待传输媒体数据包。
4.根据权利要求1所述的一种基于大数据分析的多媒体数据管理系统,其特征在于,所述访问用户键入的检索信息用于访问用户访问查询其需要查询的多媒体数据。
5.根据权利要求3所述的一种基于大数据分析的多媒体数据管理系统,其特征在于,所述重传单元将一个监控传输周期内的所有丢失的待传输数据包重新传输到客户端模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310426483.0A CN116471425B (zh) | 2023-04-20 | 2023-04-20 | 一种基于大数据分析的多媒体数据管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310426483.0A CN116471425B (zh) | 2023-04-20 | 2023-04-20 | 一种基于大数据分析的多媒体数据管理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116471425A CN116471425A (zh) | 2023-07-21 |
CN116471425B true CN116471425B (zh) | 2024-02-06 |
Family
ID=87181928
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310426483.0A Active CN116471425B (zh) | 2023-04-20 | 2023-04-20 | 一种基于大数据分析的多媒体数据管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116471425B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101616077A (zh) * | 2009-07-29 | 2009-12-30 | 武汉大学 | 互联网大文件的快速传输方法 |
WO2017144645A1 (en) * | 2016-02-26 | 2017-08-31 | Net Insight Intellectual Property Ab | Edge node control |
CN110138632A (zh) * | 2019-03-26 | 2019-08-16 | 视联动力信息技术股份有限公司 | 一种数据传输方法和装置 |
CN114938439A (zh) * | 2022-05-06 | 2022-08-23 | 中移(杭州)信息技术有限公司 | 丢包重传方法、装置、系统与计算机可读存储介质 |
CN115361592A (zh) * | 2022-08-10 | 2022-11-18 | 安徽翔星信息科技有限公司 | 基于数字视频监控平台的网络自适应系统 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1361690B1 (en) * | 2000-03-02 | 2006-01-11 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for retransmitting data packets based on channel conditions |
CN103248882A (zh) * | 2012-02-02 | 2013-08-14 | 腾讯科技(深圳)有限公司 | 多媒体数据传输的方法、多媒体数据传输装置及系统 |
-
2023
- 2023-04-20 CN CN202310426483.0A patent/CN116471425B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101616077A (zh) * | 2009-07-29 | 2009-12-30 | 武汉大学 | 互联网大文件的快速传输方法 |
WO2017144645A1 (en) * | 2016-02-26 | 2017-08-31 | Net Insight Intellectual Property Ab | Edge node control |
CN110138632A (zh) * | 2019-03-26 | 2019-08-16 | 视联动力信息技术股份有限公司 | 一种数据传输方法和装置 |
CN114938439A (zh) * | 2022-05-06 | 2022-08-23 | 中移(杭州)信息技术有限公司 | 丢包重传方法、装置、系统与计算机可读存储介质 |
CN115361592A (zh) * | 2022-08-10 | 2022-11-18 | 安徽翔星信息科技有限公司 | 基于数字视频监控平台的网络自适应系统 |
Non-Patent Citations (1)
Title |
---|
基于3G网络的图像传输系统设计;林玉妹;陈为刚;;信息技术(05);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116471425A (zh) | 2023-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107124630B (zh) | 节点数据管理的方法及装置 | |
US7496554B2 (en) | Method and system for wireless database management | |
US7860993B2 (en) | Streaming media content delivery system and method for delivering streaming content | |
JP5343075B2 (ja) | オンラインキャッシュ及びピア・ツー・ピア転送を用いるメディアストリーミング | |
CN101540775B (zh) | 内容分发方法、装置与内容分发网络系统 | |
US20160381640A1 (en) | Managing contact status updates in a presence management system | |
EP2966835B1 (en) | Cooperative caching method and apparatus | |
CN111064634B (zh) | 海量物联网终端在线状态的监测方法及装置 | |
EP3873066A1 (en) | Method for managing resource state information, and resource downloading system | |
KR101120687B1 (ko) | 데이터 방송을 위한 차등 갱신 | |
US8179799B2 (en) | Method for partitioning network flows based on their time information | |
US20050114120A1 (en) | Communication system and method for compressing information sent by a communication device to a target portable communication device | |
CN102054000B (zh) | 数据查询方法、装置及系统 | |
CN100421427C (zh) | 维护邻居表项的方法 | |
CN111030888B (zh) | 域名系统dns容量测量方法、装置、设备及介质 | |
CN108429777A (zh) | 一种基于缓存的数据更新方法及服务器 | |
US20110078116A1 (en) | Method for controlling the distribution of data blocks and apparatus for the same | |
US9197715B2 (en) | Information processing apparatus and data control method | |
CN112054923B (zh) | 业务请求检测方法、设备及介质 | |
CN111212301B (zh) | 一种视频码率的匹配方法、存储介质及终端设备 | |
US7739364B2 (en) | Method and apparatus for dynamically reconfiguring a server system | |
CN116471425B (zh) | 一种基于大数据分析的多媒体数据管理系统 | |
CN113872792A (zh) | 基于自适应时间窗口的日志消息去重 | |
CN110543509B (zh) | 用户访问数据的监控系统、方法、装置及电子设备 | |
CN102739704A (zh) | 一种对等网络中数据迁移的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20240114 Address after: 621000 Sunken Plaza, building 6, phase II, innovation center, science and innovation District, Mianyang City, Sichuan Province Applicant after: Sichuan kanghesheng Technology Co.,Ltd. Address before: Self prepared Shop 258A, Floor 2, Yard A, Guangzhou Pacific Digital Plaza, No. 560-574, Tianhe Road, Tianhe District, Guangzhou, Guangdong 510635 Applicant before: Guangzhou Turner Information Technology Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |