CN114338565B - 一种资源配置方法、装置及电子设备 - Google Patents
一种资源配置方法、装置及电子设备 Download PDFInfo
- Publication number
- CN114338565B CN114338565B CN202111400259.1A CN202111400259A CN114338565B CN 114338565 B CN114338565 B CN 114338565B CN 202111400259 A CN202111400259 A CN 202111400259A CN 114338565 B CN114338565 B CN 114338565B
- Authority
- CN
- China
- Prior art keywords
- transmitted
- file
- sub
- resource allocation
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013468 resource allocation Methods 0.000 title claims abstract description 74
- 238000000034 method Methods 0.000 title claims abstract description 52
- 239000013598 vector Substances 0.000 claims description 59
- 238000000605 extraction Methods 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 17
- 230000004044 response Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 abstract description 27
- 230000008569 process Effects 0.000 description 10
- 238000004590 computer program Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 239000003245 coal Substances 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005065 mining Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000032823 cell division Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请提供了一种资源配置方法、装置及电子设备,该方法包括从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;获取每个所述待传输子文件的流行度数据;根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。本申请降低了井下存储节点的存储压力,避免了因增设存储空间而导致的额外开销以及因存储空间不足导致的信息丢失,从而以更加准确、可靠的资源配置方式提高传输速度并提升传输效率。
Description
技术领域
本申请涉及人工智能技术领域,尤其涉及一种资源配置方法、装置及电子设备。
背景技术
煤炭是我国的主体能源,在推动全国工业发展和国民经济进步等方面发挥了重要作用。近年来,随着第五代移动通信技术(5th Generation Mobile CommunicationTechnology,简称5G)的快速发展,矿用5G基站也越来越多。然而在矿用5G基站的部署过程中,往往存在多个技术难点有待攻克。特别地,如何合理地进行缓存分配是主要的研究方向之一。
相关技术中,宏基站、多天线发送和接收信号(Multiple-Input Multiple-Output,简称MIMO)的技术、高增益的天线等,在煤矿井下均不可用,导致5G技术优势没有完全发挥出来,由此,如何合理、准确地进行缓存分配,进而满足井下应用的传输需求,已成为了亟待解决的问题。
发明内容
本申请提供了一种资源配置方法、装置及电子设备,缓解了缓存节点的压力,提高了数据传输的速度,降低了井下数据的处理时延。
根据本申请的第一方面,提供了一种资源配置方法,包括:从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;获取每个所述待传输子文件的流行度数据;根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。
另外,根据本申请上述实施例的一种资源配置方法,还可以具有如下附加的技术特征:
根据本申请的一个实施例,所述获取每个所述待传输子文件的流行度数据,包括:针对每个所述待传输子文件,获取至少一个属性特征提取维度;根据所有的所述属性特征提取维度,对所述待传输子文件进行特征提取,以获取所述待传输子文件的至少一个属性特征向量;根据所有的所述属性特征向量,获取所述待传输子文件的信息熵;根据所述信息熵,获取所述待传输子文件的所述流行度数据。
根据本申请的一个实施例,所述根据所有的所述属性特征向量,获取所述待传输子文件的信息熵,包括:针对每个所述属性特征向量,根据所述属性特征向量,获取对应的子信息熵;对所有的所述子信息熵进行加权处理,并将加权结果作为所述待传输子文件的所述信息熵。
根据本申请的一个实施例,所述根据所述属性特征向量,获取对应的子信息熵,包括:获取所述属性特征向量的历史数据,并根据所述历史数据,获取对应的所述属性特征向量的概率;根据所述概率,获取对应的所述子信息熵。
根据本申请的一个实施例,所述根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,包括:根据所述流行度数据,对所有的所述待传输子文件进行排序,以获取流行度排序结果;响应于任一待传输子文件的所述流行度排序结果处于预设排序结果范围内,则将所述任一待传输子文件作为所述目标待传输子文件。
根据本申请的一个实施例,所述将所述目标待传输子文件发送至至少一个井下存储节点进行存储,包括:获取随机发送策略,并根据所述随机发送策略将所述目标待传输子文件发送至任一井下存储节点。
根据本申请的一个实施例,所述方法还包括:响应于获取到文件发送指令,则所有的所述井下存储节点根据所述文件发送指令并行发送所述目标待传输子文件。
根据本申请的第二方面,提供了一种资源配置装置,包括:第一获取模块,用于从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;第二获取模块,用于获取每个所述待传输子文件的流行度数据;存储模块,用于根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。
另外,根据本申请上述实施例的一种资源配置装置,还可以具有如下附加的技术特征:
根据本申请的一个实施例,所述第二获取模块,还用于:针对每个所述待传输子文件,获取至少一个属性特征提取维度;根据所有的所述属性特征提取维度,对所述待传输子文件进行特征提取,以获取所述待传输子文件的至少一个属性特征向量;根据所有的所述属性特征向量,获取所述待传输子文件的信息熵;根据所述信息熵,获取所述待传输子文件的所述流行度数据。
根据本申请的一个实施例,所述第二获取模块,还用于:针对每个所述属性特征向量,根据所述属性特征向量,获取对应的子信息熵;对所有的所述子信息熵进行加权处理,并将加权结果作为所述待传输子文件的所述信息熵。根据本申请的一个实施例,所述第二获取模块,还用于:获取所述属性特征向量的历史数据,并根据所述历史数据,获取对应的所述属性特征向量的概率;根据所述概率,获取对应的所述子信息熵。
根据本申请的一个实施例,所述第二获取模块,还用于:根据所述流行度数据,对所有的所述待传输子文件进行排序,以获取流行度排序结果;
响应于任一待传输子文件的所述流行度排序结果处于预设排序结果范围内,则将所述任一待传输子文件作为所述目标待传输子文件。
根据本申请的一个实施例,所述存储模块,还用于:获取随机发送策略,并根据所述随机发送策略将所述目标待传输子文件发送至任一井下存储节点。
根据本申请的一个实施例,所述存储模块,还用于:响应于获取到文件发送指令,则所有的所述井下存储节点根据所述文件发送指令并行发送所述目标待传输子文件。
为了实现上述目的,本申请第三方面实施例提出了一种资源配置系统,包括:地面资源配置组件、井下资源配置组件以及如第二方面所述的资源配置装置。
为了实现上述目的,本申请第四方面实施例提出了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时,实现前述的资源配置方法。
为了实现上述目的,本申请第五方面实施例提出了非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现前述的资源配置方法。
为了实现上述目的,本申请第六方面实施例提出了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时,实现如上所述的资源配置方法。
本申请实施例提供的技术方案至少包括如下有益效果:
本申请提供了一种资源配置方法,该方法包括从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;获取每个所述待传输子文件的流行度数据;根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。本申请缓解了缓存节点的压力,提高了数据传输的速度,降低了井下数据的处理时延。
应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1为本申请实施例提供的一种资源配置方法的流程示意图;
图2为本申请实施例提供的另一种资源配置方法的流程示意图;
图3为本申请实施例提供的另一种资源配置方法的流程示意图;
图4为本申请实施例提供的另一种资源配置方法的流程示意图;
图5为本申请实施例提供的另一种资源配置方法的流程示意图;
图6为本申请实施例提供的另一种资源配置方法的流程示意图;
图7为本申请实施例提供的一种资源配置系统的结构示意图;
图8为本申请实施例提供的一种资源配置装置的结构示意图;
图9为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明,其中包括本申请实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本申请的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
下面采用实施例对本申请的资源配置方法、装置及电子设备进行详细说明。
下面采用实施例对本申请的资源配置方法、装置及电子设备进行详细说明。
图1为本申请实施例提供的一种资源配置方法的流程示意图。其中,需要说明的是,本实施例的资源配置方法的执行主体为资源配置装置,资源配置装置具体可以为硬件设备,或者硬件设备中的软件等。其中,硬件设备例如终端设备、服务器等。
如图1所示,本实施例提出的资源配置方法,包括以下步骤:
S101、从井下源节点中获取待传输文件,其中,待传输文件包括至少一个待传输子文件。
其中,待传输文件,可以为包括至少一个待传输子文件的任一信息文件(Information File,简称INF File)。
其中,信息文件,指的是特定的适配器创建的文件,给操作系统提供了安装设备所需的信息,例如任一设备的有效逻辑配置列表、与此设备相关的驱动程序文件的名称等。
可选地,待传输文件可以定义为包括至少一个待传输子文件的集合。例如,针对待传输文件F,共包括k个待传输子文件,此种情况下,待传输文件F的定义如下:
F={a1,a2,a3…ak}
其中,F为待传输文件,a1~ak均为待传输子文件。
S102、获取每个待传输子文件的流行度数据。
需要说明的是,待传输文件中的包括的至少一个待传输子文件,通常需要发送给不同的设备及用户。相关技术中,在进行文件传输的过程中,往往需要将待传输文件中的待传输子文件存储在不同的缓存节点中,进而进行文件传输。
然而,由于待传输文件中并不是所有的信息(待传输子文件)都被井下的每个设备(终端设备)及用户所需要,这样一来,若采用上述方法进行文件传输,则会极大降低传输效率,增大每个井下传输节点的存储负担,也就是说,对于井下传输节点的存储空间大小的要求也愈发严苛,同时,也会导致文件接收端在处理接收到的文件时需要用付出更多时间及资源。
由此,本申请中提出一种资源配置方法,通过获取流行度数据,以对构成待传输文件的每个待传输子文件进行流行度分析,尽可能地将设备及用户更加需要的目标待传输子文件发送至井下存储节点进行存储。
其中,流行度数据,指的是能够反映每个设备及用户对任一待传输子文件感兴趣程度的数据和/或每个待传输子文件的流行程度的数据。
需要说明的是,本申请中对于获取每个待传输子文件的流行度数据的具体方式不作限定,可以根据实际情况进行设定。
可选地,可以采用香农熵(Shannon entropy),又称信息熵的概念对每个待传输子文件进行处理,以获取每个待传输子文件的流行度数据。
其中,香农熵,指的是用于获取信息不确定性的多少的数据。一条信息的信息量大小和它的不确定性有直接的关系。举例而言,在试图分析一件不确定的事情或是一件没有任何已知信息的事情时,往往需要了解大量的信息。相反,若需要处理一件具有较多已知信息的事情时,往往不需要太多的信息就能顺利进行处理。综上所示,显而易见地,信息量的度量即为不确定性的多少。
S103、根据流行度数据,从所有的待传输子文件中选取目标待传输子文件,并将目标待传输子文件发送至至少一个井下存储节点进行存储。
需要说明的是,本申请对应每个井下存储节点所存储的目标待传输子文件个数不作限定,可以根据实际情况进行设定。
举例而言,根据流行度数据,从所有的待传输子文件中选取了目标待传输子文件1~5,共5个目标待传输子文件,此种情况下,若共有6个井下存储节点1~6,则可以选取任意5个井下存储节点,例如井下存储节点1、2、3、5和6,并将目标待传输子文件1~5发送至井下存储节点1、2、3、5和6进行存储,这样一来,每个井下存储节点存储有最多一个目标待传输子文件;若共有4个井下存储节点1~4,则可以将目标待传输子文件1~4发送至井下存储节点1~4进行存储,然后将目标待传输子文件5随机发送至井下存储节点1~4中的任一节点进行存储,这样一来,每个井下存储节点存储有至少一个目标待传输子文件。
进一步地,在将目标待传输子文件存储于井下存储节点后,设备及用户在试图获取任一目标待传输子文件时,即可接受对应的井下存储节点发送的目标待传输子文件。
本申请提出的资源配置方法,可以通过从井下源节点中获取待传输文件,其中,待传输文件包括至少一个待传输子文件,并获取每个待传输子文件的流行度数据,进而根据流行度数据,从所有的待传输子文件中选取目标待传输子文件,并将目标待传输子文件发送至至少一个井下存储节点进行存储。由此,本申请不再将待传输文件中的所有待传输子文件均存储于井下存储节点,通过获取流行度数据,以对构成待传输文件的每个待传输子文件进行流行度分析,能够尽可能地将设备及用户更加需要的目标待传输子文件发送至井下存储节点进行存储,降低了井下存储节点的存储压力,避免了因增设存储空间而导致的额外开销以及因存储空间不足导致的信息丢失,从而以更加准确、可靠的资源配置方式提高传输速度并提升传输效率。
需要说明的是,在试图获取每个待传输子文件的流行度数据时,采用香农熵的概念对每个待传输子文件进行处理。
作为一种可能的实现方式,如图2所示,在上述实施例的基础上,上述步骤S102中获取每个待传输子文件的流行度数据的具体过程,包括以下步骤:
S201、针对每个待传输子文件,获取至少一个属性特征提取维度。
需要说明的是,本申请中对于针对每个待传输子文件,获取至少一个属性特征提取维度的具体方式不作限定,可以根据实际情况进行设定。
作为一种可能的实现方式,可以根据每个待传输子文件的文件类型,获取对应的属性特征提取维度。可选地,可以获取待传输子文件的文件类型;进一步地,可以根据不同的文件类型,获取预先设定的属性特征提取维度。
其中,文件类型可以根据实际情况进行设定。例如,可以设定文件类型为图像、语音、文档等。
针对图像格式的待传输子文件,可以将图像名称、描述图像的关键词等作为属性特征提取维度。
针对语音格式的待传输子文件,可以将语音名称、描述语音的关键词等作为属性特征提取维度。
针对文档格式的待传输子文件,可以通过TF-IDF(term frequency–inversedocument frequency,词频-逆向文件频率)等方式对待传输子文件进行处理,并将处理结果作为属性特征提取维度。
需要说明的是,本申请对于处理文档格式的待传输子文件的具体方式不作限定,可以根据实际情况进行设定。可选地,可以对全文进行TF-IDF;可选地,可以不对全文进行处理,而是对目标段落或者目标内容(例如摘要等总结性内容)进行TF-IDF。
S202、根据所有的属性特征提取维度,对待传输子文件进行特征提取,以获取待传输子文件的至少一个属性特征向量。
举例而言,针对任一图像格式的待传输子文件ak,可选地,以图像名称作为属性特征提取维度进行特征提取,可以获取定义如下的待传输子文件ak:
ak={c1,c2,c3,...,cn}
其中,ak为待传输子文件,c1~cn为一组属性特征向量。
可选地,以图像名称和描述图像的关键词作为属性特征提取维度进行特征提取,可以获取定义如下的待传输子文件ak:
ak={c1,c2,c3,...,cn,d1,d2,d3,...,dn}
其中,ak为待传输子文件,c1~cn为一组属性特征向量,d1~dn为另一组属性特征向量。
需要说明的是,在通过TF-IDF对文档格式的待传输子文件进行处理时,针对不同的文档,处理得到的最终的属性特征向量的长度是一致的。可选地,可以将属性特征向量的长度规定为任一目标长度,响应于任一待传输子问价的属性特征向量的长度小于目标长度,则对缺失的位置用统一的数字(例如0)进行补齐处理。
S203、根据所有的属性特征向量,获取待传输子文件的信息熵。
需要说明的是,信息熵(Informationentropy),在信息学中主要通过数学公式来描述信息和概率直接的关系。它的原理映射到本申请中的资源缓存应用场景上,就是计算设备及用户曾经对文件产生的行为,即设备及用户针对文件的历史数据。
作为一种可能的实现方式,如图3所示,在上述实施例的基础上,上述步骤S203中根据所有的属性特征向量,获取待传输子文件的信息熵的具体过程,包括以下步骤:
S301、针对每个属性特征向量,根据属性特征向量,获取对应的子信息熵。
作为一种可能的实现方式,如图3所示,在上述实施例的基础上,上述步骤S301中针对每个属性特征向量,根据属性特征向量,获取对应的子信息熵的具体过程,包括以下步骤:
S401、获取属性特征向量的历史数据,并根据历史数据,获取对应的属性特征向量的概率。
需要说明的是,属性特征向量的历史数据,是根据设备及用户曾经对文件产生的行为而构成的集合。
其中,集合中每个属性特征向量出现的概率高低能够反映信息量的大小,如果属性特征向量出现的概率值较高,表示属性特征向量对应的信息量较大,如果属性特征向量出现的概率值较低,表示属性特征向量对应的信息量较小。
本申请实施例中,可以获取属性特征向量的历史数据,并基于以下公式,获取对应的属性特征向量的概率:
其中,pn为属性特征向量cn出现的概率,num(cn)为在历史数据(集合)中属性值为cn的待传输子文件的总数量,m为待传输文件的总数量。
S402、根据概率,获取对应的子信息熵。
需要说明的是,通过对属性特征向量的概率进行计算,能够判别出该属性特征向量的区分能力。
由此,本申请实施例中,在获取属性特征向量的概率后,可以基于以下公式,获取对应的子信息熵:
其中,H(k)为任一待传输子文件的子信息熵,Pi为该待传输子文件的属性特征向量的概率。
S302、对所有的子信息熵进行加权处理,并将加权结果作为待传输子文件的信息熵。
需要说明的是,子信息熵的大小能够反映对应的待传输子文件的流行度(感兴趣程度),子信息熵的取值越大,表示待传输子文件的流行度越高,子信息熵的取值越小,表示待传输子文件的流行度越低。
由此,本申请实施例中,可以对所有的子信息熵进行加权处理,并将加权结果作为待传输子文件的信息熵。其中,权重(系数)可以根据实际情况进行设定。
S204、根据信息熵,获取待传输子文件的流行度数据。
本申请实施例中,在获取每个待传输子文件的信息熵之后,可以根据信息熵,获取待传输子文件的流行度数据。
需要说明的是,本申请中对于根据信息熵,获取待传输子文件的流行度数据的具体方式不作限定,可以根据实际情况进行设定。
可选地,可以查询预先设定的信息熵与待传输子文件的流行度数据之间的映射关系,以根据信息熵,获取待传输子文件的流行度数据。
可选地,可以将信息熵输入至训练好的流行度数据获取模块中,以输出信息熵对应的待传输子文件的流行度数据。
本申请提出的资源配置方法,可以通过采用香农熵的概念对每个待传输子文件进行处理。可选地,可以基于至少一个属性特征提取维度,获取待传输子文件的信息熵,进而根据信息熵,获取待传输子文件的流行度数据。由此,本申请从至少一个维度对待传输子文件的流行度进行表示,使得待传输子文件的流行度数据更加准确、可靠,为更加准确地将设备及用户更加需要的目标待传输子文件发送至井下存储节点进行存储奠定了基础,进一步提高了传输速度并提升了传输效率。
需要说明的是,在试图根据流行度数据,从所有的待传输子文件中选取目标待传输子文件时,可以对所有的待传输子文件进行排序。
作为一种可能的实现方式,如图5所示,在上述实施例的基础上,上述步骤S103中根据流行度数据,从所有的待传输子文件中选取目标待传输子文件的具体过程,包括以下步骤:
S501、根据流行度数据,对所有的待传输子文件进行排序,以获取流行度排序结果。
需要说明的是,本申请中对于根据流行度数据,对所有的待传输子文件进行排序,以获取流行度排序结果的具体方式不作限定,可以根据实际情况进行设定。
可选地,可以根据流行度数据,对所有的待传输子文件进行正序排序,以获取流行度排序结果。
可选地,可以根据流行度数据,对所有的待传输子文件进行倒序排序,以获取流行度排序结果。
S502、响应于任一待传输子文件的流行度排序结果处于预设排序结果范围内,则将任一待传输子文件作为目标待传输子文件。
其中,预设排序结果范围可以根据实际情况进行设定。例如,可以设定预设排序结果范围为排序结果的第1~5位。
举例而言,针对待传输子文件1~10,获取到正序的流行度排序结果为待传输子文件1、3、5、7、8、2、4、6、9、10,此种情况下,若预设排序结果范围为排序结果的第1~5位,则可以将待传输子文件1、3、5、7、8作为目标待传输子文件。
进一步地,在获取目标待传输子文件后,可以通过多种方式将目标待传输子文件发送至至少一个井下存储节点进行存储。
作为一种可能的实现方式,可以获取随机发送策略,并根据随机发送策略将目标待传输子文件发送至任一井下存储节点。
举例而言,若共有5个井下存储节点1~5,则可以将目标待传输子文件1、3、5、7、8进行随机发送,将目标待传输子文件1发送至井下存储节点2,将目标待传输子文件3发送至井下存储节点3,将目标待传输子文件5发送至井下存储节点5,将目标待传输子文件6发送至井下存储节点4,将目标待传输子文件7发送至井下存储节点1。
进一步地,在将目标待传输子文件发送至任一井下存储节点进行存储后,井下存储节点可以向至少一个设备及用户发送目标待传输子文件。
作为一种可能的实现方式,可以响应于获取到文件发送指令,则所有的井下存储节点根据文件发送指令并行发送目标待传输子文件。
举例而言,在上述示例的基础上,若设备甲发送了文件发送指令,此种情况下,井下存储节点1~5可以同时将目标待传输子文件1、3、5、7、8并行发送至设备甲。
本申请提出的资源配置方法,可以通过响应于获取到文件发送指令,则所有的井下存储节点根据文件发送指令并行发送目标待传输子文件,缓解了作为缓存节点的井下存储节点的压力,进一步提高了传输速度并提升了传输效率。
图6是本申请的另一个实施例的一种资源配置方法的流程示意图。
如图6所示,本申请实施例提出的资源配置方法,具体包括以下步骤:
S601、从井下源节点中获取待传输文件,其中,待传输文件包括至少一个待传输子文件。
S602、针对每个待传输子文件,获取至少一个属性特征提取维度。
S603、根据所有的属性特征提取维度,对待传输子文件进行特征提取,以获取待传输子文件的至少一个属性特征向量。
S604、获取属性特征向量的历史数据,并根据历史数据,获取对应的属性特征向量的概率。
S605、根据概率,获取对应的子信息熵。
S606、对所有的子信息熵进行加权处理,并将加权结果作为待传输子文件的信息熵。
S607、根据信息熵,获取待传输子文件的流行度数据。
S608、根据流行度数据,对所有的待传输子文件进行排序,以获取流行度排序结果。
S609、响应于任一待传输子文件的流行度排序结果处于预设排序结果范围内,则将任一待传输子文件作为目标待传输子文件。
S6010、获取随机发送策略,并根据随机发送策略将目标待传输子文件发送至任一井下存储节点。
S6011、响应于获取到文件发送指令,则所有的井下存储节点根据文件发送指令并行发送目标待传输子文件。
综上所述,本申请提出的资源配置方法,降低了井下存储节点的存储压力,避免了因增设存储空间而导致的额外开销以及因存储空间不足导致的信息丢失,从而以更加准确、可靠的资源配置方式提高传输速度并提升传输效率。
为了实现上述实施例,本实施例提供了一种资源配置系统,图7为本申请实施例提供的一种资源配置系统的结构示意图。
如图7所示,该资源配置系统2000,包括:地面资源配置组件210、井下资源配置组件220、以及资源配置装置1000。
其中,地面资源配置组件210,至少包括核心网。
其中,井下资源配置组件220,至少包括万兆环网对应的处理单元,例如,基带处理单元(Base Band Unit,简称BBU)、射频拉远单元集线器(Remote Radio Unit Hub,简称RHUB)和射频拉远单元(RemoteRadioUnit,简称RRU)。
需要说明的是,核心网通常安装在地面中心机房;BBU、RHUB、RRU等处理单元通常安装在井下,可选地,BBU通过光纤与RHUB连接,RHUB通过光缆与更小的射频拉远单元(PicoRemote Radio Unit,简称PRRU)和定向天线连接,以实现5G信号覆盖。
需要说明的是,为了防止大功率无线发射引起瓦斯爆炸,按照相关规定,煤矿井下无线发射设备的射频阈功率(无线发射设备的有效输出功率与天线增益的乘积)不得大于6W。
相关技术中,通常会采用修改时隙(slot)比的方式,将上、下行时隙比进行倒换,以达到增加上行带宽的目的,这样一来,修改后的上行速率可以达到约450Mbps。然而,由于相关技术中煤矿井下几乎全部使用室分小站,因此,即便在调整参数后,也不能发挥出5G技术优势,不能满足井下应用的传输需求。
进一步地,相关技术中,地面资源配置组件210,往往注重于下行效率,与井下应用场景需求相反,这样一来,导致设备下井后不能完全发挥性能,造成大部分带宽、性能资源浪费。同时,目前也没有针对井下应用场景的优化策略,例如资源动态分配策略、井下边缘计算、边缘缓存等策略,导致井下数据处理时延增大,传输效率低下,而且隔爆设备体积及重量大,安装不便,不能满足井下全场景应用需求。
由此,本申请中,为了提升传输速率,不再依赖修改时隙(slot)比等方式,通过增设资源配置装置,使得地面资源配置组件和井下资源配置组件进行资源配置的过程中,数据处理的时延得以降低,并缓解了缓存节点的压力、提高了数据传输的速度。
为了实现上述实施例,本实施例提供了一种资源配置装置,图8为本申请实施例提供的一种资源配置装置的结构示意图。
如图8所示,该资源配置装置1000,包括:第一获取模块110、第二获取模块120和存储模块130。其中,
第一获取模块110,用于从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;
第二获取模块120,用于获取每个所述待传输子文件的流行度数据;
存储模块130,用于根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。
根据本申请实施例,第二获取模块120,还用于:针对每个所述待传输子文件,获取至少一个属性特征提取维度;根据所有的所述属性特征提取维度,对所述待传输子文件进行特征提取,以获取所述待传输子文件的至少一个属性特征向量;根据所有的所述属性特征向量,获取所述待传输子文件的信息熵;根据所述信息熵,获取所述待传输子文件的所述流行度数据。
根据本申请实施例,第二获取模块120,还用于:针对每个所述属性特征向量,根据所述属性特征向量,获取对应的子信息熵;对所有的所述子信息熵进行加权处理,并将加权结果作为所述待传输子文件的所述信息熵。根据本申请的一个实施例,所述第二获取模块,还用于:获取所述属性特征向量的历史数据,并根据所述历史数据,获取对应的所述属性特征向量的概率;根据所述概率,获取对应的所述子信息熵。
根据本申请实施例,第二获取模块120,还用于:根据所述流行度数据,对所有的所述待传输子文件进行排序,以获取流行度排序结果;响应于任一待传输子文件的所述流行度排序结果处于预设排序结果范围内,则将所述任一待传输子文件作为所述目标待传输子文件。
根据本申请实施例,存储模块130,还用于:获取随机发送策略,并根据所述随机发送策略将所述目标待传输子文件发送至任一井下存储节点。
根据本申请实施例,存储模块130,还用于:响应于获取到文件发送指令,则所有的所述井下存储节点根据所述文件发送指令并行发送所述目标待传输子文件。
根据本申请提供的资源配置装置,可以通过从井下源节点中获取待传输文件,其中,待传输文件包括至少一个待传输子文件,并获取每个待传输子文件的流行度数据,进而根据流行度数据,从所有的待传输子文件中选取目标待传输子文件,并将目标待传输子文件发送至至少一个井下存储节点进行存储。由此,本申请不再将待传输文件中的所有待传输子文件均存储于井下存储节点,通过获取流行度数据,以对构成待传输文件的每个待传输子文件进行流行度分析,能够尽可能地将设备及用户更加需要的目标待传输子文件发送至井下存储节点进行存储,降低了井下存储节点的存储压力,避免了因增设存储空间而导致的额外开销以及因存储空间不足导致的信息丢失,从而以更加准确、可靠的资源配置方式提高传输速度并提升传输效率。
为了实现上述实施例,本申请还提出了一种电子设备3000,如图9所示,包括存储器310、处理器320及存储在存储器310上并可在处理器320上运行的计算机程序,处理器执行程序时,实现前述的资源配置方法。
为了实现上述实施例,本申请还提出一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现前述的资源配置方法。
为了实现上述实施例,本申请还提出一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时,实现如上所述的资源配置方法。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本申请公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本申请保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本申请开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本申请保护范围之内。
Claims (7)
1.一种资源配置方法,包括:
从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;
针对每个所述待传输子文件,获取至少一个属性特征提取维度,根据所有的所述属性特征提取维度对所述待传输子文件进行特征提取,以获取所述待传输子文件的至少一个属性特征向量,针对每个所述属性特征向量,根据所述属性特征向量的历史数据获取对应的所述属性特征向量的概率,根据所述概率获取对应的子信息熵,对所有的所述子信息熵进行加权处理,并将加权结果作为所述待传输子文件的信息熵,根据所述信息熵获取每个所述待传输子文件的流行度数据;
根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。
2.根据权利要求1所述的资源配置方法,其中,所述根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,包括:
根据所述流行度数据,对所有的所述待传输子文件进行排序,以获取流行度排序结果;
响应于任一待传输子文件的所述流行度排序结果处于预设排序结果范围内,则将所述任一待传输子文件作为所述目标待传输子文件。
3.根据权利要求1或2所述的资源配置方法,其中,所述将所述目标待传输子文件发送至至少一个井下存储节点进行存储,包括:
获取随机发送策略,并根据所述随机发送策略将所述目标待传输子文件发送至任一井下存储节点。
4.根据权利要求1所述的资源配置方法,其中,所述方法还包括:
响应于获取到文件发送指令,则所有的所述井下存储节点根据所述文件发送指令并行发送所述目标待传输子文件。
5.一种资源配置装置,包括:
第一获取模块,用于从井下源节点中获取待传输文件,其中,所述待传输文件包括至少一个待传输子文件;
第二获取模块,用于针对每个所述待传输子文件,获取至少一个属性特征提取维度,根据所有的所述属性特征提取维度对所述待传输子文件进行特征提取,以获取所述待传输子文件的至少一个属性特征向量,针对每个所述属性特征向量,根据所述属性特征向量的历史数据获取对应的所述属性特征向量的概率,根据所述概率获取对应的子信息熵,对所有的所述子信息熵进行加权处理,并将加权结果作为所述待传输子文件的信息熵,根据所述信息熵获取每个所述待传输子文件的流行度数据;
存储模块,用于根据所述流行度数据,从所有的所述待传输子文件中选取目标待传输子文件,并将所述目标待传输子文件发送至至少一个井下存储节点进行存储。
6.一种资源配置系统,包括:
地面资源配置组件、井下资源配置组件以及如权利要求5所述的资源配置装置。
7.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1-4中任一项所述的资源配置方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111400259.1A CN114338565B (zh) | 2021-11-19 | 2021-11-19 | 一种资源配置方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111400259.1A CN114338565B (zh) | 2021-11-19 | 2021-11-19 | 一种资源配置方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114338565A CN114338565A (zh) | 2022-04-12 |
CN114338565B true CN114338565B (zh) | 2024-05-17 |
Family
ID=81047428
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111400259.1A Active CN114338565B (zh) | 2021-11-19 | 2021-11-19 | 一种资源配置方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114338565B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110290175A (zh) * | 2019-05-24 | 2019-09-27 | 北京邮电大学 | 结合用户兴趣的传输内容调度方法、装置和移动终端 |
CN111209254A (zh) * | 2020-01-10 | 2020-05-29 | Oppo(重庆)智能科技有限公司 | 文件指纹获取方法、装置、电子设备以及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8140698B2 (en) * | 2003-04-30 | 2012-03-20 | International Business Machines Corporation | Method and system for efficient data transmission in interactive networked environments |
US8806519B2 (en) * | 2011-10-31 | 2014-08-12 | Google Inc. | Method to evaluate the geographic popularity of geographically located user-generated content items |
US9544242B2 (en) * | 2015-02-20 | 2017-01-10 | Exara, Inc. | Network data prioritizer |
US20190266257A1 (en) * | 2018-02-28 | 2019-08-29 | Laserlike, Inc. | Vector similarity search in an embedded space |
-
2021
- 2021-11-19 CN CN202111400259.1A patent/CN114338565B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110290175A (zh) * | 2019-05-24 | 2019-09-27 | 北京邮电大学 | 结合用户兴趣的传输内容调度方法、装置和移动终端 |
CN111209254A (zh) * | 2020-01-10 | 2020-05-29 | Oppo(重庆)智能科技有限公司 | 文件指纹获取方法、装置、电子设备以及存储介质 |
Non-Patent Citations (1)
Title |
---|
Web访问流的局部性特征建模;石磊;王会霞;;计算机工程与设计(07);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114338565A (zh) | 2022-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102891865B (zh) | 一种信息获取方法和设备 | |
CN102571820B (zh) | 用于传输数据的方法、压缩服务器和终端 | |
CN111193668B (zh) | 流量分配方法、装置、计算机设备及存储介质 | |
CN105022760B (zh) | 一种新闻推荐方法及装置 | |
US11196845B2 (en) | Method, apparatus, and computer program product for determining data transfer manner | |
Ko et al. | Probabilistic caching based on maximum distance separable code in a user-centric clustered cache-aided wireless network | |
CN103095824A (zh) | 文件上传控制方法及系统 | |
CN105554081A (zh) | 一种文件差量的传输方法以及装置 | |
WO2016192081A1 (en) | Enable access point availability prediction | |
EP3926453A1 (en) | Partitioning method and apparatus therefor | |
CN114338565B (zh) | 一种资源配置方法、装置及电子设备 | |
CN104301964A (zh) | 基于组合预测的自适应机会协作控制方法 | |
CN110798865A (zh) | 数据压缩方法、装置、计算机设备和计算机可读存储介质 | |
CN114118748A (zh) | 一种服务质量预测方法、装置、电子设备及存储介质 | |
CN103152382B (zh) | 面向多宿主网络的多文件并发传输控制方法 | |
CN104168595A (zh) | 一种多点协作传输方法、装置及系统 | |
KR20150008541A (ko) | 데이터 전송 제어 방법 및 서버 | |
JP6669278B2 (ja) | リソースマッピング方法、装置及び通信システム | |
KR20180110524A (ko) | 제한된 캐시 메모리 환경에서 파일 및 화질의 선호도를 고려한 파일 저장 방법 및 파일 저장 장치 | |
CN114339772B (zh) | 一种资源配置方法、装置及电子设备 | |
CN108260135B (zh) | 一种系统信息传输方法、用户终端和传输节点 | |
US11086822B1 (en) | Application-based compression | |
JP2020107941A (ja) | スケジューリングシステムおよび方法 | |
US20110028098A1 (en) | Cognitive radios for secure transmissions | |
CN116489230B (zh) | 任务调度方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |