CN111314483A - 文件归档方法、装置、计算机设备和存储介质 - Google Patents

文件归档方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN111314483A
CN111314483A CN202010141726.2A CN202010141726A CN111314483A CN 111314483 A CN111314483 A CN 111314483A CN 202010141726 A CN202010141726 A CN 202010141726A CN 111314483 A CN111314483 A CN 111314483A
Authority
CN
China
Prior art keywords
uploading
file
occupation state
transmission
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010141726.2A
Other languages
English (en)
Inventor
王雅光
廖修海
耿永祥
李柳
刘沙皓伦
罗浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan United Imaging Healthcare Co Ltd
Original Assignee
Wuhan United Imaging Healthcare Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan United Imaging Healthcare Co Ltd filed Critical Wuhan United Imaging Healthcare Co Ltd
Priority to CN202010141726.2A priority Critical patent/CN111314483A/zh
Publication of CN111314483A publication Critical patent/CN111314483A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请涉及一种文件归档方法、装置、计算机设备和存储介质。该方法包括:获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。采用本方法能够提高文件归档的成功率,进而提高工作效率。

Description

文件归档方法、装置、计算机设备和存储介质
技术领域
本申请涉及互联网技术领域,特别是涉及一种文件归档方法、装置、计算机设备和存储介质。
背景技术
随着移动互联网技术和云存储技术的不断成熟,以及日益增加的信息量和信息获取的需要,人们通常会将大量的文件和数据存储在云端,以满足随时随地,通过各种移动设备进行查看或者调用。例如,随着互联网医疗的发展,越来越多的情况下需要医生远程诊断和在线浏览胶片等用户资料。因此,将文件和各种数据向云服务器进行传输以便实现云存储是实现互联网医疗的基础。
传统的文件传输方法是基于客户端的硬件环境和已有的网络环境进行文件传输,以实现文件的归档。例如医院利用已有的客户端将用户资料用过互联网进行传输以方便查看患者资料。在传输过程中,通常需要通过使用者手动调整传输参数,例如并发量、传输控制协议(Transmission Control Protocol,简称TCP)连接数等上传参数,并基于人工设定的传输参数来实现文档的传输。
但是不同时间的网络状态和硬件环境常常会发生变化,当调整好的上传参数应用到另外一个环境或者传输的时间发生变化的时候,容易造成文件批量上传失败,因此严重影响工作效率。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高工作效率的文件归档成功率的文件归档方法、装置、计算机设备和存储介质。
第一方面,本申请实施例提供一种文件归档方法,所述方法包括:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
在其中一个实施例中,所述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。
在其中一个实施例中,所述硬件资源占用状态包括中央处理器CPU占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;所述根据所述传输资源占用状态,确定目标上传参数,包括:
若所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数;
其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;
其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。
在其中一个实施例中,所述根据所述传输资源占用状态,确定目标上传参数,包括:
若所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数;
其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;
其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。
在其中一个实施例中,所述方法还包括:
当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。
在其中一个实施例中,所述方法还包括:
获取文件归档结果;
若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。
在其中一个实施例中,所述方法还包括:
获取按照所述目标上传参数进行归档时的更新传输资源占用状态;
按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
在其中一个实施例中,所述方法还包括:
根据所述传输资源占用状态,输出报警提示信息。
第二方面,本申请实施例提供一种文件归档装置,所述装置包括:
获取模块,用于获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
确定模块,用于根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
处理模块,用于按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
第三方面,本申请实施例提供一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
第四方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
上述文件归档方法、装置、计算机设备和存储介质,通过计算机设备获取当前文件传输环境的传输资源占用状态,并根据传输资源占用状态,确定与当前的传输资源占用状态的闲忙程度所匹配的目标上传参数,然后按照与当前传输资源占用状态所匹配的目标上传参数将待归档文件传输至云存储器实现文件归档。该方法能够自适应地根据当前文件传输环境的传输资源占用状态对上传参数进行配置,并基于配置后的目标上传参数执行上传操作,从而极大的减少了由于固定上传参数与当前网络的实际情况不匹配可能导致的上传失败的问题,该方法极大地提高了文件上传归档的成功率,大大减少了计算机设备的宕机次数,因此极大的提高了文件归档的便利性,进而极大地提高了工作效率。
附图说明
图1为一个实施例中文件归档方法的应用场景图;
图2为一个实施例提供的文件归档方法的流程示意图;
图3为另一个实施例提供的文件归档方法的流程示意图;
图4为又一个实施例提供的医疗影像系统中文件归档的流程图;
图5为一个实施例提供的文件归档装置的结构示意图;
图6为一个实施例提供的计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的文件归档方法,可以应用于如图1所示的应用场景中。其中,终端102通过网络与云存储器104通过网络进行通信。其中,终端102可以是但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,在本申请实施例中,该终端102可以是本地的客户端,例如医生操作的获取影像文档的计算机设备,云存储器104可以用位于独立的服务器或者是多个服务器组成的服务器集群来实现。终端102通过网络向云存储器104上传待归档文件,从而实现文件归档。
本领域技术人员可以理解,图1中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
下面以具体的实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
需要说明的是,下述方法实施例的执行主体可以是文件归档装置,该装置可以通过软件、硬件或者软硬件结合的方式实现成为上述计算机设备的部分或者全部。下述方法实施例以执行主体为计算机设备为例进行说明。
图2为一个实施例提供的文件归档方法的流程示意图。本实施例涉及的是计算机设备自动根据传输资源占用状态,调节上传参数并以合理归档文件的具体过程。如图2所示,该方法包括:
S10、获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态。
具体的,计算机设备获取当前文件传输环境的传输资源占用状态,其中,上述传输资源占用状态可以包括硬件资源占用状态,例如CPU的占用率、内存占用率,或者包括网络资源占用状态,例如网络带宽的占用率,还可以包括硬件资源占用状态和网络资源占用状态的综合状态。可选地,计算机设备可以读取存储的上述传输资源占用状态的列表,并读取该列表中每一项的表征传输资源占用状态的参数,从而获取上述传输资源占用状态。可选地,计算机设备也可以获取其他网络监控应用程序获取的表征传输资源占用状态的参数,本实施例对传输资源占用状态的获取方式不做限定。
S20、根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数。
具体的,计算机设备可以根据上述传输资源占用状态的闲忙程度,确定当前允许进行上传操作的目标上传参数,因此该目标上传参数可以根据传输资源占用状态进行匹配。例如,计算机设备可以在传输资源占用状态较为繁忙的时候,确定控制较小上传量的目标上传参数,还可以在传输资源占用状态较为空闲的时候,确定控制较大上传量的目标上传参数。需要说明的是,上述目标上传参数可以包括文件在上传至云服务器的过程中所调用的与网络设置和硬件资源的设置相关的参数。
S30、按照所述目标上传参数将待归档文件传输至云存储器实现文件归档。
具体的,计算机设备可以按照上述目标上传参数执行将待归档文件上传至云存储器,从而实现文件归档。可选地,可以是将上传参数中对应数量的上传引擎进行初始化,然后采用初始化后的上传引擎执行待归档文件的上传操作。由于目标上传参数是在文件传输之前根据传输资源占用状态确定的,因此避免了目标上传参数与传输资源占用状态之间可能出现冲突的情况,如当前传输资源占用率高,然而目标上传参数设定的也是高速率传输,因此加重系统的负担,可能会影响其他程序的运行和上传的成功率,甚至引起系统宕机;或当前传输资源占用率低,然而目标上传参数设定的是低速率传输,造成了资源的浪费和传输时间的延长。
本实施例中,计算机设备获取当前文件传输环境的传输资源占用状态,并根据传输资源占用状态,确定与当前的传输资源占用状态的闲忙程度所匹配的目标上传参数,然后按照与当前传输资源占用状态所匹配的目标上传参数将待归档文件传输至云存储器实现文件归档。该方法能够自适应地根据当前文件传输环境的传输资源占用状态对上传参数进行配置,并基于配置后的目标上传参数执行上传操作,从而极大的减少了由于固定上传参数与当前网络的实际情况不匹配可能导致的上传失败的问题,该方法极大地提高了文件上传归档的成功率,大大减少了计算机设备的宕机次数,因此极大的提高了文件归档的便利性,进而极大地提高了工作效率。
可选地,上述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。计算机设备可以根据传输资源占用状态的闲忙程度,确定对应数量的上传引擎,可以包括传输资源占用状态较为繁忙的时候,确定数量较少的上传引擎;传输资源占用状态较为空闲的时候,确定数量较多的上传引擎;还可以根据传输资源占用状态的闲忙程度,确定上传引擎的硬件资源的配比,可以包括传输资源占用状态较为繁忙的时候,应减少上传引擎的硬件资源的配比;传输资源占用状态较为空闲的时候,应增加上传引擎的硬件资源的配比;还可以根据传输资源占用状态的闲忙程度,确定网络资源的配比,可以包括传输资源占用状态较为繁忙的时候,确定网络资源的配比较少,传输资源占用状态较为空闲的时候,确定网络资源的配比较多;还可以根据传输资源占用状态的闲忙程度,确定文件分割阈值,可以包括传输资源占用状态较为繁忙的时候,确定文件分割阈值较小,传输资源占用状态较为空闲的时候,确定文件分割阈值较大;还可以根据传输资源占用状态的闲忙程度,确定重传间隔时长,可以包括传输资源占用状态较为繁忙的时候,确定重传间隔时长较大,传输资源占用状态较为空闲的时候,确定重传间隔时长较小;还可以根据传输资源占用状态的闲忙程度,确定失败重传次数,可以包括传输资源占用状态较为繁忙的时候,确定失败重传次数较少,传输资源占用状态较为空闲的时候,确定失败重传次数较多。当然,目标上传参数可以包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的任意一个,也可以包括任意多个的组合,当计算机设备包括这多个参数的组合时,可以最大限度最多维度的调整上传参数,使得目标上传参数与当前的网络状态更为匹配,因此更为合理,进一步确保了待归档文件的归档效率和准确率。
在上述各个实施例的基础上,所述硬件资源占用状态包括中央处理器(CentralProcessing Unit,简称CPU)占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;上述步骤S20可以包括:若所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数;其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。具体的,当上述传输资源占用状态为繁忙状态的时候,即出现如下几种情况中的一种或几种,包括CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限。可选地,CPU预警上限、内存预警上限、带宽预警上限可以采用百分比进行描述,例如CPU预警上限可以设置为百分之八十,内存预警上限可以设置为百分之八十,带宽预警上限可以设置为百分之五十等等,响应时长预警上限可以是一个时间长度,例如5秒等,具体的设置上限可以根据需要或者是需求量进行调整,并不必要是固定值,还可以随着对网络资源或者硬件资源的需求量进行调整。例如当前需要归档的文件较大时,则确定当前需要的网络资源较多,因此设置的CPU预警上限、内存预警上限、带宽预警上限等相应的较小,响应时长预警上限较短;当前需要归档的文件较小时,则确定当前需要的网络资源较少,因此设置的CPU预警上限、内存预警上限、带宽预警上限等相应的较大,响应时长预警上限较长。计算机设备在传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,可以包括减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的任意一个或者多个,当然也可以包括所有,得到调整后的目标上传参数,从而实现降低传输效率操作。本实施例中,计算机设备通过所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数,从而实现在传输资源占用状态为繁忙状态的时候,自适应地对当前上传参数执行降低传输效率操作,进而能够基于当前传输资源占用状态得到匹配的目标上传参数,使得文件的归档能够按照与当前传输资源占用状态匹配的目标上传参数进行上传,极大的确保了文件归档的成功率,提高了工作效率。
可选地,上述步骤S20还可以包括:若所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数;其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。具体的,本实施例中的具体操作可以参考上述传输资源占用状态为繁忙状态时的实施例,二者为相反的操作,对于上述预警下限的设置可以根据经验进行设定,也可以是根据传输的需求量进行确定,此处不再赘述。需要说明的是,繁忙状态和闲置状态并不必须是绝对的标准,可以基于当前需要传输的文件的情况进行设定,本申请实施例对此不做限定。本实施例中,计算机设备通过所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数,从而实现在传输资源占用状态为闲置状态的时候,自适应地对当前上传参数执行提高传输效率操作,进而能够基于当前传输资源占用状态得到匹配的目标上传参数,使得文件的归档能够按照与当前传输资源占用状态匹配的目标上传参数进行上传,极大的确保了文件归档的成功率,提高了工作效率。
可选地,在上述各个实施例的基础上,所述方法还可以包括:当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。具体的,当计算机设备结束了一项任务的时候,传输资源占用状态可以由繁忙状态转变为闲置状态的时候,计算机设备确定可以分配硬件资源和网络资源进行待归档文件的归档,因此可以按照当前更新后的闲置状态,开始执行上述S20的步骤,获取目标上传参数并进行文件归档。本实施例中,计算机设备可以通过监控传输资源占用状态的变化,在出现空闲资源的时候,自动开始执行文件归档的操作,避免人工监控和手动执行归档可能导致的归档不及时和操作复杂,该方法的归档效率更高,因此使得工作效率更高,减少了人工操作,节省了人力。
可选地,在上述各个实施例的基础上,所述方法还可以包括:获取文件归档结果;若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。具体的,计算机设备可以获取文件归档结果,如果文件归档失败,例如接收到返回的归档失败的提示信息,则计算机设备可以重新获取此时的传输资源占用状态,并根据最新的传输资源占用状态更新上述目标上传参数,以实现根据文件归档结果重新调整目标上传参数,使得文件归档的操作能够结合之前的文件归档结果进行调整,因此更为合理,进一步提高了文件归档的成功率。
可选地,在上述各个实施例的基础上,所述方法还可以如图3包括:
S40、获取按照所述目标上传参数进行归档时的更新传输资源占用状态。
S50、按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
具体的,计算机设备可以在按照目标上传参数进行归档时的获取更新后的更新传输资源占用状态,可选地,可以是按照一定的监控周期获取更新传输资源占用状态,从而实现周期性的调整;也可以是每次更新完一次目标上传参数之后获取更新传输资源占用状态,从而能够基于每次目标上传参数的变化获取更新传输资源占用状态,避免了无效的获取,因此更为及时且高效本实施例对此并不做限定,然后计算机设备按照更新传输资源占用状态,确定更新目标上传参数,以按照更新目标上传参数进行文件归档,从而实现自适应的调整上传参数,使得文件归档能够自适应的随着传输资源占用状态进行调整,因此更为只能且更合理,兼顾文件归档的成功率和上传的效率,最大化的保证了工作的正常进行。
可选地,计算机设备还可以根据所述传输资源占用状态,输出报警提示信息。具体的,当上述传输资源占用状态表征硬件资源和/或网络资源占用繁忙的时候,还可以输出报警提示信息,以使得相关人员能够及时了解当前情况。可选地,上述报警提示信息可以是弹出的报警对话框,也可以是在状态栏输出文字信息,本实施例对此并不做限定。例如由于网络资源占用率过高导致多次上传失败,此时可以通过输出报警提示信息通知到相关的信息管理人员,进行人工调控,以进一步确保文件归档的成功率。可选地,如图4所示,图4为一个实施例提供的医疗影像系统中文件归档的流程图,该过程中,需要归档的文件可以包括患者拍摄的影像文件、检查报告等等。
应该理解的是,虽然图2-4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-4中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种文件归档装置,包括:
获取模块100,用于获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
确定模块200,用于根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
处理模块300,用于按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
在一个实施例中,所述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。
在一个实施例中,所述硬件资源占用状态包括中央处理器CPU占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;确定模块200,具体用于当所述传输资源占用状态为繁忙状态时,则对当前上传参数执行降低传输效率操作,得到目标上传参数;其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。
在一个实施例中,确定模块200,具体用于当所述传输资源占用状态为空闲状态时,则对当前上传参数执行提高传输效率操作,得到目标上传参数;其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。
在一个实施例中,处理模块300,还用于当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。
在一个实施例中,处理模块300,还用于获取文件归档结果;若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。
在一个实施例中,处理模块300,还用于获取按照所述目标上传参数进行归档时的更新传输资源占用状态;按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
在一个实施例中,处理模块300,还用于根据所述传输资源占用状态,输出报警提示信息。
关于文件归档装置的具体限定可以参见上文中对于文件归档方法的限定,在此不再赘述。上述文件归档装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储目标上传参数。该计算机设备的网络接口用于与云存储器通过网络连接通信。该计算机程序被处理器执行时以实现一种文件归档方法。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
在一个实施例中,所述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。
在一个实施例中,所述硬件资源占用状态包括中央处理器CPU占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;处理器执行计算机程序时还实现以下步骤:
若所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数;
其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;
其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
若所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数;
其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;
其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取文件归档结果;
若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取按照所述目标上传参数进行归档时的更新传输资源占用状态;
按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据所述传输资源占用状态,输出报警提示信息。
应当清楚的是,本申请实施例中处理器执行计算机程序的过程,与上述方法中各个步骤的执行过程一致,具体可参见上文中的描述。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
在一个实施例中,所述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。
在一个实施例中,所述硬件资源占用状态包括中央处理器CPU占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;计算机程序被处理器执行时还实现以下步骤:
若所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数;
其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;
其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
若所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数;
其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;
其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取文件归档结果;
若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取按照所述目标上传参数进行归档时的更新传输资源占用状态;
按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据所述传输资源占用状态,输出报警提示信息。
应当清楚的是,本申请实施例中处理器执行计算机程序的过程,与上述方法中各个步骤的执行过程一致,具体可参见上文中的描述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种文件归档方法,其特征在于,所述方法包括:
获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
2.根据权利要求1所述的方法,其特征在于,所述目标上传参数包括上传引擎的数量、上传引擎的硬件资源的配比、网络资源的配比、文件分割阈值、重传间隔时长和失败重传次数中的至少一个。
3.根据权利要求1所述的方法,其特征在于,所述硬件资源占用状态包括中央处理器CPU占用率和内存占用率,所述网络资源占用状态包括带宽占用率和响应时间;所述根据所述传输资源占用状态,确定目标上传参数,包括:
若所述传输资源占用状态为繁忙状态,则对当前上传参数执行降低传输效率操作,得到目标上传参数;
其中,所述繁忙状态包括:CPU占用率大于CPU预警上限、内存占用率大于内存预警上限、带宽占用率大于带宽预警上限、响应时间大于响应时长预警上限中的至少一个;
其中,所述降低传输效率操作包括:减少上传引擎个数、减少每个上传引擎的CPU配比、减少每个上传引擎的内存配比、减少每个上传引擎的带宽配比、减小文件分割阈值、增加重传间隔时长和减少失败重传次数中的至少一个。
4.根据权利要求1所述的方法,其特征在于,所述根据所述传输资源占用状态,确定目标上传参数,包括:
若所述传输资源占用状态为闲置状态,则对当前上传参数执行提高传输效率操作,得到目标上传参数;
其中,所述闲置状态包括:CPU占用率小于CPU预警下限、内存占用率小于内存预警下限、带宽占用率小于带宽预警下限、响应时间小于响应时长预警下限中的至少一个;
其中,所述提高传输效率操作包括:增加上传引擎个数、增加每个上传引擎的CPU配比、增加每个上传引擎的内存配比、增加每个上传引擎的带宽配比、增大文件分割阈值、减少重传间隔时长和增加失败重传次数中的至少一个。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
当所述传输资源占用状态由繁忙状态更新为闲置状态时,执行所述根据所述传输资源占用状态,确定目标上传参数的步骤。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取文件归档结果;
若所述文件归档结果为归档失败,则根据所述传输资源占用状态,更新所述目标上传参数。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取按照所述目标上传参数进行归档时的更新传输资源占用状态;
按照所述更新传输资源占用状态,确定更新目标上传参数,以按照所述更新目标上传参数进行文件归档。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述传输资源占用状态,输出报警提示信息。
9.一种文件归档装置,其特征在于,所述装置包括:
获取模块,用于获取当前文件传输环境的传输资源占用状态;其中,所述传输资源占用状态包括硬件资源占用状态和/或网络资源占用状态;
确定模块,用于根据所述传输资源占用状态,确定目标上传参数;其中,所述目标上传参数包括文件上传过程中所调用的参数;
处理模块,用于按照所述目标上传参数将待归档文件传输至云存储器进行文件归档。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。
CN202010141726.2A 2020-03-04 2020-03-04 文件归档方法、装置、计算机设备和存储介质 Pending CN111314483A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010141726.2A CN111314483A (zh) 2020-03-04 2020-03-04 文件归档方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010141726.2A CN111314483A (zh) 2020-03-04 2020-03-04 文件归档方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN111314483A true CN111314483A (zh) 2020-06-19

Family

ID=71147881

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010141726.2A Pending CN111314483A (zh) 2020-03-04 2020-03-04 文件归档方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN111314483A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112596985A (zh) * 2020-12-30 2021-04-02 绿盟科技集团股份有限公司 一种it资产探测方法、装置、设备和介质
CN114172892A (zh) * 2021-11-29 2022-03-11 深圳依时货拉拉科技有限公司 文件上传方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104168081A (zh) * 2013-05-20 2014-11-26 腾讯科技(深圳)有限公司 一种文件传输方法及装置
US20150019689A1 (en) * 2013-07-12 2015-01-15 Clearwire Ip Holdings Llc Managed file transfer system, method and apparatus
CN106230928A (zh) * 2016-07-28 2016-12-14 天脉聚源(北京)教育科技有限公司 一种文件上传的方法及装置
CN109324897A (zh) * 2018-08-24 2019-02-12 平安科技(深圳)有限公司 数据上传方法及系统、终端和计算机可读存储介质
CN109756568A (zh) * 2018-12-29 2019-05-14 上海掌门科技有限公司 文件的处理方法、设备及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104168081A (zh) * 2013-05-20 2014-11-26 腾讯科技(深圳)有限公司 一种文件传输方法及装置
US20150019689A1 (en) * 2013-07-12 2015-01-15 Clearwire Ip Holdings Llc Managed file transfer system, method and apparatus
CN106230928A (zh) * 2016-07-28 2016-12-14 天脉聚源(北京)教育科技有限公司 一种文件上传的方法及装置
CN109324897A (zh) * 2018-08-24 2019-02-12 平安科技(深圳)有限公司 数据上传方法及系统、终端和计算机可读存储介质
CN109756568A (zh) * 2018-12-29 2019-05-14 上海掌门科技有限公司 文件的处理方法、设备及计算机可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112596985A (zh) * 2020-12-30 2021-04-02 绿盟科技集团股份有限公司 一种it资产探测方法、装置、设备和介质
CN112596985B (zh) * 2020-12-30 2023-11-10 绿盟科技集团股份有限公司 一种it资产探测方法、装置、设备和介质
CN114172892A (zh) * 2021-11-29 2022-03-11 深圳依时货拉拉科技有限公司 文件上传方法和装置

Similar Documents

Publication Publication Date Title
CN109510723B (zh) 网关设备、物联网事务管控系统及方法
CN111314483A (zh) 文件归档方法、装置、计算机设备和存储介质
CN112948174A (zh) 消息处理方法、装置、计算机设备和存储介质
CN109510842B (zh) 一种工控网络文件强制访问控制策略配置的方法及装置
DE10250165A1 (de) System und Verfahren zur Überwachung des Zustandes einer Maschine von Ferne
CN110308985B (zh) 云专属服务器资源管理方法、装置、设备及存储介质
CN112612618B (zh) 接口限流方法、装置、计算机设备和存储介质
CN112948212A (zh) Rpa任务状态监控方法、装置及计算机存储介质
DE102008044475A1 (de) Verfahren und System zur Vorhersage von Gasturbinen-Emissionen unter Verwendung meteorologischer Daten
CN111399732B (zh) 网页截图方法、装置、计算机设备和存储介质
CN111193789A (zh) 订阅信息推送方法、装置、计算机设备和可读存储介质
CN113726676B (zh) 基于Redis的API接口限流方法、装置、计算机设备及存储介质
CN111131410A (zh) 图像下载方法、计算机设备和存储介质
CN112132652B (zh) 订单信息获取方法、装置、计算机设备和存储介质
CN115297105B (zh) 文件传输方法、装置、计算机设备及存储介质
CN111372240B (zh) 图片上传方法、装置、计算机设备和存储介质
CN111897843A (zh) 物联网数据流转策略的配置方法、装置和计算机设备
CN115695472A (zh) 服务器故障响应处理方法、装置、计算机设备和存储介质
CN115297076A (zh) 离线消息拉取方法、装置、计算机设备及存储介质
CN110879757B (zh) 客户端异常运行时的重启方法、装置和计算机设备
CN111552612A (zh) Mssql监控管理方法、管理装置、系统和计算机设备
CN112347304A (zh) 设备监视画面历史回放方法、装置、计算机设备和存储介质
CN112015551A (zh) 协程池的管理方法及装置
CN114615137B (zh) 一种5g数据的传输方法及装置
CN110018942A (zh) 应用程序使用信息管理系统、方法、装置及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200619