CN116126785A - 文件的获取方法以及装置、系统、存储介质、电子设备 - Google Patents

文件的获取方法以及装置、系统、存储介质、电子设备 Download PDF

Info

Publication number
CN116126785A
CN116126785A CN202211729334.3A CN202211729334A CN116126785A CN 116126785 A CN116126785 A CN 116126785A CN 202211729334 A CN202211729334 A CN 202211729334A CN 116126785 A CN116126785 A CN 116126785A
Authority
CN
China
Prior art keywords
file
preset
files
storage
management node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211729334.3A
Other languages
English (en)
Inventor
肖祖飞
王庆宝
臧成刚
丁凤
杨应
郭永康
罗泽文
张智骞
王兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong South New Media Co ltd
Original Assignee
Guangdong South New Media Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong South New Media Co ltd filed Critical Guangdong South New Media Co ltd
Priority to CN202211729334.3A priority Critical patent/CN116126785A/zh
Publication of CN116126785A publication Critical patent/CN116126785A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/122File system administration, e.g. details of archiving or snapshots using management policies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/906Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本申请公开了一种文件的获取方法以及装置、系统、存储介质、电子设备,涉及互联网技术领域,主要目的在于改善现有由于将内容海报与节目进行绑定导致内容海报无法重复使用,增加了节目的制作成本,并且内容海报的制作周期较长,导致节目发布效率低下的技术问题。包括:接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。

Description

文件的获取方法以及装置、系统、存储介质、电子设备
技术领域
本申请涉及互联网技术领域,特别是涉及一种文件的获取方法以及装置、系统、存储介质、电子设备。
背景技术
随着互联网的发展,人们的生活娱乐越来越离不开互联网,为了提高自身的发展优势,许多新媒体公司选择与各大互联网平台进行合作,以将互联网平台的节目、电影等内容引入自身的IPTV专网内。为了便于用户对节目进行快速了解以提高用户体验感,需要为各个节目配置内容海报。
目前,现有的内容海报配置方法是为每个节目制作一个对应的内容海报,并且与节目进行绑定。然而,由于将内容海报与节目进行绑定导致内容海报无法重复使用,增加了节目的制作成本,并且内容海报的制作周期较长,导致节目发布效率低下。
发明内容
有鉴于此,本申请提供一种文件的获取方法以及装置、系统、存储介质、电子设备,主要目的在于改善现有由于将内容海报与节目进行绑定导致内容海报无法重复使用,增加了节目的制作成本,并且内容海报的制作周期较长,导致节目发布效率低下的技术问题。
依据本申请第一个方面,提供了一种文件的获取方法,包括:
接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
优选的,所述接收文件获取指令之前,所述方法还包括:
基于预设渠道预先采集多个文件;
将所述多个文件基于预设存储端口存储于所述预设文件数据库。
优选的,所述将所述多个文件基于预设存储端口存储于所述预设文件数据库之前,所述方法还包括:
向所述预设文件数据库的管理节点发送文件存储指令;
控制所述管理节点根据预设文件分类规则对所述多个文件进行分类处理,并确定各个所述文件的目标存储节点;
所述将所述多个文件基于预设存储端口存储于所述预设文件数据库,具体包括:
获取各个所述目标存储节点所对应的预设存储端口,并将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点。
优选的,所述管理节点包括主管理节点以及至少一个备用管理节点,所述方法还包括:
控制所述备用管理节点按照预设时间间隔定期向所述主管理节点发送询问信息;
若在预设回复时长内未收到所述主管理节点的回复信息,则控制启用所述备用管理节点作为更新后的主管理节点,以执行文件的分类存储任务。
优选的,所述存储节点包括主存储节点以及备用存储节点,所述将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点,具体包括:
将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点的主存储节点中,并同步存储于备用存储节点中。
优选的,所述预设渠道包括合作方渠道、第三方渠道以及自定义渠道中的至少一种。
依据本申请第二个方面,提供了一种文件的获取装置,包括:
接收模块,用于接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
查找模块,用于根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取模块,用于获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
优选的,所述接收模块之前,所述装置还包括:
采集模块,用于基于预设渠道预先采集多个文件;
存储模块,用于将所述多个文件基于预设存储端口存储于所述预设文件数据库。
优选的,所述存储模块之前,所述装置还包括:
发送模块,用于向所述预设文件数据库的管理节点发送文件存储指令;
确定模块,用于控制所述管理节点根据预设文件分类规则对所述多个文件进行分类处理,并确定各个所述文件的目标存储节点;
所述存储模块,具体用于:
获取各个所述目标存储节点所对应的预设存储端口,并将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点。
优选的,所述管理节点包括主管理节点以及至少一个备用管理节点,所述装置还包括:
询问模块,用于控制所述备用管理节点按照预设时间间隔定期向所述主管理节点发送询问信息;
更新模块,用于若在预设回复时长内未收到所述主管理节点的回复信息,则控制启用所述备用管理节点作为更新后的主管理节点,以执行文件的分类存储任务。
优选的,所述存储节点包括主存储节点以及备用存储节点,所述存储模块,具体用于:
将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点的主存储节点中,并同步存储于备用存储节点中。
优选的,所述预设渠道包括合作方渠道、第三方渠道以及自定义渠道中的至少一种。
依据本申请的第三个方面,提供了一种文件的获取系统,包括:
文件采集模块,用于基于预设渠道采集文件;
文件存储模块,用于对采集到的文件进行分类处理,并存储于预设文件数据库;
文件管理模块,用于对存储于所述预设文件数据库的文件进行管理;
文件服务模块,用于生成存储于所述预设文件数据库的文件的访问地址。
依据本申请的第四个方面,提供了一种存储介质,所述存储介质中存储有至少一条可执行指令,所述可执行指令使处理器执行如上述文件的获取方法对应的操作。
依据本申请的第五个方面,提供了一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一条可执行指令,所述可执行指令使所述处理器执行上述文件的获取方法对应的操作。
借由上述技术方案,本申请实施例提供的技术方案至少具有下列优点:
本申请提供了一种文件的获取方法以及装置、系统、存储介质、电子设备,首先接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;其次根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;再次获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。与现有技术相比,本申请实施例通过多种预设渠道进行文件采集,无需重新制作文件,缩短了节目的制作周期,提高了节目的发布效率;进一步将采集得到的文件按照预设规则存储于基于分布式文件存储集群建立的预设文件数据库中以供直接访问,无需进行一对一绑定,克服了文件无法重复使用的问题,节省了节目的制作成本;并且支持内容信息以及格式信息等多种方式的模糊搜索,提高了索引效率。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了本申请实施例提供的一种文件的获取方法流程图;
图2示出了本申请实施例提供的另一种文件的获取方法流程图;
图3示出了本申请实施例提供的一种文件的获取装置组成框图;
图4示出了本申请实施例提供的文件的获取系统的数据处理流程图;
图5示出了本申请实施例提供的一种终端的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本申请及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
本申请实施例可以应用于计算机系统/服务器,其可与众多其它通用或专用计算系统环境或配置一起操作。适于与计算机系统/服务器一起使用的众所周知的计算系统、环境和/或配置的例子包括但不限于:个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统﹑大型计算机系统和包括上述任何系统的分布式云计算技术环境,等等。
计算机系统/服务器可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常,程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等,它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施,分布式云计算环境中,任务是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中,程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。
本申请实施例提供了一种文件的获取方法,如图1所示,该方法包括:
101、接收文件获取指令。
其中,文件获取指令携带待获取文件的内容信息以及格式信息中至少一种。本申请实施例中,当前执行端可以是新媒体的服务端,例如,IPTV专网服务端等;文件用于表征可以作为IPTV专网中各个节目、电影等内容的内容海报的图片等;内容信息用于表征对图片内容的描述信息,例如,图片中所包含的角色名称(如,影视剧中男女主名字等),或者图片中所展示的场景(如,草原动物世界等);格式信息用于表征对图片的格式、尺寸等的描述信息,例如,JPG格式的图片,或1080P的图片等。
需要说明的是,在对文件进行获取时,可以仅输入内容信息以及格式信息中的一种,以圈定更多的文件以供筛选;也可以两种均输入,以缩小搜索范围,更加快速的获取到目标文件,本申请实施例中不做具体限定。
102、根据内容信息,和/或格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件。
其中,预设文件数据库是基于分布式文件存储集群建立的;本申请实施例中,基于分布式文件存储集群建立的预设文件数据库包括管理节点以及存储节点,其中,管理节点用于对文件进行分类,并根据类别将其存储于不同的存储节点中;存储节点用于接收管理节点发送的文件数据并执行存储任务;管理节点以及存储节点均用于表征集群服务器。本申请实施例中,根据内容信息,和/或格式信息到对应的存储节点中进行查找,具体的,可以在文件存储时,按照预设分类索引规则(如,男女主名字、图片尺寸等)生成数据库索引(如,根据文件名编码)以提高索引效率。
需要说明的是,基于分布式文件存储集群建立的预设文件数据库可以通过增加存储节点的数量以实现海量文件的存储。
103、获取相匹配的文件所对应的访问地址,并应用于专网节目中。
本申请实施例中,通过将携带访问地址的文件用作内容海报,以支持海报访问服务,当用户对海报进行点击操作时,可以直接对海报文件进行访问,无需注出绑定对应的海报文件,克服了文件无法重复使用的问题,节省了节目的制作成本。
与现有技术相比,本申请实施例通过多种预设渠道进行文件采集,无需重新制作文件,缩短了节目的制作周期,提高了节目的发布效率;进一步将采集得到的文件按照预设规则存储于基于分布式文件存储集群建立的预设文件数据库中以供直接访问,无需进行一对一绑定,克服了文件无法重复使用的问题,节省了节目的制作成本;并且支持内容信息以及格式信息等多种方式的模糊搜索,提高了索引效率。
本申请实施例提供了另一种文件的获取方法,如图2所示,该方法包括:
201、基于预设渠道预先采集多个文件。
其中,预设渠道包括合作方渠道、第三方渠道以及自定义渠道中的至少一种。本申请实施例中,合作方渠道用于表征当前执行端的合作方,即节目内容的引进渠道,例如,腾讯、优酷、爱奇艺等互联网平台,可以基于与当前执行端之间的协议,通过当前执行端提供的文件注入接口注入文件;第三方渠道用于表征互联网中已经存在的文件资源,可选的,可以基于爬虫程序爬取媒体、明星类站点中的文件资源,具体的,可以通过确定目标爬虫网站以及地址,再基于完成测试的爬虫程序进行文件资源的爬取;自定义渠道用于表征可以进行自行制作文件的渠道,用户可以通过自定义渠道将自制的文件进行上传。
202、向预设文件数据库的管理节点发送文件存储指令。
本申请实施例中,预设文件数据库通常包括用于对文件进行分类的管理节点、用于接收管理节点发送的文件数据并执行存储任务的存储节点,以及用于下达存储指令的节点,即当前执行端。
203、控制管理节点根据预设文件分类规则对多个文件进行分类处理,并确定各个文件的目标存储节点。
其中,预设文件分类规则可以按照文件内容进行分类,例如,男女主名字;还可以按照文件格式进行分类,例如,图片尺寸。本申请实施例中,当管理节点接收到文件存储指令后,可以根据预设的文件分类规则将采集到的多个文件进行分类处理,从而确定每个文件预计要存入的目标存储节点。
优选的,为了避免由于管理节点故障而导致的无法进行文件存储的情况,本申请实施例中,管理节点包括主管理节点以及至少一个备用管理节点,作为一种优选的实施方式,控制备用管理节点按照预设时间间隔定期向主管理节点发送询问信息;若在预设回复时长内未收到主管理节点的回复信息,则控制启用备用管理节点作为更新后的主管理节点,以执行文件的分类存储任务。
具体的,可以将管理节点配置为“一主多从”的集群形式,其中,包括一个主管理节点以及至少一个备用管理节点,备用管理节点每隔一段时间向主管理节点发送询问信息,若主管理节点反馈回复信息,则说明主管理节点状态正常;若主管理节点在预设回复时长内为反馈回复信息,则说明主管理节点宕机,此时,使用备用管理节点替代原有的主管理节点作为更新后的主管理节点,以继续工作。另外,基于管理节点进行文件的分配存储可以使得每个存储节点的负载均衡。
204、将多个文件基于预设存储端口存储于预设文件数据库。
本申请实施例中,当确定目标存储节点后,管理节点会返回该目标存储节点的地址以及端口到当前执行端,进一步基于目标存储节点的地址以及端口将分类后的文件存储到对应的目标存储节点。
相应的,实施例步骤204具体包括:获取各个目标存储节点所对应的预设存储端口,并将已完成分类处理的多个文件分别通过各个预设存储端口存储于对应的存储节点。
优选的,为了避免由于存储节点故障而导致的无法进行文件存储的情况,本申请实施例中,存储节点包括主存储节点以及备用存储节点,作为一种可选的实施方式,实施例步骤204具体包括:将已完成分类处理的多个文件分别通过各个预设存储端口存储于对应的存储节点的主存储节点中,并同步存储于备用存储节点中。
具体的,可以将配置为一个主存储节点以及一个备用存储节点的组合,存储时向主存储节点中存储,主存储节点再将文件同步到备用存储节点中进行备份保存,通过冗余存储的方式防止文件丢失。另外,主存储节点以及备用存储节点之间也可以通过设置心跳检测机制,以防止主存储节点宕机,具体实现方式同前述管理节点的实现方式,在此不再赘述。需要说明的是,由于存储节点数量是可以水平无限扩展的,因此可以通过增加存储节点的数量以实现海量文件的存储。
本申请提供了一种文件的获取方法,首先接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;其次根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;再次获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。与现有技术相比,本申请实施例通过多种预设渠道进行文件采集,无需重新制作文件,缩短了节目的制作周期,提高了节目的发布效率;进一步将采集得到的文件按照预设规则存储于基于分布式文件存储集群建立的预设文件数据库中以供直接访问,无需进行一对一绑定,克服了文件无法重复使用的问题,节省了节目的制作成本;并且支持内容信息以及格式信息等多种方式的模糊搜索,提高了索引效率。
进一步的,作为对上述图1所示方法的实现,本申请实施例提供了一种文件的获取装置,如图3所示,该装置包括:
接收模块31,查找模块32,获取模块33。
接收模块31,用于接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
查找模块32,用于根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取模块33,用于获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
优选的,所述接收模块之前,所述装置还包括:
采集模块,用于基于预设渠道预先采集多个文件;
存储模块,用于将所述多个文件基于预设存储端口存储于所述预设文件数据库。
优选的,所述存储模块之前,所述装置还包括:
发送模块,用于向所述预设文件数据库的管理节点发送文件存储指令;
确定模块,用于控制所述管理节点根据预设文件分类规则对所述多个文件进行分类处理,并确定各个所述文件的目标存储节点;
所述存储模块,具体用于:
获取各个所述目标存储节点所对应的预设存储端口,并将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点。
优选的,所述管理节点包括主管理节点以及至少一个备用管理节点,所述装置还包括:
询问模块,用于控制所述备用管理节点按照预设时间间隔定期向所述主管理节点发送询问信息;
更新模块,用于若在预设回复时长内未收到所述主管理节点的回复信息,则控制启用所述备用管理节点作为更新后的主管理节点,以执行文件的分类存储任务。
优选的,所述存储节点包括主存储节点以及备用存储节点,所述存储模块,具体用于:
将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点的主存储节点中,并同步存储于备用存储节点中。
优选的,所述预设渠道包括合作方渠道、第三方渠道以及自定义渠道中的至少一种。
本申请提供了一种文件的获取装置,首先接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;其次根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;再次获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。与现有技术相比,本申请实施例通过多种预设渠道进行文件采集,无需重新制作文件,缩短了节目的制作周期,提高了节目的发布效率;进一步将采集得到的文件按照预设规则存储于基于分布式文件存储集群建立的预设文件数据库中以供直接访问,无需进行一对一绑定,克服了文件无法重复使用的问题,节省了节目的制作成本;并且支持内容信息以及格式信息等多种方式的模糊搜索,提高了索引效率。
进一步的,作为对上述图1所示方法的实现,本申请实施例提供了一种文件的获取系统,该系统包括:
文件采集模块,用于基于预设渠道采集文件;
文件存储模块,用于对采集到的文件进行分类处理,并存储于预设文件数据库;
文件管理模块,用于对存储于所述预设文件数据库的文件进行管理;
文件服务模块,用于生成存储于所述预设文件数据库的文件的访问地址。
在具体的应用场景中,文件的获取系统的数据处理流程,如图4所示,其中,可以通过文件采集模块从多种渠道(例如,腾讯、优酷等合作方渠道,第三方网站网址的第三方渠道,第三方上传系统的自定义渠道)中获取海报数据;再通过文件存储模块将获取到的海报数据经过分类处理存储于分布式数据库中,并生成数据库索引;进一步通过文件管理模块执行海报的汇聚上线、检索、展示、对比、发布审核、审批通过、对公网发布海报Url服务、日志、优先级设置、分析图表、报表等管理任务;最后,基于文件服务模块提供海报内容的统一在线访问服务,即将审核发布后的海报提供专网可直接访问的url地址。
本申请提供了一种文件的获取系统,首先接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;其次根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;再次获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。与现有技术相比,本申请实施例通过多种预设渠道进行文件采集,无需重新制作文件,缩短了节目的制作周期,提高了节目的发布效率;进一步将采集得到的文件按照预设规则存储于基于分布式文件存储集群建立的预设文件数据库中以供直接访问,无需进行一对一绑定,克服了文件无法重复使用的问题,节省了节目的制作成本;并且支持内容信息以及格式信息等多种方式的模糊搜索,提高了索引效率。
根据本申请一个实施例提供了一种存储介质,所述存储介质存储有至少一条可执行指令,该计算机可执行指令可执行上述任意方法实施例中的文件的获取方法。
基于这样的理解,本申请的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施场景所述的方法。
图5示出了根据本申请一个实施例提供的一种终端的结构示意图,本申请具体实施例并不对终端的具体实现做限定。
如图5所示,该计算机设备可以包括:处理器(processor)402、通信接口(Communications Interface)404、存储器(memory)406、以及通信总线408。
其中:处理器402、通信接口404、以及存储器406通过通信总线408完成相互间的通信。
通信接口404,用于与其它设备比如客户端或其它服务器等的网元通信。
处理器402,用于执行程序410,具体可以执行上述文件的获取方法实施例中的相关步骤。
具体地,程序410可以包括程序代码,该程序代码包括计算机操作指令。
处理器402可能是中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。计算机设备包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个ASIC。
存储器406,用于存放程序410。存储器406可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
程序410具体可以用于使得处理器402执行以下操作:
接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
存储介质中还可以包括操作系统、网络通信模块。操作系统是管理上述文件的获取的实体设备硬件和软件资源的程序,支持信息处理程序以及其它软件和/或程序的运行。网络通信模块用于实现存储介质内部各组件之间的通信,以及与信息处理实体设备中其它硬件和软件之间通信。
本说明书中各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言,由于其与方法实施例基本对应,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
可能以许多方式来实现本申请的方法和系统。例如,可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本申请的方法和系统。用于所述方法的步骤的上述顺序仅是为了进行说明,本申请的方法的步骤不限于以上具体描述的顺序,除非以其它方式特别说明。此外,在一些实施例中,还可将本申请实施为记录在记录介质中的程序,这些程序包括用于实现根据本申请的方法的机器可读指令。因而,本申请还覆盖存储用于执行根据本申请的方法的程序的记录介质。
显然,本领域的技术人员应该明白,上述的本申请的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本申请不限制于任何特定的硬件和软件结合。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包括在本申请的保护范围之内。

Claims (10)

1.一种文件的获取方法,其特征在于,包括:
接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
2.根据权利要求1所述的方法,其特征在于,所述接收文件获取指令之前,所述方法还包括:
基于预设渠道预先采集多个文件;
将所述多个文件基于预设存储端口存储于所述预设文件数据库。
3.根据权利要求2所述的方法,其特征在于,所述将所述多个文件基于预设存储端口存储于所述预设文件数据库之前,所述方法还包括:
向所述预设文件数据库的管理节点发送文件存储指令;
控制所述管理节点根据预设文件分类规则对所述多个文件进行分类处理,并确定各个所述文件的目标存储节点;
所述将所述多个文件基于预设存储端口存储于所述预设文件数据库,具体包括:
获取各个所述目标存储节点所对应的预设存储端口,并将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点。
4.根据权利要求1-3任一所述的方法,其特征在于,所述管理节点包括主管理节点以及至少一个备用管理节点,所述方法还包括:
控制所述备用管理节点按照预设时间间隔定期向所述主管理节点发送询问信息;
若在预设回复时长内未收到所述主管理节点的回复信息,则控制启用所述备用管理节点作为更新后的主管理节点,以执行文件的分类存储任务。
5.根据权利要求1-3任一所述的方法,其特征在于,所述存储节点包括主存储节点以及备用存储节点,所述将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点,具体包括:
将已完成分类处理的多个文件分别通过各个所述预设存储端口存储于对应的存储节点的主存储节点中,并同步存储于备用存储节点中。
6.根据权利要求2所述的方法,其特征在于,所述预设渠道包括合作方渠道、第三方渠道以及自定义渠道中的至少一种。
7.一种文件的获取装置,其特征在于,包括:
接收模块,用于接收文件获取指令,所述文件获取指令携带待获取文件的内容信息以及格式信息中至少一种;
查找模块,用于根据所述内容信息,和/或所述格式信息遍历预设文件数据库中所存储的各个文件,查找相匹配的文件,所述预设文件数据库是基于分布式文件存储集群建立的;
获取模块,用于获取所述相匹配的文件所对应的访问地址,并应用于专网节目中。
8.一种文件的获取系统,其特征在于,包括:
文件采集模块,用于基于预设渠道采集文件;
文件存储模块,用于对采集到的文件进行分类处理,并存储于预设文件数据库;
文件管理模块,用于对存储于所述预设文件数据库的文件进行管理;
文件服务模块,用于生成存储于所述预设文件数据库的文件的访问地址。
9.一种存储介质,所述存储介质中存储有至少一条可执行指令,其特征在于,所述可执行指令使处理器执行如权利要求1-6中任一项所述的文件的获取方法对应的操作。
10.一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一条可执行指令,其特征在于,所述可执行指令使所述处理器执行如权利要求1-6中任一项所述的文件的获取方法对应的操作。
CN202211729334.3A 2022-12-30 2022-12-30 文件的获取方法以及装置、系统、存储介质、电子设备 Pending CN116126785A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211729334.3A CN116126785A (zh) 2022-12-30 2022-12-30 文件的获取方法以及装置、系统、存储介质、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211729334.3A CN116126785A (zh) 2022-12-30 2022-12-30 文件的获取方法以及装置、系统、存储介质、电子设备

Publications (1)

Publication Number Publication Date
CN116126785A true CN116126785A (zh) 2023-05-16

Family

ID=86304001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211729334.3A Pending CN116126785A (zh) 2022-12-30 2022-12-30 文件的获取方法以及装置、系统、存储介质、电子设备

Country Status (1)

Country Link
CN (1) CN116126785A (zh)

Similar Documents

Publication Publication Date Title
CN105897946B (zh) 一种访问地址的获取方法及系统
CN107861686B (zh) 文件存储方法、服务端和计算机可读存储介质
CN111736775B (zh) 多源存储方法、装置、计算机系统及存储介质
US20150237113A1 (en) Method and system for file transmission
CA2901677C (en) Predictive storage service
US20200213385A1 (en) Offline mobile data storage system and method
CN108683668B (zh) 内容分发网络中的资源校验方法、装置、存储介质及设备
MX2007015188A (es) Infraestructura de manejo de configuracion de granja de servidor extensible y que responde automaticamente.
CN102355426A (zh) 实现离线文件传输的方法和系统
CN105472045A (zh) 数据库迁移的方法和装置
CN108093015B (zh) 文件传输系统
CN108733821A (zh) 一种监控视频截图的分发与展示方法及系统
US20220284042A1 (en) Replication of parent record having linked child records that were previously replicated asynchronously across data storage regions
CN106789353A (zh) 在客户端与服务端之间定位问题的方法和系统
CN105978948A (zh) 一种云服务的方法和系统
CN113486095A (zh) 一种民航空管跨网安全数据交换管理平台
CN115510163A (zh) 镜像文件的同步方法、装置、存储介质及电子设备
CN111193661B (zh) 一种基于企业通信渠道融合系统的管理方法及装置
US10601749B1 (en) Trends in a messaging platform
CN116126785A (zh) 文件的获取方法以及装置、系统、存储介质、电子设备
US11599294B2 (en) Media storage for online meetings in edge network storage
US11604810B2 (en) Asynchronous replication of linked parent and child records across data storage regions
CN113407339A (zh) 资源请求反馈方法、装置、可读存储介质及电子设备
US20160156693A1 (en) System and Method for the Management of Content on a Website (URL) through a Device where all Content Originates from a Secured Content Management System
CN114402577A (zh) 单页应用的缓存能力

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination