CN112565796A - 一种视频内容去中心化存取方法和系统 - Google Patents

一种视频内容去中心化存取方法和系统 Download PDF

Info

Publication number
CN112565796A
CN112565796A CN201910913316.2A CN201910913316A CN112565796A CN 112565796 A CN112565796 A CN 112565796A CN 201910913316 A CN201910913316 A CN 201910913316A CN 112565796 A CN112565796 A CN 112565796A
Authority
CN
China
Prior art keywords
node
video content
super
super node
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910913316.2A
Other languages
English (en)
Inventor
李会鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hard Core Jushi Technology Co ltd
Original Assignee
Beijing Hard Core Jushi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hard Core Jushi Technology Co ltd filed Critical Beijing Hard Core Jushi Technology Co ltd
Priority to CN201910913316.2A priority Critical patent/CN112565796A/zh
Publication of CN112565796A publication Critical patent/CN112565796A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2228—Indexing structures
    • G06F16/2255—Hash tables
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23103—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion using load balancing strategies, e.g. by placing or distributing content on different disks, different memories or different servers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations

Abstract

本申请公开了一种视频内容去中心化存取方法和系统。所述方法包括：一普通节点将视频内容的发布请求转发至一超级节点；所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。去中心化的网络结构中所有的节点级别和地位是趋同的，彼此保持独立和自由。一个节点的退出和崩溃不会对其他节点产生任何影响，从而增强了整个网络的抗风险性，避免了中心化存储带来的单点瓶颈，提升了整个系统的服务质量。

Description

一种视频内容去中心化存取方法和系统
技术领域
本申请涉及信息处理技术，特别是涉及一种视频内容去中心化存取方法和系统。
背景技术
随着移动硬件的升级和移动互联网的快速发展，用户观看视频成为广泛的大众化需求。视频这种流媒体介质不同于传统的图片、文本等信息数据，他数据量更大，传输和存储耗费更大的带宽和存储资源，相应的也加剧提高了企业的整体带宽和存储的运营成本。
目前对于视频内容的存储分发的行业现状如下：
1、通过和内容分发网络(CDN，Content Delivery Network)运营商合作进行视频数据的存储分发，图1显示CDN示意图。
2、采用中心集群化P2P(Peer To Peer，个人对个人、伙伴对伙伴)解决方案，图2显示P2P网络示意图。
对于方式1，CDN的技术架构是分布式的数据存储和分发架构，总体没有脱离中心服务器的支持，即所有用户端视频数据的获得完全依赖于CDN边缘节点服务器的转发。这样消耗大量的服务器带宽和存储资源，企业合作运营成本高居不下。同时，这种方案同时带来其他成本的开销和风险。基本上企业要和多家CDN厂商合作来降低单点运营商故障造成服务不可用导致的风险，这样成本又增加了一层。同时，多CDN运营合作造成运维效率的低下，部分影响了用户端产品体验。
对于方式2，视频企业为了降低运营成本采用自研的P2P系统网络。这个网络的核心是一部分数据直接从用户端来获取数据，只有一小部分通过服务器转发获取。这样降低了企业的运营成本。但是，视频企业通用的P2P网络解决方案是中心索引服务器+终端用户(Peer)构成。由于中心服务器的存在导致整个集群存在很多隐患：
1)、如果中心服务器宕机崩溃，整个集群便瘫痪。无法提供用户服务；
2)、索引服务是按照用户请求内容的名字进行hash，并把请求离散到固定指定的主机。如果该主机崩溃或者宕机则无法对我提供服务；
3)、全局hash表有数据传输过程中丢包的风险；
4)、集群一旦遭受DDos攻击冗灾、备份复杂。
发明内容
本申请的目的在于克服上述问题或者至少部分地解决或缓减解决上述问题。
根据本申请的一个方面，提供了一种视频内容去中心化存取方法，所述方法包括：
一普通节点将视频内容的发布请求转发至一超级节点；
所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
优选地，所述的方法还包括：
所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
优选地，所述的方法还包括：
所述普通节点向一超级节点发起内容查询请求时，所述内容查询请求包括：查询文件名和/或查询文件块信息；
所述超级节点根据所述内容查询请求中的查询文件名和/或查询文件块信息遍历所述超级节点维护的hash表或者所述超级节点维护的hash表和备份的hash表；
如果所述超级节点搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回成功消息。
优选地，所述的方法还包括：
如果所述超级节点未搜索到所述内容查询请求对应的视频内容，则所述超级节点向下一个超级节点再次发起内容查询请求，由下一个节点搜索所述内容查询请求对应的视频内容，如果搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回成功消息；如果直到遍历完成所有超级节点的hash表仍未搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回失败消息。
优选地，所述的方法还包括：
查找到所述内容查询请求对应的视频内容的超级节点确定所述视频内容对应的主机地址和主机端口信息，并将所述主机地址和主机端口信息发送至普通节点；
所述普通节点向所述主机地址和主机端口发起建立连接请求，并建立数据通道，通过所述通道进行视频内容数据传输。
优选地，所述的方法还包括：所述超级节点根据预设时间内接收到查询请求的次数确定是否对所述查询请求对应的视频内容进行缓存。
优选地，一普通节点将视频内容的发布请求转发至一超级节点包括：
负载均衡服务器接收所述普通节点的视频内容的发布请求时，根据超级节点集群负载均衡策略确定一个超级节点，将所述视频内容的发布请求转发至确定的所述超级节点；或者，
负载均衡服务器预先按照负载均衡策略将所述普通节点映射到一个超级节点，负载均衡服务器接收所述普通节点的视频内容的发布请求时，将所述视频内容的发布请求转发至对应的所述超级节点。
优选地，所述方法之前还包括：
普通节点所述去中心化的网络结构发起注册请求，获取所述去中心化的网络结构的信息列表，所述信息列表包括全部超级节点的网络地址和端口信息。
根据本申请的另一个方面，还提供了一种视频内容去中心化存取系统，包括超级节点和普通节点，
一普通节点将视频内容的发布请求转发至一超级节点；
所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
优选地，所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
本申请的视频内容去中心化存取方法和系统，抛弃了传统的中心化的设计思想，实现去中心化的网络结构。去中心化的网络结构中所有的节点级别和地位是趋同的，彼此保持独立和自由。一个节点的退出和崩溃不会对其他节点产生任何影响，从而增强了整个网络的抗风险性，避免了中心化存储带来的单点瓶颈，提升了整个系统的服务质量。
根据下文结合附图对本申请的具体实施例的详细描述，本领域技术人员将会更加明了本申请的上述以及其他目的、优点和特征。
附图说明
后文将参照附图以示例性而非限制性的方式详细描述本申请的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解，这些附图未必是按比例绘制的。附图中：
图1是相关技术中内容分发网络的示意图；
图2是相关技术中P2P网络的示意图；
图3是根据本申请的视频内容去中心化存取方法的流程图；
图4是根据本申请的去中心化的网络结构的示意性结构框图；
图5是根据本申请的视频内容发布的示意性流程图；
图6是根据本申请的视频内容查询的示意性流程图；
图7是根据本申请的超级节点集群负载均衡策略的示意性策略图；
图8是根据本申请的普通节点注册的示意性流程图；
图9是根据本申请一个实施例的一种计算设备的示意性结构框图；
图10是根据本申请一个实施例的一种计算机可读存储介质的示意性结构框图。
具体实施方式
为使本发明的发明目的、技术方案和有益效果更加清楚明了，下面结合附图对本发明的实施例进行说明，需要说明的是，在不冲突的情况下，本申请中的实施例和实施例中的特征可以相互任意组合。
本发明实施例提供一种视频内容去中心化存取方法，图3示意性地给出了视频内容去中心化存取方法的流程，所述方法可以包括S101-S103：
S101、一普通节点将视频内容的发布请求转发至一超级节点；
S102、所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
S103、所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
本发明实施例基于去中心化的网络结构实现，图4示意性的给出了去中心化的网络结构的示意性结构图，所述去中心化的网络结构包括超级节点和普通节点，每个超级节点与一个或者多个普通节点交互视频内容，超级节点一般是由官方发布架设的服务器资源，具备公有网络地址和大带宽、大内存、大存储的物理主机。本发明实施例中的普通节点：是构建P2P网络的重要组成单元，可以是传统意义上的用户节点。用户通过普通节点可针对感兴趣的内容发起查询请求，并最终获取内容。
图5示意性的给出了视频内容发布的示意性流程图，本发明实施例在视频内容的发布过程中，普通节点负责将用户的发布请求转发到某个超级节点，每一个超级节点存储对应的hash表，hash表中维护内容索引逻辑信息，所有超级节点上存储的索引表加在一起组成全网完整的hash表。
超级节点不存储视频内容，只存储内容索引逻辑信息的hash表。
其中，每个超级节点的存储分布式hash表(DHT-Distributed Hash Table)对于每个普通节点上报的视频内容的数据结构如下：
Figure BDA0002215339880000051
本发明实施例中，所述的方法，还包括：
所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
本发明实施例中，普通节点退出时只是上报退出请求，超级节点在hash表中不做更新处理。
本发明实施例中，所述的方法，还包括：
所述普通节点向一超级节点发起内容查询请求时，所述内容查询请求包括：查询文件名和/或查询文件块信息；
所述超级节点根据所述内容查询请求中的查询文件名和/或查询文件块信息遍历所述超级节点维护的hash表或者所述超级节点维护的hash表和备份的hash表；
如果所述超级节点搜索到所述查询请求对应的视频内容，则向所述普通节点返回成功消息。
本发明实施例中，所述的方法，还包括：
如果所述超级节点未搜索到所述查询请求对应的视频内容，则所述超级节点向下一个超级节点再次发起查询请求，由下一个节点搜索所述查询请求对应的视频内容，如果搜索到所述查询请求对应的视频内容，则向所述普通节点返回成功消息；如果直到遍历完成所有超级节点的hash表仍未搜索到所述查询请求对应的视频内容，则向所述普通节点返回失败消息。
本发明实施例中，所述的方法，还包括：
查找到所述内容查询请求对应的视频内容的超级节点确定所述视频内容对应的主机地址和主机端口信息，并将所述主机地址和主机端口信息发送至普通节点；
所述普通节点向所述主机地址和主机端口发起建立连接请求，并建立数据通道，通过所述通道进行视频内容数据传输。
图6示意性的给出了视频内容查询的示意性流程图，在接收到用户的查询请求时，普通节点首先向一个超级节点发起查询请求，这个超级节点根据请求遍历自己本地维护的hash表，如果有内容则向用户返回成功，否则它会向下一个超级节点再次发起请求，直到遍历完成所有超级节点列表为止。
由于不是每个超级节点都会存储全部超级节点的hash表。例如：一共有5个超级节点，sn1/sn2/sn3/sn4/sn5；sn1上的hash表会随机备份在sn3/sn2上，其他同理类推，最终，查询请求可能会在超级间传递，有几个超级节点最多发起几次查询请求，为了提升查询效率，可做随机查询，即普通节点向随机的一个超级节点发起查询请求。
本发明实施例中，当某一个超级节点遍历维护的hash时。能够获得所获取内容所在的地址信息，包括主机IP和主机端口及内容。
获取方(A)和内容存储方(B)首先尝试建立UDP直连，创建数据传输的通道进行数据传输，获取内容。
获取数据的详细流程如下：
1、普通节点向超级节点发起内容查询请求；
2、超级节点根据请求，返回有该数据的所有用户的hash表；
3、普通节点检索返回的hash表，获取所有node的IP和端口；
4、普通节点向IP和端口发起建立udp连接请求，建立数据通道。使用数据通道进行数据传输。
本发明实施例中，所述的方法，还包括：所述超级节点根据预设时间内接收到查询请求的次数确定是否对所述查询请求对应的视频内容进行缓存。
本发明实施例中，当一个普通节点加入去中心化的网络并开始查询内容时，为了提升获取内容的速度，首先普通节点会选择从超级节点来要数据，所以，超级节点会缓存一部分高频的热点内容进行存储，满足普通节点获取数据的需求。具体的超级节点缓存热度的方式可以如下：
统计24小时内被请求的次数，被请求的次数越高说明内容的热度越高，缓存的意义越大。超级节点每24小时重新计算内容的热度，并根据热度值从高到低排序。把低于设定热度阀值的内容从缓存中清除，释放存储空间。释放的空间用来存储新的内容。
本发明实施例中，步骤S101中，一普通节点将视频内容的发布请求转发至一超级节点包括：
负载均衡服务器接收所述普通节点的视频内容的发布请求时，根据超级节点集群负载均衡策略确定一个超级节点，将所述视频内容的发布请求转发至确定的所述超级节点；或者，
负载均衡服务器预先按照负载均衡策略将所述普通节点映射到一个超级节点，负载均衡服务器接收所述普通节点的视频内容的发布请求时，将所述视频内容的发布请求转发至对应的所述超级节点。
本发明实施例中，超级节点集群负载均衡策略：
普通节点启动后需要连接某个超级节点，需要一定的策略和算法为其选择一个超级节点。选择超级节点的算法如下：
每个普通节点的基础信息包括：node-id/endpoint/port；
hash-Value＝hash(node-id)；
super-Node-ID＝hash-Value％ncound；
其中，ncound是超级节点的数量，最后根据super-Node-ID将普通节点负载到对一个的超级节点上。
图7示意性的超级节点集群负载均衡策略的示意性策略图，
本发明实施例中，所述方法之前还包括：
普通节点述去中心化的网络结构发起注册请求，获取所述去中心化的网络结构的信息列表，所述信息列表包括全部超级节点的网络地址和端口信息。
图8示意性的给出了普通节点注册的示意性流程图，本发明实施例在普通节点注册时，会向所述去中心化的网络结构发起注册请求，获取全部超级节点的网络地址和端口信息，由负载均衡服务器根据负载均衡策略将所述普通节点映射到一个超级节点，然后根据映射的超级节点的网络地址和端口信息，会这个超级节点发起注册请求，注册的目的是将普通节点本地已经保存的内容进行上报，形成新的hash表供其他节点查询和获取内容。每个普通节点在注册启动时会获取全网的所有超级节点的信息列表，包括全部超级节点的网络地址和端口信息等。
注册请求首先经过负载均衡策略，负载均衡策略是根据普通节点的请求上报的MAC地址进行离散hash，根据hash-value负载到指定的超级节点。然后上报本地保存内容信息到超级节点。普通节点只上报获取数据块的索引逻辑数据，并不上报实际的文件数据。超级节点收到后更新本地hash表，并将本地hash表同步备份到其他的超级节点。
本发明实施例普通节点向超级节点注册的目的在于：1、将普通节点本地已经存储的视频内容信息上报到超级节点。意味着超级节点会通过普通节点的注册获知普通节点本地有哪些内容(假设普通节点ID为：1234，本地的内容分块为A)。当其他节点向所述超级节点查询想要获取内容A，那么超级节点会把普通节点的ID，及对应外网端口、IP告诉给对方。对方会通过IP、外网端口直接和所述普通节点建立链接进行内容A的获取，从而完成点到点的数据通信和内容分发。
本发明实施例中，普通节点内部在获取视频文件分块的时候会有一个超时处理，为了提升用户的观影体验，降低等待的延时，如果获取文件块超时，普通节点会转而请求CDN来获取数据。获取数据成功后将本地的数据信息上传至超级节点更新hash表。
由于超级节点在某种条件下是有瓶颈限制的，如果需要有海量数据进行存储，超级节点的资源可能被耗尽。这种情况下为了提升普通节点的访问速度，引入了第三方CDN的策略。将第三方CDN边缘节点作为超级节点的角色，将服务的访问压力引导到第三方的服务节点上。
本发明实施例中超级节点的Hash表采用分布式集群模式进行分块存储，避免了中心化存储带来的单点瓶颈，提升了整个系统的服务质量；每个超级节点的Hash表在整个去中心化的网络结构均有多个备份，并定期做更新，解决了由于数据丢失造成系统空洞的情况；提升了索引查询的效率；本发明实施例中的超级节点不仅负责存储离散Hash表的分布式存储，同时作为内容的存储源站进行使用，提高了内容查询、获取的效率；本发明实施例的超级节点在受到攻击时，因为有备份，因此整个去中心化的网络不会瘫痪，也不影响对外服务，会增强系统的抗攻击能力提升稳定性，并有效起到攻击的防护和清洗。从而提升系统整体抗攻击能力。
如图4所以，本发明实施例还提供一种视频内容去中心化存取系统，包括超级节点和普通节点，
一普通节点将视频内容的发布请求转发至一超级节点；
所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
本发明实施例中，所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
本发明实施例中，所述普通节点向一超级节点发起查询请求时，所述查询请求包括：查询文件名和/或查询文件块信息；
所述超级节点根据所述查询请求中的查询文件名和/或查询文件块信息遍历所述超级节点维护的hash表或者所述超级节点维护的hash表和备份的hash表；
如果所述超级节点搜索到所述查询请求对应的视频内容，则向所述普通节点返回成功消息。
本申请实施例还提供了一种计算设备，参照图9，该计算设备包括存储器1120、处理器1110和存储在所述存储器1120内并能由所述处理器1110运行的计算机程序，该计算机程序存储于存储器1120中的用于程序代码的空间1130，该计算机程序在由处理器1110执行时实现用于执行任一项根据本发明的方法步骤1131。
本申请实施例还提供了一种计算机可读存储介质。参照图10，该计算机可读存储介质包括用于程序代码的存储单元，该存储单元设置有用于执行根据本发明的方法步骤的程序1131′，该程序被处理器执行。
本申请实施例还提供了一种包含指令的计算机程序产品。当该计算机程序产品在计算机上运行时，使得计算机执行根据本发明的方法步骤。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、获取其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令处理器完成，所述的程序可以存储于计算机可读存储介质中，所述存储介质是非短暂性(英文：non-transitory)介质，例如随机存取存储器，只读存储器，快闪存储器，硬盘，固态硬盘，磁带(英文：magnetic tape)，软盘(英文：floppy disk)，光盘(英文：optical disc)及其任意组合。
以上所述，仅为本申请较佳的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应该以权利要求的保护范围为准。

Claims (10)

1.一种视频内容去中心化存取方法，所述方法包括：
一普通节点将视频内容的发布请求转发至一超级节点；
所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
2.根据权利要求1所述的方法，其特征在于，还包括：
所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
3.根据权利要求1所述的方法，其特征在于，还包括：
所述普通节点向一超级节点发起内容查询请求时，所述内容查询请求包括：查询文件名和/或查询文件块信息；
所述超级节点根据所述内容查询请求中的查询文件名和/或查询文件块信息遍历所述超级节点维护的hash表或者所述超级节点维护的hash表和备份的hash表；
如果所述超级节点搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回成功消息。
4.根据权利要求3所述的方法，其特征在于，还包括：
如果所述超级节点未搜索到所述内容查询请求对应的视频内容，则所述超级节点向下一个超级节点再次发起内容查询请求，由下一个节点搜索所述内容查询请求对应的视频内容，如果搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回成功消息；如果直到遍历完成所有超级节点的hash表仍未搜索到所述内容查询请求对应的视频内容，则向所述普通节点返回失败消息。
5.根据权利要求3或4所述的方法，其特征在于，还包括：
查找到所述内容查询请求对应的视频内容的超级节点确定所述视频内容对应的主机地址和主机端口信息，并将所述主机地址和主机端口信息发送至普通节点；
所述普通节点向所述主机地址和主机端口发起建立连接请求，并建立数据通道，通过所述通道进行视频内容数据传输。
6.根据权利要求3所述的方法，其特征在于，还包括：所述超级节点根据预设时间内接收到查询请求的次数确定是否对所述查询请求对应的视频内容进行缓存。
7.根据权利要求1-4中任一项所述的方法，其特征在于，一普通节点将视频内容的发布请求转发至一超级节点包括：
负载均衡服务器接收所述普通节点的视频内容的发布请求时，根据超级节点集群负载均衡策略确定一个超级节点，将所述视频内容的发布请求转发至确定的所述超级节点；或者，
负载均衡服务器预先按照负载均衡策略将所述普通节点映射到一个超级节点，负载均衡服务器接收所述普通节点的视频内容的发布请求时，将所述视频内容的发布请求转发至对应的所述超级节点。
8.根据权利要求7中任一项所述的方法，其特征在于，所述方法之前还包括：
普通节点所述去中心化的网络结构发起注册请求，获取所述去中心化的网络结构的信息列表，所述信息列表包括全部超级节点的网络地址和端口信息。
9.一种视频内容去中心化存取系统，包括超级节点和普通节点，
一普通节点将视频内容的发布请求转发至一超级节点；
所述普通节点将所述视频内容的内容索引逻辑信息上报至所述超级节点；
所述超级节点根据接收到的所述内容索引逻辑信息更新维护的hash表；并将更新后的所述hash表备份到其他的一个或者多个超级节点；
所述内容索引逻辑信息包括视频内容所在主机地址、主机端口信息及视频内容信息。
10.根据权利要求9所述的系统，其特征在于，
所述普通节点退出时，向所述超级节点上报退出请求，所述超级节点保持所述hash表不变。
CN201910913316.2A 2019-09-25 2019-09-25 一种视频内容去中心化存取方法和系统 Pending CN112565796A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910913316.2A CN112565796A (zh) 2019-09-25 2019-09-25 一种视频内容去中心化存取方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910913316.2A CN112565796A (zh) 2019-09-25 2019-09-25 一种视频内容去中心化存取方法和系统

Publications (1)

Publication Number Publication Date
CN112565796A true CN112565796A (zh) 2021-03-26

Family

ID=75029426

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910913316.2A Pending CN112565796A (zh) 2019-09-25 2019-09-25 一种视频内容去中心化存取方法和系统

Country Status (1)

Country Link
CN (1) CN112565796A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113453038A (zh) * 2021-06-25 2021-09-28 桂林电子科技大学 一种cdn-p2p混合架构下效用最优协同缓存管理方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1878118A (zh) * 2005-06-06 2006-12-13 腾讯科技（深圳）有限公司 一种实现数据通讯的系统及其方法
CN101072225A (zh) * 2006-05-10 2007-11-14 吴晓剑 网络中实现商品信息共享的方法及系统
CN101217565A (zh) * 2008-01-04 2008-07-09 华中科技大学 一种对等网络视频共享系统中分类检索的网络组织方法
CN101272399A (zh) * 2008-04-25 2008-09-24 浙江大学 一种基于p2p网络实现全文检索系统的方法
CN101741731A (zh) * 2009-12-03 2010-06-16 中兴通讯股份有限公司 内容分发网络中内容元数据的存储、查询方法及管理系统
CN103401953A (zh) * 2013-07-18 2013-11-20 东南大学 一种基于双层结构的端到端的语音通信节点寻址方法
WO2019021107A1 (en) * 2017-07-24 2019-01-31 nChain Holdings Limited COMPUTER-IMPLEMENTED SYSTEM AND METHOD FOR MANAGING A LARGE MEMORY GROUP DISTRIBUTED IN A BLOCK CHAIN NETWORK

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1878118A (zh) * 2005-06-06 2006-12-13 腾讯科技（深圳）有限公司 一种实现数据通讯的系统及其方法
CN101072225A (zh) * 2006-05-10 2007-11-14 吴晓剑 网络中实现商品信息共享的方法及系统
CN101217565A (zh) * 2008-01-04 2008-07-09 华中科技大学 一种对等网络视频共享系统中分类检索的网络组织方法
CN101272399A (zh) * 2008-04-25 2008-09-24 浙江大学 一种基于p2p网络实现全文检索系统的方法
CN101741731A (zh) * 2009-12-03 2010-06-16 中兴通讯股份有限公司 内容分发网络中内容元数据的存储、查询方法及管理系统
CN103401953A (zh) * 2013-07-18 2013-11-20 东南大学 一种基于双层结构的端到端的语音通信节点寻址方法
WO2019021107A1 (en) * 2017-07-24 2019-01-31 nChain Holdings Limited COMPUTER-IMPLEMENTED SYSTEM AND METHOD FOR MANAGING A LARGE MEMORY GROUP DISTRIBUTED IN A BLOCK CHAIN NETWORK

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113453038A (zh) * 2021-06-25 2021-09-28 桂林电子科技大学 一种cdn-p2p混合架构下效用最优协同缓存管理方法
CN113453038B (zh) * 2021-06-25 2022-03-29 桂林电子科技大学 一种cdn-p2p混合架构下效用最优协同缓存管理方法

Similar Documents

Publication Publication Date Title
US11194719B2 (en) Cache optimization
US10904205B2 (en) Content delivery network optimization system
EP2058980B1 (en) A method, system and device for establishing a peer to peer connection in a p2p network
US9998354B2 (en) Server selection for content distribution
US10491657B2 (en) Network acceleration method, apparatus and device based on router device
EP2813060B1 (en) A method for collaborative caching for content-oriented networks
US10033548B2 (en) Method, system, service selection entity, and service management entity for selecting service provision entity
US8756296B2 (en) Method, device and system for distributing file data
CN102668513B (zh) 用于在对等网络内对服务定位的方法和装置
US20160006645A1 (en) Increased data transfer rate method and system for regular internet user
JP2010522386A (ja) Ｐ２ｐコンテンツ共有のための方法、システム、及びノード
CN101510899B (zh) 一种实现内容源选择的方法、系统和设备
WO2010127618A1 (zh) 一种实现流媒体内容服务的系统和方法
US20110307564A1 (en) Data node apparatus, peer information acquisition method and system
US20130166680A1 (en) Method, apparatus, and network system for acquiring content
CN110708385A (zh) 一种基于网络延时的cdn调度算法及系统
CN112565796A (zh) 一种视频内容去中心化存取方法和系统
KR101469310B1 (ko) 서비스 오버레이 네트워크에서 종단간 ＱｏＳ 보장형 콘텐츠 전달 방법 및 그 시스템
KR101243071B1 (ko) 소스 스위칭 방법, 시스템, 및 디바이스
EP2375692B1 (en) Apparatus and method for registering node and searching for floating internet protocol address using distributed network
CN109644160B (zh) 通过分类在icn中进行名称解析和制作者选择的混合方法
US20140161125A1 (en) Method, duplication point device, and system for data flow reuse transmission
US20090106387A1 (en) Cidr based caching at application layer
Wang et al. NCDN: A Node-Failure Resilient CDN Solution with Reinforcement Learning Optimization
US11960407B1 (en) Cache purging in a distributed networked system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210326

RJ01 Rejection of invention patent application after publication