CN113259714B - 内容分发处理方法、装置、电子设备及存储介质 - Google Patents
内容分发处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113259714B CN113259714B CN202110734229.8A CN202110734229A CN113259714B CN 113259714 B CN113259714 B CN 113259714B CN 202110734229 A CN202110734229 A CN 202110734229A CN 113259714 B CN113259714 B CN 113259714B
- Authority
- CN
- China
- Prior art keywords
- service
- content
- services
- interface
- distributed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000009826 distribution Methods 0.000 title claims abstract description 85
- 238000003672 processing method Methods 0.000 title claims abstract description 37
- 238000003860 storage Methods 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 claims abstract description 101
- 238000012545 processing Methods 0.000 claims abstract description 93
- 230000008569 process Effects 0.000 claims abstract description 50
- 230000004048 modification Effects 0.000 claims description 100
- 238000012986 modification Methods 0.000 claims description 100
- 230000006870 function Effects 0.000 claims description 51
- 230000003993 interaction Effects 0.000 claims description 36
- 230000015654 memory Effects 0.000 claims description 21
- 238000012790 confirmation Methods 0.000 claims description 20
- 238000001914 filtration Methods 0.000 claims description 18
- 238000013507 mapping Methods 0.000 claims description 13
- 230000001960 triggered effect Effects 0.000 claims description 10
- 230000008520 organization Effects 0.000 claims description 3
- 238000007726 management method Methods 0.000 description 65
- 238000007405 data analysis Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 22
- 238000012552 review Methods 0.000 description 17
- 230000000007 visual effect Effects 0.000 description 17
- 238000005516 engineering process Methods 0.000 description 16
- 230000004044 response Effects 0.000 description 15
- 238000004458 analytical method Methods 0.000 description 11
- 238000012423 maintenance Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 5
- 241000272194 Ciconiiformes Species 0.000 description 4
- 238000011144 upstream manufacturing Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000003203 everyday effect Effects 0.000 description 3
- 238000013515 script Methods 0.000 description 3
- 238000012550 audit Methods 0.000 description 2
- 238000009960 carding Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012384 transportation and delivery Methods 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000000889 atomisation Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000035764 nutrition Effects 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/12—Discovery or management of network topologies
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5058—Service discovery by the service manager
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请提供了一种内容分发处理方法、装置、电子设备及计算机可读存储介质;方法包括:获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据依赖关系确定每个单一服务的层级;根据单一服务的层级和功能,将多个单一服务进行多种不同方式的编排处理得到多个组合服务;按照处理特定类型的内容的服务调用顺序,在多个组合服务和多个单一服务中选取多个服务,并将选取的多个服务组织为对应特定类型的拓扑结构;在多个特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;依次调用目标拓扑结构中包括的服务对待分发内容进行处理,并对处理后的待分发内容执行分发操作。通过本申请,能够提高内容分发效率。
Description
技术领域
本申请涉及计算机技术,尤其涉及一种内容分发处理方法、装置、电子设备及计算机可读存储介质。
背景技术
内容中心每天都会处理千万级别的内容量级,由于量级十分庞大,实现内容分发时需要应对的业务场景也非常复杂,所需的服务类型也非常多,因此需要可以自由编排服务的拓扑系统,以供不同的业务场景使用。
相关技术只能将单一服务编排到拓扑结构中,会出现由于引入的服务过多导致拓扑关系特别复杂,从而提高了内容分发链路的复杂性,增加了运营维护的难度,进而降低了内容分发的效率。对此,相关技术尚无有效解决方案。
发明内容
本申请实施例提供一种内容分发处理方法、装置、电子设备及计算机可读存储介质,能够提高内容分发的效率。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种内容分发处理方法,包括:
获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据所述依赖关系确定每个所述单一服务的层级;
根据所述单一服务的层级和功能,将所述多个单一服务进行多种不同方式的编排处理,得到多个组合服务;
按照用于处理所述特定类型的内容的服务调用顺序,在所述多个组合服务和所述多个单一服务中选取多个服务,并将选取的所述多个服务组织为对应所述特定类型的拓扑结构;
在多个所述特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;
依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理,并对处理后的所述待分发内容执行分发操作。
在上述方案中,所述拓扑列表界面中包括拓扑搜索入口;
在人机交互界面中显示拓扑列表界面之后,所述方法还包括:
响应于针对所述拓扑搜索入口的搜索操作,获取所述搜索操作在所述拓扑搜索入口提交的索引信息;
在所述拓扑列表中查找与所述索引信息匹配的至少一个拓扑结构,并显示与所述索引信息匹配的至少一个拓扑结构。
在上述方案中,当接收到所述待分发内容时,所述方法还包括:
根据所述待分发内容的分配依据信息,对所述待分发内容分配对应的来源标识、以及描述信息;
其中,所述分配依据信息包括以下至少之一:所述待分发内容的类型、所述待分发内容的投入方式、所述待分发内容的投放通道;
在人机交互界面中显示内容来源管理界面,其中,所述内容来源管理界面包括所述待分发内容的来源标识、所述描述信息、以及对应的数据分析入口。
在上述方案中,在人机交互界面中显示内容来源管理界面时,所述方法还包括:
响应于针对所述数据分析入口的触发操作,对所述待分发内容的来源信息进行数据分析,得到数据分析结果,并显示所述数据分析结果;
其中,所述数据分析结果的类型包括以下至少之一:统计口径、入库量、可调度量、机审信息、人审信息、启用推荐信息。
在上述方案中,在所述对所述待分发内容的来源进行数据分析,得到数据分析结果之后,所述方法还包括:
响应于针对所述数据分析结果的详情查看操作,在所述人机交互界面中显示分析结果详情界面,并在所述分析结果详情界面中显示所述待分发内容的标识信息、以及对应的关键指标信息;
响应于针对所述数据分析结果的列表导出操作,创建表格文档,并在所述表格文档中填充所述待分发内容的标识信息、以及对应的关键指标信息。
在上述方案中,在人机交互界面中显示内容来源管理界面时,所述方法还包括:
在所述内容来源管理界面中显示对应所述来源标识的子来源标识查看入口;
响应于针对所述子来源标识查看入口的触发操作,显示与所述来源标识对应的至少一个子来源标识。
在上述方案中,在人机交互界面中显示内容来源管理界面时,所述方法还包括:
响应于在所述内容来源管理界面中接收的来源新增操作,显示来源配置界面;
响应于在所述来源配置界面接收的配置操作,获取所述配置操作配置的来源信息;
响应于在所述来源配置界面接收的确认操作,将所述配置操作配置的来源信息新增至数据库。
在上述方案中,在所述显示来源配置界面之前,所述方法还包括:
通过权限管理服务确定登录账号的操作权限;
当所述登录账号的操作权限能够用于通过所述来源配置界面新增来源时,确定将执行显示所述来源配置界面的操作。
在上述方案中,所述内容来源管理界面中包括对应所述待分发内容的来源修改入口;
在人机交互界面中显示内容来源管理界面时,所述方法还包括:
响应于针对所述来源修改入口的触发操作,显示对应所述待分发内容的来源修改界面,其中,所述来源修改界面中包括所述待分发内容的来源信息;
响应于在所述来源修改界面接收的修改操作,获取所述修改操作提交的修改后的来源信息;
响应于在所述来源修改界面接收的确认操作,根据所述修改后的来源信息对数据库中对应所述待分发内容的来源信息进行更新。
本申请实施例提供一种内容分发处理装置,包括:
获取模块,用于获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据所述依赖关系确定每个所述单一服务的层级;
编排模块,用于根据所述单一服务的层级和功能,将所述多个单一服务进行多种不同方式的编排处理,得到多个组合服务;
组织模块,用于按照用于处理所述特定类型的内容的服务调用顺序,在所述多个组合服务和所述多个单一服务中选取多个服务,并将选取的所述多个服务组织为对应所述特定类型的拓扑结构;
确定模块,用于在多个所述特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;
分发模块,用于依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理,并对处理后的所述待分发内容执行分发操作。
在上述方案中,所述获取模块,还用于获取所述服务列表中每个所述单一服务的属性信息,并根据每个所述单一服务的属性信息中的父节点属性生成调用链,其中,所述调用链的入口对应的单一服务的属性信息中未包括父节点属性;将所述调用链的入口对应的单一服务确定为最高层级的单一服务;针对所述调用链中除所述最高层级的单一服务之外的其余单一服务执行以下处理:确定所述单一服务与所述属性信息中的父节点属性对应的父服务之间存在依赖关系,并将所述单一服务的层级确定为所述父服务的下一个层级。
在上述方案中,所述编排模块,还用于针对每个所述单一服务执行以下处理:获取所述单一服务的描述信息中的关键词,将与所述关键词匹配的功能确定为所述单一服务的功能;在所述多个单一服务中,多次执行以下操作:选取满足预设条件至少之一的多个待组合的单一服务进行编排处理,对应得到多个组合服务;其中,每次选取的所述多个待组合的单一服务不完全相同;其中,所述预设条件包括:所述待组合的单一服务的层级之间的差值小于层级差值阈值;所述待组合的单一服务的功能之间的相似度大于功能相似度阈值。
在上述方案中,所述确定模块,还用于获取所述待分发内容的类型;从拓扑列表中读取与多个所述特定类型一一对应的多个拓扑结构,基于所述待分发内容的类型查找与所述待分发内容的类型匹配的目标拓扑结构。
在上述方案中,所述分发模块,还用于获取所述目标拓扑结构中包括的每个服务之间的层级关系;调用所述层级关系中最高层级的服务对所述待分发内容进行处理,并将处理结果传递至下一个层级的服务,以使所述下一个层级的服务对所述处理结果进行处理,直至所述层级关系中最低层级对应的服务对上一个层级的服务传递的处理结果进行处理后结束。
在上述方案中,所述分发模块,还用于获取所述待分发内容的来源信息,并确定对应所述来源信息的过滤服务,其中,所述过滤服务是在所述待分发内容的处理过程中不需要执行的服务;当所述目标拓扑结构中包括所述过滤服务时,在对所述待分发内容进行处理的过程中,跳过调用所述过滤服务对所述待分发内容进行处理。
在上述方案中,所述分发模块,还用于针对所述目标拓扑结构中包括的每个所述服务执行以下处理:获取所述服务的频控信息和最大重试次数;根据所述服务的频控信息控制调用所述服务对所述待分发内容进行处理的频率;当调用所述服务对所述待分发内容进行处理失败时,重复调用所述服务对所述待分发内容进行处理,直至重复调用的次数达到所述最大重试次数时,停止重复调用所述服务。
在上述方案中,所述获取模块,还用于在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表;响应于在所述服务列表界面中接收的服务新增操作,显示服务配置界面,并通过所述服务配置界面获取配置的服务和对应的属性信息;响应于在所述服务配置界面接收的确认操作,将所述配置的服务和对应的属性信息建立映射关系,并将建立所述映射关系的服务和对应的属性信息的新增至所述服务列表。
在上述方案中,所述获取模块,还用于在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表和服务搜索入口;响应于针对所述服务搜索入口的搜索操作,获取所述搜索操作在所述服务搜索入口提交的索引信息;在所述服务列表中查找与所述索引信息匹配的至少一个服务,并显示与所述索引信息匹配的至少一个服务、以及对应的属性信息。
在上述方案中,所述获取模块,还用于在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表和服务修改入口;响应于针对所述服务修改入口的触发操作,显示触发的所述服务修改入口对应的服务修改界面,其中,所述服务修改界面中包括对应所述服务修改入口的服务的属性信息;响应于在所述服务修改界面接收的修改操作,获取所述修改操作提交的修改后的属性信息;响应于在所述服务修改界面接收的确认操作,根据所述修改后的属性信息对服务列表中对应所述服务修改入口的服务的属性信息进行更新。
在上述方案中,多个所述特定类型分别对应的拓扑结构是存储在拓扑列表中的;所述内容分发处理装置还包括:拓扑模块,用于在人机交互界面中显示拓扑列表界面,所述拓扑列表界面包括所述拓扑列表;响应于在所述拓扑列表界面中接收的拓扑新增操作,显示拓扑配置界面,并通过所述拓扑配置界面获取配置的拓扑结构;响应于在所述拓扑配置界面接收的确认操作,将所述配置的拓扑结构新增至所述拓扑列表。
在上述方案中,所述拓扑模块,还用于响应于针对所述拓扑列表中的拓扑结构的查看操作,显示对应的拓扑详情界面,其中,所述拓扑详情界面中包括所述拓扑结构;响应于针对所述拓扑结构的编排操作,对所述拓扑结构进行更新,并将更新后的所述拓扑结构同步更新至所述拓扑列表中;响应于针对所述拓扑结构中的被选中的任意服务的查看操作,显示对应所述任意服务的服务详情界面,并在所述服务详情界面中显示所述任意服务在所述拓扑结构中的属性信息。
在上述方案中,所述拓扑列表界面中包括拓扑搜索入口;所述拓扑模块,还用于响应于针对所述拓扑搜索入口的搜索操作,获取所述搜索操作在所述拓扑搜索入口提交的索引信息;在所述拓扑列表中查找与所述索引信息匹配的至少一个拓扑结构,并显示与所述索引信息匹配的至少一个拓扑结构。
在上述方案中,所述内容分发处理装置还包括:来源模块,用于根据所述待分发内容的分配依据信息,对所述待分发内容分配对应的来源标识、以及描述信息;其中,所述分配依据信息包括以下至少之一:所述待分发内容的类型、所述待分发内容的投入方式、所述待分发内容的投放通道;在人机交互界面中显示内容来源管理界面,其中,所述内容来源管理界面包括所述待分发内容的来源标识、所述描述信息、以及对应的数据分析入口。
在上述方案中,所述来源模块,还用于响应于针对所述数据分析入口的触发操作,对所述待分发内容的来源信息进行数据分析,得到数据分析结果,并显示所述数据分析结果;其中,所述数据分析结果的类型包括以下至少之一:统计口径、入库量、可调度量、机审信息、人审信息、启用推荐信息。
在上述方案中,所述来源模块,还用于响应于针对所述数据分析结果的详情查看操作,在所述人机交互界面中显示分析结果详情界面,并在所述分析结果详情界面中显示所述待分发内容的标识信息、以及对应的关键指标信息;响应于针对所述数据分析结果的列表导出操作,创建表格文档,并在所述表格文档中填充所述待分发内容的标识信息、以及对应的关键指标信息。
在上述方案中,所述来源模块,还用于在所述内容来源管理界面中显示对应所述来源标识的子来源标识查看入口;响应于针对所述子来源标识查看入口的触发操作,显示与所述来源标识对应的至少一个子来源标识。
在上述方案中,所述来源模块,还用于响应于在所述内容来源管理界面中接收的来源新增操作,显示来源配置界面;响应于在所述来源配置界面接收的配置操作,获取所述配置操作配置的来源信息;响应于在所述来源配置界面接收的确认操作,将所述配置操作配置的来源信息新增至数据库。
在上述方案中,所述来源模块,还用于通过权限管理服务确定登录账号的操作权限;当所述登录账号的操作权限能够用于通过所述来源配置界面新增来源时,确定将执行显示所述来源配置界面的操作。
在上述方案中,所述内容来源管理界面中包括对应所述待分发内容的来源修改入口;所述来源模块,还用于响应于针对所述来源修改入口的触发操作,显示对应所述待分发内容的来源修改界面,其中,所述来源修改界面中包括所述待分发内容的来源信息;响应于在所述来源修改界面接收的修改操作,获取所述修改操作提交的修改后的来源信息;响应于在所述来源修改界面接收的确认操作,根据所述修改后的来源信息对数据库中对应所述待分发内容的来源信息进行更新。
本申请实施例提供一种电子设备,包括:
存储器,用于存储计算机可执行指令;
处理器,用于执行所述存储器中存储的计算机可执行指令时,实现本申请实施例提供的内容分发处理方法。
本申请实施例提供一种计算机可读存储介质,存储有计算机可执行指令,用于被处理器执行时,实现本申请实施例提供的内容分发处理方法。
本申请实施例具有以下有益效果:
根据单一服务的层级和功能将多个单一服务编排成组合服务,并按照用于处理特定类型的内容的服务调用顺序,将多个服务组织为对应特定类型的拓扑结构,以便于后续根据待分发内容的类型调用对应的目标拓扑结构对待分发内容进行处理和分发,能够将单一服务之间的关系进行简化,降低内容分发链路的复杂性,降低了运营维护的难度,从而提高了内容分发的效率。
附图说明
图1是相关技术提供的部分视频专业生产内容链路的拓扑结构示意图;
图2是本申请实施例提供的内容分发处理系统100的架构示意图;
图3是本申请实施例提供的服务器200的结构示意图;
图4是本申请实施例提供的内容分发处理方法的流程示意图;
图5是本申请实施例提供的部分视频专业生产内容链路进行组合能力编排后的拓扑结构示意图;
图6是本申请实施例提供的内容分发处理方法的应用场景示意图;
图7是本申请实施例提供的内容分发处理方法的应用场景示意图;
图8是本申请实施例提供的内容分发处理方法的应用场景示意图;
图9是本申请实施例提供的内容分发处理方法的应用场景示意图;
图10是本申请实施例提供的内容分发处理方法的应用场景示意图;
图11是本申请实施例提供的内容分发处理方法的应用场景示意图;
图12是本申请实施例提供的内容分发处理方法的应用场景示意图;
图13是本申请实施例提供的内容分发处理方法的应用场景示意图;
图14是本申请实施例提供的内容分发处理方法的应用场景示意图;
图15是本申请实施例提供的内容分发处理方法的应用场景示意图;
图16是本申请实施例提供的内容分发处理方法的原理示意图;
图17是本申请实施例提供的内容分发处理方法的原理示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
在以下的描述中,所涉及的术语“第一/第二”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一/第二”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
(1)内容(或称信息)大数据:使用搜索服务器(Elasticsearch)、开源数据库(Hbase) 存储来自看点、快报、浏览器等端上引入的图文、视频内容,预计每天新增内容量约每天三千万条,每个内容会有一个唯一身份标识(ID, Identity document)字段rowkey。
(2)rowkey:每个内容投放到内容中心时,会自动生成一个全局唯一ID存储到Hbase里,用于内容检索。
(3)单一能力,或称单一服务:提供内容加工、账号处理、图片内敛化等功能的微服务,拥有原子化、单一职责的特点。
(4)组合能力,或称组合服务:将多个单一能力,通过特定的拓扑结构来控制执行流程,对外仅暴露数据输入和结果输出的形式,即组合能力。在形式、调用、协议上与单一能力一致。
(5)微服务:具体是一种用于构建应用的架构方案。微服务架构有别于更为传统的单体式方案,可将应用拆分成多个核心功能。每个功能都被称为一项服务,可以单独构建和部署,这意味着各项服务在工作(和出现故障)时不会相互影响。
(6)链路:表示一个内容从入库内容中心,进行数据加工、能力编排处理,到最后内容的分发的整体流程。
(7)来源:针对各个端上引入的图文、视频内容,按照内容提供方、引入方式等规划为不同的来源,包括但不限于“图集”、“视频集”等,同时在此基础上,可以再次划分子来源,如“图集-部落绿通图集”、“视频集-垂类短视频”等。
(8)拓扑:将多个单一能力和/或组合能力等按照一定的执行流程,进行串联、并联后形成的结构。
(9)频控:通过限制单位时间内可访问的次数,达到限流的目的。利用频控,可以用来限制访问某些服务接口的流量,防止服务器由于承受太大的访问量而崩溃。
内容中心每天都会处理千万级别的内容量级,由于量级十分庞大,无法快速追溯内容源头,对定位问题和引入监控都有影响,例如,链路上出现有许多无营养、有安全风险、或者启用率特别低的内容,这个时候就需要确定这些内容的来源,从而联系对应的内容供应商进行整改,因此需要根据不同业务分配不同的来源。此外,每个来源下还有可能需要再次细分出多个子来源,多个子来源和来源之间需要关联起来,形成多对一的关系链。同时,由于要应对的处理场景也非常复杂,所需的服务类型也非常多,因此需要可以自由编排服务的拓扑结构,以供不同的业务场景使用。
相关技术在每个业务方投放内容时,会创建唯一标识rowkey并存储Hbase中,因此可以让每个业务方投放时为此rowkey创建一个标记字段,用于区分是否为自己的业务所投放的。由于需要针对每个业务方单独创建标记字段,因此将会导致字段的命名、取值等规范不容易统一,在业务方较多的情况下,需要维护业务方与业务标记字段的关联关系。并且相关技术在每次投放rowkey时会额外创建一个映射表,用于存储业务方到rowkey之间的映射关系链,用于追溯rowkey的源头。由于内容投放量十分巨大,额外创建rowkey映射表需要大量的存储资源,成本消耗巨大。
另外,相关技术只使用单一服务进行拓扑编排,导致引入的服务过多,使拓扑关系和链路特别复杂,运营维护的成本非常巨大。例如,参见图1,图1是相关技术提供的部分视频专业生产内容(PGC,Professional Generated Content)链路的拓扑结构示意图,图1中,当仅仅使用单一服务编排拓扑时,其调用关系特别复杂,在运营的时候难以分清某个服务的上下游的调用关系。如果要新增、删除某个服务时,需要重新梳理该模块的上下游关系,维护成本十分庞大。并且相关技术没有可视化的拓扑管理界面,目前调整服务时只能在文本文件里修改属性信息,不能直观的查看拓扑调用关系。在需要排查上下游关系、依赖服务时,往往需要人工成本介入,并发布新版本服务。
针对上述技术问题,本申请实施例提供一种内容分发处理方法,能够提高内容分发处理效率。下面说明本申请实施例提供的内容分发处理方法的示例性应用,本申请实施例提供的内容分发处理方法可以由各种电子设备实施,例如,可以由服务器单独实施,还可以由终端和服务器协同实施。
接下来,以由终端和服务器协同实施为例说明本申请实施例,参见图2,图2是本申请实施例提供的内容分发处理系统100的架构示意图。其中,内容分发处理系统100包括有:服务器200、网络300、以及终端400,将分别进行说明。
在一些实施例中,服务器200用于获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据依赖关系确定每个单一服务的层级;根据单一服务的层级和功能,将多个单一服务进行多种不同方式的编排处理,得到多个组合服务;按照用于处理特定类型的内容的服务调用顺序,在多个组合服务和多个单一服务中选取多个服务,并将选取的多个服务组织为对应特定类型的拓扑结构;在多个特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;依次调用目标拓扑结构中包括的服务对待分发内容进行处理,并将处理后的待分发内容发送至终端400。网络300用于作为服务器200和终端400之间通信的媒介,可以是广域网或者局域网,又或者是二者的组合。终端400用于接收服务器200发送的处理后的内容。
以资讯聚合的应用场景为例,内容中心基于服务器200实现,服务器200中存储有多个内容生产平台(例如社交平台、自媒体平台、企业平台等)上传的各种类型的待分发内容,服务器200可以根据与待分发内容的类型匹配的目标拓扑结构对这些待分发内容进行处理,并将处理后的待分发内容通过不同的渠道投放至对应的内容消费平台,从而能够提高内容生产平台的曝光率,增加流量变现能力。
本申请实施例可以借助于云技术(Cloud Technology)实现,云技术是指在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。
云技术是基于云计算商业模式应用的网络技术、信息技术、整合技术、管理平台技术、以及应用技术等的总称,可以组成资源池,按需所用,灵活便利。云计算技术将变成重要支撑。技术网络系统的后台服务需要大量的计算、存储资源。
作为示例,服务器200可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。
接下来说明图2中的服务器200的结构。参见图3,图3是本申请实施例提供的服务器200的结构示意图,图3所示的服务器200包括:至少一个处理器210、存储器240和至少一个网络接口220。服务器200中的各个组件通过总线系统230耦合在一起。可理解,总线系统230用于实现这些组件之间的连接通信。总线系统230除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图3中将各种总线都标为总线系统230。
处理器210可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
存储器240包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器240旨在包括任意适合类型的存储器。存储器440可选地包括在物理位置上远离处理器210的一个或多个存储设备。
在一些实施例中,存储器240能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统241,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;网络通信模块242,用于经由一个或多个(有线或无线)网络接口220到达其他计算设备,示例性的网络接口220包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,UniversalSerial Bus)等。
在一些实施例中,本申请实施例提供的内容分发处理装置可以采用软件方式实现,图3示出了存储在存储器240中的内容分发处理装置243,其可以是程序和插件等形式的软件,包括以下软件模块:获取模块2431、编排模块2432、组织模块2433、确定模块2434、以及分发模块2435。这些模块是可以是逻辑功能模块,因此根据所实现的功能可以进行任意的组合或进一步拆分。将在下文中说明各个模块的功能。
下面,以由图2中的服务器200单独执行本申请实施例提供的内容分发处理方法为例说明。参见图4,图4是本申请实施例提供的内容分发处理方法的流程示意图,将结合图4示出的步骤进行说明。
在步骤S101中,获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据依赖关系确定每个单一服务的层级。
在一些实施例中,在步骤S101之前可以包括:在人机交互界面中显示服务列表界面,服务列表界面包括服务列表;响应于在服务列表界面中接收的服务新增操作,显示服务配置界面,并通过服务配置界面获取配置的服务和对应的属性信息;响应于在服务配置界面接收的确认操作,将配置的服务和对应的属性信息建立映射关系,并将建立映射关系的服务和对应的属性信息的新增至服务列表。
作为示例,在显示服务配置界面之前可以包括:通过权限管理服务确定登录账号的操作权限;当登录账号的操作权限能够用于通过服务配置界面新增服务时,确定将执行显示服务配置界面的操作。
作为示例,服务的属性信息包括以下至少之一:服务名称、服务版本、服务参数(包括入参和出参)、服务类型、负责人、远程过程调用(RPC,Remote Procedure Call)请求服务的名称、RPC方法名、地址、路由、频控信息(包括超时时间、请求量限制、链接量限制)、父节点属性、最大重试次数、重试达最大次数后的策略。其中,服务的频控信息用于控制服务被调用的频率;服务版本用于当调用对应服务版本的目标拓扑结构时,才允许服务被调用;最大重试次数是重复调用服务对内容进行处理的最大次数。
举例来说,服务新增操作可以是针对服务新增入口的触发操作,例如,当用户触发图12中的服务新增入口122后,可以显示如图13所示的服务配置界面131,用户可以通过服务配置界面131提交配置的服务和对应的属性信息。
本申请实施例提供可视化的用户界面支持用户在服务列表中新增服务,提高了服务新增的效率,并且控制用户新增服务的操作权限,能够避免用户的误操作,从而能够提高服务管理的安全性。
在一些实施例中,在步骤S101之前可以包括:在人机交互界面中显示服务列表界面,服务列表界面包括服务列表和服务搜索入口;响应于针对服务搜索入口的搜索操作,获取搜索操作在服务搜索入口提交的索引信息;在数据库中的服务列表中查找与索引信息匹配的至少一个服务,并显示与索引信息匹配的至少一个服务、以及对应的属性信息。
作为示例,在服务搜索入口提交的索引信息可以是服务名称或服务名称的关键字,也可以是服务的属性信息或属性信息中的关键字。
举例来说,服务列表中包括多个服务,用户可以通过图12中的服务搜索入口123提交需要搜索的索引信息,并通过触发“查询”按钮在服务列表中查询与索引信息匹配的至少一个服务,并在服务列表界面中显示查询得到的服务、以及对应的属性信息。如此,提供可视化的用户界面支持用户在服务列表中检索服务,能够提高服务的属性信息的获取效率。
在一些实施例中,在步骤S101之前可以包括:在人机交互界面中显示服务列表界面,服务列表界面包括服务列表和服务修改入口;响应于针对服务修改入口的触发操作,显示触发的服务修改入口对应的服务修改界面,其中,服务修改界面中包括对应服务修改入口的服务的属性信息;响应于在服务修改界面接收的修改操作,获取修改操作提交的修改后的属性信息;响应于在服务修改界面接收的确认操作,根据修改后的属性信息对数据库中的服务列表中对应服务修改入口的服务的属性信息进行更新。
作为示例,在显示触发的服务修改入口对应的服务修改界面之前可以包括:通过权限管理服务确定登录账号的操作权限;当登录账号的操作权限能够用于通过服务修改界面修改服务时,确定将执行显示触发的服务修改入口对应的服务修改界面的操作。
举例来说,当用户触发图12中的服务修改入口124后,可以显示触发的服务修改入口124对应的服务修改界面,用户可以通过服务修改界面提交修改后的属性信息。
本申请实施例提供可视化的用户界面支持用户在服务列表中修改服务的属性信息,提高了服务修改的效率,并且控制用户修改服务的操作权限,能够避免用户的误操作,从而能够提高服务管理的安全性。
在一些实施例中,获取服务列表中每个单一服务的属性信息,并根据每个单一服务的属性信息中的父节点属性生成调用链,其中,调用链的入口对应的单一服务的属性信息中未包括父节点属性;将调用链的入口对应的单一服务确定为最高层级的单一服务;针对调用链中除最高层级的单一服务之外的其余单一服务执行以下处理:确定单一服务与属性信息中的父节点属性对应的父服务之间存在依赖关系,并将单一服务的层级确定为父服务的下一个层级,例如,服务A是第三层级,那么父节点属性对应的服务B是第二层级。
作为示例,单一服务的属性信息中的父节点属性可以在服务详情界面中进行配置,例如,图15中,用户可以通过能力详情界面152(即上述的服务详情界面)配置父节点属性153,能力详情界面152支持用户新增父节点、删减父节点或修改父节点。
本申请实施例将单一服务之间的依赖关系梳理汇总,并按照调用链输出依赖关系,并根据依赖关系确定服务的层级,能够提高后续将多个单一服务编排为组合服务的准确性。
在步骤S102中,根据单一服务的层级和功能,将多个单一服务进行多种不同方式的编排处理,得到多个组合服务。
在一些实施例中,针对每个单一服务执行以下处理:获取单一服务的描述信息中的关键词,将与关键词匹配的功能确定为单一服务的功能;在多个单一服务中,多次执行以下操作:选取满足预设条件至少之一的多个待组合的单一服务进行编排处理,对应得到多个组合服务;其中,每次选取的多个待组合的单一服务不完全相同。
作为示例,预设条件包括:待组合的单一服务的层级之间的差值小于层级差值阈值;待组合的单一服务的功能之间的相似度大于功能相似度阈值。其中,层级差值阈值和功能相似度阈值可以是缺省值,也可以是用户或服务器设定的值。
举例来说,待组合的单一服务的层级之间的差值小于层级差值阈值表征待组合的单一服务之间的层级相近,待组合的单一服务的功能之间的相似度大于功能相似度阈值表征待组合的单一服务之间的功能相似,将相近层级和相似功能的单一能力编排为组合服务,能够提高基于组合服务构建拓扑结构的准确性。
在步骤S103中,按照用于处理特定类型的内容的服务调用顺序,在多个组合服务和多个单一服务中选取多个服务,并将选取的多个服务组织为对应特定类型的拓扑结构。
在一些实施例中,拓扑结构中包括多个服务,但是服务的类型可以是单一服务或组合服务,例如,可以仅包括多个单一服务,也可以仅包括多个组合服务,还可以包括至少一个单一服务和至少一个组合服务。
作为示例,在多个组合服务和多个单一服务中选取多个服务、以及将选取的多个服务组织为对应特定类型的拓扑结构都需要参考服务调用顺序,例如,当处理类型A的内容的服务调用顺序是“依次调用单一服务1、组合服务2、组合服务5、单一服务7”时,可以在数据库中的所有服务中选取单一服务1、组合服务2、组合服务5、以及单一服务7,并将单一服务1、组合服务2、组合服务5、以及单一服务7按照“单一服务1—>组合服务2—>组合服务5—>单一服务7”的顺序组织为对应类型A的拓扑结构。
在步骤S104中,在多个特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构。
在一些实施例中,多个特定类型分别对应的拓扑结构是存储在数据库中的拓扑列表中的;在步骤S104之前可以包括:在人机交互界面中显示拓扑列表界面,拓扑列表界面包括拓扑列表;响应于在拓扑列表界面中接收的拓扑新增操作,显示拓扑配置界面,并通过拓扑配置界面获取配置的拓扑结构;响应于在拓扑配置界面接收的确认操作,将配置的拓扑结构新增至拓扑列表。
作为示例,在显示拓扑配置界面之前可以包括:通过权限管理服务确定登录账号的操作权限;当登录账号的操作权限能够用于通过拓扑配置界面新增拓扑结构时,确定将执行显示拓扑配置界面的操作。
举例来说,拓扑新增操作可以是针对拓扑新增入口的触发操作,例如,当用户触发图14中的拓扑新增入口142后,可以显示拓扑配置界面,用户可以通过拓扑配置界面提交配置的拓扑结构。
本申请实施例提供可视化的用户界面支持用户在拓扑列表中新增拓扑结构,提高了新增拓扑结构的效率,并且控制用户新增拓扑结构的操作权限,能够避免用户的误操作,从而能够提高拓扑结构管理的安全性。
作为示例,在人机交互界面中显示拓扑列表界面之后可以包括:响应于针对拓扑列表中的拓扑结构的查看操作,显示对应的拓扑详情界面,其中,拓扑详情界面中包括拓扑结构;响应于针对拓扑结构的编排操作,对拓扑结构进行更新,并将更新后的拓扑结构同步更新至拓扑列表中;响应于针对拓扑结构中的被选中的任意服务的查看操作,显示对应任意服务的服务详情界面,并在服务详情界面中显示任意服务在拓扑结构中的属性信息。
举例来说,针对拓扑结构的编排操作可以是在拓扑结构中新增服务(或称节点)、删除服务或修改服务之间的结构关系的操作,例如,图15中,用户可以在拓扑详情界面151中对展示的拓扑结构进行编排,并在编排后通过触发“提交”按钮完成更新,用户也可以触发拓扑结构中的任意服务,从而在能力详情界面152(即上述的服务详情界面)中显示被触发的服务的属性信息。
作为示例,拓扑列表界面中包括拓扑搜索入口;在人机交互界面中显示拓扑列表界面之后可以包括:响应于针对拓扑搜索入口的搜索操作,获取搜索操作在拓扑搜索入口提交的索引信息;在数据库中的拓扑列表中查找与索引信息匹配的至少一个拓扑结构,并显示与索引信息匹配的至少一个拓扑结构。
作为示例,在拓扑搜索入口提交的索引信息可以是拓扑名称或拓扑名称的关键字。
举例来说,拓扑列表中包括多个拓扑,用户可以通过图14中的拓扑搜索入口143提交需要搜索的索引信息,并通过触发“查询”按钮在拓扑列表中查询与索引信息匹配的至少一个拓扑结构,并在拓扑列表界面中显示查询得到的拓扑结构。如此,提供可视化的用户界面支持用户在拓扑列表中检索拓扑结构,能够提高拓扑结构的获取效率。
在一些实施例中,获取待分发内容的类型;从拓扑列表中读取与多个特定类型一一对应的多个拓扑结构,基于待分发内容的类型查找与待分发内容的类型匹配的目标拓扑结构。
作为示例,接收待分发内容时,待分发内容会携带类型标识,在映射表中查找与待分发内容携带的类型标识匹配的类型,并将与待分发内容携带的类型标识匹配的类型确定为待分发内容的类型。
在一些实施例中,当接收到待分发内容时可以包括:根据待分发内容的分配依据信息,对待分发内容自动分配对应的来源标识(即来源ID)、以及描述信息;其中,分配依据信息包括以下至少之一:待分发内容的类型、待分发内容的投入方式、待分发内容的投放通道;在人机交互界面中显示内容来源管理界面,其中,内容来源管理界面包括待分发内容的来源标识、描述信息、以及对应的数据分析入口。
作为示例,描述信息包括以下至少之一:来源名称、来源说明、来源等级、来源类型、相关人员(例如,产品负责人、开发负责人、内容供应方、供应方负责人等)。待分发内容的类型包括:图文、视频、音频等。待分发内容的投入方式包括:网络链接、电子邮件、弹窗等。待分发内容的投放通道包括:官方通道、社群通道、个人通道等。
作为示例,当在人机交互界面中显示内容来源管理界面时可以包括:响应于针对数据分析入口的触发操作,对待分发内容的来源信息进行数据分析,得到数据分析结果,并显示数据分析结果;其中,数据分析结果的类型包括以下至少之一:统计口径、入库量、可调度量、机审信息、人审信息、启用推荐信息。
举例来说,图6中,用户可以通过触发来源报表入口603(即上述的数据分析入口)来针对对应的来源信息进行数据分析,并在数据分析结束后显示如图10所示的弹窗101,并在弹窗101中显示数据分析结果。
举例来说,响应于针对数据分析结果的详情查看操作,在人机交互界面中显示分析结果详情界面,并在分析结果详情界面中显示待分发内容的标识信息(rowkey)、以及对应的关键指标信息;响应于针对数据分析结果的列表导出操作,创建表格文档,并在表格文档中填充待分发内容的标识信息、以及对应的关键指标信息。
例如,关键指标信息包括以下至少之一:标题、类型、账号信息(例如,账号名称、账号等级等)、内容等级、启用状态、内容发布时间。
例如,图10中,详情查看操作可以是触发查看按钮102的操作,列表导出操作可以是触发导出按钮103的操作,当用户触发查看按钮102后,显示分析结果详情界面104,当用户触发导出按钮103后,生成如图11所示的Excel文档111,从而支持对数据分析结果进行进一步分析。
作为示例,当在人机交互界面中显示内容来源管理界面时可以包括:在内容来源管理界面中显示对应来源标识的子来源标识查看入口;响应于针对子来源标识查看入口的触发操作,显示与来源标识对应的至少一个子来源标识。
举例来说,来源标识可以是任意级别的来源ID,例如,当来源标识是一级来源ID时,子来源标识可以是二级来源ID,当来源标识是三级来源ID时,子来源标识可以是四级来源ID。例如,图7中,当用户触发子来源标识查看入口702时,显示与一级来源ID“49”对应的多个二级来源ID,包括二级来源ID“490001”、二级来源ID“490002”、二级来源ID“490003”等。
作为示例,当在人机交互界面中显示内容来源管理界面时可以包括:响应于在内容来源管理界面中接收的来源新增操作,显示来源配置界面;响应于在来源配置界面接收的配置操作,获取配置操作配置的来源信息(包括来源标识和描述信息);响应于在来源配置界面接收的确认操作,将配置操作配置的来源信息新增至数据库。
举例来说,在显示来源配置界面之前可以包括:通过权限管理服务确定登录账号(即登录来源管理系统的账号)的操作权限;当登录账号的操作权限能够用于通过来源配置界面新增来源时,确定将执行显示来源配置界面的操作。
举例来说,来源新增操作可以是针对来源新增入口的触发操作,例如,当用户触发图6中的来源新增入口604后,可以显示如图8所示的来源配置界面801,用户可以通过来源配置界面801提交配置的来源信息。
本申请实施例提供可视化的用户界面支持用户在数据库中新增来源,提高了来源新增的效率,并且控制用户新增来源的操作权限,能够避免用户的误操作,从而能够提高来源管理的安全性。
作为示例,内容来源管理界面中包括对应待分发内容的来源修改入口;当在人机交互界面中显示内容来源管理界面时可以包括:响应于针对来源修改入口的触发操作,显示对应待分发内容的来源修改界面,其中,来源修改界面中包括待分发内容的来源信息;响应于在来源修改界面接收的修改操作,获取修改操作提交的修改后的来源信息;响应于在来源修改界面接收的确认操作,根据修改后的来源信息对数据库中对应待分发内容的来源信息进行更新。
作为示例,在显示对应待分发内容的来源修改界面之前可以包括:通过权限管理来源确定登录账号的操作权限;当登录账号的操作权限能够用于通过来源修改界面修改来源信息时,确定将执行显示对应待分发内容的来源修改界面的操作。
举例来说,当用户触发图6中的来源修改入口602后,可以显示触发的来源修改入口602对应的来源修改界面,用户可以通过来源修改界面提交修改后的属性信息。
本申请实施例提供可视化的用户界面支持用户在数据库中修改来源信息,提高了来源信息的修改效率,并且控制用户修改来源的操作权限,能够避免用户的误操作,从而能够提高来源管理的安全性。
在步骤S105中,依次调用目标拓扑结构中包括的服务对待分发内容进行处理,并对处理后的待分发内容执行分发操作。
这里,目标拓扑结构中包括的服务可以是组合服务或单一服务。
在一些实施例中,获取目标拓扑结构中包括的每个服务之间的层级关系;调用层级关系中最高层级的服务对待分发内容进行处理,并将处理结果传递至下一个层级的服务,以使下一个层级的服务对处理结果进行处理,直至层级关系中最低层级对应的服务对上一个层级的服务传递的处理结果进行处理后结束,从而得到处理后的待分发内容,并对处理后的待分发内容执行分发操作。
作为示例,在依次调用目标拓扑结构中包括的服务对待分发内容进行处理时可以包括:针对目标拓扑结构中包括的每个服务执行以下处理:获取服务的属性信息中的频控信息和最大重试次数;根据服务的频控信息控制调用服务对待分发内容进行处理的频率;当调用服务对待分发内容进行处理失败时,重复调用服务对待分发内容进行处理,直至重复调用的次数达到最大重试次数时,停止重复调用服务。
举例来说,服务的属性信息中的频控信息和最大重试次数可以是用户在图15所示的能力详情界面152中手动设置的,也可以是服务器根据服务的属性信息自动配置的。
作为示例,在依次调用目标拓扑结构中包括的服务对待分发内容进行处理时可以包括:获取待分发内容的来源信息,并确定对应来源信息的过滤服务,其中,过滤服务是在待分发内容的处理过程中不需要执行的服务;当目标拓扑结构中包括过滤服务时,在对待分发内容进行处理的过程中,跳过调用过滤服务对待分发内容进行处理。
举例来说,有的服务在使用过程中会需要待分发内容的来源信息,以便于提供个性化的处理,例如,从企鹅号来源过来的图文、视频,就不需要再通过视频转码服务和图片内链化服务进行处理(这里,过滤服务包括视频转码服务和图片内链化服务),因为从企鹅号来源过来的图文、视频已经是可以直接对外展示了,从而能够提高内容的处理效率。
本申请实施例根据待分发内容的类型调用对应的目标拓扑结构对待分发内容进行处理和分发,能够将单一服务之间的关系进行简化,降低内容分发链路的复杂性,降低了运营维护的难度,从而提高了内容分发的效率。
下面,以一个具体应用场景为例说明本申请实施例提供的内容分发处理方法。
本申请实施例引入来源管理系统。具体的,针对来源管理系统,本申请实施例依据内容引入的类型(如短内容、图集)、投入方式(如用户投放)、投放通道(如企鹅号、微信)等不同维度,以数值形式的ID分配来源和相关的描述信息。
如此,本申请实施例具备以下优点:(1)能够分配、修改来源ID,同时绑定对应的负责人、描述信息、供应方信息等。(2)支持子来源分配,能够以某个来源为基础,添加、修改对应的子来源,并且也可以绑定对应的负责人、描述信息,供应方信息等。同时维护来源和子来源之间的关系链,支持一对多结构。(3)提供可视化图形用户界面(GUI,Graphical UserInterface)管理,支持按照来源或子来源的ID、描述等内容进行模糊匹配,便于运营管理。(4)支持数据分析、数据报表、内容导出等功能。在指定的时间范围内,能够计算这批来源在内容中心链路上的统计口径、入库量、可调度量、机审过滤、机审通过出库等关键指标数据。除此之外,还可以导出这批数据内容,并且提供内容对应的rowkey、标题、分类、账号等相关信息。
本申请实施例还引入支持拓扑编排功能的组合能力。具体的,本申请实施例根据具体的业务场景选择的众多单一能力,按照处理对象(如封面图、音频)、功能类型(如审核、出库)等,划分为不同的能力集合,并按照指定的拓扑结构编排为组合能力。
如此,本申请实施例具备以下优点:(1)支持拓扑自由编排,能够将拓扑结构与业务方相互绑定,执行业务方所需要的单一能力与组合能力。(2)支持单一能力进行组合,如将封面图内敛、封面图选图、图片裁剪等功能,组合为封面图处理能力。对外表现形式和单一能力一样,但实际上内部由多个单一能力编排而成,减少拓扑复杂度和运营成本。同时该组合能力可以提供给其他业务场景,避免了重复拓扑编排的人工成本。(3)提供可视化GUI管理,支持线上选择能力进行拓扑编排。
本申请实施例支持组合能力,能够将杂乱无章的单一能力关系进行简化。以视频PGC链路为例,图5是本申请实施例提供的部分视频专业生产内容链路进行组合能力编排后的拓扑结构示意图。图5中,将多个单一能力编排为组合能力501,经过组合能力编排的拓扑结构在调用关系上十分清晰简洁,可以直观的看出某个能力所处的拓扑位置,以及与其相关的上下游关系。并且本申请实施例包含完整的GUI,可以支持线上配置和调整拓扑,减少人工发布服务的成本。通过可视化界面也能够直观的看到拓扑结构,减少人工梳理依赖的成本。
下面,结合图6、图7、图8、图9、图10和图11说明本申请实施例中来源管理系统的具体实现方式,图6、图7、图8、图9、图10和图11是本申请实施例提供的内容分发处理方法的应用场景示意图。
(1)来源管理界面
在一些实施例中,图6是来源管理界面(即上述的内容来源管理界面)的示意图,本申请实施例提供一个可视化的GUI,用于展示当前已经分配的来源ID601,同时携带每个来源对应的描述信息以及其他功能的跳转链接,例如,来源修改入口602和来源报表入口603(即上述的数据分析入口)等。
(2)二级来源列表
在一些实施例中,在特殊的业务场景需要,仅通过一个来源不方便区分更详细的场景。因此在来源的基础上,引入二级来源的概念,并以此来源为基础维护一对多的关系链,例如,图7中,一级来源ID“49”中包括多个二级来源ID701。
(3)新建来源
在一些实施例中,当有一个新业务场景需要在内容中心投放内容时,可以在此平台上分配一个新来源供其使用。这里以创建一个新的二级来源为例,图8中,可以在来源配置界面801上填写二级来源信息,并在填写完成后通过触发确定按钮802即可分配成功。
(4)修改来源
在一些实施例中,图9中,当已有来源需要更新自己的业务描述、负责人时,可以在具体的来源条目上通过修改功能(即触发来源修改入口901),在来源修改界面902中更新为当前业务的最新信息。
(5)来源报表(即点击图中的“来源报表”按钮)
在一些实施例中,如果需要对某个来源进行数据分析,可以在指定的来源处查看来源报表(即触发图6中的来源报表入口603),此时会跳转到图10所示的弹窗101,并在弹窗101中列举出许多关键指标(即上述的数据分析结果),包括但不限于统计口径、入库量、可调度量、机审信息、人审信息、启用推荐信息等。
(6)数据导出
在一些实施例中,在来源报表中,如果用户想查看具体的内容详情,可以通过点击图10中的查看按钮102在全球广域网(WEB,World Wide Web)端展示内容rowkey以及部分关键指标字段,这些字段包括但不限于标题、类型、账号信息等。
在一些实施例中,也可以通过点击导出按钮103创建一个如图11所示的Excel文档111,用于进一步的数据分析。
下面,结合图12、图13、图14和图15说明本申请实施例中组合能力的具体实现方式,图12、图13、图14和图15是本申请实施例提供的内容分发处理方法的应用场景示意图。
(1)能力列表
在一些实施例中,图12中的能力列表121(即上述的服务列表)用于录入、配置单一能力,支持对能力的搜索、新增、调整(替换、变更)等功能。每个能力都拥有全局唯一的能力名称作为索引ID。每个能力都可以有不同的版本,用于兼容能力的替换和变更。
在一些实施例中,每个能力都保持统一的协议结构,录入能力时所需的能力信息也基本一致。同时支持频控保护,在新增或调整能力时可以通过图13中的服务配置界面131填写频控信息,可以有效避免下游过载问题。
(2)拓扑列表
在一些实施例中,提供可视化界面配置单一能力、组合能力的拓扑结构。每个拓扑结构都有全局唯一的名称ID作为索引,同时支持版本控制,以兼容拓扑的变更。图14中,拓扑列表界面141中包括多个拓扑,并且支持新增拓扑。
在一些实施例中,支持拓扑结构可视化的管理维护,在新增、调整能力时可以直接在拓扑列表界面141上进行操作,例如,当用户触发拓扑列表界面141中的任意拓扑时,显示如图15所示的拓扑详情界面151,在拓扑详情界面151中支持对拓扑进行重新编排,并且当用户触发其中的任意能力时,显示对应的能力详情界面152(即上述的服务详情界面),从而可以查看触发的能力的属性信息。
下面,结合图16和图17说明本申请实施例提供的内容分发处理方法的底层实现逻辑,图16和图17是本申请实施例提供的内容分发处理方法的原理示意图。
(一)来源管理
(1)克服的技术难点
1)权限管理:来源管理平台不只给内部员工使用,还会对外给其他部门提供服务支持。因此就有可能导致其他人员出现误操作的情况,比如新增了无效来源,或者修改了存量来源信息。此外,部分用户只需要查看、操作某些来源即可,如果将全量内容对外会导致用户体验不佳。
解决方法:将不同用户对不同来源的查看、修改、新增等功能,抽象为对权限的控制,为此独立出一个权限APPID管理服务,用于分角色控制来源的操作权限,避免误操作,提搞用户体验。
2)数据统计:在大数据内容里,虽然通过来源区分了业务场景,但是更重要的能力是需要对数据进行分析处理。基于此,需要整理归纳内容中的关键属性,并且支持在每天千万级别的内容量级里,能够快速统计出所需要的指标字段。
解决方法:利用大数据存储工具Hbase,以内容唯一ID(rowkey)作为索引标记,将关键指标字段(包括但不限于机审信息、人审信息、启用推荐、账号信息等)存储起来。同时结合数据落地,按天分区,将这批内容存储到数据库(DB,Database)中,以供数据分析使用。
(2)软件系统结构
在一些实施例中,图16中,来源管理平台依据功能可以划分为多个微服务,组织为微服务架构。各类服务包括:界面GUI、来源管理、权限APPID管理、报表服务、以及数据同步服务,下面具体说明这些服务。
1)界面GUI:提供可视化操作界面,便于用户操作平台系统。同时融合了其他功能的跳转链接,将此界面作为系统的统一入口,提高运营效率。
2)来源管理:处于来源平台的核心位置,提供来源分配、来源查询、新增/修改来源、维护来源与子来源的一对多关系链。底层操作云数据库(CDB,Cloud Database),用于存储来源描述、供应商、负责人等相关信息。
3)权限APPID管理:用于区分角色,并给角色分配可读、可写等权限功能。同时依据请求用户的企业名称,绑定对应角色,用于限制外部用户的操作权限,防止出现误操作的情况。
4)报表服务:提供数据报表、内容列表、数据导出等功能。该服务会在指定时间范围内,将对应来源的关键指标数据进行提取、再加工等操作,统计出对应的投放数据(如入库量、处理量)、机审数据(如机审通过率)、人审数据(如人审通过率)等。此外,还支持具体内容rowkey导出,便于进行更详细的数据分析。
5)数据同步服务:此服务用于在Hbase存储里,提取rowkey对应的元数据字段,包括但不限于入库时间、审核结果、启用态等。这些数据会落地到CDB中,用于数据报表进行统计与分析。
在一些实施例中,在技术方案的报表服务里,可以替换为查询Elasticsearch存储,同时数据同步服务将Hbase的内容同步到Elasticsearch中,从而不使用CDB作为元数据落地的存储。
(二)组合能力:
(1)克服的技术难点
1)区分能力类型,选择出哪些属于可以组合的能力:由于目前单一能力的类型十分庞大,比如视频PGC链路涉及到的单一能力就有150个左右,需要将这些能力按照功能编排为组合能力。
解决方法:使用脚本将配置里的依赖关系梳理汇总,并按照调用链输出依赖关系,该依赖关系可以确定能力所处的层级。然后按照能力描述的关键词,如人审、账号、图片、封面图等,划分为不同的处理功能。最后将相近层级和相似功能的单一能力,编排为对应的组合能力,以供拓扑使用。
(2)软件系统结构
在一些实施例中,图17中,软件系统结构包括:GUI、能力列表、拓扑列表、以及能力代理(Proxy),下面具体说明这些服务。
1)GUI:提供可视化的能力列表、拓扑列表,以供线上运营使用,提高人工操作效率。
2)能力列表:支持对能力的查询、新增、修改等操作,能够配置路由、频控等原子服务信息。
3)拓扑列表:支持对能力的编排,能够将单一能力、组合能力按照调用流程组织为业务场景所需的调用关系。
4)能力Proxy:由外部触发,会获取当前配置的拓扑结构和能力信息,按照指定的拓扑调用流程,触发各个能力的调用,完成对数据的加工操作。
在一些实施例中,组合能力是需要经过拓扑编排后,创建一个新拓扑,将该拓扑作为组合能力引入到其他的拓扑编排中。因此还可以单独使用一个平台维护组合能力的编排信息。
在一些实施例中,有的能力在使用过程中会需要来源信息,以便于提供个性化的处理,例如:从企鹅号来源过来的图文、视频,就不需要再进行视频转码、图片内链化,因为已经是可以直接对外展示了,这样处理的效率也能提高,只需要记录信息即可。其他大部分来源的内容都需要进行转码、内链化,不能直接对外提供原始链接。
综上,本申请实施例提供的来源管理所产生的有益效果包括:(1)在每天新增千万级海量数据的背景下,按照不同的业务场景分配对应的来源,利于快速追溯到内容源头,便于问题的定位和监控。(2)支持子来源功能,能够在原本的基础上再划分出更详细的业务场景,同时维护了来源与子来源的一对多关系链,便于索引查询。(3)拥有可视化的操作界面,提高运营效率。(4)能够在海量数据中,以来源为纬度进行报表统计、数据分析、内容导出等操作。
本申请实施例提供的组合能力所产生的有益效果包括:(1)简化了仅对单一能力进行拓扑编排的复杂度,使拓扑结构更加清晰分明,减少了人工梳理的成本。(2)支持可视化界面的拓扑管理,可以直接线上运营,减少了人工配置的调整和服务发布,使整个系统更加轻量级。
下面结合图3说明本申请实施例提供的内容分发处理装置的实施为软件模块的示例性结构。
在一些实施例中,如图3所示,存储在存储器240的内容分发处理装置243中的软件模块可以包括:获取模块2431,用于获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据依赖关系确定每个单一服务的层级;编排模块2432,用于根据单一服务的层级和功能,将多个单一服务进行多种不同方式的编排处理,得到多个组合服务;组织模块2433,用于按照用于处理特定类型的内容的服务调用顺序,在多个组合服务和多个单一服务中选取多个服务,并将选取的多个服务组织为对应特定类型的拓扑结构;确定模块2434,用于在多个特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;分发模块2435,用于依次调用目标拓扑结构中包括的服务对待分发内容进行处理,并对处理后的待分发内容执行分发操作。
在上述方案中,获取模块2431,还用于获取服务列表中每个单一服务的属性信息,并根据每个单一服务的属性信息中的父节点属性生成调用链,其中,调用链的入口对应的单一服务的属性信息中未包括父节点属性;将调用链的入口对应的单一服务确定为最高层级的单一服务;针对调用链中除最高层级的单一服务之外的其余单一服务执行以下处理:确定单一服务与属性信息中的父节点属性对应的父服务之间存在依赖关系,并将单一服务的层级确定为父服务的下一个层级。
在上述方案中,编排模块2432,还用于针对每个单一服务执行以下处理:获取单一服务的描述信息中的关键词,将与关键词匹配的功能确定为单一服务的功能;在多个单一服务中,多次执行以下操作:选取满足预设条件至少之一的多个待组合的单一服务进行编排处理,对应得到多个组合服务;其中,每次选取的多个待组合的单一服务不完全相同;其中,预设条件包括:待组合的单一服务的层级之间的差值小于层级差值阈值;待组合的单一服务的功能之间的相似度大于功能相似度阈值。
在上述方案中,确定模块2434,还用于获取待分发内容的类型;从拓扑列表中读取与多个特定类型一一对应的多个拓扑结构,基于待分发内容的类型查找与待分发内容的类型匹配的目标拓扑结构。
在上述方案中,分发模块2435,还用于获取目标拓扑结构中包括的每个服务之间的层级关系;调用层级关系中最高层级的服务对待分发内容进行处理,并将处理结果传递至下一个层级的服务,以使下一个层级的服务对处理结果进行处理,直至层级关系中最低层级对应的服务对上一个层级的服务传递的处理结果进行处理后结束。
在上述方案中,分发模块2435,还用于获取待分发内容的来源信息,并确定对应来源信息的过滤服务,其中,过滤服务是在待分发内容的处理过程中不需要执行的服务;当目标拓扑结构中包括过滤服务时,在对待分发内容进行处理的过程中,跳过调用过滤服务对待分发内容进行处理。
在上述方案中,分发模块2435,还用于针对目标拓扑结构中包括的每个服务执行以下处理:获取服务的频控信息和最大重试次数;根据服务的频控信息控制调用服务对待分发内容进行处理的频率;当调用服务对待分发内容进行处理失败时,重复调用服务对待分发内容进行处理,直至重复调用的次数达到最大重试次数时,停止重复调用服务。
在上述方案中,获取模块2431,还用于在人机交互界面中显示服务列表界面,服务列表界面包括服务列表;响应于在服务列表界面中接收的服务新增操作,显示服务配置界面,并通过服务配置界面获取配置的服务和对应的属性信息;响应于在服务配置界面接收的确认操作,将配置的服务和对应的属性信息建立映射关系,并将建立映射关系的服务和对应的属性信息的新增至服务列表。
在上述方案中,获取模块2431,还用于在人机交互界面中显示服务列表界面,服务列表界面包括服务列表和服务搜索入口;响应于针对服务搜索入口的搜索操作,获取搜索操作在服务搜索入口提交的索引信息;在服务列表中查找与索引信息匹配的至少一个服务,并显示与索引信息匹配的至少一个服务、以及对应的属性信息。
在上述方案中,获取模块2431,还用于在人机交互界面中显示服务列表界面,服务列表界面包括服务列表和服务修改入口;响应于针对服务修改入口的触发操作,显示触发的服务修改入口对应的服务修改界面,其中,服务修改界面中包括对应服务修改入口的服务的属性信息;响应于在服务修改界面接收的修改操作,获取修改操作提交的修改后的属性信息;响应于在服务修改界面接收的确认操作,根据修改后的属性信息对服务列表中对应服务修改入口的服务的属性信息进行更新。
在上述方案中,多个特定类型分别对应的拓扑结构是存储在拓扑列表中的;内容分发处理装置243还包括:拓扑模块,用于在人机交互界面中显示拓扑列表界面,拓扑列表界面包括拓扑列表;响应于在拓扑列表界面中接收的拓扑新增操作,显示拓扑配置界面,并通过拓扑配置界面获取配置的拓扑结构;响应于在拓扑配置界面接收的确认操作,将配置的拓扑结构新增至拓扑列表。
在上述方案中,拓扑模块,还用于响应于针对拓扑列表中的拓扑结构的查看操作,显示对应的拓扑详情界面,其中,拓扑详情界面中包括拓扑结构;响应于针对拓扑结构的编排操作,对拓扑结构进行更新,并将更新后的拓扑结构同步更新至拓扑列表中;响应于针对拓扑结构中的被选中的任意服务的查看操作,显示对应任意服务的服务详情界面,并在服务详情界面中显示任意服务在拓扑结构中的属性信息。
在上述方案中,拓扑列表界面中包括拓扑搜索入口;拓扑模块,还用于响应于针对拓扑搜索入口的搜索操作,获取搜索操作在拓扑搜索入口提交的索引信息;在拓扑列表中查找与索引信息匹配的至少一个拓扑结构,并显示与索引信息匹配的至少一个拓扑结构。
在上述方案中,内容分发处理装置243还包括:来源模块,用于根据待分发内容的分配依据信息,对待分发内容分配对应的来源标识、以及描述信息;其中,分配依据信息包括以下至少之一:待分发内容的类型、待分发内容的投入方式、待分发内容的投放通道;在人机交互界面中显示内容来源管理界面,其中,内容来源管理界面包括待分发内容的来源标识、描述信息、以及对应的数据分析入口。
在上述方案中,来源模块,还用于响应于针对数据分析入口的触发操作,对待分发内容的来源信息进行数据分析,得到数据分析结果,并显示数据分析结果;其中,数据分析结果的类型包括以下至少之一:统计口径、入库量、可调度量、机审信息、人审信息、启用推荐信息。
在上述方案中,来源模块,还用于响应于针对数据分析结果的详情查看操作,在人机交互界面中显示分析结果详情界面,并在分析结果详情界面中显示待分发内容的标识信息、以及对应的关键指标信息;响应于针对数据分析结果的列表导出操作,创建表格文档,并在表格文档中填充待分发内容的标识信息、以及对应的关键指标信息。
在上述方案中,来源模块,还用于在内容来源管理界面中显示对应来源标识的子来源标识查看入口;响应于针对子来源标识查看入口的触发操作,显示与来源标识对应的至少一个子来源标识。
在上述方案中,来源模块,还用于响应于在内容来源管理界面中接收的来源新增操作,显示来源配置界面;响应于在来源配置界面接收的配置操作,获取配置操作配置的来源信息;响应于在来源配置界面接收的确认操作,将配置操作配置的来源信息新增至数据库。
在上述方案中,来源模块,还用于通过权限管理服务确定登录账号的操作权限;当登录账号的操作权限能够用于通过来源配置界面新增来源时,确定将执行显示来源配置界面的操作。
在上述方案中,内容来源管理界面中包括对应待分发内容的来源修改入口;来源模块,还用于响应于针对来源修改入口的触发操作,显示对应待分发内容的来源修改界面,其中,来源修改界面中包括待分发内容的来源信息;响应于在来源修改界面接收的修改操作,获取修改操作提交的修改后的来源信息;响应于在来源修改界面接收的确认操作,根据修改后的来源信息对数据库中对应待分发内容的来源信息进行更新。
在一些实施例中,可以将本申请实施例提供的拓扑列表上传至区块链网络中,以使区块链网络响应于针对与待分发内容的类型匹配的目标拓扑结构的获取请求,将目标拓扑结构发送至服务器中,从而使得服务器依次调用目标拓扑结构中包括的服务对待分发内容进行处理,并对处理后的待分发内容执行分发操作。本申请实施例通过区块链网络中存储的目标拓扑结构对待分发内容进行处理,能够提高内容处理的准确性。
以电子设备是计算机设备为例,本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行本申请实施例上述的内容分发处理方法。
本申请实施例提供一种存储有计算机可执行指令的计算机可读存储介质,其中存储有计算机可执行指令,当计算机可执行指令被处理器执行时,将引起处理器执行本申请实施例提供的内容分发处理方法,例如,图4示出的内容分发处理方法,计算机包括智能终端和服务器在内的各种计算设备。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,计算机可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,计算机可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标注语言文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,计算机可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
综上所述,本申请实施例根据单一服务的层级和功能将多个单一服务编排成组合服务,并按照用于处理特定类型的内容的服务调用顺序,将多个服务组织为对应特定类型的拓扑结构,以便于后续根据待分发内容的类型调用对应的目标拓扑结构对待分发内容进行处理和分发,能够将单一服务之间的关系进行简化,降低内容分发链路的复杂性,降低了运营维护的难度,从而提高了内容分发的效率。
以上所述,仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本申请的保护范围之内。
Claims (15)
1.一种内容分发处理方法,其特征在于,所述方法包括:
获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据所述依赖关系确定每个所述单一服务的层级,其中,所述内容包括图文和视频至少之一;
从所述多个单一服务中选取满足预设条件的多个待组合的单一服务进行编排处理,对应得到多个组合服务,其中,所述预设条件包括以下至少之一:所述待组合的单一服务的层级之间的差值小于层级差值阈值;所述待组合的单一服务的功能之间的相似度大于功能相似度阈值;
按照用于处理所述特定类型的内容的服务调用顺序,在所述多个组合服务和所述多个单一服务中选取多个服务,并将选取的所述多个服务组织为对应所述特定类型的拓扑结构;
在多个所述特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;
依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理,并对处理后的所述待分发内容执行分发操作。
2.根据权利要求1所述的方法,其特征在于,所述获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据所述依赖关系确定每个所述单一服务的层级,包括:
获取所述服务列表中每个所述单一服务的属性信息,并根据每个所述单一服务的属性信息中的父节点属性生成调用链,其中,所述调用链的入口对应的单一服务的属性信息中未包括父节点属性;
将所述调用链的入口对应的单一服务确定为最高层级的单一服务;
针对所述调用链中除所述最高层级的单一服务之外的其余单一服务执行以下处理:
确定所述单一服务与所述属性信息中的父节点属性对应的父服务之间存在依赖关系,并将所述单一服务的层级确定为所述父服务的下一个层级。
3.根据权利要求1所述的方法,其特征在于,所述从所述多个单一服务中选取满足预设条件的多个待组合的单一服务进行编排处理,对应得到多个组合服务之前,所述方法还包括:
针对每个所述单一服务执行以下处理:获取所述单一服务的描述信息中的关键词,将与所述关键词匹配的功能确定为所述单一服务的功能。
4.根据权利要求1所述的方法,其特征在于,所述在多个所述特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构,包括:
获取所述待分发内容的类型;
从拓扑列表中读取与多个所述特定类型一一对应的多个拓扑结构,基于所述待分发内容的类型查找与所述待分发内容的类型匹配的目标拓扑结构。
5.根据权利要求1所述的方法,其特征在于,所述依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理,包括:
获取所述目标拓扑结构中包括的每个服务之间的层级关系;
调用所述层级关系中最高层级的服务对所述待分发内容进行处理,并将处理结果传递至下一个层级的服务,以使
所述下一个层级的服务对所述处理结果进行处理,直至所述层级关系中最低层级对应的服务对上一个层级的服务传递的处理结果进行处理后结束。
6.根据权利要求5所述的方法,其特征在于,在所述依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理时,所述方法还包括:
获取所述待分发内容的来源信息,并确定对应所述来源信息的过滤服务,其中,所述过滤服务是在所述待分发内容的处理过程中不需要执行的服务;
当所述目标拓扑结构中包括所述过滤服务时,在对所述待分发内容进行处理的过程中,跳过调用所述过滤服务对所述待分发内容进行处理。
7.根据权利要求1所述的方法,其特征在于,在所述依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理时,所述方法还包括:
针对所述目标拓扑结构中包括的每个所述服务执行以下处理:
获取所述服务的频控信息和最大重试次数;
根据所述服务的频控信息控制调用所述服务对所述待分发内容进行处理的频率;
当调用所述服务对所述待分发内容进行处理失败时,重复调用所述服务对所述待分发内容进行处理,直至重复调用的次数达到所述最大重试次数时,停止重复调用所述服务。
8.根据权利要求1所述的方法,其特征在于,在所述获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系之前,所述方法还包括:
在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表;
响应于在所述服务列表界面中接收的服务新增操作,显示服务配置界面,并通过所述服务配置界面获取配置的服务和对应的属性信息;
响应于在所述服务配置界面接收的确认操作,将所述配置的服务和对应的属性信息建立映射关系,并将建立所述映射关系的服务和对应的属性信息的新增至所述服务列表。
9.根据权利要求1所述的方法,其特征在于,在所述获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系之前,所述方法还包括:
在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表和服务搜索入口;
响应于针对所述服务搜索入口的搜索操作,获取所述搜索操作在所述服务搜索入口提交的索引信息;
在所述服务列表中查找与所述索引信息匹配的至少一个服务,并显示与所述索引信息匹配的至少一个服务、以及对应的属性信息。
10.根据权利要求1所述的方法,其特征在于,在所述获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系之前,所述方法还包括:
在人机交互界面中显示服务列表界面,所述服务列表界面包括所述服务列表和服务修改入口;
响应于针对所述服务修改入口的触发操作,显示触发的所述服务修改入口对应的服务修改界面,其中,所述服务修改界面中包括对应所述服务修改入口的服务的属性信息;
响应于在所述服务修改界面接收的修改操作,获取所述修改操作提交的修改后的属性信息;
响应于在所述服务修改界面接收的确认操作,根据所述修改后的属性信息对服务列表中对应所述服务修改入口的服务的属性信息进行更新。
11.根据权利要求1所述的方法,其特征在于,多个所述特定类型分别对应的拓扑结构是存储在拓扑列表中的;所述方法还包括:
在人机交互界面中显示拓扑列表界面,所述拓扑列表界面包括所述拓扑列表;
响应于在所述拓扑列表界面中接收的拓扑新增操作,显示拓扑配置界面,并通过所述拓扑配置界面获取配置的拓扑结构;
响应于在所述拓扑配置界面接收的确认操作,将所述配置的拓扑结构新增至所述拓扑列表。
12.根据权利要求11所述的方法,其特征在于,在人机交互界面中显示拓扑列表界面之后,所述方法还包括:
响应于针对所述拓扑列表中的拓扑结构的查看操作,显示对应的拓扑详情界面,其中,所述拓扑详情界面中包括所述拓扑结构;
响应于针对所述拓扑结构的编排操作,对所述拓扑结构进行更新,并将更新后的所述拓扑结构同步更新至所述拓扑列表中;
响应于针对所述拓扑结构中的被选中的任意服务的查看操作,显示对应所述任意服务的服务详情界面,并在所述服务详情界面中显示所述任意服务在所述拓扑结构中的属性信息。
13.一种内容分发处理装置,其特征在于,所述装置包括:
获取模块,用于获取服务列表中用于处理特定类型的内容的多个单一服务之间的依赖关系,根据所述依赖关系确定每个所述单一服务的层级,其中,所述内容包括图文和视频至少之一;
编排模块,用于从所述多个单一服务中选取满足预设条件的多个待组合的单一服务进行编排处理,对应得到多个组合服务,其中,所述预设条件包括以下至少之一:所述待组合的单一服务的层级之间的差值小于层级差值阈值;所述待组合的单一服务的功能之间的相似度大于功能相似度阈值;
组织模块,用于按照用于处理所述特定类型的内容的服务调用顺序,在所述多个组合服务和所述多个单一服务中选取多个服务,并将选取的所述多个服务组织为对应所述特定类型的拓扑结构;
确定模块,用于在多个所述特定类型分别对应的拓扑结构中,确定与待分发内容的类型匹配的目标拓扑结构;
分发模块,用于依次调用所述目标拓扑结构中包括的服务对所述待分发内容进行处理,并对处理后的所述待分发内容执行分发操作。
14.一种电子设备,其特征在于,包括:
存储器,用于存储计算机可执行指令;
处理器,用于执行所述存储器中存储的计算机可执行指令时,实现权利要求1至12任一项所述的内容分发处理方法。
15.一种计算机可读存储介质,其特征在于,存储有计算机可执行指令,所述计算机可执行指令被执行时用于实现权利要求1至12任一项所述的内容分发处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110734229.8A CN113259714B (zh) | 2021-06-30 | 2021-06-30 | 内容分发处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110734229.8A CN113259714B (zh) | 2021-06-30 | 2021-06-30 | 内容分发处理方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113259714A CN113259714A (zh) | 2021-08-13 |
CN113259714B true CN113259714B (zh) | 2021-10-15 |
Family
ID=77190232
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110734229.8A Active CN113259714B (zh) | 2021-06-30 | 2021-06-30 | 内容分发处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113259714B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113810234B (zh) * | 2021-09-18 | 2023-04-18 | 北京字跳网络技术有限公司 | 微服务链路拓扑处理方法、装置及可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011004294A (ja) * | 2009-06-22 | 2011-01-06 | Nippon Telegr & Teleph Corp <Ntt> | ネットワークトポロジ設計装置、ネットワークトポロジ設計方法、およびプログラム |
US10091285B1 (en) * | 2006-11-15 | 2018-10-02 | Conviva Inc. | Distributing information over a network |
CN109189650A (zh) * | 2018-08-21 | 2019-01-11 | 贵州电网有限责任公司 | 一种it运维系统的业务系统拓扑图展现方法 |
CN110708201A (zh) * | 2019-10-14 | 2020-01-17 | 中国人民解放军32039部队 | 运维服务化管控方法及装置 |
CN112087379A (zh) * | 2019-06-12 | 2020-12-15 | 中兴通讯股份有限公司 | 业务链的编排方法及装置、存储介质和电子装置 |
US10938661B1 (en) * | 2019-12-05 | 2021-03-02 | Cisco Technology, Inc. | Service heatmap-based telemetry feedback loop |
CN112685409A (zh) * | 2020-12-24 | 2021-04-20 | 北京浪潮数据技术有限公司 | Paas应用服务拓扑生成方法、装置及可读存储介质 |
CN112769643A (zh) * | 2020-12-28 | 2021-05-07 | 北京达佳互联信息技术有限公司 | 资源调度方法、装置、电子设备及存储介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10230580B2 (en) * | 2013-10-30 | 2019-03-12 | Hewlett Packard Enterprise Development Lp | Management of the lifecycle of a cloud service modeled as a topology |
CN106130785A (zh) * | 2016-07-20 | 2016-11-16 | 北京星网锐捷网络技术有限公司 | 重保业务的管理方法 |
CA3075834A1 (en) * | 2017-09-15 | 2019-03-21 | Imagine Communications Corp. | Systems and methods for production of fragmented video content |
CN109254859B (zh) * | 2018-09-12 | 2021-10-26 | 中国人民解放军国防科技大学 | 一种多层控制的自适应微服务系统 |
CN110673962A (zh) * | 2019-08-27 | 2020-01-10 | 腾讯科技(深圳)有限公司 | 一种内容流处理方法、装置、设备及介质 |
-
2021
- 2021-06-30 CN CN202110734229.8A patent/CN113259714B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10091285B1 (en) * | 2006-11-15 | 2018-10-02 | Conviva Inc. | Distributing information over a network |
JP2011004294A (ja) * | 2009-06-22 | 2011-01-06 | Nippon Telegr & Teleph Corp <Ntt> | ネットワークトポロジ設計装置、ネットワークトポロジ設計方法、およびプログラム |
CN109189650A (zh) * | 2018-08-21 | 2019-01-11 | 贵州电网有限责任公司 | 一种it运维系统的业务系统拓扑图展现方法 |
CN112087379A (zh) * | 2019-06-12 | 2020-12-15 | 中兴通讯股份有限公司 | 业务链的编排方法及装置、存储介质和电子装置 |
CN110708201A (zh) * | 2019-10-14 | 2020-01-17 | 中国人民解放军32039部队 | 运维服务化管控方法及装置 |
US10938661B1 (en) * | 2019-12-05 | 2021-03-02 | Cisco Technology, Inc. | Service heatmap-based telemetry feedback loop |
CN112685409A (zh) * | 2020-12-24 | 2021-04-20 | 北京浪潮数据技术有限公司 | Paas应用服务拓扑生成方法、装置及可读存储介质 |
CN112769643A (zh) * | 2020-12-28 | 2021-05-07 | 北京达佳互联信息技术有限公司 | 资源调度方法、装置、电子设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
基于云平台的多约束流媒体内容分发方法研究;雷起;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150215;I139-24 * |
Also Published As
Publication number | Publication date |
---|---|
CN113259714A (zh) | 2021-08-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107819824B (zh) | 一种城市数据开放与信息服务系统及服务方法 | |
US20180196867A1 (en) | System, method and computer program product for analytics assignment | |
CN106022007B (zh) | 面向生物组学大数据计算的云平台系统及方法 | |
CN112685385A (zh) | 一种用于智慧城市建设的大数据平台 | |
WO2020041127A1 (en) | Systems and methods for blockchain interlinking and relationships | |
CN107077389A (zh) | 用于在多租户应用服务器环境中使用全局运行时的系统和方法 | |
CN107077388A (zh) | 用于在多租户应用服务器环境中提供端到端生命周期的系统和方法 | |
CN105516233A (zh) | 用于在一个或多个云系统上便携部署应用的方法和系统 | |
CN113067709B (zh) | 基于云服务的计费方法、装置、设备及可读存储介质 | |
CN116185754A (zh) | 数据监控方法、装置、设备及计算机存储介质、程序产品 | |
CN112801607A (zh) | 一种管理服务平台及构建方法 | |
CN113259714B (zh) | 内容分发处理方法、装置、电子设备及存储介质 | |
CN114254606A (zh) | 微服务框架模型 | |
CN115857886A (zh) | 基层政务应用的低代码开发平台 | |
CN111048164A (zh) | 一种医学大数据长期保存系统 | |
CN102316128A (zh) | 一种用于生成网络服务的方法及装置 | |
CN107896242B (zh) | 一种服务共享方法及装置 | |
US20230319054A1 (en) | Tenant-specific solution subscriptions for an extensibility platform | |
CN112035466A (zh) | 一种区块链查询外置索引开发框架 | |
CN113626701A (zh) | 基于页面的数据管理方法、系统、电子装置和存储介质 | |
CN114253546A (zh) | 代码的生成方法、装置、存储介质及电子装置 | |
CN115017185A (zh) | 一种数据处理方法、装置及存储介质 | |
CN114443293A (zh) | 一种大数据平台的部署系统及方法 | |
CN115705189A (zh) | 展示界面构建方法及相关装置 | |
CN117009327B (zh) | 一种数据处理方法、装置及计算机设备、介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40050116 Country of ref document: HK |