CN107426023A - 云平台日志收集和转发方法、系统、设备及存储介质 - Google Patents
云平台日志收集和转发方法、系统、设备及存储介质 Download PDFInfo
- Publication number
- CN107426023A CN107426023A CN201710600185.3A CN201710600185A CN107426023A CN 107426023 A CN107426023 A CN 107426023A CN 201710600185 A CN201710600185 A CN 201710600185A CN 107426023 A CN107426023 A CN 107426023A
- Authority
- CN
- China
- Prior art keywords
- daily record
- event
- application identities
- cloud platform
- configuration information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/02—Standardisation; Integration
- H04L41/0246—Exchanging or transporting network management information using the Internet; Embedding network management web servers in network elements; Web-services-based protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/02—Topology update or discovery
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Debugging And Monitoring (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供了一种云平台日志收集和转发方法、系统、设备及存储介质,该方法包括获取各个运行的事件所对应的应用标识;根据事件所对应的应用标识查找对应的日志配置信息,并根据日志配置信息收集事件所对应的日志;获取待转发的日志所对应的应用标识;以及根据日志所对应的应用标识查找对应的路由转发规则,并据此转发对应的日志。本发明动态获取当前日志配置信息和路由转发规则,应用被容器云平台动态调度或扩缩容之后,宿主机上的日志收集模块无需预先配置,能够快速地动态感知到运行在本机上的应用;通过动态获取该应用的日志配置信息,执行日志收集行为,同时相应地动态获取日志的路由转发规则,对应用的日志进行个性化的动态路由和转发。
Description
技术领域
本发明涉及云平台技术领域,尤其涉及一种动态获取当前日志配置信息和路由转发规则的云平台日志收集和转发方法、系统、设备及存储介质。
背景技术
当前,以Docker为代表的容器技术带来整个基础系统的技术革新,改变了开发、测试、交付和运行的流程和方式。一台物理机或者虚拟机上可以运行多个容器,容器之间文件系统、网络等资源互相隔离,该物理机和虚拟机也即宿主机。该技术使得应用以容器为单位进行调度、运行和扩缩容,调度和扩缩容甚至可以动态进行,与传统的基于物理机和虚拟机的方式相比,周期大大缩短。
日志系统是分布式系统中不可或缺的一环,在传统的方式中,应用的日志采集和传输是通过预先知道机器分配的情况下,进行预先的配置,无法适应适应容器云时代的动态调度场景。
而当前以Docker为代表的容器方案在处理日志时,多以直接输出到标准输出和标准错误输出的方式来获取应用的日志;或者将应用的日志通过挂载宿主机数据卷的方式,输出到宿主机的固定目录,再由外围进行采集。前一种方式并没有给出日志收集和管理的方案,留给系统使用方自己实现;后一种方案会限定应用日志输出的目录,而且外围的日志收集系统不能很好地发现新的需要采集的日志。
特别地,在一种现有的容器日志管理方式(CN 106383852 A)中,对应用的日志配置必须有预先约定的规范,包括日志的输出路径、格式等信息,但是也没有指出如何让外围日志收集系统及时发现新的需要收集的日志。这些方案基于的日志配置信息均是通过静态配置或者约定,无法做到根据应用进行动态配置。
而且,现有方案也无法满足用户需要对应用日志路由转发做出个性化动态配置的需求。比如,应用的拥有者可能动态调整日志的转发目的地,转发到监控报警系统或者大数据分析平台,而现有的日志转发方法却无法满足用户不同的需求。
发明内容
针对现有技术中的问题,本发明的目的在于提供一种云平台日志收集和转发方法、系统、设备及存储介质,动态获取当前日志配置信息和路由转发规则,解决了在容器云动态调度和扩缩容的情况下,对事件的自动发现、个性化地动态配置以及转发的问题,大大提高日志收集和转发的灵活性。
本发明实施例提供一种云平台日志收集和转发方法,所述方法包括如下步骤:
创建并存储多种应用标识所对应的日志配置信息和路由转发规则;
创建并运行至少一事件;
获取各个运行的事件所对应的应用标识;
根据运行的事件所对应的应用标识查找对应的日志配置信息,并根据所述日志配置信息收集运行的事件所对应的日志;
获取待转发的日志所对应的应用标识;以及
根据待转发的日志所对应的应用标识查找对应的路由转发规则,并根据所述路由转发规则转发对应的日志。
可选地,创建一事件时,将该事件所对应的应用标识插入至对应的事件通知信息;
所述获取各个运行的事件所对应的应用标识,包括如下步骤:
获取运行的事件所对应的事件通知信息;
从获取的事件通知信息中提取事件所对应的应用标识。
可选地,还包括如下步骤:
创建至少一容器,为各个所述容器匹配所对应的容器标识;
读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;
建立并存储所述容器标识和所述应用标识的对应关系。
可选地,创建一事件时,将创建该事件的容器所对应的容器标识插入至对应的事件通知信息;
所述获取各个运行的事件所对应的应用标识,包括如下步骤:
获取运行的事件所对应的事件通知信息;
从获取的事件通知信息中提取对应的容器标识;
获取该容器标识所对应的应用标识,作为运行的事件所对应的应用标识。
可选地,还包括如下步骤:
接收用户输入的日志配置更新信息,所述日志配置更新信息包括待更新的应用标识和待更新的日志配置信息;
使用所述待更新的日志配置信息替换所述待更新的应用标识当前对应的日志配置信息。
可选地,还包括如下步骤:
实时监听配置中心中对应的日志配置信息变化通知;
判断是否接收到日志配置信息变化通知;
如果接收到,则根据日志配置信息变化通知更新当前使用的日志配置信息;
如果未接收到,则保持当前使用的日志配置信息不变。
可选地,所述日志配置信息包括日志存储路径、日志所在路径的匹配模式、日志清理规则和日志格式中的至少一种。
可选地,还包括如下步骤:
接收用户输入的转发规则更新信息,所述转发规则更新信息包括待更新的应用标识和待更新的路由转发规则;
使用所述待更新的路由转发规则替换所述待更新的应用标识当前对应的路由转发规则。
可选地,还包括如下步骤:
实时监听配置中心中对应的路由转发规则变化通知;
判断是否接收到路由转发规则变化通知;
如果接收到,则根据路由转发规则变化通知更新当前使用的路由转发规则;
如果未接收到,则保持当前使用的路由转发规则不变。
可选地,所述路由转发规则包括转发目的地、转发协议、压缩需求和降采样需求中的至少一种。
可选地,所述获取待转发的日志所对应的应用标识,还包括如下步骤:
创建日志转发指令,所述日志转发指令中包括待转发的日志和日志所对应的应用标识;
获取所述日志转发指令,从所述日志转发指令中提取日志所对应的应用标识。
可选地,还包括如下步骤:
判断当前获取日志的事件是否运行完成;
如果运行完成,则停止收集该事件的日志,将收集完成的日志作为待转发的日志并创建日志转发指令;
如果运行未完成,则继续收集该事件的日志,并进一步判断是否到达预设节点;
如果到达预设节点,则将当前预设节点和前一预设节点之间收集的日志作为待转发的日志并创建日志转发指令。
可选地,所述多种应用标识所对应的日志配置信息包括各种应用标识中至少一阶段分别对应的日志配置信息;
所述查找对应的日志配置信息,包括如下步骤:
判断运行的事件当前处于所对应的应用标识的阶段;
根据运行的事件所对应的应用标识以及当前的阶段查找对应的日志配置信息。
可选地,所述多种应用标识所对应的路由转发规则包括各种应用标识中至少一阶段分别对应的路由转发规则;
所述查找对应的路由转发规则,包括如下步骤:
判断待转发的日志所对应的应用标识以及所对应的应用标识的阶段;
根据待转发的日志所对应的应用标识以及阶段查找对应的路由转发规则。
本发明实施例还提供一种云平台日志收集和转发系统,用于实现所述的云平台收集和采集方法,所述云平台创建至少一事件,所述系统包括:
配置中心,用于创建并存储多种应用标识所对应的日志配置信息和路由转发规则;
日志收集模块,用于获取各个运行的事件所对应的应用标识;根据事件所对应的应用标识查找对应的日志配置信息,以及根据所述日志配置信息收集事件所对应的日志;
日志汇聚模块,用于获取待转发的日志所对应的应用标识;根据日志所对应的应用标识查找对应的路由转发规则,以及根据所述路由转发规则转发对应的日志。
可选地,还包括容器管理模块,用于创建至少一容器,为各个所述容器匹配所对应的容器标识;读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;以及建立并存储所述容器标识和所述应用标识的对应关系。
本发明实施例还提供一种云平台日志收集和转发设备,包括:
处理器;
存储器,其中存储有所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行所述的云平台日志收集和转发方法的步骤。
本发明实施例还提供一种计算机可读存储介质,用于存储程序,所述程序被执行时实现所述的云平台日志收集和转发方法的步骤。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
本发明所提供的云平台日志收集和转发方法、系统、设备及存储介质具有下列优点:
本发明动态获取当前日志配置信息和路由转发规则,应用被容器云平台动态调度或扩缩容之后,宿主机上的日志收集模块无需预先配置,能够快速地动态感知到运行在本机上的应用,通过动态获取该应用的日志配置信息,执行日志收集行为,同时相应地动态获取日志的路由转发规则,对应用的日志进行个性化的动态路由和转发;由此大大提高了容器云平台动态调度情况下的日志收集系统的适应性和灵活性,减少运维管理的成本,满足用户的多样化需求;另外,本发明没有对日志的存放路径有特别的规范和要求,因此本发明并不限于以容器技术实现的云平台,对于例如虚拟机等其他技术实现的云平台也同样可以适用,具有广泛的应用范围。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显。
图1是本发明一实施例的云平台日志收集和转发方法的流程图;
图2是本发明一实施例的获取各个运行的事件所对应的应用标识的流程图;
图3是本发明一实施例的建立事件和日志配置信息对应关系的示意图;
图4是本发明一实施例的建立日志和路由转发规则对应关系的示意图;
图5是本发明一实施例的云平台日志收集和转发系统的结构示意图;
图6是本发明一实施例的云平台日志收集和转发系统的各个功能模块之间数据交互的过程示意图;
图7是本发明一实施例的云平台日志收集和转发设备的结构示意图;
图8是本发明一实施例的计算机存储介质的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
为了实现上述目的,本发明实施例提供一种云平台日志收集和转发方法。在该实施例中,以容器技术实现的云平台为例进行说明,但可以理解的是,本发明并不限于应用于以容器技术实现的云平台中。
如图1所示,所述云平台日志收集和转发方法包括如下步骤:
S100:创建并存储多种应用标识所对应的日志配置信息和路由转发规则;此处应用标识指的是应用程序的标识码,对于不同的应用程序可以设置不同的日志配置信息,并且设置不同的路由转发规则。在这一步骤中,存储应用标识和日志配置信息以及路由转发规则的对应关系,以便后续步骤调用;
S200:创建并运行至少一事件;此处创建事件例如可以是云平台中各个容器分别创建与应用程序关联的事件,但不限于此;
S300:获取各个运行的事件所对应的应用标识;即确定各个运行的事件与应用标识之间的对应关系;
S400:根据运行的事件所对应的应用标识查找对应的日志配置信息,并根据所述日志配置信息收集运行的事件所对应的日志;
此处,所述日志配置信息包括日志存储路径、日志所在路径的匹配模式、日志清理规则和日志格式中的至少一种,即定义了日志收集过程中的一些配置参数。可理解的是,在实际应用中,日志配置信息可以根据用户需要自己调整和配置,而不限于此处列举的类型。
S500:获取待转发的日志所对应的应用标识,即在需要传输日志时,确定待转发的日志与应用标识之间的对应关系;以及
S600:根据待转发的日志所对应的应用标识查找对应的路由转发规则,并根据所述路由转发规则转发对应的日志。
所述路由转发规则包括转发目的地、转发协议、压缩需求和降采样需求中的至少一种,即定义了日志转发过程中的一些配置参数。可理解的是,在实际应用中,路由转发规则可以根据用户需要自己调整和配置,而不限于此处列举的类型。
在本发明中,日志配置信息和路由转发规则的创建和更新过程中只要跟应用标识关联即可;在日志收集时,根据事件的应用标识获取当前日志配置信息,在日志转发时,根据日志的应用标识获取当前路由转发规则,从而保证应用被容器云平台动态调度或扩缩容之后,宿主机上的日志收集模块无需预先配置,能够快速地动态感知到运行在本机上的应用,通过动态获取该应用的日志配置信息,执行日志收集行为,同时相应地动态获取日志的路由转发规则,对应用的日志进行个性化的动态路由和转发。
可选地,所述云平台日志收集和转发方法还包括如下步骤:
创建至少一容器,为各个所述容器匹配所对应的容器标识,即建立容器和容器标识之间的对应关系,此处容器标识可以是人为设定的各个容器的标识码,也可以是根据容器某一属性信息的节选等等;
读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;可以是从容器的属性信息中提取与应用程序相关的信息,对其进行分析得到容器所属的应用程序,进一步确定容器所属的应用标识;
根据容器的容器标识以及容器的应用标识确定容器标识和应用标识的对应关系,并建立并存储所述容器标识和所述应用标识的对应关系,从而可以实现应用标识和容器标识之间互查。
进一步地,在创建一事件时,可以将创建该事件的容器所对应的容器标识插入至对应的事件通知信息。
如图2所示,所述获取各个运行的事件所对应的应用标识,可以包括如下步骤:
S301:实时监听事件通知信息;事件在创建完成后,会发出事件通知信息,因此可以通过实时监听事件通知信息来获知事件创建信息;
S302:获取运行的事件所对应的事件通知信息;
S303:从获取的事件通知信息中提取对应的容器标识,该容器标识即是在创建事件时,插入到事件通知信息中的容器标识;
S304:获取该容器标识所对应的应用标识,作为运行的事件所对应的应用标识,从而建立事件和应用标识之间的对应关系。
如图3所示,为该实施例中建立事件和日志配置信息对应关系的示意图。首先通过D1容器和容器标识之间的对应关系,以及D2容器和事件之间的关系,建立D3事件和容器标识之间的对应关系,然后通过D4容器标识和应用标识之间的对应关系,建立D5事件的应用标识之间的对应关系。在日志收集过程中,通过D6应用标识和日志配置信息之间的对应关系,建立D7事件和日志配置信息之间的对应关系,根据日志配置信息收集对应事件的日志,并且据此建立D9日志和应用标识之间的对应关系。
如图4所示,为该实施例中建立日志和路由转发规则对应关系的示意图。在日志收集过程中,可以建立D8事件和日志之间的关系,在日志转发过程中,根据D9日志和应用标识之间的关系,以及D10应用标识和路由转发规则之间的对应关系,可以建立D11日志和路由转发规则之间的对应关系,从而根据路由转发规则转发对应的日志。
进一步地,在创建一事件时,可以直接将该事件所对应的应用标识插入至对应的事件通知信息;则可以省去以容器标识为媒介获取应用标识的过程,程序更加简洁。此时,所述获取各个运行的事件所对应的应用标识,可以包括如下步骤:
实时监听事件通知信息,获取运行的事件所对应的事件通知信息;
从获取的事件通知信息中提取事件所对应的应用标识。然后此事件和应用标识之间的对应关系可以直接应用于日志收集过程中获取对应的日志配置信息,并确定事件和日志配置信息之间的对应关系。
考虑到容器云平台是一个动态调整的过程,在运行过程中,各种不同的应用程序所对应的日志配置信息可能会发生调整,例如变更日志存储路径,变更日志格式等等。因此,所述云平台日志收集还可以包括如下步骤:
接收用户输入的日志配置更新信息,所述日志配置更新信息包括待更新的应用标识和待更新的日志配置信息;
使用所述待更新的日志配置信息替换所述待更新的应用标识当前对应的日志配置信息。
此处待更新的应用标识是一个索引,引导待更新的日志配置信息替换对应的原日志配置信息。此处待更新的日志配置信息则可以是发生了变更的部分信息,例如日志存储路径变更了,就只包含新的日志存储路径,没有变更的部分不再重复;也可以是包括全部的日志配置信息,其中变更的部分进行了更新,而没有变更的部分保持原样;也可以是有多条变更信息,例如同时变更了日志存储路径和日志格式,则包含一条路径更新信息和一条格式更新信息等等,可以采用多种模式实现。
可选地,所述云平台日志收集和转发方法还包括如下步骤:
实时监听配置中心中对应的日志配置信息变化通知;
判断是否接收到日志配置信息变化通知;此处当前使用的日志配置信息,指的是当前时刻,在对运行的事件进行日志收集时,所采用的日志配置信息;
如果接收到,则根据日志配置信息变化通知更新当前使用的日志配置信息;如果不存在更新,则保持当前使用的日志配置信息不变。
在实际应用中,也可以直接省去比对的步骤,每隔一个预设间隔时段获取到新的日志配置信息后,直接默认替换原日志配置信息。用户可以综合比较比对日志配置信息的工作量和日志配置信息全部替换的工作量,选择合适的操作方式。
同样地,考虑到容器云平台是一个动态调整的过程,在运行过程中,各种不同的应用程序所对应的路由转发规则可能会发生调整,用户对路由转发规则的需求也可能会随时变化,例如将前一段日志转发到监控报警系统中,而后一段日志转发到大数据分析平台等等。因此,该实施例的云平台日志收集和转发方法还可以包括如下步骤:
接收用户输入的转发规则更新信息,所述转发规则更新信息包括待更新的应用标识和待更新的路由转发规则;
使用所述待更新的路由转发规则替换所述待更新的应用标识当前对应的路由转发规则。
此处待更新的应用标识是一个索引,引导待更新的路由转发规则替换对应的原路由转发规则。此处待更新的路由转发规则可以是发生了变更的部分信息,例如转发目的地变更了,就只包含新的转发目的地,没有变更的部分不再重复;也可以是包括全部的日志配置信息,其中变更的部分进行了更新,而没有变更的部分保持原样;也可以是有多条变更信息,例如同时变更了转发目的地和转发协议,则包含一条目的地更新信息和一条协议更新信息等等,可以采用多种模式实现。
可选地,还包括如下步骤:
实时监听配置中心中对应的路由转发规则变化通知;
判断是否接收到路由转发规则变化通知;
如果接收到,则根据路由转发规则变化通知更新当前使用的路由转发规则;如果未接收到,则保持当前使用的路由转发规则不变。
在实际应用中,也可以直接省去比对的步骤,每隔一个预设间隔时段获取到新的路由转发规则后,直接默认替换原路由转发规则。用户可以综合比较比对路由转发规则的工作量和路由转发规则全部替换的工作量,选择合适的操作方式。
进一步地,在本发明一实施例中,还可以设置不同的应用程序阶段和不同阶段对应的日志配置信息和路由转发规则,在事件运行过程中,随着应用程序运行到不同的阶段,获取的该事件所对应的日志配置信息和路由转发规则是会随之改变的。例如,设置一个应用程序在执行两小时后触发第一个节点,第一个节点之前为第一阶段,第一阶段的日志配置信息中,日志存储路径为A,第一个节点之后为第二阶段,第二阶段的日志配置信息中,日志存储路径为B。即在该应用程序对应的事件执行到第一节点时,日志配置信息会发生一个变更。或者,设置一个应用程序在执行遇到错误时,触发第二节点,第二节点一旦触发,自第二节点起十分钟之内,为第三阶段,第三阶段中,路由转发规则中的转发目的地会在原目的地的基础上再增加监控报警系统。
对应地,所述多种应用标识所对应的日志配置信息可以包括各种应用标识中至少一阶段分别对应的日志配置信息;
所述查找对应的日志配置信息,可以包括如下步骤:
判断运行的事件当前处于所对应的应用标识的阶段;可以根据事件当前运行的状态来判断,例如设置两小时内是第一阶段,两小时后是第二阶段时,判断该事件当前运行累计时间是否超过两小时,如果超过了就是第一阶段,没有超过就是第二阶段;
根据运行的事件所对应的应用标识以及当前的阶段查找对应的日志配置信息。从而实现了虽然是对于同一事件,对应于不同的阶段也可以有不同的日志配置信息,并且是创建之初已经全部设置好,不需要用户再跟随事件进展手动调整,实现自动化日志灵活收集。
对应地,所述多种应用标识所对应的路由转发规则可以包括各种应用标识中至少一阶段分别对应的路由转发规则;
所述查找对应的路由转发规则,可以包括如下步骤:
判断待转发的日志所对应的应用标识以及所对应的应用标识的阶段;此处待转发的日志所对应的阶段,可以根据日志最后收集的时刻,事件运行的状态来判断;例如,设置两小时内是第一阶段,两小时后是第二阶段,该日志最后收集的时刻,事件累计运行了一个半小时,则定义该日志对应于第一阶段,如果该日志最后收集的时刻,事件累计运行了三个小时,则定义该日志对应于第二阶段;
根据待转发的日志所对应的应用标识以及阶段查找对应的路由转发规则。从而实现了虽然是对于同一事件,对应于不同的阶段也可以有不同的路由转发规则,并且是创建之初已经全部设置好,不需要用户再跟随事件进展手动调整,实现自动化日志灵活转发。
进一步地,所述获取待转发的日志所对应的应用标识,还包括如下步骤:
创建日志转发指令,所述日志转发指令中包括待转发的日志和日志所对应的应用标识;即需要转发日志时,可以创建对应的日志转发指令,其中包含日志转发所需要的指令信息;
获取所述日志转发指令,从所述日志转发指令中提取日志所对应的应用标识。获取到日志对应的应用标识后,就可以根据应用标识查找到日志对应的路由转发规则。
进一步地,所述云平台日志收集和转发方法还可以包括如下步骤:
判断当前获取日志的事件是否运行完成;
如果运行完成,则停止收集该事件的日志,将收集完成的日志作为待转发的日志并创建日志转发指令;
如果运行未完成,则继续收集该事件的日志,并进一步判断是否到达预设节点;
如果到达预设节点,则将当前预设节点和前一预设节点之间收集的日志作为待转发的日志并创建日志转发指令。
此处预设节点可以是用户预先设置的几个日志转发的节点,即不一定事件全部运行完成才转发日志,而是可以跟随事件运行过程,实时收集日志,实时转发日志。具体转发日志过程中,可以设置多个预设节点,将日志根据各个预设节点划分为多个不同的时段,将每个时段的日志及时转发出去,也可以是设置每隔一个预设时段即转发一次日志,例如设置为1s转发一次,5s转发一次等等,不限于此处列举的方法。
为了描述方便,上述云平台日志收集和转发方法是以容器云平台为例子说明的。可以理解的是,本发明中并没有对日志的存储路径有特别的规范和要求,如必须放在以容器标识组成的路径中,所以本发明不限于以容器技术实现的云平台,其他以虚拟机、分布式系统等实现的云平台均可以采用本发明的云平台日志收集和转发方法,均属于本发明的保护范围之内。
如图5所示,本发明实施例还提供一种云平台日志收集和转发系统,用于实现所述的云平台收集和采集方法,所述云平台创建至少一事件,所述系统包括容器管理模块100、配置中心200、日志收集模块300和日志汇聚模块400,其中:
容器管理模块100用于创建至少一容器500,为各个所述容器匹配所对应的容器标识;读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;以及建立并存储所述容器标识和所述应用标识的对应关系;因此容器管理模块负责管理宿主机上的容器运行,执行调度系统下发的命令,也可以像外部提供所管理的容器的信息。
配置中心200用于创建并存储多种应用标识所对应的日志配置信息和路由转发规则。进一步地,如上所述,配置中心200可以接收用户设置的更新的日志配置信息和路由转发规则,对存储的信息进行更新,与云平台调度或扩缩容保持同步。
日志收集模块300用于获取各个运行的事件所对应的应用标识;根据事件所对应的应用标识查找对应的日志配置信息,以及根据所述日志配置信息收集事件所对应的日志。日志收集模块300可以部署在云平台的宿主机上,通过本机上的容器管理模块获得容器创建运行的事件。可选地,日志收集模块300通过事件中附加的容器标识请求容器管理模块100,获得该容器所属的应用标识,然后通过请求配置中心200,获取该应用的日志配置信息,获取包括但不限于日志所在路径的匹配模式、日志清理规则、日志格式等。然后日志收集模块300在收集日志后,将日志传输到日志汇聚模块,在传输过程中,日志收集模块会将应用标识一并传输。
日志汇聚模块400,用于获取待转发的日志所对应的应用标识;根据日志所对应的应用标识查找对应的路由转发规则,以及根据所述路由转发规则转发对应的日志。
优选地,日志收集模块300和日志汇聚模块400在对应用的日志进行采集和传输的过程中,仍然会保持与配置中心200的通信或通知机制,以保证当应用日志配置信息发生变化时,能够快速感知并做相应的动态调整。进一步地,如上所述,日志收集模块300在收到容器管理模块100应用容器创建运行的事件时,容器管理模块100可以将应用标识直接附加在事件中,这样可以省去日志收集模块300以容器标识为参数请求容器管理模块100获得应用标识的过程,程序更加简洁。
如上所述,本发明并不限于容器技术的云平台中,在采用其他类型的云平台时,容器管理模块100可以替换为其他类型的事件管理模块,在创建事件时,将应用标识附加在事件通知信息中,即可实现本发明的目的。
如图6所示,为采用该实施例的云平台日志收集和转发系统时,各个功能模块之间的数据交互示意图。其中各个字母所表示的步骤详述如下:
a.容器被调度并运行在当前宿主机上,日志收集模块收到了容器管理模块的事件通知信息,该事件通知信息中附加了容器的标识信息;
b.日志收集模块以容器标识为参数,请求容器管理模块,获取该应用容器的应用标识;
c.日志收集模块以应用标识为参数,请求配置中心,获取该应用的日志配置信息,并执行相应日志收集动作;
d.日志收集模块将采集到的日志处理后传输给日志汇聚模块,并将日志所属应用等必要标识信息附加其中;
e.日志汇聚模块收到日志传输请求,以应用标识为参数请求配置中心,获取该应用日志的路由转发规则,向一个或多个目的地进行日志转发。
此处数据交互方式仅为一种优选的实施例,在实际应用中,不限于此,在本发明的主旨之内对上述各个步骤进行的适应性调整均属于本发明的保护范围之内。
本发明实施例还提供一种云平台日志收集和转发设备,包括处理器;存储器,其中存储有所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行所述的云平台日志收集和转发方法的步骤。
所属技术领域的技术人员能够理解,本发明的各个方面可以实现为系统、方法或程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“平台”。
下面参照图7来描述根据本发明的这种实施方式的电子设备600。图7显示的电子设备600仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示,电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于:至少一个处理单元610、至少一个存储单元620、连接不同平台组件(包括存储单元620和处理单元610)的总线630、显示单元640等。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元610执行,使得所述处理单元610执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。例如,所述处理单元610可以执行如图1中所示的步骤。
所述存储单元620可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)6201和/或高速缓存存储单元6202,还可以进一步包括只读存储单元(ROM)6203。
所述存储单元620还可以包括具有一组(至少一个)程序模块6205的程序/实用工具6204,这样的程序模块6205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线630可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备600也可以与一个或多个外部设备700(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备600交互的设备通信,和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口650进行。并且,电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。网络适配器660可以通过总线630与电子设备600的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备600使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储平台等。
本发明实施例还提供一种计算机可读存储介质,用于存储程序,所述程序被执行时实现所述的云平台日志收集和转发方法的步骤。在一些可能的实施方式中,本发明的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。
参考图8所示,描述了根据本发明的实施方式的用于实现上述方法的程序产品800,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
本发明所提供的云平台日志收集和转发方法、系统、设备及存储介质具有下列优点:
本发明通过动态获取当前日志配置信息和路由转发规则,应用被容器云平台动态调度或扩缩容之后,宿主机上的日志收集模块无需预先配置,能够快速地动态感知到运行在本机上的应用,通过动态获取该应用的日志配置信息,执行日志收集行为,同时相应地动态获取日志的路由转发规则,对应用的日志进行个性化的动态路由和转发;由此大大提高了容器云平台动态调度情况下的日志收集系统的适应性和灵活性,减少运维管理的成本,满足用户的多样化需求;另外,本发明没有对日志的存放路径有特别的规范和要求,因此本发明并不限于以容器技术实现的云平台,对于例如虚拟机等其他技术实现的云平台也同样可以适用,具有广泛的应用范围。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。
Claims (18)
1.一种云平台日志收集和转发方法,其特征在于,包括如下步骤:
创建并存储多种应用标识所对应的日志配置信息和路由转发规则;
创建并运行至少一事件;
获取各个运行的事件所对应的应用标识;
根据运行的事件所对应的应用标识查找对应的日志配置信息,并根据所述日志配置信息收集运行的事件所对应的日志;
获取待转发的日志所对应的应用标识;以及
根据待转发的日志所对应的应用标识查找对应的路由转发规则,并根据所述路由转发规则转发对应的日志。
2.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,创建一事件时,将该事件所对应的应用标识插入至对应的事件通知信息;
所述获取各个运行的事件所对应的应用标识,包括如下步骤:
获取运行的事件所对应的事件通知信息;
从获取的事件通知信息中提取事件所对应的应用标识。
3.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
创建至少一容器,为各个所述容器匹配所对应的容器标识;
读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;
建立并存储所述容器标识和所述应用标识的对应关系。
4.根据权利要求3所述的云平台日志收集和转发方法,其特征在于,创建一事件时,将创建该事件的容器所对应的容器标识插入至对应的事件通知信息;
所述获取各个运行的事件所对应的应用标识,包括如下步骤:
获取运行的事件所对应的事件通知信息;
从获取的事件通知信息中提取对应的容器标识;
获取该容器标识所对应的应用标识,作为运行的事件所对应的应用标识。
5.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
接收用户输入的日志配置更新信息,所述日志配置更新信息包括待更新的应用标识和待更新的日志配置信息;
使用所述待更新的日志配置信息替换所述待更新的应用标识当前对应的日志配置信息。
6.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
实时监听配置中对应的日志配置信息变化通知;
判断是否接收到日志配置信息变化通知;
如果接收到,则根据日志配置信息变化通知更新当前使用的日志配置信息;
如果未接收到,则保持当前使用的日志配置信息不变。
7.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,所述日志配置信息包括日志存储路径、日志所在路径的匹配模式、日志清理规则和日志格式中的至少一种。
8.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
接收用户输入的转发规则更新信息,所述转发规则更新信息包括待更新的应用标识和待更新的路由转发规则;
使用所述待更新的路由转发规则替换所述待更新的应用标识当前对应的路由转发规则。
9.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
实时监听配置中心中对应的路由转发规则变化通知;
判断是否接收到路由转发规则变化通知;
如果接收到,则根据路由转发规则变化通知更新当前使用的路由转发规则;
如果未接收到,则保持当前使用的路由转发规则不变。
10.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,所述路由转发规则包括转发目的地、转发协议、压缩需求和降采样需求中的至少一种。
11.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,所述获取待转发的日志所对应的应用标识,还包括如下步骤:
创建日志转发指令,所述日志转发指令中包括待转发的日志和日志所对应的应用标识;
获取所述日志转发指令,从所述日志转发指令中提取日志所对应的应用标识。
12.根据权利要求11所述的云平台日志收集和转发方法,其特征在于,还包括如下步骤:
判断当前获取日志的事件是否运行完成;
如果运行完成,则停止收集该事件的日志,将收集完成的日志作为待转发的日志并创建日志转发指令;
如果运行未完成,则继续收集该事件的日志,并进一步判断是否到达预设节点;
如果到达预设节点,则将当前预设节点和前一预设节点之间收集的日志作为待转发的日志并创建日志转发指令。
13.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,所述多种应用标识所对应的日志配置信息包括各种应用标识中至少一阶段分别对应的日志配置信息;
所述查找对应的日志配置信息,包括如下步骤:
判断运行的事件当前处于所对应的应用标识的阶段;
根据运行的事件所对应的应用标识以及当前的阶段查找对应的日志配置信息。
14.根据权利要求1所述的云平台日志收集和转发方法,其特征在于,所述多种应用标识所对应的路由转发规则包括各种应用标识中至少一阶段分别对应的路由转发规则;
所述查找对应的路由转发规则,包括如下步骤:
判断待转发的日志所对应的应用标识以及所对应的应用标识的阶段;
根据待转发的日志所对应的应用标识以及阶段查找对应的路由转发规则。
15.一种云平台日志收集和转发系统,用于实现权利要求1至14中任一项所述的云平台收集和采集方法,其特征在于,所述云平台创建至少一事件,所述系统包括:
配置中心,用于创建并存储多种应用标识所对应的日志配置信息和路由转发规则;
日志收集模块,用于获取各个运行的事件所对应的应用标识;根据事件所对应的应用标识查找对应的日志配置信息,以及根据所述日志配置信息收集事件所对应的日志;
日志汇聚模块,用于获取待转发的日志所对应的应用标识;根据日志所对应的应用标识查找对应的路由转发规则,以及根据所述路由转发规则转发对应的日志。
16.根据权利要求15所述的云平台日志收集和转发系统,其特征在于,还包括容器管理模块,用于创建至少一容器,为各个所述容器匹配所对应的容器标识;读取各个所述容器的属性信息,根据所述容器的属性信息确定各个所述容器所对应的应用标识;以及建立并存储所述容器标识和所述应用标识的对应关系。
17.一种云平台日志收集和转发设备,其特征在于,包括:
处理器;
存储器,其中存储有所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1至14中任一项所述的云平台日志收集和转发方法的步骤。
18.一种计算机可读存储介质,用于存储程序,其特征在于,所述程序被执行时实现权利要求1至14中任一项所述的云平台日志收集和转发方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710600185.3A CN107426023B (zh) | 2017-07-21 | 2017-07-21 | 云平台日志收集和转发方法、系统、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710600185.3A CN107426023B (zh) | 2017-07-21 | 2017-07-21 | 云平台日志收集和转发方法、系统、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107426023A true CN107426023A (zh) | 2017-12-01 |
CN107426023B CN107426023B (zh) | 2020-05-29 |
Family
ID=60430849
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710600185.3A Active CN107426023B (zh) | 2017-07-21 | 2017-07-21 | 云平台日志收集和转发方法、系统、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107426023B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108446203A (zh) * | 2018-03-20 | 2018-08-24 | 万帮充电设备有限公司 | 服务器事务日志处理方法及装置 |
CN108696452A (zh) * | 2018-05-16 | 2018-10-23 | 腾讯科技(深圳)有限公司 | 一种容器级网络流量采集、网络质量标识方法、装置、系统 |
CN109308329A (zh) * | 2018-09-27 | 2019-02-05 | 深圳供电局有限公司 | 一种基于云平台的日志收集方法和装置 |
CN109379212A (zh) * | 2018-09-13 | 2019-02-22 | 广东电网有限责任公司信息中心 | Nginx路由配置信息更新方法及系统、可读存储介质和终端 |
CN109684038A (zh) * | 2018-12-18 | 2019-04-26 | 网易(杭州)网络有限公司 | Docker服务容器日志的处理方法、装置和电子设备 |
CN110083509A (zh) * | 2019-04-30 | 2019-08-02 | 新华三信息安全技术有限公司 | 一种日志数据的规整方法及装置 |
CN110377481A (zh) * | 2019-06-19 | 2019-10-25 | 深圳壹账通智能科技有限公司 | 日志管理方法、装置、设备及存储介质 |
CN110688355A (zh) * | 2018-06-19 | 2020-01-14 | 北京京东尚科信息技术有限公司 | 变更容器状态的方法和装置 |
CN111061259A (zh) * | 2018-10-15 | 2020-04-24 | 上海肇观电子科技有限公司 | 行走机器人的事件化驱动方法、系统、设备及存储介质 |
CN111258722A (zh) * | 2020-02-14 | 2020-06-09 | 苏州浪潮智能科技有限公司 | 一种集群的日志采集方法、系统、设备以及介质 |
CN111352691A (zh) * | 2018-12-21 | 2020-06-30 | 北京神州泰岳软件股份有限公司 | 一种日志采集方法和系统 |
CN111367760A (zh) * | 2020-02-28 | 2020-07-03 | 平安医疗健康管理股份有限公司 | 日志采集方法及装置、计算机设备、存储介质 |
CN111563023A (zh) * | 2020-05-13 | 2020-08-21 | 中国建设银行股份有限公司 | 一种日志处理方法及系统 |
CN111881003A (zh) * | 2020-09-27 | 2020-11-03 | 国网汇通金财(北京)信息科技有限公司 | 一种日志动态采集方法及装置 |
CN113382071A (zh) * | 2021-06-09 | 2021-09-10 | 北京猿力未来科技有限公司 | 基于混合云架构的链路创建方法及装置 |
CN113391973A (zh) * | 2021-05-24 | 2021-09-14 | 青岛海信智慧生活科技股份有限公司 | 一种物联网云容器日志收集方法及装置 |
CN113938379A (zh) * | 2021-09-29 | 2022-01-14 | 浪潮云信息技术股份公司 | 一种动态加载云平台日志采集配置的方法 |
CN113938379B (zh) * | 2021-09-29 | 2024-06-04 | 浪潮云信息技术股份公司 | 一种动态加载云平台日志采集配置的方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080276130A1 (en) * | 2007-05-01 | 2008-11-06 | Almoustafa Ahmed M | Distributed logging apparatus system and method |
CN106126419A (zh) * | 2016-06-21 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种应用程序的调试方法及装置 |
CN106304122A (zh) * | 2015-05-21 | 2017-01-04 | 中国移动通信集团福建有限公司 | 一种业务数据分析方法及系统 |
CN106383852A (zh) * | 2016-08-30 | 2017-02-08 | 中国民生银行股份有限公司 | 基于Docker容器的日志获取方法和装置 |
CN106649044A (zh) * | 2016-12-28 | 2017-05-10 | 深圳市深信服电子科技有限公司 | 一种基于容器云系统的日志处理方法、装置及其系统 |
-
2017
- 2017-07-21 CN CN201710600185.3A patent/CN107426023B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080276130A1 (en) * | 2007-05-01 | 2008-11-06 | Almoustafa Ahmed M | Distributed logging apparatus system and method |
CN106304122A (zh) * | 2015-05-21 | 2017-01-04 | 中国移动通信集团福建有限公司 | 一种业务数据分析方法及系统 |
CN106126419A (zh) * | 2016-06-21 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种应用程序的调试方法及装置 |
CN106383852A (zh) * | 2016-08-30 | 2017-02-08 | 中国民生银行股份有限公司 | 基于Docker容器的日志获取方法和装置 |
CN106649044A (zh) * | 2016-12-28 | 2017-05-10 | 深圳市深信服电子科技有限公司 | 一种基于容器云系统的日志处理方法、装置及其系统 |
Cited By (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108446203A (zh) * | 2018-03-20 | 2018-08-24 | 万帮充电设备有限公司 | 服务器事务日志处理方法及装置 |
CN108696452A (zh) * | 2018-05-16 | 2018-10-23 | 腾讯科技(深圳)有限公司 | 一种容器级网络流量采集、网络质量标识方法、装置、系统 |
CN108696452B (zh) * | 2018-05-16 | 2020-06-02 | 腾讯科技(深圳)有限公司 | 一种容器级网络流量采集、网络质量标识方法、装置、系统 |
CN110688355A (zh) * | 2018-06-19 | 2020-01-14 | 北京京东尚科信息技术有限公司 | 变更容器状态的方法和装置 |
CN109379212A (zh) * | 2018-09-13 | 2019-02-22 | 广东电网有限责任公司信息中心 | Nginx路由配置信息更新方法及系统、可读存储介质和终端 |
CN109379212B (zh) * | 2018-09-13 | 2022-04-29 | 广东电网有限责任公司信息中心 | Nginx路由配置信息更新方法及系统、可读存储介质和终端 |
CN109308329A (zh) * | 2018-09-27 | 2019-02-05 | 深圳供电局有限公司 | 一种基于云平台的日志收集方法和装置 |
CN111061259A (zh) * | 2018-10-15 | 2020-04-24 | 上海肇观电子科技有限公司 | 行走机器人的事件化驱动方法、系统、设备及存储介质 |
CN109684038A (zh) * | 2018-12-18 | 2019-04-26 | 网易(杭州)网络有限公司 | Docker服务容器日志的处理方法、装置和电子设备 |
CN111352691A (zh) * | 2018-12-21 | 2020-06-30 | 北京神州泰岳软件股份有限公司 | 一种日志采集方法和系统 |
CN111352691B (zh) * | 2018-12-21 | 2023-11-03 | 北京神州泰岳软件股份有限公司 | 一种日志采集方法和系统 |
CN110083509A (zh) * | 2019-04-30 | 2019-08-02 | 新华三信息安全技术有限公司 | 一种日志数据的规整方法及装置 |
CN110083509B (zh) * | 2019-04-30 | 2022-09-20 | 新华三信息安全技术有限公司 | 一种日志数据的规整方法及装置 |
CN110377481A (zh) * | 2019-06-19 | 2019-10-25 | 深圳壹账通智能科技有限公司 | 日志管理方法、装置、设备及存储介质 |
CN110377481B (zh) * | 2019-06-19 | 2022-06-28 | 深圳壹账通智能科技有限公司 | 日志管理方法、装置、设备及存储介质 |
CN111258722A (zh) * | 2020-02-14 | 2020-06-09 | 苏州浪潮智能科技有限公司 | 一种集群的日志采集方法、系统、设备以及介质 |
CN111258722B (zh) * | 2020-02-14 | 2023-01-10 | 苏州浪潮智能科技有限公司 | 一种集群的日志采集方法、系统、设备以及介质 |
CN111367760A (zh) * | 2020-02-28 | 2020-07-03 | 平安医疗健康管理股份有限公司 | 日志采集方法及装置、计算机设备、存储介质 |
CN111367760B (zh) * | 2020-02-28 | 2022-07-19 | 深圳平安医疗健康科技服务有限公司 | 日志采集方法及装置、计算机设备、存储介质 |
CN111563023A (zh) * | 2020-05-13 | 2020-08-21 | 中国建设银行股份有限公司 | 一种日志处理方法及系统 |
CN111563023B (zh) * | 2020-05-13 | 2023-08-11 | 中国建设银行股份有限公司 | 一种日志处理方法及系统 |
CN111881003A (zh) * | 2020-09-27 | 2020-11-03 | 国网汇通金财(北京)信息科技有限公司 | 一种日志动态采集方法及装置 |
CN113391973B (zh) * | 2021-05-24 | 2022-11-25 | 青岛海信智慧生活科技股份有限公司 | 一种物联网云容器日志收集方法及装置 |
CN113391973A (zh) * | 2021-05-24 | 2021-09-14 | 青岛海信智慧生活科技股份有限公司 | 一种物联网云容器日志收集方法及装置 |
CN113382071B (zh) * | 2021-06-09 | 2022-09-06 | 北京猿力未来科技有限公司 | 基于混合云架构的链路创建方法及装置 |
CN113382071A (zh) * | 2021-06-09 | 2021-09-10 | 北京猿力未来科技有限公司 | 基于混合云架构的链路创建方法及装置 |
CN113938379A (zh) * | 2021-09-29 | 2022-01-14 | 浪潮云信息技术股份公司 | 一种动态加载云平台日志采集配置的方法 |
CN113938379B (zh) * | 2021-09-29 | 2024-06-04 | 浪潮云信息技术股份公司 | 一种动态加载云平台日志采集配置的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107426023B (zh) | 2020-05-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107426023A (zh) | 云平台日志收集和转发方法、系统、设备及存储介质 | |
US11606736B1 (en) | Systems and methods for providing a dynamic coverage handovers | |
CN104158678B (zh) | 基于与其他设备的接近度对设备进行配置 | |
CN105519143B (zh) | 用于无线设备的规则遵守 | |
CN102739802B (zh) | 面向业务应用的it集中运维分析系统 | |
US10673747B2 (en) | Device deployment and network management using a self-service portal | |
CN106557831B (zh) | 在不在预测方法和在不在预测装置 | |
CN103297468B (zh) | 针对群组资源的操作方法、群组服务器 | |
CN112910691B (zh) | 机房故障检测方法及装置 | |
US10785297B2 (en) | Intelligent dataset migration and delivery to mobile internet of things devices using fifth-generation networks | |
US9874860B2 (en) | Providing user interface of a frequency converter over a wireless connection | |
EP3091487A1 (en) | Network deployment for cellular, backhaul, fiber optic and other network infrastructure | |
CN106953945A (zh) | 基于sdn实现的域名智能解析方法及装置、服务器 | |
CN109831532A (zh) | 数据分享方法、装置、设备及介质 | |
CN109829679A (zh) | 项目管理方法、装置、计算机装置及存储介质 | |
CN103034267B (zh) | 用于控制设施装置的设备和方法 | |
CN108390795A (zh) | 家电设备及其监控方法、智慧家居系统及可读存储介质 | |
CN110502217A (zh) | 一种基于ros的机器人云平台设计方法 | |
CN108121330A (zh) | 一种调度方法、调度系统及地图路径规划方法 | |
CN109885737A (zh) | 一种用于建立救援组的方法与设备 | |
CN103685219B (zh) | 终端设备及其数据通信方法 | |
CN113076186B (zh) | 任务处理的方法、装置、电子设备和存储介质 | |
CN110347926A (zh) | 用于推送信息的方法和装置 | |
KR20160068703A (ko) | IoT 기기를 제어하기 위한 방법 및 시스템 | |
CN110519109A (zh) | 探测节点关联的方法、装置、计算设备以及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |