CN109802992A - 一种资源变化日志读写的方法和装置 - Google Patents

Abstract

本申请实施例提供了一种资源变化日志读写的方法和相应的装置，所述方法应用于视联网，所述视联网中包括依次通信连接的视联网服务器、上级监控管理平台、下级监控管理平台，所述下级监控管理平台将生成的资源变化日志分别写入多个日志记录文件中，并采用多个日志记录文件生成单链表数据，然后针对接收到的N个日志读取指令，将单链表数据拆分读取为N个第一数据，并依次将第一数据发送至上级监控管理平台；使得下级监控管理平台向上级监控管理平台每次发送的数据量变小，降低了数据传输过程中对网络带宽的占用率，提高了文件传输速度。

Description

一种资源变化日志读写的方法和装置

技术领域

本申请涉及视联网技术领域，特别是涉及一种资源变化日志读写的方法和装置。

背景技术

在视联网中，当前监控统一管理平台MServer有上级监控管理平台与下级监控管理平台，上级监控管理平台与下级监控管理平台建立起级联关系后，下级监控管理平台如果有资源变动，下级监控管理平台会把这些变化写到一个日志文件中，上级监控管理平台去实时请求这些变化资源，下级监控管理平台收到上级监控管理平台请求，将日志文件发送给上级监控管理平台。但在实际场景中，下级监控管理平台的资源变化会很大，例如下级监控管理平台开启了对监控的离线故障巡检、在线无流巡检，那么所有离线的监控和在线无流的监控都会上报到MServer(监控统一管理平台)，并记录在日志文件中；又或者下级监控管理平台同步了若干个协转网关，每个协转网关下都接入了几十万监控设备，这样下级监控管理平台就会新增大量的监控资源和目录，而这些资源变化都会记录到日志文件中。因此，日志文件中的数据量就会非常大，则下级监控平台将这个日志文件发送给上级监控管理平台时，会占据网络带宽，传输速度非常慢。

发明内容

鉴于上述问题，提出了本申请实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种资源变化日志读写的方法和相应的一种资源变化日志读写的装置。

为了解决上述问题，本申请公开了一种资源变化日志读写的方法，所述方法应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，包括：

所述下级监控管理平台针对发生的资源变动操作生成多个资源变化日志；

所述下级监控管理平台依次生成写入了所述资源变化日志的多个日志记录文件；其中，所述日志记录文件具有文件标识；

所述下级监控管理平台采用所述多个日志记录文件生成单链表数据；其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识；

所述下级监控管理平台针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器；所述视联网服务器用于将所述日志信息发送至所述上级监控管理平台；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

所述下级监控管理平台接收所述视联网服务器转发的N个日志读取指令；所述日志读取指令由所述上级监控管理平台针对所述日志信息生成并发送至所述视联网服务器；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数；

所述下级监控管理平台针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据；其中，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

所述下级监控管理平台依次将所述第一数据发送至所述视联网服务器，所述视联网服务器将所述第一数据转发至所述上级监控管理平台。

优选地，所述下级监控管理平台包括日志文件，所述下级监控管理平台依次生成写入了所述资源变化日志的多个日志记录文件的步骤，包括：

所述下级监控管理平台在所述日志文件中创建日志记录文件；

所述下级监控管理平台将所述资源变化日志按行写入到所述日志记录文件中；

若写入所述资源变化日志后的日志记录文件达到预设的文件大小，则下级监控管理平台在所述日志文件中再创建新的日志记录文件，并将剩余的资源变化日志按行写入到所述新的日志记录文件中；

所述下级监控管理平台重复上述3个步骤，直到完成全部资源变化日志的写入。

优选地，所述文件标识为所述日志记录文件的生成时间转化成的时间戳，所述下级监控管理平台采用所述多个日志记录文件生成单链表数据的步骤，包括：

所述下级监控管理平台提取所述日志记录文件中的第二数据；

所述下级监控管理平台将所述第二数据封装为数据结构；其中，所述数据结构具有与所述文件标识对应的结点标识；

所述下级监控管理平台按照所述结点标识的时间先后顺序将所述数据结构依次连接成单链表数据。

优选地，所述下级监控管理平台针对所述N个日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据的步骤，包括：

所述下级监控管理平台从所述日志读取指令中提取所述目标文件标识及所述目标位置字节数；

所述下级监控管理平台在所述单链表数据中，查找与所述目标文件标识对应的目标结点标识，并针对所述目标结点标识，确定目标数据结构；

所述下级监控管理平台在所述目标数据结构中，查找与所述目标位置字节数对应的目标字节；

所述下级监控管理平台判断所述目标字节到所述单链表数据的结尾之间的字节数是否超过预设字节数；

若是，则所述下级监控管理平台在所述单链表数据中，从所述目标字节开始提取预设字节数的数据；

若否，则所述下级监控管理平台在所述单链表数据中，提取从所述目标字节到所述单链表数据的结尾之间的剩余数据。

优选地，在所述下级监控管理平台针对所述N个日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据的步骤后，并且在所述下级监控管理平台依次将所述第一数据发送至所述视联网服务器的步骤前，还包括：

所述下级监控管理平台将所述第一数据进行压缩。

优选地，所述下级监控管理平台中包括下级数据库，在所述下级监控管理平台针对发生的资源变动操作生成多个资源变化日志的步骤后，还包括：

所述下级监控管理平台将所述多个资源变化日志保存到所述下级数据库中。

为了解决上述技术问题，本申请还公开了一种资源变化日志读写的方法，所述方法应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接；所述下级监控管理平台用于生成多个资源变化日志，并依次生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识，所述方法包括：

所述上级监控管理接收所述视联网服务器转发的日志信息；所述日志信息由所述下级监控管理平台针对所述单链表数据生成并发送至所述视联网服务器；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

所述上级监控管理平台针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器；所述视联网服务器将所述日志读取指令发送至所述下级监控管理平台；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

所述上级监控管理平台依次接收所述视联网服务器转发的所述第一数据；其中，所述第一数据由所述下级监控管理平台发送至所述视联网服务器。

优选地，所述上级监控管理平台包括上级数据库，所述第一数据为经压缩后的数据，在所述上级监控管理平台依次接收所述视联网服务器转发的所述第一数据的步骤后，还包括：

所述上级监控管理平台对所述第一数据解压；

所述上级监控管理平台将解压后的第一数据存放到所述上级数据库。

为了解决上述技术问题，本申请还相应地公开了一种资源变化日志读写的装置，所述装置应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，所述装置位于所述下级监控管理平台，包括：

资源变化日志生成模块，用于针对发生的资源变动操作生成多个资源变化日志；

资源变化日志写入模块，用于依次生成写入了所述资源变化日志的多个日志记录文件，其中，所述日志记录文件具有文件标识；

单链表数据生成模块，用于采用所述多个日志记录文件生成单链表数据；其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识；

日志信息生成模块，用于针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器；所述视联网服务器用于将所述日志信息发送至所述上级监控管理平台；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

指令接收模块，用于接收所述视联网服务器转发的N个日志读取指令，所述日志读取指令由所述上级监控管理平台生成并发送至所述视联网服务器；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数；

数据读取模块，用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据；其中，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据发送模块，用于依次将所述第一数据发送至所述视联网服务器，所述视联网服务器将所述第一数据转发至所述上级监控管理平台。

为了解决上述技术问题，本申请还相应地公开了一种资源变化日志读写的装置，所述装置应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，所述下级监控管理平台用于生成多个资源变化日志，并按时间先后顺序生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识，所述装置位于所述上级监控管理平台，包括：

日志信息获取模块，用于接收所述视联网服务器转发的日志信息；所述日志信息由所述下级监控管理平台针对所述单链表数据生成并发送至所述视联网服务器；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

日志读取指令生成模块，用于针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器，所述视联网服务器将所述日志读取指令发送至所述下级监控管理平台；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据接收模块，用于依次接收所述视联网服务器转发的所述第一数据；其中，所述第一数据由所述下级监控管理平台发送至所述视联网服务器。

与现有技术相比，本申请实施例具有以下优点：

首先，本申请实施例应用视联网的特性，下级监控管理平台通过多个日志记录文件记录资源变化日志，然后采用多个日志记录文件生成单链表数据，并针对上级监控管理平台发送的N个日志读取指令，将单链表数据拆分成N个第一数据，再将第一数据发送至上级监控管理平台，使得下级监控管理平台每次向上级监控管理平台的数据量很小，降低了网络带宽的占用率，提高了日志文件的传输速度，缩短了资源变化日志的读取时间。下级监控管理平台将每一个日志记录文件中的数据作为单链表数据中的一个数据结构，使数据结构的结点标识与文件标识对应，日志读取指令中包括了目标文件标识及目标位置字节数，使得下级监控管理平台在提取对应的每一段第一数据时，都能根据目标文件标识及目标位置字节数这两个界定标准，在单链表数据中快速查找到目标字节位置，提高了第一数据的提取效率；在提取第一数据时，提取的是具有预设字节数的数据，使得大多数第一数据的数据量大小一样，这样发送第一数据的网络带宽占用率变化很小，提高了数据传输的稳定性。

其次，日志记录文件是依次生成的，具有时间先后顺序；采用多个日志记录文件生成的单链表数据是线性数据，因此，单链表内的数据按照日志记录文件的时间先后顺序生成，提取时，也按照线性顺序提取，使得上级监控管理平台与下级监控管理平台的数据高度同步。

其次，资源日志写入该日志记录文件时，当日志记录文件达到预设的文件大小后，便创建新的日志记录文件，使得日志记录文件都具有相同的文件大小，在采用日志记录文件生成单链表数据时，每个数据结构的字节数几乎都相同，使得下级监控管理平台能快速锁定与目标字节数对应的目标字节，进一步提高了提取第一数据的速度。

最后，将第一数据进行压缩后再发送，使得第一数据变得更小，传输速度更快，进一步缩短了对资源变化日志的读取时间。

附图说明

图1是本申请的一种视联网的组网示意图；

图2是本申请的一种节点服务器的硬件结构示意图；

图3是本申请的一种接入交换机的硬件结构示意图；

图4是本申请的一种以太网协转网关的硬件结构示意图；

图5是本申请的一种资源变化日志读写的方法实施例1的步骤流程图；

图6是本申请的一种资源变化日志读写的方法的应用环境图；

图7是本申请的一种资源变化日志读写的方法实施例2的步骤流程图；

图8是本申请的一种资源变化日志读写的装置实施例3的结构框图；

图9是本申请的一种资源变化日志读写的装置实施例4的结构框图。

具体实施方式

为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。

视联网是网络发展的重要里程碑，是一个实时网络，能够实现高清视频实时传输，将众多互联网应用推向高清视频化，高清面对面。

视联网采用实时高清视频交换技术，可以在一个网络平台上将所需的服务，如高清视频会议、视频监控、智能化监控分析、应急指挥、数字广播电视、延时电视、网络教学、现场直播、VOD点播、电视邮件、个性录制(PVR)、内网(自办)频道、智能化视频播控、信息发布等数十种视频、语音、图片、文字、通讯、数据等服务全部整合在一个系统平台，通过电视或电脑实现高清品质视频播放。

为使本领域技术人员更好地理解本申请实施例，以下对视联网进行介绍：

视联网所应用的部分技术如下所述：

网络技术(NetworkTechnology)

视联网的网络技术创新改良了传统以太网(Ethernet)，以面对网络上潜在的巨大视频流量。不同于单纯的网络分组包交换(Packet Switching)或网络电路交换(CircuitSwitching)，视联网技术采用Packet Switching满足Streaming需求。视联网技术具备分组交换的灵活、简单和低价，同时具备电路交换的品质和安全保证，实现了全网交换式虚拟电路，以及数据格式的无缝连接。

交换技术(Switching Technology)

视联网采用以太网的异步和包交换两个优点，在全兼容的前提下消除了以太网缺陷，具备全网端到端无缝连接，直通用户终端，直接承载IP数据包。用户数据在全网范围内不需任何格式转换。视联网是以太网的更高级形态，是一个实时交换平台，能够实现目前互联网无法实现的全网大规模高清视频实时传输，将众多网络视频应用推向高清化、统一化。

服务器技术(ServerTechnology)

视联网和统一视频平台上的服务器技术不同于传统意义上的服务器，它的流媒体传输是建立在面向连接的基础上，其数据处理能力与流量、通讯时间无关，单个网络层就能够包含信令及数据传输。对于语音和视频业务来说，视联网和统一视频平台流媒体处理的复杂度比数据处理简单许多，效率比传统服务器大大提高了百倍以上。

储存器技术(Storage Technology)

统一视频平台的超高速储存器技术为了适应超大容量和超大流量的媒体内容而采用了最先进的实时操作系统，将服务器指令中的节目信息映射到具体的硬盘空间，媒体内容不再经过服务器，瞬间直接送达到用户终端，用户等待一般时间小于0.2秒。最优化的扇区分布大大减少了硬盘磁头寻道的机械运动，资源消耗仅占同等级IP互联网的20％，但产生大于传统硬盘阵列3倍的并发流量，综合效率提升10倍以上。

网络安全技术(Network Security Technology)

视联网的结构性设计通过每次服务单独许可制、设备与用户数据完全隔离等方式从结构上彻底根除了困扰互联网的网络安全问题，一般不需要杀毒程序、防火墙，杜绝了黑客与病毒的攻击，为用户提供结构性的无忧安全网络。

服务创新技术(Service Innovation Technology)

统一视频平台将业务与传输融合在一起，不论是单个用户、私网用户还是一个网络的总合，都不过是一次自动连接。用户终端、机顶盒或PC直接连到统一视频平台，获得丰富多彩的各种形态的多媒体视频服务。统一视频平台采用“菜谱式”配表模式来替代传统的复杂应用编程，可以使用非常少的代码即可实现复杂的应用，实现“无限量”的新业务创新。

视联网的组网如下所述：

视联网是一种集中控制的网络结构，该网络可以是树型网、星型网、环状网等等类型，但在此基础上网络中需要有集中控制节点来控制整个网络。

如图1所示，视联网分为接入网和城域网两部分。

接入网部分的设备主要可以分为3类：节点服务器，接入交换机，终端(包括各种机顶盒、编码板、存储器等)。节点服务器与接入交换机相连，接入交换机可以与多个终端相连，并可以连接以太网。

其中，节点服务器是接入网中起集中控制功能的节点，可控制接入交换机和终端。节点服务器可直接与接入交换机相连，也可以直接与终端相连。

类似的，城域网部分的设备也可以分为3类：城域服务器，节点交换机，节点服务器。城域服务器与节点交换机相连，节点交换机可以与多个节点服务器相连。

其中，节点服务器即为接入网部分的节点服务器，即节点服务器既属于接入网部分，又属于城域网部分。

城域服务器是城域网中起集中控制功能的节点，可控制节点交换机和节点服务器。城域服务器可直接连接节点交换机，也可直接连接节点服务器。

由此可见，整个视联网络是一种分层集中控制的网络结构，而节点服务器和城域服务器下控制的网络可以是树型、星型、环状等各种结构。

形象地称，接入网部分可以组成统一视频平台(虚线圈中部分)，多个统一视频平台可以组成视联网；每个统一视频平台可以通过城域以及广域视联网互联互通。

视联网设备分类

1.1本申请实施例的视联网中的设备主要可以分为3类：服务器，交换机(包括以太网网关)，终端(包括各种机顶盒，编码板，存储器等)。视联网整体上可以分为城域网(或者国家网、全球网等)和接入网。

1.2其中接入网部分的设备主要可以分为3类：节点服务器，接入交换机(包括以太网网关)，终端(包括各种机顶盒，编码板，存储器等)。

各接入网设备的具体硬件结构为：

节点服务器：

如图2所示，主要包括网络接口模块201、交换引擎模块202、CPU模块203、磁盘阵列模块204；

其中，网络接口模块201，CPU模块203、磁盘阵列模块204进来的包均进入交换引擎模块202；交换引擎模块202对进来的包进行查地址表205的操作，从而获得包的导向信息；并根据包的导向信息把该包存入对应的包缓存器206的队列；如果包缓存器206的队列接近满，则丢弃；交换引擎模202轮询所有包缓存器队列，如果满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零。磁盘阵列模块204主要实现对硬盘的控制，包括对硬盘的初始化、读写等操作；CPU模块203主要负责与接入交换机、终端(图中未示出)之间的协议处理，对地址表205(包括下行协议包地址表、上行协议包地址表、数据包地址表)的配置，以及，对磁盘阵列模块204的配置。

接入交换机：

如图3所示，主要包括网络接口模块(下行网络接口模块301、上行网络接口模块302)、交换引擎模块303和CPU模块304；

其中，下行网络接口模块301进来的包(上行数据)进入包检测模块305；包检测模块305检测包的目地地址(DA)、源地址(SA)、数据包类型及包长度是否符合要求，如果符合，则分配相应的流标识符(stream-id)，并进入交换引擎模块303，否则丢弃；上行网络接口模块302进来的包(下行数据)进入交换引擎模块303；CPU模块204进来的数据包进入交换引擎模块303；交换引擎模块303对进来的包进行查地址表306的操作，从而获得包的导向信息；如果进入交换引擎模块303的包是下行网络接口往上行网络接口去的，则结合流标识符(stream-id)把该包存入对应的包缓存器307的队列；如果该包缓存器307的队列接近满，则丢弃；如果进入交换引擎模块303的包不是下行网络接口往上行网络接口去的，则根据包的导向信息，把该数据包存入对应的包缓存器307的队列；如果该包缓存器307的队列接近满，则丢弃。

交换引擎模块303轮询所有包缓存器队列，在本申请实施例中分两种情形：

如果该队列是下行网络接口往上行网络接口去的，则满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零；3)获得码率操作模块产生的令牌；

如果该队列不是下行网络接口往上行网络接口去的，则满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零。

码率操作模块208是由CPU模块204来配置的，在可编程的间隔内对所有下行网络接口往上行网络接口去的包缓存器队列产生令牌，用以控制上行转发的码率。

CPU模块304主要负责与节点服务器之间的协议处理，对地址表306的配置，以及，对码率操作模块308的配置。

以太网协转网关：

如图4所示，主要包括网络接口模块(下行网络接口模块401、上行网络接口模块402)、交换引擎模块403、CPU模块404、包检测模块405、码率操作模块408、地址表406、包缓存器407和MAC添加模块409、MAC删除模块410。

其中，下行网络接口模块401进来的数据包进入包检测模块405；包检测模块405检测数据包的以太网MAC DA、以太网MAC SA、以太网length or frame type、视联网目地地址DA、视联网源地址SA、视联网数据包类型及包长度是否符合要求，如果符合则分配相应的流标识符(stream-id)；然后，由MAC删除模块410减去MAC DA、MAC SA、length or frame type(2byte)，并进入相应的接收缓存，否则丢弃；

下行网络接口模块401检测该端口的发送缓存，如果有包则根据包的视联网目地地址DA获知对应的终端的以太网MAC DA，添加终端的以太网MAC DA、以太网协转网关的MACSA、以太网length or frame type，并发送。

以太网协转网关中其他模块的功能与接入交换机类似。

终端：

主要包括网络接口模块、业务处理模块和CPU模块；例如，机顶盒主要包括网络接口模块、视音频编解码引擎模块、CPU模块；编码板主要包括网络接口模块、视音频编码引擎模块、CPU模块；存储器主要包括网络接口模块、CPU模块和磁盘阵列模块。

1.3城域网部分的设备主要可以分为2类：节点服务器，节点交换机，城域服务器。其中，节点交换机主要包括网络接口模块、交换引擎模块和CPU模块；城域服务器主要包括网络接口模块、交换引擎模块和CPU模块构成。

2、视联网数据包定义

2.1接入网数据包定义

接入网的数据包主要包括以下几部分：目的地址(DA)、源地址(SA)、保留字节、payload(PDU)、CRC。

如下表所示，接入网的数据包主要包括以下几部分：

DA

SA

Reserved

Payload

CRC

其中：

目的地址(DA)由8个字节(byte)组成，第一个字节表示数据包的类型(例如各种协议包、组播数据包、单播数据包等)，最多有256种可能，第二字节到第六字节为城域网地址，第七、第八字节为接入网地址；

源地址(SA)也是由8个字节(byte)组成，定义与目的地址(DA)相同；

保留字节由2个字节组成；

payload部分根据不同的数据报的类型有不同的长度，如果是各种协议包的话是64个字节，如果是单组播数据包话是32+1024＝1056个字节，当然并不仅仅限于以上2种；

CRC有4个字节组成，其计算方法遵循标准的以太网CRC算法。

2.2城域网数据包定义

城域网的拓扑是图型，两个设备之间可能有2种、甚至2种以上的连接，即节点交换机和节点服务器、节点交换机和节点交换机、节点交换机和节点服务器之间都可能超过2种连接。但是，城域网设备的城域网地址却是唯一的，为了精确描述城域网设备之间的连接关系，在本申请实施例中引入参数：标签，来唯一描述一个城域网设备。

本说明书中标签的定义和MPLS(Multi-Protocol Label Switch，多协议标签交换)的标签的定义类似，假设设备A和设备B之间有两个连接，那么数据包从设备A到设备B就有2个标签，数据包从设备B到设备A也有2个标签。标签分入标签、出标签，假设数据包进入设备A的标签(入标签)是0x0000，这个数据包离开设备A时的标签(出标签)可能就变成了0x0001。城域网的入网流程是集中控制下的入网过程，也就意味着城域网的地址分配、标签分配都是由城域服务器主导的，节点交换机、节点服务器都是被动的执行而已，这一点与MPLS的标签分配是不同的，MPLS的标签分配是交换机、服务器互相协商的结果。

如下表所示，城域网的数据包主要包括以下几部分：

DA

SA

Reserved

标签

Payload

CRC

即目的地址(DA)、源地址(SA)、保留字节(Reserved)、标签、payload(PDU)、CRC。其中，标签的格式可以参考如下定义：标签是32bit，其中高16bit保留，只用低16bit，它的位置是在数据包的保留字节和payload之间。

基于视联网的上述特性，提出了本申请实施例的核心构思之一，遵循视联网的协议，下级监控管理平台将多个资源变化日志写入到多个日志记录文件记录中，并采用多个日志记录文件生成单链表数据，并针对上级监控管理平台发送的N个日志读取指令，将单链表数据拆分成N个第一数据，再将第一数据发送至上级监控管理平台，使得下级监控管理平台每次向上级监控管理平台的数据量很小，降低了网络带宽的占用率，提高了日志文件的传输速度，缩短了资源变化日志的读取时间。

实施例一

参照图5，示出了本申请的一种资源变化日志读写的方法实施例1的步骤流程图，在本申请实施例中，所述方法应用于视联网，所述视联网中包括视联网服务器510、上级监控管理平台509、下级监控管理平台511，所述视联网服务器510与所述上级监控管理平台509及所述下级监控管理平台511通信连接。

本申请实施例的应用环境及工作原理图详见图6，实际中，上级监控管理平台509可以理解为是视联网中处于管理权限上级的视联网监控统一管理平台，下级监控管理平台511可以理解为是视联网中处于管理权限下级的视联网监控统一管理平台，上级监控管理平台509可以级联多个下级监控管理平台511，下级监控管理平台511连接了若干个视联网协议转换网关，每个视联网协议转换网关连接有多个监控终端，这些监控终端可以是视联网中的监控终端，也可以是互联网中的监控终端，所有的监控终端构成下级监控管理平台511的监控资源。

本申请实施例的一种资源变化日志读写的方法具体可以包括以下步骤：

步骤501，所述下级监控管理平台511针对发生的资源变动操作生成多个资源变化日志。

实际中，资源变动操作可以是在下级监控管理平台511中删除某个监控终端的操作，也可以是在在下级监控管理平台511中新增入监控终端的操作，也可以是新增或删除视联网协议转换网关的操作。每执行一个资源变动操作，下级监控管理平台511则会生成相应的资源变化日志。

步骤502，所述下级监控管理平台511依次生成写入了所述资源变化日志的多个日志记录文件。

其中，所述日志记录文件具有文件标识。

作为本申请实施例的一种优选示例，该文件标识可以是日志记录文件的生成时间转化成的时间戳，具体地，该时间戳long型时间戳，例如，日志记录文件的生成时间是2018/11/1212:22:33，转换成long型时间戳后为1471337924226L。

作为本申请实施例的一种优选示例，所述下级监控管理平台511包括日志文件，该步骤502包括如下子步骤：

子步骤5021，所述下级监控管理平台511在所述日志文件中创建日志记录文件。

在具体施行时，下级监控管理平台511中预先设置有记录资源变化日志的日志文件，日志文件在下级监控管理平台511中具有访问路径，在具体实现中，可以在日志文件下直接创建日志记录文件，这样访问该日志记录文件时，则采用日志文件的访问路径，可以不用在下级监控管理平台511中新增访问路径。

子步骤5022，所述下级监控管理平台511将所述资源变化日志按行写入到所述日志记录文件中。

具体写资源变化日志时，可以对象简谱json的数字格式将资源变化日志一行一行写到日志记录文件中，json格式具有简洁和清晰的层次结构，易于人阅读和编写，同时也易于机器解析和生成，这样使得日志记录文件中的数据易于读取，能有效提升网络传输效率。

子步骤5023，若写入所述资源变化日志后的日志记录文件达到预设的文件大小，则下级监控管理平台511在所述日志文件中再创建新的日志记录文件，并将剩余的资源变化日志按行写入到所述新的日志记录文件中。

具体实现时，可以设置每个日志记录文件的大小，例如，100MB，这样，当日志记录文件满100MB时，则创建新的日志记录文件，再将剩余的资源变化日志写入该日志记录文件中，以此循环，直到将所有的资源变化日志都写入到日志记录文件中。

子步骤5024，所述下级监控管理平台511重复上述3个步骤，直到完成全部资源变化日志的写入。

写入全部资源日志后，使得全部的日志记录文件都具有相同的文件大小，或者除却一个日志记录文件的文件略小外，其余日志记录文件都具有相同的文件大小，这样，在采用日志记录文件生成单链表数据时，每个数据结构的字节数几乎都相同，使得下级监控管理平台511能快速锁定与目标字节数对应的目标字节，进一步提高了提取第一数据的速度。

步骤503，所述下级监控管理平台511采用所述多个日志记录文件生成单链表数据。

其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识。

本申请实施例中，单链表数据可以理解为是一种链式存取的数据结构，在单链表数据内，一个日志记录文件可以认为是单链表数据中的一个数据结构，相应地，每个数据结构都具有一个地址，该地址则是日志记录文件的访问地址，在单链表数据中一个指针，该指针可以顺序访问每个数据结构。

作为本申请实施例的一种优选措施，步骤503具体可以包括以下子步骤：

子步骤5031，所述下级监控管理平台511提取所述日志记录文件中的第二数据。

日志记录文件中的数据是按行写入的，下级监控管理平台511从日志记录文件提取第二数据时，也可以按行提取。

子步骤5032，所述下级监控管理平台511将所述第二数据封装为数据结构。

其中，所述数据结构具有与所述文件标识对应的结点标识。

具体实行时，单链表数据可以以结点来表示，将第二数据封装为数据结构可以理解为是将第二数据作为单链表数据中的一个结点，该数据结构的结点标识可以理解为每个结点的地址标识。

子步骤5033，所述下级监控管理平台511按照所述结点标识的时间先后顺序将所述数据结构依次连接成单链表数据。

实际中，单链表数据是线性链表中的数据，在将第二数据放入到单链表中时，按照第二数据的时间先后顺利依次放入。例如，链表数据的链头数据结构是创建时间最先的日志记录文件中的数据，链尾数据结构是创建时间最后的日志记录文件中的数据。

依照上述子步骤，生成后的单链表数据是线性的数据结构，在本申请实施例中，日志记录文件具有时间先后顺序，而生成的资源变化日志也具有时间先后顺序，因而，在将日志记录文件生成单链表数据时，单链表内的数据顺序与日志记录文件的时间先后顺序一致，而日志记录文件中的每行数据与资源变化日志的时间先后顺序一致，进而提高了单链表数据与资源变化日志的生成时间先后顺序的一致性。

步骤504，所述下级监控管理平台511针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器510。

所述视联网服务器510用于将所述日志信息发送至所述上级监控管理平台509；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息。

下级监控管理平台511生成单链表数据后，会将单链表数据的总字节数和结点标识等信息发送至上级监控管理平台509，以通知上级监控管理平台509按照总字节数和结点标识读取日志，使得上级监控管理平台509与下级监控管理平台511之间的日志同步方式是下级告知上级需要读取日志了，上级才会读取日志，这样下级监控管理平台511可以选择在日志记录文件达到一定的数据量时，再通知上级监控管理平台509读取日志记录文件，避免上级监控管理平台509频繁地发送日志读取指令给下级监控平台，减少下级监控平台读取日志记录文件的总次数，从而降低了下级监控管理平台511的内存占用率，提高了下级监控管理平台511处理其他事务的效率。

步骤505，所述下级监控管理平台511接收所述视联网服务器510转发的N个日志读取指令。

所述日志读取指令由所述上级监控管理平台509针对所述日志信息生成并发送至所述视联网服务器510；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数。

在实际中，下级监控管理平台511接收所述视联网服务器510转发的N个日志读取指令，具体可以采取两种方式：

第一种方式，下级监控管理平台511一次性接收所有的日志读取指令，对应地，上级监控管理平台509生成N个日志读取指令后，一次性发送给下级监控管理平台511；在实际中，每个日志读取指令中的目标文件标识是long型时间戳，因此，下级监控管理平台511可以按照目标文件标识的时间先后顺序对日志读取指令进行排序；若long型时间戳一致，则将目标位置字节数较大的排列在后。

第二种方式，下级监控管理平台511每次接收一个日志读取指令，实际中，上级监控管理平台509也可以对应地每次只生成一个日志读取指令，生成后即发送到下级监控管理平台511；也可以一次性生成所有日志读取指令后，再按照目标文件标识的时间先后顺序依次发送日志读取指令。

具体实现时，上级监控管理平台509根据日志信息生成日志读取指令，其中，上级监控管理平台509可以根据日志信息中的总字节数信息确定具体生成日志读取指令的个数；目标文件标识与日志信息中的文件标识信息对应，即目标文件标识也是long型时间戳；标位置字节数可以理解为是在单链表数据中，从链头数据到中间某个位置一共所占的字节数，可以用单位B表示；在具体实现中，目标位置字节数可以根据日志信息中的总字节数信息与日志读取指令的个数进行确定，例如，总字节数是925MB，日志读取指令可以是37个，则目标位置字节数分别是0MB、25MB、50MB，以此类推。

下面对上级监控管理平台509根据日志信息生成日志读取指令的过程进行举例说明：

例如，日志信息的总字节数是925MB，共有10个文件标识，则根据925MB生成37个日志读取指令，相应的日志读取指令按照时间先后顺序排列为：(1471337924226L，0MB)、(1471337924226L，25MB)、(1471337924226L，50MB)、(1471337924226L，75MB)、(1471337924226L，100MB)、(1471337924227L，125MB)，依次类推。

步骤506，所述下级监控管理平台511针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据。

其中，所述第一数据为所述下级监控管理平台511针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据。

下级监控管理平台511接针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据的操作，可以理解为接收到多少个日志读取指令，则将单链表数据拆分为多少个第一数据。

步骤506所描述的依次拆分读取，可以理解为是下级监控管理平台511根据日志读取指令的目标文件标识的时间先后顺序，以及目标位置字节数的大小顺序，从单链表数据的链头位置处依次向后读取预设字节数的数据。因此，上级监控管理平台509可以直接按照接收第一数据的时间先后顺序将第一数据保存，使得上级监控管理平台509和下级监控管理平台511的数据高度同步。

实施数据提取时，预设字节数既是每相邻两个日志读取指令的目标字节数之差，也是下级监控管理平台511中预先设置的预设字节数。例如，级监控管理平台中生成的N个日志读取指令中，每相邻两个日志读取指令的目标字节数之差为25MB，则在下级监控管理平台511中也设置预设字节数为25MB。具体实现时，可以在上级监控管理平台509和下级监控管理平台511中预先设置该预设字节数，这样上级监控管理平台509可以根据预设字节数及日志信息中的总字节数确定日志读取指令的个数。

作为本申请实施例的一种优选示例，步骤506具体可以包括以下子步骤：

子步骤5061，所述下级监控管理平台511从所述日志读取指令中提取所述目标文件标识及所述目标位置字节数。

实际中，下级监控管理平台511可以采用XML解析技术从日志读取指令中解析出目标文件标识及所述目标位置字节数。

子步骤5062，所述下级监控管理平台511在所述单链表数据中，查找与所述目标文件标识对应的目标结点标识，并针对所述目标结点标识，确定目标数据结构。

子步骤5063，所述下级监控管理平台511在所述目标数据结构中，查找与所述目标位置字节数对应的目标字节。

例如，目标位置字节数为30MB，则将单链表数据的指针指到30MB对应的位置处。

子步骤5064，所述下级监控管理平台511判断所述目标字节到所述单链表数据的结尾之间的字节数是否超过预设字节数；若是，则转子步骤5065；若否，则转子步骤5066。

单链表数据的结尾可以理解为是单链表数据的链尾，即最末一个数据。在实际生成的单链表数据中，按照预设字节数提取第一数据，在提取最末一个数据时，其数据字节数可能不足预设字节数。

子步骤5065，则所述下级监控管理平台511在所述单链表数据中，从所述目标字节开始提取预设字节数的数据。

例如，预设字节数是10MB，目标字节到所述单链表数据的结尾之间的字节数是20MB，则只提取预设的10MB数据。

实际中，单链表数据是依据日志记录文件的创建时间先后顺序生成的线性连接的数据，提取时，单链表数据的指针可以指到目标字节对应的位置，从目标字节处开始往后读取；例如，目标位置字节数为30MB，则单链表数据的指针指到30MB的位置处，从该位置处向后提取预设字节数的数据，例如，向后提取10MB数据。

子步骤5066，则所述下级监控管理平台511在所述单链表数据中，提取从所述目标字节到所述单链表数据的结尾之间的剩余数据。

例如，预设字节数是10MB，目标字节到所述单链表数据的结尾之间的字节数是5MB，不够10MB，则将5MB数据全部提取。

作为本申请实施例的一种优选示例，在执行完步骤506后，还可以包括以下步骤：

步骤507，所述下级监控管理平台511将所述第一数据进行压缩。

压缩可以采取rar格式压缩，也可以采取zip格式压缩。对第一数据进行压缩后再发送，使得第一数据变得更小，传输速度更快，进一步缩短了对资源变化日志的读取时间。

步骤508，所述下级监控管理平台511依次将所述第一数据发送至所述视联网服务器510，所述视联网服务器510将所述第一数据转发至所述上级监控管理平台509。

依次发送第一数据可以理解为下级监控管理平台511从单链表数据的链头依次读取第一数据，每读取一个第一数据则将该第一数据发送至上级监控管理凭条。

因第一数据的数据量明显小于所有日志记录文件的数据量，占用的网络带宽小，因而极大地提高了日志记录文件的传输速度，且第一数据的数据量大小基本相同，使得每次发送第一数据的网络带宽占用率维持在一个稳定的水平，因而提高了数据传输中传输时间、传输效率的稳定性，提高了预估完成所有数据传输需要用的时间的精准性。

作为本申请实施例的一种优选示例，所述下级监控管理平台511中包括下级数据库，还包括以下步骤：

所述下级监控管理平台511将所述多个资源变化日志保存到所述下级数据库中。

该步骤可以是在步骤501之后的任何一个步骤后，既可以在步骤502之前，也可以在步骤508之后。

为了便于更好地理解本技术方案，下面以一个具体实例来进行详细阐述：

例如，下级监控管理平台511将500个资源变化日志按行写到了10个日志记录文件中，每一个日志记录文件的文件标识都是根据创建时间生成的long型时间戳，其中，时间排列在前的9个日志记录文件的文件大小是100MB，最后一个日志记录文件的文件大小是25MB；在下级监控管理平台511中设置读取时预设字节数是25MB。

之后，下级监控管理平台511采用该10个日志记录文件中的数据生成了单链表数据，在该单链表数据中包括了10个数据结构，每一个数据结构中的字节数是100MB，每一个数据结构以文件标识作为结点标识，该结点标识可以理解为是单链表数据中每一个数据结构的指针。

然后，下级监控管理平台511针对所述单链表数据生成日志信息，日志信息中的总字节数为925MB，文件标识信息为多个文件标识组合成的信息。

接着，下级监控管理平台511一次性接收到所述视联网服务器510转发的37个日志读取指令，并将这37个日志读取指令按照目标文件标识的时间先后顺序，以及目标位置字节数的大小顺序排序，其中，排列第一的日志读取指令的目标文件标识是，目标位置字节数是0；排列第一第二的日志读取指令的目标文件标识，目标位置字节数是25MB；

之后，下级监控管理平台511针对每个日志读取指令，依次从单链表数据的链头开始，依次读取25MB的数据，每读取一个第一数据时，判断从目标位置字节数对应的目标字节至单链表数据的链尾的字节数是否超过了25MB，若没有超过，则提取实际剩余的数据；每提取到第一数据时，就将第一数据压缩后，发送到上级监控管理平台509。在此过程中，共提取出37个第一数据，每个第一数据的字节数都是25MB。

本申请实施例中，所述下级监控管理平台511将生成的资源变化日志分别写入多个日志记录文件中，并采用多个日志记录文件生成单链表数据，然后接受来自上级监控管理平台509发送的N个日志读取指令，将单链表数据拆分读取为N个第一数据，并依次将第一数据发送至上级监控管理平台509；解决了现有技术中下级监控平台在接收到上级的日志读取指令时，需要将整个日志文件发送给上级监控管理平台509而造成的文件传输速度慢的问题。使得下级监控管理平台511向上级监控管理平台509每次发送的数据量变小，降低了数据传输过程中对网络带宽的占用率，提高了文件传输速度。

实施例二

参照图7，图7示出了本申请实施例2的一种资源变化日志读写的方法和装置，所述方法应用于视联网中，所述视联网中包括视联网服务器510、上级监控管理平台509、下级监控管理平台511，所述视联网服务器510与所述上级监控管理平台509及所述下级监控管理平台511通信连接；所述下级监控管理平台511用于生成多个资源变化日志，并依次生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识。

本申请实施例的下级监控管理平台511生成单链表数据的具体过程，请参照实施例1的步骤501、步骤502及步骤503的描述。

本申请实施例的应用环境请参照图6所示。

本申请实施例的一种资源变化日志读写方法，具体可以包括以下步骤：

步骤601，所述上级监控管理接收所述视联网服务器510转发的日志信息；所述日志信息由所述下级监控管理平台511针对所述单链表数据生成并发送至所述视联网服务器510。

其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息。

实际中，日志信息的具体生成过程，可以参照实施例1的步骤504的描述。

步骤602，所述上级监控管理平台509针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器510。

所述视联网服务器510将所述日志读取指令发送至所述下级监控管理平台511；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台511用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台511针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据。

本步骤的具体过程，可以参考实施例1的步骤505至步骤506的描述。

步骤603，所述上级监控管理平台509依次接收所述视联网服务器510转发的所述第一数据。

其中，所述第一数据由所述下级监控管理平台511发送至所述视联网服务器510。

作为本申请实施例的一种优选示例，所述上级监控管理平台509包括上级数据库，所述第一数据为经压缩后的数据。实际中，第一数据的压缩格式可以是rar格式，也可以是zip格式。

在步骤603之后，还可以包括以下步骤：

步骤604，所述上级监控管理平台509对所述第一数据解压。

步骤605，所述上级监控管理平台509将解压后的第一数据存放到所述上级数据库。

上级监控管理平台509接收到解压后的第一数据后，可以对解压后的第一数据进行json解析后得到资源变化日志，并将解析后得到的资源变化日志保存至上级数据库。

本申请实施例中，所述上级监控管理平台509根据下级监控管理平台511发送的日志信息中的总字节数信息和文件标识信息，生成N个日志读取指令，每一个日志读取指令具有目标文件标识及目标位置字节数，再将N个日志读取指令依次发送给下级监控管理平台511，或者一次性发送下级监控管理平台511，下级监控管理平台511再根据日志读取指令，在采用多个日志记录文件生成的单链表数据中，提取N个第一数据，上级监控管理平台509依次接收N个第一数据。使得上级监控管理平台509每次读取的数据大大变小，降低了数据传输过程中对网络带宽的占用率，提高了文件传输速度。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。

实施例三

如图8示出了本申请实施例3的一种一种资源变化日志读写的装置的结构框图，对照实施例1的处理方法，所述装置可以应用于视联网中，所述视联网中包括视联网服务器510、上级监控管理平台509、下级监控管理平台511，所述视联网服务器510与所述上级监控管理平台509及所述下级监控管理平台511通信连接，所述装置位于所述下级监控管理平台511，具体可以包括以下模块：

资源变化日志生成模块701，用于针对发生的资源变动操作生成多个资源变化日志；

资源变化日志写入模块702，用于依次生成写入了所述资源变化日志的多个日志记录文件，其中，所述日志记录文件具有文件标识；

单链表数据生成模块703，用于采用所述多个日志记录文件生成单链表数据；其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识；

日志信息生成模块704，用于针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器510；所述视联网服务器510用于将所述日志信息发送至所述上级监控管理平台509；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

指令接收模块705，用于接收所述视联网服务器510转发的N个日志读取指令，所述日志读取指令由所述上级监控管理平台509生成并发送至所述视联网服务器510；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数；

数据读取模块706，用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据；其中，所述第一数据为所述下级监控管理平台511针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据发送模块707，用于依次将所述第一数据发送至所述视联网服务器510，所述视联网服务器510将所述第一数据转发至所述上级监控管理平台509。

其中，资源变化日志生成模块701可以与资源变化日志写入模块702通信连接，资源变化日志写入模块702可以与单链表数据生成模块703通信连接，单链表数据生成模块703可以与日志信息生成模块704、指令接收模块705及数据读取模块706通信连接，数据读取模块706可以与数据发送模块707通信连接。

作为本申请实施例的一种优选实例，所述下级监控管理平台511包括日志文件，所述资源变化日志写入模块702具体可以包括以下子模块：

日志记录文件创建子模块，用于在所述日志文件中创建日志记录文件；

按行写入子模块，用于将所述资源变化日志按行写入到所述日志记录文件中；

跳转子模块，用于在若写入所述资源变化日志后的日志记录文件达到预设的文件大小时，触发所述日志记录文件创建子模块再创建新的日志记录文件，并触发所述按行写入子模块将剩余的资源变化日志按行写入到所述新的日志记录文件中。

其中，日志记录文件创建子模块可以与资源变化日志生成模块701、按行写入子模块及跳转子模块通信连接。

作为本申请实施例的一种优选实例，所述文件标识为所述日志记录文件的生成时间转化成的时间戳，所述单链表数据生成模块703具体可以包括以下子模块：

第二数据提取子模块，用于提取所述日志记录文件中的第二数据；

数据封装子模块，用于将所述第二数据封装为数据结构；其中，所述数据结构具有与所述文件标识对应的结点标识；

链接子模块，用于按照所述结点标识的时间先后顺序将所述数据结构依次连接成单链表数据。

其中，第二数据提取子模块可以与资源变化日志写入模块702、数据封装子模块通信连接，数据封装子模块可以与链接子模块通信连接。

作为本申请实施例的一种优选实例，所述数据读取模块706具体可以包括以下子模块：

日志读取指令提取子模块，用于从所述日志读取指令中提取所述目标文件标识及所述目标位置字节数；

目标数据结构确定子模块，用于在所述单链表数据中，查找与所述目标文件标识对应的目标结点标识，并针对所述目标结点标识，确定目标数据结构；

目标字节确定子模块，用于在所述目标数据结构中，查找与所述目标位置字节数对应的目标字节；

第一目标数据提取子模块，用于在所述目标字节到所述单链表数据的结尾之间的字节数超过预设字节数时，在所述单链表数据中，从所述目标字节开始提取预设字节数的数据；

第二目标数据提取子模块，用于在所述目标字节到所述单链表数据的结尾之间的字节数未超过预设字节数时，在所述单链表数据中，提取从所述目标字节到所述单链表数据的结尾之间的剩余数据。

其中，日志读取指令提取子模可以与指令接收模块705、目标数据结构确定子模块、目标字节确定子模块通信连接，第一目标数据提取子模块可以与目标数据结构确定子模块、目标字节确定子模块及单链表数据生成模块703通信连接，第二目标数据提取子模块可以与目标数据结构确定子模块、目标字节确定子模块及单链表数据生成模块703通信连接。

作为本申请实施例的一种优选实例，所述装置还可以包括以下模块：

压缩模块，用于将所述第一数据进行压缩。

压缩模块可以与数据读取模块706通信连接。

作为本申请实施例的一种优选实例，所述下级监控管理平台511中包括下级数据库，所述下级数据库用于存储所述第一数据。

实施例四

如图9示出了本申请实施例4的一种资源变化日志读写的装置的结构框图，对照实施例2的处理方法，所述装置可以应用于视联网中，所述视联网中包括视联网服务器510、上级监控管理平台509、下级监控管理平台511，所述视联网服务器510与所述上级监控管理平台509及所述下级监控管理平台511通信连接，所述下级监控管理平台511用于生成多个资源变化日志，并按时间先后顺序生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识，所述装置位于所述上级监控管理平台509，具体可以包括以下模块：

日志信息获取模块801，用于接收所述视联网服务器510转发的日志信息；所述日志信息由所述下级监控管理平台511针对所述单链表数据生成并发送至所述视联网服务器510；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

日志读取指令生成模块802，用于针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器510，所述视联网服务器510将所述日志读取指令发送至所述下级监控管理平台511；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台511用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台511针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据接收模块803，用于依次接收所述视联网服务器510转发的所述第一数据；其中，所述第一数据由所述下级监控管理平台511发送至所述视联网服务器510。

其中，日志信息获取模块801可以与日志读取指令生成模块802通信连接，数据接收模块803通过视联网通信协议与下级监控管理平台511通信连接。

作为本申请实施例的一种优选实例，所述装置还包括上级数据库，所述第一数据为经压缩数据，所述上级数据库用于存储解压后的第一数据；所述装置还可以包括以下模块：

解压模块，用于对所述第一数据解压。

其中，解压模块可以与数据接收模块803及上级数据库通信连接

对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本申请实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本申请实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请实施例是参照根据本申请实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本申请实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例范围的所有变更和修改。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。

以上对本申请所提供的一种资源变化日志读写的方法和一种资源变化日志读写的装置，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种资源变化日志读写的方法，其特征在于，所述方法应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，包括：

所述下级监控管理平台针对发生的资源变动操作生成多个资源变化日志；

所述下级监控管理平台依次生成写入了所述资源变化日志的多个日志记录文件；其中，所述日志记录文件具有文件标识；

所述下级监控管理平台采用所述多个日志记录文件生成单链表数据；其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识；

所述下级监控管理平台针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器；所述视联网服务器用于将所述日志信息发送至所述上级监控管理平台；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

所述下级监控管理平台接收所述视联网服务器转发的N个日志读取指令；所述日志读取指令由所述上级监控管理平台针对所述日志信息生成并发送至所述视联网服务器；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数；

所述下级监控管理平台针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据；其中，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

所述下级监控管理平台依次将所述第一数据发送至所述视联网服务器，所述视联网服务器将所述第一数据转发至所述上级监控管理平台。

2.根据权利要求1所述的方法，其特征在于，所述下级监控管理平台包括日志文件，所述下级监控管理平台依次生成写入了所述资源变化日志的多个日志记录文件的步骤，包括：

所述下级监控管理平台在所述日志文件中创建日志记录文件；

所述下级监控管理平台将所述资源变化日志按行写入到所述日志记录文件中；

若写入所述资源变化日志后的日志记录文件达到预设的文件大小，则下级监控管理平台在所述日志文件中再创建新的日志记录文件，并将剩余的资源变化日志按行写入到所述新的日志记录文件中；

所述下级监控管理平台重复上述3个步骤，直到完成全部资源变化日志的写入。

3.根据权利要求1所述的方法，其特征在于，所述文件标识为所述日志记录文件的生成时间转化成的时间戳，所述下级监控管理平台采用所述多个日志记录文件生成单链表数据的步骤，包括：

所述下级监控管理平台提取所述日志记录文件中的第二数据；

所述下级监控管理平台将所述第二数据封装为数据结构；其中，所述数据结构具有与所述文件标识对应的结点标识；

所述下级监控管理平台按照所述结点标识的时间先后顺序将所述数据结构依次连接成单链表数据。

4.根据权利要求3所述的方法，其特征在于，所述下级监控管理平台针对所述N个日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据的步骤，包括：

所述下级监控管理平台从所述日志读取指令中提取所述目标文件标识及所述目标位置字节数；

所述下级监控管理平台在所述单链表数据中，查找与所述目标文件标识对应的目标结点标识，并针对所述目标结点标识，确定目标数据结构；

所述下级监控管理平台在所述目标数据结构中，查找与所述目标位置字节数对应的目标字节；

所述下级监控管理平台判断所述目标字节到所述单链表数据的结尾之间的字节数是否超过预设字节数；

若是，则所述下级监控管理平台在所述单链表数据中，从所述目标字节开始提取预设字节数的数据；

若否，则所述下级监控管理平台在所述单链表数据中，提取从所述目标字节到所述单链表数据的结尾之间的剩余数据。

5.根据权利要求1所述的方法，其特征在于，在所述下级监控管理平台针对所述N个日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据的步骤后，并且在所述下级监控管理平台依次将所述第一数据发送至所述视联网服务器的步骤前，还包括：

所述下级监控管理平台将所述第一数据进行压缩。

6.根据权利要求1所述的方法，其特征在于，所述下级监控管理平台中包括下级数据库，在所述下级监控管理平台针对发生的资源变动操作生成多个资源变化日志的步骤后，还包括：

所述下级监控管理平台将所述多个资源变化日志保存到所述下级数据库中。

7.一种资源变化日志读写的方法，其特征在于，所述方法应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接；所述下级监控管理平台用于生成多个资源变化日志，并依次生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识，所述方法包括：

所述上级监控管理接收所述视联网服务器转发的日志信息；所述日志信息由所述下级监控管理平台针对所述单链表数据生成并发送至所述视联网服务器；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

所述上级监控管理平台针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器；所述视联网服务器将所述日志读取指令发送至所述下级监控管理平台；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

所述上级监控管理平台依次接收所述视联网服务器转发的所述第一数据；其中，所述第一数据由所述下级监控管理平台发送至所述视联网服务器。

8.根据权利要求1所述的方法，其特征在于，所述上级监控管理平台包括上级数据库，所述第一数据为经压缩后的数据，在所述上级监控管理平台依次接收所述视联网服务器转发的所述第一数据的步骤后，还包括：

所述上级监控管理平台对所述第一数据解压；

所述上级监控管理平台将解压后的第一数据存放到所述上级数据库。

9.一种资源变化日志读写的装置，其特征在于，所述装置应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，所述装置位于所述下级监控管理平台，包括：

资源变化日志生成模块，用于针对发生的资源变动操作生成多个资源变化日志；

资源变化日志写入模块，用于依次生成写入了所述资源变化日志的多个日志记录文件，其中，所述日志记录文件具有文件标识；

单链表数据生成模块，用于采用所述多个日志记录文件生成单链表数据；其中，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识；

日志信息生成模块，用于针对所述单链表数据生成日志信息，并将所述日志信息发送至所述视联网服务器；所述视联网服务器用于将所述日志信息发送至所述上级监控管理平台；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

指令接收模块，用于接收所述视联网服务器转发的N个日志读取指令，所述日志读取指令由所述上级监控管理平台生成并发送至所述视联网服务器；其中，所述日志读取指令包括目标文件标识及目标位置字节数，N为大于1的整数；

数据读取模块，用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据；其中，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据发送模块，用于依次将所述第一数据发送至所述视联网服务器，所述视联网服务器将所述第一数据转发至所述上级监控管理平台。

10.一种资源变化日志读写的装置，其特征在于，所述装置应用于视联网，所述视联网中包括视联网服务器、上级监控管理平台、下级监控管理平台，所述视联网服务器与所述上级监控管理平台及所述下级监控管理平台通信连接，所述下级监控管理平台用于生成多个资源变化日志，并按时间先后顺序生成写入了所述资源变化日志的多个日志记录文件，并采用所述多个日志记录文件生成单链表数据；其中，所述日志记录文件具有文件标识，所述单链表数据包括多个数据结构，所述数据结构具有与所述文件标识对应的结点标识，所述装置位于所述上级监控管理平台，包括：

日志信息获取模块，用于接收所述视联网服务器转发的日志信息；所述日志信息由所述下级监控管理平台针对所述单链表数据生成并发送至所述视联网服务器；其中，所述日志信息包括所述单链表数据的总字节数信息及文件标识信息；

日志读取指令生成模块，用于针对所述日志信息，生成N个日志读取指令，并将所述日志读取指令发送至所述视联网服务器，所述视联网服务器将所述日志读取指令发送至所述下级监控管理平台；其中，所述日志读取指令包括目标文件标识及目标位置字节数；所述下级监控管理平台用于针对N个所述日志读取指令，将所述单链表数据中的全部数据依次拆分读取为N个第一数据，所述第一数据为所述下级监控管理平台针对所述日志读取指令，在所述目标文件标识对应的目标数据结构中查找与所述目标位置字节数对应的目标字节，并在所述单链表数据中，从所述目标字节开始读取的具有预设字节数的数据；

数据接收模块，用于依次接收所述视联网服务器转发的所述第一数据；其中，所述第一数据由所述下级监控管理平台发送至所述视联网服务器。