CN105991633A - 会话日志处理方法及装置 - Google Patents

Abstract

本发明提供会话日志处理方法及装置，该方法应用于网络设备上，所述网络设备配置有多核处理器CPU，且配置有至少两个日志队列，该方法包括：当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息；根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核；根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。因此，本发明可以提高日志信息的写入速度，还可以保证同源的日志信息写入同一日志队列中。

Description

会话日志处理方法及装置

技术领域

本发明涉及网络通信技术领域，尤其涉及会话日志处理方法及装置。

背景技术

会话(session)是指通信的一方能够把一系列的消息关联起来，使得消息之间可以互相依赖。会话日志指的是在会话新建或者会话拆除时，网络设备根据用户需求，获得的用户地址或端口映射关系的信息，比如：源网络之间互连的协议(Internet Protocol，IP)地址、目的IP地址、源端口等。其中，每一条会话日志可以以队列的形式进行保存。

现有技术中，多核处理器指的是网络设备的配置为多核中央处理器(Central Processing Unit，CPU)，常见为有8核CPU、16核CPU、32核CPU等。该网络设备的日志队列为单一队列，所有CPU都写入同一日志队列中，并且为了保证写队列的可靠性，当写入同一日志队列时是需要加锁操作。

但是，当多个CPU同时写入同一日志队列，且需要加锁操作时，多个CPU写队列时会存在竞争冲突严重，导致写日志队列性能很低。

发明内容

本发明提供一种会话日志处理方法及装置，以解决现有技术中当多个CPU同时写入同一日志队列，且需要加锁操作时，多个CPU写队列时会存在竞争冲突严重，导致写日志队列性能很低的问题。

根据本发明实施例的第一方面，提供一种会话日志处理方法，所述方法应用于网络设备上，所述网络设备配置有多核处理器CPU，且配置有至少两个日志队列，包括：

当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息；

根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核；

根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。

根据本发明实施例的第二方面，提供一种会话日志处理装置，所述装置应用于网络设备上，所述网络设备配置有多核处理器CPU，且配置有至少两个日志队列，包括：

接收单元，用于当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息；

获取单元，用于根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核；

处理单元，用于根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。

应用本发明实施例，网络设备配置有多核CPU，且配置有至少两个日志队列，并且当第一设备和第二设备建立会话或删除会话时，网络设备通过接收第一设备和第二设备连接时的会话信息，根据会话信息获取第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据会话信息确定处理该会话信息的目的CPU，目的CPU为多核CPU中任一核，再根据目的CPU计算日志信息对应的日志队列序号，并将日志信息写入日志队列序号对应的日志队列中，从而提高了日志信息的写入速度，还保证了同源的日志信息写入同一日志队列中。

附图说明

图1是应用本发明实施例会话日志处理的应用场景示意图；

图2是本发明会话日志处理方法的一个实施例流程图；

图3是本发明会话日志处理方法的另一个实施例流程图；

图4是本发明会话日志处理方法所在设备的一种硬件结构图；

图5是本发明会话日志处理方法的一个实施例框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明实施例中的技术方案，并使本发明实施例的上述目的、特征和优点能够更加明显易懂，下面结合附图对本发明实施例中技术方案作进一步详细的说明。

参见图1，为应用本发明实施例会话日志处理的应用场景示意图：

图1中示出了一种会话日志处理的组网架构。该架构中包括第一设备、第二设备和网络设备。

其中，第一设备和第一设备可以是客户端的终端设备，其中，终端设备可以包括各种智能手机、平板电脑、PC(Personal Computer，个人计算机)等；也可以其他的设备。网络设备可以为路由器或交换机，并配置有多核CPU，该多核CPU常见为有8核CPU、16核CPU、32核CPU等。

现有技术中，网络设备的日志队列为单一队列，所有CPU都写入同一日志队列中，并且为了保证写队列的可靠性，当写入同一日志队列时是需要加锁操作。但是，当多个CPU同时写入同一日志队列，且需要加锁操作时，多个CPU写队列时会存在竞争冲突严重，导致写日志队列性能很低。

而本发明实施例中，根据多核CPU中的数据核的总数量可以自适应分配日志队列的总数量，每一CPU皆有对应的日志队列，并可以根据哈希算法计算出每个CPU对应的日志队列，并根据该CPU处理的会话信息，该CPU处理的会话信息可以是第一设备和第二设备建立会话时获得的会话信息，也可以是第一设备和第二设备删除会话时获得的会话信息，将获取到的日志信息写入该CPU对应的日志队列中。其中，日志信息为第一设备和第二设备建立会话时的新建日志信息，或者第一设备和第二设备删除会话时的老化日志信息，从而实现了同源日志信息即新建日志信息和老化日志信息能够写入同一日志队列中。

下面结合附图对本发明会话日志处理方法的实施例进行详细描述。

参见图2，为本发明会话日志处理方法的一个实施例流程图，该实施例可以应用于网络设备上，该网络设备配置有多核处理器CPU，且配置有至少两个日志队列，包括以下步骤：

步骤210：当第一设备和第二设备建立会话或删除会话时，接收第一设备和第二设备连接时的会话信息。

具体地，当第一设备和第二设备建立会话时，此时接收到的会话信息为第一设备和第二设备连接时的信息记录。比如：IP地址为1.1.1.1的第一设备，访问IP地址为2.2.2.2的第二设备，第一设备和第二设备第一次通信连接建立时，网络设备就会以新建会话的形式记录连接信息。

当第一设备和第二设备删除会话时，此时接收到的会话信息为第一设备和第二设备通信连接结束时的信息记录。

步骤220：根据会话信息获取第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据会话信息确定处理该会话信息的目的CPU，目的CPU为多核CPU中任一核。其中，日志信息包括源IP地址、目的IP地址、源端口和目的端口中至少一种。

具体地，根据用户的需求，可以从会话信息中获取日志信息，比如：源IP地址、目的IP地址、源端口和目的端口等。其中，每一条日志信息以队列的形式进行保存。

另外，还可以从会话信息获知处理该会话信息的目的CPU。比如，会话信息中携带的目的CPU为CPU0。

步骤230：根据目的CPU计算日志信息对应的日志队列序号，并将日志信息写入日志队列序号对应的日志队列中。

具体地，每一CPU皆有对应的日志队列，并可以根据哈希算法计算出每个CPU对应的日志队列序号，并将获取到的日志信息写入该日志队列序号对应的日志队列中。比如：目的CPU为CPU0，根据目的CPU计算出的日志队列序号为0，则将获取到的日志信息写入日志队列0即queue0中。

另外，根据会话信息中携带的目的CPU的不同，将各种日志信息写入不同的日志队列中，实现了同时多队列进行写操作，极大的降低了因为写单一日志队列加锁引起的竞争冲突现象，极大提高了日志信息的写入速率。

以及，根据会话信息中携带的目的CPU作为哈希算法的输入参数，保证了相同目的CPU的日志信息写入同一日志队列，即同源日志能够写入同一日志队列。

由上述实施例可见，网络设备配置有多核CPU，且配置有至少两个日志队列，并且当第一设备和第二设备建立会话或删除会话时，网络设备通过接收第一设备和第二设备连接时的会话信息，根据会话信息获取第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据会话信息确定处理该会话信息的目的CPU，目的CPU为多核CPU中任一核，再根据目的CPU计算日志信息对应的日志队列序号，并将日志信息写入日志队列序号对应的日志队列中，从而提高了日志信息的写入速度，还保证了同源的日志信息写入同一日志队列中。

在一个实施例中，执行步骤230中根据目的CPU计算日志信息对应的日志队列序号，并将日志信息写入日志队列序号对应的日志队列中的具体过程，如图3所示，包括以下步骤：

步骤310：获取多核CPU的总核数、以及多核CPU中数据核的总数量和多核CPU中控制核的总数量。其中，多核CPU包括控制核和数据核。

具体地，对于多核CPU，其中的CPU分为两类：数据核与控制核。

比如：一个32核的CPU，该32核包括数据核和控制核两部分，且数据核和控制核的个数是可以配置的。

又比如：一个16核的CPU，若控制核个数为4，假设为CPU0、CPU1、CPU2、CPU3；则数据核个数为12，假设为CPU4、CPU5、……、CPU14、CPU15，因此，数据核的总数量为12。

步骤320：根据多核CPU的总核数、以及多核CPU中数据核的总数量和多核CPU中控制核的总数量，分配日志队列的总数量。

具体地，日志队列的总数量不是固定设置的，而是根据网络设备的实际配置，即多核CPU的总核数、数据核和控制核实际分配比例等，在网络设备启动时自动获取多核处理器的总核数、以及多核处理器中数据核的总数量和控制核的总数量，来确定需要分配日志队列的总数量。

可选地，分配的日志队列的总数量与多核处理器中数据核的总数量相同。

比如：一个16核的CPU，其中，控制核个数为4，各个控制核可以为CPU0、CPU1、CPU2、CPU3；数据核个数为12，各个数据核可以为CPU4、CPU5、……、CPU14、CPU15，因此，数据核的总数量为12，且分配的日志队列的总数量也为12，各个日志队列可以为queue0、queue1、queue2、……、queue9、queue10、queue11。

步骤330：将目的CPU的序号与日志队列的总数量进行取余运算，取余运算后得到的结果为日志信息对应的日志队列序号。其中，目的CPU可以是数据核，也可以是控制核。

具体地，将目的CPU的序号A与日志队列的总数量B进行取余运算，得到日志队列序号C，其运算过程如公式(1)所示。

C＝A％B………………………………………………………………公式(1)

比如：目的CPU为CPU0，日志队列的总数量为12，则A为0，B为12，根据公式(1)得到的C为0，对应于queue0，这样可以将获取到的日志信息写入queue0中。

步骤340：将获取到的日志信息写入计算出的日志队列序号对应的日志队列中。

由上述实施例可见，网络设备可以根据多核CPU的总核数、以及多核CPU中数据核的总数量和多核CPU中控制核的总数量，分配日志队列的总数量，并将目的CPU的序号与日志队列的总数量进行取余运算，取余运算后得到的结果为日志信息对应的日志队列序号，以及将获取到的日志信息写入计算出的日志队列序号对应的日志队列中，从而实现了根据多核CPU的总核数、数据核和控制核实际分配比例，自适应分配日志队列的总数量，可以适应于不同的网络设备或者同一网络设备的不同配置。

另一个实施例中，基于图2或图3所示的本发明会话日志处理方法，还包括：

将日志队列中的日志信息发送至日志服务器，所述日志信息为第一设备和第二设备建立会话时生成的日志信息、或者第一设备和第二设备删除会话时生成的日志信息，以使日志服务器对日志信息进行存储。

其中，日志服务器可以对日志信息进行管理，或者可以提供给用户查看日志信息等。

与前述会话日志处理方法的实施例相对应，本发明还提供了会话日志处理装置的实施例。

本发明会话日志处理装置的实施例可以应用在网络设备上。装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图4所示，为本发明会话日志处理装置所在设备的一种硬件结构图，除了图4所示的处理器、网络接口、内存以及非易失性存储器之外，实施例中装置所在的设备通常还可以包括其他硬件，如负责处理报文的转发芯片等等；从硬件结构上来讲该设备还可能是分布式的设备，可能包括多个接口卡，以便在硬件层面进行报文处理的扩展。

参见图5，为本发明会话日志处理装置的一个实施例框图，所述装置可以应用在网络设备上，该网络设备配置有多核CPU，且配置有至少两个日志队列，该装置包括：接收单元51、获取单元52和处理单元53。

其中，接收单元51，用于当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息。

获取单元52，用于根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核。其中，日志信息包括源IP地址、目的IP地址、源端口和目的端口中至少一种。

处理单元53，用于根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。

在一个可选的实现方式中，处理单元53包括获取子单元、分配子单元、计算子单元和计算子单元(图5中未示出)。

其中，获取子单元用于获取所述多核处理器的总核数、以及所述多核处理器中数据核的总数量和控制核的总数量。

分配子单元用于根据所述多核处理器的总核数、以及所述多核处理器中数据核的总数量和控制核的总数量，分配日志队列的总数量。

计算子单元用于将所述目的CPU的序号与所述日志队列的总数量进行取余运算，所述取余运算后得到的结果为所述日志信息对应的日志队列序号。

写入子单元用于将所述日志信息写入所述日志队列序号对应的日志队列中。

可选地，分配子单元中分配的日志队列的总数量与多核处理器中数据核的总数量相同。

另一个可选的实现方式中，本发明会话日志处理装置还可以包括：发送单元(图5中未示出)。

其中，发送单元用于将所述日志队列中的日志信息发送至日志服务器，所述日志信息为所述第一设备和第二设备建立会话时生成的日志信息、或者所述第一设备和第二设备删除会话时生成的日志信息，以使所述日志服务器对所述日志信息进行存储。

上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。

对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

由上述实施例可见，网络设备配置有多核CPU，且配置有至少两个日志队列，并且当第一设备和第二设备建立会话或删除会话时，网络设备通过接收第一设备和第二设备连接时的会话信息，根据会话信息获取第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据会话信息确定处理该会话信息的目的CPU，目的CPU为多核CPU中任一核，再根据目的CPU计算日志信息对应的日志队列序号，并将日志信息写入日志队列序号对应的日志队列中，从而提高了日志信息的写入速度，还保证了同源的日志信息写入同一日志队列中。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (10)

1.一种会话日志处理方法，其特征在于，所述方法应用于网络设备上，所述网络设备配置有多核处理器CPU，且配置有至少两个日志队列，包括：

当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息；

根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核；

根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。

2.根据权利要求1所述的方法，其特征在于，所述日志信息包括源IP地址、目的IP地址、源端口和目的端口中至少一种。

3.根据权利要求1所述的方法，其特征在于，所述多核CPU包括控制核和数据核；所述根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中具体包括：

获取所述多核CPU的总核数、以及所述数据核的总数量和所述控制核的总数量；

根据所述多核处理器的总核数、以及所述数据核的总数量和所述控制核的总数量，分配日志队列的总数量；

将所述目的CPU的序号与所述日志队列的总数量进行取余运算，所述取余运算后得到的结果为所述日志信息对应的日志队列序号；

将所述日志信息写入所述日志队列序号对应的日志队列中。

4.根据权利要求3所述的方法，其特征在于，所述分配的日志队列的总数量与所述数据核的总数量相同。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

将所述日志队列中的日志信息发送至日志服务器，所述日志信息为所述第一设备和第二设备建立会话时生成的日志信息、或者所述第一设备和第二设备删除会话时生成的日志信息，以使所述日志服务器对所述日志信息进行存储。

6.一种会话日志处理装置，其特征在于，所述装置应用于网络设备上，所述网络设备配置有多核处理器CPU，且配置有至少两个日志队列，包括：

接收单元，用于当第一设备和第二设备建立会话或删除会话时，接收所述第一设备和第二设备连接时的会话信息；

获取单元，用于根据所述会话信息获取所述第一设备和第二设备建立会话或删除会话时对应的日志信息，并根据所述会话信息确定处理所述会话信息的目的CPU，所述目的CPU为所述多核CPU中任一核；

处理单元，用于根据所述目的CPU计算所述日志信息对应的日志队列序号，并将所述日志信息写入所述日志队列序号对应的日志队列中。

7.根据权利要求6所述的装置，其特征在于，所述日志信息包括源IP地址、目的IP地址、源端口和目的端口中至少一种。

8.根据权利要求6所述的装置，其特征在于，所述多核CPU包括控制核和数据核；所述处理单元包括：

获取子单元，用于获取所述多核CPU的总核数、以及所述数据核的总数量和所述控制核的总数量；

分配子单元，用于根据所述多核处理器的总核数、以及所述数据核的总数量和所述控制核的总数量，分配日志队列的总数量；

计算子单元，用于将所述目的CPU的序号与所述日志队列的总数量进行取余运算，所述取余运算后得到的结果为所述日志信息对应的日志队列序号；

写入子单元，用于将所述日志信息写入所述日志队列序号对应的日志队列中。

9.根据权利要求8所述的装置，其特征在于，所述分配子单元中分配的日志队列的总数量与所述数据核的总数量相同。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括：

发送单元，用于将所述日志队列中的日志信息发送至日志服务器，所述日志信息为所述第一设备和第二设备建立会话时生成的日志信息、或者所述第一设备和第二设备删除会话时生成的日志信息，以使所述日志服务器对所述日志信息进行存储。