CN113824721B - 基于网络的信息处理方法及电子设备 - Google Patents

基于网络的信息处理方法及电子设备 Download PDF

Info

Publication number
CN113824721B
CN113824721B CN202111113575.0A CN202111113575A CN113824721B CN 113824721 B CN113824721 B CN 113824721B CN 202111113575 A CN202111113575 A CN 202111113575A CN 113824721 B CN113824721 B CN 113824721B
Authority
CN
China
Prior art keywords
information
network
network device
equipment
web crawler
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111113575.0A
Other languages
English (en)
Other versions
CN113824721A (zh
Inventor
梁艳杰
万志宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Original Assignee
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Topsec Technology Co Ltd, Beijing Topsec Network Security Technology Co Ltd, Beijing Topsec Software Co Ltd filed Critical Beijing Topsec Technology Co Ltd
Priority to CN202111113575.0A priority Critical patent/CN113824721B/zh
Publication of CN113824721A publication Critical patent/CN113824721A/zh
Application granted granted Critical
Publication of CN113824721B publication Critical patent/CN113824721B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0876Network architectures or network communication protocols for network security for authentication of entities based on the identity of the terminal or configuration, e.g. MAC address, hardware or software configuration or device fingerprint
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/30Network architectures or network communication protocols for network security for supporting lawful interception, monitoring or retaining of communications or communication related information

Abstract

本申请公开了一种基于网络的信息处理方法及电子设备,该方法包括:通过网络向网络设备发送探测信息;在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息;基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息;基于所述公开信息,确定所述网络设备的身份信息。该基于网络的信息处理方法能够自动的对网络中未知的网络设备进行侦测,并在无需网络设备授权的情况下也能够准确的获取到网络设备的身份信息,而且该处理方法具有极高处理效率。

Description

基于网络的信息处理方法及电子设备
技术领域
本申请涉及网络信息处理领域,特别涉及一种基于网络的信息处理方法及电子设备。
背景技术
边缘接入网关在智慧城市、智能制造等多应用场景中作为不可获取的组件,形成的网络会大量接入网络设备进行信息的分析管控,例如摄像头等网络设备作为视频源的直接获取者更是网络的接入对象。但是目前而言,网络设备接入网络后,网络设备的身份信息往往是缺乏的,边缘接入网关不能简便而高效的获取到该身份信息,从而不能实现与网络设备之间的良好配合。
发明内容
本申请实施例的目的在于提供一种基于网络的信息处理方法及电子设备。
本申请的实施例的该基于网络的信息处理方法,包括:
通过网络向网络设备发送探测信息;
在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息;
基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息;
基于所述公开信息,确定所述网络设备的身份信息。
作为可选,所述通信信息包括所述网络设备的地址信息和端口信息,所述基于所述应答信息确定所述网络设备的通信信息,包括:
对所述应答信息进行解析,以获取所述地址信息和所述端口信息;
基于所述地址信息确定所述网络设备在所述网络中的位置;
基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和 /或逻辑端口。
作为可选,所述方法还包括:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息,包括:
基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
作为可选,所述基于所述公开信息,确定所述网络设备的身份信息,包括:
从所述公开信息中提取第一关键信息;
对所述第一关键信息进行补全操作,形成第二关键信息;
将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息。
作为可选,所述将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息,包括:
基于第一关键信息,从所述预存设备信息中获取与所述网络设备相关联的设备子信息;
将所述第二关键信息与所述设备子信息进行匹配操作,确定所述身份信息。
作为可选,所述通过网络向网络设备发送探测信息,包括:
基于Onvif协议向所述网络中的组播地址发送所述探测信息。
作为可选,所述方法还包括:
基于所述身份信息,在所述网络中对所述网络设备进行标注;
向被标注了的所述网络设备发送控制指令和/或提供支持数据包。
本申请实施例还提供了一种电子设备,包括:
探测模块,其配置为通过网络向网络设备发送探测信息;
确定模块,其配置为在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息;
爬取模块,其配置为基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息;
处理模块,其配置为基于所述公开信息,确定所述网络设备的身份信息。
作为可选,所述通信信息包括所述网络设备的地址信息和端口信息,所述确定模块进一步配置为:
对所述应答信息进行解析,以获取所述地址信息和所述端口信息;
基于所述地址信息确定所述网络设备在所述网络中的位置;
基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和 /或逻辑端口。
作为可选,该电子设备还包括构建模块,所述构建模块配置为:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述爬取模块进一步配置为:基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
该基于网络的信息处理方法能够自动的对网络中未知的网络设备进行侦测,并在无需网络设备授权的情况下也能够准确的获取到网络设备的身份信息,而且该处理方法具有极高处理效率。
附图说明
图1为本申请实施例的基于网络的信息处理方法的流程图;
图2为本申请实施例的图1中步骤S200的流程图;
图3为本申请实施例的图1中步骤S400的流程图;
图4为本申请实施例的信息处理方法的一个具体实施例的流程图;
图5为本申请实施例的电子设备的结构框图。
具体实施方式
此处参考附图描述本申请的各种方案以及特征。
应理解的是,可以对此处申请的实施例做出各种修改。因此,上述说明书不应该视为限制,而仅是作为实施例的范例。本领域的技术人员将想到在本申请的范围和精神内的其他修改。
包含在说明书中并构成说明书的一部分的附图示出了本申请的实施例,并且与上面给出的对本申请的大致描述以及下面给出的对实施例的详细描述一起用于解释本申请的原理。
通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述,本申请的这些和其它特性将会变得显而易见。
还应当理解,尽管已经参照一些具体实例对本申请进行了描述,但本领域技术人员能够确定地实现本申请的很多其它等效形式,它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。
当结合附图时,鉴于以下详细说明,本申请的上述和其他方面、特征和优势将变得更为显而易见。
此后参照附图描述本申请的具体实施例;然而,应当理解,所申请的实施例仅仅是本申请的实例,其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以避免不必要或多余的细节使得本申请模糊不清。因此,本文所申请的具体的结构性和功能性细节并非意在限定,而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本申请。
本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其他实施例中”,其均可指代根据本申请的相同或不同实施例中的一个或多个。
图1为本申请实施例的基于网络的信息处理方法的流程图,如图1所示,本申请实施例的一种基于网络的信息处理方法,该方法可以应用于网络中的网关等核心的电子设备,所述的网络中连接有一个或多个网络设备,如摄像头、会议机、路由器等。
该信息处理方法可以通过网关等核心设备向网络中发送探测信息,用于探测连接在网络中的网络设备,该探测信息可以根据实际需要来进行发送,如以预设时间点发送,间隔时间发送,或者向网络中的特定区域发送等。在接收到该探测信息后,网络设备给予应答,应答的方式可以是基于探测信息向网关发送应答信息,以建立与网关的连接。网关接到应答信息后,基于应答信息确定网络设备的通信信息,该通信信息为网络设备与网络进行数据通信的信息,如通信信息包括接口信息,地址信息,从而描述了网络设备与网络之间进行交互的相关情况。网关基于该接口信息和地址信息可以向网络释放网络爬虫,网络爬虫由程序代码构成,能够在网络中抓取网络设备相关的信息并返回给网关。本实施例中网关通过网络爬虫爬取网络设备向网络公开的信息,如登陆界面等。网关获取到该公开信息后能够对公开信息进行分析,结合自身预存的与网络设备相关的数据集来确定该网络设备的身份信息。
下面结合附图,对该基于网络的信息处理方法进行详细的说明。如图 1所示,该方法包括以下步骤:
S100,通过网络向网络设备发送探测信息。
网络设备连接在网络中,如摄像头、会议机、路由器等,其与网络中的核心的电子设备(如网关)连接。核心的电子设备能够向一个或多个网络设备发送探测信息,以探测网络中的所有或部分的网络设备。
一方面,核心的电子设备向整个网络发送探测信息,以探测网络中所有的网络设备。例如可以是基于网络对应的网络地址,向所有的网络设备发送探测信息。
另一方面,电子设备可以基于网络地址中的部分地址段来向网络发送探测信息,从而能够探测网络的该地址段中的部分网络设备。例如,网关已经获得了网络中的大部分网络设备的身份信息,仅没有得到新接入的网络设备的身份信息。基于此可以基于相应的地址段对部分网络设备进行探测,发送探测信息。
S200,在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息。
网络设备可以使用其通信手段来将应答信息发送给网关等电子设备,该应答信息与通信手段相关联,因此基于该应答信息可以确定网络设备的通信信息。通信信息为网络设备与网络中的其他设备进行通信的相关信息,如网络信息包括网络设备的地址信息和端口信息。即网络设备可以基于地址信息和端口信息与网络中的其他电子设备进行通信,而电子设备也可以基于地址信息和端口信息来对网络设备进行更加详细的探测。
此外,在一个实施例中,如果网关等电子设备没有接收到该应答信息,或者仅接收到部分信息的情况下,可以有目标性的向该网络信息重复发送探测信息。或者根据已有的与网络设备相关的信息来确定通信线路是否出现异常。还可以基于网络设备没有接收到该应答信息的情况,生成相应的提示信息。
S300,基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息。
网络爬虫是一种按照一定的规则,自动地抓取网络信息的程序或者脚本。例如从一个或若干初始页面的URL开始,获得初始页面上的URL,在抓取页面信息的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。当然网络爬虫还可以使用其他爬取方式来抓取网络信息。
本实施例中网关等网络设备可以将网络爬虫向网络中所有的网络设备投送,或向网络的部分子网络中的网络设备投送。具体可以是基于通信信息对全部或部分网络使用网络爬虫,对网络设备进行爬取操作,以爬取网络设备的公开信息。该公开信息为网络设备能够向网络中的其他设备公开的信息,如登陆界面、简介信息等。由于该公开信息处于公开状态,因此网络爬虫可以不必经过网络设备的许可而获取到,从而提高了获取效率。
举例说明,网关在确定了网络设备的地址信息和端口信息后,可以基于地址信息和端口信息来设置网络爬虫的工作方式和工作目标,可以包括根据地址信息寻找到该网络设备,再基于端口信息与网络设备进行交互,从而从网络设备处获取其公开的公开信息。并将该公开信息返回给网关。
S400,基于所述公开信息,确定所述网络设备的身份信息。
公开信息中包含了与该网络设备相关的多种信息,如网络设备的名称、型号、生产厂家全部或部分信息、登陆方式等信息。获取到上述公开信息后,可以对其进行分析,提取出有效信息,舍弃无效信息(如与身份信息无关的图片等),进而对有效信息进一步处理。
在一个实施例中,可以对有效信息进行关键字的提取,基于关键字对网络设备进行判断,从而确定其身份信息,如该关键字即为A厂商生产的 B设备。在另一个实施例中,也可以将有效信息与预存的网络设备的相关资料进行匹配,从而确定网络设备的身份信息。当然对公开信息的分析和处理还可以有其他方式。
网关获取到身份信息后,可以基于该身份信息对网络设备进行标注,也可以对其进行有效的控制。从而方便了用户的使用,避免了现有设备的资源浪费。
该基于网络的信息处理方法能够自动的对网络中未知的网络设备进行侦测,并在无需网络设备授权的情况下也能够准确的获取到网络设备的身份信息,而且该处理方法的处理效率极高。
在本申请的一个实施例中,所述通信信息包括所述网络设备的地址信息和端口信息,所述基于所述应答信息确定所述网络设备的通信信息,如图2所示,包括:
S210,对所述应答信息进行解析,以获取所述地址信息和所述端口信息。
地址信息可以是网络设备的网络地址,如IP地址等表达形式,通过地址信息可以在网络中准确的搜寻到该网络设备,包括利用该网络地址,从而准确的定位到该网络设备,以便对网络设备进行其他的操作。
端口信息为网络设备使用的物理和/或逻辑的端口的相关信息,网络设备通过端口与网络中的其他设备通信。例如,端口信息中描述了该网络设备所使用的物理通信端口,基于该物理通信端口可以与该网络设备进行正确的通信。
S220,基于所述地址信息确定所述网络设备在所述网络中的位置。
地址信息可以是IP地址,该IP地址表征了网络设备在网络中的具体位置。该IP地址在网络中具有唯一性。
S230,基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和/或逻辑端口。
网络设备与网络中的其他设备,如与核心的电子设备之间进行数据交互时需要基于端口信息中描述的端口来实现。在一个实施例中,摄像头等网络设备首先向自身的所使用的物理和/或逻辑端口的相关信息发送给电子设备,以约定交互方式。电子设备通过物理和/或逻辑端口来与摄像头等网络设备进行数据的接收或发送。而端口信息则描述了网络设备进行数据交互时所使用的物理和/或逻辑端口的具体情况,从而基于端口信息确定网络设备的物理和/或逻辑端口。再结合地址信息则可以进一步的确定网络设备的通信信息,以便与网络设备进行控制或其他操作。
在本申请的一个实施例中,所述方法还包括:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息,包括:
基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
具体来说,网络架构也为网络体系结构,是指网络通信系统的整体设计,网络架构为网络硬件、软件、协议、存取控制和拓扑提供标准。网络架构包括多个层级的架构。
而网络爬虫(又称为网页蜘蛛,网络机器人),是一种按照一定的规则,自动地抓取网络信息的程序或者脚本。例如其工作方式可以是从一个或若干初始页面的URL开始,获得初始页面上的URL,在抓取页面信息的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。
网络爬虫的结构大致可以分为页面爬行模块、页面分析模块、链接过滤模块、页面数据库、URL队列、初始URL集合几个部分。为提高工作效率,网络爬虫采取一定的爬行策略,包括深度优先策略、广度优先策略。而该爬行策略的制定则需要与具体的网络相适配。本实施例中基于网络架构构建网络爬虫,使得构建的网络爬虫能够更加适用于该网络,包括与网络硬件、软件、协议、存取控制和拓扑相适配,以及与各个层级的架构相适配。从而能够对网络中的网络设备进行高效而准确的爬取信息的操作。
本实施例中,网关等电子设备基于网络架构,向网络中释放网络爬虫,以使网络爬虫爬取网络设备公开的登录信息。该登录信息可以是网络设备的登录界面,还可以是网络设备发布的与登录相关的使用说明等信息。网络爬虫可以在不经过网络设备授权的情况下爬取到该登录信息。该登录信息中包含与身份信息相关的关联信息。例如网络设备的生产厂家设置的登录界面中具有该网络设备的名称、型号、厂商名称等信息。将这些关联信息获取到,则可以直接或间接的确定网络设备的身份信息。
在本申请的一个实施例中,所述基于所述公开信息,确定所述网络设备的身份信息,如图3所示,包括:
S410,从所述公开信息中提取第一关键信息;
S420,对所述第一关键信息进行补全操作,形成第二关键信息;
S430,将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息。
具体来说,公开信息中的第一关键信息可以是与网络身份相关的重要信息,如网络设备的名称、使用方式、厂商名称等。该第一关键信息可以以文字和/或图片的方式在公开信息中出现。而从公开信息中提取第一关键信息则可以对文字和/或图片进行识别的方式以形成第一关键信息。
第一关键信息可以是多个信息的组合,如在公开信息中出现的所有的与该网络设备相关的信息均可以被认为是第一关键信息。将第一关键信息提取后,由于第一关键信息可能是并不连贯的信息的组合,因此本实施例对其进行补全操作,将第一关键信息中缺少的内容进行补全。而补全操作的方式可以基于第一关键信息的具体内容来操作,如根据前一信息和后一信息的内容,将中间缺失的内容补全。从而得到内容完整的第二关键信息。
预存设备信息可以是预先存储的所有的网络设备相关的详细信息,将第二关键信息与预存设备信息中的内容进行匹配,从而确定身份信息。例如,第二关键信息中有型号A的摄像头的拍摄说明的相关内容,将该第二关键信息与预存设备信息进行匹配,便能够确定该型号A的摄像头所对应的厂商信息以及其他详细信息,进而能够确定该摄像头的身份信息。
在本申请的一个实施例中,所述将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息,包括:
基于第一关键信息,从所述预存设备信息中获取与所述网络设备相关联的设备子信息;
将所述第二关键信息与所述设备子信息进行匹配操作,确定所述身份信息。
具体的,不同的网络设备对应的预存设备信息中的内容并不相同,本实施中预存设备信息包括一个或多个设备子信息,每个设备子信息均对应了不同的网络设备。在将第二关键信息与预存设备信息进行对比时,可以具体与其中对应的设备子信息进行对比,从而能够更加准确和快速的确定该网络设备的身份信息。
例如,将摄像头对应的第二关键信息与预存设备信息中摄像头对应的设备子信息进行对比,从而能够确定该摄像头的身份信息。将路由器对应的第二关键信息与预存设备信息中路由器对应的设备子信息进行对比,从而能够确定该路由器的身份信息。
在本申请的一个实施例中,所述通过网络向网络设备发送探测信息,包括:基于Onvif协议向所述网络中的组播地址发送所述探测信息。
其中,Onvif(开放式网络视频接口论坛)是一个全球性的开放式行业论坛,其目标是促进开发和使用基于物理IP的安全产品接口的全球开放标准。Onvif协议是基于Onvif的协议,例如,基于Onvif协议的摄像头符合“网络视频标准规范”和“实时流传输协议”的标准。使用的Onvif规范描述了网络视频的模型、接口、数据类型以及数据交互的模式。
本实施例中,网关等电子设备可以基于Onvif协议向网络中的组播地址发送探测信息。例如向组播地址239.255.255.250:3702发送探测信息。从而能够主导精准发送的目的,避免了盲目发送而导致资源的浪费。
在本申请的一个实施例中,如图4所示,所述方法还包括以下步骤:
S500,基于所述身份信息,在所述网络中对所述网络设备进行标注。
对网络设备进行标注可以是在表示网络的信息中将该网络设备的进行身份的标注。如在网络图像中标注该网络设备的名称、生产厂家等信息,或者从而在查看该网络时可以清楚的获知该网络设备的位置以及身份等,便于操控该网络设备。
S600,向被标注了的所述网络设备发送控制指令和/或提供支持数据包。
网络设备被标注后形成了标识信息,标识信息与身份信息相关联。网关等电子设备可以向被标注了的网络设备发送控制指令,具体可以是基于标注后形成的标识信息来发送控制指令。
如网络设备的标识信息可以是厂商A生产的摄像头A,网关则根据上述的标识信息具有针对性的发送与该摄像头A相适应的拍摄指令、转动镜头指令、关机指令等。从而能够有效的控制该摄像头A。
此外,网关等电子设备可以向被标注了的网络设备发送支持数据包,具体可以是基于标注后形成的标识信息来发送支持数据包。该支持数据包可以对网络设备进行支持,如对网络设备进行升级,重置和/或打补丁等操作。
例如,网络设备的标识信息可以是厂商B生产的路由器B,网关则根据上述的标识信息具有针对性的向 该路由器B发送支持数据包,以使路由器B可以基于该支持数据包进行系统的升级操作,从而对该路由器B进行了边界而有效的维护。
本申请实施例还提供了一种电子设备,该电子设备可以是网络中的网关等核心设备,如图5所示,该电子设备包括:
探测模块,其配置为通过网络向网络设备发送探测信息。
具体的,网络设备连接在网络中,如摄像头、会议机、路由器等,其与网络中的核心的电子设备(如网关)连接。探测模块能够向一个或多个网络设备发送探测信息,以探测网络中的所有或部分的网络设备。
一方面,探测模块向整个网络发送探测信息,以探测网络中所有的网络设备。例如可以是基于网络对应的网络地址,向所有的网络设备发送探测信息。
另一方面,探测模块可以基于网络地址中的部分地址段来向网络发送探测信息,从而能够探测网络的该地址段中的部分网络设备。例如,网关已经获得了网络中的大部分网络设备的身份信息,仅没有得到新接入的网络设备的身份信息。基于此,探测模块可以基于相应的地址段对部分网络设备进行探测,发送探测信息。
确定模块,其配置为在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息。
具体的,网络设备可以使用其通信手段来将应答信息发送给网关等电子设备,该应答信息与通信手段相关联,因此确定模块基于该应答信息可以确定网络设备的通信信息。通信信息为网络设备与网络中的其他设备进行通信的相关信息,如网络信息包括网络设备的地址信息和端口信息。即网络设备可以基于地址信息和端口信息与网络中的其他电子设备进行通信,而电子设备也可以基于地址信息和端口信息来对网络设备进行更加详细的探测。
此外,在一个实施例中,如果网关等电子设备没有接收到该应答信息,或者仅接收到部分信息的情况下,确定模块可以有目标性的向该网络信息重复发送探测信息。或者根据已有的与网络设备相关的信息来确定通信线路是否出现异常。还可以基于网络设备没有接收到该应答信息的情况,生成相应的提示信息。
爬取模块,其配置为基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息。
具体的,网络爬虫是一种按照一定的规则,自动地抓取网络信息的程序或者脚本。例如从一个或若干初始页面的URL开始,获得初始页面上的 URL,在抓取页面信息的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。当然网络爬虫还可以使用其他爬取方式来抓取网络信息。
本实施例中,爬取模块可以将网络爬虫向网络中所有的网络设备投送,或向网络的部分子网络中的网络设备投送。具体可以是基于通信信息对全部或部分网络使用网络爬虫,对网络设备进行爬取操作,以爬取网络设备的公开信息。该公开信息为网络设备能够向网络中的其他设备公开的信息,如登陆界面、简介信息等。由于该公开信息处于公开状态,因此网络爬虫可以不必经过网络设备的许可而获取到,从而提高了获取效率。
举例说明,在确定了网络设备的地址信息和端口信息后,爬取模块可以基于地址信息和端口信息来设置网络爬虫的工作方式和工作目标,可以包括根据地址信息寻找到该网络设备,再基于端口信息与网络设备进行交互,从而从网络设备处获取其公开的公开信息。并将该公开信息返回给网关。
处理模块,其配置为基于所述公开信息,确定所述网络设备的身份信息。
具体的,公开信息中包含了与该网络设备相关的多种信息,如网络设备的名称、型号、生产厂家全部或部分信息、登陆方式等信息。获取到上述公开信息后,可以对其进行分析,提取出有效信息,舍弃无效信息(如与身份信息无关的图片等),进而对有效信息进一步处理。
在一个实施例中,处理模块可以对有效信息进行关键字的提取,基于关键字对网络设备进行判断,从而确定其身份信息,如该关键字即为A厂商生产的B设备。在另一个实施例中,处理模块也可以将有效信息与预存的网络设备的相关资料进行匹配,从而确定网络设备的身份信息。当然对公开信息的分析和处理还可以有其他方式。
获取到身份信息后,处理模块可以基于该身份信息对网络设备进行标注,也可以对其进行有效的控制。从而方便了用户的使用,避免了现有设备的资源浪费。
在本申请的一个实施例中,所述通信信息包括所述网络设备的地址信息和端口信息,所述确定模块进一步配置为:
对所述应答信息进行解析,以获取所述地址信息和所述端口信息;
基于所述地址信息确定所述网络设备在所述网络中的位置;
基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和 /或逻辑端口。
具体的,地址信息可以是网络设备的网络地址,如IP地址等表达形式,通过地址信息可以在网络中准确的搜寻到该网络设备,包括利用该网络地址,从而准确的定位到该网络设备,以便对网络设备进行其他的操作。
端口信息为网络设备使用的物理和/或逻辑的端口的相关信息,网络设备通过端口与网络中的其他设备通信。例如,端口信息中描述了该网络设备所使用的物理通信端口,基于该物理通信端口可以与该网络设备进行正确的通信。
地址信息可以是IP地址,该IP地址表征了网络设备在网络中的具体位置。该IP地址在网络中具有唯一性。
网络设备与网络中的其他设备,如网络设备与核心的电子设备之间进行数据交互时需要基于端口信息中描述的端口来实现。在一个实施例中,摄像头等网络设备首先向自身的所使用的物理和/或逻辑端口的相关信息发送给电子设备,以约定交互方式。电子设备通过物理和/或逻辑端口来与摄像头等网络设备进行数据的接收或发送。而端口信息则描述了网络设备进行数据交互时所使用的物理和/或逻辑端口的具体情况,从而确定模块基于端口信息确定网络设备的物理和/或逻辑端口。确定模块再结合地址信息则可以进一步的确定网络设备的通信信息,以便与网络设备进行控制或其他操作。
在本申请的一个实施例中,电子设备还包括构建模块,所述构建模块配置为:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述爬取模块进一步配置为:基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
具体来说,网络架构也为网络体系结构,是指网络通信系统的整体设计,网络架构为网络硬件、软件、协议、存取控制和拓扑提供标准。网络架构包括多个层级的架构。
而网络爬虫(又称为网页蜘蛛,网络机器人),是一种按照一定的规则,自动地抓取网络信息的程序或者脚本。例如其工作方式可以是从一个或若干初始页面的URL开始,获得初始页面上的URL,在抓取页面信息的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。
网络爬虫的结构大致可以分为页面爬行模块、页面分析模块、链接过滤模块、页面数据库、URL队列、初始URL集合几个部分。为提高工作效率,网络爬虫采取一定的爬行策略,包括深度优先策略、广度优先策略。而该爬行策略的制定则需要与具体的网络相适配。本实施例中,构建模块基于网络架构构建网络爬虫,使得构建的网络爬虫能够更加适用于该网络,包括与网络硬件、软件、协议、存取控制和拓扑相适配,以及与各个层级的架构相适配。从而能够对网络中的网络设备进行高效而准确的爬取信息的操作。
本实施例中,构建模块基于网络架构,向网络中释放网络爬虫,以使网络爬虫爬取网络设备公开的登录信息。该登录信息可以是网络设备的登录界面,还可以是网络设备发布的与登录相关的使用说明等信息。网络爬虫可以在不经过网络设备授权的情况下爬取到该登录信息。该登录信息中包含与身份信息相关的关联信息。例如网络设备的生产厂家设置的登录界面中具有该网络设备的名称、型号、厂商名称等信息。将这些关联信息获取到,则可以直接或间接的确定网络设备的身份信息。
在本申请的一个实施例中,处理模块进一步配置为:
从所述公开信息中提取第一关键信息;
对所述第一关键信息进行补全操作,形成第二关键信息;
将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息。
在本申请的一个实施例中,处理模块进一步配置为:
基于第一关键信息,从所述预存设备信息中获取与所述网络设备相关联的设备子信息;
将所述第二关键信息与所述设备子信息进行匹配操作,确定所述身份信息。
在本申请的一个实施例中,探测模块进一步配置为:
基于Onvif协议向所述网络中的组播地址发送所述探测信息。
在本申请的一个实施例中,处理模块进一步配置为:
基于所述身份信息,在所述网络中对所述网络设备进行标注;
向被标注了的所述网络设备发送控制指令和/或提供支持数据包。
以上实施例仅为本申请的示例性实施例,不用于限制本申请,本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内,对本申请做出各种修改或等同替换,这种修改或等同替换也应视为落在本申请的保护范围内。

Claims (8)

1.一种基于网络的信息处理方法,其特征在于,包括:
通过网络向网络设备发送探测信息;
在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息;
基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息;
基于所述公开信息,确定所述网络设备的身份信息;其中,
所述基于所述公开信息,确定所述网络设备的身份信息,包括:
从所述公开信息中提取第一关键信息;
对所述第一关键信息进行补全操作,形成第二关键信息;
将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息;
所述将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息,包括:
基于第一关键信息,从所述预存设备信息中获取与所述网络设备相关联的设备子信息;
将所述第二关键信息与所述设备子信息进行匹配操作,确定所述身份信息。
2.根据权利要求1所述的方法,其特征在于,所述通信信息包括所述网络设备的地址信息和端口信息,所述基于所述应答信息确定所述网络设备的通信信息,包括:
对所述应答信息进行解析,以获取所述地址信息和所述端口信息;
基于所述地址信息确定所述网络设备在所述网络中的位置;
基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和/或逻辑端口。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息,包括:
基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
4.根据权利要求1所述的方法,其特征在于,所述通过网络向网络设备发送探测信息,包括:
基于Onvif协议向所述网络中的组播地址发送所述探测信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述身份信息,在所述网络中对所述网络设备进行标注;
向被标注了的所述网络设备发送控制指令和/或提供支持数据包。
6.一种电子设备,其特征在于,包括:
探测模块,其配置为通过网络向网络设备发送探测信息;
确定模块,其配置为在接收到针对所述探测信息返回的应答信息的情况下,基于所述应答信息确定所述网络设备的通信信息;
爬取模块,其配置为基于所述通信信息,对所述网络设备使用网络爬虫,以爬取所述网络设备的公开信息;
处理模块,其配置为基于所述公开信息,确定所述网络设备的身份信息;其中,
所述处理模块进一步配置为:
从所述公开信息中提取第一关键信息;
对所述第一关键信息进行补全操作,形成第二关键信息;
将所述第二关键信息与预存设备信息进行对比,确定所述网络设备的身份信息;
所述处理模块进一步配置为:
基于第一关键信息,从所述预存设备信息中获取与所述网络设备相关联的设备子信息;
将所述第二关键信息与所述设备子信息进行匹配操作,确定所述身份信息。
7.根据权利要求6所述的电子设备,其特征在于,所述通信信息包括所述网络设备的地址信息和端口信息,所述确定模块进一步配置为:
对所述应答信息进行解析,以获取所述地址信息和所述端口信息;
基于所述地址信息确定所述网络设备在所述网络中的位置;
基于所述端口信息确定所述网络设备进行数据交互时所使用的物理和/或逻辑端口。
8.根据权利要求6所述的电子设备,其特征在于,还包括构建模块,所述构建模块配置为:确定所述网络的网络架构,基于所述网络架构构建所述网络爬虫;
相应的,所述爬取模块进一步配置为:基于所述网络架构,向所述网络中释放所述网络爬虫,以使所述网络爬虫爬取所述网络设备公开的登录信息,其中,所述登录信息中包含与所述身份信息相关的关联信息。
CN202111113575.0A 2021-09-23 2021-09-23 基于网络的信息处理方法及电子设备 Active CN113824721B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111113575.0A CN113824721B (zh) 2021-09-23 2021-09-23 基于网络的信息处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111113575.0A CN113824721B (zh) 2021-09-23 2021-09-23 基于网络的信息处理方法及电子设备

Publications (2)

Publication Number Publication Date
CN113824721A CN113824721A (zh) 2021-12-21
CN113824721B true CN113824721B (zh) 2023-03-24

Family

ID=78915185

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111113575.0A Active CN113824721B (zh) 2021-09-23 2021-09-23 基于网络的信息处理方法及电子设备

Country Status (1)

Country Link
CN (1) CN113824721B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115665779A (zh) * 2022-12-27 2023-01-31 北京迪为双兴通讯技术有限公司 一种5g网络设备管理、升级、网络探测方法、装置、设备及介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112631139A (zh) * 2020-12-14 2021-04-09 山东大学 智能家居指令合理性实时检测系统及方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9652538B2 (en) * 2013-12-11 2017-05-16 Ebay Inc. Web crawler optimization system
CN110535699B (zh) * 2019-08-29 2022-07-05 北京知道创宇信息技术股份有限公司 基础设施确定方法、装置、电子设备及可读取存储介质
CN112532489A (zh) * 2020-12-01 2021-03-19 深圳万物安全科技有限公司 物联网设备识别方法、系统及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112631139A (zh) * 2020-12-14 2021-04-09 山东大学 智能家居指令合理性实时检测系统及方法

Also Published As

Publication number Publication date
CN113824721A (zh) 2021-12-21

Similar Documents

Publication Publication Date Title
CN111147513B (zh) 基于攻击行为分析的蜜网内横向移动攻击路径确定方法
CN108183895B (zh) 一种网络资产信息采集系统
CN110113345B (zh) 一种基于物联网流量的资产自动发现的方法
US8307441B2 (en) Log-based traceback system and method using centroid decomposition technique
CN108737417A (zh) 一种面向工业控制系统的脆弱性检测方法
US20110016528A1 (en) Method and Device for Intrusion Detection
CN111709009A (zh) 联网工业控制系统的探测方法、装置、计算机设备和介质
KR20140025316A (ko) 통신 네트워크 내의 노드 상에서 작동되는 운영 시스템을 핑커프린팅하는 방법 및 시스템
US20040049695A1 (en) System for providing a real-time attacking connection traceback using a packet watermark insertion technique and method therefor
CN105554009B (zh) 一种通过网络数据获取设备操作系统信息的方法
CN105939231A (zh) 共享接入检测方法和共享接入检测装置
EP1695486B1 (en) Method and system for collecting information relating to a communication network
CN101854275A (zh) 一种通过分析网络行为检测木马程序的方法及装置
CN112887274B (zh) 命令注入攻击的检测方法、装置、计算机设备和存储介质
CN113824721B (zh) 基于网络的信息处理方法及电子设备
CN106411644A (zh) 基于dpi技术的网络共享设备检测方法及系统
CN103905415A (zh) 一种防范远控类木马病毒的方法及系统
CN106357660A (zh) 一种ddos防御系统中检测伪造源ip的方法和装置
CN112333211B (zh) 一种基于机器学习的工控行为检测方法和系统
CN113825129A (zh) 一种5g网络环境下工业互联网资产测绘方法
CN105656730A (zh) 一种基于tcp数据包的网络应用快速发现方法和系统
CN105429996A (zh) 一种智能发现和定位地址转换设备的方法
CN111865724B (zh) 视频监控设备信息采集控制实现方法
CN111625837A (zh) 识别系统漏洞的方法、装置和服务器
CN114760216B (zh) 一种扫描探测事件确定方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant