CN114861176A - 一种基于智能分析的对抗方法与系统 - Google Patents

一种基于智能分析的对抗方法与系统 Download PDF

Info

Publication number
CN114861176A
CN114861176A CN202210389174.6A CN202210389174A CN114861176A CN 114861176 A CN114861176 A CN 114861176A CN 202210389174 A CN202210389174 A CN 202210389174A CN 114861176 A CN114861176 A CN 114861176A
Authority
CN
China
Prior art keywords
sequence
constraint conditions
state
intelligent analysis
environment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210389174.6A
Other languages
English (en)
Inventor
郭峰
孙启彬
贺雅慧
许博仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Science and Technology of China USTC
Original Assignee
University of Science and Technology of China USTC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Science and Technology of China USTC filed Critical University of Science and Technology of China USTC
Priority to CN202210389174.6A priority Critical patent/CN114861176A/zh
Publication of CN114861176A publication Critical patent/CN114861176A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/50Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
    • G06F21/55Detecting local intrusion or implementing counter-measures
    • G06F21/56Computer malware detection or handling, e.g. anti-virus arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Evolutionary Computation (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Biophysics (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Virology (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供一种基于智能分析的对抗方法与系统,在智能体攻防中,涉及的智能体数量通常是多个,需要对环境的约束条件进行合理调度,因此需要一个调度算法,通过智能分析环境变量,学习状态量与控制量之间的关系,得出控制函数,计算其最优解,给出控制策略,在进攻者到达之前能够捕获进攻者。

Description

一种基于智能分析的对抗方法与系统
技术领域
本申请涉及网络多媒体领域,尤其涉及一种基于智能分析的对抗方法与系统。
背景技术
在现有的智能体攻防中,常采用联合合作的策略,使得对抗防守方在攻击者到达领域之前能够追击并捕获攻击者。在攻防中涉及的智能体数量通常是多个,对环境的约束条件也是多个,需要能够快速进行调度。同时,在复杂动作状态空间场景下,智能体还需要能够高效学习策略。
因此,急需一种针对性的基于智能分析的对抗的方法与系统。
发明内容
本发明的目的在于提供一种基于智能分析的对抗方法与系统,在智能体攻防中,涉及的智能体数量通常是多个,需要对环境的约束条件进行合理调度,因此需要一个调度算法,通过智能分析环境变量,学习状态量与控制量之间的关系,得出控制函数,计算其最优解,给出控制策略,在进攻者到达之前能够捕获进攻者。
第一方面,本申请提供一种基于智能分析的对抗方法,所述方法包括:
智能分析网络接收外部环境提供的观察数据,提取环境变量的特征,按照实时状态空间的要求,将所述特征重组转换为序列,传入神经网络结构中;
所述神经网络结构将所述序列分为前后两段,基于所述序列的前段进行迭代运算,得到迭代结果,并且基于所述序列的后段的位置信息进行计算,得到隐藏信息,将所述隐藏信息作为状态信息,与所述迭代结果汇合计算,得到当前环境对应的状态量;
将所述提取的环境变量的特征发送给服务器,服务器下发对应的约束条件,所述约束条件为多个;
将所述约束条件、状态量、环境变量的特征送入后级神经网络结构,迭代运算得到基于环境变量的约束条件与状态量之间的控制函数;
计算所述控制函数的最优解,向服务器查询对应的控制策略,下发所述控制策略给执行终端,捕获攻击者。
结合第一方面,在第一方面第一种可能的实现方式中,所述按照实时状态空间的要求,将所述特征重组转换为序列是指,根据复杂动作状态空间的场景,将反映空间边界的特征突出排列,所述突出排列包括:将反映空间边界的特征集中在序列的指定位置、或将这些特征重复指定数目排列。
结合第一方面,在第一方面第二种可能的实现方式中,所述将所述隐藏信息作为状态信息,与所述迭代结果汇合计算是指,将所述状态信息与迭代结果作为神经网络结构的两个输入项,再次运算。
结合第一方面,在第一方面第三种可能的实现方式中,所述捕获攻击者是指执行终端拦截攻击者的攻击,所述执行终端为多个,部署在外部环境的不同区域。
第二方面,本申请提供一种基于智能分析的对抗系统,所述系统包括处理器以及存储器:
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行第一方面四种可能中任一项所述的方法。
第三方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行第一方面四种可能中任一项所述的方法。
有益效果
本发明提供一种基于智能分析的对抗方法与系统,由于在智能体攻防中,涉及的智能体数量通常是多个,需要对环境的约束条件进行合理调度,本申请通过智能分析环境变量,学习状态量与控制量之间的关系,得出控制函数,计算其最优解,给出控制策略,在进攻者到达之前能够捕获进攻者,实现能够快速进行调度,同时在复杂动作状态空间场景下,还能够高效学习策略。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明方法的流程图。
具体实施方式
下面结合附图对本发明的优选实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
图1为本申请提供的一种基于智能分析的对抗方法的流程图,包括:
智能分析网络接收外部环境提供的观察数据,提取环境变量的特征,按照实时状态空间的要求,将所述特征重组转换为序列,传入神经网络结构中;
所述神经网络结构将所述序列分为前后两段,基于所述序列的前段进行迭代运算,得到迭代结果,并且基于所述序列的后段的位置信息进行计算,得到隐藏信息,将所述隐藏信息作为状态信息,与所述迭代结果汇合计算,得到当前环境对应的状态量;
将所述提取的环境变量的特征发送给服务器,服务器下发对应的约束条件,所述约束条件为多个;
将所述约束条件、状态量、环境变量的特征送入后级神经网络结构,迭代运算得到基于环境变量的约束条件与状态量之间的控制函数;
计算所述控制函数的最优解,向服务器查询对应的控制策略,下发所述控制策略给执行终端,捕获攻击者。
在一些优选实施例中,所述按照实时状态空间的要求,将所述特征重组转换为序列是指,根据复杂动作状态空间的场景,将反映空间边界的特征突出排列,所述突出排列包括:将反映空间边界的特征集中在序列的指定位置、或将这些特征重复指定数目排列。
在一些优选实施例中,所述将所述隐藏信息作为状态信息,与所述迭代结果汇合计算是指,将所述状态信息与迭代结果作为神经网络结构的两个输入项,再次运算。
在一些优选实施例中,所述捕获攻击者是指执行终端拦截攻击者的攻击,所述执行终端为多个,部署在外部环境的不同区域。
本申请提供一种基于智能分析的对抗系统,所述系统包括:所述系统包括处理器以及存储器:
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行第一方面所有实施例中任一项所述的方法。
本申请提供一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行第一方面所有实施例中任一项所述的方法。
具体实现中,本发明还提供一种计算机存储介质,其中,该计算机存储介质可以存储有程序,该程序执行时可包括本发明各个实施例中的部分或全部步骤。所述的存储介质可以为磁碟、光盘、只读存储记忆体(简称:ROM)或随机存储记忆体(简称:RAM)等。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
本说明书各个实施例之间相同相似的部分互相参见即可。尤其,对于实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
以上所述的本发明实施方式并不构成对本发明保护范围的限定。

Claims (6)

1.一种基于智能分析的对抗方法,其特征在于,所述方法包括:
智能分析网络接收外部环境提供的观察数据,提取环境变量的特征,按照实时状态空间的要求,将所述特征重组转换为序列,传入神经网络结构中;
所述神经网络结构将所述序列分为前后两段,基于所述序列的前段进行迭代运算,得到迭代结果,并且基于所述序列的后段的位置信息进行计算,得到隐藏信息,将所述隐藏信息作为状态信息,与所述迭代结果汇合计算,得到当前环境对应的状态量;
将所述提取的环境变量的特征发送给服务器,服务器下发对应的约束条件,所述约束条件为多个;
将所述约束条件、状态量、环境变量的特征送入后级神经网络结构,迭代运算得到基于环境变量的约束条件与状态量之间的控制函数;
计算所述控制函数的最优解,向服务器查询对应的控制策略,下发所述控制策略给执行终端,捕获攻击者。
2.根据权利要求1所述的方法,其特征在于:所述按照实时状态空间的要求,将所述特征重组转换为序列是指,根据复杂动作状态空间的场景,将反映空间边界的特征突出排列,所述突出排列包括:将反映空间边界的特征集中在序列的指定位置、或将这些特征重复指定数目排列。
3.根据权利要求2所述的方法,其特征在于:所述将所述隐藏信息作为状态信息,与所述迭代结果汇合计算是指,将所述状态信息与迭代结果作为神经网络结构的两个输入项,再次运算。
4.根据权利要求3所述的方法,其特征在于:所述捕获攻击者是指执行终端拦截攻击者的攻击,所述执行终端为多个,部署在外部环境的不同区域。
5.一种基于智能分析的对抗系统,其特征在于,所述系统包括处理器以及存储器:
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行实现权利要求1-4任一项所述的方法。
6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行实现权利要求1-4任一项所述的方法。
CN202210389174.6A 2022-04-14 2022-04-14 一种基于智能分析的对抗方法与系统 Pending CN114861176A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210389174.6A CN114861176A (zh) 2022-04-14 2022-04-14 一种基于智能分析的对抗方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210389174.6A CN114861176A (zh) 2022-04-14 2022-04-14 一种基于智能分析的对抗方法与系统

Publications (1)

Publication Number Publication Date
CN114861176A true CN114861176A (zh) 2022-08-05

Family

ID=82632286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210389174.6A Pending CN114861176A (zh) 2022-04-14 2022-04-14 一种基于智能分析的对抗方法与系统

Country Status (1)

Country Link
CN (1) CN114861176A (zh)

Similar Documents

Publication Publication Date Title
Liang et al. A zoom feature for a dynamic programming solution to economic dispatch including transmission losses
CN108833161B (zh) 一种建立基于雾计算的智能合约微服务模型的方法
CN113065656A (zh) 一种规则引擎配置方法、装置、服务器及可读存储介质
CN111898737B (zh) 一种图像转脉冲的方法及装置
CN111860786B (zh) 一种数值转脉冲的方法及装置
CN115858205B (zh) 基于内存黑板机制的仿真组件交互方法、装置和设备
CN106547683B (zh) 一种冗余代码检测方法及装置
CN109039843B (zh) 基于事件链联动策略的智能厨房设备的控制方法和装置
CN111934908A (zh) 一种物联网模拟方法、装置、系统及存储介质
CN102141911B (zh) 利用uml时序图开发的方法和活动图生成工具
CN112148350A (zh) 作品远程版本管理方法、电子设备以及计算机存储介质
CN110119621B (zh) 异常系统调用的攻击防御方法、系统及防御装置
CN114969144A (zh) 一种规则引擎在工业物联网上的应用方法
CN114861176A (zh) 一种基于智能分析的对抗方法与系统
CN113328927B (zh) 一种具有计算、存储和网络交换功能的工业物联网网关
CN112767155B (zh) 智能合约安全交易序列生成方法、装置、介质和设备
US11120513B2 (en) Capital chain information traceability method, system, server and readable storage medium
CN111901155A (zh) 一种物联网调试方法、装置、系统及存储介质
WO2005081141A3 (fr) Dispositif de simulation du monde réel par traitement asynchrone et chaotique
CN105099764A (zh) 日志处理方法及装置
CN114064125A (zh) 指令解析方法、装置及电子设备
CN111985740B (zh) 任务处理方法与装置
CN111464596A (zh) 数据处理系统、方法、装置、计算机设备和存储介质
CN117032467B (zh) 与聊天机器人交互的方法、装置、电子设备和存储介质
CN114201753B (zh) 一种基于业务行为的工业生产网络数据分析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination