CN114600087A - 异常设备迹线检测和分类 - Google Patents

异常设备迹线检测和分类 Download PDF

Info

Publication number
CN114600087A
CN114600087A CN202080075571.5A CN202080075571A CN114600087A CN 114600087 A CN114600087 A CN 114600087A CN 202080075571 A CN202080075571 A CN 202080075571A CN 114600087 A CN114600087 A CN 114600087A
Authority
CN
China
Prior art keywords
traces
trace
feature
anomalies
modified
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080075571.5A
Other languages
English (en)
Inventor
R·伯奇
J·D·大卫
朱青
本田智纪
L·L·郑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pdf Decision Co
Original Assignee
Pdf Decision Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pdf Decision Co filed Critical Pdf Decision Co
Publication of CN114600087A publication Critical patent/CN114600087A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079Root cause analysis, i.e. error or fault diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0736Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in functional embedded systems, i.e. in a data processing system designed as a combination of hardware and software dedicated to performing a certain function
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751Error or fault detection not based on redundancy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0778Dumping, i.e. gathering error/state information after a fault for later diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/211Selection of the most significant subset of features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/40Software arrangements specially adapted for pattern recognition, e.g. user interfaces or toolboxes therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/02Manufacture or treatment of semiconductor devices or of parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N7/00Computing arrangements based on specific mathematical models
    • G06N7/01Probabilistic graphical models, e.g. probabilistic networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Manufacturing & Machinery (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Power Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Debugging And Monitoring (AREA)
  • Testing Or Measuring Of Semiconductors Or The Like (AREA)

Abstract

一种半导体设备故障检测和分类方案。监测和处理传感器迹线以将已知的异常运行状况与未知的异常运行状况分开。特征工程允许关注目标特征的相关迹线。建立机器学习模型以基于异常的初始分类集进行检测和分类。随着更多的迹线被处理和学习,机器学习模型不断更新。

Description

异常设备迹线检测和分类
交叉引用
本申请要求2019年10月6日提交的名称为“Equipment Trouble Prevention(ETP):An effective approach to Anomalous Equipment Trace Detection andClassification without Prior Labeling”的美国临时申请号62/911346的优先权,该申请通过引用整体并入本文。
技术领域
本申请涉及半导体设备故障的检测和分类,并且更具体地涉及用于监测和处理传感器迹线以便对未知的异常设备运行状况进行检测和分类的方案。
背景技术
通过监测设备传感器的时间迹线来检测设备故障是半导体制造中早为人知但非常困难的问题。故障检测和分类(FDC)的经典方法是计算来自传感器迹线的汇总统计数据(通常称为关键数字或指标),然后监测这些统计数据以识别异常,这主要基于工程知识。
例如,在图1A中,垂直虚线之间的区域是显示来自半导体过程的一部分或步骤的四条不同设备传感器迹线101、102、103、104的过程窗口100。如图1B所示,通常针对迹线的每个步骤计算统计数据。然而,统计数据未能揭示图1A中从迹线104的图形中明显可见的异常110。因此,仅依赖统计过程控制技术可能会遗漏重要的异常。当然,统计过程控制方法的有效性各不相同,并且在很大程度上取决于汇总统计数据的质量。此外,计算汇总统计数据的例程需要随着过程的变化经常更新。因此,FDC汇总统计例程的构建和维护构成稀缺资源的大量投资。
充分表示任何中等复杂过程步骤的传感器所需的统计数据数量可能达到数千甚至数万,这使得错误信号成为巨大的问题。基于产品数据分析和/或在线计量来选择相关统计数据的尝试已证明有助于减少错误信号,但是此类尝试需要足够的响应数据,而且仍无法预测先前未观察到的故障。
另一种方法是使用迹线复制,例如,使用自动编码器神经网络,或像主成分一样简单的事物,识别可以准确地重构大部分迹线的有限的基向量集。具有高残差的迹线被假定为异常,并且残差平方和可用于检测异常。然而,虽然复制方法可以很好地识别许多迹线中的异常,但基向量通常没有明确的物理解释,这使得用户难以基于该信息对异常进行分类。
机器学习的最新进展开创了增强基于异常传感器迹线的检测和分类的设备故障检测和分类的能力的新的机遇。然而,针对异常迹线检测和分类实现机器学习的障碍之一是难以获得标注的迹线数据。因此,任何真正有效的异常迹线检测和分类方法都必须实现有效的策略来进行不带任何标注的异常迹线识别,并且必须利用初始分类来收集标注以不断改进检测和分类。
附图说明
图1A是示出四条设备传感器迹线的过程显示窗口。
图1B是具有图1A中所示迹线的汇总统计数据的表格。
图2是示出异常检测和分类系统的简化框图。
图3是图2的一部分的详细表示。
图4A和4B是引导示例的图形表示。
图5A和5B是用于对迹线异常进行分类的系统的框图。
图6是异常的预定义类别和对应的可能动作的表格。
图7A和7B是用于对迹线异常的分类进行审查和更新的系统的框图。
具体实施方式
如本文所用,术语“传感器迹线”是指在设备运行期间定期测量重要物理量的时间序列数据,而术语“迹线”或“设备迹线”是指针对处理实例识别的所有重要传感器的传感器迹线的集合。
本公开解决的问题是半导体处理设备的异常运行。通过监测在处理期间采集的传感器数据,将已知的异常运行状况与未知的运行状况分开,以及对那些未知的运行状况进行分类以实现快速响应来识别设备的异常运行的能力,一直是一个早为人知的难题。因此,本公开的目的是通过描述识别与正常运行迹线相比显示出显著异常的任何设备传感器迹线的实时能力来解决这个问题。
并行处理架构的出现和机器学习算法的进步促进了对这个问题的评估,机器学习算法允许用户在使此类方法相关且现实的速度下使用大量数据获得洞察并做出预测。机器学习是人工智能的一个分支,其涉及构建和研究可以从数据中学习的系统。这些类型的算法以及并行处理能力允许处理更大的数据集,并且更适合多变量分析。
机器学习中的大部分能力是在嘈杂的高维空间中准确分类的能力。然而,可通过物理上有意义的特征工程来提高检测和分类方案的有效性。此外,良好的特征工程可以极大地帮助理解类似异常迹线背后的根本原因。用于异常迹线检测和分类的有效机器学习方法应促进主动学习并使用获得的信息来不断提高故障检测和分类两者的准确性。
在生产环境中,异常迹线示例的先前标注通常是不可用的。因此,用于检测异常迹线的有效系统不能依赖于先前的标注。但是,如果可以最大限度地减少过程工程师提供标注的负担并证明其益处,则可以通过此类尝试获得对标注过程的有用输入。应包括对分类标注准确性的审查,并根据需要执行重新标注,以改进相关模型的检测和分类。
图2示出了用于异常迹线检测和分类的系统200的简化概述。系统是基于计算机的,使得可以安装各种模块并在具有传统操作系统的最先进的独立台式计算机或等效物上运行,或者可通过托管服务提供给用户,所述托管服务可通过互联网或其他网络访问。
在模块220中,执行“特征工程”以识别关键特征和相关的设备迹线数据集。特征工程220导致识别和使用模块237中对评估目标特征有用的迹线。在模块240中对迹线执行“引导”以主要基于在模块220中识别的关键特征创建分类标注。这导致将标注保存和存储在模块260。
当在引导模块240中已收集到足够的标注并将标注保存到模块260中时,引导阶段过渡到模块250中的连续学习阶段,其中异常检测和分类模型是最初构建的并将不断(或周期性地或有时)更新。根据需要对分类(标注)进行审查和更新。一旦建立了模型,就可以从模块270部署模型以在模块280中进行实时预测。
特征工程模块220在图3中更详细地示出,并且包括两个主要处理阶段:阶段320中的自定义数据准备和阶段330中的标准特征工程。在理想情况下,特征工程不需要任何特定的过程知识;然而,在很多情况下这是不现实的。例如,在某些条件下,注入机将进入调优循环,在此期间传感器记录与正常运行有很大差异并且不会直接影响晶片的传感器值。因此,作为一个示例,在阶段320的自定义数据准备期间,识别关键特征为调优循环并将其与迹线的剩余部分分离,调整或修改迹线,并创建自定义特征集,在本示例中,所述自定义特征集表示晶片的调优周期数、调优持续时间以及调优前后每条迹线的变化。这些特征可以与阶段338中的修改的迹线相结合,以为检测和分类模型提供输入。
这在图3中以图形方式表示,因为原始迹线324主要包含正常迹线324N和显示异常的少数迹线324A。在阶段320中对原始迹线324进行修改,并且修改的迹线326包括修改的正常迹线326N和少数修改的异常迹线326A。将修改的迹线326传递到阶段330,并且将识别的自定义特征发送到阶段338,作为用于检测和分类模型的完整特征集的一部分。
在阶段330,检测和分类模型所需的大部分特征都是标准化的特征,并且这些标准化的特征的计算是在没有工程输入的情况下处理的。例如,在模块332中生成“基础集”特征。首先,计算每个步骤标识符(“步骤ID”)中的基础统计数据(中值和斜率),并修改迹线以移除这些特性。然后,使用众所周知的算法解决方案(诸如主成分、自动编码器等)来通过算法计算修改的迹线的综合基础集。结合起来,这些特征(算法基础集特征、中值和斜率)形成基础集,因为给定这些基础集特征的完整列表,可以以可接受的准确性重构原始迹线。然而,以前未观察到的异常迹线将无法用这个基础集准确再现。
在模块334中生成“补充”特征并且这些特征不用于迹线复制,但是对于理解异常的根本原因是有用的。可以生成补充特征以关注已知的有影响的度量,诸如标准偏差、步骤持续时间、白噪声等。
使用在模块336中生成的基础集特征和“残差”特征将迹线337重构为原始迹线的近似物,以描述重构的准确性。残差特征捕获在基础集特征中未捕获的未知迹线变化。
最后,来自模块332的基础集特征、来自模块334的补充特征和来自模块336的残差特征与原始迹线、修改的迹线和重构迹线组合,作为机器学习模型270的输入(参见图2),所述机器学习模型被配置和训练用于对迹线异常进行检测和分类。模型识别异常迹线并基于用户反馈对这些迹线进行分类,并且可以使用两阶段方法来实现。
返回到图2,引导阶段240用于生成初始标注,并且连续学习阶段260在累积历史标注时收集并应用新的学习。引导阶段240假设存在许多未标注的多传感器设备迹线作为输入,从几百到可能几千不等。虽然输入数据没有标注,但模型假设大部分迹线表示正常的工具运行。引导阶段的目标是主要基于从特征工程阶段220中的初始数据中识别的关键特征来识别单变量和多变量异常值。
例如,图4A和4B示出了在所选过程步骤中的引导示例,其中原始迹线400包括第一迹线401、第二迹线402、第三迹线403、第四迹线404、第五迹线405和第六迹线406。除了此处将示出的四条异常迹线外,还将存在数百条(或更多)正常或典型迹线输入到引导模块。
计算迹线的中值并一起显示在图形408处,其中很明显,迹线401是异常值,因此是不正常的。修改原始迹线401-406并显示为中值调整的迹线411-416。
然后计算中值调整的迹线411-416的斜率并一起显示在图形418处,其中迹线413是异常的,并且迹线412和414是可疑的。再次修改迹线411-416并将其显示为斜率调整的迹线421-426。一旦中值和斜率已知,就可以计算算法的基础集特征,并选择捕获大部分剩余迹线变化的特征。在这个简单的示例中,仅重要的基础特征是中值和斜率。然后计算残差特征(通常是原始迹线与从基础集特征重构的近似迹线之间的平方误差之和)。从残余特征428清楚的是迹线424是异常的并且迹线422是可疑的。
可以通过过滤其他标准来公开补充特征以用于根本原因分析。例如,针对修改的迹线421-426提取噪声特征形成图形429,其中迹线422显示为异常。
在图5A和5B中示出了表示引导阶段240的系统500。原始迹线502主要包括正常迹线和少数异常,并被输入到特征工程模块504,在此对关键特征进行识别并保存到模块506。在模块508中,通过分析来自特征选择的关键特征的单变量和多变量分布来识别异常值迹线和特征。然后,用户在图形用户界面(GUI)510中对异常值进行分类。
在这个示例中,GUI 510被配置为具有可用迹线的列表512,并且用户可以选择一条或多条迹线来查看。在这个查看中,四条迹线已被选择并显示为窗口514、515中的异常值迹线和窗口516、517中的参考迹线。按钮513使用户能够选择更多类似的迹线。窗口514显示了四条异常电流迹线,而窗口515显示了四条异常电压迹线。窗口516显示了六条参考电流迹线,并且窗口517显示了六条参考电压迹线。当前形状(算法基础集)特征显示在窗口518中,电压形状特征显示在窗口519中,电流残差特征显示在窗口520中,并且对于窗口514、515中显示的所有四条异常迹线,窗口521中显示的电压残差特征是异常的。
可以使用按钮524对异常值进行分类,在这个示例中,按钮是下拉列表,从而允许用户选择若干预定义分类和相关动作之一,并经由按钮526将该分类/动作分配给这个特定异常。例如,图6是可以经由按钮524或其他等效模式实现的预定义类别和动作的表格。定义了三个类别:正常、可疑和异常。对于每个类别,都定义了动作。如果用户将异常值分类为正常,则没有必要进行动作,并且使用正常迹线来更新检测和分类模型中正常迹线的定义。
如图6所示,如果用户将异常值分类为可疑或确定地分类为异常,则为分类提供关于异常值是否无害、是否需要监测或是否应触发即时警报状况的进一步指示。关于异常分类的最终决定通常将包括某种形式的专家审查。
在将所有异常值分配给类别之后,使用所有处理过的迹线数据作为基于机器学习的模型的训练集在模块530中构建初始检测和分类模型。然后,所述模型可以用作独立或在线异常迹线检测和分类系统。
在持续学习模块中,输入数据包括在线预测、工程特征和迹线数据(原始的和调整的)。交互式GUI有助于主动学习以建立准确的异常检测和分类模型。通过算法识别类似迹线的能力是高效主动学习的关键。
具有适当过程知识的过程工程师应该优选地审查所有预测以建立可以并入模型中的置信水平因子。例如,图7A和7B与图5A和5B在示出用于分类审查的环境方面类似。GUI710类似于GUI 510并允许审查者选择迹线,使用按钮724选择适当的类别和动作,使用按钮726分配该类别/动作,然后经由按钮726使用新的学习更新模块730中的模型。
持续学习利用现有的检测和分类机器学习模型来预测每个晶片的最可能分类,而且还基于最近的训练数据和新迹线之间的相似性来预测置信度。最低置信度预测被标记用于强制审查,并且最可能是未知异常。
尽管最基本的异常检测是单变量的(特征是否正常?),但可使用多变量方法来识别不易从单变量分析中明显可见的附加异常。例如,某些设备故障可能更容易从多条传感器迹线的评估中观察到,诸如在发生温度和压力偏移两者的情况下,如果只考虑参数中的一个,则动作可能更有可能。相反,设备故障通常会在多个传感器上生成多个异常,并且多变量签名对于预测根本原因很重要。
用于根本原因分类的适当机器学习算法优选地是数据特性和数据量的函数。例如,如果数据量非常低,则简单的最近邻算法可能会产生最佳结果。如果数据量适中并且主要数据变化被工程特征所捕获,那么一些复杂的基于树的方法(诸如极端梯度提升)可能是很好的选择。如果数据量足够,并且迹线中存在与根本原因相关的强残差效应,那么卷积神经网络可能是最佳选择。为了以最少的用户输入解决这个问题,使用基于交叉验证的模型选择例程来构建分类模型,并且在许多情况下,多个模型与用于将多个预测组合成单个预测的简单聚合模型一起使用。

Claims (10)

1.一种用于对半导体设备迹线数据中的异常进行检测和分类的过程,其包括:
从相应半导体设备传感器接收多条原始迹线;
识别所述多条原始迹线的至少第一迹线集中的多个异常;
基于第一目标特征修改所述第一迹线集中的每条迹线;
从所修改的第一迹线集中的每条迹线生成特征基础集;
从所修改的第一迹线集和所述特征基础集创建多条重构迹线;以及
为所述多个异常中的每个异常分配分类。
2.根据权利要求1所述的过程,其还包括:
训练机器学习模型以基于所述第一原始迹线集、所修改的迹线和所重构的迹线对异常进行检测和分类;以及
在半导体设备操作环境中部署所述机器学习模型。
3.根据权利要求2所述的过程,其还包括:
从所述相应半导体设备传感器接收附加迹线;
识别第一附加迹线集中的附加异常;
修改所述附加迹线以移除统计特性基础集;
从所修改的附加迹线生成所述特征基础集;
从所修改的附加迹线创建重构的附加迹线;以及
基于所述第一原始迹线集、所修改的附加迹线和所重构的附加迹线更新所述机器学习模型。
4.根据权利要求1所述的过程,其还包括:
将所述多条原始迹线的所述第一集识别为与第一预定义目标特征具有有效相关性。
5.根据权利要求1所述的过程,其还包括:
将所述多条原始迹线的所述第一集识别为与多个预定义目标特征具有有效相关性。
6.根据权利要求1所述的过程,生成特征基础集的步骤还包括:
计算所述第一迹线集的统计特性集;
修改所述第一迹线集以移除所述统计特性集;
为所修改的第一迹线集计算算法解决方案;
其中所述算法解决方案和所述统计特性集形成所述特征基础集。
7.根据权利要求3所述的过程,其还包括:
将残差特征确定为在所述特征基础集中未捕获的未知迹线变化;
确定对所述第一目标特征具有已知影响的补充特征;以及
基于所述第一原始迹线集、所修改的附加迹线、所重构的附加迹线、所述特征基础集、所述残差特征和所述补充特征更新所述机器学习模型。
8.根据权利要求1所述的过程,其中所述多条原始迹线主要包括正常迹线,并且所述多个异常仅表示少数异常。
9.根据权利要求1所述的过程,其还包括:
提供图形用户界面,以用于查看选择的迹线异常;
从所述图形用户界面接收将与所选择迹线异常相关联的多个预定义类别中的一个类别作为第一输入;以及
从所述图形用户界面接收待分配给所选择迹线异常的多个预定义动作中的一个动作作为第二输入。
10.一种具有指令的非暂时性计算机可读介质,所述指令在由处理器执行时使所述处理器:
从相应半导体设备传感器接收多条原始迹线;
识别所述多条原始迹线中的至少第一迹线集中的多个异常;
基于第一目标特征修改所述第一迹线集中的每条迹线;
从所修改的第一迹线集中的每条迹线生成特征基础集;
从所修改的第一迹线集和所述特征基础集创建多条重构迹线;以及
为所述多个异常中的每个异常分配分类。
CN202080075571.5A 2019-10-06 2020-10-06 异常设备迹线检测和分类 Pending CN114600087A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962911346P 2019-10-06 2019-10-06
US62/911,346 2019-10-06
PCT/US2020/054431 WO2021071854A1 (en) 2019-10-06 2020-10-06 Anomalous equipment trace detection and classification

Publications (1)

Publication Number Publication Date
CN114600087A true CN114600087A (zh) 2022-06-07

Family

ID=75274106

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080075571.5A Pending CN114600087A (zh) 2019-10-06 2020-10-06 异常设备迹线检测和分类

Country Status (5)

Country Link
US (2) US11609812B2 (zh)
JP (1) JP7470784B2 (zh)
KR (1) KR102627062B1 (zh)
CN (1) CN114600087A (zh)
WO (1) WO2021071854A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11227209B2 (en) * 2019-07-31 2022-01-18 Dell Products L.P. Systems and methods for predicting information handling resource failures using deep recurrent neural network with a modified gated recurrent unit having missing data imputation
US11176019B2 (en) * 2020-04-01 2021-11-16 International Business Machines Corporation Automated breakpoint creation
WO2022221109A1 (en) * 2021-04-14 2022-10-20 Amgen Inc. Automated outlier removal for multivariate modeling
CN113516174B (zh) * 2021-06-03 2022-04-19 清华大学 调用链异常检测方法、计算机设备以及可读存储介质
CN113807441B (zh) * 2021-09-17 2023-10-27 长鑫存储技术有限公司 半导体结构制备中的异常传感器监测方法及其装置
US11961030B2 (en) 2022-01-27 2024-04-16 Applied Materials, Inc. Diagnostic tool to tool matching methods for manufacturing equipment

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4317805B2 (ja) * 2004-09-29 2009-08-19 株式会社日立ハイテクノロジーズ 欠陥自動分類方法及び装置
KR20070104331A (ko) * 2004-10-12 2007-10-25 케이엘에이-텐코 테크놀로지스 코퍼레이션 표본 상의 결함들을 분류하기 위한 컴퓨터-구현 방법 및시스템
JP4723466B2 (ja) 2006-12-19 2011-07-13 三菱電機株式会社 データ処理装置及びデータ処理方法及びプログラム
US7987150B1 (en) * 2007-02-09 2011-07-26 Siglaz Method and apparatus for automated rule-based sourcing of substrate microfabrication defects
US8396582B2 (en) * 2008-03-08 2013-03-12 Tokyo Electron Limited Method and apparatus for self-learning and self-improving a semiconductor manufacturing tool
JP5119022B2 (ja) 2008-03-26 2013-01-16 東京瓦斯株式会社 可変的予測モデル構築方法、及び、可変的予測モデル構築システム
US20130173332A1 (en) * 2011-12-29 2013-07-04 Tom Thuy Ho Architecture for root cause analysis, prediction, and modeling and methods therefor
US9129237B2 (en) * 2011-12-28 2015-09-08 Elitetech Technology Co., Ltd. Integrated interfacing system and method for intelligent defect yield solutions
US9880842B2 (en) * 2013-03-15 2018-01-30 Intel Corporation Using control flow data structures to direct and track instruction execution
US10430719B2 (en) 2014-11-25 2019-10-01 Stream Mosaic, Inc. Process control techniques for semiconductor manufacturing processes
US10436720B2 (en) * 2015-09-18 2019-10-08 KLA-Tenfor Corp. Adaptive automatic defect classification
US10360477B2 (en) * 2016-01-11 2019-07-23 Kla-Tencor Corp. Accelerating semiconductor-related computations using learning based models
US11023577B2 (en) 2016-08-04 2021-06-01 Adobe Inc. Anomaly detection for time series data having arbitrary seasonality
KR101970619B1 (ko) * 2017-06-28 2019-04-22 한국과학기술연구원 비정상 상황 검출 방법 및 이를 수행하기 위한 시스템
US10656204B2 (en) 2017-09-21 2020-05-19 Pdf Solutions, Inc. Failure detection for wire bonding in semiconductors
KR20190040825A (ko) * 2017-10-11 2019-04-19 주식회사 씨세론 데이터 처리 방법 및 장치
US10732883B1 (en) * 2019-01-28 2020-08-04 International Business Machines Corporation Storage layer selection based upon information assignment
US11232368B2 (en) * 2019-02-20 2022-01-25 Accenture Global Solutions Limited System for predicting equipment failure events and optimizing manufacturing operations

Also Published As

Publication number Publication date
US20210103489A1 (en) 2021-04-08
KR102627062B1 (ko) 2024-01-18
KR20220070302A (ko) 2022-05-30
JP7470784B2 (ja) 2024-04-18
JP2023501062A (ja) 2023-01-18
WO2021071854A1 (en) 2021-04-15
US11609812B2 (en) 2023-03-21
TW202139033A (zh) 2021-10-16
US20210142122A1 (en) 2021-05-13

Similar Documents

Publication Publication Date Title
CN114600087A (zh) 异常设备迹线检测和分类
Li et al. Anomaly detection with generative adversarial networks for multivariate time series
Jia et al. Assessment of data suitability for machine prognosis using maximum mean discrepancy
US8732100B2 (en) Method and apparatus for event detection permitting per event adjustment of false alarm rate
JP2020119605A (ja) 異常検出システム、異常検出方法、異常検出プログラム及び学習済モデル生成方法
JP5284503B2 (ja) 予測的状態監視のための診断システムおよび方法
US11080127B1 (en) Methods and apparatus for detection of process parameter anomalies
CN112131212A (zh) 基于集成学习技术面向混合云场景的时序数据异常预测方法
US10565080B2 (en) Discriminative hidden kalman filters for classification of streaming sensor data in condition monitoring
JP2010191556A (ja) 異常検知方法及び異常検知システム
CN112416643A (zh) 无监督异常检测方法与装置
Su et al. Detecting outlier machine instances through gaussian mixture variational autoencoder with one dimensional cnn
JP2023535721A (ja) プロセストレースからの装置故障モードの予測
CN112416662A (zh) 多时间序列数据异常检测方法与装置
Sepe et al. A physics-informed machine learning framework for predictive maintenance applied to turbomachinery assets
Lai et al. Decision support for video-based detection of flu symptoms
JP2003044123A (ja) プラント診断装置
US20210382447A1 (en) Condition-Based Method for Malfunction Prediction
EP3968103A1 (en) Explaining machine learning output in industrial applications
JP2021192155A (ja) 異常検知支援プログラム、異常検知支援方法および異常検知支援システム
CN111930728A (zh) 一种设备的特征参数和故障率的预测方法及系统
KR102486463B1 (ko) 열화에 따른 시계열 데이터를 이용한 실시간 이상 감지 방법 및 그를 위한 장치
WO2023155967A1 (en) Thermal anomaly management
Karlsson et al. Multi-Machine Gaussian Topic Modeling for Predictive Maintenance
US11954615B2 (en) Model management for non-stationary systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination