KR20200036599A - Apparatus and method for diagnosing machine fault - Google Patents

Apparatus and method for diagnosing machine fault Download PDF

Info

Publication number
KR20200036599A
KR20200036599A KR1020180116440A KR20180116440A KR20200036599A KR 20200036599 A KR20200036599 A KR 20200036599A KR 1020180116440 A KR1020180116440 A KR 1020180116440A KR 20180116440 A KR20180116440 A KR 20180116440A KR 20200036599 A KR20200036599 A KR 20200036599A
Authority
KR
South Korea
Prior art keywords
data
feature
unit
image
feature image
Prior art date
Application number
KR1020180116440A
Other languages
Korean (ko)
Other versions
KR102152352B1 (en
Inventor
권기룡
이경민
이진흥
Original Assignee
부경대학교 산학협력단
다운정보통신(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 부경대학교 산학협력단, 다운정보통신(주) filed Critical 부경대학교 산학협력단
Priority to KR1020180116440A priority Critical patent/KR102152352B1/en
Publication of KR20200036599A publication Critical patent/KR20200036599A/en
Application granted granted Critical
Publication of KR102152352B1 publication Critical patent/KR102152352B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration by the use of local operators
    • G06T5/30Erosion or dilatation, e.g. thinning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration by the use of histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]

Abstract

The present invention relates to a machine defect diagnosis device capable of increasing accuracy of machine defect diagnosis and a method thereof. More specifically, the machine defect diagnosis device comprises: a collection part collecting sound data based on at least one sensor; an extraction part acquiring a feature image based on the collected data and selecting features by reducing dimensions by applying main component analysis to the feature image; and a diagnosis part making a final diagnosis of defects based on the selected features by using an artificial neural network based nonlinear classifier.

Description

기계 결함 진단 장치 및 방법{APPARATUS AND METHOD FOR DIAGNOSING MACHINE FAULT}Machine defect diagnosis apparatus and method {APPARATUS AND METHOD FOR DIAGNOSING MACHINE FAULT}

본 발명은 기계 결함 진단 장치 및 방법에 관한 것으로, 보다 상세하게는 수집된 데이터에서 내부 특성을 분명하게 구분하여 기계의 결함을 실시간으로 정확하게 진단할 수 있도록 하는 기계 결함 진단 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for diagnosing machine defects, and more particularly, to an apparatus and method for diagnosing machine defects by clearly distinguishing internal characteristics from collected data to accurately diagnose a machine defect in real time.

4차 산업혁명이란 독일 제조업이 직면한 사회, 기술, 경제, 생태, 정치 부문의 변화에 ICT를 접목해 총력적으로 대응하겠다는 전략으로, 사물인터넷(IoT: Internet of Things)과 기업용 소프트웨어, 위치정보, 보안, 클라우드, 빅데이터, 가상현실 등 ICT 관련 기술들을 적극 활용하는 스마트팩토리를 목표로 한다.The 4th Industrial Revolution is a strategy to graftly respond to changes in the social, technological, economic, ecological, and political sectors faced by the German manufacturing industry, and to respond in a comprehensive manner. The Internet of Things (IoT), enterprise software, and location information It aims to be a smart factory that actively utilizes ICT-related technologies such as security, cloud, big data, and virtual reality.

이 스마트팩토리에서 스마트 제조 분석은 주로 비즈니스 인텔리전스 솔루션들을 중심으로 정형적 데이터 또는 수치 데이터 (BI)를 이용한 데이터 분석이 주를 이루며 일부 연구 기관에서 전문가의 예측을 지원하는 도구개발을 시도하고 있지만 국외 기술에 비해 시작 단계이고 수작업 의존도가 높다. 국내에서는 주로 수치 데이터를 이용한 예측분석이 주를 이루며 비정형적 데이터에서 정보를 추출한 예측연구는 시작단계이다.In this smart factory, smart manufacturing analysis is mainly focused on business intelligence solutions, and data analysis using structured data or numerical data (BI) is the main focus, and some research institutes are attempting to develop tools to support expert predictions, but foreign technology Compared to this, it is in the beginning stage and highly dependent on manual work. Predominantly, predictive analysis using numerical data is predominant in Korea, and predictive research in which information is extracted from unstructured data is in its infancy.

최근 예측분석 기술의 발달로 생산 기계에 자기인식 능력을 제공하여 근로자에게 기계의 상태 정보를 명확하게 제공하고, 이로부터 생산성, 효율성, 안전성을 향상시키는 예측적 생산 시스템이 활발하게 연구되고 있다.2. Description of the Related Art With the development of predictive analysis technology, a predictive production system that provides self-recognition capability to production machines to provide workers with status information of machines clearly and improve productivity, efficiency, and safety has been actively studied.

특히, 제조업의 생산 설비 관리는 생산관리에 있어서 매우 중요한 요소로서 생산 기계의 고장이나 오류는 현장의 생산율 저하, 불량률 증가와 같은 문제를 초래함에 따라 안정적인 생산 활동을 지속하기 위해서는 생산 설비 역시 지속적인 관리가 요구되고, 문제가 발생되기 전에 필요한 조치를 취하는 예지보전 기술을 도입하고 있는 추세이다.In particular, the management of production facilities in the manufacturing industry is a very important factor in production management, and the failure of production machines or errors leads to problems such as a decrease in production rate and an increase in defect rate in the field. It is a trend that introduces predictive maintenance technologies that require and take necessary measures before problems arise.

따라서, 기계의 결함을 진단하기 위해 수집된 데이터에서 내부 특성을 분명하게 구분하여 기계 결함에 대한 진단 정확도를 높일 필요가 있다. Therefore, it is necessary to clearly classify internal characteristics from the collected data to diagnose a machine defect, thereby increasing the diagnostic accuracy of the machine defect.

따라서, 본 발명은 상기한 바와 같은 문제점을 해결하기 위하여 제안된 것으로, 기계의 결함을 진단하기 위해 수집된 데이터에서 내부 특성을 분명하게 구분하여 기계 결함에 대한 진단 정확도를 높일 수 있도록 하는 기계 결함 진단 장치 및 방법을 제공함에 있다.Therefore, the present invention has been proposed to solve the above-described problems, and machine defect diagnosis to clearly improve the accuracy of diagnosis for machine defects by clearly distinguishing internal characteristics from collected data for diagnosing machine defects. It provides an apparatus and method.

또한, 본 발명은 실시간으로 기계 결함을 진단하여 최소의 유지보수 비용을 만족하면서도 시스템의 안전성과 신뢰성을 향상시킬 수 있도록 하는 기계 결함 진단 장치 및 방법을 제공함에 있다.In addition, the present invention provides a machine defect diagnosis apparatus and method for diagnosing machine defects in real time, thereby improving safety and reliability of a system while satisfying a minimum maintenance cost.

본 발명의 목적은 이상에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.The objects of the present invention are not limited to those mentioned above, and other objects not mentioned will be clearly understood by those skilled in the art from the following description.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 기계 결함 진단 장치는, 적어도 하나 이상의 센서를 기반으로 소리 데이터를 수집하는 수집부; 상기 수집된 데이터를 기반으로 특징 이미지를 획득하고, 상기 특징 이미지에 주성분 분석을 적용하여 차원을 줄여 특징을 선택하는 추출부; 및 인공신경망 기반의 비선형 분류기를 이용하여 상기 선택된 특징을 기반으로 결함을 최종 진단하는 진단부를 포함한다.The machine defect diagnosis apparatus according to the present invention for achieving the above object is a collection unit for collecting sound data based on at least one sensor; acquires a feature image based on the collected data, and the feature image An extraction unit for selecting a feature by reducing a dimension by applying principal component analysis; And a diagnostic unit for finally diagnosing a defect based on the selected feature using an artificial neural network based nonlinear classifier.

또한, 상기와 같은 목적을 달성하기 위한 본 발명에 따른 기계 결함 진단 방법은, 수집부가 적어도 하나 이상의 센서를 기반으로 소리 데이터를 수집하는 단계; 추출부가 상기 수집된 데이터를 기반으로 특징 이미지를 획득하고, 상기 특징 이미지에 주성분 분석을 적용하여 차원을 줄여 특징을 선택하는 단계; 및 진단부가 인공신경망 기반의 비선형 분류기를 이용하여 상기 선택된 특징을 기반으로 결함을 최종 진단하는 진단부를 포함한다.In addition, in the method for diagnosing a machine defect according to the present invention for achieving the above object, the collecting unit collects sound data based on at least one sensor; the extracting unit acquires a feature image based on the collected data, , Selecting a feature by reducing a dimension by applying principal component analysis to the feature image; And a diagnostic unit for finally diagnosing a defect based on the selected feature using an artificial neural network-based nonlinear classifier.

본 발명에 의하면, 기계의 결함을 진단하기 위해 수집된 데이터에서 내부 특성을 분명하게 구분하여 기계 결함에 대한 진단 정확도를 높일 수 있다.According to the present invention, it is possible to increase the diagnostic accuracy for machine defects by clearly distinguishing internal characteristics from data collected for diagnosing machine defects.

또한, 본 발명에 의하면, 실시간으로 기계 결함을 진단하여 최소의 유지보수 비용을 만족하면서도 시스템의 안전성과 신뢰성을 향상시킬 수 있다.Further, according to the present invention, it is possible to improve machine safety and reliability while satisfying a minimum maintenance cost by diagnosing machine defects in real time.

본 발명의 효과는 이상에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.The effects of the present invention are not limited to those mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 발명의 실시예에 따른 기계 결함 진단 장치의 구성을 나타내는 블록도,
도 2는 본 발명의 실시예에 따른 기계 결함 진단 방법을 나타내는 순서도,
도 3a 및 도 3b는 종래기술에 따른 데이터 클러스터링 결과를 나타내는 도면,
도 4a 및 도 4b는 본 발명에 따른 데이터 클러스터링 결과를 나타내는 도면.
1 is a block diagram showing the configuration of a machine defect diagnosis apparatus according to an embodiment of the present invention,
2 is a flow chart showing a method for diagnosing machine defects according to an embodiment of the present invention;
3A and 3B are diagrams showing data clustering results according to the prior art,
4A and 4B are diagrams showing data clustering results according to the present invention.

본 발명의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기증을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. Objects and effects of the present invention, and technical configurations for achieving them will be clarified with reference to embodiments described below in detail together with the accompanying drawings. In the description of the present invention, when it is determined that a detailed description of known functions or configurations may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted. And terms to be described later are terms defined in consideration of donation in the present invention, which may vary depending on the intention or custom of the user or operator.

그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms. Only the present examples are provided to make the disclosure of the present invention complete, and to fully inform the person of ordinary skill in the art to which the present invention pertains, the scope of the present invention being defined by the scope of the claims. It just works. Therefore, the definition should be made based on the contents throughout this specification.

한편, 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 부재를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 구비할 수 있다는 것을 의미한다.On the other hand, in the specification, when a part is "connected" with another part, it is not only "directly connected", but also "indirectly connected" with another member in between. Includes. Also, when a part is said to “include” a certain component, this means that other components may be further provided instead of excluding the other component unless otherwise stated.

본 발명은 기계가 생성한 신호를 분석하여 1차원 신호를 2차원으로 변환하고, 건강한 패턴을 보강하기 위한 신호 처리 기술을 적용하여 주성분 분석으로 차원을 줄인 후, 최종 차별을 위한 비선형 분류기를 이용해 기계 결함을 자동으로 진단하는 것이다.The present invention analyzes a signal generated by a machine, converts a one-dimensional signal into two-dimensional, and applies a signal processing technology to reinforce a healthy pattern, reduces the dimension by principal component analysis, and then uses a non-linear classifier for final discrimination. The fault is automatically diagnosed.

이하에서는 본 발명의 실시예에 따른 기계 결함 진단 장치 및 방법에 대하여 첨부된 도면을 참고하여 구체적으로 설명하기로 한다. Hereinafter, an apparatus and method for diagnosing a machine defect according to an exemplary embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 기계 결함 진단 장치의 구성을 나타내는 블록도이다.1 is a block diagram showing the configuration of a machine defect diagnosis apparatus according to an embodiment of the present invention.

도 1을 참조하면, 기계 결함 진단 장치(100)는 크게 수집부(11), 추출부(13) 및 진단부(15)를 포함한다.Referring to FIG. 1, the machine defect diagnosis apparatus 100 largely includes a collection unit 11, an extraction unit 13, and a diagnosis unit 15.

수집부(11)는 적어도 하나 이상의 센서를 기반으로 데이터를 수집한다. 이때, 데이터는 소리 데이터일 수 있다. 예를 들어, 드릴의 소리 데이터를 수집하는 경우, 산업 현장에서 활동 중인 시간 동안 드릴에 의해 생성된 소리를 사용하고, 정상 상태의 신호와 날이 마모된 비정상 상태의 신호로 구성될 수 있다. The collection unit 11 collects data based on at least one sensor. At this time, the data may be sound data. For example, when collecting sound data of a drill, a sound generated by a drill during an active time in an industrial site may be used, and a signal of a normal state and a signal of an abnormal state where the blade is worn may be configured.

추출부(13)는 수집부(11)에 의해 수집된 데이터로부터 차별적 특징을 추출하기 위해 특징 이미지를 획득하고, PCA(principal component analysis) 즉, 주성분 분석을 적용하여 프로젝션 데이터를 획득하여 특징을 선택한다.The extracting unit 13 acquires a feature image to extract differential features from the data collected by the collecting unit 11 and selects a feature by acquiring projection data by applying principal component analysis (PCA), that is, principal component analysis do.

여기서, PCA는 상관된 데이터 집합을 선형 상관관계가 없는 값의 집합으로 변환하기 위해 직교 변환을 사용하는 통계적 절차이다. 이러한 값을 주 구성 요소라고 한다. 획득된 주성분의 수는 원래 데이터의 차원보다 작거나 같다. PCA는 첫 번째 주성분이 가능한 가장 큰 분산을 가지도록 정의되어 데이터 집합의 가변성에 민감하다. 이어지는 각 구성 요소는 선행 구성 요소와 직교해야 한다는 제약하에서 가능한 한 가장 높은 분산을 가져야 한다. 새 표현을 얻기 위해 원본 데이터를 PCA 공간이라는 새로운 기준으로 투영한 후 획득한 벡터를 주성분으로 사용하다. 이는 PCA의 차원 감소 기능의 일부이다.Here, PCA is a statistical procedure that uses an orthogonal transform to transform a correlated data set into a set of values that do not have a linear correlation. These values are called main components. The number of principal components obtained is less than or equal to the dimension of the original data. PCA is defined so that the first principal component has the largest possible variance, making it sensitive to the variability of the data set. Each successive component should have the highest possible variance under the constraint that it must be orthogonal to the preceding component. To obtain a new expression, the original data is projected to a new standard called PCA space, and the acquired vector is used as the main component. This is part of the PCA's dimensionality reduction capabilities.

구체적으로, 이 추출부(13)는 산출부(131), 변환부(133), 획득부(135) 및 분석부(135)를 포함한다.Specifically, the extraction unit 13 includes a calculation unit 131, a conversion unit 133, an acquisition unit 135 and an analysis unit 135.

먼저, 산출부(131)는 수집부(11)에 의해 수집된 데이터에 푸리에 분석을 사용하여 각 데이터의 스펙트럼 크기를 산출한다. First, the calculation unit 131 calculates the spectral size of each data using Fourier analysis on the data collected by the collection unit 11.

변환부(133)는 스펙트럼을 포함하는 1차원 벡터를 다시 분할하여 2차원 벡터로 변환하기 위해 행렬의 최대 진폭을 255로 설정하고, 최소값을 0으로 설정하는 선형 정규화 과정을 거쳐 8비트 그레이 스케일 이미지로 변환한다.The converter 133 divides the 1-dimensional vector containing the spectrum again and converts it into a 2-dimensional vector by setting the maximum amplitude of the matrix to 255 and setting the minimum value to 0 to perform an 8-bit gray scale image through a linear normalization process. Convert to

획득부(135)는 변환부(133)에 의해 8비트 그레이 스케일 이미지로 변환된 이미지의 데이터에 존재할 수 있는 건강한 패턴 즉, 유용한 패턴을 보급하고 보강하기 위해 히스토그램 평활화를 사용하여 콘트라스트를 강화함으로써 특징 이미지를 획득한다.The acquisition unit 135 is characterized by enhancing contrast using histogram smoothing to spread and reinforce a healthy pattern, that is, a useful pattern, which may exist in the data of the image converted into the 8-bit gray scale image by the conversion unit 133 Acquire an image.

분석부(137)는 차수를 줄이고 첫번째 프로젝션 데이터를 얻기 위해 특징 이미지 위에 주성분 분석을 적용하여 프로젝션 데이터를 획득한 후, 일부 프로젝션 데이터를 선택한다. 즉, 주성분에 대한 특징 이미지의 프로젝션 후, 시스템의 특징을 선택하는 것이다.The analysis unit 137 acquires projection data by applying principal component analysis on the feature image to reduce the order and obtain the first projection data, and then selects some projection data. That is, after projecting the feature image for the main component, the feature of the system is selected.

한편, 진단부(15)는 인공신경망을 기반으로 하는 비선형 분류기를 이용하며, 분석부(137)에 의해 선택된 특징을 기반으로 기계의 결함을 진단한다.On the other hand, the diagnostic unit 15 uses a nonlinear classifier based on an artificial neural network, and diagnoses a machine defect based on a feature selected by the analysis unit 137.

여기서, 인공신경망(artificial neural networks, ANNs)은 정보가 시작 뉴런에서부터 네트워크 맨 끝에 있는 뉴런으로 흐르는 인공 뉴런의 상호 연결된 그룹으로 구성된다. 정보는 비선형 함수를 사용하여 흐른다. 이 함수의 목적은 데이터 내부에 포함된 비선형성을 발견하여 데이터의 이해를 돕는 것이다. ANN은 수신된 정보를 기반으로 구조를 변경하고 학습 과정 후에 학습된 이해력을 일반화할 수 있는 능력을 습득하는 적응 시스템이다. 네트워크는 실제 출력과 원하는 출력 사이에서 오류를 역 전파시킴으로써 학습한다. Here, artificial neural networks (ANNs) consist of interconnected groups of artificial neurons whose information flows from the starting neuron to the neurons at the very end of the network. Information flows using nonlinear functions. The purpose of this function is to help you understand the data by discovering the nonlinearities contained within the data. ANN is an adaptive system that changes the structure based on the received information and acquires the ability to generalize the learned comprehension after the learning process. The network learns by back propagating errors between the actual output and the desired output.

즉, 본 발명에서는 특징 이미지의 투영된 값이 신경 네트워크 기반 분류기에 주어지며, 그 출력은 기계 결함을 진단하기 위한 MDF (machine fault diagnosis) 시스템의 최종 진단 결과를 나타내는 것이다.That is, in the present invention, the projected value of the feature image is given to the neural network-based classifier, and the output represents the final diagnosis result of the machine fault diagnosis (MDF) system for diagnosing machine defects.

도 2는 본 발명의 실시예에 따른 기계 결함 진단 방법을 나타내는 순서도이다.2 is a flowchart illustrating a method for diagnosing machine defects according to an embodiment of the present invention.

먼저, 수집부(11)가 기계에 대한 데이터를 수집하면(S201), 산출부(131)가 그 수집된 데이터에 푸리에 분석을 사용하여 각 데이터의 스펙트럼 크기를 산출한 후(S203), 변환부(133)가 스펙트럼을 포함하는 1차원 벡터를 분할하여 2차원 벡터로 변환하기 위해 8비트 그레이 스케일 이미지로 변환한다(S205).First, when the collection unit 11 collects data on the machine (S201), the calculation unit 131 calculates the spectral size of each data using Fourier analysis on the collected data (S203), and then converts In step 133, the 1-dimensional vector including the spectrum is divided and converted into an 8-bit gray scale image in order to convert it into a 2-dimensional vector (S205).

이후, 획득부(135)가 변환된 이미지의 데이터에 존재할 수 있는 유용한 패턴을 보급하고 보강하기 위해 히스토그램 평활화를 사용하여 콘트라스트를 강화함으로써 특징 이미지를 획득한다(S207).Thereafter, the acquisition unit 135 acquires a feature image by enhancing contrast by using histogram smoothing in order to supply and reinforce useful patterns that may exist in the data of the converted image (S207).

분석부(137)는 히스토그램 평활화 된 이미지를 특징 이미지의 원본 데이터로 사용하여 주성분을 추출하고(S209), 그 추출된 주성분을 특징 이미지에 적용 즉, 프로젝션 하여 프로젝션 데이터를 획득한 후, 특징을 선택한다(S211).The analysis unit 137 extracts a principal component by using the histogram-smoothed image as the original data of the feature image (S209), applies the extracted principal component to the feature image, that is, acquires projection data by projection, and selects a feature (S211).

진단부(15)는 인공신경망을 기반으로 하는 비선형 분류기를 이용하여 S211단계에서 선택된 특징을 기반으로 기계의 결함을 최종 진단한다.The diagnosis unit 15 finally diagnoses a machine defect based on the feature selected in step S211 using a nonlinear classifier based on an artificial neural network.

이러한 일련의 과정들을 간략히 설명하면 하기와 같다.The series of processes are briefly described below.

1차원 벡터를 2 차원 벡터로 만들기 위해 2205 = 49 × 45로 계산하여, 이에 따라 스펙트럼 크기의 벡터 길이를 49× 45차원으로 분할한다. 만들고자 하는 2D 행렬의 열로 45 개의 49 차원 벡터를 가지고, 크기 49 × 45의 2 차원 행렬을 제공한다. 선형 정규화 과정 후, 49 × 45의 8 비트 그레이 스케일 이미지를 얻는다. 2183 개의 데이터 사운드가 원점에 있고, 처리할 특징 이미지는 49 x 45 x 2183 크기의 행렬을 형성한다. 마지막으로 히스토그램 평활화가 생성된 이미지에 적용되어 대비를 조정하고 이미지 전체에 좋은 패턴을 분산시킨다. 히스토그램 평활화된 이미지를 특징 이미지의 원본 데이터로 사용하여 PCA 기반을 계산한다. 특징 이미지를 PCA 공간으로 투영한 후, 비선형 분류기의 입력으로 사용하기 위해 일부 프로젝션된 데이터를 선택한다. 비선형 분류기 선택된 프로젝션된 데이터를 기반으로 기계 결함을 최종 진단한다.To make a one-dimensional vector into a two-dimensional vector, 2205 = 49 × 45 is calculated, and accordingly, the vector length of the spectral size is divided into 49 × 45 dimensions. We have 45 49-dimensional vectors as columns of the 2D matrix to be created, and we provide a 2-dimensional matrix of size 49 × 45. After the linear normalization process, an 8-bit gray scale image of 49 x 45 is obtained. The 2183 data sounds are at the origin, and the feature image to be processed forms a matrix with a size of 49 x 45 x 2183. Finally, histogram smoothing is applied to the generated image to adjust the contrast and disperse the good pattern throughout the image. The PCA base is computed using the histogram smoothed image as the original data of the feature image. After projecting the feature image into PCA space, some projected data is selected for use as input to the nonlinear classifier. Nonlinear classifier Final diagnosis of machine defects based on the selected projected data.

도 3a 및 도 3b는 종래기술에 따른 데이터 클러스터링 결과를 나타내는 도면이다. 3A and 3B are diagrams showing data clustering results according to the prior art.

구체적으로, 도 3a는 종래기술에 따라 시계열을 사용하여 투영된 데이터를 나타내는 도면이고, 도 3b는 종래기술에 따라 시계열의 통계적 특징에 의해 표현된 데이터 투영을 나타내는 도면이다.Specifically, FIG. 3A is a view showing data projected using a time series according to the prior art, and FIG. 3B is a view showing data projections represented by statistical characteristics of the time series according to the prior art.

먼저, 도 3a 및 도 3b를 참조하면, 두 가지 종류의 데이터가 어떤 방식으로 함께 클러스터링 되는지 알 수 있다. 이는 사운드 데이터의 시계열이 진단 분석에 유용한 정보를 나타내지 않는다는 것을 의미한다. 도 3b를 통해 보면, 시계열의 경우 데이터가 매우 유사하여 모두가 함께 클러스터링 되는 것을 확인할 수 있다.First, referring to FIGS. 3A and 3B, it can be seen how two types of data are clustered together. This means that the time series of sound data does not represent useful information for diagnostic analysis. 3B, it can be seen that in the case of time series, the data are very similar, and all are clustered together.

도 4a 및 도 4b는 본 발명에 따른 데이터 클러스터링 결과를 나타내는 도면이다.4A and 4B are diagrams showing data clustering results according to the present invention.

구체적으로, 도 4a는 본 발명에 따른 스펙트럼 크기 기반 특징 이미지에 의한 데이터를 나타내는 도면이고, 도 4b는 본 발명에 따른 스펙트럼 크기 기반 특징 이미지의 히스토그램 평활화에 의한 데이터를 나타내는 도면이다.Specifically, FIG. 4A is a diagram showing data by a spectral size based feature image according to the present invention, and FIG. 4B is a diagram showing data by histogram smoothing of a spectral size based feature image according to the present invention.

도 4a 및 도 4b를 참조하면, 2개의 데이터 사이의 차이점이 나타나고, 더욱이 히스토그램 평활화된 이미지를 사용하면 더 명확한 차이점이 나타나는 것을 알 수 있다. 특히, 그림 4b는 최종 특징으로 사용한 대비가 향상된 이미지를 사용한 투영법을 보여주며 데이터가 어떻게 올바르게 분리되어 있는지를 볼 수 있다. 구분되어진 2개의 클러스터가 생성된다.4A and 4B, it can be seen that a difference between the two data appears, and further, a clearer difference appears when a histogram smoothed image is used. In particular, Figure 4b shows a projection using an image with improved contrast used as the final feature, and you can see how the data is properly separated. Two distinct clusters are created.

즉, 시계열을 원본데이터로 통계적 특징을 사용하여 PCA를 적용한 후, 분류기는 비정상적인 데이터를 인식하는 데 어려움을 겪고 있으며, 그 중 많은 수가 잘못 분류되었다. 이산 웨이브렛 변환(DWT) 계수와 연속 웨이블릿 변환(CWT) 계수는 시간-주파수 영역 기반 분석을 표현한다. 하기 <표 1>에서 DWT 계수가 총 95.7 % 의 정확도 보여 DWT 계수는 여전히 우수한 반면 CWT 계수 비정상적인 데이터를 잘 인식하지 못하고 있다. In other words, after applying PCA using statistical features of time series as the original data, the classifier is having difficulty in recognizing abnormal data, and many of them are misclassified. Discrete wavelet transform (DWT) coefficients and continuous wavelet transform (CWT) coefficients represent time-frequency domain based analysis. In Table 1 below, the DWT coefficient shows an accuracy of 95.7% in total, and the DWT coefficient is still excellent, while the CWT coefficient does not recognize abnormal data well.

본 발명은 사운드의 스펙트럼 크기를 이미지로 변환하여 사용한 방법으로 주파수 영역을 기반으로 한다는 것을 상기한다. 따라서 기존 기술과의 비교에서도 특징 이미지 계수는 데이터의 주요 특성을 포착함으로써 탁월한 성능을 보였다.Recall that the present invention is based on the frequency domain in a method used by converting the spectral size of sound into an image. Therefore, even in comparison with the existing technology, the feature image coefficient showed excellent performance by capturing the main characteristics of the data.

P.K. Kankar et al.P.K. Kankar et al. K.M. Lee et al.K.M. Lee et al. P.K. Kankar et al.P.K. Kankar et al. 실시예Example 특징 추출 방법Feature extraction method Time series + statistical featuresTime series + statistical features DWT coefficients + PCADWT coefficients + PCA CWT components + statistical featuresCWT components + statistical features Feature imagesFeature images 분류 방법Classification method Neural NetworkNeural Network Neural NetworkNeural Network Neural NetworkNeural Network Neural NetworkNeural Network 정확도accuracy 86.1%86.1% 95.7%95.7% 75.8%75.8% 99.5%99.5%

따라서, 본 발명은 기계의 결함을 진단하기 위해 수집된 데이터에서 내부 특성을 분명하게 구분함으로써 기계 결함에 대한 진단 정확도를 높일 수 있도록 한다. Therefore, the present invention makes it possible to increase the diagnostic accuracy of machine defects by clearly distinguishing internal characteristics from data collected to diagnose machine defects.

본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.In the present specification and drawings, preferred embodiments of the present invention have been disclosed, and although specific terms are used, they are merely used in a general sense to easily describe the technical contents of the present invention and to understand the present invention. It is not intended to limit the scope. It is apparent to those skilled in the art to which the present invention pertains that other modifications based on the technical spirit of the present invention can be implemented in addition to the embodiments disclosed herein.

10: 기계 결함 진단 장치 11: 수집부
13: 추출부 15: 진단부
131: 산출부 133: 변환부
135: 획득부 137: 분석부
10: machine fault diagnosis device 11: collection unit
13: extraction unit 15: diagnostic unit
131: calculation unit 133: conversion unit
135: acquisition unit 137: analysis unit

Claims (4)

기계 결함 진단 장치에 있어서,
적어도 하나 이상의 센서를 기반으로 소리 데이터를 수집하는 수집부;
상기 수집된 데이터를 기반으로 특징 이미지를 획득하고, 상기 특징 이미지에 주성분 분석을 적용하여 차원을 줄여 특징을 선택하는 추출부; 및
인공신경망 기반의 비선형 분류기를 이용하여 상기 선택된 특징을 기반으로 결함을 최종 진단하는 진단부를 포함하는 것을 특징으로 하는 기계 결함 진단 장치.
In the machine fault diagnosis apparatus,
A collection unit that collects sound data based on at least one sensor;
An extracting unit for acquiring a feature image based on the collected data, and selecting a feature by reducing a dimension by applying principal component analysis to the feature image; And
And a diagnostic unit for finally diagnosing a defect based on the selected feature using an artificial neural network-based nonlinear classifier.
제1항에 있어서,
상기 추출부는,
상기 수집된 데이터에 푸리에 분석을 사용하여 각 데이터의 스펙트럼 크기를 산출하는 산출부;
스펙트럼을 포함하는 1차원 벡터를 분할하여 2차원 벡터로 변환하기 위해 상기 산출된 스펙트럼 크기를 기반으로 8비트 그레이 스케일 이미지로 변환하는 변환부;
상기 변환된 이미지를 히스토그램 평활화하여 콘트라스트를 강화함으로써 특징 이미지를 획득하는 획득부; 및
상기 히스토그램 평활화 된 이미지를 특징 이미지의 원본 데이터로 사용하여 추출한 주성분 기반을 상기 특징 이미지에 적용하여 프로젝션 데이터를 획득한 후, 일부 프로젝션 데이터을 선택함으로써 특징을 선택하는 분석부를 포함하는 것을 특징으로 하는 기계 결함 진단 장치.
According to claim 1,
The extraction unit,
A calculation unit that calculates a spectral size of each data using Fourier analysis on the collected data;
A conversion unit that converts an 8-bit gray scale image based on the calculated spectral size to convert a 1-dimensional vector including a spectrum into a 2-dimensional vector;
An acquiring unit that acquires a feature image by enhancing the contrast by smoothing the histogram of the converted image; And
A machine defect characterized by including an analysis unit that selects a feature by selecting a portion of projection data after obtaining projection data by applying a principal component base extracted using the histogram smoothed image as the original data of the feature image to the feature image. Diagnostic device.
기계 결함 진단 방법에 있어서,
수집부가 적어도 하나 이상의 센서를 기반으로 소리 데이터를 수집하는 단계;
추출부가 상기 수집된 데이터를 기반으로 특징 이미지를 획득하고, 상기 특징 이미지에 주성분 분석을 적용하여 차원을 줄여 특징을 선택하는 단계; 및
진단부가 인공신경망 기반의 비선형 분류기를 이용하여 상기 선택된 특징을 기반으로 결함을 최종 진단하는 진단부를 포함하는 것을 특징으로 하는 기계 결함 진단 방법.
In the method of diagnosing machine defects,
Collecting step of collecting sound data based on at least one sensor;
The extracting unit acquires a feature image based on the collected data, and applies a principal component analysis to the feature image to select a feature by reducing a dimension; And
Method for diagnosing a machine defect, characterized in that the diagnostic unit includes a diagnostic unit for finally diagnosing a defect based on the selected feature using an artificial neural network-based nonlinear classifier.
제3항에 있어서,
상기 특징을 선택하는 단계는,
산출부가 상기 수집된 데이터에 푸리에 분석을 사용하여 각 데이터의 스펙트럼 크기를 산출하는 단계;
변환부가 스펙트럼을 포함하는 1차원 벡터를 분할하여 2차원 벡터로 변환하기 위해 상기 산출된 스펙트럼 크기를 기반으로 8비트 그레이 스케일 이미지로 변환하는 단계;
획득부가 상기 변환된 이미지를 히스토그램 평활화하여 콘트라스트를 강화함으로써 특징 이미지를 획득하는 단계; 및
분석부가 상기 히스토그램 평활화 된 이미지를 특징 이미지의 원본 데이터로 사용하여 주성분 기반을 추출하는 단계;
상기 분석부가 상기 추출된 주성분 기반을 상기 특징 이미지에 적용하여 프로젝션 데이터를 획득하는 단계; 및
상기 분석부가 상기 획득된 프로젝션 데이터 중 일부 프로젝션 데이터를 선택함으로써 특징을 선택하는 단계를 포함하는 것을 특징으로 하는 기계 결함 진단 방법.
According to claim 3,
The step of selecting the feature,
Calculating the spectral size of each data using Fourier analysis on the collected data;
Converting a 1-dimensional vector including a spectrum into a 8-bit gray scale image based on the calculated spectral size in order to convert the converted 1-dimensional vector into a 2-dimensional vector;
An acquiring unit acquiring a feature image by enhancing the contrast by smoothing a histogram of the converted image; And
An analysis unit extracting a principal component base using the histogram smoothed image as original data of a feature image;
Obtaining, by the analysis unit, projection data by applying the extracted principal component base to the feature image; And
And selecting a feature by selecting, by the analysis unit, some projection data from the obtained projection data.
KR1020180116440A 2018-09-28 2018-09-28 Apparatus and method for diagnosing machine fault KR102152352B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180116440A KR102152352B1 (en) 2018-09-28 2018-09-28 Apparatus and method for diagnosing machine fault

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180116440A KR102152352B1 (en) 2018-09-28 2018-09-28 Apparatus and method for diagnosing machine fault

Publications (2)

Publication Number Publication Date
KR20200036599A true KR20200036599A (en) 2020-04-07
KR102152352B1 KR102152352B1 (en) 2020-09-04

Family

ID=70291236

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180116440A KR102152352B1 (en) 2018-09-28 2018-09-28 Apparatus and method for diagnosing machine fault

Country Status (1)

Country Link
KR (1) KR102152352B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220067897A (en) * 2020-11-18 2022-05-25 숭실대학교산학협력단 Anomaly detection method based on IoT and apparatus thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006113002A (en) * 2004-10-18 2006-04-27 Nsk Ltd Anomaly diagnosis system for mechanical equipment
JP2008116588A (en) * 2006-11-01 2008-05-22 National Institute Of Advanced Industrial & Technology Feature extracting apparatus and method, and program
JP2017077055A (en) * 2015-10-13 2017-04-20 公益財団法人鉄道総合技術研究所 State diagnostic device and program
KR20170119353A (en) * 2016-04-18 2017-10-27 주식회사 세화 Fault Detection and Classification System of Railway Point Machine by Sound Analysis
KR101818394B1 (en) * 2017-05-11 2018-01-12 울산대학교 산학협력단 Method and apparatus for diagnosing facility condition

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006113002A (en) * 2004-10-18 2006-04-27 Nsk Ltd Anomaly diagnosis system for mechanical equipment
JP2008116588A (en) * 2006-11-01 2008-05-22 National Institute Of Advanced Industrial & Technology Feature extracting apparatus and method, and program
JP2017077055A (en) * 2015-10-13 2017-04-20 公益財団法人鉄道総合技術研究所 State diagnostic device and program
KR20170119353A (en) * 2016-04-18 2017-10-27 주식회사 세화 Fault Detection and Classification System of Railway Point Machine by Sound Analysis
KR101818394B1 (en) * 2017-05-11 2018-01-12 울산대학교 산학협력단 Method and apparatus for diagnosing facility condition

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220067897A (en) * 2020-11-18 2022-05-25 숭실대학교산학협력단 Anomaly detection method based on IoT and apparatus thereof
US11909751B2 (en) 2020-11-18 2024-02-20 Foundation Of Soongsil University-Industry Cooperation Anomaly detection method based on IoT and apparatus thereof

Also Published As

Publication number Publication date
KR102152352B1 (en) 2020-09-04

Similar Documents

Publication Publication Date Title
Harrou et al. An integrated vision-based approach for efficient human fall detection in a home environment
Waghmare et al. Detection and classification of diseases of grape plant using opposite colour local binary pattern feature and machine learning for automated decision support system
JP2018005773A (en) Abnormality determination device and abnormality determination method
CN110766056B (en) Abnormal image detection method integrating image generation and multi-label classification
JP2017097718A (en) Identification processing device, identification system, identification method, and program
Rajan Recognition of cardiovascular diseases through retinal images using optic cup to optic disc ratio
CN104346503A (en) Human face image based emotional health monitoring method and mobile phone
KR102265298B1 (en) Apparatus and method for fault diagnosis using fake data generated by machine learning
Schlosser et al. A novel visual fault detection and classification system for semiconductor manufacturing using stacked hybrid convolutional neural networks
CN104751186A (en) Iris image quality classification method based on BP (back propagation) network and wavelet transformation
CN114930346A (en) Quality assurance system and method for data-based models
Jennifer et al. A neutrosophic set approach on chest X-rays for automatic lung infection detection
KR102152352B1 (en) Apparatus and method for diagnosing machine fault
Na et al. A combination of feature selection and co-occurrence matrix methods for leukocyte recognition system
KR20200124887A (en) Method and Apparatus for Creating Labeling Model with Data Programming
Blackledge et al. Texture classification using fractal geometry for the diagnosis of skin cancers
CN107798282B (en) Method and device for detecting human face of living body
KR101094433B1 (en) Method for identifying image face and system thereof
KR20210031444A (en) Method and Apparatus for Creating Labeling Model with Data Programming
Yuan A system of clothes matching for visually impaired persons
CN117636908B (en) Digital mine production management and control system
Ali et al. Development of a enhanced ear recognition system for personal identification
CN117422936B (en) Remote sensing image classification method and system
Monteiro et al. Detecting defects in sanitary wares using deep learning
Molina et al. Toward to reduction of bias for gender and ethnicity from face images using automated skin tone classification

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant