KR20220057025A - 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템 - Google Patents

인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템 Download PDF

Info

Publication number
KR20220057025A
KR20220057025A KR1020200141805A KR20200141805A KR20220057025A KR 20220057025 A KR20220057025 A KR 20220057025A KR 1020200141805 A KR1020200141805 A KR 1020200141805A KR 20200141805 A KR20200141805 A KR 20200141805A KR 20220057025 A KR20220057025 A KR 20220057025A
Authority
KR
South Korea
Prior art keywords
fine dust
residual
channel
degree
image
Prior art date
Application number
KR1020200141805A
Other languages
English (en)
Other versions
KR102468753B1 (ko
Inventor
강봉수
정세희
Original Assignee
주식회사 딥비전스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 딥비전스 filed Critical 주식회사 딥비전스
Priority to KR1020200141805A priority Critical patent/KR102468753B1/ko
Publication of KR20220057025A publication Critical patent/KR20220057025A/ko
Application granted granted Critical
Publication of KR102468753B1 publication Critical patent/KR102468753B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/02—Investigating particle size or size distribution
    • G01N15/0205—Investigating particle size or size distribution by optical means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N2015/0096—Investigating consistence of powders, dustability, dustiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Chemical & Material Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Dispersion Chemistry (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템에 관한 것으로서, 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션은, 실내 또는 실외에서 동영상을 획득하는 동영상 획득단계; 상기 동영상에서 연속되는 다수의 정지 이미지를 추출하는 연속 이미지 추출단계; 상기 정지 이미지 각각의 데이터를 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성하는 이미지 변환단계; 상기 R 채널 이미지, 상기 G 채널 이미지 및 상기 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출하는 잔차 산출단계; 및 상기 잔차 데이터에 기반하여 미세먼지의 정도를 산출하는 미세먼지 정도 산출단계;를 포함하는 것을 특징으로 한다.
이에 따라, 여러 장소에서 미세먼지 레벨을 경제적으로 측정하는 것이 가능하다.

Description

인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템{Fine dust detecting solution and system by computing RGB channel volume residual based on AI}
본 발명은 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템에 관한 것으로서, 보다 상세하게는 이미지를 이용하여 미세먼지 레벨의 측정을 경제적으로 하는 것이 가능한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템에 관한 것이다.
최근, 미세먼지가 사회적 이슈가 되고 있으며, 뉴스 등 각종 매체에서도 미세먼지의 농도를 각 지역별로 제공해주고 있다.
기존의 미세먼지 측정 방식은 방사선 또는 빛의 물리적 특성을 이용하여 간접적으로 측정하는 방법(베타 흡수법 또는 광 산란법 등) 및 미세먼지의 질량을 저울로 측정하는 방법(중량 농도법 등)이 있으나, 이러한 방식으로 미세먼지를 측정하기 위해서는 고가의 측정 장비가 필요하다.
한편, 미세먼지의 측정은 행정 구역 단위별로 측정되나, 동일한 행정 구역이라 하더라도 지형의 특성이나 건물의 밀집도 등에 따라 실제 미세먼지의 측정값에는 차이가 발생하게 된다.
따라서, 고가의 미세먼지 측정 장비 없이 여러 구역에서 미세먼지 농도를 측정할 수 있는 방안이 필요하다.
KR 10-2020-0009707 A
따라서, 본 발명의 목적은 이와 같은 종래의 문제점을 해결하기 위한 것으로서, 이미지를 이용함으로써 여러 위치에서 경제적으로 미세먼지 레벨을 측정하는 것이 가능한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템을 제공함에 있다.
본 발명이 해결하고자 하는 과제는 위에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 목적은, 본 발명에 따라, 실내 또는 실외에서 동영상을 획득하는 동영상 획득단계; 상기 동영상에서 연속되는 다수의 정지 이미지를 추출하는 연속 이미지 추출단계; 상기 정지 이미지 각각의 데이터를 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성하는 이미지 변환단계; 상기 R 채널 이미지, 상기 G 채널 이미지 및 상기 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출하는 잔차 산출단계; 및 상기 잔차 데이터에 기반하여 미세먼지의 정도를 산출하는 미세먼지 정도 산출단계;를 포함하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션에 의해 달성된다.
상기 미세먼지 정도 산출단계에서, 미세먼지의 정도는 클래스로 나뉘어 산출될 수 있다.
상기 미세먼지 정도 산출단계에서, 미세먼지의 정도는 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 통해 산출될 수 있다.
상기 영향변수쌍은 아래의 수학식 1의 결과값이 최대가 될 때의 값으로 정해질 수 있다.
[수학식 1]
Figure pat00001
(
Figure pat00002
: 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값,
Figure pat00003
: 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도,
Figure pat00004
: 두 변수가 x, y일 때 미세먼지 정도가 높은 클래스에서의 관심도)
상기 수학식 1의 결과값이 동일한 경우가 있으면, 각 클래스에서 두 변수 빈도의 합이 최대가 되는 경우의 두 변수를 상기 영향변수쌍으로 정할 수 있다.
상기 영향변수쌍은, 인공지능 분석모델을 통해 상기 잔차 데이터를 학습함으로써 도출될 수 있다.
상기 미세먼지 정도 산출단계에서는, 3 이상의 홀수 개의 영향변수쌍을 이용하여 미세먼지의 정도를 산출할 수 있다.
상기 미세먼지 정도 산출단계는, 상기 영향변수쌍을 통해 산출된 미세먼지의 정도를, 서로 다른 세부 클래스에서 서로 간 빈도수의 우위가 역전되는 두 제2 변수로 이루어지는 제2 영향변수쌍을 통해 다시 판별하는 세부 클래스 산출단계를 포함할 수 있다.
본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션은 상기 잔차 산출단계와 상기 미세먼지 정도 산출단계 사이에서 진행되는, 상기 잔차 데이터의 성분 중 소정값 이상의 성분을 제외하는 잔차 데이터 필터링 단계를 더 포함할 수 있다.
본 발명의 또 다른 실시예에 의하면, 실내 또는 실외에서 동영상을 획득하는 동영상 획득부; 상기 동영상에서 연속되는 다수의 정지 이미지를 추출하는 연속 이미지 추출부; 상기 정지 이미지 각각의 데이터를 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성하는 이미지 변환부; 상기 R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출하는 잔차 산출부; 및 상기 잔차 데이터에 기반하여 미세먼지의 정도를 산출하는 미세먼지 정도 산출부;를 포함하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템이 제공된다.
상기 미세먼지 정도 산출부는 미세먼지의 정도를 클래스로 나누어 산출하고, 미세먼지의 정도는 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 이용하여 산출할 수 있다.
본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션에 의하면, 미세먼지의 레벨을 경제적으로 측정할 수 있으며, 이러한 경제성에 의해 여러 개소에서 미세먼지 레벨을 측정하여 국부적인 미세먼지 레벨을 알 수 있도록 한다.
그리고 미세먼지 레벨 측정 과정에서 정지 이미지 각각을 RGB 채널별로 분리하여 측정 시간을 단축하는 것이 가능하다.
또한, 미세먼지 레벨 측정 과정에서 영향변수쌍을 사용하여 미세먼지 정도를 용이하게 판단할 수 있다.
도 1은 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션의 순서도,
도 2는 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션을 구성하는 이미지 변환단계와 관련된 설명도,
도 3은 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션에서 사용되는 영향변수쌍 알고리즘을 구현하는 분석모델에 관한 설명도,
도 4는 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션을 구성하는 세부 클래스 산출단계와 관련된 설명도,
도 5는 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템의 개략적인 구성도이다.
이하에서는 본 발명의 구체적인 실시예에 대하여 도면을 참고하여 자세하게 설명하도록 한다.
도 1에는 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션의 순서도가 도시되어 있다.
본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션은 동영상 획득단계(S10), 연속 이미지 추출단계(S20), 이미지 변환단계(S30), 잔차 산출단계(S40) 및 미세먼지 정도 산출단계(S50)를 포함한다.
동영상 획득단계(S10)에서는 미세먼지의 레벨을 측정하고자 하는 장소의 동영상을 획득한다.
동영상은 5초 내외의 길이를 가질 수 있으며, 디지털 비디오 카메라 또는 휴대폰 등에 의해 촬영될 수 있다. 본 발명에 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션은 실내와 실외 모두에서 적용 가능하다.
연속 이미지 추출단계(S20)에서는 동영상 획득단계(S10)에서 촬영된 동영상에서 연속되는 다수의 정지 이미지를 추출한다.
동영상은 실제로는 미세하게 변화하면서 각각이 짧은 시간동안 순서대로 나타나는 여러 개의 정지 이미지로 이루어진다. 연속 이미지 추출단계(S20)에서는 동영상을 이루는 각각의 정지 이미지를 추출한다. 예를 들어 동영상이 15fps로 촬영된 경우, 정지 이미지는 1초당 15프레임이 추출될 수 있다.
빛은 미세먼지와 충돌하여 산란될 수 있으며, 빛이 미세먼지와 충돌할 가능성은 미세먼지의 농도가 높을수록 증가하게 된다. 그리고 육안으로는 확인하기 쉽지 않지만, 미세먼지에 의한 빛의 산란은 카메라를 통해서는 포착될 수 있다.
그런데 미세먼지는 공기 중에서 정지해 있는 것이 아니기 때문에 순간순간 미세먼지에 의해 빛이 다르게 산란되어, 동영상에서 추출된 정지 이미지 각각에는 서로 다른 상태의 빛이 포착된다. 미세먼지의 농도가 높을수록 각 정지 이미지 사이의 차이는 커질 수 있다.
이미지 변환단계(S30)에서는 도 2에 도시되어 있는 바와 같이, 정지 이미지 데이터 각각을 RGB(Red, Green, Blue)별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성한다.
정지 이미지는 0 ~ 255 사이의 R 채널 픽셀값, G 채널 픽셀값 및 B 채널 픽셀값을 모두 가지는 것에 비하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지 각각은 하나의 채널 픽셀값만을 가지므로, R 채널 이미지, G 채널 이미지 및 B 채널 이미지 각각은 정지 이미지에 비하여 데이터의 크기가 줄어들게 된다.
따라서, R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 어느 한 채널 이미지를 미세먼지 레벨의 측정에 사용하는 경우, 측정 과정에서 이루어지는 이미지의 처리나 분석 시간을 단축할 수 있다.
동영상에서 추출되는 정지 이미지는 다수이고, 정지 이미지 각각은 수많은 픽셀로 이루어지기 때문에 각 채널 이미지로의 변환은 매우 유효한 효과를 발휘할 수 있다.
잔차 산출단계(S40)에서는 R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출한다.
상기했던 바와 같이, 미세먼지에 의한 빛의 산란에 의해 정지 이미지 각각에는 서로 다른 상태의 빛이 포착되며, 정지 이미지가 변환되어 생성된 각 채널 이미지 각각에도 이러한 빛의 상태가 반영된다. 따라서, 동일 채널의 연속된 두 이미지 사이에는 차이, 즉 잔차가 발생하게 된다.
잔차 데이터는 아래와 같은 수학식에 의해 산출될 수 있다. 즉, 동일 채널의 연속된 두 이미지(t번째 이미지, t+1번째 이미지)에서 동일 위치 픽셀의 값 차이를 구하여 산출될 수 있다.
Figure pat00005
(
Figure pat00006
: i행, j열의 잔차,
Figure pat00007
: t번째 이미지에서 i행, j열의 값,
Figure pat00008
: t+1번째 이미지에서 i행, j열의 값)
상기했던 바와 같이, 미세먼지 농도가 높을수록 각 정지 이미지 사이의 차이는 커지므로, 미세먼지의 농도가 높은 경우에 잔차가 선명하게 나타나게 된다.
예를 들어, 15fps로 촬영된 5초 길이의 동영상에서는 75개의 정지 이미지가 추출될 수 있고, 각 정지 이미지가 변환되어 생성된 75개의 어느 한 채널 이미지에서는 74개의 잔차 데이터가 산출될 수 있다.
미세먼지 정도 산출단계(S50)에서는 잔차 데이터에 기반하여 미세먼지의 정도를 산출한다.
잔차의 값이 작은 경우에는 미세먼지의 농도가 낮고, 잔차의 값이 큰 경우에는 미세먼지의 농도가 높은 것으로 판단할 수 있다.
미세먼지의 정도를 판단하기 위한 기준 데이터는, 서로 다른 미세먼지 농도에서 각각 촬영된 동영상을 정지 이미지 산출, RGB 채널별 이미지 생성 및 잔차 데이터 산출과정을 거치게 함으로써 만들어질 수 있으며, 이러한 각 과정을 다수 회 반복하여 수행함으로써 기준 데이터의 정확성을 높일 수 있다.
R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 어느 채널 이미지에서 잔차가 선명하게 나타나는지에 따라 미세먼지 정도 산출단계(S50)에서는 특정 채널 이미지의 잔차 데이터를 기반으로 미세먼지의 정도를 산출하여, 산출 작업이 신속하고 용이하게 이루어지도록 할 수 있다.
또는, 모든 채널 이미지의 잔차 데이터를 기반으로 미세먼지의 정도를 산출하여, 미세먼지 산출의 정확성을 높이는 것도 가능하다.
상기한 본 발명의 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션에 의하면, 고가의 측정 장비 없이 일반적인 디지털 비디오 카메라 등을 이용하여 미세먼지의 레벨을 측정할 수 있으므로 경제적이며, 이러한 경제성에 의하여 여러 개소에서 미세먼지 레벨을 측정할 수 있으므로 국부적인 미세먼지 레벨을 알 수 있다.
동영상을 확득하기 위한 카메라로는 CCTV를 활용하여, 별도의 하드웨어 장비를 설치하지 않고도 미세먼지 레벨을 측정하는 것도 가능하다.
미세먼지 정도 산출단계(S50)에서 미세먼지의 정도는 클래스로 나뉘어 산출될 수 있다.
이 경우, 미세먼지의 좋고 나쁨을 직관적으로 파악할 수 있다.
클래스를 나누는 기준은 다수의 기준 잔차 데이터에 2진 분류 알고리즘을 적용하여 정해질 수 있다.
미세먼지 정도의 클래스는 예를 들어, '좋음'과 '나쁨'의 2개 클래스로 구분되거나, '좋음', '보통', '나쁨', '매우 나쁨'의 4개 클래스로 구분될 수 있다.
미세먼지 정도 산출단계(S50)에서 미세먼지의 정도는, 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 통해 산출될 수 있다.
이 경우, 영향변수쌍을 이루는 두 변수 중 어느 변수의 빈도수가 높은지를 판단함으로써 쉽게 미세먼지 정도의 클래스를 산출하는 것이 가능하다.
각 잔차 데이터는 모두 영향변수쌍을 통해 판단될 수 있으며, 상대적으로 높은 빈도로 산출된 미세먼지 정도의 클래스를 최종 결과값으로 정할 수 있다.
영향변수쌍을 도출하기 위한 알고리즘으로서는 영향변수쌍 알고리즘이 사용될 수 있다. 영향변수쌍 알고리즘에 의해, 영향변수쌍은 아래의 수학식 1의 결과값이 최대가 될 때의 값으로 정해질 수 있다.
Figure pat00009
(
Figure pat00010
: 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값,
Figure pat00011
: 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도,
Figure pat00012
: 두 변수가 x, y일 때 미세먼지 정도가 높은 클래스에서의 관심도)
이때, 각 클래스에서의 관심도는 아래와 같은 수학식에 의해 산출될 수 있다.
Figure pat00013
,
Figure pat00014
(
Figure pat00015
: 해당 클래스(c)에서 변수
Figure pat00016
가
Figure pat00017
보다 낮을 확률,
Figure pat00018
: 변수 x의 빈도수,
Figure pat00019
: 변수 y의 빈도수)
예를 들어, 미세먼지가 좋은 경우(c=low)와 나쁜 경우(c=high)에 대해 아래와 같은 값을 갖는 기준 잔차 데이터가 있는 경우,
Figure pat00020
각 클래스의 기준 잔차 데이터를 구성하는 변수에 대한 빈도수는 다음과 같다.
Figure pat00021
< 각 클래스의 기준 잔차 데이터를 구성하는 변수의 빈도수 분포표 >
예를 들어, 위의 빈도수 분포표를 기준으로 두 변수 x, y가 +1, +5인 경우, 미세먼지 정도가 낮은 클래스에서의 관심도는 0이 되고, 미세먼지 정도가 높은 클래스에서의 관심도는 1이 된다.
Figure pat00022
Figure pat00023
따라서, 두 변수 x, y가 +1, +5일 때 미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값은 1로 최대가 된다.
Figure pat00024
따라서, 두 변수 +1과 +5를 영향변수쌍으로 정할 수 있다.
이러한 영향변수쌍에 의해, 판단하고자 하는 잔차 데이터에서 변수 +1의 빈도수가 높은 경우에는 미세먼지의 정도가 낮은 것으로 판단할 수 있고, +5의 빈도수가 높은 경우에는 미세먼지의 정도가 높은 것으로 판단할 수 있다.
한편, 미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값이 동일한 경우가 있을 수 있다.
예를 들어, 위의 빈도수 분포표를 기준으로 하면 두 변수 x, y가 +1, +5인 경우 외에 두 변수 x, y가 +2, +5인 경우에도 미세먼지 정도가 낮은 클래스에서의 관심도는 0이 되고 미세먼지 정도가 높은 클래스에서의 관심도는 1이 되어,
Figure pat00025
Figure pat00026
미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값은 1이 된다.
Figure pat00027
이러한 경우에는 각 클래스에서 두 변수 빈도의 합이 최대가 되는 경우의 두 변수를 영향변수쌍으로 정하여, 미세먼지 정도 산출의 정확성을 높일 수 있다.
영향변수쌍 알고리즘은 인공지능 기술이 적용된 분석모델에 의해 구현될 수 있다. 분석모델은 인공신경망(ANN), 기계학습(machine learning), 딥러닝(deep learning) 등과 같은 다양한 인공지능 모델일 수 있다.
도 3에는 영향변수쌍 알고리즘을 구현하는 분석모델의 예시가 도시되어 있다. 분석모델은 입력층(input), 은닉층(hidden, hidden 2) 및 출력층(output)을 포할 수 있다. 은닉층의 수는 도시된 것과 달라질 수 있다.
입력층(input)에는 미세먼지가 좋은 경우(c=low)의 잔차 데이터를 구성하는 성분의 값과 미세먼지가 나쁜 경우(c=high)의 잔차 데이터를 구성하는 성분의 값이 각각 입력된다.
은닉층(hidden, hidden 2)에서는 각 클래스의 잔차 데이터의 성분 값을 학습하여 미세먼지가 좋은 경우(c=low) 관심도와 미세먼지가 나쁜 경우(c=high)의 관심도 차이의 절대값이 최대가 되는 두 성분(변수)을 구한다.
그리고 이렇게 구해진 두 성분은 출력층(output)을 통해 출력되어 영향변수쌍을 구성하게 된다.
영향변수쌍은 위와 같은 분석모델로을 통해 도출될 수 있으나, 이에 한정하지 않고 다른 분석모델을 이용하여 영향변수쌍을 도출할 수도 있다.
미세먼지 정도 산출단계(S50)에서는 3 이상의 홀수 개의 영향변수쌍을 이용하여 미세먼지의 정도를 산출할 수 있다.
이 경우, 과반을 넘는 수의 영향변수쌍을 통해 산출된 미세먼지 정도의 클래스를 최종 미세먼지 정도의 결과로 정할 수 있다. 예를 들어, 3개의 영향변수쌍을 이용하여 미세먼지의 정도를 산출하는 경우, 2개의 영향변수쌍을 통해서는 미세먼지의 정도가 높은 것으로 판단되고 1개의 영향변수쌍을 통해서는 미세먼지의 정도가 낮은 것으로 판단되면, 최종적으로 미세먼지의 정도가 높은 것으로 판단할 수 있다.
영향변수쌍을 통한 미세먼지 정도의 산출 방법은 확률을 기반으로 하는 것이므로, 여러 개의 영향변수쌍을 통해 미세먼지의 정도를 산출하여 산출의 정확성을 높이는 것이 가능하다.
미세먼지 정도 산출단계(S50)는 세부 클래스 산출단계를 포함할 수 있다.
세부 클래스 산출단계에서는 도 4에 도시되어 있는 바와 같이, 영향변수쌍을 통해 산출된 미세먼지의 정도를 세부 클래스로 구분하여 산출한다. 세부 클래스로의 구분은, 서로 다른 세부 클래스에서 서로 간 빈도수의 우위가 역전되는 두 제2 변수로 이루어지는 제2 영향변수쌍을 통해 이루어질 수 있다. 즉, 미세먼지의 정도를 세부 클래스로 구분하는 방법은 영향변수쌍을 통한 미세먼지 정도 산출 방법과 비교하여, 제2 영향변수쌍을 이루는 제2 변수가 영향변수쌍을 이루는 변수와 다를 뿐 원리가 동일하다.
영향변수쌍에 의해 미세먼지의 정도가 높은 것으로 판단된 경우와 미세먼지의 정도가 낮은 것으로 판단된 경우 각각에 적용될 수 있는 제2 영향변수쌍이 서로 상이함은 당연하다.
영향변수쌍에 의해 미세먼지의 정도가 '좋음(low)'과 '나쁨(high)'으로 구분되었다면, 제2 영향변수쌍에 의해서는 '좋음', '보통', '나쁨', '매우 나쁨'으로 보다 세분화되어 구분될 수 있다.
잔차 산출단계(S40)와 미세먼지 정도 산출단계(S50) 사이에서는 잔차 데이터 필터링 단계가 더 진행될 수 있다.
잔차 필터링 단계에서는 잔차 데이터 성분 중 소정값 이상의 성분을 제외하는 작업이 진행된다.
동영상에는 미세먼지에 의해 빛이 산란되는 것 이외에도 물체가 움직이는 것이 포착될 수 있으며, 물체의 움직임에 의한 빛의 변화는 육안으로 확인할 수 있을 정도로 크게 나타나므로 미세먼지에 의한 빛의 산란에 비하여 큰 잔차를 발생시키게 된다. 그리고 이러한 물체의 움직임에 의한 잔차는 미세먼지의 정도를 산출하는 데 있어서는 노이즈로 작용하게 된다.
따라서, 잔차 데이터 성분 중 소정값 이상의 크기를 갖는 성분을 제외하여, 미세먼지 정도 산출의 정확성을 높여줄 수 있다.
이하에서는 본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템(1)에 대하여 설명하도록 한다. 도 5에는 본 발명의 시스템(1)의 개략적인 구성도가 도시되어 있다.
본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템(1)에 대하여 설명하면서 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션의 설명시 언급된 부분에 대해서는 자세한 설명을 생략하도록 한다.
본 발명에 의한 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템(1)은 동영상 획득부(10), 연속 이미지 추출부(20), 이미지 변환부(30), 잔차 산출부(40) 및 미세먼지 정도 산출부(50)를 포함하여 이루어진다.
동영상 획득부(10)에서는 실내 또는 실외에서 동영상을 획득한다. 동영상 획득부(10)는 예를 들어, 디지털 비디오 카메라 또는 휴대폰 등일 수 있다.
연속 이미지 추출부(20)는 동영상 획득부(10)를 통해 얻어진 동영상에서 연속되는 다수의 정지 이미지를 추출한다. 미세먼지에 의한 빛의 산란에 의해, 정지 이미지 각각에는 서로 다른 상태의 빛이 포착될 수 있다.
이미지 변환부(30)는 정지 이미지 데이터 각각을 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성한다. RGB(Red, Green, Blue)로 표현되는 정지 이미지에 비하여, 어느 한 채널 이미지는 작은 데이터를 가지게 된다.
잔차 산출부(40)에서는 R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출한다. 미세먼지의 정도에 따라 빛의 산란 정도는 달라지고, 빛의 산란 정도에 따라 동일 채널 이미지에서 연속된 두 이미지 간의 잔차는 달라지게 된다. 즉, 잔차 데이터는 미세먼지의 정도에 따라 달라진다.
미세먼지 정도 산출부(50)는 잔차 데이터에 기반하여 미세먼지 정도를 산출한다. 잔차 데이터는 미세먼지 정도에 따라 달라지므로, 잔차 데이터를 통해 미세먼지 정도를 산출하는 것이 가능하다.
미세먼지 정도 산출부(50)는 미세먼지의 정도를 클래스로 나누어 산출하고, 미세먼지 정도는 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 이용하여 산출할 수 있다.
이 경우, 영향변수쌍을 이루는 두 변수 중 어느 변수의 빈도수가 높은지를 판단함으로써 쉽게 미세먼지 정도의 클래스를 산출할 수 있다.
미세먼지 정도 산출부(50)는 인공지능 기술을 적용된 분석모델을 통해 영향변수쌍을 도출하는 영향변수쌍 도출부(미도시)를 포함하여, 수많은 동영상으로부터의 기준 잔차 데이터를 분석함으로써 영향변수쌍을 도출할 수 있다. 그리고 영향변수쌍 도출부에서 도출된 영향변수쌍은 미세먼지 정도를 산출하는 데 사용된다.
인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템(1)의 구성들은 하나 또는 다수의 하드웨어를 통해 구현되거나 하나 또는 다수의 소프트웨어를 통해 구현될 수 있다. 또는 하드웨어와 소프트웨어를 통해 구현될 수도 있다.
본 발명의 권리범위는 상술한 실시예에 한정되는 것이 아니라 첨부된 특허청구범위 내에서 다양한 형태의 실시예로 구현될 수 있다. 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 변형 가능한 다양한 범위까지 본 발명의 청구범위 기재의 범위 내에 있는 것으로 본다.
1 : 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템
10 : 동영상 획득부 20 : 연속 이미지 추출부
30 : 이미지 변환부 40 : 잔차 산출부
50 : 미세먼지 정도 산출부

Claims (11)

  1. 실내 또는 실외에서 동영상을 획득하는 동영상 획득단계;
    상기 동영상에서 연속되는 다수의 정지 이미지를 추출하는 연속 이미지 추출단계;
    상기 정지 이미지 각각의 데이터를 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성하는 이미지 변환단계;
    상기 R 채널 이미지, 상기 G 채널 이미지 및 상기 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출하는 잔차 산출단계; 및
    상기 잔차 데이터에 기반하여 미세먼지의 정도를 산출하는 미세먼지 정도 산출단계;를 포함하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  2. 제1항에 있어서,
    상기 미세먼지 정도 산출단계에서, 미세먼지의 정도는 클래스로 나뉘어 산출되는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  3. 제2항에 있어서,
    상기 미세먼지 정도 산출단계에서, 미세먼지의 정도는 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 통해 산출되는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  4. 제3항에 있어서,
    상기 영향변수쌍은 아래의 수학식 1의 결과값이 최대가 될 때의 값으로 정해지는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
    [수학식 1]
    Figure pat00028

    (
    Figure pat00029
    : 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도와 미세먼지 정도가 높은 클래스에서의 관심도 차이의 절대값,
    Figure pat00030
    : 두 변수가 x, y일 때 미세먼지 정도가 낮은 클래스에서의 관심도,
    Figure pat00031
    : 두 변수가 x, y일 때 미세먼지 정도가 높은 클래스에서의 관심도)
  5. 제4항에 있어서,
    상기 수학식 1의 결과값이 동일한 경우가 있으면, 각 클래스에서 두 변수 빈도의 합이 최대가 되는 경우의 두 변수를 상기 영향변수쌍으로 정하는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  6. 제4항에 있어서,
    상기 영향변수쌍은, 인공지능 분석모델을 통해 상기 잔차 데이터를 학습함으로써 도출되는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  7. 제3항에 있어서,
    상기 미세먼지 정도 산출단계에서는, 3 이상의 홀수 개의 영향변수쌍을 이용하여 미세먼지의 정도를 산출하는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  8. 제3항에 있어서,
    상기 미세먼지 정도 산출단계는,
    상기 영향변수쌍을 통해 산출된 미세먼지의 정도를, 서로 다른 세부 클래스에서 서로 간 빈도수의 우위가 역전되는 두 제2 변수로 이루어지는 제2 영향변수쌍을 통해 다시 판별하는 세부 클래스 산출단계를 포함하는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  9. 제1항에 있어서,
    상기 잔차 산출단계와 상기 미세먼지 정도 산출단계 사이에서 진행되는,
    상기 잔차 데이터의 성분 중 소정값 이상의 성분을 제외하는 잔차 데이터 필터링 단계를 더 포함하는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 솔루션.
  10. 실내 또는 실외에서 동영상을 획득하는 동영상 획득부;
    상기 동영상에서 연속되는 다수의 정지 이미지를 추출하는 연속 이미지 추출부;
    상기 정지 이미지 각각의 데이터를 RGB 채널별로 분리하여 R 채널 이미지, G 채널 이미지 및 B 채널 이미지를 생성하는 이미지 변환부;
    상기 R 채널 이미지, G 채널 이미지 및 B 채널 이미지 중 적어도 어느 한 채널 이미지에서 연속된 두 이미지 간의 잔차 데이터를 산출하는 잔차 산출부; 및
    상기 잔차 데이터에 기반하여 미세먼지의 정도를 산출하는 미세먼지 정도 산출부;를 포함하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템.
  11. 제10항에 있어서,
    상기 미세먼지 정도 산출부는 미세먼지의 정도를 클래스로 나누어 산출하고,
    미세먼지의 정도는 서로 다른 클래스에서 서로 간 빈도수의 우위가 역전되는 두 변수로 이루어지는 영향변수쌍을 이용하여 산출하는 것을 특징으로 하는 인공지능 기반의 RGB 채널 잔차 산출을 통한 미세먼지 판독 시스템.
KR1020200141805A 2020-10-29 2020-10-29 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템 KR102468753B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200141805A KR102468753B1 (ko) 2020-10-29 2020-10-29 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200141805A KR102468753B1 (ko) 2020-10-29 2020-10-29 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템

Publications (2)

Publication Number Publication Date
KR20220057025A true KR20220057025A (ko) 2022-05-09
KR102468753B1 KR102468753B1 (ko) 2022-11-18

Family

ID=81583000

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200141805A KR102468753B1 (ko) 2020-10-29 2020-10-29 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템

Country Status (1)

Country Link
KR (1) KR102468753B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240005344A (ko) * 2022-07-05 2024-01-12 주식회사 딥비전스 영상 촬영 장치, 이미지 변환, 그리고 딥러닝 알고리즘을 이용한 미세먼지 측정 방법 및 시스템

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR840007632A (ko) * 1983-01-19 1984-12-08 니혼 화네스 고오교 가부시끼 가이샤 수류모델에서의 농도 가시화장치
KR101723073B1 (ko) * 2016-09-01 2017-04-05 (주)오션네트웍스 미세먼지농도 측정장치 및 미세먼지농도 측정시스템
KR20170042076A (ko) * 2015-10-08 2017-04-18 엄종현 사용자 기기로부터 획득된 영상 데이터로부터 미세 먼지를 측정하기 위한 장치, 방법 및 컴퓨터 판독가능 저장 매체
KR101952122B1 (ko) * 2018-02-23 2019-02-26 주식회사 딥비전스 미세 먼지 분석 방법 및 이를 수행하기 위한 장치
KR20200004680A (ko) * 2018-07-04 2020-01-14 한밭대학교 산학협력단 하늘 영상을 이용한 미세먼지 측정 시스템
KR20200009707A (ko) 2018-07-20 2020-01-30 순천향대학교 산학협력단 미세먼지 측정 장치 및 방법
KR20200087010A (ko) * 2019-01-10 2020-07-20 한밭대학교 산학협력단 임의의 풍경 사진 영상을 이용한 대기 중 미세 먼지의 소산 및 크기 정보 추출 시스템

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR840007632A (ko) * 1983-01-19 1984-12-08 니혼 화네스 고오교 가부시끼 가이샤 수류모델에서의 농도 가시화장치
KR20170042076A (ko) * 2015-10-08 2017-04-18 엄종현 사용자 기기로부터 획득된 영상 데이터로부터 미세 먼지를 측정하기 위한 장치, 방법 및 컴퓨터 판독가능 저장 매체
KR101723073B1 (ko) * 2016-09-01 2017-04-05 (주)오션네트웍스 미세먼지농도 측정장치 및 미세먼지농도 측정시스템
KR101952122B1 (ko) * 2018-02-23 2019-02-26 주식회사 딥비전스 미세 먼지 분석 방법 및 이를 수행하기 위한 장치
KR20200004680A (ko) * 2018-07-04 2020-01-14 한밭대학교 산학협력단 하늘 영상을 이용한 미세먼지 측정 시스템
KR20200009707A (ko) 2018-07-20 2020-01-30 순천향대학교 산학협력단 미세먼지 측정 장치 및 방법
KR20200087010A (ko) * 2019-01-10 2020-07-20 한밭대학교 산학협력단 임의의 풍경 사진 영상을 이용한 대기 중 미세 먼지의 소산 및 크기 정보 추출 시스템
KR102146287B1 (ko) * 2019-01-10 2020-08-20 한밭대학교 산학협력단 임의의 풍경 사진 영상을 이용한 대기 중 미세 먼지의 소산 및 크기 정보 추출 시스템

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
그림에서 RGB 채널을 각각 분리하기(파이썬, 블로그, 2018)* *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240005344A (ko) * 2022-07-05 2024-01-12 주식회사 딥비전스 영상 촬영 장치, 이미지 변환, 그리고 딥러닝 알고리즘을 이용한 미세먼지 측정 방법 및 시스템

Also Published As

Publication number Publication date
KR102468753B1 (ko) 2022-11-18

Similar Documents

Publication Publication Date Title
Min et al. A metric for light field reconstruction, compression, and display quality evaluation
Korhonen Two-level approach for no-reference consumer video quality assessment
Othman et al. An embedded real-time object detection and measurement of its size
US20100246939A1 (en) Image Processing Apparatus and Method, Learning Apparatus and Method, and Program
US20100195898A1 (en) Method and apparatus for improving quality of depth image
US11244429B2 (en) Method of providing a sharpness measure for an image
Feng et al. Saliency inspired full-reference quality metrics for packet-loss-impaired video
KR102427597B1 (ko) 인공지능 기반의 채도 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템
KR102468753B1 (ko) 인공지능 기반의 rgb 채널 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템
KR102427039B1 (ko) 인공지능 기반의 광도 잔차 산출을 통한 미세먼지 판독 솔루션 및 시스템
Le Callet et al. No reference and reduced reference video quality metrics for end to end QoS monitoring
JP2005165387A (ja) 画面のスジ欠陥検出方法及び装置並びに表示装置
US20130259373A1 (en) Image processing device capable of determining types of images accurately
Gelasca et al. On evaluating video object segmentation quality: A perceptually driven objective metric
JPH09293141A (ja) 移動物体検出装置
CN115131340B (zh) 一种电厂煤粉泄露识别方法、装置、设备及刻度存储介质
Irshad et al. No-reference image quality assessment of underwater images using multi-scale salient local binary patterns
JP2011215695A (ja) 移動物体検出装置及び方法、並びにプログラム
Hung et al. Moran’s I for impulse noise detection and removal in color images
KR20080031548A (ko) 실시간 화질 평가 방법 및 장치
Anitha et al. Quality assessment of resultant images after processing
KR100586227B1 (ko) 색분포 학습을 통한 얼굴영역 추출 방법
Asatryan Novel Technique for Ro-Reference Image Quality Assessment
Dal Cortivo A multi-modal approach to forensic audio-visual device identification
van Zwanenberg et al. Analysis of natural scene derived spatial frequency responses for estimating camera ISO12233 slanted-edge performance (JIST-first)

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant