KR101611440B1 - 이미지 처리 방법 및 장치 - Google Patents

이미지 처리 방법 및 장치 Download PDF

Info

Publication number
KR101611440B1
KR101611440B1 KR1020090110501A KR20090110501A KR101611440B1 KR 101611440 B1 KR101611440 B1 KR 101611440B1 KR 1020090110501 A KR1020090110501 A KR 1020090110501A KR 20090110501 A KR20090110501 A KR 20090110501A KR 101611440 B1 KR101611440 B1 KR 101611440B1
Authority
KR
South Korea
Prior art keywords
image
blur
area
face
region
Prior art date
Application number
KR1020090110501A
Other languages
English (en)
Other versions
KR20110053820A (ko
Inventor
권준환
김광민
강만석
이승수
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090110501A priority Critical patent/KR101611440B1/ko
Priority to US12/722,927 priority patent/US8396316B2/en
Publication of KR20110053820A publication Critical patent/KR20110053820A/ko
Application granted granted Critical
Publication of KR101611440B1 publication Critical patent/KR101611440B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993Evaluation of the quality of the acquired pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

이미지로부터 얼굴 영역과 블러 영역을 검출하는 과정, 검출된 얼굴 영역의 위치와 블록 영역의 위치를 비교하여 얼굴 영역과 블러 영역간의 중복을 체크하는 과정, 체크된 얼굴 영역과 블러 영역의 중복 정도에 따라 비정상 이미지를 판별하는 과정을 포함하는 이미지 처리 방법과 이를 수행하기 위한 장치가 개시되어 있다.

Description

이미지 처리 방법 및 장치{Method and apparatus for processing image}
본 발명은 이미지 처리 시스템에 관한 것이며, 특히 이미지로부터 검출되는 얼굴 영역 및 블러(blur) 영역을 이용하여 이미지를 효율적으로 관리하는 이미지 처리 방법 및 장치에 관한 것이다.
디지털 카메라, 캠코더, 카메라 기능을 갖는 휴대폰의 보급으로 촬영되는 사진의 개수가 기하급수적으로 증가하고 있다.
사용자는 사진 관리 프로그램 또는 미리 보기와 같은 도구 없이는 수많은 사진들을 관리하기가 쉽지 않다.
종래의 사진 관리 프로그램 및 미리 보기와 같은 도구들은 촬영 시간, 태그, 위치 정보, 색상, 이벤트등의 정보를 이용해서 사진들을 정리해주는 기능을 제공한다.
그러나 이러한 도구들은 잘못 찍힌 사진을 분류하여 사용자에게 알려주어 잘못 찍힌 사진을 삭제하게 하거나, 슬라이드 쇼를 사용할 시 잘못 찍힌 사진들을 제외하는 기능이 필요하다.
본 발명이 해결하고자하는 과제는 이미지로부터 검출되는 얼굴 영역 및 블러(blur) 영역을 이용하여 이미지를 효율적으로 관리하는 이미지 처리 방법 및 장치를 제공하는 데 있다.
상기의 과제를 해결하기 위하여, 본 발명의 일 실시예에 의하면 이미지 처리 방법에 있어서,
이미지로부터 얼굴 영역과 블러 영역을 검출하는 과정;
상기 검출된 얼굴 영역의 위치와 상기 블록 영역의 위치를 비교하여 상기 얼굴 영역과 블러 영역간의 중복을 체크하는 과정;
상기 체크된 얼굴 영역과 블러 영역의 중복 정도에 따라 비정상 이미지를 판별하는 과정을 포함한다.
일실시예에 따라 상기 얼굴 영역 및 블러 영역 검출 과정은
사전에 분석된 얼굴 특징점을 바탕으로 입력 이미지내 얼굴 영역을 검출하고, 상기 입력 이미지의 주파수 성분을 분석하여 이미지내 블러 영역을 검출할 수 있다.
일실시예에 따른 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
소정 크기의 이미지를 블러 영역과 비-블러 영역에 대해 이진값으로 표현한 제1이진 이미지로 변환하고,
소정 크기의 이미지를 얼굴 영역과 비-얼굴 영역에 대해 이진값으로 표현한 제2이진 이미지로 변환하고,
상기 제1이진 이미지와 제2이진 이미지를 논리곱 연산하여 제3 이진 이미지를 생성하고,
상기 제3이진 이미지와 제2이진 이미지를 비교하여 얼굴 영역과 비-블러 영역의 비율을 획득하는 과정을 포함할 수 있다.
일실시예에 따른 상기 영역 비율 획득 과정은
상기 제3이진 이미지에서 얼굴 영역과 비-블러 영역이 중복된 픽셀의 수와 상기 제2이진 이미지에서 얼굴 영역에 해당하는 픽셀 수를 비교하여 얼굴 영역과 비-블러 영역의 비율을 구할 수 있다.
일실시예에 따라 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
상기 얼굴 영역내에 여러개 얼굴이 검출시 상기 여러개 얼굴들중에서 가장 큰 얼굴과 블러 영역의 중복을 체크할 수 있다.
일실시예에 따라 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
상기 얼굴 영역내에 여러개 얼굴이 검출시 상기 이미지의 정중앙에서 거리가 가장 가까운 얼굴 영역과 상기 비-블러 영역의 중복을 체크할 수 있다.
일실시예에 따라 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
상기 얼굴 영역내에 여러개 얼굴이 검출시 일정 크기 이상의 얼굴 영역과 비-블러 영역의 중복을 체크할 수 있다.
일실시예에 따라 상기 얼굴 영역이 비-블러 영역에 소정 비율 이상 포함되면 정상 블러 이미지로 판단하고, 그렇지 않으면 비정상 블러 이미지로 판단할 수 있 다.
일실시예에 따라 상기 비정상 블러 이미지로 판단되면 자동으로 이미지를 교정 또는 이미지 삭제를 수행할 수 있다.
상기의 과제를 해결하기 위하여, 본 발명의 다른 실시예에 의하면 이미지 처리 장치에 있어서,
이미지의 주파수 성분을 분석하여 이미지내 블러 영역을 검출하는 블러 검출부;
사전에 분석된 얼굴 특징점을 바탕으로 이미지내 얼굴 영역을 검출하는 얼굴 영역 검출부;
상기 블러 검출부에서 검출된 블러 영역의 위치와 상기 얼굴 검출부에서 검출된 얼굴 영역의 위치를 비교하여 블러 영역과 얼굴 영역의 비율을 구하는 위치 비교부;
상기 위치 비교부의 비교 결과에 따라서 비정상 이미지를 판별하고, 그 비정상 이미지를 교정 또는 삭제 처리를 수행하는 후 처리부를 포함한다.
다른 실시예에 따른 상기 후 처리부는 위치 비교부의 비교 결과에 따라서 의도된 블러인지를 판단하고, 그 판단된 블러에 따라 이미지를 복구하거나 잘못 찍힌 사진으로 분리할 수 있다.
이하 첨부된 도면을 참조로하여 본 발명의 바람직한 실시예를 설명하기로 한다.
본 발명의 실시형태에 관한 이미지 처리 장치의 구성에 대해서 설명하기 전에 우선 본 발명의 실시형태에 관한 이미지 처리 장치에서의 이미지 처리에 관한 어프로치에 대해서 설명하기로 한다.
디지털 카메라, 캠코더와 같은 이미지 처리 장치는 전체화면 혹은 일부 화면이 흐리게 나오는 블러(blur) 이미지를 생성한다.
이러한 블러 이미지는 피사체의 움직임으로 인해 생성되는 움직임 블러(motion blur) 이미지와 피사체가 CCD(charge-coupled device), CMOS(Complementary metal oxide semiconductor)와 같은 소자에 초점이 잘 맞지 않아 생성되는 아웃 포커스 블러(out-of-focus blur)로 구분할 수 있다.
본 발명은 블러가 발생한 사진이 사용자 의도에 의해 이미지의 일부분을 블러한 것인지 아니면 촬영 장치의 한계로 인해 생긴 블러인지를 얼굴 검출 기술을 이용하여 구분하는 것이다. 따라서 본 발명은 이러한 블러 구분을 통해 사용자에게 자동으로 이미지를 복원해야 하거나 사용자에게 잘 나온 사진과 그렇지 않은 사진을 구분하여 화면에 보이는 기능을 제공한다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 장치의 블록도이다.
도 1의 이미지 처리 장치는 영상 입력부(110), 화상 처리부(120), 제어부(130), 사용자 입력부(140), 메모리부(150), 표시부(160)를 구비한다.
이미지 처리 장치는 데이터의 전송로로서 버스(bus)에 의해 상기 각 블록 사이를 접속한다.
영상 입력부(110)는 카메라에 의해 촬영되거나 이미지 처리 장치에 의해 저 장된 이미지 데이터를 입력한다.
화상 처리부(120)는 영상 입력부(110)에서 입력되는 이미지로부터 얼굴 영역과 블러 영역(또는 비-블러 영역)을 검출하고, 그 검출된 얼굴 영역의 위치와 블러 영역(또는 비-블러 영역)의 위치를 비교하여 비정상 블러 이미지를 판별한다. 아울러 화상 처리부(120)에서의 신호 처리는, 예를 들면 하드웨어(예를 들면, 신호 처리 회로) 및/또는 소프트웨어(신호 처리 소프트웨어)로 실현된다.
사용자 입력부(140)는 다수개의 키들 또는 스크린 터치를 이용하여 이미지 처리에 관련된 사용자 조작 명령을 입력한다.
제어부(130)는 각 블록을 제어하고, 비정상 블러 이미지 판별에 따라 이미지 복원 여부 또는 이미지 삭제 여부 메뉴를 화면에 표시하고, 사용자 입력부(140)로부터 입력되는 사용자 조작 명령에 따라 화상 처리부(120)에 비정상 블러 이미지를 보정 또는 삭제하도록 제어한다. 제어부(130)는, 예를 들면 MPU(Micro Processing Unit)나 제어 기능을 실현하기 위한 여러 개의 회로가 집적된 집적회로 등으로 구성된다.
메모리부(150)는 화상 처리부(120)에서 처리된 복수개의 이미지들 및 사용자 조작에 의한 데이터들을 저장한다. 여기에서 메모리부(150)는 하드 디스크 등의 자기 기록매체나 EEPROM, 플래시 메모리 등의 불휘발성 메모리를 들 수 있지만, 상기에 한정되지는 않는다.
표시부(160)는 제어부(130)를 통해 화상 처리부(120)에서 신호 처리된 이미지들을 표시한다.
따라서, 본 실시예에서와 같이 이미지 처리 장치는 이미지에 나타난 블러가 정상적인 것인지 아니면 비정상적인 것인지를 판단해서 이미지를 효율적으로 관리할 수 있다.
도 2는 도 1의 화상 처리부(120)의 상세 블록도 이다.
도 2의 화상 처리부(120)는 블러 검출부(210), 얼굴 검출부(220), 위치 비교부(230), 후처리부(240)를 구비한다.
블러 검출부(210)는 여러 가지 실시예가 주지의 기술로 제공되고 있으며, 입력 이미지의 주파수 성분을 분석하여 이미지로부터 블러 영역 또는 비-블러 영역을 검출한다.
예컨대, 블러 검출부(210)는 이미지내에서 경계 부분을 추출하고, 그 경계 부분내 픽셀의 수치들의 변함 정도를 통해 블러를 검출한다.
얼굴 검출부(220)는 여러 가지 실시예가 주지의 기술로 제공되고 있다. 일 실시예로 특정 템플릿 형태에 기반한 얼굴 검출 기술, 얼굴의 통계적인 특징을 이용한 외형(appearance) 기반의 얼굴 검출 기술이 있다.
일 예로 얼굴 검출부(220)는 사전에 분석된 얼굴 특징점을 바탕으로 입력 이미지내 얼굴 영역을 검출하고, 또한 그 얼굴 영역내에서 얼굴 개수, 얼굴 위치, 얼굴 크기를 획득한다.
위치 비교부(230)는 블러 검출부(210)에서 검출된 블러 영역의 위치와 얼굴 검출부(220)에서 검출된 얼굴 영역의 위치를 비교하여 얼굴 영역과 블러 영역(또는 비-블러 영역)의 중복을 확인한다.
후처리부(240)는 위치 비교부(230)의 비교 결과에 따라서 의도된 블러 이미지를 판단하고, 그 판단된 블러 이미지에 따라 "sharpen"효과와 같은 이미지 복구 처리를 하거나 잘 찍히지 않은 사진으로 분리한다.
도 3A은 본 발명의 일실시예에 따른 이미지 처리 방법의 전체 흐름도 이다.
먼저, 촬상된 이미지 또는 미리 저장된 이미지로부터 얼굴 검출 알고리듬과 블록 검출 알고리듬을 이용하여 얼굴 영역과 블러 영역을 검출한다(320 과정)
이어서, 검출된 얼굴 영역의 위치와 상기 블록 영역의 위치를 비교하여 얼굴 영역과 블러 영역간의 중복 정도를 체크한다(304 과정).
이어서, 체크된 얼굴 영역과 블러 영역의 중복 정도에 따라 정상 이미지와 비정상 이미지를 판별한다(306 과정).
도 3B는 본 발명의 일 실시예에 따른 이미지 처리 방법의 상세 흐름도이다.
먼저, 카메라에 의해 촬영되거나 메모리에 미리 저장된 이미지를 입력한다(310 과정).
이어서, 입력된 이미지로부터 블러 영역과 얼굴 영역을 검출한다(320 과정, 330 과정).
예를 들면, 입력 이미지의 주파수 성분을 분석하여 블러 영역 및 비-블로 영역을 검출할 수 있다.
또한 사전에 분석된 얼굴 특징을 참조하여 현재 이미지에서의 얼굴 영역을 검출할 수 있다. 그리고 검출된 얼굴 영역내에서 얼굴 개수, 얼굴 위치, 얼굴 크기를 획득한다.
이어서, 블러 영역이 검출되거나 얼굴 영역에 얼굴이 존재하는 것으로 확인되면 얼굴 영역의 위치와 비-블러 영역의 위치를 비교하여 얼굴 영역과 비-블러 영역의 중복 정도를 판단한다.
따라서 얼굴 영역과 비-블러 영역의 중복 정도를 판단하기 위해 얼굴 영역이 비-블러 영역에 기준치 이상 포함되는 가를 체크한다(340 과정). 여기서 기준치는 바람직하게 80% 이다.
이때 여러 명의 인물이 찍힐 시 사진의 주제가 되는 인물이 화면에 나타난 인물들 중에 가장 크게 찍히고 화면의 중간 영역에 위치하는 경우가 대부분이다. 따라서 여러 개의 얼굴이 검출될 시 얼굴 영역과 블러 영역의 중복 체크 과정은 여러 가지 실시예가 있다.
일실시 예로서 여러 개 얼굴들 중에서 가장 큰 얼굴과 블러 영역의 중복을 체크할 수 있다.
다른 실시예로서 이미지의 정 중앙에서 거리가 가장 가까운 얼굴 영역과 비-블러 영역의 중복을 체크할 수 있다.
또 다른 실시예로서, 일정 크기 이상의 얼굴 영역과 비-블러 영역의 중복을 체크할 수 있다.
이어서, 얼굴 영역이 비-블러 영역에 기준치 이상 포함되면 사용자 의도에 의해 이미지의 일부분을 블러한 정상 이미지로 판단한다(350 과정). 이때 기준치는 바람직하게 80% 이다.
그러나 얼굴 영역이 비-블러 영역에 80% 이상 포함되지 않으면 얼굴 영역과 블러 영역이 20% 이상 중복되므로 촬영 장치의 한계로 블러된 비정상 이미지로 판단한다(360 과정).
이어서, 비정상 이미지의 판별에 따라 이미지 복원 또는 별도 관리(자동 삭제, 삭제 추천)를 수행한다(370 과정). 또한 비정상 블러 이미지는 자동으로 블러 제거 처리할 수도 있다.
다른 실시예로, 비정상 이미지의 판별에 따라 이미지 복원 또는 이미지 삭제 메뉴를 화면상에 표시할 수 있다.
또 다른 실시예로서 삭제된 비정상 이미지는 별도의 카테고리로 관리 할 수 있다.
한편, 검출된 얼굴 영역에서 얼굴이 존재하지 않은 것으로 확인되면 이미지 전체에 움직임 블러(motion blur) 혹은 아웃 포커스(out-of-focus blur)가 존재하는 지를 확인하기 위해 전체 이미지내에서 블러 영역이 일정 이상인가를 체크한다(342 과정).
이때, 전체 이미지내에서 블러 영역이 일정 이상으로 체크되면 이미지 보정 또는 삭제 추천이 필요한 비정상 이미지로 판단한다(360 과정). 또한 전체 이미지내에서 블러 영역이 일정 이하로 체크되면 정상 이미지로 판단한다(350 과정).
결국, 본 실시예에서와 같이 이미지에 나타난 블러가 정상적인 것인지 아니면 비정상적인 것인지를 판단해서 자동으로 이미지를 보정하거나 별도 관리(자동 삭제, 삭제 추천등)을 통해 사진을 효율적으로 관리하거나 편집할 수 있다.
도 4는 도 3의 얼굴 영역과 비-블러 영역의 중복 정도를 판별하는 과정의 상 세 흐름도이다.
도 5A 내지 도 5C를 참조하여 얼굴 영역과 비-블러 영역의 중복 정도를 판별하는 과정을 설명한다.
먼저, N×M 블록으로 이루어진 이미지를 입력한다. N×M 블록으로 이루어진 이미지를 이용하여 얼굴 영역과 블러 영역을 동시에 검출한다.
N×M 블록의 이미지에 대해 블러 영역과 비-블러 영역이 2진값으로 표현된 제1 이진 이미지로 생성한다(410 과정).
예를 들면, 도 5A에 도시된 바와 같이 검출된 블러 영역에 포함된 픽셀들은 "0"로 표시하고, 비-블러 영역에 포함된 픽셀들은 "1"로 표시한다.
그리고 N×M 블록의 이미지에 대해 얼굴 영역과 비-얼굴 영역을 2진값으로 표현한 제2 이진 이미지로 생성한다(420 과정).
예를 들면, 도 5B에 도시된 바와 같이 검출된 얼굴 영역에 포함된 픽셀들은 "1"로 표시하고, 비-얼굴 영역에 포함된 픽셀들은 "0"로 표시한다.
이어서, 제1 이진 이미지와 제2이진 이미지를 논리 "AND" 연산하여 새로운 제3이진 이미지를 생성하다(430 과정).
예를 들면, 도 5A의 제1 이진 이미지와 도 5B의 제2 이진 이미지의 같은 위치의 픽셀끼리 서로 논리곱(AND) 연산을 수행함으로서 도 5C도 도시된 바와 같은 새로운 이진 이미지를 생성한다. 즉, 도 5C를 보면 이진값 "1"은 비-블러 영역과 얼굴 영역에 모두 포함되는 픽셀을 의미한다.
이어서, 제3 이진 이미지와 제2 이진 이미지를 비교하여 얼굴 영역과 비-블 러 영역의 비율을 계산한다(440 과정).
예를 들면, 도 5C의 제3이진 이미지에서 이진값 "1"인 픽셀의 수와 도 5A의 제1이진 이미지에서 이진값"1"인 픽셀 수를 비교하여 얼굴 영역과 비-블러 영역의 비율을 구한다.
결국, 본 실시예에서와 같이 이미지내에서 얼굴 영역과 비-블러 영역의 중복 정도를 판별함으로서 비정상 블러 이미지와 정상 블러 이미지를 분별할 수 있다.
본 발명의 실시형태로서 이미지 처리 장치를 들어 설명하였으나, 디지털 카메라, 디지털 프린터, 디지털 TV등에 적용할 수 있다.
본 발명은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구 범위에 기재된 내용과 동등한 범위내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.
도 1은 본 발명의 일실시예에 따른 이미지 처리 장치의 블록도 이다.
도 2는 도 1의 화상 처리부의 상세 블록도 이다.
도 3a는 본 발명의 일실시예에 따른 이미지 처리 방법의 전체 흐름도 이다.
도 3b는 본 발명의 일실시예에 따른 이미지 처리 방법의 상세 흐름도 이다.
도 4는 도 3의 얼굴 영역과 비-블러 영역의 중복 정도를 판별하는 과정의 상세 흐름도 이다.
도 5a 내지 도 5c는 얼굴 영역과 비-블러 영역에 포함돠는 픽셀을 구하는 방법을 보이는 개념도 이다.

Claims (15)

  1. 이미지 처리 방법에 있어서,
    이미지로부터 얼굴 영역과 블러 영역을 검출하는 과정;
    상기 검출된 얼굴 영역의 위치와 상기 블러 영역의 위치를 비교하여 상기 얼굴 영역과 블러 영역간의 중복을 체크하는 과정;
    상기 체크된 얼굴 영역과 블러 영역의 중복 정도에 따라 비정상 이미지를 판별하는 과정을 포함하는 이미지 처리 방법.
  2. 제1항에 있어서, 상기 얼굴 영역 및 블러 영역 검출 과정은
    사전에 분석된 얼굴 특징점을 바탕으로 이미지내 얼굴 영역을 검출하고, 상기 이미지의 주파수 성분을 분석하여 이미지내 블러 영역 및 비-블러 영역을 검출하는 것임을 특징으로 하는 이미지 처리 방법.
  3. 제1항에 있어서, 상기 얼굴 영역과 블러 영역의 중복을 체크하는 과정은
    상기 검출된 블러 영역과 얼굴 영역을 비교하여 상기 얼굴 영역과 비-블러 영역의 비율을 획득하는 과정;
    상기 획득된 비율에 따라 얼굴 영역과 블러 영역의 중복을 체크하는 것임을 특징으로 하는 이미지 처리 방법.
  4. 제1항에 있어서, 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
    소정 크기의 이미지에 대해 블러 영역과 비-블러 영역을 이진값으로 표현한 제1이진 이미지로 생성하고,
    소정 크기의 이미지에 대해 얼굴 영역과 비-얼굴 영역을 이진값으로 표현한 제2이진 이미지로 생성하고,
    상기 제1이진 이미지와 제2이진 이미지를 논리곱 연산하여 제3 이진 이미지를 생성하고,
    상기 제3이진 이미지와 제2이진 이미지를 비교하여 얼굴 영역과 비-블러 영역의 비율을 획득하는 것을 특징으로 하는 이미지 처리 방법.
  5. 제4항에 있어서, 상기 영역 비율 획득 과정은
    상기 제3이진 이미지에서 얼굴 영역과 비-블러 영역이 중복된 픽셀의 수와 상기 제2이진 이미지에서 얼굴 영역에 해당하는 픽셀 수를 비교하여 얼굴 영역과 비-블러 영역의 비율을 구하는 것임을 특징으로 하는 이미지 처리 방법.
  6. 제4항에 있어서, 상기 얼굴 영역이 비-블러 영역에 소정 비율 이상 포함되면 정상 블러 이미지로 판단하고, 그렇지 않으면 비정상 블러 이미지로 판단하는 것임을 특징으로 하는 이미지 처리 방법.
  7. 제6항에 있어서, 상기 비정상 블러 이미지로 판단되면 자동으로 이미지를 교 정 또는 이미지 삭제를 수행하는 것을 특징으로 하는 이미지 처리 방법.
  8. 제6항에 있어서, 상기 비정상 블러 이미지로 판단되면 이미지 복원 여부 또는 이미지 삭제 여부 메뉴를 화면상에 표시하는 것임을 특징으로 하는 촬영 이미지 처리 방법.
  9. 제1항에 있어서, 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
    상기 얼굴 영역내에 여러개 얼굴이 검출시 상기 여러개 얼굴들중에서 가장 큰 얼굴과 블러 영역의 중복을 체크하는 것임을 특징으로 하는 이미지 처리 방법.
  10. 제1항에 있어서, 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
    상기 얼굴 영역내에 여러개 얼굴이 검출시 상기 이미지의 정중앙에서 거리가 가장 가까운 얼굴 영역과 비-블러 영역의 중복을 체크하는 것임을 특징으로 하는 이미지 처리 방법.
  11. 제1항에 있어서, 상기 얼굴 영역과 블러 영역의 중복 체크 과정은
    상기 얼굴 영역내에 여러개 얼굴이 검출시 일정 크기 이상의 얼굴 영역과 비-블러 영역의 중복을 체크하는 것임을 특징으로 하는 이미지 처리 방법.
  12. 제1항에 있어서, 상기 검출된 얼굴 영역내에서 얼굴이 검출되지 않을 경우 이미지 전체에 블러 정도를 판별하는 과정;
    상기 판별 결과에 따라 이미지 보정을 수행하거나 이미지를 별도로 관리하는 과정을 더 포함하는 것을 특징으로 하는 이미지 처리 방법.
  13. 이미지 처리 장치에 있어서,
    이미지의 주파수 성분을 분석하여 이미지내 블러 영역을 검출하는 블러 검출부;
    사전에 분석된 얼굴 특징점을 바탕으로 이미지내 얼굴 영역을 검출하는 얼굴 영역 검출부;
    상기 블러 검출부에서 검출된 블러 영역의 위치와 상기 얼굴 검출부에서 검출된 얼굴 영역의 위치를 비교하여 블러 영역과 얼굴 영역의 비율을 구하는 위치 비교부;
    상기 위치 비교부의 비교 결과에 따라서 비정상 이미지를 판별하고, 그 비정상 이미지를 교정 또는 삭제 처리를 수행하는 후 처리부를 포함하는 이미지 처리 장치.
  14. 제13항에 있어서, 상기 후 처리부는 위치 비교부의 비교 결과에 따라서 의도된 블러 인지를 판단하고, 그 판단된 블러에 따라 이미지를 복구하거나 잘못 찍힌 사진으로 분리하는 것임을 특징으로 하는 이미지 처리 장치.
  15. 제1항 내지 제12항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.
KR1020090110501A 2009-11-16 2009-11-16 이미지 처리 방법 및 장치 KR101611440B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090110501A KR101611440B1 (ko) 2009-11-16 2009-11-16 이미지 처리 방법 및 장치
US12/722,927 US8396316B2 (en) 2009-11-16 2010-03-12 Method and apparatus for processing image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090110501A KR101611440B1 (ko) 2009-11-16 2009-11-16 이미지 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20110053820A KR20110053820A (ko) 2011-05-24
KR101611440B1 true KR101611440B1 (ko) 2016-04-11

Family

ID=44011332

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090110501A KR101611440B1 (ko) 2009-11-16 2009-11-16 이미지 처리 방법 및 장치

Country Status (2)

Country Link
US (1) US8396316B2 (ko)
KR (1) KR101611440B1 (ko)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8885229B1 (en) 2013-05-03 2014-11-11 Kofax, Inc. Systems and methods for detecting and classifying objects in video captured using mobile devices
US9137417B2 (en) 2005-03-24 2015-09-15 Kofax, Inc. Systems and methods for processing video data
US9769354B2 (en) 2005-03-24 2017-09-19 Kofax, Inc. Systems and methods of processing scanned data
US9767354B2 (en) 2009-02-10 2017-09-19 Kofax, Inc. Global geographic information retrieval, validation, and normalization
US9349046B2 (en) 2009-02-10 2016-05-24 Kofax, Inc. Smart optical input/output (I/O) extension for context-dependent workflows
US8774516B2 (en) 2009-02-10 2014-07-08 Kofax, Inc. Systems, methods and computer program products for determining document validity
US8879846B2 (en) 2009-02-10 2014-11-04 Kofax, Inc. Systems, methods and computer program products for processing financial documents
US9576272B2 (en) 2009-02-10 2017-02-21 Kofax, Inc. Systems, methods and computer program products for determining document validity
US8958605B2 (en) 2009-02-10 2015-02-17 Kofax, Inc. Systems, methods and computer program products for determining document validity
KR101692401B1 (ko) * 2011-01-21 2017-01-03 삼성전자주식회사 영상 처리 방법 및 장치
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013098721A2 (en) * 2011-12-30 2013-07-04 Koninklijke Philips Electronics N.V. Imaging examination protocol update recommender
US10146795B2 (en) 2012-01-12 2018-12-04 Kofax, Inc. Systems and methods for mobile image capture and processing
US9483794B2 (en) 2012-01-12 2016-11-01 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
US9058515B1 (en) 2012-01-12 2015-06-16 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
US9158967B2 (en) 2012-01-12 2015-10-13 Kofax, Inc. Systems and methods for mobile image capture and processing
US9058580B1 (en) 2012-01-12 2015-06-16 Kofax, Inc. Systems and methods for identification document processing and business workflow integration
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
KR101806350B1 (ko) 2012-05-09 2017-12-07 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169853A1 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
KR101823288B1 (ko) 2012-05-09 2018-01-29 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
AU2013259606B2 (en) 2012-05-09 2016-06-02 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
WO2014105278A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for determining whether to scroll or select contents
CN108845748A (zh) 2012-12-29 2018-11-20 苹果公司 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
KR101958517B1 (ko) 2012-12-29 2019-03-14 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
KR102301592B1 (ko) 2012-12-29 2021-09-10 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US9208536B2 (en) 2013-09-27 2015-12-08 Kofax, Inc. Systems and methods for three dimensional geometric reconstruction of captured image data
EP2973226A4 (en) 2013-03-13 2016-06-29 Kofax Inc CLASSIFICATION OF OBJECTS ON DIGITAL IMAGES RECORDED BY MOBILE DEVICES
US9355312B2 (en) 2013-03-13 2016-05-31 Kofax, Inc. Systems and methods for classifying objects in digital images captured using mobile devices
US20140316841A1 (en) 2013-04-23 2014-10-23 Kofax, Inc. Location-based workflows and services
US9299132B2 (en) 2013-10-23 2016-03-29 Adobe Systems Incorporated Automatically determining the size of a blur kernel
JP2016538783A (ja) 2013-11-15 2016-12-08 コファックス, インコーポレイテッド モバイル映像データを用いて長尺文書の合成画像を生成するためのシステムおよび方法
US9396409B2 (en) * 2014-09-29 2016-07-19 At&T Intellectual Property I, L.P. Object based image processing
US9760788B2 (en) 2014-10-30 2017-09-12 Kofax, Inc. Mobile document detection and orientation based on reference object characteristics
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) * 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10242285B2 (en) 2015-07-20 2019-03-26 Kofax, Inc. Iterative recognition-guided thresholding and data extraction
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9779296B1 (en) 2016-04-01 2017-10-03 Kofax, Inc. Content-based detection and three dimensional geometric reconstruction of objects in image and video data
US10482345B2 (en) * 2016-06-23 2019-11-19 Capital One Services, Llc Systems and methods for automated object recognition
US10803350B2 (en) 2017-11-30 2020-10-13 Kofax, Inc. Object detection and image cropping using a multi-detector approach
KR102328029B1 (ko) * 2021-06-02 2021-11-17 아주대학교산학협력단 블러 이미지 처리 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000215309A (ja) 1999-01-19 2000-08-04 Hewlett Packard Co <Hp> 画像処理システム
JP2006092555A (ja) 2004-09-23 2006-04-06 Fuji Xerox Co Ltd 領域検出方法および領域検出プログラム
JP2009239926A (ja) 2009-06-01 2009-10-15 Seiko Epson Corp 画像データ処理装置、画像データセットを記録した媒体、画像データ処理プログラムを記録した媒体および画像データ処理方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100343223B1 (ko) * 1999-12-07 2002-07-10 윤종용 화자 위치 검출 장치 및 그 방법
US6697502B2 (en) * 2000-12-14 2004-02-24 Eastman Kodak Company Image processing method for detecting human figures in a digital image
GB2395781A (en) * 2002-11-29 2004-06-02 Sony Uk Ltd Face detection
CN101297545B (zh) * 2005-10-28 2012-05-02 株式会社尼康 摄影装置、图像处理装置
US7860280B2 (en) * 2006-06-09 2010-12-28 Samsung Electronics Co., Ltd. Facial feature detection method and device
JP2009027298A (ja) * 2007-07-18 2009-02-05 Ricoh Co Ltd 撮像装置および撮像装置の制御方法
US8098904B2 (en) * 2008-03-31 2012-01-17 Google Inc. Automatic face detection and identity masking in images, and applications thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000215309A (ja) 1999-01-19 2000-08-04 Hewlett Packard Co <Hp> 画像処理システム
JP2006092555A (ja) 2004-09-23 2006-04-06 Fuji Xerox Co Ltd 領域検出方法および領域検出プログラム
JP2009239926A (ja) 2009-06-01 2009-10-15 Seiko Epson Corp 画像データ処理装置、画像データセットを記録した媒体、画像データ処理プログラムを記録した媒体および画像データ処理方法

Also Published As

Publication number Publication date
US20110116716A1 (en) 2011-05-19
US8396316B2 (en) 2013-03-12
KR20110053820A (ko) 2011-05-24

Similar Documents

Publication Publication Date Title
KR101611440B1 (ko) 이미지 처리 방법 및 장치
EP2627075B1 (en) Auto burst image capture method applied to a mobile device and related mobile device
US8509481B2 (en) Image processing apparatus, image processing method, imaging apparatus
US8254630B2 (en) Subject extracting method and device by eliminating a background region using binary masks
JP6800628B2 (ja) 追跡装置、追跡方法、及びプログラム
US9569831B2 (en) Image processing apparatus, image processing method, and non-transitory computer-readable storage medium for extracting information embedded in a printed material
JP6132490B2 (ja) 認証装置、認証方法、およびプログラム
US8948452B2 (en) Image processing apparatus and control method thereof
EP2157547B1 (en) Object tracking
WO2006116744A1 (en) Method and apparatus for incorporating iris color in red-eye correction
KR20180038241A (ko) 영상 제공 장치 및 방법
US9070008B2 (en) Object recognition apparatus and dictionary data registration method
CN111753783B (zh) 手指遮挡图像检测方法、装置及介质
JP6924064B2 (ja) 画像処理装置およびその制御方法、ならびに撮像装置
CN105763884A (zh) 视频处理方法、装置及设备
US20080240520A1 (en) Imaging apparatus, display control method and recording medium
EP2793166A2 (en) Target-image detecting device, control method and control program thereof, recording medium, and digital camera
CN111885371A (zh) 图像遮挡检测方法、装置、电子设备和计算机可读介质
KR101925799B1 (ko) 디스플레이 장치에서 표시되는 정보의 유출을 방지하기 위한 컴퓨터 프로그램과 이를 이용한 보안 서비스 제공 방법
JPH1196361A (ja) 物体抽出装置、物体抽出方法、物体抽出プログラムを記録した媒体および物体検出プログラムを記録した媒体
CN110798667B (zh) 一种自动对焦方法、装置、电子设备及可读存储介质
US9049382B2 (en) Image processing apparatus and image processing method
CN112752110A (zh) 视频呈现方法及装置、计算设备、存储介质
CN111385512B (zh) 视频数据处理方法和装置
JP4938065B2 (ja) 画像パラメータ調整装置及び方法及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee