KR20150059302A

KR20150059302A - 촬상 이미지를 적합화 하여 문자를 인식하는 방법 및 그 방법을 실행하는 정보 처리 기기

Info

Publication number: KR20150059302A
Application number: KR1020130142744A
Authority: KR
Inventors: 최재숙; 김선섭
Original assignee: 최재숙; 김선섭
Priority date: 2013-11-22
Filing date: 2013-11-22
Publication date: 2015-06-01

Abstract

이 발명은 고품질 양호한 특성의 문자 인식 대상 이미지로부터 고도의 정확성으로 문자를 인식하는 방법 및 정보 처리 기기를 제공한다.
이 방법은, 이미지 전처리 기능 블록(200)에서, 문자 인식하고자 하는 이미지 영역의 품질을 추론하여 이미지 촬상 단계로 이미지 품질을 피드백 함으로써 이미지를 적합화하는 단계를 포함한다. 이 단계는, 인식 영역 선택 기능 블록(220), 문자 부분 결정 기능 블록(240), 이미지 품질 추론 기능 블록(250) 및 이미지 적합화 기능 블록(260)에 의해 구현된다. 인식 영역 선택 기능 블록(220)에서는 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하며, 문자 부분 결정 기능 블록(240)에서는 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해내고, 이미지 품질 추론 기능 블록(250)에서는 문자 인식 대상 이미지 영역에서의 배경 부분과 문자 부분 사이의 구별이 문자를 인식하기에 적합한지를 추론하며, 이미지 적합화 기능 블록(260)은 추론 결과가 문자 인식에 부적합한 것으로 판단될 때 추론 결과를 이미지 촬상 기능 블록(110)으로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 한다.

Description

촬상 이미지를 적합화 하여 문자를 인식하는 방법 및 그 방법을 실행하는 정보 처리 기기 {METHOD FOR RECOGNIZING CHARACTER BY FITTING IMAGE SHOT, AND INFORMATION PROCESSING DEVICE FOR EXECUTING IT}

이 발명은 이미지에서 문자를 인식하는 방법에 관한 것이며, 더 자세하게는, 문자 인식 대상 이미지의 품질을 향상시켜 문자 인식의 정확성을 향상시키는 문자 인식 방법에 관한 것이다.

또한, 이 발명은 이미지 촬상 수단 및 문자 인식 모듈을 구비한 정보 처리 기기로서, 문자 인식 대상 이미지의 품질을 향상시켜 문자 인식의 정확성을 향상시키는 정보 처리 기기에 관한 것이다.

이미지에서 문자를 인식하는 문자 인식 기술은 컴퓨터 및 스마트폰을 비롯한 다양한 정보기기에서 다양하게 활용되고 있다. 문자 인식 기술의 활용에서 가장 중요한 것은 문자 인식의 정확성이다.

문자 인식의 정확성에 가장 큰 영향을 미치는 것은 처리 소스인 문자 인식 대상 이미지의 품질 및 특성이다. 이미지의 품질 및 특성은 획득 상황에 따라 다양하게 변하며, 각각의 상황에 따라 독특한 변인이 존재한다. 그러므로, 문자 인식 기술이 수십년에 걸쳐 발전해 왔음에도 불구하고, 각각의 상황에서 존재하는 변인을 통제하여 가능한 한 고품질 양호한 특성의 이미지를 획득하려는 노력이 계속되고 있다.

도 1a 및 도 1b에는 종래기술에 따른 문자 인식 방법을 설명하기 위한 블록선도가 도시되어 있으며, 도 1a는 일반적인 문자 인식 방법에 관한 것이고, 도 1b는 스마트폰 등 카메라 장착 이동기기에서의 문자 인식 방법에 관한 것이다.

도 1a에 도시된 바와 같이, 문자 인식에서는 이미지 획득 기능 블록(100)에서 인식 대상 이미지를 획득하고, 이미지 전처리 기능 블록(200)에서 인식 대상 이미지를 인식에 적합하게 전처리 한다. 인식 및 응용 기능 블록(300)은 전처리 된 이미지로부터 문자를 인식하고, 인식된 문자, 숫자 또는 텍스트를 다양한 용도로 활용하는 것을 나타낸다.

도 1b는 스마트폰 등 카메라 장착 이동기기에서의 문자 인식 방법을 도시한다. 스마트폰 등 카메라 장착 이동기기에서는, 이미지 획득이 이동기기에 장착된 카메라에 의해 이미지를 촬상함으로써 이루어질 수 있으며, 도 1b의 이미지 촬상 기능 블록(110)은 이 과정을 나타낸다. 촬상된 이미지는 문자 부분 추출 기능 블록(280)에서 문자 인식 처리를 하고자 하는 이미지 부분이 추출되며, 추출된 문자 부분 이미지는 이미지 이진화 기능 블록(290)을 통해 이진화 된다. 문자 인식 기능 블록(310)에서는, 이진화 된 문자 부분 이미지로부터 문자, 숫자 또는 텍스트를 인식하며, 정보 응용 기능 블록(320)에서는 인식된 정보, 즉 문자, 숫자 또는 텍스트를 다양한 용도로 활용할 수 있을 것이다. 문자 부분 추출 기능 블록(280) 및 이미지 이진화 기능 블록(290)은 도 1a에 도시된 이미지 전처리 기능 블록(200)을 구성하며, 문자 인식 기능 블록(310) 및 정보 응용 기능 블록(320)은 도 1a에 도시된 인식 및 응용 기능 블록(300)을 구성한다.

촬상된 이미지는 피사체의 상태 및 주변 광원에 따라 다양한 품질 및 특성을 갖는다. 즉, 문자 인식 영역의 이미지에서 문자와 문자를 제외한 배경을 구분하여 살펴보면, 문자 부분과 배경 부분은 제각기 다양한 색상, 채도, 명도를 가질 것이고, 문자 부분과 배경 부분 사이의 구별, 즉 콘트라스트가 강한 것부터 거의 없는 것까지 다양할 것이다. 이미지에서 문자를 인식하는 것은 배경 부분으로부터 문자 부분을 구별해내고, 구별된 문자 부분에 대응하는 문자, 숫자 또는 텍스트를 찾아내는 것이다. 그러므로, 문자 인식에서 가장 중요한 것은 배경 부분으로부터 문자 부분을 구별해내는 것이다. 배경 부분으로부터 문자 부분을 구별해내는 가장 보편적인 방법은 문자 부분을 포함하는 이미지를 이진화 하는 것이다.

한편, 문자 인식에서는 배경 부분으로부터 문자 부분을 구별해내야 하는데, 획득된 이미지가 흐리거나, 색상, 채도, 명도 등 색의 어떤 요소에 의해서도 배경 부분과 문자 부분 사이의 구별이 모호하거나, 문자부분의 형상이 왜곡되어 있다면, 여하한 이진화 방식으로도 배경 부분으로부터 문자 부분을 정확하게 구별해내기 어렵다.

이 명세서에서, 용어 "차지 비율"은 문자 인식 대상 이미지 또는 이미지 영역의 총 면적 중에서 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율을 의미한다.

이 명세서에서, 용어 "라인 수"는 문자 인식 대상 이미지 또는 이미지 영역에 포함된 횡으로 이어지는 문자 부분으로 이루어지는 라인의 수를 의미한다.

이 명세서에서, 용어 "라인 높이"는 문자 인식 대상 이미지 또는 이미지 영역에서 횡으로 이어지는 문자 부분으로 이루어지는 라인의 높이를 의미한다.

이 명세서에서, 용어 "라인 비율"은 문자 인식 대상 이미지 또는 이미지 영역에서 횡으로 이어지는 문자 부분으로 이루어지는 라인이 이미지 또는 이미지 영역의 좌단에서 우단까지의 전장을 점유하는 비율의 평균값을 의미한다.

이 명세서에서, 용어 "매칭 비율"은 카메라의 렌즈에 의해 포착된 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율을 의미한다.

이 명세서에서, 용어 "초점 값"은 카메라의 렌즈의 초점 거리를 특정한 단위로 표시한 값을 의미한다.

이 발명은 위에서 설명한 문자 인식 기술에서 배경 부분으로부터 문자 부분을 구별하는 것의 어려움을 극복하기 위해 가능한 한 고품질 양호한 특성의 문자 인식대상 이미지를 제공하려는 것이다.

위에서 설명한 과제를 해결하기 위한 이 발명의 한 양태에 따르면, 이미지 획득 단계와 이미지 전처리 단계 및 문자 인식 단계를 포함하는 문자 인식 방법을 제공한다. 이 방법에서, 이미지 획득 단계는 카메라에 의해 이미지를 촬상하는 이미지 촬상 단계를 포함하고, 이미지 전처리 단계는 문자 인식 대상 이미지의 품질을 추론하는 이미지 품질 추론 단계 및 추론된 이미지 품질을 이미지 촬상 단계로 피드백 함으로써 이미지를 적합화하는 이미지 적합화 단계를 더 포함한다.

이미지 품질 추론 단계는, 횡으로 이어지는 라인을 이루는 각각의 문자 부분의 높이가 문자 인식에 적합한지 여부를 판단하는 라인 높이 판단 단계, 문자 인식 대상 이미지 영역의 총 면적 중에서 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이 문자 인식에 적합한지 여부를 판단하는 차지 비율 판단 단계, 및 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율이 문자 인식에 적합한지 여부를 판단하는 매칭 비율 판단 단계 중 하나 이상을 포함할 수 있을 것이다. 여기에서, 이미지 품질 추론 단계를 구성하는 서브 단계 (substep), 즉 라인 높이 판단 단계, 차지 비율 판단 단계, 및 매칭 비율 판단 단계를 그 중 하나 이상으로 선택적으로 기재하는 것은, 모든 서브 단계를 포함하는 것이 추론의 정확도를 높일 수 있을지라도, 정보 처리의 신속성 등 다양한 요소를 감안하여 일부의 서브 단계만 수행하도록 구성할 수 있음을 의미한다.

이미지 품질 추론 단계에서는 추론 요소 중 하나 이상이 문자 인식에 적합한지 여부를 판단할 수 있을 것이며, 추론 요소는 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값으로 이루어진 그룹에서 선택된 하나 이상의 추론 요소를 포함할 수 있을 것이다. 여기에서, 이미지 품질 추론 단계를 구성하는 추론 요소, 즉 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값을 그 중 하나 이상으로 선택적으로 기재하는 것은, 모든 추론 요소를 포함하는 것이 추론의 정확도를 높일 수 있을지라도, 정보 처리의 신속성 등 다양한 요소를 감안하여 일부의 추론 요소에 관해서만 수행하도록 구성할 수 있음을 의미한다.

이미지 품질 추론 단계에서는 추론 요소인 라인 높이를 이용하여 촬상할 대상의 문서에 따라서 거리를 가깝게 하거나 멀리하게 하는 안내메시지를 나타나게 하거나 촬상시 카메라의 해상도를 조정하여 문자인식에 적합한 해상도를 선택하여 문자인식 결과의 품질을 높일 수 있을 것이다.

이미지 적합화 단계는, 추론 결과가 문자 인식에 부적합한 것으로 판단될 때는 추론 결과를 이미지 촬상 단계로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 하고, 추론 결과가 문자 인식에 적합한 것으로 판단되면 문자 인식을 위한 전처리 절차를 계속하게 할 수 있을 것이다.

이미지 적합화 단계는, 이미지 품질 추론 단계에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 이미지 촬상 단계에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 할 수 있을 것이다.

이미지 적합화 단계는, 이미지 품질 추론 단계에서 추론된 결과가 문자 인식에 적합한 것으로 판단될 때, 전처리 절차를 계속하기 위해 현재의 프리뷰 이미지를 촬상할 시점을 선택하는 처리 시점 선택 단계를 포함할 수 있을 것이다.

이미지 품질 추론 단계에서 품질을 추론하는 이미지는 이미지 촬상 단계에서 촬상된 이미지일 수 있을 것이다.

이미지 전처리 단계는 이미지 촬상 단계에서 촬상된 이미지에서 문자 부분을 결정하는 문자 부분 결정 단계를 더 포함할 수 있을 것이고, 이미지 품질 추론 단계는 문자 부분 결정 단계에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론할 수 있을 것이다.

이미지 전처리 단계는 이미지 촬상 단계에서 촬상된 이미지의 전처리를 가속화 하는 전처리 가속화 단계를 더 포함할 수 있을 것이고, 문자 부분 결정 단계는 전처리 가속화 단계에서 전처리된 이미지에서 문자 부분을 결정할 수 있을 것이다.

이미지 전처리 단계는 이미지 촬상 단계에서 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하는 인식 영역 선택 단계를 더 포함할 수 있을 것이고, 이미지 품질 추론 단계에서 품질을 추론하는 이미지는 인식 영역 선택 단계에서 선택된 이미지 영역일 수 있을 것이다.

이미지 전처리 단계는 인식 영역 선택 단계에서 선택된 이미지 영역에서 문자 부분을 결정하는 문자 부분 결정 단계를 더 포함할 수 있을 것이고, 이미지 품질 추론 단계는 문자 부분 결정 단계에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론할 수 있을 것이다.

이미지 전처리 단계는 인식 영역 선택 단계에서 선택된 이미지 영역의 전처리를 가속화 하는 전처리 가속화 단계를 더 포함할 수 있을 것이고, 문자 부분 결정 단계는 전처리 가속화 단계에서 전처리된 이미지 영역에서 문자 부분을 결정할 수 있을 것이다. 전처리 가속화는 전처리 단계에서 처리된 이미지 데이터의 크기를 줄이는 것으로 이루어질 수 있을 것이다.

문자 부분 결정 단계는, 선택된 이미지 또는 이미지 영역을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제1 처리 계열, 및 선택된 이미지 또는 이미지 영역의 역상을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제2 처리 계열로 구성될 수 있을 것이고, 제1 처리 계열에서 검출된 문자 부분과 제2 처리 계열에서 검출된 문자 부분을 비교 분석하여 문자 부분을 확정하는 문자 부분 확정 단계를 포함할 수 있을 것이다.

문자 부분 결정 단계는 선택된 이미지 또는 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해낼 수 있을 것이다.

이 발명의 다른 양태에 따르면, 이미지 촬상 수단과 문자 인식 모듈을 포함하는 정보 처리 기기로서, 문자 인식 모듈은 이미지 획득 수단과 이미지 전처리 수단 및 문자 인식 수단을 포함하는 정보 처리 기기가 제공된다. 정보 처리 기기는 예를 들어 스마트폰 등 이동 통신 기기일 수 있으며, 이미지 촬상 수단은 스마트폰 등 이동 통신 기기에 장착된 카메라일 수 있다. 이미지 획득 수단은 이미지 촬상 수단과 작동상 연결되어 문자 인식용 이미지를 촬상하도록 구성되고, 이미지 전처리 수단은 문자 인식 대상 이미지의 품질을 추론하는 이미지 품질 추론 수단 및 추론된 이미지 품질을 이미지 촬상 수단으로 피드백 함으로써 이미지를 적합화하는 이미지 적합화 수단을 더 포함한다.

이미지 품질 추론 수단은, 횡으로 이어지는 라인을 이루는 각각의 문자 부분의 높이가 문자 인식에 적합한지 여부를 판단하는 라인 높이 판단 수단, 문자 인식 대상 이미지 영역의 총 면적 중에서 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이 문자 인식에 적합한지 여부를 판단하는 차지 비율 판단 수단, 및 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율이 문자 인식에 적합한지 여부를 판단하는 매칭 비율 판단 수단 중 하나 이상을 포함할 수 있을 것이다.

이미지 품질 추론 수단은 추론 요소 중 하나 이상이 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값으로 이루어진 그룹에서 선택된 하나 이상의 추론 요소를 포함할 수 있을 것이다.

이미지 품질 추론 수단은 추론 요소가 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 라인 높이를 이용하여 이미지 촬상 수단에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 할 수 있을 것이다.

이미지 적합화 수단은, 추론 결과가 문자 인식에 부적합한 것으로 판단될 때는 추론 결과를 이미지 촬상 수단으로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 하고, 추론 결과가 문자 인식에 적합한 것으로 판단되면 문자 인식을 위한 전처리 절차를 계속하게 할 수 있을 것이다.

이미지 적합화 수단은, 이미지 품질 추론 수단에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 이미지 촬상 수단에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 할 수 있을 것이다.

이미지 적합화 수단은, 이미지 품질 추론 수단에서 추론된 결과가 문자 인식에 적합한 것으로 판단될 때, 전처리 절차를 계속하기 위해 현재의 프리뷰 이미지를 촬상할 시점을 선택하는 처리 시점 선택 수단을 포함할 수 있을 것이다.

이미지 전처리 수단은 이미지 촬상 수단에서 촬상된 이미지에서 문자 부분을 결정하는 문자 부분 결정 수단을 더 포함하고, 이미지 품질 추론 수단은 문자 부분 결정 수단에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론할 수 있을 것이다.

이미지 전처리 수단은 이미지 촬상 수단에서 촬상된 이미지의 전처리를 가속화 하는 전처리 가속화 수단을 더 포함하고, 문자 부분 결정 수단은 전처리 가속화 수단에서 전처리된 이미지에서 문자 부분을 결정할 수 있을 것이다.

이미지 전처리 수단은 이미지 촬상 수단에서 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하는 인식 영역 선택 수단을 더 포함하고, 이미지 품질 추론 수단에서 품질을 추론하는 이미지는 인식 영역 선택 수단에서 선택된 이미지 영역일 수 있을 것이다.

이미지 전처리 수단은 인식 영역 선택 수단에서 선택된 이미지 영역에서 문자 부분을 결정하는 문자 부분 결정 수단을 더 포함하고, 이미지 품질 추론 수단은 문자 부분 결정 수단에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론할 수 있을 것이다.

이미지 전처리 수단은 인식 영역 선택 수단에서 선택된 이미지 영역의 전처리를 가속화 하는 전처리 가속화 수단을 더 포함하고, 문자 부분 결정 수단은 전처리 가속화 수단에서 전처리된 이미지 영역에서 문자 부분을 결정할 수 있을 것이다.

문자 부분 결정 수단은, 선택된 이미지 또는 이미지 영역을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제1 처리 계열, 및 선택된 이미지 또는 이미지 영역의 역상을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제2 처리 계열로 구성되고, 제1 처리 계열에서 검출된 문자 부분과 제1 처리 계열에서 검출된 문자 부분을 비교 분석하여 문자 부분을 확정하는 문자 부분 확정 수단을 포함할 수 있을 것이다.

문자 부분 결정 수단은 선택된 이미지 또는 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해낼 수 있을 것이다.

이 발명의 또다른 양태에 따르면, 이미지 촬상 수단과 문자 인식 모듈을 포함하는 정보 처리 기기에서 실행되어 문자 인식 모듈의 기능의 적어도 일부를 실행하도록 구성된 프로그램이 제공된다. 이 프로그램은 위에서 설명한 문자 인식 방법에 따른 단계를 이용하여 문자 인식 모듈의 기능을 실행하도록 구성된다.

위에서 설명한 수단에 따른 문자 인식 방법을 이용하면, 비교적 고품질 양호한 특성의 문자 인식대상 이미지를 확보함으로써, 배경 부분으로부터 문자 부분을 상당히 정확하게 구별해 낼 수 있고, 문자 인식의 정확성을 매우 높게 보장할 수 있다.

도 1a는 종래기술에 따른 일반적인 문자 인식 방법을 도시하는 블록선도이며,
도 1b는 종래기술에 따른 스마트폰 등 카메라 장착 이동기기에서의 문자 인식 방법을 도시하는 블록선도이고,
도 2a 내지 도 2g는 이 발명에 따른 문자 인식 방법을 적용하기 위한 인식 대상 이미지의 프리뷰 이미지를 예시하며,
도 3는 이 발명의 제1 실시예에 따른 문자 인식 방법을 예시하는 블록선도이고,
도 4는 선택창과 추론 요소가 표시된 프리뷰 이미지를 예시하며,
도 5는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법의 문자 부분 결정 기능 블록을 상세하게 도시하는 블록 선도이고,
도 6은 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법의 이미지 품질 추론 기능 블록을 상세하게 도시하는 블록 선도이며,
도 7a는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법의 이미지 적합화 기능 블록을 한 예를 도시하는 블록 선도이고,
도 7b는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법의 이미지 적합화 기능 블록을 다른 한 예를 도시하는 블록 선도이며,
도 8은 도 3과 유사한 도면으로서 이 발명의 제2 실시예에 따른 문자 인식 방법을 예시하는 블록선도이고,
도 9은 도 8에 도시된 이 발명의 제2 실시예에 따른 문자 인식 방법에서의 전처리 가속화 기능 블록을 도시하는 블록선도이다.

이하에서는, 첨부된 도면에 도시된 이 발명의 양호한 실시예들을 참조하여 이 발명에 대해 상세하게 설명하겠다.

이 발명은 도 1b에 도시된 문자 인식 모듈, 즉 스마트폰 등 카메라 장착 이동기기에서의 문자 인식 모듈에서 더 효율적으로 적용될 수 있다. 그러나, 이 발명이 카메라가 일체로 장착된 기기에서의 문자 인식 모듈에 한정되는 것은 아니며, 도 1a 및 도 1b에 도시된 문자 인식 모듈의 이미지 획득 단계에서 이미지를 촬상하는 카메라에 이미지 품질에 관한 제어 데이터를 피드백 할 수 있다면, 이 발명의 문자 인식 방법을 적용할 수 있다.

도 3에는 이 발명의 제1 실시예에 따른 문자 인식 방법을 구현하기 위한 기능 블록이 처리 순서에 따라 도시되어 있다. 문자 인식을 위한 전체적이고 개괄적인 처리 과정은 도 1a 및 도 1b에 도시된 종래기술에 따른 문자 인식 방법에서와 동일하다. 즉, 이미지 획득 기능 블록(100)에서 문자 인식의 대상이 되는 이미지를 획득하며, 이미지 전처리 기능 블록(200)에서 문자 인식의 전단계로서 문자 인식에 적합한 상태로 이미지를 처리한다. 인식 및 응용 기능 블록(300)은 전처리 된 이미지로부터 문자를 인식하고, 인식된 문자, 숫자 또는 텍스트를 다양한 용도로 활용하는 것을 나타낸다.

이 발명에 따른 방법의 이미지 획득 단계는 도 1a에 도시된 이미지 획득 기능 블록(100)에 의해 구현되며, 이미지 전처리 단계는 이미지 전처리 기능 블록(200)에 의해 구현되고, 문자 인식 단계는 문자 인식 기능 블록(310)에 의해 구현된다. 각 단계의 처리 순서는 도 1a에서 각각의 기능 블록의 연결관계에 의해 나타낸다. 각각의 기능 블록은 하드웨어, 소프트웨어, 펌웨어 또는 그 조합에 의해 구성되는 기능 모듈에 의해 구현될 수 있을 것이다.

이 발명에 따른 방법의 이미지 촬상 단계는 도 1b의 이미지 촬상 기능 블록(110)에 의해 구현되며, 이미지 촬상 기능 블록(110)에서는 통상적으로 컬러 이미지로 촬상한다. 도 2a 내지 도 2g는 스마트폰에 장착된 카메라로 촬상하기 전에 카메라 렌즈에 포착된 피사체의 이미지를 디스플레이에 표시한 프리뷰 이미지(preview image)를 예시한다.

이 발명에 따른 문자 인식 방법에서도, 종래 기술과 마찬가지로, 배경 부분으로부터 문자 부분을 구별해내기 위해 문자 부분을 포함하는 이미지를 이진화 한다. 이미지를 이진화 하는 방식으로는 다양한 기법들이 개발되어 활용되고 있는데, 이 발명은 그러한 이진화 방식을 한정하지 않는다. 즉, 현재까지 개발되어 사용되고 있는 어떤 이진화 방식, 향후 개발될 어떤 이진화 방식과도, 이 발명의 문자 인식 방법은 아무런 문제 없이 호환적으로 적용할 수 있다.

이 발명에 따른 방법의 이미지 전처리 단계는 이미지 전처리 기능 블록(200)에 의해 구현되며, 이미지 품질 추론 단계는 이미지 품질 추론 기능 블록(250)에 의해 구현되고, 이미지 적합화 단계는 이미지 적합화 기능 블록(260)에 의해 구현된다.

이 발명의 제1 실시예에 따른 문자 인식 방법에서는, 도 3에 보이듯이, 이미지 전처리 기능 블록(200)에서, 문자 인식하고자 하는 이미지 영역의 품질을 추론하여 이미지 촬상 단계로 이미지 품질을 피드백 함으로써 이미지를 적합화하는 과정을 추가로 포함한다. 이 과정은 인식 영역 선택 단계, 문자 부분 결정 단계, 이미지 품질 추론 단계 및 이미지 적합화 단계를 포함하며, 도 3에 보이듯이, 인식 영역 선택 기능 블록(220), 문자 부분 결정 기능 블록(240), 이미지 품질 추론 기능 블록(250) 및 이미지 적합화 기능 블록(260)에 의해 구현된다. 인식 영역 선택 기능 블록(220)에서는 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하며, 문자 부분 결정 기능 블록(240)에서는 선택된 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해내고, 이미지 품질 추론 기능 블록(250)에서는, 색상, 채도, 명도를 종합적으로 판단할 때, 선택된 문자 인식 대상 이미지 영역에서의 배경 부분과 문자 부분 사이의 구별이 문자를 인식하기에 적합한지를 추론하고, 이미지 적합화 기능 블록(260)은, 추론 결과가 문자 인식에 부적합한 것으로 판단될 때, 추론 결과를 이미지 촬상 기능 블록(110)으로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 한다.

또한, 이미지 적합화 기능 블록(260)에서는, 추론 결과가 문자 인식에 적합한 것으로 판단되면, 문자 부분 추출 기능 블록(280)으로 가서 문자 인식을 위한 전처리 절차를 계속하게 한다.

문자 부분 추출 기능 블록(280)에서는 이미지 촬상 기능 블록(110)에서 촬상된 이미지로부터 문자 인식 대상 이미지 부분을 추출해낸다. 문자 부분 추출 기능 블록(280)에서 추출해내는 이미지 부분은 문자 부분 결정 기능 블록(240)에서 문자 부분이라고 결정된 이미지 부분에 대응하는 부분을 포함한다.

문자 부분 추출 기능 블록(280)에서 추출된 이미지 부분은 이미지 이진화 기능 블록(290)에서 이진화 된다. 이 발명의 제1 실시예에 따른 문자 인식 방법에서는 이미지 이진화 기능 블록(290)에서 문자 인식 대상 이미지 부분을 이진화 함으로써 문자 인식을 위한 전처리가 완료된다. 그러나, 이 발명에 따른 문자 인식 방법의 전처리가 예시된 절차, 즉 인식 영역 선택 기능 블록(220), 문자 부분 결정 기능 블록(240), 이미지 품질 추론 기능 블록(250) 및 이미지 적합화 기능 블록(260)을 포함하는 절차에만 한정되는 것은 아니며, 각 기능 블록의 전 또는 후에 이루어지는 다른 기능 블록을 포함할 수도 있을 것이다.

문자 인식 기능 블록(310)에서는 전처리된 문자 인식 대상 이미지 부분에서 배경 부분으로부터 문자 부분의 형태를 구별해내고, 구별된 문자 부분의 형태에 대응하는 문자, 숫자 또는 텍스트를 식별해낸다.

도 3에 도시된 인식 영역 선택 기능 블록(220)에서의 문자 인식 대상 이미지 부분의 선택은 도 4에 보이듯이 표시장치 상의 프리뷰 이미지에 겹쳐서 표시되는 선택창(400)에 의해 이루어질 수 있다. 선택창(400)의 안 쪽에 있는 이미지만 문자 인식 대상으로 선택되어 처리되고, 선택창(400)의 바깥 쪽에 있는 이미지는 버려질 것이다. 표시장치 상에 표시된 프리뷰 이미지 전체를 문자 인식 대상으로 선택할 수도 있으며, 그 경우에는 선택창(400)이 표시되지 않을 수도 있을 것이다.

선택창(400)은 렌즈에 의해 포착되어 표시장치에 표시되는 이미지의 특정 영역으로 고정될 수도 있을 것이다. 즉, 렌즈의 특정 영역에 의해 포착되는 이미지를 문자 인식 대상으로 선택하게 구성될 수도 있을 것이다.

이와 대조적으로, 사용자가 렌즈에 의해 선택된 전체 이미지 중 일부를 임의적으로 문자 인식 대상으로 선택하게 구성될 수도 있을 것이다. 이 경우에, 선택창(400)은 렌즈에 의해 포착되어 표시장치에 표시되는 이미지 상에서 사용자의 조작에 따라 이동하면서 선택 영역을 표시하게 구성될 수도 있을 것이다.

도 5는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 문자 부분 결정 기능 블록(240)의 구성의 한 예를 상세하게 도시한다.

도 3에 보이듯이, 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 문자 부분 결정 기능 블록(240)은 인식 영역 선택 기능 블록(220)에서 선택된 문자 인식 대상 이미지 영역을 받아서 시작된다. 선택된 문자 인식 대상 이미지 영역은 다음과 같은 2개의 계열로 처리된다. 제1 계열에서는, 선택된 이미지 영역은 이미지 이진화 기능 블록(241)에서 이진화 되며, 흑점 추출 기능 블록(242)은 이진화 된 이미지 영역에서 흑점들을 추출하고, 문자 부분 검출 기능 블록(243)은 흑점들의 분포 형태로부터 문자 부분을 검출한다. 제2 계열에서는, 선택된 이미지 영역의 역상을 취한 후, 역상 이미지가 역상 이미지 이진화 기능 블록(245)에서 이진화 되며, 흑점 추출 기능 블록(246)은 이진화 된 역상 이미지에서 흑점들을 추출하고, 문자 부분 검출 기능 블록(247)은 흑점들의 분포 형태로부터 문자 부분을 검출한다. 문자 부분 확정 기능 블록(249)에서는 2개의 계열에서 검출된 문자 부분을 비교 분석하여 문자 부분을 확정한다.

이진화 방식에 따라, 제1 계열과 제2 계열에서 검출된 문자 부분, 즉 문자 부분 검출 기능 블록(243)에서 검출된 문자 부분과 문자 부분 검출 기능 블록(247)에서 검출된 문자 부분은, 서로 일치하거나 또는 유사할 수도 있고, 서로 상반되거나 또는 상이할 수도 있을 것이다. 서로 일치하거나 또는 유사한 경우에는, 두 부분의 교집합 부분 또는 합집합 부분을 문자 부분이라고 정할 수 있을 것이고, 서로 상반되거나 또는 상이한 경우에는, 두 부분 중 하나를 취사선택할 수 있을 것이다.

도 6는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 이미지 품질 추론 기능 블록(250)의 구성의 한 예를 상세하게 도시한다.

도 3에 보이듯이, 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 이미지 품질 추론 기능 블록(250)은 문자 부분 결정 기능 블록(240)에서 결정된 결과를 받아서 시작된다. 횡서체로 쓰여진 문자를 인식하는 경우에, 문자 부분 결정 기능 블록(240)에서 결정된 문자 부분은 횡으로 이어지는 라인을 이루게 된다.

도 6에 예시된 예에서는 이미지 품질 추론 기능 블록(250)이 3종의 추론 요소, 즉 라인 높이, 차지 비율, 매칭 비율을 포함하는 그룹으로부터 선택된 추론 요소들을 판단하여 추론한다.

도 4로 돌아가서, 이 발명을 적용한 스마트폰의 디스플레이에 표시되는 예시적 프리뷰 이미지를 살펴보면, 추론 요소(500)들이 예시되어 있다.

예시된 추론 요소는, 차지 비율(Occupied), 라인 수(LineNum), 라인 높이(Ht), 라인 비율(LineOccupy), 매칭 비율(Match), 초점 값(FocusValue) 등이 있다.

라인 높이는 하나의 문자를 이루는 화소의 수에 대략적으로 비례하게 되며, 화소의 수는 문자 인식의 정확성에 직접적인 영향을 미칠 수 있다.

차지 비율은, 인식 영역 선택 기능 블록(220)에서 선택된 문자 인식 대상 이미지 영역의 총 면적 중에서, 횡으로 이어지는 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이다. 차지 비율이 크면 문자 부분과 문자 부분의 간격이 조밀함을 의미하고, 문자 부분과 문자 부분의 간격이 지나치게 조밀하면 문자 인식의 정확성에 영향을 미칠 수 있다. 문자 인식 대상 이미지에서의 문자 부분과 문자 부분의 간격은 문자 인식 대상 피사체에서의 문자 부분과 문자 부분의 간격에 직접적으로 대응하는 것이지만, 이미지가 흐려지면 문자 부분과 배경 부분의 콘트라스트가 약해지면서 문자 부분 결정 기능 블록(240)에서 문자 부분이라고 결정되는 부분이 확대될 수 있다.

매칭 비율은, 카메라의 셔터 속도에 따라 렌즈를 통해 포착되는 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 비율이다. 프리뷰 이미지 사이의 매칭 비율이 크면, 촬상 이미지가 흐려지면서 문자 부분과 배경 부분의 콘트라스트가 약해지고 문자 인식의 정확성에 영향을 미칠 수 있다.

이 발명에 따른 문자 인식 방법에서는, 도 4에 예시된 추론 요소, 즉 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값을 포함하는 그룹에서 선택된 추론 요소들을 고려할 수 있을 것이다.

도 2a 내지 도 2g를 보면, 도 4에 예시된 추론 요소(500)들이 다양하게 변하는 프리뷰들이 도시되어 있다.

다음의 표 1은 도 2a 내지 도 2g에 표시된 추론 요소(500)들의 값을 나타낸다.

구분	차지 비율	라인 수	라인 높이	라인 비율	매칭 비율	초점 값
도 2a	32	3	25	98	48	24188
도 2b	28	3	27	82	77	21010
도 2c	63	6	25	95	92	25484
도 2d	68	6	25	97	91	19302
도 2e	65	6	30	100	83	17261
도 2f	65	8	18	99	85	25826
도 2g	48	10	10	99	85	16941

라인 높이 판단 기능 블록(254)은 라인 높이, 즉 횡으로 이어지는 라인을 이루는 각각의 문자 부분의 높이가 문자 인식에 적합한지 여부를 판단한다.

차지 비율 판단 기능 블록(256)은, 문자 인식 대상 이미지 영역의 총 면적 중에서, 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이 문자 인식에 적합한지 여부를 판단한다.

매칭 비율 판단 기능 블록(258)은, 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율이 문자 인식에 적합한지 여부를 판단한다.

도 7a는 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 이미지 적합화 기능 블록(260)의 구성의 한 예를 상세하게 도시한다.

도 3에 보이듯이, 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 이미지 적합화 기능 블록(260)은 이미지 품질 추론 기능 블록(250)에서 추론된 결과를 받아서 시작된다.

도 7a에 예시된 예에서는 이미지 적합화 기능 블록(260)이 3종의 적합화 방식, 즉 처리 시점 선택, 촬상 거리 조정, 해상도 조정을 이용하여 적합화한다.

이미지 품질 추론 기능 블록(250)에서 추론된 결과가 이미지 품질이 문자 인식에 적합한 것을 나타내면, 처리 시점 선택 기능 블록(262)은 현재의 프리뷰 이미지를 촬상하고 문자 부분 추출 기능 블록(280)으로 가서 문자 인식을 위한 전처리 절차를 계속하게 한다. 다른 추론 요소들이 모두 적합함을 나타낼 때, 처리 시점 선택 기능 블록(262)은 매칭 비율 판단 기능 블록(258)에서의 매칭 비율이 적합한 시점에서 이미지를 촬상하도록 구성될 수도 있을 것이다.

이미지 품질 추론 기능 블록(250)에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 촬상 거리 조정 기능 블록(262)이 사용자에게 촬상 거리 조정 메시지를 표시해 줄 수 있을 것이다. 메시지는 "더 가까이" 또는 "더 멀리" 등일 수 있으며, 그 표시 방식은 청각적 방식 또는 시각적 방식일 수 있을 것이다. 촬상 거리 조정 방식은 피사체와 카메라의 실제 거리를 변경하는 것일 수도 있고, 렌즈에 의한 주밍(zooming) 방식일 수도 있을 것이다.

이미지 품질 추론 기능 블록(250)에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 해상도 조정 기능 블록(262)이 문자 인식 대상 이미지의 해상도를 조정할 수 있다. 해상도 조정 방식은 디지털 카메라의 촬상 해상도 설정을 변경함으로써 이루어질 수 있다. 해상도가 낮으면 문자 당 요구 화소 수에 미달하여 문자 인식 정확성이 떨어질 것이며, 해상도가 너무 높으면, 이미지 처리 속도 및 그로 인한 문자 인식 속도가 느려질 수 있을 것이다. 해상도 설정 변경은 일시적으로 자동으로 이루어지게 구성될 수도 있을 것이다.

도 7b는 도 7a와 유사한 도면으로서, 도 3에 도시된 이 발명의 제1 실시예에 따른 문자 인식 방법에서의 이미지 적합화 기능 블록(260)의 구성의 다른 한 예를 도시한다.

도 7b에 도시된 예에서는, 이미지 적합화 기능 블록(260)이 처리 신호 발생 기능 블록(268)을 추가로 포함한다.

이미지 품질 추론 기능 블록(250)에서 추론된 결과가 이미지 품질이 문자 인식에 적합한 것을 나타내고, 처리 시점 선택 기능 블록(262)이 현재의 프리뷰 이미지를 촬상하고 문자 부분 추출 기능 블록(280)으로 가서 문자 인식을 위한 전처리 절차를 계속할 것을 선택하면, 처리 신호 발생 기능 블록(268)은 사용자에게 문자 인식 처리가 이루어진다는 신호를 표시한다. 처리 신호 발생은 시각적 방식 또는 청각적 방식으로 이루어질 수 있을 것이다.

도 8는 도 3와 유사한 도면으로서, 이 발명의 제2 실시예에 따른 문자 인식 방법을 구현하기 위한 기능 블록을 도시한다. 도 8에 보이듯이, 제2 실시예에 따른 문자 인식 방법은, 인식 영역 선택 기능 블록(220)의 후, 문자 부분 결정 기능 블록(240)의 전에, 전처리 가속화 기능 블록(230)을 추가로 포함하는 것을 제외하고는, 제2 실시예에 따른 문자 인식 방법과 동일하다. 그러므로, 제2 실시예의 설명에서는 제1 실시예에서와 동일한 기능 블록에 관한 중복적인 설명을 생략한다.

제1 실시예에서 설명한 바와 같이, 표시장치 상에 표시된 프리뷰 이미지 전체를 문자 인식 대상으로 선택할 수도 있으며, 그 경우에는 선택창(400)이 표시되지 않을 수 있을 것이며, 인식 영역 선택 기능 블록(220)이 생략될 수도 있을 것이므로, 그러한 경우에, 전처리 가속화 기능 블록(230)은 이미지 촬상 기능 블록(110)에서 촬상된 이미지를 바로 받아서 시작될 수 있을 것이다.

도 9은 전처리 가속화 기능 블록(230)의 상세한 구성을 도시한다. 도 9에 도시된 바와 같이, 전처리 가속화 기능 블록(230)은 이미지 축소 기능 블록(222), 이미지 체크 기능 블록(224) 및 이미지 향상 기능 블록(226)을 포함할 수 있을 것이다.

이미지 전처리에서, 문자 인식하고자 하는 이미지 영역의 품질을 추론하여 이미지 촬상 단계로 이미지 품질을 피드백 하는 과정은 1회의 문자 인식에서 수회 반복될 수 있으며, 그 처리 과정은 상당한 시간을 요구할 수 있을 것이다. 처리 이미지가 고해상도 대형 파일인 경우에는 요구시간이 길어질 것이며, 해상도와 파일 크기를 줄이면 요구시간이 단축될 것이다.

그러므로, 이미지 축소 기능 블록(222)은 문자 인식 대상 이미지의 해상도 및 파일 크기를 축소한다.

한편, 문자 인식 대상 이미지, 특히 문자 부분의 이미지가 기울어진 경우에는 문자 부분과 배경 부분의 식별이 부정확해질 수 있으며, 파일 크기가 축소된 저해상도 이미지에서는 부정확성이 더 심해질 수 있다.

그러므로, 이미지 체크 기능 블록(224)에서 이미지의 기울기를 검출하여 보정함으로써 문자 부분과 배경 부분의 식별이 좀더 정확해질 수 있을 것이다. 기울기 검출 및 보정은 기존의 이미지 처리 기술에서 이용되는 기울기 검출 및 보정 방식을 이용할 수 있을 것이다.

이미지의 치밀도가 낮은 경우, 특히 이진화 이미지의 문자 부분에서 백점(white pixel)이 많으면, 문자 부분과 배경 부분의 식별이 부정확해질 수 있으며, 파일 크기가 축소된 저해상도 이미지에서는 부정확성이 더 심해질 수 있다.

그러므로, 이미지 향상 기능 블록(226)은 이미지 축소 기능 블록(222)에서의 이미지 축소로 인한, 또는 다른 이유로 인한 문자 부분의 백화를 저감시키도록 이미지를 향상시킴으로써, 문자 부분과 배경 부분의 식별이 좀더 정확해질 수 있을 것이다.

설명한 바와 같이, 전처리 가속화 기능 블록(230)에서는 전처리 단계에서 처리된 이미지 데이터의 크기를 줄임으로써, 전처리가 가속화 될 수 있으며, 데이터 크키를 줄이기 위해 이미지의 해상도를 줄여도 이미지 향상을 통해 문자 부분과 배경 부분의 식별을 정확하게 할 수 있다.

도면에 예시된 양호한 실시예에 의해 이 발명의 구성을 설명하였지만, 이 발명이 그러한 실시예에 의해 한정될 것을 의도하는 것은 아니다. 위에서 설명된 실시예는 단지 예시적인 것이며, 이 발명의 기술 사상을 벗어나지 않은 다양한 변화 및 수정이 가능할 것임이 이 기술분야의 숙련자에게 자명할 것이다. 이 발명의 보호범위는 첨부된 특허청구의 범위에 의해서만 정해질 것이며, 특허청구의 범위는 이 발명의 기술 사상을 벗어나지 않은 다양한 변화 및 수정을 망라할 것을 의도한다.

Claims

이미지 획득 단계와 이미지 전처리 단계 및 문자 인식 단계를 포함하는 문자 인식 방법으로서, 상기 이미지 획득 단계는 카메라에 의해 이미지를 촬상하는 이미지 촬상 단계를 포함하고, 상기 이미지 전처리 단계는 문자 인식 대상 이미지의 품질을 추론하는 이미지 품질 추론 단계 및 추론된 이미지 품질을 상기 이미지 촬상 단계로 피드백 함으로써 이미지를 적합화하는 이미지 적합화 단계를 더 포함하는, 문자 인식 방법.
제1항에 있어서,
상기 이미지 품질 추론 단계는, 횡으로 이어지는 라인을 이루는 각각의 문자 부분의 높이가 문자 인식에 적합한지 여부를 판단하는 라인 높이 판단 단계, 문자 인식 대상 이미지 영역의 총 면적 중에서 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이 문자 인식에 적합한지 여부를 판단하는 차지 비율 판단 단계, 및 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율이 문자 인식에 적합한지 여부를 판단하는 매칭 비율 판단 단계 중 하나 이상을 포함하는, 문자 인식 방법.
제1항에 있어서,
상기 이미지 품질 추론 단계에서는 추론 요소 중 하나 이상이 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값으로 이루어진 그룹에서 선택된 하나 이상의 추론 요소를 포함하는, 문자 인식 방법.
제1항에 있어서,
상기 이미지 품질 추론 단계에서는 추론 요소가 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 라인 높이를 이용하여 이미지 촬상 단계에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 하는, 문자 인식 방법.
제3항에 있어서,
상기 이미지 적합화 단계는, 추론 결과가 문자 인식에 부적합한 것으로 판단될 때는 추론 결과를 이미지 촬상 단계로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 하고, 추론 결과가 문자 인식에 적합한 것으로 판단되면 문자 인식을 위한 전처리 절차를 계속하게 하는, 문자 인식 방법.
제5항에 있어서,
상기 이미지 적합화 단계는, 상기 이미지 품질 추론 단계에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 상기 이미지 촬상 단계에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 하는, 문자 인식 방법.
제6항에 있어서,
상기 이미지 적합화 단계는, 상기 이미지 품질 추론 단계에서 추론된 결과가 문자 인식에 적합한 것으로 판단될 때, 전처리 절차를 계속하기 위해 현재의 프리뷰 이미지를 촬상할 시점을 선택하는 처리 시점 선택 단계를 포함하는, 문자 인식 방법.
제1항 내지 제7항 중 어느 한 항에 있어서,
상기 이미지 품질 추론 단계에서 품질을 추론하는 이미지는 상기 이미지 촬상 단계에서 촬상된 이미지인, 문자 인식 방법.
제8항에 있어서,
상기 이미지 전처리 단계는 상기 이미지 촬상 단계에서 촬상된 이미지에서 문자 부분을 결정하는 문자 부분 결정 단계를 더 포함하고, 상기 이미지 품질 추론 단계는 상기 문자 부분 결정 단계에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론하는, 문자 인식 방법.
제9항에 있어서,
상기 이미지 전처리 단계는 상기 이미지 촬상 단계에서 촬상된 이미지의 전처리를 가속화 하는 전처리 가속화 단계를 더 포함하고, 상기 문자 부분 결정 단계는 상기 전처리 가속화 단계에서 전처리된 이미지에서 문자 부분을 결정하는, 문자 인식 방법.
제1항 내지 제7항 중 어느 한 항에 있어서,
상기 이미지 전처리 단계는 상기 이미지 촬상 단계에서 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하는 인식 영역 선택 단계를 더 포함하고, 상기 이미지 품질 추론 단계에서 품질을 추론하는 이미지는 상기 인식 영역 선택 단계에서 선택된 이미지 영역인, 문자 인식 방법.
제11항에 있어서,
상기 이미지 전처리 단계는 상기 인식 영역 선택 단계에서 선택된 이미지 영역에서 문자 부분을 결정하는 문자 부분 결정 단계를 더 포함하고, 상기 이미지 품질 추론 단계는 상기 문자 부분 결정 단계에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론하는, 문자 인식 방법.
제12항에 있어서,
상기 이미지 전처리 단계는 상기 인식 영역 선택 단계에서 선택된 이미지 영역의 전처리를 가속화 하는 전처리 가속화 단계를 더 포함하고, 상기 문자 부분 결정 단계는 전처리 가속화 단계에서 전처리된 이미지 영역에서 문자 부분을 결정하는, 문자 인식 방법.
제13항에 있어서,
상기 문자 부분 결정 단계는, 선택된 이미지 또는 이미지 영역을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제1 처리 계열, 및 선택된 이미지 또는 이미지 영역의 역상을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제2 처리 계열로 구성되고, 제1 처리 계열에서 검출된 문자 부분과 제1 처리 계열에서 검출된 문자 부분을 비교 분석하여 문자 부분을 확정하는 문자 부분 확정 단계를 포함하는, 문자 인식 방법.
제14항에 있어서,
상기 문자 부분 결정 단계는 선택된 이미지 또는 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해내는, 문자 인식 방법.
이미지 촬상 수단과 문자 인식 모듈을 포함하는 정보 처리 기기로서, 상기 문자 인식 모듈은 이미지 획득 수단과 이미지 전처리 수단 및 문자 인식 수단을 포함하는 정보 처리 기기에 있어서, 상기 이미지 획득 수단은 상기 이미지 촬상 수단과 작동상 연결되어 문자 인식용 이미지를 촬상하도록 구성되고, 상기 이미지 전처리 수단은 문자 인식 대상 이미지의 품질을 추론하는 이미지 품질 추론 수단 및 추론된 이미지 품질을 상기 이미지 촬상 수단으로 피드백 함으로써 이미지를 적합화하는 이미지 적합화 수단을 더 포함하는, 정보 처리 기기.
제16항에 있어서,
상기 이미지 품질 추론 수단은, 횡으로 이어지는 라인을 이루는 각각의 문자 부분의 높이가 문자 인식에 적합한지 여부를 판단하는 라인 높이 판단 수단, 문자 인식 대상 이미지 영역의 총 면적 중에서 라인을 이루는 문자 부분의 면적의 합이 차지하는 비율이 문자 인식에 적합한지 여부를 판단하는 차지 비율 판단 수단, 및 현재의 프리뷰 이미지와 직전의 프리뷰 이미지 사이의 매칭 비율이 문자 인식에 적합한지 여부를 판단하는 매칭 비율 판단 수단 중 하나 이상을 포함하는, 정보 처리 기기.
제16항에 있어서,
상기 이미지 품질 추론 수단은 추론 요소 중 하나 이상이 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 차지 비율, 라인 수, 라인 높이, 라인 비율, 매칭 비율, 초점 값으로 이루어진 그룹에서 선택된 하나 이상의 추론 요소를 포함하는, 정보 처리 기기.
제16항에 있어서,
상기 이미지 품질 추론 수단은 추론 요소가 문자 인식에 적합한지 여부를 판단하며, 추론 요소는 라인 높이를 이용하여 이미지 촬상 수단에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 하는, 정보 처리 기기.
제18항에 있어서,
상기 이미지 적합화 수단은, 추론 결과가 문자 인식에 부적합한 것으로 판단될 때는 추론 결과를 이미지 촬상 수단으로 피드백하여 이미지 품질 또는 특성을 적절하게 수정하게 하고, 추론 결과가 문자 인식에 적합한 것으로 판단되면 문자 인식을 위한 전처리 절차를 계속하게 하는, 정보 처리 기기.
제20항에 있어서,
상기 이미지 적합화 수단은, 상기 이미지 품질 추론 수단에서 추론된 결과가 이미지 품질이 문자 인식에 적합하지 않은 것을 나타내면, 상기 이미지 촬상 수단에서 촬상 거리를 조정하거나 또는 이미지의 해상도를 조정하게 하는, 정보 처리 기기.
제21항에 있어서,
상기 이미지 적합화 수단은, 상기 이미지 품질 추론 수단에서 추론된 결과가 문자 인식에 적합한 것으로 판단될 때, 전처리 절차를 계속하기 위해 현재의 프리뷰 이미지를 촬상할 시점을 선택하는 처리 시점 선택 수단을 포함하는, 정보 처리 기기.
제16항 내지 제22항 중 어느 한 항에 있어서,
상기 이미지 전처리 수단은 상기 이미지 촬상 수단에서 촬상된 이미지에서 문자 부분을 결정하는 문자 부분 결정 수단을 더 포함하고, 상기 이미지 품질 추론 수단은 상기 문자 부분 결정 수단에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론하는, 정보 처리 기기.
제23항에 있어서,
상기 이미지 전처리 수단은 상기 이미지 촬상 수단에서 촬상된 이미지의 전처리를 가속화 하는 전처리 가속화 수단을 더 포함하고, 상기 문자 부분 결정 수단은 상기 전처리 가속화 수단에서 전처리된 이미지에서 문자 부분을 결정하는, 정보 처리 기기.
제16항 내지 제22항 중 어느 한 항에 있어서,
상기 이미지 전처리 수단은 상기 이미지 촬상 수단에서 촬상된 이미지로부터 문자 인식 대상 이미지 영역을 선택하는 인식 영역 선택 수단을 더 포함하고, 상기 이미지 품질 추론 수단에서 품질을 추론하는 이미지는 상기 인식 영역 선택 수단에서 선택된 이미지 영역인, 정보 처리 기기.
제25항에 있어서,
상기 이미지 전처리 수단은 상기 인식 영역 선택 수단에서 선택된 이미지 영역에서 문자 부분을 결정하는 문자 부분 결정 수단을 더 포함하고, 상기 이미지 품질 추론 수단은 상기 문자 부분 결정 수단에서 문자 부분이라고 결정된 부분을 포함하는 이미지 영역의 특성을 판단하여 품질을 추론하는, 정보 처리 기기.
제26항에 있어서,
상기 이미지 전처리 수단은 상기 인식 영역 선택 수단에서 선택된 이미지 영역의 전처리를 가속화 하는 전처리 가속화 수단을 더 포함하고, 상기 문자 부분 결정 수단은 전처리 가속화 수단에서 전처리된 이미지 영역에서 문자 부분을 결정하는, 정보 처리 기기.
제27항에 있어서,
상기 문자 부분 결정 수단은, 선택된 이미지 또는 이미지 영역을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제1 처리 계열, 및 선택된 이미지 또는 이미지 영역의 역상을 이진화 하여 추출된 흑점들의 분포 형태로부터 문자 부분을 검출하는 제2 처리 계열로 구성되고, 제1 처리 계열에서 검출된 문자 부분과 제1 처리 계열에서 검출된 문자 부분을 비교 분석하여 문자 부분을 확정하는 문자 부분 확정 수단을 포함하는, 정보 처리 기기.
제28항에 있어서,
상기 문자 부분 결정 수단은 선택된 이미지 또는 이미지 영역 중 어떤 부분이 문자 부분이고 어떤 부분이 배경 부분인지를 식별해내는, 정보 처리 기기.
이미지 촬상 수단과 문자 인식 모듈을 포함하는 정보 처리 기기에서 실행되어 상기 문자 인식 모듈의 기능의 적어도 일부를 실행하도록 구성된 프로그램으로서, 제1항 내지 제15항 중 어느 한 항에 따른 단계를 이용하여 상기 문자 인식 모듈의 기능을 실행하도록 구성된 프로그램.