KR20180019976A

KR20180019976A - 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체

Info

Publication number: KR20180019976A
Application number: KR1020160104342A
Authority: KR
Inventors: 이해기; 공정탁; 이창형; 이호근
Original assignee: 에스프린팅솔루션 주식회사
Priority date: 2016-08-17
Filing date: 2016-08-17
Publication date: 2018-02-27
Also published as: WO2018034414A1; EP3487159B1; CN109845237B; EP3487159A4; US20190180415A1; EP3487159A1; CN109845237A; US11295415B2

Abstract

화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체가 제공된다. 본 개시의 일 실시 예에 따른 화상 형성 장치는 원고를 스캔하여 스캔 이미지를 생성하는 스캔부 및 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 결정된 기준점을 중심으로 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서를 포함할 수 있다.

Description

화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체{IMAGE FORMING APPARATUS, SCAN IMAGE CORRECTION METHOD OF THEREOF AND NON-TRANSITORY COMPUTER READABLE MEDIUM}

본 개시는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체에 관한 것으로, 더욱 구체적으로는, 스캔시 발생할 수 있는 화질 열화를 개선할 수 있는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체에 관한 것이다.

화상 형성 장치나 스캐너 등이 대중적으로 보급됨에 따라, 원고를 스캔하거나 복사하는 경우, 사용자가 원하는 형태의 스캔 이미지로 보정하는 기술에 대한 필요성이 증가하고 있다.

종래에도 스캔 이미지의 틀어짐을 보정하는 여러 방법이 제시되었으나, 원고의 경계를 검출하기 어려운 경우에는 틀어짐 보정을 정확히 할 수 없다는 문제점이 존재하였다. 또한, 문서의 내용을 전부 분석하는 경우에는 복잡도가 과도하게 높아지는 문제점이 존재하였다. 그리고, 틀어짐 보정에 의해 원고의 내용이 잘려나가는 문제점 또한 존재하였다.

그리고, 언어별 특징이나 문단의 형태에 따라 문서의 방향이 다르게 판단될 수 있는 문제점이 존재한다. 또한, 책과 같은 두꺼운 원고를 스캔하는 경우에 스캔 이미지에서 경계를 추출하는 기술이 존재하지 않아, 책의 내용이 잘려나가는 문제점 역시 존재한다.

본 개시는 상술한 문제점을 해결하기 위한 것으로, 스캔 이미지의 틀어짐을 보정하고, 문서 방향을 조정하며, 원고의 외곽 경계면을 보정할 수 있는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체를 제공함을 목적으로 한다.

상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 화상 형성 장치는, 원고를 스캔하여 스캔 이미지를 생성하는 스캔부 및 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서를 포함할 수 있다.

그리고, 상기 프로세서는, 상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하고, 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

또한, 상기 프로세서는, 상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

그리고, 상기 프로세서는, 상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출할 수 있다.

또한, 화면을 표시하고 사용자 입력을 수신하는 입출력부를 더 포함하고, 상기 프로세서는, 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 상기 입출력부를 제어하고, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

그리고, 상기 복수의 방법은, 상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함할 수 있다.

또한, 상기 스캔 이미지는 복수의 컨텐츠를 포함하고, 상기 프로세서는, 상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하고, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하며, 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정할 수 있다.

그리고, 상기 프로세서는, 상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하고, 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 배열 방향을 판단할 수 있다.

또한, 상기 프로세서는, 기설정된 텍스트 크기를 갖는 텍스트 영역을 검출할 수 있다.

그리고, 상기 프로세서는, 상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 배열 방향으로 회전시킬 수 있다.

한편, 상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 화상 형성 장치의 스캔 이미지 보정 방법은, 원고를 스캔하여 스캔 이미지를 생성하는 단계, 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계 및 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계를 포함할 수 있다.

그리고, 상기 틀어짐 각도를 검출하는 단계는, 상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하는 단계 및 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계를 포함할 수 있다.

또한, 상기 틀어짐 각도를 검출하는 단계는, 상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계를 더 포함할 수 있다.

그리고, 상기 틀어짐 각도를 검출하는 단계는, 상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출할 수 있다.

또한, 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하는 단계를 더 포함하고, 상기 틀어짐 각도를 검출하는 단계는, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

또한, 상기 스캔 이미지는 복수의 컨텐츠를 포함하고, 상기 기준점을 결정하는 단계는, 상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하는 단계, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하는 단계 및 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정하는 단계를 포함할 수 있다.

그리고, 상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하는 단계 및 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 배열 방향을 판단하는 단계를 더 포함할 수 있다.

또한, 상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하는 단계 및 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 배열 방향으로 회전시키는 단계를 더 포함할 수 있다.

한편, 상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 비일시적 컴퓨터 판독가능 기록매체는, 원고를 스캔하여 스캔 이미지를 생성하는 단계, 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계 및 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계를 포함하는 화상 형성 장치의 스캔 이미지 보정 방법을 실행하기 위한 프로그램을 포함할 수 있다.

이상과 같은 본 개시의 다양한 실시 예에 따르면, 컨텐츠 내용의 손실 없이 스캔 이미지의 틀어짐 보정이 가능하고, 문서 방향에 대한 보정 및 원고의 외곽 경계에 대한 보정이 가능하다.

도 1은 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성을 설명하기 위한 개략적인 블럭도,
도 2는 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성을 상세히 설명하기 위한 블럭도,
도 3은 원고의 경계를 검출하여 틀어짐 각도를 검출할 수 있는 경우를 도시한 도면,
도 4는 원고의 경계를 검출할 수 없는 경우를 도시한 도면,
도 5a 내지 도 5b는 틀어짐 각도를 보정하기 위한 회전 기준점을 결정하는 것을 설명하기 위한 도면,
도 6은 복수의 컨텐츠가 존재하는 경우 회전 기준점을 결정하는 것을 설명하기 위한 도면,
도 7a 내지 도 7c는 스캔 이미지의 방향을 결정하는 것을 설명하기 위한 도면,
도 8 내지 도 11은 본 개시의 다양한 실시 예에 따른 스캔 이미지 보정 방법을 설명하기 위한 흐름도, 그리고,
도 12a 내지 도 12b는 원고의 경계선이 검출되지 않은 경우의 보정 방법을 설명하기 위한 도면이다.

이하에서는 본 개시의 바람직한 실시 예가 첨부된 도면을 참조하여 상세히 설명한다. 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 개시에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되지는 않는다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 항목들의 조합 또는 복수의 관련된 항목들 중의 어느 하나의 항목을 포함한다.

본 명세서에서 사용한 용어는 실시예를 설명하기 위해 사용된 것으로, 본 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 숫자, 동작, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 동작, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

본 명세서에서 “화상 형성 작업(image forming job)”이란 화상의 형성 또는 화상 파일의 생성/저장/전송 등과 같이 화상과 관련된 다양한 작업들(e.g. 인쇄, 스캔 또는 팩스)을 의미할 수 있으며, “작업(job)”이란 화상 형성 작업을 의미할 뿐 아니라, 화상 형성 작업의 수행을 위해서 필요한 일련의 프로세스들을 모두 포함하는 의미일 수 있다.

또한, “화상 형성 장치”란 컴퓨터와 같은 단말장치에서 생성된 인쇄 데이터를 기록 용지에 인쇄하는 장치를 말한다. 이러한 화상 형성 장치의 예로는 복사기, 스캐너, 프린터, 팩스밀리 또는 이들의 기능을 하나의 장치를 통해 복합적으로 구현하는 복합기(multi-function printer, MFP )등을 들 수 있다.

또한, “하드 카피(hard copy)”란 종이 등과 같은 인쇄 매체에 화상을 출력하는 동작을 의미한다.

또한, “컨텐츠”란 사진, 이미지 또는 문서 파일 등과 같이 화상 형성 작업의 대상이 되는 모든 종류의 데이터를 의미할 수 있다.

또한, “인쇄 데이터”란 프린터에서 인쇄 가능한 포맷으로 변환된 데이터를 의미할 수 있다. 한편, 프린터가 다이렉트 프린팅을 지원한다면, 파일 그 자체가 인쇄 데이터가 될 수 있다.

또한, “스캔 파일”이란 스캐너에서 화상을 스캔하여 생성한 파일을 의미할 수 있다.

또한, “사용자”란 화상 형성 장치를 이용하여, 또는 화상 형성 장치와 유무선으로 연결된 디바이스를 이용하여 화상 형성 작업과 관련된 조작을 수행하는 사람을 의미할 수 있다. 또한, “관리자”란 화상 형성 장치의 모든 기능 및 시스템에 접근할 수 있는 권한을 갖는 사람을 의미할 수 있다. “관리자”와 “사용자”는 동일한 사람일 수도 있다.

도 1은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 구성을 설명하기 위한 개략적인 블럭도이다. 도 1을 참조하면 화상 형성 장치(100)는 스캔부(110) 및 프로세서(120)를 포함할 수 있다. 또한, 도시되지는 않았으나, 화상 형성 장치(100)는 각 구성들에 전원을 공급하기 위한 전원부를 더 포함할 수도 있다.

스캔부(110)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다. 스캔부(110)는 원고에 광을 조사하고, 반사되는 광을 수광하여 원고에 기록된 화상을 읽어들일 수 있다. 원고로부터 화상을 읽어들이는 이미지 센서로서, 예를 들어 CCD (Charge Coupled Device), CIS(contact type image sensor) 등이 채용될 수 있다. 스캔부(110)는 원고가 고정된 위치에 위치되고, 이미지 센서가 이동되면서 화상을 읽어들이는 플랫베드(flatbed) 구조, 이미지 센서가 고정된 위치에 위치되고 원고가 이송되는 원고이송(document feed) 구조, 그리고 이들의 복합 구조를 가질 수 있다.

프로세서(120)는 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출할 수 있다. 그리고, 스캔 이미지 내의 컨텐츠의 위치를 기초로, 프로세서(120)는 스캔 이미지를 스캔할 기준점을 결정할 수 있다. 결정된 기준점을 중심으로 스캔 이미지를 회전시킴으로써, 프로세서(120)는 틀어짐 각도를 보정할 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 생성된 스캔 이미지로부터 원고의 경계를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 원고의 경계를 기초로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

본 개시의 일 실시 예에 따르면, 원고의 손상 등으로 인하여 원고의 경계를 검출할 수 없는 경우에, 프로세서(120)는 스캔 이미지 내의 컨텐츠를 검출할 수 있다. 그리고, 검출된 컨텐츠의 기울기를 기초로, 프로세서(120)는 스캔 이미지의 틀어짐 각도를 검출할 수 있다. 예를 들어, 프로세서(120)는 스캔 이미지에 포함된 문자열의 기울기, 도표에 포함된 선의 기울기, 사진과 같은 영상의 에지 기울기로부터 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 검출된 틀어짐 각도를 보정하기 위하여 스캔 이미지를 회전시킬 수 있다. 스캔 이미지를 회전시킬 때, 프로세서(120)는 컨텐츠의 위치를 기초로 회전의 중심점이 되는 기준점을 결정할 수 있다. 만일 스캔 이미지 내에서 복수의 컨텐츠가 검출되면, 프로세서(120)는 검출된 복수의 컨텐츠 각각의 크기에 따라 가중치를 부여하여 기준점을 결정할 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 스캔 이미지의 방향과 컨텐츠의 배열 방향이 일치되지 않는 경우, 컨텐츠의 배열 방향으로 스캔 이미지를 회전시킬 수 있다. 이를 통해, 스캔 이미지의 가독성이 향상될 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 원고의 정확한 경계 면을 검출하여 최종 스캔/인쇄 결과물의 외곽이 훼손되지 않도록 할 수 있다.

한편, 이상에서는 화상 형성 장치(100)를 구성하는 간단한 구성에 대해서만 도시하고 설명하였지만, 구현시에는 다양한 구성이 추가로 구비될 수 있다. 이에 대해서는 도 2를 참조하여 이하에서 설명한다.

도 2는 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성(100)을 상세히 설명하기 위한 블럭도이다. 도 2를 참조하면, 화상 형성 장치(100)는 스캔부(110), 프로세서(120), 화상 형성부(130), 입출력부(140), 통신부(150) 및 메모리(160)를 포함할 수 있다. 스캔부(110)에 대한 설명은 생략하기로 한다.

프로세서(120)는 화상 형성 장치(100)의 전체적인 동작을 제어하며, CPU, ASIC, SoC 등과 같은 프로세서, 메모리, 롬 등을 포함할 수 있다. 프로세서(120)는 입출력부(140)를 통해 수신한 사용자 입력에 대응되는 동작을 수행하도록 화상 형성 장치(100)에 포함된 다른 구성들을 제어할 수 있다.

프로세서(120)의 구체적인 동작에 대해서는 이하에서 도면을 참조하여 상세히 설명하기로 한다.

화상 형성부(130)는 보정된 스캔 이미지를 인쇄할 수 있다. 화상 형성부(130)는 전자 사진 방식, 잉크젯 방식, 열전사 방식 및 감열 방식 등 다양한 인쇄 방식에 의하여 기록매체에 화상을 형성할 수 있다.

예를 들어, 화상 형성부(130)는 노광, 현상, 전사 및 정착 과정을 포함하는 일련의 프로세스에 의하여 기록매체에 화상을 형성할 수 있다.

입출력부(140)는 사용자로부터 화상 형성 작업의 수행을 위한 입력 등을 수신하기 위한 입력부와, 화상 형성 작업의 수행 결과 또는 화상 형성 장치(100)의 상태 등의 정보를 표시하기 위한 디스플레이를 포함할 수 있다. 예를 들어, 입출력부(140)는 사용자 입력을 수신하는 조작 패널(operation panel) 및 화면을 표시하는 디스플레이 패널(display panel) 등을 포함할 수 있다.

구체적으로, 입력부는, 예를 들어, 키보드, 물리 버튼, 터치 스크린, 카메라 또는 마이크 등과 같이 다양한 형태의 사용자 입력을 수신할 수 있는 장치들을 포함할 수 있다. 다만, 이에 한정되지 않고 입출력부(140)는 다양한 입출력을 지원하는 장치를 포함할 수 있다.

예를 들어, 프로세서(120)는 사용자가 틀어짐 각도를 검출하는 방법을 설정할 수 있는 UI를 표시하도록 입출력부(140)를 제어할 수 있다. 그리고, UI를 통해 수신된 사용자 입력에 대응하여, 프로세서(120)는 선택된 방법으로 틀어짐 각도를 검출할 수 있다.

다른 예로, 프로세서(120)는 사용자가 스캔 이미지를 회전시킬 기준점을 설정할 수 있는 UI를 표시할 수도 있다.

통신부(150)는 다른 디바이스 또는 네트워크(예를 들어, 근거리 통신망(LAN:Local Area Network), 인터넷 망, PSTN(Public Switched Telephone Network) 망)와 유무선 통신을 수행할 수 있다. 이를 위해, 통신부(150)는 다양한 유무선 통신 방법 중 적어도 하나를 지원하는 통신 모듈을 포함할 수 있다. 예를 들어, 통신 모듈은 칩셋(chipset)의 형태일 수도 있고, 또는 통신에 필요한 정보를 포함하는 스티커/바코드(e.g. NFC tag를 포함하는 스티커)등일 수도 있다.

무선 통신은, 예를 들어, Wi-Fi(Wireless Fidelity), Wi-Fi Direct, 블루투스(Bluetooth), UWB(Ultra Wide Band) 또는 NFC(Near Field Communication) 중 적어도 하나를 포함할 수 있다. 유선 통신은, 예를 들어, 이더넷(ethernet), USB(Universal Serial Bus) 또는 HDMI(High Definition Multimedia Interface) 중 적어도 하나를 포함할 수 있다.

메모리(160)에는 어플리케이션과 같은 프로그램 및 스캔 파일 등과 같은 다양한 종류의 데이터가 설치 및 저장될 수 있다. 프로세서(120)는 메모리(160)에 저장된 데이터에 접근하여 이를 이용하거나, 또는 새로운 데이터를 메모리(160)에 저장할 수도 있다. 또한, 프로세서(120)는 메모리(160)에 설치된 프로그램을 실행할 수도 있다. 또한, 프로세서(120)는 통신부(150)를 통해 외부로부터 수신한 어플리케이션을, 메모리(160)에 설치할 수도 있다.

한편, 메모리(160)는 화상 형성 장치(100) 내의 저장 매체(예를 들어, HDD, SDD 등) 및 외부 저장 매체, 예를 들어, USB 메모리를 포함한 Removable Disk, 네트워크를 통한 웹 서버(Web server) 등으로 구현될 수 있다.

또한, 도 1 및 도 2에는 화상 형성 장치(100)의 일반적인 기능만을 도시하고 설명하였지만, 상술한 구성뿐만 아니라, 화상 형성 장치(100)가 지원하는 기능에 따라 팩스 송수신 기능을 수행하는 팩스 송수신부 등이 더 포함될 수도 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출할 수 있다. 프로세서(120)는 원고의 경계를 기초로 틀어짐 각도를 검출할 수도 있다. 만일 원고의 경계를 검출할 수 없다면, 프로세서(120)는 컨텐츠의 내용을 기초로 틀어짐 각도를 검출할 수도 있다.

도 3은 원고의 경계를 검출하여 틀어짐 각도를 검출할 수 있는 경우를 도시한 도면이다. 예를 들어, 프로세서(120)는 원고의 경계를 음영 값을 이용하여 검출할 수 있다. 도 3과 같이 원고의 경계로부터 틀어짐 각도를 검출한 경우, 프로세서(120)는 컨텐츠의 내용을 기초로 한 틀어짐 각도 검출 과정을 생략할 수 있다. 이를 통해 프로세서(120)는 빠르게 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

도 4에 도시된 바와 같이 원고 외곽이 훼손된 경우에는 원고의 경계가 검출되지 않을 수 있다. 이러한 경우, 프로세서(120)는 스캔 이미지 내의 컨텐츠를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 컨텐츠의 기울기를 바탕으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

예를 들어, 도 4에 도시된 스캔 이미지에 포함된 문자열의 기울기, 사진의 외곽선의 기울기, 표의 선의 기울기 등을 이용하여, 프로세서(120)는 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

프로세서(120)는 원고의 경계를 검출하여 틀어짐 각도를 검출하는 방법, 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 방법, 먼저 원고의 경계를 검출하도록 하고 원고의 경계가 검출되지 않으면 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 방법 등 다양한 방법으로 틀어짐 각도를 검출할 수 있다.

또한, 프로세서(120)는 사용자에게 틀어짐 각도를 검출하는 복수의 방법을 제공하고, 사용자가 제공된 복수의 방법 중 하나를 선택하도록 할 수 있다. 예를 들어, 프로세서(120)는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 입출력부(140)를 제어할 수 있다. 그리고, 프로세서(120)는 UI를 통해 선택된 방법으로 틀어짐 각도를 검출할 수 있다.

이어서, 프로세서(120)는 스캔 이미지 내의 컨텐츠의 위치를 기초로, 프로세서(120)는 스캔 이미지를 스캔할 기준점을 결정할 수 있다. 결정된 기준점을 중심으로 스캔 이미지를 회전시킴으로써, 프로세서(120)는 틀어짐 각도를 보정할 수 있다.

도 5a와 같이 컨텐츠가 스캔 이미지의 가운데 부분에 위치하는 경우에는 프로세서(120)가 스캔 이미지의 중앙 좌표를 기준점으로 스캔 이미지를 회전시키더라도 컨텐츠가 잘려나가는 문제점은 발생하지 않는다.

하지만, 도 5b와 같이 컨텐츠가 스캔 이미지의 외곽 부분에 위치하는 경우에, 프로세서(120)가 스캔 이미지의 중앙 좌표를 기준점으로 스캔 이미지를 회전시키면 일부 컨텐츠가 잘려나가는 문제점이 발생한다.

이러한 문제점을 방지하기 위하여, 프로세서(120)는 스캔 이미지 내에서 컨텐츠가 위치하는 좌표를 계산할 수 있다. 그리고, 프로세서(120)는 컨텐츠의 중앙 좌표를 기준점으로 결정하고, 결정된 기준점을 중심으로 스캔 이미지를 회전시킬 수 있다.

도 5c를 참조하면, 프로세서(120)는 스캔 이미지의 중앙 좌표(510)이 아닌 컨텐츠의 중앙 좌표(520)를 기준점으로 결정할 수 있다. 그리고, 프로세서(120)는 결정된 기준점을 중심으로 스캔 이미지를 검출된 틀어짐 각도만큼 회전시킬 수 있다. 프로세서(120)는 틀어짐 각도가 보정된 스캔 이미지를 화상 형성부(130)로 전달하여 출력하거나, 메모리(160)에 저장할 수 있다.

도 6에 도시된 바와 같이 스캔 이미지 내에서 복수의 컨텐츠(601, 602, 603)가 검출되는 경우, 프로세서(120)는 컨텐츠의 크기를 고려하여 기준점을 결정할 수 있다. 예를 들어, 프로세서(120)는 컨텐츠의 크기에 따라 가중치를 부여하여 크기가 큰 컨텐츠에 가까운 위치로 기준점을 결정할 수 있다.

도 6의 경우, 프로세서(120)는 복수의 컨텐츠(601, 602, 603)를 검출하고, 복수의 컨텐츠 각각의 중앙 좌표(610, 620, 630)를 계산할 수 있다. 그리고, 프로세서(120)는 계산된 좌표들의 단순 평균 값이 아니라 컨텐츠의 크기를 고려하여 기준점(640)을 결정할 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 문서의 방향과 스캔 이미지의 방향이 일치되도록 스캔 이미지의 방향을 보정할 수 있다. 문서의 방향 또는 페이지 방향(page orientation)이란 사각형의 페이지가 가독성 측면에서 적합하게 배치된 방향을 말한다. 세로 방향(높이 방향)의 길이가 가로 방향(너비 방향)의 길이보다 큰 경우의 페이지 방향은 포트레이트(portrait) 타입이라고 불리며, 가로 방향의 길이가 세로 방향의 길이보다 큰 경우의 페이지 방향은 랜드스케이프(landscape) 타입이라고 불린다. 포트레이트 타입의 페이지 방향이 적합한 예로는 세로 방향으로 길게 컨텐츠를 배치하는 책을 들 수 있다. 랜드스케이프 타입의 페이지 방향이 적합한 예로는 가로방향으로 길게 컨텐츠를 배치하는 타임라인 그래프를 들 수 있다.

프로세서(120)는 스캔 이미지 내의 컨텐츠의 방향을 검출하여, 문서 방향 또는 페이지 방향을 결정할 수 있다. 그리고, 결정된 페이지 방향이 현재 스캔 이미지의 페이지 방향과 상이한 경우, 프로세서(120)는 결정된 페이지 방향과 일치되도록 스캔 이미지를 직각 회전(90도, 180도, 270도)시킬 수 있다.

본 개시의 일 실시 예에 따르면, 프로세서(120)는 스캔 이미지 내의 복수의 텍스트 영역을 검출할 수 있다. 그리고, 프로세서(120)는 복수의 텍스트 영역 각각의 열 방향을 기초로 원고의 페이지 방향을 판단할 수 있다. 텍스트의 열 방향과 원고의 페이지 방향은 서로 다르다는 점에 주의하여야 한다. 예를 들어, 텍스트가 가로 방향으로 길게 쓰여진 가로 방향인 경우, 그 텍스트를 포함하는 원고는 세로 방향의 페이지 방향을 갖는다.

예를 들어, 스캔 이미지가 세로 방향(포트레이트 타입)으로 생성된 경우를 가정하여 설명하기로 한다. 검출된 텍스트 영역의 방향이 가로 방향인 경우(즉, 텍스트가 가로 방향으로 쓰여진 경우), 프로세서(120)는 페이지 방향을 포트레이트 타입의 세로 방향으로 결정할 수 있다. 따라서, 프로세서(120)는 스캔 이미지의 방향과 원고의 페이지 방향이 일치하는 것으로 판단하여 스캔 이미지를 회전시키지 않을 수 있다.

반대로, 검출된 텍스트 영역의 방향이 세로 방향인 경우(즉, 텍스트가 세로 방향으로 쓰여진 경우), 프로세서(120)는 페이지 방향을 랜드스케이프 타입의 가로 방향으로 결정할 수 있다. 스캔 이미지의 방향과 원고의 페이지 방향이 상이한 것으로 판단되기 때문에, 프로세서(120)는 스캔 이미지를 직각 회전시켜 랜드스케이프 타입으로 변경할 수 있다.

이를 통해, 프로세서(120)는 문서 방향과 스캔 이미지의 방향이 상이한 경우, 스캔 이미지를 회전시켜 가독성을 향상시킬 수 있다.

프로세서(120)는 각각의 텍스트의 방향을 검출하여 텍스트 열(또는 문자 라인)의 방향을 검출할 수 있다. 예를 들어, 프로세서(120)는 OCR(Optical Character Recognition)을 통해 각각의 텍스트의 방향을 검출할 수 있다. 구체적으로, 프로세서(120)는 4방향으로 모두 OCR을 진행하고, 문자로 인식되는 확률이 가장 높은 방향을 텍스트의 방향으로 검출할 수 있다. 다른 예로, 프로세서(120)는 텍스트 사이의 연결 각도를 구하고, 연결 각도의 기울기에 따라 텍스트 영역의 방향을 검출할 수 있다.

다양한 언어에 대해 인식을 시도해야 하기 때문에, 프로세서(120)는 인식률이 높은 대상을 위주로 방향을 검출할 수 있다. 예를 들어, 프로세서(120)는 기설정된 크기 범위의 텍스트 영역에 대해서만 방향 검출을 시도할 수 있다. 다른 예로, 프로세서(120)는 기설정된 텍스트 크기를 갖는 텍스트에 대해서만 방향 검출을 시도할 수 있다.

그리고, 프로세서(120)는 각각의 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출할 수 있다. 검출된 양이 기설정된 값보다 크면, 프로세서(120)는 스캔 이미지를 판단된 스캔 이미지의 배열 방향으로 회전시킬 수 있다. 예를 들어, 프로세서(120)는 텍스트 영역의 열 방향이 문서 방향과 일치하는 텍스트 영역들의 크기를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 텍스트 영역들의 크기가 원고에 포함된 컨텐츠 영역의 크기의 절반을 초과하면, 스캔 이미지를 회전하는 보정을 수행할 수 있다.

도 7a를 참조하면, 프로세서(120)는 문단별로 대표 텍스트만을 추출하여 문서의 방향을 판단할 수 있다. 예를 들어, "header"라는 텍스트만을 기초로 프로세서(120)는 하단의 문단이 텍스트가 가로 방향으로 기재되어 있는 문단임을 판단할 수 있다 그리고, "Item 1"이라는 텍스트만을 기초로 프로세서(120)는 상단의 문단이 텍스트가 세로 방향으로 기재되어 있는 문단임을 판단할 수 있다.

그리고, 프로세서(120)는 각각의 판단된 문단의 영역의 크기를 기초로, 어느 방향이 다수(majority)를 차지하는 방향인지를 결정할 수 있다. 도 7a의 예에서, 프로세서(120)는 “hearder”를 포함하는 하단 문단의 크기와 “Item 1”을 포함하는 상단 문단의 크기를 비교할 수 있다. “header”를 포함하는 하단 문단의 크기가 더 크기 때문에, 프로세서(120)는 페이지 방향을 텍스트가 가로 방향으로 기재된 포트레이트 타입으로 판단할 수 있다.

도 7b를 참조하면, 프로세서(120)는 문서를 문단 단위로 나누고 모든 문단 별로 일부의 텍스트만을 인식하여 전체의 문서 방향을 판단할 수 있다.

도 7c를 참조하면, 문단 내에서 인식하기 쉬운 크기의 텍스트가 포함되어 있으면, 프로세서(120)는 해당 크기의 텍스트에 대한 인식을 우선 진행할 수 있다.

도 8은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 스캔 이미지 보정 방법을 설명하기 위한 흐름도이다.

도 8을 참조하면, 화상 형성 장치(100)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다(S810). 스캔 이미지를 생성하는 과정에서 사용자가 원고를 삐뚤게 배치한 경우, 자동 문서 공급 장치(Automatic Document Feeder)가 문서를 공급할 때 비정속 등에 의해 원고가 삐뚤게 배치된 경우, 두꺼운 책을 스캔/복사하는 경우 등다양한 원인에 의해, 스캔 이미지에 틀어짐이 발생할 수 있다.

화상 형성 장치(100)는 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S820). 예를 들어, 화상 형성 장치(100)는 원고 외곽의 음영을 이용하여 원고의 경계를 검출하고, 검출된 경계를 이용하여 스캔 이미지의 틀어짐 각도를 검출할 수 있다. 다른 예로, 화상 형성 장치(100)는 컨텐츠(또는 문서 내용)을 기초로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

화상 형성 장치(100)는 컨텐츠의 위치를 기초로 스캔 이미지를 회전시킬 기준점을 결정할 수 있다(S830). 그리고, 화상 형성 장치(100)는 결정된 기준점을 중심으로 스캔 이미지를 회전하여 틀어짐 각도를 보정할 수 있다(S840). 이어서, 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄할 수 있다. 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄하지 않고, 저장하거나, 외부 장치로 전송할 수도 있다.

도 9는 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 스캔 이미지 보정 방법을 보다 상세히 설명하기 위한 흐름도이다.

도 9를 참조하면, 화상 형성 장치(100)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다(S910). 그리고, 화상 형성 장치(100)는 원고의 경계를 검출할 수 있다(S920). 원고 외곽의 음영을 이용하여 원고의 경계가 검출된 경우(S930-Y), 화상 형성 장치(100)는 검출된 경계를 기반으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S940). 원고 경계를 기반으로 틀어짐 각도를 검출하는 것은 컨텐츠를 기반으로 틀어짐 각도를 검출하는 것보다 빠르게 수행될 수 있는바, 화상 형성 장치(100)는 우선적으로 원고 경계에 대한 검출을 시도할 수 있다.

만일 원고 외곽이 훼손된 경우, 스캔 덮개를 열고 원고를 스캔한 경우 등과 같이 원고의 경계 검출에 실패하면(S930-N), 화상 형성 장치(100)는 스캔 이미지 내의 컨텐츠를 기반으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S950). 예를 들어, 화상 형성 장치(100)는 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 등으로부터 컨텐츠의 기울기를 검출할 수 있다. 그리고, 화상 형성 장치(100)는 컨텐츠의 기울기로부터 스캔 이미지의 틀어짐 각도를 검출할 수 있다.

틀어짐 각도를 검출한 후, 화상 형성 장치(100)는 스캔 이미지를 회전시킬 기준점을 결정할 수 있다. 단순히 스캔 이미지의 중앙 좌표를 기준으로 스캔 이미지를 회전시킬 경우, 일부 컨텐츠가 잘려나갈 우려가 있다. 따라서, 화상 형성 장치(100)는 컨텐츠의 위치를 기초로 기준점을 결정할 수 있다(S960). 컨텐츠의 위치를 기초로 기준점이 결정되는 경우에는 컨텐츠가 잘려나갈 가능성이 줄어들게 된다.

이어서, 화상 형성 장치(100)는 결정된 기준점을 중심으로 스캔 이미지를 회전하여 틀어짐 각도를 보정할 수 있다(S970). 그리고, 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄할 수 있다(S980).

도 10은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 문서 방향 보정 방법을 설명하기 위한 흐름도이다.

도 10을 참조하면, 화상 형성 장치(100)는 스캔 이미지 내에서 텍스트를 검출할 수 있다(S1005). 그리고, 화상 형성 장치(100)는 검출된 텍스트 크기가 기설정된 범위에 포함되는지를 비교할 수 있다(S1010). 예를 들어, 기설정된 범위는 화상 형성 장치(100)가 인식하기 용이한 크기 범위를 설정한 것일 수 있다.

만일 검출된 텍스트의 크기가 기설정된 범위 밖이면, 화상 형성 장치(100)는 검출된 텍스트 객체를 제거하여 문서 방향 판단에 이용하지 않을 수 있다(S1015). 반대로, 검출된 텍스트의 크기가 기설정된 범위 이내이면, 화상 형성 장치(100)는 텍스트의 위치를 정렬하여 문자 라인을 생성할 수 있다(S1020).

그리고, 화상 형성 장치(100)는 문자 라인의 크기를 기준으로 분류할 수 있다(S1025). 예를 들어, 화상 형성 장치(100)는 문자 라인의 크기를 기설정된 크기와 비교하여 클래스 A 및 클래스 B로 구분할 수 있다. 분류된 클래스에 따라 화상 형성 장치(100)는 향후 문단별 방향을 계산할 때 가중치를 부여할 수 있다.

이어서, 화상 형성 장치(100)는 문자 라인을 그룹화하여 텍스트 영역(또는 문단)을 생성할 수 있다(S1030). 그리고, 화상 형성 장치(100)는 텍스트 영역 별로 열 방향을 계산할 수 있다(S1035). 예를 들어, 화상 형성 장치(100)는 OCR 수행 결과 취득된 텍스트의 방향 또는 단어와 단어 사이의 연결 각도의 기울기를 이용하여 열 방향 계산을 수행할 수 있다.

화상 형성 장치(100)는 문자 라인의 크기에 따른 가중치가 부여된 각 텍스트 영역의 방향을 기초로 문서 전체의 방향을 판단할 수 있다(S1040). 그리고, 화상 형성 장치(100)는 각각 판단된 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 검출된 양을 기설정된 값과 비교하여 스캔 이미지의 회전이 필요한지 판단할 수 있다(S1045). 만일 회전이 필요한 것으로 판단되면(S1045-Y), 화상 형성 장치(100)는 문서의 방향을 회전시키는 보정을 수행할 수 있다(S1050).

도 11은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 경계 보정 방법을 설명하기 위한 흐름도이다. 책과 같이 두꺼운 원고를 화상 형성 장치(100)의 유리 평판에 두고 스캔 또는 복사하는 경우, 덮개의 개폐 여부와 무관하게 책의 크기와 두께에 따라 책 이외의 테두리 영역이 검게 출력된다. 또한, 책이 접히는 중앙 영역에 존재하는 텍스트 등의 컨텐츠가 왜곡되는 현상이 발생한다. 이와 같은 왜곡 현상을 보정하기 위해서는 경계를 정확히 인식할 필요성이 있다. 본 개시의 일 실시 예에 따른 화상 형성 장치(100)는 프로파일 분석을 통해 경계 위치를 검출 또는 추정하여, 이러한 문제점을 해결할 수 있다.

도 11의 실시 예에서는 화상 형성 장치(100)가 수직 경계를 먼저 출력한 후 수평 경계를 출력하는 것으로 도시되었으나, 수평 경계를 먼저 출력해도 무방하고, 수직 경계 및 수평 경계에 대한 과정을 병렬적으로 진행하는 것도 가능하다.

도 11의 실시 예를 이용하여, 화상 형성 장치(100)는 책 복사와 같이 경계 파악이 어려운 경우도, 정확한 경계면을 검출하여 최종 스캔된 결과물의 외곽이 훼손되지 않도록 할 수 있다. 예를 들어, 책이 스캔부의 유리 평판의 가장자리에 놓여져 원고의 경계가 잘려나간 경우에도, 화상 형성 장치(100)는 경계를 추정하여 컨텐츠가 잘려나가지 않도록 하고, 다른 보정 과정이 오작동되지 않도록 할 수 있다.

도 11을 참조하면, 화상 형성 장치(100)는 스캔 이미지의 수직 경사도를 계산할 수 있다(S1105). 수직 경사도는 스캔 이미지의 수직 경계가 기울어진 정도를 의미한다. 원고가 비뚤어져 배치되어 스캔된 경우에 수직 경사도를 계산하여야 화상 형성 장치(100)는 정확히 원고의 경계를 따라가며 프로파일 분석 등을 진행할 수 있다.

이어지는 수직 에지 맵 구성 이후의 과정과 수직 에지 프로파일 이후의 과정은 병렬적으로 진행될 수 있다.

계산된 수직 경사도를 바탕으로, 화상 형성 장치(100)는 세로 방향의 수직 에지 맵을 구성할 수 있다(S1120). 세로 방향의 수직 에지 맵을 이용하여, 화상 형성 장치(100)는 수직 에지 히스토그램을 분석하여 수직 경계 후보를 선정할 수 있다(S1125 & S1130). 구체적으로, 화상 형성 장치(100)는 스캔 이미지를 수평 방향으로 복수의 조각으로 나뉠 수 있다. 즉, 문서는 수직 방향으로 긴 끈 모양의 조각들이 수평 방향으로 복수 개 배치된 형태로 분리될 수 있다. 화상 형성 장치(100)는 각각의 조각들의 음영을 분석하는 수직 에지 히스토그램 분석을 진행할 수 있다. 수직 에지 히스토그램 분석을 진행하면 원고의 경계 부분에서 피크 값이 검출될 확률이 높기 때문에, 화상 형성 장치(100)는 피크 값이 검출된 부분을 수직 경계 후보로 선정할 수 있다.

그리고, 화상 형성 장치(100)는 수직 에지 프로파일을 검출할 수 있다(S1110). 구체적으로, 수직 에지 프로파일은 수직 방향으로 진행하며 에지의 변화를 분석하는 것을 말한다. 예를 들어, 원고의 에지가 명확히 스캔된 경우에, 원고 내부 부분의 에지 프로파일은 직선 형태를 띄게 된다. 반대로, 원고의 에지를 명확히 알 수 없도록 스캔된 경우에, 원고 내부 부분의 에지 프로파일은 불규칙한 파동의 형태를 띄게 된다. 예를 들어, 원고 경계가 스캔되지 않아 원고 내의 컨텐츠를 경계인 것처럼 스캔된 경우에 에지 프로파일은 불규칙한 파동의 형태를 갖는다.

수직 에지 프로파일이 선형적인 경우(S1115-Y), 화상 형성 장치(100)는 수직 에지 히스토그램 분석을 통한 수직 경계 후보를 수직 경계로 선정할 수 있다(S1130). 수직 에지 프로파일이 선형적이라는 것은 원고의 에지가 명확히 스캔되었다는 것을 의미하는바, 화상 형성 장치(100)는 수직 에지 히스토그램 분석에서 선정한 수직 경계 후보가 정확한 수직 경계라고 결정할 수 있다.

만일 수직 에지 프로파일이 선형적이 아니라면(S1115-N), 화상 형성 장치(100)는 수직 에지 히스토그램 분석을 통한 수직 경계 후보가 실제 수직 경계가 아닌 것으로 확정할 수 있다. 그리고, 화상 형성 장치(100)는 수직 경계를 추정할 수 있다(S1135). 수직 에지 프로파일이 선형적이 아니라는 것은 원고의 내용이 에지로 판단되었다는 것을 의미하는바, 화상 형성 장치(100)는 수직 경계 후보로부터 일정 거리가 떨어진 지점을 수직 경계를 추정할 수 있다.

화상 형성 장치(100)는 선정 또는 추정된 수직 경계를 출력할 수 있다(S1140). 그리고, 화상 형성 장치(100)는 출력된 수직 경계로부터 기설정된 양의 여백을 추가한 후 스캔 이미지를 생성할 수 있다.

수평 경계를 출력하는 S1145 내지 S1180의 과정은 수직 경계를 출력하는 S1105 내지 S1140의 과정과 대응되는 것인바, 중복 설명은 생략하기로 한다.

도 12a는 종래의 방법을 이용하여 스캔한 결과물로, 원고의 내용이 손실되는 것을 확인할 수 있다. 이에 반해, 본 개시의 일 실시 예에 따르면, 도 12b와 같이 원고의 경계선을 추정함으로써 원고의 내용이 손실되지 않음을 확인할 수 있다.

상술한 바와 같은 다양한 실시 예에 따르면, 화상 형성 장치(100)는 원고를 스캔할 때 발생할 수 있는 원고의 틀어짐을 보정할 수 있다. 또한, 화상 형성 장치(100)는 원고의 내용을 기반으로 틀어짐을 보정하기 때문에 보정 후에 이미지 손실을 방지할 수 있다.

그리고, 화상 형성 장치(100)는 스캔 문서의 방향과 문서 내 문장의 방향이 일치되도록 함으로써 가독성을 향상시킬 수 있다. 또한, 화상 형성 장치(100)는 정확한 경계 면을 검출 또는 추정함으로써 최종 스캔된 결과물의 외곽이 훼손되지 않도록 할 수 있다.

한편, 상술된 실시 예들은 컴퓨터에 의하여 실행 가능한 명령어 및 데이터를 저장하는 컴퓨터로 읽을 수 있는 기록매체의 형태로 구현될 수 있다. 상기 명령어 및 데이터 중 적어도 하나는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 소정의 프로그램 모듈을 생성하여 소정의 동작을 수행할 수 있다.

컴퓨터로 읽을 수 있는 기록매체란, 예를 들어 하드디스크 등과 같은 마그네틱 저장매체, CD 및 DVD 등과 같은 광학적 판독매체 등을 의미할 수 있으며, 네트워크를 통해 접근 가능한 서버에 포함되는 메모리를 의미할 수도 있다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 화상 형성 장치(100)의 메모리(160) 및 입출력부(140)의 메모리 중 적어도 하나가 될 수도 있으며, 또는, 화상 형성 장치(100)와 네트워크를 통하여 연결된 외부 장치에 포함되는 메모리가 될 수도 있다.

이상과 같이 본 개시는 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 개시는 상기의 실시 예에 한정되는 것은 아니며, 본 개시가 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 개시의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

100: 화상 형성 장치 110: 스캔부
120: 프로세서 130: 화상 형성부
140: 입출력부 150: 통신부
160: 메모리

Claims

원고를 스캔하여 스캔 이미지를 생성하는 스캔부; 및
상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서;를 포함하는 화상 형성 장치.
제1항에 있어서,
상기 프로세서는,
상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하고, 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
제2항에 있어서,
상기 프로세서는,
상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
제3항에 있어서,
상기 프로세서는,
상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출하는 화상 형성 장치.
제1항에 있어서,
화면을 표시하고 사용자 입력을 수신하는 입출력부;를 더 포함하고,
상기 프로세서는,
상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 상기 입출력부를 제어하고, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
제5항에 있어서,
상기 복수의 방법은,
상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함하는 화상 형성 장치.
제1항에 있어서
상기 스캔 이미지는 복수의 컨텐츠를 포함하고,
상기 프로세서는,
상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하고, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하며, 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정하는 화상 형성 장치.
제1항에 있어서,
상기 프로세서는,
상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하고, 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 배열 방향을 판단하는 화상 형성 장치.
제8항에 있어서,
상기 프로세서는,
기설정된 텍스트 크기를 갖는 텍스트 영역을 검출하는 화상 형성 장치.
제8항에 있어서,
상기 프로세서는,
상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 배열 방향으로 회전시키는 화상 형성 장치.
화상 형성 장치의 스캔 이미지 보정 방법에 있어서,
원고를 스캔하여 스캔 이미지를 생성하는 단계;
상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계;
상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계; 및
상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계;를 포함하는 보정 방법.
제11항에 있어서,
상기 틀어짐 각도를 검출하는 단계는,
상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하는 단계; 및
상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계;를 포함하는 보정 방법.
제12항에 있어서,
상기 틀어짐 각도를 검출하는 단계는,
상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계;를 더 포함하는 보정 방법.
제13항에 있어서,
상기 틀어짐 각도를 검출하는 단계는,
상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출하는 보정 방법.
제11항에 있어서,
상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하는 단계;를 더 포함하고,
상기 틀어짐 각도를 검출하는 단계는,
상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 보정 방법
제15항에 있어서,
상기 복수의 방법은,
상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함하는 보정 방법
제11항에 있어서,
상기 스캔 이미지는 복수의 컨텐츠를 포함하고,
상기 기준점을 결정하는 단계는,
상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하는 단계;
상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하는 단계; 및
상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정하는 단계;를 포함하는 보정 방법.
제11항에 있어서,
상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하는 단계; 및
상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 배열 방향을 판단하는 단계;를 더 포함하는 보정 방법.
제18항에 있어서,
상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하는 단계; 및
상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 배열 방향으로 회전시키는 단계;를 더 포함하는 보정 방법.
화상 형성 장치의 스캔 이미지 보정 방법을 실행하기 위한 프로그램을 포함하는 비일시적 컴퓨터 판독가능 기록매체에 있어서,
상기 보정 방법은,
원고를 스캔하여 스캔 이미지를 생성하는 단계;
상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계;
상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계; 및
상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계;를 포함하는 비일시적 컴퓨터 판독가능 기록매체.