KR20130080745A

KR20130080745A - 스마트폰의 카메라 모듈과 원격지 서버의 ｏｃｒ 엔진을 이용한 전자문서 생성 방법 및 이를 위한 단말장치

Info

Publication number: KR20130080745A
Application number: KR1020120001730A
Authority: KR
Inventors: 박병선
Original assignee: 주식회사 인프라웨어
Priority date: 2012-01-05
Filing date: 2012-01-05
Publication date: 2013-07-15

Abstract

본 발명은 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 방법 및 이를 위한 단말장치에 관한 것으로, 보다 구체적으로는 오프라인 문서를 스마트폰의 카메라 모듈로 촬영하여 생성한 이미지 데이터에 대해 스마트폰 소프트웨어로 구현되는 OCR 엔진을 통해 텍스트를 인식함으로써 오프라인 문서를 전자문서(문서 파일)로 변환하는 기술에 관한 것이다. 본 발명에 따르면 스마트폰을 사용하여 오프라인 문서를 자동으로 온라인 문서화 시킬 수 있고 사용자가 원하는 형태의 문서로 저장하여 편리성을 제고할 수 있다.

Description

스마트폰의 카메라 모듈과 원격지 서버의 ＯＣＲ 엔진을 이용한 전자문서 생성 방법 및 이를 위한 단말장치{METHOD OF GENERATING ELECTRONIC DOCUMENTS USING CAMERA MODULE OF SMART PHONES AND OCR ENGINE OF REMOTE SERVER, AND TERMINAL DEVICE USING THE SAME}

본 발명은 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 방법 및 이를 위한 단말장치에 관한 것으로, 보다 구체적으로는 오프라인 문서를 스마트폰의 카메라 모듈로 촬영하여 생성한 이미지 데이터에 대해 스마트폰 소프트웨어로 구현되는 OCR 엔진을 통해 텍스트를 인식함으로써 오프라인 문서를 전자문서(문서 파일)로 변환하는 기술에 관한 것이다.

최근 들어 문서나 서류 등의 보관에 대한 중요성이 커지고 있다. 그리하여 종이의 형태로 관리하던 문서나 서류들을 편리하게 관리하기 위해 전자화시키고 있는데, 이러한 종이로 되어 있는 서류들을 전자화시키기 위해서는 사람들이 해당 서류를 보고 직접 수작업으로 일일이 입력해야 한다는 번거로움이 있었다.

한편, 최근 무선통신 단말기의 융/복합화에 따라, 무선통신 단말기에 광학 문자 판독 기능(OCR기능)을 탑재시켜 명함을 인식할 수 있도록 하는 기능이 제공되고 있다. 즉, 카메라 모듈을 통해 오프라인 문서, 예를 들어 명함을 읽어온 후 이름, 전화번호, 팩스 번호, e-메일 주소 등을 추출하여 이를 폰북(주소록)에 자동으로 저장하는 기능이 현재 제공되고 있다. 이는, 광학 문자 판독 기능(OCR기능)과 폰북 기능을 연동하여 구현할 수 있다.

또한, 오늘날의 무선통신 단말기는 메모리 용량이 폭발적으로 증가하게 됨에 따라 방대한 양의 데이터를 메모리 소자에 저장하여 휴대 중에 언제라도 사용할 수 있도록 하고 있다. 예를 들면, 어학용 사전(한영/영한/영영/한자 사전 등), 각종 용어 사전(예 : 컴퓨터/IT 용어 사전), 지리 정보(예: 지하철 노선도) 등과 같이 생활에 필요한 각종 데이터를 저장하고 있다가 사용자의 요청에 따라 검색 및 출력한다. 물론, 외부 서버로부터 각종의 네트워크를 통해 전달받아 사용자에게 출력할 수도 있다.

하지만, 사용자는 무선통신 단말기에서 인식된 오프라인 문서를 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터, 태블릿 컴퓨터, 팜톱 컴퓨터 등)에서 활용하고자 할 경우에는 개인용 컴퓨터에서 이용 가능한 확장자를 가진 문서 파일로 전환해야 한다는 문제점이 있다.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은 스마트폰의 카메라 모듈에 의해 촬영된 오프라인 문서에 대한 이미지 데이터에 대해 원격지 서버의 OCR 엔진을 통해 텍스트를 인식하여 문서 파일로 변환하기 위한 전자문서 생성 방법 및 이를 위한 단말장치를 제공하는 데 있다.

상기의 목적을 달성하기 위한 본 발명에 따른 전자문서 생성 방법은 스마트폰의 OCR 엔진을 이용하여 오프라인 문서로부터 전자문서를 생성하는 방법으로서, 스마트폰의 카메라 모듈을 통해 오프라인 문서를 촬영한 이미지 데이터를 제공받는 단계; 이미지 데이터를 원격지의 서버로 제공하는 단계; 원격지 서버가 이미지 데이터의 전체 영역을 텍스트 영역과 이미지 영역으로 분류하는 단계; 이미지 데이터의 텍스트 영역으로부터 텍스트를 추출하는 단계; 위 추출한 텍스트를 OCR 엔진을 이용하여 인식하는 단계; 위 인식한 텍스트와 이미지 영역의 데이터를 이용하여 전자문서를 생성하는 단계;를 포함하여 구성된다.

본 발명의 전자문서 생성 방법에서, 전자문서를 생성하는 단계는 스마트폰의 터치 디스플레이를 통해 사용자로부터 전자문서를 판독할 수 있는 소정 소프트웨어의 종류를 수신하고, 그 수신한 소프트웨어의 종류에 따라 전자문서를 생성하도록 구성되는 것이 바람직하다.

상기의 목적을 달성하기 위한 본 발명에 따른 전자문서 생성 단말장치는 스마트폰의 OCR 엔진을 이용하여 오프라인 문서로부터 간단하게 전자문서를 생성하는 단말장치로서, 스마트폰의 카메라 모듈에 의해 오프라인 문서가 촬영된 이미지 데이터를 제공받는 문서정보 입력부(101); 이미지 데이터의 전체 영역을 텍스트 영역과 이미지 영역으로 분류하는 문서구조 분석부(102); 문서구조 분석부(102)가 분류한 이미지 데이터의 텍스트 영역으로부터 텍스트를 추출하고, 그 추출한 텍스트를 OCR 엔진을 이용하여 인식하는 텍스트 OCR부(103); 그 인식한 텍스트와 이미지 영역의 데이터를 이용하여 전자문서를 생성하는 문서 생성부(104);를 포함하여 구성된다.

본 발명의 전자문서 생성 단말장치에서, 문서 생성부(104)는 스마트폰의 터치 디스플레이를 통해 사용자로부터 전자문서를 판독할 수 있는 소프트웨어의 종류를 제공받고, 제공받은 소프트웨어의 종류에 따라 전자문서를 생성하도록 구성되는 것이 바람직하다.

본 발명에 따른 전자문서 생성 방법 및 이를 위한 단말장치에 따르면 스마트폰의 카메라 모듈에 의해 촬영된 오프라인 문서에 대한 이미지 데이터에서 텍스트를 인식하여 문서 파일로 변환함으로써 간단한 방법으로 오프라인 문서를 자동으로 온라인 문서화 시킬 수 있고 사용자가 원하는 형태의 문서로 저장하여 편리성을 제고할 수 있다.

[도 1]은 본 발명에 따른 단말 장치의 내부 구조를 개략적으로 도시한 도면.
[도 2]는 본 발명에 따른 전자문서 생성 방법을 설명하기 위한 흐름도.
[도 3]은 본 발명에 따른 전자문서 생성 방법을 설명하기 위한 예시도.

본 발명은 다양한 변경을 가할 수 있고 여러가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. "및/또는"이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.

[도 1]은 본 발명의 일 실시예에 따른 단말 장치의 내부 구조를 개략적으로 도시한 도면이다.

[도 1]을 참조하면, 단말 장치(100)는 카메라 모듈로부터 촬영된 오프라인 문서에 대한 이미지 데이터를 수신하고, 수신한 오프라인 문서에 대한 이미지 데이터에서텍스트를 인식하여 온라인 문서로 변환할 수 있다. 이러한 단말 장치(100)가 카메라 모듈를 구비하는 경우, 구비된 카메라 모듈로부터 촬영된 오프라인 문서에 대한 이미지 데이터를 수신하고 이미지 데이터에서 텍스트를 인식하여 온라인 문서로 변환할 수 있다. 여기서, 이미지 데이터는 카메라 모듈에 의해 촬영된 텍스트, 그림 등을 포함할 수 있다.

하지만, 단말 장치(100)가 카메라 모듈를 구비하지 않는 경우라면 스캐너, 카메라 등과 같은 외부 카메라 모듈에 연결될 수 있으며, 그 연결된 외부 카메라 모듈로부터 촬영된 오프라인 문서에 대한 이미지 데이터를 수신하고 이미지 데이터에서 텍스트를 인식하여 온라인 문서로 변환할 수 있다.

여기서, 단말 장치(100)는 통신 네트워크가 가능한 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터, 태블릿 컴퓨터, 팜톱 컴퓨터 등), 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같은 디지털 기기에 포함되거나 연결될 수 있을 것이다.

여기서, 통신 네트워크는 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 예를 들어 근거리 통신망(LAN: Local Area Network), 도시권 통신망(MAN: Metropolitan Area Network), 광역 통신망(WAN: Wide Area Network) 등과 같은 다양한 통신망으로 구성될 수 있다. 이러한 단말 장치(100)는 문서 정보 입력부(101), 문서 구조 분석부(102), 텍스트 OCR부(103), 문서 생성부(104)를 포함할 수 있다.

본 발명의 일 실시예에 따른 문서 정보 입력부(101)는 카메라 모듈로부터 텍스트 및 이미지가 포함된 오프라인 문서에 대한 이미지 데이터를 수신할 수 있고 수신된 오프라인 문서에 대한 이미지 데이터를 문서 구조 분석부(102)로 제공할 수 있다.

여기서, 카메라 모듈가 단말 장치(100)에 구비된 경우, 카메라 모듈를 실행하기 위한 소정 버튼의 동작에 의해 개별적으로 수행되도록 구현할 수도 있고, 카메라 모듈의 조작부를 온(on)시킨 후 카메라 모듈의 위치 또는 회전 조작만으로 자동 수행되도록 구현할 수도 있다. 후자의 경우가 더욱 편리할 수 있다.

이 때, 카메라 모듈는 오프라인 문서, 예컨대 프린트물이나 책과 나란하게 위치되도록 조작되어야한다.

문서 구조 분석부(102)는 카메라 모듈을 통해 이미지 데이터로 변경된 오프라인 문서의 구조를 파악함에 있어서 이미지 데이터의 전체 영역을 텍스트 영역과 이미지 영역으로 분류할 수 있다.

텍스트 OCR부(103)는 문서 구조 분석부(102)로부터 수신한 텍스트 영역에 포함된 문자를 인식할 수 있다.

문서 생성부(104)는 사용자로부터 문서를 판독할 수 있는 소정 소프트웨어의 종류를 수신하고, 상기 수신한 소프트웨어의 종류에 따라 텍스트 OCR부(103)에서 인식한 텍스트를 포함하는 문서를 생성할 수 있다. 예를 들어, 문서 파일을 판독할 수 있는 소정 소프트웨어의 종류는 문서를 편집할 수 있는 모든 종류의 소프트웨어이며, 문서 생성부(104)는 한글, MS-Word 등에서 판독 가능한 *.hwp, *.doc 로 문서 파일을 생성할 수 있다.

[도 2]는 본 발명의 일 실시예에 따른 전자문서 생성 방법을 설명하기 위한 흐름도이다.

[도 2]를 참조하면, 단말 장치(100)는 카메라 모듈에 의해 촬영된 오프라인 문서에 대한 이미지 데이터를 수신할 수 있다(S201). 여기서, 단말 장치(100)가 카메라 모듈를 구비하는 경우, 구비된 카메라 모듈로부터 촬영된 오프라인 문서에 대한 이미지 데이터를 수신하고 이미지 데이터에서 텍스트를 인식하여 온라인 문서로 변환할 수 있다. 여기서, 이미지 데이터는 카메라 모듈에 의해 촬영된 텍스트, 그림 등을 포함할 수 있다.

단말 장치(100)는 이미지 데이터에서 텍스트를 추출하고, 그 추출한 텍스트를 인식할 수 있다(S202). 여기서, 단말 장치(100)는 광학 문서 인식 단말장치를 이용하여 추출한 텍스트를 인식할 수 있다. 한편, 본 발명에서는 스마트폰이 카메라 모듈에서 생성한 이미지 데이터를 원격지의 서버로 전달하고, 그에 따라 원격지 서버에 설치된 OCR 엔진을 활용하여 문서 구조분석 작업과 텍스트 추출 작업, 그리고 그 추출한 텍스트에 대한 인식 작업을 수행한다. 따라서, 단말장치(100)의 각 구성요소는 분산 방식으로 구성될 수 있다.

단말 장치(100)는 그 인식 처리된 텍스트를 이용하여 문서 파일(전자문서)을 생성할 수 있다(S203). 여기서, 단말 장치(100)는 사용자로부터 문서 파일을 판독할 수 있는 소정 소프트웨어의 종류를 수신하고, 수신한 소프트웨어의 종류에 따라 문서 파일을 생성할 수 있다. 예를 들어, 문서 파일을 판독할 수 있는 소정 소프트웨어의 종류는 문서를 편집할 수 있는 모든 종류의 소프트웨어로, 한글, MS-Word 등이 될 수 있고, 생성한 문서 파일은 *.hwp, *.doc 등과 같은 확장자를 가지는 파일일 수 있다.

[도 3]은 본 발명의 일 실시예에 따른 전자문서 생성 방법의 실시예를 설명하기 위한 예시도이다.

[도 3]을 참조하면, 단말 장치(100)는 카메라 모듈에 의해 촬영된 오프라인 문서(301)에 대한 이미지 데이터(302)를 수신할 수 있다. 여기서, 카메라 모듈는 오프라인 문서(301), 예컨대 프린트물이나 책과 나란하게 위치되도록 조작되는 것이 바람직하다.

단말 장치(100)는 광학 문서 인식 단말장치를 이용하여 오프라인 문서(301)에 대한 이미지 데이터(302)에서 텍스트를 인식할 수 있고, 사용자로부터 문서 파일을 판독할 수 있는 소정 소프트웨어의 종류를 수신하고, 수신한 소프트웨어의 종류에 따라 문서 파일(303)을 생성할 수 있다.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드의 형태로 구현하는 것이 가능하다. 이때, 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.

컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어웨이브(예컨대, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산된 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인 프로그램, 코드, 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.

이상과 같이, 본 명세서와 도면에는 본 발명의 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예가 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명하다.

100: 단말장치
101: 문서 정보 입력부
102: 문서 구조 분석부
103: 텍스트 OCR부
104: 문서 생성부

Claims

스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용하여 오프라인 문서로부터 전자문서를 생성하는 방법으로서,
상기 스마트폰의 카메라 모듈을 통해 상기 오프라인 문서를 촬영한 이미지 데이터를 제공받는 단계;
상기 이미지 데이터를 원격지의 서버로 제공하는 단계;
상기 원격지 서버가 상기 이미지 데이터의 전체 영역을 텍스트 영역과 이미지 영역으로 분류하는 단계;
상기 이미지 데이터의 텍스트 영역으로부터 텍스트를 추출하는 단계;
상기 추출한 텍스트를 상기 OCR 엔진을 이용하여 인식하는 단계;
상기 인식한 텍스트와 상기 이미지 영역의 데이터를 이용하여 전자문서를 생성하는 단계;
를 포함하여 구성되는 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 방법.
청구항 1에 있어서,
상기 전자문서를 생성하는 단계는 상기 스마트폰의 터치 디스플레이를 통해 사용자로부터 상기 전자문서를 판독할 수 있는 소프트웨어의 종류를 제공받고, 상기 제공받은 소프트웨어의 종류에 대응하도록 상기 전자문서를 생성하는 것을 특징으로 하는 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 방법.
스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용하여 오프라인 문서로부터 전자문서를 생성하는 단말장치로서,
상기 스마트폰의 카메라 모듈에 의해 상기 오프라인 문서가 촬영된 이미지 데이터를 제공받는 문서정보 입력부(101);
상기 이미지 데이터의 전체 영역을 텍스트 영역과 이미지 영역으로 분류하는 문서구조 분석부(102);
상기 문서구조 분석부(102)가 분류한 이미지 데이터의 텍스트 영역으로부터 텍스트를 추출하고, 상기 추출한 텍스트를 상기 OCR 엔진을 이용하여 인식하는 텍스트 OCR부(103);
상기 인식한 텍스트와 상기 이미지 영역의 데이터를 이용하여 전자문서를 생성하는 문서 생성부(104);
를 포함하여 구성되는 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 단말장치.
청구항 3에 있어서,
상기 문서 생성부(104)는 상기 스마트폰의 터치 디스플레이를 통해 사용자로부터 상기 전자문서를 판독할 수 있는 소프트웨어의 종류를 제공받고, 상기 제공받은 소프트웨어의 종류에 대응하도록 상기 전자문서를 생성하는 것을 특징으로 하는 스마트폰의 카메라 모듈과 원격지 서버의 OCR 엔진을 이용한 전자문서 생성 단말장치.