KR101972857B1 - 딥러닝 기반의 출력 문서 보안 관리 방법 및 문서 관리 서버 - Google Patents

Abstract

본 발명의 일 실시예에 따르면, 문서 관리 서버에서, 출력 문서에 대한 보안을 관리하는 방법에 있어서, (a) 상기 출력 문서에 대한 파쇄 또는 반출 요청으로, 상기 출력 문서의 스캔을 통해 상기 출력 문서에 포함된 식별 코드가 인식되면, 상기 식별 코드에 기초하여 상기 출력 문서에 대한 원본 이미지를 획득하는 단계; (b) 상기 출력 문서의 스캔으로 생성된 스캔 이미지와 상기 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계; 및 (c) 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 단계를 포함하는, 출력 문서 보안 관리 방법이 제공된다.

Description

딥러닝 기반의 출력 문서 보안 관리 방법 및 문서 관리 서버{METHOD FOR MANAGING SECURITY OF OUTPUT DOCUMENT AND DOCUMENT MANAGING SERVER BASED DEEP LEARNING}

본 발명은 딥러닝 기반의 출력 문서 보안 관리 방법 및 문서 관리 서버에 관한 것으로, 더욱 상세하게는, 출력 문서에 대한 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 딥러닝 기반의 출력 문서 보안 관리 방법 및 문서 관리 서버에 관한 것이다.

최근, 출력 문서에 대한 보안이 강조되면서, 출력 문서에 QR 코드를 추가하여 인쇄한 후, 파쇄 시 QR 코드를 인식하여 출력 문서에 대한 파기 여부를 관리하고 있다.

QR 코드가 추가된 출력 문서는 QR 코드의 오남용을 통한 부정 활동 방지를 위해 파쇄본과 원본 컨텐츠에 대한 비교가 필요하지만, 종래에는 텍스트를 비교하는 OCR을 적용하여 파쇄본과 원본 컨텐츠를 비교하기 때문에 정확도가 낮은 문제가 있다.

또한, 출력 문서를 파일 단위로 관리하기 때문에 출력 문서의 페이지 별로 위변조 확인이 어려울 뿐만 아니라, 출력 문서의 소유권이 변동되는 경우, 변동 이력에 대한 추적이 어렵고, 출력 문서가 반출되는 경우, 반출된 문서에 대한 통제 및 이력 관리가 어려운 문제도 있다.

따라서, 출력 문서에 대한 파쇄 및 반출을 편리하고 정확하게 처리하여 출력 문서에 대한 보안을 관리하고자 하는 요구가 증대되고 있으며, 상술한 문제점들을 해결할 수 있는 방안이 시급한 실정이다.

한국등록특허공보 제10-1547762호(2015.08.26)

본 발명은 전술한 종래기술의 문제점을 해결하기 위한 것으로, 출력 문서에 대한 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 출력 문서 보안 관리 방법 및 문서 관리 서버를 제공하는 것을 목적으로 한다.

본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.

상술한 목적을 달성하기 위한 본 발명의 일 실시예에 따르면, 문서 관리 서버에서, 출력 문서에 대한 보안을 관리하는 방법에 있어서, (a) 상기 출력 문서에 대한 파쇄 또는 반출 요청으로, 상기 출력 문서의 스캔을 통해 상기 출력 문서에 포함된 식별 코드가 인식되면, 상기 식별 코드에 기초하여 상기 출력 문서에 대한 원본 이미지를 획득하는 단계; (b) 상기 출력 문서의 스캔으로 생성된 스캔 이미지와 상기 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계; 및 (c) 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 단계를 포함하는, 출력 문서 보안 관리 방법이 제공된다.

상기 출력 문서 보안 관리 방법은, 상기 (a) 단계 이전에, 원본 문서에 대한 출력 요청에 따라 생성된 식별 코드가 상기 원본 문서에 추가되어 인쇄 장치를 통해 상기 출력 문서가 인쇄되면, 상기 출력 문서에 대한 원본 이미지를 데이터베이스에 저장하는 단계를 더 포함할 수 있다.

상기 (b) 단계는, 문서 파쇄 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계를 포함하고, 상기 (c) 단계는, 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄가 수행되도록 처리하는 단계를 포함할 수 있다.

상기 (b) 단계는, 보안 검색 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계를 포함하고, 상기 (c) 단계는, 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 반출이 수행되도록 처리하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 스캔 이미지에서 에지 포인트를 추출하고, 상기 추출된 에지 포인트를 이용하여 상기 스캔 이미지에 대한 기울기를 산출하고, 상기 산출된 기울기에 기초하여 상기 스캔 이미지를 보정하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 스캔 이미지에서 확인되는 식별 코드의 위치를 통해 문서 회전 정보를 획득하고, 상기 획득된 문서 회전 정보에 기초하여 상기 스캔 이미지의 문서 방향을 확인하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 스캔 이미지에서 상기 식별 코드가 존재할 가능성이 있는 복수의 영역 이미지를 추출하여, 상기 추출된 영역 이미지에 대한 조합으로 검출 이미지를 재생성하고, 상기 검출 이미지에서 상기 식별 코드의 위치를 확인하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 스캔 이미지 내에서 상기 확인된 식별 코드 영역을 기준으로 일정 크기만큼 확장된 영역 내에서 상기 식별 코드를 최종적으로 추출하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 최종적으로 추출된 식별 코드의 위치 및 상기 문서 회전 정보를 기초로, 상기 스캔 이미지 내에서의 문서 영역을 특정하고, 특정된 문서 영역 외의 이미지를 제거하여 보정하는 단계를 포함할 수 있다.

상기 (b) 단계는, 문서 방향과 색 형태가 동일하도록 보정된 상기 원본 이미지 및 스캔 이미지를 보정 노이즈와 결합하여, 학습 이미지를 생성하는 단계를 포함할 수 있다.

상기 (b) 단계는, 보정 시 임의의 노이즈를 추가하여 다수의 학습 이미지를 생성하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 학습 이미지의 RGB 채널 중 어느 하나인 제1 채널 값을 상기 원본 이미지로 설정하고, 상기 학습 이미지의 RGB 채널 중 다른 하나인 제2 채널 값을 상기 스캔 이미지로 설정하고, 상기 학습 이미지의 RGB 채널 중 또 다른 하나인 제3 채널 값을 0으로 설정하여, 상기 학습 이미지를 생성하는 단계를 포함할 수 있다.

상기 (b) 단계는, 상기 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색 정보 및 분포를 기초로, 문서의 일치 여부를 확인하는 단계를 포함할 수 있다.

상술한 목적을 달성하기 위한 본 발명의 다른 실시예에 따르면, 출력 문서에 대한 파쇄 또는 반출 요청으로, 상기 출력 문서의 스캔을 통해 상기 출력 문서에 포함된 식별 코드가 인식되면, 상기 식별 코드에 기초하여 상기 출력 문서에 대한 원본 이미지를 획득하는 이미지 처리부; 상기 출력 문서의 스캔으로 생성된 스캔 이미지와 상기 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 문서 일치 확인부; 및 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 출력 문서 처리부를 포함하는, 문서 관리 서버가 제공된다.

상기 이미지 처리부는, 원본 문서에 대한 출력 요청에 따라 생성된 식별 코드가 상기 원본 문서에 추가되어 인쇄 장치를 통해 상기 출력 문서가 인쇄되면, 상기 출력 문서에 대한 원본 이미지를 데이터베이스에 저장할 수 있다.

상기 문서 일치 확인부는, 문서 파쇄 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하고, 상기 출력 문서 처리부는, 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄가 수행되도록 처리할 수 있다.

상기 문서 일치 확인부는, 보안 검색 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하고, 상기 출력 문서 처리부는, 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 반출이 수행되도록 처리할 수 있다.

상기 이미지 처리부는, 상기 스캔 이미지에서 에지 포인트를 추출하고, 상기 추출된 에지 포인트를 이용하여 상기 스캔 이미지에 대한 기울기를 산출하고, 상기 산출된 기울기에 기초하여 상기 스캔 이미지를 보정할 수 있다.

상기 이미지 처리부는, 상기 스캔 이미지에서 확인되는 식별 코드의 위치를 통해 문서 회전 정보를 획득하고, 상기 획득된 문서 회전 정보에 기초하여 상기 스캔 이미지의 문서 방향을 확인할 수 있다.

상기 이미지 처리부는, 상기 스캔 이미지에서 상기 식별 코드가 존재할 가능성이 있는 복수의 영역 이미지를 추출하여, 상기 추출된 영역 이미지에 대한 조합으로 검출 이미지를 재생성하고, 상기 검출 이미지에서 상기 식별 코드의 위치를 확인할 수 있다.

상기 이미지 처리부는, 상기 스캔 이미지 내에서 상기 확인된 식별 코드 영역을 기준으로 일정 크기만큼 확장된 영역 내에서 상기 식별 코드를 최종적으로 추출할 수 있다.

상기 이미지 처리부는, 상기 최종적으로 추출된 식별 코드의 위치 및 상기 문서 회전 정보를 기초로, 상기 스캔 이미지 내에서의 문서 영역을 특정하고, 특정된 문서 영역 외의 이미지를 제거하고 보정할 수 있다.

상기 이미지 처리부는, 문서 방향과 색 형태가 동일하도록 보정된 상기 원본 이미지 및 스캔 이미지를 결합하여, 학습 이미지를 생성할 수 있다.

상기 이미지 처리부는, 보정 시 임의의 노이즈를 추가하여 학습 이미지를 생성할 수 있다.

상기 이미지 처리부는, 상기 학습 이미지의 RGB 채널 중 어느 하나인 제1 채널 값을 상기 원본 이미지로 설정하고, 상기 학습 이미지의 RGB 채널 중 다른 하나인 제2 채널 값을 상기 스캔 이미지로 설정하고, 상기 학습 이미지의 RGB 채널 중 또 다른 하나인 제3 채널 값을 0으로 설정하여, 상기 학습 이미지를 생성할 수 있다.

상기 문서 일치 확인부는, 상기 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색 정보 및 분포를 기초로, 문서의 일치 여부를 확인할 수 있다.

본 발명의 일 실시예에 따르면, 출력 문서에 대한 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리함으로써, 출력 문서에 대한 파쇄 및 반출 처리를 편리하고 정확하게 처리할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 문서의 출력, 보유, 이관, 반출 또는 파쇄 등의 과정을 전부 추적함으로써, 출력 문서 관리에 대한 보안성을 확보할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 출력 문서에 대한 스캔 이미지와 원본 이미지를 비교하여, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리함으로써, 텍스트 이외에 이미지 등을 포함하여 다양한 포멧으로 구성된 출력 문서에 대한 보안을 관리할 수 있다.

본 발명의 효과는 상기한 효과로 한정되는 것은 아니며, 본 발명의 상세한 설명 또는 특허청구범위에 기재된 발명의 구성으로부터 추론 가능한 모든 효과를 포함하는 것으로 이해되어야 한다.

도 1은 본 발명의 일 실시예에 따른 출력 문서 보안 관리 시스템을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 문서를 출력하는 과정을 도시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 출력 문서에 대한 파쇄를 처리하는 과정을 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 출력 문서에 대한 반출을 처리하는 과정을 도시한 도면이다.
도 5는 본 발명의 일 실시예에 따른 문서 관리 서버의 구성을 도시한 블록도이다.
도 6은 본 발명의 일 실시예에 따른 스캔 이미지를 보정하는 과정을 도시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 스캔 이미지에서 식별코드 존재 여부로 문서 방향을 확인하는 과정을 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 스캔 이미지에서 식별 코드의 정확한 위치를 추출하는 과정을 도시한 도면이다.
도 9는 본 발명의 일 실시예에 따른 스캔 이미지의 식별 코드 위치정보를 기반으로 문서 영역을 특정하고 보정하는 과정을 도시한 도면이다.
도 10은 본 발명의 일 실시예에 따른 원본 이미지의 3채널 RGB 색 정보를 1 채널 Gray 정보로 변경하고, 문서 방향을 변경하는 과정을 도시한 도면이다.
도 11은 본 발명의 일 실시예에 따른 학습 이미지를 생성하는 과정을 도시한 도면이다.
도 12는 본 발명의 일 실시예에 따른 학습 이미지를 편집하는 과정을 도시한 도면이다.
도 13은 본 발명의 일 실시예에 따른 학습 이미지를 도시한 도면이다.

이하에서는 첨부한 도면을 참조하여 본 발명을 설명하기로 한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 따라서 여기에서 설명하는 실시예로 한정되는 것은 아니다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 부재를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 구비할 수 있다는 것을 의미한다.

이하 첨부된 도면을 참고하여 본 발명의 실시예를 상세히 설명하기로 한다.

도 1은 본 발명의 일 실시예에 따른 출력 문서 보안 관리 시스템을 도시한 도면이다.

도 1을 참조하면, 출력 문서 보안 관리 시스템은 통신망을 통해 서로 통신 가능한 인쇄 장치(100), 문서 관리 서버(200), 문서 파쇄 장치(300) 및 보안 검색 장치(400)를 포함할 수 있다.

먼저, 통신망은 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있다. 예를 들어, 근거리 통신망(LAN: Local Area Network), 도시권 통신망(MAN: Metropolitan Area Network), 광역 통신망(WAN: Wide Area Network) 등 다양한 통신망으로 구성될 수 있으며, 특히, 인트라넷(Intranet) 환경을 통해 내부 정보 통신망으로 구성되는 것이 바람직할 수 있다.

인쇄 장치(100)는 프린터, 복합기 등 문서를 출력할 수 있는 다양한 장치로 구현될 수 있으며, 문서에 대한 출력이 요청되면, 문서에 대한 출력 데이터를 추출하고, 추출된 출력 데이터를 기초로 문서를 인쇄할 수 있다. 이 때, 인쇄 장치(100)는 문서에 식별 코드를 추가하여 식별 코드가 포함된 문서를 인쇄할 수 있다.

본 발명의 일 실시예에 따르면, 식별 코드는 문서 출력 시 생성되는 코드 정보로, 출력자 정보, 출력 시간 정보, 출력 문서 정보 등이 포함될 수 있으며, 바코드, QR 코드 등의 형태로 문서에 추가되어 인쇄될 수 있다.

인쇄 장치(100)는 문서에 대한 인쇄가 완료되면, 출력자 정보, 출력 시간 정보, 출력 문서 정보, 식별 코드 정보 등을 포함하는 출력 정보를 문서 관리 서버(200)로 전송할 수 있다.

문서 관리 서버(200)는 인쇄 장치(100)에서 문서에 대한 인쇄가 완료되면, 출력 문서에 대한 원본 이미지를 데이터베이스에 저장할 수 있으며, 출력 문서에 대한 반출이 승인되면, 출력 문서에 대한 원본 이미지를 데이터베이스에 저장할 수 있다.

문서 관리 서버(200)는 출력 문서에 대한 파쇄 또는 반출 요청으로, 출력 문서에 포함된 식별 코드가 인식되면, 인식된 식별 코드 정보를 문서 파쇄 장치(300) 또는 보안 검색 장치(400)로부터 수신할 수 있으며, 수신된 식별 코드 정보에 기초하여 출력 문서에 대한 원본 이미지를 데이터베이스에서 획득할 수 있다.

문서 관리 서버(200)는 출력 문서의 스캔으로 생성된 스캔 이미지를 문서 파쇄 장치(300) 또는 보안 검색 장치(400)로부터 수신할 수 있으며, 수신된 스캔 이미지와 데이터베이스로부터 획득된 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있다.

문서 관리 서버(200)는 스캔 이미지와 원본 이미지를 비교한 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리할 수 있다.

구체적으로, 문서 파쇄 장치(300)로부터 출력 문서에 대한 파쇄가 요청된 경우, 문서 관리 서버(200)는 문서 파쇄 장치(300)에서 스캔된 출력 문서에 대한 스캔 이미지를 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지와 비교하여, 문서의 일치 여부를 확인할 수 있으며, 문서가 일치하는 것으로 확인되면, 출력 문서 파쇄 처리 요청을 문서 파쇄 장치(300)로 전송하여, 출력 문서에 대한 파쇄가 수행되도록 처리할 수 있다.

또한, 보안 검색 장치(400)로부터 출력 문서에 대한 반출이 요청된 경우, 문서 관리 서버(200)는 보안 검색 장치(400)에서 스캔된 출력 문서에 대한 스캔 이미지를 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지와 비교하여, 문서의 일치 여부를 확인할 수 있으며, 문서가 일치하는 것으로 확인되면, 출력 문서 반출 처리 요청을 보안 검색 장치(400)로 전송하여, 출력 문서에 대한 반출이 수행되도록 처리할 수 있다.

문서 파쇄 장치(300) 및 보안 검색 장치(400)는 출력 문서를 스캔할 수 있는 스캐너 기기를 구비하거나, 스캐너 기기와 연결되어 있으며, 스캐너 기기에 출력 문서가 삽입되면, 출력 문서에 포함된 식별 코드를 인식하고, 출력 문서에 대한 스캔을 통해 출력 문서에 대한 스캔 이미지를 생성할 수 있다.

문서 파쇄 장치(300) 및 보안 검색 장치(400)에 구비된 스캐너 기기는 대량 문서를 스캔할 수 있는 파일 스캐너, 소량 문서를 스캔할 수 있는 핸드 스캐너 등 다양한 형태로 구현될 수 있다.

문서 파쇄 장치(300)는 스캐너 기기를 통해 출력 문서가 입력되면, 출력 문서의 스캔을 통해 출력 문서에 포함된 식별 코드를 인식할 수 있으며, 인식된 식별 코드 정보를 포함하는 출력 문서 파쇄 요청을 문서 관리 서버(200)로 전송할 수 있다.

문서 파쇄 장치(300)는 스캐너 기기를 통해 출력 문서를 스캔하여, 출력 문서에 대한 스캔으로 출력 문서에 대한 스캔 이미지를 생성할 수 있으며, 생성된 스캔 이미지를 문서 관리 서버(200)로 전송할 수 있다.

문서 파쇄 장치(300)는 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 문서 관리 서버(200)로부터 출력 문서 파쇄 처리 요청을 수신할 수 있으며, 출력 문서 파쇄 처리 요청에 따라 출력 문서에 대한 파쇄가 수행되도록 처리할 수 있다.

보안 검색 장치(400)는 스캐너 기기를 통해 출력 문서가 입력되면, 출력 문서의 스캔을 통해 출력 문서에 포함된 식별 코드를 인식할 수 있으며, 인식된 식별 코드 정보를 포함하는 출력 문서 반출 요청을 문서 관리 서버(200)로 전송할 수 있다.

보안 검색 장치(400)는 스캐너 기기를 통해 출력 문서를 스캔하여, 출력 문서에 대한 스캔으로 출력 문서에 대한 스캔 이미지를 생성할 수 있으며, 생성된 스캔 이미지를 문서 관리 서버(200)로 전송할 수 있다. 이 때, 보안 검색 장치(400)는 보안 검색 장치(400)에 구비된 스캐너 기기를 통해 출력 문서를 스캔할 수 있으며, 보안 요원이 소지한 별도의 스캐너 기기를 통해 출력 문서를 스캔할 수도 있다.

보안 검색 장치(400)는 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 문서 관리 서버(200)로부터 출력 문서 반출 처리 요청을 수신할 수 있으며, 출력 문서 반출 처리 요청에 따라 출력 문서에 대한 반출이 수행되도록 처리할 수 있다.

도 2는 본 발명의 일 실시예에 따른 문서를 출력하는 과정을 도시한 도면이다.

이하에서는, 설명의 편의를 위해, 출력이 요청된 문서는 원본 문서로 칭하고, 출력 요청에 따라 인쇄된 문서는 출력 문서로 칭한다.

먼저, 문서 출력 요청 단계(S201)에서, 사용자 단말(미도시)은 원본 문서에 대한 출력 요청을 인쇄 장치(100)로 전송할 수 있다.

예를 들어, 사용자 단말(미도시)에서 원본 문서을 인쇄하기 위한 메뉴가 선택되면, 인쇄 장치(100)는 사용자 단말(미도시)로부터 원본 문서에 대한 출력 요청을 수신할 수 있다.

이후, 식별 코드 생성 단계(S202)에서, 인쇄 장치(100)는 원본 문서에 대한 출력 요청에 따라 식별 코드를 생성할 수 있다.

인쇄 장치(100)는 출력자 정보, 출력 시간 정보, 원본 문서 정보 등을 기초로, 식별 코드를 생성할 수 있으며, 원본 문서가 복수의 페이지로 구성된 경우, 페이지마다 고유의 식별 코드를 각각 생성할 수 있다.

이후, 식별 코드 추가 단계(S203)에서, 인쇄 장치(100)는 식별 코드를 원본 문서에 추가할 수 있다. 이 때, 원본 문서가 복수의 페이지로 구성된 경우, 인쇄 장치(100)는 페이지마다 각각 생성된 식별 코드를 각각의 페이지에 추가할 수 있다.

인쇄 장치(100)는 원본 문서에 식별 코드를 추가할 때, 미리 설정된 영역(예를 들면, 우측 하단)에 식별 코드를 추가할 수 있다.

상술한 바와 같이, 식별 코드 생성 및 식별 코드 추가 과정은 인쇄 장치(100)에 의해 수행될 수 있지만, 이에 제한되지 않으며, 문서 관리 서버(200)에서 식별 코드 생성 및 식별 코드 추가 과정을 수행한 후, 식별 코드가 추가된 원본 문서를 인쇄 장치(100)로 전송할 수 있다.

이후, 문서 출력 단계(S204)에서, 인쇄 장치(100)는 식별 코드가 추가된 원본 문서를 출력하여 인쇄할 수 있다. 이 때, 인쇄 장치(100)는 식별 코드가 워터 마크 형식으로 표시되도록 인쇄할 수도 있다.

이후, 출력 정보 저장 단계(S205)에서, 인쇄 장치(100)는 출력 문서에 대한 인쇄가 완료되면, 출력자 정보, 출력 시간 정보, 출력 문서 정보, 식별 코드 정보 등을 포함하는 출력 정보를 문서 관리 서버(200)로 전송할 수 있다.

문서 관리 서버(200)는 인쇄 장치(100)로부터 수신된 출력 정보를 데이터베이스에 저장하여 관리할 수 있으며, 출력 정보를 통해 획득된 출력 문서에 대한 원본 이미지 및 식별 코드 정보를 데이터베이스에 별도로 저장하여 관리할 수도 있다.

문서 출력 시, 출력 문서에 대한 파쇄 기간이 설정될 수 있으며, 문서 관리 서버(200)는 설정된 파쇄 기간 정보를 출력 문서에 대한 원본 이미지와 함께 데이터베이스에 저장하여 관리할 수 있다.

도 3은 본 발명의 일 실시예에 따른 출력 문서에 대한 파쇄를 처리하는 과정을 도시한 도면이다.

먼저, 출력 문서 파쇄 요청 단계(S301)에서, 문서 파쇄 장치(300)에 파쇄 처리하기 위한 출력 문서가 입력되어, 출력 문서에 대한 파쇄가 요청될 수 있다.

이후, 식별 코드 인식 단계(S302)에서, 문서 파쇄 장치(300)는 스캐너 기기를 통해 출력 문서를 스캔하여, 출력 문서에 포함된 식별 코드를 인식할 수 있으며, 인식된 식별 코드 정보를 문서 관리 서버(200)로 전송할 수 있다.

또한, 문서 파쇄 장치(300)는 출력 문서에 대한 스캔으로 출력 문서에 대한 스캔 이미지를 생성하여, 생성된 스캔 이미지를 문서 관리 서버(200)로 전송할 수 있다.

이후, 원본 이미지 획득 단계(S303)에서, 문서 관리 서버(200)는 식별 코드에 기초하여 출력 문서에 대한 원본 이미지를 데이터베이스에서 획득할 수 있다. 이 때, 문서 관리 서버(200)는 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 획득할 수 있다.

문서 관리 서버(200)는 출력 문서에 포함된 식별 코드가 훼손 등으로 인해 제대로 인식되지 않은 경우, 데이터베이스에 저장된 다수의 이미지와 스캔 이미지를 비교하여, 동일 문서일 확률이 높은 후보 이미지를 선별할 수 있으며, 후보 이미지 중 사용자에 의해 선택된 이미지를 원본 이미지로 획득할 수 있다.

이후, 문서 일치 여부 확인 단계(S304)에서, 문서 관리 서버(200)는 문서 파쇄 장치(300)에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있다. 이 때, 원본 문서가 복수의 페이지로 구성된 경우, 문서 관리 서버(200)는 페이지 별로 스캔 이미지와 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있으며, 페이지 별로 파쇄 여부를 확인할 수도 있다.

출력 문서 파쇄 처리 단계(S305)에서, 문서 관리 서버(200)는 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서 파쇄 처리 요청을 문서 파쇄 장치(300)로 전송할 수 있으며, 문서 파쇄 장치(300)는 출력 문서 파쇄 처리 요청에 따라 출력 문서에 대한 파쇄가 수행되도록 처리할 수 있다.

출력 문서에 대한 파쇄가 완료되면, 문서 파쇄 장치(300)는 출력 문서 파쇄 완료 정보를 문서 관리 서버(200)로 전송할 수 있으며, 문서 관리 서버(200)는 출력 문서에 대한 파쇄 완료 처리를 수행하여, 데이터베이스에 저장된 원본 이미지가 삭제되도록 처리할 수 있다.

도 4는 본 발명의 일 실시예에 따른 출력 문서에 대한 반출을 처리하는 과정을 도시한 도면이다.

먼저, 출력 문서 반출 승인 요청 단계(S401)에서, 사용자 단말(미도시)을 통해 출력 문서에 대한 반출 승인이 요청될 수 있으며, 문서 관리 서버(200)는 출력 문서를 담당하는 담당자 계정으로 출력 문서에 대한 반출 승인 요청 메시지를 전송할 수 있다.

이후, 출력 문서 반출 승인 단계(S402)에서, 담당자 계정을 통해 로그인된 사용자 단말(미도시)에서 출력 문서에 대한 반출을 승인할 수 있으며, 문서 관리 서버(200)는 출력 문서에 대한 반출 승인 시 출력 문서에 대한 원본 이미지를 데이터베이스에 저장할 수 있다.

이후, 출력 문서 반출 요청 단계(S403)에서, 보안 검색 장치(400)에 반출 처리하기 위한 출력 문서가 입력되어, 출력 문서에 대한 반출이 요청될 수 있다.

이후, 식별 코드 인식 단계(S404)에서, 보안 검색 장치(400)는 스캐너 기기를 통해 출력 문서를 스캔하여, 출력 문서에 포함된 식별 코드를 인식할 수 있으며, 인식된 식별 코드 정보를 문서 관리 서버(200)로 전송할 수 있다. 이 때, 보안 검색 장치(400)에 구비된 스캐너 기기를 통해 출력 문서가 스캔될 수 있으며, 보안 요원이 소지한 별도의 스캐너 기기를 통해 출력 문서가 스캔될 수도 있다.

또한, 보안 검색 장치(400)는 출력 문서에 대한 스캔으로 출력 문서에 대한 스캔 이미지를 생성하여, 생성된 스캔 이미지를 문서 관리 서버(200)로 전송할 수 있다.

이후, 원본 이미지 획득 단계(S405)에서, 문서 관리 서버(200)는 식별 코드에 기초하여 출력 문서에 대한 원본 이미지를 데이터베이스에서 획득할 수 있다. 이 때, 문서 관리 서버(200)는 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 획득할 수 있다.

문서 관리 서버(200)는 반출 요청된 출력 문서가 반출 승인되었는지 여부를 확인할 수 있으며, 반출 승인된 것으로 확인되면, 출력 문서에 대한 원본 이미지를 획득할 수 있다.

이후, 문서 일치 여부 확인 단계(S406)에서, 문서 관리 서버(200)는 보안 검색 장치(400)에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있다. 이 때, 원본 문서가 복수의 페이지로 구성된 경우, 문서 관리 서버(200)는 페이지 별로 스캔 이미지와 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있으며, 페이지 별로 반출 승인 여부를 확인할 수도 있다.

출력 문서 반출 처리 단계(S407)에서, 문서 관리 서버(200)는 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서 반출 처리 요청을 보안 검색 장치(400)로 전송할 수 있으며, 보안 검색 장치(400)는 출력 문서 반출 처리 요청에 따라 출력 문서에 대한 반출이 수행되도록 처리할 수 있다.

출력 문서에 대한 반출이 완료되면, 보안 검색 장치(400)는 출력 문서 반출 완료 정보를 문서 관리 서버(200)로 전송할 수 있으며, 문서 관리 서버(200)는 출력 문서에 대한 반출 완료 처리를 수행하여, 출력 문서에 대한 상태 정보를 변경할 수 있다.

도 5는 본 발명의 일 실시예에 따른 문서 관리 서버(200)의 구성을 도시한 블록도이다.

도 5를 참조하면, 문서 관리 서버(200)는 이미지 처리부(210), 문서 일치 확인부(220) 및 출력 문서 처리부(230)를 포함할 수 있다.

먼저, 이미지 처리부(210)는 원본 문서에 대한 출력 요청에 따라 생성된 식별 코드가 원본 문서에 추가되어 인쇄 장치(100)를 통해 출력 문서가 인쇄되면, 출력 문서에 대한 원본 이미지를 문서 관리 서버(200)의 데이터베이스에 저장할 수 있다.

이미지 처리부(210)는 출력 문서에 대한 파쇄 또는 반출 요청으로, 출력 문서의 스캔을 통해 출력 문서에 포함된 식별 코드가 인식되면, 식별 코드에 기초하여 출력 문서에 대한 원본 이미지를 문서 관리 서버(200)의 데이터베이스에서 획득할 수 있다.

문서 일치 확인부(220)는 출력 문서의 스캔으로 생성된 스캔 이미지와 이미지 처리부(210)에서 획득한 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있다.

출력 문서 처리부(230)는 문서 일치 확인부(220)에서 스캔 이미지와 원본 이미지를 비교한 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리할 수 있다.

구체적으로, 출력 문서에 대한 파쇄 처리 시, 문서 일치 확인부(220)는 문서 파쇄 장치(300)에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있으며, 출력 문서 처리부(230)는 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄가 수행되도록 처리할 수 있다.

출력 문서에 대한 반출 처리 시, 문서 일치 확인부(220)는 보안 검색 장치(400)에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인할 수 있으며, 출력 문서 처리부(230)는 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 반출이 수행되도록 처리할 수 있다.

이하에서는, 문서의 일치 여부를 확인하는 과정에 대한 상세한 설명을 기능별로 구분하여 자세히 설명하기로 한다.

스캔 이미지 보정

이미지 처리부(210)는 출력 문서의 스캔으로 생성된 스캔 이미지에서 에지 포인트를 추출하고, 추출된 에지 포인트를 이용하여 스캔 이미지에 대한 기울기를 산출할 수 있으며, 산출된 기울기에 기초하여 스캔 이미지를 보정할 수 있다. 이와 관련된 자세한 내용은 도 6을 참조하여 설명하기로 한다.

도 6은 본 발명의 일 실시예에 따른 스캔 이미지를 보정하는 과정을 도시한 도면이다.

먼저, 이미지 처리부(210)는 출력 문서의 스캔으로 생성된 스캔 이미지를 그레이 스케일(Gray Scale) 형태로 변환한 후, 콘트라스트(Contrast)를 높여 밝은 부분과 어두운 부분 간의 격차가 크도록 설정할 수 있다.

이후, 이미지 처리부(210)는 상하 또는 좌우 측면의 밝기 변화를 감지하여, 에지 포인트에 대한 좌표를 추출할 수 있으며, 추출된 에지 포인트 좌표를 이용하여 문서의 기울기를 산출할 수 있다. 이 때, 이미지 처리부(210)는 도 6a에 도시된 바와 같이, 스캔 이미지에서 에지 포인트를 통해 가상의 선을 추출할 수 있다.

이후, 이미지 처리부(210)는 가상의 선을 통해 문서의 기울기를 산출하여, 산출된 기울기에 기초하여 스캔 이미지를 보정할 수 있으며, 예를 들어, 도 6b에 도시된 바와 같이 기울어진 스캔 이미지를 도 6c에 도시된 바와 같이 기울어진 것이 보정된 스캔 이미지로 변경시킬 수 있다.

스캔 이미지 문서 방향 확인 및 식별 코드 영역 추출

이미지 처리부(210)는 스캔 이미지에서 확인되는 식별 코드의 위치를 통해 문서 회전 정보를 획득하고, 획득된 문서 회전 정보에 기초하여 스캔 이미지의 문서 방향을 확인할 수 있다. 이와 관련된 자세한 내용은 도 7을 참조하여 설명하기로 한다.

도 7은 본 발명의 일 실시예에 따른 스캔 이미지의 문서 방향을 확인하는 과정을 도시한 도면이다.

먼저, 이미지 처리부(210)는 스캔 이미지에서 식별 코드가 존재할 가능성이 있는 복수의 영역 이미지를 추출할 수 있다.

예를 들어, 도 7a에 도시된 바와 같이, 스캔 이미지에서 식별 코드가 존재할 수 있는 영역이 제1 영역(좌측 상단), 제2 영역(우측 하단), 제3 영역(좌측 하단), 제4 영역(우측 상단)으로 설정되어 있는 경우, 이미지 처리부(210)는 제1 영역, 제2 영역, 제3 영역 및 제4 영역 각각의 이미지를 추출할 수 있으며, 추출된 이미지를 상단부터 하단의 순서대로 나열하는 방식을 통해 조합하여 도 7b에 도시된 바와 같이, 검출 이미지를 재생성할 수 있다.

이미지 처리부(210)는 검출 이미지에서 식별 코드를 검출할 수 있는데, 스캔 이미지 보다 크기가 작은 검출 이미지에서 식별 코드를 검출하기 때문에, 스캔 이미지 전체를 검색하지 않아도 되므로, 검색 효율이 향상되어 검색 시간을 단축시킬 수 있다.

이미지 처리부(210)는 검출 이미지에서 식별 코드의 위치를 찾아 식별 코드가 위치하는 영역을 검출할 수 있으며, 식별 코드가 검출된 영역의 위치를 통해 문서 회전 정보를 획득하여, 스캔 이미지의 문서 방향을 확인할 수 있다.

먼저, 제1 영역 내지 제4 영역의 이미지가 조합된 검출 이미지에서 식별 코드가 존재하는 위치를 찾아낸다. 일 실시예에 따르면, 상기 조합된 검출 이미지에서 식별 코드의 존재 위치에 대한 좌표를 통해 식별 코드의 위치를 찾아낼 수 있다.

예를 들어, 도 7b에 도시된 바와 같이, 좌측 하단을 기준으로 (l,m) 좌표의 위치에 식별 코드가 위치하면, 제3 영역에 식별 코드가 위치하는 것으로 판단될 수 있다. 또한, 이 과정에서 이미지 처리부(210)는 식별 코드에 해당하는 영역, 즉, (l,m) 좌표를 기준으로 하는 사각형 영역을 추출할 수 있다.

그 후, 이미지 처리부(210)는 제1 영역 내지 제4 영역 중 식별 코드가 위치하는 영역에 기초하여, 문서의 방향을 판단할 수 있다.

예를 들어, 제1 영역에서 식별 코드가 검출되면, 스캔 이미지의 문서 방향이 상하 뒤집힌 세로 문서로 확인될 수 있으며, 제2 영역에서 식별 코드가 검출되면, 스캔 이미지의 문서 방향이 정방향의 세로 문서로 확인될 수 있으며, 제3 영역에서 식별 코드가 검출되면, 시계 방향으로 회전된 가로 문서로 확인될 수 있으며, 제4 영역에서 식별 코드가 검출되면, 스캔 이미지의 문서 방향이 반시계 방향으로 회전된 가로 문서로 확인될 수 있다.

즉, 식별 코드의 위치를 확인하는 것만으로 스캔 이미지의 문서 방향이 확인될 수 있으며, 이 과정에서 식별 코드의 대략적인 영역이 추출될 수 있다.

식별 코드 영역 보정

이미지 처리부(210)는 식별 코드가 검출된 영역에서 식별 코드만을 더욱 명확하게 추출하여 식별 코드 영역을 보정할 수 있다. 이와 관련된 자세한 내용은 도 8을 참조하여 설명하기로 한다.

도 8a 및 도 8b를 참조하면, 이미지 처리부(210)는 도 7을 참조하여 설명한 과정을 통해 식별 코드에 해당하는 대략적인 영역을 추출할 수 있다. 이렇게 추출된 식별 코드 영역 내에는 정상적인 경우 식별 코드 전부가 포함되지만, 그렇지 않은 경우, 식별 코드의 가장자리 영역이 일부 불포함될 수도 있다.

따라서, 추출된 식별 코드 영역을 도 8c에 도시된 바와 같이 확장시킬 필요가 있다.

구체적으로, 도 8c에 도시된 바와 같이, 8b에 도시된 식별 코드 영역의 상하좌우 영역을 문서의 스캔 이미지 내에서 일정 폭만큼 확장시켜 새로운 이미지를 획득한다.

그 후, 도 8d에 도시된 바와 같이 확장된 영역에서 정확한 식별 코드 영역을 추출해낸다. 예를 들면, 음영 변화가 강인하게 발생하는 영역을 검출하여 식별 코드 영역의 좌상단 좌표를 특정할 수 있고, 해당 좌표를 기준으로 우하단으로 확장되는 정사각형 영역을 최종적인 식별 코드 영역으로 추출해냄으로써, 완전한 형태의 식별 코드를 추출할 수 있다.

문서 영역 특정

이미지 처리부(210)는 스캔 이미지 내에서 문서에 해당하는 영역만을 추출해낼 수 있다. 이와 관련된 자세한 내용은 도 9를 참조하여 설명하기로 한다.

이미지 처리부(210)는 도 9a에 도시된 스캔 이미지에서 식별 코드를 기준으로 문서의 최 가장자리 영역을 특정하고, 특정된 영역을 크롭(crop)한다.

세로 방향 문서에서 식별 코드가 인쇄되는 위치, 가로 방향 문서에서 식별 코드가 인쇄되는 위치는 항상 고정되어 있기 때문에, 식별 코드의 위치를 기준으로 문서의 가장자리를 특정해낼 수 있다.

예를 들어, 도 9a에 도시된 바와 같이 문서가 상하 역방향으로 스캔된 경우에는, 식별 코드의 좌상단 좌표가 기준점이 될 수 있고, 해당 기준점을 기준으로 상하좌우 각각 a, b, c, d 거리만큼 떨어진 곳이 문서의 상하좌우 가장자리가 지나는 지점으로 특정될 수 있다.

이러한 방식으로 도 9b에 도시된 바와 같이, 문서의 상하좌우 가장자리를 특정할 수 있고, 해당 가장자리를 따라 크롭(crop)함으로써, 문서 영역만을 특정할 수 있다.

문서 방향 변경

이미지 처리부(210)는 스캔 이미지와 원본 이미지의 문서 방향을 비교한 후, 문서 방향이 상이한 것으로 확인되면, 스캔 이미지 또는 원본 이미지의 문서 방향을 변경시킬 수 있다. 이와 관련된 자세한 내용은 도 10을 참조하여 설명하기로 한다.

도 10은 본 발명의 일 실시예에 따른 이미지의 문서 방향을 변경하는 과정을 도시한 도면이다.

먼저, 이미지 처리부(210)는 스캔 이미지 또는 원본 이미지의 문서 방향을 확인하고, 스캔 이미지와 원본 이미지의 문서 방향이 동일하도록 처리할 수 있다.

예를 들어, 도 10a에 도시된 바와 같이, 원본 이미지의 문서 방향이 세로 방향인 경우, 이미지 처리부(210)는 원본 이미지의 문서 방향을 별도로 변경시키지 않고, 세로 방향을 유지하도록 처리할 수 있으며, 도 10b에 도시된 바와 같이, 문서 방향 변경 없이 색 형태만을 그레이 스케일(Gray Scale)로 변경시킬 수 있다.

원본 이미지의 문서 방향이 가로 방향인 경우, 이미지 처리부(210)는 원본 이미지를 시계 방향으로 회전시켜, 세로 방향이 되도록 처리할 수 있다.

학습 이미지 생성

이미지 처리부(210)는 문서 방향과 색 형태가 동일하도록 보정된 원본 이미지 및 스캔 이미지를 결합하여 학습 이미지를 생성할 수 있다. 이와 관련된 자세한 내용은 도 11을 참조하여 설명하기로 한다.

도 11은 본 발명의 일 실시예에 따른 학습 이미지를 생성하는 과정을 도시한 도면이다.

먼저, 이미지 처리부(210)는 도 11a에 도시된 바와 같이, 원본 이미지 및 스캔 이미지에 대한 문서 방향과 색 형태가 동일하도록 보정 처리할 수 있다.

이후, 이미지 처리부(210)는 원본 이미지와 스캔 이미지를 결합하여, 두 개의 이미지가 중첩된 학습 이미지를 생성할 수 있다. 이 때, 도 6에서 설명한 기울기 산출과 도 8에서 설명한 식별 코드 좌표 특정 시 발생할 수 있는 보정 노이즈를 고려하여 강제로 임의의 보정 노이즈를 적용한 다수의 학습이미지를 추가로 생성할 수 있다.

학습 이미지 생성 시, 이미지 처리부(210)는 학습 이미지의 RGB 채널 중 어느 하나인 제1 채널 값을 원본 이미지로 설정하고, 학습 이미지의 RGB 채널 중 다른 하나인 제2 채널 값을 스캔 이미지로 설정하고, 학습 이미지의 RGB 채널 중 또 다른 하나인 제3 채널 값을 0으로 설정하여, 학습 이미지를 생성할 수 있다.

예를 들어, 이미지 처리부(210)는 학습 이미지의 R 채널 값을 원본 이미지의 그레이 스케일 값으로 설정하고, 학습 이미지의 G 채널 값을 스캔 이미지의 그레이 스케일 값으로 설정하고, 학습 이미지의 B 채널 값을 0으로 설정하여, 도 11b에 도시된 바와 같이, 학습 이미지를 생성할 수 있다.

학습 이미지 편집

이미지 처리부(210)는 식별 코드가 위치하는 영역이 포함되지 않도록, 학습 이미지를 편집할 수 있다. 이와 관련된 자세한 내용은 도 12를 참조하여 설명하기로 한다.

도 12는 본 발명의 일 실시예에 따른 학습 이미지를 편집하는 과정을 도시한 도면이다.

이미지 처리부(210)는 도 12a에 도시된 바와 같이, 학습 이미지에서 식별 코드의 위치를 확인한 후, 식별 코드를 기준으로 일정 거리 이상 떨어진 영역을 잘라냄으로써, 학습 이미지 내에서 식별 코드 등 불필요한 영역을 도 12b에 도시된 바와 같이 잘라낼 수 있다.

예를 들어, 도 12a에 도시된 바와 같이, 문서의 우측 하단에 식별 코드가 포함되는 경우, 이는 문서가 정방향의 세로 방향 문서라는 것이므로, 하단 가장자리로부터 a 거리까지, 좌측 가장자리로부터 b 거리까지를 잘라낼 수 있다.

문서 일치 여부 확인

문서 일치 확인부(220)는 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색 정보 및 분포를 기초로, 스캔 이미지와 원본 이미지에 대한 문서 일치 여부를 확인할 수 있다. 이와 관련된 자세한 내용은 도 13을 참조하여 설명하기로 한다.

도 13은 본 발명의 일 실시예에 따른 학습 이미지를 도시한 도면이다.

먼저, 이미지 처리부(210)는 상술한 바와 같이, 학습 이미지의 RGB 채널 값을 각각 설정하여, 학습 이미지를 생성할 수 있는데, 예를 들어, 학습 이미지의 R 채널 값을 원본 이미지의 그레이 스케일 값으로 설정하고, 학습 이미지의 G 채널 값을 스캔 이미지의 그레이 스케일 값으로 설정하고, 학습 이미지의 B 채널 값을 0으로 설정하여, 학습 이미지를 생성할 수 있다.

즉, 학습 이미지는 RGB 채널 각각에 설정된 값(원본 이미지의 그레이 스케일 값, 스캔 이미지의 그레이 스케일 값 및 0)을 기초로 색이 결정될 수 있다.

예를 들어, 출력 영역의 그레이 스케일 값은 0이고, 여백 영역의 그레이 스케일 값은 255인데, 원본 이미지의 출력 영역과 스캔 이미지의 출력 영역이 중첩되는 경우, 학습 이미지의 RGB 채널 값은 (0,0,0)으로 검정색으로 표시될 수 있으며, 원본 이미지의 여백 영역과 스캔 이미지의 출력 영역이 중첩되는 경우, 학습 이미지의 RGB 채널 값은 (255,0,0)으로 빨간색으로 표시될 수 있으며, 원본 이미지의 출력 영역과 스캔 이미지의 여백 영역이 중첩되는 경우, 학습 이미지의 RGB 채널 값은 (0,255,0)으로 초록색으로 표시될 수 있으며, 원본 이미지의 여백 영역과 스캔 이미지의 여백 영역이 중첩되는 경우, 학습 이미지의 RGB 채널 값은 (255,255,0)으로 노란색으로 표시될 수 있다.

즉, 원본 이미지와 스캔 이미지가 동일한 영역은 검정색 또는 노란색으로 표시될 수 있으며, 원본 이미지와 스캔 이미지가 상이한 영역은 빨간색 또는 초록색으로 표시될 수 있다.

이에 따라, 문서 일치 확인부(220)는 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색을 기초로, 문서의 일치 여부를 확인할 수 있다.

예를 들어, 도 13a에 도시된 바와 같이, 학습 이미지가 검정색 및 노란색으로만 표시되어 있는 경우, 문서 일치 확인부(220)는 원본 이미지와 스캔 이미지의 문서가 일치하는 것으로 판단할 수 있다.

또한, 도 13b에 도시된 바와 같이, 학습 이미지에 빨간색 및 초록색으로 표시된 영역이 일정 영역 이상인 경우, 문서 일치 확인부(220)는 원본 이미지와 스캔 이미지의 문서가 일치하지 않은 것으로 판단할 수 있다.

또한, 보정 시 발생하는 노이즈로 인해 정확히 영역이 일치하지 않는 경우의 문서 일치여부 판단을 위해, 상기 설명한 보정값 들에 노이즈를 일부러 추가하여 다양한 학습 데이터를 생성한 후, CNN(Convolution Neural Network)을 적용하여 정확히 영역이 일치하지 않는 경우라도 학습을 통해 일치 여부를 판단할 수 있다.

이와 같이, 본 발명의 일 실시예에 따르면, 출력 문서에 대한 스캔 이미지와 원본 이미지의 비교 결과, 문서가 일치하는 것으로 확인되면, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리함으로써, 출력 문서에 대한 파쇄 및 반출 처리를 편리하고 정확하게 처리할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 문서의 출력, 보유, 이관, 반출 또는 파쇄 등의 과정을 전부 추적함으로써, 출력 문서 관리에 대한 보안성을 확보할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 출력 문서에 대한 스캔 이미지와 원본 이미지를 비교하여, 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리함으로써, 텍스트 이외에 이미지 등을 포함하여 다양한 포멧으로 구성된 출력 문서에 대한 보안을 관리할 수 있다.

본 발명의 일 실시예에 따르면, 스캔 이미지와 원본 이미지의 정확한 중첩을 위해 컴퓨터 비전 및 딥러닝 기술을 활용하여 스캔 이미지에 대한 전처리 과정을 수행할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 전처리된 스캔 이미지와 식별 코드를 통해 획득된 원본 이미지를 중첩하여 학습 이미지를 생성한 후, CNN을 활용하여 텍스트 인식이 아닌 이미지 인식으로 문서의 일치 여부를 확인할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 출력 문서를 파일 단위가 아닌 페이지 별로 파쇄 및 반출 여부를 관리할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 출력 문서에 포함된 식별 코드가 훼손 등으로 인해 원본 이미지가 획득되지 않은 경우, 데이터베이스에 저장된 다수의 이미지와 스캔 이미지를 비교하여, 동일 문서일 확률이 높은 후보 이미지를 선별할 수 있으며, 후보 이미지 중 사용자에 의해 선택된 이미지를 원본 이미지로 획득할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 출력 문서가 인쇄된 후 소유권 변동이 발생하면 소유권 이관 기능을 통한 파쇄 여부를 관리할 수 있으며, 예를 들어, A 사용자 계정을 통해 출력 문서를 인쇄한 후, 인쇄된 출력 문서가 B 사용자에게 전달된 경우, 출력 문서에 대한 소유권은 B 사용자로 변경되어, 출력 문서에 대한 파쇄 담당자는 B 사용자로 설정될 수 있다.

또한, 본 발명의 일 실시예에 따르면, 반출되는 문서의 원본 이미지를 별도로 저장하고, 승인 절차를 통한 반출 프로세스 구축 및 승인 여부를 즉시 판단할 수 있는 기능을 제공할 수 있다.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.

본 발명의 범위는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

100 : 인쇄 장치
200 : 문서 관리 서버
210 : 이미지 처리부
220 : 문서 일치 확인부
230 : 출력 문서 처리부
300 : 문서 파쇄 장치
400 : 보안 검색 장치

Claims (26)

1. 문서 관리 서버에서, 출력 문서에 대한 보안을 관리하는 방법에 있어서,
   (a) 상기 출력 문서에 대한 파쇄 또는 반출 요청으로, 상기 출력 문서의 스캔을 통해 상기 출력 문서에 포함된 식별 코드가 인식되면, 상기 식별 코드에 기초하여 상기 출력 문서에 대한 원본 이미지를 획득하는 단계;
   (b) 상기 출력 문서의 스캔으로 생성된 스캔 이미지와 상기 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계; 및
   (c) 문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 단계를 포함하되,
   상기 (b) 단계는,
   상기 스캔 이미지에서 상기 식별 코드가 존재할 가능성이 있는 복수의 영역 이미지를 추출하는 단계;
   상기 추출된 이미지를 나열하는 방식으로 조합하여, 검출 이미지를 재생성하는 단계;
   상기 검출 이미지 내에서의 상기 식별 코드의 존재 위치에 기초하여, 문서의 방향을 판단하는 단계;
   학습 이미지의 RGB 채널 중 R 채널 값을 상기 원본 이미지의 그레이 스케일 값으로 설정하고, 상기 학습 이미지의 RGB 채널 중 G 채널 값을 상기 스캔 이미지의 그레이 스케일 값으로 설정하고, 상기 학습 이미지의 RGB 채널 중 B 채널 값을 0으로 설정하여, 상기 학습 이미지를 생성하는 단계; 및
   상기 학습 이미지에서 상기 원본 이미지와 상기 스캔 이미지가 동일한 영역을 나타내는 검정색 또는 노란색과, 상기 원본 이미지와 상기 스캔 이미지가 상이한 영역을 나타내는 빨간색 또는 초록색의 분포를 이용하여 상기 원본 이미지와 상기 스캔 이미지의 일치 여부를 확인하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
2. 제1항에 있어서,
   상기 (a) 단계 이전에,
   원본 문서에 대한 출력 요청에 따라 생성된 식별 코드가 상기 원본 문서에 추가되어 인쇄 장치를 통해 상기 출력 문서가 인쇄되면, 상기 출력 문서에 대한 원본 이미지를 데이터베이스에 저장하는 단계를 더 포함하는, 출력 문서 보안 관리 방법.
   
3. 제1항에 있어서,
   상기 (b) 단계는,
   문서 파쇄 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계를 포함하고,
   상기 (c) 단계는,
   문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄가 수행되도록 처리하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
4. 제1항에 있어서,
   상기 (b) 단계는,
   보안 검색 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 단계를 포함하고,
   상기 (c) 단계는,
   문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 반출이 수행되도록 처리하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
5. 제1항에 있어서,
   상기 (b) 단계는,
   상기 스캔 이미지에서 에지 포인트를 추출하고, 상기 추출된 에지 포인트를 이용하여 상기 스캔 이미지에 대한 기울기를 산출하고, 상기 산출된 기울기에 기초하여 상기 스캔 이미지를 보정하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
6. 삭제
7. 삭제
8. 제1항에 있어서,
   상기 (b) 단계는,
   상기 검출 이미지에서 상기 식별 코드의 영역을 확인하는 단계;
   상기 스캔 이미지 내에서 상기 확인된 식별 코드 영역을 기준으로 일정 크기만큼 확장된 영역 내에서 상기 식별 코드를 최종적으로 추출하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
9. 제8항에 있어서,
   상기 (b) 단계는,
   상기 최종적으로 추출된 식별 코드의 위치 및 상기 판단된 문서의 방향을 기초로, 상기 스캔 이미지 내에서의 문서 영역을 특정하고, 특정된 문서 영역 외의 이미지를 크롭하는 단계를 포함하는, 출력 문서 보안 관리 방법.
   
10. 제1항에 있어서,
    상기 (b) 단계는,
    문서 방향과 색 형태가 동일하도록 보정된 상기 원본 이미지 및 스캔 이미지를 보정 노이즈와 결합하여, 다수의 학습 이미지를 생성하는 단계를 포함하는, 출력 문서 보안 관리 방법.
    
11. 제10항에 있어서,
    상기 (b) 단계는,
    보정 시 임의의 노이즈를 추가하여 다수의 학습 이미지를 생성하는 단계를 포함하는, 출력 문서 보안 관리 방법.
    
12. 삭제
13. 제10항에 있어서,
    상기 (b) 단계는,
    상기 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색 정보 및 분포를 기초로, 문서의 일치 여부를 확인하는 단계를 포함하는, 출력 문서 보안 관리 방법.
    
14. 출력 문서에 대한 파쇄 또는 반출 요청으로, 상기 출력 문서의 스캔을 통해 상기 출력 문서에 포함된 식별 코드가 인식되면, 상기 식별 코드에 기초하여 상기 출력 문서에 대한 원본 이미지를 획득하는 이미지 처리부;
    상기 출력 문서의 스캔으로 생성된 스캔 이미지와 상기 원본 이미지를 비교하여, 문서의 일치 여부를 확인하는 문서 일치 확인부; 및
    문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄 또는 반출이 수행되도록 처리하는 출력 문서 처리부를 포함하되,
    상기 이미지 처리부는,
    상기 스캔 이미지에서 상기 식별 코드가 존재할 가능성이 있는 복수의 영역 이미지를 추출하고, 상기 추출된 이미지를 나열하는 방식으로 조합하여, 검출 이미지를 재생성하고, 상기 검출 이미지 내에서의 상기 식별 코드의 존재 위치에 기초하여, 문서의 방향을 판단하고,
    상기 문서 일치 확인부는
    학습 이미지의 RGB 채널 중 R 채널 값을 상기 원본 이미지의 그레이 스케일 값으로 설정하고, 상기 학습 이미지의 RGB 채널 중 G 채널 값을 상기 스캔 이미지의 그레이 스케일 값으로 설정하고, 상기 학습 이미지의 RGB 채널 중 B 채널 값을 0으로 설정하여, 상기 학습 이미지를 생성하고, 상기 학습 이미지에서 상기 원본 이미지와 상기 스캔 이미지가 동일한 영역을 나타내는 검정색 또는 노란색과, 상기 원본 이미지와 상기 스캔 이미지가 상이한 영역을 나타내는 빨간색 또는 초록색의 분포를 이용하여 상기 원본 이미지와 상기 스캔 이미지의 일치 여부를 확인하는, 문서 관리 서버.
    
15. 제14항에 있어서,
    상기 이미지 처리부는,
    원본 문서에 대한 출력 요청에 따라 생성된 식별 코드가 상기 원본 문서에 추가되어 인쇄 장치를 통해 상기 출력 문서가 인쇄되면, 상기 출력 문서에 대한 원본 이미지를 데이터베이스에 저장하는, 문서 관리 서버.
    
16. 제14항에 있어서,
    상기 문서 일치 확인부는,
    문서 파쇄 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 인쇄 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하고,
    상기 출력 문서 처리부는,
    문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 파쇄가 수행되도록 처리하는, 문서 관리 서버.
    
17. 제14항에 있어서,
    상기 문서 일치 확인부는,
    보안 검색 장치에 입력된 출력 문서에 대한 스캔으로 생성된 스캔 이미지와 상기 출력 문서에 대한 반출 승인 시 데이터베이스에 저장된 원본 이미지를 비교하여, 문서의 일치 여부를 확인하고,
    상기 출력 문서 처리부는,
    문서가 일치하는 것으로 확인되면, 상기 출력 문서에 대한 반출이 수행되도록 처리하는, 문서 관리 서버.
    
18. 제14항에 있어서,
    상기 이미지 처리부는,
    상기 스캔 이미지에서 에지 포인트를 추출하고, 상기 추출된 에지 포인트를 이용하여 상기 스캔 이미지에 대한 기울기를 산출하고, 상기 산출된 기울기에 기초하여 상기 스캔 이미지를 보정하는, 문서 관리 서버.
    
19. 삭제
20. 삭제
21. 제14항에 있어서,
    상기 이미지 처리부는,
    상기 검출 이미지에서 상기 식별 코드의 영역을 확인하고, 상기 스캔 이미지 내에서 상기 확인된 식별 코드 영역을 기준으로 일정 크기만큼 확장된 영역 내에서 상기 식별 코드를 최종적으로 추출하는, 문서 관리 서버.
    
22. 제21항에 있어서,
    상기 이미지 처리부는,
    상기 최종적으로 추출된 식별 코드의 위치 및 상기 판단된 문서의 방향을 기초로, 상기 스캔 이미지 내에서의 문서 영역을 특정하고, 특정된 문서 영역 외의 이미지를 크롭하는, 문서 관리 서버.
    
23. 제14항에 있어서,
    상기 이미지 처리부는,
    문서 방향과 색 형태가 동일하도록 보정된 상기 원본 이미지 및 스캔 이미지를 보정 노이즈와 결합하여, 다수의 학습 이미지를 생성하는, 문서 관리 서버.
    
24. 제23항에 있어서,
    상기 이미지 처리부는,
    보정 시 임의의 노이즈를 추가하여 학습 이미지를 생성하는, 문서 관리 서버.
    
25. 삭제
26. 제23항에 있어서,
    상기 문서 일치 확인부는,
    상기 학습 이미지의 RGB 채널 각각에 설정된 값을 통해 표시되는 색 정보 및 분포를 기초로, 문서의 일치 여부를 확인하는, 문서 관리 서버.

Images