KR20210109447A

KR20210109447A - 검품 장치, 그 제어 방법, 인쇄 시스템, 및 프로그램

Info

Publication number: KR20210109447A
Application number: KR1020210020861A
Authority: KR
Inventors: 세이지로 모리타
Original assignee: 캐논 가부시끼가이샤
Priority date: 2020-02-27
Filing date: 2021-02-17
Publication date: 2021-09-06
Also published as: US11595537B2; JP2021135197A; US20210274050A1; JP7510260B2

Abstract

검품 장치는 반송된 시트의 화상을 판독하도록 구성된 판독 유닛을 포함한다. 본 장치는 시트의 검품을 위한 기준 화상을 획득하고, 기준 화상으로부터 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출한다. 본 장치는 판독 유닛에 의해 검품 대상 시트의 화상을 판독하여 획득된 판독 화상을 기준 화상과 위치 정렬시키고, 위치 정렬된 판독 화상을 기준 화상과 비교하여 판독 화상을 검품한다. 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 특징점들의 위치를 사용하거나 또는 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행한다.

Description

검품 장치, 그 제어 방법, 인쇄 시스템, 및 프로그램{VERIFICATION APPARATUS, CONTROL METHOD THEREFOR, PRINT SYSTEM, AND PROGRAM}

본 발명은 화상이 인쇄된 시트를 검사하는 검품 장치, 검품 장치를 제어하는 방법, 인쇄 시스템 및 프로그램에 관한 것이다.

검품 장치가 반송동안, 화상이 인쇄 장치에 의해 인쇄된 인쇄 시트를 검사하는 것을 허용하는 인쇄 시스템이 알려져 있다. 검품 장치는 반송된 인쇄 시트 상의 화상을 판독하고, 판독 동작에 의해 획득된 화상의 화상 분석을 수행함으로써 인쇄 시트가 정상인지를 판정한다. 이 검사 처리는 바코드 또는 괘선(ruled line)의 누락, 화상 누락, 인쇄 실패, 페이지 누락, 또는 컬러 오등록과 같은 이상을 포함하는 인쇄 시트를 검출할 수 있게 한다.

일본 특허 공개 제2013-101015호에는 반송된 인쇄 시트를 판독함으로써 획득한 인쇄 화상을, 검사를 위한 기준 화상과 비교할 때 화상들로부터 추출한 특징점들에 기초하여 화상들 간의 위치 정렬을 수행하는 검품 장치가 기재되어 있다. 화상들 사이의 위치 정렬을 수행하기 위한 충분한 수의 특징점들이 추출되지 않으면, 검품 장치는 화상들 사이의 위치 정렬을 수행하지 않고 인쇄 화상으로부터 추출된 특징점들의 수에 기초하여 검사를 수행한다.

전술한 종래 기술에서는, 기준 화상으로부터 충분한 수의 특징점들을 추출할 수 없는 경우, 예를 들어, 기준 화상이 빈 시트에 대응하는 화상인 경우, 화상들 간의 위치 정렬이 수행되지 않는다. 화상들 사이의 위치 정렬이 수행되지 않으면, 인쇄 화상을 기준 화상과 비교하는 것은 불가능하고, 따라서 인쇄 시트 상의 특정 위치에서 발생하는 특정 이상을 판정할 수 없다.

본 발명은 상기 문제를 고려하여 이루어졌으며, 적은 수의 특징점들을 포함하는 화상이 인쇄된 인쇄 시트를 검사할 때에도, 검사를 위한 기준 화상과 인쇄 시트의 판독 화상 사이의 위치 정렬을 수행하는 기술을 제공한다.

본 발명의 일 양태에 따르면, 검품 장치가 제공되며, 이 검품 장치는: 시트의 검품을 위한 기준 화상을 획득하도록 구성된 획득 유닛; 기준 화상으로부터, 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하도록 구성된 추출 유닛; 반송된 시트의 화상을 판독하도록 구성된 판독 유닛; 판독 유닛에 의해 검품 대상 시트의 화상을 판독함으로써 획득된 판독 화상을 기준 화상과 위치 정렬하도록 구성된 위치 정렬 유닛; 및 위치 정렬된 판독 화상을 기준 화상과 비교함으로써 판독 화상을 검품하도록 구성된 검품 유닛을 포함하고, 위치 정렬 유닛은 기준 화상으로부터 추출 유닛에 의해 추출된 특징점들의 수에 기초하여, 특징점들의 위치를 사용하거나 또는 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행한다.

본 발명의 다른 양태에 따르면, 인쇄 시스템이 제공되며, 이 인쇄 시스템은: 시트 상에 화상을 인쇄하도록 구성된 인쇄 장치; 및 인쇄 장치에 의해 화상이 인쇄되고 반송 경로를 통해 반송된 시트를 검품하도록 구성된 검품 장치를 포함하고, 검품 장치는: 시트의 검품을 위한 기준 화상을 획득하도록 구성된 획득 유닛; 기준 화상으로부터, 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하도록 구성된 추출 유닛; 반송 경로를 통해 반송되는 시트의 화상을 판독하도록 구성된 판독 유닛; 판독 유닛에 의해 검품 대상 시트의 화상을 판독함으로써 획득된 판독 화상을 기준 화상과 위치 정렬하도록 구성된 위치 정렬 유닛; 및 위치 정렬된 판독 화상을 기준 화상과 비교함으로써 판독 화상을 검품하도록 구성된 검품 유닛을 포함하고, 위치 정렬 유닛은 기준 화상으로부터 추출 유닛에 의해 추출된 특징점들의 수에 기초하여, 특징점들의 위치를 사용하거나 또는 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행한다.

본 발명의 또 다른 양태에 따르면, 반송된 시트의 화상을 판독하도록 구성된 판독 유닛을 포함하는 검품 장치를 제어하기 위한 방법이 제공되며, 이 방법은: 시트의 검품을 위한 기준 화상을 획득하는 단계; 기준 화상으로부터, 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하는 단계; 판독 유닛에 의해 검품 대상 시트의 화상을 판독하여 획득된 판독 화상을 기준 화상과 위치 정렬시키는 단계; 및 위치 정렬된 판독 화상을 기준 화상과 비교함으로써 판독 화상을 검품하는 단계를 포함하고, 위치 정렬에서, 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 특징점들의 위치를 사용하거나 또는 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행한다.

본 발명의 또 다른 양태에 따르면, 컴퓨터가 반송된 시트의 화상을 판독하도록 구성된 판독 유닛을 포함하는 검품 장치를 제어하기 위한 방법을 실행하게 하는, 저장 매체에 저장된 컴퓨터 프로그램이 제공되며, 본 방법은: 시트의 검품을 위한 기준 화상을 획득하는 단계; 기준 화상으로부터, 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하는 단계; 판독 유닛에 의해 검품 대상 시트의 화상을 판독하여 획득된 판독 화상을 기준 화상과 위치 정렬시키는 단계; 및 위치 정렬된 판독 화상을 기준 화상과 비교함으로써 판독 화상을 검품하는 단계를 포함하고, 위치 정렬에서, 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 특징점들의 위치를 사용하거나 또는 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행한다.

본 발명의 추가적인 특징들은 (첨부 도면들을 참조하여) 예시적인 실시예들의 다음의 설명으로부터 분명해질 것이다.

도 1은 인쇄 시스템을 포함하는 네트워크 구성의 일례를 나타내는 도면이다.
도 2는 인쇄 시스템의 하드웨어 구성의 일례를 나타내는 블록도이다.
도 3은 인쇄 시스템의 하드웨어 구성의 일례를 나타내는 단면도이다.
도 4는 기준 화상의 등록 처리 절차를 도시하는 흐름도이다.
도 5는 기준 화상의 생성 처리(S405)의 절차를 도시하는 흐름도이다.
도 6은 인쇄 시트의 검품 처리의 절차를 도시하는 흐름도이다.
도 7은 기준 화상과의 비교 처리(S605)의 절차를 도시하는 흐름도이다.
도 8은 시트 정점들의 추출 처리(S501, S701)의 절차를 도시하는 흐름도이다.
도 9a 내지 도 9e는 시트 정점을 추출하는 처리의 일례를 나타내는 도면들이다.
도 10a 내지 도 10d는 기준 화상으로부터의 특징점들의 추출의 일례를 나타내는 도면들이다.
도 11a 내지 도 11f는 화상 변형의 일례를 나타내는 도면들이다.
도 12는 검품 결과를 나타내는 조작 화면의 일례를 나타내는 도면이다.
도 13은 제2 실시예에 따른 기준 화상의 생성 처리(S405)의 절차를 도시하는 흐름도이다.
도 14는 제2 실시예에 따른 기준 화상과의 비교 처리(S605)의 절차를 도시하는 흐름도이다.
도 15a 및 도 15b는 제2 실시예에 따른 기준 화상으로부터의 특징점들을 추출하는 일례를 나타내는 도면들이다.
도 16a 내지 도 16c는 제2 실시예에 따른 화상 변형의 일례를 나타내는 도면들이다.

이하, 첨부 도면들을 참조하여 실시예들을 상세하게 설명할 것이다. 이하의 실시예들은 청구된 발명의 범위를 한정하려는 것이 아니라는 점에 유의한다. 실시예들에서는 다수의 특징이 설명되지만, 이러한 모든 특징이 필요한 발명으로 한정되지 않으며, 이러한 다수의 특징은 적절히 조합될 수 있다. 또한, 첨부 도면들에서는, 동일하거나 또는 유사한 구성에 동일한 참조 번호들을 부여하고, 그에 대한 중복하는 설명은 생략한다.

제1 실시예

도 1은 제1 실시예에 따른 인쇄 시스템을 포함하는 네트워크 구성의 일례를 나타내는 도면이다. 도 1에 나타낸 바와 같이, 인쇄 시스템(101)은 외부 제어기(102)에 접속된다. 인쇄 시스템(101)과 외부 제어기(102)는 화상 처리 시스템을 형성한다. 인쇄 시스템(101)은 예를 들어, 화상 형성 장치 또는 다기능 주변 장치(MFP)로서 지칭될 수 있다. 인쇄 시스템(101)과 외부 제어기(102)는 내부 LAN(105) 및 비디오 케이블(106)을 통해 통신가능하게 접속된다. 외부 제어기(102)는 외부 LAN(104)을 통해 클라이언트 PC(103)에 통신가능하게 접속된다. 외부 제어기(102)는 예를 들어, 화상 처리 제어기, 디지털 프론트 엔드(DFE), 또는 프린트 서버라고 지칭될 수 있다.

클라이언트 PC(103)는 외부 LAN(104)을 통해 외부 제어기(102)에 인쇄 지시를 발행할 수 있다. 프린터 드라이버는 클라이언트 PC(103) 상에 설치된다. 프린터 드라이버는 인쇄 데이터를 외부 제어기(102)에 의해 처리가능한 인쇄 기술 언어의 데이터로 변환하는 기능을 갖는다. 사용자는 클라이언트 PC(103)를 조작함으로써, PC에 설치된 각종 애플리케이션들로부터 프린터 드라이버를 통해 인쇄 시스템(101)에 인쇄 지시를 발행할 수 있다. 프린터 드라이버는 사용자로부터의 인쇄 지시에 기초하여 외부 제어기(102)에 인쇄 데이터를 송신한다. 외부 제어기(102)는, 클라이언트 PC(103)로부터 인쇄 데이터를 수신하면, 수신된 인쇄 데이터에 대해 데이터 분석 및 래스터화 처리를 수행하고, 처리된 인쇄 데이터를 인쇄 시스템(101)에 입력하여 인쇄 지시를 발행한다.

인쇄 시스템(101)은 상이한 기능들을 갖는 복수의 장치를 포함하고, 제본 처리 등의 각종 처리를 실행하도록 구성된다. 본 실시예에서, 인쇄 시스템(101)은 인쇄 장치(107), 인서터(108), 검품 장치(109), 대용량 스태커(110), 및 피니셔(111)에 의해 형성된다. 인쇄 장치(107)에 의해 화상이 인쇄되고, 인쇄 장치(107)로부터 배지된 시트(페이퍼 시트)는 인서터(108), 검품 장치(109), 대용량 스태커(110), 및 피니셔(111)의 각 장치에서 이 순서대로 반송된다. 본 실시예에서, 인쇄 시스템(101)은 화상 형성 장치의 일례이지만, 인쇄 시스템(101)에 포함된 인쇄 장치(107)는 화상 형성 장치라고 지칭될 수 있다.

인쇄 장치(107)는 인쇄 장치(107)의 하부에 배치된 급지 유닛으로부터 급지 및 반송되는 시트 상에, 토너(현상제)를 사용하여 화상을 형성(인쇄)한다. 인서터(108)는 인쇄 장치(107)로부터 반송되는 일련의 시트에 삽입 시트를 삽입하는 장치이다. 검품 장치(109)는 인쇄 장치(107)에 의해 화상이 인쇄되고, 반송 경로를 통해 반송된 시트를 검사하는 장치이다. 보다 구체적으로, 검품 장치(109)는 반송된 시트에 인쇄된 화상을 판독하고, 획득된 판독 화상을 미리 등록된 기준 화상과 비교함으로써, 시트에 인쇄된 화상을 검사한다(화상이 정상인지의 여부를 판정한다). 대용량 스태커(110)은 다수의 시트가 적재될 수 있는 장치이다. 피니셔(111)는 반송된 시트들에 대해 스테이플링 처리(stapling processing), 펀칭 처리, 및 새들 스티치 처리(saddle stitch processing)와 같은 마감 처리를 실행할 수 있는 장치이다. 피니셔(111)에 의해 처리된 시트들은 미리 결정된 배지 트레이에 배지된다.

도 1에 나타낸 구성예에서, 외부 제어기(102)는 인쇄 시스템(101)에 접속된다. 그러나, 본 실시예는 상이한 구성에 적용 가능하다. 예를 들어, 인쇄 시스템(101)이 외부 LAN(104)에 접속되고, 인쇄 데이터가 외부 제어기(102)의 개입없이 클라이언트 PC(103)로부터 인쇄 시스템(101)으로 송신되는 구성이 사용될 수 있다. 이 경우, 인쇄 시스템(101)은 인쇄 데이터에 대한 데이터 분석 및 래스터화를 실행한다.

<인쇄 시스템>

도 2는 인쇄 시스템(101), 외부 제어기(102), 및 클라이언트 PC(103)의 하드웨어 구성의 예를 나타내는 블록도이다. 도 2를 참조하여, 인쇄 시스템(101)의 구성예에 대해서 설명할 것이다.

인쇄 시스템(101)의 인쇄 장치(107)는 통신 I/F(인터페이스)(217), LAN I/F(218), 비디오 I/F(220), HDD(221), CPU(222), 메모리(223), 조작 유닛(224), 및 디스플레이(225)를 포함한다. 인쇄 장치(107)는 원고 노광 유닛(226), 레이저 노광 유닛(227), 화상 형성 유닛(228), 정착 유닛(229), 및 급지 유닛(230)을 추가로 포함한다. 이러한 디바이스들은 시스템 버스(231)를 통해 상호접속된다.

통신 I/F(217)는 통신 케이블(260)을 통해 인서터(108), 검품 장치(109), 대용량 스태커(110), 및 피니셔(111)에 접속된다. CPU(222)는 통신 I/F(217)를 통해 각각의 장치를 제어하기 위한 통신을 수행한다. LAN I/F(218)는 내부 LAN(105)을 통해 외부 제어기(102)에 접속되고, 제어 데이터 등의 통신에 사용된다. 비디오 I/F(220)는 비디오 케이블(106)을 통해 외부 제어기(102)에 접속되고, 화상 데이터와 같은 데이터의 통신에 사용된다. 외부 제어기(102)가 인쇄 시스템(101)의 동작을 제어할 수 있다면, 인쇄 장치(107)(인쇄 시스템(101))과 외부 제어기(102)는 비디오 케이블(106)만으로 접속될 수 있다는 점에 유의한다.

HDD(221)는 각종 프로그램 또는 데이터를 저장한다. CPU(222)는 HDD(221)에 저장된 프로그램들을 실행함으로써 인쇄 장치(107) 전체의 동작을 제어한다. 메모리(223)는 CPU(222)가 각종 프로세스를 수행하는데 필요한 프로그램 및 데이터를 저장한다. 메모리(223)는 CPU(222)의 작업 영역으로서 동작한다. 조작 유닛(224)은 사용자로부터 각종 설정 및 조작 지시의 입력을 접수한다. 디스플레이(225)는 설정 정보 및 인쇄 작업의 처리 상태와 같은 각종 정보를 표시하는데 사용된다.

원고 노광 유닛(226)은 복사 기능 또는 스캔 기능이 사용될 때 원고를 판독한다. 원고 노출 유닛(226)은 사용자에 의해 설정된 시트를 노광 램프로 조명하고 CMOS 이미지 센서에 의해 화상을 촬영함으로써 원고를 판독한다. 인쇄 처리(화상 형성 처리)에서, 레이저 노광 유닛(227)은 감광 드럼을 대전시키고 화상 데이터에 따라 변조된 레이저 빔을 사용하여 감광 드럼을 노광함으로써 감광 드럼 상에 정전 잠상(electrostatic latent image)을 형성한다. 화상 형성 유닛(228)은 감광 드럼 상에 형성된 정전 잠상을 현상함으로써 토너 화상을 형성하는 현상 유닛, 감광 드럼으로부터 중간 전사 벨트로 토너 화상을 전사하는 1차 전사 유닛, 및 중간 전사 벨트로부터 시트로 토너 화상을 전사하는 2차 전사 유닛을 포함한다. 정착 유닛(229)은 시트에 전사된 토너 화상에 열 및 압력을 가함으로써 시트에 토너 화상을 정착시킨다. 급지 유닛(230)은 급지 데크(급지 카세트)로부터, 화상 형성 유닛(228)의 화상 형성을 겪은 시트를 반송 경로에 급지한다. 시트의 급지 동작 및 반송 동작은 각종 롤러 또는 센서를 사용하여 제어된다.

인서터(108)는 통신 I/F(232), CPU(233), 메모리(234) 및 급지 제어 유닛(235)을 포함한다. 이러한 디바이스들은 시스템 버스(236)를 통해 상호접속된다. 통신 I/F(232)는 통신 케이블(260)을 통해 인쇄 장치(107)에 접속된다. CPU(233)는 통신 I/F(232)를 통해, 인서터(108)를 제어하는데 필요한 통신을 수행한다. CPU(233)는 메모리(234)에 저장된 제어 프로그램을 실행함으로써 인서터(108)의 동작을 제어한다. 메모리(234)는 인서터(108)에 대한 제어 프로그램을 저장한다. 급지 제어 유닛(235)은 CPU(233)로부터의 지시에 따라 각종 롤러 및 센서를 제어함으로써, 인서터(108)의 급지 유닛으로부터의 삽입 시트의 급지, 및 인쇄 장치(107)로부터 반송되는 시트의 반송을 제어한다.

검품 장치(109)는 통신 I/F(237), CPU(238), 메모리(239), 촬영 유닛(240), 표시 유닛(241), 조작 유닛(242), 및 HDD(255)를 포함한다. 이러한 디바이스들은 시스템 버스(243)를 통해 상호접속된다. 통신 I/F(237)는 통신 케이블(260)을 통해 인쇄 장치(107)에 접속된다. CPU(238)는 통신 I/F(237)를 통해, 검품 장치(109)를 제어하는데 필요한 통신을 수행한다. CPU(238)는 메모리(239)에 저장된 제어 프로그램을 실행함으로써 검품 장치(109)의 동작을 제어한다. 메모리(239)는 검품 장치(109)에 대한 제어 프로그램을 저장한다.

촬영 유닛(240)은 CPU(238)의 지시에 따라 반송된 시트를 촬영한다. CPU(238)는 촬영 유닛(240)에 의해 촬영된 화상을 기준 화상으로서 메모리(239)에 저장하는 처리를 수행한다. CPU(238)는 또한 촬영 유닛(240)에 의해 촬영된 화상을 메모리(239)에 저장된 기준 화상과 비교하고, 비교의 결과에 기초하여 시트 상에 인쇄된 화상을 검사(검품)하는 검품 처리를 수행한다. 표시 유닛(241)은 검품 결과, 설정 화면 등을 표시하는데 사용된다. 조작 유닛(242)은 사용자에 의해 조작되고, 사용자로부터의 각종 지시(예를 들어, 검품 장치(109)의 설정 변경 지시, 기준 화상의 등록 지시 등)을 접수한다. HDD(255)는 검품 처리에서 검품에 필요한 화상 데이터 및 각종 설정 정보를 저장한다. HDD(255)에 저장된 각종 설정 정보 및 화상 데이터는 재사용할 수 있다.

대용량 스태커(110)는 통신 I/F(244), CPU(245), 메모리(246), 및 배지 제어 유닛(247)을 포함한다. 이러한 디바이스들은 시스템 버스(248)를 통해 상호접속된다. 통신 I/F(244)는 통신 케이블(260)을 통해 인쇄 장치(107)에 접속된다. CPU(245)는 통신 I/F(244)를 통해 대용량 스태커(110)를 제어하는데 필요한 통신을 수행한다. CPU(245)는 메모리(246)에 저장된 제어 프로그램을 실행함으로써 대용량 스태커(110)의 동작을 제어한다. 메모리(246)는 대용량 스태커(110)에 대한 제어 프로그램을 저장한다. 배지 제어 유닛(247)은, CPU(245)로부터의 지시에 따라, 반송 경로를 통해 반송되는 시트를 스택 트레이 또는 이스케이프 트레이(escape tray)에 배지하거나, 또는 시트를 반송 방향의 시트의 하류 측에 접속된 피니셔(111)로 반송하는 제어를 실행한다.

피니셔(111)는 통신 I/F(249), CPU(250), 메모리(251), 배지 제어 유닛(252), 및 마감 처리 유닛(253)을 포함한다. 이러한 디바이스들은 시스템 버스(254)를 통해 상호접속된다. 통신 I/F(249)는 통신 케이블(260)을 통해 인쇄 장치(107)에 접속된다. CPU(250)는 통신 I/F(249)를 통해, 피니셔(111)를 제어하는데 필요한 통신을 수행한다. CPU(250)는 메모리(251)에 저장된 제어 프로그램을 실행함으로써, 피니셔(111)의 동작을 제어한다. 메모리(251)는 피니셔(111)에 대한 제어 프로그램을 저장한다. 배지 제어 유닛(252)은 CPU(250)로부터의 지시에 따라 시트의 반송 및 배지를 제어한다. 마감 처리 유닛(253)은 CPU(250)로부터의 지시에 따라 스테이플링, 펀칭, 또는 새들 스티치 처리와 같은 마감 처리를 수행한다.

<외부 제어기>

외부 제어기(102)는 CPU(208), 메모리(209), HDD(210), 키보드(211), 디스플레이(212), LAN I/F들(213 및 214), 및 비디오 I/F(215)를 포함한다. 이러한 디바이스들은 시스템 버스(216)를 통해 상호접속된다. CPU(208)는 HDD(210)에 저장된 프로그램을 실행함으로써, 외부 제어기(102) 전체의 동작(예를 들어, 클라이언트 PC(103)로부터의 인쇄 데이터의 수신, RIP 처리, 및 인쇄 시스템(101)으로의 인쇄 데이터의 송신)을 제어한다. 메모리(209)는 CPU(208)가 각종 프로세스를 수행하는데 필요한 프로그램 및 데이터를 저장한다. 메모리(209)는 CPU(208)의 작업 영역으로서 동작한다.

HDD(210)는 각종 프로그램 및 데이터를 저장한다. 키보드(211)는 사용자로부터 외부 제어기(102)의 조작 지시를 입력하는데 사용된다. 디스플레이(212)는 예를 들어, 외부 제어기(102)에서의 실행동안 애플리케이션의 정보 및 조작 화면을 표시하는데 사용된다. LAN I/F(213)는 외부 LAN(104)을 통해 클라이언트 PC(103)에 접속되고, 인쇄 지시와 같은 데이터를 통신하는데 사용된다. LAN I/F(214)는 내부 LAN(105)을 통해 인쇄 시스템(101)에 접속되고, 인쇄 지시와 같은 데이터를 통신하는데 사용된다. 외부 제어기(102)는 내부 LAN(105) 및 통신 케이블(260)을 통해 인쇄 장치(107), 인서터(108), 검품 장치(109), 대용량 스태커(110), 및 피니셔(111)와 통신하도록 구성된다. 비디오 I/F(215)는 비디오 케이블(106)을 통해 인쇄 시스템(101)에 접속되고, 화상 데이터(인쇄 데이터)와 같은 데이터를 통신하는데 사용된다.

<클라이언트 PC>

클라이언트 PC(103)는 CPU(201), 메모리(202), HDD(203), 키보드(204), 디스플레이(205), 및 LAN I/F(206)를 포함한다. 이러한 디바이스들은 시스템 버스(207)를 통해 상호접속된다. CPU(201)는 HDD(203)에 저장된 프로그램을 실행함으로써 시스템 버스(207)를 통해 각 디바이스의 동작을 제어한다. 이것은 클라이언트 PC(103)에 의한 각종 프로세스를 구현한다. 예를 들어, CPU(201)는 HDD(203)에 저장된 문서 처리 프로그램을 실행함으로써 인쇄 데이터 생성 및 인쇄 지시를 발행한다. 메모리(202)는 CPU(201)가 각종 처리를 실행하는데 필요한 프로그램 및 데이터를 저장한다. 메모리(202)는 CPU(201)의 작업 영역으로서 동작한다.

HDD(203)는 프린터 드라이버 및 각종 애플리케이션(예를 들어, 문서 처리 프로그램)과 같은 각종 데이터 및 프로그램을 저장한다. 키보드(204)는 사용자로부터의 클라이언트 PC(103)의 조작 지시를 입력하는데 사용된다. 디스플레이(205)는 예를 들어, 클라이언트 PC(103)에서의 실행 동안 애플리케이션의 정보 및 조작 화면을 표시하는데 사용된다. LAN I/F(206)는 외부 LAN(104)을 통해 외부 제어기(102)에 통신가능하게 접속된다. CPU(201)는 LAN I/F(206)를 통해 외부 제어기(102)와 통신한다.

<인쇄 시스템의 동작 예>

도 3은 인쇄 시스템(101)의 하드웨어 구성의 일례를 나타내는 단면도이다. 이하에서는, 도 3을 참조하여 인쇄 시스템(101)의 동작의 실제 예에 대해서 설명할 것이다.

인쇄 장치(107)에서, 급지 데크(301, 302)에는 각종 시트가 저장된다. 각각의 인쇄 데크에 저장된 시트들 중에서, 최상위 위치에 있는 시트가 분리되어 반송 경로(303)에 하나씩 급지된다. 화상 형성 스테이션(304 내지 307)은 각각 감광 드럼(감광체)을 포함하고, 다른 색의 토너를 사용하여 감광 드럼 상에 토너 화상을 형성한다. 보다 구체적으로, 화상 형성 스테이션들(304 내지 307)은 각각, 황색(Y), 자홍색(M), 청록색(C), 및 흑색(K)의 토너들을 사용하여 토너 화상들을 형성한다.

화상 형성 스테이션들(304 내지 307)에 형성된 각 색의 토너 화상들은 중간 전사 벨트(308) 상에 서로 중첩되어 순차적으로 전사(1차 전사)된다. 중간 전사 벨트(308)에 전사된 토너 화상들은 중간 전사 벨트(308)의 회전에 따라 2차 전사 위치(309)까지 반송된다. 2차 전사 위치(309)에서는, 중간 전사 벨트(308)로부터 반송 경로(303)를 통해 반송되는 시트로 토너 화상들이 전사(2차 전사)된다. 2차 전사 후의 시트는 정착 유닛(311)에 반송된다. 정착 유닛(311)은 압력 롤러 및 가열 롤러를 포함한다. 시트가 이러한 롤러들 사이를 통과하는 동안, 시트에 열 및 압력을 가함으로써, 시트에 토너 화상들을 정착시키는 정착 처리가 수행된다. 정착 유닛(311)을 통과한 시트는 반송 경로(312)를 통과하고 인쇄 장치(107)와 인서터(108) 사이의 접속점(315)으로 반송된다. 이러한 방식으로, 컬러 화상이 시트 상에 형성(인쇄)된다.

시트의 타입에 따라 추가의 정착 처리가 필요한 경우, 정착 유닛(311)을 통과한 시트는 정착 유닛(313)이 제공되는 반송 경로(314)로 안내된다. 정착 유닛(313)은 반송 경로(314)를 통해 반송되는 시트에 대한 추가 정착 처리를 수행한다. 정착 유닛(313)을 통과한 시트는 접속점(315)으로 반송된다. 양면 인쇄를 수행하는 동작 모드가 설정되면, 화상이 인쇄되고 반송 경로(312 또는 314)를 통해 반송되는 제1 표면을 포함하는 시트는 반전 경로(316)로 안내된다. 반전 경로(316)에서 반전된 시트는 양면 반송 경로(317)로 안내되고, 2차 전사 위치(309)까지 반송된다. 따라서, 2차 전사 위치(309)에서 시트의 제1 표면의 반대측에 있는 제2 표면에 토너 화상들 전사된다. 그 후, 시트이 정착 유닛(311)(및 정착 유닛(313))을 통과함으로써, 시트의 제2 표면 상의 컬러 화상의 형성을 완료한다.

인쇄 장치(107)에 의한 화상의 형성(인쇄)이 완료되고 접속점(315)으로 반송된 시트는 인서터(108) 내로 반송된다. 인서터(108)는 삽입 시트가 세트되어 있는 인서터 트레이(321)를 포함한다. 인서터(108)는 인서터 트레이(321)로부터 급지된 삽입 시트를, 인쇄 장치(107)로부터 반송되는 일련의 시트의 임의의 삽입 위치에 삽입하고, 후속 스테이지의 장치(검품 장치(109))에 시트들을 반송하는 처리를 수행한다. 인서터(108)를 통과한 시트들은 순차적으로 검품 장치(109)로 반송된다.

검품 장치(109)는 시트가 인서터(108)로부터 반송되는 반송 경로(333) 상에 촬영 유닛(240)을 형성하는 CIS(Contact Image Sensor)들(331 및 332)을 포함한다. CIS들(331 및 332)은 반송 경로(333)를 통해 반대 위치들에 배열된다. CIS들(331 및 332)은 시트의 상부 표면(제1 표면) 및 하부 표면(제2 표면)을 각각 판독하도록 구성된다. 촬영 유닛(240)은 예를 들어, CIS들 대신에 라인 스캔 카메라들로 형성될 수 있다는 점에 유의한다.

검품 장치(109)는 반송 경로(333)를 통해 반송되는 시트 상에 인쇄된 화상을 검사하는 검품 처리를 수행한다. 보다 구체적으로, 검품 장치(109)는 반송중인 시트가 미리 결정된 위치에 도달하는 타이밍에서 촬영 유닛(240)(CIS들(331 및 332))을 사용하여 시트 상의 화상을 판독하는 판독 처리를 수행한다. 또한, 검품 장치(109)는, 판독 처리에 의해 획득된 화상에 기초하여, 시트 상에 인쇄된 화상을 검사한다. 검품 장치(109)를 통과한 시트는 대용량 스태커(110)로 반송된다.

본 실시예에서, 검품 장치(109)는 시트 상에 인쇄된 화상을 판독함으로써 획득되는 판독 화상을 미리 등록된 기준 화상과 비교함으로써 검품 처리를 수행한다. 검품 장치(109)가 CIS(331)만을 사용하여 전면 상에 인쇄된 화상만을 판독함으로써 획득되는 판독 화상을, 미리 등록된 기준 화상과 비교함으로써 검품 처리를 수행할 수 있다는 점에 유의한다. 대안적으로, 검품 장치(109)는 CIS들(331 및 323)을 사용하여, 시트의 전면 상에 인쇄된 화상을 판독함으로써 획득된 전면의 판독 화상을 미리 등록된 기준 화상과 비교함으로써 검품 처리를 수행하고, 또한 배면의 판독 화상을 미리 등록된 기준 화상과 비교함으로써 검품 처리를 수행할 수 있다. 검품 처리에서 화상을 비교하는 방법의 예들에는 각 화소의 화소값들을 비교하는 방법, 에지 검출에 의해 획득된 물체들의 위치를 비교하는 방법, 및 OCR(Optical Character Recognition)에 의한 문자 데이터의 추출을 사용하는 방법이 있다. 또한, 검품 장치(109)는 미리 설정된 검품 아이템들에 대한 검품 처리를 수행한다. 검사 아이템들의 예들에는 화상의 인쇄 위치의 시프트, 화상의 색조, 화상의 농도, 화상 내의 줄무늬 또는 얇은 반점(thin spot)들, 및 인쇄 누락이 있다.

대용량 스태커(110)는 시트의 반송 방향의 상류 측의 장치(검품 장치(109))로부터 반송되는 시트가 적재되는 트레이로서 스택 트레이(341)를 포함한다. 검품 장치(109)를 통과한 시트는 대용량 스태커(110) 내의 반송 경로(344)를 통해 반송된다. 반송 경로(344)를 통해 반송되는 시트는 반송 경로(345)로 안내되고, 그 후 스택 트레이(341) 상에 적재된다.

대용량 스태커(110)는 배지 트레이로서 이스케이프 트레이(346)를 추가로 포함한다. 본 실시예에서, 이스케이프 트레이(346)는 검품 장치(109)에 의한 검품의 결과로서, 인쇄된 화상에 이상이 있다고 판정된 시트를 배지하는데 사용된다. 반송 경로(344)를 통해 반송되는 시트는 반송 경로(347)로 안내됨으로써 이스케이프 트레이(346)로 반송된다. 대용량 스태커(110)에 적재 또는 배지되지 않고 반송된 시트는 반송 경로(348)를 통해 후속 스테이지의 피니셔(111)로 반송된다.

대용량 스태커(110)는 또한 반송된 시트의 방향을 반전시키기 위한 반전 유닛(349)을 포함한다. 반전 유닛(349)은 예를 들어, 대용량 스태커(110)에 입력된 시트의 방향이, 스택 트레이(341) 상에 적재되어 대용량 스태커(110)로부터 출력될 때의 시트의 방향과 매칭되게 하는데 사용된다. 반전 유닛(349)은 대용량 스태커(110) 상에 적재되지 않고 피니셔(111)로 반송되는 시트에 대해서는 반전 처리를 수행하지 않는다는 점에 유의한다.

피니셔(111)는 시트의 반송 방향의 상류 측의 장치(검품 장치(109))로부터 반송된 시트들에 대해, 사용자에 의해 지정된 마감 기능을 실행한다. 본 실시예에서, 피니셔(111)는 예를 들어, 스테이플링 기능(1 또는 2군데 스테이플링), 펀칭 기능(2개 또는 3개의 구멍), 및 새들 스티치 기능과 같은 마감 기능들을 갖는다.

피니셔(111)는 2개의 배지 트레이(351, 352)를 포함한다. 피니셔(111)가 마감 처리를 수행하지 않으면, 피니셔(111)로 반송된 시트들은 반송 경로(353)를 통해 배지 트레이(351)로 배지된다. 피니셔(111)가 스테이플링 처리와 같은 마감 처리를 수행하는 경우, 피니셔(111)로 반송되는 시트들은 반송 경로(354)로 안내된다. 피니셔(111)는 반송 경로(354)를 통해 반송되는 시트들에 대해, 처리 유닛(355)을 사용하여 사용자에 의해 지정된 마감 처리를 실행하고, 시트들을 배지 트레이(352)로 배지시킨다. 배지 트레이(351, 352) 각각은 수직으로 이동가능하도록 구성된다는 점에 유의한다. 또한, 피니셔(111)는 배지 트레이(351)를 하방으로 이동시킴으로써, 처리 유닛(355)에 의해 마감 처리된 시트를 배지 트레이(351) 상에 적재하도록 동작할 수 있다.

사용자가 새들 스티치 처리를 지정하면, 피니셔(111)는 새들 스티치 처리 유닛(356)을 사용하여 시트들의 중심에 스테이플링 처리를 수행하고, 그 후 시트들을 두 번 접음으로써, 제본 제품을 생성한다. 피니셔(111)는 생성된 제본 제품을 반송 경로(357)를 통해 제본 트레이(358)에 배출한다. 제본 트레이(358)는 제본 트레이(358) 상에 적재된 제본 제품을 장치 외부로 반송하기 위한 벨트 컨베이어 구성을 포함한다.

검품 장치(109)에 의해 실행되는, 기준 화상의 등록 처리 및 화상이 인쇄된 시트(인쇄 시트)의 검품 처리를 도 4 내지 도 12를 참조하여 이하에 보다 상세하게 설명할 것이다.

<기준 화상의 등록 처리>

본 실시예에 따른 검품 장치(109)는 촬영 유닛(240)에 의해, 화상이 인쇄된 시트를 판독하고, 획득된 판독 화상을 사용하여, 검품 처리에서 검사를 위한 기준 화상을 미리 등록하는 기능을 갖는다. 도 4는 검품 장치(109)에 의해 실행되는 기준 화상의 등록 처리 절차를 도시하는 흐름도이다. 도 4에 나타낸 각각의 단계에서의 처리는 검품 장치(109)의 CPU(238)에 의해 실행된다. 기준 화상의 등록 처리는 촬영 유닛(240)에 의해, 반송된 시트의 화상을 판독함으로써 획득된 화상에 기초하여 기준 화상을 생성하는 처리에 대응한다.

단계 S401에서, CPU(238)는 기준 화상을 등록하는데 사용될 화상을 시트 상에 인쇄하는데 사용되는 인쇄 설정들을 표시하는 인쇄 설정 정보를 획득한다. 보다 구체적으로, CPU(238)는 통신 케이블(260)을 통해 인쇄 장치(107)와 통신함으로써 인쇄 장치(107)로부터 이러한 인쇄 설정 정보를 획득할 수 있다. 단계 S401에서 획득된 인쇄 설정 정보는 예를 들어, 1부당 시트의 매수, 시트 크기, 및 검품될 시트 표면에 관한 설정들을 표시하는 정보를 포함할 수 있다.

단계 S402에서, CPU(238)는 시트가 시트의 반송 방향의 상류 측의 장치(인쇄 장치(107) 및 인서터(108))로부터 검품 장치(109)로 반송될 때까지 대기한다. 시트의 반송이 검출되면, CPU(238)는 프로세스를 단계 S403으로 진행한다. 단계 S403에서, CPU(238)는 시트의 화상을 촬영 유닛(240)에 의해 판독함으로써 판독 화상을 취득하고, 취득된 판독 화상을 메모리(239)에 저장한다.

단계 S404에서, CPU(238)는 단계 S401에서 획득된 인쇄 설정 정보에 의해 표시되는 설정된 수의 시트에 대해 화상의 판독이 완료되었는지의 여부를 판정한다. 설정된 수의 시트에 대해 화상의 판독이 완료되지 않았다면, CPU(238)는 프로세스를 단계 S402로 복귀시키고, 순차적으로 반송되는 시트의 화상을 계속 판독한다. 한편, 설정된 수의 시트에 대해 화상의 판독이 완료된 경우, CPU(238)는 프로세스를 단계 S405로 진행시킨다.

단계 S405에서, CPU(238)는 도 5에 나타낸 절차에 따라 전술한 처리에 의해 획득된 판독 화상을 사용하여 기준 화상을 생성하는 생성 처리를 수행한다. 이 생성 처리에서는, 생성된 기준 화상, 인쇄 설정 정보, 및 기준 화상과 연관된 설정 정보(후술됨)를 메모리(239)에 저장함으로써 기준 화상이 등록된다. 기준 화상의 생성 처리가 완료되면, CPU(238)는 이 절차에 따라 처리를 종료한다.

<기준 화상의 생성 처리(S405)>

다음으로, 기준 화상을 생성할 때 검품 장치(109)에 의해 실행되는 처리에 대해서, 도 5, 도 8 내지 도 10d를 참조하여 설명할 것이다.

도 5는 단계 S405에서 검품 장치(109)의 CPU(238)에 의해 실행되는 기준 화상의 생성 처리의 절차를 도시하는 흐름도이다. 이 흐름도는 하나의 시트에 대응하는 판독 화상에 대해 수행되는 처리를 설명한다는 점에 유의한다. 그러나, 1부당 복수의 시트가 있다면, 각 시트마다 동일한 처리가 반복되어 각 시트마다 기준 화상을 생성한다.

단계 S501에서, (후술될) 도 8에 나타낸 절차에 따라, CPU(238)는 단계 S403에서 촬영 유닛(240)에 의해 촬영된 화상(판독 화상)으로부터 시트 정점들을 추출하는 처리를 수행한다. 본 명세서에서, "시트 정점들"은 시트의 네 개의 코너를 표시한다. 시트 정점들의 추출 처리가 완료되면, CPU(238)는 프로세스를 단계 S502로 진행시킨다.

단계 S502에서, 검품 처리에 사용될 기준 화상을 생성하기 위해, CPU(238)는 단계 S501에서 획득된 시트 정점들의 위치를 사용하여, 단계 S403에서 획득된 판독 화상을 변형시키는 처리(화상 변형)를 수행한다. 보다 구체적으로, 단계 S501에서 획득된 시트 정점들의 위치 및 단계 S401에서 획득된 인쇄 설정 정보에 기초하여, CPU(238)는 기준 화상을 등록하는데 사용되는 시트의 표면의 형상에 따라 판독 화상을 변형하는 처리(화상 변형)를 수행한다. 이 처리에서는, 판독 화상의 해상도를 미리 결정된 해상도로 변환하는 처리가 수행될 수 있다는 점에 유의한다.

통상적으로, 판독 화상에 포함된, 시트에 대응하는 부분의 화상의 형상은 시트의 스큐잉(skewing) 또는 반송 속도의 변동으로 인해 왜곡된다. 예를 들어, 검품 처리의 대상인 시트의 크기가 LTR로 표현되고, 메인 주사 방향 및 서브 주사 방향에서의 판독 해상도는 모두 300dpi인 것으로 가정한다. 이 경우, WR이 메인 주사 방향의 길이를 나타내고, HR이 서브 주사 방향의 길이를 나타낼 때, 시트의 형상은 WR=11[인치]×300=3300[픽셀] 및 HR=8.5[인치]×300=2550[픽셀]의 직사각형이 된다. 또한, 시트의 형상이 4개의 시트 정점의 좌표로 표현되는 경우, 4개의 시트 정점의 좌표는 (0, 0), (3299, 0), (0, 2549), 및(3299, 2549)로 표현된다.

단계 S502에서, CPU(238)는 판독 화상으로부터 획득된 4개의 시트 정점의 위치(좌표)가 시트의 형상을 표시하는 4개의 시트 정점의 위치(좌표)와 일치하도록 판독 화상을 변형한다. 이러한 화상 변형은 기하학적 변환이라고도 하며, 아핀 변환(affine transformation) 등의 공지의 방법을 사용하여 구현될 수 있다. CPU(238)는 판독 화상을 변형하여 획득한 화상을 기준 화상으로서 메모리(239)에 저장한다.

단계 S503에서, CPU(238)는 단계 S502에서 획득된 기준 화상으로부터 특징점들을 추출한다. 추출된 특징점들은 검품 처리(후술됨)에서 기준 화상과의 비교를 수행할 때 수행되는 전체 화상의 위치 정렬에 적합한 화상 내의 위치들을 표시한다. 전체 화상의 위치 정렬에 적합한 특징점들로서, 화상에서 코너 특징량이 큰 점들이 고려된다. 코너 특징은 상이한 방향들의 2개의 중요한 에지가 주어진 로컬 부근에 존재하도록 하는 특징이고, 코너 특징량은 에지 특징의 강도를 나타내는 양이다.

전체 화상의 위치 정렬에 사용되는 복수의 특징점이 화상의 일부분에서 불균일하게 빠져나가는 경우, 그러한 특징점들로부터 분리된 위치에서의 위치 정렬의 오차(위치 시프트)는 클 수 있다. 이러한 방식으로, 주어진 특징점으로부터 분리된 위치에서는 위치 시프트가 크기 때문에, 화상 위치 정렬에 사용되는 복수의 특징점은 화상에서 서로 어느 정도 서로 분리된 위치에 분산되는 것이 바람직하다. 따라서, 전술한 코너 특징량이 큰 기준 화상으로부터 추출한 점들 중에서, CPU(238)는 전체 화상에 걸쳐 분산된 위치에 존재하는 점들을 특징점들로서 추출한다. 특징점의 추출의 예는 도 10a 내지 10d를 참조하여 후술될 것이라는 점에 유의한다.

특징점들의 추출이 완료되면, CPU(238)는 단계 S504에서 기준 화상으로부터 추출된 특징점들의 수가 미리 결정된 수 이상인지의 여부를 판정함으로써, 충분한 수의 특징점들이 화상 위치 정렬을 위해 추출될 수 있는지의 여부를 판정한다. 추출된 특징점들의 수가 미리 결정된 수 이상인 경우(즉, 충분한 수의 특징점들이 추출될 수 있음), CPU(238)는 단계 S504로부터 단계 S505로 프로세스를 진행시킨다.

한편, 추출된 특징점들의 수가 미리 결정된 수보다 작으면(즉, 충분한 수의 특징점들이 추출될 수 없으면), CPU(238)는 단계 S504로부터 단계 S506으로 프로세스를 진행시킨다. CPU(238)가 단계 S506으로 프로세스를 진행시키는 경우는 예를 들어, 화상이 인쇄되지 않은 빈 시트 또는 코너 특징량들이 작은 점들만을 갖는 패턴만이 인쇄된 시트를 사용하여 기준 화상을 등록하는 경우이다. 이러한 시트를 판독함으로써 획득된 판독 화상으로부터 화상 위치 정렬을 위한 충분한 수의 특징점을 추출하는 것은 불가능할 수 있다.

단계 S505에서, CPU(238)는 단계 S503에서 기준 화상으로부터 추출된 특징점들을 검품 처리에서의 화상 위치 정렬을 위한 설정 정보(위치 정렬 정보)로서 메모리(239)에 저장하고, 처리를 종료한다. 한편, 단계 S506에서, CPU(238)는 단계 S501에서 획득된 시트 정점들을 검품 처리에서의 화상 위치 정렬을 위한 설정 정보(위치 정렬 정보)로서 메모리(239)에 저장하고, 처리를 종료한다. CPU(238)는 생성된 기준 화상 및 위치 정렬 정보를 단계 S401에서 획득된 인쇄 설정 정보와 연관시켜 메모리(239)에 저장한다는 점에 유의한다.

이러한 방식으로, 기준 화상으로부터 추출된 특징점들의 수에 기초하여, CPU(238)는 화상 위치 정렬을 위해 특징점들의 위치를 사용할지 또는 시트 정점들의 위치를 사용할지를 판정한다. 보다 구체적으로, 특징점들의 수가 미리 결정된 수 이상인 경우, CPU(238)는 화상 위치 정렬을 위해 특징점들의 위치를 사용하기로 판정하고; 그렇지 않으면, CPU(238)는 화상 위치 정렬을 위해 시트 정점들의 위치를 사용하기로 판정한다. 이 판정 결과는 위치 정렬 정보로서 메모리(239)에 저장된다. (후술하는) 화상 위치 정렬(S702 내지 S705)에서, CPU(238)는 판정 결과에 따라 특징점들의 위치 또는 시트 정점들의 위치를 사용하여 판독 화상을 기준 화상과 위치 정렬한다.

CIS(331)에 의해 시트의 전면(제1 표면)을 판독함으로써 획득된 판독 화상 및 CIS(332)에 의해 시트의 배면(제2 표면)을 판독함으로써 획득된 판독 화상과 관련하여, (각각의 표면에 대응하는 기준 화상으로부터 추출된) 특징점들의 수가 미리 결정된 수 이상이면, 특징점들의 위치는 화상 위치 정렬에 사용되고; 그렇지 않으면, 시트 정점들의 위치가 화상 위치 정렬에 사용된다. CIS(332)에 의한 판독에 의해 획득된 배면의 판독 화상에 관하여, 시트 정점들의 위치는 (배면에 대응하는 기준 화상으로부터 추출된) 특징점들의 수에 관계없이 임의의 판독 화상에 대한 화상 위치 정렬에 사용될 수 있다는 것에 유의한다.

<시트 정점들의 추출 처리(S501, S701)>

도 8은 기준 화상의 생성 처리(도 5: S501)와 기준 화상과의 비교 처리(도 7: S701)(후술됨)에서 실행되는, 판독 화상으로부터 시트 정점들을 추출하는 처리의 절차를 도시하는 흐름도이다. 도 9a 내지 도 9e는 시트 정점들을 추출하는 처리의 일례를 나타내는 도면이다. 본 실시예에서는, 촬영 유닛(240)에 의해 촬영된 화상(판독 화상)으로서, 시트 이외의 부분으로서의 배경이 어둡고, 시트의 부분이 밝은 화상의 예가 사용된다.

단계 S801에서, CPU(238)는 촬영 유닛(240)에 의해 획득된 판독 화상을 임의의 임계값을 사용하여 이치화한다. 도 9a는 단계 S801에서 이치화된 화상을 나타내며, 여기서 x와 y는 각각 메인 주사 방향과 서브 주사 방향을 나타낸다.

단계 S802에서, CPU(238)는 단계 S801에서 이치화된 화상으로부터 시트의 에지들의 위치를 검출한다. 본 실시예에서, 시트는 직사각형이므로, 시트의 에지들은 직사각형의 4개의 변(상변, 하변, 좌변, 및 우변)에 대응한다. 도 9b는 이치화된 화상에서의 시트의 상변 주위의 부분을 확대하여 나타낸 것이다. 시트의 상변에 대응하는 에지의 위치를 검출하기 위해, CPU(238)는 도 9c에 나타낸 바와 같이, 메인 주사 방향(x 방향)으로 미리 결정된 간격들 WE로 서브 주사 방향(도 9c에서 위로부터 아래로의 방향)으로 이치화된 화상을 주사한다. CPU(238)는 이 주사 동작에 의해 (배경 부분에 대응하는 값으로부터 시트 부분에 대응하는 값으로) 화소값이 변하는 위치 ETn을 에지의 위치로서 검출한다. 유사하게, 시트의 하변에 대응하는 에지의 위치 EBn, 좌변에 대응하는 에지의 위치 ELn, 및 우변에 대응하는 에지의 위치 ERn이 검출된다.

단계 S803에서, CPU(238)는 도 9d에 나타낸 바와 같이, 검출된 에지 위치에 대한 근사 직선을 구한다. 보다 구체적으로, 시트의 상변에 대하여, 단계 S802에서 획득된 복수의 위치 ETn에 최소 제곱법을 적용함으로써 근사 직선 TL이 구해진다. 유사하게, CPU(238)는 시트의 하변, 좌변, 및 우변에 대해 각각 근사 직선들 BL, LL, 및 RL을 구한다.

마지막으로, 단계 S804에서, CPU(238)는 단계 S803에서 획득된 4개의 직선에 대한 4개의 교차점의 위치를 시트의 시트 정점들의 위치로서 결정하고, 처리를 종료한다. 도 9e는 단계 S501에서 전술한 절차에 의해 판독 화상으로부터 추출된 시트 정점들을 사용하여 단계 S502에서 판독 화상을 변형함으로써 생성된 화상(기준 화상)의 예를 나타낸다.

본 실시예에서 설명된 시트 정점들의 추출 처리는 예에 불과하다는 점에 유의한다. 예를 들어, 촬영 유닛(240)의 판독 조건(예를 들어, 배경이 백색이고 밝도록 화상이 촬영됨), 사용되는 시트의 특징(예를 들어, 흑색 또는 투명 시트 또는 직사각형 이외의 형상의 시트) 등에 따라, 추출 처리를 수행할 필요가 있다.

<특징점들의 추출(S503)의 예>

도 10a 내지 도 10d는 생성된 기준 화상으로부터 특징점들의 추출(S503)의 예를 나타내는 도면들이다. 도 10a는 촬영 유닛(240)에 의해 획득된 판독 화상을 나타낸다. 도 10b는 시트 정점들을 사용하여 판독 화상을 변형함으로써 획득된 화상(기준 화상)를 나타낸다. 단계 S503과 연관하여 전술한 바와 같이, 화상에서 코너 특징량이 큰 점들은 전체 화상의 위치 정렬에 적합한 특징점들이라고 간주된다. 코너 특징량을 검출하는 방법들 중 하나로서, 예를 들어, 해리스 코너 검출 방법이 알려져 있다. 해리스 코너 검출 방법에서는, 메인 주사 방향 및 서브 주사 방향의 미분 화상으로부터 코너 특징량 화상을 구한다. 이 코너 특징량 화상은 코너 특징을 형성하는 2개의 에지 중 더 약한 에지의 에지량을 나타내는 화상이다. 코너 특징은 2개의 에지 모두가 강한 에지들이어야 하더라도 상대적으로 약한 에지가 큰 에지량을 갖는지에 따라 코너 특징량의 크기를 나타낸다.

도 10c는 도 10b에 도시된 화상에 해리스 코너 검출 방법을 적용함으로써 획득된 화상을 나타낸다. 이 화상에서, 미리 결정된 값보다 큰 특징량을 갖는 화소가 백색으로 표현된다. 도 10c에 나타낸 화상에서는, 비교적 큰 코너 특징량을 갖는 복수의 점이 화상에 존재한다. 본 실시예에서는, 예를 들어, 전체 화상에 걸쳐 분산된 위치들에 존재하는 미리 결정된 수(이 예에서는, 6개)의 특징점들이 코너 특징량의 내림차순으로 위치 정렬을 위한 특징점들로서 추출된다. 도 10c를 참조하면, 이렇게 추출된 6개의 특징점은 백색 점의 원들로 표시되어 있다.

도 10d는 도 10c에 나타낸 바와 같이 추출된 미리 결정된 수(이 예에서는, 6개)의 특징점들 중 하나의 위치를 중심으로 33개의 이웃 픽셀의 화상을 확대하여 나타낸 것이다. 검품 처리(후술됨)에서, 처리 대상인 판독 화상은 특징점에 대응하는 위치 근방에서 도 10d에 나타낸 화상과 매칭되는 부분을 검색함으로써, 처리 대상인 판독 화상에 포함되는 특징점의 위치(좌표)를 획득한다.

<인쇄 시트의 검품 처리>

다음으로, 도 6, 도 7, 도 11a 내지 도 11f, 및 도 12를 참조하여, 인쇄 시트의 검품 처리를 수행할 때에 검품 장치(109)에 의해 실행되는 처리에 대해서 설명할 것이다.

도 6은 검품 장치(109)에 의해 실행되는, 인쇄 시트의 검품 처리의 절차를 도시하는 흐름도이다. 도 6의 각 단계에서의 처리는 검품 장치(109)의 CPU(238)에 의해 실행된다. 이 예에서는, 인쇄 설정으로서, 대용량 스태커(110)가 인쇄 시트의 배지처로서 미리 설정된다(즉, 대용량 스태커(110)의 스택 트레이(341)는 배지처로서 미리 설정된다).

단계 S601에서, CPU(238)는 메모리(239)에 저장된 설정 정보를 획득하고, 프로세스를 단계 S602로 진행시킨다. 획득된 설정 정보는 인쇄 설정 정보와 위치 정렬 정보를 포함한다. 단계 S602에서, CPU(238)는 검품 종료 지시가 수신되는지의 여부를 판정한다. 검품 종료 지시는 예를 들어, 조작 유닛(242)을 통해 사용자로부터 접수된다. 이 경우, 이 지시는 조작 유닛(242)으로부터 수신된다. 검품 종료 지시가 수신되면, CPU(238)는 도 6에 나타낸 절차에 따라 검품 처리를 종료하고; 그렇지 않으면, CPU(238)는 프로세스를 단계 S604로 진행시킨다.

단계 S603에서, CPU(238)는 시트의 반송 방향의 상류 측의 장치(인쇄 장치(107) 및 인서터(108))로부터 검품 장치(109)로 시트가 반송되는지의 여부를 판정한다. 시트가 반송되지 않으면, CPU(238)는 프로세스를 단계 S602로 복귀시키고; 그렇지 않으면, CPU(238)는 프로세스를 단계 S604로 진행시킨다. 단계 S604에서, CPU(238)는 촬영 유닛(240)에 의해, 검사 대상인 시트의 화상을 판독함으로써 판독 화상을 획득하고, 획득된 판독 화상을 메모리(239)에 저장하고, 프로세스를 단계 S605로 진행시킨다.

단계 S605에서는, CPU(238)가 도 7에 나타낸 절차(후술됨)에 따라, 단계 S604에서 획득된 판독 화상(즉, 시트에 인쇄된 화상을 판독하여 획득된 판독 화상)과 기준 화상을 비교하는 처리를 수행한다. 여기서 사용되는 기준 화상은 기준 화상의 등록 처리(도 4)에 의해 등록(생성)된 화상이고, 메모리(239)에 저장된다. 화상들의 비교 처리가 완료되면, CPU(238)는 단계 S606에서 비교 처리에서의 기준 화상과의 비교의 결과로서, 인쇄된 화상이 정상인지 여부(즉, 정상적인 화상이 시트 상에 인쇄되었는지의 여부)를 판정한다.

인쇄된 화상이 정상이면, CPU(238)는 단계 S606으로부터 단계 S607로 프로세스를 진행시키고, 검품 장치(109)의 표시 유닛(241)에 인쇄된 화상이 정상임을 표시하는 검품 결과를 표시한다. 또한, CPU(238)는 단계 S608에서, 인쇄 장치(107)에게 대용량 스태커(110)의 스택 트레이(341)에 인쇄 시트를 배지하도록 지시하고, 프로세스를 단계 S602로 복귀시킨다. 이 경우, 인쇄 장치(107)는, 검품 장치(109)로부터의 지시에 기초하여, 대용량 스태커(110)에게 반송된 인쇄 시트를 스택 트레이(341)에 배지하도록 지시한다.

한편, 인쇄된 화상이 정상이 아니면(화상에 이상이 있는 경우), CPU(238)는 프로세스를 단계 S606으로부터 단계 S609로 진행시키고, 검품 장치(109)의 표시 유닛(241)에, 인쇄된 화상이 정상이 아님을 표시하는 검품 결과를 표시한다. 또한, CPU(238)는, 단계 S610에서, 인쇄 장치(107)에게 대용량 스태커(110)의 이스케이프 트레이(346)에 인쇄 시트를 배지하도록 지시하고, 프로세스를 단계 S602로 복귀시킨다. 이 경우, 인쇄 장치(107)는, 검품 장치(109)로부터의 지시에 기초하여, 대용량 스태커(110)에게 반송된 인쇄 시트를 이스케이프 트레이(346)에 배지하도록 지시한다.

프로세스를 단계 S602로 복귀시킨 후에, CPU(238)는 단계들 S602 내지 S610의 프로세스들을 계속한다. 검품 종료 지시를 수신하면, CPU(238)는 도 6에 나타낸 절차에 따라 검품 처리를 종료한다.

<화상들의 비교 처리(S605)>

도 7은 단계 S605에서 검품 장치(109)의 CPU(238)에 의해 실행되는 화상들의 비교 처리(S605)의 절차를 도시하는 흐름도이다.

단계 S701에서, CPU(238)는 단계 S604에서 촬영 유닛(240)에 의해 촬영된 화상(판독 화상)으로부터 시트 정점들을 추출하는 처리를 수행한다. 단계 S701에서의 시트 정점들의 추출 처리는 단계 S501에서와 같이, 도 8에 나타낸 전술된 절차에 따라 실행된다. 시트 정점들의 추출 처리가 완료되면, CPU(238)는 프로세스를 단계 S702로 진행시킨다.

단계 S702에서, CPU(238)는 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점들을 사용할지의 여부를 판정한다. 보다 구체적으로, 판독 화상에 사용될 기준 화상과 연관된 위치 정렬 정보에 특징점들이 사용되는 경우, 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점들을 사용하는 것으로 판정된다. 전술한 바와 같이, 기준 화상으로부터 추출된 특징점들의 수가 미리 결정된 수 이상이면(단계 S504에서 예), 추출된 특징점들은 기준 화상과 연관된 위치 정렬 정보로서 메모리(239)에 저장된다. 한편, 기준 화상으로부터 추출된 특징점들의 수가 미리 결정된 수보다 크지 않다면(단계 S504에서 아니오), 시트 정점들은 기준 화상과 연관된 위치 정렬 정보로서 메모리(239)에 저장된다.

CPU(238)가 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점들을 사용하기로 결정하는 경우, CPU(238)는 프로세스를 단계 S702로부터 단계 S703으로 진행시킨다. 단계 S703에서, CPU(238)는 단계 S604에서 획득된 판독 화상 내의 위치 정렬 정보에 의해 표시된 특징점들의 위치를 획득한다. 보다 구체적으로, 도 10d를 참조하여 전술한 바와 같이, CPU(238)는 단계 S701에서 판독 화상으로부터 추출된 시트 정점들을 기준으로 사용하여 판독 화상에 대해 기준 화상 내의 각각의 특징점의 위치(좌표) 부근의 화상과 매칭되는 부분을 검색한다. 이것은 판독 화상에서의 각각의 특징점의 위치가 획득되는 것을 허용한다.

단계 S703에서의 처리가 완료되면, CPU(238)는 단계 S704에서, 단계 S703에서 획득된 판독 화상 내의 특징점들의 위치(좌표)가 기준 화상 내의 특징점들의 위치(좌표)와 일치하도록 판독 화상을 변형시키는 처리(화상 변형)를 수행한다. 이 처리에서는, 판독 화상의 해상도를 미리 결정된 해상도로 변환하는 처리가 수행될 수 있다는 점에 유의한다. 이 화상 변형은 또한 기하학적 변환(geometric transformation)이라고 칭해지고, 아핀 변환(affine transformation)과 같은 공지의 방법을 사용하여 구현될 수 있다. 아핀 변환에서는, 변형 기준으로서 기능하는 화상(본 실시예에서는, 기준 화상)과 변형 대상으로서 기능하는 화상(본 실시예에서는, 판독 화상) 사이에서 매칭되어야 하는 부분들의 좌표들로부터 변환 처리에 필요한 계수를 구할 수 있다. 이러한 화상 변형은 기준 화상과 판독 화상의 위치 정렬이 달성되게 한다.

한편, CPU(238)가 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점들을 사용하지 않는 것으로 판정하면, CPU(238)는 프로세스를 단계 S702로부터 단계 S705로 진행시킨다. 단계 S705에서, CPU(238)는 단계 S701에서 판독 화상으로부터 추출된 시트 정점들의 위치(좌표)가 기준 화상 내의 시트 정점들의 위치(좌표)와 일치하도록 판독 화상을 변형시키는 처리(화상 변형)를 수행한다. 이 처리에서는, 판독 화상의 해상도를 미리 결정된 해상도로 변환하는 처리가 수행될 수 있다는 점에 유의한다.

전술한 바와 같이, 단계 S702 내지 S705에서, CPU(238)는 메모리(239)에 저장된 설정 정보(위치 정렬 정보)에 따라 특징점들의 위치 또는 시트 정점들의 위치를 사용하여 판독 화상을 기준 화상과 위치 정렬한다.

단계 S704 또는 단계 S705에서 판독 화상을 변형함으로써, 기준 화상과의 판독 화상의 위치 정렬이 달성된다. 단계 S704 또는 S705에서 판독 화상의 변형이 완료되면, CPU(238)는 프로세스를 단계 S706으로 진행시킨다. 단계 S706에서, CPU(238)는 단계 S704 또는 단계 S705에서의 변형 후의 화상을 기준 화상과 비교하고, 이 절차에 따라 비교 처리를 종료한다.

도 11a 내지 도 11f는 단계 S704 또는 단계 S705에서 수행된 화상 변형(화상 위치 정렬)의 예를 나타내는 도면들이다. 도 11a 내지 11c는 화상 위치 정렬을 위해 기준 화상으로부터 충분한 수의 특징점들이 추출될 수 있는 경우에 기준 화상, 단계 S604에서 획득된 판독 화상, 및 판독 화상을 변형하여 획득된 화상을 각각 나타낸다. 도 11a 및 도 11b에서, 기준 화상 및 판독 화상 내의 특징점들은 점의 원들로 표시된다는 점에 유의한다. 이 예에서, 판독 화상은 도 11a에 나타낸 기준 화상에서의 (점의 원들로 표시된) 특징점들의 위치가 도 11b에 나타낸 판독 화상에서의 (점의 원들로 표시된) 특징점들의 위치와 일치하도록 변형된다. 그 결과, 도 11c에 나타낸 화상이 획득된다. 이 경우, 단계 S706에서 도 11a에 나타낸 기준 화상과 도 11c에 나타낸 화상 간의 비교가 수행되고, 그에 의해 시트 상에 인쇄된 화상을 검사한다.

도 11d 내지 도 11f는 화상 위치 정렬을 위해 기준 화상으로부터 충분한 수의 특징점들이 추출될 수 없는 경우에, 기준 화상, 단계 S604에서 획득된 판독 화상, 및 판독 화상을 변형하여 획득된 화상을 각각 나타낸다. 도 11d에 나타낸 바와 같이, 이 예에서, (화상이 인쇄되지 않은 상태에서) 빈 시트에 대응하는 화상이 기준 화상으로서 사용된다. 도 11d 및 도 11e에서, 기준 화상 및 판독 화상 내의 시트 정점들은 점의 원들로 표시된다는 점에 유의한다. 이 예에서, 판독 화상은 도 11d에 나타낸 기준 화상에서의 시트 정점들(점의 원들로 표시됨)의 위치가 도 11e에 나타낸 판독 화상에서의 시트 정점들(점의 원들로 표시됨)의 위치와 일치하도록 변형된다. 그 결과, 도 11f에 나타낸 화상이 획득된다. 이 경우, 단계 S706에서 도 11d에 나타낸 기준 화상과 도 11f에 나타낸 화상 간의 비교가 수행되고, 그에 의해 시트 상에 인쇄된 화상을 검사한다.

<검품 결과의 표시예>

도 12는 검품 장치(109)의 표시 유닛(241)에 표시되는 검품 결과를 나타내는 조작 화면의 예를 도시하는 도면이며, 단계 S609에서, 시트 상에 인쇄된 화상에 이상이 있다고 판정될 때, 표시되는 조작 화면의 예를 도시한다. 표시 영역(1201)에는, 기준 화상과의 위치 정렬을 위해, 검품 장치(109)에서의 촬영 유닛(240)에 의해 최종적으로 획득된 판독 화상이 표시된다. 표시 영역(1202)에는, 검품 결과를 표시하는 정보(인쇄된 화상에 이상이 있다는 것을 표시하는 판정 결과, 그 요인, 및 그 요인이 발생한 위치)가 표시된다. 버튼(1203)은 검품 처리를 종료하도록 지시하는데 사용된다. 또한, 버튼(1204)은 사용자가 전체 인쇄 작업의 검품 결과를 확인하기 위한 화면을 표시하도록 지시하는데 사용된다. 이 예는 (표시 영역(1201)에 표시된) 판독 화상을 변형함으로써 획득된 화상을 기준 화상(도 11d)과 비교한 결과로서, 변형 후의 화상에서 검은 반점(1205)이 검출되는 것으로 인해 인쇄된 화상에 이상이 있는 것으로 판정된 것을 나타낸다.

본 실시예에서는, 인쇄 장치(107)로부터 검품 장치(109)에 반송된 시트의 화상을 판독함으로써, 기준 화상을 생성한다는 점(도 4)에 유의한다. 그러나, 기준 화상은 래스터화된 인쇄 데이터를 사용하여 생성될 수 있다. 이 경우, 검품 장치(109)는 반송된 시트의 화상을 인쇄하는데 사용되는 인쇄 데이터를 인쇄 장치(107)로부터 획득하고, 획득된 인쇄 데이터에 기초하여 기준 화상을 생성한다. 기준 화상의 생성 처리(도 5)의 단계 S501 및 단계 S502에서, 검품 장치(109)는 인쇄 데이터에 기초하여 화상이 시트에 인쇄될 때 생성되는 마진 폭으로부터 시트의 시트 정점들의 위치를 산출할 수 있다는 점에 유의한다.

전술한 바와 같이, 본 실시예에 따른 검품 장치(109)는 시트의 검사(검품)를 위한 기준 화상을 획득하고, 기준 화상으로부터, 기준 화상과 화상의 위치 정렬을 위해 사용될 특징점들을 추출한다. 검품 장치(109)는 검사(검품) 대상의 시트의 화상을 판독함으로써 획득된 판독 화상을 기준 화상과 위치 정렬시키고, 위치 정렬된 판독 화상을 기준 화상과 비교함으로써 시트를 검사한다(판독 화상을 검품한다). 화상 위치 정렬에서, 검품 장치(109)는 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 특징점들의 위치 또는 시트의 코너들을 표시하는 시트 정점들의 위치를 사용한다.

따라서, 본 실시예에서, 판독 화상과 기준 화상의 위치 정렬은 획득된 기준 화상으로부터 추출된 특징점들의 수에 기초하여 특징점들의 위치 또는 시트 정점들의 위치를 사용하여 수행된다. 예를 들어, 특징점들의 수가 미리 결정된 수 이상이면, 특징점들의 위치를 사용하여 화상 위치 정렬이 수행되고; 그렇지 않으면, 시트 정점들의 위치를 사용하여 화상 위치 정렬이 수행된다. 즉, 시트 상에 인쇄된 화상으로부터 추출된 특징점들의 수가 적고 화상 위치 정렬을 위해 충분한 수의 특징점들이 사용될 수 없다면, 화상 위치 정렬은 시트 정점들의 위치를 사용하여 수행된다. 이에 의해, 적은 수의 특징점들을 포함하는 화상이 인쇄된 인쇄 시트를 검사할 때에도, 인쇄 시트의 판독 화상을 검사를 위한 기준 화상에 위치 정렬할 수 있다. 따라서, 인쇄 시트의 검사를 위해 판독 화상과 기준 화상 사이의 비교(즉, 인쇄 시트의 검품 처리)를 수행하는 것이 가능하게 된다. 예를 들어, 기준 화상이 빈 시트에 대응하는 화상이더라도, 시트의 검품 처리에서 이상 위치를 검출하는 것이 가능하게 된다.

제2 실시예

제1 실시예에서는, 기준 화상 내의 특징점들의 수에 기초하여, 화상 위치 정렬을 위해 특징점들을 사용할지 또는 시트 정점들을 화상 위치 정렬에 사용할지를 결정하는 예를 설명하였다. 제2 실시예에서는 미리 결정된 조건 하에서 화상 위치 정렬을 위해 특징점들 및 시트 정점들 양쪽 모두를 사용하는 예를 설명할 것이다. 이하, 제1 실시예와 공통되는 부분의 설명은 생략할 것이다.

<기준 화상의 생성 처리(S405)>

본 실시예에서는, 제1 실시예와 유사하게, 기준 화상의 등록 처리가 도 4에 나타낸 절차에 따라 검품 장치(109)에 의해 실행된다. 그러나, 단계 S405에서, 단계 S403에서 획득된 판독 화상을 사용하여 기준 화상을 생성하는 처리는 도 13에 나타낸 절차에 따라 실행된다. 도 13은 본 실시예에 따른 기준 화상의 생성 처리의 절차를 도시하는 흐름도이다. 도 4 및 도 13의 단계들 각각에서의 처리는 검품 장치(109)의 CPU(238)에 의해 실행된다는 점에 유의한다.

단계 S501 내지 단계 S503은 제1 실시예와 동일하다. 본 실시예에서, 단계 S503에서의 처리가 완료되면, CPU(238)는 프로세스를 단계 S1301로 진행시킨다.

단계 S1301에서, CPU(238)는 단계 S503에서 기준 화상으로부터 추출된 특징점들의 수 N을 제1 임계값 Th1 및 제2 임계값 Th2와 비교한다. 비교 처리의 결과로서, 추출된 특징점들의 수 N이 제1 임계값(Th1)(N≥Th1)이상이면, CPU(238)는 프로세스를 단계 S505로 진행시킨다. 이것은 화상 위치 정렬을 위해 충분한 수의 특징점들이 추출될 수 있는 경우에 대응한다. 대안적으로, 추출된 특징점들의 수 N이 제2 임계값(Th2)(N<Th2)보다 작은 경우, CPU(238)는 프로세스를 단계 S506으로 진행시킨다. 이것은 화상 위치 정렬을 위해 충분한 수의 특징점들이 추출될 수 없는 경우에 대응한다. 단계 S505 또는 단계 S506에서, 제1 실시예와 동일한 처리가 수행된다.

단계 S1301에서, 추출된 특징점들의 수 N이 제2 임계값(Th2) 이상이고 제1 임계값(Th1)보다 작으면(Th2≤N<Th1), CPU(238)는 프로세스를 단계 S1302로 진행시킨다. 이것은 예를 들어, 도 15a에 나타낸 일례에서와 같이, 시트의 코너 영역에 페이지 번호가 인쇄되고 그 코너 영역 이외의 영역에는 코너 특징량이 큰 점이 존재하지 않는 시트를 사용하여 기준 화상이 등록되는 경우에 대응한다.

도 15b는 단계 S503에서, 도 15a에 나타낸 기준 화상으로부터 특징점들을 추출하여 획득된 화상의 예를 나타낸다. 도 15b에 나타낸 화상은 특징량이 큰 점을 각각 갖는 점들이 시트의 코너 영역(도 15b에서 점의 원으로 표시됨)에 국지화한 상태를 표시한다. CPU(238)가 단계 S503에서, 각각이 큰 특징량을 갖는 그러한 점들 중 하나를 특징점으로서 추출하는 경우, 각각 큰 특징량을 갖는 나머지 점들은 매우 가깝게 위치하고 따라서 특징점들로서 추출되지 않는다. 이 경우, 기준 화상으로부터 특징점이 추출되더라도, 그 특징점에 기초하여, 처리 대상의 판독 화상과 기준 화상의 위치 정렬을 수행하는 것이 어려워질 수 있다.

본 실시예에서, 단계 S1302에서, CPU(238)는 단계 S503에서 추출된 특징점 및 검품 처리에서의 화상 위치 정렬을 위한 설정 정보(위치 정렬 정보)로서 화상 내의 특징점으로부터 비교적 먼 위치들에 존재하는 시트 정점들을 메모리(239)에 저장한다. CPU(238)는 생성된 기준 화상 및 생성된 위치 정렬 정보를 단계 S401에서 획득된 인쇄 설정 정보와 연관시켜 메모리(239)에 저장한다는 점에 유의한다.

<화상들의 비교 처리(S605)>

본 실시예에서는, 제1 실시예와 마찬가지로, 도 6에 나타낸 절차에 따라 검품 장치(109)에 의해 인쇄 시트의 검품 처리가 실행된다. 그러나, 단계 S605에서는, 단계 S604에서 획득된 판독 화상(즉, 시트 상에 인쇄된 화상을 판독하여 획득된 판독 화상)을 기준 화상과 비교하는 처리가 도 14에 나타낸 절차에 따라 수행된다. 도 14는 본 실시예에 따른 화상들의 비교 처리의 절차를 도시하는 흐름도이다. 도 6 및 도 14의 단계들 각각에서의 처리는 검품 장치(109)의 CPU(238)에 의해 실행된다는 점에 유의한다.

단계 S701 내지 단계 S703과 단계 S705는 제1 실시예에서의 단계들과 동일하다. 본 실시예에서는, 단계 S703에서의 처리가 완료되면, CPU(238)는 프로세스를 단계 S1401로 진행시킨다.

단계 S1401에서, CPU(238)는 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점들 및 시트 정점들 둘 다를 사용할지의 여부를 판정한다. 보다 구체적으로, 판독 화상에 사용되는 기준 화상에 연관된 위치 정렬 정보에 대하여 특징점들과 시트 정점들이 조합하여 사용된다면, CPU(238)는 프로세스를 단계 S1402로 진행시킨다. 한편, 판독 화상에 사용되는 기준 화상과 연관된 위치 정렬 정보에 특징점들만이 사용되는 경우에는, CPU(238)는 프로세스를 단계 S704로 진행시킨다. 단계 S704에서, 제1 실시예와 동일한 처리가 수행된다.

단계 S1402에서, CPU(238)는 단계 S703에서 획득된 판독 화상 내의 특징점들 및 시트 정점들의 위치(좌표)가 기준 화상 내의 특징점들 및 시트 정점들의 위치(좌표)와 일치하도록 판독 화상을 변형시키는 처리(화상 변형)를 수행한다. 이 처리에서는, 판독 화상의 해상도를 미리 결정된 해상도로 변환하는 처리가 수행될 수 있다는 점에 유의한다.

단계 S704, 단계 S705, 또는 단계 S1402에서의 처리가 완료되면, CPU(238)는 단계 S706에서, 제1 실시예에서와 같이 단계 S704, 단계 S705, 또는 단계 S1402에서의 변형 후의 화상을 기준 화상과 비교하고, 이 절차에 따라 비교 처리를 종료한다.

도 16a는 단계 S1401에서, 판독 화상과 기준 화상 사이의 위치 정렬을 위해 특징점과 시트 정점 양쪽 모두를 사용하는 것으로 판정되는 기준 화상의 예를 나타내며, 기준 화상은 도 15a에 나타낸 것과 동일하다. 도 16b는 검품 처리에서 단계 S604에서 획득된 판독 화상의 예를 나타낸다. 도 16a 및 도 16b에서, 위치 정렬 정보에 사용되는 특징점 및 시트 정점들은 점의 원들로 표시된다.

도 16c는 단계 S1402에서 변형(화상 위치 정렬)을 거친 화상을 나타낸다. 본 실시예에서, 도 16a 및 16b에 나타낸 시트 정점들 및 특징점의 위치는 판독 화상과 기준 화상 사이의 위치 정렬을 수행하기 위한 기준으로서 사용된다. 단계 S706에서, CPU(238)는 도 16a에 나타낸 화상과 도 16c에 나타낸 화상을 비교한다.

전술한 바와 같이, 본 실시예에 따르면, 필요에 따라, 미리 결정된 조건 하에서 화상 위치 정렬을 위해 특징점과 시트 정점 양쪽 모두를 사용함으로써, 검사를 위한 기준 화상과 인쇄 시트의 판독 화상 사이의 위치 정렬을 보다 정확하게 수행할 수 있게 된다. 따라서, 인쇄 시트의 검사를 위해 보다 적절하게 판독 화상과 기준 화상 사이의 비교를 보다 적절하게 수행하는 것이 가능해진다.

다른 실시예들

제1 실시예에서, 검품 장치(109)에서의 각종 설정 및 지시는 검품 장치(109)의 표시 유닛(241) 및 조작 유닛(242)을 사용하여 행해진다. 그러나, 본 발명은 이에 한정되지 않는다. 예를 들어, 외부 제어기(102), 인쇄 장치(107), 검품 장치(109), 및 클라이언트 PC(103) 중 하나에서의 사용자 조작에 따라 검품 장치(109)에 대해 검품 처리의 실행 지시 또는 종료 지시 또는 인쇄 지시가 행해질 수 있다. 예를 들어, 사용자가 인쇄 장치(107)의 디스플레이(225) 및 조작 유닛(224)을 사용하여 검품 장치(109)에 대해 각종 설정들 및 지시들을 행할 수 있는 구성이 채택될 수 있다.

본 발명의 실시예(들)는 또한 저장 매체(이는 더 완전하게는 '비일시적 컴퓨터 판독가능 저장 매체'로서 지칭될 수도 있음)에 기록된 컴퓨터 실행가능 명령어(예를 들어, 하나 이상의 프로그램)를 판독하고 실행하여, 하나 이상의 상기 실시예(들)의 기능을 수행하고, 및/또는 하나 이상의 상기 실시예(들)의 기능을 수행하기 위한 하나 이상의 회로(예를 들어, 주문형 집적 회로(ASIC))를 포함하는 시스템 또는 장치의 컴퓨터에 의해, 그리고 예를 들어, 하나 이상의 상기 실시예(들)의 기능을 수행하기 위해 저장 매체로부터 컴퓨터 실행가능 명령어를 판독하고 실행함으로써 및/또는 하나 이상의 상기 실시예(들)의 기능을 수행하기 위해 하나 이상의 회로를 제어함으로써 시스템 또는 장치의 컴퓨터에 의해 수행된 방법에 의해 실현될 수도 있다. 컴퓨터는 하나 이상의 프로세서(예를 들어, 중앙 처리 유닛(CPU), 마이크로 처리 유닛(MPU))를 포함할 수 있으며, 컴퓨터 실행가능 명령어를 판독하고 실행하기 위해 개별 컴퓨터 또는 개별 프로세서의 네트워크를 포함할 수 있다. 컴퓨터 실행가능 명령어들은 예를 들어, 네트워크 또는 저장 매체로부터 컴퓨터에 제공될 수 있다. 저장 매체는 예를 들어, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 분산형 컴퓨팅 시스템의 스토리지, 광디스크(예를 들어, 콤팩트 디스크(CD), 디지털 다기능 디스크(DVD) 또는 블루레이 디스크(BD)™), 플래시 메모리 디바이스, 메모리 카드 등 중 하나 이상을 포함할 수 있다.

(기타의 실시예)

본 발명은, 상기의 실시형태의 1개 이상의 기능을 실현하는 프로그램을, 네트워크 또는 기억 매체를 개입하여 시스템 혹은 장치에 공급하고, 그 시스템 혹은 장치의 컴퓨터에 있어서 1개 이상의 프로세서가 프로그램을 읽어 실행하는 처리에서도 실현가능하다.

또한, 1개 이상의 기능을 실현하는 회로(예를 들어, ASIC)에 의해서도 실행가능하다.

본 발명은 예시적인 실시예들을 참조하여 설명되었지만, 본 발명은 개시된 예시적인 실시예들에 한정되지 않는다는 것이 이해되어야 한다. 이하의 청구항의 범위는 이러한 모든 변형과 동등한 구조 및 기능을 포함하도록 최광의로 해석되어야 한다.

Claims

검품 장치로서,
시트의 검품을 위한 기준 화상을 획득하도록 구성된 획득 유닛;
상기 기준 화상으로부터, 상기 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하도록 구성된 추출 유닛;
반송된 시트의 화상을 판독하도록 구성된 판독 유닛;
상기 판독 유닛에 의해 검품 대상 시트의 화상을 판독함으로써 획득된 판독 화상을 상기 기준 화상과 위치 정렬하도록 구성된 위치 정렬 유닛; 및
상기 위치 정렬된 판독 화상을 상기 기준 화상과 비교함으로써 상기 판독 화상을 검품하도록 구성된 검품 유닛을 포함하고,
상기 위치 정렬 유닛은 상기 기준 화상으로부터 상기 추출 유닛에 의해 추출된 상기 특징점들의 수에 기초하여, 상기 특징점들의 위치를 사용하거나 또는 상기 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행하는 검품 장치.
제1항에 있어서,
상기 기준 화상으로부터 상기 추출 유닛에 의해 추출된 특징점들의 수에 기초하여, 상기 위치 정렬을 위해 상기 특징점들의 위치를 사용할지 또는 상기 위치 정렬을 위해 상기 시트 정점들의 위치를 사용할지를 판정하도록 구성된 판정 유닛을 추가로 포함하고,
상기 위치 정렬 유닛은 상기 판정 유닛의 판정 결과에 따라 상기 특징점들의 위치 또는 상기 시트 정점들의 위치를 사용하여 상기 판독 화상을 상기 기준 화상과 위치 정렬시키는 검품 장치.
제2항에 있어서,
상기 특징점들의 수가 미리 결정된 수보다 작지 않은 경우, 상기 판정 유닛은 상기 위치 정렬을 위해 상기 특징점들의 위치를 사용하기로 판정하고,
상기 특징점들의 수가 상기 미리 결정된 수보다 작은 경우, 상기 판정 유닛은 상기 위치 정렬을 위해 상기 시트 정점들의 위치를 사용하기로 판정하는 검품 장치.
제1항 또는 제2항에 있어서,
상기 획득 유닛은 반송된 시트의 화상을 상기 판독 유닛에 의해 판독함으로써 획득된 화상에 기초하여 상기 기준 화상을 생성하는 검품 장치.
제4항에 있어서,
상기 획득 유닛은 상기 판독 유닛에 의해 획득된 상기 화상으로부터 상기 시트 정점들을 추출하고, 상기 추출된 시트 정점들의 위치 및 상기 시트에 대하여 실행된 인쇄에 사용된 인쇄 설정에 기초하여 상기 시트의 표면의 형상에 따라 상기 화상을 변형함으로써 상기 기준 화상을 획득하는 검품 장치.
제5항에 있어서,
상기 추출 유닛에 의해 추출된 특징점들의 수가 미리 결정된 수보다 작지 않은 경우, 상기 획득 유닛은 상기 특징점들을 상기 기준 화상과 연관시켜서 상기 위치 정렬을 위한 설정 정보로서 저장하고,
상기 추출 유닛에 의해 추출된 특징점들의 수가 상기 미리 결정된 수보다 작은 경우, 상기 획득 유닛은 상기 시트 정점들을 상기 기준 화상과 연관시켜서 상기 설정 정보로서 저장하는 검품 장치.
제6항에 있어서,
상기 위치 정렬 유닛은 상기 저장된 설정 정보에 따라 상기 특징점들의 위치 또는 상기 시트 정점들의 위치를 사용하여 상기 판독 화상을 상기 기준 화상과 위치 정렬시키는 검품 장치.
제7항에 있어서,
상기 특징점들의 위치가 상기 기준 화상과 상기 판독 화상의 위치 정렬에 사용되는 경우, 상기 위치 정렬 유닛은 상기 설정 정보에 의해 표시되는, 상기 판독 화상 내의 특징점들의 위치를 획득하고, 상기 판독 화상 내의 특징점들의 위치가 상기 기준 화상 내의 특징점들의 위치와 일치하도록 상기 판독 화상을 변형함으로써 상기 위치 정렬을 수행하는 검품 장치.
제7항에 있어서,
상기 시트 정점들의 위치가 상기 기준 화상과 상기 판독 화상의 위치 정렬에 사용되는 경우, 상기 위치 정렬 유닛은 상기 판독 화상으로부터 추출된 상기 시트 정점들의 위치가 상기 기준 화상 내의 상기 시트 정점들의 위치와 일치하도록 상기 판독 화상을 변형함으로써 상기 위치 정렬을 수행하는 검품 장치.
제1항 또는 제2항에 있어서,
상기 획득 유닛은 반송된 시트의 화상을 인쇄하는데 사용되는 인쇄 데이터를 획득하고, 상기 인쇄 데이터에 기초하여 상기 기준 화상을 생성하는 검품 장치.
제1항에 있어서,
상기 기준 화상으로부터 상기 추출 유닛에 의해 추출된 특징점들의 수에 기초하여, 상기 위치 정렬 유닛은 상기 위치 정렬을 위해, 상기 특징점들의 위치, 상기 시트 정점들의 위치, 또는 상기 특징점들 및 상기 시트 정점들 둘 다를 사용하는 검품 장치.
제11항에 있어서,
상기 특징점들의 수가 제1 임계값보다 작지 않은 경우, 상기 위치 정렬 유닛은 상기 특징점들의 위치를 사용하여 상기 판독 화상의 위치 정렬을 수행하고,
상기 특징점들의 수가 상기 제1 임계값보다 작은 제2 임계값보다 작은 경우, 상기 위치 정렬 유닛은 상기 시트 정점들의 위치를 사용하여 상기 위치 정렬을 수행하고,
상기 특징점들의 수가 상기 제2 임계값보다 작지 않고 상기 제1 임계값보다 작은 경우, 상기 위치 정렬 유닛은 상기 특징점들 및 상기 시트 정점들 둘다를 사용하여 상기 위치 정렬을 수행하는 검품 장치.
제1항 또는 제2항에 있어서,
상기 검품 유닛에 의한 검품의 결과로서, 이상이 없는 것으로 판정된 시트와 이상이 있는 것으로 판정된 시트를, 상이한 배지처들로 배지하는 배지 제어를 수행하도록 구성된 제어 유닛을 추가로 포함하는 검품 장치.
제1항에 있어서,
상기 판독 유닛은 반송되는 시트의 제1 표면의 화상을 판독하도록 구성된 제1 판독 유닛 및 상기 반송되는 시트의 상기 제1 표면의 반대측에 있는 제2 표면의 화상을 판독하도록 구성된 제2 판독 유닛을 포함하고,
상기 제1 표면에 대응하는 기준 화상으로부터 추출된 상기 특징점들의 수에 기초하여, 상기 위치 정렬 유닛은 상기 제1 판독 유닛에 의한 판독에 의해 획득된 상기 제1 표면의 판독 화상의 위치 정렬을 위해 상기 특징점들의 위치 또는 시트 정점들의 위치를 사용하고, 상기 제2 판독 유닛에 의한 판독에 의해 획득된 상기 제2 표면의 판독 화상의 위치 정렬을 위해 상기 시트 정점들의 위치를 사용하는 검품 장치.
인쇄 시스템으로서,
시트 상에 화상을 인쇄하도록 구성된 인쇄 장치; 및
상기 인쇄 장치에 의해 화상이 인쇄되고 반송 경로를 통해 반송된 시트를 검품하도록 구성된 검품 장치를 포함하고,
상기 검품 장치는:
시트의 검품을 위한 기준 화상을 획득하도록 구성된 획득 유닛;
상기 기준 화상으로부터, 상기 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하도록 구성된 추출 유닛;
반송 경로를 통해 반송되는 시트의 화상을 판독하도록 구성된 판독 유닛;
상기 판독 유닛에 의해 검품 대상 시트의 화상을 판독함으로써 획득된 판독 화상을 상기 기준 화상과 위치 정렬하도록 구성된 위치 정렬 유닛; 및
상기 위치 정렬된 판독 화상을 상기 기준 화상과 비교함으로써 상기 판독 화상을 검품하도록 구성된 검품 유닛을 포함하고,
상기 위치 정렬 유닛은 상기 기준 화상으로부터 상기 추출 유닛에 의해 추출된 상기 특징점들의 수에 기초하여, 상기 특징점들의 위치를 사용하거나 또는 상기 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 위치 정렬을 수행하는 인쇄 시스템.
반송된 시트의 화상을 판독하도록 구성된 판독 유닛을 포함하는 검품 장치를 제어하기 위한 방법으로서,
시트의 검품을 위한 기준 화상을 획득하는 단계;
상기 기준 화상으로부터, 상기 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하는 단계;
상기 판독 유닛에 의해 검품 대상 시트의 화상을 판독하여 획득된 판독 화상을 상기 기준 화상과 위치 정렬시키는 단계; 및
상기 위치 정렬된 판독 화상을 상기 기준 화상과 비교함으로써 상기 판독 화상을 검품하는 단계를 포함하고,
상기 위치 정렬에서, 상기 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 상기 특징점들의 위치를 사용하거나 또는 상기 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 상기 위치 정렬을 수행하는 방법.
컴퓨터가 반송된 시트의 화상을 판독하도록 구성된 판독 유닛을 포함하는 검품 장치를 제어하기 위한 방법을 실행하게 하는, 저장 매체에 저장된 컴퓨터 프로그램으로서,
상기 방법은:
시트의 검품을 위한 기준 화상을 획득하는 단계;
상기 기준 화상으로부터, 상기 기준 화상과 화상의 위치 정렬에 사용될 특징점들을 추출하는 단계;
상기 판독 유닛에 의해 검품 대상 시트의 화상을 판독하여 획득된 판독 화상을 상기 기준 화상과 위치 정렬시키는 단계; 및
상기 위치 정렬된 판독 화상을 상기 기준 화상과 비교함으로써 상기 판독 화상을 검품하는 단계를 포함하고,
상기 위치 정렬에서, 상기 기준 화상으로부터 추출된 특징점들의 수에 기초하여, 상기 특징점들의 위치를 사용하거나 또는 상기 시트의 코너를 각각 표시하는 시트 정점들의 위치를 사용하여 상기 위치 정렬을 수행하는 저장 매체에 저장된 컴퓨터 프로그램.