CN116805955A - 图像处理装置及方法、读取装置、图像形成装置、数据管理系统 - Google Patents

Abstract

本发明的目的在于提供一种可以生成把需要显示的指定颜色作为可见图像来显示的图像数据的图像处理装置、读取装置及方法、图像形成装置、数据管理系统。本发明的图像处理装置具备：输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，图像处理部，用于生成以指定颜色显示与所述可见图像数据的指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中规定吸收率以上的部分。

Description

图像处理装置及方法、读取装置、图像形成装置、数据管理 系统

技术领域

本发明涉及图像处理装置及方法、读取装置、图像形成装置、数据管理系统。

背景技术

现有的OCR(Optical Character Recognition)技术可以从扫描图像中自动提取文字信息。对于文档中打印在公司名称上盖的印章，用颜色消除功能消除特定颜色之后再进行OCR。

专利文献1(JP特开平11-205618号公报)公开了一种技术方案，用红外光读取和可见光读取的信息来判断文字区域，用可见光信息判断黑色区域，根据这些结果进行黑色文字判断。

上述技术方案的问题是，当用特定颜色消除印章时，重叠了印章的黑色文字部分也被着色为特定颜色，因此被一起消除。

发明内容

本发明是鉴于上述问题提出的技术方案，其目的在于提供一种可以生成把需要显示的指定颜色作为可见图像来显示的图像数据的图像处理装置、读取装置及方法、图像形成装置、数据管理系统。

为了解决上述课题，达成本发明的目的，本发明提供一种图像处理装置，其特征在于具备：输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，图像处理部，用于生成以指定颜色显示与所述可见图像数据的指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中规定吸收率以上的部分。

本发明的效果在于可以生成把需要显示的指定颜色作为可见图像来显示的图像数据。

附图说明

图1是第一实施方式涉及的图像处理装置的构成的示意图。

图2是用近红外光作为不可见光的特性图。

图3是色材的光吸收特性图。

图4是读取装置的构成的示意图。

图5是读取装置的控制模块结构框图。

图6是在去除阴影时用于修正黑色文字的模块结构框图。

图7是经过消色部处理的图像的示意图。

图8是实施方式的变形例1涉及的读取装置的构成的示意图。

图9是实施方式的变形例2涉及的读取装置的构成的示意图。

图10是实施方式的变形例3涉及的读取装置的构成的示意图。

图11是采用变形例3的一个实施例的示意图。

图12是变形例4涉及的黑色文字区域判断部的示意图。

图13是在变形例5涉及的黑色文字区域判断部进行阈值决定的示意图。

图14是黑色文字区域判断部进行阈值决定的示意图。

图15是变形例6涉及的黑色文字区域判断部的示意图。

图16是变形例7涉及的消色处理部的一例处理示意图。

图17是消色处理中灰度成分调整的一例UI设定画面的示意图。

图18是用于去除网格线等指定颜色的构成的示意图。

图19是变形例8涉及的图像补偿部的示意图。

图20是变形例9涉及的构成的示意图。

图21是变形例10涉及的一例构成的示意图。

图22是包括第二实施方式的图像处理装置的系统的示意图。

图23是第三实施方式涉及的图像形成装置的构成的示意图。

图24是以以往方式进行特定颜色消除时的比较图。

具体实施方式

以下参考附图详细说明图像处理装置及方法、读取装置、图像形成装置、数据管理系统的实施方式。

[第一实施方式]

图1是第一实施方式涉及的图像处理装置的构成的示意图。图像处理装置00具有输入部1a、图像处理部2a、确定部3a以及输出部4a。

输入部1a输入被摄体图像。被摄体图像包括被摄体的可见图像数据D1和被摄体的不可见图像数据D2。确定部3a基于输入部1a输入的不可见图像数据D2，确定黑色文字区域。在此，“黑色文字区域”相当于“指定区域”，为了便于理解和说明，以使用了黑色(指定颜色)文字的区域来说明。“黑色文字区域”只要是实施了黑色打印的区域即可，并不局限于此。

图像处理部2a根据从输入部1a输入的可见图像数据D1和确定部3a找到的黑色文字区域，生成用黑色显示与可见图像数据D1的黑色文字区域相应的部分的图像数据D3。输出部4a输出图像数据D3。由输出部4a输出的输出目的地可以适当决定，例如图像处理装置00的显示部、与图像处理装置00连接的外部装置等。

在此举例说明采用图像处理装置00的读取装置，作为第一实施方式。首先显示读取装置的整体构成，说明在读取装置内生成用黑色显示与被摄体的可见图像数据D1的黑色文字区域相应的部分的图像数据D3的处理。

在读取装置中摄像部相当于输入部1a。在此显示的读取装置的构成是一个例子，只要是将光源的光照射被摄体，通过用摄像部拍摄来自被拍摄体的光来读取被摄体图像的读取装置即可。

图像处理部2a和确定部3a的处理相当于后述的被摄体图像的印章消除处理。该处理的一部分或全部既可以在读取装置内进行，也可以在与读取装置分开设置的图像处理装置中，通过输入读取装置读取的被摄体图像等来进行。在图像处理装置进行全部处理的情况下，也可以将保存在服务器或存储器中的被摄体图像输入到图像处理装置中。本实施方式给出将图像处理装置适用于读取装置的例子，但是图像处理装置可以与读取装置分开设置。

以下有时把被摄体称为读取对象。读取对象是印有黑色文字等黑色文字区域与印章等消除对象互相重叠的部分。举例来说，盖有印章的各种证明、文件、或者帐票等纸质稿件，但是消除对象并不局限于印章。读取对象也不限于纸质稿件。

“可见图像数据”是指对可见波长区域的光源的光(可见光)具有感度的图像传感器等传感设备所读取的图像数据。“不可见图像数据”是指对红外线(包括近红外)或紫外线等不可见波长区域的光源的光具有感度的图像传感器等传感设备读取的图像数据。以下以近红外图像数据(以下简称为近红外图像)为“不可见图像数据”的例子，但“不可见图像数据”并不限于近红外图像。同时，用近红外光作为不可见光的例子(参见图2)。如图2所示，一般的硅图像传感器在近红外区域(约750nm～1100nm附近)具有感度。因此，可以使用以往使用的通用图像传感器，结构简易。

黑色文字使用的黑色墨水、黑色碳粉或黑铅笔含有碳。碳具有吸收可见区域和红外区域光的特点。因而，在可见区域及红外区域也能够读取黑色。另一方面，彩色墨水及CMY色碳粉具有透射红外区域光的特点。图3显示该特征。横轴表示光的波长，纵轴表示光的吸收率。在图3中，黑色表示上述含碳材料的颜色，灰色表示使用灰色墨水或稀释黑色碳粉进行打印的颜色，混合色表示混合CMY色制作的颜色(以下称为混合黑色)。混合黑色在可见区域吸收光，而在近红外区域透射光，因此在近红外区域被当作白纸的白色读取。在此，将跨越可见区域及不可见区域(近红外区域)、吸收率为规定值以上的部分(像素)定义为“指定区域”。例如，将吸收率为40％以上的颜色(像素)作为指定区域(黑色区域)。

图4是读取装置的一例示意图。读取装置1的主体10的上表面具有接触玻璃11，主机10的内部具有摄像部。主体10的内部具备光源13、第一滑架14、第二滑架15、透镜单元16、图像传感器17等。第一滑架14具有光源13和反射镜14-1，第二滑架15具有反射镜15-1、15-2。主体10还具有控制板。控制板是图5所示的控制部300，控制读取装置1整体。

控制板一边使第一滑架14及第二滑架15移动，一边照射光源13的光等，用图像传感器17依次读取来自设置在接触玻璃11上的读取对象的反射光。通过光源13的光的照射，读取对象反射的光受到第一滑架14的反射镜14-1和第二滑架15的反射镜15-1、15-2折回，入射透镜单元16，从透镜单元16射出的光在图像传感器17上成像。图像传感器17接受来自读取对象的反射光，输出图像信号。图像传感器17是例如CCD(Charge Coupled Device)或CMOS(Complementary MOS)等的图像传感器，相当于读取读取对象的图像的读取部。

光源13中设有可见光源和近红外光源。图像传感器17具有接受照射在读取对象上的可见光的反射光并输出图像的第一图像传感器、和接受照射在读取对象上的近红外光的反射光并输出图像的第二图像传感器。用可见光照射读取对象而光接受所得到的图像称为可见图像，用近红外光照射读取对象而光接受所得到的图像称为近红外图像。可见光源和近红外光源作为光源，既可以分开设置，也可以是同一个光源。

第一图像传感器及第二图像传感器只要能够分别输出可见图像和近红外图像即可，既可以由一个图像传感器构成，也可以分开设置各个图像传感器。

基准白板12是白校正用部件。

图4所示的读取装置1搭载ADF(Automatic Document Feeder)20。将ADF20一侧向上提起后向上打开ADF20，露出接触玻璃11的表面。用户在接触玻璃11上放置读取对象，而后放下ADF20，将ADF20从读取对象的背面按压到接触玻璃11上的面上。然后，按动扫描开始按钮后，第一滑架14和第二滑架15受到主扫描方向和副扫描方向上的驱动，读取整个读取对象。

除了在接触玻璃11上放置读取对象进行读取的方法以外，也可以通过以下方法进行读取。ADF20还能够以Sheet-Through方式读取读取对象。在ADF20中，拾取辊22从ADF20的托盘21一张一张地把读取对象从束中分离，通过各种输送辊24等的控制，读取在输送路23上输送的读取对象的单面或双面，而后排出到出纸盒25。

通过读取窗19进行ADF20的sheet-through方式的读取对象的读取。在该例中，将第一滑架14及第二滑架15移动并固定在规定的基地位置，在读取对象通过读取窗19和背景部26之间时，向朝向读取窗19一方的读取对象的表面照射光源13的光来读取图像。读取窗19是设置在接触玻璃11的一部分上的狭缝形的读取窗。背景部26是背景部件。

在利用ADF20进行读取对象的双面读取时，读取对象通过读取窗19之后，通过设置在读取对象的背面一方的第二读取装置的读取模块27读取背面。读取模块27具有包括光源的照射部和作为第二读取部的紧贴型图像传感器，用紧贴型图像传感器读取照射到第二面上的光的反射光。该光源也可以设置可见光源和近红外光源，以读取可见图像和近红外图像。背景部件28是浓度基准部件。

接下来说明读取装置1的控制模块。

图5是读取装置1的控制模块的一例示意图。如图5所示，读取装置1具有控制部300、操作面板301、各种传感器302、扫描仪电机303、输送路上的各种电机304、驱动电机305、输出部306以及摄像部40。此外，还连接有各种控制对象。各种传感器302是检测读取对象的传感器。扫描电机303是驱动主机10的第一滑架14和第二滑架15的电机。输送路上的各种电机304是设置在ADF20上的各种电机。输出部306相当于输出部4a向外部装置输出图像数据的输出接口。输出接口可以是USB等接口，也可以是连接到网络的通信接口。

操作面板301是例如触摸板式的液晶显示装置。操作面板301接受操作按钮或触摸输入等来自用户的各种设定或读取执行(扫描开始)等的输入操作，将对应的操作信号发送到控制部300。操作面板301在显示画面上显示来自控制部300的各种显示信息。例如，操作面板301具有用于消除用户在被摄体等上盖的印鉴的印章的各种设定按钮，当有设定按钮的输入操作时，向控制部300指示设定。在显示画面的设定画面上也可以进行是否进行印章消除的选择。还可以设定为只要操作执行扫描的按钮，就执行印章消除。进而，还可以设为把用于消除印章的各种信息保存在外置存储器中，或输出在外置装置中。

摄像部40对应于输入部1a。摄像部40具有光源部401、传感器芯片402、放大器403、A/D404、图像补偿处理部405、帧存储器406、输出控制电路407、I/F电路408，把从读取对象读取的每一帧图像从输出控制电路407通过I/F电路408输出到控制部300。各传感器芯片402是图像传感器17的像素传感器。光源部401是光源13。

摄像部40由控制器307驱动。例如，摄像部40根据来自控制器307的点灯信号点亮光源部401，在设定的时间用可见光和近红外光照射读取对象。另外，摄像部40将来自成像在图像传感器17的传感器面上的读取对象的光通过各传感器芯片402转换为电信号后输出。

摄像部40通过放大器403放大从各传感器芯片402输出的像素信号，通过A/D404将模拟信号转换为数字信号，输出像素的电平信号。图像处理补偿部405对来自各像素的输出信号实施图像补偿处理。例如，图像处理补偿部405对来自各像素的输出信号进行明暗补偿等。

图像补偿处理后，各数据存储在帧存储器406中，所存储的读取图像通过输出控制电路407、I/F电路408传送到控制部300。

控制部300具备CPU(Central Process ing Unit，中央处理器)和存储器等，CPU控制装置整体，对读取对象进行读取动作，对通过读取动作得到的读取图像执行印章消除等处理。

控制部300具有处理部30和黑色文字区域判断部32。处理部30及黑色文字区域判断部32可以通过CPU执行规定程序而发挥的功能来实现。控制部300也可以通过ASIC(Applicat ion Specific Integrated Circuit)等硬件来实现。

〈关于印章消除〉

接下来详细说明印章消除。以下以文件等作为读取对象，例示用消除特定颜色的指定颜色消除功能的构成和方法，从经过扫描文件等读取的读取图像中消除印鉴的印章。黑色文字使用的黑色墨水、黑色碳粉或石墨笔均含碳。碳具有吸收红外区域光的特点。另一方面，彩色墨水及CMY色碳粉具有透射红外区域光的特点。有时将彩色墨水和CMY彩色调色剂等黑色以外的颜色称为彩色墨水或彩色调色剂等“色***”。

因此，当向读取对象照射近红外光来读取近红外图像后，纸介质上由颜色成分形成的部分让近红外光透射，该近红外光受到纸介质反射，因此纸介质作为灰度值大的白色等明亮的颜色被读取。

对此，黑色的打印区域无论是可见光还是近红外光都会被吸收。由于黑色文字区域吸收近红外光，因此反射的光量少，作为灰度值小的黑色被读取。在印章重叠的黑色文字区域上近红外光也透射印章，但由于在印章重叠的黑色文字区域的部分吸收近红外光，因此即使在可见光下为略带红色，在近红外线图像中也同样作为黑色被读取。黑色文字区域中没有印章重叠的部分即使在可见光下也作为黑色被读取。

图6是消除阴影时用于补偿黑色文字的模块图。摄像部40分别包括在图5中说明的可见光光源13-1及可见图像传感器17-1、近红外光源13-2及近红外图像传感器17-2。摄像部40对读取对象照射可见光光源13-1的光，由可见图像传感器17-1接受来自读取对象的反射光，输出可见图像(例如RGB图像)。摄像部40还对同一个读取对象照射近红外光源13-2的光，由近红外图像传感器17-2接受来自读取对象的反射光，输出近红外图像(NIR图像)。摄像部40能够同时读取同一个读取对象的可见图像和近红外图像。如果读取对象相同，则摄像部40不需要同时读取可见图像和近红外图像两者，只要各自的摄像对象的位置一致，也可以是不同时间。

处理部30具有消色处理部31和黑色文字区域判断部32。消色处理部31和黑色文字区域判断部32用消色部30-1统一表示。在该构成中，处理部30的消色处理部31对应于图像处理部2a(参见图1)，黑色文字区域判断部32对应于确定部3a(参见图1)。

消色部30-1输入由摄像部40拍摄的可见图像和近红外图像。黑色文字区域判断部32根据近红外图像确定黑色文字区域，将确定了的黑色文字区域的像素的位置输出到消色处理部31。消色处理部31根据黑色文字区域判断部32确定的黑色文字区域的像素的位置，对可见图像中对应位置的颜色像素进行消色处理，把与黑色文字区域相应的部分作为用黑色显示的图像数据D3，经过颜色像素消色处理的输出对象的R'G'B'图像。R'G'B'图像相当于第一处理图像。

在此，RGB图像是R(Red)版图像、G(Green)版图像以及B(Blue)版图像，消色处理部31以R版图像、G版图像以及B版图像各自为对象，对对象的颜色像素进行消色处理。R'G'B'图像是R'版图像、G'版图像以及B'版图像。

在此，将与除消色以外的有彩色相对应的像素称为彩色像素。当印章重叠在黑色文字上时，色调会发生变化，因此通过对该颜色像素进行消色处理，将色调发生变化的黑色文字部分复原为黑色。由此，印章重叠部分和未重叠部分的黑色文字部分能够不间断地以黑色进行复原。

图7是消色部30-1所处理的图像的示意图。用在黑色文字“株式会社印章样本”的一部分上重叠红色印章的文档作为一例读取对象。

图7中(a)是输入到消色部30-1的可见图像M10。在可见图像M10中，与在可见光下用人眼观察原始文档时相同的状态，即在黑色文字的“株式会社印章样本”t 1的一部分上重叠了红色的印章t2，在黑色文字区域中重叠了印章t2的部分由于印章t2而呈现红色的色调。在这种状态下，即使进行OCR，也无法识别“株式会社印章样品”的全部文字。

图7中(b)是输入到消色部30-1的近红外图像M20。近红外线图像M20与可见图像M10相同，黑色文字的“株式会社印章样本”t 1全部用黑色浮起来表示。与印章t2重叠的黑色文字部分在近红外光的照射下，与其他黑色文字部分一样浮现为黑色。黑色文字区域判断部32通过使用近红外线图像M20，与印章t2重叠的黑色文字部分也与其他的黑色文字部分一样，能够特定为黑色文字区域。

图7中(c)是因可见图像M10的印章t2的重叠而带有红色的“株式会社印章样本”t1的黑色文字区域的彩色像素经过消色处理后的图像，即第一处理图像M11。在可见图像M10中，被印章t2重叠的“株式会社印章样本”t 1的黑色文字部分带有红色，通过消色处理变成黑色，如第一处理图像M11那样，“株式会社印章样本”t 1的印章重叠部分和不重叠部分没有间断地恢复为黑色。

图7的(d)是用第一处理图像M11实施了特定颜色消除时印章被消除后的图像M12。通过消除印章t2的红色，可以去除印章t2，而黑色文字的“株式会社印章样品”t 1没有模糊和缺损，清晰地保留下来。

用以前的方式进行特定颜色消除时与上述不同，黑色文字的“株式会社印章样品”出现模糊或缺损，该部分的OCR识别变得困难(参见图24)。

这样，在本实施方式中，设置消色处理部31和黑色文字区域判断部32，根据与可见图像同时读取等得到的近红外图像来判断黑色文字区域，对被判断为黑色文字区域的可见图像上的相同位置的彩色像素进行消色处理。

由此，由于印章的重叠而带有颜色的黑色文字也被复原为黑色，因此，即使在后处理中通过消除特定颜色来实施印章消除时，也能够改善黑色文字的模糊和缺损，从而提高OCR识别率。

〈实施方式的变形例1〉

接下来说明把经过消色处理的RGB图像输出到读取装置1的装置以外的外部装置。以下包括后述的其他方式和变形例，主要对不同之处进行说明，省略与实施方式重复的说明。

在此，读取装置1与外部装置之间既可以有线连接也可以无线连接。读取装置1和外部装置之间可以通过USB等连接电缆连接，也可以通过通信接口经由通信网络连接。

关于外部装置，举例来说，是用户PC等计算机构成的信息处理装置或服务器装置等，具备CPU，由CPU执行规定程序等，进行从经过消色处理的RGB图像印章消除和OCR处理等。从输出部306(参见图5)向外部装置输出。

图8是实施方式的变形例1相关的涉及读取装置的一例构成的示意图。处理部30设有图像补偿部33。图像补偿部33具有对从消色部30-1输出的R'G'B'图像进行滤波处理和颜色补偿处理等，将outR'G'B'图像输出到外部装置的功能。输出到外部装置的图像是通过去除特定颜色而消除印章之前的图像。

这样，变形例1可以从读取装置1输出outR'G'B'图像，对于该outR'G'B'图像，可以与一般的RGB扫描图像等同处理。outR'G'B'图像的印章重叠的黑色文字部分由于被实施了消色处理，因此即使在后段进行后处理，后段的外部装置的处理可以等同于原本没有印章的其他文档图像等的RGB扫描图像的处理。由于outR'G'B'图像以外观上不逊色于一般的RGB扫描图像的品质输出，因此可以作为保存用途的图像使用。

在外置装置中实施作为后处理的OCR的情况下，由于重叠了印章的黑色文字部分被实施了消色处理，因此即使通过实施特定颜色消除来去除印章后，也很少出现文字模糊或脱落，能够抑制OCR的错误识别。

〈实施方式的变形例2〉

接下来说明把经过消色处理的RGB图像作为OCR专用图像输出到外部。图9是实施方式的变形例2涉及的一例读取装置的示意图。

如图9所示，在图像补偿部33中设置印章消除部34和单色处理部35。印章消除部34对实施到消色处理的R'G'B'图像实施特定颜色消除，从而消除印章。单色处理部35对经过印章消除的R”G”B”图像进行K单色处理，以方便OCR识别。从图像补偿部33向外部输出经过K单色处理的图像。经过单色处理的图像相当于“第二处理图像”。

变形例2可以在同一个系统内利用最佳去消除参数对经过消色处理的R'G'B'图像实施印章消除。例如当以黑色文字消色处理为前提时，使用便于进行颜色判断的消除参数，即使是稍微模糊的印章也可以将其作为消除对象。因此，变形例2可以提高消除印章的精度。

〈实施方式的变形例3〉

在对帐单进行OCR处理时，需要保管原帐单作为证据。在这种情况下，需要保留帐票上的印章等信息。而经过用于OCR的优化处理的图像去除了文字以外的不需要的信息，因此不适合作为证据保存的图像。

对此，变形例3给出了不仅可以输出变形例2所示的OCR专用的经过单色处理的OCR用图像，而且可以输出未实施用于OCR的处理的原始图像的方案。

图10是实施方式的变形例3涉及的一例读取装置的构成的示意图。如图10所示，从可见图像传感器17-1输出的RGB图像被同时输出到进行保存用图像输出的处理部和进行OCR用图像输出的处理部双方。用于输出保存用图像的处理部相当于图10中的第二图像补偿部36。第二图像补偿部36对从可见图像传感器17-1输出的RGB图像进行保存用的图像补偿处理，输出保存用RGB图像。用于输出OCR用图像的处理部的构成与图9所示的消色部30-1和图像补偿部33的构成相同，因此省略说明。

变形例3通过一次读取，输出同一个读取对象的保存用图像和OCR用图像。由此，用户能够通过PC装置等同时取得保存用图像和OCR图像，节省单独获得保存用图像和OCR图像等所需的工夫。

图10中把图9所示的消色部30-1和图像补偿部33用来作为输出OCR用图像的处理部，但这只是一个例子，并不局限于此。例如，也可以用图8所示的构成输出outR'G'B'图像。outR'G'B'图像是实施了消色处理却没有实施特定颜色消除的图像。

〈变形例3的实施例〉

以下给出采用变形例3的实施例。图11是采用了图10所示的装置构成的数据管理系统。PC或服务器具备存储装置，将从处理部30发送的保存用图像数据和OCR图像数据作为一组数据来保存和管理。保存用图像数据和OCR图像用数据是以能够相互判断关系的方式绑定的名称保存到共同的存储装置中。使用本数据管理系统的效果在于，可以防止作为OCR图像数据的原件的图像数据的丢失，通过共同管理使管理变得方便。

〈实施方式的变形例4〉

接下来说明变形例4，在近红外线图像中印章模糊浮现的情况下黑色文字区域判断部的判断方法。

图12是变形例4涉及的黑色文字区域判断部32的构成的示意图，其中，如(a)所示，黑色文字区域判断部32具有二值处理部3000，(b)是一例近红外线图像，其中印章模糊地浮现。如图12的(b)所示，印章t2浮现在近红外线图像中。如上所述，由于黑色文字部分被吸收近红外光，被近红外传感器接受的光量少，因此以黑色显示。另一方面，印章等的颜色部分虽然吸收近红外光的量较小，但具有少量的吸收特性，因此如图12的(b)所示，有时呈浅灰色。

在这种情况下，很难直接确定近红外图像的黑色文字区域t 1。对此，进行二值处理。图12的(a)所示的二值处理部3000通过将输入的红外图像的像素值与阈值进行比较，实施二值处理，将取黑色一方的值的像素作为黑色文字区域的像素、将取白色一方的值的像素作为黑色文字以外的非黑色文字区域的像素。由于印章t2的像素不是白色的，因此把阀值设定在黑色文字区域t 1的像素值和印章t2的像素值之间，使得仅以印章t2构成的像素被分类为非黑色文字区域。该阈值也可以用于与三色混合的黑色进行区别。

黑色文字区域判断部32进行这样的二值处理，将黑色文字像素和非黑色文字像素的结果输出到消色处理部31。

这样，在黑色文字区域判断中利用二值处理，便于区分黑色文字区域部分和印章等的颜色部分。

〈实施方式的变形例5〉

接下来说明变形例5的黑色文字区域判断部的阈值决定。

图13和图14是变形例5涉及的黑色文字区域判断部32的阈值决定的示意图。

其中，(a)是一例黑色文字和印章重叠的原稿，放大显示黑色文字和印章的重叠部分，(b)是(a)所示的原稿的RGB可见图像的示意图，(c)是(a)所示的原稿的近红外图像的示意图。

在读取装置1中，用同一个光学系统(透镜、反射镜等)同时读取RGB图像和近红外图像。为此，如果根据RGB图像的画质进行调整，则如图13的(b)和(c)所示，与RGB图像相比，近红外图像是较为模糊的图像。

也就是说，如图13的(d)所示，观察黑色文字边缘附近的像素变化可知，与RGB图像相比，近红外图像显示更平缓的像素值变化。在这种情况下，如果将用于判断近红外图像中的黑色文字区域的二值阈值取为从原稿的底色等级开始发生变化部位的附近，则可知在近红外图像和RGB图像之间黑色文字的边缘的位置发生偏移。在近红外线图像中黑色文字区域被判断为较粗，其结果，在RGB图像中，位于黑色文字区域边缘外的印章的一部分色彩有可能被去除。

对此，如图14的(a)所示，设置底色等级设定部37-1、黑色等级设定部37-2以及阈值决定部3500。

作为用户界面(UI)上的设定和设计值，系统预先保存底色等级和黑色等级的设定值，阈值决定部3500根据底色等级设定部37-1和黑色等级设定部37-2各自的设定值决定阈值。

如图14的(b)所示，在从某一底色等级向某一黑色等级的边缘变化中，其间的等级变化量的中间区域并不依赖于图像的模糊程度，而是处于一定的位置。因此，通过将阈值设定在底色等级和黑色等级的中间，能够将用近红外图像判断的黑色文字区域和用模糊程度不同的RGB图像判断的黑色文字区域之间的位置误差最小化。

〈实施方式的变形例6〉

接下来说明变形例6，黑色文字区域判断部的阈值决定的第二个变形例。变形例5根据UI设定的设定值和设计值来决定阈值。但是，不同的输入图像，底色等级和文字的黑色等级不同。即使是同一张稿件，不同的位置，底色、浓淡、黑色文字的浓淡也会有所不同。如果利用预设值，则会发生底色等级比设想的等级更浓而被检测为黑色文字等无从对应之类的情况。对此，变形例6给出系统从图像自动检测底色等级和黑色等级来决定阈值的方案。

图15是一例变形例6涉及的黑色文字区域判断部32的示意图。如图15所示，在黑色文字区域判断部32中设有底色等级检测部3600和黑色等级检测部3700。

底色等级检测部3600在近红外图像中设定关注像素，针对关注像素在任意范围内参考周边像素，检测关注像素附近的底色等级。

黑色等级检测部3700针对关注像素在任意范围内参考周边像素，检测关注像素附近存在的黑色文字的黑色等级。

阈值决定部3500使用底色等级检测部3600和黑色等级检测部3700检测的北京等级和黑色等级，决定阈值。二值处理部3000使用该阈值进行二值处理。

上述方案对输入的每个图像进行底色等级和黑色等级的检测，因此，即使输入图像的底色等级和文字的黑色等级有所不同，也可以根据输入图像用适当的阈值进行二值处理。

另外，本方案还可以检测一张图像中的每个区域的底色等级和黑色等级。通过这样按照区域进行检测，就可以对每个区域区分使用最合适的阈值进行二值处理，高精度提取黑色文字区域。

〈实施方式的变形例7〉

接下来说明变形例7，一例消色处理部31的处理。

图16是变形例7涉及的一例消色处理部31的处理的示意图。如图16所示，消色处理部31中执行RGBtoYUV转换3101、消色处理3102以及YUVtRGB转换3103。在此，RGBoTYUV转换3101相当于“灰度色差转换部”，YUVtoTRGB转换3103相当于“RGB转换部”。

在RGBTYUV转换3101中，输入的RGB图像被转换为YUV信号(灰度色差信号)。

在消色处理3102中，对于输入的YUV信号，参考黑色文字区域判断结果，对黑色文字区域的位置的像素，补偿UV信号，进行消色处理。另一方面，对于非黑色文字区域的位置的像素，直接输出，不进行消色。

YUVto在RGB转换3103中，进行将消色后的YUV信号返回到RGB图像的逆转换，在后段输出消色后的R'G'B'图像。

〈计算处理例〉

以下给出一例消色处理部31的计算处理。

黑色文字区域：out_Y＝in_Y，out_U＝0，out_V＝0

非黑色文字区域：out_Y＝in_Y，out_U＝in_U，out_V＝in_V

在该处理中，通过转换为YUV那样的灰度色差信号，能够在维持灰度成分的状态下，仅将饱和度调整为无色彩，这样就可以进行保持输入图像的黑色文字的浓度等的图像消色处理。

以上给出了一例转换为YUV信号，但不限于此。只要能够用经过灰度和色差转换的图像进行处理即可，其格式除YUV以外，也可以是比如YCbYCr等。

〈灰度成分调整〉

以下说明消色处理3102中的灰度成分调整。消色处理部31在实施消色的处理时，也可以根据来自用户的设定来切换灰度成分。

图17是进行消色处理3102的灰度成分调整的一例UI设定画面的示意图。UI设定画面1000具有设定确认标签1001，通过触摸操作设定确认按钮1001，显示图17中显示的设定信息。

设定信息中显示与文字1002的模式设定相对应的设定。调整信息1003是调整灰度成分的调整信息。

调整信息1003具有调整黑色文字或非黑色文字保持不变、更浅或更浓等灰度的调整按钮。在用户想强调黑色文字的黑色等时进行灰度成分调整。

UI设定画面1000通过这些调整按钮接受黑色文字以及非黑色文字的灰度成分的设定，开始按钮1004受到触摸操作后，将该设定设定到消色处理部31。

例如，在设定黑色文字“浓”、非黑色文字“淡”时，如以下计算处理的例子所示，对Y分量乘以系数，调整输出值。

〈计算处理例〉

黑色文字区域：out_Y＝in_Y*0.9，out_U＝0，out_V＝0

非黑色文字区域：out_Y＝in_Y*1.1，out_U＝in_U，out_V＝in_V

根据该调整信息，不仅可以消色，还可以将黑色文字和非黑色文字调整为用户需要的浓淡。

〈实施方式的变形例8〉

接下来说明变形例8，消除网格线等指定颜色。

图18和图19是消除网格线等指定颜色的示意图。如图18的(a)所示，在帐票上，为了使填写栏清晰，通常划有网格线t3。由于活字打印位置的错位或手写输入位置的错位，填写黑色文字的黑色文字区域t 1有可能与网格线t3重叠。在这种状态下进行OCR时，网格线t3成为阻碍，无法恰当地提取文字信息。对此，如图18的(b)所示，在UI设定画面1000中设置指示消除指定颜色的设定部1003。设定部1003用于指定用户需要消除的颜色。在图18的(b)所示的例子中，设有有彩色、红色、绿色、蓝色、青色、品红以及黄色等的颜色指定按钮，用户从中选择想要消除的颜色。颜色的种类和颜色的指定方法不限于此，也可以适当变形。

图19是变形例8涉及的一例图像补偿部33的构成的示意图。如图19所示，图像补偿部33中设有指定颜色消除部38。

指定颜色消除部38对于经过消色部30-1消色的R'G'B'图像实施消色处理，去除UI50通过UI设定画面1000从用户接受的指定颜色。

例如，在删除网格线时，用户在设定部1003中指定与网格线的颜色对应的颜色，通过除去该指定颜色来消除网格线。

通过上述方案，可以消除网格线等，具有改善OCR识别时的文字错误识别的效果。

〈实施方式的变形例9〉

以下给出输出OCR用图像时将单色处理后的图像作为多值图像输出的构成。

图20是变形例9涉及的构成的一例示意图。如图20所示，在从单色处理部35输出单色图像时，输出多值而不是二值的单色图像。灰度图像是一例多值的单色图像。

这样，通过输出多值，可以将未丢失文字周围详细信息的数据传递给后段的OCR软件，在用后段的OCR软件实施高度的二值处理等时，可以有效利用该处理，进一步提高OCR识别率。

图20显示了仅单色图像的单图图像输出的构成，但也可以适用于如图10所示那样的包含RGB图像的多图图像的输出。

〈实施方式的变形例10〉

以下给出OCR用图像输出时对单色处理后的图像进行二值处理，作为二值图像输出的构成。

图21是变形例10涉及的一例构成的示意图。如图21所示，图像补偿部33中设有二值处理部39。

二值处理部39对于从单色处理部35输出的经过单色处理的图像进行二值处理，输出二值图像，作为单色图像。

这样，通过输出二值图像，具有减少数据量的效果。另外，通过在图像补偿部33中实施二值处理，可以用适合于读取装置的参数进行二值处理。在这种情况下，后段的OCR软件具备的二值化处理即使是精度较低的方式，因为是在读取装置一方进行二值处理并传递数据，所以不依赖OCR软件所具备的二值处理的精度，就可以提高OCR识别率。

图21也给出了只有单色图像的单图图像输出的构成，但也可以适用于如图10所示的包含RGB图像的多图像图像的输出。

〈第二实施方式〉

由第一实施方式所示的读取装置1或外部装置进行的、消除可见图像中的印章的一部分处理或全部处理也可以由图像处理装置进行。

图22是一例包括第二实施方式涉及的图像处理装置的系统的示意图。图像处理装置2输入读取装置1输出的可见图像和不可见图像，实施印章消除处理。图像处理装置2也可以取得保存在服务器SS中的可见图像和不可见图像，实施印章消除处理。进而，图像处理装置2还可以从半导体存储器等移动型存储介质DA读取可见图像和不可见图像，实施印章消除处理。

图像处理装置2具备CPU，CPU执行规定的程序等，发挥与处理部30及黑色文字区域判断部32等对应的功能，以及执行从图像消除印章和OCR处理等各种功能。各种功能的一部分或全部功能可以通过ASIC(Appl icat ion Specific Integrated Circuit)等硬件来实现。图像处理装置2从输出部向PC等外部装置输出各种图像。

各种功能已在第一实施方式中以读取装置和外部装置为例进行了说明，因此在此省略详述。

〈第三实施方式〉

第一实施方式所示的读取装置和第二实施方式所示的图像处理装置也可以搭载在图像形成装置上。

图23是一例第三实施方式涉及的图像形成装置的示意图。图23是一例通常被称为复合机(MFP)的图像形成装置3。图23所示的图像形成装置3的上部具备读取装置(读取装置主机10及ADF20)。关于读取装置由于已在第一实施方式中说明，在此省略详述。

图23所示的图像形成装置3具有读取装置主体10下方的图像形成部80和供纸部90。

图像形成部80将读取装置主机10读取的读取图像打印在作为一例记录介质的记录纸上。读取图像是可见图像或近红外图像。

图像形成部80具有光写入装置81、串联方式的图像形成单元(Y、M、C、K)82、中间转印带83、二次转印带84等。在图像形成部80中，光写入装置81在图像写入成像单元82的感光鼓820上写入印刷对象的图像，将各版调色剂图像从各感光鼓820转印到中间转印带83上。K版由含有碳黑的K调色剂形成。

成像单元(Y、M、C、K)82包括四个可旋转的感光鼓(Y、M、C、K)820，每个感光鼓820周围各自具备充电辊、显影器、一次转印辊、清洁单元和静电消除器。各个成像元件以规定的成像工序围绕每个感光鼓820动作，从而在每个感光鼓820上形成图像，每个感光鼓820上形成的图像通过一次转印辊分别作为调色剂图像转印到中间转印带83上。

驱动辊和从动辊拉在各感光鼓820和各一次转印辊之间的夹持部中拉紧架设中间转印带83。通过中间转印带83的移动，二次转印装置将一次转印到中间转印带83上的调色剂图像二次转印到二次转印带84上的记录纸上。该记录纸通过二次转印带84的移动被传送到定影装置85，调色剂图像固定到记录纸上。然后，记录纸被排出到机外的排纸盒。

记录纸，例如由供纸部90从收纳不同尺寸型号纸张的记录纸的供纸盒91、92送出规定的记录纸，由各种辊构成的输送装置93输送，供给到二次转印带84。

图像形成部80不限于以上述电子照相方式形成图像，也可以以喷墨方式形成图像。

图像形成装置不限于MFP。图像形成装置也可以是例如打印机等，通过通信等接受作为独立的图像处理装置生成的图像数据，打印该接受的图像数据。

以上说明了本发明的实施方式以及变形例，各实施方式以及变形例是作为示例而给出的，并不意图限定本发明的范围。这些新的实施方式以及变形例可以以其他各种方式来实施，可以在不脱离本发明主旨的范围内进行各种省略、置换、变更。这些实施方式及变形例不仅包含在发明的范围及要旨之中，同时也包含在专利申请的范围中记载的发明及其均等的范围之中。

本发明的方式例如如下所示。

<1>一种图像处理装置，其特征在于具备：输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，图像处理部，用于生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中光吸收率为规定值以上的部分。

<2>根据<1>所述的图像处理装置，其特征在于，还具有输出部，用于将由所述图像处理部生成的所述图像数据输出到外部装置。

<3>根据<2>所述的图像处理装置，其特征在于，所述输出部将所述被摄体的所述可见图像数据和所述图像处理部生成的所述图像数据输出到所述外部装置。

<4>根据<2>或<3>所述的图像处理装置，其特征在于，进一步具有，

指定颜色除消部，用于从所述图像处理部生成的所述图像数据中消除指定颜色；以及

单色处理部，用于对经过所述指定颜色消除的图像数据实施单色处理，

所述输出部将经过所述单色处理的图像数据输出到所述外部装置。

<5>根据<4>所述的图像处理装置，其特征在于，所述指定颜色消除部从所述图像处理部生成的所述图像数据中消除用户设定的指定颜色。

<6>根据<4>或<5>所述的图像处理装置，其特征在于，将经过所述单色处理部单色处理的图像数据作为多值图像数据输出。

<7>根据<4>或<5>所述的图像处理装置，其特征在于，输出对经过所述单色处理部单色处理了的图像数据实施二值处理而得到的二值图像数据。

<8>根据<1>至<7>中任意一项所述的图像处理装置，其特征在于，

具有确定部，用于根据所述不可见图像数据，将光吸收率为规定值以上的部分定为指定区域，

所述确定部通过所述不可见图像数据的二值处理来决定所述指定区域。<9>根据<8>所述的图像处理装置，其特征在于，所述确定部具有阈值决定部，用于根据所设定的底色等级和黑色等级来决定阈值，以所述阈值决定部所决定的阈值为基准进行所述二值处理。

<10>根据<9>所述的图像处理装置，其特征在于，

所述阈值决定部具有

底色等级检测部，用于检测被摄体的可见图像数据的底色等级；以及

黑色等级检测部，用于检测所述被摄体的可见图像数据的黑色等级，

根据由所述底色等级检测部检测出的底色等级和由所述黑色等级检测部检测出的黑色等级，决定与所述被摄体的所述可见图像数据的各区域相对应的所述阈值。

<11>根据<1>到<10>的任意一项所述的图像处理装置，其特征在于，所述图像处理部具有灰度色差转换部，用于将RGB图像数据转换为灰度色差数据，并具有RGB转换部，用于对灰度色差数据进行以所述指定颜色显示与所述可见图像数据的所述指定区域相应的部分的处理，并将经过所述处理的信号数据再次转换为RGB图像数据。

<12>根据<11>所述的图像处理装置，其特征在于，所述图像处理部对所述灰度色差数据的灰度信号进行调整，以使得该灰度信号的输出值与用户设定的灰度信号调整的设定值相对应。

<13>根据<1>至<12>的任意一项所述的图像处理装置，其特征在于，所述图像处理部将显示所述可见图像数据中与所述指定区域相应的部分的所述指定颜色设为黑色。

<14>一种读取装置，其特征在于，具有

根据<1>至<13>中任意一项所述的图像处理装置；

将可见波长的光照射到所述被摄体上的可见光源；

将不可见波长的光照射到所述被摄体上的不可见光源；

第一图像传感器，用于接受来自被摄体的可见光波长的反射光，输出可见光图像数据；以及

第二图像传感器，用于接受来自被摄体的具有不可见波长的反射光，输出不可见图像数据。

<15>根据<14>所述的读取装置，其特征在于，所述图像处理部输入由所述第二图像传感器输出的所述不可见图像数据和由所述第一图像传感器输出的所述可见图像数据。

<16>一种图像形成装置，其特征在于，具有

<1>至<13>中任意一项所述的图像处理装置，或者<14>或<15>所述的读取装置，以及

图像形成部，用于根据由所述图像处理部生成的所述图像数据形成图像。<17>一种数据管理系统，其特征在于，具有

<3>或<4>所述的图像处理装置；以及

信息处理装置，将所述图像处理装置发送的所述可见图像数据与所述图像处理部生成的所述图像数据关联起来管理。

<18>一种图像处理方法，用于对对可见波长域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据进行图像处理，其特征在于，包括以下步骤，

输入步骤，输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，

图像处理步骤，生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中光吸收率为规定值以上的部分。

<19>一种图像处理装置，其特征在于，具备

输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，

图像处理部，用于生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中包含碳作为材料的图像。

附图标记说明

00 图像处理装置

1a 输入部

2a 图像处理部

3a 确定部

4a 输出部

13-1 可见光源

13-2 近红外光源

17-1 可见图像传感器

17-2 近红外图像传感器

30-1 消色部

31 消色处理部

32 黑色文字区域判断部

40 摄像部

D1 可见图像数据

D2 不可见图像数据

D3 图像数据

Claims (19)

1.一种图像处理装置，其特征在于，具备

输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，

图像处理部，用于生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中光吸收率为规定值以上的部分。

2.根据权利要求1所述的图像处理装置，其特征在于，还具有输出部，用于将由所述图像处理部生成的所述图像数据输出到外部装置。

3.根据权利要求2所述的图像处理装置，其特征在于，所述输出部将所述被摄体的所述可见图像数据和所述图像处理部生成的所述图像数据输出到所述外部装置。

4.根据权利要求2所述的图像处理装置，其特征在于，进一步具有

指定颜色消除部，用于从所述图像处理部生成的所述图像数据中消除指定颜色；以及

单色处理部，用于对经过所述指定颜色消除的图像数据实施单色处理，

所述输出部将经过所述单色处理的图像数据输出到所述外部装置。

5.根据权利要求4所述的图像处理装置，其特征在于，所述指定颜色消除部从所述图像处理部生成的所述图像数据中消除用户设定的指定颜色。

6.根据权利要求4所述的图像处理装置，其特征在于，将经过所述单色处理部单色处理的图像数据作为多值图像数据输出。

7.根据权利要求4所述的图像处理装置，其特征在于，输出对经过所述单色处理部单色处理了的图像数据实施二值处理而得到的二值图像数据。

8.根据权利要求1所述的图像处理装置，其特征在于，

具有确定部，用于根据所述不可见图像数据，将光吸收率为规定值以上的部分定为指定区域，

所述确定部通过所述不可见图像数据的二值处理来决定所述指定区域。

9.根据权利要求8所述的图像处理装置，其特征在于，所述确定部具有阈值决定部，用于根据所设定的底色等级和黑色等级来决定阈值，以所述阈值决定部所决定的阈值为基准进行所述二值处理。

10.根据权利要求9所述的图像处理装置，其特征在于，所述阈值决定部具有

底色等级检测部，用于检测被摄体的可见图像数据的底色等级；以及

黑色等级检测部，用于检测所述被摄体的可见图像数据的黑色等级，根据由所述底色等级检测部检测的底色等级和由所述黑色等级检测部检测出的黑色等级，决定与所述被摄体的所述可见图像数据的各区域相对应的所述阈值。

11.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理部具有灰度色差转换部，用于将RGB图像数据转换为灰度色差数据，并具有RGB转换部，用于对灰度色差数据进行以所述指定颜色显示与所述可见图像数据的所述指定区域相应的部分的处理，并将经过所述处理的信号数据再次转换为RGB图像数据。

12.根据权利要求11所述的图像处理装置，其特征在于，所述图像处理部对所述灰度色差数据的灰度信号进行调整，以使得该灰度信号的输出值与用户设定的灰度信号调整的设定值相对应。

13.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理部将显示所述可见图像数据中与所述指定区域相应的部分的所述指定颜色设为黑色。

14.一种读取装置，其特征在于，具有

根据权利要求1至13中任意一项所述的图像处理装置；

将可见波长的光照射到所述被摄体上的可见光源；

将不可见波长的光照射到所述被摄体上的不可见光源；

第一图像传感器，用于接受来自被摄体的具有可见光波长的反射光，输出可见光图像数据；以及

第二图像传感器，用于接受来自被摄体的具有不可见波长的反射光，输出不可见图像数据。

15.根据权利要求14所述的读取装置，其特征在于，所述图像处理部输入由所述第二图像传感器输出的所述不可见图像数据和由所述第一图像传感器输出的所述可见图像数据。

16.一种图像形成装置，其特征在于，具有

权利要求1至13中任意一项所述的图像处理装置；以及

图像形成部，用于根据由所述图像处理部生成的所述图像数据形成图像。

17.一种数据管理系统，其特征在于，具有

权利要求3或4所述的图像处理装置；以及

信息处理装置，将所述图像处理装置发送的所述可见图像数据与所述图像处理部生成的所述图像数据关联起来管理。

18.一种图像处理方法，用于对对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据进行图像处理，其特征在于，包括以下步骤，

输入步骤，输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，

图像处理步骤，生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中光吸收率为规定值以上的部分。

19.一种图像处理装置，其特征在于，具备

输入部，用于输入用对可见波长区域的光源的光具有感度的传感器读取被摄体而得到的可见图像数据和用对不可见波长区域的光源的光具有感度的传感器读取被摄体而得到的不可见图像数据；以及，

图像处理部，用于生成以指定颜色显示所述可见图像数据中与指定区域相应的部分的图像数据，所述指定区域是所述不可见图像数据中包含碳作为材料的图像。