CN105827893B - 图像处理装置、图像处理方法和图像形成系统 - Google Patents

Abstract

本公开涉及图像处理装置、图像处理方法和图像形成系统。该图像处理装置包括检测器、识别单元、获取单元和输出单元。该检测器检测在片材上形成的图像和施加到片材的标记。该识别单元识别标记位置，该标记位置是标记形成在图像上的位置。该获取单元获取要添加在该标记位置处和形成在标记位置处的附加图像。该输出单元使用由检测器检测到的图像和由获取单元获取的附加图像来形成输出图像。

Description

图像处理装置、图像处理方法和图像形成系统

技术领域

本发明涉及图像处理装置、图像处理方法和图像形成系统。

背景技术

日本未审查专利第2001-186327号公报公开了一种数字复印装置，其用于获得基于类似于相关技术的复印的操作将文档的图像与文本合并的打印结果。还公开了在操作员按下开始键时，服务器的CPU基于操作员使用触摸板和键区预先输入的信息来创建日历文本，另外，将创建的日历文本与作为扫描仪扫描文档的结果而获得的文档数据合并，从而生成日历图像数据。随后，基于图像数据指示打印机打印。

日本未审查专利第2006-130836号公报公开了一种打印系统，其首先在上面只绘制有边框的纸张上使用扫描仪来识别扫描边框的位置和颜色、接收无位置信息的数据、并且根据与边框的位置关系来确定绘制位置。还公开了，在上面绘制有边框的纸张上打印数字的情况下，数字绘制命令由数字位图数据和指示数字要包含在哪个边框内的信息组成。此时，针对绘制位置，计算嵌合在边框内的位置，并且该位置被视为最终绘制结果。

发明内容

本发明的目的是使得使用上面形成图像的片材(sheet)来指定附加图像要添加到片材上所形成的图像的打印位置。

根据本发明的第一方面，提供了一种图像处理装置，该图像处理装置包括检测器、识别单元、获取单元和输出单元。检测器检测在片材上所形成的图像和施加于片材的标记。识别单元识别标记位置，该标记位置是标记形成在图像上的位置。获取单元获取要添加并形成在标记位置处的附加图像。输出单元使用由检测器检测到的图像和由获取单元获得的附加图像来形成输出图像。

根据本发明的第二方面，在根据第一方面的图像处理装置中，输出单元不在输出图像中输出由检测器检测到的标记的图像。

根据本发明的第三方面，在根据第一方面的图像处理装置中，输出单元在由检测器检测到的图像中去除形成在标记位置处的图像。

根据本发明的第四方面，在根据第二方面的图像处理装置中，输出单元在由检测器检测到的图像中去除形成在标记位置处的图像。

根据本发明的第五方面，在根据第一至第四方面中的任意一项的图像处理装置中，输出单元根据标记的尺寸来改变输出图像中的附加图像的尺寸。

根据本发明的第六方面，在根据第一至第四方面中的任意一项的图像处理装置中，获取单元存储文本信息作为附加图像，并且输出单元根据标记的尺寸改变作为附加图像要形成在输出图像中的文本的尺寸。

根据本发明的第七方面，在根据第一至第四方面中的任意一项的图像处理装置中，检测器在形成图像之后且在施加标记之前读取片材，并且随后在施加标记之后读取片材。

根据本发明的第八方面，在根据第一至第四方面中的任意一项的图像处理装置中，输出单元根据标记的颜色来改变附加图像。

根据本发明的第九方面，根据第一至第四方面中的任意一项的图像处理装置还包括决定单元，该决定单元预先决定作为标记进行识别的标记图像，其中，识别单元通过与由决定单元决定的标记图像的比较，来识别标记位置。

根据本发明的第十方面，在根据第一至第四方面中的任意一项的图像处理装置中，检测器包括调整器，该调整器预先读取作为标记进行识别的标记图像，并且调整标记的检测模式。

根据本发明的第十一方面，在根据第一至第四方面中的任意一项的图像处理装置中，形成在片材上的图像由图像形成装置形成，并且图像处理装置包括接收单元，该接收单元接收由图像形成装置在片材上形成的图像的信息。

根据本发明的第十二方面，在根据第一至第四方面中的任意一项的图像处理装置中，在多个彼此不同的附加图像存在时，输出单元输出数量上对应于彼此不同的附加图像的数量的输出图像。

根据本发明的第十三方面，提供了一种图像处理方法，该图像处理方法包括以下步骤：检测形成在片材上的图像和施加于片材的标记；识别标记位置，该标记位置是标记形成在图像上的位置；获取要添加并形成在标记位置处的附加图像；以及使用所检测的图像和所获取的附加图像形成输出图像。

根据本发明的第十四方面，提供一种图像形成系统，该图像形成系统包括：图像读取单元，该图像读取单元读取由图像形成装置在片材上形成的图像和由用户添加到片材的标记；识别单元，该识别单元识别标记位置，该标记位置是标记形成在图像上的位置；获取单元，该获取单元获取要添加并形成在标记位置处的附加图像；输出单元，该输出单元使用由图像读取单元读取的图像和由获取单元获取的附加图像来形成输出图像；以及打印单元，该打印单元将由输出单元形成的输出图像打印到片材上。

根据第一和第十三方面，可以使用上面形成有图像的片材来选择附加图像要添加到片材上所形成的图像的打印位置。

根据第二方面，添加标记时的用户自由度提高。

根据第三和第四方面，附加图像变得清晰可读。

根据第五方面，附加图像的尺寸调整变得简单。

根据第六方面，附加图像中的文本的尺寸调整变得简单。

根据第七方面，提高了标记检测精度。

根据第八方面，可以通过选择标记颜色来选择附加图像。

根据第九方面，提高了标记检测精度。

根据第十方面，提高了标记检测精度。

根据第十一方面，提高了标记检测精度。

根据第十二方面，根据附加图像的类型形成不同的输出图像。

根据第十四方面，可以使用上面形成有图像的片材来选择附加图像要添加到片材上所形成的图像的打印位置。

附图说明

下面将基于以下附图详细描述本发明的示例性实施方式，附图中：

图1是例示应用示例性实施方式的图像形成系统的整体构造的图；

图2例示了终端装置和图像形成装置的示例性功能构造；

图3的A、B、C和D是例示了合并打印的图；

图4A至图4C是例示了合并区域的图；

图5A和图5B是例示了显示在图像形成装置的UI上的设置画面的示例的图；

图6是例示了图像形成装置上的合并打印操作的示例的流程图；

图7是例示了终端装置上的合并打印操作的示例的流程图；

图8A至图8G是用于说明示例性修改例1的图；

图9A和图9B是用于说明示例性修改例2的图；

图10A和图10B是用于说明示例性修改例3的图；

图11例示了根据示例性修改例4的终端装置和图像形成装置的示例性功能构造；

图12是例示了根据示例性修改例4的图像形成装置的示例性操作的流程图；以及

图13是例示了根据示例性修改例4的终端装置的示例性操作的流程图。

具体实施方式

在下文中，将参照附图详细描述本发明的示例性实施方式。

<图像形成系统1>

图1是应用示例性实施方式的图像形成系统1的示例性构造的例示。

如图1例示，在图像形成系统1中，终端装置3和图像形成装置5经由网络7连接。

终端装置3是指示图像形成装置5进行打印的计算机装置。这里，例如，个人计算机(PC)可以用作终端装置3。在这种情况下，PC可以是作为客户端PC运行的PC，或作为服务器PC运行的PC。

图像形成装置5是所谓的多功能装置，该多功能装置包括：将图像形成到诸如纸张等这样的介质上的图像形成功能(打印机功能)；和从诸如纸张等这样的介质读取图像的图像读取功能(扫描仪功能)。并且，除了打印机功能和扫描仪功能之外，图像形成装置5配备有复印功能、传真功能和合并打印功能(后面讨论)。

网络7是用于在终端装置3与图像形成装置5之间传达信息的通信网络。这里，局域网(LAN)或互联网可以用作网络7。

<终端装置3>

图2例示了终端装置3和图像形成装置5的示例性功能构造。

接着，将参照图2描述终端装置3。

如图2例示，终端装置3配备有：控制器30，该控制器30控制组成终端装置3的功能构件；和通信I/F 49，该通信I/F 49在终端装置3与外部装置(图像形成装置5)之间发送和接收信号。

现在将描述设置在终端装置3中的控制器30。

在控制器30中，应用程序(下文中称作“应用”)31、合并数据储存器33、文件检测器35、直立调整处理器37、标记检测器39、标记去除器41、图像生成器43、打印指示单元45、和文件储存器47运行。

其中，应用31是这样的程序，其根据用户操作创建合并数据D0(参见后面讨论的图3的B)和合并数据D0的列表名称，或输入在应用31外部创建的合并数据D0。

合并数据储存器33存储从应用31发送的合并数据D0和列表名称。

充当检测器的示例的文件检测器35检测到文件储存器47已经存储(接收)图像文件(后面讨论)。要注意的是，文件检测器35还可以起监视工具的作用。例如，文件检测器35以毫秒为单位监视文件储存器47。随后，在被文件检测器35检测到文件数据存储在文件储存器47中触发时，文件检测器35激活终端装置3中的合并打印处理。

文件检测器35还接收由文件储存器47存储的合并数据D0的列表名称。文件检测器35还进行搜索，以决定对应于接收到的列表名称的合并数据D0是否存储在合并单元储存器33中。

另外，如果对应于接收到的列表名称的合并数据D0未存储在合并数据储存器33中，则文件检测器35向图像形成装置5发送显示列表选择画面520(参见后面讨论的图5B)的指示。

直立调整处理器37执行使由文件储存器47存储的图像文件直立的处理。换言之，直立调整处理器37执行自动直立调整处理，其通过使由文件储存器47存储的图像文件的方位(上下、左右)旋转而使图像文件垂直地变直。要注意的是，在对图像形成装置5侧执行直立调整过程时，可以省略经由直立调整处理器37进行的直立调整处理。

作为识别单元的示例的标记检测器39，检测包括在直立调整处理器37已经执行了自动直立调整处理的图像文件中的一个或更多个标记M(参见后面讨论的图3的C)。标记检测器39还基于图像文件中检测到的一个或更多个标记M获取诸如一个或更多个合并区域R(参见后面讨论的图4A)的尺寸和位置等这样的区域信息(后面讨论)。

要注意的是，在根据由标记检测器39获取的区域信息形成图像时，标记检测器39管理标记M的位置的种类(后面讨论)。

作为输出单元的示例的标记去除器41，根据例如裁剪处理或屏蔽处理的已确立的技术，执行去除图像文件中所包括的标记M(标记图像)的处理。标记去除器41还可以起屏蔽/裁剪引擎的作用。要注意的是，由标记去除器41执行的裁剪处理或屏蔽处理的性能根据配置文件来调整。

作为获取单元和输出单元的示例的图像生成器43，基于图像文件和合并数据D0生成与合并数据D0合并的图像文件的图像。换言之，图像生成器43生成将数据所合并到的文档的图像文件与合并数据D0组合的图像。

更具体地，图像生成器43使用经由标记去除器41去除了标记M的图像的图像文件、由合并数据储存器33存储的合并数据D0、和由标记检测器39获取的区域信息，生成图像。要注意的是，因为标记M的图像不包括在所生成的图像中，所以用户可以制作标记M，而不论标记M的格式如何。

打印指示单元45向图像形成装置5输出打印由图像生成器43生成的图像的指示。要注意的是，与附图中例示的示例不同，在多个图像形成装置5连接至终端装置3时，打印指示被输出至预定图像形成装置5。要注意的是，例如，可以使用配置文件等预先指定执行合并打印的图像形成装置5。

文件储存器47存储由图像形成单元5获取的图像文件。文件储存器47可以起所谓的共享文件夹的作用。要注意的是，不特别限制文件储存器47中存储的文件的类型。

要注意的是，控制器30配备有附图中未例示的中央处理单元(CPU)、主存储器和硬盘驱动器(HDD)。这里，CPU执行计算处理并且实现了终端装置3的上述功能。并且，主存储器是存储诸如执行各种程序时使用的数据等的信息的存储区域，而硬盘驱动器是存储诸如针对程序的输入数据和来自程序的输出数据等的信息的存储区域。

<图像形成装置5>

接着，将参照图2描述图像形成装置5。

如图2例示，图像形成装置5包括UI 51、扫描仪53、打印机55、通信I/F 57和控制器59。

UI 51起与用户的用户接口的作用。换言之，UI 51显示功能选择画面510(参见后面讨论的图5A)和合并列表选择画面520(参见后面描述的图5B)，并且接收基于这些画面的、来自用户的操作。

作为图像读取单元的示例的扫描仪53遵循来自用户的指示，读取诸如纸张等这样的介质上形成的图像。更具体地，扫描仪53读取形成在充当数据所合并到的文档的片材S0(见图3的A)上的图像F0(参见后面讨论的图3的A)，并且生成图像文件。

作为打印单元的示例的打印机55根据诸如电子照相系统或喷墨系统等这样的已确立的技术将图像形成(打印)到诸如纸张等这样的介质上。

通信I/F 57与在图像形成装置5外部的外部装置(终端装置3)发送和接收信号。

控制器59控制组成图像形成装置5的功能构件(在附图中例示的示例中，UI 51、扫描仪53、打印机55和通信I/F 57)。

更具体地，控制器59经由通信I/F 57从终端装置3获取合并数据D0的列表名称。另外，控制器59经由UI 51接收用于简单合并打印(后面讨论)的指示和合并数据D0的选择。

控制器59还向终端装置3发送经由扫描仪53获取的图像文件。控制器59还经由通信I/F 57从终端装置3接收打印指示。控制器59还根据从终端单元3接收的打印指示经由打印机55执行打印。

要注意的是，控制器59配备有附图中未例示的CPU、主存储器和HDD。CPU执行计算处理，并且实现图像形成装置5的上述功能。

<合并打印>

图3的A至D是例示了合并打印的图。具体地，图3的A是例示了上面形成图像F0的片材S0的图，图3的B是例示了合并数据D0的图，图3的C是例示了上面制作了标记M的片材S0的图，并且图3的D是例示了上面已经经由合并打印形成图像的片材S1、S2和S3的图。

接着，将参照图2和图3的A至D描述由示例性实施方式执行的合并打印。

首先，将描述使用如图3的A所例示上面形成图像F0的片材S0和图3的B中例示的合并数据D0执行合并打印。

这里，合并打印指的是通过将其他数据(合并数据D0)嵌入到包括诸如由文字处理软件等创建的文档或表单等这样的信息的图像F0。要注意的是，合并打印还可以描述为这样的功能：例如在改变部分数据的同时，使用公共布局打印诸如地址标号或发票声明等这样的信息。

在不同于本示例性实施方式的相关技术的技术中，在执行合并打印时，数据所合并到的文档(未例示)和合并数据(未示出)被准备为电子数据。此外，电子数据可能需要专用应用中的配置。此外，数据所合并到的文档中的合并位置(对应于后面讨论的合并区域R)可能需要用电子数据预先配置。

因此，在上述相关技术中，难以对没有针对合并打印配置的文档立即执行合并打印。

并且，改变合并位置或合并数据D0可能需要使用上面安装了专用应用的PC等来改变电子数据的配置。因此，在开始合并位置或合并数据D0的变更作业之前的时间段较长。

并且，如果不可得到上面安装了专用应用的终端装置(诸如PC等)，则不可能改变电子数据的配置。此外，对于不是有操作专用应用的经验的用户的人们来说，用于改变配置的操作可能是困难的。

因此，在本示例性实施方式中，可以实现使用彩笔P(参见图3的C)的合并配置，从而提供了容易的合并打印的环境。

下文中将具体描述本示例性实施方式中执行的合并打印。

首先，如图3的A例示，形成在片材S0上的图像F0是数据所合并到的文档。要注意的是，片材S0可以例示经由不同于图像形成装置5的另一个图像形成装置(未例示)的图像F0的打印输出，但也可以是经由图像形成装置5的图像F0的打印输出。

另外，附图中例示的示例中的图像F0是指示框架(线)的图像。更具体地，上面形成图像F0的片材S0是上面以黑白单色调打印框架的所谓表单。

并且，如图3的B例示，合并数据D0是要嵌入到图像F0中的图像的数据。合并数据D0经由终端装置3的应用(专用应用)31创建(或输入)，并且由合并数据储存器33存储。

在附图中例示的示例中，例如，附图中例示的合并数据D0是逗号分隔值(CSV)格式。

另外，合并数据D0包括多个数据类型(在附图中的示例中，“名称”、“日期”和“地址”)。在附图中例示的合并数据D0中，数据类型各垂直排列，表示为第一栏D1、第二栏D2和第三栏D3这三栏。更具体地，在附图中例示的合并数据D0中，一个水平行是合并数据D0的一个单位。在合并数据D0中，三个片材S1、S2和S3(参见图3的D)的数据设置在三行(第一行D5、第二行D6和第三行D7)上。

要注意的是，组成合并数据D0的各个数据可以是一个水平行(一排)(如第一栏D1和第二栏D2)上表示的数据，或是两个水平行(多行、多排)(如第三栏D3)上表示的数据。另外，如果看做单排数据，则简化了决定后面讨论的字体大小的处理。

在本示例性实施方式中，在用户期望对片材S0进行合并打印时，用户指定片材S0上期望合并打印的一个或更多个区域。具体地，如图3的C所例示的，用户在嵌入片材S0上的合并数据D0的预期地点(合并区域R，参见后面讨论的图4A)中制作标记M(M1、M2和M3)。

标记M是用户用彩笔P在片材S0上绘制的线(图)。另外，标记M由用户在片材S0上制作，而不使用终端装置3或图像形成装置5。具体地，使用红色签字笔等将标记M添加(施加)到片材S0。另外，作为文具的、市场上可买到的笔(书写用具)可以用作彩笔P。

这里，不特别限制标记M的形状。具有宽度和高度的形状足够了，其示例包括：对角线形状，在该对角线形状中如标记M1斜对地绘制线；和边框形状如标记M2和M3地绘制分格线。

随后，如图3的D所例示，基于一个或更多个标记M的标记信息(后面讨论)生成合并数据D0所嵌入到的图像，并且打印片材S1、S2和S3。要注意的是，在附图中例示的示例中，通过合并(插入)合并数据D0的各行(第一行D5、第二行D6和第三行D7)上包括的数据形成片材S1、S2和S3上分别形成的图像(输出图像)F1、F2和F3。另外，因为包括在第一行D5、第二行D6和第三行D7上的数据彼此不同，所以分别形成在片材S1、S2和S3上的图像F1、F2和F3也是彼此不同的图像。

<合并区域R>

图4A至图4C是例示了合并区域R的图。具体地，图4A是例示了标记M与合并区域R之间的关系的图，图4B是例示了合并区域R的高度H与合并图像(所添加的图像)F10、F11和F13之间的关系的图，并且图4C是例示合并区域R的宽度W与合并图像F15和F17之间的关系的图。

如图4A所例示的，合并区域R基于标记M来决定。具体地，合并区域R的位置和维数根据标记M的位置和维数来决定。在附图中例示的示例中，经由触摸标记M的外周的箱形所围住的区域被看做合并区域R。另外，诸如图像F0(片材S0)中的合并区域R的位置和合并区域R的尺寸等这样的、与合并区域R有关的信息，作为区域信息经由标记检测器39(见图2)获得。

如图4B所例示的，在本示例性实施方式中，要形成在合并区域R中的合并图像F10的尺寸根据合并区域R的尺寸来决定。例如，合并图像F10的尺寸被调整为将嵌合到合并区域R中的最大尺寸。例如，要注意的是，该尺寸调整由图像生成器43执行。

现在将具体描述合并图像F10的尺寸调整。

在附图中例示的示例中，如图4B中的(b-1)所例示的，合并图像F10的字体大小(文字大小)根据合并区域R的尺寸(高度H、宽度W)来决定。

具体地，如图4B中的(b-2)所例示的，字体大小根据合并区域R11和R13的高度H1和H2来决定。在附图中例示的示例中，合并区域R11的高度H1大于合并区域R13的高度H2。因此，在这种情况下，要形成在合并区域R11内的合并图像F11具有比要形成在合并区域R13中的合并图像F13更大的字体。

另外，如图4C中的(c-1)和(c-2)所例示的，字体大小根据合并区域R15和R17的宽度W1和W2决定。在附图中例示的示例中，合并区域15的宽度W1大于合并区域R17的宽度W2。因此，在这种情况下，要形成在合并区域R15内的合并图像F15具有比要形成在合并区域R17内的合并图像F17更大的字体。

这样，在附图中例示的示例中，合并图像F10的字体大小根据合并区域R的这两个尺寸(高度H、宽度W)来确定。

要注意的是，字体大小还可以根据高度H、宽度W或合并区域R的另一个尺寸(例如，诸如对角线的长度等)中的任意一项或组合来确定。

接着，将描述对标记M的位置进行分类的处理。如图4A所例示的，当多个标记M(M1、M2和M3)形成在片材S0上时，便于识别各个个体标记M。

因此，在本示例性实施方式中，标记M的位置的排序(分类处理)根据标记M的位置执行。具体地，标记M按片材S0上从上到下(参见图4A中的箭头C1)的位置来排序。此外，标记M按片材S0上从左到右(见图4A中的箭头C2)的位置来排序。

换言之，标记M的分类处理在沿上到下方向的位置优先的同时，根据沿上到下方向和沿左到右方向的位置执行。随后，通过遵循经由分类处理获得的标记M的顺序(标记物顺序)，来合并合并数据D0中的数据。

要注意的是，例如，分类处理由图像生成器43执行。

在附图中例示的示例中，从上到下行进的标记M1、M2和M3以该顺序形成。因此，标记物顺序变为标记M1、标记M2和标记M3的顺序。随后，合并数据D0中第一行上包括的第一行D5，合并到作为标记物顺序的第一个的标记M1中。类似地之后，第二行D6合并到作为标记物顺序的第二个的标记M2中，并且第三行D7合并到作为标记物顺序的第三个的标记M3中。

<设置画面>

图5A和图5B是例示了图像形成装置5的UI 51上所显示的设置画面的示例的图。具体地，图5A例示了UI 51上所显示的功能选择画面510，并且图5B例示了UI 51上所显示的列表选择画面520。

接着，将参照图5A和图5B描述图像形成装置5的UI上所显示的设置画面(功能选择画面510和列表选择画面520)。

图5A中例示的功能选择画面510是接收图像形成装置5中提供的功能的指定的画面。功能选择画面510设置有复印按钮511、传真按钮513、扫描仪按钮515和简单合并打印按钮517。

这里，如之前讨论的，图像形成装置5包括复印功能、扫描仪功能、传真功能和合并打印功能(简单合并打印功能)。另外，通过使用户选择功能选择画面510上的复印按钮511、传真按钮513、扫描仪按钮515和简单合并打印按钮517中的一个，来接收执行对应于所选按钮的功能的指示。

图5B中例示的列表选择画面520是接收合并数据D0的选择的画面。列表选择画面520显示在合并数据储存器33中存储的合并数据D0的列表名称。

这里，列表选择画面520设置有：列表选择按钮521至526，各显示合并数据D0的列表名称；和打印执行按钮527。

在列表选择画面520上，通过使用户选择列表选择按钮521至526中的一个，接收基于与所选按钮对应的合并数据D0来执行合并打印的指示。另外，当选择打印执行按钮527时，开启合并打印。

<图像形成装置5上的合并打印操作>

图6是例示了图像形成装置5上的合并打印操作的示例的流程图。

接着，将参照图2、图3的A至D以及图5A和图5B描述图像形成装置5上的合并打印操作的示例。

首先，假设作为开始合并打印操作之前的状态，功能选择画面510(参见图5A)显示在图像形成装置5的UI 51上。还假设由用户在上面绘制有标记M的片材S0(参见图3的C)以可扫描状态放置(设置)在图像形成装置5的扫描仪53中。

随后，如图6所例示的，控制器59判断是否经由UI 51接收执行合并打印功能(合并指示)的指示(步骤601)。具体地，控制器59判断是否按压了功能选择画面510上的简单合并打印按钮517。

如果接收到合并指示(步骤601，是)，则控制器59判断是否从终端装置3接收显示指示(后面讨论)(步骤602)。

如果没有接收到显示指示(步骤602，否)，则控制器59从终端装置3获得在合并数据储存器33中存储的合并数据D0的列表名称(步骤603)。随后，控制器59在UI 51上显示列表选择画面520(参见图5B)(显示合并打印画面，步骤604)。

接着，控制器59判断是否按压了列表选择画面520(参见图5B)上的打印执行按钮527(参见图5B)(步骤605)。如果按压了打印执行按钮527(步骤605，是)，则控制器59判断是否接收合并数据D0的选择(步骤606)。具体地，控制器59判断是否按压了列表选择画面520上的列表选择按钮521至526(参见图5B)中的一个。

如果接收到合并数据D0的选择(步骤606，是)，则控制器59经由扫描仪53执行上面绘制有标记M的片材S0(参见图3的C)的扫描(步骤607)。并且，控制器59将扫描出的图像发送到终端装置3(步骤608)，并且等待来自终端装置3的打印指示(步骤609)。

接着，如果从终端装置3接收到打印指示(步骤610)，则控制器59经由打印机55执行到片材上的打印(步骤611)。

<终端装置3上的合并打印操作>

图7是例示了终端装置3上的合并打印操作的示例的流程图。

下面将参照图2、图3的A至D和图7描述终端装置3上的合并打印操作的示例。

首先，在本示例性实施方式中，当被经由图像形成装置5扫描的片材S0的图像的接收所触发时，开始终端装置3上的合并打印操作。换言之，当开始合并打印时，不要求用户直接操作终端装置3。

更具体地，在图7中例示的示例中，首先，文件检测器35检测终端装置3上的已扫描图像的接收(步骤701)。具体地，文件检测器35检测片材S0的图像文件已由文件储存器47存储。另外，文件检测器35接收由文件储存器47存储的合并数据D0的列表名称(步骤702)。

接着，文件检测器35搜索，以确定接收到的列表名称的合并数据D0是否存储在合并数据储存器33中(步骤703)。随后，文件检测器35判断是否找到了已接收的列表名称的合并数据D0(步骤704)。

如果找到了已接收的列表名称的合并数据D0(步骤704，是)，则直立调整处理器37执行使由文件储存器47存储的图像文件直立的处理(步骤705)。另外，标记检测器39检测直立调整处理器37已经执行了自动直立调整处理的图像文件中包括的标记M(步骤706)。标记去除器41从图像文件去除检测到的标记M的图像(步骤707)。此外，标记检测器39基于标记M的检测获取区域信息(步骤708)。

下面，图像生成器43从合并数据储存器33加载对应于接收到的列表名称(参见步骤702)的合并数据D0(步骤709)。

并且，图像生成器43执行对标记位置进行分类的处理(步骤710)。另外，图像生成器43使用已由标记去除器41去除了标记M的图像的图像文件、由合并数据储存器33存储的合并数据D0、以及由标记检测器39获取的区域信息生成图像(步骤711)。

随后，打印指示单元45将与由图像生成器43生成的图像有关的打印指示输出到图像形成装置5(步骤712)。

要注意的是，如果未找到接收到的列表名称的合并数据D0(S704，否)，则文件检测器35向图像形成装置5发送一个或更多个合并数据D0的列表名称(步骤713)。具体地，文件检测器35经由列表选择画面520发送这样的指令，该指令用于显示在合并数据储存器33中存储的一个或更多个合并数据D0的列表名称(显示指示)。

如上所述，在本示例性实施方式中，使用打印状态下的片材S0而不是电子数据执行合并打印。换言之，在后面的步骤中执行一个或更多个合并位置(合并区域R)的指定。

并且，在本示例性实施方式中，通过使用彩笔P在纸质文档上指定合并位置，电子数据的预配置变得没有必要。此外，通过用彩笔P改变标记M的尺寸，调整了已合并文本的字体大小。

<示例性修改例1>

图8A至图8G是用于说明示例性修改例1的图。具体地，图8是例示上面已制成标记M的片材S10的图，图8B是例示了合并数据D10的图，并且图8C至图8G是例示如何根据标记M的颜色切换要合并的数据的图。

上述示例性实施方式描述了，基于上面已制成了单色(红色)标记M的片材S0(参见图3的C)执行合并打印，以及以合并数据D0中水平排列的行为单位执行合并打印。然而，示例性实施方式不限于此。

例如，在一个可能的配置中，形成多种颜色的标记M，并且基于标记M的颜色执行合并打印。另选地，可以基于除了合并数据D0中的行之外的元素来执行合并打印。

更具体地，如图8A中所示，考虑上面制成了标记M(M11、M12和M13)的片材S10。标记M11、M12和M13是用不同颜色的彩笔P10在片材S10上绘制的线。这里，假设标记M11、标记M12和标记M13分别用红色、蓝色和绿色的彩笔绘制。

并且，如图8B所例示的，合并数据D10除了“名称”、“日期”和“地址”之外，还包括针对各个数据的“属性”数据类型。这里，“属性”包括“教师”、“学生”和“工商业者”的类型(等级)。

根据图8A中例示的片材S10和图8B中的合并数据D10，例示了如下的合并打印的执行。

例如，如图8C中所例示的，可以根据标记M的颜色，合并数据D10的一栏(合并栏)上包括的数据被指定用于合并。

具体地，合并数据D10的第二栏“名称”中的各个数据合并到由红色标记M11指定的区域中。类似地，第三栏“日期”中的各个数据合并到由蓝色标记M12指定的区域中，而第四栏“地址”中的各个数据合并到由绿色标记M13指定的区域中。

作为另一个示例，如图8D所例示的，要合并的数据的类型可以根据标记M的颜色来指定。具体地，合并数据D10中指定的字符串数据(文本信息)合并到由红色标记M11指定的区域中。另外，执行合并打印的日期(时间)合并到由蓝色标记M12指定的区域中。另外，除了合并数据D10之外的诸如照片或图形等这样的图像数据合并到由绿色标记M13指定的区域中。要注意的是，用于指定合并数据D0中的图像的数据可以是例如终端装置3上的路径、URL等。

并且，作为另一个示例，如图8E中所例示的，可以根据标记M的颜色在该区域中启用或停用区域中的合并打印的执行。在附图中例示的示例中，合并数据D10中的所有属性的数据(尤其是被分类成“教师”、“学生”和“工商业者”的数据)合并到由红色标记M11指定的区域中。另一方面，仅被分类为合并数据D10中的一些属性的数据，合并到由除了红色标记M11之外的标记M指定的区域中。

具体地，被分类成“教师”和“学生”的数据合并到由蓝色标记M12指定的区域中，而被分类成“教师”的数据合并到由绿色标记M13指定的区域中。换言之，被分类成“工商业者”的数据未打印在由蓝色标记M12指定的区域中，并且被分类成“学生”或“工商业者”二者之一的数据未打印在由绿色标记M13指定的区域中。

并且，作为另一个示例，如图8F所例示的，合并数据D10本身可以根据标记M的颜色来切换。在附图中例示的示例中，图8B的合并数据D10(第一文件)合并到由红色标记M11指定的区域中。另一方面，其他合并数据(诸如第二文件和第三文件等；未示出)分别合并到由蓝色标记M12和绿色标记M13指定的区域中。

如上述示例性实施方式中所描述的，当终端装置3接收从图像形成装置5发送的图像文件时，终端装置3的标记去除器41去除图像文件中包括的标记M，并且，另外，在将合并数据D0的数据的图像添加到基于标记M的合并区域R中(数据添加)的同时，执行合并打印。

此时，除了执行数据添加之外，该构造还可以处理合并区域R的图像。例如，该构造可以首先执行将合并区域R的图像处理为对应于片材S10的颜色(例如，白色)的颜色的处理(例如白化)(也称作屏蔽(masking)处理)，然后添加合并数据D0的数据的图像。通过执行屏蔽处理，所加载的数据的图像变清晰。

另外，如图8G中所例示的，是否另外执行屏蔽处理可以根据标记M的颜色来切换。具体地，在由红色标记M11和蓝色标记M12指定的区域中执行数据添加，而不执行屏蔽处理。另一方面，在由绿色标记M13指定的区域中，在执行了屏蔽处理之后执行数据添加。

要注意的是，虽然从附图省略，但要合并的字符串的格式还可以根据标记M的颜色来修改。例如，诸如字体大小、字体颜色、下划线的有无、以及正常与粗体文本之间的切换等的特征，可以针对标记M的各个颜色来指定。

此外，除了标记M的颜色之外，或代替标记M的颜色，合并打印处理的内容可以根据诸如标记M的位置、标记M的形状(诸如对角线形状或边框形状)或标记M的线形(诸如实线或虚线等)等这样的因素来切换。

<示例性修改例2>

图9A和图9B是用于说明示例性修改例2的图。具体地，图9A是例示上面制成了标记M的片材S21的图，并且图9B是例示另一个合并区域R22由合并区域R21指定的图。

以上描述了将合并数据D0中的数据的图像添加到基于标记M的合并区域R中，但该构造不限于此。

此外，如图9A所例示的，可以识别基于标记M的合并区域R中所包括的字符串，并且与识别出的字符串匹配的字符串可以用由合并数据D0指定的字符串来代替。

此时，如图9A所例示的，考虑已经在片材S21上制成了标记M21的情况。字符串“XXXXXX”包括在由标记M21指定的合并区域R21中。随后，标记检测器39识别字符串并且例如，还检测到与“XXXXXX”匹配的字符串存在于图像文件的另一个位置中。随后，包括字符串“XXXXXX”的区域被指定为合并区域R22。接着，合并区域R21和合并区域R22中的字符串被由合并数据D0指定的字符串代替。

例如，用户可以在一个位置中的字符串“昭和”上制成标记M21，从而导致整个文档(片材S21)中的所有字符串“昭和”被“平成”代替。因此，用户不需要在所有的“昭和”字符串上制成标记M21。

<示例性修改例3>

图10A和图10B是用于说明示例性修改例3的图。具体地，图10A是例示由标记M指定的片材S31的图，并且图10B是例示由基于标记M指定的字符串创建的合并数据D11、D12和D13的图。

以上描述了将合并数据D0的图像添加到基于标记M的合并区域R。另一方面，还可以由基于标记M指定的字符串来创建合并数据D0。

如图10A所例示，以下描述上面已经制成标记M31、M32和M33的片材S31。随后，例如，标记检测器39检测标记M31、M32和M33，并且还识别由标记M31、M32和M33指定的字符串。随后，例如，各个所识别的字符串作为合并数据D11、D12和D13存储在合并数据储存器33中。

要注意的是，在多个片材S31的情况下，通过执行上述处理来创建合并数据D11、D12和D13的列表(表格)。

<示例性修改例4>

图11例示了根据示例性修改例4的终端装置300和图像形成装置500的示例性功能构造。注意，与上述图2中例示的终端装置3中相同的结构元件将用相同的附图标记来表示，并且下文中将减少或省略这些结构元件的进一步描述。

并且，图12是例示了根据示例性修改例4的图像形成装置500的示例性操作的流程图。图13是例示了根据示例性修改例4的终端装置300的示例性操作的流程图。

要注意的是，在上面的描述中，终端装置3的标记检测器39被描述为检测图像文件中的标记M。为了使标记检测器39检测标记M，还可以执行用于使标记更容易识别的预处理。预处理可以包括以下步骤：用与用于实际标记的笔类似的笔来制作标记，并且与用用于实际读取的图像读取装置读入的结果比较。要注意的是，该构造中的标记检测器39起到预先决定识别为标记的标记图像的决定单元的作用。

并且，为了使标记检测器39检测标记M，还可以执行调整配置参数的处理。这里，配置参数可以是例如扫描模式、片材尺寸、分辨率、亮度、要扫描的面、校正的启用和停用、扫描区域和伽马校正。

另外，还可以通过使用评估表(未示出)来执行配置参数的调整。评估表是用于在评估表上的预定位置处制作一个或更多个预定尺寸(形状)的标记M的表单。另外，评估表包括诸如用户用彩笔P描绘的边框线等这样的图像。

具体地，如在图11的终端装置300中，控制器330可以配备有参数调整器(调整器)400。在终端装置300中，参数文件生成器401、标记评估器403和评估表生成器405作为参数调整器400工作。

参数文件生成器401创建参数文件(参数表)，该参数文件(参数表)是包括为各个参数配置的值的文件。参数文件生成器401还存储默认参数文件。

标记评估器403评估由标记检测器39执行的标记M的检测。具体地，标记评估器403判断标记检测器39是否检测到标记M。标记评估器403还判断标记检测器39是否识别出标记M的颜色。标记评估器403还判断由标记检测器39检测到的标记M是否具有预定位置和尺寸，并且另外判断诸如用单线绘制的标记是否被识别为多个标记等这样的情况。随后，判断配置参数，使得这些评估结果变合适。

评估表生成器405经由打印指示单元45向图像形成装置5输出用于输出评估表(未示出)的指示。

接着，将参照图12描述图像形成装置500上的示例性操作。

首先，控制器59判断是否经由UI 51接收到执行参数调整的指示(调整指示)(步骤1201)。如果接收到调整指示(步骤1201，是)，则控制器59从终端装置300(评估表生成器405)接收评估表的数据(S1202)，并且经由打印机55执行评估表的打印(步骤1203)。

接着，控制器59执行用户已经在上面制成标记M的评估表的扫描(S1204)。随后，控制器59向终端装置300发送已扫描的图像(步骤1205)。

接着，将参照图13描述终端装置300上的示例性操作。

首先，终端装置300的文件检测器35检测到文件储存器47接收到(存储了)已扫描图像的图像文件(步骤1301)。随后，直立调整处理器37执行使由图像储存器47存储的图像直立的处理(步骤1302)。

接着，标记检测器39提取(检测)直立调整处理器37已经执行了直立调整处理的图像文件中的标记M(步骤1303)。要注意的是，在执行标记M的提取时使用的参数遵从由参数文件生成器401存储的默认参数文件。

随后，标记评估器403判断标记检测器39是否提取到标记M(步骤1304)。如果提取了标记M(步骤1304，是)，则标记评估器403判断标记检测器39是否识别了标记M的颜色(步骤1305)。如果识别了标记M的颜色(步骤1305，是)，则标记评估器403判断由标记检测器39提取的标记M是否具有预定的位置和尺寸(步骤1306)。

随后，如果标记M具有预定的位置和尺寸(步骤1306，是)，则由参数文件生成器401存储的默认参数文件作为参数文件输出(步骤1307)。

另一方面，如果未提取标记M(步骤1304，否)，或如果未识别标记M的颜色(步骤1305，否)，或如果标记M没有预定的位置和尺寸(步骤1306，否)，则参数文件生成器401调整参数(步骤1308)。随后，标记检测器39根据调整后的参数来提取标记M(步骤1303)。

如上所述，在本示例性修改例中，通过使用户使用图像形成装置500来扫描上面制成了标记M的评估表，在终端装置300上执行参数调整。要注意的是，自动执行参数调整，直到获得了标记M的良好提取结果为止。

要注意的是，在用户使用多种颜色的彩笔P执行合并打印时，在评估表上的多个位置上或多张评估表上用各种颜色的彩笔P来制作多个标记M。随后，针对各个标记M执行上述参数调整。

<其他示例性修改例>

虽然上述图3的C将片材S0例示为所谓的表单，但片材S0不限于此。片材S0包括图像就足够了，并且图像可以是例如，文档或表格。图像可以经由图像形成装置5形成在片材S0上，或通过由用户手写而形成在片材S0上。另选地，以地址作为图像写在上面的信封或明信片可以被看做是片材S0。

并且，虽然上述图3的C例示了用彩笔P形成(制成)标记M，但由用户在不使用终端装置3或图像形成装置5的情况下在片材S0上制作标记M就足够了。例如，还可以用诸如荧光笔、圆珠笔或彩色铅笔等这样的书写工具，或用印章或图章来制作标记M。另外，贴纸可以贴到片材S0，并且贴纸可以看做标记M。

并且，上述图3的D例示了要经由合并打印合并的字符串水平排列的格式(还称作水平书写)，但是格式不限于此。换言之，格式还可以是要经由合并打印合并的字符串竖直排列的格式(还称作竖直书写)。

在这种情况下，从用户接收与是否针对水平书写或竖直书写执行合并打印有关的指示，并且格式根据这个指定而在水平书写与竖直书写之间切换。

另选地，还可以根据合并区域R(参见图4A)的尺寸来识别水平书写和竖直书写。具体地，例如，格式可以根据合并区域R的高度和宽度的比例是否超过阈值，而在竖直书写与水平书写之间切换。格式还可以根据合并区域R的纵向上的倾斜是否超过阈值，而在竖直书写与水平书写之间切换。格式还可以根据标记M的颜色而在竖直书写与水平书写之间切换。

上述图4A例示了由标记M的外切长方形围成的区域(作为合并区域R)，但是根据标记M的位置确定合并区域R就足够了。例如，从标记M的中心(高度的中心和宽度的中心)起的预定范围还可以被看做合并区域R。

另外，图4B例示了基于合并区域R的高度H和宽度W决定字体大小，但是根据合并区域R的尺寸决定字体大小就足够了。例如，字体大小还可以根据合并区域R的高度H和宽度W中二者之一或根据合并区域R的对角线的长度来确定。

另外，例如，已确立的技术用于检测包括在图像文件中的标记M的方法，但也可以例如通过多次执行片材S0的扫描来执行。

换言之，在一个可能的构造中，在用户制作一个或更多个标记M之前，扫描片材S0(第一扫描)。在用户在片材S0上制成一个或更多个标记M之后，随后扫描上面制成了一个或更多个标记M的片材S0(第二扫描)。根据第一扫描与第二扫描之间获得的图像数据的差别来检测一个或更多个标记M。根据该构造，可以提高标记M的检测精度。

并且，在一个可能的构造中，当经由图像形成装置5在片材S0上形成图像时，可以接收经由图像形成装置5形成的图像的数据或对应于图像的数据的数据，并且可以根据接收到的数据来识别形成在片材S0上的图像。要注意的是，在该构造中，终端装置3配备有接收单元，该接收单元接收上述图像的数据(或对应的数据)。

并且，以上描述了经由图像形成系统1执行合并打印，但是构造不限于此，只要附加图像形成在由用户添加的一个或更多个标记M的位置处即可。例如，图像形成系统1还可以被构造为，将相同的附加信息添加到上面形成不同图像的多个片材S，或换言之，不具有共同布局的多个片材S，从而形成彼此分别不同的输出图像。

在上述图6的描述中，图像形成装置5被描述为执行扫描(步骤607)和打印(步骤611)。然而，还可以经由分开的图像形成装置5分别执行扫描(步骤607)和打印(步骤611)。

另外，在图6、图7等的描述中，合并打印被描述成在由终端装置3和图像形成装置5执行，但是构造不限于此。例如，图像形成装置5可以被构造为执行上述终端装置3的功能。凭借该构造，仅用图像形成装置5可以执行合并打印。

要注意的是，虽然以上描述了各种示例性实施方式和示例性修改例，但是明显地，示例性实施方式和示例性修改例也可以结合到一起。

此外，本公开不限于上述示例性实施方式，并且还可以以各种方面执行，而不偏离本公开的原理。

Claims (14)

1.一种图像处理装置，该图像处理装置包括：

检测器，该检测器检测由图像形成装置在片材上形成的图像和由用户施加于所述片材的标记，其中，对于由所述检测器检测到的所述标记，根据标记的位置进行了排序；

识别单元，该识别单元识别标记位置，所述标记位置是所述标记形成在所述图像上的位置；

获取单元，该获取单元获取要添加并形成在所述标记位置处的附加图像；以及

输出单元，该输出单元使用由所述检测器检测到的所述图像和由所述获取单元获得的所述附加图像来形成输出图像。

2.根据权利要求1所述的图像处理装置，其中，

所述输出单元不在所述输出图像中输出由所述检测器检测到的所述标记的图像。

3.根据权利要求1所述的图像处理装置，其中，

所述输出单元在由所述检测器检测到的所述图像中去除形成在所述标记位置处的图像。

4.根据权利要求2所述的图像处理装置，其中，

所述输出单元在由所述检测器检测到的所述图像中去除形成在所述标记位置处的图像。

5.根据权利要求1至4中任意一项所述的图像处理装置，其中，

所述输出单元根据所述标记的尺寸来改变所述输出图像中的所述附加图像的尺寸。

6.根据权利要求1至4中任意一项所述的图像处理装置，其中，

所述获取单元存储文本信息作为所述附加图像，以及

所述输出单元根据所述标记的尺寸，改变作为所述附加图像要形成在所述输出图像中的文本的尺寸。

7.根据权利要求1至4中任意一项所述的图像处理装置，其中，

所述检测器在形成所述图像之后但在施加所述标记之前读取片材，并且随后在施加所述标记之后读取所述片材。

8.根据权利要求1至4中任意一项所述的图像处理装置，其中，

所述输出单元根据所述标记的颜色来改变来自数据库的所述附加图像。

9.根据权利要求1至4中任意一项所述的图像处理装置，所述图像处理装置包括：

决定单元，该决定单元预先决定作为所述标记进行识别的标记图像，其中，

所述识别单元通过与由所述决定单元决定的所述标记图像的比较，来识别所述标记位置。

10.根据权利要求1至4中任意一项所述的图像处理装置，其中，

所述检测器包括调整器，该调整器预先读取作为所述标记进行识别的彩色的标记图像，并且调整所述标记的检测模式。

11.根据权利要求1至4中任意一项所述的图像处理装置，其中，

形成在所述片材上的所述图像由图像形成装置形成，并且

所述图像处理装置包括：

接收单元，该接收单元接收由所述图像形成装置在所述片材上形成的图像的信息。

12.根据权利要求1至4中任意一项所述的图像处理装置，其中，

在多个所述附加图像彼此不同的情况下，所述输出单元输出与不同的附加图像的数量对应的数量的输出图像。

13.一种图像处理方法，该图像处理方法包括以下步骤：

检测由图像形成装置形成在片材上的图像和由用户施加于所述片材的标记，其中，对于由检测器检测到的所述标记，根据标记的位置进行了排序；

识别标记位置，该标记位置是所述标记形成在所述图像上的位置；

获取要添加并形成在所述标记位置处的附加图像；以及

使用所检测的图像和所获取的附加图像来形成输出图像。

14.一种图像形成系统，该图像形成系统包括：

图像读取单元，该图像读取单元读取由图像形成装置在片材上形成的图像和由用户添加到所述片材的标记，其中，对于由所述图像读取单元读取的所述标记，根据标记的位置进行了排序；

识别单元，该识别单元识别标记位置，该标记位置是所述标记形成在所述图像上的位置；

获取单元，该获取单元获取要添加并形成在所述标记位置处的附加图像；

输出单元，该输出单元使用由所述图像读取单元读取的所述图像和由所述获取单元获取的所述附加图像来形成输出图像；以及

打印单元，该打印单元将由所述输出单元形成的输出图像打印到片材上。