CN101610334B - 图像形成设备及其控制方法 - Google Patents

图像形成设备及其控制方法 Download PDF

Info

Publication number
CN101610334B
CN101610334B CN2009101472850A CN200910147285A CN101610334B CN 101610334 B CN101610334 B CN 101610334B CN 2009101472850 A CN2009101472850 A CN 2009101472850A CN 200910147285 A CN200910147285 A CN 200910147285A CN 101610334 B CN101610334 B CN 101610334B
Authority
CN
China
Prior art keywords
image
written
hand
thin slice
mark
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2009101472850A
Other languages
English (en)
Other versions
CN101610334A (zh
Inventor
塙敬子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101610334A publication Critical patent/CN101610334A/zh
Application granted granted Critical
Publication of CN101610334B publication Critical patent/CN101610334B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872—Repositioning or masking
    • H04N1/3873—Repositioning or masking defined only by a limited number of coordinate points or parameters, e.g. corners, centre; for trimming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00358—Type of the scanned marks
    • H04N1/00366—Marks in boxes or the like, e.g. crosses or blacking out
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00368—Location of the scanned marks
    • H04N1/00374—Location of the scanned marks on the same page as at least a part of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00376—Means for identifying a mark sheet or area
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00379—Means for enabling correct scanning of a mark sheet or area, e.g. registration or timing marks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00962—Input arrangements for operating instructions or parameters, e.g. updating internal software
    • H04N1/00968—Input arrangements for operating instructions or parameters, e.g. updating internal software by scanning marks on a sheet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3871—Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877—Image rotation
    • H04N1/3878—Skew detection or correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0082—Image hardcopy reproducer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0091—Digital copier; digital 'photocopier'

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)
  • Control Or Security For Electrophotography (AREA)

Abstract

本发明涉及一种图像形成设备及其控制方法。根据本发明实施例的图像形成设备将包括用户用以进行写入的写入区域的图像打印在记录薄片上，扫描写入区域被写入的记录薄片，将从所扫描的图像提取出的图像与背景图像合成并进行打印。该图像形成设备将表示写入区域的标记打印在记录薄片上，并且在扫描之后剪切出包括标记位置的部分区域。该图像形成设备的特征在于：从所剪切出的且基于标记图像根据背景图像的方向旋转得到的图像中提取表示写入所述写入区域中的内容的区域中的图像。这样即使以倾斜状态将手写合成薄片置于原稿台上，也允许以小的错位来合成图像。

Description

图像形成设备及其控制方法
技术领域
本发明涉及一种具有扫描器等图像扫描设备、打印机等打印单元和用于读取存储在存储介质中的数字图像的功能的图像形成设备，尤其涉及一种合成数字图像和用户手写图像的图像形成设备。
背景技术
如日本特开2003-80789号公报所述，作为多功能外围设备的功能之一，已知这样一种发明：合成存储在存储介质中的数字图像和通过扫描器扫描得到的手写图像，并且对其进行打印。
这类图像形成系统被配置成打印写入了手写图像的手写合成薄片，扫描写入了手写图像的手写合成薄片，从手写合成薄片上的图像中提取手写图像，并且将提取出的手写图像与数字图像合成。如日本特开2007-49620号公报所述，已经提出了这样一种方法：在扫描手写合成薄片时，指定手写合成薄片上写入的手写图像的位置，从而实现更精确的合成。
然而，上述相关技术的例子存在如下问题：如果在扫描手写合成薄片时在原稿台上放置处于倾斜状态的手写合成薄片，则以倾斜状态合成手写合成薄片上的手写图像。图1A是示出用户期望合成的图片图像的图。该图片图像是要合成的对象。图1B是示出在以相对于原稿台不倾斜的状态扫描手写合成薄片的情况下的合成结果的图。图1C是示出在相关技术的例子中以倾斜状态将手写合成薄片放置在原稿台上的状态的图。手写图像55是用户使用钢笔等书写工具写入的字符或图片。图1C是示出在相对于原稿台以一角度来扫描手写合成薄片的情况下的合成结果的图。在相关技术的例子中，如图1C所示，相对于图片图像以一角度且偏离位置而合成手写图像55b。
同样，当反向放置手写合成薄片时，以反向状态合成手写图像55。为了防止该问题，指定在扫描手写合成薄片时手写合成薄片将位于原稿台的抵接部分处的部分。也就是说，存在将手写合成薄片放置在原稿台上时灵活性低的问题。
发明内容
本发明提供一种图像形成设备，其中，即使以倾斜状态将手写合成薄片置于原稿台上，该图像形成设备也能够以小的错位来合成图像。本发明提供一种图像形成设备，该图像形成设备包括：打印机，用于在记录薄片上打印图像；扫描器，用于扫描放置在原稿台上的所述记录薄片；第一打印控制单元，用于使所述打印机将包括用户用以进行写入的写入区域和表示所述写入区域的标记的第一图像打印在所述记录薄片上；剪切单元，用于基于包括在通过利用所述扫描器扫描所述写入区域被写入的所述记录薄片而获得的第二图像中的与所述标记相对应的标记图像在所述第二图像中的位置，剪切出所述第二图像中的包括所述写入区域和所述标记图像的区域中的图像；提取单元，用于从由所述剪切单元剪切出的且基于所述标记图像根据背景图像的方向旋转得到的图像中提取表示写入所述写入区域中的内容的区域中的图像；以及第二打印控制单元，用于使所述打印机打印将由所述提取单元提取出的图像叠加在所述背景图像上的图像。
本发明还提供一种图像形成设备，该图像形成设备包括：打印机，用于在记录薄片上打印图像；扫描器，用于扫描放置在原稿台上的所述记录薄片；第一打印控制单元，用于使所述打印机将包括用户用以进行写入的写入区域和表示所述写入区域的标记的第一图像打印在所述记录薄片上；剪切单元，用于基于包括在通过利用所述扫描器扫描所述写入区域被写入的所述记录薄片而获得的第二图像中的与所述标记相对应的标记图像在所述第二图像中的位置，剪切出所述第二图像中的包括所述写入区域和所述标记图像的区域中的图像；提取单元，用于提取由所述剪切单元剪切出的图像中的、表示写入所述写入区域中的内容的区域中的图像和所述标记图像；旋转单元，用于基于包括在由所述提取单元提取出的图像中的所述标记图像，检测放置在所述原稿台上并被扫描的所述记录薄片相对于所述原稿台的倾斜，并且基于所检测到的倾斜旋转由所述提取单元提取出的图像；以及第二打印控制单元，用于使所述打印机打印将由所述旋转单元旋转得到的图像中的、表示写入所述写入区域中的内容的区域中的图像叠加在背景图像上的图像。
本发明还提供一种图像形成设备的控制方法，所述图像形成设备包括用于在记录薄片上打印图像的打印机和用于扫描放置在原稿台上的所述记录薄片的扫描器，所述控制方法包括以下步骤：第一打印控制步骤，用于使所述打印机将包括用户用以进行写入的写入区域和表示所述写入区域的标记的第一图像打印在所述记录薄片上；剪切步骤，用于基于包括在通过利用所述扫描器扫描所述写入区域被写入的所述记录薄片而获得的第二图像中的与所述标记相对应的标记图像在所述第二图像中的位置，剪切出所述第二图像中的包括所述写入区域和所述标记图像的区域中的图像；提取步骤，用于从在所述剪切步骤中剪切出的且基于所述标记图像根据背景图像的方向旋转得到的图像中提取表示写入所述写入区域中的内容的区域中的图像；以及第二打印控制步骤，用于使所述打印机打印将在所述提取步骤中提取出的图像叠加在所述背景图像上的图像。
通过以下(参考附图)对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1A是示出用户期望合成的图片图像的图；
图1B是示出在以相对于原稿台不倾斜的状态扫描手写合成薄片的情况下的合成结果的图；
图1C是示出相关技术的例子中以倾斜状态将手写合成薄片放置在原稿台上的状态的图；
图2是示出图像形成设备的框图；
图3A和3B是示出手写合成薄片SH1的例子和手写合成薄片SH 1的手写区域的例子的图；
图4是示出用于打印手写合成薄片SH1的操作的流程图；
图5是示出在手写合成薄片SH1上创建浅色打印图像时的输入和输出关系的图；
图6是示出用于扫描手写合成薄片SH1的操作的流程图；
图7A是示出扫描的手写合成薄片SH1倾斜的例子的图；
图7B是示出步骤S14中剪切出倾斜校正区域的图；
图7C是示出步骤S14中剪切出倾斜校正区域的图；
图8是示出根据实施例的区域检测标记的形状的例子的图；
图9是示出在本实施例中进行倾斜校正处理的图像中，区域检测标记的实际位置和手写区域相对于扫描图像不倾斜的状态下的区域检测标记的位置之间的关系的图；
图10是示出剪切出的图像数据的变换前后的坐标之间的关系的等式的图；
图11是示出用于获得单应性变换(homographytransformation)所需的矩阵的处理中的等式的图；
图12是示出倾斜校正前后的状态的示意图；
图13是示出旋转的中心和旋转角θ的图；
图14是示出用于使用仿射变换(affine transformation)计算旋转用参数的方法的图；
图15A是示出区域检测标记和手写区域之间的位置关系的全体视图；
图15B是示出图15A中的一个区域检测标记和手写区域之间的位置关系的图；
图16是示意性示出剪切出的宽度为AREA_W且长度为AREA_L的矩形的图；
图17A是作为图片图像的一部分的浅色打印图像和手写图像的亮度直方图；
图17B是根据剪切出的区域所创建的掩模数据的示意图；
图18是示出用于根据R、G和B值获得值Gray的等式(18)的图；
图19是示出倾斜校正之后的合成结果的图；
图20是示出手写合成薄片SH2的图；
图21是示出用于使用相对位置标记旋转手写区域的操作的流程图；
图22A是示出相对于抵接位置以不同于适当方向的方向扫描手写合成薄片SH2时的图像的图；
图22B是示出用于剪切出被估计为包括所有区域检测标记的区域的处理的图；
图22C是示出用于剪切出被估计为包括所有区域检测标记的区域的处理的图；
图23是示出在通过单应性变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下的变换前后的坐标之间的位置关系的图；
图24是示出变换前后的坐标之间的关系的图；
图25是示出在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下的变换前后的坐标之间的位置关系的图；
图26是示出在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下计算参数的方法的图；
图27是示出在通过仿射变换旋转地校正图像的情况下的变换前后以任意方向放置的手写合成薄片SH2上的图像的位置关系的图；
图28是示出在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下计算坐标位置时使用的等式的图；
图29是示出手写合成薄片SH3的图；
图30是示出预先创建提取用掩模数据然后旋转图像的例子的示意图；
图31是示出用于在创建提取用掩模数据之后旋转地校正图像的操作的流程图。
具体实施方式
图2是示出根据本发明实施例的图像形成设备100的框图。图像形成设备100包括扫描器10、打印机20、操作部30和控制单元40。扫描器10例如为CIS或CCD彩色扫描器。扫描器10包括照明部11、图像传感器12、AD转换器13、传感器数据控制部14和传感器驱动控制部15。传感器数据控制部14将利用扫描器10所获取的数据存储在RAM 42中。打印机20例如为喷墨打印机。喷墨打印机通过将从墨盒(未示出)所提供的墨吹在打印薄片上来形成图像。打印机20包括打印头21、打印驱动控制部22、打印薄片输送部23和打印数据控制部24。
操作部30是用户向图像形成设备100发出指令的部分，并且包括用户接口31、存储介质控制部32和存储介质33。用户接口31是例如包括按键或液晶屏的操作面板等的操作部。存储介质控制部32是将SD卡等的可拆卸外部存储介质33连接至图像形成设备100的部分。当在所连接的存储介质33中存在图像数据时，存储介质控制部32识别该图像数据并将该图像数据通知给控制单元40。控制单元40包括ROM 41、RAM 42和CPU 43。ROM41是存储图像形成设备100用的控制程序的非易失性存储器。CPU 43通过执行控制程序，用作扫描器控制单元和打印机控制单元等。在本实施例中，CPU 43还用作手写薄片打印单元、手写合成薄片扫描单元、合成执行单元和合成结果打印单元。
手写合成薄片扫描单元被配置成当用户利用操作部请求创建手写合成薄片时，使用图片图像创建手写合成薄片的数字数据，并且打印机20输出该数字数据。手写合成薄片扫描单元被配置成扫描器10通过扫描手写合成薄片获取数字图像数据，并且从所获取的数字图像数据中提取手写图像55。合成执行单元将手写图像55与图片图像合成，并且将合成结果发送至打印机20。RAM 42临时存储由扫描器10所读取的图像数据或为了打印机20的打印从JPEG格式文件所转换的打印数据等的所需数据，并且当不需要这些数据时删除这些数据。
图3A和3B是示出本实施例中所使用的手写合成薄片SH1的例子和手写合成薄片SH1的手写区域54的例子的图。手写合成薄片识别标记51是在识别出所扫描的原稿是手写合成薄片SH1时所使用的标记。由于手写合成薄片识别标记51包含表示存储在存储介质33中的图像中的哪一个是期望图像的信息，因而手写合成薄片识别标记51的形状根据手写合成薄片SH1而改变。
薄片选择区域52是为用户提供的用以在合成图像之后选择打印用薄片大小的栏。区域检测标记53a、53b、53c和53d是在扫描手写合成薄片SH1时适当剪切出手写区域54所使用的位置检测标记。在本实施例中，如果手写合成薄片SH1相对于原稿台倾斜，则使用区域检测标记53a～53d作为倾斜检测标记。还使用区域检测标记53a～53d作为用于获得倾斜校正用参数的标记。
手写区域54是用户写入手写图像55的区域。在手写区域54中用浅色打印图片图像，以使得用户可以容易地明白合成后的手写图像55和图片图像之间的位置关系。部分54a和54b是图片图像的浅色打印部分。手写图像55是用户添加至所打印的手写合成薄片SH1的字符。
图4是示出根据本实施例的用于打印手写合成薄片SH1的操作的流程图。在该流程图中，“图像数据”是数字数据，在该数字数据中，通过三个信号R、G和B表示一个像素，并且各信号具有它们自己的值。“二值化图像数据”是这样的数据，在该数据中，一个像素具有值1或0；如果值为1，则表示黑色，如果值为0，则表示白色。
在步骤S1，用户操作用户接口31以选择执行打印手写合成薄片SH1。此时，CPU 43用作手写合成薄片扫描单元，以在RAM
42中创建存储在存储介质33中的图片图像的缩略图图像，并且将它们显示在用户接口31上。在步骤S2，用户在查看所显示的图片图像时操作用户接口31，以选择期望的合成用的图片图像。在步骤S3，CPU 43从存储介质33读取图片图像文件，并且将其临时存储在RAM 42中。此时，CPU 43创建具有表示使用存储介质33中的哪一图像的信息的手写合成薄片识别标记51。
此外，创建用于在手写合成薄片SH1的手写区域54上用浅色打印图3A所示的图片图像的图像数据。首先，切掉图片图像的上和下或左和右，以使得该图片图像具有与手写区域54的宽高比相同的宽高比。重新调整剪切出的图像的大小以使其具有与手写合成薄片SH1的数字图像格式中的手写区域54相同的大小。
图5是示出在手写合成薄片SH1上创建浅色打印图像时的输入和输出关系的图。如图5所示，图3A中的图片图像的灰度级降低成仅由低浓度区域所表示的图像。将通过上述处理所创建的图像数据称为“浅色打印图像数据”。CPU 43将通过上述方法所创建的手写合成薄片识别标记51和浅色打印图像数据存储在RAM 42中。
在步骤S4，CPU 43将存储在ROM 41中的手写合成薄片SH1的数字图像的格式存储在ROM 42中。在步骤S5，CPU 43使图3A中的浅色打印图像数据嵌入手写合成薄片SH1的手写区域54的区域，并且使手写合成薄片识别标记51嵌入预定位置，以创建手写合成薄片SH1的打印数据。在步骤S6，CPU 43使打印机20输出所创建的手写合成薄片SH1的图像数据。
图6是示出根据本实施例的用于扫描手写合成薄片SH1的操作的流程图。此时，CPU 43用作手写合成薄片扫描单元。
在步骤S11，CPU 43使用户接口31为用户进行显示，以读取手写合成薄片SH1。用户识别该显示，并且利用扫描器10扫描完成了手写的手写合成薄片SH1。
图7A是示出所扫描的手写合成薄片SH1倾斜的例子的图。
在步骤S12，CPU 43获得存储在RAM 42中的手写合成薄片识别标记51、薄片选择区域52和区域检测标记53a～53d的位置信息。在步骤S13，CPU 43基于手写合成薄片识别标记51的位置信息，根据手写合成薄片SH1的图像数据，分析估计为存在手写合成薄片识别标记51的区域。手写合成薄片识别标记51包含表示使用存储介质33中的图像中的哪一个来创建手写合成薄片SH1的信息。基于该信息，指定要合成的图片图像，并且将存在于存储介质33中的图片图像的图像文件存储在RAM 42中。
此时，切掉图片图像的上和下或左和右，以使得该图片图像具有与手写区域54的宽高比相同的宽高比。将剪切出的图像的大小重新调整成与手写合成薄片SH1的数字图像格式中的手写区域54相同的大小。可以根据在执行扫描时的分辨率和存储在ROM 41中的手写区域54的物理大小，得出手写区域54的图像大小。图7B和7C是示出步骤S14中剪切出倾斜校正区域的图。
在步骤S14，CPU 43基于区域检测标记53a～53d的位置信息，根据手写合成薄片SH1的图像数据，剪切出被估计为包括所有区域检测标记53a～53d的区域。剪切的结果是图7C所示的区域。
图8是示出本实施例的区域检测标记53a～53d的形状的例子的图。在本实施例中，所有区域检测标记53a～53d具有长度为BAR_L[像素]且宽度为BAR_W[像素]的两个矩形在中心处交叉的形状。
在步骤S15，通过模式匹配指定图7C所示的图像中的区域检测标记53a～53d的确切位置。
使用倾斜检测标记的倾斜校正处理(步骤S16)的细节
在步骤S16，旋转图7C中的图像，以使得手写区域54变得与图像数据平行。在本实施例中，使用单应性变换来旋转该图像。下面将说明单应性变换的细节。
图9是示出在本实施例中进行了倾斜校正处理的图像中，区域检测标记53a～53d的实际位置和在手写区域54相对于扫描图像不倾斜的状态下的区域检测标记53a～53d的位置之间的关系的图。
在本实施例中，变换之前的坐标位置P是图9中的实际检测标记的坐标位置。变换之后的坐标位置Q是没有倾斜的检测标记的坐标位置。在变换之前的坐标位置P中，假定图7A所示的图像数据的左上处的变换前的区域检测标记53a的坐标P1为(x1，y1)；假定图7A所示的图像数据的左下处的变换前的区域检测标记53b的坐标P2为(x2，y2)；假定图7A所示的图像数据的右上处的变换前的区域检测标记53c的坐标P3为(x3，y3)；并假定图7A所示的图像数据的右下处的变换前的区域检测标记53d的坐标P4为(x4，y4)。
在变换后的坐标位置Q中，假定图7C所示的图像数据的左上处的变换后的区域检测标记53a的坐标Q1为(S1，T1)。以相同方式，假定左下处的变换后的区域检测标记53b的坐标Q2为(S2，T2)；假定右上处的变换后的区域检测标记53c的坐标Q3为(S3，T3)；并且假定右下处的变换后的区域检测标记53d的坐标Q4为(S4，T4)。
图10是示出剪切出的图像数据的变换前后的坐标之间的关系的等式的图。图10所示等式(10a)是本实施例中用于获得由区域检测标记53a～53d所形成的矩形的短边的长度的等式。图10所示等式(10b)是本实施例中用于获得由区域检测标记53a～53d所形成的矩形的长边的长度的等式。在变换之前的坐标位置P中，将左上处的区域检测标记53a的位置设置为在变换前后位置不改变的“基准坐标”。也就是说，在本实施例中，区域检测标记53a的坐标P1为坐标Q1。图10所示等式(10c)是本实施例中表示坐标Q1和P1之间的关系的等式。
CPU 43获得变换之后的区域检测标记53a～53d的坐标位置，从而使得在利用直线连接所有区域检测标记53时所绘制的矩形的短边变成与图像数据垂直，并且该矩形的长边变成与图像数据平行。由于坐标Q2位于从坐标Q1开始与y轴平行前进的位置处，因而坐标Q2的x轴上的值与坐标Q1的x轴上的值相同。坐标Q2的y轴上的值为通过将坐标Q1的y轴上的值T1移动P1和P2之间的距离(长度)所获得的值。因此可以获得等式(10d)。同样，坐标Q3处于从坐标Q 1开始与x轴平行前进的位置处；因此，坐标Q3的y轴上的值等于坐标Q1的y轴上的值，并且坐标Q3的x轴上的值为通过将坐标Q1的x轴上的值S1移动P1和P3之间的距离(宽度)所获得的值。因此，可以获得等式(10e)。坐标Q4的x轴上的值等于坐标Q3的x轴上的值。坐标Q4的y轴上的值等于坐标Q2的y轴上的值。因此，可以获得等式(10f)。
图11是示出用于获得单应性变换所需的矩阵的处理中的等式的图。这里，在(S，T)坐标系统和(x，y)坐标系统之间，存在满足等式(11a)的矩阵H。也就是说，通过获得矩阵H并将(x，y)坐标系统的各点乘以矩阵H，可以变换成(S，T)坐标系统。在本实施例中，CPU 43按照如下获得矩阵H。
首先，将变换前的坐标P1和变换后的坐标Q1代入等式(11a)。由此得到的等式为等式(11c)、等式(11d)和等式(11e)。将这三个等式合并成一个等式。在等式(11e)中，如果从两边减去1，并且将x1项移动至左边，则获得等式(11f)。此外，将两边乘以S1获得等式(11g)。
另一方面，将等式(11c)的两边乘以-1(负号)获得等式(11h)。如果将等式(11g)的两边相加到等式(11h)的右边，则可以由等式(11g)两边的绝对值相等而其符号不同而获得等式(11i)。如上所述，变换等式(11d)获得等式(11j)。
还将与这些等式相同形式的等式应用于变换前的坐标P2～P4的等式和变换后的坐标Q2～Q4的等式，并将其合并成矩阵作为等式(11l)。简单描述该关系的等式是等式(11k)。如果通过该等式获得逆矩阵C，并且将该逆矩阵与R相乘，则可以获得矩阵A。逆矩阵的已知解法包括扫除法(sweeping-out method)。由于矩阵A是重新排列矩阵H的元素的矩阵，因而通过获得矩阵A可以得到矩阵H。
当可以获得矩阵H时，对于构成剪切出的图像的所有像素执行等式(11a)以旋转该图像。然而，单应性变换是非线性变换。因此，如果利用该方法执行旋转，则变换后的坐标和变换前的坐标之间的关系不总是为一对一关系。因此，需要增补变换后的坐标系统的不存在的坐标位置的数据。该方法的例子包括最近邻插值方法(nearest-neighbor interpolation method)和双线性插值方法(bilinear interpolation method)。
图12和13是示出本实施例中执行倾斜校正前后的状态的示意图。将原始图像的各坐标乘以矩阵H以变换成新的坐标系统。
使用倾斜区域检测标记53a～53d的倾斜校正处理(S16)的 细节2
在步骤S16，代替上述单应性变换，可以使用仿射变换。例如，在使用仿射变换校正原稿的倾斜时，存在一种用于围绕区域检测标记53a～53d中的一个点将整个图像旋转θ°的方法。具体地，可以考虑这样一种用于旋转整个图像的方法，在该方法中，以检测标记53b为顶点、由右下处的区域检测标记53d和检测标记53d的理想位置所形成的角用作其旋转角θ。
图14是示出用于计算使用仿射变换的旋转用参数的方法的图。通过等式(10f)可以给出右下处的区域检测标记53d的理想坐标Q4(S4，T4)。对于实际坐标(x，y)和理想坐标(S，T)，等式(14a)成立。在等式(14a)中，根据图像数据中的位置关系，可以分别利用等式(14d)和Eq(14c)给出cosθ和sinθ。在已经获得了cosθ和sinθ之后，可以通过将变换前的区域检测标记53d的坐标P4和变换后的区域检测标记53d的坐标Q4分别代入等式(14e)和等式(14f)，获得x_shift和y_shift。
由于这样可以获得所有参数，因而对于整个图像的坐标执行等式(14a)，以获得各坐标的(S，T)，从而进行旋转。由于仿射变换使用三角函数进行推导，因而变换后坐标的计算结果是实数类型。然而，数字图像数据的坐标是正数类型。因此，对计算的实数的小数部分进行四舍五入，从而使得变换前的坐标和变换后的坐标有时不具有一对一关系。因此，如在单应性变换中一样，需要对不存在的坐标位置的数据进行插值。该方法的例子包括最近邻插值方法和双线性插值方法。
图15A是示出区域检测标记53和手写区域54之间的位置关系的全体视图。图15B是示出图15A中的一个区域检测标记53a和手写区域54之间的位置关系的图。
在步骤S17，在已经完成了倾斜校正之后，以位置(x1+M1，y1+M2)作为起点，剪切出宽度为AREA_W且长度为AREA_L的矩形，其中，通过将图15B中的距离M1和M2与区域检测标记53a的坐标Q1相加，获得位置(x1+M1，y1+M2)。
图16是示意性示出剪切出的宽度为AREA_W和长度为AREA_L的矩形的图。该图像作为手写区域54中的图像而进行处理。
在步骤S 18，创建掩模数据，该掩模数据用于将通过直至步骤S17为止的过程所获得的手写区域54的图像数据中的图片仅与手写图像55合成。在创建该掩模数据时，使用图片图像的浅色打印部分54a和54b与手写图像55之间的亮度差。
图17A是作为图片图像的一部分的浅色打印图像和手写图像55的亮度直方图。在图4的步骤S3，以低浓度侧低灰度级打印该浅色打印图像。因此，如图17A所示，当将该浅色打印图像扫描成数字数据时，其亮度直方图分布在较高亮度侧。另一方面，估计手写图像55的亮度直方图分布在较低亮度侧。
因此，使用使得亮度不会高于浅色打印图像的最低亮度而确定的阈值对手写区域54的数据进行二值化。具体地，按照如下进行该二值化。首先，在RAM 42中准备具有与手写区域54的长度和宽度相同的长度和宽度的二值化图像数据。该配置的元素仅有值1或0，并且所有初始值均为0。对于手写区域54的像素，根据等式(18)得到亮度值，即Gray；如果该值大于或等于阈值，则改变掩模数据中相同位置处的元素位。对于手写区域54中的所有像素进行该处理。将这样获得的二值化图像数据存储在RAM 42中，并且使用该图像数据作为掩模数据。图17B是根据剪切出的区域所创建的掩模数据的示意图，其中，该剪切出的区域中以“谢谢你”描述的部分是设置了掩模位的部分。
图18是示出本实施例中的用于根据R、G和B的值获得值Gray的等式(18)的图。
判断掩模数据所使用的等式的例子可以是如等式(18)一样使用亮度值的等式以及使用颜色浓度的等式和使用一些滤波器的方法。而且，还可以采用合成这些结果的方法。
在步骤S19，使用如上所述获得的掩模数据、手写区域54中的图像数据和图3A所示的图片图像，形成合成图像。首先，对于被变换成与手写区域54相同的图像大小并被存储在RAM中的期望图像数据的各像素，参考与像素相对应的位置中存在的掩模数据的元素。当掩模数据的元素为0时，对于图片图像的数据不进行处理。如果掩模数据的元素为1，则利用图像数据的相同位置处的手写区域54的像素，覆盖与掩模数据相同位置处的图片图像数据的像素。
图19是示出在本实施例中执行倾斜校正之后的合成结果的图。如上所述，本实施例的图像处理允许以相同方向合成从以倾斜状态所扫描的手写合成薄片SH1上的图像所获得的手写图像55和图片图像的部分54a和54b。此外，不旋转整个所扫描的薄片，而是旋转包括区域检测标记的部分区域，这与旋转整个图像时相比，具有降低处理负荷的优点。
接着，将说明不同于上述实施例的另一实施例。
在上述实施例所示的手写合成薄片SH1中，手写合成薄片识别标记51仅具有一维信息。因此，如果手写合成薄片SH1相对于原稿台从原始方向开始旋转了180°，则不能判断是用户错误地放置了手写合成薄片SH1还是放置了具有相反配置的手写合成薄片识别标记51的薄片。也就是说，存在这样的问题：不能判断应该以什么方向合成所提取出的手写图像。
因此，将说明向手写合成薄片SH1添加了相对位置标记62的实施例。这甚至允许识别以不同于适当位置的方向被放置在原稿台上的手写合成薄片，并且允许判断手写图像的合成方向。由于设备结构和用于打印手写合成薄片的方法与使用手写合成薄片SH1的上述实施例的相同，因此将省略对其的详细说明。
图20是示出手写合成薄片SH2的图。
手写合成薄片SH2是将相对位置标记62添加到手写合成薄片SH1的薄片。相对位置标记62是用于在手写合成薄片SH2中得知区域检测标记53的相对位置的标记。
图21是示出用于使用相对位置标记62旋转手写区域54的操作的流程图。CPU 43用作手写合成薄片扫描单元。在步骤S21，CPU 43使用户接口31为用户进行用以读取手写合成薄片SH2的显示。用户识别该显示，并且利用扫描器10扫描完成了手写的手写合成薄片SH2。
图22A是示出当相对于抵接位置以不同于适当方向的方向扫描手写合成薄片SH2时的图像的图。图23是示出在通过单应性变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下的变换前后的坐标之间的位置关系的图。
在步骤S22，CPU 43从由此获得的手写合成薄片SH2的图像数据中检测具有与相对位置标记62相同的模式的图像。对于该检测，使用现有的模式匹配技术。在步骤S23，CPU 43根据相对位置标记62的位置，相对地估计存在手写合成薄片识别标记51的位置，并且分析所估计出的区域。手写合成薄片识别标记51具有表示在创建手写合成薄片SH2时使用存储在存储介质33中的图像中的哪一图像的信息。基于该信息，指定要合成的图片图像，并且将存在于存储介质33中的图片图像的图像文件存储在RAM 42中。此时，将图片图像的大小重新调整成具有与手写区域54的图像数据相同数量的垂直和水平像素的大小。根据执行扫描时的分辨率和存储在ROM 41中的手写区域54的物理大小，得到手写区域54的图像的大小。
此外，根据相对位置标记62的位置，估计存在薄片选择区域52的区域。使用OCR等技术，对于所估计出的区域判断薄片选择区域52中是什么，并且设置所判断出的薄片选择区域52的打印条件。
在步骤S24，CPU 43基于相对位置标记62的位置和方向，粗略估计可能包括所有区域检测标记53a～53d的部分。
图22B和22C是示出用于剪切出被估计为包括所有区域检测标记53a～53d的区域的处理的图。对于所估计出的区域，CPU43剪切出宽度为W 1[像素]和长度为L1[像素]的区域。然后，通过CPU 43剪切出图22C所示的图像。
在步骤S25，CPU 43根据剪切出的数据检测所有区域检测标记53a～53d的确切位置坐标。该过程与上述步骤S 15的相同。在步骤S26，旋转剪切出的图像。对于单应性变换，为设置变换前的区域检测标记53的坐标P1～P4和变换后的区域检测标记53的坐标Q1～Q4的方式，设置如下规则。
首先，在变换之前，假定相对于相对位置标记62，位于图22A的区域检测标记53a处的区域检测标记的坐标为P1。假定最接近坐标P1的区域检测标记53的坐标为坐标P2。假定第二接近坐标P1的区域检测标记53的坐标为P3。假定最远的区域检测标记53的坐标为P4。
接着，在变换之后，任何剪切出的图像作为具有长边(Width)和短边(Length)的图像而进行处理。在剪切出的图像中，假定最接近左上角的区域检测标记53的坐标为基准坐标Q1。假定如下的点为坐标Q2：该点在通过基准坐标Q1与该图像的短边平行延长的直线上并且与基准坐标Q1的距离等于P1和P2之间的距离。
假定如下的点为坐标Q3：该点在通过基准坐标Q1与该图像的长边平行的直线上并且与基准坐标Q1的距离等于P1和P3之间的距离。假定通过坐标Q2且平行于长边延长的线和通过坐标Q3且平行于短边延长的线的交点为坐标Q4。根据上述规则获得变换后的区域检测标记53a～53d的坐标。接着，使用等式(10a)和等式(10b)计算边的长度和宽度。
图24是示出变换前后的坐标之间的关系的图。通过等式(24a)～等式(24d)给出变换之后的区域检测标记53a～53d的坐标。将结果代入等式(11e)，并且获得矩阵A的元素，从而得到矩阵H。可以通过将矩阵C的逆矩阵与矩阵R相乘的等式(11m)给出矩阵A。这里所获得的矩阵H是用于将图22B中的图像数据旋转180°、并且用于变换手写区域54的坐标以使其与该图像数据平行的矩阵。将所获得的矩阵H代入图22B中的像素的坐标，并且计算等式(11a)，从而获得变换后的坐标。
在步骤S26，可以使用仿射变换旋转图像。首先，判断使用区域检测标记53a～53d中的哪一个作为旋转的中心。在该例子中，围绕最接近相对位置标记62的区域检测标记旋转该图像。因此，对于图22C所示的剪切出的图像，区域检测标记53b是旋转中心。接着，确定旋转角。在图22A所示的例子中，使用由通过区域检测标记53b和区域检测标记53d的直线以及该图像的长边所形成的角作为旋转角。
图25是示出在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下的变换前后的坐标之间的位置关系的图。图26是示出用于在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下计算参数的方法的图。
接着，使用等式(26a)和等式(26b)获得sinθ和cosθ。此外，判断要代入等式(14a)的值是正还是负。根据相对位置标记62的位置和方向，判断手写合成薄片SH2相对于原稿台的抵接位置如何旋转。
图27是示出在通过仿射变换旋转地校正图像的情况下的变换前后以任意方向放置的手写合成薄片SH2上的图像的位置关系的图。
在图22A～22B所示的例子中，相对位置标记62位于图像数据的右端，并且箭头指向下，这示出了图27所示的旋转之前的状态。也就是说，在这种情况下，顺时针将图像旋转(θ+180)°使得图像处于适当方向。
这里，三角函数具有关系sin(θ+180°)＝-sinθ、cos(θ+180°)＝-cosθ。这表示应该将通过等式(26a)和等式(26b)给出的sinθ和cosθ的负数代入等式(14a)，以顺时针将该图像旋转(θ+180)°。
如图27所示，通过代入所获得的坐标为通过围绕区域检测标记53b旋转图像一次所获得的坐标。因此，还需要平移该坐标。为了平移该坐标，有必要获得等式(14a)中的x_shift和y_shift。为此，首先，获得区域检测标记53d的理想坐标。该情况下的区域检测标记53d的理想坐标为从区域检测标记53b开始水平移动距离CROSS_W的位置。
图28是示出在通过仿射变换旋转地校正以任意方向放置的手写合成薄片SH2上的图像的情况下计算坐标位置所使用的等式的图。因此，图28所示的等式成立。将等式(28a)和等式(28b)代入等式(26c)和等式(26d)给出了平移量x_shift和y_shift。
这样，如果可以得知区域检测标记53之间的位置关系，并且可以得知由区域检测标记53a～53d所形成的矩形的一个边与图像数据的一个边所形成的角，则通过旋转和平移来旋转该图像数据。
在步骤S27，在完成旋转之后，以通过将距离M1和M2与图15A和15B中的区域检测标记53a的坐标Q1相加所获得的位置(x1+M1，y1+M2)作为起点，剪切出宽度为AREA_W和长度为AREA_L的矩形。图16A和16B示出其示意图。该图像作为手写区域54中的图像而进行处理。在步骤S28，使用与步骤S18中相同的方法创建掩模数据。在步骤S29，通过与步骤S19中相同的方法合成图像。掩模数据是图17B所示的为了在手写图像55b与图片图像的部分54a和54b之间进行区分而创建的掩模数据。
利用上述结构，即使用户以任意方向将手写合成薄片SH2放置在原稿台上，也可以以相同方向合成手写图像55和期望图像文件。
通过向手写合成薄片SH1添加相对位置标记62，判断放置在原稿台上的手写合成薄片SH2的方向。代替添加相对位置标记62，通过使用QR代码等的允许判断薄片相对于原稿台的方向的标记作为手写合成薄片识别标记51，可以实现本实施例中使用手写合成薄片SH2所示的方法。还可以根据相对位置标记62和手写合成薄片识别标记51之间的位置关系，判断薄片相对于原稿台的方向。
可以使用相对位置标记62来创建使用手写合成薄片SH 1的实施例中的倾斜校正用参数，并且还可以使用相对位置标记62来检测使用手写合成薄片SH2的实施例中的相对位置。这样，可以分开设置区域检测用标记和倾斜检测用标记。
接着，将示出通过打印不同类型的区域检测标记来检测手写区域的旋转的另一实施例。图29是示出手写合成薄片SH3的图。
本实施例使用手写合成薄片SH3。手写合成薄片SH3是代替手写合成薄片SH1上的区域检测标记53a而设置区域检测标记64a的薄片。区域检测标记64a的形状不同于其它区域检测标记53b～53d的形状。由于设备结构和用于打印手写合成薄片的方法与使用手写合成薄片SH1的上述实施例的相同，因此省略对其的详细说明。
本实施例的操作基本上与使用手写合成薄片SH2的上述实施例中的相同。因此，分析流程图类似于图21所示的流程图。然而，在图21的步骤S 22，代替检测相对位置标记62的位置而检测区域检测标记64a。该检测中所使用的匹配模式(模式匹配)不同于其它区域检测标记53b～53d的匹配模式。此外，在步骤S24，根据区域检测标记64a的位置估计剪切位置。
在步骤S25，已检测到区域检测标记64a，因此，检测其余三个区域检测标记53b～53d。在步骤S26，当确定旋转用参数时，设置旋转参数，以使得在旋转之后具有不同形状的区域检测标记64a位于左上处。利用上述手写合成薄片SH3，在减少要在手写合成薄片SH3上打印的项的同时，还可以确定薄片相对于原稿台的方向。
接着，将说明另一实施例。在本实施例中，预先执行图6的流程图的步骤S18中的掩模数据的创建，并且仅旋转存在掩模数据的区域。
图30是本实施例的说明图，其示意性示出预先创建提取用掩模数据然后旋转图像的例子。如图12所示，要旋转的图像数据量小于在创建掩模数据之前执行图像旋转的情况下的图像数据量。这允许更快速地执行旋转处理。
图31是示出用于在创建提取用掩模数据之后旋转地校正图像的操作的流程图。由于设备结构、用于打印手写合成薄片的方法和从步骤S41～步骤S45的处理与使用手写合成薄片SH2的上述实施例的相同，因此省略对其的详细说明。
在步骤S46，将使用等式(18)剪切出的图像设置成值Gray。判断该值是否超过阈值。将值Gray超过阈值的像素的坐标和颜色信息(三种RGB颜色的亮度值)存储在RAM 42中的另一区域中。在本实施例中，使用列出该坐标和颜色信息的表作为掩模数据。在步骤S47，根据区域检测标记53的位置计算图像的旋转参数，并且旋转该图像数据。由于旋转参数的计算与使用手写合成薄片SH2的上述实施例中的相同，因此省略对其的详细说明。在步骤S48，将存储在掩模数据表中的坐标变换成手写区域54的坐标。参考图15A和15B，可以基于区域检测标记53的坐标以及区域检测标记53和手写区域54的位置关系来变换坐标。在步骤S49，合成手写图像55和图片图像。由于合成处理与使用手写合成薄片SH2的实施例中的相同，因此省略对其的详细说明。
根据图31所示的手写合成用流程图，如果手写图像55的图像数据量小，则可以减少进行旋转处理的像素的数量。这允许以较短处理时间旋转手写图像55。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (8)

1.一种图像形成设备，包括：
打印机，用于在记录薄片上打印图像；
扫描器，用于扫描放置在原稿台上的所述记录薄片；
第一打印控制单元，用于使所述打印机将包括用户用以进行写入的写入区域和表示所述写入区域的标记的第一图像打印在所述记录薄片上；
剪切单元，用于获取通过利用所述扫描器扫描所述写入区域被写入的所述记录薄片而获得的第二图像，并基于与所述标记相对应的标记图像在所述第二图像中的位置，剪切出所述第二图像中的包括所述写入区域和所述标记图像的图像；
检测单元，用于基于所述标记图像，检测放置在所述原稿台上并被扫描的所述记录薄片相对于所述原稿台的倾斜；
提取单元，用于获取由所述剪切单元剪切出的并根据由所述检测单元所检测到的倾斜旋转得到的剪切图像，并从所述剪切图像中提取与写入所述写入区域中的内容相对应的图像；以及
第二打印控制单元，用于使所述打印机打印将由所述提取单元提取出的提取图像叠加在背景图像上的图像，所述提取图像是根据由所述检测单元所检测到的所述记录薄片的方向旋转得到的图像。
2.根据权利要求1所述的图像形成设备，其特征在于，还包括：
第二剪切单元，用于获取由所述剪切单元剪切出的并根据由所述检测单元所检测到的倾斜旋转得到的剪切图像，并从所述剪切图像中进一步剪切出与所述写入区域相对应的图像；
其中，所述提取单元从由所述第二剪切单元剪切出的图像中提取与写入所述写入区域中的内容相对应的图像。
3.根据权利要求1所述的图像形成设备，其特征在于，
所述第一图像包括用于表示所述记录薄片的方向的第二标记；以及
所述检测单元基于包括在所述第二图像中的与所述第二标记相对应的第二标记图像，检测所述记录薄片相对于所述原稿台的方向。
4.根据权利要求1所述的图像形成设备，其特征在于，
所述第一图像在所述写入区域的附近包括多个标记，其中，所述多个标记中的至少一个不同于其它标记；以及
所述检测单元基于与所述多个标记相对应的多个标记图像在所述第二图像中的位置，检测所述记录薄片相对于所述原稿台的方向，其中，所述多个标记图像包括在所述第二图像中。
5.根据权利要求1所述的图像形成设备，其特征在于，还包括：
连接单元，用于将外部存储介质连接到所述图像形成设备；
其中，使用从与所述连接单元连接的所述外部存储介质所读取的图像作为背景图像。
6.根据权利要求5所述的图像形成设备，其特征在于，还包括：
变换单元，用于将从与所述连接单元连接的所述外部存储介质所读取的图像变换成表示所读取的图像且具有比所读取的图像的亮度高的亮度的图像，其中，
所述第一打印控制单元使得在所述写入区域中打印由所述变换单元获得的图像；以及
所述提取单元提取由所述剪切单元剪切出的图像中的、具有低于预定阈值的亮度的区域中的图像。
7.根据权利要求1所述的图像形成设备，其特征在于，所述图像形成设备还包括：
第二旋转单元，用于基于由所述检测单元所检测到的倾斜旋转由所述提取单元提取出的图像；
其中，所述第二打印控制单元使所述打印机打印将由所述第二旋转单元旋转得到的图像叠加在背景图像上的图像。
8.一种图像形成设备的控制方法，所述图像形成设备包括用于在记录薄片上打印图像的打印机和用于扫描放置在原稿台上的所述记录薄片的扫描器，所述控制方法包括以下步骤：
第一打印控制步骤，用于使所述打印机将包括用户用以进行写入的写入区域和表示所述写入区域的标记的第一图像打印在所述记录薄片上；
剪切步骤，用于获取通过利用所述扫描器扫描所述写入区域被写入的所述记录薄片而获得的第二图像，并基于与所述标记相对应的标记图像在所述第二图像中的位置，剪切出所述第二图像中的包括所述写入区域和所述标记图像的图像；
检测步骤，用于基于所述标记图像，检测放置在所述原稿台上并被扫描的所述记录薄片相对于所述原稿台的倾斜；
提取步骤，用于获取在所述剪切步骤中剪切出的并根据在所述检测步骤中所检测到的倾斜旋转得到的剪切图像，并从所述剪切图像中提取与写入所述写入区域中的内容相对应的图像；以及
第二打印控制步骤，用于使所述打印机打印将在所述提取步骤中提取出的提取图像叠加在背景图像上的图像，所述提取图像是根据在所述检测步骤中所检测到的所述记录薄片的方向旋转得到的图像。
CN2009101472850A 2008-06-20 2009-06-19 图像形成设备及其控制方法 Expired - Fee Related CN101610334B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008162472A JP5060404B2 (ja) 2008-06-20 2008-06-20 画像処理装置、画像処理方法、およびプログラム
JP2008162472 2008-06-20
JP2008-162472 2008-06-20

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201210028979.4A Division CN102611817B (zh) 2008-06-20 2009-06-19 图像处理设备和图像处理方法

Publications (2)

Publication Number Publication Date
CN101610334A CN101610334A (zh) 2009-12-23
CN101610334B true CN101610334B (zh) 2012-03-28

Family

ID=41430905

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201210028979.4A Expired - Fee Related CN102611817B (zh) 2008-06-20 2009-06-19 图像处理设备和图像处理方法
CN2009101472850A Expired - Fee Related CN101610334B (zh) 2008-06-20 2009-06-19 图像形成设备及其控制方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201210028979.4A Expired - Fee Related CN102611817B (zh) 2008-06-20 2009-06-19 图像处理设备和图像处理方法

Country Status (3)

Country Link
US (1) US9204009B2 (zh)
JP (1) JP5060404B2 (zh)
CN (2) CN102611817B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110199624A1 (en) * 2010-02-12 2011-08-18 Kabushiki Kaisha Toshiba Method and apparatus for processing image
JP5618634B2 (ja) * 2010-05-31 2014-11-05 キヤノン株式会社 情報処理装置およびその動作方法
US8531482B2 (en) * 2010-06-25 2013-09-10 Eastman Kodak Company Use of handwritten notations from photographs
JP2014086836A (ja) * 2012-10-23 2014-05-12 Canon Inc 画像処理装置及びその制御方法、並びにプログラム
US20140136962A1 (en) * 2012-11-12 2014-05-15 Vistaprint Technologies Limited Method and System for Detecting and Removing Printer Control Marks from Rasterized Image for Placement in Image Container of Document Template
JP5942846B2 (ja) * 2012-12-27 2016-06-29 ブラザー工業株式会社 画像形成装置および画像形成プログラム
US9071785B2 (en) * 2013-02-15 2015-06-30 Gradeable, Inc. Adjusting perspective distortion of an image
JP6150652B2 (ja) * 2013-07-29 2017-06-21 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム並びに記録媒体
JP6376743B2 (ja) * 2013-10-18 2018-08-22 キヤノン株式会社 撮像装置、撮像システム、撮像装置の制御方法、撮像システムの制御方法、及びプログラム
TWI574542B (zh) * 2014-12-10 2017-03-11 圓展科技股份有限公司 視訊會議裝置及其控制方法
CN104935828A (zh) * 2015-05-20 2015-09-23 镇江东软信息技术有限公司 一种图像处理系统
US20170372414A1 (en) * 2016-06-22 2017-12-28 Ricoh Company, Ltd. Information processing system and information processing apparatus
US10828917B2 (en) * 2016-07-21 2020-11-10 Esko-Graphics Imaging Gmbh System and process for mounting a printing plate on a carrier
WO2019038400A1 (en) 2017-08-24 2019-02-28 Esko-Graphics Imaging Gmbh SYSTEM AND METHOD FOR MOUNTING PRINTING PLATE SEGMENT
JP7482649B2 (ja) * 2020-02-28 2024-05-14 キヤノン株式会社 撮像装置、デバイス、制御方法、及びプログラム
JP2022007247A (ja) * 2020-06-26 2022-01-13 東芝テック株式会社 画像処理装置及び画像形成装置
JP2022159844A (ja) * 2021-04-05 2022-10-18 キヤノン株式会社 画像形成装置、その制御方法、及びプログラム
JP2023130616A (ja) * 2022-03-08 2023-09-21 東芝テック株式会社 画像処理装置及び画像形成装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH099014A (ja) * 1995-06-22 1997-01-10 Casio Comput Co Ltd エリアイメージセンサ付き画像処理装置
JP2000118072A (ja) * 1998-10-12 2000-04-25 Sony Corp 印画方法及びプリンタ装置
JP2003080789A (ja) 2001-09-12 2003-03-19 Seiko Epson Corp 画像出力装置
JP2004338367A (ja) 2003-04-25 2004-12-02 Konica Minolta Photo Imaging Inc 画像形成装置における出力補正方法及び画像形成装置
US7525675B2 (en) * 2004-02-06 2009-04-28 Hewlett-Packard Development Company, L.P Image printing via a proof sheet
EP1843275A3 (en) 2004-08-10 2007-12-19 Océ-Technologies B.V. Outlier detection during scanning
JP4581902B2 (ja) * 2005-08-12 2010-11-17 セイコーエプソン株式会社 合成画像形成装置
JP4661446B2 (ja) 2005-08-12 2011-03-30 セイコーエプソン株式会社 合成画像形成装置

Also Published As

Publication number Publication date
US9204009B2 (en) 2015-12-01
US20090316163A1 (en) 2009-12-24
CN102611817A (zh) 2012-07-25
CN101610334A (zh) 2009-12-23
CN102611817B (zh) 2016-06-29
JP5060404B2 (ja) 2012-10-31
JP2010004405A (ja) 2010-01-07

Similar Documents

Publication Publication Date Title
CN101610334B (zh) 图像形成设备及其控制方法
US6641053B1 (en) Foreground/background document processing with dataglyphs
US8498024B2 (en) Image processing apparatus, method, and storage medium for information processing according to information on a scanned sheet
US7880921B2 (en) Method and apparatus to digitally whiteout mistakes on a printed form
EP1758045B1 (en) Method for forming 2-dimensional code by laser marking and laser marking device
US9781294B1 (en) System and method for rendering micro gloss effect image patterns on a recording medium
US9614995B1 (en) System and method for generating vector based correlation marks and vector based gloss effect image patterns for rendering on a recording medium
US8675260B2 (en) Image processing method and apparatus, and document management server, performing character recognition on a difference image
JP5861503B2 (ja) 画像検査装置及び方法
US9661186B1 (en) System and method for rendering gloss effect image patterns on a recording medium
JP2007241356A (ja) 画像処理装置および画像処理プログラム
US20060215232A1 (en) Method and apparatus for processing selected images on image reproduction machines
JP5182182B2 (ja) 色補正方法及び撮像システム
CN102148914B (zh) 图像处理装置、方法
US7889397B2 (en) Image processing apparatus and control method thereof, and reading method in image reading system
US20180213112A1 (en) Document printing using hardware-independent pattern ink cells
JP2000022869A (ja) 非接触型画像読取装置
JP2019032645A (ja) 書類管理装置、書類管理方法、および、書類管理装置用のプログラム
TW390072B (en) Method for obtaining relative and absolute errors in longitudinal and latitudinal amplification ratio from a scanner
JP2019168767A (ja) 隠蔽画像又は隠蔽情報を認証する認証システム、認証方法及び認証用プログラム
JP2010041673A (ja) 画像処理システム、画像処理装置及び画像制御方法
JP2013077934A (ja) 画像処理装置
CN101140621A (zh) 图文影像处理装置及其影像处理方法
JP2004318896A (ja) 非接触型画像読取装置
JPH07160814A (ja) 光学式文字認識方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120328

Termination date: 20200619

CF01 Termination of patent right due to non-payment of annual fee