CN101834968A - 图像处理设备及图像处理方法 - Google Patents

图像处理设备及图像处理方法 Download PDF

Info

Publication number
CN101834968A
CN101834968A CN201010133403A CN201010133403A CN101834968A CN 101834968 A CN101834968 A CN 101834968A CN 201010133403 A CN201010133403 A CN 201010133403A CN 201010133403 A CN201010133403 A CN 201010133403A CN 101834968 A CN101834968 A CN 101834968A
Authority
CN
China
Prior art keywords
processing
color
cpu
zone
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201010133403A
Other languages
English (en)
Other versions
CN101834968B (zh
Inventor
橿渕洋一
伊藤直树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101834968A publication Critical patent/CN101834968A/zh
Application granted granted Critical
Publication of CN101834968B publication Critical patent/CN101834968B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/1444Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields
    • G06V30/1448Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields based on markings or identifiers characterising the document or the area
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/18Extraction of features or characteristics of the image
    • G06V30/18105Extraction of features or characteristics of the image related to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3245Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of image modifying data, e.g. handwritten addenda, highlights or augmented reality information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3271Printing or stamping

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Facsimiles In General (AREA)
  • Character Input (AREA)

Abstract

本发明涉及一种图像处理设备及图像处理方法。该图像处理设备包括:读取单元,其被构造为读取图像数据;识别单元,其被构造为识别在由所述读取单元读取的所述图像数据中由手写部分圈起的区域和与所述手写部分的颜色相关联的处理;以及显示单元,其被构造为通过将所述识别单元的识别结果和所述图像数据中的待处理区域叠加来显示预览,并且在所显示的预览上显示所识别的处理的内容,以使得用户识别由所述手写部分圈起的区域和与所述区域相关联的处理的内容。

Description

图像处理设备及图像处理方法
技术领域
本发明涉及用于识别在介质上写入的处理指令的图像处理设备及图像处理方法。
背景技术
传统上,存在一种技术,其中,计算机分析在由扫描器读取的纸张上的图像,并识别在纸上写入的文本。例如,这样的技术可以用于容易地提取在多个表单中写入的金额和日期,并向诸如合计数据的处理输入所提取的数据。但是,这样一来必须指示计算机在片材中的何处写入了各种类型的数据,以自动执行这样的处理。
日本特开2008-145611号公报讨论了一种技术,其中,通过一系列读取处理来读取要处理的答案片材(answer sheet)和处理指令片材。处理指令片材描述了处理指令信息,用于指示要处理哪些列和要对在答案片材表单的列中写入的内容执行的处理。然后,根据处理指令片材的读取数据来检测和分析处理指令信息。结果,可以识别要在所述表单上处理的写入区域和每个区域的处理内容。
但是,根据上述方法,用户不能在分析要处理的原稿之前,确认设备是否正确识别了在处理指令片材中描述的待处理区域和该区域的处理内容。
发明内容
根据本发明的一个方面,提供一种图像处理设备,该图像处理设备包括:读取单元,其被构造为读取图像数据;识别单元,其被构造为识别在由所述读取单元读取的图像数据中由手写部分圈起的区域和与所述手写部分的颜色相关联的处理;以及显示单元,其被构造为通过将所述识别单元的识别结果和所述图像数据中的待处理区域叠加来显示预览,并且在所显示的预览上显示所识别的处理的内容,以使得用户识别由所述手写部分圈起的区域和与所述区域相关联的处理的内容。
根据本发明的示例性实施例,用户可以预先确认是否将用户指示的处理方法应用于用户通过用手使用彩色笔在所述处理指令片材上指定的处理区域。而且,可视地而不是使用坐标或者编码信息来显示处理区域和处理方法,使得用户能够容易且正确地了解识别的结果。
通过下面参照附图对示例性实施例的详细说明,本发明的其他特征和方面将变得清楚。
附图说明
并入到说明书中并构成说明书的一部分的附图例示了本发明的示例性实施例、特征和方面,并且与文字说明一起用于解释本发明的原理。
图1是例示根据本发明的示例性实施例的图像处理设备的配置的框图。
图2A、图2B和图2C例示了根据本发明的示例性实施例的要处理的原稿的示例。
图3是例示根据本发明的示例性实施例的用于生成扫描票据的处理的流程图。
图4是例示根据本发明的示例性实施例的用于使用扫描票据来检查原稿的处理的流程图。
图5例示了处理指令片材的放大部分。
图6例示了快速响应(QR)代码的示例。
图7是例示缩略图生成处理的流程图。
图8例示了缩略图的示例。
图9例示了扫描票据的示例。
图10是例示指令颜色改变处理的流程图。
图11A和图11B例示了指令颜色改变表单的示例。
图12是例示指令颜色改变处理的流程图。
图13例示了缩略图的示例。
图14是例示指令颜色改变处理的流程图。
图15例示了缩略图的示例。
图16例示了扫描票据的示例。
具体实施方式
下面参照附图详细说明本发明的各个示例性实施例、特征和方面。
图1是例示根据本发明的第一示例性实施例的图像处理设备的配置的框图。参见图1,图像处理设备100是多功能外围设备,其包括各种功能,例如复印功能和扫描器功能。也可以通过彼此合作的多个设备来实现所述功能。
中央处理单元(CPU)11通过将存储在只读存储器(ROM)19中的程序载入到随机存取存储器(RAM)18中来控制图像处理设备100的整体操作。而且,CPU 11经由总线12与图像处理设备100中的各个部件通信。操作单元16包括用户用来给出指令的多个按键和用于显示要通知给用户的各种类型的信息的显示单元。扫描器15将用户放置在原稿台上的原稿上的图像读取为彩色图像,并且在硬盘驱动器(HDD)13或者RAM 18中存储所获取的电子数据(图像数据)。HDD 13包括硬盘,并且存储各种输入信息。扫描器15还包括原稿给送装置,使得放置在原稿给送装置上的多个原稿可以依次被给送到原稿台,并且被扫描器15读取。打印机14在记录片材上打印基于输入图像数据的图像。网络接口(I/F)17将图像处理设备100连接到网络20,并且控制从网络上的外部装置接收数据和向网络上的外部装置发送数据。
根据本示例性实施例,经由扫描器15来输入要在执行下述处理中使用的图像数据。但是,可以经由网络接口17输入从外部装置发送的原稿的图像数据,并且类似地对其进行处理。而且,连接到扫描器和打印机的个人计算机(PC)可以类似地执行处理。在这种情况下,在本示例性实施例中使用的整个程序或者所述程序的一部分可以经由网络或者通过存储在诸如光盘(CD)-ROM的记录介质中而提供给PC。
下面将说明要在本示例性实施例中使用的原稿的示例。图2A例示了要在本示例性实施例中使用的原稿的形式的示例。参见图2A,该原稿是还没有被用户填写(即在被添加下述的处理指令信息之前)的发票。该发票包括下面的信息:开票据的公司的名称、开票据的公司的负责人、主题、总额、项目、数量、单位、单价、支付金额、银行存款信息、小计和包括消费税的税金。发票还包括备注栏和出票人盖章的位置。当正式开具发票时,用户在各列中写入信息,以指示主题、项目和数量、单位、单价和支付额,并盖章。
根据本示例性实施例,执行处理来检查在发票中是否向用户指定的列添加了信息,而将其他列留空。
图2B例示了用户在图2A例示的原稿中包括的项目中任意标注了要检查的区域的示例。用户使用彩笔来标注所述区域。图2B中例示的原稿由此成为处理指令片材。
要检查所建立的发票的用户建立处理指令片材。用户在与要检查的发票类似的格式的片材中写入下述的处理指令信息。换句话说,通过用户在图2A中例示的发票中写入处理指令信息来建立处理指令片材。根据本示例性实施例,用户使用彩笔来通过使用矩形圈起要处理的区域来指定该区域。
下面将说明要在发票(即原稿)中写入的处理指令信息(即附加信息)。参见图2B,用户可以使用蓝色笔来标注区域31,使用绿色笔来标注区域32,并且使用红色笔来标注区域33。也可以使用除了上述之外的颜色,并且颜色的数量不限于三种,这可以根据要检查的内容增加或者减少。而且,可以使用除了彩笔之外的手段,只要可以在原稿上写入彩色标记即可。
用户经由操作单元16在RAM 18中预先登记关于要使用的处理指令信息的颜色的信息和彼此相关联的处理内容。更具体地说,用户在RAM 18中登记使用蓝色笔来检查列是否为空白,使用绿色笔来检查是否输入了信息,并且使用红色笔来检查是否有盖章或者签名。然后CPU 11确定在RAM18中登记的每种颜色的颜色分量(例如色调),并且在其中存储所确定的内容。也可以通过扫描器15读取在表单中写入的添加信息来执行颜色登记。而且,图像处理设备100可以替代用户来预先登记颜色。在要根据预先登记的内容来执行处理的情况下,用户根据所登记的颜色和处理内容来将处理指令信息添加到原稿。
如上所述,根据要使用的处理指令信息的登记的颜色分量和对应的处理内容来建立处理指令片材。因此使用处理指令片材来提取处理指令信息,并且根据所提取的结果来识别处理内容。然后图像处理设备100检查特定区域是否包含信息、是否为空白或者是否被盖章。
图2C例示了根据本示例性实施例的要检查的原稿的示例。参见图2C,要检查的原稿具有与在图2A和图2B中例示的原稿类似的格式。根据本示例性实施例,提取如图2B中例示的添加的处理指令信息。然后,如果区域41不包括内容,即区域41为空白、区域42包括内容并且区域43被盖章,则使用所提取的结果确定原稿是正常的。因为图2C例示了满足用于确定原稿正常的所有条件的示例,因此原稿的检查结果为正常。另一方面,如果即使一个区域不满足确定原稿是正常的条件,则原稿的检查结果为不正常。要检查的内容和区域不限于上述内容和区域,并且可以发出指令来检查其他内容和区域。
下面将说明一种用于根据在图2B中例示的处理指令片材来建立扫描票据以检查在原稿中说明的内容的处理。图像处理设备100识别在图2B中例示的指令的内容,并且将用于检查诸如在图2C中例示的要检查的原稿的方法转换为可以识别的形式(例如QR代码),即扫描票据。该扫描票据包括从在图2B例示的原稿识别的指令的内容和这种指令内容要被应用到的区域的位置信息。当要检查原稿时,扫描器15读取扫描票据,然后使得CPU 11识别处理内容。
下面详细说明根据本示例性实施例的扫描票据建立处理。图3是例示根据本示例性实施例的扫描票据建立处理的流程图。而且,图5例示了处理指令区域31的放大版本,并且图6例示了用来对处理指令信息进行编码的QR代码的示例。
图3的流程图例示了由CPU 11执行的将存储在ROM 19中的程序载入到RAM 18中并执行的处理的流程。
当用户经由操作单元16指示图像处理设备100来建立扫描票据时,处理开始。在步骤S501,CPU 11使得操作单元16显示处理指令信息的指令颜色(以下称为指令颜色)和处理内容的组合。例如,操作单元16显示“如果在由红色圈起的区域中有盖章或者签名则OK”、“如果由蓝色圈起的区域为空白则OK”或者“如果在由绿色圈起的区域中有写入则OK”。在步骤S502,CPU 11还使得操作单元16向用户显示关于在步骤S501中显示的指令颜色和处理内容的组合是否正确的询问。
如果用户经由操作单元16不同意步骤S502的询问(步骤S502中的“否”),则处理进行到步骤S505。在步骤S505,CPU 11使得操作单元16显示将改变指令颜色和处理内容的组合的消息。更具体地说,操作单元16可以显示关于要改变成什么颜色的询问,并且显示新的颜色来取代指令颜色,或者用户可以经由操作单元16来指定任意的颜色。而且,可以仅仅要求用户改变颜色和处理内容的组合,而不增加新的颜色。在这种情况下,因为不能使用同一颜色来指示不同的处理内容,因此CPU 11进行控制使得处理内容与一种颜色配对。在步骤S505中改变了指令颜色或者处理内容或者指令颜色和处理内容两者时,CPU 11使得操作单元16像在步骤S501中那样显示指令颜色和处理内容的组合。结果,用户可以确认已经在步骤S505中执行了改变处理。如果之后用户经由操作单元16同意步骤S502的询问(步骤S502中的“是”),则CPU 11确定并且在RAM 18中登记要使用的处理指令信息的指令颜色和对应的处理内容。
在步骤S502的确定处理中,使得用户可视地确认原稿的内容(即在原稿中包含的颜色)。如果之后用户确定指令颜色的颜色分量和在原稿中包含的颜色分量类似,则两颜色分量被区分开以变得彼此不同。因此可以防止在提取处理指令信息中的错误。
而且,如果在步骤S502中确定指令颜色的颜色分量和在原稿中包含的颜色分量类似,则使得操作单元16显示敦促用户放置原稿的消息,如下所述。如果之后确定用户已经放置了原稿,则可以以单色来复制原稿。结果,可以防止当使用彩色笔来添加处理指令信息时在提取处理指令信息中的错误。
当用户在步骤S502中确定指令颜色和处理内容OK时,CPU 11识别要用作处理指令信息的颜色分量,并且在RAM 18中存储该颜色分量。在步骤S503中,CPU 11使得操作单元16显示关于用户是否仅仅有要检查的原稿(即在图2C中例示)在手的询问。这用于确认是否存在要作为用于建立处理指令片材的模板的原稿(即在图2A或者图2B中例示)。换句话说,如果用户仅仅具有要检查的原稿,则可以如下所述由要检查的原稿建立用于在处理指令信息中写入的原稿。这样的模板不是正式要检查的原稿,而是用户可以在处理指令信息中添加的原稿。如果CPU 11经由操作单元16接收到用户仅仅具有要检查的原稿的响应(即没有要作为模板的原稿)(步骤S503中的“是”),则处理进行到步骤S504。在步骤S504,CPU 11使得操作单元16显示用于敦促用户在扫描器15上放置要检查的原稿的消息。例如,操作单元16显示消息“在扫描器上放置一张要检查的原稿并按下确定按钮”和确定按钮。当用户按下确定按钮时,CPU 11识别出放置了原稿。CPU 11也可以通过使用在原稿台之下的照片判读器(photo-interpreter)或者原稿给送装置的原稿传感器自动识别出原稿被放置在了扫描器15上。
当在步骤S504中确定用户按下了确定按钮时,处理进行到步骤S506。在步骤S506,CPU 11使得扫描器15读取要检查的原稿中的图像。CPU 11还将从扫描器15输入的图像数据转换为单色图像数据,向打印机14输出该单色图像数据,并且使得打印机14在记录片材上输出单色副本。在步骤S506,将原稿转换为单色,并且由打印机14进行打印。但是,本发明不限于上述情况,并且可以将在所读取的原稿中的图像的颜色转换为除了指令颜色之外的颜色,并且由打印机14进行打印。例如,通过将在所读取的原稿中的红色字符转换为蓝色字符来输出该原稿。而且,可以在RAM 18中预先登记要转换的颜色,并且如果在所读取的原稿中有登记的颜色,则可以转换该颜色。
在步骤S507中,CPU 11使得操作单元16显示用于敦促用户在由打印机14在步骤S506中输出的记录片材中写入图2B中例示的处理指令信息的消息。另一方面,如果CPU 11接收用户具有模板原稿的响应(步骤S503中的“否”),则处理进行到步骤S508。在步骤S508,CPU 11使得操作单元16显示关于是否已经在模板中写入了处理指令信息(如图2B中例示)的询问。如果用户经由操作单元16响应未在模板中写入指令信息(步骤S508中的“否”),则处理进行到步骤S509。在步骤S509,CPU 11使得操作单元16显示敦促用户在扫描器15上放置模板的消息。例如,操作单元16显示消息——即“在扫描器上放置模板并且按下确定按钮”和确定按钮。根据本示例性实施例,CPU 11识别出按下确定按钮的用户放置了原稿。但是,CPU 11可以通过使用在原稿台之下的照片判读器或者原稿给送装置的原稿传感器自动识别出原稿被放置在了扫描器15上。
当用户在步骤S509中按下确定按钮时,处理进行到步骤S510。在步骤S510,CPU 11使得扫描器15读取模板原稿中的图像。在步骤S511,CPU 11分析所获取的图像数据,并且执行识别处理,用于确定图像数据是否包括具有与指令颜色相同的颜色分量的颜色。例如,如果CPU 11要分析和识别在所获取的图像数据中是否包含红色,则CPU 11提取红色色调分量。可以使用用于分析和识别色调分量的各种已知方法。而且,可以使用除了色调以外的参数,或者可以使用其他参数的组合。
在步骤S512中,CPU 11确定在步骤S511中分析和识别的颜色中是否有与在RAM 18中登记的指令颜色相同的颜色。在确定处理中颜色不必精确地匹配,并且如果颜色在可允许的范围内,则可以将它们确定为匹配。例如,在以256色阶来表示红色、绿色和蓝色(RGB)值的情况下,如果所识别的颜色和指令颜色的R、G和B值在加减20色阶以内,则作为比较的结果将这些颜色确定为相同。可以使用除了上述方法之外的方法确定所识别的颜色与指令颜色相同。
如果CPU 11确定模板的图像包括与在RAM 18中登记的指令颜色相同的颜色(步骤S512中的“是”),则处理进行到步骤S513。在步骤S513,CPU 11使得操作单元16显示敦促用户在扫描器15上放置模板的消息。例如,操作单元16显示导航消息——即“在扫描器上放置模板并且按下确定按钮”和确定按钮。根据本示例性实施例,CPU 11识别出按下确定按钮的用户放置了原稿。但是,CPU 11可以通过使用在原稿台之下的照片判读器或者原稿给送装置的原稿传感器自动识别出原稿被放置在了扫描器15上。
在用户在步骤S513中按下确定按钮时,处理进行到步骤S514。在步骤S514,CPU 11使得扫描器15读取要检查的原稿中的图像。然后CPU 11将从扫描器15输入的图像数据转换为单色图像数据,向打印机14输出所转换的图像数据,并且使得打印机14在记录片材上输出单色副本。本发明不限于将原稿转换为单色图像以及在打印机14上打印。可以使用如上所述(即像在步骤S506中那样)的其他方法。
在步骤S515,CPU 11使得操作单元16显示敦促用户在由打印机在步骤S514中输出的记录片材上写入如图2B中例示的处理指令信息的消息。
另一方面,如果CPU 11确定模板图像不包括与在RAM 18中登记的指令颜色相同的颜色(步骤S512中的“否”),则处理进行到步骤S516。在步骤S516,CPU 11使得操作单元16显示敦促用户在模板原稿上写入在图2B中例示的处理指令信息的消息。
在步骤S508,CPU 11使得操作单元16显示用于确认是否已经在模板中写入了处理指令信息的消息。如果CPU 11经由操作单元16接收到在模板中写入了指令信息的响应(步骤S508中的“是”),则处理进行到步骤S517。在步骤S517,CPU 11使得扫描器15读取已写入了指令的模板原稿中的图像。扫描器与在如上所述的用于输出单色副本的处理中类似地读取原稿。更具体地说,CPU 11使得操作单元16显示敦促用户放置写入了指令信息的原稿的消息。在用户放置了原稿并且按下确定按钮时,扫描器15读取原稿。但是,不将扫描器读取和获取的图像数据转换为单色图像数据,并且将其存储在RAM 18中。
在步骤S518中,CPU 11分析和识别从扫描器15输入的图像数据中的处理指令信息。CPU 11分析在原稿中的何处包含在步骤S502中确定的指令颜色,并且通过识别所分析的部分的颜色来针对各种颜色识别要处理的区域的位置。因此可以通过所识别的位置确定原稿中要处理的区域的位置和大小。例如,使用坐标来识别该位置。
图5例示了对应于在图2B中例示的处理指令区域31的区域,用户已经使用蓝色笔写入了该区域,并且在步骤S518中将该区域识别为圈起区域。参见图5,将在左上端的起点701、宽度702和高度703提取为检查区域信息。当在X-Y坐标系中的位置被表示为(Y,X)时,起点701是(1108,963),宽度702是834,并且高度703是128。
类似地,在由检查者使用绿色笔写入的处理指令区域32的情况下,起点、宽度和高度的值分别是(1240,963)、740和100。而且,在由检查者使用红色笔写入的处理指令区域33的情况下,起点、宽度和高度的值分别是(2955,2050)、200和171。而且,从处理指令区域31、32和33确定指令颜色,并且提取处理代码。因为使用蓝色笔来写入处理指令区域31,因此处理代码是1。类似地,处理代码对于使用绿色笔写入的处理指令区域32是0,并且处理代码对于使用红色笔写入的处理指令区域33是2。
然后CPU 11将识别的位置与在步骤S502中确定的处理内容相关联地存储在RAM 18中。
在步骤S519,CPU 11使得操作单元16显示在步骤S518中执行的分析和识别的结果。例如,操作单元16显示对应于所识别的处理指令信息的区域的坐标和处理内容。而且,操作单元16可以显示所读取的原稿的缩略图,以便用户可以识别处理指令信息相对于图像的位置以及处理内容。在步骤S520,CPU 11使得操作单元16向用户显示关于在步骤S519中显示的分析和识别的结果是否正确的确认。如果CPU 11经由操作单元16从用户接收到结果不正确的响应(步骤S520中的“否”),则处理进行到步骤S525。在步骤S525,CPU 11使得操作单元16向用户显示关于是否要以单色输出由扫描器15在步骤S517读取的模板图像的确认。
如果CPU 11经由操作单元16从用户接收到以单色来输出模板图像的响应(步骤S525中的“是”),则处理进行到步骤S526。在步骤S526,CPU11将由扫描器15在步骤S517中读取的原稿的图像转换为单色图像数据,并且使得打印机14输出单色副本。
更具体地说,如果不能正确地提取处理指令信息,则以单色复制添加了处理指令信息的处理指令片材。使用该输出使得用户可以再一次添加处理指令信息。在步骤S526,由此将该原稿转换为单色,并且由打印机14进行打印。但是,本发明不限于这样的方法,而是可以使用如上所述(即像在步骤S506中那样)的各种方法。
在步骤S527,CPU 11使得操作单元16显示敦促用户在由打印机14在步骤S526中输出的记录片材中写入处理指令信息的消息。
返回到步骤S525,如果CPU 11经由操作单元16从用户接收到不以单色输出模板图像的响应(步骤S525中的“否”),则处理进行到步骤S528。在步骤S528,CPU 11使得操作单元16显示用于确认是否建立新的处理指令片材的消息。如果用户经由操作单元16指示建立新的处理指令片材(步骤S528中的“是”),则处理进行到步骤S529。在步骤S529,CPU 11使得操作单元16显示敦促用户在扫描器15上放置新建立的图像处理片材的消息。另一方面,如果用户经由操作单元16指示不建立新的处理指令片材(步骤S528中的“否”),则处理结束。
如果在步骤S527和步骤S529中显示消息后用户通过放置新建立的原稿并且按下确定按钮来指示设备读取原稿,则CPU 11重复如上所述的步骤S517的处理。
返回到步骤S520,如果CPU 11经由操作单元16从用户接收到分析的结果正确的响应(步骤S520中的“是”),则CPU 11将所分析的内容作为处理指令信息的提取结果存储在RAM 18中。在步骤S521,CPU 11使得操作单元16显示关于是否建立扫描票据的询问。如果CPU 11经由操作单元16接收到建立扫描票据的响应(步骤S521中的“是”),则处理进行到步骤S522。在步骤S522,CPU 11使用例如二维代码(例如QR代码)来对所分析的内容进行编码,以对在步骤S519中显示的分析结果进行编码。对被指示进行处理的区域和对应的处理内容进行编码。
例如,在图2C中例示的处理指令片材的情况下,处理指令区域31、32和33的处理指令信息被写入为字符串。这样的字符串依次包括通过逗号分隔的起点的X坐标、起点的Y坐标、宽度、高度和处理代码,并且为如下:“963,1108,834,128,1,963,1240,740,100,0,2050,2955,200,171,2”。图6例示了被编码为QR代码的上述字符串。
根据本示例性实施例,将二维代码作为示例进行描述。但是,可以使用其他方法来对字符串进行编码,只要图像处理设备100可以分析和识别这样的代码。在步骤S523,CPU 11使得打印机14将在步骤S522中建立的编码字符串作为图像输出在记录片材上并且进行打印。
然后CPU 11可以使用打印的扫描票据,并且检查要检查的原稿。但是,如果用户在步骤S520确定分析的结果正确,则这表示已经正确地识别了CPU 11使得扫描器15在步骤S517读取的处理指令片材。因此不必再执行步骤S521、步骤S522和步骤S523的处理,并且可以使用读取的处理指令片材作为扫描票据。在这种情况下,当执行检查处理时,从处理指令片材识别处理内容。
返回到步骤S521,如果CPU 11经由操作单元16接收到不建立扫描票据的响应(步骤S521中的“否”),则CPU 11使得操作单元16显示用于识别在步骤S520中登记的被分析的内容的标识(ID)。在对检查原稿进行检查时,执行这样的处理来识别和从RAM 18读取所分析的内容以供使用。用户可以从操作单元16指定期望的ID,来替代由CPU 11推荐ID。然后CPU 11在RAM 18中存储与所分析的内容相关联的所确定的ID,并且处理进行到步骤S524。
在步骤S524,CPU 11根据如上所述识别的处理指令信息和对应的处理内容来检查要检查的原稿。
根据上述处理,在原稿中包含的颜色分量被转换为变得与指令颜色的颜色分量不同。然后可以打印用户要添加处理指令信息的原稿。结果,可以正确地识别添加到处理指令片材的处理指令信息。换句话说,可以减少在识别处理指令信息中的错误。而且,因为可以适当地向用户显示用于执行上述处理的操作(例如敦促要输出单色副本的消息),因此可以减少由用户操作生成的错误。不必执行在该流程图中例示的所有上述处理,并且可以执行所述处理的一部分。
下面参照图4来描述使用如上所述建立的扫描票据而根据所提取的处理指令信息来检查原稿的过程(即在步骤S524中执行的处理)。
图4是例示根据本示例性实施例的图像处理设备执行的检查处理的流程图。
在步骤S2501,CPU 11使得操作单元16显示关于建立扫描票据的确认,如下所述。
在步骤S2502,CPU 11使得操作单元16显示关于是否建立扫描票据的询问。如果CPU 11经由操作单元16接收到建立扫描票据的响应(步骤S2502中的“是”),则处理进行到步骤S2503。另一方面,如果CPU 11经由操作单元16从已经获取了扫描票据的检查者接收到不建立扫描票据的响应(步骤S2502中的“否”),则处理进行到步骤S2504,而不执行扫描票据建立处理。
在步骤S2503,CPU 11执行扫描票据建立处理,其中,由上述处理指令片材建立扫描票据。然后处理进行到步骤S2504。扫描票据和扫描票据建立处理的详情如上所述。
在步骤S2504,CPU 11使得操作单元16在第一次扫描扫描票据后显示将扫描要检查的原稿,并且敦促用户将原稿放置在扫描器15上。
在步骤S2505,在传感器(未示出)检测到放置了原稿时,CPU 11指示扫描器15读取扫描票据和要扫描的原稿,并且指示HDD 13存储图像数据。根据本示例性实施例,为了容易说明,仅存在一个要检查的原稿,如图2C中例示。但是,也可以检查多个原稿。
在步骤S2506,CPU 11读取在HDD 13中存储的扫描票据的图像数据,并且分析该扫描票据。用QR代码对多个处理指令信息进行编码,并且打印在扫描票据中。每个处理指令信息包括:检查区域信息,其用于指示要检查哪个区域;以及处理代码,其表示用于检查该检查区域的处理方法。CPU 11检测包含在扫描票据的图像数据中的QR代码的位置,对QR代码进行解码,并获取多个处理指令信息。根据本示例性实施例,处理指令信息的检查区域信息表示图像数据的坐标,并且包括处理区域的起点的X-Y坐标、从起点起的宽度和高度。而且,表示用于检查检查区域的处理方法的处理代码是对应于该检查区域的处理方法的编号。
根据本示例性实施例,三种类型的处理方法分别与各处理代码相对应,即在检查区域中是否有输入项(处理代码:0),检查区域是否为空白(处理代码:1)和是否有红色盖章(处理代码:2)。如果CPU 11在步骤S2505读取多个要检查的原稿,则将在放置为第一个原稿的扫描票据中写入的处理指令信息应用到所有随后要检查的原稿。该处理指令信息有效,直到完成检查处理为止。
在步骤S2507,CPU 11依次读取在HDD 13中存储的、要检查的图像数据。
在步骤S2508,CPU 11从多个处理指令信息中选择一个处理指令信息。然后CPU 11根据由处理指令信息的检查区域信息指示的起点、宽度和高度,来从步骤S2507中读取的图像数据依次获取检查区域。
在步骤S2509,CPU 11从在步骤S2508中使用的处理指令信息确认检查区域的处理代码。如果处理代码是0或者1,则处理进行到步骤S2510。如果处理代码是2,则处理进行到步骤S2511。
在步骤S2510,CPU 11检查在检查区域中是否有输入项。根据本示例性实施例,将在步骤S2508中获取的检查区域内的图像数据转换为色调、明度及饱和度(HLS)颜色空间。因此可以根据在明度L低于预定亮度的检查区域中的像素的百分比来确定在检查区域中是否有输入项。根据本示例性实施例,在RGB颜色空间中描述从图像数据中获取的检查区域的图像数据。因此,获取在明度L小于50%的检查区域中的像素的百分比,并且如果所述像素的百分比是10%或者更大,则确定在检查区域中有输入项。确定方法不限于上述方法,只要能够确定输入项即可。例如,可以通过在主扫描方向上连续的暗像素的长度来确定输入项。而且,因为从RGB颜色空间到HLS颜色空间的转换是已知的技术,因此省略其详细说明。
在步骤S2511,CPU 11检查在所获取的检查区域中是否有红色盖章。根据本示例性实施例,使用与在步骤S2510中类似的方法将检查区域转换为HLS颜色空间。然后CPU 11根据饱和度S和色调H在预定范围内的处理区域中的像素的百分比,来确定是否有红色盖章。更具体地说,根据本示例性实施例,获取饱和度S是20%或更大并且色调H是30度或更小或者330度或更大的检查区域中的像素的百分比。如果这样的像素的百分比大于或者等于10%,则CPU 11确定有红色盖章。确定方法不限于上述方法,只要能够确定是否有红色盖章即可。例如,可以通过饱和度S和色调H在预定范围内的主扫描方向上连续的像素的长度来确定红色盖章。
在步骤S2512,CPU 11确定在步骤S2510或者步骤S2511中获取的百分比是否大于或者等于预定值,并且确定检查区域的处理代码是否是0或者2。如果所述百分比和处理代码匹配上述条件(步骤S2512中的“是”),则处理进行到步骤S2513。另一方面,如果所述百分比和处理代码不匹配上述的条件(步骤S2512中的“否”),则处理进行到步骤S2514。
在步骤S2514中,CPU 11确定在步骤S2510或者步骤S2511中获取的百分比是否小于预定值,并且确定检查区域的处理代码是否是1。如果所述百分比和所述处理代码匹配上述条件(步骤S2514中的“是”),则处理进行到步骤S2513。如果所述百分比和所述处理代码不匹配上述条件(步骤S2514中的“否”),则处理进行到步骤S2515。
在步骤S2513,CPU 11在RAM 18、即工作存储器中存储在步骤S2508中获取的所述检查区域的检查结果为OK。
在步骤S2515,CPU 11在RAM 18中存储在步骤S2508中获取的所述检查区域的检查结果不是OK(NG)。
在步骤S2516,CPU 11确定是否针对在步骤S2507中读取的图像数据检查了全部多个处理指令信息。如果检查了全部多个处理指令信息(步骤S2516中的“是”),则处理进行到步骤S2517。如果未完成检查处理(步骤S2516中的“否”),则处理返回到步骤S2508。
在步骤S2517,CPU 11确定是否已经完成了在步骤S2505中读取的要检查的原稿的所有图像数据的处理。如果已经完成了处理(步骤S2517中的“是”),则处理进行到步骤S2518。如果还没有完成处理(步骤S2517中的“否”),则处理返回到步骤S2507。
在步骤S2518,在完成了针对所有要检查的原稿的图像数据的所有检查区域的处理时,CPU 11向操作单元16发送检查结果和显示检查结果的指令。然后检查处理结束。要在操作单元16上显示的检查结果是在步骤S2505中读取的要检查的原稿,并且如果即使检查检查区域的一个结果是“否”,则操作单元16也通知根据本示例性实施例的检查结果的结果是“否”。检查结果的显示内容和用于显示检查结果的方法不限于上述内容和方法,并且可以显示更详细的信息。而且,可以由检查结果生成图像数据,并且可以将该图像数据发送到打印机14,以便输出报告。
下面详细说明缩略图生成处理。
图7是例示在图3中例示的步骤S519中的、根据本示例性实施例的缩略图生成处理的流程图。图8例示了缩略图的示例。
通过CPU 11将存储在ROM 19中的程序载入到RAM 18并在其中执行,来实现流程图中例示的处理。在步骤S901,CPU 11从处理指令片材的图像数据中依次删除由检查者使用彩色笔写入以指示处理的矩形。更具体地说,CPU 11使用在步骤S518中获取的处理指令信息,来识别在与被写入以指示处理的矩形相对应的图像数据中的区域。然后CPU 11将在该区域中包含的指令颜色的像素替换为处理指令片材的背景颜色,由此从图像数据中删除用于指示处理的矩形。
在步骤S902,CPU 11使用在步骤S518中获取的处理指令信息来在删除了被写入以指示处理的矩形的图像数据的区域中绘制由直线构成的矩形。可以由关于处理指令信息的检查区域信息中包含的起点、宽度和高度的信息确定要绘制矩形的位置。根据本示例性实施例,将限定范围内的颜色设置为指令颜色,以便使用明度L是50%、饱和度S是100%并且色调H在指令颜色的范围中央的颜色来绘制矩形。例如,在图2B中例示的处理指令片材中,删除由检查者写入的处理指令区域31中的矩形。然后,根据处理指令信息使用蓝色笔来作为指令颜色绘制如图8中例示的矩形1001。类似地,删除作为处理指令区域32和33的、由检查者写入的矩形,并且根据处理指令信息,使用绿色笔作为指令颜色来绘制矩形1002并且使用红色笔作为指令颜色来绘制矩形1003。
在步骤S903,CPU 11确定是否已经针对在图3中例示的流程图的步骤S518中获取的所有处理指令信息执行了上述处理。如果完成了处理(步骤S903中的“是”),则处理进行到步骤S904,并且如果未完成处理(步骤S903中的“否”),则处理返回到步骤S901。
在步骤S904,CPU 11缩小通过执行从步骤S901到步骤S903的处理而获取的图像数据,并且生成缩略图1000。更具体地说,CPU 11通过下述方式来生成要在操作单元16上显示的缩略图:在图3中例示的流程图的步骤S519中将图像数据缩小为用于在操作单元16上显示的大小。而且,CPU 11将删除了通过从步骤S901到步骤S903执行的处理获取的处理指令的矩形的图像数据缩小为用于在步骤S523生成扫描票据的大小。CPU 11由此生成用于生成扫描票据的缩略图,然后处理结束。根据本示例性实施例,使用双三次方法来缩小图像数据。但是,所述方法不限于双三次方法,并且也可以使用最近邻方法。
下面将参照图9详细说明通过在图3中例示的流程图的步骤S523中的扫描票据生成处理生成的扫描票据。图9例示了由在图2B中例示的处理指令片材生成的扫描票据的示例。
扫描票据包括对处理指令信息进行了编码的图6所示的QR代码800、缩略图1000和处理指令信息1101、1102和1103。处理指令信息1101指示从在图2B中例示的处理指令区域31获取的检查区域信息(即检查区域的起点的坐标、宽度和高度)。处理指令信息1102指示对应于从处理指令区域32获取的处理代码的检查区域信息和处理方法。处理指令信息1103指示对应于从处理指令区域33获取的处理代码的检查区域信息和处理方法。由通过缩略图生成处理获取的、在图2B中例示的处理指令片材生成缩略图1100。如上所述,缩略图是下述图像数据,其中,删除了由检查者在处理指令片材上写入以指示处理的矩形,并且其中,根据处理指令信息使用指令颜色而绘制了矩形。将这样的图像数据缩小以使其包含在扫描票据中,由此成为缩略图1000。
下面,将参照图10和11来详细描述指令颜色改变处理。
图10是例示根据本示例性实施例的指令颜色改变处理的流程图。图11A和11B例示了根据本示例性实施例的指令颜色改变表单的示例。可以通过由CPU 11将存储在ROM 19中的程序载入到RAM 18中并在其中执行,来实现在流程图中例示的处理。
在步骤S1201,在用户向操作单元16输入执行指令颜色改变处理的指令时,CPU 11向打印机14发送在图11A中例示的指令颜色改变表单的图像数据。然后CPU 11向打印机14通知打印图像数据。而且,CPU 11向操作单元16发送用于向用户显示使用任意颜色的笔填充指令颜色改变表单的消息的指令。指令颜色改变表单包含:多种方法,用于处理可以被图像处理设备1000执行的检查区域;以及,指令颜色指定区域,用于使指令颜色与处理方法相关联。在每个指令颜色指定区域周围绘制黑色(明度L:0%)矩形。在图11A中例示的指令颜色指定区域1301对应于用于检查在检查区域中是否有输入项(即处理代码:0)的处理。如上所述,将绿色(其中,色调H在90度和150度之间,并且饱和度S大于或者等于20%)作为指令颜色预先与处理方法相关联。指令颜色指定区域1302对应于用于检查检查区域是否为空白(即处理代码:1)的处理。将蓝色(其中,色调H在210度和270度之间,并且饱和度S大于或者等于20%)作为指令颜色预先与处理方法相关联。指令颜色指定区域1303对应于用于检查在检查区域中是否有红色盖章(即处理代码:2)的处理。将红色(其中,色调H在30度和330度之间,并且饱和度S大于或者等于20%)作为指令颜色预先与处理方法相关联。
在步骤S1202,CPU 11向操作单元16发送向用户显示消息来扫描用户已经使用任意的彩色笔填充了的指令颜色改变表单的指令。
在步骤S1203,CPU 11向扫描器15发送读取指令颜色改变表单的指令,并且向HDD 13发送存储图像数据的指令。
在步骤S1204,CPU 11从HDD 13获取指令颜色改变表单的所读取的图像数据,并且从指令颜色指定区域的图像数据获取颜色信息。图11B例示了用户已经使用任意颜色笔填充并且已经被扫描器15读取的指令颜色改变表单的示例。参见图11B,指令颜色改变表单中的指令颜色改变区域包括使用彩色笔绘制的区域1304、1305和1306。在检测到除了在指令颜色指定区域周围绘制的矩形的颜色之外的颜色的像素并且获取在RGB颜色空间中的像素的平均值后,可以将颜色信息转换为HLS颜色空间。根据本示例性实施例,背景颜色理想上是白色的,其在RGB颜色空间中是(255,255,255),并且其在HLS颜色空间中的明度L是100%并且饱和度是0%。而且,在指令颜色指定区域周围绘制的矩形的颜色是黑色,其在RGB颜色空间中是(0,0,0),并且其在HLS颜色空间中的明度L和饱和度是0%。在指令颜色指定区域周围绘制的矩形的颜色不是必须是黑色的。
在步骤S1205中,CPU 11确定是否已经从所有多个指令颜色指定区域读取了颜色信息。如果已经从所有多个指令颜色指定区域读取了颜色信息(步骤S1205中的“是”),则处理进行到步骤S1206。如果还没有从所有多个指令颜色指定区域读取颜色信息(步骤S1205中的“否”),则处理返回到步骤S1204。
在步骤S1206,CPU 11确定在所读取的颜色信息中是否有无效的颜色。如果在指令颜色指定区域中的颜色仅仅是背景颜色和在指令颜色指定区域周围绘制的矩形的颜色,则所述颜色被确定为无效。而且,如果所读取的颜色信息类似于上述两种颜色,则所述颜色被确定为无效。如果CPU 11确定在读取的颜色信息中有至少一个无效颜色(步骤S1206中的“是”),则处理进行到步骤S1207。另一方面,如果有无效颜色(步骤S1206中的“否”),则处理进行到步骤S1208。根据本示例性实施例,白色(即明度L是100%并且饱和度S是0%)和黑色(即明度L和饱和度S都是0%)是无效的指令颜色。由此将饱和度小于或者等于10%并且明度L在10%和90%之间的颜色确定为与上述颜色类似的颜色。
在步骤S1207,CPU 11向操作单元16发送向用户显示选择是否重复指令颜色改变处理的消息的指令。在从操作单元16接收到重复处理的指令时(步骤S 1207中的“是”),CPU 11将无效颜色信息替换为预设的指令颜色。然后处理进行到步骤S1208。更具体地说,如果从指令颜色指定区域1301读取无效预设,则通过将在绿色的色调H的范围中央的值设置为所读取的颜色信息来执行下述的处理。向对应于指令颜色指定区域1301的处理方法预设绿色。
在步骤S1208,CPU 11确定在多个颜色信息中是否有类似的颜色。如果有类似的颜色(步骤S1208中的“是”),则处理进行到步骤S1209。如果没有类似的颜色(步骤S1208中的“否”),则处理进行到步骤S1211。根据本示例性实施例,如果各个颜色信息的色调H在±30度以内,则CPU11确定有类似的颜色。
在步骤S1209,CPU 11向操作单元16发送向用户显示选择是否重复指令颜色改变处理的消息的指令。在从操作单元16接收到重复所述处理的指令时(步骤S1209中的“是”),处理返回到步骤S1201。另一方面,如果CPU 11确定接收到不重复所述处理的指令(步骤S 1209中的“否”),则处理进行到步骤S1210。
在步骤S1210,CPU 11缩小用于确定所设置的指令颜色的色调H的范围,其中,在多个颜色信息中,所述颜色信息被确定为类似于所设置的指令颜色。
在步骤S1211,CPU 11将从指令颜色指定区域获取的多个颜色信息的范围扩大为预定范围。然后CPU 11将多个颜色信息中的各个设置为对应于各自的处理方法的指令颜色,并且改变指令颜色。根据本示例性实施例,通过将在颜色信息中的色调H设置为±30度的范围并且将在颜色信息中的饱和度S设置为大于或者等于20%来确定指令颜色。如果颜色信息是在步骤S1210中缩小了范围的指令颜色的颜色信息,则色调H的范围被从±30度缩小。然后设置指令颜色以使得类似的颜色不交叠。
例如,在图11B中例示的指令颜色改变表单中,使用橙色笔来绘制区域1304(即,色调H是30度,饱和度S是100%,并且明度L是100%)。而且,使用黄色笔来绘制区域1305(即,色调H是60度,饱和度S是100%,并且明度L是100%),并且使用紫色笔来绘制区域1306(即,色调H是270度,饱和度S是100%,并且明度L是100%)。然后CPU 11在步骤S1204中读取区域1304、1305和1306的颜色信息,并且在步骤S1208,CPU 11确定橙色和黄色是类似颜色。如果用户在步骤S1209不选择重复所述处理,则处理进行到步骤S1210,并且CPU 11将各个颜色的色调的设置范围缩小到±15度。在步骤S1211,CPU 11改变指令颜色以对应于上述颜色。换句话说,橙色(即色调H大于或者等于15度并且小于45度,饱和度S大于或者等于20%)变为与用于检查在检查区域中是否有输入项的处理(处理代码:0)相关联的指令颜色。而且,黄色(即色调H大于或者等于45度,饱和度S大于或者等于20%)变为与用于检查检查区域是否为空白的处理(处理代码:1)相关联的指令颜色。而且,紫色(即色调H在240度和300度之间,饱和度S大于或者等于20%)变为与用于检查在检查区域是否有红色盖章的处理(处理代码:2)相关联的指令颜色。
如上所述,根据第一示例性实施例,图像处理设备读取检查者已经在区域中写入的处理指令片材,并且获取处理指令信息。同时,图像处理设备删除所述区域,并且通过使用指令颜色绘制矩形来使用处理指令信息可视地向用户提供所识别的处理指令信息。结果,当执行检查处理时,检查者可以容易且精确地识别是否将期望的处理方法应用到期望的区域。
根据本示例性实施例,在扫描票据生成处理中,处理指令信息被转换为QR代码。但是,用于对处理指令信息进行编码的方法不限于上述方法,并且例如,彩色条形码可以用于进行编码。在这种情况下,通过执行对应于编码方法的解码处理替代在图4中例示的步骤S2506中的对QR代码进行解码,来获取处理指令信息。
本发明的第二示例性实施例与第一示例性实施例的不同在于图7中例示的缩略图生成处理的一部分。因此省略对与第一示例性实施例类似的部分的说明,并且仅描述不同的部分。
图12是例示根据本示例性实施例的缩略图生成处理的流程图。下面将参照图12来说明根据本示例性实施例的缩略图生成处理。
在步骤S901,CPU 11从处理指令的图像数据中依次删除由检查者使用彩色笔写入来指示处理的矩形。
在步骤S902,CPU 11使用在步骤S518中获取的处理指令信息来在删除了由检查者写入的矩形的图像数据的区域中绘制(显示)由直线形成的矩形。
在步骤S1401,CPU 11使用所获取的处理指令信息来在使用指令颜色绘制了直线矩形的图像数据的区域中绘制对应于处理代码的处理方法。CPU 11使用指令颜色将处理方法绘制为文本。图13例示了根据本示例性实施例的缩略图的示例。参照图13,CPU 11在步骤S902中绘制的矩形1001的区域中绘制对应于一区域(即以文本形式的“空白”1501)的处理代码的处理方法。而且,CPU 11在矩形1002的区域中绘制对应于一区域(即以文本形式的“输入项”1502)的处理代码的处理方法。而且,CPU 11在矩形S1003的区域中绘制对应于一区域(即以文本形式的“盖章”1503)的处理代码的处理方法。
在步骤S903,CPU 11确定是否已经针对在图3中例示的流程图的步骤S518中获取的所有处理指令信息执行了上述的处理。如果处理完成(步骤S903中的“是”),则处理进行到步骤S904,并且如果处理未完成(步骤S903中的“否”),则处理返回到步骤S901。
在步骤S904,CPU 11缩小通过执行从步骤S901到步骤S903的处理而获取的图像数据,并且生成缩略图。由此结束缩略图生成处理。
下面将说明根据本示例性实施例建立的扫描票据。
在图3中例示的扫描票据生成处理的流程图中的步骤S519和步骤S523中使用通过执行在图12中例示的缩略图生成处理而获取的缩略图。例如,在本示例性实施例中,在图9中例示的缩略图1100的区域中使用在图13中例示的缩略图1500。
如上所述,根据第二示例性实施例,除了在缩略图上使用指令颜色来绘制矩形之外,还通过文本明确地显示要应用到区域的处理方法。结果,当执行检查处理时,检查者可以容易且精确地识别是否要向期望的区域应用期望的处理方法。
本发明的第三示例性实施例与第一示例性实施例的不同在于图7中例示的缩略图生成处理的一部分。因此省略对与第一示例性实施例类似的部分的说明,并且仅说明不同的部分。
图14是例示根据本示例性实施例的缩略图生成处理的流程图。下面参照图14来说明根据本示例性实施例的缩略图生成处理。
在步骤S901,CPU 11从处理指令的图像数据中依次删除由检查者使用彩色笔写入以指示处理的矩形。
在步骤902,CPU 11使用在步骤S518中获取的处理指令信息来在删除了检查者写入的矩形的图像数据的区域中绘制(显示)由直线形成的矩形。
在步骤S1601,CPU 11使用所获取的处理指令信息来在使用指令颜色绘制了直线矩形的图像数据的区域中绘制处理指令信息编号。CPU 11使用指令颜色来绘制处理指令信息编号。处理指令信息编号是用于指示在步骤S518中获取处理指令信息的顺序的编号。图15例示了根据本示例性实施例的缩略图的示例。参照图15,CPU 11将对应于在步骤S902中绘制的矩形1001的区域的处理指令信息编号1701绘制为字符“①”。而且,CPU 11在矩形1002的区域中将对应于该区域的处理指令信息编号1702绘制为字符“②”。而且,CPU 11在矩形1003的区域中将对应于该区域的处理指令信息编号1703绘制为字符“③”。
在步骤S903中,CPU 11确定是否已经针对在步骤S518中获取的所有处理指令信息执行了上述的处理。如果完成了处理(步骤S903中的“是”),则处理进行到步骤S904,并且如果未完成处理(步骤S903中的“否”),则处理返回到步骤S901。
在步骤S904,CPU 11缩小通过执行从步骤S901到步骤903的处理而获取的图数据,并且生成缩略图。由此结束缩略图生成处理。
下面参照图16来说明根据本示例性实施例建立的扫描票据。
图16例示了根据本示例性实施例的扫描票据的示例。
参照图16,扫描票据包括对处理指令信息进行了编码的图6中所示的QR代码800、缩略图1700和处理指令信息1801、1802和1803。处理指令信息1801包括从在图2B中例示的处理指令区域31获取的检查区域信息(即检查区域的起点的坐标、宽度和高度)。处理指令信息1801也包括对应于处理代码的处理方法和作为字符“①”的处理指令信息编号1804。类似地,处理指令信息1802包括作为字符“②”的处理指令信息编号1805,并且处理指令信息1803包括作为字符“③”的处理指令信息编号1806。通过在图14中例示的缩略图生成处理来生成缩略图1700。如上所述,缩略图1700是删除了由检查者在处理指令片材上写入以用于指示处理的矩形的图像数据,并且在该图像数据上,已经根据处理指令信息使用指令颜色绘制了矩形和处理指令信息编号。将这样的图像数据缩小以使其包含在扫描票据中,由此成为缩略图1700。
如上所述,根据第三示例性实施例,使用在缩略图上的指令颜色来绘制矩形。而且,使用指令颜色绘制的矩形与在扫描票据中的区域的详细处理指令信息相关联。结果,检查者可以在执行检查处理时容易且精确地识别是否将期望的处理方法应用到期望的区域。
也可以通过提供存储介质来实现本发明,所述存储介质存储了用于实现上述示例性实施例的功能的软件(程序代码)。在存储介质中存储的程序代码可以被计算机读取和执行。在这种情况下,软件(程序代码)本身实现上述示例性实施例的功能。软件(程序代码)本身和存储软件(程序代码)的存储介质构成本发明。
虽然参照示例性实施例说明了本发明,但是应当理解,本发明不限于所公开的示例性实施例。所附权利要求的范围符合最宽的解释,以涵盖所有的变型、等同结构和功能。

Claims (8)

1.一种图像处理设备,该图像处理设备包括:
读取单元,其被构造为读取图像数据;
识别单元,其被构造为识别在所述读取单元读取的所述图像数据中由手写部分圈起的区域以及与所述手写部分的颜色相关联的处理;以及
显示单元,其被构造为通过将所述识别单元的识别结果和所述图像数据中的待处理区域叠加来显示预览,并且在所显示的预览上显示所识别的处理的内容,以使得用户识别由所述手写部分圈起的区域以及与所述区域相关联的处理的内容。
2.根据权利要求1所述的图像处理设备,其中,所述显示单元被构造为通过使用所述识别单元的所述识别结果来建立指令片材,所述指令片材用于指示对向所述图像处理设备输入的其他图像数据的处理。
3.根据权利要求1所述的图像处理设备,其中,所述识别单元被构造为当所述显示单元显示所述预览时,删除所述图像数据中的所述手写部分。
4.根据权利要求1所述的图像处理设备,其中,所述显示单元被构造为使用在所述手写部分中使用的颜色来显示由所述识别单元识别的区域。
5.一种用于控制图像处理设备的方法,该方法包括以下步骤:
读取图像数据;
识别在所读取的图像数据中由手写部分圈起的区域以及与所述手写部分的颜色相关联的处理;以及
通过将所识别的结果和所述图像数据中的待处理区域叠加来显示预览,并且在所显示的预览上显示所识别的处理的内容,以使得用户识别由所述手写部分圈起的区域以及与所述区域相关联的处理的内容。
6.根据权利要求5所述的方法,该方法还包括以下步骤:通过使用所识别的结果来建立指令片材,所述指令片材用于指示对向所述图像处理设备输入的其他图像数据的处理。
7.根据权利要求6所述的方法,该方法还包括以下步骤:当显示所述预览时,删除所述图像数据中的所述手写部分。
8.根据权利要求5所述的方法,该方法还包括以下步骤:使用在所述手写部分中使用的颜色来显示所识别的区域。
CN2010101334035A 2009-03-10 2010-03-10 图像处理设备及图像处理方法 Expired - Fee Related CN101834968B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009056318A JP2010211466A (ja) 2009-03-10 2009-03-10 画像処理装置および画像処理方法及びプログラム
JP2009-056318 2009-03-10

Publications (2)

Publication Number Publication Date
CN101834968A true CN101834968A (zh) 2010-09-15
CN101834968B CN101834968B (zh) 2012-10-03

Family

ID=42246084

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101334035A Expired - Fee Related CN101834968B (zh) 2009-03-10 2010-03-10 图像处理设备及图像处理方法

Country Status (6)

Country Link
US (1) US8737744B2 (zh)
EP (1) EP2228751A3 (zh)
JP (1) JP2010211466A (zh)
KR (1) KR101220625B1 (zh)
CN (1) CN101834968B (zh)
RU (1) RU2463660C2 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102024264A (zh) * 2010-10-13 2011-04-20 广东威创视讯科技股份有限公司 一种基于直方图统计的触摸笔颜色识别方法
CN104021495A (zh) * 2014-06-16 2014-09-03 王美金 基于文字识别的银行业务申请书生成装置
CN107463868A (zh) * 2016-06-02 2017-12-12 阿里巴巴集团控股有限公司 一种电子表单核验方法及装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5300534B2 (ja) * 2009-03-10 2013-09-25 キヤノン株式会社 画像処理装置および画像処理方法及びプログラム
KR20120040573A (ko) 2010-10-19 2012-04-27 주식회사 팬택 이동식 태그를 이용한 증강 현실 제공 장치 및 방법
JP5754264B2 (ja) 2011-06-24 2015-07-29 富士ゼロックス株式会社 プログラム実行装置、画像処理装置およびプログラム
CN103164909B (zh) * 2011-12-14 2016-06-08 航天信息股份有限公司 税控查验系统及其方法、税控稽查系统及税控系统
EP2994845B1 (en) * 2013-05-06 2022-04-06 Koninklijke Philips N.V. Image visualization
JP2015103919A (ja) * 2013-11-22 2015-06-04 キヤノン株式会社 情報処理装置、システム、方法およびプログラム
US10304110B2 (en) 2013-12-26 2019-05-28 Ebay Inc. Ticket listing triggered by URL links
US10789554B2 (en) 2014-01-08 2020-09-29 Stubhub, Inc. Validity determination of an event ticket and automatic population of admission information
US20160104052A1 (en) * 2014-10-10 2016-04-14 Qualcomm Incorporated Text-based thumbnail generation
US11055552B2 (en) * 2016-01-12 2021-07-06 Disney Enterprises, Inc. Systems and methods for detecting light signatures and performing actions in response thereto
US10168879B1 (en) 2017-05-12 2019-01-01 Snap Inc. Interactive image recoloring
US20200265278A1 (en) * 2019-02-19 2020-08-20 Toshiba Tec Kabushiki Kaisha Colored region barcode printing
US20240161451A1 (en) * 2021-03-12 2024-05-16 Kohji KAMBARA Information processing system, processing method, and recording medium

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1165604A (zh) * 1995-07-17 1997-11-19 松下电器产业株式会社 接收、信息存储和电视接收装置以及信息收发和存储方法
CN1208484A (zh) * 1996-11-15 1999-02-17 东邦商务管理中心株式会社 业务管理系统
JPH11120260A (ja) * 1997-10-14 1999-04-30 Nippon Telegr & Teleph Corp <Ntt> 帳票イメージ処理方法及び装置及び帳票イメージ処理プログラムを格納した記憶媒体
US6035059A (en) * 1993-03-31 2000-03-07 Kabushiki Kaisha Toshiba Image processing system suitable for colored character recognition
CN1265499A (zh) * 1999-03-01 2000-09-06 株式会社日立制作所 账票处理方法与账票处理系统
US6940617B2 (en) * 2001-02-09 2005-09-06 Matsushita Electric Industrial Co., Ltd. Printing control interface system and method with handwriting discrimination capability
CN101166225A (zh) * 2006-10-19 2008-04-23 村田机械株式会社 图像处理装置和图像处理方法
CN101226594A (zh) * 2007-01-18 2008-07-23 富士通株式会社 图案分离提取程序、图案分离提取装置和图案分离提取方法
US20080292195A1 (en) * 2007-05-22 2008-11-27 Vijayasenan Deepu Data Processing System And Method

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3187919B2 (ja) * 1992-03-26 2001-07-16 株式会社リコー 文字認識条件表示方法及び文字認識装置
US5430485A (en) * 1993-09-30 1995-07-04 Thomson Consumer Electronics, Inc. Audio/video synchronization in a digital transmission system
JP4356847B2 (ja) * 1995-11-10 2009-11-04 万太郎 矢島 フィールド定義情報生成方法、ならびび、フィールド定義情報生成装置
JP4100746B2 (ja) * 1998-01-09 2008-06-11 キヤノン株式会社 画像処理装置及び方法
JP4486193B2 (ja) * 1998-11-13 2010-06-23 ゼロックス コーポレイション 文書処理方法
US6577409B1 (en) * 1999-02-19 2003-06-10 Hewlett-Packard Development Company, L.P. Method and apparatus for controlling a scanning device
JP2001297303A (ja) * 2000-02-09 2001-10-26 Ricoh Co Ltd 文書画像認識方法、装置及びコンピュータ読み取り可能な記録媒体
JP2004246597A (ja) * 2003-02-13 2004-09-02 Ricoh Co Ltd 画像処理装置、記録媒体およびプログラム
US7236653B2 (en) * 2003-03-27 2007-06-26 Sharp Laboratories Of America, Inc. System and method for locating document areas using markup symbols
JP3962721B2 (ja) * 2003-12-15 2007-08-22 キヤノン株式会社 文書処理装置及び文書処理方法
US7715061B2 (en) * 2004-03-04 2010-05-11 Visioneer, Inc. Document routing method for utilizing paper medium to direct outcome of scanned documents and software therefor
JP4534594B2 (ja) * 2004-05-19 2010-09-01 ソニー株式会社 画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体
US7627172B2 (en) * 2004-06-07 2009-12-01 Sony Corporation Image processing apparatus and method, and program
JP4682663B2 (ja) * 2005-03-28 2011-05-11 富士ゼロックス株式会社 ドキュメント処理装置
JP2007004523A (ja) * 2005-06-24 2007-01-11 Fuji Xerox Co Ltd 問題用紙作成装置及び問題用紙作成方法
JP2008145611A (ja) * 2006-12-07 2008-06-26 Fuji Xerox Co Ltd 情報処理装置、プログラム
US8179556B2 (en) * 2007-03-26 2012-05-15 Xerox Corporation Masking of text in document reproduction
JP5023780B2 (ja) * 2007-04-13 2012-09-12 ソニー株式会社 画像処理装置および画像処理方法、並びにプログラム
US7983485B2 (en) * 2007-04-30 2011-07-19 Hewlett-Packard Development Company, L.P. System and method for identifying symbols for processing images
JP2008140417A (ja) * 2008-02-04 2008-06-19 Ricoh Co Ltd 文字認識方法
JP2009225244A (ja) * 2008-03-18 2009-10-01 Ricoh Co Ltd 画像処理装置およびプログラム
JP5300534B2 (ja) * 2009-03-10 2013-09-25 キヤノン株式会社 画像処理装置および画像処理方法及びプログラム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6035059A (en) * 1993-03-31 2000-03-07 Kabushiki Kaisha Toshiba Image processing system suitable for colored character recognition
CN1165604A (zh) * 1995-07-17 1997-11-19 松下电器产业株式会社 接收、信息存储和电视接收装置以及信息收发和存储方法
CN1208484A (zh) * 1996-11-15 1999-02-17 东邦商务管理中心株式会社 业务管理系统
JPH11120260A (ja) * 1997-10-14 1999-04-30 Nippon Telegr & Teleph Corp <Ntt> 帳票イメージ処理方法及び装置及び帳票イメージ処理プログラムを格納した記憶媒体
CN1265499A (zh) * 1999-03-01 2000-09-06 株式会社日立制作所 账票处理方法与账票处理系统
US6940617B2 (en) * 2001-02-09 2005-09-06 Matsushita Electric Industrial Co., Ltd. Printing control interface system and method with handwriting discrimination capability
CN101166225A (zh) * 2006-10-19 2008-04-23 村田机械株式会社 图像处理装置和图像处理方法
CN101226594A (zh) * 2007-01-18 2008-07-23 富士通株式会社 图案分离提取程序、图案分离提取装置和图案分离提取方法
US20080292195A1 (en) * 2007-05-22 2008-11-27 Vijayasenan Deepu Data Processing System And Method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102024264A (zh) * 2010-10-13 2011-04-20 广东威创视讯科技股份有限公司 一种基于直方图统计的触摸笔颜色识别方法
CN104021495A (zh) * 2014-06-16 2014-09-03 王美金 基于文字识别的银行业务申请书生成装置
CN107463868A (zh) * 2016-06-02 2017-12-12 阿里巴巴集团控股有限公司 一种电子表单核验方法及装置
CN107463868B (zh) * 2016-06-02 2021-02-23 阿里巴巴集团控股有限公司 一种电子表单核验方法及装置

Also Published As

Publication number Publication date
RU2010108451A (ru) 2011-09-20
EP2228751A2 (en) 2010-09-15
US8737744B2 (en) 2014-05-27
EP2228751A3 (en) 2017-12-20
KR101220625B1 (ko) 2013-01-10
CN101834968B (zh) 2012-10-03
RU2463660C2 (ru) 2012-10-10
JP2010211466A (ja) 2010-09-24
US20100232700A1 (en) 2010-09-16
KR20100102061A (ko) 2010-09-20

Similar Documents

Publication Publication Date Title
CN101834968B (zh) 图像处理设备及图像处理方法
CN101924851B (zh) 图像处理装置及图像处理方法
CN101833662A (zh) 图像处理装置及图像处理装置的控制方法
CN101944179B (zh) 图像处理装置和图像处理方法
US20110090534A1 (en) Image processing apparatus, control method therefor, and program
CN101923644A (zh) 图像处理方法、图像处理装置以及图像形成装置
CN101859388A (zh) 图像形成装置及图像形成方法
US20110033089A1 (en) Apparatus for appraising the genuineness of personal identification documents
JP7337612B2 (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
KR101573857B1 (ko) 위변조 방지 기능이 구비된 문서, 문서의 위변조 방지 방법 및 그 문서의 위변조 확인 방법
JP2007055075A (ja) 電子ペン用カード申込書
KR101727585B1 (ko) 프린터 스테가노그래피 기법을 이용한 위조방지수단이 구비된 문서
US8320027B2 (en) Image processing apparatus, data processing method executed by image processing apparatus, and computer-readable storage medium storing program for causing computer to execute data processing method
US20110188745A1 (en) Image processing apparatus and processing method of the image processing apparatus
JP4807618B2 (ja) 画像処理装置及び画像処理プログラム
JP4717560B2 (ja) サーバ、制御プログラム及び集計システム
JP4788780B2 (ja) 記入情報処理システム、プログラム及び電子ペン用帳票
US20110157659A1 (en) Information processing apparatus, method for controlling the information processing apparatus, and storage medium
CN107665346A (zh) 信息提取装置、具有信息提取装置的图像形成装置、信息提取装置的控制方法
US20110134494A1 (en) Image scanning apparatus, control method for image scanning apparatus, and storage medium
KR101435860B1 (ko) 전자문서 템플릿 사용자 조작방법 및 템플릿을 이용한 전자문서 판독방법
US20110157658A1 (en) Imaging processing apparatus, method for controlling the same, and program
JP4725402B2 (ja) 処理装置、プログラム及び電子ペン用複写帳票
JP7142071B2 (ja) 地理情報取込システム、地理情報取込方法及びプログラム
JP2006203529A (ja) 検証サーバ及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121003