CN101547284A - 图像处理装置、图像读取装置和图像处理方法 - Google Patents

图像处理装置、图像读取装置和图像处理方法 Download PDF

Info

Publication number
CN101547284A
CN101547284A CN200910132312A CN200910132312A CN101547284A CN 101547284 A CN101547284 A CN 101547284A CN 200910132312 A CN200910132312 A CN 200910132312A CN 200910132312 A CN200910132312 A CN 200910132312A CN 101547284 A CN101547284 A CN 101547284A
Authority
CN
China
Prior art keywords
image
color
black
image information
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910132312A
Other languages
English (en)
Other versions
CN101547284B (zh
Inventor
桥本实
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101547284A publication Critical patent/CN101547284A/zh
Application granted granted Critical
Publication of CN101547284B publication Critical patent/CN101547284B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/00856Preventive measures
    • H04N1/00875Inhibiting reproduction, e.g. by disabling reading or reproduction apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/0084Determining the necessity for prevention
    • H04N1/00843Determining the necessity for prevention based on recognising a copy prohibited original, e.g. a banknote
    • H04N1/00846Determining the necessity for prevention based on recognising a copy prohibited original, e.g. a banknote based on detection of a dedicated indication, e.g. marks or the like
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0091Digital copier; digital 'photocopier'

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Color Image Communication Systems (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Facsimiles In General (AREA)
  • Image Processing (AREA)
  • Image Input (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明提供了一种图像处理装置、图像读取装置和图像处理方法。该图像处理装置和图像处理方法即使在设置了以下模式时也不管原稿是黑白原稿还是彩色原稿都能够分析原稿上的码图像,其中所述模式为“在黑白扫描模式下进行扫描并将通过扫描所获取的黑白图像信息发送至打印装置”。基于来自控制器部的指令,扫描器部获取黑白图像数据和用于检测彩色码图像的彩色图像数据并将它们发送至控制器部。使用图像数据总线的比特7~0发送黑白图像数据,并使用图像数据总线的比特23~16发送上述彩色图像数据。控制器部基于从扫描器部发送来的图像数据,分析原稿中的码图像。

Description

图像处理装置、图像读取装置和图像处理方法
技术领域
本发明涉及一种图像处理装置和图像处理方法,并且更具体地,涉及一种将预定附加信息(码图像(code image))叠加在图像信息上的图像处理装置和图像处理方法。
背景技术
存在一种打印了彩色(例如,青色)码图像(如禁止或允许用户复制的指定和复制时使用的功能等附加信息的编码图像)的原稿。
还存在一种能够利用黑白扫描模式和彩色扫描模式两者进行扫描的读取器(扫描器等)。在黑白扫描模式下,由黑白传感器接收从原稿反射来的光并将黑白图像信息发送至控制器,并且在彩色扫描模式下,由彩色传感器接收从原稿反射来的光并将彩色图像信息发送至控制器。
与彩色扫描模式相比,黑白扫描模式具有即使原稿是彩色原稿也不能够获得彩色图像信息的缺点。
另一方面,与黑白扫描模式相比,彩色扫描模式具有存在不能精确地获得原稿上的黑色的信息的可能性的缺点。例如,可能将原稿上的黑色的信息识别为“蓝黑”、“红黑”或“绿黑”。例如,在反射光R的量、反射光G的量和反射光B的量中一个反射光的量略微偏离时,由R、G和B传感器分别接收反射光的彩色传感器将黑色识别为“蓝黑”、“红黑”或“绿黑”。
如上所述,黑白扫描模式尽管具有缺点,但与彩色扫描模式相比其仍具有优点。
尽管黑白扫描模式具有这种优点,但当扫描前述原稿(即,由黑白传感器接收从打印了彩色码图像的原稿反射来的光并将其发送至控制器)时,存在以下问题。即,存在这种问题:在控制器内不能够分析打印在上述原稿上的彩色码图像的可能性高。
以下解释其原因。
首先,由于彩色比黑色浅,因此黑白传感器将从彩色码图像接收到弱反射光。结果,控制器中的分析组件将接收到与表示彩色码图像的浅的黑白码图像有关的信息。
此外,控制器内的分析组件不可能分析浅的码图像信息。结果,当在黑白扫描模式下扫描前述原稿时,存在这种问题:在控制器内不能够分析打印在上述原稿上的彩色码图像的可能性高。
发明内容
本发明的目的在于提供一种即使在设置了以下模式时也不管原稿是黑白原稿还是彩色原稿都能够分析原稿上的码图像的图像处理装置和图像处理方法,其中所述模式为“在黑白扫描模式下进行扫描并将通过扫描所获得的黑白图像信息发送至打印装置”。
本发明是一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理装置包括:发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;接收组件,用于基于所述指令,从所述图像读取装置接收由所述彩色图像信息获取组件获取的用于检测彩色码图像的彩色图像信息;以及分析组件,用于根据所接收到的彩色图像信息,对所述原稿中的码图像进行分析。
另外,本发明是一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理装置包括:发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;接收组件,用于基于所述指令,从所述图像读取装置接收由所述彩色图像信息获取组件获取的用于检测彩色码图像的彩色图像信息;判断组件,用于判断是否将由所述黑白图像信息获取组件获取的所述黑白图像信息输出至打印装置;以及分析组件,用于根据所接收到的彩色图像信息,分析所述原稿中的码图像,以便所述判断组件进行判断。
另外,本发明是一种图像处理装置,其控制图像读取装置,所述图像读取装置具有用于接收来自原稿的反射光的传感器,所述图像处理装置包括:设置组件,用于设置黑白扫描模式和彩色扫描模式中用户选择并指定的模式,其中,在所述黑白扫描模式下,对从所述传感器接收到的图像信息进行图像处理,将所述图像信息转换成黑白图像信息,并将所述黑白图像信息发送至打印装置,在所述彩色扫描模式下,对从所述传感器接收到的图像信息进行图像处理,并将彩色图像信息发送至所述打印装置;以及控制组件,用于控制所述图像读取装置,使得即使当所述设置组件设置了所述黑白扫描模式时,也能够从所述传感器接收用于检测彩色码图像的彩色图像信息,以对打印在所述原稿上的码图像进行分析。
另外,本发明是一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白传感器和彩色传感器,所述图像处理装置包括:发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;接收组件,用于基于所述指令,从所述图像读取装置接收经由所述黑白传感器所接收到的信息和经由所述彩色传感器所接收到的信息;以及分析组件,用于根据经由所述彩色传感器接收到的信息,对所述原稿中的码图像进行分析。
另外,本发明是一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白传感器和彩色传感器,所述图像处理装置包括:发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;接收组件,用于基于所述指令,从所述图像读取装置接收所述黑白传感器已接收到的信息和所述彩色传感器已接收到的信息;判断组件,用于判断是否使打印装置执行基于所接收到的所述黑白传感器已接收到的信息的打印;以及分析组件,用于使用所接收到的所述黑白传感器已接收到的信息和所接收到的所述彩色传感器已接收到的信息两者,对所述原稿中的码图像进行分析,以便所述判断组件进行判断。
另外,本发明是一种图像读取装置,其与图像处理装置相连接,所述图像处理装置具有用于对原稿中的码图像进行分析的组件,所述图像读取装置包括:传感器,用于接收来自所述原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息;接收组件,用于从所述图像处理装置接收与黑白扫描模式下彩色码图像的检测相关的指令,其中当通过所述接收组件接收到所述指令时,所述彩色图像信息获取组件根据从所述传感器接收到的数据,获取用于检测彩色码图像的彩色图像信息,并将所获取的用于检测彩色码图像的彩色图像信息和在打印时使用的所述黑白图像信息发送至所述图像处理装置。
另外,本发明是一种图像处理装置中的图像处理方法,所述图像处理装置与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理方法包括以下步骤:将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;基于所述指令,从所述图像读取装置接收所述彩色图像信息获取组件已获取的用于检测彩色码图像的彩色图像信息;以及根据接收到的彩色图像信息,对所述原稿中的码图像进行分析。
另外,本发明是一种图像处理装置中的图像处理方法,所述图像处理装置与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理方法包括以下步骤:将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;基于所述指令,从所述图像读取装置接收所述彩色图像信息获取部件已获取的用于检测彩色码图像的彩色图像信息;根据所接收到的彩色图像信息,对所述原稿中的码图像进行分析;以及基于所分析的码图像,判断是否将由所述黑白图像信息获取组件获取的黑白图像信息发送至打印装置。
另外,本发明是一种图像处理装置中的图像处理方法,所述图像处理装置与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白扫描器和彩色扫描器,所述图像处理方法包括以下步骤:将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;基于所述指令,从所述图像读取装置接收经由所述黑白扫描器所接收到的信息和经由所述彩色扫描器所接收到的信息;以及根据经由所述彩色扫描器所接收到的信息,对所述原稿中的码图像进行分析。
另外,本发明是一种图像处理装置中的图像处理方法,所述图像处理装置与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白扫描器和彩色扫描器,所述图像处理方法包括以下步骤:将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;基于所述指令,从所述图像读取装置接收所述黑白传感器已接收到的信息和所述彩色传感器已接收到的信息;使用所接收到的所述黑白传感器已接收到的信息和所接收到的所述彩色传感器已接收到的信息两者,对所述原稿中的码图像进行分析;以及基于所分析的码图像,判断是否使打印装置执行基于所接收到的所述黑白传感器已接收到的信息的打印。
另外,本发明是一种图像读取装置中的图像处理方法,所述图像读取装置与所述图像处理装置相连接,所述图像处理装置具有用于分析原稿中的码图像的组件,所述图像处理方法包括以下步骤:接收步骤,从所述图像处理装置接收与所述黑白扫描模式下彩色码图像的检测相关的指令;在所述接收步骤中接收到所述指令之后,接收来自原稿的反射光并生成从所述原稿读取的数据;对所生成的数据进行图像处理以获取黑白图像信息;对所生成的数据进行图像处理以获取彩色图像信息,其中,根据所生成的数据获取用于检测彩色码图像的彩色图像信息;以及将所获取的用于检测彩色码图像的彩色图像信息以及打印中所使用的黑白图像信息发送至所述图像处理装置。
根据本发明,即使在设置了黑白扫描模式时也可以分析原稿上的彩色码图像,其中在该黑白扫描模式下,对黑白图像信息进行图像处理并将其发送至打印装置。
根据以下(参考附图)对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出本发明的实施例中的图像形成装置的概要结构的图;
图2是示出本发明的实施例中的图像形成装置的内部结构的框图;
图3是示出本发明的实施例中的图像读取装置的详情的框图;
图4是示出本发明的实施例中的嵌入了信息的原稿的示例的图;
图5是示出在本发明的实施例中当禁止复制时出现在操作部中的对话框的图;
图6是例示本发明的实施例中的点的网格的图;
图7是在本发明的实施例中通过网格的移位来表示数据的解释性图;
图8是用于解释本发明的实施例中的复制禁止操作的流程图;
图9是示出本发明的实施例中连接在图像处理装置与图像读取装置之间的数据线缆上的信号的详情的图;
图10是示出本发明的第一实施例中的操作部的画面示例的图;
图11是示出在本发明的实施例中在彩色扫描模式下由图像读取装置向图像处理装置传送的图像数据的波形的图;
图12是示出在本发明的实施例中在黑白扫描模式下由图像读取装置向图像处理装置传送的图像数据的波形的图;
图13是示出在本发明的实施例中当在黑白扫描模式下进行两像素并行传送(two-pixel parallel transfer)时由图像读取装置向图像处理装置传送的图像数据的波形的图;
图14是示出在本发明的第一实施例中由图像读取装置向图像处理装置传送的图像数据的波形的图;
图15是示出在本发明的第三实施例中由图像读取装置向图像处理装置传送的图像数据的波形的图;
图16是示出在本发明的第四实施例中由图像读取装置向图像处理装置传送的图像数据的波形的图;
图17是示出在本发明的第五实施例中由图像读取装置向图像处理装置传送的图像数据的波形的图;
图18是示出本发明的第六实施例中的图像读取装置的结构的框图;
图19是示出本发明的第二实施例中的操作部的画面示例的图;以及
图20是用于解释在本发明的实施例中的在进行了两像素并行传送的黑白扫描模式与彩色扫描模式之间在传送速率上的差异的图。
具体实施方式
以下将参考附图来详细说明本发明的实施例。在以下要说明的附图中,对具有相同功能的部分指定相同的附图标记并省略其的重复说明。
在说明本发明的实施例之前,将说明适合应用于以下实施例的图像形成装置和图像处理装置。首先,说明图像形成装置的结构,然后,按照用于向纸张嵌入信息以防止非法复制的技术和复制中的复制禁止操作的顺序来进行说明。
图像形成装置的结构
图1是示出本发明的实施例中的图像形成装置的概要结构的框图。
附图标记1001表示图像形成装置。控制器部1003是在复制、扫描和打印等操作中控制各个部件并转换和存储图像数据的块。在进行如复制和扫描等操作时,在作为图像读取装置的扫描器部1002中将原稿扫描成图像数据,然后通过扫描图像数据线缆1006将该图像数据传送至控制器部1003。操作部1004是与用户的接口,并且能够进行在控制器部1003控制下的画面显示以及通过键输入和触摸面板向控制器部1003的输入。控制器部1003和操作部1004通过操作部线缆1007相连接。作为打印装置的打印机部1005是将存储在控制器部1003中的图像数据的图像形成在记录纸张上的块。通过打印图像数据线缆1008进行图像数据从控制器部1003至打印机部1005的传送。
上述扫描图像数据线缆1006包括多个总线。因此,控制器部1003经由该多个总线与扫描器部1002相连接。
图2是用于更详细地例示图像形成装置1001的控制器部1003的结构的框图。
CPU 3301基于存储在ROM 3303中的控制程序等,总体地控制控制器部1003中要进行的各种类型的处理,并总体地控制对各个部件的存取。RAM 3302是CPU 3301工作用的工作存储器,并且还是用于临时存储图像数据的存储器。将装置的引导程序等存储在ROM 3303中。HDD 3304是硬盘驱动器并且能够存储系统软件和图像数据。
操作部I/F 3305是将系统总线3307与操作部1004相连接的接口部。操作部I/F 3305从系统总线3007接收要显示在操作部1004中的图像数据并将该图像数据输出至操作部1004,并且将从操作部1004输入的信息输出至系统总线3307。
网络I/F 3306连接至LAN或WAN以及系统总线3307,并且输入和输出信息。附图标记3319表示作为用于发送和接收图像数据的传输路径的图像总线,该图像总线由PCI总线或IEEE1394构成。
扫描器图像处理部3312对经由扫描器I/F 3311从扫描器部1002接收到的图像数据进行校正、处理和编辑。嵌入信息提取部3310从图像数据检测以码图像的形式嵌入的图案,并进行附加信息的提取处理。即,嵌入信息提取部3310分析原稿中的码图像。
压缩部3313接收图像数据并对该图像数据进行压缩。扩展部3315在对数据进行扩展之后将该数据展开成位图图像,然后将该位图图像发送至打印机图像处理部3317。
打印机图像处理部3317接收从扩展部3315发送来的图像数据,并在参考依附至该图像数据的属性数据的同时对图像数据进行图像处理。
图像转换部3314对图像数据进行如旋转、颜色空间转换、二值到多值转换、图像合成以及疏化等的预定转换处理。
当CPU 3301与扫描器部1002的CPU 3401通信时使用扫描器命令I/F 3321。从扫描器部1002发送与是否存在原稿和是否存在错误有关的信息,并且从控制器部1003发送如开始扫描操作、扫描操作和图像处理的设置等的命令。命令包括在控制器I/F部3411中对输出信号的选择。
对扫描器部1002的说明
图3是示出图像形成装置1001的扫描器部1002的详情的框图。
CPU 3401根据存储在ROM 3403中的程序,在使用RAM3402作为工作区域的同时控制扫描器部1002的各部件。原稿灯部3407是照亮待扫描的原稿的灯。马达控制部3408是用于使传感器、给送机构等工作的马达,并且是用于检测位置的传感器并由CPU 3401所控制。
彩色传感器(RGB传感器)3405是接收从由原稿灯部3407照亮的原稿反射来的光的传感器,并将照射至原稿的反射光的强度转换成电信号。存在针对各像素的独立的微传感器,将该微传感器按行排列并且利用该微传感器可以一次读取整个行。例如,对于A4大小的纸张,可以一次读取长边方向(主扫描方向)上的297mm。可以通过在使用用于移动传感器的马达沿短边长方向(副扫描方向)移动彩色传感器3405的同时进行重复读取,获得与一页相对应的图像数据。彩色传感器3405具有针对各像素的R、G和B的独立的传感器。在沿副扫描方向偏移这些传感器的同时将它们按行并排放置。因此,以偏移的定时读取各颜色的数据。获得了24比特即每个传感器8比特的彩色图像数据(彩色图像信息)。即,彩色传感器3405基于所接收到的上述反射光,输出包括各为8比特的R、G和B亮度信号的图像数据。
行间延迟校正部3409是吸收由RGB传感器3405中各颜色的传感器的位置的差异所引起的数据的定时之间的差异的存储器,并且以相同的定时输出同一像素的R、G和B的数据。利用适当的定时和处理内容对该图像数据进行图像处理,然而,根据图像数据的使用目的,由CPU 3401控制对图像进行的处理。
在本发明中,存在将彩色图像数据(彩色图像信息)发送至控制器部1003的彩色扫描模式和发送黑白图像数据(黑白图像信息)的黑白扫描模式,并且发送图像数据所经由的路径在这两个模式之间不同。
在彩色扫描模式下,CPU 3401将来自行间延迟校正部3409的输出发送至彩色图像处理部3410。彩色图像处理部3410是进行用于校正传感器的灵敏度等的伽玛校正和边缘增强等图像处理从而获得优良的彩色图像数据的部件,并且输出彩色图像数据。如上所述,彩色图像处理部3410对从彩色传感器3405接收到的图像信息(亮度信号)进行图像处理以生成彩色图像数据。彩色图像处理部3410将所生成的彩色图像数据输出至数据选择部3413。
另一方面,当选择了黑白扫描模式时,CPU 3401将来自行间延迟校正部3409的输出发送至黑白图像处理部3406。黑白图像处理部3406将彩色传感器3405的输出转换成黑白输出,并进行图像处理以获得优良的黑白图像数据。黑白图像处理部3406将所生成的黑白图像数据输出至数据选择部3413。
通过CPU 3401的控制,在数据选择部3413中,选择所输入的彩色图像数据和黑白图像数据,并在调整定时之后输出。控制器I/F部3411具有用于缓冲输入信号的存储器,并在校正定时和图像数据的对齐之后将该信号发送至控制器部1003。控制器命令I/F 3412由CPU 3401所控制,并且与控制器部1003的CPU3301通信。
图9是示出连接在控制器部1003和扫描器部1002之间的扫描图像数据线缆1006上的信号的详情的图。
在图9中,图像数据总线2506是包括24个总线的图像数据总线。副扫描同步信号2504是在页的头部变为有效的信号。主扫描同步信号2505是表示在主扫描方向上的头部的信号。将主扫描同步信号2505、副扫描同步信号2504和图像数据总线2506输入至触发器2507以对齐定时。将触发器2507的输出与图像时钟信号2503同步,并将其作为图像数据总线2512、副扫描同步信号2510和主扫描同步信号2511而输出至控制器部1003。
在时钟缓冲器2502中对图像时钟信号2509进行波形整形并将其输出至控制器部1003。图像时钟信号2515在缓冲器2513中对从扫描器部1002接收到的图像时钟信号2509进行波形整形。在触发器2514中使从扫描器部1002输出的主扫描同步信号2511、副扫描同步信号2510和图像数据总线2512与图像时钟信号2515同步以对齐定时。将来自触发器2514的输出作为主扫描同步信号2517、副扫描同步信号2516和图像数据总线2518而输入至扫描器图像处理部3312。
通信总线2508是在扫描器部1002的CPU 3401与控制器部1003的CPU 3301之间发送和接收命令的总线。在扫描器部1002中,由控制器命令I/F 3412对通信总线2508的信号和内部总线2501的信号进行转换。类似地,由控制器部1003的扫描器命令I/F 3320对通信总线2508的信号和内部总线3319的信号进行转换。
在本发明的实施例中,如后面将利用图11、图12所述,控制器部1003从扫描器部1002接收图像数据所必需的总线数量在彩色扫描模式下和在黑白扫描模式下是不同的。
图11是示出表示在彩色扫描模式下在扫描器部1002和控制器部1003之间的通信中图像数据的对齐的示例的波形的图。
时钟信号2509是具有固定周期的信号,并且主扫描同步信号2511和图像数据总线2512的数据与时钟信号2509同步。可以每一时钟传送与一个像素相对应的图像数据。将图像数据总线划分成3个组,即比特23~16、比特15~8和比特7~0,各个组分别包括R、G和B的8个比特。在主扫描同步信号2511处于高电平时的图像数据是在主扫描方向上的开始点。
图12是示出表示在黑白扫描模式下在扫描器部1002和控制器部1003之间的通信中图像数据的对齐的示例的波形的图。在该模式下,图像数据是仅8比特的黑白图像数据,并且将该图像数据分配至图像数据总线的比特7~0。未使用图像数据总线的比特23~8。在本发明的实施例中,利用这些未使用的比特来传送用于检测彩色码图像的彩色图像数据。
接着,将使用图13来说明两像素并行传送。
如前所述,在黑白扫描模式下使用8个比特,并且数据量是在使用24个比特的彩色扫描模式下的数据量的三分之一。因此,存在以下类型的装置:与彩色扫描模式下的传送速率相比,黑白扫描模式下的传送速率增加。然而,改变时钟信号的频率导致时钟电路复杂化和成本增加的问题。因此,作为用于以与彩色扫描模式下的时钟信号频率相同的时钟信号频率高速进行数据传送的技术,提出了两像素并行传送。
图13是示出当设置了黑白扫描模式时在从扫描器部1002至控制器部1003的两像素并行传送的情况下的波形的图。
可以每一时钟传送与两个像素相对应的图像数据。将黑白图像数据的偶数编号的像素分配至图像数据总线的比特7~0,并且将奇数编号的像素分配至图像数据总线的比特15~8。结果,将在图12所示的实施例中的时间的一半时间内完成传送。进行分配,从而使用设置在扫描器部1002的控制器I/F部3411中的存储器在一个时钟内发送与两个像素相对应的数据。
然而,在如图13所示进行两像素并行传送的情况下,同样未使用图像数据总线的比特23~16。另外,在大多数情况下,在通过进行两像素并行传送使数据传送速率加倍的同时扫描率以约1.2的系数增加。这是因为在打印机部中存在对图像处理速率、马达的性能以及图像形成速率的限制。结果,与在彩色扫描模式下相比,在图像数据传送时页和页之间存在较大的时间余量。
即,在黑白扫描模式下,存在未使用的图像数据总线,因而可以使用未使用的图像数据总线进行两像素并行传送。通过在黑白扫描模式下进行两像素并行传送,使得在彩色扫描模式下和在黑白扫描模式下,控制器部1003从扫描器部1002接收图像数据所必需的总线的数据传送速率不同。即,在设置了彩色扫描模式时的数据传送速率比在设置了黑白扫描模式时的数据传送速率要高。另一方面,在彩色扫描模式下和在黑白扫描模式下,扫描一页所采用的扫描速率的差异不像如上所述的传送速率的差异那么大。因此,在进行上述黑白扫描模式时,由于在彩色扫描模式下和在使用了两像素并行传送的黑白扫描模式下总线的数据传送速率上的差异,因此与在进行彩色扫描模式时相比,生成了上述较大的时间余量。即,在进行两像素并行传送的黑白扫描模式下,与在彩色扫描模式下相比,在通过扫描某一页所获得的图像数据的传送完成时与开始下一页的扫描时之间,生成了较大的时间余量。
在本发明的实施例中,将该时间余量用于传送用于检测彩色码图像的彩色图像数据。
如上说明了图像形成装置1001的内部结构,接着将说明用于将信息嵌入图4所示的图像数据的技术。
信息嵌入技术
作为根据本发明实施例的信息嵌入技术的优选例子,将说明LVBC(Low Visibility Barcodes,低可视性条码)。
上述LVBC是用于通过偏移按网格图案布置的多个小点的位置来嵌入附加信息的技术。为了从使用LVBC的码图像提取嵌入信息,需要高的点检测率。具体地,当将该技术应用于如复制禁止等安全功能时,要求的水平高。另一方面,添加了原稿上不存在的点,因此,期望这些点尽可能地在视觉上不明显。
作为使由此嵌入的点在视觉上不明显的方法,提出了在形成码图像时使用不如黑色明显的青色、黄色等作为在原稿上形成图像的点的颜色的方法。这样,通过在LVBC中采用彩色点,可以将在视觉上不明显的码图像嵌入原稿中。
图4是示出嵌入了LVBC的原稿的示例的图像图。
附图标记22表示作为原稿的整个记录介质,并且附图标记21表示原稿22的放大图。在放大图21中,除原本应当绘制的图像以外还看见了貌似随意嵌入的多个点(例如,点23)。使用该点,嵌入期望要嵌入打印原稿中的数字数据。在下文,将要嵌入的信息(码图像信息)称为附加信息。
接着,将说明已使用LVBC嵌入了附加信息的图像。
在LVBC的情况下,除原本应当打印在记录纸张上的图像以外,嵌入了称为网格的点图案。在图6中,点111示出构成网格的网格点。附图标记112表示网格,并且网格112自身是以等间隔在纵向和横向上间隔开的点的集合。
将附加信息作为小于或等于固定大小的二进制(二值)数据而输入。通过构成网格的点在垂直、水平和对角8个方向上(相对中心位置)的移位来实现附加信息的嵌入。
图7是示出将二进制数据010111110011b作为附加信息而嵌入的示例的图。将数据010111110011b划分成各3比特的组,即010、111、110和011。此外,对3比特的各个组进行十进制转换并将它们转换成2、7、6和3。如在图7的上图中所示,可以通过使构成网格的各点在垂直、水平和对角8个方向中与数值相对应的方向上移位来表示信息。在这种情况下,可以通过将点移位至右上、右下、正下和左来嵌入信息2、7、6和3。通过重复这种处理,将附加信息嵌入记录介质(记录纸张等)。通过进一步多次将表示附加信息的点嵌入记录介质,增加了冗余度并且由此可以提高抵抗图像的错误识别以及记录介质的玷污、折皱以及部分破坏的可靠性。
在本发明中,以LVBC为例子进行了说明,然而本发明可适用于其它嵌入方法。
在黑白扫描模式下检测彩色点
接着,将使用表1来说明当在黑白扫描模式下检测彩色点时出现的问题。
表1
 
原稿上的颜色     在彩色扫描模式下读取的值             在黑白扫描模式下读取的值            
白色 R=255,G=255,B=255 K=255
黑色 R=0,G=0,B=0 K=0
黄色 R=255,G=255,B=0 K=170
青色 R=255,G=0,B=255 K=170
在说明上述问题之前,将说明黑白扫描模式。
在本发明的实施例中,作为能够进行黑白扫描模式的图像读取装置的扫描器可以主要采用以下两个结构。
第一扫描器结构:如图3所示的结构,在该结构中,在黑白扫描模式下,根据由内置于扫描器中的并能够输出R、G和B颜色亮度信号的彩色传感器获取的输出,生成黑白图像数据。利用第一扫描器结构,在扫描器单元中进行从彩色扫描器的输出到黑白图像数据的转换处理。这具有以下优势:提高了单元的独立性,并且可以减轻在图像处理装置和图像形成装置中进行的处理的负担。
第二扫描器结构:如后面要说明的图18所示的结构,在该结构中,提供用于彩色扫描模式的彩色传感器和用于黑白扫描模式的黑白传感器两者。利用该结构,可以通过在黑白扫描模式下使用专用传感器来提高图像质量并减轻处理的负担。
用于读取原稿的扫描器可以包括两个模式,即用于获得彩色图像数据的彩色扫描模式和用于获得黑白图像数据的黑白扫描模式。通过在黑白扫描模式下进行复制操作,由于在形成图像时打印机部仅使用黑色调色剂和黑色墨,因此可以抑制运行成本。
结果,如果考虑成本,则可能存在如下情况:优选在黑白扫描模式下扫描嵌入了如上所述使用彩色点从而使其不那么明显的LVBC的原稿。此外,在使用彩色点的LVBC中,这些点原本就不明显,并且当将点嵌入黑白图像的原稿中时,可能存在尝试扫描的用户未注意到形成了彩色点的情况。在这种情况下,即使用户不注重成本,该用户选择黑白扫描模式的可能性也高。
如上所述,在扫描嵌入了使用彩色点的LVBC的原稿时,结果控制器部1003在黑白扫描模式下检测彩色点,并且这可能导致以下问题。
对由扫描器部1002读取的图像数据进行如前所述的伽玛转换和边缘增强等复杂的图像处理。此外,这还适用于彩色到黑白的转换。这里,为了解释当在黑白扫描模式下读取彩色点时的问题,以简单化的形式给出说明。从该说明中省略了如伽玛转换和边缘增强等复杂的图像处理。另外,将利用最简单方法的例子说明彩色到黑白的转换的算法。即,如(等式1)所示简单地计算R、G和B的平均。
K=(R+G+B)/3          (等式1)
这里,分别假定黑白的值是K(黑色)并且彩色的值是R(红色)、G(绿色)和B(蓝色)。假定K、R、G和B分别具有8个比特并且值为0~255。
在彩色扫描模式下将原稿上的白色部分读取为R=255、G=255和B=255。在黑白扫描模式下,通过使用上述等式1获得K=255。这是最大亮度值。在彩色扫描模式下将原稿上的黑色部分读取为R=0、G=0和B=0。在黑白扫描模式下,K=0。这是最小亮度值。
当采用黑色点时,值越接近0,将该点的部分识别为点的可能性越高。
另一方面,在彩色扫描模式下将原稿上的黄色部分读取为R=255、G=255和B=0。在黑白扫描模式下,通过使用(等式1)获得K=170。类似地,在彩色扫描模式下将青色部分读取为R=255、G=0和B=255。在黑白扫描模式下,通过使用(等式1)获得K=170(参考表1)。
当在黑白扫描模式下读取黄色点和青色点时,K=170,这与黑色点的K=0相比是非常大的数字,因此出现了检测率降低的问题。
这里,如果代替K,将B的值用于检测黄色点并将G的值用于检测青色点,则值为0并且检测率与黑色点的检测率相同。
复制防止操作的概要
接着,将简要说明图像形成装置中的复制防止操作。
当用户使用图像形成装置1001尝试复制如图4所示的包含复制禁止信息的打印输出品时,图像形成装置1001感测到要复制的对象包括复制禁止信息并控制复制操作。例如,当要复制的对象中嵌入了表示复制禁止的信息时,图像形成装置1001中止复制操作。因此,防止了对重要文件的复制。
复制时的复制禁止操作
接着,将使用图8的流程图来说明实现防止非法复制的功能的图像形成装置1001中的复制操作。
当用户给出开始复制的指令时,扫描器部1002从放置在扫描器部1002的平板上的原稿读取图像数据,并将所读取的图像数据发送至嵌入信息提取部3310(S1801)。嵌入信息提取部3310在S1803中通过使用前述信息嵌入技术在从扫描器部1002接收到的图像数据上提取附加信息,并在S1804中判断是否嵌入了表示复制禁止的附加信息。即,嵌入信息提取部3310判断图像数据是否包括附加信息(码图像信息),并且当判断结果为肯定时,嵌入信息提取部3310提取附加信息。然后,嵌入信息提取部3310基于所提取出的附加信息,判断所提取出的附加信息是否是表示复制禁止的信息。当未提取出附加信息时,继续打印处理。
当提取出复制禁止时(步骤S1804中为“是”),控制器部1003的CPU 2201判断为中止复制操作,并且在S1812中中止复制操作。此时,CPU 2201在操作部1004中显示如图5所示的对话框,并通知用户由于非法复制操作因而不进行打印(S1812)。如果在S1804中不禁止复制,则在S1810中,CPU 2201打印图像数据以继续复制操作。当目标页是最后一页时,在S1811中,CPU 2201结束复制操作。当目标页不是最后一页时,CPU 2201使过程返回S1801,并进行控制以读取下一页。
图5是前述要在S1812中显示的画面的示例。显示消息对话框41以通知用户中止了复制操作。
接着参考附图,使用适合应用于上述本发明的一个实施例的系统的结构,说明本发明的实施例。
第一实施例
第一实施例以使用如图3所示的具有彩色传感器3405的扫描器部1002的实施例为前提。将说明以下示例:如图12所示,当在黑白扫描模式下每一时钟传送一个像素时,将图像数据总线的未使用的比特23~16用于传送用于检测彩色码图像的彩色图像数据。在本实施例中,用于检测彩色码图像的彩色图像数据利用单色。
图10是在本实施例中对彩色码图像的检测进行设置的操作部1004的画面示例。在用于对在黑白扫描模式下彩色码图像的检测进行设置的画面2401中,单选按钮2402用于从三个选项中选择一个。在图10中,选择了青色点的检测的最优化。其它选项是黄色点的检测的最优化和不进行彩色码图像的最优化。即,在本实施例中,LVBC由青色点构成,并且当在黑白扫描模式下期望检测青色点时,推荐选择“青色点的最优化”。类似地,当期望检测黄色点时,推荐选择“黄色点的最优化”。
这样,用户利用单选按钮2402所选择的选项是对彩色码图像的检测的设置。即,当用户利用单选按钮2402选择期望选项并通过操作操作部1004按下OK按钮2403时,将对彩色码图像的检测的设置保存在HDD 3304中。在切断并再接通装置的电源后也可以维持该设置。取消按钮2404取消设置画面中的设置。
即,在本实施例中,在向用户显示图10所示的对话框之前,控制器部1003在操作部1004上显示对话框以确定在彩色扫描模式下运行还是在黑白扫描模式下运行。即,基于用户通过操作部1004的输入,设置彩色扫描模式和黑白扫描模式中用户选择并指定的模式。
当用户操作操作部1004并选择在黑白扫描模式下运行时,控制器部1003根据该选择在操作部1004上显示图10所示的对话框。此时,当用户通过操作部1004输入与黑白扫描模式下彩色点的检测相关的指令时,控制器部1003接收输入并将与用户所输入的指令相关的命令发送至扫描器部1002。在图10的情况下,控制器部1003经由通信总线2508将指示“青色点的最优化”的命令发送至扫描器部1002。
接着,将说明已从控制器部1003接收到与在黑白扫描模式下彩色点的检测相关的指令(命令)的扫描器部1002的操作。
在本实施例中,当进行青色点的最优化时,选择作为青色的补色的R作为用于检测彩色码图像的彩色图像数据。可选地,当进行黄色点的最优化时,选择作为黄色的补色的B。将以这种方式选择出的用于检测彩色码图像的彩色图像数据连同黑白图像数据一起从扫描器部1002发送至控制器部1003。
在本实施例中,将与针对彩色码图像期望检测的颜色有关的信息作为命令从控制器部发送至扫描器部,并且推荐预先设置上述期望检测的颜色以及用于检测彩色码图像的彩色图像数据的颜色。即,在本实施例中,彩色传感器3405输出R、G和B三种颜色的数据(亮度信号),并且将期望检测的彩色码图像的颜色与R、G和B三种颜色的数据相关联。通过这种关联,扫描器部1002在通过分析来自控制器部1003的命令而获取期望检测的颜色时,可以获取与用于检测彩色码图像的颜色相对应的彩色图像数据。在本实施例中,用于检测彩色码图像的彩色图像数据是R、G和B中与期望检测的颜色相对应的任一个的彩色图像数据。
另一方面,当不进行彩色点的最优化时,不传送用于检测彩色码图像的彩色数据。即,仅将黑白图像数据从扫描器部1002发送至控制器部1003。
使用先前说明的图3,说明当如画面中所示进行青色点的最优化时的图像数据流。
当经由通信总线2508接收到指示进行“青色点的最优化”的命令时,扫描器部1002驱动马达控制部3408和原稿灯部3407,并扫描原稿。由于该扫描,彩色传感器3405接收从原稿反射来的光,并输出R、G和B各颜色的亮度信号。
在彩色图像处理部3410中对从彩色传感器3405传送至行间延迟校正部3409的数据进行图像数据。这里,彩色图像处理部3410从自彩色传感器3405所获取的亮度信号中选择R的亮度信号作为用于检测彩色码图像的彩色图像数据(彩色数据),并进行边缘增强处理以适于检测彩色码图像。此时,还可以在彩色图像处理部3410中将从彩色传感器3405输出的R、G和B颜色的亮度信号各自转换成彩色图像数据,并且在转换之后仅提取R的彩色图像数据作为彩色数据。即,扫描器部1002根据从彩色传感器3405获得的彩色输出,生成彩色数据。
同时,行间延迟校正部3409还将输出至彩色图像处理部3410的数据(亮度信号)输出至黑白图像处理部3406,并且也在黑白图像处理部3406中进行图像处理。即,黑白图像处理部3406根据从彩色传感器3405获得的彩色输出,生成黑白图像数据。
数据选择部3413将黑白图像数据分配至图像数据总线2512的比特7~0,将彩色数据分配至图像数据总线2512的比特23~16,然后将该数据发送至控制器部1003。
控制器部1003的嵌入信息提取部3310使用图像数据总线2512的比特23~16检测彩色码图像,并使用图像数据总线2512的比特7~0检测黑白码图像。
接着,图14是示出在本实施例中要从扫描器部1002发送至控制器部1003的图像数据的波形的示例的图。如从图14可以看出,图像数据总线2512的比特23~16是用于检测彩色码图像的彩色图像数据。与黑白图像数据同步地传送彩色数据。在以这种方式传送的图像数据中,黑白图像数据用于打印,然而,在打印中不使用用于检测彩色码图像的彩色图像数据。在本实施例中,在黑白扫描时要从扫描器部1002发送至控制器部1003的彩色图像数据仅是用于检测彩色码图像的图像数据,并且实际上该彩色图像数据与打印无关。因此,打印结果是黑白图像,并且可以实现作为黑白扫描模式的优势的降低运行成本的目标。
控制器部1003根据上述用于检测彩色码图像的彩色图像数据和黑白图像数据两者分析原稿中的码图像。即,在本实施例中,设置了黑白扫描模式并且在打印时使用黑白图像数据,然而为了分析码图像,使用了黑白图像数据和用于检测彩色码图像的彩色图像数据两者。结果,即使在码图像是彩色图像时,也可以在黑白扫描模式下高精确度地执行对码图像的分析。
然后,当通过在黑白扫描模式下分析码图像所获得的附加信息是与复制禁止有关的信息时,控制器部1003判断为不进行基于黑白图像数据的打印。即,控制器部1003在打印黑白图像数据时,使用黑白图像数据和用于检测彩色码图像的彩色图像数据来分析原稿中的码图像,并基于分析结果判断是否进行打印。因此,可以将附加信息中所包括的指令反映在图像形成操作中。
这样,扫描器部1002根据控制器部1003已发送至扫描器部1002的与在黑白扫描模式下彩色点(彩色码图像)的检测相关的指令,进行对上述用于检测彩色码图像的彩色图像数据的获取操作。结果,即使在设置了黑白扫描模式时,控制器部1003也控制扫描器部1002以接收用于分析彩色码图像的彩色图像数据。
在本实施例中,利用了如下事实:在彩色扫描模式下控制器部从扫描器部接收彩色图像数据所必需的总线数量大于在黑白扫描模式下接收黑白图像数据所必需的总线数量。即,通过利用前述总线数量的差异并使用在黑白扫描模式下未使用的总线,即扫描I/F的未使用的信号,进行用于检测彩色码图像的彩色图像数据的发送。因此,当在黑白扫描模式下使用彩色图像数据以增加码图像的识别率时,不需要如增加扫描I/F信号的数量等的硬件结构上的修改。因此,可以使用传统的硬件结构适当地进行对彩色码图像的检测。
如上所述,此外在黑白扫描模式下,使得可以通过使用未使用的图像数据总线发送彩色图像数据并提取嵌入信息来检测彩色码图像。黑白扫描操作不会导致如图像质量劣化和性能降低等问题。
第二实施例
在第一实施例中,说明了使用单色作为用于检测彩色码图像的彩色图像数据的示例。在该例子中,进行青色点或黄色点的最优化,因此,可以适当地检测与所选择的颜色相对应的彩色点。然而,在使用彩色点的LVBC中,可能存在使用青色和黄色两种颜色的点作为彩色点的情况。结果,优选还增加在检测第一实施例中未选择的彩色码图像时的检测率。
在本实施例中,将说明如下例子:在第一实施例的结构中,传送通过对由彩色传感器所获取的R和B的信号进行运算而获得的彩色图像数据,从而实现青色点检测和黄色点检测两者共存。
图19是在本实施例中对彩色码图像的检测进行设置的操作部1004的画面示例。在用于对在黑白扫描模式下彩色码图像的检测进行设置的画面2601中,单选按钮2602用于从两个选项中选择一个。在图19中,选择了彩色码图像的检测的最优化。另一选项是不进行彩色码图像的检测的最优化。通过按下OK按钮2603,将彩色码图像的检测的设置保存在HDD 3304中。可以在切断并再接通装置的电源之后维持该设置。取消按钮2604中止设置画面中的设置。
即,当用户如图19所示输入时,控制器部1003将指示“进行彩色点的最优化”的命令(与黑白扫描模式下彩色码图像的检测相关的指令)发送至扫描器单元1002。
在本实施例中,当进行彩色码图像的最优化时,生成实现青色点检测和黄色点检测两者共存的彩色图像数据(用于检测彩色码图像的彩色图像数据)。进行对用于检测青色点的R和用于检测黄色点的B的运算。这里,将具有较大的数值的R或B看作为彩色图像数据。当扫描包括青色点的原稿时以及当扫描包括黄色点的原稿时可以获得大致相同的数值,并且使得能够对这两种点进行检测。
即,彩色图像处理部3410从由彩色传感器3405获取的R、G和B的全部数据中取出R和B的数据。接着,彩色图像处理部3410对具有较大数值的颜色(具有较高浓度的颜色,即具有较小亮度值的颜色)的值进行计算。即,彩色图像处理部3410将全部像素的R的亮度值的平均值与B的亮度值的平均值进行比较。
如上所述,在第二实施例中,在黑白扫描模式下允许青色点检测和黄色点检测两者共存。
在本实施例中,在黑白扫描模式下允许对作为彩色码图像的青色点和黄色点的检测两者共存不是必要的。在本实施例中,更重要的是使得在彩色码图像包括两种或更多种颜色时也可以适当地检测彩色码图像。结果,通过对从彩色传感器3405输出的R、G和B的各个数据(彩色数据;亮度信号)中两种或更多种颜色的数据进行运算,得出用于检测彩色码图像的彩色图像数据。
第三实施例
在第一实施例中,说明了在每一时钟传送一个像素的黑白扫描模式下传送彩色数据的示例。在本实施例中,将说明以下示例:如图13所示,当在黑白扫描模式下每一时钟传送两个像素时,未使用的图像数据总线的比特23~16用于传送用于检测彩色码图像的彩色图像数据。在本实施例中,用于检测彩色码图像的彩色图像数据利用单色。
图15是示出在本实施例中要从扫描器部1002发送至控制器部1003的图像数据的波形的示例的图。
在图15中,将用于检测彩色码图像的彩色图像数据分配至图像数据总线2512的比特23~16。与黑白图像数据同步地传送用于检测彩色码图像的彩色图像数据。在黑白图像数据中,每一时钟传送两个像素。即,在本实施例中,为了方便在控制器部1003中黑白图像数据与彩色图像数据之间的分离,使用于检测彩色码图像的彩色图像数据与黑白图像数据同步。然而,未使用的图像数据总线是8个比特,并因此,在彩色图像数据中,将4个比特分配至1个像素,并且分配了与两个像素相对应的8个比特。
扫描器部1002使用数据选择部3413中的存储器,并且在上述用于检测彩色码图像的彩色图像数据中分配了与两个像素相对应的8个比特。当将单色8比特彩色图像数据转换成4比特数据时,从具有较大权重的最高有效位(most significant bits,MSB)中选择4个比特,并且丢弃其余4个比特。
如上所述,在进行两像素并行传送的黑白扫描模式下,也可以通过使用未使用的图像数据总线发送彩色图像数据并提取嵌入信息来检测彩色码图像。8比特数据10000000表示128,并且该数据的MSB的4个比特对应于前一半中的1000。即,选择影响大的比特。
第四实施例
在第三实施例中,说明了以两像素并行传送的形式发送彩色数据的示例。在本实施例中,作为其它方法,将说明通过利用未使用的时间来发送用于检测彩色码图像的彩色图像数据的示例。如图20所述,在大多数情况下,黑白扫描模式下的扫描速率是彩色扫描模式下的扫描速率的约1.2倍。因此,存在未使用的时间(时间余量)。例如,当假定在黑白扫描模式下一次扫描需要1秒时,在彩色扫描模式下将需要约1.2秒。结果,在相应的彩色扫描中,在约1.2秒内传送全部像素的数据。另一方面,在黑白扫描中,以两像素平行的方式传送数据,因此,可以在约0.6秒内传送全部像素的数据。因此,作为相减的结果存在约0.4秒的时间余量。根据在黑白扫描模式下和在彩色扫描模式下将图像数据从扫描器部传送至控制器部所需要的总线的数据传送速率之间的差,产生该未使用的时间。
图16是示出在本实施例中要从扫描器部1002发送至控制器部1003的图像数据的波形的示例的图。
在图16中,使用图像数据总线的比特15~0传送黑白图像数据。然后,扫描器部1002在已经在两个时钟内发送了与4个像素相对应的黑白图像数据的时钟(K0、K1、K2和K3)之后的时钟(D1+D3和D0+D4)内,发送与4个像素相对应的用于检测彩色码图像的彩色图像数据。结果,在三个时钟内发送了与四个像素相对应的黑白图像数据以及用于检测彩色码图像的彩色图像数据。然而,即使在这种情况下,扫描速率也是彩色扫描模式下的扫描速率的1.25倍。结果,当黑白扫描模式下的扫描速率是彩色扫描模式下的扫描速率的1.25倍或以下时,在应用本实施例时图像数据的传送时间不太可能增加。
在本实施例中,与在第三实施例中一样,扫描器部1002也向用于检测彩色码图像的彩色图像数据中的每一像素分配4个比特,分配与两个像素相对应的8个比特。即,与在第三实施例中一样,使用数据选择部3413中的存储器进行分配。当将单色8比特彩色图像数据转换成4比特数据时,从具有较大权重的最高有效位(MSB)中选择4个比特,并且丢弃其余4个比特。
在将图16所示的波形(图像数据)输入至控制器部1003的扫描器图像处理部3312之后,扫描器图像处理部3312从所输入的图像数据分离作为扫描图像数据的黑白图像数据和彩色图像数据。
扫描器图像处理部3312具有由主扫描同步信号清零的三进制计数器(ternary counter)。该三进制计数器与图像时钟2515同步地按0、1和2的顺序使计数递增,并且2之后计数为0。当三进制计数器的值是0和1时,将该数据识别为扫描图像数据,并且在对该扫描图像数据进行图像处理之后,将其传送至压缩部3313。当三进制计数器的值是2时,判断为该数据是彩色图像数据,并且将其传送至嵌入信息提取部3310。
如上所述,在本实施例中,通过积极使用上述在设置了黑白扫描模式时的数据传送速率不同于在设置了彩色扫描模式时的数据传送速率的事实,在不增加信号数量的情况下发送黑白图像数据和用于检测彩色码图像的彩色图像数据。由扫描器部1002根据从控制器部1003发送至扫描器部1002的命令进行该发送。结果,在本实施例中,控制器部1003控制扫描器部1002,以使用根据数据传送速率的差异而生成的时间从扫描器部1002接收用于分析彩色码图像的彩色图像数据。
如上所述,在以与第三实施例中的方法不同的方法进行两像素并行传送的黑白扫描模式下,也可以通过使用未使用的图像数据总线发送彩色图像数据并提取嵌入信息来检测彩色码图像。
第五实施例
在第三实施例和第四实施例中,说明了以两像素并行传送的形式发送用于检测彩色码图像的彩色图像数据的示例。在这些实施例中,存在由于彩色图像数据的比特数减少为4个因而彩色码图像的检测率可能降低的可能性。因此,在本实施例中,将说明将彩色数据的比特数设置为每像素8个的示例。这里,将本实施例与第三实施例和第四实施例进行比较。首先,在第三实施例中,未利用未使用的时间。另一方面,在第四实施例中,未使用图像数据总线的比特23~16。在本实施例中,积极地利用它们两者以传送用于检测彩色码图像的彩色图像数据。
图17是示出在本实施例中要从扫描器部1002传送至控制器部1003的图像数据的波形的示例的图。
在图17中,将用于检测彩色码图像的彩色图像数据分配至图像数据总线的比特23~16。结果,扫描器部1002可以在两个时钟内传送与4个像素相对应的黑白图像数据以及与两个像素相对应的用于检测彩色码图像的彩色图像数据。在下一时钟内使用图像数据总线的比特15~0来传送与其余两个像素相对应的用于检测彩色码图像的彩色图像数据。由于该原因,与在第四实施例中一样,可以在三个时钟内传送四个像素。
在将图17所示的波形(图像数据)输入至控制器部1003的扫描器图像处理部3312之后,扫描器图像处理部3312从所输入的图像数据分离作为扫描图像数据的黑白图像数据和彩色图像数据。
与在第四实施例中一样,扫描器图像处理部3312具有由主扫描同步信号清零的三进制计数器。当三进制计数器的值是0和1时,将比特15~0识别为扫描图像数据,并且在对其进行图像处理之后,将其传送至压缩部3313。将比特23~16确定为彩色图像数据并将其传送至嵌入信息提取部3310。当三进制计数器的值是2时,判断为是与两个像素相对应的彩色图像数据并将其传送至嵌入信息提取部3310。
如上所述,在本实施例中,扫描器部1002在不增加信号数量的情况下通过在黑白扫描模式下积极使用未使用的图像数据总线和未使用的时间,发送黑白图像数据和用于检测彩色码图像的彩色图像数据。由扫描器部1002根据从控制器部1003发送至扫描器部1002的命令进行该发送。结果,在本实施例中,控制器部1003控制扫描器部1002,从而使用以下的黑白扫描模式时与彩色扫描模式时之间的两个差异从扫描器部1002接收用于检测彩色码图像的彩色图像数据。第一差异在于图像数据总线的数量,并且第二差异在于数据传送速率。
如上所述,在进行两像素并行传送的黑白扫描模式下,还可以使用未使用的图像数据总线和未使用的时间发送每像素8比特的用于检测彩色码图像的彩色图像数据。由于该原因,使得可以通过提取嵌入信息来检测彩色码图像。
第六实施例
在第一实施例至第五实施例中,说明了扫描器部1002仅具有彩色传感器的装置。然而,存在与当将彩色图像数据转换成黑白图像数据时相比,在使用输出黑白图像数据的黑白传感器时图像质量提高的可能性,因此存在具有彩色传感器和黑白传感器两者的扫描器装置。在这种装置中,图像数据流有所不同并因此将说明本实施例与前述实施例的不同之处。
图18是示出本实施例的扫描器部1002的内部结构的框图。在本实施例中,除图3所示的结构以外,添加了黑白传感器3501。在扫描期间,黑白扫描器3501与彩色扫描器3405一体化地移动。在校正彩色图像数据的行间延迟的行间延迟校正部3409中,进行延迟以与黑白图像数据同步。将黑白传感器3501输出的黑白图像数据输入至黑白图像处理部3406。后续操作与在第一实施例至第五实施例中的操作相同。
如上所述,根据本发明的实施例,当在黑白扫描模式下进行扫描时,也可以通过利用未使用的总线和时间同时获得用于检测彩色码图像的彩色图像数据,并且使得可以检测彩色码图像。
其它实施例
本发明不仅可应用于由多个装置(例如,计算机、接口装置、读取器和打印机等)构成的系统,而且可应用于由仅一个装置构成的装置(合成装置、打印机和传真装置等)。
以下处理方法也包括在上述实施例的范围中:将用于使前述实施例中的结构工作以实现前述实施例的功能的程序存储在记录介质中,并将存储在记录介质中的程序作为代码而读取并在计算机中执行该程序。即,计算机可读记录介质也包括在实施例中。此外,不仅存储有前述计算机程序的记录介质包括在上述实施例中而且这些计算机程序自身也包括在上述实施例中。
可以使用以下作为记录介质,例如:软(floppy,注册商标)盘、硬盘、光盘、磁光盘、CD-ROM、磁带、非易失性存储卡和ROM。
此外,不限于由存储在前述记录介质中的程序单独进行处理的那些,运行在OS上并且与其它软件和扩展板协作进行前述实施例中的操作的那些也包括在前述实施例的范围中。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改以及等同结构和功能。

Claims (18)

1.一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理装置包括:
发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;
接收组件,用于基于所述指令,从所述图像读取装置接收由所述彩色图像信息获取组件获取的用于检测彩色码图像的彩色图像信息;以及
分析组件,用于根据所接收到的彩色图像信息,对所述原稿中的码图像进行分析。
2.根据权利要求1所述的图像处理装置,其特征在于,
所述码图像中所包括的附加信息是与是否将从所述图像读取装置传送来的图像信息输出至打印装置相关的信息,以及
为了判断是否将由所述黑白图像信息获取组件获取的所述黑白图像信息输出至所述打印装置,使用由所述分析组件进行分析的码图像。
3.根据权利要求1所述的图像处理装置,其特征在于,
在打印中使用了所述分析组件对所述原稿中的所述码图像进行分析所使用的所述黑白图像信息,而在打印中未使用所述彩色图像信息。
4.一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理装置包括:
发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;
接收组件,用于基于所述指令,从所述图像读取装置接收由所述彩色图像信息获取组件获取的用于检测彩色码图像的彩色图像信息;
判断组件,用于判断是否将由所述黑白图像信息获取组件获取的所述黑白图像信息输出至打印装置;以及
分析组件,用于根据所接收到的彩色图像信息,对所述原稿中的码图像进行分析,以便所述判断组件进行判断。
5.一种图像处理装置,其控制图像读取装置,所述图像读取装置具有用于接收来自原稿的反射光的传感器,所述图像处理装置包括:
设置组件,用于设置黑白扫描模式和彩色扫描模式中用户选择并指定的模式,其中,在所述黑白扫描模式下,对从所述传感器接收到的图像信息进行图像处理,将所述图像信息转换成黑白图像信息,并将所述黑白图像信息发送至打印装置,在所述彩色扫描模式下,对从所述传感器接收到的图像信息进行图像处理,并将彩色图像信息发送至所述打印装置;以及
控制组件,用于控制所述图像读取装置,使得即使当所述设置组件设置了所述黑白扫描模式时,也能够从所述传感器接收用于检测彩色码图像的彩色图像信息,以对打印在所述原稿上的码图像进行分析。
6.根据权利要求5所述的图像处理装置,其特征在于,
所述图像处理装置经由多个总线与所述图像读取装置相连接,
当所述设置组件设置了所述彩色扫描模式时从所述图像读取装置接收彩色图像信息所必需的总线数量大于当所述设置组件设置了所述黑白扫描模式时从所述图像读取装置接收黑白图像信息所必需的总线数量,以及
当设置了所述黑白扫描模式时,所述控制组件控制所述图像读取装置,使得使用如下数量的总线从所述图像读取装置接收彩色图像信息:该数量与当设置了所述彩色扫描模式时进行接收所必需的总线数量与当设置了所述黑白扫描模式时进行接收所必需的总线数量之间的差相对应。
7.根据权利要求5所述的图像处理装置,其特征在于,
所述图像处理装置经由多个总线与所述图像读取装置相连接,
当所述设置组件设置了所述彩色扫描模式时从所述图像读取装置接收彩色图像信息所必需的总线的数据传送速率高于当所述设置组件设置了所述黑白扫描模式时从所述图像读取装置接收黑白图像信息所必需的总线的数据传送速率,以及
当设置了所述黑白扫描模式时,所述控制组件控制所述图像读取装置,使得使用如下时间从所述图像读取装置接收彩色图像信息:该时间由当设置了所述彩色扫描模式时进行接收所必需的数据传送速率与当设置了所述黑白扫描模式时进行接收所必需的数据传送速率之间的差所生成。
8.根据权利要求5所述的图像处理装置,其特征在于,
所述图像处理装置经由多个总线与所述图像读取装置相连接,
当所述设置组件设置了所述彩色扫描模式时从所述图像读取装置接收彩色图像信息所必需的总线数量大于当所述设置组件设置了所述黑白扫描模式时从所述图像读取装置接收黑白图像信息所必需的总线数量,
当所述设置组件设置了所述彩色扫描模式时从所述图像读取装置接收彩色图像信息所必需的总线的数据传送速率高于当所述设置组件设置了所述黑白扫描模式时从所述图像读取装置接收黑白图像信息所必需的总线的数据传送速率,以及
当设置了所述黑白扫描模式时,所述控制组件控制所述图像读取装置,使得使用如下数量的总线和如下时间从所述图像读取装置接收彩色图像信息:该数量与当设置了所述彩色扫描模式时进行接收所必需的总线数量和当设置了所述黑白扫描模式时进行接收所必需的总线数量之间的差相对应,该时间由当设置了所述彩色扫描模式时进行接收所必需的数据传送速率与当设置了所述黑白扫描模式时进行接收所必需的数据传送速率之间的差所生成。
9.根据权利要求5所述的图像处理装置,其特征在于,
所述传感器输出R、G和B三种颜色的彩色数据,并且所述彩色图像信息是R、G和B中的任一个。
10.根据权利要求5所述的图像处理装置,其特征在于,
所述传感器输出R、G和B三种颜色的彩色数据,并且所述彩色图像信息是通过对R、G和B中的两种或更多种颜色进行运算所获得的。
11.根据权利要求5所述的图像处理装置,其特征在于,
所述传感器包括输出彩色数据的彩色传感器和输出黑白数据的黑白传感器,以及
当设置了所述黑白扫描模式时,将根据从所述黑白传感器输出的所述黑白数据通过图像处理所生成的黑白图像信息以及根据从所述彩色传感器输出的所述彩色数据通过图像处理所生成的彩色图像信息发送至所述图像处理装置。
12.一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白传感器和彩色传感器,所述图像处理装置包括:
发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;
接收组件,用于基于所述指令,从所述图像读取装置接收经由所述黑白传感器所接收到的信息和经由所述彩色传感器所接收到的信息;以及
分析组件,用于根据经由所述彩色传感器接收到的信息,对所述原稿中的码图像进行分析。
13.根据权利要求12所述的图像处理装置,其特征在于,
所述码图像中所包括的附加信息是与是否将从所述图像读取装置传送来的图像信息输出至打印装置相关的信息,以及
为了判断是否将由用于获取黑白图像信息的组件所获取的黑白图像信息输出至所述打印装置,使用由所述分析组件进行分析的码图像。
14.一种图像处理装置,其与图像读取装置相连接,所述图像读取装置具有用于接收来自原稿的反射光的黑白传感器和彩色传感器,所述图像处理装置包括:
发送组件,用于将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;
接收组件,用于基于所述指令,从所述图像读取装置接收所述黑白传感器已接收到的信息和所述彩色传感器已接收到的信息;
判断组件,用于判断是否使打印装置执行基于所接收到的所述黑白传感器已接收到的信息的打印;以及
分析组件,用于使用所接收到的所述黑白传感器已接收到的信息和所接收到的所述彩色传感器已接收到的信息两者,对所述原稿中的码图像进行分析,以便所述判断组件进行判断。
15.一种图像读取装置,其与图像处理装置相连接,所述图像处理装置具有用于对原稿中的码图像进行分析的组件,所述图像读取装置包括:
传感器,用于接收来自所述原稿的反射光;
黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;
彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息;
接收组件,用于从所述图像处理装置接收与黑白扫描模式下彩色码图像的检测相关的指令,其中
当通过所述接收组件接收到所述指令时,所述彩色图像信息获取组件根据从所述传感器接收到的数据,获取用于检测彩色码图像的彩色图像信息,并将所获取的用于检测彩色码图像的彩色图像信息和在打印时使用的所述黑白图像信息发送至所述图像处理装置。
16.根据权利要求15所述的图像读取装置,其特征在于,
所述传感器是彩色传感器。
17.根据权利要求15所述的图像读取装置,其特征在于,
所述传感器包括输出彩色数据的彩色传感器和输出黑白数据的黑白传感器,
所述黑白图像信息获取组件根据从所述黑白传感器输出的所述黑白数据,获取所述黑白图像信息,以及
所述彩色图像信息获取组件根据从所述彩色传感器输出的所述彩色数据,获取所述彩色图像信息。
18.一种图像处理装置中的图像处理方法,所述图像处理装置与图像读取装置相连接,所述图像读取装置具有:传感器,用于接收来自原稿的反射光;黑白图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取黑白图像信息;以及彩色图像信息获取组件,用于对从所述传感器接收到的数据进行图像处理以获取彩色图像信息,所述图像处理方法包括以下步骤:
将与黑白扫描模式下彩色码图像的检测相关的指令发送至所述图像读取装置;
基于所述指令,从所述图像读取装置接收所述彩色图像信息获取组件已获取的用于检测彩色码图像的彩色图像信息;以及
根据接收到的彩色图像信息,对所述原稿中的码图像进行分析。
CN200910132312.7A 2008-03-25 2009-03-25 图像处理装置、图像读取装置和图像处理方法 Expired - Fee Related CN101547284B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008078909A JP2009239328A (ja) 2008-03-25 2008-03-25 画像処理装置および画像処理方法
JP2008078909 2008-03-25
JP2008-078909 2008-03-25

Publications (2)

Publication Number Publication Date
CN101547284A true CN101547284A (zh) 2009-09-30
CN101547284B CN101547284B (zh) 2013-01-02

Family

ID=41116758

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910132312.7A Expired - Fee Related CN101547284B (zh) 2008-03-25 2009-03-25 图像处理装置、图像读取装置和图像处理方法

Country Status (3)

Country Link
US (1) US8634115B2 (zh)
JP (1) JP2009239328A (zh)
CN (1) CN101547284B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685354A (zh) * 2011-03-18 2012-09-19 日本冲信息株式会社 信息处理装置、多功能打印机和图像读取装置
CN105282379A (zh) * 2014-06-30 2016-01-27 京瓷办公信息系统株式会社 原稿读取装置以及图像形成装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011010161A (ja) * 2009-06-29 2011-01-13 Canon Inc 画像形成装置、画像形成方法、プログラム
WO2013074978A1 (en) * 2011-11-17 2013-05-23 Datalogic ADC, Inc. Systems and methods for reading color optical codes
US8967479B2 (en) 2012-03-12 2015-03-03 Kabushiki Kaisha Toshiba Image processing apparatus and method for converting a color barcode into a monochrome barcode
JP6322923B2 (ja) * 2013-08-08 2018-05-16 株式会社リコー 情報処理装置、情報処理プログラム、記憶媒体、情報処理システム及び情報処理方法
CN103955664B (zh) * 2014-04-29 2017-05-10 神思电子技术股份有限公司 一种车辆合格证二维码安全解码高拍仪及解码方法
JP7287221B2 (ja) * 2019-09-27 2023-06-06 ブラザー工業株式会社 プログラムおよび情報処理装置
CN112529970A (zh) * 2019-10-22 2021-03-19 卜风雷 移动式现场大数据分析平台

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3889684B2 (ja) * 2002-08-07 2007-03-07 ニスカ株式会社 画像読取装置及び画像読取方法
US7301681B2 (en) * 2003-03-06 2007-11-27 Kabushiki Kaisha Toshiba System and method for processing documents with four-line CCD sensor
JP2005295508A (ja) * 2004-03-08 2005-10-20 Seiko Epson Corp カラー画像のモノクローム画像化
JP2007028408A (ja) * 2005-07-20 2007-02-01 Fuji Xerox Co Ltd 画像処理装置
JP2007060439A (ja) * 2005-08-25 2007-03-08 Ricoh Co Ltd 画像処理装置、ファクシミリ装置、画像処理システム、画像処理方法、および画像処理プログラム
JP4194614B2 (ja) * 2006-07-18 2008-12-10 キヤノン株式会社 画像処理装置および画像処理方法と情報処理装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685354A (zh) * 2011-03-18 2012-09-19 日本冲信息株式会社 信息处理装置、多功能打印机和图像读取装置
CN105282379A (zh) * 2014-06-30 2016-01-27 京瓷办公信息系统株式会社 原稿读取装置以及图像形成装置
CN105282379B (zh) * 2014-06-30 2018-07-24 京瓷办公信息系统株式会社 原稿读取装置以及图像形成装置

Also Published As

Publication number Publication date
US8634115B2 (en) 2014-01-21
JP2009239328A (ja) 2009-10-15
CN101547284B (zh) 2013-01-02
US20090244653A1 (en) 2009-10-01

Similar Documents

Publication Publication Date Title
CN101547284B (zh) 图像处理装置、图像读取装置和图像处理方法
CN100520808C (zh) 图像处理系统、图像形成设备和图像处理方法
CN101110890B (zh) 图像处理装置及其控制方法
CN102638634B (zh) 图像处理装置及图像处理方法
US20070278303A1 (en) Two-dimensional color barcode and method of generating and decoding the same
CN101296280B (zh) 打印系统、图像处理方法和图像处理装置
US6407828B1 (en) Document transmission module connectable to data source for transmitting data in standard or high speed modes
US7035426B2 (en) Image processing apparatus, image processing method and a computer program product for judging whether image data include specific information related to copy protection
US20070171480A1 (en) Image processing device, image forming device, tint block image, printed material, image processing method, image forming method and program-recorded medium
US20060203309A1 (en) Image forming apparatus and image forming method
CN101197896B (zh) 图像处理设备和图像处理方法
US20090003649A1 (en) Image processing apparatus and method for controlling the same
US8614835B2 (en) Image processing apparatus, image processing method, and computer program product
US20080309960A1 (en) Image data generating device, image data generating method, and computer-readable storage medium
US8441690B2 (en) Image processing apparatus and image processing method for processing screen-processed image
CN100559825C (zh) 图像处理装置及控制图像处理装置的方法
EP2615819B1 (en) Image processing apparatus and Image processing method
US20100053656A1 (en) Image processing apparatus capable of processing color image, image processing method and storage medium storing image processing program
CN114240819A (zh) 追印检查装置、追印检查方法以及计算机可读介质
US8189235B2 (en) Apparatus, method and program product that calculates a color blending ratio so security dots reproduced in a monochrome image are substantially undetectable
US8238001B2 (en) Patch codes using a proximity array
JP5054562B2 (ja) 画像形成装置、画像読取装置、画像形成方法、画像読取方法、画像形成プログラム、及び画像読取プログラム
JP5517028B2 (ja) 画像処理装置
JP5649683B2 (ja) 印刷装置および印刷方法、プログラム
US6741371B1 (en) Image forming system, image forming apparatus, and control method therefor

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130102

Termination date: 20180325