CN104427157A - 图像处理装置和图像处理方法 - Google Patents

图像处理装置和图像处理方法 Download PDF

Info

Publication number
CN104427157A
CN104427157A CN201410079239.2A CN201410079239A CN104427157A CN 104427157 A CN104427157 A CN 104427157A CN 201410079239 A CN201410079239 A CN 201410079239A CN 104427157 A CN104427157 A CN 104427157A
Authority
CN
China
Prior art keywords
data
image
similarity
replacement
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410079239.2A
Other languages
English (en)
Other versions
CN104427157B (zh
Inventor
猪股浩司郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN104427157A publication Critical patent/CN104427157A/zh
Application granted granted Critical
Publication of CN104427157B publication Critical patent/CN104427157B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/41—Analysis of document content
    • G06V30/413—Classification of content, e.g. text, photographs or tables
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K15/00—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers
    • G06K15/02—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers using printers
    • G06K15/18—Conditioning data for presenting it to the physical printing elements
    • G06K15/1867—Post-processing of the composed and rasterized print image
    • G06K15/1889—Merging with other data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/41—Analysis of document content
    • G06V30/418—Document matching, e.g. of document images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H04N1/40012—Conversion of colour to monochrome
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12—Classification; Matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/43—Editing text-bitmaps, e.g. alignment, spacing; Semantic analysis of bitmaps of text without OCR

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)

Abstract

图像处理装置和图像处理方法，图像处理装置具有：数据取得单元，其取得第1数据；相似度确定单元，其确定存储在存储单元中的第2数据表示的图像与所述第1数据表示的图像的一部分之间的相似度；部分确定单元，其根据由所述相似度确定单元确定的相似度，从所述第1数据表示的图像中，确定与所述第2数据中的任意一个对应的一部分；替换用数据确定单元，其根据表示所述一部分的图像数据的特征，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据；以及图像数据生成单元，其生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。

Description

图像处理装置和图像处理方法
技术领域
本发明涉及图像处理装置和图像处理方法。
背景技术
在日本特开2009-055582号公报中记载有如下技术：读取部分破损的条形码，根据读取到的源信息，再次生成并赋予条形码。
发明内容
本发明的目的在于，维持对数据中包含的符号图像要求的显示方式。
本发明的第1方案的图像处理装置具有：数据取得单元，其取得第1数据；相似度确定单元，其确定存储在存储单元中的第2数据表示的图像与所述第1数据表示的图像的一部分之间的相似度；部分确定单元，其根据由所述相似度确定单元确定的相似度，从所述第1数据表示的图像中，确定与所述第2数据中的任意一个对应的一部分；替换用数据确定单元，其根据表示所述一部分的图像数据的特征，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据；以及图像数据生成单元，其生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
根据本发明的第2方案，在所述替换用数据表示的图像与所述第1图像的一部分之间的相似度不满足预定的条件的情况下，所述图像数据生成单元生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
根据本发明的第3方案，所述替换用数据确定单元根据所述第1数据的色彩、表示所述一部分的图像数据的背景色以及表示该一部分的图像数据的尺寸中的至少任意一项，确定所述替换用数据。
根据本发明的第4方案，所述相似度确定单元具有：第1相似度确定单元，其按照第1规则，确定所述第2数据表示的图像与所述第1数据表示的图像的一部分之间的相似度；以及第2相似度确定单元，其按照第2规则，确定所述第2数据表示的各个图像与表示由所述部分确定单元确定的一部分的图像数据之间的相似度，所述替换用数据确定单元根据由所述第2相似度确定单元确定的相似度，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据。
根据本发明的第5方案，所述第2规则在确定相似度时，图像的尺寸、形状和色彩中的至少任意一个的差异对该相似度影响的程度比所述第1规则高。
根据本发明的第6方案，所述替换用数据确定单元根据所述第1数据的色彩、表示所述一部分的图像数据的背景色以及表示该一部分的图像数据的尺寸中的至少任意一项和由所述第2相似度确定单元确定的相似度，确定所述替换用数据。
根据本发明的第7方案，在所述替换用数据表示的图像与所述第1图像的一部分之间的相似度小于预定的阈值的情况下，所述图像数据生成单元进行提示，以便让利用者选择是否生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
根据本发明的第8的方案，所述图像处理装置还具有格式数据取得单元，该格式数据取得单元取得表示格式的格式数据，所述相似度确定单元在所述第1数据表示的图像符合所述格式的情况下，关于所述第1数据表示的图像中的位于根据所述格式而确定的预定的区域内的部分，不按照所述第1规则确定相似度。
根据本发明的第9的方案，提供一种图像处理方法，该图像处理方法具有如下步骤：取得第1数据；确定存储在存储单元中的第2数据表示的图像与所述第1图像的一部分之间的相似度；根据所述确定的相似度，从所述第1数据表示的图像中，确定与所述第2数据中的任意一个对应的一部分；根据表示所述一部分的图像数据的特征，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据；生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
根据所述第1方案，能够维持对数据中包含的符号图像要求的显示方式。
根据所述第2方案，能够防止不必要地进行图像的替换处理。
根据所述第3方案，能够维持对数据中包含的符号图像要求的显示方式。
根据所述第4方案，能够维持对数据中包含的符号图像要求的显示方式。
根据所述第5方案，能够维持对数据中包含的符号图像要求的显示方式。
根据所述第6方案，与不使用相似度以外的条件确定替换用数据的情况相比，能够适当地确定替换用数据。
根据所述第7方案，能够在替换的图像与原本的图像之间的相似度低的情况下，让利用者选择是否进行图像的替换处理。
根据所述第8的方案，能够防止从非本意的区域提取预定的图像。
根据所述第9的方案，能够维持对数据中包含的符号图像要求的显示方式。
附图说明
图1是示出系统的整体结构的一例的框图。
图2是示出图像形成装置10的硬件结构的一例的框图。
图3是示出符号图像数据库的内容的一例的图。
图4是示出图像形成装置10的功能结构的一例的图。
图5是示出图像形成装置10进行的处理流程的流程图。
图6是示出符号图像的一例的图。
具体实施方式
［结构］
图1是示出本发明的一个实施方式的系统1的整体结构的框图。系统1具有图像形成装置10（图像处理装置的一例）和信息处理装置20。图像形成装置10例如是电子照相方式的图像形成装置。图像形成装置10具有：图像形成功能，其在纸张等的记录介质上形成图像；图像生成功能，其在数据中合成图像、删除图像或者生成图像；复制功能，其复制图像；扫描功能，其读取形成于记录介质的图像；数据接收功能，其从网络接收数据；等等。图像形成装置10具有的功能不限于这些功能，例如还可以具有传真功能。此外，图像形成装置10不限于具备全部上述功能，例如，也可以构成为只具有数据接收功能和图像生成功能而不具有其它功能。
信息处理装置20是向图像形成装置10发送图像数据，指示对图像数据的图像处理的装置，例如是个人计算机或平板终端。图像数据除了例如照片、CG（ComputerGraphics：计算机图形）以外，还包含表示包含图像的文本或资料、视频等的数据。网络30是LAN（Local Area Network：局域网）或WAN（Wide Area Network：广域网）等的网络，是连接图像形成装置10和信息处理装置20的通信线路。
图2是示出图像形成装置10的硬件结构的框图。图中，控制部11具有CPU（Central Processing Unit：中央处理单元）等的运算装置、ROM（Read Only Memory：只读存储器）和RAM（Random Access Memory：随机存取存储器）等的主存储装置。ROM存储有由运算装置执行的程序。运算装置使用RAM作为工作区，执行存储在ROM或存储部17中的程序，由此，控制图像形成装置10各部的动作。通信部12经由网络30而与信息处理装置20进行通信。用户界面（UI）部13具有各种键或触摸传感器等的操作件，将与利用者的操作对应的操作信号提供给控制部11。控制部11进行与该操作信号对应的处理。此外，用户界面部13具有液晶面板和液晶驱动电路，在控制部11的控制下显示图像。图像形成部15以电子照相方式在纸张等的记录介质上形成图像。图像读取部16以光学方式读取原稿的图像。存储部17例如是硬盘等的存储设备，存储有控制部11使用的数据和程序。图像处理部18执行例如转换灰度或色调的浓度转换、图像的增强或平滑化、进行轮廓提取的空间过滤、改变图像的大小或倾斜等的几何转换等的各种图像处理。此外，还可以对图像数据执行进行OCR（Optical Character Recognition：光学字符识别）等的文字识别的处理或解析多个图像数据来检测差异的处理。存储部17存储有符号图像数据库171。在符号图像数据库171中存储有表示符号图像的符号图像数据。在本实施方式中，符号图像是象征性地表示企业名、商品名、服务名、团体名、组织名等图像，例如是表示企业徽记的徽记图像。
有的符号图像要求以确定的显示方式来显示。例如，在企业或服务的徽记中，有时其颜色使用或大小是确定的，不允许违反该要求来显示。
图3是示出符号图像数据库171（存储单元的一例）的内容的一例的图。如图所示，在该数据库中，将“符号ID”、“条件”、“符号图像数据”的各个项目相互关联起来进行存储。在这些项目中的“符号ID”的项目中，存储有对符号图像进行识别的识别信息（以下称作“符号ID”）。在“条件”的项目中，存储有“彩色/小”或“黑白/大”这样的表示使用符号图像的尺寸或色彩（彩色/黑白）等的条件的信息。“小”、“中”、“大”分别表示符号图像的高度（图中的箭头H所示方向的尺寸）为1cm以上且小于3cm、3cm以上且小于5cm以及5cm以上且小于10cm这样的大小的范围。在该例子中，高度小于1cm或者为10cm以上的符号图像不符合基准。在“符号图像数据”的项目中，存储有表示与各条件对应的符号图像的符号图像数据（第2数据的一例）。
在本实施方式中，如与彩色的条件对应的符号图像是由多个颜色形成的彩色图像，与黑白的条件对应的符号图像是白或黑的二值化的单色图像那样，将表示与各个条件适应的色彩或尺寸的符号图像的符号图像数据与各条件对应起来进行存储。此外，在图3所示的例子中，预先假定在与“ABC”对应的符号图像的情况下，如果图像是彩色的，则符号图像中包含的“ABC”这样的字符串用粗字体显示，如果是黑白的，则用细字体显示，此外，假定在尺寸为“小”的情况下，用1条线的椭圆围着文字，在“中”的情况下，用2条线的椭圆围着文字，在“大”的情况下，用3条线的椭圆围着文字。此外，预先假定在与“DEF”对应的符号图像的情况下，在彩色时，用实线的长方形围着“DEF”这样的字符串，在黑白时，用虚线的长方形围着字符串，此外，预先假定随着图像的大小按小、中、大的顺序增大，文字间的空间变大。
登记在符号图像数据库171中的符号图像数据根据尺寸或色彩（彩色/黑白）等的条件分开使用。例如，如在原稿中包含“ABC”的符号图像且使用4cm的符号图像的情况下，在黑白的原稿中使用符号图像A4，另一方面，在彩色的原稿中使用符号图像A3那样，虽然符号图像的尺寸相同，但是黑白的原稿中包含的符号图像和彩色的原稿中包含的符号图像使用不同的符号图像。此外，如在黑白的原稿的情况下，在描绘符号图像的区域的高度例如是2cm时使用符号图像A2，另一方面，在描绘符号图像的区域的高度是6cm时使用符号图像A6那样，根据描绘符号图像（形成图像）的区域的尺寸，分别使用不同的符号图像。
接下来，参照附图，对图像形成装置10的功能结构进行说明。图4是示出图像形成装置10的功能结构的框图。图像形成装置10通过控制部11、图像处理部18或者控制部11、通信部12和图像处理部18，实现数据取得单元111、相似度确定单元112、部分确定单元113、第2相似度确定单元114、替换用数据确定单元115和图像数据生成单元116。数据取得单元111取得图像数据。数据取得单元111例如可以取得图像读取部16读取原稿等而生成的图像数据，此外，例如可以使用通信部12取得从信息处理装置20等的其它装置发送来的图像数据。
相似度确定单元112根据第1规则，确定存储在符号图像数据库171中的符号图像数据表示的图像与由数据取得单元111取得的图像数据表示的图像的一部分之间的相似度。部分确定单元113根据由第1相似度确定单元确定的相似度，从取得的图像数据表示的图像中，确定与存储在符号图像数据库171中的符号图像数据中的任意一个对应的一部分。第2相似度确定单元114根据第2规则，确定存储在符号图像数据库171中的各个符号图像数据与表示由确定单元113确定的一部分的图像数据之间的相似度。
替换用数据确定单元115根据表示由部分确定单元113确定的一部分的图像的特征，从存储在符号图像数据库171中的符号图像数据中，确定与表示该一部分的图像数据对应的符号图像数据作为替换用数据。尤其是在本实施方式中，替换用数据确定单元115根据图像数据的色彩（彩色/黑白）、图像数据中包含的符号图像的背景色和符号图像的尺寸中的至少任意一项，确定替换用数据。图像数据生成单元116生成表示如下图像的图像数据，该图像是将图像数据表示的图像中的由部分确定单元113确定的一部分，替换成由替换用数据确定单元115确定的替换用数据表示的图像而得到的。
［动作］
接下来，对实施方式的动作进行说明。在该动作例中，对从信息处理装置20向图像形成装置10发送图像数据而由图像形成部15在纸张等的记录介质上形成图像时的动作进行说明。
图5是示出图像形成装置10进行的处理流程的流程图。首先，利用者使用信息处理装置20的用户界面部，进行针对图像数据的打印指示。在该动作例中，示出指定将彩色的图像数据转换成黑白的图像数据的参数（以下称作“单色转换处理”）或将图像缩小的参数（以下称作“尺寸缩小处理”）作为输出参数的例子。信息处理装置20的用户界面部输出与利用者操作的内容对应的操作信息，信息处理装置20的控制部根据从用户界面部输出的信息，接受针对图像数据的打印指示。信息处理装置20的控制部向图像形成装置10发送图像数据，并且，委托执行被指示的打印。图像形成装置10的控制部11从信息处理装置20接收图像数据（步骤S1），并且，使用指定的参数执行处理（步骤S2）。在该动作例中，控制部11对接收到的图像数据执行单色转换处理或尺寸缩小处理。
接下来，控制部11通过执行步骤S3～步骤S6的处理，判定图像数据（第1数据的一例，以下称作“处理后数据”）中是否包含登记在符号图像数据库171中的符号图像。具体而言，控制部11使用登记在符号图像数据库171中的符号图像数据，对处理后数据进行图案匹配处理。在本实施方式中，首先，控制部11从符号图像数据库171取得1个符号图像数据（步骤S3），在已取得的情况下（步骤S4：是），使用已取得的符号图像数据对处理后数据进行图案匹配（图案核对）处理（步骤S5），判定处理后数据中是否包含与已取得的符号图像数据之间的相似度为预定的阈值以上的数据。在相似度为预定的阈值以上的情况下，判定为包含符号图像数据。在没有提取出相似度为预定的阈值以上的数据的情况下（步骤S6：否），控制部11返回到步骤S3的处理，从符号图像数据库171取得下一个符号图像数据（步骤S3），使用已取得的符号图像数据进行图案匹配处理（步骤S4～步骤S6）。控制部11反复进行图案匹配处理，直到提取出相似度为预定的阈值以上的数据为止。
另一方面，在步骤S4中没有从符号图像数据库171取得符号图像数据的情况下（步骤S4：否），即，对登记在符号图像数据库171中的全部符号图像数据进行图案匹配，判定为它们的结果都不是相似度为预定的阈值以上的情况下，判定为该处理后数据不包含符号图像。在该情况下（步骤S4：否），控制部11进入步骤S10的处理，输出处理后数据（步骤S10）。
此外，在步骤S6中提取出相似度为预定的阈值以上的数据的情况下，进入步骤S7的处理，控制部11进行作为替换对象的图像数据（以下称作“替换用数据”）的确定处理（步骤S7）。在步骤S7中，控制部11根据处理后数据表示的图像整体的色彩（黑白/彩色）或从处理后数据提取出的符号图像的背景色和尺寸中的至少任意一项，确定替换用数据。在该动作例中，控制部11确定从处理后数据提取出的符号图像的条件（色彩（黑白/彩色）和尺寸（大/中/小）），确定与确定出的条件对应地存储在符号图像数据库171中的符号图像数据，作为替换用数据。
接下来，控制部11使用确定出的替换用数据和处理后数据进行图案匹配处理，根据核对结果确定缺损度（相似度），判定确定出的缺损度是否为预定的阈值以上（步骤S8）。在确定出的缺损度小于预定的阈值的情况下（即，替换用数据与处理后数据之间的相似度为预定的阈值以上的情况下）（步骤S8：否），控制部11不进行符号图像的替换处理（步骤S9的处理）。另一方面，在缺损度为预定的阈值以上的情况下（步骤S8：是），控制部11使用在步骤S7中确定出的替换用数据，进行将处理后数据中包含的符号图像替换成替换用数据表示的符号图像的处理（步骤S9）。在结束步骤S9的处理后，控制部11返回到步骤S3的处理，对登记在符号图像数据库171中的剩余的符号图像数据进行核对处理。
图6是示出图5所示的符号图像的替换处理的具体内容的一例的图。图6的（a）是示出由图像形成装置10实施处理前的图像数据表示的图像的一例。图6的（b）是示出由图像形成装置10对图6的（a）所示的图像数据实施图像处理后的图像数据（即处理后数据）表示的图像。在图6所示的例子中，图示出实施单色转换处理和尺寸缩小处理后的例子。图6的（c）是示出对图6的（b）所示的处理后数据实施图5所示的替换处理后的处理后数据表示的图像。
如图6的（b）所示，通过单色转换处理/尺寸缩小处理，图6的（a）所示的符号图像A51被转换成单色图像且其尺寸被缩小而成为符号图像A52。符号图像A52通过图5的步骤S5的图案匹配处理，被确定是与登记在符号图像数据库171中的符号图像数据A5对应的符号图像。此外，在步骤S7中，从与在步骤S5中确定的符号图像A5的符号ID“ABC”对应地存储在符号图像数据库171中的符号图像数据中，确定与符号图像A52的色彩（彩色/黑白）和尺寸（大/中/小）对应的符号图像数据即与“黑白/小”的条件对应的符号图像数据A2作为替换用数据。在确定替换用数据后，确定符号图像A52相对于确定的替换用数据（符号图像数据A2）的缺损度。
在通过图5的步骤S8的处理计算出的缺损度为预定的阈值以上的情况下，将从处理后数据提取出的符号图像数据替换成在步骤S7中确定的替换用数据（符号图像数据A2）（图5的步骤S9），从而生成图6的（c）所示的图像数据。如上所述，在本实施方式中，可维持对数据中包含的符号图像要求的显示方式。
此外，根据由图像形成装置10实施的图像处理的内容，有时处理后数据中包含的符号图像的画质劣化，或者包含不满足预定的条件（例如，在黑白的情况下使用符号图像数据A2，在彩色的情况下使用符号图像数据A1等）的符号图像。例如，在实施了将彩色图像转换成黑白图像这样的图像处理的情况下，该图像中包含的彩色的符号图像也被转换成单色，从而符号图像有时会因灰度而变得难以辨认。此外，作为另一例，例如，在由服务提供装置20实施了图像的放大或缩小这样的变更比例的图像处理的情况下，该图像中包含的符号图像也被放大或缩小，从而符号图像中包含的文字有时会变得破碎而难以辨认。即使在这样的情况下，通过使用登记在符号图像数据库171中的符号图像数据，确定处理后数据中包含的符号图像数据的缺损度（劣化的程度），根据缺损度进行符号图像的替换处理，由此，可防止符号图像的画质劣化。此外，在本实施方式中，假定“符号图像的画质劣化”还包含符号图像不满足上述预定的条件的情况。
［变形例］
上述实施方式是本发明的一例，还可以进行如下变形。此外，以下的变形例还可以相互组合。
（1）在上述实施方式中，在控制部11对处理后数据进行图5的步骤S5所示的图案核对处理时，也可以对处理后数据进行格式识别处理来确定处理后数据的格式，对控制部11确定的格式下的预定的区域进行图案核对处理。在该情况下，控制部11作为取得表示格式的格式数据的格式数据取得单元和判定处理后数据表示的图像是否符合格式数据表示的格式的判定单元而发挥作用，并且，在判定为处理后数据表示的图像符合格式的情况下，关于处理后数据表示的图像中的位于根据格式而确定的预定的区域内的部分，不进行基于第1规则的相似度的判定。具体而言，例如可以对照片的区域不进行图案核对处理。根据该方式，例如能够在照片中不经意间拍摄到符号图像的情况下，防止从照片区域提取符号图像。
（2）在上述实施方式中，如图5的步骤S9所示，在缺损度为预定的阈值以上的情况下，控制部11进行将处理后数据中包含的符号图像替换成替换用符号图像的处理。也可以是，在图5的步骤S9中缺损度为预定的阈值以上，且替换用符号图像不满足预定的条件的情况下，控制部11不进行替换处理而向利用者提示该情况，让利用者选择是否进行替换。例如，在从处理后数据提取出的符号图像的尺寸过小，如果进行替换则变得不自然的情况下，控制部11不进行替换处理而向利用者提示该情况，让利用者选择是否进行替换。
（3）在上述实施方式中，在替换用符号图像的尺寸小于从处理后数据提取出的符号图像的尺寸的情况下，如果进行替换处理，则在替换用符号图像的周围产生余白。因此，也可以是，控制部11对余白部分进行处理，以便按照符号图像的背景色而成为与背景色相同的颜色。具体而言，例如，也可以是，控制部11确定处理后数据中包含的符号图像的区域（以下称作“删除区域”）内的上述余白部分的区域作为间隙区域，通过以与相邻区域相同的颜色填充该间隙区域，由此，在间隙区域插补图像。此外，在相邻区域的图像不是单色而包含图案或花纹等的情况下，也可以是，控制部11沿着沿相邻区域的外周的外周方向，将相邻区域分割成多个分区，将分别复制分割出的分区而成的图像合成于与各分区相邻的间隙区域来进行插补。
（4）在上述实施方式中，也可以是，在从处理后数据提取出的符号图像的尺寸与替换用符号图像的尺寸不同的情况下，控制部11调整比例，使得替换用符号图像的尺寸成为处理后数据中包含的符号图像的尺寸，然后进行替换处理。
（5）在上述实施方式中，控制部11根据处理后数据表示的图像整体的色彩（黑白/彩色）或提取出的符号图像尺寸等处理后数据的特征来确定替换用数据（图5的步骤S7）。确定替换用数据的方法不限于上述实施方式所示的方法。例如，也可以是，控制部11使用从处理后数据提取出的符号图像数据、和登记在符号图像数据库171中的符号图像数据中的与在步骤S5中被确定为包含于处理后数据的符号图像数据的符号ID对应的符号图像数据，进行图案匹配处理，从登记在符号图像数据库171中的符号图像数据中，确定图案匹配的相似度最高的符号图像数据作为替换用数据。
在该情况下的图案匹配处理中，也可以是，控制部11使用从处理后数据提取出的符号图像数据的尺寸（大小）、纵横比、色彩这样的参数进行图案匹配处理，确定替换用数据。在该情况下，在确定替换用数据时进行的图案匹配处理（以下称作第2图案匹配处理）中，进行与步骤S5的图案匹配处理不同的图案匹配方式。
具体而言，在步骤S5的图案匹配处理中，符号图像的尺寸或纵横比、色彩等的不同可以不作为差异来处理。即，在步骤S5中，即使是尺寸或纵横比、色彩等的参数值与登记在符号图像数据库171中的符号图像数据表示的符号图像不同的图像，根据其它参数值（亮度等）来判定相似度，如果相似度为预定的阈值以上，则作为符号图像提取。此外，在步骤S5中，也可以不参照尺寸或纵横比、色彩等的参数值来进行图案匹配处理，此外，关于上述参数（尺寸、纵横比、色彩等），也可以略微设定在图案匹配处理中参照时的权重。
另一方面，在第2图案匹配处理中，根据还将尺寸或纵横比、色彩的差异考虑在内的第2规则进行图案匹配处理。由此，例如即使在步骤S5的图案匹配处理中尺寸不同，相似度也不会降低，但是，在第2图案匹配处理中尺寸不同的情况下，计算出较低的相似度。这样，在本变形例中，在步骤S5中，根据变形的影响较小的图案匹配方式，以黑白方式（忽略RBG值而使用亮度）进行图案匹配处理，由此，即使变形或颜色存在不同，也可计算出较高的相似度。另一方面，在第2图案匹配处理中，根据变形的影响较大的图案匹配方式，以彩色方式进行图案匹配处理，由此，即使变形或颜色存在不同，也可计算出较低的相似度。
此外，在利用图案匹配确定替换用数据的情况下，在图5的步骤S8中确定的缺损度可以根据通过该图案匹配求出的上述相似度来确定，或者，也可以使用与确定相似度的算法不同的算法来确定。
此外，作为另一例，例如，也可以是，控制部1进行1除了缺损度以外还将从处理后数据提取出的符号图像数据的背景色考虑在内的图案匹配处理，确定替换用数据。更具体而言，例如，也可以是，控制部11进行如下处理：在符号图像的背景色是单色的情况下，从单色用的符号图像数据中确定缺损度最小的符号图像数据，此外，在背景色是彩色的情况下，从彩色用的符号图像数据中，确定缺损度最小的符号图像数据。
（6）在上述实施方式中，控制部11在图5的步骤S5中，根据没有将尺寸或形状（纵横比）、色彩的差异考虑在内的第1规则，进行图案匹配处理，另一方面，在步骤S7中，根据将尺寸或形状、色彩的差异考虑在内的第2规则，进行图案匹配处理。第1规则和第2规则不限于上述实施方式。第2规则在确定相似度时，图像的尺寸、形状和色彩中的至少任意一个的差异对相似度的影响程度也可以比第1规则高。
（7）在上述实施方式中，也可以是，根据处理后数据是用于利用者自己参照的资料还是发布用的资料，切换是否进行符号图像的替换处理。具体而言，例如，也可以是，在进行图5的步骤S3所示的处理时，控制部11在用户界面部13上显示询问资料是否是发布用的消息，利用者使用用户界面部13输入是否是发布用的资料。在该情况下，也可以是，控制部11根据从用户界面部13输出的操作信息，在是发布用的资料的情况下对符号图像进行替换，另一方面，在是用于利用者自己参照的资料的情况下，不进行替换处理而直接输出处理后数据。
（8）在上述实施方式中，从信息处理装置20向图像形成装置10发送作为处理对象的图像数据而输入到图像形成装置10，但是，作为处理对象的图像数据不限于从信息处理装置20发送来的数据，也可以是其它数据。例如，也可以通过指定存储在预定的存储区域（存储部17等）中的图像数据，确定作为处理对象的图像数据。此外，也可以使图像形成装置10扫描纸张等的介质来输入图像数据。
（9）在上述实施方式中，信息处理装置20向图像形成装置10指示由利用者指示的图像处理，图像形成装置10执行指示的图像处理。执行由利用者指示的图像处理的装置不限于图像形成装置10，例如，也可以是，图像形成装置10将图像处理的执行委托给提供图像处理服务的服务提供装置。在该情况下，图像形成装置10的控制部11将由利用者指示的图像处理委托给服务提供装置，服务提供装置执行委托的图像处理。
（10）在上述实施方式中，控制部11参照存储在图像形成装置10的存储部17中的符号图像数据库171，进行替换用符号图像的确定处理或符号图像的替换处理，但是，也可以构成为不将符号图像数据库171存储于存储部17。例如，也可以构成为将符号图像数据库171存储于经由通信网络连接的服务器装置，控制部11通过询问服务器装置来参照符号图像数据库171。
（11）在上述实施方式中，构成为将符号图像数据存储在符号图像数据库171中，但是，也可以构成为不是存储符号图像数据自身，而是存储表示符号图像的特征的特征数据来替代符号图像数据。作为特征数据，例如，可以使用符号图像中包含的各像素的亮度值、各像素的亮度值与平均值的差异值。在该情况下，与上述实施方式同样地，控制部11使用特征数据对处理后数据进行图案匹配处理，执行符号图像的替换处理。
（12）在上述实施方式中，使用在步骤S8中确定的替换用数据和处理后数据进行图案匹配处理，根据核对结果确定缺损度（相似度），判定确定的缺损度是否为预定的阈值以上，但是，也可以在不进行确定缺损度的处理的情况下，进行替换符号图像的处理。即，在上述实施方式中，控制部11对从处理后数据提取出的符号图像数据与替换用数据进行比较，计算出缺损度，在缺损度为预定的阈值以上的情况下，进行替换处理，但是，也可以构成为不判定是否进行替换处理。即，也可以不进行图5所示的步骤S7和步骤S8的处理。在该情况下，控制部11在确定替换用数据时，在不判定是否进行替换处理的情况下进行替换处理。
（13）在图像形成装置10中执行的程序可以经由互联网等通信线路下载。此外，该程序可以在记录于磁记录介质（磁带、磁盘等）、光记录介质（光盘等）、光磁记录介质、半导体存储器等计算机可读取的记录介质中的状态下提供。

Claims (9)

1.一种图像处理装置，其中，该图像处理装置具有：
数据取得单元，其取得第1数据；
相似度确定单元，其确定存储在存储单元中的第2数据表示的图像与所述第1数据表示的图像的一部分之间的相似度；
部分确定单元，其根据由所述相似度确定单元确定的相似度，从所述第1数据表示的图像中，确定与所述第2数据中的任意一个对应的一部分；
替换用数据确定单元，其根据表示所述一部分的图像数据的特征，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据；以及
图像数据生成单元，其生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
2.根据权利要求1所述的图像处理装置，其中，
在所述替换用数据表示的图像与所述第1图像的一部分之间的相似度不满足预定的条件的情况下，所述图像数据生成单元生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
3.根据权利要求1或2所述的图像处理装置，其中，
所述替换用数据确定单元根据所述第1数据的色彩、表示所述一部分的图像数据的背景色以及表示该一部分的图像数据的尺寸中的至少任意一项，确定所述替换用数据。
4.根据权利要求1所述的图像处理装置，其中，
所述相似度确定单元具有：
第1相似度确定单元，其按照第1规则，确定所述第2数据表示的图像与所述第1数据表示的图像的一部分之间的相似度；以及
第2相似度确定单元，其按照第2规则，确定所述第2数据表示的各个图像与表示由所述部分确定单元确定的一部分的图像数据之间的相似度，
所述替换用数据确定单元根据由所述第2相似度确定单元确定的相似度，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据。
5.根据权利要求4所述的图像处理装置，其中，
所述第2规则在确定相似度时，图像的尺寸、形状和色彩中的至少任意一个的差异影响该相似度的程度比所述第1规则高。
6.根据权利要求4或5所述的图像处理装置，其中，
所述替换用数据确定单元根据所述第1数据的色彩、表示所述一部分的图像数据的背景色以及表示该一部分的图像数据的尺寸中的至少任意一项和由所述第2相似度确定单元确定的相似度，确定所述替换用数据。
7.根据权利要求1～6中的任意一项所述的图像处理装置，其中，
在所述替换用数据表示的图像与所述第1图像的一部分之间的相似度小于预定的阈值的情况下，所述图像数据生成单元进行提示，以便让利用者选择是否生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
8.根据权利要求1～7中的任意一项所述的图像处理装置，其中，
所述图像处理装置还具有格式数据取得单元，该格式数据取得单元取得表示格式的格式数据，
所述相似度确定单元在所述第1数据表示的图像符合所述格式的情况下，关于所述第1数据表示的图像中的位于根据所述格式而确定的预定的区域内的部分，不按照所述第1规则确定相似度。
9.一种图像处理方法，其中，该图像处理方法具有如下步骤：
取得第1数据；
确定存储在存储单元中的第2数据表示的图像与所述第1图像的一部分之间的相似度；
根据所述确定的相似度，从所述第1数据表示的图像中，确定与所述第2数据中的任意一个对应的一部分；
根据表示所述一部分的图像数据的特征，从所述第2数据中确定与表示所述一部分的图像数据对应的第2数据，作为替换用数据；以及
生成表示如下图像的图像数据，该图像是将所述第1数据表示的图像的所述一部分替换成所述替换用数据表示的图像而得到的。
CN201410079239.2A 2013-08-23 2014-03-05 图像处理装置和图像处理方法 Active CN104427157B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013173799A JP5920293B2 (ja) 2013-08-23 2013-08-23 画像処理装置及びプログラム
JP2013-173799 2013-08-23

Publications (2)

Publication Number Publication Date
CN104427157A true CN104427157A (zh) 2015-03-18
CN104427157B CN104427157B (zh) 2018-09-18

Family

ID=52480101

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410079239.2A Active CN104427157B (zh) 2013-08-23 2014-03-05 图像处理装置和图像处理方法

Country Status (3)

Country Link
US (2) US9378413B2 (zh)
JP (1) JP5920293B2 (zh)
CN (1) CN104427157B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110062700A (zh) * 2016-12-26 2019-07-26 京瓷办公信息系统株式会社 信息管理系统及信息管理服务器
CN111124227A (zh) * 2019-12-18 2020-05-08 维沃移动通信有限公司 一种图像显示方法及电子设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6138079B2 (ja) * 2014-03-28 2017-05-31 京セラドキュメントソリューションズ株式会社 画像処理装置及び画像処理方法
JP2016165077A (ja) 2015-03-06 2016-09-08 キヤノン株式会社 画像形成装置
US20170091270A1 (en) 2015-09-30 2017-03-30 Linkedln Corporation Organizational url enrichment

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050168778A1 (en) * 1998-02-26 2005-08-04 Canon Kabushiki Kaisha Information processing apparatus and information processing method
JP2007243729A (ja) * 2006-03-09 2007-09-20 Canon Inc 画像処理装置およびその制御方法、および画像処理システム
CN101393414A (zh) * 2007-09-21 2009-03-25 夏普株式会社 图像数据输出处理装置及其方法
CN101601279A (zh) * 2007-08-03 2009-12-09 松下电器产业株式会社 摄像装置、摄像方法以及程序
US20120265761A1 (en) * 2009-04-07 2012-10-18 Alon Atsmon System and process for building a catalog using visual objects
CN102792335A (zh) * 2010-03-12 2012-11-21 国立大学法人名古屋工业大学 图像处理装置、图像处理程序、及生成图像的方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69435282D1 (de) * 1993-07-16 2010-04-29 Sharp Kk Bilddatenprozessor
JP3181780B2 (ja) * 1993-07-16 2001-07-03 シャープ株式会社 画像処理装置
JP4006239B2 (ja) * 2002-02-21 2007-11-14 株式会社日立製作所 文書の検索方法および検索システム
JP4757001B2 (ja) * 2005-11-25 2011-08-24 キヤノン株式会社 画像処理装置、画像処理方法
JP4512633B2 (ja) 2007-07-31 2010-07-28 キヤノン株式会社 画像処理装置及びその制御方法、並びにプログラム
US7890486B2 (en) * 2007-08-06 2011-02-15 Ronald Claghorn Document creation, linking, and maintenance system
JP4999730B2 (ja) 2008-02-28 2012-08-15 キヤノン株式会社 画像処理装置、画像処理方法及び制御プログラム
JP4666017B2 (ja) * 2008-07-28 2011-04-06 ブラザー工業株式会社 画像形成装置及びプログラム
US8438163B1 (en) * 2010-12-07 2013-05-07 Google Inc. Automatic learning of logos for visual recognition
WO2012157253A1 (ja) * 2011-05-17 2012-11-22 パナソニック株式会社 冷蔵庫の解体方法と冷蔵庫の解体装置および、家電製品の解体方法と家電製品の解体装置
JP5962419B2 (ja) * 2012-10-15 2016-08-03 富士ゼロックス株式会社 画像処理装置及び画像処理プログラム
JP6175981B2 (ja) * 2013-08-23 2017-08-09 富士ゼロックス株式会社 情報処理装置及びプログラム
JP5928421B2 (ja) * 2013-08-23 2016-06-01 富士ゼロックス株式会社 情報処理装置、画像処理装置、情報処理システム、およびプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050168778A1 (en) * 1998-02-26 2005-08-04 Canon Kabushiki Kaisha Information processing apparatus and information processing method
JP2007243729A (ja) * 2006-03-09 2007-09-20 Canon Inc 画像処理装置およびその制御方法、および画像処理システム
CN101601279A (zh) * 2007-08-03 2009-12-09 松下电器产业株式会社 摄像装置、摄像方法以及程序
CN101393414A (zh) * 2007-09-21 2009-03-25 夏普株式会社 图像数据输出处理装置及其方法
US20120265761A1 (en) * 2009-04-07 2012-10-18 Alon Atsmon System and process for building a catalog using visual objects
CN102792335A (zh) * 2010-03-12 2012-11-21 国立大学法人名古屋工业大学 图像处理装置、图像处理程序、及生成图像的方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110062700A (zh) * 2016-12-26 2019-07-26 京瓷办公信息系统株式会社 信息管理系统及信息管理服务器
CN111124227A (zh) * 2019-12-18 2020-05-08 维沃移动通信有限公司 一种图像显示方法及电子设备

Also Published As

Publication number Publication date
US20160241738A1 (en) 2016-08-18
US9378413B2 (en) 2016-06-28
JP2015041992A (ja) 2015-03-02
US20150055151A1 (en) 2015-02-26
JP5920293B2 (ja) 2016-05-18
US9723174B2 (en) 2017-08-01
CN104427157B (zh) 2018-09-18

Similar Documents

Publication Publication Date Title
JP3796500B2 (ja) 画像処理装置及びその制御方法、プログラム
US20120250048A1 (en) Image processing apparatus and image processing method
JP5137759B2 (ja) 画像処理装置
CN104427157A (zh) 图像处理装置和图像处理方法
US8170338B2 (en) Information processing apparatus and method for correcting electronic information obtained from handwritten information
US7738743B2 (en) Image reading system
JP2004529404A (ja) 画像を分析するための方法及び装置
JP4502385B2 (ja) 画像処理装置およびその制御方法
US10592766B2 (en) Image processing apparatus and medium storing program executable by image processing apparatus
KR101869302B1 (ko) 래스터 이미지 변환 장치, 화상독취장치, 래스터 이미지 변환 방법 및 컴퓨터 판독가능 기록매체
JP2000155837A (ja) タグを用いた文書処理方法
US20060182358A1 (en) Coding apparatus, decoding apparatus, data file, coding method, decoding method, and programs thereof
US9338310B2 (en) Image processing apparatus and computer-readable medium for determining pixel value of a target area and converting the pixel value to a specified value of a target image data
JP2013125994A (ja) 画像圧縮装置、画像圧縮方法、コンピュータプログラム
US9489603B2 (en) Image processing apparatus, image processing method, and storage medium that determine whether a white character exists inside a graphics object and convert density information accordingly
JP2012105015A (ja) 画像処理装置、画像処理方法、プログラム、及び記憶媒体
US20100245896A1 (en) Image-processing device, image-forming device, image-processing method, and computer readable medium
JP2007068127A (ja) 画像再生装置、画像再生方法、プログラム及び記録媒体
JP2003046746A (ja) 画像処理方法及び画像処理装置
JP5517028B2 (ja) 画像処理装置
JP4626565B2 (ja) 画像処理装置、画像形成装置およびプログラム
JP4144511B2 (ja) 画像処理システム
JP2020047138A (ja) 情報処理装置
JP2001253125A (ja) 画像処理システム及び画像処理方法
JP4158681B2 (ja) 画像処理システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Tokyo, Japan

Patentee after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: Fuji Xerox Co.,Ltd.