CN101562680A - 图像形成装置和图像形成方法 - Google Patents

图像形成装置和图像形成方法 Download PDF

Info

Publication number
CN101562680A
CN101562680A CNA2009101337929A CN200910133792A CN101562680A CN 101562680 A CN101562680 A CN 101562680A CN A2009101337929 A CNA2009101337929 A CN A2009101337929A CN 200910133792 A CN200910133792 A CN 200910133792A CN 101562680 A CN101562680 A CN 101562680A
Authority
CN
China
Prior art keywords
view data
image
data
image data
acoustic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2009101337929A
Other languages
English (en)
Other versions
CN101562680B (zh
Inventor
中野利满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101562680A publication Critical patent/CN101562680A/zh
Application granted granted Critical
Publication of CN101562680B publication Critical patent/CN101562680B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3871—Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H04N1/40068—Modification of image resolution, i.e. determining the values of picture elements at new relative positions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0094—Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明提供图像形成装置和图像形成方法。当执行超分辨率处理时，实现降低所需的存储容量以及产生具有期望的图像质量的高分辨率图像数据。本发明提供一种图像形成装置中的图像形成方法，所述图像形成装置能够使用多个低分辨率图像数据来执行超分辨率处理以产生高分辨率图像数据。所述图像形成方法包括如下步骤：获取多个低分辨率图像数据，根据各个图像数据的空间频率信息或者色彩信息来从所获取的多个图像数据中选择要删除的图像数据，删除所选择的图像数据，并且将在所述多个图像数据中没有被删除的剩余图像数据作为在所述超分辨率处理中使用的图像数据存储。

Description

图像形成装置和图像形成方法
技术领域
本发明涉及一种图像形成装置和图像形成方法，更具体地说，涉及在执行超分辨率处理的图像形成装置中的图像形成技术。
背景技术
已知一种针对具有不同相位的多个低分辨率图像数据执行数据插值处理以产生高分辨率图像数据的超分辨率处理技术(例如，参见RicohTechnical Report No.24，Nov.1998)。
还已知一种读取通过向扫描仪增加偏移(offset)值来改变其相位的低分辨率图像数据、并通过超分辨率处理技术产生高分辨率图像数据的系统(例如，参见日本特开平第8-98009号公报)。
但是，超分辨率处理需要多个低分辨率图像数据。为了执行此处理，需要使用具有足够大的存储容量的图像形成装置，以保持这些低分辨率图像数据。
可以通过减小在超分辨率处理中使用的低分辨率图像数据量来降低所述存储容量。在此情况下，根据要削减的低分辨率图像数据，超分辨率处理产生的高分辨率图像数据可能不满足期望的图像质量。
发明内容
提出本发明以克服传统的缺陷，本发明的目的旨在提供一种用于实现当执行超分辨率处理时降低所需的存储容量并且产生具有期望的图像质量的高分辨率图像数据的图像形成技术。
为了达到上述目的，根据本发明的图像形成装置包括如下结构。
即，一种图像形成装置，所述图像形成装置使用具有第一分辨率的多个图像数据来执行超分辨率处理以产生具有比所述第一分辨率高的第二分辨率的图像数据，所述图像形成装置包括：获取单元，用于获取具有所述第一分辨率的多个图像数据；选择单元，用于根据各个图像数据的空间频率信息以及色彩信息中的一个来从所述获取单元获取的所述多个图像数据中选择要删除的图像数据；删除单元，用于从所述获取单元获取的所述多个图像数据中删除所述选择单元选择的所述图像数据；存储单元，用于将在所述获取单元获取的所述多个图像数据中没有被所述删除单元删除的剩余图像数据，作为在所述超分辨率处理中使用的图像数据存储。
为了达到上述目的，根据本发明的图像形成方法包括如下步骤。
即，一种图像形成装置中的图像形成方法，所述图像形成装置使用具有第一分辨率的多个图像数据来执行超分辨率处理以产生具有比所述第一分辨率高的第二分辨率的图像数据，所述图像形成方法包括：获取步骤，获取具有所述第一分辨率的多个图像数据；选择步骤，根据各个图像数据的空间频率信息或者色彩信息来从获取的所述多个图像数据中选择要被删除的图像数据；删除步骤，从在所述获取步骤中获取的所述多个图像数据中删除在所述选择步骤中选择的所述图像数据；存储步骤，存储在所述获取步骤中获取的所述多个图像数据中没有在所述删除步骤中删除的剩余图像数据，作为在所述超分辨率处理中使用的图像数据存储。
本发明能够实现当执行超分辨率处理时降低所需的存储容量并且产生具有期望的图像质量的高分辨率图像数据。
参照附图，根据以下对示例性实施方式的说明，本发明的其他特征将变得明确。
附图说明
附图被包括进来并且构成说明书的一部分，附图例示本发明的实施方式，并与说明书一起用于解释本发明的原理。
图1是示出具有图像形成装置的打印系统的结构的框图；
图2是示出图像形成装置101的外观的图；
图3是示出图像形成装置101的控制器111的功能结构的框图；
图4是示出在打印机图像处理单元315中的处理内容的框图；
图5是示出在超分辨率处理单元331中的处理序列的流程图；
图6是示出低分辨率图像数据的相位偏移量的图；
图7示出其中通过超分辨率处理从多个低分辨率图像数据中产生高分辨率图像数据的状态的图；
图8是示出图像数据计数削减单元332中的图像数据计数削减处理的序列的流程图；
图9是示出基于空间频率信息的图像数据计数削减处理的序列的流程图；
图10是示出各个图像数据的空间频率分布特性的示例的图；
图11是示出基于色彩信息的图像数据计数削减处理的序列的流程图；
图12是示出各个图像数据的亮度(luminance)分布特性的示例的图；
图13是示出基于相位偏移信息的图像数据计数削减处理的序列的流程图；
图14是示出图像数据计数削减处理的序列的流程图；
图15是示出其中通过使用所有低分辨率图像数据执行超分辨率处理来产生图像数据1的状态的图；
图16是示出其中从多个选定图像数据中选择作为删除候选的删除候选图像数据的状态、并且还示出通过使用从所述多个选定图像数据中删除所述删除候选图像数据之后剩余的图像数据来执行超分辨率处理而产生的高分辨率图像数据2的图；
图17是示出图像数据1的空间频率分布的示例的图；
图18是示出图像数据2的空间频率分布的示例的图；以及
图19是示出当在图14的步骤S1409中判断图像数据2的质量劣化超出阈值时执行的处理的序列的流程图。
具体实施方式
将根据附图详细地描述本发明的优选实施方式。
[第一实施方式]
<1.打印系统的结构>
图1是示出具有根据第一实施方式的图像形成装置的打印系统的结构的框图。在图1中，一个主机(主机104)与三个图像形成装置(图像形成装置101到103)经由LAN 105连接。但是，打印系统的结构不限于此。
在图1中，各装置101至104经由LAN 105连接，但是连接方法不限于此。例如，各装置101至104也可以使用任意网络(例如，WAN(公共线路))、串行传输方式(例如，USB)、并行传输方式(例如，并行接口或者SCSI)等来连接。
主机104(在下文中被称为PC)具有个人计算机的功能。PC 104能够根据FTP或者SMB协议经由LAN 105发送/接收文件以及电子邮件。
PC 104能够从图像摄取装置106(例如数码相机或者数码摄像机)中接收图像数据，并且向图像形成装置101至103发送图像数据。PC 104也能够经由打印机驱动程序向图像形成装置101至103输出打印指令。
图像形成装置101和102的各个均包括扫描仪和打印机。不同的是，图像形成装置103包括打印机，但不包括扫描仪。但是，这些图像形成装置具有相同的基本结构，所以为了便于描述，将详细地说明图像形成装置101的结构。
图像形成装置101包括作为图像输入装置的扫描仪113、以及作为图像输出装置的打印机114。图像形成装置101还包括控制图像形成装置101的整体操作的控制器111以及作为用户接口(UI)的操作单元112。将说明图像形成装置101的各个单元的结构。
<2.扫描仪113和打印机114的详细信息>
图2是示出图像形成装置101的外观的图。将参照图2说明图像形成装置101中的扫描仪113和打印机114的功能结构。
扫描仪113将通过对原稿台上的原稿图像进行曝光以及扫描而得到的反射光导入CCD来将原稿图像信息转换为电信号。而且，扫描仪113将该电信号转换为R、G和B亮度信号，并且将所述亮度信号作为图像数据输出给控制器111。
将原稿片材放置在进稿器201的托盘202上。当用户经由操作单元112输入读取开始指令时，控制器111向扫描仪113发送原稿读取指令。
当接收到原稿读取指令时，扫描仪113从进稿器201的托盘202逐一地进给原稿片材，并且执行原稿读取操作。原稿读取方法不限于利用进稿器201的自动进给方法。也可以通过将原稿片材放置在玻璃面(未示出)上并且移动曝光单元来对其扫描。
打印机114是根据从控制器111接收到的图像数据在打印片材上形成图像的图像形成装置。打印机114包括允许选择不同尺寸或者不同方向的片材的多个纸盒203、204以及205。承载有图像的片材被排出到递送托盘206。
<3.控制器111的详细信息>
图3是示出图像形成装置101的控制器111的功能结构的框图。将参照图3说明控制器111的功能的详细信息。
控制器111电连接到扫描仪113和打印机114。控制器111还经由LAN105连接到PC 104、另一图像处理装置等以能够与它们通信。此结构使得可以输入/输出诸如图像数据和装置信息的各种信息。
在图3中，CPU 301根据ROM 303中存储的控制程序等综合控制对各单元的访问。此外，CPU 301综合控制控制器111中执行的各种处理。
RAM 302是用于操作CPU 301的系统工作存储器，并且是用于临时存储图像数据的存储器。RAM 302由即使当断电时仍保持存储的内容的SRAM和当断电时擦除所存储的内容的DRAM而形成。
ROM 303是存储图像形成装置101的引导程序等的存储器。HDD(硬盘驱动)304存储系统软件和图像数据。
操作单元I/F 305是用于连接系统总线310和操作单元112的接口。操作单元I/F 305从系统总线310接收要在操作单元112上显示的图像数据，并且将该图像数据输出给操作单元112。同样，操作单元I/F 305也向系统总线310输出从操作单元112输入的信息。
网络I/F 306是将控制器111连接到LAN 105以及系统总线310的接口，并且发送/接收诸如图像数据和装置信息的各种信息。
发送/接收图像处理单元307包括图像解压缩单元309和图像压缩单元308。图像解压缩单元309接收被压缩的图像数据并且对其解压缩。图像压缩单元308将传输前的图像数据压缩成适合传输给LAN 105的尺寸。图像总线330是用于交换图像数据的传输线，由PCI总线或者IEEE1394总线形成。
扫描仪图像处理单元312对经由扫描仪I/F 311从扫描仪113接收的图像数据执行诸如校正、操作(manipulation)以及编辑的处理。扫描仪图像处理单元312判断接收到的图像数据是表示彩色原稿或者单色原稿、还是表示文本原稿或者照片原稿。扫描仪图像处理单元312将所述判断结果添加给所述图像数据。向图像数据添加的添加信息被称为属性数据。
压缩单元313接收并且压缩图像数据。解压缩单元316解压缩被压缩的图像数据，将解压缩后的图像数据光栅化，并且向打印机图像处理单元315发送光栅化后的图像数据。
打印机图像处理单元315接收从解压缩单元316发送的图像数据，并且在参阅添加给所接收到的图像数据的属性数据的同时对所述图像数据执行图像处理。经过图像处理的图像数据被经由打印机I/F 314输出给打印机114。之后将对在打印机图像处理单元315中执行的处理的详细信息进行说明。
图像转换单元317对图像数据执行预定转换处理。图像转换单元317由执行如下处理的处理单元形成。
解压缩单元318解压缩接收到的图像数据。压缩单元319压缩接收到的图像数据。旋转单元320旋转接收到的图像数据。变倍(resize)单元321对接收到的图像数据执行分辨率转换处理(例如，从600dpi到200dpi的转换处理)。
色彩空间转换单元332转换接收到的图像数据的色彩空间。色彩空间转换单元332能够执行已知的利用矩阵或者表的底色去除(undercolorremoval)处理、已知的Log变换处理(RGB→CMY)、以及已知的输出色彩校正处理(CMY→CMYK)。
二值到多值转换单元323将接收到的2色调级(tone level)的图像数据转换为256色调级的图像数据。多值到二值转换单元324通过误差扩散处理等将接收到的256色调级的图像数据转换为2色调级的图像数据。
合成单元327将两个接收到的图像数据合成以产生一个图像数据。当合成两个图像数据时，用要合成的像素的亮度值的平均作为合成亮度值，或者用较高亮度级的像素的亮度值作为合成亮度值。作为替代方案，用较低亮度级的像素的亮度值作为合成亮度值。作为可选方案，用通过对要合成的像素的亮度值进行“或”操作、“与”操作、或者“异或”操作而得到的值作为合成亮度值。所有这些合成方法是众所周知的方法，将省略其描述。
抽取单元326按1/2、1/4、1/8等的抽取比率来抽取接收到的图像数据的像素以转换其分辨率并且产生图像数据。移动单元325向接收到的图像数据添加空白部分或者从图像数据中删除空白部分。
RIP(Raster Image Processor，光栅图像处理器)328接收基于从PC 104发送的PDL代码数据而产生的中间数据，并且产生位图数据(多值数据)。
超分辨率处理单元331由从扫描仪113、LAN 105等接收的或者从HDD304中读取的多个低分辨率(第一分辨率)图像数据来产生高分辨率图像数据。
图像数据计数削减单元332根据条件删除在超分辨率处理中使用的低分辨率图像数据。之后将描述超分辨率处理单元331和图像数据计数削减单元332的详细信息。
<4.打印机图像处理单元315的详细说明>
图4是示出在打印机图像处理单元315中的处理内容的框图。将参照图4详细说明打印机图像处理单元315中的处理。
底色去除单元401去除图像数据的底色。单色产生单元402将彩色数据转换成单色数据。
Log变换单元403进行亮度到浓度的转换。例如，Log变换单元403将输入的R、G和B图像数据转换为C、M和Y图像数据。
输出色彩校正单元404进行输出色彩校正。例如，输出色彩校正单元404使用表或者矩阵将输入的C、M和Y图像数据转换为C、M、Y和K图像数据。
输出侧伽玛校正单元405进行校正以使向输出侧伽玛校正单元405输入的信号值与打印输出之后的反射浓度值变得互成比例。半色调校正单元406根据用于输出的打印机的色调级的数量进行半色调处理。例如，半色调校正单元406将接收到的大数量色调级的图像数据转换为2或者32色调级的图像数据。
<5.超分辨率处理单元331的详细说明>
将参照图5到图7说明超分辨率处理单元331中的处理的详细信息。图5是示出超分辨率处理单元331中的处理序列的流程图。
在步骤S501中，超分辨率处理单元331获取在超分辨率处理中使用的多个低分辨率图像数据。从扫描仪113或者LAN 105获取所述多个低分辨率图像数据。作为可选方案，通过从HDD 304中将它们读出而获取所述多个低分辨率图像数据。图像摄取装置106摄取的图像也可经由LAN 105获取，或者经由诸如USB存储器或者SD存储卡的存储装置而直接地存储于HDD 304中。
在步骤S502中，超分辨率处理单元331确定作为用于计算各个图像数据的相位偏移量的基准的图像数据(基准图像数据)。
在步骤S503中，超分辨率处理单元331计算基准图像数据与各个图像数据之间的相位偏移量。在步骤S504中，超分辨率处理单元331使用各自的图像数据在同一像素处的像素值以及相位偏移量来进行插值处理，由此计算临近像素之间的像素值并且产生高分辨率(第二分辨率)图像数据。
图6是示出低分辨率图像数据的相位偏移量的图。在图6中，图像数据0作为基准图像。每条格线是用于表示相位偏移的辅助线，并且每个方块对应于一个像素。
图像数据0是基准图像数据，所以其相位偏移在纵向和横向上都是0。
各个图像数据的相位偏移量不足一个像素。图像数据1，2，3，...，n的相位偏移量(在横向和纵向上)是(ΔW1，ΔH1)，(ΔW2，ΔH2)，(ΔW3，ΔH3)，...，(ΔWn，ΔHn)。
为了从低分辨率图像数据产生高分辨率图像数据，需要在低分辨率图像数据的像素之间产生新的像素。例如，为了产生两倍分辨率的图像数据，产生12个像素以将2×2低分辨率像素转换为4×4高分辨率像素。
此时，通过使用图像数据0到n的像素值以及计算出的相位偏移量(ΔW1，ΔH1)，...，(ΔWn，ΔHn)进行插值处理来产生新产生像素的值。作为所述插值处理，采用已知的诸如双线性插值的插值处理方法。
图7示出其中通过超分辨率处理从多个低分辨率图像数据中产生高分辨率图像数据的状态。
<6.图像数据计数削减单元332的详细说明>
将参照图8到13说明图像数据计数削减单元332中的处理的详细信息。
图8是示出图像数据计数削减单元332中的图像数据计数削减处理的序列的流程图。
在步骤S801中，图像数据计数削减单元332接收在超分辨率处理中使用的多个低分辨率图像数据。在步骤S802中，图像数据计数削减单元332根据各个图像数据的空间频率信息来削减图像数据量。
在步骤S803中，图像数据计数削减单元332根据各个图像数据的色彩信息来削减图像数据量。在步骤S804中，图像数据计数削减单元332根据各个图像数据的相位偏移量信息来削减图像数据量。
将对步骤S802到S804中的图像数据计数削减处理进行说明。
<6.1基于空间频率信息的图像数据计数削减处理>
图9是示出基于空间频率信息的图像数据计数削减处理的序列的流程图。
在步骤S901中，图像数据计数削减单元332计算各个低分辨率图像数据的空间频率分布。在步骤S902中，图像数据计数削减单元332计算多个图像数据的平均空间频率分布。
在步骤S903中，图像数据计数削减单元332从多个图像数据中选择一个目标图像数据。在步骤S904中，图像数据计数削减单元332计算所述目标图像数据的空间频率分布与在步骤S902中计算出的平均空间频率分布之间的差。
在步骤S905中，图像数据计数削减单元332判断与计算出的空间频率分布的差是否大于或者等于预定的阈值。如果图像数据计数削减单元332判断所述差等于或者大于阈值(判断所述空间频率特性是不同的)，则处理进入S906。
在步骤S906中，图像数据计数削减单元332判断所述目标图像数据具有与剩余图像数据的特性不同的特性，并且从多个图像数据中删除所述目标图像数据。
在步骤S907中，图像数据计数削减单元332判断是否处理了所有的图像数据。如果图像数据计数削减单元332判断还剩有未处理的图像数据，则处理返回步骤S903以针对下一个目标图像数据进行步骤S904到S907。
如果图像数据计数削减单元332在步骤S905中判断与计算出的空间频率分布的差小于阈值，则判断图像数据具有类似的特性，并且处理不删除目标图像数据而进入步骤S907。
如果图像数据计数削减单元332在步骤S907中判断处理了所有的图像数据，则结束基于空间频率信息的图像数据计数削减处理。
图10是示出各个图像数据的空间频率分布特性的示例的图。在图10中，10a表示多个图像数据以及它们的平均空间频率分布。
在图10中，10b表示各图像数据(0到n)以及它们的空间频率分布。超分辨率处理中的各个图像数据具有一个像素或者不足一个像素的相位偏移。各个图像数据的空间频率分布基本上与在图10的10a中表示的平均空间频率分布相同。
在图10的10b中除了图像数据2之外的图像数据0到n的空间频率分布基本上与平均空间频率分布相同，并且这些图像数据适合于超分辨率处理。与之相反，在图像数据2的空间频率分布中，高频成份的量小于在平均空间频率分布中的高频成份的量。这是因为由照相机抖动、散焦等而导致图像不清楚。图像数据2不适于超分辨率处理。由此，从多个图像数据中删除图像数据2。
<6.2基于色彩信息的图像数据计数削减处理>
图11是示出基于色彩信息的图像数据计数削减处理的序列的流程图。在第一实施方式中，用表示明度(brightness)的亮度信号的值作为色彩信息。
在步骤S1101中，图像数据计数削减单元332计算各个低分辨率图像数据的亮度分布。在步骤S1102中，图像数据计数削减单元332计算多个图像数据的平均亮度分布。
在步骤S1103中，图像数据计数削减单元332从多个图像数据中选择一个目标图像数据。在步骤S1104中，图像数据计数削减单元332计算所述目标图像数据的亮度分布与在步骤S1102中计算出的平均亮度分布之间的差。
在步骤S1105中，图像数据计数削减单元332判断与计算出的亮度分布的差是否等于或者大于预定的阈值。如果图像数据计数削减单元332判断所述差等于或者大于阈值(判断色彩特性是不同的)，则处理进入步骤S1106。在步骤S1106中，图像数据计数削减单元332判断所述目标图像数据具有与剩余图像数据的特性不同的特性，并且从多个图像数据中删除所述目标图像数据。
在步骤S1107中，图像数据计数削减单元332判断是否处理了所有的图像数据。如果图像数据计数削减单元332判断还有未处理的图像数据，则处理返回步骤S1103以处理作为目标图像数据的下一个图像数据。
如果图像数据计数削减单元332在步骤S1105中判断与计算出的亮度分布的差值小于阈值，则图像数据计数削减单元332判断图像数据具有类似的特性，并且处理不删除目标图像数据而进入步骤S1107。
如果图像数据计数削减单元332在步骤S1107中判断处理了所有的图像数据，则图像数据计数削减单元332结束基于色彩信息的图像数据计数削减处理。
图12是示出各个图像数据的亮度分布特性的示例的图。在图12中，12a表示多个图像数据和它们的平均亮度分布。
在图12中，12b表示各图像数据(0到n)和它们的亮度分布。在超分辨率处理中的各个图像数据具有一个像素或者不足一个像素的相位偏移量。各个图像数据的亮度分布基本上与在图12的12a中表示的平均亮度分布相同。
在图12的12b中除了图像数据1之外的图像数据0到n的亮度分布基本上与平均亮度分布相同，并且这些图像数据适合于超分辨率处理。与之相反，在图像数据1的亮度分布中，明区域小于在平均亮度分布中的明区域。
这是因为由于在照相机拍摄中未曝光或者曝光调整错误、扫描仪在扫描中光源的光量不充足等而导致图像暗。图像数据1不适于超分辨率处理。由于这一原因，从多个图像数据中删除图像数据1。
<6.3基于相位偏移信息的图像数据计数削减处理>
图13是示出基于相位偏移信息的图像数据计数削减处理的序列的流程图。超分辨率处理针对不足一个像素的相位偏移量执行插值处理，产生高分辨率图像数据。具有相同相位的图像数据是冗余的，因此被删除。
在步骤S1301中，图像数据计数削减单元332从多个低分辨率图像数据中选择基准图像数据。在步骤S1302中，图像数据计数削减单元332计算所述基准图像数据与各个图像数据之间的相位偏移量。
在步骤S1303中，图像数据计数削减单元332从多个图像数据中选择一个目标图像数据。
在步骤S1304中，图像数据计数削减单元332判断多个图像数据中是否存在具有与目标图像数据的相位偏移量相同的相位偏移量的图像数据。如果图像数据计数削减单元332判断存在具有相同相位偏移量的图像数据，则处理进入步骤S1305。在步骤S1305中，图像数据计数削减单元332判断目标图像数据冗余，因此从多个图像数据中删除所述目标图像数据。
在步骤S1306中，图像数据计数削减单元332判断是否处理了所有的图像数据。如果图像数据计数削减单元332判断还剩有未处理的图像数据，则处理返回步骤S1303以处理作为目标图像数据的下一个图像数据。
如果图像数据计数削减单元332在步骤S1304中判断目标图像数据具有不同的相位偏移量，则处理不删除所述目标图像数据而进入步骤S1306。
如果图像数据计数削减单元332在步骤S1306中判断处理了所有的图像数据，则图像数据计数削减单元332结束基于相位偏移信息的图像数据计数削减处理。
从上述说明中明确，根据第一实施方式的图像形成装置执行图像数据计数削减处理以从超分辨率处理中使用的多个低分辨率图像数据中删除不适当的图像数据。
通过删除不适于超分辨率处理的低分辨率图像数据，图像形成装置能够在削减存储容量的同时产生高质量、高分辨率的图像数据。
[第二实施方式]
在第一实施方式中，根据在图像数据计数削减单元中的图像数据计数削减处理而不考虑图像形成装置的存储容量来削减图像数据量。但是，本发明不限于此。例如，也可以考虑图像形成装置的存储容量来执行图像数据计数削减处理。将参照图14到18说明第二实施方式的详细信息。
图14是示出根据第二实施方式的图像数据计数削减处理的序列的流程图。在步骤S1401中，计算能够将图像数据记录在用作图像数据记录装置的HDD 304中的剩余存储容量。在步骤S1402中，判断能够记录图像数据的剩余存储容量是否等于或者小于预定的阈值。
如果在步骤S1402中判断剩余存储容量等于或者小于所述阈值，则处理进入步骤S1403以从存储在HDD 304中的图像数据中选择在超分辨率处理中使用的多个低分辨率图像数据。
在步骤S1404中，使用所有选定图像数据来执行超分辨率处理以产生目标高分辨率的图像数据1。图15示出其中通过使用所有低分辨率图像数据执行超分辨率处理而产生图像数据1的状态。
在步骤S1405中，基于剩余存储容量来计算要削减的数据量(数据削减计数)。在步骤S1406中，根据计算出的数据削减计数从多个选定图像数据中选择作为删除候选的删除候选图像数据。
在图16中，16a表示其中从多个选定图像数据中选择作为删除候选的删除候选数据(灰视(grayout)图像数据是删除候选数据)的状态。
在步骤S1407中，使用从多个选定图像数据中删除所述删除候选图像数据之后剩下的图像数据来完成超分辨率处理。其结果是，产生目标高分辨率的图像数据2。
在图16中，16b表示通过使用从多个选定图像数据中删除删除候选图像数据之后剩下的图像数据来进行超分辨率处理而产生的高分辨率图像数据2。
在步骤S1408中，比较在步骤S1404中产生的图像数据1的质量与在步骤S1407中产生的图像数据2的质量。在步骤S1409中，判断图像数据2相对于图像数据1的质量劣化是否等于或者小于阈值。
如果在步骤S1409中判断图像数据2的质量劣化等于或者小于所述阈值，则处理进入步骤S1410以从多个图像数据中删除删除候选图像数据。然后，在HDD 304中存储剩余图像数据以更新多个图像数据，处理进入步骤S1412。
如果在步骤S1409中判断图像数据2的质量劣化超出所述阈值，则处理不删除删除候选图像数据而进入步骤S1411。
在步骤S1411中，判断HDD 304中是否剩有在步骤S1403中未选定的其它低分辨率图像数据(在超分辨率处理中使用的其它低分辨率图像数据)。如果在步骤S1411中判断剩有其它低分辨率图像数据，则处理返回步骤S1403。
如果在步骤S1411中判断没有其它低分辨率图像数据剩余，则图像数据计数削减处理结束。
通过比较图像数据1的空间频率分布(图17)与图像数据2的空间频率分布(图18)来实现在步骤S1408中图像数据1与图像数据2之间的比较。
图17示出图像数据1的空间频率分布的示例。图18示出图像数据2的空间频率分布的示例。图18中的18a表示当图像质量劣化小时的图像数据2的示例，而图18中的18b表示当图像质量劣化大时的图像数据2的示例。
在步骤S1409中对图像质量劣化的判断中，当图像数据2具有图18的18a所表示的空间频率分布时，判断图像质量劣化小。这是因为图像数据1和图像数据2的空间频率成份基本上相同，并且能够判断图像数据2产生与图像数据1的高分辨率图像数据几乎相同的高分辨率图像数据。
当图像数据2具有图18的18b表示的空间频率分布时，判断图像质量劣化大。这是因为图像数据2的空间频率分布中的高频成份的量小于图像数据1的空间频率分布中的高频成份的量，并且图像数据2产生比图像数据1的分辨率图像数据低的分辨率图像数据。
从上述说明中明确，根据第二实施方式，当剩余存储容量变得等于或者小于阈值时，从多个低分辨率图像数据中删除作为删除候选的低分辨率图像数据。因此，图像形成装置总能够确保预定的剩余存储容量。
在第二实施方式中，当删除作为删除候选的低分辨率图像数据时，检查当针对除了作为删除候选的图像数据之外的低分辨率图像数据进行超分辨率处理时获得的高分辨率图像数据的质量劣化。然后，删除作为删除候选的图像数据。
因此，即使当删除低分辨率图像数据以确保剩余存储容量时，也能够产生具有期望的图像质量的高分辨率图像数据。
在上述说明中，未特别提及执行图像数据计数削减处理的定时。例如，也可以在进行了第一实施方式中描述的图像数据计数削减处理之后，对HDD 304中存储的多个低分辨率图像数据进行图像数据计数削减处理。作为可选方案，也可以在进行第一实施方式中描述的图像数据计数削减处理之前，对HDD 304中存储的多个低分辨率图像数据进行图像数据计数削减处理。
[第三实施方式]
在第二实施方式中，如果在步骤S1409中判断图像数据2的质量劣化超出阈值，则处理不删除删除候选图像数据而进入步骤S1411。但是，本发明不限于此。
例如，执行超分辨率处理以产生高分辨率图像数据并且将它保持在HDD 304中。此外，删除用于产生高分辨率图像数据的多个低分辨率图像数据以确保足够的剩余存储容量。
图19是示出当在步骤S1409中判断图像数据2的质量劣化超出阈值时执行的处理的序列的流程图。
在步骤S1901中，从HDD 304中删除在图14中的步骤S1403中选定的多个图像数据。在步骤S1902中，在HDD 304中存储在图14中的步骤S1404中产生的图像数据1。
根据第三实施方式，按照这种方式将多个选定图像数据删除，可靠地确保足够的存储容量。
[其它实施方式]
本发明能够应用于包括多个装置(例如，主机、接口装置、阅读器以及打印机)的系统或者由单个装置形成的设备(例如，复印机或者传真设备)。
本发明的目的还可以通过向系统或设备提供存储有用于实现上述实施例的功能的软件程序代码的存储介质来实现。在这一情况下，这些功能通过由系统或设备的计算机(或CPU或MPU)读出并执行存储在存储介质中的程序代码来实现。在这一情况下，存储程序代码的存储介质构成本发明。
用于提供程序代码的存储介质包括软
Figure A20091013379200191
盘、硬盘、光盘、磁光盘、CD-ROM、CD-R、磁带、非易失性存储卡以及ROM。
本发明不限于以下情况：其中当计算机执行所读出的程序代码时，实现上述实施例的功能。此外，本发明还包括以下情况：在计算机上所运行的OS(操作系统)等基于程序代码的指令来执行实际处理的部分或全部，由此实现上述实施例的功能。
此外，本发明包括以下情况：其中，在将从存储介质中读出的程序代码写入在插入计算机中的功能扩展板的存储器或者连接到计算机的功能扩展单元的存储器中之后，实现上述实施方式的功能。即，本发明也包括以下情况：其中，在将程序代码写入存储器中之后，功能扩展板或者功能扩展单元的CPU根据程序代码的指令来执行部分的或者全部的实际处理，由此实现上述实施方式的功能。
虽然参照示例性实施例来对本发明进行了描述，但是应当理解，本发明并不限于所公开的示例性实施例。应当对以下权利要求的范围给予最宽泛的解释，以使其涵盖所有这种变型例、等同的结构和功能。

Claims (6)

1.一种图像形成装置，所述图像形成装置使用具有第一分辨率的多个图像数据来执行超分辨率处理以产生具有比所述第一分辨率高的第二分辨率的图像数据，所述图像形成装置包括：
获取单元，用于获取具有所述第一分辨率的多个图像数据；
选择单元，用于根据各个图像数据的空间频率信息和色彩信息中的一个来从所述获取单元获取的所述多个图像数据中选择要删除的图像数据；
删除单元，用于从所述获取单元获取的所述多个图像数据中删除所述选择单元选择的所述图像数据；
存储单元，用于将在所述获取单元获取的所述多个图像数据中没有被所述删除单元删除的剩余图像数据，作为在所述超分辨率处理中使用的图像数据存储。
2.根据权利要求1所述的图像形成装置，其特征在于，所述选择单元从所述获取单元获取的所述多个图像数据中选择具有不同于基准空间频率特性的空间频率特性的图像数据，作为所述要删除的图像数据。
3.根据权利要求1所述的图像形成装置，其特征在于，所述选择单元从所述获取单元获取的所述多个图像数据中选择具有不同于基准色彩特性的色彩特性的图像数据，作为所述要删除的图像数据。
4.根据权利要求1所述的图像形成装置，其特征在于，所述图像形成装置还包括：判断单元，用于判断当使用所述获取单元获取的所述多个图像数据中除了所述选择单元选择的所述图像数据之外的图像数据来执行所述超分辨率处理时获得的图像数据是否具有预定的图像质量，
其中，当所述判断单元判断所述图像数据具有所述预定的图像质量时，所述删除单元将所述选择单元选择的所述图像数据删除。
5.根据权利要求4所述的图像形成装置，其特征在于，所述图像形成装置还包括：执行单元，用于当所述判断单元判断所述图像数据不具有所述预定的图像质量时使用所述获取单元获取的所述多个图像数据来执行所述超分辨率处理，
其中，当所述执行单元执行所述超分辨率处理时，所述删除单元删除在所述超分辨率处理中使用的所述多个图像数据，并且
所述存储单元存储通过执行所述超分辨率处理产生的图像数据。
6.一种图像形成装置中的图像形成方法，所述图像形成装置使用具有第一分辨率的多个图像数据来执行超分辨率处理以产生具有比所述第一分辨率高的第二分辨率的图像数据，所述图像形成方法包括：
获取步骤，获取具有所述第一分辨率的多个图像数据；
选择步骤，根据各个图像数据的空间频率信息或色彩信息来从在所述获取步骤中获取的所述多个图像数据中选择要删除的图像数据；
删除步骤，从在所述获取步骤中获取的所述多个图像数据中删除在所述选择步骤中选择的所述图像数据；
存储步骤，将在所述获取步骤中获取的所述多个图像数据中没有在所述删除步骤中被删除的剩余图像数据，作为在所述超分辨率处理中使用的图像数据存储。
CN2009101337929A 2008-04-18 2009-04-17 图像形成装置和图像形成方法 Expired - Fee Related CN101562680B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008109543A JP5004856B2 (ja) 2008-04-18 2008-04-18 画像形成装置及び画像形成方法及び記憶媒体、プログラム
JP2008109543 2008-04-18
JP2008-109543 2008-04-18

Publications (2)

Publication Number Publication Date
CN101562680A true CN101562680A (zh) 2009-10-21
CN101562680B CN101562680B (zh) 2012-07-25

Family

ID=41200867

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101337929A Expired - Fee Related CN101562680B (zh) 2008-04-18 2009-04-17 图像形成装置和图像形成方法

Country Status (3)

Country Link
US (1) US8368948B2 (zh)
JP (1) JP5004856B2 (zh)
CN (1) CN101562680B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104284048A (zh) * 2013-07-03 2015-01-14 柯尼卡美能达株式会社 显示预览图像的图像显示装置
CN104601842A (zh) * 2013-10-30 2015-05-06 京瓷办公信息系统株式会社 图像读取装置、图像形成装置和图像读取方法
CN106980871A (zh) * 2016-01-13 2017-07-25 福特全球技术公司 应用到道路场景图像的低保真分类器和高保真分类器

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5268617B2 (ja) * 2008-12-17 2013-08-21 キヤノン株式会社 画像形成装置、画像形成装置の制御方法及びコンピュータプログラム
JP6252183B2 (ja) * 2013-02-12 2017-12-27 株式会社リコー 画像検査装置、画像検査システム及び画像検査方法
JP2014174710A (ja) * 2013-03-08 2014-09-22 Casio Comput Co Ltd 情報処理装置、及び情報処理方法、プログラム
JP2020102660A (ja) * 2018-12-19 2020-07-02 パナソニックＩｐマネジメント株式会社 撮像装置
CN113496463B (zh) * 2020-03-19 2024-05-31 深圳华大生命科学研究院 图像重构方法、系统、电子装置及存储介质
CN116433464B (zh) * 2023-06-14 2023-11-17 北京象帝先计算技术有限公司 存储地址偏移量计算装置、方法、电子组件及电子设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4656524A (en) * 1985-12-23 1987-04-07 Polaroid Corporation Electronic imaging copier
US5282057A (en) * 1990-04-23 1994-01-25 Xerox Corporation Bit-map image resolution converter
US5767987A (en) 1994-09-26 1998-06-16 Ricoh Corporation Method and apparatus for combining multiple image scans for enhanced resolution
US5917963A (en) * 1995-09-21 1999-06-29 Canon Kabushiki Kaisha Image processing apparatus and image processing method
JP3210248B2 (ja) * 1996-04-25 2001-09-17 キヤノン株式会社 画像処理装置及びその方法
US6944357B2 (en) * 2001-05-24 2005-09-13 Microsoft Corporation System and process for automatically determining optimal image compression methods for reducing file size
KR100504594B1 (ko) * 2003-06-27 2005-08-30 주식회사 성진씨앤씨 데이터 압축 처리된 저해상도 영상으로부터 초해상도 영상복원 및 재구성 방법
JP4691880B2 (ja) * 2003-10-23 2011-06-01 セイコーエプソン株式会社 同時にドットが形成される複数本の画素列のデータを解像度変換しながら画像を出力する画像出力装置
US7412107B2 (en) * 2004-12-17 2008-08-12 The Regents Of The University Of California, Santa Cruz System and method for robust multi-frame demosaicing and color super-resolution
US7602997B2 (en) * 2005-01-19 2009-10-13 The United States Of America As Represented By The Secretary Of The Army Method of super-resolving images
US7856154B2 (en) * 2005-01-19 2010-12-21 The United States Of America As Represented By The Secretary Of The Army System and method of super-resolution imaging from a sequence of translated and rotated low-resolution images
CN100442821C (zh) * 2005-07-25 2008-12-10 扬智科技股份有限公司 影像增显系统
CN100413316C (zh) * 2006-02-14 2008-08-20 华为技术有限公司 一种视频图像超分辨率重构方法
JP4518043B2 (ja) * 2006-05-31 2010-08-04 株式会社日立製作所 画像信号処理装置、及び画像信号を高解像度化するための方法、及びそれを実行するためのプログラム
JP4315971B2 (ja) * 2006-11-09 2009-08-19 三洋電機株式会社 撮像装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104284048A (zh) * 2013-07-03 2015-01-14 柯尼卡美能达株式会社 显示预览图像的图像显示装置
US9767530B2 (en) 2013-07-03 2017-09-19 Konica Minolta, Inc. Image displaying apparatus for displaying preview images
CN104284048B (zh) * 2013-07-03 2017-09-29 柯尼卡美能达株式会社 显示预览图像的图像显示装置
CN104601842A (zh) * 2013-10-30 2015-05-06 京瓷办公信息系统株式会社 图像读取装置、图像形成装置和图像读取方法
CN106980871A (zh) * 2016-01-13 2017-07-25 福特全球技术公司 应用到道路场景图像的低保真分类器和高保真分类器
CN106980871B (zh) * 2016-01-13 2022-07-26 福特全球技术公司 应用到道路场景图像的低保真分类器和高保真分类器

Also Published As

Publication number Publication date
JP5004856B2 (ja) 2012-08-22
JP2009260843A (ja) 2009-11-05
US8368948B2 (en) 2013-02-05
CN101562680B (zh) 2012-07-25
US20090262371A1 (en) 2009-10-22

Similar Documents

Publication Publication Date Title
CN101562680B (zh) 图像形成装置和图像形成方法
US8055084B2 (en) Image processing device, image compression method, image compression program, and recording medium
CN102905053B (zh) 图像处理装置
US20030156196A1 (en) Digital still camera having image feature analyzing function
JP2006033828A (ja) マルチ・ファンクション・システムにおけるカラー印刷のための共通交換フォーマット・アーキテクチャ
JP2005244896A (ja) 印刷情報処理装置、印刷装置、印刷情報処理方法および印刷システム
JP2008066888A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP2009141807A (ja) 画像処理装置、画像処理方法、及び、画像処理プログラム
CN101800827A (zh) 装置及方法
US8218911B2 (en) Image processing apparatus and image processing method
JP2006262078A (ja) 画像処理装置
US7477788B2 (en) Image processing apparatus, image reading apparatus and image forming apparatus
US7809199B2 (en) Image processing apparatus
JP3346051B2 (ja) 画像処理装置
JP4697933B2 (ja) 画像処理装置および画像入出力装置およびそれらの方法
US8780374B2 (en) Image processing apparatus and image processing method
JP2008022082A (ja) 画像形成装置及びその制御方法
US20110158531A1 (en) Image processing apparatus and control method thereof
JP2000278506A (ja) 画像処理装置
US8170353B2 (en) Information processing apparatus and control method thereof
JP2002051178A (ja) 画像読み取り制御装置及び画像出力制御装置及び画像読み取り制御方法及び画像読み取りシステム及び記憶媒体
JP2007096695A (ja) 画像処理装置、方法、及びコンピュータプログラム
JP2006128763A (ja) 画像処理システム
JP2008153764A (ja) 画像処理システム
JP2003037739A (ja) データ転送制御装置、その制御方法、及び制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120725

Termination date: 20210417