CN106331408A - 片材尺寸确定系统、片材尺寸确定方法以及图像形成装置 - Google Patents

片材尺寸确定系统、片材尺寸确定方法以及图像形成装置 Download PDF

Info

Publication number
CN106331408A
CN106331408A CN201610474107.9A CN201610474107A CN106331408A CN 106331408 A CN106331408 A CN 106331408A CN 201610474107 A CN201610474107 A CN 201610474107A CN 106331408 A CN106331408 A CN 106331408A
Authority
CN
China
Prior art keywords
sheet
sheets
sizes
sheet material
portable terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610474107.9A
Other languages
English (en)
Other versions
CN106331408B (zh
Inventor
佐藤隆史
水野浩
藤井聪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Konica Minolta Opto Inc
Original Assignee
Konica Minolta Opto Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Opto Inc filed Critical Konica Minolta Opto Inc
Publication of CN106331408A publication Critical patent/CN106331408A/zh
Application granted granted Critical
Publication of CN106331408B publication Critical patent/CN106331408B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00681Detecting the presence, position or size of a sheet or correcting its position before scanning
    • H04N1/00684Object of the detection
    • H04N1/00708Size or dimensions
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/50Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control
    • G03G15/5029Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control by measuring the copy material characteristics, e.g. weight, thickness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65HHANDLING THIN OR FILAMENTARY MATERIAL, e.g. SHEETS, WEBS, CABLES
    • B65H1/00Supports or magazines for piles from which articles are to be separated
    • B65H1/04Supports or magazines for piles from which articles are to be separated adapted to support articles substantially horizontally, e.g. for separation from top of pile
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65HHANDLING THIN OR FILAMENTARY MATERIAL, e.g. SHEETS, WEBS, CABLES
    • B65H7/00Controlling article feeding, separating, pile-advancing, or associated apparatus, to take account of incorrect feeding, absence of articles, or presence of faulty articles
    • B65H7/02Controlling article feeding, separating, pile-advancing, or associated apparatus, to take account of incorrect feeding, absence of articles, or presence of faulty articles by feelers or detectors
    • B65H7/14Controlling article feeding, separating, pile-advancing, or associated apparatus, to take account of incorrect feeding, absence of articles, or presence of faulty articles by feelers or detectors by photoelectric feelers or detectors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/50Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control
    • G03G15/5075Remote control machines, e.g. by a host
    • G03G15/5083Remote control machines, e.g. by a host for scheduling
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/65Apparatus which relate to the handling of copy material
    • G03G15/6502Supplying of sheet copy material; Cassettes therefor
    • G03G15/6514Manual supply devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877Image rotation
    • H04N1/3878Skew detection or correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/393Enlarging or reducing
    • H04N1/3935Enlarging or reducing with modification of image resolution, i.e. determining the values of picture elements at new relative positions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65HHANDLING THIN OR FILAMENTARY MATERIAL, e.g. SHEETS, WEBS, CABLES
    • B65H2405/00Parts for holding the handled material
    • B65H2405/10Cassettes, holders, bins, decks, trays, supports or magazines for sheets stacked substantially horizontally
    • B65H2405/11Parts and details thereof
    • B65H2405/114Side, i.e. portion parallel to the feeding / delivering direction
    • B65H2405/1142Projections or the like in surface contact with handled material
    • B65H2405/11425Projections or the like in surface contact with handled material retractable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30176Document
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0094Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Abstract

提供一种片材尺寸确定系统、片材尺寸确定方法以及图像形成装置。利用便携终端来确定片材尺寸,而不在图像形成装置的片材堆叠托盘中设置片材尺寸检测用的传感器。当启动了在便携终端中安装的片材尺寸检测用的专用应用之后(步骤S101),由摄像部拍摄图像形成装置的记录片材被载置的片材堆叠托盘,并保存在内部的存储器中(步骤S106),对该图像数据进行梯形校正之后(步骤S107),检测记录片材的边缘(步骤S108),根据记录片材的边缘的位置和片材堆叠托盘上的标记表示的特征点的位置的相对的位置关系,确定在片材堆叠托盘上被堆叠的片材的尺寸(步骤S109),通知给图像形成装置(步骤S111)。

Description

片材尺寸确定系统、片材尺寸确定方法以及图像形成装置
技术领域
本发明涉及确定在图像形成装置的片材堆叠托盘中设置的片材尺寸的片材尺寸确定系统、片材尺寸确定方法以及图像形成装置。
背景技术
近年来,在图像形成装置的领域中,也是降低成本的要求强烈、希望尽量减少零部件数。
因此,正在研究尽量削减传感器或线束(Harness)等零部件,作为其一,提出了省去供纸用的片材堆叠托盘中的片材尺寸检测传感器。
但是,若废除片材尺寸检测传感器,则用户必须从操作面板直接输入在片材堆叠托盘中载置的片材尺寸,在用户通过比例尺(scale)等来测量片材尺寸的情况下,花费大量工夫,此外,若通过估计来判断而输入,则存在容易弄错片材尺寸的不适。
因此,例如,在专利文献1中,公开了在图像形成装置为复印机的情况下,通过扫描仪来读取片材,进行片材尺寸检测的结构。
现有技术文献
专利文献
专利文献1:(日本)特开平7-253735号公报
发明内容
但是,在专利文献1中,存在如下问题:需要特意从片材堆叠托盘取出记录片材而使扫描仪读取的工夫,且在图像形成装置为打印机专用机的情况下无法实施。
本发明是鉴于如上所述的情况而完成的,其目的在于,提供一种能够利用通用的便携终端而容易确定在片材堆叠托盘上被堆叠的片材尺寸的片材尺寸确定系统、片材尺寸确定方法以及能够应用于这样的片材尺寸确定系统的图像形成装置。
为了达成上述目的,本发明的第一方式是一种片材尺寸确定系统,利用便携终端的摄像部件来确定图像形成装置的片材堆叠托盘上的片材的片材尺寸,其特征在于,所述片材尺寸确定系统具备:分析部件,对由所述摄像部件所取得的、片材被堆叠的状态的片材堆叠托盘的图像数据进行分析;以及尺寸确定部件,关于所述分析的图像,取得表示片材堆叠托盘上的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息,并基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸。
在此,其特征也可以在于,所述图像形成装置具备存储部件,该存储部件将由所述尺寸确定部件所确定的片材尺寸的信息与该片材堆叠托盘相对应地存储。
此外,其特征也可以在于,所述分析部件以及尺寸确定部件设置在便携终端中。
此外,其特征也可以在于,所述分析部件以及尺寸确定部件设置在图像形成装置中,所述便携终端将片材被堆叠的状态的片材堆叠托盘的图像数据发送给图像形成装置,图像形成装置进行所接收的图像数据的分析和片材尺寸的确定。
此外,其特征也可以在于,所述便携终端具备:姿势角检测部件,检测该便携终端主体的姿势角;以及第一禁止部件,根据所述姿势角检测部件的检测结果,判断为所述便携终端主体的、相对于所述片材堆叠托盘的片材载置面的倾斜度超过了预先设定的范围的情况下,禁止所述摄像部件对片材堆叠托盘的摄像。
此外,其特征也可以在于,所述片材堆叠托盘具有一对导向构件,该一对导向构件能够沿与片材输送方向正交的方向移动,和与在片材堆叠托盘上载置的片材的所述片材输送方向正交的方向上的两个边缘抵接而限制片材的堆叠位置,所述片材尺寸确定系统还具备:导向面间距离取得部件,取得所述一对导向构件的导向面间的距离;以及警告部件,在所述取得的导向面间的距离比与片材输送方向正交的方向上的所述片材的边缘间距离大预定以上的情况下,催促片材的重新设置。
此外,其特征也可以在于,在所述片材堆叠托盘的片材堆叠面侧且即使载置在图像形成装置中能够使用的最大尺寸的片材也能够拍摄的区域中,多个第一标记以预定的配置而形成。
在此,其特征也可以在于,所述便携终端具备第二禁止部件,该第二禁止部件在不是所述多个第一标记的全部容纳在摄像部件的视角内时,禁止所述摄像部件对片材堆叠托盘的摄像。
此外,其特征也可以在于,所述多个第一标记中的仅一个的形状和/或色彩与其他的标记不同,所述尺寸确定部件基于所述与其他不同的标记的位置,判定由所述摄像部件所拍摄的片材堆叠托盘的图像中的片材的载置方向。
此外,其特征也可以在于,在所述片材堆叠托盘中,在其片材堆叠面且在以下位置,形成有第二标记,该位置在将特定的尺寸的片材以使其长边方向与片材输送方向平行的方式载置时被该片材所覆盖且将所述特定的尺寸的片材以使其长边方向朝着与片材输送方向正交的朝向的方式载置时不会被覆盖,所述尺寸确定部件基于所述图像数据的分析部件的分析结果中的与片材输送方向正交的朝向上的由所述第一位置信息和第二位置信息所求出的片材的宽度方向的尺寸、和所述第二标记的摄影图像的有无,确定片材尺寸。
此外,其特征也可以在于,所述分析部件具备图像校正部件,该图像校正部件基于多个所述第一标记的摄像位置,对片材堆叠托盘的摄影图像中的梯形失真进行校正,所述尺寸确定部件基于该图像校正后的摄像图像,取得第一位置信息和第二位置信息。
此外,其特征也可以在于,所述便携终端具备姿势角检测部件,该姿势角检测部件检测该便携终端主体的姿势角,所述图像校正部件除了多个所述第一标记的摄像位置之外还基于所述姿势角检测部件的检测结果,对片材堆叠托盘的摄影图像中的梯形失真进行校正。
此外,其特征也可以在于,所述便携终端具备设备信息取得部件,该设备信息取得部件取得包括与所述片材堆叠托盘中的预定的特征点间的距离有关的信息在内的设备信息,所述尺寸确定部件基于所述设备信息和由所述第一位置信息和第二位置信息所获得的相对的位置关系,确定在片材堆叠托盘上被堆叠的片材的尺寸。
此外,其特征也可以在于,所述便携终端能够与所述图像形成装置进行通信,所述设备信息取得部件从所述图像形成装置取得所述设备信息。
此外,其特征也可以在于,所述便携终端经由网络连接到服务器,所述设备信息取得部件经由所述网络从所述服务器取得所述设备信息。
此外,其特征也可以在于,在所述便携终端中,预先下载有用于确定片材尺寸的专用程序,所述设备信息取得部件从该专用程序内的数据取得所述设备信息。
此外,其特征也可以在于,所述设备信息和与图像形成装置的机型有关的信息相关联。
此外,其特征也可以在于,所述尺寸确定部件将片材堆叠托盘上的各第一标记上的预定的点作为特征点,确定片材尺寸。
此外,其特征也可以在于,所述尺寸确定部件将片材堆叠托盘的轮廓上的预定的点作为特征点,确定片材尺寸。
此外,本发明的第二方式是一种片材尺寸确定方法,确定在片材输送装置的供纸托盘上被载置的片材的尺寸,其特征在于,所述片材尺寸确定方法包括:摄像步骤,由具有摄像部件的便携终端拍摄片材被堆叠的状态的片材堆叠托盘;取得步骤,对在所述摄像步骤中拍摄到的图像数据进行分析,取得表示片材堆叠托盘上的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息;以及尺寸确定步骤,基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸。
进一步,本发明的第三方式是一种图像形成装置,能够与具有摄像部件的便携终端进行通信,其特征在于,所述图像形成装置具备:第一取得部件,从便携终端取得由便携终端的摄像部件拍摄到的片材被载置的状态的片材堆叠托盘的图像数据;第二取得部件,对所述取得的图像数据进行分析,取得表示片材堆叠托盘的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息;确定部件,基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸;以及存储部件,与该片材堆叠托盘相关联地存储所述确定的片材的尺寸。
根据本发明,仅仅是在通用的便携终端中拍摄片材堆叠托盘上的片材,就能够简单且可靠地确定片材尺寸。由此,不需要图像形成装置中的片材尺寸检测传感器或其配线用线束等,有助于零部件成本、组装成本的降低,且能够消除用户测量片材尺寸的麻烦、设置记录片材而使复印机的扫描仪读取片材尺寸的工夫。
附图说明
图1是表示本发明的实施方式的片材尺寸确定系统的整体结构的图。
图2是表示在便携终端中拍摄手动托盘的情形的图。
图3是表示便携终端和MFP的电子电路系统的结构的框图。
图4是表示在便携终端中执行的片材尺寸取得处理的顺序的流程图。
图5是表示在便携终端的显示部中显示的手动托盘的摄影图像的例的图。
图6是表示由便携终端的陀螺仪传感器所检测的便携终端的3轴方向上的姿势角的图。
图7(a)~(d)是表示对由便携终端拍摄到的手动托盘的梯形失真进行校正的顺序的示意图。
图8是表示本发明的实施方式的、MFP、便携终端以及服务器间的通信时序的图。
图9是表示MFP、便携终端以及服务器间的通信时序的第一变形例的图。
图10是表示MFP、便携终端以及服务器间的通信时序的第二变形例的图。
图11是表示MFP、便携终端以及服务器间的通信时序的第三变形例的图。
图12是表示片材尺寸取得处理的顺序的流程图的变形例。
图13是用于说明为了取得片材尺寸而在手动托盘的中央部中追加了标记的变形例的图。
图14是用于说明各种片材尺寸和中央部的标记的位置关系的图。
图15是用于说明作为本发明中的梯形校正的变形例的摄像机标定(Cameracalibration)的方法的一例的图。
标号说明
10 打印机部
20 供纸部
21 手动托盘(片材堆叠托盘)
22a~22d 标记(第一标记)
22e 中央标记(第二标记)
23 片材载置面
24 导向构件
30 扫描仪部
40 操作面板
41 显示部
50 控制部
57 设备信息存储部
100 MFP
200 便携终端
201 CPU
203 摄像部
205 图像处理部
209 陀螺仪传感器(姿势角检测部件)
300 无线LAN主机
400 服务器
A~D 标记上的特征点
S 记录片材
具体实施方式
以下,作为本发明的实施方式,说明利用便携终端的摄像功能而确定在多功能的复印机(Multifunction Peripheral:以下,简称为“MFP”)的手动托盘中被载置的片材尺寸的片材尺寸确定系统。
(1)片材尺寸确定系统的整体结构
图1是表示本实施方式的片材尺寸确定系统的整体结构的图。
MFP100经由有线LAN连接到互联网。便携终端200经由无线LAN主机300以Wi-Fi连接到互联网,由此,MFP100和便携终端200能够进行通信。
作为便携终端200,使用一般普及的通用式智能手机或平板式PC等。另外,即使在设置有MFP100的地点,不能进行基于无线LAN主机300的Wi-Fi连接的环境下,尤其在智能手机中也能够经由3G线路或LTE线路等无线通信线路连接到互联网。
400是在互联网上的服务器。多数情况下是MFP100或者便携终端200的制造者提供的云上的服务器。
MFP100作为主要的结构元素而具备打印机部10、供纸部20、扫描仪部30以及控制部50,且是将打印机部10和扫描仪部30之间的空间作为排纸托盘来利用的所谓的机内排纸型的MFP,在打印机部10上部设置有操作面板40。
MFP100具有经由LAN接受来自外部终端(未图示)的打印作业的执行指示,执行打印处理的功能,且经由操作面板40接受扫描、复印、传真等各种作业的执行指示,执行这些作业。
扫描仪部30将在ADF(自动原稿输送装置)中设置的原稿逐张地转出并输送,读取其原稿图像而生成图像数据。
打印机部10基于在扫描仪部30中读取的图像数据、从外部终端与打印作业一同传送而来的图像数据,在从供纸部20输送而来的记录片材上印刷图像。
供纸部20将在MFP100的框体101内部的供纸盒中被容纳的记录片材、在能够向框体101的外部倾倒的手动托盘21中被载置的记录片材逐张地转出,并测量定时而向打印机部10输送。
控制部50统一控制这些打印机部10、供纸部20、扫描仪部30等。此外,如后所述,通过与便携终端200的通信而取得在手动托盘21中被载置的片材的尺寸,并与手动托盘21相关联地保存在内部的存储器中,从而进行片材尺寸设定。
另外,手动托盘21能够以未图示的支承轴为中心沿铅直方向树立而收纳在主体的框体101侧面的凹部(未图示)中,若如图1所示那样向外侧放倒,则以相对于水平方向倾斜了角度θ0的状态维持。
手动托盘21内的供纸方向(片材输送方向)下游侧的前端进入框体101内,以前端与限制板25抵接的方式,将记录片材设置在手动托盘21的载置面上。
在手动托盘21的片材载置面上靠近限制板25的部分,配设有能够沿上下方向摇动的摇动板(未图示),当转出手动托盘21上的记录片材时,通过使摇动板向上方摇动而使片材叠的最上位的记录片材与转出辊26抵接,并使转出辊26旋转,从而传送到内部的片材输送路径。
便携终端200只要能够经由无线LAN等与MFP100以及服务器400进行网络通信,且具备摄像功能,则无论是哪种机型都可以。使用各用户个人具有的便携终端。
图2表示为了拍摄手动托盘21上的记录片材S,用户将便携终端200摆放在手动托盘21的上方的情形。
但是,在图2中,为了方便,没有图示保持便携终端200的用户的手指等。此外,在图2中,由实线示出手动托盘21的整体,但实际上,手动托盘21的设置有限制板25的部分(端部)隐藏在框体101内,不能拍摄到。
在该手动托盘21中,用于限制记录片材S的宽度方向(与供纸方向正交的方向)上的位置的一对导向构件24设置成在该宽度方向上能够对称地滑动。
用户在将记录片材S在手动托盘21上以将其供纸方向前端部与MFP100内部的限制板25接触的方式对齐而载置之后,将一对导向构件24接触到记录片材S的宽度方向(与片材的供纸方向正交的方向)的两端部,从而进行宽度方向的整合和位置对齐。
在手动托盘21的上表面23的4处,附加了红色的4个标记(记号)22a~22d(第一标记)。这些标记22a~22d形成在供纸方向的长度为LFD且宽度方向的长度为LCD的长方形的4个角。在此,该长方形的各顶点(各标记的相互远侧的角的顶点)A、B、C、D作为特征点,在后述的图像分析中的梯形校正时被利用。
另外,各标记22a~22d配置于即使是载置在MFP100中能够使用的最大宽度的记录片材而调配了导向构件24时也能够拍摄到的位置。
此外,只有右下的标记22c的形状与其他的标记22a、22b、22d不同,由此,能够判别摄影图像中的手动托盘21的方向。由于该标记22c只要能够与其他的标记进行区分即可,所以在摄像部203能够进行彩色摄像的情况下,也可以配合形状的差异而设为与其他的标记不同的色彩,也可以是形状相同且只有色彩与其他不同。
便携终端200具有摄像部203,在对由该摄像部203所取得的手动托盘21和在其上载置的片材的图像进行了图像分析之后,确定其片材的尺寸,并通知给MFP100的控制部50。细节在后面叙述。
(2)MFP100和便携终端200的电子电路系统的结构
图3是表示MFP100和便携终端200的电子电路系统的结构的框图。
如同图所示,便携终端200主要由CPU201、通信部202、摄像部203、非易失性存储器204、图像处理部205、RAM206、ROM207、显示部208以及陀螺仪传感器(姿势角检测部件)209构成。
通信部202是用于连接到无线LAN进行数据通信或者连接到电话的通信线路的部件。
摄像部203是由聚焦镜头、CCD图像传感器等固态摄像元件和其驱动电路构成的公知的部件。
非易失性存储器204由EEPROM或闪存等构成,存储在摄像部203中拍摄到的图像数据或者存储从互联网上的服务器400下载的各种应用程序。
图像处理部205对拍摄到的图像数据进行包括梯形失真的校正(梯形校正)或边缘增强处理等图像处理在内的图像分析。
RAM206提供CPU201执行程序时的工作区域。
在ROM207中,存储有用于便携终端200进行动作的基本的程序。
显示部208由液晶显示面板和液晶面板驱动部构成,显示各种图像。此外,在液晶显示面板的表面上层叠有触摸面板,能够通过对于触摸面板的触摸操作而进行各种输入指示。
如图6所示,陀螺仪传感器209是检测Xc、Yc、Zc这3轴方向的旋转角的公知的传感器,检测便携终端200主体的姿势角并通知给CPU201。
另一方面,MFP100的控制部50主要由CPU51、通信部52、RAM53、ROM54、图像处理部55、图像存储器56、设备信息存储部57构成。
通信部52是用于经由有线LAN连接到互联网进行数据通信的部件。
RAM53成为在CPU51执行用于图像形成的程序时的工作区域。ROM54中存储有MFP100进行动作所需的各种程序。
图像处理部55将在供纸部30中读取到的原稿的RGB的图像数据或者在经由通信部52从外部终端接受到的打印作业中包含的RGB的图像数据转换为作为显影色的Y、M、C、K的显影色的图像数据,或者根据需要来实施平滑处理或边缘增强处理、γ校正等处理并使其存储在图像存储器56中。
设备信息存储部57由非易失性存储器构成,将MFP100中的与手动托盘21中的各标记间距离有关的信息等设备信息和与其机型有关的信息相关联地存储。
CPU51读出在ROM54中存储着的各种程序,使打印动作、复印动作等流畅地执行。
(3)片材尺寸取得处理
以下,说明利用便携终端200的摄像部203,自动地取得在MFP100的手动托盘21中设置的记录片材S的片材尺寸,并通知给便携终端200的片材尺寸取得处理。
图4是表示在便携终端200中执行的片材尺寸取得处理的顺序的流程图。
首先,用户在手中的便携终端200的主画面中轻敲“片材尺寸取得”的图标,从而启动片材尺寸取得用的专用应用程序(以下,称为“专用应用”)(步骤S101)。
该专用应用是用户预先访问服务器(云服务器)400而下载到便携终端200的应用(参照后述的图8的P2)。
在该专用应用的下载时其图标自动地注册在便携终端200中,显示在显示部208的主画面上,用户仅仅轻敲其图标就能够启动该专用应用。
若专用应用启动,则基于该专用应用,便携终端200的CPU201首先访问MFP100,取得在MFP100的控制部50的机型信息存储部57内存储着的设备信息(步骤S102)。
这里的设备信息包括与标记22a~22d的距离有关的信息、手动托盘21的倾斜角θ0(参照图1)。
作为与标记22a~22d的距离有关的信息,如图2所示,包括特征点AB间的距离LFD、特征点A和限制板25的记录片材抵接面的距离Lp1、特征点AD间的距离LCD的各实际尺寸的值。
此时,由摄像部203拍摄到的图像显示在显示部208中(步骤S103)。
在本实施方式中,用户特意将便携终端200摆放为如下:其显示部208的画面的纵方向为尽量与手动托盘21的供纸方向正交的方向(即,与线段AD平行的方向)且便携终端200的显示部208的显示面与手动托盘21的上表面23成为平行。
该摄像部203的摄影图像按每一定的帧速率临时地保存在RAM206内的页面存储器中,显示在显示部208中。
便携终端200的图像处理部205通过对该摄影图像进行图像处理而提取轮廓,从而检测各标记22a~22d并通知给CPU201,CPU201判定4个角的标记22a~22d是否容纳在显示部208的视角内(步骤S104)。
各标记的检测通过所提取的轮廓和在专用应用中预先注册的标记图像的匹配处理而进行。在标记的形状按每个机型而不同的情况下,在从MFP100取得的设备信息内预先包括与该机型特有的标记的形状有关的信息,进行与该标记图像的匹配处理即可。
另外,任意的标记是否在视角内(摄像部203的摄像范围内)能够根据该提取出的各标记图像的页面存储器中的存储器地址是否在图像显示范围内来判定。
在4个标记22a~22d没有容纳在显示部208的视角内的情况下(步骤S104中“否”),由于不能执行后述的梯形校正,所以用户变更便携终端200的位置或倾斜度,直到4个标记22a~22d容纳在视角内为止,重复步骤S103、104。
在步骤S104中判定为“否”时,也可以使显示部208对用户显示“请使得4个标记进入画面内。”这样的消息。
由于该用户进行的摄像范围的修正能够在某种程度上直观地进行,所以不那么需要工夫。
图5表示手动托盘21的4个标记容纳在视角内,准确地显示在便携终端200的显示部208的情形。
若4个标记22a~22d容纳在视角内,在步骤S104中判定为“是”,则接着判定便携终端200的姿势角是否在容许范围内。
期望便携终端200的显示部208和手动托盘21的片材载置面23尽量平行,这是因为如下原因:若便携终端200相对于手动托盘21的片材载置面23极端地倾斜,则由获得的4个标记22a~22d所形成的四边形成为与图5的例不同的严重失真的形状,存在对之后的图像分析或片材尺寸的确定带来障碍的顾虑。
如上所述,在便携终端200内内置有陀螺仪传感器209,所以如图6所示,能够测量绕着3轴的旋转量,但在本实施方式中,只判定与绕着Xc轴(与便携终端200的显示部208的长边方向正交的方向)的水平方向构成的角度α、绕着Yc轴(便携终端200的显示部208的长边方向)的角度β。由于绕着Zc轴(与便携终端200的显示部208的显示面垂直的方向)的角度γ与便携终端200和片材载置面23的平行性无关,所以以下在本说明书中,将上述α以及β定义为便携终端200的姿势角。
并且,在步骤S105中,具体而言,判定便携终端200相对于片材载置面23的姿势角α、β是否都为预定的角度(例如,15°)以下。
此时,在摄像图像中,通过检测形状与其他不同的标记22c的相对位置,能够识别所拍摄到的手动托盘21的方向。
例如,如图5所示,在标记22c位于右下的情况下,可知向图的左侧供纸,所以手动托盘21绕着Yc轴右方向向上倾斜θ0。
因此,判定在陀螺仪传感器209中检测到的β的值是否为-15°+θ0≤β≤15°+θ0。由于在Xc轴方向上片材载置面23没有倾斜,所以只要判定是否为-15°≤α≤15°即可。
在步骤S105中判定为“否”的情况下,摄像也被禁止,并返回到步骤S103,只有在步骤S104和步骤S105的双方中判定为“是”的情况下,允许摄像,并将在此时的显示部208中显示着的画面作为静止图像而捕捉在非易失性存储器204的图像存储器区域中(摄影图像保存)(步骤S106)。
并且,在步骤S107中,对捕捉图像进行分析而进行梯形校正(步骤S107)。
作为该梯形校正,能够使用公知的各种方法。
由于片材的尺寸遵照例如JIS标准,具有某种程度的宽度而阶段性地增减,所以即使不严格地检测各个尺码,也比较容易确定片材尺寸,所以以下说明简单的梯形校正方法的例。
作为一例,考虑由通过捕捉图像的图像处理而提取到的4个标记22a~22d的每一个的角的特征点ABCD构成的四边形,在初始的摄影图像上如图7(a)所示由四边形A1B1D1C1示出的情况。
首先,使线段C1D1向箭头方向旋转其与水平构成的角θ1而获得四边形A2B2C2D1(图7(b))。
进一步,为了将上边A2B2平行于下边D1C2,以点A2为中心逆时针旋转θ2,将旋转后的A2B2和旋转前的B2C2的延长线的交点作为B3,获得梯形A2B3C2D1(图7(c))。
并且,使线段A2D1、线段B3C2以分别向外侧打开θ3、θ4的方式旋转,使得角A2D1C2和角B3C2D1分别成为90°,最终获得矩形A3B4C2D1。
伴随着这样的将最初的变形的四边形A1B1C1D1校正为矩形A3B4C2D1,该四边形的4个边上的像素、四边形内部以及周边的像素也被进行旋转、扩展、压缩处理。
即,在旋转四边形整体时,其他的像素也被进行旋转处理(图7(b)),关于如图7(c)(d)那样变更边的角度而从对边扩大的部分,根据其扩大的程度,在垂直方向(图7(c)的情况下)或者水平方向(图7(d)的情况下)上,根据其扩大的程度而通过线性插值等进行像素的插值,关于以靠近对边的方式将边倾斜的部分,间拔像素而压缩。
返回到图4,关于如上所述那样结束了梯形校正的图像处理的图像数据,进一步分析,提取记录片材S的轮廓,检测宽度方向(CD方向)上的一对边缘和供纸方向(FD方向)上的外侧(供纸方向上游侧)的边缘(步骤S108)。
由于记录片材S通常是白色,明度比成为底层的手动托盘21的片材载置面23的表面的颜色大,所以能够对图像数据进行扫描而检测明度的变化成为一定的阈值以上的位置的像素作为记录片材S的边缘(以下,“片材边缘”)。
除此之外,当然也可以通过公知的霍夫变换处理或边缘增强处理等来检测。
并且,能够基于图像数据上的片材边缘的位置信息和梯形校正后的特征点ABCD的位置信息以及设备信息,例如如下确定片材尺寸(步骤S109)。
若将图5设为进行了梯形校正之后的便携终端200的显示部208中的图像,则记录片材的宽度方向的边缘间距离Scd与标记22a的A点和标记22d的D点在图像上的距离Lcd之比R1通过各特征点和片材边缘上的点E1、E2的存储器地址来容易求出。
由于在上述步骤S106中取得的设备信息中包括距离LCD的实际尺寸(L1),所以通过L1×R1来求出记录片材S的宽度SCD的实际尺寸。
此外,同样地,求出标记22a的A点到记录片材的FD方向的距离SFD与标记22a的A点和22b的B点在图像上的距离LFD之比R2。
若将标记22a、22b的各点A、B间的距离LFD的实际尺寸设为L2,则对该L2乘以上述比R2来求出SFD的实际尺寸。
由于从标记22a的A点到限制记录片材S的供纸方向前端位置的限制板25为止的距离Lp1(实际尺寸)已经从MFP100作为设备信息而取得,所以通过对上述求出的SFD的实际尺寸加上该Lp1,能够获得记录片材S的供纸方向的实际尺寸。
在专用应用的数据中,包括与片材尺寸的供纸方向和宽度方向上的实际尺寸相对应地,将JIS显示中的片材尺寸(A3、A4、A5、……、B4、B5、B6、……以及它们是横置(Y)还是纵置(T)的区分)相关联的片材尺寸表格(未图示),参照该片材尺寸表格,能够确定当前在手动托盘21中被载置的记录片材的尺寸。
例如,在供纸方向和宽度方向的实际尺寸分别为210mm、294mm的情况下,判定为A4尺寸Y,并将该片材尺寸显示在便携终端200的显示部208中通知给用户(步骤S110)。
另外,不一定在设备信息中包括实际尺寸L1、L2、Lp1的信息,只要作为设备信息而包括表示上述比R1、R2的组合和片材尺寸的对应的表格,通过参照该表格,能够确定片材尺寸。
上述确定的片材尺寸的信息经由LAN通知到MFP100(步骤S111)。
以上,完成便携终端200中的片材尺寸取得处理而结束专用应用。
在MFP100侧,将该片材尺寸与手动托盘21相关联地存储在例如设备信息存储部57中,且根据需要,将该相关联的内容显示在操作面板40的显示部41中。
并且,在用户将该手动托盘21选择为供纸口时,从该手动托盘21提供记录片材S,执行复印作业或者打印作业。
如以上所述,根据本实施方式,若在手中的便携终端200中预先安装片材尺寸确定用的专用应用,则仅仅启动该专用应用而拍摄手动托盘21,就能够对MFP100容易地设定在手动托盘21中设置的片材尺寸。
(4)通信时序
图8是表示上述MFP100、便携终端200、服务器400间的通信时序的图。
另外,以下,为了简化说明,将图4的流程图中的步骤S103~106的处理集中称为“摄像处理”,将步骤S107、S108的处理集中称为“图像分析”。
用户预先对服务器400请求专用应用的发送(P1),将该专用应用下载到便携终端200(P2)。
并且,若用户注册到便携终端200,轻敲在显示部208中显示的图标而启动专用应用(P3),则请求MFP100发送设备信息(P4),从MFP100取得设备信息(P5)。
接着,执行摄像处理(P6)以及图像分析(P7)。
如上所述,根据图像分析的结果和设备信息,确定具体的片材尺寸(P8),在显示部208中显示片材尺寸(P9),且将所确定的片材尺寸的信息发送给MFP100(P10)。
在MFP100中,将该被通知的片材尺寸与手动托盘21相关联地,注册在控制部50内部的存储器的表格内(片材尺寸设定)(P11),并将该相关联的片材尺寸的信息显示在显示部41中(P12)。
如以上所述,在本实施方式的便携中,在一般普及的便携终端200中预先安装专用应用,并根据需要使其启动,仅仅拍摄手动托盘21上的记录片材就自动地确定片材尺寸,在MFP100中与手动托盘21相关联地被设定片材尺寸,所以在MFP100侧不需要用于检测手动托盘21上的片材尺寸的传感器、配线等,有助于MFP100中的成本下降。此外,也不需要用户自己判断片材尺寸而特意输入到MFP100的工夫。
<变形例>
本发明并不限定于上述实施方式,还能够考虑如下所述的变形例。
(1)在上述实施方式中,从便携终端200对MFP100请求而取得其设备信息(图8的P4、P5),但也可以从服务器400取得该设备信息。
图9是表示示出在这样的情况下的变形例的通信时序的图。
例如,在MFP100的购买时等,将用户ID与MFP100的机型相关联地预先注册(用户注册)在服务器400内的HDD等存储装置内的表格中。
此外,在服务器400的存储装置中,由MFP100的制造者,按MFP100的每个机型,相关联地注册包括上述各种尺码的设备信息。
若用户操作便携终端200,示出自己的用户ID而将专用应用的发送请求传送给服务器400(P1),则在服务器400中,将与该用户ID对应的机型的设备信息嵌入在专用应用中发送给便携终端200而使其下载。
若在便携终端200中专用应用被启动(P3),则嵌入在该专用应用中的MFP100的设备信息也被读出,由此,如图8的实施方式所示,具有省去另外向MFP100询问设备信息的步骤P4、P5这样的优点。
关于以后的步骤,与图8相同,所以省略说明。
(2)在上述各实施方式中,启动专用应用,在便携终端200侧执行摄像处理和分析处理以及片材尺寸确定处理的全部。因此,便携终端200中的处理的负荷大。
根据便携终端200的机型,也有可能存在CPU201的处理速度变慢或者非易失性存储器204的容量少而不能充分地实施上述专用应用的情况。
因此,在本变形例中,构成为直到摄像处理为止是在便携终端200中执行,并对服务器400发送所拍摄到的图像数据,在服务器400侧执行图像分析以及片材尺寸确定处理。
图10是表示本变形例中的、MFP100、便携终端200、服务器400间的通信时序的图。
预先从便携终端200访问服务器400而请求专用应用,进行下载(Q1、Q2)。
在取得手动托盘21上的片材尺寸时,在便携终端200中启动上述专用应用(Q3),执行摄像处理(Q4)。
另外,在这里的专用应用中,与图8或图9的专用应用相比,在便携终端200侧也可以是不包括进行图像分析并确定片材尺寸的程序的简单的专用应用。
并且,将其拍摄到的图像数据与用户ID一同发送给服务器400,进行图像分析委托(Q5)。若用户ID是自动地发送预先注册在便携终端200中的用户ID,则在向服务器400发送图像数据时,用户也可以不特意输入用户ID。
与上述(1)的变形例同样地,在服务器400中,预先与用户ID相对应地MFP100的机型和设备信息相关联地注册在表格中,在服务器400中,参照该表格而取得MFP100的设备信息(Q6)。
此外,服务器400若从便携终端200接收到图像分析委托,则启动该专用应用,针对接收到的图像数据,执行图像分析(Q7)和基于此的片材尺寸确定处理(Q8)。
若片材尺寸被确定,则服务器400将该确定的片材尺寸通知给便携终端200(Q9)。
便携终端200对MFP100通知该片材尺寸(Q10),且在本装置的显示部208中显示其片材尺寸。
在MFP100中,在内部存储器内的表格中,与手动托盘21相对应地,将该片材尺寸相关联地注册而设定(Q12),且在操作面板40的显示部41中显示该相关联的信息(Q13)。
另外,也可以与图8的情况同样地,设备信息从便携终端200对MFP100询问,并将其回答通知给服务器400。
根据本变形例,由于在服务器400中执行负荷比较大的图像分析处理,所以还能够减少由应在便携终端200中执行的专用应用所占有的存储器容量,也可以减少便携终端200的CPU201的负荷。
(3)图11是表示又一其他的变形例的片材尺寸取得处理中的MFP100和便携终端200的通信时序的图。
在本变形例中,与上述实施方式的不同点在于,便携终端200从MFP100取得专用应用以及由MFP100执行图像分析和片材尺寸确定处理。
即,便携终端200预先访问MFP100而请求专用应用,从MFP100进行下载(R1、R2)。
在便携终端200中启动专用应用之后(R3),执行摄像处理(R4),将其拍摄到的图像数据发送给MFP100,且进行图像分析委托(R5)。
在MFP100的控制部50中,首先,从机型信息存储部57取得自己的设备信息(R6),且针对从便携终端200接收到的图像数据,执行图像分析(R7)。
并且,基于上述分析结果和自己的设备信息,确定片材尺寸(R8),并与手动托盘21相关联地设定片材尺寸(片材尺寸设定)(R9)。
将上述确定的片材尺寸通知给便携终端200(R10),且显示在操作面板40的显示部41中(R11)。
便携终端200若从MFP100接收到所确定的片材尺寸的信息,则还显示在自己的显示部208中(R12)。
在本变形例中,由于在MFP100侧执行负荷比较大的图像分析,所以还能够减少应在便携终端200中执行的专用应用所需的存储器容量,也可以减少对于便携终端200的CPU201的负荷。
此外,由于MFP100自身基于从便携终端200取得的图像数据来判定片材尺寸,所以不需要从其他地方获得设备信息。
另外,在本变形例中,从MFP100取得在便携终端200中被执行的图像处理的专用应用,但也可以与上述实施方式同样地,从服务器400取得。
(4)在上述实施方式中,在图像分析中,根据标记22a~22d上的特征点A~D的位置进行了梯形校正之后,检测同特征点A、C、D的位置信息(距离信息)和记录片材S的边缘位置而确定片材尺寸。
在本变形例中,进一步,检测一对导向构件24的内侧边缘的位置,求出两者边缘间的距离LG(参照图2),检查记录片材对于手动托盘21的设置状态。
即,在图像分析中,求出像素上的导向构件24的边缘间距离和特征点AD的距离之比R3,对设备信息内的特征点AD的距离乘以上述R3而求出导向构件24的内侧边缘间距离LG
并且,若该距离LG比在实施方式中求出的记录片材的宽度的实际尺寸大预定值以上,则成为在导向构件24的导向面和记录片材的宽度方向的边缘部之间产生缝隙。
在该情况下,因导向构件24而记录片材没有被设置在以手动托盘21的宽度方向上的中心线(参照图14的一点划线Lc)为基准的位置(中心基准位置)的盖然性高,存在在通过转出辊26(参照图2)转出时产生倾斜(Skew)的顾虑,因此期望警告用户,使其重新设置。
图12是表示在本变形例中在便携终端200中执行的片材尺寸取得处理的部分流程图,与实施方式中的图4的流程图的不同点在于,在步骤S108以后插入步骤S201~步骤S204。
即,在步骤S108中,检测到记录片材的边缘之后,通过公知的图像处理而提取导向构件24的轮廓,检测其内侧的边缘(步骤S201)。
基于在步骤S102中取得的设备信息,求出片材边缘宽度和导向构件边缘宽度的实际尺寸,判定两者之差是否为预定值以上(步骤S202)。
即,根据图像数据上的标记22a、22d上的特征点A、D的位置信息、片材的宽度方向的两个边缘位置信息、导向构件24的两个内侧边缘的位置信息,求出各个图像数据的存储器地址上的间隔(像素数),求出SCD(参照图5)、LG(参照图2)相对于LCD的比率R1、R3,若对在设备信息中包含的LCD的实际尺寸分别乘以R1、R3,则可知片材边缘宽度SCD和导向构件边缘宽度LG的实际尺寸,所以判定它们的差(导向构件边缘宽度LG的实际尺寸-片材边缘宽度SCD的实际尺寸)是否小于预定值(例如,3mm)。
在该判定结果为肯定的情况下(步骤S202中“是”),由于在记录片材的转出时产生倾斜的顾虑少,所以紧接着执行下一个片材判定处理(步骤S109)。
另外,在步骤S202中的判定结果为否定的情况下(步骤S202中“否”),即,判定为一对导向构件24的间隔比片材宽度为预定值以上的情况下,由于导向构件24不能充分地起到供纸时的导向的功能,存在产生倾斜的顾虑,所以在便携终端200的显示部208中显示用于促使缩窄导向构件24而使得记录片材S的宽度方向的位置变得准确的消息,警告用户(步骤S203),返回到步骤S103,重复其以后的处理。
也可以将该警告内容发送给MFP100,显示在MFP100的操作面板40的显示部41中。
若用户基于在显示部208中显示的警告,使导向构件24与记录片材叠的宽度方向的边缘轻轻地抵接而准确地设置记录片材,则在下一个步骤S202的判定中会被判定为“是”,所以接着执行步骤S109的片材尺寸判定。
关于其他的步骤的细节,与在图4中说明的内容相同,所以省略说明。
(4)在上述实施方式中,MFP100和便携终端200间的通信经由LAN进行,但在MFP100和便携终端200的双方具有基于蓝牙(BlueTooth)的通信或红外线通信等其他的通信功能的情况下,也可以利用它们。
(5)在上述实施方式中,在手动托盘21的片材载置面23上形成4个标记22a~22d(第一标记),设为能否进行摄像保存或用于梯形校正的基准,或者用于确定片材尺寸,但除此以外,例如也可以如图13所示,在片材载置面23的大致中央部设置标记22e(第二标记),根据其是否被载置的记录片材所遮盖来判别特定的片材尺寸。
图14表示将该中央标记22e设置在手动托盘21的片材载置面23的范围的适当的例。
若在同图所示的斜线的范围内设置中央标记22e,则通过针对进行了梯形校正的图像数据,求出宽度方向(AD方向)的实际尺寸,接着判定中央标记22e是否被拍摄在摄像画面中,能够确定在MFP100中比较频繁地使用的记录片材的片材尺寸。
在同图中,例如,若宽度方向的尺码判明为257mm,通过图像分析而判定为图像内拍摄到中央标记22e,则片材尺寸能够确定为B5Y,若没有拍摄到中央标记22e,则片材尺寸能够确定为B4T。此外,若宽度方向的尺码判明为297mm,图像内拍摄到中央标记22e,则片材尺寸能够确定为A4Y,若没有拍摄到,则能够确定为A3T。同样地,也能够确定其他的B6Y、B4Y、A4T等。
根据该方法,无需如上述实施方式那样特意连走纸方向上的记录片材的实际尺寸也求出,也能够确定片材尺寸,所以片材尺寸取得处理变得更容易。
(6)在上述实施方式中,说明了摄影图像的图像分析中的梯形校正的简单的方法,但也可以使用其他在数码相机中的图像处理的领域中广泛已知的、使用了同形矩阵的摄像机标定(梯形法)的方法进行梯形校正。
以下,基于图15的图像图,简单说明摄像机标定的一例。
在手动托盘21的三维坐标系(世界坐标系)中的点的坐标P和将其进行了投影变换(projective transformation)的显示部208上的二维坐标系(图像坐标系)中的坐标p之间,以下的公式1成立。
【式1】
sp=HP
……(公式1)
在此,上述s、H与坐标P、p一同被称为外部参数,s表示比例尺系数,H表示同形矩阵。
比例尺系数s是表示世界坐标系中的位移量和图像坐标系中的位移量之比的系数。
此外,同形矩阵H是用于将坐标P投影变换为坐标p的行列式,由以下的公式2表示。
【式2】
在上式中,
f:便携终端200的摄像部203的透镜的焦距
(su,sv):显示部208的显示画面中的水平方向的像素间距离(su)以及垂直方向的像素间距离(sv)
(u0、v0):图像坐标系中的图像的主点坐标(中心坐标)
ks:剪切系数
r1:便携终端200的绕着Xc轴的从水平方向的旋转移动量
r2:便携终端200的绕着Yc轴的从水平方向的旋转移动量
t:平行移动量
以上的参数被称为内部参数。
其中,r1、r2使用由便携终端200的陀螺仪传感器209所测量的参数。
在一次的摄像处理中,若将手动托盘21上的4个特征点(A,B、C、D)的世界坐标和与它们对应的图像坐标系中的4个特征点p的坐标值代入公式1,则2个联立方程式成立。
因此,若进行3次摄像处理,则它们的摄像时的r1、r2、t稍微不同,所以结果能够获得6个联立方程式,通过对它们进行求解,能够估计外部参数和内部参数。
这样自动地校正产生了失真的摄影图像的方法被称为摄像机标定,作为估计上述内部参数、外部参数的方法,提出了各种方法。
上述的是使用了Zhang算法的方法,详细而言,记载在Zhengyou Zhang的论文“‘AFlexible New Technique for Camera Calibration’,Technical Report MSR-TR-98-71,Microsoft Research,1998”中。
此外,在被称为OpenCV的开源的面向图书馆的计算机视觉“Open SourceComputer Vision Library.”中,提出了通过上述算法而估计内部参数、外部参数的具体的程序,所以在本说明书中,省略更多的详细的说明。
当然,作为估计内部参数、外部参数的方法,并不限定于上述的方法,也可以通过其他的公知的手段来估计内部参数、外部参数。
通过以上的摄像机标定,显示部208的梯形状的手动托盘21的图像被校正(梯形校正)为矩形,所以接着实施上述实施方式中的图4的步骤S108以后,就能够更加准确地确定片材尺寸。
(7)另外,为了决定摄像范围并进行梯形校正,手动托盘21的片材载置面23面上的标记的数目优选为4个,但根据在梯形校正时被执行的协议,可以是3个,也可以是5个以上。
(8)在上述实施方式中,说明了使用便携终端的摄像功能和专用应用,确定在手动托盘21中被载置的片材的尺寸的系统,但同样地,也能够应用于收纳在MFP100的框体101内,向跟前拉出来进行片材更换或补充的供纸盒中的片材尺寸的检测。
在该情况下,也需要构成为如下:在向跟前拉出供纸盒的状态下,4个标记形成在不会被片材或片材导向遮盖的位置,且能够拍摄。
但是,这样在各供纸盒、手动托盘等记录片材的载置地点为多个的情况下,在便携终端200中确定在那里载置的片材尺寸的情况下,希望确定其载置地点的信息(以下,称为“载置地点确定信息”)被附加在该供纸盒、手动托盘的片材载置面上的能够拍摄的位置。希望这样的载置地点确定信息以标记的形状、标记的数目或者记号等能够通过图像分析而取得的形态来附加。
在设备信息中,与该载置地点信息相关联地包括用于确定上述的片材尺寸所需的信息,在便携终端200中所确定的片材尺寸与该载置地点相对应地存储在MFP100内的存储器中。
(9)在上述实施方式中,求出各标记间的距离和片材边缘间的距离之比,根据标记间的实际尺寸来求出片材边缘间的距离,但也可以代替标记,利用手动托盘21的轮廓的位置。
例如,通过检测手动托盘21的宽度方向的边缘,求出片材边缘间距离相对于该边缘间距离Lt(参照图2)的比率R4,并作为设备信息而包括手动托盘21的宽度(边缘间距离)的实际尺寸,对该手动托盘21的宽度乘以比率R4,也能够求出CD方向的片材宽度。
同样地,FD方向上的片材宽度也能够通过检测FD方向上的手动托盘21的后端部的边缘,根据该位置信息和片材的FD方向后端部的边缘的位置信息,与上述实施方式同样地检测片材的FD方向上的尺寸。
(10)在上述实施方式中,作为图像形成装置的例,说明了MFP,但只要是具有片材堆叠托盘的装置,则可以是打印机专用机,也可以是传真专用机,此外,可以是单色图像形成装置,也可以是彩色图像形成装置。
(11)此外,如果可能,则上述实施方式以及各变形例也可以进行组合。
另外,本发明的对象也能够作为利用便携终端200而确定片材尺寸的片材尺寸确定方法来理解,还能够作为在便携终端200中下载的专用应用程序来理解。
专用应用的取得除了如实施方式那样经由网络而取得之外,还考虑例如在USB存储器等的计算机能够读取的记录介质中预先记录专用应用,便携终端200中读入它来安装的情况。
进一步,本发明的对象还能够作为与便携终端200进行网络连接而能够确定片材尺寸的图像形成装置本身来理解。
本发明适合作为图像形成装置中的无片材尺寸检测传感器而确定片材堆叠托盘上的片材的尺寸的技术。

Claims (21)

1.一种片材尺寸确定系统,利用便携终端的摄像部件来确定图像形成装置的片材堆叠托盘上的片材的片材尺寸,其特征在于,所述片材尺寸确定系统具备:
分析部件,对由所述摄像部件所取得的、片材被堆叠的状态的片材堆叠托盘的图像数据进行分析;以及
尺寸确定部件,关于所述分析的图像,取得表示片材堆叠托盘上的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息,并基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸。
2.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述图像形成装置具备存储部件,该存储部件将由所述尺寸确定部件所确定的片材尺寸的信息与该片材堆叠托盘相对应地存储。
3.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述分析部件以及尺寸确定部件设置在便携终端中。
4.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述分析部件以及尺寸确定部件设置在图像形成装置中,
所述便携终端将片材被堆叠的状态的片材堆叠托盘的图像数据发送给图像形成装置,图像形成装置进行所接收的图像数据的分析和片材尺寸的确定。
5.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述便携终端具备:
姿势角检测部件,检测该便携终端主体的姿势角;以及
第一禁止部件,根据所述姿势角检测部件的检测结果,判断为所述便携终端主体的、相对于所述片材堆叠托盘的片材载置面的倾斜度超过了预先设定的范围的情况下,禁止所述摄像部件对片材堆叠托盘的摄像。
6.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述片材堆叠托盘具有一对导向构件,该一对导向构件能够沿与片材输送方向正交的方向移动,和与在片材堆叠托盘上载置的片材的所述片材输送方向正交的方向上的两个边缘抵接而限制片材的堆叠位置,
所述片材尺寸确定系统还具备:
导向面间距离取得部件,取得所述一对导向构件的导向面间的距离;以及
警告部件,在所述取得的导向面间的距离比与片材输送方向正交的方向上的所述片材的边缘间距离大预定以上的情况下,催促片材的重新设置。
7.如权利要求1所述的片材尺寸确定系统,其特征在于,
在所述片材堆叠托盘的片材堆叠面侧且即使载置在图像形成装置中能够使用的最大尺寸的片材也能够拍摄的区域中,多个第一标记以预定的配置而形成。
8.如权利要求7所述的片材尺寸确定系统,其特征在于,
所述便携终端具备第二禁止部件,该第二禁止部件在不是所述多个第一标记的全部容纳在摄像部件的视角内时,禁止所述摄像部件对片材堆叠托盘的摄像。
9.如权利要求7所述的片材尺寸确定系统,其特征在于,
所述多个第一标记中的仅一个的形状和/或色彩与其他的标记不同,
所述尺寸确定部件基于所述与其他不同的标记的位置,判定由所述摄像部件所拍摄的片材堆叠托盘的图像中的片材的载置方向。
10.如权利要求7所述的片材尺寸确定系统,其特征在于,
在所述片材堆叠托盘中,在其片材堆叠面且在以下位置,形成有第二标记,该位置在将特定的尺寸的片材以使其长边方向与片材输送方向平行的方式载置时被该片材所覆盖且将所述特定的尺寸的片材以使其长边方向朝着与片材输送方向正交的朝向的方式载置时不会被覆盖,
所述尺寸确定部件基于所述图像数据的分析部件的分析结果中的与片材输送方向正交的朝向上的由所述第一位置信息和第二位置信息所求出的片材的宽度方向的尺寸、和所述第二标记的摄影图像的有无,确定片材尺寸。
11.如权利要求7所述的片材尺寸确定系统,其特征在于,
所述分析部件具备图像校正部件,该图像校正部件基于多个所述第一标记的摄像位置,对片材堆叠托盘的摄影图像中的梯形失真进行校正,
所述尺寸确定部件基于该图像校正后的摄像图像,取得第一位置信息和第二位置信息。
12.如权利要求11所述的片材尺寸确定系统,其特征在于,
所述便携终端具备姿势角检测部件,该姿势角检测部件检测该便携终端主体的姿势角,
所述图像校正部件除了多个所述第一标记的摄像位置之外还基于所述姿势角检测部件的检测结果,对片材堆叠托盘的摄影图像中的梯形失真进行校正。
13.如权利要求1至12的任一项所述的片材尺寸确定系统,其特征在于,
所述便携终端具备设备信息取得部件,该设备信息取得部件取得包括与所述片材堆叠托盘中的预定的特征点间的距离有关的信息在内的设备信息,
所述尺寸确定部件基于所述设备信息和由所述第一位置信息和第二位置信息所获得的相对的位置关系,确定在片材堆叠托盘上被堆叠的片材的尺寸。
14.如权利要求13所述的片材尺寸确定系统,其特征在于,
所述便携终端能够与所述图像形成装置进行通信,
所述设备信息取得部件从所述图像形成装置取得所述设备信息。
15.如权利要求13所述的片材尺寸确定系统,其特征在于,
所述便携终端经由网络连接到服务器,
所述设备信息取得部件经由所述网络从所述服务器取得所述设备信息。
16.如权利要求13所述的片材尺寸确定系统,其特征在于,
在所述便携终端中,预先下载有用于确定片材尺寸的专用程序,
所述设备信息取得部件从该专用程序内的数据取得所述设备信息。
17.如权利要求13所述的片材尺寸确定系统,其特征在于,
所述设备信息和与图像形成装置的机型有关的信息相关联。
18.如权利要求7所述的片材尺寸确定系统,其特征在于,
所述尺寸确定部件将片材堆叠托盘上的各第一标记上的预定的点作为特征点,确定片材尺寸。
19.如权利要求1所述的片材尺寸确定系统,其特征在于,
所述尺寸确定部件将片材堆叠托盘的轮廓上的预定的点作为特征点,确定片材尺寸。
20.一种片材尺寸确定方法,确定在片材输送装置的片材堆叠托盘上被载置的片材的尺寸,其特征在于,所述片材尺寸确定方法包括:
摄像步骤,由具有摄像部件的便携终端拍摄片材被堆叠的状态的片材堆叠托盘;
取得步骤,对在所述摄像步骤中拍摄到的图像数据进行分析,取得表示片材堆叠托盘上的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息;以及
尺寸确定步骤,基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸。
21.一种图像形成装置,能够与具有摄像部件的便携终端进行通信,其特征在于,所述图像形成装置具备:
第一取得部件,从便携终端取得由便携终端的摄像部件拍摄到的片材被载置的状态的片材堆叠托盘的图像数据;
第二取得部件,对所述取得的图像数据进行分析,取得表示片材堆叠托盘的预定的特征点的位置的第一位置信息和表示片材的轮廓的位置的第二位置信息;
确定部件,基于所述取得的第一位置信息和第二位置信息,确定在片材堆叠托盘上被堆叠的片材的尺寸;以及
存储部件,与该片材堆叠托盘相关联地存储所述确定的片材的尺寸。
CN201610474107.9A 2015-07-01 2016-06-24 片材尺寸确定系统、片材尺寸确定方法以及图像形成装置 Active CN106331408B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015132731A JP6233356B2 (ja) 2015-07-01 2015-07-01 シートサイズ特定システム、シートサイズ特定方法、シートサイズ特定プログラムおよび画像形成装置
JP2015-132731 2015-07-01

Publications (2)

Publication Number Publication Date
CN106331408A true CN106331408A (zh) 2017-01-11
CN106331408B CN106331408B (zh) 2019-02-22

Family

ID=56080260

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610474107.9A Active CN106331408B (zh) 2015-07-01 2016-06-24 片材尺寸确定系统、片材尺寸确定方法以及图像形成装置

Country Status (4)

Country Link
US (1) US9926156B2 (zh)
EP (1) EP3112938B1 (zh)
JP (1) JP6233356B2 (zh)
CN (1) CN106331408B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108696668A (zh) * 2017-03-30 2018-10-23 佳能株式会社 图像读取装置和图像形成装置
CN110800003A (zh) * 2017-06-29 2020-02-14 罗伯特·博世有限公司 用于测量件装货物维度的装置和方法
CN111532823A (zh) * 2019-02-01 2020-08-14 无锡先导智能装备股份有限公司 电池物料的纠偏方法及电池物料的纠偏设备
CN112862747A (zh) * 2020-12-07 2021-05-28 英特尔产品(成都)有限公司 对芯片托盘堆叠的图像进行处理和分析的方法和图像处理系统以及芯片托盘堆叠检测装置

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6765858B2 (ja) * 2016-05-31 2020-10-07 キヤノン株式会社 画像処理方法、プログラム、及び画像処理装置
JP6880819B2 (ja) * 2017-02-23 2021-06-02 コニカミノルタ株式会社 画像処理装置
JP7135764B2 (ja) * 2018-11-16 2022-09-13 株式会社リコー 記録媒体供給システム、記録媒体供給装置及び記録媒体供給方法
US10897573B2 (en) * 2018-11-21 2021-01-19 Ricoh Company, Ltd. Image capturing system, terminal and computer readable medium which correct images
JP7225764B2 (ja) * 2018-12-17 2023-02-21 コニカミノルタ株式会社 撮像システム、画像形成装置、撮像装置及びプログラム
JP2020098980A (ja) * 2018-12-17 2020-06-25 セイコーエプソン株式会社 画像読取装置、画像読取方法および画像読取システム
JP7371451B2 (ja) 2019-11-14 2023-10-31 ブラザー工業株式会社 プログラム
JP7400445B2 (ja) * 2019-12-24 2023-12-19 ブラザー工業株式会社 印刷情報処理システム、印刷情報処理方法、及びサーバ
CN110942054B (zh) * 2019-12-30 2023-06-30 福建天晴数码有限公司 页面内容识别方法
CN111429511B (zh) * 2020-04-02 2023-11-03 京东科技信息技术有限公司 机柜中设备位置确定方法、故障检测方法、装置及系统
JP2022048710A (ja) * 2020-09-15 2022-03-28 シャープ株式会社 自動原稿搬送装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002101275A (ja) * 2000-09-21 2002-04-05 Minolta Co Ltd サイズ検出装置
JP2005041678A (ja) * 2003-07-25 2005-02-17 Fuji Xerox Co Ltd シート判別装置、画像形成装置、画像処理装置、シート判別方法
US20050206972A1 (en) * 2004-03-19 2005-09-22 Canon Kabushiki Kaisha Sheet supplying apparatus
CN101729717A (zh) * 2008-10-10 2010-06-09 株式会社理光 图像形成设备、纸张进给控制方法及计算机程序产品

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07253735A (ja) 1994-03-16 1995-10-03 Ricoh Co Ltd 画像形成装置
US6650397B2 (en) * 2001-05-25 2003-11-18 Eastman Kodak Company Media width detecting system for an imaging apparatus
US7726764B2 (en) * 2005-05-09 2010-06-01 Silverbrook Research Pty Ltd Method of using a mobile device to determine a position of a print medium configured to be printed on by the mobile device
US20090073476A1 (en) * 2007-09-13 2009-03-19 Konica Minolta Systems Laboratory, Inc. Printing appratus and system
JP5951367B2 (ja) * 2012-01-17 2016-07-13 シャープ株式会社 撮像装置、撮像画像処理システム、プログラムおよび記録媒体
US20140268196A1 (en) * 2013-03-12 2014-09-18 Konica Minolta Laboratory U.S.A., Inc. Method and apparatus for calibrating a paper sensor to account for media holes
JP6482156B2 (ja) * 2014-05-21 2019-03-13 キヤノンファインテックニスカ株式会社 給紙装置
JP6029630B2 (ja) * 2014-09-18 2016-11-24 京セラドキュメントソリューションズ株式会社 シート搬送装置、画像処理装置、シート搬送方法
US9274480B1 (en) * 2014-10-02 2016-03-01 Xerox Corporation Paper tray size sensing mechanism
JP6225895B2 (ja) * 2014-12-26 2017-11-08 京セラドキュメントソリューションズ株式会社 シート種検知装置及び画像形成装置
JP2016225871A (ja) * 2015-06-01 2016-12-28 株式会社リコー プレビュー画像表示装置、及びプレビュー画像表示装置を備えた画像処理装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002101275A (ja) * 2000-09-21 2002-04-05 Minolta Co Ltd サイズ検出装置
JP2005041678A (ja) * 2003-07-25 2005-02-17 Fuji Xerox Co Ltd シート判別装置、画像形成装置、画像処理装置、シート判別方法
US20050206972A1 (en) * 2004-03-19 2005-09-22 Canon Kabushiki Kaisha Sheet supplying apparatus
CN101729717A (zh) * 2008-10-10 2010-06-09 株式会社理光 图像形成设备、纸张进给控制方法及计算机程序产品

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108696668A (zh) * 2017-03-30 2018-10-23 佳能株式会社 图像读取装置和图像形成装置
US10602002B2 (en) 2017-03-30 2020-03-24 Canon Kabushiki Kaisha Image reading apparatus and image forming apparatus for detecting whether sheet is protruding from readable range
US10887473B2 (en) 2017-03-30 2021-01-05 Canon Kabushiki Kaisha Image reading apparatus and image forming apparatus for detecting whether sheet is protruding from readable range
CN110800003A (zh) * 2017-06-29 2020-02-14 罗伯特·博世有限公司 用于测量件装货物维度的装置和方法
CN111532823A (zh) * 2019-02-01 2020-08-14 无锡先导智能装备股份有限公司 电池物料的纠偏方法及电池物料的纠偏设备
CN112862747A (zh) * 2020-12-07 2021-05-28 英特尔产品(成都)有限公司 对芯片托盘堆叠的图像进行处理和分析的方法和图像处理系统以及芯片托盘堆叠检测装置

Also Published As

Publication number Publication date
EP3112938A1 (en) 2017-01-04
EP3112938B1 (en) 2018-12-12
CN106331408B (zh) 2019-02-22
US9926156B2 (en) 2018-03-27
JP2017013969A (ja) 2017-01-19
US20170001821A1 (en) 2017-01-05
JP6233356B2 (ja) 2017-11-22

Similar Documents

Publication Publication Date Title
CN106331408A (zh) 片材尺寸确定系统、片材尺寸确定方法以及图像形成装置
US9456123B2 (en) Method and system to configure mobile electronic device settings using remote data store analytics
US8537443B2 (en) Image processing apparatus, image forming apparatus, image processing method, and storage medium
CN102164214B (zh) 拍摄图像处理系统、便携终端装置以及图像输出装置
TWI428012B (zh) Image processing program, carrying terminal, and image processing method
CN101151639A (zh) 图像处理装置和图像处理方法
US11140286B2 (en) System and method for alignment of scan documents
US8488213B2 (en) Methods and systems for no-touch scanning
CN103458139A (zh) 图像读取装置及图像形成装置
JP2010130181A (ja) 画像取得装置
US20070098394A1 (en) Image capture device output settings module
US9712697B1 (en) Detecting sizes of documents scanned using handheld devices
JP2011145766A (ja) 画像処理装置、画像表示システム、および画像処理方法
JP6516225B2 (ja) 画像形成装置及び画像形成方法
US20060008172A1 (en) Image compensating system and method for a mobile terminal imaging device
JP7192534B2 (ja) アプリケーションプログラム、およびプリンタ
US20200341696A1 (en) Image forming system, photographing device, image forming device and non-transitory recording medium
US20160224854A1 (en) Information processing apparatus, information processing method, and storage medium
US20120170073A1 (en) System for previewing and imaging documents
JP2001078176A (ja) 帳票撮像装置
JP6163946B2 (ja) 画像処理装置
US10536587B2 (en) Document scanning apparatus composed of an automatic document feeding device and an image capturing device and scanning method thereof
US20170180642A1 (en) Mobile communication device with document imaging facility and method
JP6596512B2 (ja) モバイル端末、画像処理方法、および、プログラム
KR101629418B1 (ko) 모바일 기기의 카메라와 스캔용지를 이용한 실물크기 스캔 시스템 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant