CN108132762B - 图像处理装置以及图像形成装置 - Google Patents
图像处理装置以及图像形成装置 Download PDFInfo
- Publication number
- CN108132762B CN108132762B CN201711189366.8A CN201711189366A CN108132762B CN 108132762 B CN108132762 B CN 108132762B CN 201711189366 A CN201711189366 A CN 201711189366A CN 108132762 B CN108132762 B CN 108132762B
- Authority
- CN
- China
- Prior art keywords
- image
- unit
- frame
- input
- rectangle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
- G06F3/1203—Improving or facilitating administration, e.g. print management
- G06F3/1206—Improving or facilitating administration, e.g. print management resulting in increased flexibility in input data format or job format or job type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32106—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
- H04N1/32122—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate device, e.g. in a memory or on a display separate from image data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
- B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
- B41J21/00—Column, tabular or like printing arrangements; Means for centralising short lines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1242—Image or content composition onto a page
- G06F3/1243—Variable data printing, e.g. document forms, templates, labels, coupons, advertisements, logos, watermarks, transactional printing, fixed content versioning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00005—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to image data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00129—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a display device, e.g. CRT or LCD monitor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
- H04N1/00209—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
- H04N1/00222—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of image data generation or reproduction, e.g. scan-to-email or network printing
- H04N1/00233—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of image data generation or reproduction, e.g. scan-to-email or network printing details of image data reproduction, e.g. network printing or remote image display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00352—Input means
- H04N1/00355—Mark-sheet input
- H04N1/00376—Means for identifying a mark sheet or area
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/00411—Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00795—Reading arrangements
- H04N1/00798—Circuits or arrangements for the control thereof, e.g. using a programmed control device or according to a measured quantity
- H04N1/00816—Determining the reading area, e.g. eliminating reading of margins
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03G—ELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
- G03G2215/00—Apparatus for electrophotographic processes
- G03G2215/04—Arrangements for exposing and producing an image
- G03G2215/0429—Changing or enhancing the image
- G03G2215/0431—Producing a clean non-image area, i.e. avoiding show-around effects
- G03G2215/0448—Charge-erasing means for the non-image area
- G03G2215/0451—Light-emitting array or panel
- G03G2215/0458—Liquid-crystal display elements, i.e. LCD-shutter array
Abstract
图像处理装置具备显示部、图像读取部、矩形提取部、识别信息分配部、显示控制部、操作接受部、框信息制作部、存储部、和控制部。矩形提取部从通过图像读取部进行读取而获得的原稿图像中提取表示矩形的图像,并且检测表示矩形的图像在原稿图像中大小以及位置。识别信息分配部对通过矩形提取部提取的表示矩形的图像依次分配识别信息。框信息制作部将通过指定要求而被指定为框的表示矩形的图像、表示矩形的图像在原稿图像中的大小以及位置、以及对表示矩形的图像分配的识别信息相关联,并作为框的框信息来制作。控制部作为包含原稿图像、以及框信息的模板存储在存储部中。由此,能够对要求输入用字符数据的输入的图像,简单地合成该输入用字符数据。
Description
技术领域
本发明涉及一种图像处理装置以及图像形成装置,特别涉及一种对读取的原稿的图像进行加工的技术。
背景技术
在图像形成装置中,例如,对各种申报用纸等用于记入必要项目的预先规定样式的原稿进行读取,并将表示该读取的原稿的字符、格线等的图像数据作为该原稿的模板存储在HDD等存储部之中。图像形成装置基于这样的模板来将原稿的图像印刷到记录介质上。
另外,作为一般的图像处理装置,存在如下图像处理装置,该图像处理装置在存储上述原稿的模板时,获取并且存储作为记入(输入)上述必要项目的输入区域的表示矩形的图像数据。而且,在该图像处理装置中,读取记载了输入用字符数据的另外的原稿,并将该读取的输入用字符数据的图像、以及供该输入用字符数据输入的表示矩形的图像的数据,作为该另外的原稿的模板存储在存储部中。而且,提出了在该图像处理装置中,基于存储在存储部中的表示矩形的图像数据,在该表示矩形的图像的区域内,自动地合成对应的输入用字符数据的技术。
发明内容
然而,在如上所述的图像处理装置中,变更对作为上述输入区域的表示矩形的图像的区域的输入用字符数据的输入内容是困难的。也就是说,在该图像处理装置中,在用户变更输入用字符数据的输入内容的情况下,需要读取变更了该输入内容的新的样式的原稿,并制作新的模板。而且,用户需要读取记载了与上述输入内容的变更对应的输入用字符数据的另外的原稿。如此,在该图像处理装置中,在用户变更输入用字符数据的输入内容的情况下,需要进行两种原稿的新的读取动作。
本发明解决上述问题。
在一个方面中,本公开所涉及的图像处理装置具备显示部、图像读取部、矩形提取部、识别信息分配部、显示控制部、操作接受部、框信息制作部、存储部、以及控制部。所述图像读取部读取原稿的图像。所述矩形提取部从通过所述图像读取部进行的读取而获得的原稿图像中提取表示矩形的图像,并且检测该表示矩形的图像在所述原稿图像中的大小以及位置。所述识别信息分配部对通过所述矩形提取部提取的表示矩形的图像依次分配识别信息。所述显示控制部使所述显示部显示所述原稿图像、以及在该原稿图像中通过所述矩形提取部提取的表示矩形的图像。所述操作接受部接受来自用户的操作指示。所述框信息制作部,在所述操作接受部从用户接受到了将显示在所述显示部上的表示矩形的图像指定为作为供输入用字符数据输入的输入区域的框的指定要求的情况下,将通过所述指定要求而被指定为所述框的表示矩形的图像、该表示矩形的图像在所述原稿图像中的大小以及位置、以及对该表示矩形的图像分配的识别信息相关联,并作为该框的框信息来制作。所述控制部在所述框信息制作部制作了所述框信息的情况下,作为包含所述原稿图像以及该框信息的模板存储在所述存储部中。
另外,在另一方面中,本公开所涉及的图像形成装置具备:上述图像处理装置,以及图像形成部,所述图像形成部将通过所述图像读取部进行的读取而获得的原稿图像形成在记录介质上。
另外,在另一方面中,本公开所涉及的图像处理装置是经由网络连接于信息处理装置的图像处理装置,具备存储部、通信部、输入用字符数据获取部、控制部、以及图像处理部。所述存储部作为模板进行存储,所述模板包含原稿图像、以及将为包含在所述原稿图像中的表示矩形的图像,且被指定为作为供输入用字符数据输入的输入区域的框的该表示矩形的图像、以及对该表示矩形的图像分配的识别信息相关联的框的框信息。所述通信部通过所述网络,在与所述信息处理装置之间发送和接收数据。所述输入用字符数据获取部经由所述通信部获取经由所述网络从所述信息处理装置输入所述框中的输入用字符数据、以及与该输入用字符数据相关联的所述识别信息。所述控制部将所述输入用字符数据获取部获取的所述输入用字符数据、以及与该输入用字符数据相关联的所述识别信息作为输入数据文件存储在所述存储部中。所述图像处理部在所述模板表示的所述原稿图像中的被指定为所述识别信息表示的框的表示矩形的图像的区域内,合成处理包含在所述输入数据文件中,与和该识别信息相同的识别信息相关联的输入用字符数据,并制作合成结果图像.
另外,在另一方面中,本发明所涉及的图像形成装置具备:上述图像处理装置,以及图像形成部,所述图像形成部将通过所述图像处理部制作的所述合成结果图像形成在记录介质上。
附图的简单说明
图1是表示使用本发明的一种实施方式涉及的图像形成装置的图像形成系统的整体的图。
图2是表示图像形成装置的主要部分构成的功能框图。
图3是表示PC的主要部分构成的功能框图。
图4是表示图像形成装置中的制作原稿图像的模板的处理流程的流程图。
图5是表示PC中的处理流程的流程图。
图6是表示图像形成装置中的制作合成结果图像的处理流程的流程图。
图7是示出通过由图像读取部进行的读取获得的原稿图像的一个例子的图。
图8是示出在通过图像读取部进行的读取获得的原稿图像中,所提取的表示矩形的图像和对该表示矩形的图像分配的识别信息的具体例子的图。
图9是示出显示在图像形成装置的显示部上的显示画面的一个例子的图。
图10是示出框信息的具体例子的图。
图11是示出显示在图像形成装置的显示部上的显示画面的一个例子的图。
图12是示出显示在图像形成装置的显示部上的显示画面的一个例子的图。
图13是示出显示在PC的显示部上的显示画面的一个例子的图。
图14是示出存储在PC的HDD中的文档数据的具体例子的图。
图15是示出显示在PC的显示部上的显示画面的一个例子的图。
图16是示出存储在图像形成装置的存储部中的模板和输入数据文件的具体例子的图。
图17是示出显示在图像形成装置的显示部上的显示画面的一个例子的图。
图18是示出被合成处理的模板、以及输入数据文件的具体例子的图。
图19是示出显示在图像形成装置的显示部上的显示画面的一个例子的图。
本发明的具体实施方式
以下,参照附图对本发明的一种实施方式涉及的图像处理装置以及图像形成装置进行说明。图1是表示使用本发明的一种实施方式涉及的图像形成装置的图像形成系统的整体的图。图2是表示图像形成装置的主要部分构成的功能框图。图3是表示PC的主要部分构成的功能框图。
图像形成系统100具备作为信息处理装置的个人计算机(以下,称为PC)1、以及作为本发明的一种实施方式所涉及的图像处理装置的图像形成装置2。这些PC1、以及图像形成装置2通过互联网或者LAN等网络3而相互连接。
另外,在图像形成系统100中,例如与来自用户的操作指示对应地,对图像形成装置2,从PC1发送印刷任务,并在该图像形成装置2中执行利用印刷任务进行的印刷处理(图像形成处理)。而且,在图像形成系统100中,如之后详细说明的那样,将在PC1端制作的输入用字符数据送到图像形成装置2,在图像形成装置2中,进行在与后述识别信息相关联的框(供输入用字符数据输入的输入区域)的区域内合成与和该识别信息相同的识别信息相关联的输入用字符数据的合成处理。
图像形成装置2例如是同时具备如复印功能、打印机功能、扫描仪功能、以及传真功能等多种功能的MFP(复合机)。该图像形成装置2具备控制单元11、显示部12、图像存储器13、操作部14、触摸面板15、通信部16、图像读取部17、图像形成部18、以及存储部19。这些构成要素能够相互通过总线来进行数据或信号的发送和接收。
图像读取部17具有光学地读取原稿的扫描仪,以生成表示所读取的原稿的图像的图像数据,并使图像存储器13、存储部19存储该图像数据。
图像形成部18使省略图示的感光鼓的表面均匀带电,对感光鼓的表面进行曝光,以在感光鼓的表面上形成静电潜像,将感光鼓表面的静电潜像显像为色粉图像,并将感光鼓表面的色粉图像(图像)经由中间转印带转印到记录纸上,使记录纸上的色粉图像定影,并排出记录纸。例如,将通过利用图像读取部17生成的图像数据表示的图像印刷到记录纸上。
显示部12由液晶显示器(LCD:Liquid Crystal Display)、有机EL(OLED:有机发光二极管(Organic Light-Emitting Diode))显示器等构成。
在显示部12的画面上,配置有触摸面板15。触摸面板15为所谓电阻膜方式、静电容方式等的触摸面板,检测用户的手指等对触摸面板15进行的接触(触摸)及其接触位置,并将表示该接触位置的坐标的检测信号输出到控制单元11的后述控制部21等中。因而,触摸面板15实现作为供对显示部12的画面进行的用户操作输入的操作部的作用
操作部14具备决定键、开始键等硬键。
通信部16是具备通信模块的通信接口。
存储部19是HDD(硬盘驱动器(Hard Disk Drive))等大容量的存储装置。
控制单元11由处理器、RAM(随机存取存储器(Random Access Memory))、以及ROM(只读存储器(Read Only Memory))等构成。处理器例如为CPU(中央处理单元(CentralProcessing Unit))、MPU、ASIC等。该控制单元11通过利用上述处理器来执行存储在上述ROM或存储部19中的图像处理程序,来作为控制部21、显示控制部22、矩形提取部23、识别信息分配部24、框信息制作部25、输入用字符数据获取部26、以及图像处理部27起作用。此外,控制单元11的控制部21、显示控制部22、矩形提取部23、识别信息分配部24、框信息制作部25、输入用字符数据获取部26、以及图像处理部27还可以不依赖基于程序的操作,而是分别由硬件电路构成。
控制部21对图像形成装置1的整体的动作控制进行管理。控制部21具有基于从触摸面板15输出的检测信号,接受对触摸面板15进行的用户操作的功能。另外,控制部21具有接受对操作部14的硬键进行的用户操作的功能。此外,操作部14以及触摸面板15是权利要求书中的操作接受部的一个例子。
而且,控制部21具有对通信部16进行的通信动作进行控制的功能。通信部16在控制部21进行的控制之下,通过网络3,在与PC1等之间发送和接收数据。
显示控制部22控制显示部12的动作。显示控制部22使显示部12显示例如用于合成处理的,用于设定与为供输入用字符数据输入的输入区域的框等有关的详细项目的输入画面、信息的输入画面、或者图像形成装置2的操作导引等。
矩形提取部23利用存储在存储部19等中的预先规定的表示矩形的图像,对通过图像读取部17进行的读取获得的原稿图像,进行图案匹配,从该原稿图像中提取表示矩形(包含正方形、长方形的四边形)的图像。而且,矩形提取部23基于该表示矩形的图像在该原稿图像中的坐标位置,检测该表示矩形的图像的大小以及位置。该提取的表示矩形的图像如之后详细说明的那样,通过来自用户的操作指示而被用作上述框。
在由用户将该表示矩形的图像指定为框,以将其作为供输入用字符数据输入的输入区域时,图像处理部27基于该框在原稿图像中的大小以及位置,在该框的区域内输入(合成)输入用字符数据。由此,能够对该输入区域(框)可靠地输入为输入对象的输入用字符数据。
识别信息分配部24对通过矩形提取部23提取的表示矩形的图像依次分配识别信息。
如果识别信息分配部24对所提取的表示矩形的图像依次分配识别信息,则控制部21将通过矩形提取部23提取的表示矩形的图像、关于该表示矩形的图像通过矩形提取部23检测到的在上述原稿图像中的大小以及位置、以及对该表示矩形的图像分配的识别信息,相关联地存储在存储部19中。例如,显示控制部22在使显示部12显示通过图像读取部17读取的原稿图像时,在将上述相关联的识别信息重叠于通过矩形提取部23提取的表示矩形的图像的情况下使显示部12进行显示。
框信息制作部25,在上述操作接受部(操作部14以及触摸面板15)从用户接受到了将显示在显示部12上的表示矩形的图像指定为作为供输入用字符数据输入的输入区域的框的指定要求的情况下,将通过该指定要求而被指定为框的表示矩形的图像、以及对该表示矩形的图像分配的识别信息相关联,并作为该框的框信息来制作。另外,在该框信息中,包含有通过指定要求而被指定为框的表示矩形的图像在上述原稿图像中的大小以及位置。
另外,框信息制作部25,在上述操作接受部从用户接受到上述指定要求、以及作为通过该指定要求指定的框的种类,选择(i)作为上述输入用字符数据被输入至少一个字符的标准框、(ii)将各自被输入上述输入用字符数据的多个框连结为一个框的连结框、以及(iii)作为上述输入用字符数据被输入预先规定的复选标记的复选框中的任一者的选择要求的情况下,将通过上述指定要求而被指定为框的表示矩形的图像、该矩形在上述原稿图像中的大小以及位置、对该表示矩形的图像分配的识别信息、以及通过上述选择要求选择的框的种类相关联,并制作为该框的框信息。
另外,显示控制部22在框信息制作部25制作了框信息的情况下使显示部12显示上述原稿图像时,对每种框的种类,利用互不相同的显示方法来显示框。
在框信息制作部25制作了框信息的情况下,控制部21使存储部19作为模板存储通过图像读取部17读取的原稿图像、以及该框信息。另外,控制部21通过通信部16经由网络3对PC1发送存储在存储部19中的原稿图像的模板、以及指示信号。该指示信号是指示如下内容的信号:在PC 1的显示部82中,对被指定为框的表示矩形的图像,关联对该表示矩形的图像分配的识别信息,并将这些表示矩形的图像和识别信息重叠在上述模板所表示的原稿图像之上以作为输入画面显示。
而且,控制部21在使通信部16对PC 1发送经由网络3存储在存储部19中的原稿图像的模板的情况下,使通信部16对PC 1作为上述原稿图像发送上述指示信号、以及该模板所包含的,对每种框的种类使显示方法互不相同的图像,并使该PC 1的显示部82作为输入画面进行显示。
另外,显示控制部22在上述操作接受部(操作部14以及触摸面板15)从用户接受到对框进行指定的指定要求之后,使显示部12显示用于从用户接受该框的大小、即框的高度以及宽度的各个值的变更的图像。另外,如此,显示控制部22在从用户接受框的大小的变更时,由于使显示部12显示能够变更该框的高度以及宽度的各个值的图像,故用户能够容易地指示期望大小的框。
而且,控制部21在操作接受部(操作部14以及触摸面板15)接受到通过指定框的大小的值的输入进行的变更指示时,将接受到的变更指示所表示的大小作为作为上述框而被指定的表示矩形的图像在原稿图像中的大小,并包含框信息存储在存储部19中。
输入用字符数据获取部26通过通信部16经由网络3从PC 1获取被输入上述框的输入用字符数据、以及与该输入用字符数据相关联的上述识别信息。
控制部21在输入用字符数据26获取了上述输入用字符数据、以及与其相关联的识别信息时,将该获取的输入用字符数据以及识别信息作为输入数据文件存储在存储部19中。此外,虽然在存储部19中,存储有至少一个上述模板即可,但在本实施方式中,设在存储部19中存储有多个模板。此外,虽然在存储部19中,存储有至少一个上述输入数据文件即可,但在本实施方式中,设在存储部19中存储有多个输入数据文件。而且,显示控制部22使显示部12显示存储在存储部19中的模板的一览、以及存储在该存储部19中的输入数据文件的一览。
图像处理部27对通过图像读取部17进行的原稿读取获得的原稿图像等图像存储器13内的图像数据进行各种图像处理。另外,图像处理部27对为通过上述指定要求指定的所述框的表示矩形的图像,合成处理存储在存储部19中的输入数据文件所包含的输入用字符数据。例如,图像处理部27在模板所表示的原稿图像中的框的区域内,合成处理输入数据文件所包含,和对该框分配的识别信息相同的信息相关联的输入用字符数据,以制作合成结果图像。
另外,在显示控制部22使显示部12显示上述模板的一览、以及上述输入数据文件的一览时,在上述操作接受部通过来自用户的操作指示,接受到指定从模板的一览选择的一个模板、以及从输入数据文件的一览选择的一个输入数据文件的指示的情况下,图像处理部27在所选择的一个模板表示的上述原稿图像中的被指定为上述识别信息表示的框的表示矩形的图像的区域内,合成处理上述选择的一个输入数据文件所包含,与和该识别信息相同的识别信息相关联的输入用字符数据,以制作合成结果图像。
另外,显示控制部22使显示部12显示图像处理部27所制作的合成结果图像。
PC 1具有控制单元70、操作部81、显示部82、发送接收部83、以及HDD84。这些各部分能够相互通过CPU总线来进行数据或者是信号的发送和接收。
操作部81具有键盘、鼠标、或者是触摸面板,对该操作部81,通过用户输入作为印刷对象的印刷用数据(印刷任务)以及指定用于其的图像形成装置2的印刷指示等。
显示部82由LCD(液晶显示器(Liquid Crystal Display))等构成,显示对用户的操作引导等。
发送接收部83由LAN端口等通信模块构成,且经由连接于该发送接收部83的网络3,与图像形成装置2进行各种数据、信号的发送和接收。发送接收部83从图像形成装置2接收文档图像的模板。
控制单元70由处理器、RAM(随机存取存储器(Random Access Memory))、以及ROM(只读存储器(Read Only Memory))等构成。处理器例如为CPU(中央处理单元(CentralProcessing Unit))、MPU、ASIC。该控制单元70通过利用上述处理器来执行存储在上述HDD84等中的输入用字符数据制作程序,来发挥作为控制部71、显示控制部72、接受部73、以及印刷任务生成部74的功能。此外,控制单元70的控制部71、显示控制部72、接受部73、以及印刷任务生成部74还可以不依赖基于上述输入用字符数据制作程序的操作,而是分别由硬件电路构成。以下,只要不特别提到,那么关于各种实施方式都是同样的。
控制部71对PC 1的整体的动作控制进行管理。
显示控制部72控制显示部82的动作。另外,显示控制部72根据接受部73接受到的指示信号进行使显示部82显示后述输入画面的控制等。
接受部73经由发送接收部83从图像形成装置2接受指示显示部82中的上述模板的显示方法的上述指示信号(详细情况之后说明)。
另外,控制部71与用户对操作部81进行的操作对应地,读取存储在HDD 84中的文档数据,从PC 1的外部,例如连接于该PC 1的USB端口的USB存储器等读出文档数据。
文档数据是包含例如为利用由PC1执行的文字处理软件等应用制作的平假名、汉字等日语字符、字母、数字、@标记、邮政标记等特殊字符的数据。
印刷任务生成部74根据通过控制部71读出的文档数据生成印刷任务。例如,印刷任务生成部74依照存储在HDD 84中的打印机驱动进行动作,从而将上述文档数据转换成基于适合图像形成装置2的打印机语言的格式以作为印刷数据(例如,PRN文件),并生成包含该印刷数据的印刷处理用的印刷任务。此外,该印刷任务具有上述印刷数据(即,被转换为上述格式的输入用字符数据)、以及与该输入用字符数据相关联的识别信息。
以下,使用图4至图6具体地说明如上所述地构成的图像形成系统100的动作。图4是表示图像形成装置中的制作原稿图像的模板的处理流程的流程图。图5是表示PC中的处理流程的流程图。图6是表示图像形成装置中的制作合成结果图像的处理流程的流程图。
首先,在图像形成装置2中,用户将图7所示的原稿G设置于图像读取部17,并操作操作部14的开始键,于是由此,控制部21接受原稿读取指示,控制部21使图像读取部17读取原稿G的图像,并使图像存储器13存储表示所读取的原稿G的图像的图像数据(原稿图像G1)(步骤S1)。
接着,矩形提取部23从通过读取而获得的原稿G的原稿图像G1中提取表示矩形的图像(步骤S2)。另外,矩形提取部23从原稿图像中提取上述表示矩形的图像,并且检测该表示矩形的图像在该原稿图像中的大小以及位置。
在此,在矩形提取部23未能从原稿图像G1中提取到任何表示矩形的图像的情况下(在步骤S2中为NO),结束处理。
另一方面,在矩形提取部23从原稿图像G1中提取到至少一个以上的表示矩形的图像的情况下(在步骤S2中为YES),识别信息分配部24对通过矩形提取部23提取的表示矩形的图像依次分配识别信息(步骤S3)。例如,在原稿图像G1中,通过矩形提取部23提取到30个表示矩形的图像的情况下,如图8所示,对30个各表示矩形的图像,与提取的顺序对应地,识别信息分配部24对对应的表示矩形的图像的位置分配(1)~(30)中的各个识别信息。
例如,显示控制部22如图9所示,使显示部12显示通过图像读取部17读取的原稿图像G1,并且在原稿图像G1上重叠存储在存储部19中的模板所包含的表示矩形的图像、以及对该表示矩形的图像分配的识别信息,并使显示部12显示(步骤S4)。
接着,控制部21判别是否接受到通过触摸面板(操作接受部)15将原稿图像G1中的表示矩形的图像指定为上述框的指定要求(步骤S5)。例如,在图9所示的显示画面(输入画面)中,显示作为框指定的表示矩形的图像的部分被用户按下,在这被通过触摸面板15检测到时,控制部21判别为接受到上述指定要求。在控制部21判别为未接受到指定要求的情况下,结束处理(在步骤S5中为NO)。
此外,还可以采用以下构成:在上述说明以外,在用户将表示矩形的图像指定为上述框时,该用户按下设于操作部14的省略图示的数字键之中,与对该表示矩形的图像分配的识别信息对应的数字键,从而输入表示数字的指示,控制部21判别为该输入的数字是被指定了表示矩形的图像的框。
另一方面,控制部21在判别为接受到指定要求的情况下(在步骤S5中为YES),关于通过该指定要求指定的框,判别是否由用户选择了框的种类。例如,控制部12在通过触摸面板15检测到输入键12a被用户按下,接着显示作为标准框指定的表示矩形的图像的部分被用户按下,进而保存键12e被用户按下的情况时,判别为接受到了将该框作为标准框的选择要求(步骤S6)。另外,控制部21在取消键12f被用户按下,且由触摸面板15检测到的情况下,判断为步骤S5中的指定要求被取消。
在判别为接受到了作为标准框的选择要求的情况下(在步骤S6中为YES),控制部21判别是否输入了指定该标准框的大小的指示(步骤S7)。例如,控制部21,在接受到作为标准框的选择要求之后,通过触摸面板15检测到显示作为标准框指定的表示矩形的图像的部分被用户按下的情况时,接受指定该标准框的大小(即,上述输入区域的范围)的指示。
在控制部21判别为未输入指定标准框的大小的指示的情况下(在步骤S7中为NO),例如,在按下了保存键12e之后预先规定的时间内未通过触摸面板15检测到显示作为标准框指定的表示矩形的图像的部分被用户按下的情况下,框信息制作部25进行框信息的制作(步骤S9)。
也就是说,框信息制作部25将通过上述步骤S5中的指定要求而被指定为框的表示矩形的图像在原稿图像G1中的大小以及位置、对该表示矩形的图像分配的识别信息、以及通过选择要求选择的框的种类相关联,并作为该框的框信息来制作。
例如,如在图9中例示的那样,在分别被分配了(18)、(27)、(29)、以及(30)这些识别信息的四个各个表示矩形的图像被作为标准框选择的情况下,框信息制作部25与这四个各个表示矩形的图像在原稿图像G1中的大小以及位置、对对应的表示矩形的图像分配的识别信息、以及表示为标准框的情况的信息相关联地,对四个框中的每个制作框信息。而且,控制部21将这些框信息作为模板存储在存储部19中。此外,表示矩形的图像在原稿图像G1中的大小以及位置是通过将为矩形的该原稿图像G1中的坐标中的任意的点(例如,最上方且最左的点)作为(0,0)的xy坐标来规定的。由此,例如,如图10所示,在存储部19中,作为框信息,存储对被指定为框的表示矩形的图像分配的识别信息、框的种类、作为表示矩形的图像在原稿图像G1中的大小以及位置的该表示矩形的图像的四点位置。
另一方面,在控制部21判别为接受到了指定标准框大小的指示的情况下(在步骤S7中为YES),显示控制部22使显示部12显示图11所示的显示画面。例如,在被分配了(18)的识别信息的表示矩形的图像被作为标准框选择之后,控制部21接受其大小的变更的情况下,如在图11中例示的那样,显示控制部22使显示部12显示用于分别输入变更后的高度以及宽度的高度输入键12g以及宽度输入键12h。然后,用户对触摸面板15或者是操作部14的省略图示的数字键进行操作,以输入期望的高度以及宽度的值。由此,输入的高度以及宽度作为变更之后的高度以及宽度,被控制部21接受。如图11所示,显示控制部22使得在高度输入键12g以及宽度输入键12h的区域内显示分别接受的高度以及宽度。另外,在执行键12i被用户按下,且通过触摸面板15检测到该按下时,显示控制部22使显示部12显示图9所示的显示画面。
此外,在上述说明以外,还可以是控制部21在输入了关于标准框的上述期望的高度以及宽度的值之后,在由用户按下保存键12e,且通过触摸面板15检测到该按下时,接受作为该标准框中的变更之后的高度以及宽度输入的高度以及宽度的构成。另外,在用户通过上述数字键等输入期望的高度以及宽度的值以外,还可以是用户在触摸面板15上拖动作为标准框选择的表示矩形的图像以变更该图像的大小,从而控制部21接受该标准框的大小的变更的构成。
而且,框信息制作部25在保存键12e由用户按下,且被触摸面板15检测到的情况下,将上述接受到的变更后的高度以及宽度的各值,作为被分配了(18)的识别信息的表示矩形的图像的大小,包含在与被分配了该(18)的识别信息的表示矩形的图像对应的框的框信息中并存储在存储部19中。
另外,控制部21在判别为未接受到作为标准框的选择要求的情况下(在步骤S6中为NO),判别是否接受到了作为连结框的选择要求(步骤S10)。例如,控制部12在通过触摸面板15检测到输入键12a被用户按下,接着显示作为连结框指定的表示矩形的图像的部分被用户按下,进而连结键12c被用户按下的情况时,判别为接受到了将该框作为连结框的选择要求。
控制部21在判别为接受到了作为连结框的选择要求的情况下(在步骤S10中为YES),判别是否输入了指定该连结框大小的指示(步骤S7)。例如,控制部21,在接受到作为连结框的选择要求之后,通过触摸面板15检测到显示作为连结框指定的表示矩形的图像的部分被用户按下的情况时,接受指定该连结框的大小(即,上述输入区域的范围)的指示。
在控制部21判别为未接受到指定连结框的大小的指示的情况下(在步骤S7中为NO),例如,在按下了连结键12c之后,在预先规定的时间内未通过触摸面板15检测到显示作为连结框指定的表示矩形的图像的部分被用户按下的情况下,框信息制作部25进行框信息的制作(步骤S9)。
例如,在分别被分配了图9所示的(14)、(15)、以及(16)这些识别信息的三个表示矩形的图像被作为连结框选择的情况下,框信息制作部25将这三个各个表示矩形的图像在原稿图像G1中的分别的大小以及位置、以及对对应的表示矩形的图像分配的识别信息,制作为表示是一个连结框的情况的一个框信息。在该框信息中,包含有表示以下情况的信息:分别被分配了(14)、(15)、以及(16)这些识别信息的三个各个表示矩形的图像是能够相互独立地输入输入用字符数据的子框。
另外,例如,在分别被分配了图9所示的(19)、(20)、(21)、以及(22)这些识别信息的四个表示矩形的图像被作为连结框选择的情况下,框信息制作部25将这四个各个表示矩形的图像在原稿图像G1中的大小以及位置、以及对对应的表示矩形的图像分配的识别信息,制作为表示是一个连结框的情况的一个框信息。在该框信息中,包含有表示以下情况的信息:分别被分配了(19)、(20)、(21)、以及(22)这些识别信息的四个各个表示矩形的图像是上述子框。然后,框信息制作部25将这些框信息作为模板存储在存储部19中。
另一方面,在控制部21判别为接受到了指定连结框大小的指示的情况下(在步骤S7中为YES),显示控制部22使显示部12显示图11所示的显示画面。例如,在被分配了(14)、(15)、以及(16)的识别信息的表示矩形的图像被作为连结框选择之后,接受指定其大小的指示的情况下,如在图11中例示的那样,显示控制部22使显示部12显示用于分别输入表示变更之后的高度以及宽度的值的高度输入键12g以及宽度输入键12h。然后,用户对触摸面板15或者是操作部14的省略图示的数字键,输入期望的高度以及宽度的值。由此,输入的高度以及宽度作为变更之后的高度以及宽度,被控制部21接受。如图11所示,显示控制部22使得在高度输入键12g以及宽度输入键12h的区域内显示分别接受的高度以及宽度。另外,在执行键12i被用户按下,且通过触摸面板15检测到时,显示控制部22使显示部12显示图9所示的显示画面。然后,如果控制部21检测到保存键12e被按下的情况,那么框信息制作部25将接受的变更之后的高度以及宽度的各值,作为被分配了(14)、(15)、以及(16)这些识别信息的三个矩形结合而成的一个表示矩形的图像的大小,包含在表示该被分配了(14)、(15)、以及(16)这些识别信息的矩形的连结框的框信息中,并存储在存储部19中。
此外,在上述说明以外,控制部21还可以是在输入了关于连结框的上述期望的高度以及宽度的值之后,在由用户按下保存键12e,且通过触摸面板15检测到该按下时,接受作为该连结框中的变更之后的高度以及宽度输入的高度以及宽度的构成。另外,在用户通过上述数字键等输入期望的高度以及宽度的值以外,还可以是用户在触摸面板15上拖动作为连结框选择的表示矩形的图像以变更该图像的大小,从而控制部21接受该连结框的大小的变更的构成。
控制部21在判别为未接受到作为连结框的选择要求的情况下(在步骤S10中为NO),判别是否接受到了作为复选框的选择要求(步骤S11)。例如,控制部12在通过触摸面板15检测到输入键12a被用户按下,接着显示作为复选框指定的表示矩形的图像的部分被用户按下,进而复选键12d被用户按下的情况时,判别为接受到了将该框作为复选框的选择要求。
在控制部21判别为接受到了作为复选框的选择要求的情况下(在步骤S11中为YES),控制部21判别是否接受到了指定该复选框的大小的指示(步骤S7)。例如,控制部21,在接受到了作为复选框的选择要求之后,通过触摸面板15检测到显示作为复选框指定的表示矩形的图像的部分被用户按下的情况时,接受指定该复选框的大小(即,上述输入区域的范围)的指示。
在控制部21判别为未接受到指定复选框的大小的指示的情况下(在步骤S7中为NO),例如,在按下了复选键12d之后,在预先规定的时间内未通过触摸面板15检测到显示作为复选框指定的表示矩形的图像的部分被用户按下的情况下,框信息制作部25进行框信息的制作(步骤S9)。
例如,在分别被分配了图9所示的(5)、(6)、(7)、以及(8)这些识别信息的四个表示矩形的图像被作为复选框选择的情况下,框信息制作部25与这四个各个表示矩形的图像在原稿图像G1中的大小以及位置、对对应的表示矩形的图像分配的识别信息,以及表示是复选框的情况的信息相关联地对四个框中的每个分别制作框信息。。然后,框信息制作部25如后所述,将这些框信息作为模板存储在存储部19中。
另一方面,在控制部21判别为接受到了指定复选框的大小大小的指示的情况下(在步骤S7中为YES),显示控制部22使显示部12显示图11所示的显示画面。例如,在被分配了(5)的识别信息的表示矩形的图像被作为复选框选择之后,接受到了指定其大小的指示的情况下,如在图11中例示的那样,显示控制部22使显示部12显示用于分别输入变更后的高度以及宽度的高度输入键12g以及宽度输入键12h。
然后,用户对触摸面板15或者是操作部14的省略图示的数字键,输入期望的高度以及宽度的值。由此,输入的高度以及宽度作为变更之后的高度以及宽度,被控制部21接受。如图11所示,显示控制部22使得在高度输入键12g以及宽度输入键12h的区域内显示分别接受的高度以及宽度。另外,在执行键12i被用户按下,且通过触摸面板15检测到时,显示控制部22使显示部12显示图9所示的显示画面。而且,在控制部21检测到了保存键12e被按下的情况下,框信息制作部25将接受到的变更后的高度以及宽度的各值,作为被分配了(5)的识别信息的表示矩形的图像的大小来对待,包含在与被分配了该(5)的识别信息的表示矩形的图像对应的复选框的框信息中,并存储在存储部19中。
此外,在上述说明以外,还可以是控制部21在输入了关于复选框的上述期望的高度以及宽度的值之后,在由用户按下保存键12e,且通过触摸面板15检测到该按下时,接受作为该复选框中的变更之后的高度以及宽度输入的高度以及宽度的构成。另外,在用户通过上述数字键等输入期望的高度以及宽度的值以外,还可以是用户在触摸面板15上拖动作为复选框选择的表示矩形的图像以变更该图像的大小,从而控制部21接受该复选框的大小的变更的构成。
在控制部21判别为未接受到作为复选框的选择要求的情况下(在步骤S11中为NO),处理返回步骤S5。
如果框信息制作部25结束框信息的制作,则控制部21对于全部的框,判别框信息的制作是否结束了(步骤S12)。在判别为框信息制作部25没有对全部的框结束框信息的制作的情况下(在步骤S12中为NO),处理返回步骤S5。
另一方面,在判别为框信息制作部25对全部的框结束了框信息的制作的情况下(在步骤S12中为YES),控制部21将上述原稿图像G1、以及框信息制作部25制作的全部的框信息作为该原稿图像G1的模板T存储在存储部19中(步骤S13)。
另外,显示控制部22在上述模板T中,利用互不相同的显示方法使显示部12显示标准框、连结框、以及复选框。例如,显示控制部22在框信息制作部25制作了框的框信息的情况下,对每种框的种类,利用互不相同的显示方法使显示部12来显示该框。显示控制部22例如如图12所示,使得用单点划线的矩形包围地显示被作为标准框选择的表示矩形的图像,也就是说,分别被分配了(18)、(27)、(29)、以及(30)这些识别信息的四个表示矩形的图像。另外,显示控制部22使得用两点划线的矩形包围地显示被作为连结框选择的表示矩形的图像,也就是说,分别被分配了(14)、(15)、以及(16)这些识别信息的三个表示矩形的图像、以及分别被分配了(19)、(20)、(21)、以及(22)这些识别信息的四个表示矩形的图像。另外,显示控制部22使得用虚线的矩形包围地显示被作为复选框选择的表示矩形的图像,也就是说,分别被分配了(5)、(6)、(7)、以及(8)这些识别信息的四个表示矩形的图像。此种互不相同的显示部12中的显示在每次框信息制作部25制作框的框信息时执行。此外,除了该说明以外,例如,还可以是显示控制部22对每种框的种类用互不相同的颜色的矩形来包围并显示框。另外,包含在连结框中的子框也可以通过与其他框不同的显示方法来使显示部12显示。
之后,控制部21使通信部16对PC 1发送经由网络3存储在存储部19中的原稿图像的模板T、以及指示在该PC1的显示部中,将包含在上述模板T中的原稿图像、被指定为框的表示矩形的图像、以及对该表示矩形的图像分配的识别信息相关联地作为输入画面显示的指示信号(步骤S14)。另外,控制部21对该指示信号,使其包含指示在显示在PC1的显示部82中的输入画面中,对包含在该模板T中的每种框的种类利用互不相同的显示方法显示框的指示信号。
接着,在PC 1中,判定接受部73是否经由发送接收部83从图像形成装置2接受到了模板T和指示信号(步骤S15)。如果没有接受到模板T和指示信号,那么PC 1变为待机状态。
另一方面,如果接受部73经由发送接收部83接受模板T和指示信号(在步骤S15中为YES),那么控制部71对输入到包含在该模板T中的框的输入用字符数据的制作是否开始进行判别(步骤S16)。例如,在接受部73接受到了模板T和指示信号的情况下,控制部71经由显示控制部72使显示部82进行询问是否开始输入用字符数据的制作的大意的显示。如果操作部81未从用户接受到开始输入用字符数据的制作的指示的操作(在步骤S16中为NO),那么控制部71使PC1为待机状态。
另外,如果操作部81从用户接受开始输入用字符数据的制作的指示的操作(在步骤S16中为YES),那么显示控制部72依照接受部73接受到的指示信号,使接受到的模板T像在图13中示出例子的那样,使显示部82进行显示(步骤S17)。用户通过对操作部81进行操作来起动文字处理软件等应用,并通过该应用来制作文档数据(输入用字符数据)(步骤S18)。
另外,在上述输入画面中,如图13所示,在显示部82显示的模板T中,除了原稿图像之外,还显示在上述步骤S5中被指定为框的表示矩形的图像、对该表示矩形的图像分配的识别信息、以及框的被选择的种类。也就是说,在该输入画面中,供输入用字符数据输入的输入区域(框)与对其对应的表示矩形的图像分配的识别信息一同被显示,因而用户能够认识到框,并且容易地制作被输入该框中的文献数据。
例如,用户在PC1中起动文字处理软件、表格计算软件等应用,并利用该应用,制作包括预先规定的格式的数据文件D。用户利用应用,和该格式表示的排列同样地,通过操作部81的操作来输入并配置数字、“输入字符”,从而制作包括像在图14中示出例子那样的排列的数据文件D。在该数据文件D中,表示上述各识别信息的数字配置在预先规定的分别的位置上。而且,在从各识别信息的配置位置隔开了预先规定的数量的空格的位置上,配置作为输入用字符数据的数值、字符等。通过像这样配置识别信息、输入用字符数据,使得通过图像形成装置2中的图像处理部27等进行的,从数据文件D中的识别信息以及输入用字符数据的读出成为可能。此外,数据文件D存储在存储部84的“Form Application”84a的区域中。
例如,如图14所示,与被分配了(18)的识别信息的位置邻接地,作为与表示矩形的图像对应的标准框用的输入用字符数据,输入“777”。
另外,如果设(14)、(15)、以及(16)的识别信息为作为连结框的识别信息,那么与被分配了(14)的识别信息的位置邻接地,作为连结框用的输入用字符数据,使预先规定的间隔字符(例如“,”)介于其间,在连续的状态下配置被输入各个子框中的各个输入用字符数据。例如,在图14所示的例子中,设上述子框单位的输入用字符数据为“07”、“25”以及“2016”,与(14)的识别信息邻接地配置“07,25,2016”。
另外,如果设(5)的识别信息为作为复选框的识别信息,那么,与被分配了(5)的识别信息的位置邻接地,作为复选框用的输入用字符数据配置“X”。
之后,在PC1中,如果通过用户进行的操作部81的操作,作为对图像形成装置2发送的对象,从HDD 84的“Form Application”84a的区域中选择数据文件D,那么印刷任务生成部74利用该选择的数据文件D来生成印刷任务(步骤S19)。
例如,如果通过用户对操作部81进行操作,起动打印机驱动,那么显示控制部72如图15中例示的那样,使显示部82显示任务82a的标签被选择了的输入画面。而且,如果通过用户对操作部81进行操作,选择上述输入画面中的“Form Application”82b的栏,进而从HDD 84的“Form Application”84a的区域中选择数据文件D,那么印刷任务生成部74将数据文件D作为适合于图像形成装置2的上述印刷数据(被转换成基于适合于图像形成装置2的打印机语言的格式的数据),并生成包含该印刷数据的印刷处理用的印刷任务。
此时,印刷任务生成部74仅仅将数据文件D内的输入用字符数据部分转换为印刷数据。印刷任务生成部74对于识别信息部分,追加表示对应的输入用字符数据的信息,并且作为另外的数据装入印刷任务中。也就是说,在该印刷任务中,在图14所示的数据文件D中,(5)、(6)、----、(29)、(30)的识别信息未被转换成印刷数据,仅输入用字符数据被转换成图像形成装置2中的印刷用的数据。
接着,控制部71使得从发送接收部83经由网络3对图像形成装置2发送包含被输入到框中的输入用字符数据和上述另外的数据的印刷任务(步骤S20)。
在图像形成装置2中,控制部21判别输入用字符数据获取部26是否经由通信部16接收到了来自PC 1的印刷任务(步骤S21)。控制部21在输入用字符数据获取部26接收印刷任务之前(在步骤S21中为NO),使图像形成装置2为待机状态。
另一方面,控制部21在输入用字符数据获取部26经由通信部16接收到来自PC 1的印刷任务时(在步骤S21中为YES),将包含在该印刷任务中的上述输入用字符数据和上述另外的数据(包含识别信息)作为输入数据文件存储在存储部19中(步骤S22)。在存储部19中,如图16所示,在输入数据文件区域19b中存储输入数据文件,在模板区域19a中存储模板T,该模板T包含通过图像读取部17读取的原稿图像G、以及通过框信息制作部25制作的框信息。
与对上述操作接受部进行的用户的操作对应地,显示控制部22使显示部12显示存储在存储部19中的,模板T以及输入数据文件的各自的一览(步骤S23)。例如,显示控制部22使显示部12显示图17所示的显示画面。
之后,控制部21判别是否通过用户对操作部14的操作指示,选择了一个模板和一个输入数据文件。如果没有选择一个模板和一个输入数据文件(在步骤S24中为NO),那么图像形成装置2变为待机状态。
另一方面,在控制部21检测到选择到了一个模板和一个输入数据文件的情况下(在步骤S24中为YES),控制部21使图像处理部27进行利用该选择到的模板和输入数据文件的合成处理(步骤S25)。
例如,在进行步骤S24时,显示控制部22使显示部12显示在图17中示出例子的显示画面。在该显示画面中,用户从表示模板一览的显示栏12j按下“Payment Form”的栏,如果该按下被通过触摸面板15检测到,那么控制部21接受将该“Payment Form”作为模板的选择。另外,如果用户在触摸面板15中从显示输入数据文件的一览的显示栏12k中按下“Payment Form Info”的栏,且该按下被通过触摸面板15检测到,那么控制部21接受将该“Payment Form Info”作为输入数据文件的选择。
而且,在合成键121被用户按下,且该按下被通过触摸面板15检测到的情况下,控制部21使图像处理部27执行利用这些被选择的“Payment Form”的模板、以及“PaymentForm Info”的输入数据文件的合成处理。
在上述合成处理之中,图像处理部27如图18所示,将为合成处理对象的“PaymentForm”的模板T、以及“Payment Form Info”的输入数据文件I分别从存储部19的模板区域19a(图16)以及输入数据文件区域19b(图16)中读出。然后,图像处理部27在“PaymentForm”的模板T表示的原稿图像中的被指定为识别信息所表示的框的表示矩形的图像的区域内,配置包含在“Payment Form Info”的输入数据文件中,与和该识别信息相同的识别信息相关联的输入用字符数据并对这两个图像进行合成处理,以制作合成结果图像。另外,该制作的合成结果图像存储在图像存储器13、存储部19中。
例如,图像处理部27配置在图18所示的“Payment Form”的模板T中的,被指定为(27)的识别信息所表示的框(设为标准框)的表示矩形的图像的区域内,作为与同一识别信息(27)相关联的输入用字符数据的“山田太郎”,并对这两个图像进行合成处理。图像处理部27基于“Payment Form”的模板T中包含的上述框信息来判别(27)的识别信息所表示的框为标准框的情况。图像处理部27基于上述另外的数据所包含的,表示与识别信息对应的输入用字符数据的信息来判别与(27)的识别信息相关联的输入用字符数据为“山田太郎”的情况。
另外,图像处理部27在被指定为(14)、(15)、以及(16)的识别信息所表示的框(设为连结框)的三个表示矩形的图像的区域内,将作为与具有同一性的识别信息(14)相关联的输入用字符数据的“07,25,2016”从“Payment Form Info”的输入数据文件I中读出,在与(14)的识别信息相关联的框中配置“07”,在与(15)的识别信息相关联的框中配置“25”,并且在与(16)的识别信息相关联的框中配置“2016”,并对作为各框的表示矩形的图像、以及输入用字符数据的图像进行合成处理。图像处理部27基于“Payment Form”的模板T中包含的上述框信息来判别(14)、(15)、以及(16)的识别信息所表示的框为连结框的情况。而且,图像处理部27在该情况下,将在连续的识别信息之中,与最小编号的识别信息邻接地配置的输入用字符数据,作为在该合成中使用的输入用字符数据,将在作为该输入用字符数据的“07、25、2016”中用“,”分隔的各“07”“25”“2016”按照其排列顺序,分别从构成该连结框的子框之中最小编号的识别编号对应的子框开始依次配置下去。
另外,图像处理部27在被指定为(5)的识别信息所表示的框(设为复选框)的表示矩形的图像的区域内,配置作为输入用字符数据的“×”并对这两个图像进行合成处理。图像处理部27基于“Payment Form”的模板T中包含的上述框信息来判别(5)的识别信息所表示的框为复选框的情况。图像处理部27基于在上述另外的数据中包含的,表示与识别信息对应的输入用字符数据的信息来判别与(5)的识别信息相关联的输入用字符数据为“×”的情况。
接着,显示控制部22如图19所示,使显示部12显示图像处理部27制作的合成结果图像F(步骤S26)。
之后,控制部21对是否要求了上述合成结果图像F的印刷进行判别(步骤S27)。例如,在图19所示的显示画面中,在控制部21检测到了由用户按下了印刷键12n的情况下,控制部21判断为要求了合成结果图像F的印刷,并使图像形成部18进行该合成结果图像F的印刷处理(步骤S28)。
另一方面,在控制部21检测到由用户按下了保存键12e的情况下,控制部21判断为在当前时刻未要求合成结果图像F的印刷,并将该合成结果图像F保存在存储部19中(步骤S29)。
如上所述,在本实施方式中,在模板T的制作时,矩形提取部23从通过图像读取部17进行的读取而获得的原稿图像之中提取表示矩形的图像,并且检测该表示矩形的图像在原稿图像中的大小以及位置,识别信息分配部24对提取的表示矩形的图像依次分配识别信息。另外,显示控制部22将上述原稿图像、提取的表示矩形的图像、以及对该表示矩形的图像分配的识别信息相关联,并使显示部12显示。另外,框信息制作部25将通过指定要求而被指定为框的表示矩形的图像、该表示矩形的图像在原稿图像中的大小以及位置、以及对该表示矩形的图像分配的识别信息相关联,并作为该框的框信息来制作。另外,控制部21在框信息制作部25制作了框信息的情况下,作为包含原稿图像以及该框信息的模板存储在存储部19中。
因为在本实施方式中,图像处理部27在模板T表示的原稿图像中的被指定为识别信息所表示的框的表示矩形的图像的区域内,配置包含在输入数据文件中,与和该识别信息相同的识别信息相关联的输入用字符数据并对这两个图像进行合成处理,以制作合成结果图像,因而能够简单地进行在原稿图像中的用户期望的位置配置期望的字符等的印刷。另外,用户通过上述模板T的制作以及数据文件D的制作,能够简单地变更原稿图像中的输入用字符数据的配置位置、输入字符数据的内容。
也就是说,因为在本实施方式中,在用户在读取完毕的原稿中,变更输入输入用字符数据的框的位置的情况下,控制部21从存储部19中读出包含在原稿图像的模板中的原稿图像,通过对该原稿图像进行的基于矩形提取部23和识别信息分配部24的处理,来认识变更之后的框,因而之后,如果通过框信息制作部25来制作与变更之后的框对应的框信息,那么能够在不进行原稿的新的读取动作的情况下,简单地变更输入输入用字符数据的框的位置。
因此,在本实施方式中,与以往不同,能够对要求输入输入用字符数据的图像,简单地合成该输入用字符数据。
此外,虽然在上述说明中,对在PC(信息处理装置)1端设置依照打印机驱动进行动作的印刷任务生成部74的情况进行了说明,但在本公开中,图像形成装置2的输入用字符数据获取部26获取通过PC 1制作的输入用字符数据即可,例如,还可以是输入用字符数据获取部26将通过PC 1制作的文档数据作为输入用字符数据获取,并利用设于图像形成装置2的打印机驱动将该获取的输入用字符数据转换成印刷处理用的印刷数据的构成。在该情况下,图像形成装置2具备上述印刷任务生成部74。
另外,在上述实施方式中,使用图1至图19通过上述实施方式表示的构成以及处理只不过是本发明的一种实施方式,并不意味着将本发明限定于该构成以及处理。
本领域技术人员明白,可以在不脱离本发明的范围以及宗旨的情况下,对本发明进行各种修正以及变更。另外,应该理解,本发明不被限定于在本说明书中记载的例示性的实施方式。
Claims (12)
1.一种图像处理装置,其特征在于,具备:
显示部;
图像读取部,所述图像读取部读取原稿的图像;
矩形提取部,所述矩形提取部从通过所述图像读取部进行的读取获得的原稿图像中提取表示矩形的图像,并检测该表示矩形的图像在所述原稿图像中的大小以及位置;
识别信息分配部,所述识别信息分配部对通过所述矩形提取部提取的表示矩形的图像依次分配识别信息;
显示控制部,所述显示控制部使所述显示部显示所述原稿图像、以及在该原稿图像中通过所述矩形提取部提取的表示矩形的图像;
操作接受部,所述操作接受部接受来自用户的操作指示;
框信息制作部,所述框信息制作部在所述操作接受部从用户接受到将显示在所述显示部上的表示矩形的图像指定为作为供输入用字符数据输入的输入区域的框的指定要求的情况下,将通过所述指定要求而被指定为所述框的表示矩形的图像、该表示矩形的图像在所述原稿图像中的大小以及位置、以及对该表示矩形的图像分配的识别信息相关联,并作为该框的框信息来制作;
存储部;以及
控制部,所述控制部在所述框信息制作部制作了所述框信息的情况下,作为包含所述原稿图像、以及该框信息的模板存储在所述存储部中,
所述框信息制作部在所述操作接受部从用户接受到所述指定要求、以及作为通过该指定要求指定的框的种类,选择作为所述输入用字符数据被输入至少一个字符的标准框、将各自被输入所述输入用字符数据的多个框连结为一个框的连结框、以及作为所述输入用字符数据被输入预先规定的复选标记的复选框中的任一者的选择要求的情况下,将通过所述指定要求而被指定为所述框的表示矩形的图像、该表示矩形的图像在所述原稿图像中的大小以及位置、对该表示矩形的图像分配的识别信息、以及通过所述选择要求选择的框的种类相关联,并作为该框的框信息来制作。
2.根据权利要求1所述的图像处理装置,其特征在于,
所述显示控制部在所述框信息制作部制作了所述框信息的情况下,对每种所述框的种类,利用互不相同的显示方法使所述显示部来显示所述框。
3.根据权利要求1或权利要求2所述的图像处理装置,其特征在于,
所述显示控制部在所述操作接受部接受到指定框的所述指定要求之后,使所述显示部进行用于通过对所述操作接受部的来自用户的选择操作,接受变更该框的大小的指示的显示,
所述控制部在所述操作接受部接受到了表示变更之后的框的大小的值的情况下,将接受到的所述变更之后的框的大小,作为被指定为该框的表示矩形的图像在所述原稿图像中的大小,包含在所述框信息中并存储在所述存储部中。
4.根据权利要求3所述的图像处理装置,其特征在于,
所述显示控制部在使所述显示部进行用于接受变更所述框的大小的指示的显示时,使所述显示部显示用于从用户接受该框的高度以及宽度的各值的变更的图像。
5.一种图像形成装置,其特征在于,具备:
根据权利要求1至权利要求4中的任一项所述的图像处理装置;以及
图像形成部,所述图像形成部将通过所述图像读取部进行的读取而获得的原稿图像形成在记录介质上。
6.根据权利要求1所述的图像处理装置,其特征在于,还具备:
通信部,所述通信部通过网络,在与信息处理装置之间发送和接收数据;
输入用字符数据获取部,所述输入用字符数据获取部经由所述通信部获取经由所述网络从所述信息处理装置输入所述框中的输入用字符数据、以及与该输入用字符数据相关联的所述识别信息;以及
图像处理部,
所述控制部将所述输入用字符数据获取部获取的所述输入用字符数据、以及与该输入用字符数据相关联的所述识别信息作为输入数据文件存储在所述存储部中;
所述图像处理部在所述模板表示的所述原稿图像中的被指定为所述识别信息表示的框的表示矩形的图像的区域内,合成处理包含在所述输入数据文件中,与和该识别信息相同的识别信息相关联的输入用字符数据,并制作合成结果图像。
7.一种图像处理装置,其是经由网络而连接于信息处理装置的图像处理装置,其特征在于,具备:
存储部,所述存储部作为模板进行存储,所述模板包含原稿图像、以及将为包含在所述原稿图像中的表示矩形的图像,且被指定为作为供输入用字符数据输入的输入区域的框的该表示矩形的图像、以及对该表示矩形的图像分配的识别信息相关联的框的框信息;
通信部,所述通信部通过所述网络,在与所述信息处理装置之间发送和接收数据;
输入用字符数据获取部,所述输入用字符数据获取部经由所述通信部获取经由所述网络从所述信息处理装置输入所述框中的输入用字符数据、以及与该输入用字符数据相关联的所述识别信息;
控制部,所述控制部将所述输入用字符数据获取部获取的所述输入用字符数据、以及与该输入用字符数据相关联的所述识别信息作为输入数据文件存储在所述存储部中;以及
图像处理部,所述图像处理部在所述模板表示的所述原稿图像中的被指定为所述识别信息表示的框的表示矩形的图像的区域内,合成处理包含在所述输入数据文件中,与和该识别信息相同的识别信息相关联的输入用字符数据,并制作合成结果图像,
在所述框信息中,包含了表示所述框是作为所述输入用字符数据被输入至少一个字符的标准框、将各自被输入所述输入用字符数据的多个框连结为一个框的连结框、以及作为所述输入用字符数据被输入预先规定的复选标记的复选框中的哪一个类别的信息。
8.根据权利要求7所述的图像处理装置,其特征在于,
所述图像处理部,
对所述标准框,作为所述输入用字符数据合成一个字符,
对所述连结框,对包含在该连结框中的多个子框中的各个,作为所述输入用字符数据合成为通过预先规定的分隔字符分割的各个字符,且与所述子框对应的字符,并且
对所述复选框,作为所述输入用字符数据合成预先规定的复选标记。
9.根据权利要求7或权利要求8所述的图像处理装置,其特征在于,还具备:
显示部;
显示控制部,所述显示控制部使所述显示部显示存储在所述存储部中的所述模板的一览、以及存储在该存储部中的所述输入数据文件的一览;以及
操作接受部,所述操作接受部接受通过来自用户的操作指示,从所述模板的所述一览中选择的一个模板、以及从所述输入数据文件的所述一览中选择的一个输入数据文件,
在通过所述操作接受部接受到所述一个模板、以及所述一个输入数据文件的选择的情况下,所述图像处理部在所述选择的一个模板表示的所述原稿图像中的被指定为所述识别信息表示的框的表示矩形的图像的区域内,合成处理所述选择的一个输入数据文件所包含,与和该识别信息相同的识别信息相关联的输入用字符数据,并制作合成结果图像。
10.根据权利要求9所述的图像处理装置,其特征在于,
所述显示控制部在所述操作接受部通过来自用户的操作指示而接受到所述一个模板时,使所述显示部显示该一个模板、以及所述识别信息、该识别信息表示的所述框。
11.根据权利要求9所述的图像处理装置,其特征在于,
所述显示控制部使所述显示部显示所述图像处理部所制作的合成结果图像。
12.一种图像形成装置,其特征在于,具备:
根据权利要求7至权利要求11中的任一项所述的图像处理装置;以及
图像形成部,所述图像形成部将通过所述图像处理部制作的所述合成结果图像形成在记录介质上。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016234161A JP6624027B2 (ja) | 2016-12-01 | 2016-12-01 | 画像処理装置及び画像形成装置 |
JP2016-234161 | 2016-12-01 | ||
JP2016-234162 | 2016-12-01 | ||
JP2016234162A JP2018093337A (ja) | 2016-12-01 | 2016-12-01 | 画像処理装置及び画像形成装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108132762A CN108132762A (zh) | 2018-06-08 |
CN108132762B true CN108132762B (zh) | 2021-07-13 |
Family
ID=62243571
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711189366.8A Active CN108132762B (zh) | 2016-12-01 | 2017-11-24 | 图像处理装置以及图像形成装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10270934B2 (zh) |
CN (1) | CN108132762B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6930440B2 (ja) * | 2018-01-25 | 2021-09-01 | 京セラドキュメントソリューションズ株式会社 | 画像形成装置 |
JP7247496B2 (ja) * | 2018-09-14 | 2023-03-29 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
US10921928B2 (en) * | 2019-02-22 | 2021-02-16 | Sharp Kabushiki Kaisha | Input apparatus and input system |
JP7120450B2 (ja) * | 2019-04-03 | 2022-08-17 | 京セラドキュメントソリューションズ株式会社 | 表示装置 |
JP7379921B2 (ja) * | 2019-08-09 | 2023-11-15 | ブラザー工業株式会社 | プログラム |
JP7457518B2 (ja) * | 2020-02-14 | 2024-03-28 | 東芝テック株式会社 | 画像形成装置、プログラムおよび画像形成システム |
CN111586319B (zh) | 2020-05-27 | 2024-04-09 | 北京百度网讯科技有限公司 | 视频的处理方法和装置 |
JP2022057160A (ja) * | 2020-09-30 | 2022-04-11 | セイコーエプソン株式会社 | 画像読取装置、画像読取システムおよび画像読取装置の制御方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1499480A (zh) * | 2002-10-25 | 2004-05-26 | ��Ԩ��ѧ��ҵ��ʽ���� | 产生手写字体的设备、方法及记录其程序的可读存储介质 |
CN1674626A (zh) * | 2004-03-22 | 2005-09-28 | 株式会社东芝 | 图像处理设备 |
CN1848116A (zh) * | 2005-04-12 | 2006-10-18 | 日本先锋公司 | 信息处理设备、信息处理系统、以及信息处理方法 |
JP2008131381A (ja) * | 2006-11-21 | 2008-06-05 | Canon Software Inc | 帳票生成装置および帳票生成方法およびプログラムおよび記録媒体 |
US7496832B2 (en) * | 2005-01-13 | 2009-02-24 | International Business Machines Corporation | Web page rendering based on object matching |
JP2015227013A (ja) * | 2014-05-30 | 2015-12-17 | キヤノンマーケティングジャパン株式会社 | 印刷装置、制御方法、及びプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10198743A (ja) * | 1997-01-07 | 1998-07-31 | Ibm Japan Ltd | オペレータ入力位置を識別表示する方法及び装置、オペレータ入力位置を識別表示するプログラムを格納する記憶媒体 |
US7171615B2 (en) * | 2002-03-26 | 2007-01-30 | Aatrix Software, Inc. | Method and apparatus for creating and filing forms |
WO2004107257A1 (ja) * | 2003-05-30 | 2004-12-09 | Fujitsu Limited | 帳票処理プログラム、方法及び装置 |
JP4095617B2 (ja) * | 2005-02-28 | 2008-06-04 | キヤノン株式会社 | 文書処理装置及び文書処理方法及びコンピュータプログラム |
CN101669085B (zh) * | 2007-04-24 | 2012-08-08 | 吴谊镇 | 字符输入设备 |
JP5402099B2 (ja) * | 2008-03-06 | 2014-01-29 | 株式会社リコー | 情報処理システム、情報処理装置、情報処理方法およびプログラム |
JP2012038094A (ja) * | 2010-08-06 | 2012-02-23 | Canon Inc | 画像形成装置、情報処理方法及びプログラム |
US8996981B2 (en) * | 2011-09-06 | 2015-03-31 | Onevizion, Inc. | Managing forms in electronic documents |
US8788930B2 (en) * | 2012-03-07 | 2014-07-22 | Ricoh Co., Ltd. | Automatic identification of fields and labels in forms |
US8792730B2 (en) * | 2012-03-07 | 2014-07-29 | Ricoh Co., Ltd. | Classification and standardization of field images associated with a field in a form |
US9535882B2 (en) * | 2013-03-14 | 2017-01-03 | Goformz, Inc. | System and method for converting paper forms to an electronic format |
US10223344B2 (en) * | 2015-01-26 | 2019-03-05 | Adobe Inc. | Recognition and population of form fields in an electronic document |
US10417489B2 (en) * | 2015-11-19 | 2019-09-17 | Captricity, Inc. | Aligning grid lines of a table in an image of a filled-out paper form with grid lines of a reference table in an image of a template of the filled-out paper form |
US10067926B2 (en) * | 2015-12-21 | 2018-09-04 | Xerox Corporation | Image processing system and methods for identifying table captions for an electronic fillable form |
-
2017
- 2017-11-15 US US15/813,834 patent/US10270934B2/en active Active
- 2017-11-24 CN CN201711189366.8A patent/CN108132762B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1499480A (zh) * | 2002-10-25 | 2004-05-26 | ��Ԩ��ѧ��ҵ��ʽ���� | 产生手写字体的设备、方法及记录其程序的可读存储介质 |
CN1674626A (zh) * | 2004-03-22 | 2005-09-28 | 株式会社东芝 | 图像处理设备 |
US7496832B2 (en) * | 2005-01-13 | 2009-02-24 | International Business Machines Corporation | Web page rendering based on object matching |
CN1848116A (zh) * | 2005-04-12 | 2006-10-18 | 日本先锋公司 | 信息处理设备、信息处理系统、以及信息处理方法 |
JP2008131381A (ja) * | 2006-11-21 | 2008-06-05 | Canon Software Inc | 帳票生成装置および帳票生成方法およびプログラムおよび記録媒体 |
JP2015227013A (ja) * | 2014-05-30 | 2015-12-17 | キヤノンマーケティングジャパン株式会社 | 印刷装置、制御方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US10270934B2 (en) | 2019-04-23 |
US20180160009A1 (en) | 2018-06-07 |
CN108132762A (zh) | 2018-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108132762B (zh) | 图像处理装置以及图像形成装置 | |
US11418658B2 (en) | Image processing apparatus, image processing system, image processing method, and storage medium | |
US10078476B2 (en) | Image forming apparatus and image forming method | |
JP6885318B2 (ja) | 画像処理装置 | |
JP2015204075A (ja) | 電子文書生成システムおよびプログラム | |
JP2019109628A5 (zh) | ||
US9998622B2 (en) | Image processing apparatus and control method for processing plurality of partial images and determining layout | |
US10949697B2 (en) | Image processing apparatus and image forming apparatus | |
US10902223B2 (en) | Image processing apparatus | |
JP2019109629A5 (zh) | ||
JP2023049890A (ja) | 印刷装置 | |
JP6624027B2 (ja) | 画像処理装置及び画像形成装置 | |
JP2006270589A (ja) | 情報処理装置、情報処理方法、プログラムおよび記録媒体 | |
JP2018093337A (ja) | 画像処理装置及び画像形成装置 | |
JP4715563B2 (ja) | 印刷データ生成装置及びプリンタドライバプログラム | |
JP2018093336A5 (zh) | ||
US11972313B2 (en) | Information processing apparatus, image forming apparatus, and work estimating method that allows objective determination of estimation of work related to printing | |
US20240111979A1 (en) | Information processing apparatus, image forming apparatus, and work estimating method that allows objective determination of estimation of work related to printing | |
US20050179945A1 (en) | System and method for variable text overlay | |
JP2010109653A (ja) | 画像読取装置、画像形成装置、画像読取方法および画像読取プログラム | |
JP2005157745A (ja) | 印刷システム、印刷装置、印刷制御装置および印刷装置制御プログラム | |
JP2023170130A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6432237B2 (ja) | 画像処理装置および画像処理プログラム | |
JP2022074865A (ja) | 画像処理装置及び画像形成装置 | |
JP2021166365A (ja) | 画像処理装置及び画像形成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |