CN113870387A - 数据输出系统及其方法,图像处理系统及其方法 - Google Patents
数据输出系统及其方法,图像处理系统及其方法 Download PDFInfo
- Publication number
- CN113870387A CN113870387A CN202110735576.2A CN202110735576A CN113870387A CN 113870387 A CN113870387 A CN 113870387A CN 202110735576 A CN202110735576 A CN 202110735576A CN 113870387 A CN113870387 A CN 113870387A
- Authority
- CN
- China
- Prior art keywords
- information
- area
- application
- data
- ocr
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/412—Layout analysis of documents structured with printed lines or input boxes, e.g. business forms or tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/1444—Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields
- G06V30/1456—Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields based on user interactions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00005—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to image data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
- H04N1/00209—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
- H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10008—Still image; Photographic image from scanner, fax or copier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30176—Document
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Facsimiles In General (AREA)
Abstract
本发明涉及涉及数据输出系统及其方法,图像处理系统及其方法,信息处理系统,以及记录介质。提供能输出图像数据中的对规定区域的OCR处理结果的数据输出系统。提供能根据所选择的识别信息在图像数据区域进行图像处理的图像处理系统。本发明是机器(20)与信息处理系统(10)可通信的数据输出系统(100),其特征在于,包括:通信部(19),从所述机器接收图像数据;区域特定部,基于从所述图像数据检测出预先设定的信息的区域,特定OCR区域;以及输出部(66),基于特定的所述OCR区域及所述图像数据,输出对所述OCR区域已进行OCR处理的数据。
Description
技术领域
本发明涉及数据输出系统及其方法,图像处理系统及其方法,信息处理系统,以及记录介质。
背景技术
在企业或团体等组织的日常业务中,经常要处理经费结算书、付款通知单或订单等票据。组织内的负责人,每日从票据中抽出处理日期、案件编号或金额等,进行统计业务。
这样的票据电子化相关的技术已被提出(例如,参考专利文献1)。在专利文献1中,公开了一种用户将应遮蔽区域标记之后用复合机扫描,再将相关区域被遮蔽后的票据登录于主系统等的图像读取装置。
专利文献
专利文献1:日本特开2017-212575号公报
发明内容
然而,如以往的技术,存在以下问题:无法输出图像数据中对规定区域的OCR处理结果。例如,组织内的用户核算经费的场合,将经费记入经费结算书,向总务等提交。使用复合机读取该票据,将其电子化为图像数据,但负责人需要进行以下工作:从来自各用户的全部图像数据的所决定的区域,读取日期、费用等数据,记录于文件。
此外,在以往技术中,存在不能根据所选择的识别信息不能在图像数据区域进行图像处理的问题。例如,存在以下系统:若用户按压机器显示的图标或按钮等,则机器读取票据将其电子化,登录到服务器。但该系统不能在电子化的图像数据的所设定区域进行图像处理。
本发明鉴于所述课题,其目的在于,提供一种数据输出系统,能输出图像数据中的对规定区域的OCR处理结果。
本发明的另一目的在于,提供一种图像处理系统,能根据所选择的识别信息在图像数据区域进行图像处理。
鉴于所述课题,本发明涉及一种数据输出系统,机器与信息处理系统可通信,其特征在于,所述数据输出系统包括:
通信部,从所述机器接收图像数据;
区域特定部,基于从所述图像数据检测出预先设定的信息的区域,特定OCR区域;以及
输出部,基于特定的所述OCR区域及所述图像数据,输出对所述OCR区域已进行OCR处理的数据。
根据本发明的一形态,涉及一种信息处理系统,能与机器通信,其特征在于,所述信息处理系统包括:
通信部,接收来自所述机器的图像数据;
区域特定部,基于从所述图像数据检测到预先设定的信息的区域,特定OCR区域;以及
输出部,基于特定的所述OCR区域和所述图像数据,输出对所述OCR区域已执行OCR处理的数据。
根据本发明的另一形态,涉及一种数据输出系统,包括:
信息处理系统,其配置为能与终端设备通信,该终端设备包括:操作接受部,接受所述机器要求执行的应用和所述设定文件的选择;以及第二通信部,将所述操作接受部接受的所述应用的识别信息和所述设定文件的识别信息发送至所述信息处理系统,
所述信息处理系统使得所述设定文件与所述应用关联,与所述图像数据一起要求执行所述应用场合,所述区域特定部根据与该应用关联的所述设定文件包含的、关于检测到所述预先设定的信息的区域的信息,从所述图像数据特定所述OCR区域。
根据本发明的又一形态,涉及一种图像处理系统,机器(也包含MFP等及PC等的终端装置)与信息处理系统可通过网络通信,其特征在于:包括设定接受部,其使得图像处理的区域和识别信息对应关联;所述机器包括通信部,根据来自机器接受的用户的选择,将所述识别信息和图像数据向所述信息处理系统发送;所述信息处理系统包括处理结果输出部,输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
根据本发明的又一形态,涉及一种信息处理系统,能通过网络与机器通信,其特征在于,所述信息处理系统包括:
设定接受部,其使得图像处理的区域和识别信息对应关联;
通信部,根据来自所述机器接受的用户的选择,从所述机器接受所述识别信息和图像数据;
处理结果输出部,输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
根据本发明的又一形态,涉及一种数据输出系统,包括:
信息处理系统;以及
机器,能通过网络通信,
所述机器包括机器电路,所述机器电路配置为响应于接收到来自用户的选择,将识别信息和图像数据发送到所述信息处理系统,
所述信息处理系统包括系统电路,其配置为使得将进行图像处理的图像数据的区域与识别信息对应关联,输出对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
下面说明本发明的效果:
按照本发明,能够提供一种数据输出系统,能输出图像数据中的对规定区域的OCR处理结果。
按照本发明,能够提供一种图像处理系统,能根据所选择的识别信息在图像数据区域进行图像处理。
附图说明
图1的(a)~(b)所示是说明本发明第一实施形态涉及的数据输出系统以从票据获取的数据作成文件的处理或动作的图。
图2所示是本实施形态涉及的数据输出系统的一例的系统构成的图。
图3所示是信息处理系统及终端装置的一例的硬件构成的图。
图4所示是图像形成装置的一例的硬件构成图。
图5所示是机器、终端装置、及信息处理系统的一例的功能构成的图。
图6所示是存储于应用软件处理信息存储部的应用软件处理信息的一例的图。
图7的(a)~(b)所示是模式化表示应用软件进行的一系列处理的图。
图8的(a)~(b)所示是说明票据中区域的标记方法的图。
图9所示是注册区域信息时,机器显示的区域注册画面的一例的图。
图10所示是信息处理系统从管理者已标记区域的票据,获取区域信息,表示设定文件的制作步骤的序列图的一例的图。
图11的(a)~(c)所示是说明从图像数据中检测出区域的一例的图
图12所示是管理者于设定文件的FK列设定信息时的步骤的序列图的一例的图。
图13所示是说明设定文件和票据的对应的一例的图。
图14的(a)~(c)所示是同应用软件和区域信息的对应相关联的终端装置所表示的画面的一例的图。
图15所示是说明管理者对应用软件和设定文件做对应处理时的序列图的一例的图。
图16的(a)~(c)所示是表示对应画面的一个变形例的图。
图17所示是表示多个应用软件的选择画面的一例的图。
图18的(a)~(c)所示是管理者复制应用软件时的操作画面的一例的图。
图19所示是表示信息处理系统登录应用软件的复制时的步骤的序列图的一例的图。
图20的(a)~(c)所示是表示机器显示画面的变迁例的一例的图。
图21的(a)~(b)所示是说明保存于外部服务器的文件的一例的图。
图22所示是信息处理系统接收来自机器的包含票据图像数据的PDF文件,从区域取得数据的序列图的一例的图。
图23所示是说明对OCR处理结果的修正的一例的图。
图24的(a)~(b)所示是表示终端装置所显示的外部服务系统的文件一览画面的一例的图。
图25所示是表示机器显示的输出数据显示画面的一例的图。
图26的(a)~(b)所示是表示复数张票据和被输出的文件的一例的图。
图27的(a)~(b)所示是说明本发明第二实施形态涉及的图像处理系统以从票据获取的数据作成文件的处理或动作的图。
图28是说明使得图标和区域信息关联的图。
具体实施方式
下面,作为本发明的实施方式的一例,对数据输出系统及数据输出系统的数据输出方法加以说明。
<处理或动作的概要>
在企业或团体等组织中,经常要处理经费结算书、付款通知单或订单等票据。组织内的负责人,每日从票据中抽出处理日期、案件编号或金额等,进行统计业务。经处理的票据归档后,虽然被保存,但是保存空间也需要花费成本。虽然在不断推进票据的电子化,但是需要负责人重新命名被自动命名的票据文件等作业,仍然比较花费时间和劳力。
虽然存在将付款处理和接单订货自动化的系统和服务,因其价格高昂,能够投资使用的中小企业并不太多。因此,产生了不得己而介助人工来处理票据的现状。
在本实施形态中,根据标记区域的票据,基于事先所登录的区域信息,信息处理系统从每日产生的票据的区域获取数据,能够将其以电子文件形式输出。
参照图1,对数据输出系统进行的处理或动作的概要加以说明。图1是说明数据输出系统100以从票据获取的数据作成文件的处理或动作的图。图1(a)说明对票据中区域信息的设定,图1(b)说明对从使用区域信息的票据获取数据。
(1)数据输出系统100能够同外部服务系统40协作。数据输出系统100介助应用软件同外部服务系统40协作。这里也可以仅称呼在数据输出系统100中运作的应用软件为“应用软件”,称呼在外部服务系统40中运作的应用软件为“协作方应用软件”。该场合,使得应用软件和协作方应用软件的互相的应用软件ID对应,数据输出系统100存储对应关系。
(2)数据输出系统100的管理者8使用组织内的用户日常使用的票据7,指定应该获取票据7的哪一区域的数据。例如,可以使用记号笔将票据7的区域涂画或圈记。机器20读取被标记的票据7,生成图像数据,将该图像数据发送至信息处理系统10。可以在被标记的票据7上对项目记入文字,也可以仅针对项目本身,即使空白区域也行。
(3)信息处理系统10将被记号笔指定的区域的区域信息保存于设定文件中。区域信息是指图像数据中诸如矩形区域的对角顶点的坐标信息。信息处理系统10将设定文件保存于外部服务系统40。
(4)-1管理者将终端装置30同外部服务系统40连接,下载设定文件,将设定文件中票据的语言和日期的格式补充完整。
(4)-2管理者将终端装置30同信息处理系统10连接,进行将应用软件的应用软件ID同设定文件相对应的操作。管理者能够将任意数量的应用软件ID同设定文件相对应。由此,受理应用软件的选择的图标即能够同执行图像处理的区域信息相对应。
(5)组织内的用户6为了费用的核算等将票据7提交给组织的场合,在机器20上按下对应该票据7的应用软件的图标。能够简单地选择多个票据名等。用户让机器20读取手写有必须事项的票据、或打印出的票据。机器20将应用软件的应用软件ID、读取票据后生成的图像数据(例如PDF文件)发送至信息处理系统10。
(6)信息处理系统10通过应用软件ID确定设定文件,从图像数据中获取(例如抽出)从外部服务系统40获取的设定文件具有的区域信息的区域。由此,管理者即能够获取被登录票据的区域。
(7)信息处理系统10仅对该区域进行OCR(Optical Character Reader光字符阅读)处理及数据化。即能够获取区域中所述的数据(文字等的文字符号)。
(8)信息处理系统10将数据输出为电子文件(例如CSV(Comma Separated Value,逗号分隔值)文件),并将文件和图像数据发送至外部服务系统40。另外,当信息处理系统10指定协作方应用软件的应用软件ID的场合,能够指定协作方应用软件发送文件及图像数据。
(9)外部服务系统40将图像数据和文件登录在管理者指定的文件夹(或目录)。由于文件中含有核算的必要信息,负责人能够进行核算处理。
如上所述,本实施形态的数据输出系统,由机器20读取被标记区域的票据,存储每张票据的区域信息。信息处理系统10从机器发送的票据图像数据中仅获取区域并对其进行OCR处理,将OCR处理结果的数据输出为文件。由此,任意数量的图标能够同图像处理的区域相对应,例如用户只要依据票据的种类选择图标,即能够对扫描生成的图像数据的期望区域进行图像处理(例如OCR处理)。
<关于用语>
管理者为数据输出系统的客户方的系统管理者等,为一般用户进行数据输出系统相关设定的人员。用户为客户方的一般用户。一般用户也可以进行管理者的操作,不对两者进行区分亦可。
OCR(Optical Character Recognition/Reader)是指,通过感光元件将手写文字或打印文字转换为电子信号,转换为计算机能够使用的电子文字符号的技术。又被称为文字识别处理、文字转换处理、电子化等。OCR处理获取的数据有日语、英语、数字、记号、图形等各种形式。
票据为账簿和发票等的总称。亦可称为设有用户记入空格栏的办公用纸。本实施形态中主要针对票据加以说明,机器20能够读取的话只要是原稿,其名称一概不问。例如,文书、资料、文件、报告书、报纸、杂志等亦在对象之中。另外,也存在票据没有被打印成纸质媒体的场合(存在机器20没必要读取票据的场合)。
作为OCR处理对象的图像数据的种类无论何种都可,有PDF、JPEG、PNG、TIFF、BMP等。
OCR区域相关的信息,是指信息处理系统10为确定OCR区域的信息。在本实施形态中说明为区域信息这一用语。
本实施形态中“设定文件”是指设定了区域信息的文件。“文件”是指数据被输出后的文件。文件是指计算机管理的数据的基本单位,即数据的集合体。
输出数据,是指用户将数据处理成以视觉可确认的形式。在本实施形态中,例如将数据输出为文件。
图标,是指将给予计算机的指令/命令和文件等以易懂的形式符号化的图形。按钮,是指用鼠标点击,给予软件命令的图形。图标和按钮上皆可标记操作内容和命令内容。
<系统构成例>
首先,关于本实施形态涉及的数据输出系统100的系统构成,参照图2加以说明。图2所示是本实施形态涉及的数据输出系统100的一例的系统构成的图。
图2所示数据输出系统100包含信息处理系统10及机器20,介助于互联网等广域网N1进行通信连接。数据输出系统100同作为外部系统的外部服务系统40相互通信。另外,任意的终端装置30介助于网络N1、N2,能够同信息处理系统10相互通信。
信息处理系统10由一台以上的信息处理装置实现,介助于网络N1,提供通过同云服务等外部服务系统40协作的一系列处理而实现的各种服务。关于本实施形式涉及的信息处理系统10所提供的服务的具体例子,之后加以叙述。信息处理系统10可以由云计算实现,亦可由单一信息处理装置实现。云计算是指不着意于特定硬件资源而使用网络资源的使用形态。信息处理系统10可以存在于网络上,亦可存在于场内。另外,一系列的处理由一个应用软件提供,一系列的处理又可称为“处理流程”、“工作流程”。
机器20,是指用户使用的各种电子设备。机器20是指诸如MFP(MultifunctionPeripheral,多功能外围设备)等的图像处理装置、图像形成装置、PC(个人计算机)、投影仪、电子黑板、数码相机等设备。机器20同网络N2连接。用户使用机器20,能够使用信息处理系统10或外部服务系统40中的至少一方提供的各种服务。
另外,以后关于机器20,区分彼此时,使用“机器201”、“机器202”等,以小字形式所述。
终端装置30,例如,是指管理者或用户使用的桌面PC(个人计算机)、笔记本型PC、智能手机、平板计算机装置等。另外,终端装置30只要是能够运作Web浏览器的装置即可。终端装置30同网络N2连接。管理者或用户操作终端装置30,能够使用信息处理系统10或外部服务系统40提供的各种服务,另外,还能够对协作方应用软件或应用软件进行设定。
另外,虽然为便于说明,将机器20和终端装置30分开加以说明,但将机器20和终端装置30统称为机器亦可。
另外,以后关于终端装置30,区分彼此时,使用“终端装置301”、“终端装置302”等,以小字形式所述。
外部服务系统40,是指介助于网络N1,通过协作方应用软件的执行提供服务的一台以上的信息处理装置。通过协作方应用软件的执行,进行数据管理或处理,数据本身和处理结果即为服务。
在外部服务系统40的一例中,例如有云服务、ASP(Application ServiceProvider,应用服务提供者)等,亦包含介助于网络提供的各种外部服务。本实施形式中对作为其中一例的存储服务加以说明。外部服务系统40可以存在于网络上,亦可存在于场内。
另外,以后关于复数个外部服务系统40,互相区分时,将如图所示的“外部服务系统401”所述为外部服务系统40A,将“外部服务系统402”所述为外部服务系统40B等。
<硬件构成例>
参照图3,对本实施形式涉及的数据输出系统100包括的信息处理系统10及终端装置30的硬件构成加以说明。
<<信息处理系统及终端装置>>
图3所示是本实施形式涉及的信息处理系统10及终端装置30的一例的硬件构成的图。如图3所示,信息处理系统10及终端装置30由计算机构筑,包括CPU501、ROM502、RAM503、HD504、HDD(Hard Disk Drive,硬盘驱动器)控制器505、显示器506、外部机器接续I/F(Interface,接口)508、网络I/F509、总线510、键盘511、指示器512、DVD-RW(DigitalVersatile Disk Rewritable,可重录数字多用光盘)驱动器514、介质I/F516。
其中,CPU501控制信息处理系统10及终端装置30的整体运作。ROM502存储IPL等的用于CPU501驱动的程序。RAM503作为CPU501的工作区域使用。HD504存储程序等各种数据。HDD控制器505依照CPU501的控制,控制对HD504进行各种数据的读取和写入。显示器506显示光标、菜单、窗口、文字、或图像等各种信息。外部机器连接I/F508是连接各种外部机器的接口。该场合所指的外部机器,是指诸如USB(Universal Serial Bus,通用串行总线)存储器和打印机等。网络I/F509使用网络N2进行数据通讯的接口。总线510是用于电连接图3所示的CPU501等各构成要素的地址总线和数据总线等。
另外,键盘511是指具有为输入文字、数值、各种指示等的复数个按键的输入手段的一种。指示器512是指进行各种指示的选择和执行、处理对象的选择、光标的移动等的输入手段的一种。DVD-RW驱动器514控制相对作为可装卸的记录介质一例的DVD-RW513的各种数据的读取和写入。另外,不仅限于DVD-RW,DVD-R等亦可。介质I/F516控制相对闪存等的记录介质515的数据的读取和写入。
<<机器>>
图4所示是作为机器20的一例的图像形成装置的硬件构成图。如图4所示,图像形成装置包括控制器910、近距离通信电路920、动力控制部930、操作面板940、网络I/F950。
其中,控制器910包括作为计算机主要部分的CPU901、系统内存(MEM-P)902、北桥(NB)903、南桥(SB)904、ASIC(Application Specific Integrated Circuit,专用集成电路)906、作为存储部的局部存储器(MEM-C)907、HDD控制器908、以及作为存储部的HD909,在NB903和ASIC906之间用AGP(Accelerated Graphics Port,加速图形接口)总线921连接。
其中,CPU901是执行图像形成装置的整体控制的控制部。NB903是用于连接CPU901、MEM-P902、SB904及AGP总线921的桥,包含对MEM-P902进行读写等进行控制的存储控制器、PCI(Peripheral Component Interconnect,外设部件互连总线)主机及AGP目标。
MEM-P902由用于存储实现控制器910各种功能的程序和数据的存储器ROM902a、以及用于程序和数据的展开和存储器印刷时作为绘图用存储器等使用的RAM902b构成。存储于RAM902b的程序,能够以可下载的形式或可执行的形式的文件,记录在CD-ROM、CD-R、DVD等的计算机可以读取的记录介质。
SB904是用于连接NB903和PCI设备、周边设备的桥。ASIC906,是具有图像处理用的硬件要素的图像处理用途的IC(Integrated Circuit,集成电路),具有分别连接AGP总线921、PCI总线922、HDD控制器908及MEM-C907的桥的作用。该ASIC906包括PCI目标及AGP主机、构成ASIC906核心部分的判优器(ARB)、控制MEM-C907的存储器控制器、根据硬件逻辑等执行图像数据的旋转等的多个DMAC(Direct Memory Access Controller,直接存储器存取控制器)、以及在扫描部931、打印部932、及传真部之间介助于PCI总线922进行数据传送的PCI单元。在ASIC906,可连接USB(Universal Serial Bus)的接口、IEEE1394(Institute ofElectrical and Electronics Engineers1394,电气与电子工程师协会1394)的接口。
MEM-C907是作为复制用图像缓冲器及符号缓冲器使用的本地存储器。HD909是用于进行图像数据的储存、印刷时使用的字体数据的储存、格式的储存的存储设备。HDD控制器908根据CPU901的控制,控制对于HD909的数据的读出或写入。AGP总线921是用于使得图形处理高速化而提出的图形加速器卡用的总线接口,通过高流通量直接访问MEM-P902,能使得图形加速器卡高速。
又,在近距离通信电路920,具备近距离通信电路的天线920a。近距离通信电路920是NFC、Bluetooth(注册商标)等的通信电路。
再有,动力控制部930包括扫描部931、复印部932及传真部933。又,操作面板940显示现在的设定值或选择画面等,包括:接受操作者输入的触摸面板等的面板显示部940a,及由数字键及开始键等形成的硬键940b,数字键接受浓度的设定条件等与图像形成相关的条件的设定值,开始键接受复印开始指示。控制器910进行图像形成装置整体的控制,例如,控制绘图、通信、来自操作面板940的输入等。在扫描部931或复印部932,包括误差扩散、伽马变换等图像处理部分。
图像形成装置通过操作面板940的应用切换键,能依次切换选择文件箱功能、复印功能、打印功能、及传真功能。选择文件箱功能时,成为文件箱模式,选择复印功能时,成为复印模式,选择打印功能时,成为打印模式,选择传真功能时,成为传真模式。
又,网络I/F950是使用网络N2用于进行数据通信的接口。近距离通信电路920及网络I/F950通过PCI总线922电连接于ASIC906。
<关于功能>
下面,关于本实施形态涉及的数据输出系统100的功能构成,参照图5进行说明。图5是表示本实施形态涉及的机器20、终端装置30、及信息处理系统10的一例的功能构成的图。
<<机器>>
首先,机器20包括第二通信部21、显示控制部22、操作接受部23、图像数据生成部24、传真处理部25、电子邮件处理部26。所述各功能部是通过CPU901执行安装于机器20的一个以上的程序所包含的命令实现的功能或手段。例如,第二通信部21、显示控制部22及操作接受部23通过Web浏览器实现,其他通过个别的应用(本地应用程序)实现。
第二通信部21收发与信息处理系统10间的各种信息。在本实施形态中,从信息处理系统10接收应用一览画面的画面信息等,将票据的图像数据、应用ID等发送至信息处理系统10。
显示控制部22解释各种画面的画面信息,显示于面板显示部940a。操作接受部23接受面板显示部940显示的各种画面中的用户的各种操作。
操作接受部23接受选择的应用生成图像数据的场合,图像数据生成部24在扫描部931扫描原稿,生成图像数据。图像数据生成部24是扫描仪功能。图像数据生成部24将图像数据转换为PDF文件。也可以不转换地保持图像数据(JPEG、TIFF、PNG等)原样。传真处理部25进行与通过传真部933进行的传真的收发相关的处理,接收传真的场合,要求信息处理系统10执行预先关联的应用。再有,也可以要求与传真的发送源(FAX编号)对应的应用。
电子邮件处理部26进行与电子邮件的收发相关的处理,接收电子邮件的场合,要求信息处理系统10执行预先相关联的应用。再有,也可以要求与电子邮件的发送源(邮箱地址)对应的应用。
<<终端装置>>
终端装置30包括第一通信部31、显示控制部32、操作接受部33。所述各功能部是通过CPU501执行安装于终端装置30的一个以上的程序所包含的命令实现的功能或手段。再有,该程序可以是Web浏览器,也可以是用于与信息处理系统10通信的专用的软件。
第一通信部31在与信息处理系统10或外部服务系统40之间,收发各种信息(第二通信部的一例)。在本实施形态中,从信息处理系统10或外部服务系统40接收各种画面信息等,将管理者或用户设定的信息发送至信息处理系统10或外部服务系统40。
显示控制部32解释各种画面的画面信息,显示于显示器506。操作接受部33接受显示于显示器506的各种画面中的用户的各种操作。
<<信息处理系统>>
信息处理系统10包括应用数据服务部11、设定接受部12、认证服务部14、Web服务处理部15、输入/输出服务部16、组件18、及通信部19。所述各功能部是通过CPU501执行安装于信息处理系统10的一个以上的程序所包含的命令实现的功能或手段。在图5中,为了作图方便,一个信息处理系统10包括各功能部,也可以将各功能部分散配置于多个信息处理装置。
通信部19在终端装置30及机器20之间收发各种信息。设定接受部12为终端装置30提供设定网站,接受对设定网站的设定。所谓网站有时也称为Web网页或Web应用,有时也称为向终端装置30提供Web网页或Web应用的服务器侧的系统。设定接受部12包括终端画面提供部42,终端画面提供部42提供由管理者设定应用执行必要的信息的初始画面、应用一览画面、及关联画面等。终端画面提供部42对于来自终端装置30的HTTP请求,生成由HTML、XML、CSS(Cascade Style Sheet,级联样式表)、及JavaScript(注册商标)等描述的画面信息,将画面信息作为HTTP响应发送至终端装置30。
应用数据服务部11包括应用数据管理部41。应用数据管理部41按顾客管理由企业等顾客购入的应用的应用数据43。应用数据43例如使得应用与所述的区域信息关联。应用数据43存储于应用数据存储部13。从数据输出系统100看到的顾客等的组织称为租户。
Web服务处理部15对机器20提供画面信息,或者从机器20接受应用的执行。Web服务处理部15包括应用执行部46和机器画面提供部47。应用执行部46从机器20接受应用的执行,对输入/输出处理部48要求执行应用。机器画面提供部47使用画面信息54,向机器20提供应用一览画面或应用画面的画面信息。
输入/输出服务部16使用认证服务部14、应用处理信息存储部17及组件18,进行数据的输入/输出。输入/输出服务部16包括输入/输出处理部48与应用管理部49。输入/输出处理部48执行应用执行部46要求的应用。执行时,参照应用处理信息53,向组件18要求包含于应用的各处理。应用管理部49管理存储于应用处理信息存储部17的、应用的应用处理信息53及画面信息54。在应用处理信息53中,设定以何种顺序执行应用(例如,在OCR之后,向外部服务系统40要求处理等)。画面信息54是各应用的图标、应用一览画面、及各应用画面等、机器20显示的画面信息。在应用处理信息存储部17中,按各应用存储有应用处理信息53及画面信息54。
认证服务部14进行用户(包括管理者)、及机器20的认证相关的处理。认证服务部14包括用户管理部44与设备管理部45。用户管理部44管理与用户相关的信息。例如,保持用户名、密码等认证信息。又,认证信息中有信息处理系统10与外部服务系统40的信息。设备管理部45管理与租户相关联的机器20。即,租户的识别信息与机器20关联管理,若机器20被特定,则租户也被特定。
组件18是实际进行各处理的个别功能的总称。组件18内的一个块对应一个处理。组件18例如包括认证处理部61、外部服务处理部62、判断部63、PDF处理部64、区域检测部65、文件输出部66、区域特定部67、OCR处理部68、及OCR修正部69。认证处理部61是对认证服务部14依赖关于认证处理的组件18。外部服务处理部62是对外部服务系统40依赖处理要求的组件18。即,外部服务处理部62是用于与外部服务系统40协同的功能。外部服务处理部62按照外部服务系统40的种类准备。判断部63进行各种判断,控制处理流程的分叉。PDF处理部64进行关于PDF文件的处理,例如,从PDF文件提取图像数据,或作成带透明文本的PDF文件。机器20用于以PDF文件的形式发送图像数据。区域检测部65从图像数据检测以记号笔等标记的矩形区域,作成矩形区域的坐标(区域信息)。文件输出部66作成包含区域信息的设定文件,又,输出包含OCR处理结果(从票据的区域获取的数据)的文件。区域特定部67基于区域信息,从图像数据特定区域。区域特定部67获取特定的区域(例如可以切取)。OCR处理部68仅在区域及图像数据整体进行OCR处理。OCR修正部69修正OCR处理结果。图示以外,也可以包括翻译等组件。
表1
表1表示应用处理信息存储部17保持的应用处理信息的一例。应用处理信息存储部17存储各租户购入的(有许可证)应用的列表。表1所示信息是应用处理信息存储部存储的列表包含的应用中,在本实施形态中说明的接收的图像数据的一部分中进行图像处理的应用的一览,包括应用ID、应用名、画面信息、应用处理信息、共享应用、及外部服务系统40的各项目。应用ID是识别应用的识别信息。应用名是管理者赋予的应用的名称。又,在机器20显示应用的图标、设定画面时使用的画面信息54(用HTML等描述)与应用相关联。在应用中定义了一系列处理的内容与顺序(处理流程),因此,在各应用关联应用处理信息53。如后所述,复制的应用的流程信息成为相同。所谓共享应用是指相对于一般的应用,按各用户给予利用权限,共享应用是指租户的用户能共同使用的应用。在表1中,经费明细账单应用是共享应用。用于各用户共同使用。外部服务系统40的项目是各应用协同的外部服务系统40。也存在不与外部服务系统40协同的应用。
当管理者或用户登录时,应用管理部49从应用处理信息存储部17获取管理者或用户承认利用权限的应用的一览,提供至机器20。又,若从应用一览指定应用,则应用管理部49特定与应用关联的画面信息和应用处理信息。
表2表示关于用户信息
表2
(a)
(b)
(c)
共享应用 | 外部服务系统 | 认证信息 |
app003 | B | U001的认证信息 |
… |
表2表示用户管理部44管理的关于用户信息的一例。表2(a)作为用户相关信息,包括信息处理系统10中的用户ID、用户名、邮件地址、密码、可利用应用、及外部服务系统信息的各项目。该用户也包含管理者。用户ID、用户名、或邮件地址的至少一个与密码是用于用户登录信息处理系统10的认证信息。可利用应用是给予该用户利用权限的应用。利用权限是管理者将指定利用人数等购入许可证的应用分配给予各用户。可利用应用中有个人应用和共享应用。个人应用与共享应用都是由多个用户使用,但个人应用使用个人的用户的外部服务的认证信息,共享应用使用多个用户对外部服务管理者的认证信息。在表2(a)中,在U001~U003中,共同的app003是共享应用。其他是个人应用。个人应用场合,按照各用户,需要注册外部服务系统的认证信息。外部服务系统信息是用户协同设定完毕的外部服务系统40。
所谓“协同设定完毕”是指用户希望与外部服务系统40协同,确认能通过外部服务系统40的认证信息登录。用户从设定网站输入外部服务系统40的认证信息,能登录的场合,在表2(a)的外部服务系统信息设定外部服务系统的识别信息。又,在表2(b)注册外部服务系统40的认证信息。
表2(b)是与各用户的外部服务系统相关的信息,包括用户ID、外部服务系统40、用户ID、及密码的各项目。在表2(b)中,注册有用户协同设定的外部服务系统40的认证信息。外部服务系统40的认证信息是用于用户登录外部服务系统40的认证信息。如U002的用户那样,也存在各外部服务系统40认证信息不同的场合。因此,按数据输出系统100的各用户,外部服务系统40的认证信息相关联。信息处理系统10根据从机器20获取的信息处理系统10的用户ID、密码等的认证信息,特定协同方的外部服务系统40的认证信息。
又,认证信息只要是外部服务系统40的认证信息、或用于与外部服务系统40协同必需的认证信息即可,用户ID、密码以外,也可以是与外部服务系统40协同设定时,从外部服务系统40获取的令牌。
表2(c)是共享应用用的认证信息。在共享应用的识别信息中,使得外部服务系统40与认证信息相对应。共享应用的认证信息管理者使用,因此,管理者的识别信息注册。
表3表示应用数据。
表3
表3表示应用数据存储部13存储的应用数据43的一例。应用数据43将应用与设定文件(区域信息)相关联。关联由管理者执行。
表3各栏意义如下:
·applicationId:协同方的应用ID。
·ApplicationName:应用的应用名。
·fileId:信息处理系统10作成的设定文件的识别信息。
·fileName:信息处理系统10作成的设定文件的文件名。设定文件保存于外部服务系统40,与其文件夹一起设定文件名。例如可以是URL。
·上传地址方文件夹:保存设定文件的外部服务系统40及其文件夹。例如可以是URL。管理者设定。
表4表示设定文件。
表4
表4表示存储于外部服务系统40的设定文件9的一例。设定文件9是包括成为OCR处理对象的区域信息的文件。设定文件成为表形式(例如CSV形式),以列号或行号指定各单元的位置。以下,关于A列~L列的项目进行说明。设定文件的第1行的项目名由信息处理系统10在作成设定文件时设定。
·ID:区域信息的识别信息。自动编号,管理者、用户无需意识。
·起点X坐标、起点Y坐标、终点X坐标、终点Y坐标:区域信息。表示标记的票据的矩形区域的对角顶点。也可以指定一点的坐标、宽度、与高度。坐标的单位可以是例如cm、像素等。
以上的信息成为信息处理系统10自动设定的信息。以下的信息由管理者输入。
数据的格式,因此,OCR处理部68能更高精度地进行OCR处理。格式成为下拉菜单。这样·格式:区域的数据形式。例如,有日期(YYYY/MM/DD)、数值(NUMERIC)等。已知,按照各区域设定数据的种类。
·CSV列名:赋予区域的名称。票据的场合,输入矩形框的标题等,管理者可以输入任意的值。CSV列名与数据一同输出至文件。
·CSV位置(列):信息处理系统10指定将从区域抽取的数据写入文件的哪一列。
·CSV位置(开始行):信息处理系统10指定将从区域抽取的数据写入文件的哪一行。行编号在每次读取票据时变大,因此,设定文件中一个数据也没有所述的场合的“开始行”。例如,从最初的票据获取的数据设定于第2行,从第2张票据获取的数据设定于第3行。对此,列位置可固定。
·OCR语言:设定区域以哪种语言描述。已知语言,因此,OCR处理部68能更高精度地进行OCR处理。OCR语言成为下拉菜单。这样,按照区域设定数据的种类。
·使用于文件名的顺序:使用于在本实施形态中从区域获取的数据输出的文件的文件名。使用于文件名的命名顺序是使用于信息处理系统10输出的文件的文件名中使用的顺序。例如,“文书名”是第一位,“申请日”是第二位场合,文件名根据从各区域获取的数据(经费明细账单、20201010),成为“经费明细账单_20201010.csv”。
<应用处理信息>
下面,利用图6,关于应用处理信息进行详细说明。图6是表示存储于应用处理信息存储部17的应用处理信息53的一例的图。
图6所示应用处理信息53是涉及用于实现将在机器20扫描生成的图像数据向“外部服务系统B”要求处理的服务的一系列的处理的信息。
在应用处理信息53中,包含表示该应用处理信息53的识别信息的流程ID1201A、表示该应用处理信息53的名称的流程名1202A、表示一系列的处理的处理内容的流程详细1203A。流程名1202A兼为应用的名称。
又,在流程详细1203A,包含处理内容1223A,表示向“外部服务系统B”要求处理。
在处理内容1223A中,指定执行与“外部服务系统B”协同处理的组件18的组件ID“ExService_B”、及参数“AppId”、“Folder”。“ExService_B”相当于用于外部服务系统B的外部服务处理部62。在“AppId”保存有协同方应用ID(预先决定与应用协同方应用的对应),在“Folder”保存有文件的保存场所的文件夹(上传地址方文件夹)(设定管理者设定的上传地址方文件夹)。由此,信息处理系统10能将扫描的图像数据保存于“外部服务系统B”。
又,不与协同方应用协同的应用的场合,省略“AppId”。图示的参数是一部分,应用处理信息应该包含更多参数。
在图6中,为便于说明,只指定一个组件,在应用处理信息53,应用进行的一系列的处理内容1223A只注册处理(组件)的数量。
图7是模式化表示应用进行的一系列的处理的图。图7(a)表示进行设定文件作成的应用(例如,OCR区域指定应用)的一系列处理。一个块对应处理内容1223A。各处理的详细内容在图10进行说明。
图7(b)表示从票据的区域输出数据的应用(例如,经费明细账单应用)的一系列处理。一个块对应处理内容1223A。各处理的详细内容在图22进行说明。
<区域的指定、区域的获取、设定文件的作成>
下面,参照图8~图11,关于由管理者进行的区域的指定、区域的获取、及设定文件的作成进行说明。
图8是说明票据中区域的标记方法的图。在图8(a)中,形成有用黑白以外的(有彩度)记号笔上色的颜色附着部601。颜色附着部601的颜色相当于预先决定的信息。即,预先决定用记号笔涂的颜色。
区域检测部65检测黑白以外的像素,检测黑白以外的像素(颜色附着部601)的外接矩形。使用黑白以外的记号笔是为了使得区域检测部65能易于检测区域,也可以使用黑色的记号笔。该场合,区域检测部65检测具有一定以上的高度和面积的黑像素的外接矩形。
又,在图8(b)中,形成用黑白以外的记号笔圈出区域的框线602。区域检测部65检测黑白以外的像素,检测黑白以外的像素(框线602)的外接矩形。
区域的标记方法并不限于图8所示的方法。例如,可以用双线指定区域,也可以用规定的符号(%、$、#、△等)围成的范围指定区域。
所述预先决定的信息除了用记号笔涂的颜色的信息以外,若表示OCR区域,则也可以用不是记号笔的黑色笔所画圆或方形等图形的信息等。该场合,用户用黑色笔画圆或方形,圈出OCR区域。又,OCR区域除了用记号笔的颜色圈出的区域以外,也可以是用记号笔涂满的区域等。
图9是区域信息注册时机器20显示的区域注册画面610的一例。管理者从机器20登录信息处理系统10,选择OCR区域指定应用。区域注册画面610包括“请设置用框线圈出希望OCR区域的原稿,按下“开始””的信息611、读取设定栏612、及开始按钮613。用户将原稿(票据)设置于稿台玻璃,按下开始按钮613。根据需要,也可以在读取设定栏612设定读取条件(彩色/黑白、单面/双面、方向、分辨率等)。再有,关于彩色/黑白,为使得用户不会错误设定为黑白,可固定为彩色。
管理者能从图9的区域注册画面610指定设定文件的文件名。便于从外部服务系统40找到设定文件。又,设定文件的保存地址的文件夹能由用户设定。
图10表示信息处理系统10从管理者标记区域的票据获取区域信息,作成设定文件的顺序的序列图的一例。
S1:管理者操作机器20,登录信息管理系统10,从显示于初始画面的应用一览选择OCR区域指定应用。由此,机器20的显示控制部22显示区域注册画面610。管理者将标记区域的票据设置于稿台玻璃,按下开始按钮613。图像数据生成部24生成票据的图像数据,转换为PDF文件。
S2:机器20的第二通信部21将PDF文件与OCR区域指定应用的执行要求一起,发送至信息处理系统10。
S3:信息处理系统10的通信部19接收PDF文件。应用执行部46指定OCR区域指定应用的应用ID,向输入/输出处理部48要求执行。输入/输出处理部48参照与OCR区域指定应用的应用ID相关联的应用处理信息53,执行应用。首先,输入/输出处理部48指定PDF文件,向PDF处理部64要求图像数据的抽取。PDF处理部64从PDF文件抽取票据的图像数据。
S4:接着,输入/输出处理部48与图像数据一起,向区域检测部65要求区域的获取。区域检测部65基于图像数据的颜色信息,从图像数据获取区域。
图11是说明从图像数据检测区域的图。如图11(a)所示,用记号笔指定的颜色附着部601的RGB值具有非黑白值。黑色的RGB为(0,0,0),白色的RGB为(255,255,255),因此,区域检测部65例如检测有(1,1,1)~(254,254,254)的RGB的颜色附着部601。决定记号笔的颜色的场合,开发者能根据颜色缩小RGB的范围,能更精准地检测颜色附着部601。例如,票据是彩色的场合,若使用票据中没有的颜色的记号笔,则区域检测部65能从彩色票据检测到颜色附着部601。
图11(b)表示检测到的颜色附着部601。区域检测部65设定检测到的颜色附着部601的外接矩形620。其后,在外接矩形620的上下左右设定空白,决定包含空白的区域621。在图11(b)中,左右设定a(mm),上下设定b(mm)。设定空白的原因在于,为了机器20在读取票据的场合引起位置偏差等。图11(b)的左上角622的坐标是区域信息的起点X坐标与起点Y坐标,右下角623的坐标是区域信息的终点X坐标与终点Y坐标(区域信息)。
又,如图11(c)所示,区域检测部65也可以检测基于RGB检测到的颜色附着部601的外侧的框线625。区域检测部65朝向颜色附着部601(外接矩形620)的垂直方向外侧,探索黑色像素,找到黑色像素的场合追踪黑色像素,返回原位置的场合,判断检测到外侧的框线625。通过如此,能检测到写入数据的最大的区域,机器20读取票据的场合,即使引起位置偏差,区域特定部67易于特定数据。
对于用记号笔特定的区域,区域检测部65设置多少空白等,管理者能预先设定。图16的详细在关联画面640-2中说明。区域检测部65基于关联画面640-2的设定,设定区域信息。
S5:其后,输入/输出处理部48指定用记号笔指定区域的图像数据,向外部服务处理部62要求对外部服务系统40的上传。
S6:外部服务处理部62从用户管理部44获取管理者的外部服务系统40中的认证信息。由此,外部系统处理部62登录外部服务系统40,将图像数据保存至管理者的顶级文件夹(或,管理者指定的文件夹)。在区域注册画面610,管理者指定设定文件的文件名的场合,外部服务处理部62将相同的文件名赋予图像数据的文件。未设定文件名的场合,当前的日期等成为文件名。
S7:其后,输入/输出处理部48指定区域检测部65检测到的区域信息,向文件输出部66要求设定文件的作成。文件输出部66对ID进行编号,将区域信息配置于CSV文件的固定的列,生成设定文件。此时,成为信息进入表4的A~E列的状态。
S8:其后,输入/输出处理部48指定设定文件,向外部服务处理部62要求对外部服务系统40的上传。
S9:外部服务处理部62已完成外部服务系统登录,因此,将设定文件保存至管理者的顶级文件夹(或,管理者指定的文件夹)。在区域注册画面610,管理者指定设定文件的文件名的场合,外部服务处理部62将该文件名赋予设定文件的文件。未设定文件名的场合,当前的日期等成为文件名。图像数据与设定文件的文件名相同,因此,管理者能容易地判断设定文件是由哪个图像数据生成。
<设定文件的其他信息的注册>
参照图12、图13,关于向设定文件的F~K列的设定进行说明。图12是表示管理者向设定文件的F~K列设定信息的顺序的序列图的一例。
S11:向外部服务系统40注册设定文件后,管理者操作终端装置30,将终端装置30连接于外部服务系统40。管理者输入自身的认证信息,登录外部服务系统40。
S12:外部服务系统40是存储服务,因此,管理者将登录的文件的一览发送至终端装置30。例如,发送顶级文件夹中的文件的一览。不在顶级文件夹的场合,管理者指定阶层。文件的一览中,还包含管理者从机器20注册的设定文件与图像数据的文件。
S13:管理者确定设定文件的内容,设定向F~K列的信息,因此,选择设定文件。终端装置30的操作接受部33接受选择,第一通信部31指定设定文件的文件ID,向外部服务系统40要求设定文件。
S14:外部服务系统40的通信部19接收设定文件的要求,将设定文件发送至终端装置30。
S15:管理者确认设定文件的内容,设定向F~K列的信息。终端装置30的操作接受部33接受设定。
S16:管理者例如进行上传设定文件的操作,则第一通信部31将向A~K列设定信息的设定文件发送至外部服务系统40。
如上所述,设定文件注册于外部服务系统40。
图13是说明设定文件与票据的对应的图。如表4中说明,管理者设定格式、CSV列名、CSV位置(列)、CSV位置(行)、OCR语言、及使用于文件名的顺序。也可以不设定全部的列。
在图13的例中,从ID=1的区域信息获取的数据设定为与CSV列名的“文书名”相对应。“文书名”是首先使用的文件名。从ID=2的区域信息获取的数据设定为与CSV列名的“申请日”对应。又,申请日的CSV位置设定为3列2行,因此从ID=2的区域信息获取的数据写为文件的第3列2行。再有,“申请日”是第二使用的文件名。从ID=3的区域信息获取的数据设定为与CSV列名的“金额”相对应。又,金额的CSV位置设定为4列2行,因此,从ID=3的区域信息获取的数据写为文件的第4列2行。
<应用与区域信息的关联>
其后,参照图14、图15,关于应用与区域信息的关联进行说明。图14是关于应用与区域信息的关联,终端装置30显示画面的一例。管理者操作终端装置30,使得终端装置30与信息处理系统10通信。
首先,图14(a)是管理者登录信息处理系统10显示的初始画面630。显示管理者认可的操作菜单。将应用关联于设定文件,因此,管理者选择使得应用一览显示的图标631。
如表2所示,在用户管理部33注册有按照用户可使用的应用与外部服务系统信息,因此,信息处理系统10能向终端装置30提供按外部服务系统40管理者可使用的应用的一览。
图14(b)表示应用一览画面632的一例。应用一览画面632显示管理者可使用的应用的一览。管理者从应用一览画面632,选择用于与注册于外部服务系统40的设定文件关联的应用633(例如,经费明细账单应用)。操作接受部33通过接受应用633的选择,显示图14(c)所示关联画面640。关联画面640包括外部服务系统选择栏641、上传地址文件夹栏642、及设定文件栏643。
·外部服务系统选择栏641:用于由管理者设定文件的保存地址的外部服务系统40的栏,该文件写出从区域获取的数据。因此,管理者能变更预先关联于应用的外部服务系统40,能新增设定。
·上传地址文件夹栏642:在外部服务系统40中,用于由管理者设定文件的保存地址的文件夹的栏,该文件写出从区域获取的数据。管理者按下文件夹选择按钮642a,则利用外部服务系统40中的管理者的认证信息,信息处理系统10登录外部服务系统40,在外部服务系统40的管理者能访问的顶级文件夹显示于终端装置30。管理者能选择任意的文件夹。
·设定文件栏643:用于管理者选择与应用关联的设定文件的栏。管理者按下文件选择按钮644,则利用外部服务系统40中的管理者的认证信息,信息处理系统10登录外部服务系统40,在外部服务系统40的管理者能访问的顶级文件夹显示于终端装置30。在顶级文件夹(或管理者设定的文件夹),包括信息处理系统10注册、管理者更新的设定文件。在顶级文件夹没有设定文件的场合,管理者能从顶级文件夹的下级文件夹寻找设定文件。
图15是通过图14的画面,说明管理者将设定文件与应用关联处理的序列图的一例。图15的处理从图14(a)的画面显示的状态开始。
S21:管理者登录信息处理系统10,从初始画面630将显示应用一览的操作输入终端装置30。终端装置30的操作接受部33接受操作,第一通信部31向信息处理系统10要求应用一览。
S22:信息处理系统10的通信部19接收应用一览的要求,终端画面提供部42从用户管理部44获取与管理者的用户ID相关联的应用。终端画面提供部42按照外部服务系统40,作成包含管理者可使用的应用的应用一览画面的画面信息。通信部19将应用一览画面的画面信息发送至终端装置30。
S23:管理者选择关联设定文件的应用。终端装置30的操作接受部33接受选择。其后,如上所述,终端装置30显示关联画面640。
S24:管理者在关联画面640按下文件选择按钮644。操作接受部33接受按下,第一通信部31将在关联画面640设定的外部服务系统40中保存的文件一览的要求,发送至信息处理系统10。
S25:信息处理系统10的通信部19接收文件一览的要求,应用执行部46向输入/输出处理部48指定外部服务系统40,要求文件一览。输入/输出处理部48向与外部服务系统40对应的外部服务处理部62要求文件一览。外部服务处理部62从用户管理部44,获取管理者的外部服务系统40(与应用是否关联,或者,在关联画面由用户设定)中的认证信息,将文件一览的要求发送至外部服务系统40。
S26:外部服务系统40基于管理者的认证信息,允许管理者的登录,获取与管理者关联的文件的一览。文件的一览发送至终端装置30。在图15中,前提为:保存设定文件的外部服务系统40与保存从区域获取的数据的文件的外部服务系统40相同,但两者也可不同。该场合,管理者选择设定文件后,在关联画面640变更外部服务系统40。
S27:终端装置30的显示控制部32显示文件的一览。管理者选择与应用关联的设定文件。终端装置30的操作接受部33接受选择。
S28:终端装置30的第一通信部31指定设定文件的识别信息、应用的识别信息、外部服务系统40、及上传地址文件夹,将设定文件与应用的关联要求发送至信息处理系统10。
S29:信息处理系统10的通信部19接收设定文件与应用的关联要求,应用数据管理部41将设定文件与应用关联于应用数据43,进行注册。即,applicationId、applicationName、fileId、fileName、及上传地址方文件夹相关联注册。外部服务系统40注册于应用处理信息53。
由此,应用与设定文件相关联。之后,一般用户仅从机器20按下图标即可以文件形式输出票据的区域的数据。
在图15中,说明了在关联画面640管理者关联应用与区域信息的方法,也可以在区域信息注册时,进行应用与区域信息的关联。
该场合,例如显示栏,用于在图9的区域注册画面610输入应用名。管理者输入希望与设定文件关联的应用的应用名。信息处理系统10作成设定文件后,能将输入应用名的应用与设定文件相关联。即,若管理者设定应用名,读取票据,则生成设定文件,使得应用与设定文件关联。
又,图14(c)所示的关联画面640中,管理者能设定区域的扩张宽度。图16表示关联画面640的变形例。在图16的说明中,主要说明与图14(c)的差异。
图16的关联画面640-2包括区域的扩张宽度的设定栏645。在区域的扩张宽度的设定栏645,比起特定的区域,管理者能用记号笔设定将区域信息(OCR区域)扩张到什么程度。由此,表4的区域信息比已附着记号笔颜色的区域宽,即使在管理者用记号笔指定的区域比应标记的宽度窄,或用户在超出票据的区域填写的场合,OCR处理部68也能对区域的文字进行OCR处理。
但是,不局限于该例,在关联画面640-2,只有用记号笔圈起来的内侧(例如若用记号笔圈出OCR区域的场合,则标记部分不包含于区域),或者,成为包含标记部分的区域,也可以由管理者设定。
又,关于管理者通过何种形式指定区域,颜色、笔的种类、及形状等,也可以在关联画面640-2接受。例如,管理者能设定,用黄色记号笔圈出四边形、红色笔圈出圆、或者用绿色记号笔涂满等。
<应用的复制>
票据的形状各种各样,因此,用户写入数据的区域的位置也根据票据各不相同。因此,在本实施形态中,管理者能配合各票据各自的形状,注册区域信息。作为根据各票据注册区域信息的方法之一,说明管理者复制应用的方法。
图17表示多个应用的选择画面650。作为一例,具有清单应用、缴纳单应用、及OCR指定区域应用的场合,对于清单应用,清单的区域信息,对于缴纳单应用,缴纳单的区域信息,在应用数据43各自关联。用户想从清单的区域获取数据的场合,通过启动清单应用,扫描清单,能输出期望区域的数据。用户想从缴纳单的区域获取数据的场合,通过启动缴纳单应用,扫描缴纳单,能输出期望区域的数据。
各应用进行的处理所述于应用处理信息53,清单应用与缴纳单应用进行的处理,尽管文件的保存地址、上传地址文件夹、及设定文件不同,但是执行的组件相同。因此,若管理者复制清单应用或缴纳单应用,则通过进行区域的指定、区域的获取、设定文件的作成、及设定文件与复制应用的关联,信息处理系统10能作成与任意票据对应的应用。
参照图18,关于应用的复制进行说明。图18是应用复制时,管理者操作画面的一例。图18(a)是通过管理者登录信息处理系统10,终端装置30显示的初始画面630。在初始画面630显示设定按钮651,用于管理者进行各种设定。
图18(b)是按下设定按钮651后显示的应用管理画面652。在应用管理画面652,显示多个应用分组化的组名653。画面转换是用于说明的一例,可进行图示画面的省略、或者新画面的添加。
在组名653的右侧,显示属于该组的应用的一览。显示于应用一览的应用是管理者承认使用权限的应用。有管理者专用的应用,也有其他用户使用的应用。管理者按下成为复制源的应用的设定按钮654。通过按下设定按钮654,显示菜单,在该菜单中有复制按钮655。
管理者按下复制按钮655,则显示图18(c)所示复制应用设定画面(弹出画面)660。复制应用设定画面660包括应用名设定栏661、图标列表栏662、及复制要求按钮663。在应用名设定栏661,管理者给通过复制作成的新应用输入任意的应用名。应用名可任意,排除重复的应用名,或者附加如“~(2)”等分号码。应用名以外,也可以称为图标名、设定名。
在图标列表栏662,显示图标的列表。管理者能选择所期望的图标。按下参照按钮664,可显示其他的图标。管理者按下复制要求按钮663,则复制源的应用的应用ID、应用名、及图标发送至信息处理系统10。信息处理系统10接收这些信息,应用管理部49使用复制源的应用的应用处理信息53与画面信息54,新注册应用。在应用处理信息53中,取号不重复的应用ID,设定在应用名管理者输入的应用名。画面信息与复制源的应用相同,其中图标是管理者选择的。应用处理信息、共享应用、及外部服务系统40的项目与复制源的应用相同。通过例如应用名等,用户可识别应用的场合,没有必要对全部应用设定其他的图标。
又,在本实施形态中伴随应用的复制,增加新的图像处理区域的设定,也可以不复制应用,通过增加设定,或增加图标的形式,管理者进行对新图像处理区域的增加与在机器接受选择的识别信息的关联设定。
图19是表示信息处理系统10注册应用复制的步骤的序列图的一例。
S31:管理者将信息处理系统10的认证信息输入终端装置30。终端装置30的操作接受部33接受认证信息的输入,通过第一通信部31将认证信息发送至信息处理系统10,管理者登录信息处理系统10。
S32:通过登录,信息处理系统10的终端画面提供部42通过通信部19,将初始画面的画面信息发送至终端装置30。其后,根据管理者的操作,终端画面提供部42将图18所示的画面的画面信息发送至终端装置30。
S33:管理者将应用名等输入终端装置30,因此操作接受部33接受输入。
S34:终端装置30的第一通信部31将复制源的应用的应用ID、应用名、及图标发送至信息处理系统10。
S35:信息处理系统10的通信部19接收这些信息,应用管理部49使用复制源的应用的应用处理信息53与画面信息54,重新注册应用。
这样,管理者能复制应用。管理者在通过复制生成的新应用关联设定文件,能从所期望的票据的规定区域获取数据。
管理者从一个复制源的应用能作成多个新应用,信息处理系统10对于多个新应用,能分别接受其他设定文件的选择。能赋予对于相同处理流程的某些识别信息即可,因此应用的复制是一例,也可以通过图标的增加、设定的增加的样态,赋予相同处理流程识别信息。
<从利用应用与设定文件的关联的票据获取数据>
完成应用与设定文件的关联后,用户使得票据在机器20读取,由此信息处理系统10能从票据获取数据。
参照图20、图21,关于从票据获取数据进行说明。图20是表示机器20显示的画面的转换例的图。
(1)如图20(a)所示,用户使得应用一览画面显示于机器20。例如,想精算经费的场合,用户选择经费明细账单应用的图标。用户把握哪个票据对应哪个应用,应用的图标690显示的应用名与票据(原稿)的名称一致即可。该应用名也可称为图标名或设定名。即,图标690包含票据的名称即可。再有,在图标690,包含票据的缩略图即可。易于抑制用户选择与票据不对应的图标。或者,也可以用户按下图标690,则显示票据缩略图。用户扩大显示或部分显示缩略图,能确认图标690。
又,在图标690也可以嵌入链接。链接包括,例如包含应用ID的URL,或者,在信息处理系统侧与应用ID关联的URL。按下图标690,机器20连接URL,由此将应用ID通知至信息处理系统。
用户选择图标690不对应的票据的场合,机器20警告用户即可。例如,机器20比较读取的票据的图像数据和与图标690关联的图像数据,两者不同的场合,通过显示是否继续处理的消息等,询问用户。图像数据的比较也可以由信息处理系统10进行。作为比较的方法有例如,图标690关联的图像数据中读取的票据的图像数据,机器20或信息处理系统10进行模型匹配的方法。又,在票据用二维条形码等印刷应用ID的场合,存在机器20或信息处理系统10比较该应用ID和与图标690关联的应用ID的方法。
又,用户选择的是图标,机器20发送至信息处理系统10的也可以是应用ID或设定编号等字符串。即选择的东西本身也可以不是应用ID(识别信息)。
(2)机器20扫描经费明细账单的场合,用户准备经费明细账单(图20(b))。经费明细账单可以是用户手写准备的,也可以是机器20打印输出的。不是用户本身打印输出的也可以(官方发行的文件、或其他公司送来的文件等)。
(3)用户选择的应用,基于画面信息54显示图20(c)的画面。图20(c)的画面与图9相同。用户将准备的经费明细账单设置于稿台玻璃,通过按下开始按钮612,由机器20读取。
票据的图像数据发送至信息处理系统10,通过如下所述的处理输出文件。
图21是说明保存于外部服务系统40的文件的图。图21(a)表示外部服务系统40的上传地址文件夹的一例。即,在管理者在图14设定的上传地址文件夹,保存信息处理系统10输出的文件。图21(a)的“My Drive>经费明细账单位置”的文件层级为一例,管理者能指定有访问权的文件夹。
图21(b)表示保存于上传地址文件夹的2个文件。通过1次的读取操作生成文件。
A.保存从票据的区域获取的数据的CSV文件681。
B.包含票据的图像数据的PDF文件682。
相同应用作成的CSV文件,每次的读取操作都是单独。文件名包含申请日,因此,文件不会被盖写。另一方面,存在相同应用中获取的数据,即使读取操作的时机不同,也想添加至同一CSV文件的场合。关于该方法在后面叙述。由此,庶务等负责人仅通过访问1个CSV文件就能对各职员的数据进行精算等。
<<机器20未扫描票据的场合>>
在图20的说明中,机器20已扫描经费明细账单,信息处理系统10能从终端装置30等接收票据的图像数据,从图像数据的区域获取数据。该场合,如下所述,终端装置30将票据的图像数据发送至信息处理系统10。
用户使得在终端装置30运行的文字处理机显示经费明细账单,输入必要事项。因此,必要事项成为字符代码。用户将终端装置30连接于信息处理系统10,进行登录,显示应用一览。终端装置30的画面与图20(a)的画面相同,因此,用户选择所期望的应用。信息处理系统10的终端画面提供部42将可接受经费明细账单的画面信息发送至终端装置30。用户在该画面选择包含经费明细账单的图像数据的PDF文件等,则终端装置30能将PDF文件发送至信息处理系统10。
因此,用户即使不打印输出票据,信息处理系统10也能从票据获取数据。该场合,下述的图22的处理中机器20的处理由终端装置30进行。
<动作顺序>
图22是信息处理系统10接收来自机器22的包含票据图像数据的PDF文件,从区域取得数据的序列图的一例。
S41:已打印输出票据的用户操作机器20,输入信息处理系统10中的自己的认证信息。机器20的操作接受部23接受认证信息的输入,第二通信部21将认证信息发送至信息处理系统10。由此,用户登录信息处理系统10。通过登录机器20的显示控制部22,显示被用户承认使用权限的应用的一览(图20(a))。用户选择例如与打印输出的票据的名称一致的应用名的应用。操作接受部23接受选择。
S42:机器20得到第二通信部21指定应用ID,将应用画面获取要求发送至信息处理系统10。
S43:信息处理系统10的通信部19接收应用画面获取要求,机器画面提供部47从应用管理部49获取以应用ID特定的应用的画面信息54。应用的应用画面的画面信息发送至机器20。由此,机器20的显示控制部22显示应用画面(图20(c))。
S44:用户将打印输出的票据设置于稿台玻璃,按下开始按钮613。机器20的操作接受部23接受按下,图像数据生成部24生成票据的图像数据,该图像数据转换为PDF文件。
S45:机器20的第二通信部21指定应用的应用ID与PDF文件,向信息处理系统10要求应用的执行。
S46:信息处理系统10的通信部19接收应用的执行要求,应用执行部46开始应用的执行。应用执行部46指定应用ID,向输入/输出服务部16要求应用的执行。输入/输出服务部16通过应用管理部49获取应用处理信息53。由此,能得到应用的处理流程。又,输入/输出处理部48从应用数据存储部13获取与应用ID关联的应用数据43。由此,能特定与应用关联的设定文件。
输入/输出处理部48基于应用数据43和应用处理信息53,向外部服务处理部62要求设定文件的获取。
S47:外部服务处理部62连接注册于应用数据43的fileName的项目的URL,从外部服务系统40获取设定文件。再有,外部服务处理部62,要求执行的应用不是共享应用的场合,通过用户的外部服务系统40中的认证信息登录外部服务系统40,要求执行的应用是共享应用的场合,通过管理者的外部服务系统40中的认证信息登录外部服务系统40。
S48:其后,输入/输出处理部48基于应用处理信息53,向文件输出部66要求从设定文件获取区域信息。
S49:文件输出部66从设定文件的预先决定的行和列获取全部区域信息,返回输入/输出处理部48。
S50:其后,输入/输出处理部48基于应用处理信息53,指定图像数据和区域信息,向区域特定部67要求从图像数据的区域的获取(切取)。
S51:区域特定部67从图像数据特定并获取以区域信息指定的区域,区域的图像返回输入/输出处理部48。区域特定部67也可以不从图像数据获取(切取)数据。该场合,OCR处理部68在以区域信息特定的图像数据的区域进行OCR处理即可。
步骤S52~S55仅重复执行区域的数量。
S52:输入/输出处理部48基于应用处理信息53,指定区域的图像,向OCR处理部68要求区域的OCR处理。此时,输入/输出处理部48将从设定文件获取的格式和OCR语言与区域关联指定即可。
S53:OCR处理部68用与格式和OCR语言对应的识别引擎在区域进行OCR处理。OCR处理部68将转换为字符串的数据(OCR处理结果)返回输入/输出处理部48。
识别引擎是使用例如文字的图像和字符串成组的学习数据学习两者的对应,从图像输出OCR处理结果(字符串)的识别机。学习数据,如只有日语、只有英语、只有数值、只有日期这样越单纯,识别机的识别精度越高。另一方面,学习数据中日语、英语、数值及日期的多个混合,则能识别各种数据,但识别精度有下降趋势。因此,通过使用与格式和OCR语言对应的识别引擎能提高识别精度。
在此,所谓“机械学习”是指用于使计算机获得如人一般的学习能力的技术,计算机从事先捕获的学习数据自动生成数据识别等的判断必需的算法,关于新数据用此进行预测的技术。用于机械学习的学习方法,可以是有教师学习、无教师学习、半教师学习、强化学习、深层学习的任意方法,也可以是将这些学习方法组合的学习方法,不问用于机械学习的学习方法。又,识别引擎也可以不由机械学习的学习效果生成。
S54:其后,输入/输出处理部48基于应用处理信息53,指定从区域获取的数据、CSV列名、CSV位置、及文件名(从设定文件获取),向文件输出部66要求有数据的文件的输出。
S55:文件输出部66将CSV列名写入列的开头,将数据写入在CSV位置指定的CSV文件的单元格,将OCR处理结果(CSV文件)返回输入/输出处理部48。给CSV文件赋予指定的文件名。输出地址的文件的形式不局限于CSV文件,可以是表格形式的文件,也可以是文本文件,还可以是其他的应用程序的文件。
S56:其后,输入/输出处理部48基于应用处理信息53,指定OCR处理结果(CSV文件)、格式及OCR语言,向OCR修正部69要求OCR处理结果的修正。该格式从表4所示的设定文件获取,由管理者设定。
图23是说明OCR处理结果的修正的图。设定文件中设定有格式的场合,OCR修正部69能修正OCR处理结果。在OCR修正部69指定文字列与转换文字的规则如图23所示定义。图23的转换规则2201是格式为NUMERIC的场合的规则。例如,数值中不包含I、B、Z,因此各自修正为1、8、2。图23的转换规则2202是语言为English场合的规则。例如,English中不包含1、2、8,因此各自修正为I、B、Z。
S57:OCR修正部69将修正的OCR处理结果(CSV文件)返回输入/输出处理部48。
步骤S58~S61仅执行CSV文件的数量。通过1次的读取操作作成的CSV文件的数量,与票据的数量没关系,一次场合,有时与票据的页数相同。采用哪一个设定于应用。
S58:其后,输入/输出处理部48基于应用处理信息53,向外部服务处理部62要求OCR处理结果(CSV文件)的上传。上传地址文件夹设定于应用数据43。
S59:外部服务处理部62将CSV文件保存于外部服务系统40的上传地址文件夹。
S60:可设定元数据的场合,执行步骤S60。外部服务系统40与元数据(外部服务系统上用户设定的项目、文字列、日期等)的设定对应的场合,用户能设定与上传的CSV文件连接的元数据。用户能从机器20显示的画面输入元数据。输入/输出处理部48向外部服务处理部62要求元数据的上传。上传地址文件夹与CSV文件相同。
S61:外部服务处理部62将元数据保存于外部服务系统40的上传地址文件夹。
S62:读入多个票据数据的场合,存在作为用户想要保存于个别文件的场合。该场合,输入/输出处理部48基于应用处理信息53,与多个页面的图像数据一起,向PDF处理部64要求页面分割。该处理也可省略,该场合,输入/输出处理部48将多个数据作为1个文件保存即可。
S63:PDF处理部64将分解为一页一页的PDF文件返回输入/输出处理部48。
S64:输入/输出处理部48基于应用处理信息53,指定PDF文件,向OCR处理部68要求OCR处理。
S65:OCR处理部68对PDF文件进行OCR处理,在OCR处理生成的字符串在PDF文件设定为透明文本。
步骤S66~S69仅执行PDF文件的数量。
S66:输入/输出处理部48基于应用处理信息53,向外部服务处理部62要求附加文本的PDF文件的上传。上传地址文件夹设定于应用数据43.
S67:外部服务处理部62将附加文本的PDF文件保存于外部服务系统40的上传地址文件夹。
S68:外部服务系统40与所述元数据(外部服务系统上用户设定的项目、文字列、日期等)对应的场合,用户能从机器20显示的画面输入元数据。输入/输出处理部48向外部服务处理部62要求元数据的上传。上传地址文件夹与PDF文件相同。
S69:外部服务处理部62将元数据保存于外部服务系统40的上传地址文件夹。
由此,在外部服务系统40的上传地址文件夹,注册CSV文件和与CSV文件不同的PDF文件。
<注册于外部服务系统的CSV文件与PDF文件的显示>
企业的负责人在计算职员的经费等的场合,操作终端装置30,连接外部服务系统40。上传地址文件夹已通知负责人,因此能在终端装置30获取CSV文件和PDF文件。
图24是表示终端装置30所显示的外部服务系统40的文件一览画面67的一例的图。如图24(a)所示,上传地址文件夹中保存PDF文件671和CSV文件672。图24(b)表示终端装置30显示的CSV文件672的内容。即,图24(b)是从票据输出的数据。在图24(b)中,保存有从1个区域获取的数据。在各列设定有设定于设定文件的CSV列名,用户能判断各列是什么数据。
又,如图25所示,最好机器20也显示处理结果。图25是机器20显示的输出数据显示画面691的一例。输出数据显示画面691显示执行的应用名692、及应用输出的文件的列表693。这些从信息处理系统10发送至机器20。CSV文件中包含CSV文件的内容,通过用户按下CSV文件,机器20能显示从票据区域获取、CSV文件中保存的数据694。
确认文件名或数据后的用户能判断是否已正确处理票据。
再有,在图22中使得成为处理对象的图像数据作为PDF文件,但JPEG、PNG、TIFF、BMP等,什么形式的图像数据都可以。
<读取多个票据的场合>
参照图26,说明在一次的读取操作中读取多个票据的场合。图26是表示多个票据与输出的文件的图。如图26(a)所示,执行应用时,在一次的读取中读取多个票据。一次的读取操作是指开始按钮613仅被按下一次的场合。机器20按顺序读取多个票据,信息处理系统10从各票据的图像数据的相同区域获取多个数据。
图26(b)是表示通过一次的读取操作读取多个票据的场合的CSV文件的图。第1行是从第1张票据获取的数据,第2行是从第2张票据获取的数据。这样,多个票据的多个数据汇集于1个CSV文件,负责人易于统计或图表化。
再有,通过一次的读取操作读取多个票据的场合,信息处理系统10能仅输出票据数量的CSV文件。
又,通过多次的读取操作读取多个票据的场合(在不同时机读取的场合),信息处理系统10能向一个相同的CSV文件输出数据。存在外部服务系统40合并的场合和信息处理系统10合并的场合。
·外部服务系统40合并的场合,外部服务处理部62向外部服务系统40要求CSV文件的合并。如果应用相同则CSV文件的文件名中包含相同的文字列(例如经费明细账单),因此外部服务处理部62能指定文件名,要求CSV文件的合并。外部服务系统40在已保存的CSV文件的同列编号,增加要求合并的CSV文件的同列编号的数据。
·信息处理系统合并的场合,外部服务处理部62指定文件名,从外部服务系统40下载CSV文件。外部服务处理部62在获取的CSV文件得到同列编号,增加新作成的CSV文件的同列编号的数据。外部服务处理部62将合并的CSV文件上传至外部服务系统40。
这样,信息处理系统从接收的多个图像数据获取同一区域,OCR处理部68在多个图像数据的同一区域进行OCR处理,文件输出部66能将在多个图像数据从同一区域生成的多个数据输出至1个文件。
<主要的效果>
如上说明,本实施形态的数据输出系统,机器20读取区域被标记的票据,按照票据存储区域信息。其后,从机器发送的票据的图像数据仅获取区域进行OCR处理,向文件输出作为OCR处理结果的数据。由此,在相同种类的多个票据,能容易地作成仅抽取特定区域的文件。
<其他的适用例>
如上所述,关于用于实施本发明的最优的方式,使用实施例进行了说明,但本发明并不局限于此实施例,能在不脱离本发明要旨的范围内增加各种变形及置换。
例如,在本实施形态中,从票据的区域获取的数据输出至文件,但也可以不文件化以邮件形式发送,还可以显示于机器20。
又,在本实施形态中,对于指定的区域进行OCR处理,但也可以进行其他的图像处理(遮蔽处理或图像的提取处理等)。
该场合,数据输出系统起着作为图像处理系统的功能。
下面,参照图27~图28,说明作为本发明第二实施形态的数据输出系统、数据输出系统执行的图像处理方法。
图27的数据输出系统与图1所示数据输出系统大体相同,在此,主要说明其差异。
图27的图像处理系统能根据已标记区域的票据,基于预先登录的区域信息,在日常产生的票据的区域进行图像处理,获取包含已处理区域的数据,作为电子化文件输出。
更详细地说,如图27所示,图像处理系统的机器20在(7)中读取已标记区域的票据,按各票据存储区域信息。
管理者使得票据和应用的图标对应关联,因此,接受应用选择的图标和进行图像处理的区域信息对应关联。
图28是用于说明从表1和表3所得到的图标和区域信息的对应关联的图。
如上所述,在表1中,应用ID和画面信息对应关联,在表3中,应用ID和包含区域信息的fileName对应关联。
因此,在信息处理系统10中,画面信息和区域信息对应关联。
并且,在该画面信息中,包含应用的图标。
如图28所示,应用ID与应用的图标对应关联,进而,与区域信息对应关联。
由此,图标和区域信息对应关联,因此,信息处理系统10能在与用户选择的图标对应关联的区域信息的区域进行图像处理(OCR处理)。
又,图5等的构成例为使得终端装置30、机器20、及信息处理系统10进行的处理便于理解,根据主要的功能进行分割。根据处理单位的分割方式或名称,本发明不受限制。终端装置30、机器20、及信息处理系统10的处理根据处理内容能分割成更多处理单位。又,1个处理单位也能分割为包含更多的处理。
又,实施例中所述的装置组,仅表示用于实施本说明书中公开的实施方式的多个计算环境中的一个。在某些实施方式中,信息处理系统10包含多个被称为服务器集群的计算装置。多个计算装置构成为,通过包括网络或共享存储器等任意类型的通信链接互相通信,实施本说明书中公开的处理。
信息处理系统10能构成为在本实施形态中公开的处理步骤,例如图22等以各种组合共享。例如,通过规定的单元执行的程序,通过信息处理系统10具备的多个信息处理装置执行。又,信息处理系统10可以汇集于1个服务器装置,也可以分为多个装置。
如上说明的实施方式的各功能,可通过一个或多个处理电路实现。在此,本说明书中的“处理电路”是指,如通过电子电路安装的处理器,通过软件执行各功能被编程的处理器,或者包括如上说明的执行各功能设计的ASIC(Application Specific IntegratedCircuit)、DSP(Digital Signal Processor)、FPGA(Field Programmable Gate Array)或传统电路模块等设备。
Claims (34)
1.一种数据输出系统,机器与信息处理系统能通信,其特征在于,所述数据输出系统包括:
通信部,从所述机器接收图像数据;
区域特定部,基于从所述图像数据检测出预先设定的信息的区域,特定OCR区域;以及
输出部,基于特定的所述OCR区域及所述图像数据,输出对所述OCR区域已进行OCR处理的数据。
2.根据权利要求1中所述的数据输出系统,其特征在于:
所述输出部输出包含所述数据的文件;
进一步包括将所述文件保存于外部服务系统的外部服务处理部。
3.根据权利要求1或2中所述的数据输出系统,其特征在于:
所述输出部将仅从所述OCR区域得到的所述数据作为与所述图像数据不同的文件输出。
4.根据权利要求2中所述的数据输出系统,其特征在于:
进一步包括仅在所述区域特定部特定的所述OCR区域进行OCR处理的OCR处理部;
所述区域特定部从所述通信部接收的多个图像数据特定同一的所述OCR区域;
所述OCR处理部以所述多个图像数据在同一的所述OCR区域进行OCR处理;
所述输出部以所述多个图像数据将从同一的所述OCR区域生成的多个数据输出至一个文件。
5.根据权利要求4中所述的数据输出系统,其特征在于:
所述通信部在不同时间从所述机器接收图像数据的场合,
所述区域特定部从所述通信部在不同时间接收的所述多个图像数据特定同一的所述OCR区域;
所述OCR处理部以所述多个图像数据在同一的所述OCR区域进行OCR处理;
所述输出部以所述多个图像数据将从同一的所述OCR区域生成的所述多个数据输出至同一所述文件。
6.根据权利要求2~5的任意一项中所述的数据输出系统,其特征在于:
所述输出部将使用从所述图像数据的所述OCR区域生成的所述数据的文件名赋予所述文件。
7.根据权利要求4中所述的数据输出系统,其特征在于:
进一步包括区域检测部,检测从所述图像数据检测到所述预先设定的信息的区域;
所述输出部将所述区域检测部检测到的检测出所述预先设定的信息的区域相关的信息输出至设定文件;
所述外部服务处理部将所述设定文件保存至外部服务系统;
所述区域特定部根据包含于所述设定文件的、关于检测到所述预先设定的信息的区域的信息,从所述图像数据特定所述OCR区域。
8.根据权利要求7中所述的数据输出系统,其特征在于:
在所述设定文件,按照各个所述OCR区域设定所述数据的种类;
所述OCR处理部在所述OCR区域执行与所述数据种类相对应的OCR处理。
9.根据权利要求7或8中所述的数据输出系统,其特征在于:
在所述设定文件,按照各个所述OCR区域设定有所述数据的种类;
进一步包括OCR修正部,根据所述数据的种类,修正由所述OCR处理部得到的所述数据。
10.根据权利要求7或8中所述的数据输出系统,其特征在于:
所述数据输出系统与终端装置通信;
所述终端装置包括:
操作接受部,接受所述机器要求执行的应用和所述设定文件的选择;以及,
第二通信部,将所述操作接受部接受的所述应用的识别信息和所述设定文件的识别信息发送至所述信息处理系统,
所述信息处理系统使得所述设定文件与所述应用关联,与所述图像数据一起要求执行所述应用场合,所述区域特定部根据与该应用关联的所述设定文件包含的、关于检测到所述预先设定的信息的区域的信息,从所述图像数据特定所述OCR区域。
11.根据权利要求10中所述的数据输出系统,其特征在于:
所述操作接受部接受所述输出部输出的所述数据中使用于所述文件的文件名的所述数据的指定;
所述第二通信部将使用于文件名的所述数据的指定发送至外部服务系统;
所述外部服务系统将使用于所述文件名的所述数据的指定设定于所述设定文件。
12.根据权利要求10中所述的数据输出系统,其特征在于:
所述操作接受部接受复制源的应用的选择、及通过复制作成的应用的应用名;
所述第二通信部将复制源的应用的识别信息、及所述应用名发送至所述信息处理系统;
所述信息处理系统复制所述复制源的应用,作成赋予所述应用名的新的应用;
所述操作接受部接受所述新的应用和所述设定文件的选择。
13.根据权利要求10中所述的数据输出系统,其特征在于:
所述操作接受部接受检测到所述预先设定的信息的区域的检测相关的设定;
所述区域检测部基于该设定,检测所述检测到预先设定的信息的区域;
所述输出部将所述区域检测部检测到的关于检测出所述预先设定的信息的区域的信息输出至设定文件;
所述区域特定部基于从所述图像数据检测出预先设定的信息的区域,特定所述OCR区域。
14.根据权利要求1至13的任意一项中所述的数据输出系统,其特征在于:
所述机器是具有扫描功能的图像处理装置。
15.根据权利要求1至13的任意一项中所述的数据输出系统,其特征在于:
所述机器是个人计算机或者智能手机。
16.一种信息处理系统,能与机器通信,其特征在于,所述信息处理系统包括:
通信部,接收来自所述机器的图像数据;
区域特定部,基于从所述图像数据检测到预先设定的信息的区域,特定OCR区域;以及
输出部,基于特定的所述OCR区域和所述图像数据,输出对所述OCR区域已执行OCR处理的数据。
17.一种机器与信息处理系统能通信的数据输出系统进行的数据输出方法,其特征在于,包括:
接收步骤,通信部从所述机器接收图像数据;
特定步骤,区域特定部基于从所述图像数据检测到预先设定的信息的区域,特定OCR区域;以及
输出步骤,输出部基于所特定的所述OCR区域和所述图像数据,输出对所述OCR区域已进行OCR处理的数据。
18.一种存储有程序的计算机可读记录介质,其特征在于:
所述程序由处理器执行时,使得能与机器通信的信息处理系统起着以下功能:
通信部,从所述机器接收图像数据;
区域特定部,基于从所述图像数据检测到预先设定的信息的区域,特定OCR区域;以及
输出部,基于所特定的所述OCR区域和所述图像数据,输出对所述OCR区域已进行OCR处理的数据。
19.一种图像处理系统,机器与信息处理系统能通过网络通信,其特征在于:
包括设定接受部,其使得图像处理的区域和识别信息对应关联;
所述机器包括通信部,根据来自机器接受的用户的选择,将所述识别信息和图像数据向所述信息处理系统发送;
所述信息处理系统包括处理结果输出部,输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
20.根据权利要求19中所述的图像处理系统,其特征在于:
所述机器包括操作接受部,从用户接受用于特定多个所述识别信息之中一个识别信息的选择;
所述通信部将根据所述操作接受部接受的选择而特定的所述识别信息和所述图像数据向所述信息处理系统发送。
21.根据权利要求19或20中所述的图像处理系统,其特征在于,所述图像处理区域是进行OCR处理的区域。
22.根据权利要求20中所述的图像处理系统,其特征在于,所述识别信息是所述机器显示的图标的识别信息。
23.根据权利要求22中所述的图像处理系统,其特征在于,所述图标是所述信息处理系统执行的应用的图标,所述图像处理区域与所述应用对应关联。
24.根据权利要求23中所述的图像处理系统,其特征在于:
所述信息处理系统使得所述图标和具有所述图像处理区域的设定文件对应关联;
所述设定文件保存在外部服务系统;
所述处理结果输出部在从所述外部服务系统获得的所述设定文件具有的所述图像处理区域进行图像处理。
25.根据权利要求24中所述的图像处理系统,其特征在于:
所述操作接受部接受复制源的所述应用的选择、及通过复制作成的所述应用的应用名;
所述通信部将复制源的所述应用的识别信息、及所述应用名发送至所述信息处理系统;
所述信息处理系统复制所述复制源的所述应用,作成赋予所述应用名的新的应用;
所述操作接受部接受所述新的应用和与所述新的应用对应关联的所述设定文件的选择。
26.根据权利要求25中所述的图像处理系统,其特征在于:
从一个所述复制源的所述应用,作成多个所述新的应用;
所述操作接受部对于多个所述新的应用,接受各自不同的所述设定文件的选择。
27.根据权利要求25或26中所述的图像处理系统,其特征在于:
所述应用的识别信息与与所述图标对应关联;
所述操作接受部接受所述图标的选择场合,所述通信部将与所述图标对应关联的所述应用的执行要求及所述图像数据发送至所述信息处理系统;
要求执行所述应用场合,所述处理结果输出部对于所述图像数据,在与选择的所述图标对应关联的所述图像处理区域进行图像处理。
28.根据权利要求27中所述的图像处理系统,其特征在于:
所述图像数据是所述机器读取原稿而生成;
在所述图标表示所述原稿的名称。
29.根据权利要求28中所述的图像处理系统,其特征在于:
在所述图标表示所述原稿的缩图。
30.根据权利要求19至29的任意一项中所述的图像处理系统,其特征在于,所述机器是具有扫描功能的图像处理装置。
31.根据权利要求19至29的任意一项中所述的图像处理系统,其特征在于,所述机器是个人计算机或智能手机。
32.一种信息处理系统,能通过网络与机器通信,其特征在于,所述信息处理系统包括:
设定接受部,其使得图像处理的区域和识别信息对应关联;
通信部,根据来自所述机器接受的用户的选择,从所述机器接受所述识别信息和图像数据;
处理结果输出部,输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
33.一种机器与信息处理系统能通过网络通信的图像处理系统进行的图像处理方法,其特征在于,包括:
设定接受部使得图像处理的区域和识别信息对应关联的步骤;
所述机器的通信部根据来自机器接受的用户的选择将所述识别信息和图像数据向所述信息处理系统发送的步骤;
所述信息处理系统输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
34.一种存储有程序的计算机可读记录介质,其特征在于:
所述程序由处理器执行时,使得能通过网络与机器通信的信息处理系统起着以下功能:
设定接受部,其使得图像处理的区域和识别信息对应关联;
通信部,根据来自所述机器接受的用户的选择,从所述机器接受所述识别信息和图像数据;
处理结果输出部,输出所述图像数据之中对与所述识别信息对应关联的所述图像处理区域的图像处理结果。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020113443 | 2020-06-30 | ||
JP2020113444A JP7476691B2 (ja) | 2020-06-30 | 2020-06-30 | 画像処理システム、情報処理システム、画像処理方法、プログラム |
JP2020-113443 | 2020-06-30 | ||
JP2020-113444 | 2020-06-30 | ||
JP2020217752A JP7124859B2 (ja) | 2020-06-30 | 2020-12-25 | データ出力システム、情報処理システム、データ出力方法、プログラム |
JP2020-217752 | 2020-12-25 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113870387A true CN113870387A (zh) | 2021-12-31 |
Family
ID=76532114
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110735576.2A Pending CN113870387A (zh) | 2020-06-30 | 2021-06-30 | 数据输出系统及其方法,图像处理系统及其方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11887391B2 (zh) |
EP (1) | EP3933678A1 (zh) |
CN (1) | CN113870387A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7408313B2 (ja) * | 2019-08-13 | 2024-01-05 | キヤノン株式会社 | 画像処理装置、その制御方法及びプログラム |
Family Cites Families (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11167532A (ja) | 1997-12-02 | 1999-06-22 | Canon Inc | データ加工システムおよび装置、データ加工方法、記録媒体 |
JP2004118576A (ja) | 2002-09-26 | 2004-04-15 | Ricoh Co Ltd | 発注・問い合わせシステム、広告用サーバ、画像形成装置及び情報処理装置 |
JP2005018742A (ja) | 2003-06-06 | 2005-01-20 | Ricoh Co Ltd | 画像形成装置利用システム及びオフィス用品情報サーバ |
JP2006202081A (ja) | 2005-01-21 | 2006-08-03 | Seiko Epson Corp | メタデータ生成装置 |
JP4455357B2 (ja) | 2005-01-28 | 2010-04-21 | キヤノン株式会社 | 情報処理装置及び情報処理方法 |
US8004710B2 (en) | 2005-03-03 | 2011-08-23 | Ricoh Company, Ltd. | Printing system, printing method and printing program |
JP2006259906A (ja) | 2005-03-15 | 2006-09-28 | Ricoh Co Ltd | 通信制御装置、通信制御システム、省電力制御方法、省電力制御プログラム、および該プログラムを記録した記録媒体 |
US8224702B2 (en) * | 2007-12-28 | 2012-07-17 | Ebay, Inc. | Systems and methods for facilitating financial transactions over a network |
US8305613B2 (en) | 2008-01-09 | 2012-11-06 | Ricoh Company, Limited | Server device, image forming apparatus, and image processing system for image processing in a thin client system |
JP5470937B2 (ja) | 2009-03-13 | 2014-04-16 | 株式会社リコー | 画像形成装置、画像形成方法、画像形成プログラム、及び該プログラムを記録した記録媒体 |
US20100302604A1 (en) * | 2009-05-27 | 2010-12-02 | Kodimer Marianne L | System and method for setting data extraction fields for scanner input |
JP5299248B2 (ja) | 2009-12-04 | 2013-09-25 | 株式会社リコー | 画像形成装置及びその課金管理方法 |
JP2012049668A (ja) | 2010-08-25 | 2012-03-08 | Murata Mach Ltd | 原稿読取装置、情報処理装置及び情報処理装置用のプログラム |
US9129197B1 (en) * | 2012-08-29 | 2015-09-08 | Intuit Inc. | Highlight-based bill processing |
US9317764B2 (en) * | 2012-12-13 | 2016-04-19 | Qualcomm Incorporated | Text image quality based feedback for improving OCR |
JP6364738B2 (ja) | 2013-01-11 | 2018-08-01 | 株式会社リコー | 情報処理システム、情報処理装置、プログラム及び処理実行方法 |
US8958644B2 (en) * | 2013-02-28 | 2015-02-17 | Ricoh Co., Ltd. | Creating tables with handwriting images, symbolic representations and media images from forms |
JP2016167156A (ja) * | 2015-03-09 | 2016-09-15 | キヤノン株式会社 | システム、プログラム及び制御方法 |
US10075845B2 (en) | 2015-10-29 | 2018-09-11 | Ricoh Company, Ltd. | Authentication system, terminal apparatus, and authentication method |
JP6575310B2 (ja) | 2015-11-10 | 2019-09-18 | 株式会社リコー | 免税販売書類作成システム、免税販売書類作成装置、免税販売書類作成プログラムおよび免税販売書類作成方法 |
US20170308507A1 (en) * | 2016-04-20 | 2017-10-26 | Kyocera Document Solutions Inc. | Image processing apparatus |
JP6694587B2 (ja) | 2016-05-25 | 2020-05-20 | 富士ゼロックス株式会社 | 画像読込み装置及びプログラム |
JP6885138B2 (ja) | 2016-07-07 | 2021-06-09 | 株式会社リコー | 情報処理システム、情報処理装置、及び情報処理方法 |
US10136017B2 (en) | 2016-07-07 | 2018-11-20 | Ricoh Company, Ltd. | Information processing system, information processing apparatus, and method for processing information |
US10291824B2 (en) | 2017-03-17 | 2019-05-14 | Ricoh Company, Ltd. | Image processing device and method for conducting image formation of a masked read image |
JP6817517B2 (ja) | 2017-04-28 | 2021-01-20 | キヤノンマーケティングジャパン株式会社 | 情報処理システム、情報処理装置、制御方法、プログラム |
JP6855939B2 (ja) | 2017-05-31 | 2021-04-07 | 株式会社リコー | 情報処理システム、情報処理装置及び情報処理方法 |
US10318593B2 (en) * | 2017-06-21 | 2019-06-11 | Accenture Global Solutions Limited | Extracting searchable information from a digitized document |
US10192127B1 (en) * | 2017-07-24 | 2019-01-29 | Bank Of America Corporation | System for dynamic optical character recognition tuning |
JP6665916B2 (ja) | 2018-11-15 | 2020-03-13 | 大日本印刷株式会社 | 書類確認用装置、情報処理システム、書類の確認方法、書類確認用プログラム、文字入力用装置、文字の入力方法及び文字入力用プログラム |
JP7200619B2 (ja) | 2018-11-21 | 2023-01-10 | 株式会社リコー | 情報処理システム、情報処理方法、情報処理装置、及びプログラム |
JP7293652B2 (ja) | 2018-12-27 | 2023-06-20 | 株式会社リコー | 情報処理システム、サーバ装置、情報処理方法、及びプログラム |
-
2021
- 2021-06-18 EP EP21180461.2A patent/EP3933678A1/en active Pending
- 2021-06-24 US US17/357,148 patent/US11887391B2/en active Active
- 2021-06-30 CN CN202110735576.2A patent/CN113870387A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
US20210409555A1 (en) | 2021-12-30 |
EP3933678A1 (en) | 2022-01-05 |
US11887391B2 (en) | 2024-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8010583B2 (en) | Computer readable medium, document processing apparatus, and document processing system with selective storage | |
JP2006330863A (ja) | 電子化文書保管システム | |
US20120140275A1 (en) | Scan management system, scan management apparatus, controlling method of scan management system, and recording medium | |
EP1914674A2 (en) | Image forming system, groupware server, image forming apparatus, image forming method, and image forming program | |
CN113870387A (zh) | 数据输出系统及其方法,图像处理系统及其方法 | |
US20240161451A1 (en) | Information processing system, processing method, and recording medium | |
CN100363845C (zh) | 为使图像输出设置容易的成像装置和成像方法 | |
JP7124859B2 (ja) | データ出力システム、情報処理システム、データ出力方法、プログラム | |
JP7031639B2 (ja) | 情報処理装置、プログラム、画像形成装置 | |
JP7388411B2 (ja) | 情報処理システム、通信システム、情報処理方法 | |
JP2022011985A (ja) | 画像処理システム、情報処理システム、画像処理方法、プログラム | |
US10104263B2 (en) | System, apparatus and method for document processing including document stamping according to specified stamper settings | |
JP2022166166A (ja) | データ出力システム、情報処理システム、データ出力方法、プログラム | |
US11681485B2 (en) | Count destination management apparatus and non-transitory computer readable medium | |
US11533403B2 (en) | Process executing system, information processing system, information processing method, and recording medium for detecting duplicate image data from a same output material | |
JP2019161352A (ja) | 情報処理装置及び情報処理プログラム | |
JP4852500B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、および画像処理プログラム | |
US20230273952A1 (en) | Image processing apparatus, image processing method, and storage medium | |
US20230368558A1 (en) | Image processing apparatus, image processing method, and storage medium | |
US20240179256A1 (en) | Image reading device, image reading method, non-transitory recording medium, and information processing system | |
US20240193975A1 (en) | Image processing apparatus, image processing method, and storage medium | |
JP2022140208A (ja) | データ出力システム、情報処理システム、処理方法、プログラム | |
JP2023004042A (ja) | 情報処理システム、情報管理方法、プログラム | |
JP2021114040A (ja) | 情報処理装置、情報処理システムおよびプログラム | |
JP2021114041A (ja) | 情報処理装置、情報処理システムおよびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |