CN104917914A - 图像形成装置和图像形成方法 - Google Patents

Abstract

本发明实施例提供了一种图像形成装置和方法，所述图像形成装置包括：读取部，其扫描读取介质，以生成读取图像数据；图像识别部，其针对所述读取图像数据进行图像识别处理，取得识别结果信息；生成部，其根据所述识别结果信息，生成识别图像数据；以及图像形成部，其将所述识别图像数据印刷到印刷介质上，其中，所述生成部生成在所述图像识别处理不可识别的图像对应的区域是空的区域，在所述图像识别处理能够识别的图像对应的区域存在识别结果的所述识别图像数据。通过本发明实施例的图像形成装置和方法，可以向用户提示具体的不可识别的内容。

Description

图像形成装置和图像形成方法

技术领域

本发明涉及图像形成领域，尤其涉及一种图像形成装置和图像形成方法。

背景技术

在现有技术中，利用专有装置对数据信息进行图像识别，该数据信息可以是需要识别的任何数据，如文字信息、音乐符号等。

日本特开平7-129159号公报公开了一种利用专用装置识别五线，生成乐器数字接口（MIDI，Musical Instrument Digital Interface）文件的技术。

发明内容

但在现有技术中，一方面该专有装置价格比较昂贵，普通的用户在想要进行数据信息识别时，如果没有专用装置则无法实施；另一方面，在对数据信息进行图像识别处理时，不能向用户提示具体的无法识别的部分。例如，在识别五线谱上的音乐符号时，在手写五线原稿上存在不能识别的音乐符号时，不具有向用户通知该无法识别的部分的通知功能。

本发明实施例提供一种图像形成装置和图像形成方法，可标识出不能识别的内容来提示用户。

根据本发明实施例的一个方面，提供了一种图像形成装置，其中，所述装置包括：

读取部，其扫描读取介质，以生成读取图像数据；

图像识别部，其针对所述读取图像数据进行图像识别处理，取得识别结果信息；

生成部，其根据所述识别结果信息，生成识别图像数据；以及

图像形成部，其将所述识别图像数据印刷到印刷介质上，

其中，所述生成部生成在所述图像识别处理不可识别的图像对应的区域是空的区域，在所述图像识别处理能够识别的图像对应的区域存在识别结果的所述识别图像数据。

根据本发明实施例的另一个方面，提供了一种图像形成方法，其中，所述方法包括：

扫描读取介质，以生成读取图像数据；

针对所述读取图像数据进行图像识别处理，取得识别结果信息；

根据所述识别结果信息，生成识别图像数据；以及

将所述识别图像数据印刷到印刷介质上，

其中，所述识别图像数据在所述图像识别处理不可识别的图像对应的区域是空的区域，而在所述图像识别处理能够识别的图像对应的区域存在识别结果。

本发明实施例的有益效果在于：通过本发明实施例的图像形成装置和图像形成方法，在生成识别图像数据时，不可识别的图像对应的区域为空的区域，这样可使用户能够根据该空的区域确定不可识别的内容。

参照后文的说明和附图，详细公开了本发明的特定实施方式，指明了本发明的原理可以被采用的方式。应该理解，本发明的实施方式在范围上并不因而受到限制。在所附权利要求的精神和条款的范围内，本发明的实施方式包括许多改变、修改和等同。

针对一种实施方式描述和/或示出的特征可以以相同或类似的方式在一个或更多个其它实施方式中使用，与其它实施方式中的特征相组合，或替代其它实施方式中的特征。

应该强调，术语“包括/包含”在本文使用时指特征、整件、步骤或组件的存在，但并不排除一个或更多个其它特征、整件、步骤或组件的存在或附加。

附图说明

参照以下的附图可以更好地理解本发明的很多方面。附图中的部件不是成比例绘制的，而只是为了示出本发明的原理。为了便于示出和描述本发明的一些部分，附图中对应部分可能被放大或缩小。在本发明的一个附图或一种实施方式中描述的元素和特征可以与一个或更多个其它附图或实施方式中示出的元素和特征相结合。此外，在附图中，类似的标号表示几个附图中对应的部件，并可用于指示多于一种实施方式中使用的对应部件。在附图中：

图1是本发明实施例的图像形成装置的构成示意图；

图2是本发明实施例的图像形成方法的流程图；

图3是本发明实施例的从外部装置接收印刷数据进行印刷的图像形成方法的流程图；

图4是本发明实施例1的图像形成装置的构成示意图；

图5是本发明实施例1的图像形成装置的数据流的示意图；

图6是本发明实施例1的图像形成方法流程图；

图7是本发明实施例1的用户利用操作面板对识别结果的输出方式/文件格式和文件发送目的地的设定流程图；

图8是本发明实施例2的对手写五线原稿的规范化操作流程图；

图9是本发明实施例2的扫描后的五线数据的识别处理流程；

图10是本发明实施例2的每一行的五线数据的识别处理流程；

图11是本发明实施例2的进行五线谱的规范化、识别、电子文件化的实例图；

图12是本发明实施例3的图像形成方法流程图。

具体实施方式

参照附图，通过下面的说明书，本发明实施例的前述以及其它特征将变得明显。这些实施方式只是示例性的，不是对本发明的限制。

本发明实施例提供了一种图像形成装置和图像形成方法，可对扫描数据进行图像识别处理，可标识出具体的不能识别的内容来提示用户。以下结合附图对本发明实施例的图像形成装置和图像形成方法进行详细说明。

图1是本发明实施例的图像形成装置的组成示意图。如图1所示，图像形成装置10包括：读取部11、图像识别部12、生成部13和图像形成部14；其中，

读取部11扫描读取介质，以生成读取图像数据；图像识别部12针对该读取图像数据进行图像识别处理，取得识别结果信息；生成部13根据该识别结果信息，生成识别图像数据；以及图像形成部14将该识别图像数据印刷到印刷介质上；

其中，生成部13生成在该图像识别处理不可识别的图像对应的区域是空的区域，在该图像识别处理能够识别的图像对应的区域存在识别结果的该识别图像数据。

在本实施方式中，图像识别部12对该读取图像数据进行图像识别处理，在存在不可识别的图像时，在生成部13生成的识别图像数据中，不可识别的图像对应的区域为空的区域，这样，通过该空的区域可提示用户不可识别的内容，解决了现有技术中存在的问题。

为了更进一步提高识别效果，该空的区域还可用预定颜色标识，该预定颜色可以是为任何颜色，例如，可为白色、灰色、红色、黄色等，通过上述颜色可醒目地标识出该识别图像数据中的不可识别的部分。

在本实施例中，在针对该读取图像数据的图像识别处理中，图像识别部12判断是否存在不可识别的图像，这样，可根据不同的识别结果进行相应的处理。

如图1所示，图像形成装置10还可包括：文件生成部15和文件发送部16；其中，文件生成部15在图像识别部12判断为不存在不可识别的图像的情况下，根据该识别结果信息，生成识别结果文件；文件发送部16将该识别结果文件发送到外部存储介质。由此，可将读取介质上的文本信息转换为识别结果文件（电子文档）并进行储存，便于用户使用。

在本实施方式中，文件生成部15可生成对应该读取介质上的文本信息的声音文件或文本文件，该文本文件可以是图文文件，也可以是可编辑的文本文件。

例如，该声音文件为MIDI文件、该图文文件为便携文档格式（PDF，PortableDocument Format）文件，该可编辑的文本文件可以为word文件，但不限于此，该声音文件和图文文件还可为其他形式的文件，例如，声音文件可以是窗波音频格式（WAV，Windows Wave audio format）文件、图文文件可以是可扩展标记语言（XML）文件规格书（XPS，XML Paper Specification）文件。

在本实施例中，文件生成部15可包括：声音文件制作部和/或文本文件制作部。该声音文件制作部在图像识别部12判断为不存在不可识别的图像的情况下，根据该识别结果信息，生成声音数据；该文本文件制作部在图像识别部12中判断为不存在不可识别的图像的情况下，根据该识别结果信息，生成文本文件。

在生成的声音文件为MIDI文件、生成的文本文件为图文文件，如PDF文件时，该声音文件制作部、文本文件制作部可具体为MIDI文件制作部、PDF文件制作部，其中，该MIDI文件制作部在图像识别部12判断为不存在不可识别的图像的情况下，根据该识别结果信息，生成MIDI数据；该PDF文件制作部在图像识别部12中判断为不存在不可识别的图像的情况下，根据该识别结果信息，生成PDF文件。在下面的实施例中以生成的声音文件为MIDI文件、生成的文本文件为PDF文件为例进行了说明。

在本实施例中，文件生成部15可根据用户预先的设定来确定生成文件的类型。并且文件发送部16也可根据用户预先设定的发送目的地，将文件生成部15生成的文件向该发送目的地发送。

此外，图像形成装置10还可包括：接收部和管理部（图中未示出），其中，该接收部从外部装置接收印刷数据；图像形成部14将该印刷数据印刷到印刷介质；该管理部在图像识别部12判断为存在不可识别的图像的情况下，使基于图像形成部14的该印刷数据的印刷待机，直到在图像识别部12中判断为不存在不可识别的图像。由此，由外部装置接收的印刷数据的打印与由扫描数据生成的识别图像数据的打印不会发生冲突。

在本实施例中，图像形成装置10可为具备扫描、识别、文件生成或印刷等功能的多功能一体机（MFP，Multi-Functional Peripheral）。但不限于此，图像形成装置10的上述部件可为单独的设备，如读取部11可以为扫描仪，图像形成部14可以是具有图像形成功能的装置，如打印机、复印机等；图像识别部12和生成部13可以是客户端的计算机，或者可以任何其他具有信息处理功能的设备。

图2是本发明实施例的图像形成方法的流程图。如图2所示，该图像形成方法包括：

步骤S21，扫描部11扫描读取介质，以生成读取图像数据；

步骤S22，识别部12针对该读取图像数据进行图像识别处理，取得识别结果信息；

步骤S23，生成部13根据该识别结果信息，生成识别图像数据；其中，该识别图像数据在该图像识别处理不可识别的图像对应的区域是空的区域，在该图像识别处理能够识别的图像对应的区域存在识别结果；以及

步骤S24，图像形成部14将该识别图像数据印刷到印刷介质上。

通过上述图像形成方法，可在图像识别处理时不可识别的图像对应的区域形成空的区域，这样可标识出具体的不可识别之处来提示用户。

为了更进一步提高识别效果，该空的区域还可用预定颜色标识，如上所述，此处不再赘述。

在本实施例中，在识别部12针对该读取图像数据的图像识别处理中，判断是否存在不可识别的图像，这样，针对不同的识别结果进行相应的处理。

在本实施例中，该图像形成方法还可包括以下步骤（图中未示出）：

在图像识别部12判断为不存在不可识别的图像的情况下，文件生成部15根据该识别结果信息，生成识别结果文件；文件发送部16将该识别结果文件发送到外部存储介质。

由此，可将读取介质上的文本信息转换为识别结果文件（电子文档）并进行储存，便于用户使用。

在本实施例中，在对读取图像数据进行识别处理时，如果还从外部设备接收到印刷数据时，可采用如下方式对印刷数据的印刷进行处理。

图3是本发明实施例的从外部装置接收印刷数据进行印刷的图像形成方法的流程图。如图3所示，该图像形成方法还包括：

步骤S31，接收部从外部装置接收印刷数据；

步骤S32，在针对读取图像数据的图像识别处理中，图像识别部12判断是否存在不可识别的图像；如果判断结果为是，则执行步骤S33，否则执行步骤S34；

步骤S33，在存在不可识别的图像的情况下，管理部使基于该印刷数据的印刷待机；然后回到步骤S32继续判断，直到不存在不可识别的图像；

步骤S34，在不存在不可识别的图像的情况下，图像形成部14将该印刷数据印刷到印刷介质。

由此，由外部装置接收的印刷数据的打印与由扫描数据生成的识别图像数据的打印不会发生冲突。

在上述实施例中，该读取介质上的信息可为文本信息，如文字或符号信息（例如，五线谱上的音乐符号）等，这样，扫描该读取介质所生成的读取图像数据可为文字或符号等，相应地对图像识别处理可包括对文字或符号的识别处理，但本发明实施例并不以此作为限制，例如还可以是图形等信息。

在本实施例中，该读取介质中的文本信息可为手写的不规范的文本信息，也可为印刷的规范的文本信息，这样，通过本发明实施例的上述图像形成装置和方法，可将手写的不规范的文本信息形成为印刷的规范的文本信息，并将该印刷的规范的文本信息作为电子文件储存或打印；此外，也可将印刷的规范的文本信息形成为规范的电子文本信息进行储存，以便用户使用。

在本实施例中，在该图像识别处理是指文字识别处理（OCR）时，该识别结果信息是指文字信息，该识别图像数据至少由该文字信息与文字的位置信息构成，该识别结果文件是指文档数据文件。

由上述实施例可知，通过该装置和方法可对扫描数据进行图像识别处理，针对不可识别的图像，可标识出具体的不能识别之处提示用户，解决了现有技术中存在的问题。

为了使本发明实施例的图像形成装置和方法的组成、功能和步骤更加清楚易懂，下面结合附图和具体实施例对本发明实施例的图像形成装置和方法进行详细说明。

实施例1

图4是本发明实施例1的图像形成装置构成示意图。如图4所示，图像形成装置包括扫描部110、控制部100和图像形成部120；其中，

扫描部110用于扫描读取介质，以生成读取图像数据；其中，该读取介质上的信息可为任何需要识别的文本信息，可为文字信息或者为符号信息；此处可将该读取介质称为原稿，如该读取介质可为记载文字的原稿或者为记载音乐符号的五线原稿（记载音乐符号的五线谱），该原稿中的记载的数据可为手写或印刷的数据；例如，该五线原稿中的五线数据（音乐符号）既可为用户手写的不规范的五线数据、也可为印刷的五线数据，扫描部110可扫描该五线原稿，生成五线图像，扫描部110也可称为读取部11。

控制部100是控制系统整体的动作的部分，控制部100包括识别部101、反馈用印刷数据制作部102、MIDI文件制作部103和/或PDF文件制作部104、文件发送部105、以及印刷处理部106。其中，

识别部101根据该读取图像数据进行图像识别处理，取得识别结果信息；例如，在针对五线数据的图像识别处理中，识别部101是根据读取的五线数据识别音乐符号，标识可识别图像（音乐符号）和不可识别图像（音乐符号）的处理部。识别部101也可称为图像识别部12。

反馈用印刷数据制作部102根据识别部101输出的识别结果信息，生成在该图像识别处理不可识别的图像对应的区域是空的区域，在该图像识别处理能够识别的图像对应的区域存在识别结果的识别图像数据。如反馈用印刷数据制作部102是根据识别部101的识别结果信息，生成包含识别出的音乐符号和不可识别部分对应空的区域的识别图像数据。反馈用印刷数据制作部102也可称之为生成部13。

MIDI文件制作部103和PDF文件制作部104在识别部101判断为不存在不可识别的图像的情况下，根据该识别结果信息生成识别结果文件；如MIDI文件制作部103是根据识别部101识别的音乐符号，转换为MIDI数据，制作文件的处理部。PDF文件制作部104是根据识别部101识别的音乐符号制作PDF文件的处理部。这样可将记载音乐符号的五线原稿转换为声音和/或文本数据文件。

文件发送部105将该识别结果文件发送到外部存储介质。即文件发送部105是根据用户设定的发送目的地（如Email、FTP服务器、USB存储器等），发送MIDI文件制作部103制作的声音文件和/或PDF文件制作部104制作的PDF文件的处理部。

印刷处理部106是根据用户的设定，将反馈用印刷数据制作部102的印刷图像或者PDF文件制作部104制作的PDF文件嵌入印刷工作进行印刷的处理部。其中，可将其功能与反馈用印刷数据制作部102和PDF文件制作部104集成在一起，可被称之为生成部13。

图像形成部120将反馈用印刷数据制作部102的印刷图像或者PDF文件制作部104制作的PDF文件印刷到印刷介质上。

在本实施例中，该图像形成装置可为具备扫描、识别、文件生成或印刷文件的多功能一体机（MFP）。该图像形成装置还可包括存储部130、操作面板140、以及通信部150，这些部件以及扫描部110、图像形成部120是与现有的MFP共有的处理部，其中，存储部130是用于存储处理部的处理用中间数据和处理结果的处理部，如存储MIDI文件制作部103和PDF文件制作部104制作的文件。操作面板140是接受用户的要求、操作命令的界面。用户可以在操作面板上设定系统的各种设定，如设定文件发送的目的地，设定生成文件的格式，向系统发行动作命令等。通信部150是利用各种通信协议（例如，网络议定书、USB通信协议等）将处理得到的结果（MIDI文件，PDF文件）送出到设定的发送目的地的处理部；或者从外部设备接收印刷数据。

在本实施例中，如图4所示，通信部150（或称之为接收部）从外部装置接收印刷数据；控制部100还可包括管理部107，在识别部101中判断为存在不可识别的图像的情况下，使基于图像形成部120的该印刷数据的印刷待机，直到在识别部101中判断为不存在不可识别的图像。例如，在对五线图像进行识别处理时，该图像形成装置还接收外部装置发送的印刷数据，且在识别结果存在不可识别的图像时，使基于该印刷数据的印刷待机，优先对五线图像进行处理，避免外部数据的干扰。

图5是本发明实施例1的图像形成装置的数据流的示意图。如图5所示，扫描部110对读取介质进行扫描，获得读取图像数据，然后将该读取图像数据移交到识别部101；

识别部101针对该读取图像数据进行图像识别处理，即解析取得的读取图像数据，取得识别结果信息，其中可判断是否存在不可识别的图像，标识可识别的部分和不可识别的部分，然后将识别结果信息移交到MIDI文件制作部103、PDF文件制作部104或者反馈用印刷数据制作部102，制作输出用数据文件。其中，

在识别部101判断存在不可识别的图像时，可将该识别结果信息移交到反馈用印刷数据制作部102，生成在该图像识别处理不可识别的图像对应的区域是空的区域，在该图像识别处理能够识别的图像对应的区域存在识别结果的识别图像数据，然后将该识别图像数据发送到印刷处理部106进行处理。

在识别部101判断不存在不可识别的图像时，可根据用户的设定将该识别结果信息移交到MIDI文件制作部103和/或PDF文件制作部104，制作MIDI文件和/或PDF文件；然后将制作的MIDI文件和/或PDF文件发送到发送部105；此外，还可根据用户的设定将PDF文件制作部104制作的PDF文件发送到印刷处理部106进行处理。

最后，文件发送部105将MIDI文件制作部103和/或PDF文件制作部104制作的文件发送到外部存储介质，如可根据用户的设定发送到目的地，如email、FTP服务器、USB存储器等；印刷处理部106将PDF文件制作部104或反馈用印刷数据制作部102输出的数据文件嵌入印刷工作进行印刷，以使用户获得识别后的数据文件。

由上述实施例可知，在该读取介质为五线原稿（五线谱）时，可通过扫描该原稿，生成音乐数据文件；此外，在该读取介质为记载文字的原稿时，可通过扫描该原稿，生成文字数据文件。

图6是本发明实施例1的图像形成方法流程图。对记载文本信息的原稿进行识别、MIDI化、PDF化和发送的整体流程图。如图6所示，该方法包括：

步骤S101，初始化图像形成装置；

其中，该图像形成装置可为MFP，在该MFP开机时，执行该初始化过程。

步骤S102，用户利用操作面板140设定输出文件的文件格式和发送目的地；

其中，该文件格式可以为MIDI和/或PDF，但不限于此，还可为其他格式的文件；该发送目的地可以为接收者的Email邮箱、和/或FTP服务器、和/或USB存储器；

设定输出文件的文件格式和发送目的地的过程在附图7中示出，此处不再赘述。

步骤S103，用户将原稿进纸到该图像形成装置的扫描仪（如扫描部101），该扫描仪开始扫描该原稿，获得读取图像数据；

其中，该原稿可为记载文字原稿或记载音乐符号的五线原稿，该原稿中的数据可为手写的数据或印刷的数据。

步骤S104，识别部101对该读取图像数据进行图像识别处理，识别图像上的音乐符号。

步骤S105，完成第一次识别后，识别部101判断在该读取图像数据上是否存在不可识别的内容（文字或音乐符号）；在判断结果为存在不可识别的内容时，执行步骤S106，否则执行步骤S109。

步骤S106，在步骤S105中判断存在不可识别的内容时，印刷用印刷数据制作部102可生成在不可识别的图像对应的区域是空的区域，在能够识别的图像对应的区域是识别结果的识别图像数据；

其中，如原稿为五线原稿，在生成的识别图像数据中，不可识别的原稿符号的对应位置成为空的区域，能够识别的原稿符号的对应位置为可识别的规范化的音乐符号；如原稿为记载文字的原稿，在生成的识别图像数据中，不可识别的原稿文字的对应位置成为空的区域，能够识别的原稿文字的对应位置为可识别的规范化的文字；

其中，对于不可识别的图像对应的空的区域，可起到提示用户不可识别内容的位置的作用，此外，还可使用预定的颜色标识不可识别的内容，如上述实施例所述，此处不再赘述。

步骤S107，图像形成部120印刷生成的该识别图像数据；

其中，印刷用印刷数据制作部102将生成的该识别图像数据发送到印刷处理部106，由印刷处理部106将该识别图像数据嵌入印刷工作，由图像形成部120将该识别图像数据印刷到印刷介质上。

步骤S108，用户在该空的区域手写填写不可识别的内容（文字或音乐符号）；

这样，用户将补充填入的印刷结果作为原稿，流程重新进入S103，再次开始扫描/识别。

此外，在本实施例中，该图像形成装置在对该读取图像数据进行处理的过程中，还通过通信部150从外部装置接收印刷数据，如果在步骤105中判断存在不可识别的内容时，该图像形成装置的管理部107可对该印刷数据的印刷进行控制，使基于该印刷数据的印刷待机直到判断为不存在不能识别的音乐符号。由此，由外部装置接收的印刷数据的打印与识别的五线谱的音乐符号的打印不会发生冲突。

步骤S109，在步骤S105中识别部101判断不存在不能识别的内容即，所有的原稿数据都能够被识别，根据用户设定的文件格式，MIDI文件制作部103和/或PDF文件制作部104制作MIDI文件和/或PDF文件。

步骤S110，文件发送部105将制作的MIDI文件和/或PDF文件发送到用户预先设定的发送目的地；或者图像形成部120根据用户设定将该PDF文件印刷在印刷介质上。

在上述实施例中，步骤S101至步骤S102为可选步骤，如果该图像形成装置已经开机并完成了系统初始化、以及输出文件的文件格式和发送目的地的设定，可省略上述步骤。

由上述实施例可知，该图像形成装置将不可识别的原稿符号对应位置设置为空的区域，以提示用户不可识别的内容，这样该用户在该空的区域填写不可识别的内容，然后再次进行扫描、识别，通过这样反复操作，可使全部的音乐符号能够被识别，然后根据用户的设定制作的MIDI文件或者PDF文件，并发送到用户指定的发送目的地进行储存，便于用户存取和使用。

图7是图6的步骤102中用户利用操作面板对识别结果的输出方式/文件格式和文件发送目的地的设定流程图。如图7所示，该方法包括：

步骤S201，用户选择输出类型；

其中，该输出类型可为制作文件数据的文件输出、或者将制作的文件数据印刷到印刷介质上的印刷输出。

步骤S202，判断用户选择文件输出还是印刷输出，在用户选择“文件输出”时，执行步骤S203；在用户选择“印刷输出”时，设定结束。

步骤S203，在步骤S202中，在用户选择“文件输出”时，用户进一步选择输出文件的文件类型；

其中，该文件类型可为声音文件和/或文本文件，可根据实际需要设定，例如，可为MIDI文件和/或PDF文件。

步骤S204，输入发送目的地；

其中，该发送目的地可为接收者的Email邮箱、FTP服务器、USB存储器等，输入的目的地地址可相应为Email邮件地址、FTP服务器地址、USB存储器的存储路径。

通过本发明实施例的该图像形成装置和图像形成方法，可对手写的、或者印刷的原稿进行处理，在处理过程中对不可识别的内容进行标注以提示用户。其中可对五线原稿进行处理，获得音乐数据文件。此外，也可对记载文字的原稿进行处理。

实施例2

本发明实施例2还提供一种图像形成方法。在本实施例中，以手写五线原稿为例进行说明。

当原稿中记载的信息是手写的五线数据时，由于该手写的五线数据可能存在记载含糊和不当的情况，可通过上述方法形成印刷的规范的音乐符号。以下结合附图进行说明。

图8是本发明实施例2的手写五线原稿的规范化过程的操作流程图。如图7所示，该方法包括：

步骤S301，用户将五线原稿进纸到该图像形成装置的扫描仪（如扫描部101），该扫描仪开始扫描该五线数据，获得五线图像数据；

其中，该五线原稿中的数据可为手写的五线数据（音乐符号）。

步骤S302，识别部101对该五线图像数据进行图像识别处理，识别图像上的音乐符号。

步骤S303，完成第一次识别后，识别部101判断在五线数据上是否存在不可识别的音乐符号；在判断结果为存在不能识别的音乐符号时，执行步骤S304，否则执行步骤S307。

步骤S304，在步骤S303中判断存在不可识别的音乐符号时，印刷用印刷数据制作部102可生成识别图像数据，在该识别图像数据中，不可识别的原稿符号的对应位置成为空的区域，能识别的原稿符号的对应位置为可识别的规范化的音乐符号；

其中，对于不可识别的图像对应的空的区域，可起到提示用户不可识别内容的位置的作用，此外，还可使用预定的颜色标识不可识别的内容，如上述实施例所述，此处不再赘述。

步骤S305，图像形成部120印刷生成的该识别图像数据；

其中，印刷用印刷数据制作部102将生成的该识别图像数据发送到印刷处理部106，由印刷处理部106将该识别图像数据嵌入印刷工作，由图像形成部120将该识别图像数据印刷到印刷介质上。

步骤S306，用户在该空的区域手写填写不可识别的音乐符号；

这样，用户将补充填入的印刷结果作为五线原稿，流程重新进入S301，再次开始扫描/识别。

步骤S307，在步骤S303中识别部101判断不存在不能识别的音乐符号，即，所有的音乐符号能够被识别，根据用户设定的文件格式，MIDI文件制作部103和/或PDF文件制作部104制作MIDI文件和/或PDF文件。

步骤S308，文件发送部105将制作的MIDI文件和/或PDF文件发送到用户预先设定的发送目的地；或者图像形成部120根据用户设定将该PDF文件印刷在印刷介质上。

由上述实施例可知，该图像形成装置将不可识别的原稿符号对应位置设置为空的区域，以提示用户不可识别的内容，这样该用户在该空的区域填写不可识别的内容，然后再次进行扫描、识别，通过这样反复操作，可使全部的音乐符号能够被识别，然后根据用户的设定制作的MIDI文件或者PDF文件，并发送到用户指定的发送目的地进行储存，便于用户存取和使用。

在本实施例中，在步骤S302中，可使用现有的任何一种方法对该五线图像数据（音乐符号）进行图像识别处理，以下结合附图对上述识别方法进行说明。

图9是本发明实施例2的对扫描后的五线数据进行识别处理的流程图。在图像形成装置的扫描部101扫描五线原稿，获得五线图像数据后，可采用如图9所示的方法来识别音乐符号，该方法包括：

步骤S401，读取扫描后的五线图像数据。

步骤S402，将该五线图像数据划分成多个行，并储存每行的五线图像数据；

其中，可排列地存储各行的五线图像数据，如以阵列的方式存储该五线图像数据。

步骤S403，对当前一行五线图像数据进行识别；

其中，对每行的五线图像数据的识别在下面结合图10进行说明，此处步骤赘述。

步骤S404，在完成了对该当前一行的识别后，对该当前一行的下一行五线图像数据进行识别。

步骤S405，判断是否完成对所有行的五线图像数据的识别；在判断结果为完成了对所有行的五线图像数据的识别时，执行步骤S406，否则执行步骤S403，对未识别的一行的五线图像数据的进行识别。

步骤S406，在步骤S405判断为完成了对所有行的五线图像数据的识别时，对识别结果进行整理。

步骤S407，输出该识别结果。

在图9所示的步骤S403和S404中，在对每行的五线图像数据进行识别时，可采用图10所述的流程进行处理。

图10是本发明实施例2的对每行的五线图像数据进行识别的流程图。如图10所示，包括：

步骤S501，读取当前一行的五线图像数据。

步骤S502，将该当前一行的五线图像数据划分成多个符号，并储存每个符号的图像数据；

其中，可排列地存储每个符号的图像数据，如以阵列的方式存储该图像数据。

步骤S503，对当前一个符号的图像数据进行识别。

步骤S504，在完成了对该当前一个符号的识别后，对该当前一个符号的下一个符号的图像数据进行识别。

步骤S505，判断是否完成对所有符号的图像数据的识别；在判断结果为是时，执行步骤S506，否则执行步骤S503，对未识别的一个符号的图像数据进行识别。

步骤S506，在步骤S505判断为是时，对识别结果进行整理。

步骤S507，输出该识别结果。

在图9所示的步骤S403和S404中，在对每行的五线图像数据进行识别时，可采用以往任何一种公知的方法，例如，采用日本特开JP2003-242438A记载的检测识别乐谱上的五线的方法，针对输入的图像数据，根据合计了水平方向上的黑像素数的合计直方图，检测出推定包含五线的矩形，根据矩形内的五线图像数据检测五线，将其内容合并于此，此处不再赘述。

图11是本发明实施例2的进行五线谱的规范化、识别、电子文件化的实例图。

如图11所示，在对五线谱的图像识别处理中，作曲人可利用本发明实施例1的图像形成装置将手写五线谱进行规范化，其中规范化过程如本实施例所述，此处不再赘述；

此外，还可进行五线谱识别系统的设定定做。其中，该设定定做包括文件格式和发送目的地的设定。

作曲人还可利用该图像形成装置进行五线谱的识别，将手写或印刷原稿电子文件化，如图11所示，包括：五线谱的识别、制作MIDI文件和/或PDF文件化，并将制作完成的MIDI或PDF文件发送到设定的目的地。

通过本发明实施例2的用于识别音符的图像形成装置和方法，不需要利用专用设备，用户使用办公自动化（OA）环境中的MFP，就能够进行手写五线原稿的规范化、MIDI文件化和PDF文件化以及规范化后的五线的印刷和MIDI文件、PDF文件的发送。因此有助于作曲人的音乐创作，期待能够提高音乐创作的效率。

通过本发明实施例的该图像形成装置和图像形成方法，可对手写的、或者印刷的五线原稿进行处理，获得音乐数据文件。此外，也可对记载文字的原稿进行处理，处理过程与处理五线原稿的过程类似，在下面的实施例说明，此处不再赘述。

实施例3

本发明实施例3还提供一种图像形成方法。在本实施例中，以对记载文字的原稿进行处理最终生成文档数据文件为例进行说明。

图12是本发明实施例3的图像形成方法流程图。如图12所示，该方法包括：

步骤S601，用户将记载文字的原稿进纸到该图像形成装置的扫描仪（如扫描部101），该扫描仪开始扫描该原稿，获得图像数据。

步骤S602，识别部101对该图像数据进行图像识别处理，识别图像上的文字。

步骤S603，完成第一次识别后，识别部101判断在五线数据上是否存在不可识别的文字；在判断结果为存在不能识别的文字时，执行步骤S604，否则执行步骤S607。

步骤S604，在步骤S603中判断存在不可识别的文字时，印刷用印刷数据制作部102可生成识别图像数据，在该识别图像数据中，不可识别的文字的对应位置成为空的区域，能识别的原稿符号的对应位置为可识别的规范化的文字；

步骤S605，图像形成部120印刷生成的该识别图像数据。

步骤S606，用户在该空的区域手写填写不可识别的文字；

这样，用户将补充填入的印刷结果作为原稿，流程重新进入S601，再次开始扫描/识别。

步骤S607，在步骤S603中识别部101判断不存在不能识别的文字，即，所有的文字能够被识别，根据用户设定的文件格式，PDF文件制作部104制作PDF文件。

步骤S608，文件发送部105将制作的PDF文件发送到用户预先设定的发送目的地；或者图像形成部120根据用户设定将该PDF文件印刷在印刷介质上。

由上述实施例可知，该图像形成装置将不可识别的文字对应位置设置为空的区域，以提示用户不可识别的内容，这样该用户在该空的区域填写不可识别的内容，然后再次进行扫描、识别，通过这样反复操作，可使全部的文字能够被识别，然后根据用户的设定制作PDF文件，并发送到用户指定的发送目的地进行储存，便于用户存取和使用。

在本实施例中，在步骤602中，可采用现有的任何一种方法对图像数据（文字）进行识别。例如，图像形成装置的存储部130预先存储与文字信息（例如，“A～Z”）对应的多个模板图像。图像形成装置的图像识别部101，对该读取图像数据中的预定区域的图像信息和多个模板图像进行像素比较，将到达预定的一致度的文字信息识别为记载在该预定区域内的文字。另一方面，图像形成装置的图像识别部101，在比较结果为没有到达预定的一致度的模板图像的情况下，判断该预定区域为不可识别。

在本实施例中，制作的文档数据文件是图文文件，如PDF文件，但不限于此形式的文件，还可其他形式的文件，如Word文件等。

以上结合具体的实施方式对本发明进行了描述，但本领域技术人员应该清楚，这些描述都是示例性的，并不是对本发明保护范围的限制。本领域技术人员可以根据本发明的精神和原理对本发明做出各种变型和修改，这些变型和修改也在本发明的范围内。

Claims (12)

1.一种图像形成装置，其中，所述装置包括：

读取部，其扫描读取介质，以生成读取图像数据；

图像识别部，其针对所述读取图像数据进行图像识别处理，取得识别结果信息；

生成部，其根据所述识别结果信息，生成识别图像数据；以及

图像形成部，其将所述识别图像数据印刷到印刷介质上，

其中，所述生成部生成在所述图像识别处理不可识别的图像对应的区域是空的区域，在所述图像识别处理能够识别的图像对应的区域存在识别结果的所述识别图像数据。

2.根据权利要求1所述的图像形成装置，其中，

所述图像识别部在针对所述读取图像数据的所述图像识别处理中，判断是否存在不可识别的图像。

3.根据权利要求2所述的图像形成装置，其中，所述装置还包括：

文件生成部，其在所述图像识别部中判断为不存在不可识别的图像的情况下，根据所述识别结果信息，生成识别结果文件；以及

文件发送部，其将所述识别结果文件发送到外部存储介质。

4.根据权利要求3所述的图像形成装置，其中，所述装置还包括：

接收部，其从外部装置接收印刷数据；

所述图像形成部将所述印刷数据印刷到印刷介质；

管理部，其在所述图像识别部中判断为存在不可识别的图像的情况下，使基于所述图像形成部的所述印刷数据的印刷待机直到在所述图像识别部中判断为不存在不可识别的图像。

5.根据权利要求3所述的图像形成装置，其中，

所述图像识别处理是指文字识别处理（OCR），

所述识别结果信息是指文字信息，

所述识别图像数据至少由所述文字信息与文字的位置信息构成，

所述识别结果文件是指文档数据文件。

6.根据权利要求3所述的图像形成装置，其中，所述文件生成部包括：

声音文件制作部，其在所述图像识别部中判断为不存在不可识别的图像的情况下，根据所述识别结果信息，生成声音数据；和/或

文本文件制作部，其在所述图像识别部中判断为不存在不可识别的图像的情况下，根据所述识别结果信息，生成文本文件。

7.根据权利要求1所述的图像形成装置，其中，所述空的区域是用预定颜色标识的区域。

8.一种图像形成方法，其中，所述方法包括：

扫描读取介质，以生成读取图像数据；

针对所述读取图像数据进行图像识别处理，取得识别结果信息；

根据所述识别结果信息，生成识别图像数据；以及

将所述识别图像数据印刷到印刷介质上，

其中，所述识别图像数据在所述图像识别处理不可识别的图像对应的区域是空的区域，而在所述图像识别处理能够识别的图像对应的区域存在识别结果。

9.根据权利要求8所述的图像形成方法，其中，

在针对所述读取图像数据的所述图像识别处理中，判断是否存在不可识别的图像。

10.根据权利要求9所述的图像形成方法，其中，所述方法还包括：

在判断为不存在不可识别的图像的情况下，根据所述识别结果信息，生成识别结果文件；以及

将所述识别结果文件发送到外部存储介质。

11.根据权利要求10所述的图像形成方法，其中，所述方法还包括：

从外部装置接收印刷数据；

将所述印刷数据印刷到印刷介质；

在判断为存在不可识别的图像的情况下，使基于所述印刷数据的印刷待机直到判断为不存在不可识别的图像。

12.根据权利要求10所述的图像形成方法，其中，所述空的区域是用预定颜色标识的区域。