CN1226693C - 备注图像管理装置、备注图像管理系统和备注图像管理方法 - Google Patents

Abstract

本发明提供了一种适于管理和检索大量备注图像的备注图像管理装置、系统和方法。备注图像管理装置可连接到能够执行备注图像交换和备注图像显示的便携终端，该管理装置包括：适于管理备注图像的管理服务器和适于识别备注图像的字符信息的字符信息识别服务器。该管理服务器包括：备注图像累积部分，适于累积备注图像；和备注图像检索部分，适于从累积的备注图像中检索一预定备注图像以响应一请求。字符信息识别服务器包括适于从备注图像中识别字符信息的字符信息识别部分。

Description

备注图像管理装置、备注图像管理系统和备注图像管理方法

技术领域

本发明涉及备注图像(memo image)管理装置、备注图像管理系统和备注图像管理方法，并且尤其涉及适于管理从诸如便携电话、PHS(个人手持电话系统)等的便携终端(信息装置)捕获的备注图像的管理介质。

背景技术

近来，具备发送和接收数字图像能力的便携终端(例如便携电话、PHS等)已经日益普及。此外，还有一些众所周知的信息装置，这些信息装置均包括内置数字相机或者可连接到小型数字相机的接口。这种内嵌在或可连接到便携终端的数字相机可应用于各种领域。特别是，已知作为其一种应用，该相机用于捕获其环境信息作为备注。

例如，作为第一现有技术，日本专利特开平公报HE-10-276274描述了一种能够通过字符识别从图像数据获取字符信息的电话装置。

而且，作为第二现有技术，日本专利特开平公报HE-05-22555和日本专利特开平公报HE-06-339003分别描述了多种通信系统，每个通信系统能够从由终端装置具备的字符识别功能获取的图像数据中抽取地址信息(例如电话号码)并自动发送该信息。

此外，作为第三现有技术，还有已知的日本专利特开平公报HE-11-205515(通信系统、其控制方法和计算机可读存储器)和日本专利特开平公报HE-10-210167(通信系统中的数据寄存方法、通信系统和通信装置)，它们均描述了能够在便携电话和主机站之间进行图像交换以及可以通过使主机站具备字符识别功能来从图像中抽取字符信息。

上述第一现有技术使用便携终端作为独立装置(standalone)，使得能够被存储和处理的备注图像的数量被不便地限制为很小。而且，这种便携终端难以使已由用户收集的备注图像被更广泛地与第三人共享。特别是，当使用这些便携终端在其他用户间进行备注图像交换时，用户必须以一对一关联的方式相互通信以交换备注图像。因此，不能同时在多个用户之间交换备注图像，使得备注图像的交换不能得到普及。

第二现有技术不利地将能够由其系统操作或处理的信息限制为地址信息，因此不能抽取并使用其他信息(例如代表备注的主要目的的标题和备注上所描述主页的URL)，从而不能够通过在其中执行检索来有效地利用寄存的备注图像。

第三现有技术并不试图管理备注图像，所以，与第一现有技术类似地，该技术不能在多个用户间交换备注图像以及从大量累积的备注图像中检索任何备注图像。因此，很难说由此获得的备注图像能够在一个或多个用户中得到有效的利用。

发明内容

为了解决上述问题以及其他问题，提出了本发明。本发明的一个目的是提供一种备注图像管理装置、备注图像管理系统和备注图像管理方法，能够适于管理大量累积的备注图像并易于从其中检索预定的备注图像和信息。

为了实现上述和其他目的，并根据本发明的一个方面，提供了一种可连接到能够操作备注图像的信息装置的备注图像管理装置，该管理装置包括：

备注图像累积部分，适于累积备注图像；

备注图像检索部分，适于从所述累积的备注图像中检索一预定备注图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

字符信息识别部分，适于从所述备注图像中识别并抽取字符信息；

备注图像分配部分，适于将由所述备注图像检索部分检索的所述备注图像或由所述字符信息识别部分抽取的所述字符信息分配到发送请求的所述信息装置；和

因特网检索功能部分，适于根据一预定备注图像中的字符信息来访问因特网上的主页并抽取所述主页上的信息作为一备注图像，其中所述备注图像累积部分适于累积由所述因特网检索功能部分获得的所述备注图像。

通过该配置，备注图像管理装置可以累积许多已经由诸如便携电话或PHS的便携终端(信息装置)获得的备注图像，使得该备注图像管理装置可以针对大量累积的备注图像执行管理和检索，以响应来自便携终端或其他信息终端(例如计算机系统)的请求。

备注图像管理装置中的备注图像累积部分的特征在于分类和累积信息装置的每个用户的备注图像。通过该配置，可以累积每个用户的备注图像，从而向用户提供操作性优越的备注图像管理装置。例如，通过利用用户的便携电话的电话号码，分类和管理每个用户的备注图像。

备注图像管理装置中的备注图像累积部分的特征在于，根据由字符信息识别部分抽取的字符信息来分类和累积备注图像。通过该配置，可以快速并容易地在累积的备注图像中执行检索。

而且，备注图像管理装置的特征在于，还包括一字符信息存储部分，适于在其内以对应于备注图像的方式存储由字符信息识别部分抽取的字符信息。通过该配置，可以以对应于字符信息的方式管理备注图像。例如，在本发明的一个实施例中，字符信息存储部分由备注图像累积部分构成。

此外，备注图像管理装置的特征在于，还包括适于从由备注图像累积部分累积的备注图像中抽取图形信息、表格信息或照片信息的部分。通过该配置，不仅可以管理字符信息，而且可以管理与该备注图像有关的各种信息，例如图形信息、表格信息或照片信息。

此外，备注图像管理装置的特征在于，还包括适于对由所述备注图像累积部分累积的指定的备注图像进行二值化或将该指定的备注图像转换成用于产生其压缩图像的微缩文件的部分。通过该配置，用户可以快速识别备注图像管理装置中累积的备注图像并快速从这些备注图像中取出希望的信息。

字符信息识别部分的特征在于具备基于备注图像中字符信息的识别结果来生成字符识别候选格栅的功能。通过该配置，可以从字符识别的备注图像中获得准确的字符信息。

此外，备注图像管理装置的特征在于，还包括管理服务器和备注图像识别服务器，管理服务器包括备注图像累积部分、备注图像检索部分和备注图像分配部分；备注图像识别服务器包括字符信息识别部分，并且备注图像识别服务器可通过通信线路连接到管理服务器。通过该配置，可以缓解备注图像管理装置上的负载。

根据本发明的另一方面，提供了一种备注图像管理系统，该系统包括：

(a)包括一便携终端的信息装置；和

(b)可通过通信线路连接到所述信息装置并能够从所述信息装置中交换、累积和检索一备注图像的服务器，所述服务器包括：

(i)备注图像累积部分，适于累积备注图像；

(ii)备注图像检索部分，适于从所述累积的备注图像中检索一预定备注图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

(iii)字符信息识别部分，适于从所述备注图像中识别并抽取字符信息；和

(iv)备注图像分配部分，适于将由所述备注图像检索部分检索的所述备注图像或由所述字符信息识别部分抽取的所述字符信息分配到发送请求的所述信息装置；

其中所述服务器包括：管理服务器，包括所述备注图像累积部分、所述备注图像检索部分和所述备注图像分配部分；和备注图像识别服务器，可通过通信线路连接到所述管理服务器，并且所述备注图像识别服务器包括所述字符信息识别部分。

通过该配置，备注图像管理装置可以累积许多已由信息装置(例如便携电话或PHS)获得的备注图像，使得备注图像管理装置可以在大量累积的备注图像中执行管理和检索，以响应来自信息装置或其他信息终端(例如计算机系统)的请求。

此外，备注图像管理系统中的信息装置的特征在于，包括能够获取图像以作为包含文本信息的备注图像的光图像拾取部分。通过该配置，可以直接将来自信息装置的希望的备注图像信息累积到备注图像管理系统。根据本发明，能够获取图像以作为备注图像的光图像拾取部分或装置包括：数字相机(例如CMOS相机、CCD相机等)、数字视频相机和图像扫描仪等。语句“信息装置包括光图像拾取部分”的意思是光图像拾取部分被内嵌在信息装置中或者信息装置通过其接口连接到光图像拾取部分。

此外，备注图像管理系统中的信息装置的特征在于，获取由备注图像识别部分识别的字符信息，并且信息装置包括适于纠正或改变获取的字符信息的字符纠正或改变部分。然后，该信息装置适于将纠正或改变的字符信息分配到服务器，使得服务器可以累积纠正或改变的字符信息。通过该配置，可以纠正由字符识别获得的字符信息中的差错或除去备注图像中存在的不希望的信息，从而可以对准确和希望的信息进行管理。

而且，备注图像管理系统中的服务器的特征在于，检索由信息装置从一组累积的备注图像获取的作为关键字的纠正或改变的字符信息，并将字符信息或一组备注图像作为检索结果发送到信息装置。通过该配置，可以在其显示过程中确定累积备注图像的顺序，同时利用文本信息执行检索，从而通过使用信息装置以利用任何备注图像的用户的简单操作来实现备注图像的利用环境。

此外，备注图像管理系统中的信息装置的特征在于，通过将从服务器获取的备注图像抽取的字符信息用作参数来执行预定的呼叫发起、URL连接或信息装置中的存储器寄存。通过该配置，可以方便地利用从备注图像获得的信息。

请注意，信息装置的特征在于可以具备将备注图像及其类型信息一起发送的发送功能。通过该配置，可更易于设定用户要检索的检索信息。此外，该信息装置的特征在于可以将备注图像及与其相关联的关键字项一起发送到服务器。通过该配置，可易于设定用户要检索的检索信息。

根据本发明的再一方面，提供了一种利用信息装置和管理服务器来管理备注图像的备注图像管理方法，其中该信息装置能够操作所述备注图像，该管理服务器可通过通信线路连接到所述信息装置并能够针对从所述信息装置发送的所述备注图像来执行交换、累积和检索，所述方法包括以下步骤：

(a)将所述备注图像从所述信息装置发送到所述管理服务器；

(b)累积所述发送的备注图像；

(c)从所述累积的备注图像中检索一预定图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

(d)根据需要，在步骤(b)或步骤(c)之前或之后，从所述备注图像中识别并抽取字符信息；和

(e)将所述检索的备注图像或所述识别和抽取的字符信息分配到所述信息装置；

其中所述管理服务器进一步能够根据一预定备注图像中的字符信息来访问因特网上的主页并抽取所述主页上的信息作为一备注图像。

如果在将备注图像发送到管理服务器的过程中发送了一个附加检索信息，则可更易于从管理服务器中累积的备注图像中检索希望的备注图像。该附加信息是从由位置信息、备注图像的开放条件、备注图像的类型和备注图像的发送日期与时间构成的组中选出的至少一个信息。如果将这样的信息从信息装置发送到管理服务器，则也可更易于从管理服务器中累积的备注图像中检索希望的备注图像。

参考附图，根据下面举例给出的具体说明，可以更清楚地理解本发明的这些和其他方面。

附图说明

图1是根据本发明的备注图像管理装置和备注图像管理系统的示意性整体方框图；

图2示出了根据本发明要管理的备注图像的一个例子；

图3示出了便携终端上的检索/检索信息设定屏幕；

图4示出了对应于作为管理服务器中的管理信息的备注图像的一个列表；

图5示出了发送到便携终端的检索结果的一个例子；

图6是本发明的另一实施例的示意图；

图7是解释纠正由便携终端通过字符识别获得的结果的解释图；

图8示出了显示在便携终端上的压缩备注图像的微缩图像；

图9是根据本发明通过备注图像管理方法将备注图像寄存在备注图像管理装置内的操作的流程图；

图10是通过备注图像管理方法检索一寄存的备注图像的操作的流程图；和

图11是将通过字符识别所识别的备注图像转换成字符信息的操作的流程图。

具体实施方式

下面，参考附图，对根据本发明的优选实施例的备注图像管理装置、备注图像管理系统和备注图像管理方法进行详细说明。

实施例1

图1是显示根据本发明的备注图像管理装置和备注图像管理系统的示意方框图。图2示出了根据本发明要管理的备注图像的一个例子，图3示出了便携终端上的检索/检索信息设定屏幕；和图4示出了用于一个管理服务器的备注图像管理屏幕，该屏幕示出了与作为管理服务器中存储的管理信息的备注图像对应的一个列表。

在图1中，根据本发明的备注图像管理装置100是通过通信线路(例如因特网)可连接到作为信息装置的便携终端1并且由管理服务器2和字符信息识别服务器3组成的服务器装置。管理服务器2包括：备注图像累积部分(DB)21，适于在其中累积或存储备注图像；备注图像检索部分22，适于从备注图像累积部分21中累积的备注图像中检索一预定图像，以响应从便携终端1或便携终端1以外的终端(未示出)发出的请求；和发送/接收部分(分配部分)23，适于执行数据的发送/接收和检索结果的分配。特别是，备注图像管理装置100和便携终端1构成本发明的备注图像管理系统。

字符信息识别服务器3包括：字典数据库(DB)31，其内存储一识别字典；字符信息识别部分32，适于利用识别字典从备注图像中识别并抽取字符信息；和发送/接收部分(分配部分)33，适于执行向/从管理服务器2和便携终端1发送/接收包括备注图像的数据。

在该说明书中，术语“备注图像”的意思是由光图像拾取装置(例如数字相机)通过拾取包括字符信息的广告、商店标志等获得的电子数据。电子数据是能够显示在便携终端上的诸如JPG、PCX、GIF、TIF和BMP的图像数据。而且，备注图像可以包括字符信息以外的各种数据，例如地图信息、图形数据(例如房地产的建筑平面图)、照片和插图。

适于在其中累积备注图像的备注图像累积部分21是用于累积或重写电子数据的存储装置(例如硬盘、DVDRAM、DVDR、CD-R、CD-RW、MO等)，并能够以可以通过如下所述的检索操作来抽取某一备注图像或字符信息的方式来累积备注图像和字符信息。

字符信息识别部分32包括用于将图像数据转换成字符信息(编码信息)的常规已知的光字符识别软件和用于执行该光字符识别的硬件。该字符信息识别部分32保存一较大容量的字符识别字典作为识别字典。此外，如下所述，也可以将字符信息识别部分32配置成执行字符识别结果的格栅显示并纠正之。当然，可以分别独立于服务器2和3提供备注图像累积部分21和字典数据库31。

管理服务器2的发送/接收部分23由诸如调制解调器那样的通信装置构成，该通信装置能够将检索结果分配到包括上述便携终端1以外的另一个便携终端的预定终端，以响应从便携终端1或其他终端(例如未示出的计算机系统或者可L模式的固定电话机)发出的请求。

便携终端1主要包括：主便携终端单元10，具有通信功能(电话呼叫功能)；光图像拾取装置11(例如数字相机)，内嵌在或通过接口连接到该主便携终端单元10；和本地存储部分12，内嵌在或可连接到主便携终端单元10并能够累积诸如备注图像的电子数据。

主便携终端单元10由便携电话、PHS、PDA等组成，包括未示出的电话呼叫部分和信息显示部分。光图像拾取装置11包括数字相机(例如CMOS相机或CCD相机)、数字视频相机、图像扫描仪等。在该优选实施例中，光图像拾取装置11是内嵌在或连接到便携终端1的数字相机。

近来，适于配备在便携电话的主便携终端单元10内的数字相机在发展的最初阶段的像素数为大约7.7万个像素。但是，用于便携终端的数字相机已经发展为30万个像素或48万个像素。在本发明中，根据备注图像的可操作性、可便携性或可获取性的观点，最好使用内嵌在或连接到便携终端的此类数字相机11。

图2(a)到图2(d)示出了由便携终端1的数字相机11拾取的备注图像的例子。图2(a)示出了一广告板的备注图像，包括构成该备注图像的有效信息的文本信息51，例如整形外科的诊所名称(例如，○△整形外科)、诊所的主管名称、地址、电话号码和诊疗时间。

类似地，图2(b)示出了包括有关○×△牙科诊所的文本信息52的备注图像。图2(c)示出了包括作为文本信息53的主页地址(URL)的、在东京召开的○○研讨会的备注图像。图2(d)示出了包括其地址信息作为文本信息54的、○□英语会话学校的备注图像。在本发明中，用户通过利用数字相机从城镇中现有的广告板和广告获取他想要的图像和文本信息作为备注图像。

本地存储部分12被提供用于临时累积由此获取的备注图像，或者是一个适于累积从如下所述的管理服务器2分配的备注图像的存储部分。例如，本地存储部分12由主便携终端单元10内嵌入的存储器或诸如存储卡(例如SD卡、智能媒体卡和小型闪存卡)的可重写存储装置组成。本地存储部分12的存储容量比管理服务器2内提供的备注图像累积部分21的小。

在该实施例中，已经由便携终端1获取并包括用户感兴趣的文本信息的备注图像将首先被累积在本地存储部分12中。此后，将该备注图像从便携终端1发送到管理服务器2(备注图像的累积请求：图1中的箭头1→2)。在将备注图像从便携终端1发送到管理服务器2时，本地存储部分12内累积的多个备注图像可以作为一个单元一起被发送，或者可以每次便携终端1获取一个备注图像就发送一个备注图像。

此外，当将备注图像从便携终端1发送到管理服务器2时，可以同时发送从例如图3(a)或3(b)所示的备注图像的累积信息中选择的任何备注图像。图3(a)显示的屏幕是要发送的备注图像的阅读授权信息。图3(a)中显示的“用户自己”表示的信息为仅作为便携终端拥有者的用户自己被授权检索和阅读任何备注图像。

“小组”表示的信息为仅预定的小组成员被授权检索和阅读任何备注图像。“全面开放”表示的信息为任何人都被授权检索和阅读任何备注图像而没有任何限制。此外，“PIN(个人识别号码)”表示的信息为用户通过将预定的PIN(密码)输入其中才被授权检索和阅读任何备注图像。

图3(b)示出了用于检索希望的备注图像时所要选择的检索关键字项。该检索关键字被用于将便携终端1连接到管理服务器2，并随后检索该希望的备注图像。在此为检索关键字设定各种类型，例如医院、教育机构、房地产等。例如，如果选择“医院”并将其发送到管理服务器2，则管理服务器2中的备注图像检索部分22可以从累积的备注图像中检索出与“医院”类别相对应的备注图像。此外，检索关键字项可以包括获取备注图像的日期和时间以及获取备注图像的地点。

图3(c)示出了用于检索任何备注图像时所要选择和设定的检索模式项。当检索任何累积的备注图像时，按照需要选出检索模式的一个选择项(例如“日期和时间的顺序”、“地点顺序”和“种类顺序”)并将其发送到管理服务器2，从而管理服务器2根据选择和设定的检索模式来执行任何备注图像的检索。

图4示出了备注图像累积部分21内存储的备注图像上的管理数据。备注图像检索部分22利用该管理数据并以指定的检索模式(在图3(c)中所选的)从备注图像累积部分21中检索任何备注图像。图3(b)所示的一组检索关键字仅是一个例子。所以，便携终端1的用户可以输入那些关键字之外的任何希望的关键字。

以此方式，在将备注图像数据从便携终端1发送到管理服务器2之后，便携终端1的用户可以删除由此发送的备注图像数据(数据去除)，从而避免本地存储部分12的可用存储区域溢出。因此，根据本发明可以解决常规的存储器溢出问题。

已经从便携终端1接收了备注图像并被要求在其中累积该图像的管理服务器2根据发送到管理服务器2的各种信息，将图4的管理数据寄存为对应于(累积的)备注图像的列表，同时在备注图像累积部分21内累积发送的备注图像。

图4所示的管理数据(对应于备注图像的列表)适于管理备注图像单元中的各种条目，例如便携终端的电话号码、形成备注图像的日期和时间(或者发送备注图像的日期和时间)、表示种类(例如，医院、教育机构等)的项1、表示地理信息(例如地点、区域等)的项2、发送的备注图像的文件名称、根据需要通过如下所述在字符信息识别部分32执行备注图像的字符识别产生的文本文件的文件名称、以及开放模式(open mode)。

在图4所示的管理数据中，以项1和项2两项为例进行说明，但不应该将本发明限制于此。也就是说，可以任意增加其他类型的项目。而且，开放模式与来自便携终端1的阅读限制信息(如图3(a)所示)相对应。例如，对该阅读限制信息进行管理，使得用户自己的阅读授权为“1”，小组的阅读授权为“2”，而全面开放为“3”。

当生成管理数据时或之后，按所希望的对备注图像进行处理，以便由字符信息识别服务器3将该图像的字符信息部分从图像信息转换成文本信息。而且，利用字符信息识别服务器3从图像信息转换到文本信息的操作可以在将备注图像存储到备注图像累积部分21时或之后通过批处理自动执行(批处理：图1所示箭头2→3)。

具体地，管理服务器2可以向字符信息识别服务器3提出针对例如在备注图像累积部分21中累积的各个备注图像的文本信息识别请求。从三个备注图像获取的文本识别结果将从字符信息识别服务器3返回到管理服务器2，并且可以被增加到管理数据(对应于备注图像的列表)作为一个新的检索关键字。当然，根据来自便携终端的发送信息(或者与备注图像累积信息一起)生成和/或改变图4中的日期与时间、项1和2等的内容，但那些内容也可以根据由字符信息识别服务器3获得的字符信息识别结果生成和/或改变。

另一方面，不仅可以在累积备注图像时也可以在便携终端1提出请求时由字符信息识别服务器3执行字符信息识别。具体地，便携终端1可以向字符信息识别服务器3提出识别一指定备注图像内包括的文本信息的请求(如图1所示箭头1→3)。对此作出响应，字符信息识别服务器3可以执行从该指定备注图像到文本信息的转换并随后将该转换结果(字符识别结果)发送到便携终端1(如图1所示箭头3→1)。尤其是，在此操作的备注图像可以是已经从便携终端1直接发送到字符信息服务器3的一个图像或者是已经从管理服务器2发送到字符信息服务器3的一个图像。

因此，在该实施例中，数据量很大的备注图像(例如彩色图像)能够被操作为从该备注图像抽取的字符信息，因此明显有利于备注图像的操作或处理。此外，可以利用文本信息中的字符串来执行与累积的备注图像相关联的编辑和检索。例如，可以从便携终端1或其他终端(包括其他用户的便携终端或其他类型的信息装置)利用文本信息，执行与一组累积的备注图像相关联的显示日期和时间的编辑和执行一组累积的备注图像中的检索。因此，通过使用便携终端1以利用任何备注图像的用户的简单操作来实现了备注图像的利用环境。

此外，在该实施例中，便携终端不作为独立类型装置而具有备注图像识别功能。相反，备注图像识别服务器具备识别功能，从而高准确性地执行备注图像识别，而不受便携终端的有限操作资源所施加的任何限制。

此外，便携终端1或其他终端(例如由第三人拥有的便携终端)的用户可以向管理服务器2请求检索希望的备注图像(如图1所示的箭头1→2)。管理服务器2可以根据图4所示的大型数据库中累积的管理数据来检索希望的备注图像，并将该图像返回到便携终端1或包括第三人的便携终端的其他终端(如图1所示箭头2→1)。

通过该配置，可以避免本地存储部分12因大量的备注图像累积而溢出。同时，由此累积的备注图像可以被共同用于多个便携终端用户，从而实现了对感兴趣的备注图像的流通和交换。

下面参考图5对本发明的第二和第三实施例进行说明。

实施例2

在图5(a)所示的该第二实施例中，管理服务器2使字符信息识别服务器3将备注图像转换成字符信息，从而将字符信息作为字符信息列表(标题列表)分配到便携终端1。当希望在如图图5(a)所示的便携终端1上显示对应的备注图像的标题的选择时，冠以该标题的备注图像将显示在便携终端1上，从而有助于在便携终端1上阅读备注图像。

实施例3

图5(b)所示的该第三实施例是如图3(b)所述的通过输入检索关键字来检索任何备注图像的一个例子。

在该情况下，当输入关键字“医院”作为检索类型时，根据该关键字，管理服务器3从列表中检索与“医院”相关联的文本信息并随后将该信息作为医院列表发送到便携终端1以便在其上显示该信息。在对应于备注图像的列表中的类型可以与备注图像一起发送到管理服务器2以便在此累积(如参考图3(b)所述)，或者可以附加到由字符信息识别服务器3识别的管理数据(与备注图像对应的列表)。通过该配置，想获得属于某一类型的备注图像的用户可以更快速地获得其想要的备注图像。

实施例4

下面，参考图6对本发明的第四实施例进行说明。在图6所示的该第四实施例中，便携终端1的本地存储部分12具有一个用于检索的本地数据库。也就是说，本地存储部分12根据已经直接从用户输入的项和已经由字符信息识别服务器3获取并按需纠正/改变了的字符信息，来生成本地数据库作为一列表。由于该数据库是根据各种字符信息生成的，所以与备注图像的情况相比，本地存储部分12在容量上不受字符信息的限制。因此，本地存储部分12配备有与用户感兴趣的各种信息有关的数据库。如果使用与数据库中寄存的一些信息相关联的信息作为检索关键字，则可以使管理服务器2容易地执行相应检索并渐进地收集感兴趣的信息(备注图像或字符信息)。

根据该第四实施例所示的原理，如果用户采用已由其便携终端1获取并显示在预定商店的广告板上的备注图像作为检索关键字，则可以检索并列出与该商店相关联的备注图像。例如，如果该预定商店是一个中国餐馆，则可以执行与该中国餐馆有关的广告、菜单、杂志说明的检索。此外，可以获取不同的中国餐馆的列表或渐进地收集相关信息。

应该理解，利用当前的识别技术并不能够完好地识别出备注图像内的文本信息。因此，可以方便地纠正该识别结果，使得字符信息能够更加准确。而且，与该字符串的手动输入相比，可以高效地获取纠正了所得识别结果的字符信息。尽管当前的识别技术还不完善，但使用利用大量计算资源的识别方案，以便识别误差能够尽可能地接近零。结果，有可能高精度地实现字符信息识别。

实施例5

下面，对本发明的第五实施例进行说明。

在该第五实施例中，便携终端1被配置成通过利用一指定备注图像的字符信息作为参数来激活通常的便携电话功能(例如呼叫发起功能)和电话号码可存储功能。当在备注图像中描述了电话号码和URL地址时，字符信息识别服务器3通过执行字符识别来获取它们的文本信息。随后，该识别结果被用于执行呼叫发起和存储器寄存，从而可以有效改进并简化便携终端1的可操作性。

例如，可以利用字符信息识别服务器3，从图2(a)或图2(b)所示的备注图像中抽取电话号码和/或从图2(c)所示的备注图像中抽取URL。根据该第五实施例所示的原理，可以将抽取的电话号码和URL存储在便携终端1的内嵌存储器中(存储器寄存)。

实施例6

在该第六实施例中，管理服务器2被配置成分类和累积每个不同便携终端1的用户的备注图像。例如，利用管理数据(与备注图像对应的列表)生成不同电话号码的每个用户的不同子集数据库。通过该配置，可以在大型的备注图像数据库中累积按每个不同便携终端用户分类的备注图像，从而允许每个用户累积高容量的备注图像而与便携终端1的本地存储部分12的容量大小无关。由于累积地点是向公众开放的大型的备注图像数据库，所以如果将一授权从一个用户给另一个用户，则一个用户的备注图像数据库可以与另一个用户共享，或者可以被用于阅读和检索以响应来自另一个用户的请求。

实施例7

下面，对本发明的第七实施例进行说明。

在该第七实施例中，管理服务器2被配置成分类并累积其每种备注图像的累积备注图像信息。例如，这可以通过从图4所示的管理数据中生成每个类型的子集数据库来实现。由于备注图像按每个备注图像类型分类并累积在大型数据库中，所以可以快速和容易地执行属于所需类型的备注图像的阅读和检索。

实施例8

在本发明的第八实施例中，管理服务器2被配置成利用因特网检索功能，根据指定的备注图像的URL等的字符信息来抽取与该指定的备注图像相关联的主页信息，并执行作为备注图像的与主页信息相关联的图像的累积、交换和呈现。

例如，从火车内观察的广告的备注图像中抽取该广告的宣传对象的主页的URL作为文本信息。随后，通过因特网访问由该URL指定的主页以累积其内容作为备注图像。另一方面，使用该内容作为检索关键字，在大型备注图像数据库内进行检索，从而抽取与作为第一备注图像的该火车广告相关联的一组备注图像呈现给用户。根据该第八实施例所示的原理，用户可以快速和容易地获取一组与某一备注图像相关联的备注图像。

实施例9

在该第九实施例中，字符信息识别服务器3被配置成不仅从指定的备注图像中抽取字符信息而且抽取表格信息和照片信息(例如图形信息和表格内的规则和单元)。例如，通过利用图像处理技术领域内的模式匹配或计算机技术领域内的相似性检索来执行该检索处理。

根据该第九实施例所述的原理，可以抽取从具有复杂设计的文件(例如杂志或报纸)获取的并由数字相机拾取的备注图像中包括的图形信息和照片信息，从而可阅读图形内的结构信息、表格和照片内的各种信息，同时可以利用那些线索执行任何检索。

实施例10

在该第十实施例中，字符信息识别服务器3被配置成以高质量对指定的备注图像(彩色图像或灰度级图像)进行二值化或者将该指定的备注图像转换成微缩文件以将其压缩发送到管理服务器2。

根据该第十实施例的原理，可以将大容量的彩色/灰度级备注图像转换成小容量的二进制单色图像。也就是说，可以依据二进制技术来减少彩色/灰度级备注图像的容量以获取其内保留可用信息(例如文本信息、图形信息、表格信息和照片信息)的小容量的单色备注图像，从而实现这种小容量备注图像的交换和累积。而且，可以减少数据库的容量并提高备注图像的交换速度。

类似地，可以通过形成彩色图像的微缩文件来减小彩色图像的大小，并随后如图8所示，将其多个备注图像显示在便携终端1的显示屏幕上。

实施例11

在图7所示的第十一实施例中，作为备注图像识别的结果，字符信息识别服务器3中的字符信息识别部分32通过使用字符候选格栅表示字符识别候选和字符分割候选，从而可以在便携终端1和管理服务器2之间交换字符候选格栅。

具体地，字符候选格栅表示具有包括文本信息的字符分割候选和字符识别结果候选的格栅结构的数据，该文本信息已经由字符信息识别部分32通过识别备注图像内的文本信息来获取。

根据该第十一实施例的原理，即使备注图像内的文本信息的识别结果包括一些误差，字符候选格栅内包括正确答案的可能性仍然很高。因此，用户可以利用字符候选格栅来获取高精度的检索结果，从而有利于提高希望的备注图像的检索精度。

以此方式，本发明为用户提供一种易于使用的备注图像利用功能，因为可以独立于便携终端1的处理极限来交换和管理大量的备注图像。而且，可以通过对备注图像管理装置或字符信息识别部分的版本进行升级来实现具有更高性能和功能性的备注图像利用功能，而不必增加便携终端用户的任何资金负担。此外，可以更流畅地在多个用户间交换任何备注图像，从而有利地克服了常规问题。

实施例12

下面，作为第十二实施例，对根据本发明的备注图像管理装置和备注图像管理系统的操作(即，备注图像管理方法)进行说明。

图9是遵循根据本发明的备注图像管理方法将备注图像寄存在管理服务器内的操作流程图；图10是遵循备注图像管理方法，对所寄存的备注图像进行检索的操作流程图；以及图11是遵循备注图像管理方法，通过字符识别将备注图像转换成字符信息的操作流程图。

在图9中，便携终端1获取一备注图像(S1)。具体地，用户通过光图像拾取装置(例如数字相机)拾取备注图像作为希望的信息。随后，用户通过诸如因特网的通信线路，将由此获取的备注图像从其便携终端1发送到管理服务器(S2)。此时，用户还可以发送与随后要发送的该备注图像相关联的附加信息，例如，位置信息、备注图像的开放条件、备注图像的类型(或种类)和备注图像的发送日期与时间。最后，从便携终端1发送的备注图像和附加信息一起被累积和存储在管理服务器中作为数据库的备注图像累积部分21中(S3)。在上述步骤S2中，用户可以通过从本地存储部分12中删除所发送的备注图像，来恢复或保持本地存储部分12的空闲容量。

相反地，用户可以利用其便携终端(包括个人计算机或PDA)来检索上述管理服务器中寄存的其中一个备注图像并获取该希望的备注图像。在此情况下，如图10所示，用户采用诸如便携终端的信息装置以尝试访问管理服务器(S11)并执行备注图像的检索(S12)。如下所述执行备注图像的检索：(1)对已经从用户便携终端等发送的所有备注图像进行检索，以便将在便携终端上显示检索结果；或者(2)通过利用与发送的备注图像相关联并与其同时发送的附加信息或者通过字符识别从附加信息转换的字符信息作为关键字来执行检索，从而抽取检索结果。因此，已经由管理服务器检索并抽取的备注图像信息将从管理服务器分配到用户的便携终端等。结果，用户可以通过其终端获取希望的备注图像(S13)。

此外，根据图11所示的流程图，管理服务器中累积的备注图像均转换成用作检索关键字的字符信息。具体地，便携终端或管理服务器选出多个累积的备注图像中的一个预定备注图像(S21)。随后，执行所选的备注图像的字符识别(S22)以从该备注图像包括的字符信息中生成文本信息。由此生成的字符信息(文本)被寄存在管理服务器的累积部分中(S23)。

当管理服务器执行一系列步骤S21至S23时，这可以利用一批处理系统来自动执行。而且，当便携终端执行该系列步骤时，根据从备注图像转换的字符信息的识别结果，采用字符信息识别服务器来生成字符识别候选格栅。在此情况下，图11所示的流程图被配置成包括另外一个步骤，即利用字符识别候选格栅来确定正确的候选。以此方式，在步骤S11至S13的备注图像检索流程中可以有效地利用从预定备注图像中生成的字符信息。

在上述实施例的各备注图像管理装置中，可以累积大量由便携终端(例如便携电话、PHS等)获取的备注图像并利用信息装置(例如便携终端、计算机等)按照需要从累积的备注图像中检索和获取所需的备注图像。

而且，如果以按每个用户，即利用用户的便携电话的电话号码来分类和管理备注图像的方式来配置备注图像管理装置，则当多个用户共享备注图像信息时可以容易地揭示和识别出任何备注图像的呼叫发起者。

而且，如果以根据从任何备注图像抽取的字符信息来分类和管理该备注图像的方式来配置该备注图像管理装置，则由于可以容易和快速地执行备注图像的管理，所以可以从该备注图像自动获得检索关键字。

此外，如果备注图像管理装置配备有因特网检索功能部分，该部分适于根据预定的备注图像中的字符信息和主页的抽取信息来访问该主页，那么用户能够容易地获取与备注图像相关联的各种信息。

尽管以上已说明了本发明的优选示例性实施方案，但应该理解，在不超出本发明范围的情况下，本领域的普通技术人员可以通过适当的修改来获得本文所述发明的进一步调整。因此，尽管已经对实施本发明的装置、系统和方法的优选构造进行了说明，但应该理解，在不超出本发明范围的情况下，这些装置、系统和方法可以采用各种构造和配置。

Claims (18)

1.一种可连接到能够操作备注图像的信息装置的备注图像管理装置，该管理装置包括：

备注图像累积部分，适于累积备注图像；

备注图像检索部分，适于从所述累积的备注图像中检索一预定备注图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

字符信息识别部分，适于从所述备注图像中识别并抽取字符信息；

备注图像分配部分，适于将由所述备注图像检索部分检索的所述备注图像或由所述字符信息识别部分抽取的所述字符信息分配到发送请求的所述信息装置；和

因特网检索功能部分，适于根据一预定备注图像中的字符信息来访问因特网上的主页并抽取所述主页上的信息作为一备注图像，其中所述备注图像累积部分适于累积由所述因特网检索功能部分获得的所述备注图像。

2.根据权利要求1所述的备注图像管理装置，其中所述备注图像累积部分适于分类并累积所述便携终端的每个用户的所述备注图像。

3.根据权利要求1所述的备注图像管理装置，其中所述备注图像累积部分适于根据由所述字符信息识别部分抽取的所述字符信息来分类并累积所述备注图像。

4.根据权利要求1所述的备注图像管理装置，进一步包括字符信息存储部分，适于以与所述备注图像对应的方式，在其中存储由所述字符信息识别部分抽取的所述字符信息。

5.根据权利要求1所述的备注图像管理装置，进一步包括适于从由所述备注图像累积部分累积的所述备注图像中抽取图形信息、表格信息或照片信息的部分。

6.根据权利要求1所述的备注图像管理装置，进一步包括适于对由所述备注图像累积部分累积的指定的备注图像进行二值化或者将所述指定的备注图像转换成用于产生其压缩图像的微缩文件的部分。

7.根据权利要求1所述的备注图像管理装置，其中所述字符信息识别部分具备基于所述备注图像内的所述字符信息的识别结果来生成字符识别候选格栅的功能。

8.根据权利要求1所述的备注图像管理装置，进一步包括：管理服务器，包括所述备注图像累积部分、所述备注图像检索部分和所述备注图像分配部分；和备注图像识别服务器，包括所述字符信息识别部分，并且所述备注图像识别服务器可通过通信线路连接到所述管理服务器。

9.一种备注图像管理系统，该系统包括：

(a)包括一便携终端的信息装置；和

(b)可通过通信线路连接到所述信息装置并能够从所述信息装置中交换、累积和检索一备注图像的服务器，所述服务器包括：

(i)备注图像累积部分，适于累积备注图像；

(ii)备注图像检索部分，适于从所述累积的备注图像中检索一预定备注图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

(iii)字符信息识别部分，适于从所述备注图像中识别并抽取字符信息；和

(iv)备注图像分配部分，适于将由所述备注图像检索部分检索的所述备注图像或由所述字符信息识别部分抽取的所述字符信息分配到发送请求的所述信息装置；

其中所述服务器包括：管理服务器，包括所述备注图像累积部分、所述备注图像检索部分和所述备注图像分配部分；和备注图像识别服务器，可通过通信线路连接到所述管理服务器，并且所述备注图像识别服务器包括所述字符信息识别部分。

10.根据权利要求9所述的备注图像管理系统，其中所述信息装置包括光图像拾取部分，该光图像拾取部分能够获取一图像作为包含文本信息的备注图像。

11.根据权利要求9所述的备注图像管理系统，其中所述信息装置获取由所述备注图像识别部分识别的所述字符信息，并且所述信息装置包括适于纠正或改变所述获取的字符信息的字符纠正或改变部分，并且其中所述信息装置适于将所述纠正或改变的字符信息分配到所述服务器，以便所述服务器可以累积所述纠正或改变的字符信息。

12.根据权利要求11所述的备注图像管理系统，其中所述服务器适于使用所述纠正或改变的字符信息作为关键字，来从一组累积的备注图像中检索一备注图像，并将字符信息或一组备注图像作为检索结果发送到所述便携终端。

13.根据权利要求9所述的备注图像管理系统，其中所述信息装置适于利用从所述服务器获取的所述备注图像中抽取的所述字符信息作为参数，执行一预定呼叫发起、统一资源定位符连接或所述信息装置中的存储器寄存。

14.根据权利要求9所述的备注图像管理系统，其中所述信息装置具备将所述备注图像与所述备注图像的类型信息一起发送的功能。

15.根据权利要求9所述的备注图像管理系统，其中所述信息装置适于将所述备注图像和与所述备注图像相关联的关键字项一起发送到所述服务器。

16.一种利用信息装置和管理服务器来管理备注图像的备注图像管理方法，其中该信息装置能够操作所述备注图像，该管理服务器可通过通信线路连接到所述信息装置并能够针对包括从所述信息装置发送的备注图像在内的所述备注图像来执行交换、累积和检索，所述方法包括以下步骤：

(a)将所述备注图像从所述信息装置发送到所述管理服务器；

(b)累积所述发送的备注图像；

(c)从所述累积的备注图像中检索一预定图像，以响应来自所述信息装置或所述信息装置以外的其他信息装置的请求；

(d)根据需要，在步骤(b)或步骤(c)之前或之后，从所述备注图像中识别并抽取字符信息；和

(e)将所述检索的备注图像或所述识别和抽取的字符信息分配到所述信息装置；

其中所述管理服务器进一步能够根据一预定备注图像中的字符信息来访问因特网上的主页并抽取所述主页上的信息作为一备注图像。

17.根据权利要求16所述的备注图像管理方法，其中，在将所述备注图像发送到所述管理服务器的过程中，也将附加的检索信息发送到所述管理服务器。

18.根据权利要求17所述的备注图像管理方法，其中所述附加信息是从由位置信息、所述备注图像的开放条件、所述备注图像的类型和所述备注图像的发送日期与时间所组成的组中选出的至少一个信息。

Images