CN101228522A - 用于处理信息的方法和设备 - Google Patents

Abstract

本发明涉及用于在客户端设备中处理信息的方法和布置。所述方法包括在客户端设备中形成来自一个外部信息源的关于所述客户端设备的信息记录，基于手动的或自动的定界从所述信息记录形成定界信息记录，并且显示与所述定界信息记录相关的一个或多个结果信息内容。

Description

用于处理信息的方法和设备

技术领域

本发明涉及在客户端设备中处理信息。

背景技术

例如，大量的信息存储在诸如因特网的信息网络中。大量的信息为将要使用的信息搜索例程和程序设置严格的需求。基于词搜索的搜索引擎当前工作得相当快并且另外也很先进。接下来要考虑的一个显著的局限性是对仅文本模式的搜索的搜索定界(delimination)。

在专利公开FI 105,954和US 5,933,829中描述了用于改进搜索的开发设计。这些公开文本描述了通过在打印介质中形成的搜索代码的方式搜索预定的信息内容，所述打印介质可以是文本或图像模式。

可以从所谓的智能杂志知道相应的应用，所述应用基于这样的事实：移动站用于描述形成于打印介质中的智能帧广告，通过链接表的方式形成照片的搜索条件，并且该搜索条件用于建立到特定的预定网站的连接，该网站将在所述移动站的显示器上显示。

然而，上述布置仍然几乎没有从大量信息中检索信息的可能性。

发明内容

本发明的一个目的是提供一种方法和实现该方法的装置来解决上述问题。本发明的所述目的通过一种在客户端装置中处理信息的方法来实现。所述方法包括从外部信息源在客户端设备中形成关于所述客户端设备的信息记录，使用手动或自动定界从所述信息记录形成定界信息记录，并且在客户端设备中显示与所述定界信息记录相关联的一个或多个结果信息内容。

本发明还涉及一种处理信息的装置。所述装置包括：用于在客户端设备中从外部信息源形成关于所述客户端设备的信息记录的装置，用于使用手动或自动定界从信息记录形成定界信息记录的装置，和用于显示与所述定界信息记录相关联的一个或多个结果信息内容的装置。

本发明进一步涉及用于客户端设备的子配置结构，其包括用于选择信息记录作为输入数据的装置。所述子配置结构还包括用于使用手动或自动定界从信息记录形成定界信息记录的装置，和用于示出与所述定界信息记录相关联的一个或多个结果信息内容的装置。

本发明还涉及一种移动站，其包括形成用于信息记录的装置。所述移动站包括用于使用手动或自动定界从信息记录定义定界信息记录的装置，和用于示出与所述定界信息记录相关联的一个或多个信息内容的装置。

本发明的优选实施例在从属权利要求中公开。

本发明涉及在客户端设备中操作或处理信息。在一个实施例中，该客户端设备与信息网络进行通信，信息网络是指公用或受限信息网络。例如，公用信息网络的一个例子是因特网，而受限信息网络例如可以是指博物馆的特定内部信息网络。

客户端设备涉及这样一种设备，其能够与关于所述客户端设备的独立信息网络进行通信。所述客户端设备可以包括电子、化学和生物设备部分。在一个实施例中，所述客户端设备是移动站，但是它也可能例如涉及便携式计算机或信息表面，例如固定在衣服上的智能部件等。很明显，当所述客户端设备是移动电话时，可以在所述客户端设备和信息网络之间提供服务于所述移动电话的移动网络。

在本发明中，所述子配置结构例如是指由计划通过移动电话使用的设备部分所形成的实体，以实现特定的功能。

在根据本发明的解决方案中，客户端设备中形成信息记录。在一个实施例中，所述信息记录是图像文件，或者被称为冻结帧的事物，其可以用例如JPEG(联合图像专家组)文件存储格式以数字模式进行存储。代替常规的可视化记录，所述图像记录例如可以是用温度记录照相机从辐射红外线辐射的信息源所捕获的可视化记录。此外，所述信息记录可能是视频捕获，其例如可以以MPEG(运动图像专家组)格式或例如音频文件进行存储。上述信息记录的模式仅仅是以例子进行说明，而不对本发明进行限制。换句话说，除可见光之外，将要被存储的信息例如可以是电磁、磁或者重力信息。

在本发明中，定界信息记录基于用户实现的手动定界或设备执行的自动定界从信息记录而形成。例如，当涉及冻结帧时，用户可以从所述冻结帧分配所需要的对象并且对其定界所述冻结帧。当涉及视频记录时，用户可以通过将最初捕捉的时间范围集中和/或限制到特定部分来定界最初的记录。相应地，可以限制例如音频捕捉的时间范围。

在本发明的一个实施例中，从连接到客户端设备的信息网络检索与所定界信息记录相对应的信息内容。所述客户端设备可以通过固定连接或专门针对连接所建立的连接与所述信息网络进行通信。在一个实施例中，用户可以在执行搜索前定义例如特定产品组，根据所定界的信息记录的搜索集中于所述特定产品组。在一个实施例中，用户还可以选择信息网络、算子或搜索程序以用于执行搜索。例如移动电话之类的客户端终端可以执行关于信息记录的质量是足够以允许基于其执行搜索还是客户端设备用户必须形成新信息记录的初步评估。

在一个实施例中，定界信息记录连同可能由用户所定义的附加定义一起被被传送到与客户端设备相连的服务器计算机。例如，服务器可以被用来使用模式识别技术从定界信息记录识别一个或多个图像对象。例如，可以通过将图像文件的部分与预定图像模式进行比较来识别所述图像对象。可选择地，所述图像文件可以被转变成数字数据并且可以数字地执行所述比较。基于图像对象的识别，所述服务器可以形成例如要被馈入到搜索引擎中的文本模式中的搜索词，并且所述搜索词进一步被用于在信息网络中执行的搜索中。

代替所述服务器，特定的客户端设备也可以用于执行图像对象的识别。因此，所述设备的用户采用例如智能代码的图像，即，二维矩阵代码。所述矩阵代码在客户端设备中分析，并且作为结果获得多通道图像分析。这例如意味着代码或图像自动在很多层次上提供信息，其中所述信息在设备中示出，或者所述设备将信息独立地发送到其它设备，例如与客户端设备通信的移动站或计算机。可选择地，在客户端设备中形成操作菜单作为图像分析的结果。所述操作菜单向用户示出，并且用户可以选择所需要的操作。所述操作菜单可包括各种功能。例如，客户端设备可以从信息网络搜索与所描述对象相关联的信息，或者客户端设备可以执行操作功能，例如，执行存储在设备中的功能。该实施例提供这样的优点，当与图像识别相关联的所有任务在客户端设备中执行时，那么能够执行例如与银行服务相关联的安全性关键的功能。另一个优点是信息处理过程是用户特定的，由此用户能够对提供什么信息施加影响，并且不必受到外部服务器提供的有限信息量的束缚。

包括作为搜索结果所获得的信息内容的结果组被显示给客户端设备的用户。例如，所述结果组可以是网页链接、音频或视频文件、或者操作应用程序。设备的用户可以从设备的显示中选择需要被更仔细检查的信息内容，或者用户可以例如通过定义新搜索词、产品组或其它限制来指定所述结果组。信息可以在特定客户端设备或连接到所述客户端设备的外围设备中示出。例如，当涉及移动电话时，所述外围设备可以是连接到所述移动电话的电视机，使得能够显示所检索的搜索结果组。在本发明的描述中，所述客户端设备涉及由客户端设备和可能的外围设备所形成的实体。

根据本发明的方法和设备可以明显比现有技术更为灵活地被用来从信息网络检索信息。

附图说明

将参照附图通过优选实施例，对本发明更详细地进行说明，其中：

图1示出了所述方法的实施例，并且

图2示出了所述设备布置的实施例。

具体实施方式

接下来，将参照附图对本发明进行解释。图1示出了所述方法的实施例。

在方法的开始，使用客户端装置从信息源形成信息记录。例如，从其形成信息记录的信息源可以是固定对象、移动对象或声音对象。包括在所述信息记录中的信息并不局限于声音波或可视光，而是可以涉及要被存储的任何类波辐射。

在一个实施例中，要被存储的对象是固定对象，要被使用进行存储的装置例如是提供有照相机的移动电话。例如，所述装置也可以是数字照相机、便携式计算机或相应设备，其能够被用来以数字模式形成对象的信息记录，例如图像文件。

在步骤100，客户端设备被用来捕捉所需要对象的自由定界图像，并且形成该图像的图像文件。自由定界意味可以从所选择的对象任意创建图像，而不需要就所述图像应当如何定界进行任何预定定义。因此，自由定界例如不同于根据现有技术的智能帧应用，在现有技术中，用红色定义的区域显示在移动电话的显示器上，智能帧要与所述显示器对准。图像文件由所提供的对象形成，其中所述图像文件可以用例如JPEG格式的公知图像文件格式进行显示。

在步骤102，按照用户需求对信息记录进行定界。关于图像文件，定界意味着在原始图像文件的一部分上聚焦图像文件，并且从聚焦的部分创建新的定界图像文件。例如，可以认为，在城市中部描绘“建筑”、“雕像”或“汽车”作为原始图像文件中的图像对象。设备的用户对所述“汽车”执行定界，其形成定界图像文件。在一个实施例中，在设备中自动处理对准。例如，所述设备可以通过模式识别技术从所形成的信息记录定位一个或多个图像对象，并且向用户显示所定位的图像对象以供其选择。

如果信息记录是视频记录，则限制可以是指图像文件的聚焦以及文件的时间范围的限制。例如，从20秒长的视频片断，可以从所述片断中的15-18秒的时间间隔捕获3秒长的部分。相应地，如果信息记录是声音文件，例如，15秒的声音文件可以定界成5秒的部分。

在方法步骤104，估计信息记录是否满足对其设置的质量标准。优选地，步骤104在客户端设备中执行，由此客户端设备可以预先阐明记录质量是否足够好，以使得它可以在搜索中有效利用。关于图像文件，质量标准可以与图像的独特性或亮度相关联，而在声音文件中，质量标准可以与例如音量或与背景噪音或干扰相比占优势的声音实体的音量相关联。客户端设备可以通过预定质量标准的方式立即决定信息记录是满足对其设置的质量标准还是用户可能应当可能再次形成(定界)信息记录。

在步骤106，检索与定界信息记录相关联的信息内容。在一个实施例中，用户可以定义搜索特征，其与定界信息记录一起使用来执行搜索。例如，所述搜索特征可以涉及产品组，例如“厨房用具”。在一个实施例中，用户例如可以定义将在其中执行搜索的信息网络或算子。

在一个实施例中，客户端设备将定界信息记录连同可能由用户定义的搜索特征一起发送到与所述客户端设备进行通信的服务器计算机。应用公知的模式识别或图像识别原理，服务器可以从所述信息记录识别一个或多个图像对象，并且在记录的基础上形成一个或多个搜索特征，例如搜索词。基于图像形成的搜索词能够连同用户定义的搜索词一起被用于从信息网络检索信息内容。在一个实施例中，不使用服务器来形成检索词，作为代替，定界图像信息被作为一个搜索标准随同由设备/用户形成的一个或多个可能搜索词而被传送。

在步骤106，特别地，基于信息记录形成搜索词自然不被限制于某一个位置，这意味着，明显地，也可以例如在特定客户端设备中形成搜索词。可以使用现有技术的因特网浏览器来执行从信息网络检索信息内容。

在步骤108，在终端中显示所找到的结果信息内容。在一个实施例中，移动电话的显示器显示一个或多个网络链接，用户可以从所述网络链接选择需要的一个以进行更紧密的检查。检索的信息内容也可以使用声音或作为声音和图像(冻结的或视频)的结合进行显示。在一个实施例中，结果信息内容是可操作的应用程序。例如，如果用设备描绘移动对象，则用户可以请求设备显示允许确定移动对象的方向和速度的应用程序。

在一个实施例中，用户可以在步骤108通过进一步的口头反馈或例如口头的附加检索词来对结果组进行定界。

在所述方法的第二实施例中，在终端中执行与图像分析相关联的功能。因此，在终端中执行图像捕捉、图像/模式识别和基于图像中所识别的对象形成操作功能。

在一个实施例中，用户可以例如从两个图像对象，例如从一个图像和一个文本部分捕获图像，客户端设备例如从其形成二维矩阵代码。在终端中定义的操作可以用于自动或经用户批准而将所创建的代码从所述终端传送另一个终端，在这种情况下，纯代码可以在背景中显示大量信息(图像/文本)。

在另一个实施例中，当在商店中购物时，用户可以描绘每一个产品的智能码，并且当描绘了所有产品时，则形成所读取的所有代码的总和码。所述总和码可以在终端收到帐单时被显示在收银台上。可以自动执行或者根据用户的选择来执行上述代码的形成。

在根据实施例的解决方案中，客户端设备的用户被提供以如何利用描绘信息的大量选择。与图像被发送到外部服务器而用户实际上没有机会影响如何处理从图像所读出的信息的解决方案相比，作为代替，服务器基于图像执行预定的(搜索)操作。如果已经在终端中执行了图像分析，则用户被提供以明显的机会来对用户从图像检索的信息种类施加影响。当已经在终端中执行了图像的分析并且用户被示以操作可能性，那么用户可以选择所需要的操作，并且不局限于服务器或因特网服务器所提供的搜索组。

在一个实施例中，可以以这样的方式利用读取技术，从而用户能够利用客户端设备读取货单上的条形码/矩阵码，在这种情况下，终端自动例如提供机会以切换到银行服务来支付货单。在另一个实施例中，终端存储信息，但是不对其进行支付。在第三实施例中，终端的用户例如可以将货单传递到银行以作为移动操作来执行，或者用户可以将货单传递到另一个终端来支付货单。用户也可以例如基于货单上的信息对货单进行询问。

在一个实施例中，用户在家具店中捕捉所需要的睡椅的图像。作为一个功能，设备可为用户提供检查该睡椅与用户的卧室实际结合的可能性。用户可将所捕捉的睡椅图像连接到纸智能码，其在几何上正确地定义所述睡椅在所需环境中的位置。用户可以在家中将所述纸智能码放置在房间的地板上，并且捕捉房间的图像，在这种情况下，所述睡椅被放置在所述智能码所指示的位置上并且能够根据需要旋转。

考虑到以用户为中心，如果需要，用户可以对把信息发送到哪里和对分析结果做什么处理施加影响。

图2通过例子示出布置的实施例。在图2所示的实施例中，在信息记录处于冻结帧模式的情况下对本发明进行描述，但是本发明也能应用于例如移动图像或声音记录模式。

所述装置包括移动站200、无线电网络220、服务器计算机240和数据信息网络260。接下来，关于所述布置和属于所述布置的每个子综合体(sub-complex)200、220、240和260，仅解释对描述本发明而言必要的部件。很明显，所述布置和每个子综合体可包括其它设备部分。

移动站200可包括用于创建图像文件的装置202。所述装置例如可以是指集成到所述移动站的照相机或者数字照相机、望远镜、显微镜、或者例如利用公知的传输协议与移动站进行通信的RFID标识。

照相机202捕捉的图像可以被传送到单元204，单元204提供用户接口以及移动站的互相通信。用户接口是指例如移动电话的键盘、麦克风和扩音器。通信连接又是指例如实现无线电通信的装置部件。在一个实施例中，用户可以利用用户接口按照需要来定界用照相机202所捕捉的原始信息记录，并由此形成定界信息记录。依照另一个实施例，客户端设备自动形成定界信息记录。所述信息记录和/或定界信息记录可以例如被存储在移动电话的存储器中，为了简要，其没有在图2中显示。用户接口204也允许用户在执行搜索时馈送将与定界信息记录结合使用的所需检索词。

图2图示了移动站200如何通过无线电接口(RAD)与无线电网络220中包括的基站222进行通信。无线电连接可能包括固定数据连接，例如因特网连接。因此，可能在例如数据网络中运行的移动站和服务器之间分散所述装置所需的功能。实现针对移动站200的无线电连接的基站222由无线电网络控制器224进行控制。

无线电网络220例如可以通过固定数据连接与服务器计算机240的连接装置242进行通信。

在图2所示的实施例中，在移动站200上捕捉的图像通过无线电网络传送到服务器计算机240。在服务器240中，所述图像被传送到用于从所述图像识别一个或多个图像对象的装置244。用于识别图像对象的装置244可以使用例如模式识别技术，所述模式识别技术通过利用表246中容易地存储的对象模式来进行识别。可以通过将所捕捉的图像对象模式与容易存储的图像对象模式进行比较，或者通过对所捕捉的图像进行数字化以及通过数值地执行相对于预先存储的数值数据的比较来执行所述模式识别。关于本发明，如何从所捕捉的图像识别一个或多个图像对象并不重要，原因在于可以利用公知的现有技术的解决方案。

基于图像对象的识别，识别装置244可形成一个或多个搜索词，基于所述搜索词，可以从信息网络260检索与所述图像对象相关的信息。服务器计算机可在执行搜索前向客户端设备200的用户显示所形成的搜索词。由此，用户可以有机会通过移除/添加搜索词来修改列表。

服务器计算机240例如可包括因特网浏览器248，搜索词可存储在所述因特网浏览器248中并且被转发到连接装置242从而在数据网络中执行搜索。作为对所述搜索的答复，可提供网页链接列表，其可以通过无线电网络220从服务器240被传送到终端200，以显示在终端200的显示器206上。

尽管图2示出了在服务器计算机240中形成搜索词和处理图像，所述图像处理以及尤其是模式识别也可以在客户端设备中执行，从而分离的服务器计算机并不是必需的。

本发明可以例如通过软件、作为ASIC(专用集成电路)、或者通过分离的逻辑部件来实现。

对于本领域的技术人员而言显而易见的是，作为技术处理，可以以各种方式来实现本发明的基本理念。因此，本发明及其实施例并不局限于上述的示例，它们可以在权利要求的范围内进行变化。

Claims (10)

1.一种用于在客户端设备中处理信息的方法，其中所述方法包括在所述客户端设备中形成(100)来自外部信息源的关于所述客户端设备的信息记录，其特征在于，

使用手动或自动定界从所述信息记录形成(102)定界信息记录，和

在所述客户端设备中显示(106)与所述定界信息记录相关联的一个或多个结果信息内容。

2.如权利要求1所述的方法，其特征在于，

从与所述客户端设备进行通信的信息网络检索一个或多个结果信息内容。

3.如权利要求2所述的方法，其特征在于，

选择来自所述客户端设备的用户的一个或多个搜索特征作为输入数据，

基于被选择作为输入数据的一个或多个搜索特征和所述定界信息记录，从所述信息网络搜索一个或多个结果信息内容。

4.如权利要求2所述的方法，其特征在于，

从客户端设备的用户所述定义的信息网络和/或使用用户定义的搜索手段搜索一个或多个结果信息内容。

5.如权利要求1所述的方法，其特征在于，

估计所述信息记录的质量是否满足预先对其设置的质量标准，

如果所述信息记录的质量满足对其设置的质量标准，则显示与所述信息记录相关联的一个或多个结果信息内容。

6.如权利要求1所述的方法，其特征在于，

向客户端设备的用户显示基于所述客户端设备中的定界信息记录而形成的一个或多个搜索特征，

选择从客户端设备的用户指定的搜索特征组作为输入数据，其中至少一些搜索特征与基于所述定界信息记录而形成的一个或多个搜索特征相比有所改变，

基于指定的搜索特征组执行对结果信息内容的搜索。

7.一种用于处理信息的设备，其包括用于在客户端设备(200)中形成(202)来自外部信息源的关于所述客户端设备的信息记录的装置，其特征在于，所述设备包括：

用于使用手动或自动定界从所述信息记录形成定界信息记录的装置，

用于显示与所述定界信息记录相关联的一个或多个结果信息内容的装置。

8.一种电子设备的子配置结构，其包括用于选择信息记录作为输入数据的装置，其特征在于，所述子配置结构包括

用于使用手动或自动定界从所述信息记录形成定界信息记录的装置，

用于显示与所述定界信息记录相关联的一个或多个结果信息内容的装置。

9.一种移动站，其包括用于形成信息记录的装置，其特征在于，所述移动站包括：

用于使用手动或自动定界从所述信息记录形成定界信息记录的装置，

用于显示与所述定界信息记录相关联的一个或多个信息内容的装置。

10.如权利要求9所述的移动站，其特征在于，所述移动站包括：

用于选择来自客户端设备的用户的一个或多个搜索特征作为输入数据的装置，

基于被选择作为输入数据的一个或多个搜索特征和所述定界信息记录，从与所述移动站连接的信息网络搜索一个或多个结果信息内容的装置。

Images