CN103649947A - 用于支持所创建图像中包括的对象的收集的方法、终端以及计算机可读记录介质 - Google Patents

Abstract

根据本发明的一个方面，本发明涉及一种用于支持对所创建图像中包括的对象的收集的方法，其中该方法包括以下步骤：（a）通过使用终端创建对象的图像；（b）使用关于对象的身份的识别信息、关于创建图像的地点的识别信息以及关于创建图像的时间的识别信息，来自动创建并在终端的屏幕的第一区域上提供符合一种用语言的语法的组合文本作为该对象的自动注释，并自动获得与所识别对象相对应的缩略图且在终端的屏幕上的第二区域上显示该缩略图；以及（c）存储被提供到第一区域和第二区域的数据以收集对象。

Description

用于支持所创建图像中包括的对象的收集的方法、终端以及计算机可读记录介质

技术领域

本发明涉及用于支持对所创建的图像中包括的对象的收集的方法、终端以及计算机可读记录介质。更具体地涉及用于通过以下步骤支持关于同一对象的多用户体验以及使它们的信息非常容易地被创建和非常高效地被共享的方法、终端以及计算机可读记录介质：识别特定方法所创建的图像所包括的对象；通过使用关于对象的身份的识别信息、创建该图像的地点的识别信息和创建该图像的时间的识别信息的至少一个，自动创建并在终端的屏幕的第一区域上提供按照一种语言在语法上组合的句子作为该对象的自动注释；自动获得与所识别的对象相对应的缩略图并在终端屏幕的第二区域上显示与所识别的对象相对应的缩略图；如果选择了收集按钮，则将第一和第二区域上所提供的数据存储到存储空间上，由此执行对象的收集。

发明背景

近年来，由于因特网的广泛使用，已经常见提供被转换成数字形式的信息，该信息曾经以诸如书籍之类的任何印刷材料形式提供。由于因特网和3G网络或其它高速通信系统的发展，被转换成数字数据的信息可被许多用户共享并且被实时地传输，所以相比于相对不利于信息共享和传输的印刷材料，被转换成数字数据的信息被广泛地使用。

具体而言，近年来已经引入了通过用于增强现实（AR）的方法来提供若干形式信息的技术，该方法在由用户终端实时拍摄的输入图像上组合计算机图形（CG）、文本等附加信息进行显示。根据AR技术，该技术可为用户提供更好的环境，因为它可在呈现用户看到的真实世界的画面上，可视地重叠提供所需信息。

当通过使用AR来提供和共享若干信息源时，实际上难以确定由用户终端拍摄或输入的图像上包括的所有对象上的信息并有效地存储该信息。即使用户想要仅差别地存储具有相对较高兴趣（或高重要性）的对象上的信息，系统地记录和存储该信息也是复杂和麻烦的。因此，的确存在引导用户的更主动参与的某种程度的限制。

发明内容

要解决的技术问题

本发明的目的是解决上述的所有问题。

本发明的另一目的是使用设定的图像中出现的对象的信息——包括对象的身份、创建图像的地点以及创建图像的时间等等——来完成自动注释，自动采集和显示包括与对象相对应的图像缩略图等等的数据，以及通过简单地选择收集按钮来系统地存储，从而用户无需对用户周边的许多对象的各种信息逐一进行编辑，方便且快速地进行存储。

本发明的又一目的是允许用户基于在所创建图像中包括的对象的信息来共享其它用户的收集信息，由此向用户提供适合该用户偏好的信息。

用于解决技术问题所采用的技术方案

用于实现上述目的的本发明的代表性结构如下。

根据本发明的一个方面，提供了一种用于支持所创建图像中包括的对象的收集的方法，该方法包括以下步骤：（a）通过使用终端来创建对象的图像；（b）若创建了所述图像，则为了支持对所述图像中包括的对象的收集，通过使用关于对象的身份的识别信息、创建图像的地点的识别信息以及创建图像的时间的识别信息中的至少一个，自动创建并在终端的屏幕的第一区域上提供符合一种语言的语法的组合句子作为该对象的自动注释；以及自动获得与所识别对象相对应的缩略图并在终端的屏幕上的第二区域上提供与所识别对象相对应的缩略图；以及（c）如果选择了收集按钮，则将第一和第二区域上提供的数据存储到存储空间上，由此执行该对象的收集。

根据本发明的另一方面，提供了一种用于支持所创建图像中包括的对象的收集的终端，该终端包括：图像拍摄部分，用于创建对象的图像；自动注释创建部分，用于，若所述图像拍摄部分创建了所述图像，则为了支持对所述图像中包括的对象的收集，通过使用关于对象的身份的识别信息、创建图像的地点的识别信息以及创建图像的时间的识别信息的至少一个来自动创建并在终端的屏幕上的第一区域上提供符合一种语言的语法的组合句子作为该对象的自动注释；对应性图像选择部分，用于，若所述图像拍摄部分创建了所述图像，则为了支持对所述图像中包括的对象的收集，自动获得与所识别对象相对应的缩略图并在终端的屏幕上的第二区域上提供与所识别对象相对应的缩略图；以及收集执行部分，用于，如果选择了收集按钮，则将第一和第二区域上提供的数据存储到存储空间上，由此执行所述对象的收集。

除此之外，还提供用于实施本发明的其它方法、系统、以及计算机可读记录介质，其用于存储执行上述方法的计算机程序。

发明效果

根据本发明，可通过使用关于所创建图像中包括的对象的身份、创建该图像的地点、创建该图像的时间等等的信息来自动完成符合一种语言的语法的组合句子，并且自动显示与对象相对应的缩略图，由此允许用户不需要复杂地逐一进行编辑，非常简便和高效地收集关于用户想要的对象。

根据本发明，用户可非常容易地收集分散在用户周围的多个对象，更具体而言，如果用户朝着用户周围的对象按下拍照片按钮，然后以自动提供的自动注释和自动图像为背景再次按下收集按钮，（简言之，用户仅需按下两次按钮），则该用户可系统地收集关于该对象的信息，并且这可导致用户的更主动参与。

此外，根据本发明，用户可非常容易地执行对多个对象的收集，并且通过关于这些收集的信息的爆炸式增多，更准确地获取关于多用户之间的关系信息，从而构建真实的社交网络。

附图说明

图1是示例性地表示根据本发明的一实施例的终端的内部配置的框图。

图2是用于解释在本发明的一实施例中的用于获得对象中包括的图像的过程的图。

图3是用于解释在本发明的一实施例中的用于显示自动注释和缩略图的过程的图。

图4是用于解释在本发明的一实施例中的执行对图像的收集的过程的图。

图5是用于解释在本发明的一实施例中的管理所收集图像的过程的图。

图6是用于解释在本发明的一实施例中的用于编辑对象的自动注释的过程的图。

图7是用于解释在本发明的一实施例中的用于编辑对象的缩略图的过程的图。

具体实施方式

下述本方面的详细描述参考示例性地图示出能实现本发明的特定实施例的附图来进行。足够详细地描述了这些实施例以使本领域普通技术人员能实施本发明。应理解，本发明的各个实施例虽然不同，但不一定是互斥的。例如，本文中结合一个实施例描述的特定特征、结构或特性可在不偏离本发明的精神和范围的情况下在其它实施例中实现。此外，应理解，可在不偏离本发明的精神和范围的情况下，修改所公开的每个实施例内的各个要素的位置或布置。因此，以下详细描述不应按照限制性意义来理解，并且本发明的范围仅通过适当解释的所附权利要求书以及权利要求书被赋予的等价物的完整范围来限定。在附图中，在若干视图中，相同的附图标记指示相同或相似的功能。

下面，通过参照附图来详细说明本发明的优选实施方式，以使本发明所属技术领域的普通技术人员能容易实施本发明。

[本发明的优选实施方式1]

本文中的“收集（collection）”可被定义为收集和存储以下数据：使用关于出现在图像中的特定对象的包括类型、属性等身份的信息、关于包含该对象的图像的拍摄地点和时刻的信息的自动注释，以及与特定对象对应的缩略图。例如，如果特定图像中包括电影海报，则将该海报识别为收集的目标对象，收集并存储以下数据的一系列过程对应于对该电影海报的“收集”：根据与该海报相对应的电影的信息（包括其剧情简介、导演、领衔主演信息等）、拍摄包含该海报的图像的地点和时间的信息等，来组合的符合一种语言的语法的句子的注释以及海报的缩略图等。

图1是示例性地表示根据本发明的一实施例的终端的内部配置的框图。

如图1所示，根据本发明的一实施例的终端100可包括图像拍摄部分110、自动注释创建部分120、对应性图像选择部分130、收集执行部分140、通信部分150、数据库160以及控制部分170。

图像拍摄部分110可包括照相机，用于从外部拍摄图像并由此创建图像。此外，图像拍摄部分110可确定所创建的图像中是否包括作为收集目标的对象。

如果判断为所拍摄图像中包括作为收集目标的对象，则自动注释创建部分120可收集关于该对象的信息，并自动完成自动注释。作为一实施例，完成的自动注释包括：包含对象的类型、名称、应用等关于对象的身份的信息、关于拍摄具有该对象的图像的地点的信息、关于拍摄该图像的时间的信息等等。

此外，如果判断为所拍摄的图像中包括作为收集目标的对象，则对应性图像选择部分130可选择与该对象相对应的缩略图。关于其方法将在下文中描述。可将所选择的缩略图以及由自动注释创建部分120完成的自动注释自动一同显示在终端100的屏幕上。

在收集的目标对象的自动注释和缩略图已被自动提供在屏幕上的状态下，如果用户已选择了收集按钮，则收集执行部分140可通过将该自动注释和缩略图存储在下文说明的数据库160中来执行对象的收集。

另外，根据本发明的一实施例，可通过与社交网络服务（SNS）功能关联，来提供与收集了相同或相似于数据库160所存储的收集对象的对象的其它用户之间的关系信息。例如，可提供以下服务，如通过参考按照用户来所收集的对象的身份、对象所属的类别、收集对象的地点、收集对象的时间等等来获得与特定用户具有相同或相似偏好的其它用户的信息，并将该信息推荐给特定用户。为了提供这样的服务，终端100可附加地装备一模块，诸如单独的人际关系推断部分（未示出）。

图2是用于解释在本发明的一实施例的方法中的用于获得对象中包括的图像的过程的图。

通过参考图2，图像拍摄部分110所拍摄的图像200可被显示在终端100的屏幕上。如图2所示，显示了提供拍摄图像功能以供收集的图标220，如果用户选择图标220，则可拍摄显示在该屏幕上的图像200。

如果拍摄并存储了图像200，则图像拍摄部分110判断图像200中是否是包括能作为收集目标的对象210。对象210可由用户直接选择或通过对象识别技术、光学字符识别技术或条形码识别技术在图像200上自动选择。因为用户通常一般在将想要收集的对象210放置在接近图像200的中心处的同时来拍摄图像200，所以有可能将在图像200的中心处的对象210识别为收集目标，如图2所示。

另一方面，在本实施例中，说明其中书籍被识别为对象210（收集目标）的情况，作为示例。

图3是用于解释在本发明的一实施例中的用于在屏幕上自动显示自动注释和缩略图的过程的图。

参考图3，为了支持作为收集目标的对象210的收集，可使用关于对象210的身份的识别信息（即书籍的名称）、创建包括对象210的图像的地点的识别信息（即xx书店）以及创建图像的时间的识别信息（即2010年10月20日）中至少一个来自动地创建并在终端屏幕300的第一区域320上显示符合一种语言的语法的组合句子作为对象210的自动注释（即在2010年10月20日晚上在xx书店购买的《Dream Like Jobs and Achieve LikeGates（像乔布斯那样梦想，像盖茨那样成功）》），并且自动获得与所识别对象210相对应的缩略图并在终端屏幕300的第二区域330上显示与所识别对象210相对应的缩略图。

这时，屏幕300上的区域310中的能识别作为收集目标的对象的关于对象身份的识别信息之一，即书籍名称（即《Dream Like Jobs and AchieveLike Gates（像乔布斯那样梦想，像盖茨那样成功）》）也可与在区域320上的部分内容重复来进行显示。因为区域320可被视为用于显示关于对象的身份的识别信息的区域，所以该区域310和区域320也可被视为第一区域。简言之，第一区域可包括区域310和区域320。

在第二区域330上提供的缩略图可从所创建的图像直接获取，或在通过使用对象识别技术、光学符号识别（OCR）技术或条形码识别技术中的至少一种来识别所创建的图像中包括的对象后从与对象相对应的预存图像间接获取。

之后，如果简单地选择注册按钮340，则可将自动显示在屏幕300的第一和第二区域之上的收集页（包括名称310、自动注释320、缩略图330等等）存储在数据库160之上。

如果不正确地选择了图像200中的收集目标对象，则用户可敲击屏幕300上端的取消（CANCEL）按钮以返回至之前的画面。

如果正确选择了该收集目标对象，但未正确输入自动注释320或缩略图330或者需要追加内容，则用户可选择自动注释320或缩略图330显示在屏幕300上的区域来编辑自动注释320或缩略图330。下文中，将参考图6和7来进行详细说明。

图4是用于解释根据本发明的一实施例的方法中执行对象收集过程的图。

如果用户确认屏幕300上显示的收集页的数据（包括自动注释320、缩略图330等等），并且敲击注册按钮340来执行收集，则显示“正在收集”图像360，以将正在将收集页的数据存储到数据库160上的过程展示给用户。

如果完成了存储过程，则显示通知存储过程完成的屏幕400。有可能在屏幕400上显示与作为收集目标的该对象的缩略图330相对应的图像420。在顶部，显示了转换按钮410，其允许用户确认收集完成并移至另一屏。

图5是用于解释根据本发明的一实施例的管理所收集对象的过程的图。

通过参考图5，显示了“我的房间”即管理屏幕500，其中由特定用户收集的对象被显示为就好像书籍540陈列在书架上。此时，如果多个用户可访问数据库160，则可给每个用户分配虚拟空间，其对每个用户所收集的对象的数据进行管理。此外，为了数据的高效性和可访问性，所收集的信息可按用户分开并分别管理。

陈列在书架上的每本书籍540的图像对应于所收集的每个对象。如果所收集的每个对象是如图2所示的书籍，则书籍540的图像可以是书籍的实际封面，而如果对象是电影，则电影的海报等等可陈列在书架上。用户可敲击管理屏幕500上端的收集按钮510来观看以书架形式提供的管理屏幕500、或敲击概况按钮520来确认完成收集的用户的概况、关于该收集的详细信息等等。

如图5所示，管理屏幕500可将每个收集对象显示为书籍540形状的图标或表示每个收集对象的典型特征（对象名、执行收集的位置、执行收集的时间等等）的句子形式。可在敲击管理屏幕500的底部的图标形式按钮550或句子形式按钮560之后被选择，但不限于此。

图6是用于解释根据本发明的一实施例的方法中用于编辑对象的自动注释的过程的图。

参考图6，显示了屏幕600，在屏幕600上收集有用于进行新收集的关于对象的自动注释620和缩略图630的数据。在屏幕600上端，收集的对象的类型（或名称）和执行收集的地点被显示为代表信息610。如图3所示，在屏幕600的底部，显示了用于注册收集页的注册按钮650。

如果用户判断为在代表信息610中提供的执行收集的地点是错误的，敲击位于代表信息610右侧的区域来进行编辑，则显示如图6的第二个位置处所示的位置修正屏幕700。在位置修正屏幕700上，显示了能直接输入地点的输入按钮710、以在该位置周围注册的POI的列表作为候选进行显示的列表按钮720、以及能追加当前位置的当前位置信息730。

如果用户敲击输入按钮710来直接输入位置，则可在屏幕上显示能输入文字的键盘。此外，如果用户选择了列表按钮720上的特定项目并敲击它，则所选项目被应用于执行新收集的位置。

此外，如果用户敲击当前位置信息730来添加当前位置，则可使输入窗口740和地图750显示，在输入窗口740中可输入当前位置的名称、地址、电话号码等等，在地图750中以某种标尺显示当前位置。用户可确认本人在地图750上的位置，然后拖拽该地图以编辑该位置或以当前显示的地图上作为当前位置来向输入窗口740输入用户想要的位置信息。

如果输入完成，则通过用户编辑的位置信息出现在屏幕600的代表信息610上，并且包括在自动注释620中的执行收集的位置也可被修改然后再次显示。如上在图3中说明，无须赘述，用户可敲击显示自动注释620的屏幕区域，并直接编辑该自动注释620。

图7是用于解释根据本发明的一实施例的用于编辑对象的缩略图的过程的图。

如果屏幕上显示的收集目标对象的缩略图730有误，用户想要编辑，则用户可敲击显示该缩略图730的该屏幕区域或屏幕底部的编辑（EDIT）按钮740。如果用户敲击它，则显示图像编辑屏幕800以允许用户修改缩略图730。

在图像编辑屏幕800上，提供对象搜索按钮810，用户可利用该对象搜索按钮810来选择用于收集目标的对象类型，或直接输入收集目标对象的名称。如果用户选择该收集目标对象的类型或直接输入名称，并且敲击对象搜索按钮810，则搜索与用户输入的对象相对应的图像列表820并在屏幕上显示。

如果用户想要的缩略图在所搜索的列表820上存在，则用户可从列表820选择相应的图像来进行输入。如果没有搜索结果，则可提供标签输入窗口830以直接输入标签。

接下来，根据本发明的一实施例的通信部分150可执行允许终端100与外部设备通信的功能。

根据本发明，数据库160不仅仅是狭义的数据库的概念，而是广义的数据库的概念，其包括基于计算机文件系统的数据记录等等。根据该方面，必须理解，即使是简单的运算处理日志的集合，若能进行检索并从该集合提取数据，它也可被包括在本发明所说的数据库中。数据库160在图1中被示为如同被包括在终端100中，但在实现本发明的本领域普通技术人员需要时，数据库160也可能与终端100分开地配置，终端100用于支持对图像所包括的对象的收集。

此外，根据本发明的一实施例的控制部分170可执行控制图像拍摄部分110、自动注释创建部分120、对应性图像选择部分130、收集执行部分140、通信部分150以及数据库160之间的数据流的功能。简言之，根据本发明的控制部分170可控制来自/去往终端100的各组件或它们之间的数据流，以迫使图像拍摄部分110、自动注释创建部分120、对应性图像选择部分130、收集执行部分140、通信部分150以及数据库160来执行它们特有的功能。

根据本发明的上述实施例以可通过多种计算机装置执行的程序命令的形式来实现，并记录在计算机可读记录介质上。计算机可读介质可单独或组合地包括程序命令、数据文件和数据结构等。记录至该计算机可读记录介质的程序命令可以是针对本发明特别设计的组件，或可以是对计算机软件领域的本领域技术人员公知且可用的组件。计算机可读记录介质包括：磁性介质，诸如硬盘、软盘、磁带；光学介质，诸如CD-ROM和DVD；磁－光介质，诸如软光盘；以及特别设计用于存储和执行程序的硬件装置，诸如ROM、RAM和闪存。程序命令不仅包括通过编译器产生的机器语言代码，还包括可通过使用解释器等由计算机执行的高级代码。上述硬件装置可作为一个以上软件模块来工作以执行本发明的动作，反之亦然。

虽然根据具体结构要素等特定事项和受限实施例和附图，对本发明进行了说明，这仅仅是为了帮助对本发明的完整理解而提供的，本发明不限于上述实施例，本领域技术人员可根据上述记载对本发明作出多种改变和修改。

相应地，本发明的思想不应受限于所说明的实施例，并且所附权利要求书以及包括所附权利要求书的等同或等价物的所有事物都属于本发明的思想范畴。

Claims (21)

1.一种用于支持对所创建图像中包括的对象的收集的方法，包括以下步骤：

(a)通过使用终端来创建对象的图像；

(b)若创建了所述图像，则为了支持对所述图像中包括的所述对象的收集，通过使用关于所述对象的身份的识别信息、创建所述图像的地点的识别信息、以及创建所述图像的时间的识别信息的至少一个来自动创建并在所述终端的屏幕上的第一区域上提供符合一种语言的语法的组合句子作为所述对象的自动注释，以及自动获得与所识别对象相对应的缩略图并在所述终端的屏幕上的第二区域上显示所述缩略图；以及

(c)如果选择了收集按钮，则将所述第一和第二区域上提供的数据存储在存储空间上，由此执行对所述对象的收集并创建收集页。

2.如权利要求1所述的方法，其特征在于，还包括以下步骤：（d）通过使用从多个终端获取的收集信息，获得与利用所述多个终端收集相同或相似对象的用户之间的偏好的关系有关的信息。

3.如权利要求1所述的方法，其特征在于，所述第一区域由在空间中被分割的多个区域组成。

4.如权利要求1所述的方法，其特征在于，在所述第一区域中提供的句子能被编辑。

5.如权利要求1所述的方法，其特征在于，从所创建的图像中直接获取或在识别所创建的图像中包括的所述对象后从对应于所述对象的预存图像间接获取在所述第二区域上提供的缩略图。

6.如权利要求1所述的方法，其特征在于，通过应用对象识别技术、光学符号识别技术或条形码识别技术中的至少一种来获取关于所述对象的身份的识别信息。

7.如权利要求1所述的方法，其特征在于，存储所收集的信息以按照所述终端的用户来分别进行管理。

8.如权利要求7所述的方法，其特征在于，对每个用户分配唯一的虚拟空间以允许按照用户来分别管理所收集的信息。

9.如权利要求8所述的方法，其特征在于，将与由用户在一时间段收集的对象有关的每个图像做成书籍图像并通过虚拟空间以书籍陈列在书架上的方式进行显示。

10.如权利要求1所述的方法，其特征在于，如果关于在所述第一区域上显示的地点的识别信息是不适当的，则提供所识别地点周围的POI相关信息以支持直接选择POI，或提供关于当前位置的信息以支持将当前位置注册为新的POI。

11.一种用于支持对所创建图像中包括的对象的收集的终端，包括：

图像拍摄部分，用于创建对象的图像；

自动注释创建部分，用于，若由所述图像拍摄部分创建了所述图像，则为了支持对所述图像中包括的对象的收集，通过使用关于所述对象的身份的识别信息、创建所述图像的地点的识别信息、以及创建所述图像的时间的识别信息的至少一个，自动创建并在所述终端的屏幕上的第一区域上提供符合一种语言的语法的组合句子作为所述对象的自动注释；

对应性图像选择部分，用于，若由所述图像拍摄部分创建了所述图像，则为了支持对所述图像中包括的对象的收集，自动获得与所识别图像相对应的缩略图，并在所述终端的屏幕上的第二区域上显示所述缩略图；以及

收集执行部分，用于，如果选择了收集按钮，则将所述第一和第二区域上提供的数据存储在存储空间上，由此执行对所述对象的收集并创建收集页。

12.如权利要求11所述的终端，其特征在于，还包括人际关系推断部分，用于通过使用从多个终端获取的收集信息，获得与利用所述多个终端收集相同或相似对象的用户之间的偏好的关系有关的信息。

13.如权利要求11所述的终端，其特征在于，所述第一区域由在空间中被分割的多个区域组成。

14.如权利要求11所述的终端，其特征在于，所述自动注释创建部分以在所述第一区域上提供的句子能被编辑的方式提供句子。

15.如权利要求11所述的终端，其特征在于，所述对应性图像选择部分从所创建的图像中直接获取或在识别所创建的图像中包括的所述对象后从对应于所述对象的预存图像间接获取在所述第二区域上提供的缩略图。

16.如权利要求11所述的终端，其特征在于，通过应用对象识别技术、光学符号识别技术或条形码识别技术中的至少一种来获取关于所述对象的身份的识别信息。

17.如权利要求11所述的终端，其特征在于，所述收集执行部分将所收集的信息存储在所述存储空间上，以便按照用户分别来管理。

18.如权利要求17所述的终端，其特征在于，对每个用户分配唯一的虚拟空间以允许按照用户来分别管理所述存储空间中的所收集的信息。

19.如权利要求18所述的终端，其特征在于，将与由用户在一时间段收集的对象有关的每个图像做成书籍图像并通过所述虚拟空间以书籍陈列在书架上的方式进行显示。

20.如权利要求11所述的终端，其特征在于，如果关于在所述第一区域上显示的地点的识别信息是不适当的，则提供所识别地点周围的POI相关信息以支持直接选择POI，或提供关于当前位置的信息以支持将当前位置注册为新的POI。

21.一种计算机可读记录介质，其上存储有计算机程序，所述计算机程序用于执行如权利要求1至10中任一项所述的方法。

Images