CN103678464B - 用于标记多媒体数据的方法和设备 - Google Patents

Abstract

一种用相关评论标记多媒体数据的方法和设备。在所述方法中，所述设备接收对上传或下载多媒体数据的请求，并检查是否存在链接到所述多媒体数据的至少一个相关评论。然后，如果存在所述至少一个相关评论，则所述设备将所述至少一个相关评论自动标记到所述多媒体数据，并上传或下载用所述至少一个相关评论标记的多媒体数据。

Description

用于标记多媒体数据的方法和设备

技术领域

本公开涉及多媒体数据处理，更具体地讲，涉及一种在将多媒体数据上传至网站或从网站下载多媒体数据时，用相关评论自动标记多媒体数据的方法和设备。

背景技术

移动装置由于其固有的便携性和多功能而流行。移动装置向用户提供多种功能，诸如通信功能、静止相机或视频相机功能、广播接收器功能、互联网访问功能等等。

同时，一些移动装置提供搜索功能。通常，移动装置使用文件名来提供搜索功能。然而，这种典型的搜索技术具有这样的缺点：难以根据文件名的类型获得想要的结果。例如，如果照片文件并非由用户命名，而是由系统自动命名（例如，命名为对应日期或按照编号增加的预定义的表示方式），则用户很难找到想要的照片文件。

近来，已提出使用文件的元数据的另一种搜索技术。然而，元数据仅具有由系统生成的信息，诸如文件大小、分辨率、拍摄时间、天气等等。即，基于元数据的搜索仍难以为用户找到有意义的文件。因此，需要容易地找到想要的文件，尤其是对用户有意义的文件。

发明内容

为了解决上述缺陷，本公开的实施例提供一种当存在对下载或上传多媒体数据的请求时，搜索链接到多媒体数据的相关评论并将相关评论标记到多媒体数据的技术。

本公开的特定实施例允许用户容易地基于标记到多媒体数据的相关数据（例如，评论）找到想要的多媒体数据。

本公开的特定实施例提供一种用于标记多媒体数据的方法。所述方法包括：接收对上传或下载多媒体数据的请求；确定是否存在链接到所述多媒体数据的至少一个相关评论；如果存在所述至少一个相关评论，则将所述至少一个相关评论自动标记到所述多媒体数据；上传或下载用所述至少一个相关评论标记的多媒体数据。

本公开的特定实施例包括一种用于标记多媒体数据的设备，所述设备包括：输入单元，被配置为接收对上传或下载多媒体数据的请求；控制单元，被配置为检查是否存在链接到所述多媒体数据的至少一个相关评论，如果存在所述至少一个相关评论，则将所述至少一个相关评论自动标记到所述多媒体数据，并上传或下载用所述至少一个相关评论标记的多媒体数据。

如上所述，在上传或下载多媒体数据时，所述方法和设备将相关评论自动标记到多媒体数据。即，通过用用户所输入的有意义的信息自动对多媒体数据的元数据进行标记，易于通过统一搜索（即，元数据搜索）搜索想要的多媒体数据。

在开始下面的具体实施方式之前，阐述贯穿本专利文档所使用的特定词和短语的定义会是有利的：术语“包括”和“包含”及其派生词表示没有限制的包括；术语“或”是包含式的，表示和/或；短语“与……关联”和“与其关联”及其派生词可表示包括、包括在......内、与......互连、包含、包含在......内、连接到......或与......连接、耦合到......或与......耦合、可与......通信、与......协作、交织、并置、邻近、绑定到......或与......绑定、具有、具有......的性质、等等；术语“控制器”表示控制至少一个操作的任何装置、系统或其一部分，这样的装置可以以硬件、固件或软件、或者以硬件、固件或软件中的至少两者的某些组合来实现。应该注意，与任何特定控制器关联的功能可为集中式的或分布式的（无论本地还是远程地）。贯穿此专利文献提供特定词和短语的定义，本领域普通技术人员应该理解，在许多情况下（即使不是大多数情况下），这样的定义适用于这样定义的词和短语的先前使用以及未来使用。

附图说明

为了更全面地理解本公开及其优点，现在结合附图参照下面的描述，在附图中类似标号表示类似部件：

图1示出根据本公开实施例的移动装置。

图2示出根据本公开实施例的用于标记多媒体数据的方法。

图3A、图3B和图3C示出与根据本公开实施例的多媒体数据的标记方法有关的屏幕截图。

图4示出根据本公开实施例的搜索多媒体数据的方法。

图5A、图5B和图5C示出与根据本公开实施例的多媒体数据的搜索方法有关的屏幕截图。

具体实施方式

下面所讨论的图1至图5以及此专利文档中用于描述本公开的原理的各种实施例仅通过说明的方式，而不应以任何方式解释为限制本公开的范围。本领域技术人员将理解，本公开的原理可实现于任何适当布置的移动电子装置中。

现在将参照附图更具体地描述本公开的非限制性实施例。然而，本公开的实施例可包括许多不同的形式，而不应被解释为限于在此所阐述的实施例。相反，提供公开的实施例是为了使本公开将是彻底和完整的，并将向本领域技术人员传达本公开的范围。在不脱离本公开的范围的情况下，本公开的原理和特征可在各种各样的众多实施例中被采用。

另外，熟知或广泛使用的技术、元件、结构和处理不会被详细描述或示出，以避免使本公开的本质模糊。尽管附图表示本公开的实施例，但附图不必按比例绘制，特定特征可能被夸大或省略，以便更好地示出和解释本发明。

图1示出根据本公开实施例的移动装置。

参照图1，移动装置100包括相机单元170、位置信息接收单元160、无线通信单元150、输入单元140、显示单元130、存储器单元120和控制单元110。另外，控制单元110包括评论搜索单元111、标记单元112和统一搜索单元113。

相机单元170是捕获对象作为光学图像，将捕获的光学图像转换为电信号，并将转换的电信号存储为数字数据的装置。在特定实施例中，相机单元170包括CMOS（互补金属氧化物半导体）图像传感器或CCD（电荷耦合器件）图像传感器。相机单元170提供静止相机功能和视频相机功能。

位置信息接收单元160测量移动装置100的位置。位置信息接收单元160从诸如全球定位系统（GPS）、全球导航卫星系统（GNSS）、准天顶卫星系统（QZSS）、伽利略等卫星导航系统接收位置信息。在创建照片文件时将这样的位置信息保存为元数据。

无线通信单元150提供移动装置100的无线通信功能，并且在移动装置100支持移动通信功能的情况下，包括移动通信模块。无线通信单元150包括：射频（RF）发送器，用于对发送的信号的频率进行上变频并放大发送的信号；RF接收器，用于对接收的信号执行低噪放大，并对接收的信号的频率进行下变频。具体地讲，无线通信单元150可向网站发送用相关评论标记的多媒体数据或从网站接收用相关评论标记的多媒体数据。

网站可包括允许上传或下载多媒体数据的博客、主页、社群站点、社交网络服务（SNS）站点、等等。此多媒体数据是指能够被标记的内容，诸如图像文件（例如，照片文件）、视频文件、音乐文件、等等。相关评论是链接到多媒体数据的数据，并且也被称为说明文字（caption）、标签、备忘、回复等，所述相关评论由用户在保存多媒体数据时或之后输入。可选择地或除此之外，相关评论可包括由用户输入的别名（例如，建筑物名称、商店名称等），而非通过位置信息接收单元160接收的系统位置信息（即，纬度、经度等）。

输入单元140可包括多个输入键和功能键以用于输入数字或文字信息并用于设置移动装置100的各种功能。功能键可包括被定义以执行特定功能的导航键、侧键、热键等。输入单元140创建与移动装置100的用户设置和功能控制关联的键信号，并将创建的键信号发送给控制单元110。输入单元140包括qwerty键区、3×4键区、4×3键区、球型操纵杆、光学操纵杆、轮键、触摸键、触摸板、触摸屏等等中的一个或组合。在特定实施例中，移动装置100支持全触摸屏，输入单元140可仅包括形成在移动装置100的侧面的功能键，诸如音量键、屏幕开/关键和电源开/关键。具体地讲，输入单元140创建多种输入信号，诸如用于向网站上传多媒体数据或从网站下载多媒体数据的输入信号、用于输入与多媒体数据相关的评论的输入信号、用于输入用于统一搜索的关键词的输入信号等等，然后将其传送给控制单元110。

显示单元130显示由用户输入或提供给用户的信息，包括移动装置100的多种菜单。即，显示单元130提供与移动装置100的使用有关的多种屏幕，例如，主屏幕、菜单屏幕、消息编写屏幕、电话簿屏幕、网页屏幕等等。显示单元130可包括液晶显示器（LCD）、有机发光二极管（OLED）或其等同物。具体地讲，在控制单元110的控制下，显示单元130提供用于控制多媒体数据的上传或下载的屏幕、用于控制统一搜索的屏幕、等等。下面参照图3A至图3C和图5A至图5C提供这些屏幕的详细描述。

存储器单元120存储移动装置100的操作系统（OS）、用于执行移动装置100的可选功能（例如，音频回放、图像查看、视频播放、或广播播放）所需的应用、用户数据以及将发送或已接收的通信数据。具体地讲，存储器单元120存储用相关评论作为元数据进行标记的多媒体数据。例如，多媒体数据可包括注册在SNS站点中的照片文件，相关评论可包括由用户或访客书写的回复。

另外，存储器单元120存储标记程序，其中，该标记程序在多媒体数据的上传或下载时控制相关评论的标记。此标记程序包括检测对上传或下载选择的多媒体数据的请求，然后搜索链接到请求的多媒体数据的至少一个相关评论的例程、将相关评论标记到请求的多媒体数据的例程、在统一搜索处理中检查多媒体数据的标记信息中是否包含搜索关键词的例程、显示搜索结果的例程、等等。

控制单元110控制移动装置100的总的操作以及移动装置100的内部块之间的信号流，并且还执行数据处理功能。控制单元110可以是中央处理单元（CPU）、应用处理器（AP）、等等。具体地讲，控制单元110控制在上传或下载多媒体数据时将相关评论标记到多媒体数据的处理。另外，在移动装置100访问提供以下功能中的至少一个的网站时，控制单元110接收对上传或下载多媒体数据的请求：上传多媒体数据和下载多媒体数据。并且，控制单元110还控制关于存储在移动装置100中的数据的统一搜索处理。为此，控制单元110包括评论搜索单元111、标记单元112和统一搜索单元113。

响应于对下载或上传多媒体数据的请求，评论搜索单元111搜索将标记到多媒体数据的相关评论。此相关评论可包括由用户在保存多媒体数据时或之后输入的说明文字、标签、备忘、回复等。即，如果检测到对上传或下载多媒体数据的请求，则评论搜索单元111执行搜索以确定是否存在由用户或访客输入并链接到多媒体数据的说明文字、标签、备忘、回复等。例如，如果检测到对下载SNS站点中注册的照片文件的请求，则评论搜索单元111搜索附到请求的照片文件的回复，提取该回复，并将提取的回复发送给标记单元112。

例如，相关评论可包括位置信息，所述位置信息可能不是诸如纬度和经度的地理坐标，而可能是别名（例如，建筑物名称、商店名称等）。例如，如果用户在区域“A”处拍摄图片，则通常存储关于区域“A”的纬度和经度信息。然而，在本公开中，诸如区域“A”的名称或位于区域“A”的建筑物的名称的别名被存储为位置信息。为此，评论搜索单元111将通过位置信息接收单元160测量的纬度和经度信息发送给用于提供基于位置的服务（LBS）的网站，然后从该网站接收测量的位置的对应别名。这样的别名可经由用户和网站的运营商来更新。如果存储器单元120存储名称（或别名）数据库，则评论搜索单元111搜索名称（或别名）数据库以找出对应别名。

标记单元112将从评论搜索单元111接收的回复标记到对应多媒体数据。例如，标记单元112将回复标记为元数据，使得在统一搜索处理中可使用元数据容易地找到想要的多媒体数据。

统一搜索单元113对存储在移动装置100中的数据提供统一搜索。在特定实施例中，统一搜索单元113基于元数据提供统一搜索。即，如果在统一搜索模式下输入关键词，然后接收到搜索请求，则统一搜索单元113找出具有包含输入的关键词的元数据的所有文件（例如，联系人项、文本消息、照片文件、视频文件等）。具体地讲，统一搜索单元113搜索用相关评论标记的多媒体数据。

尽管图1中未示出，但移动装置100的特定实施例选择性地还包括用于提供附加功能的元件，诸如广播接收模块、数字声音回放模块、运动传感器模块等等。根据如今的数字融合趋势，这样的元件可以以各种方式变化、修改和改进，并且在移动装置100中可另外或可选择地配备与上述元件等同的任何其他元件。同时，如本领域技术人员将理解的，移动装置100中的上述元件中的某些可被省略或用其他元件代替。

图2示出根据本公开实施例的标记多媒体数据的方法，图3A-3C示出与根据本公开实施例的多媒体数据的标记方法有关的屏幕截图。

参照图1至图3C，在块201，控制单元110通过无线通信单元150访问网站，其中，该网站提供上传或下载多媒体数据的功能。在块203，控制单元110控制显示单元130显示访问的网站的屏幕。网站可包括允许上传或下载多媒体数据的博客、主页、社群站点、社交网络服务（SNS）站点、等等。多媒体数据是指能够被标记的内容，诸如图像文件（例如，照片文件）、视频文件、音乐文件、等等。

在块205，控制单元110确定是否存在对上传多媒体数据的请求。为此，尽管图3A至图3C中未示出，但控制单元110应用户的请求预先输出存储在移动装置100的存储器单元120中的照片文件的列表，然后接收对列表中将被上传到网站的特定照片文件的选择。可选择地，控制单元110预先运行相机单元170以拍摄照片或记录视频。

当在上传屏幕上选择了上传菜单项时，发生上传请求。参照图3A中的屏幕截图310，多媒体数据上传屏幕包含指示符区域301、多媒体数据标题区域302、内容显示区域303和菜单区域304。菜单区域304包括与用于返回先前状态的指令对应的返回菜单项32以及与用于上传的指令对应的上传菜单项33。在此屏幕截图310中，多媒体数据是特定照片文件1，其中，所述特定照片文件1具有已经由用户输入的相关评论31a。在这种情况下，如果照片文件1如屏幕截图310中所示具有横向模式，则相关评论31可与照片文件1分离并布置在照片文件1下方。可选择地，如果照片文件2如图3C的屏幕截图330中所示具有纵向模式，则相关评论31b可与照片文件2重叠或布置在照片文件2中。然而，这仅是示例，而不应被认为是对相关评论的位置的限制。

当在块205存在对上传多媒体数据的请求时，控制单元110在块207搜索相关评论，然后在块209确定是否存在相关评论。如以上所讨论的，相关评论的示例包括由用户在保存多媒体数据时或之后输入的说明文字、标签、备忘、回复等。可选择地或除此之外，相关评论可包括由用户输入的别名（例如，建筑物名称、商店名称等），而非通过位置信息接收单元160接收的系统位置信息（即，纬度、经度等）。存储器单元120将名称（或别名）存储在数据库中。可选择地，在上传多媒体数据期间使用包含在多媒体数据中的位置信息，控制单元110从提供基于位置的服务的网站（例如，www.foursquare.com）搜索对应位置的名称（或别名）。

如果在块209没有相关评论，则在块215，控制单元110在不标记的情况下将多媒体数据上传到网站。相比之下，如果存在相关评论，则控制单元110在块211将相关评论标记到多媒体数据，并在块213将用相关评论标记的多媒体数据上传到网站。例如，如图3B的屏幕截图320中所示，控制单元110上传照片文件1作为网站的帖子。此时，控制单元110在列表的顶部注册具有上传的照片文件1的帖子。另外，控制单元110注册标题为作者的名字“Gabriel Macht”和先前的相关评论31a“My recent interest is taking pictures”的贴子。

如果没有上传请求，则控制单元110在块217确定是否存在下载请求。例如，如图3B的屏幕截图320中所示，当选择（例如，触摸）了包含在特定帖子中的照片文件2时，控制单元110如图3C的屏幕截图330中所示将选择的照片文件2放大。放大的照片文件2部分地包含由用户“Tony Hale”输入的评论31b“Dinner party reservation”。在特定实施例中，用户通过触摸下载菜单项34来请求下载选择的照片文件2。可选择地，在屏幕截图320和330中，用户可用鼠标的右键点击或者长触摸将被下载的照片文件。响应于对将被下载的照片文件的用户点击或触摸，显示示出可执行功能的弹出菜单，从而使得用户能够在弹出菜单中选择下载功能。

如果在块217没有下载请求，则在块229，控制单元110执行任何其他选择的功能。例如，控制单元110执行下述搜索模式，或者控制帖子的修改、评论的编写、等等。如果在块217存在下载请求，则控制单元110在块219搜索与将被下载的多媒体数据相关的评论，并在块221确定是否存在相关评论。

如果在块221存在相关评论，则控制单元110在块223将相关评论标记到多媒体数据，然后在块225从网站下载用相关评论标记的多媒体数据。如果在块221没有相关评论，则在块227，控制单元110在没有标记的情况下下载多媒体数据。

图4示出根据本公开实施例的搜索多媒体数据的方法，图5A、图5B和图5C示出与根据本公开实施例的多媒体数据的搜索方法有关的屏幕截图。

参照图1至图5C，控制单元110在块401确定是否执行统一搜索模式。如果未执行统一搜索模式，则在块413，控制单元110执行任何其他选择的功能。例如，控制单元110执行诸如播放音乐、相机等等的功能或维持空闲模式。可选择地，控制单元110执行多媒体数据的上传或下载功能，这已参照图2、图3A、图3B和图3C进行了描述。

如果在块401执行统一搜索模式，则在块403，控制单元110显示统一搜索屏幕。然后，控制单元110在块405检测关键词的输入，并在块407确定是否接收到搜索请求。如果在块407未接收到搜索请求，则控制单元110返回到块411并执行块411的功能。如果在块407接收到搜索请求，则在块409，控制单元110控制显示单元130在屏幕上显示统一搜索结果。

参照图5A的屏幕截图510，统一搜索结果屏幕包含关键词输入区域501和搜索结果显示区域502。关键词输入区域501包括关键词添加菜单项53，并且还显示先前的关键词（例如，“high school”）直到输入新关键词为止。在特定实施例中，搜索结果显示区域502根据其类别分开显示搜索结果。例如，如屏幕截图510中所示，控制单元110将搜索结果分类为联系人、消息和图像，然后将其每个分开地分别显示在联系人部分502a、消息部分502b和图库部分502c中。此示例示出仅在联系人、消息和图像中找到包含关键词的数据。如果存在包含关键词“high school”的音乐文件，则搜索结果显示区域502还包括用于布置音乐文件的音乐部分。同时，如屏幕截图510所示中，图像被找到并作为搜索结果被布置在图库部分502c中。由于关键词“high school”已被标记到这样的图像，因此对图像文件的搜索变得可能。缺少相关评论使得无法搜索到想要的图像。也就是说，采用典型搜索技术的移动装置无法在搜索结果显示区域502中显示图库部分502c。

参照图4，在块411，控制单元110确定是否输入了搜索模式关闭信号。如果是，则控制单元110结束搜索模式并返回到空闲模式。如果搜索模式未结束，则控制单元110留在块411。

同时，尽管图4中未示出，但控制单元110确定是否在搜索结果显示屏幕中选择了多媒体数据之一，并且如果选择了多媒体数据之一，则放大选择的多媒体数据。例如，如果触摸了布置在屏幕截图510的图库部分502c中的图像之一，则控制单元110如图5B的屏幕截图520中所示放大选择的图像。然后，如果在屏幕截图520中选择了细节菜单项54，则控制单元110如图5C的屏幕截图530中所示以重叠形式在屏幕上显示选择的图像的详细信息。此详细信息可包括元数据。另外，这样的详细信息可包括包含输入的关键词“high school”的说明文字域51和位置域52。具体地讲，说明文字域51是未见于任何典型搜索技术中的独特域。另外，位置域52用位置的别名而非典型的纬度和经度信息来标记。

如上面充分讨论的，本公开提供一种在下载或上传多媒体数据时将相关评论（例如，说明文字、标签、备忘、回复等）自动标记到多媒体数据的技术。此技术允许用户在统一搜索处理中容易地找到想要的多媒体数据。

上面所讨论的本公开实施例中的用相关评论标记多媒体数据的方法可实现为程序命令，所述程序命令可被写到计算机可读记录介质，因此可通过各种计算机辅助手段来读取。这样的计算机可读记录介质可包括单独或相结合的程序命令、数据文件、数据结构等。写在计算机可读记录介质上的程序命令可针对本公开而特别地设计和配置，或者是计算机软件领域的技术人员已知的。这样的计算机可读记录介质可以是能够以计算机可读方式存储数据的任何类型的记录装置。计算机可读记录介质的示例包括：磁介质，诸如硬盘、软盘和磁带；光学介质，诸如压缩盘（CD）-只读存储器（ROM）或数字通用盘（DVD）；磁光介质，诸如软光盘；为存储和执行程序命令而特别配置的硬件装置，诸如ROM、随机存取存储器（RAM）和闪存。程序命令的示例包括可利用解释程序在计算机中执行的高级语言代码以及诸如由编译器创建的机器语言代码。硬件装置可被配置为作为一个或多个软件模块来操作以执行本公开的操作，反之亦然。

尽管已通过示例描述了本公开，但可对本领域技术人员建议各种改变和修改。本公开意在涵盖这样的改变和修改，只要其落入所附权利要求书的范围内。

Claims (15)

1.一种用于标记多媒体数据的方法，所述方法包括：

接收对上传多媒体数据的请求和对下载多媒体数据的请求中的一个；

确定至少一个相关评论是否链接到多媒体数据；

响应于确定至少一个相关评论链接到多媒体数据，将所述至少一个相关评论自动标记到所述多媒体数据；

当接收到对上传多媒体数据的请求时，上传用所述至少一个相关评论标记的多媒体数据，

当接收到对下载多媒体数据的请求时，下载用所述至少一个相关评论标记的多媒体数据，

其中，如果选择了用所述至少一个相关评论自动标记的多媒体数据中的一个，则放大选择的多媒体数据。

2.根据权利要求1所述的方法，其中，自动标记的步骤包括：将所述至少一个相关评论标记为多媒体数据的元数据。

3.根据权利要求1所述的方法，其中，接收请求的步骤包括：

访问网站；以及

进行接收对将多媒体数据上传到访问的网站的请求，和接收对从访问的网站下载多媒体的请求中的一个。

4.根据权利要求3所述的方法，其中，所述网站包括博客、主页、社群站点、社交网络服务(SNS)站点中的至少一个。

5.根据权利要求1所述的方法，其中，所述多媒体数据包括图像文件、视频文件和音乐文件中的至少一个。

6.根据权利要求1所述的方法，其中，所述至少一个相关评论包括标签、说明文字、回复、备忘以及与位置对应的别名。

7.根据权利要求1所述的方法，还包括：

检测统一搜索模式的执行；

接收为搜索多媒体数据而输入的关键词；

执行统一搜索以找出具有所述关键词作为元数据的至少一个多媒体数据；

输出搜索结果。

8.一种用于标记多媒体数据的设备，所述设备包括：

输入单元，被配置为接收对上传多媒体数据和下载多媒体数据中的一个的请求；

控制单元，被配置为：

确定是否存在链接到所述多媒体数据的至少一个相关评论，

如果存在所述至少一个相关评论，则将所述至少一个相关评论自动标记到所述多媒体数据；

当接收的请求是上传请求时，上传用所述至少一个相关评论标记的多媒体数据，

当接收的请求是下载请求时，下载用所述至少一个相关评论标记的多媒体数据，

其中，如果选择了用所述至少一个相关评论自动标记的多媒体数据中的一个，则放大选择的多媒体数据。

9.根据权利要求8所述的设备，其中，所述控制单元还被配置为将所述至少一个相关评论标记为多媒体数据的元数据。

10.根据权利要求8所述的设备，其中，所述控制单元还被配置为访问提供对多媒体数据的上传功能和下载功能中的至少一个的网站，并接收对将多媒体数据上传到访问的网站或从访问的网站下载多媒体数据中的一个的请求。

11.根据权利要求10所述的设备，其中，所述网站包括博客、主页、社群站点、社交网络服务(SNS)站点中的至少一个。

12.根据权利要求8所述的设备，其中，所述多媒体数据包括图像文件、视频文件和音乐文件中的至少一个。

13.根据权利要求8所述的设备，其中，所述至少一个相关评论包括标签、说明文字、回复、备忘以及与位置对应的别名。

14.根据权利要求8所述的设备，其中，所述控制单元还被配置为：

执行统一搜索以找出具有输入的关键词作为元数据的至少一个多媒体数据，

控制显示单元输出搜索结果。

15.根据权利要求14所述的设备，其中，输出的搜索结果显示在显示单元的与文件类型对应的部分内。