CN114730234A - 增强用户体验的交互式多媒体管理系统及其方法 - Google Patents

Abstract

提供一种用于将视觉、听觉和/或其他形式的感官内容和体验转换成交互式媒体的系统以及方法，所述感官内容和体验包括表示人、动物、物体、位置、产品、服务、组织、事件、文本信息等的物项，所述交互式媒体用于访问并且保存数据和信息、获得附加内容并且用于施行进一步的动作。集中式平台提供对与系统的各种类型的用户相关联的数据、内容及动作的单独管理及集体管理。

Description

增强用户体验的交互式多媒体管理系统及其方法

技术领域

本发明涉及一种用于零售、广告、媒体、教育及娱乐的系统以及方法。更具体来说，本发明涉及使观众者能够在任何时间及任何地点快速且容易地捕获与感兴趣的物项相关联的信息，以便支持后续动作(例如进行采购或收集进一步的信息)，所述感兴趣的物项通过视觉、听觉和/或其他形式的感官内容或体验来显示或暗示。

背景技术

媒体及娱乐业越来越多地出现在大多数社会日常生活中，这是毋庸置疑的，其全球影响力的价值也是毋庸置疑的，这对国际经济至关重要；尤其是在考虑媒体及娱乐业与零售的关系时。媒体及娱乐业包括开发及分发电影、数字及电视商业广告及节目、广告、流媒体内容、音乐及音频记录、广播、图书出版、视频游戏及补充服务及产品等业务，不可否认地为现代人类表达服务并且极大地影响了经济及文化趋势。和许多其他行业一样，技术的发展使企业及艺术家对待行业的方式以及人们与产品交互及消费的方式发生巨大转变。当前快速可访问性是大的问题，获取内容与其说是“是否”的问题，不如说是“何时”以及“如何”的问题。随着这些期望的出现，消费者及企业对创新体验的需求也随之而来，他们需要媒体及娱乐公司提供创新体验。

根据这些期望，公司已找到提供体验的新方法；最显著的目的是交互式媒体。交互式媒体指的是基于数字计算机系统的产品及服务，它们对用户的行为做出响应；如点击、滑动、数据输入等。并且所述响应可为任何响应，包括但不限于呈现例如文本、图像、视频、音频、动画或游戏等内容；重定向到其他网页或文档；或者保存数据。然而，进行这些响应的方式可能会有很大的不同，并且根据所选择的方法，此种效果对体验可能是有害的，也可能是有益的。然而，此种交换往往有很大的价值，因为它允许实现双向的沟通渠道以为所有参与方提供价值，不像单方面的非交互式媒体；包括内容提供方，他们鼓励交互以获得回报(通常是有价值的数据)。由于这个原因，交互式媒体的使用成倍增长。

考虑到这一点，现在许多公司实施交互战略。然而，对其使用的限制仍然很多。首先，传统媒体(电影、电视、印刷品、广播、传统广告及广告牌)在很大程度上被排除在交互式实施方案之外。尽管随着向数字媒体的过渡，在此种传统媒体中创建交互性的尝试已经出现，但对于消费者来说缺乏效率、快捷、组织及控制。可提及的实例是利用遥控器从数字电视采购物项的能力，这提供了缓慢且受限的体验。

第二个限制是缺乏对消费者的控制。无论是数字的还是传统的，可选交互的时机往往是由内容提供方而不是消费者决定的；通过限制可访问性及消费者随后进行的进一步行动。例如，现在人们越来越多地接触到交互式媒体，并且随着智能电话的使用以极快的速度增长，对此种媒体的访问不断增加，并且可从广泛的位置获得。然而，根据消费者当前的位置及活动，某些交互可能不方便或不可能。一个实例是，如果消费者想要采购他或她在交互式广告上看到的物项，则如果在交互式广告可见时尚未完成采购，他或她便有失去访问权或再次找到所述物项的风险；然而，观众者所处的位置或情况(例如在办公室会议或餐馆中)可能证明在那个精确的时间做出正确的采购决定是不合适或不舒服的，并且可能保证潜在顾客的进一步考虑。然而，如果观众当时未进行采购，或者不能保存物项的信息，那么在他或她最初被展示广告并获得对产品或服务的兴趣的时间与他或她真正有机会根据所述兴趣采取行动的时间之间将会有长时间的延迟。当采购产品或服务的机会最终到来时，采购的冲动可能已经减弱，或者他或她可能甚至不记得广告商是谁或者关于他或她想要采购的产品或服务的细节。因此，销售可能会失败，因为信息的即时性及发展的兴趣已经减弱，或者立即采购被证明太难实现。

第三，当前交互过程的另一个限制是使用的多样化。交互式产品通常迎合一个媒体渠道，并且不提供通过一个单一系统或机制与多个媒体进行交互的能力。例如，交互式广告可能会在电视上或通过移动浏览器显示，但当前的过程要求不同的装置与不同媒体渠道显示的内容进行交互，从而使事情变得复杂；因此，人们只能借助于电视或遥控器等相关装置与电视上显示的广告进行交互，并利用智能电话与移动浏览器上显示的广告进行交互。这导致需要多个装置来实现非常相似的功能。

此外，可观察到的第四个限制是组织。可用的交互式选项没有向消费者提供将从所有交互接收的值组织到一个单一地点以供参考、评估或进一步的结果行动的能力。

因此，所需要的是一种提供完整且集中的多媒体平台的系统以及方法，所述平台允许个人及集体交互以及在各种用户之间交换数据。所提出的系统以及方法会克服上述缺点，允许实现使用多样化、更好的组织及更多的消费者控制，其可容易地实现视觉、听觉和/或其他形式的感觉内容或体验，因此允许进行更好的交互。

发明内容

至少出于提供对主题的基本理解的目的，本公开的以下部分呈现在本公开中发现的一个或多个创新、实施例和/或实例的简要概述。此概述并不试图提供任何特定实施例或实例的广泛概述。另外，此概述并不旨在标识实施例或实例的关键/重要元素，也不旨在绘示本公开主题的范围。因此，此概述的一个目的可为以简化的形式呈现在本公开中发现的一些创新、实施例和/或实例，作为稍后呈现的更详细描述的序言。

在考虑到广告时，可发现在许多情况下它遵循不完整的方法，此种方法基于不能准确证明投资合理性也不能充分转化为销售的假设。例如，目前品牌在广告上支付大量费用以最终出售他们的产品，然而大多数广告缺乏直接及容易的采购选择以及适当的效果测量。另外，当前的策略在转化那些在看到、听到或体验广告时没有准备好采购的观众、听众或整体体验者方面不是很有效；主要是因为事后寻找产品的不便或完成采购所需的时间。这意味着品牌会失去很大一部分潜在客户，因为无法快速方便地获得产品。通过提供一种系统，所述系统提供直接且可追踪的销售点、数据分析、容易的采购选项加上对促销或广告产品的方便且可访问的手段，广告行业内的这些缺陷可得到纠正并且甚至可通过将该行业与零售行业合并而完成前述方法。此种系统还可通过对一些功能进行重定向来增强个人可与视觉、听觉和/或其他形式的感官内容或体验的整体交互，从而改善娱乐、教育及其他行业。

在各种实施例中，提供一种用于将视觉、听觉和/或其他形式的感官内容和体验转换成交互式媒体系统及方法，所述交互式媒体可用于访问及保存信息、获得附加内容并且用于施行进一步的动作。由视觉、听觉和/或其他形式的感官内容或体验包括或暗示的物项可为对人、动物、物体、位置、产品、服务、组织、事件、文本信息等的或提及或暗示的表示。在一些方面，物项可被实时识别并呈现在集中式平台或移动应用中，以供消费者与相关信息进行交互和/或收集相关信息。因此，消费者可以装置引发响应的方式与这些物项进行交互，所述响应可包括捕获并且收集物项详细信息。对于消费者来说，可通过定制的单个访问地点来容易地访问物项详细信息，这允许他们根据物项来实施相应的动作，例如但不限于快速及方便的采购、获得相关信息或访问新的娱乐内容。

另外，所述系统可包括某些用户可用来创建参考文献或参考文献内容的平台。每一参考内容可对应于以视觉、听觉和/或其他形式的感官内容或体验表示的至少一个物项。这些参考内容可存储在存储库或数据库(例如，服务器数据库和/或参考数据库)中，装置可直接或间接地与存储库或数据库进行通信，以实现对以视觉、听觉和/或其他形式的感官内容或体验呈现的对应物项的识别。此外，平台可允许某些用户添加关于参考内容所表示的物项的详细信息或相关信息。因此，每一详细信息或相关信息可与对应的参考内容中的至少一者相关联。详细信息或相关信息可包括产品规格(如服装大小、颜色、制造商、品牌等)、价格、交付选项、位置、传记、影片、电影预告片、幕后场景、删除场景、彩蛋场景、导演剪辑及任何其他附加内容。

在另一方面，可在平台中经由参考工具或模块或者借助于其他手段来向某些用户提供每一消费者与以内容或体验呈现的物项的交互的数据和/或分析。消费者交互可包括点击、收集、保存及删除物项；采购产品；播放、观看及暂停视频；提交信息等。

除了以上部分之外，通过参考本公开的其余部分、任何附图和/或权利要求(如果有)，应实现对本公开的主题的本质及等同物(以及任何固有的或明示的优点及所提供的改善)的进一步理解。

附图说明

为了合理地描述及例示在本公开内发现的那些创新、实施例和/或实例，可参考一个或多个附图。用于描述一个或多个附图的附加细节或实例不应被认为是对任何所主张发明的范围、任何当前描述的实施例和/或实例、或本公开内呈现的任何创新的当前理解的最佳模式的限制。

图1示出根据本发明实施例的系统以及方法的系统概述，以用于将视觉、听觉和/或其他形式的感官内容和体验转换成交互式媒体，所述交互式媒体可用于访问并保存信息、获得附加内容并且施行进一步动作(例如采购)。

图2示出用于将内容101、选择、结果及详细信息上传并存储到服务器数据库108中的过程的实例的概览。

图2a是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中上传或输入标签打开。

图2b是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中上传或输入标签打开并且输入内容101。

图2c是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中上传或输入标签打开并且具有针对被拒绝内容101的不合规警告通知。

图2d是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其示出所有活动并且内容101经历自动选择模块105。

图2e是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中活动A打开并且内容101经历自动选择模块105。

图2f是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中内容101经历指定模块107以将结果分配给选择。

图2g是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，其中内容101经历指定模块107以输入详细信息。

图2h是在SaaS平台中实施的参考工具或模块102的界面的一个实例的例示，示出用于提交或输出交互式内容的选项。

图3示出经历选择检查及手动选择模块106的内容101的过程的实例的简化概述。

图3a是经历视觉内容的选择检查及手动选择模块106的内容101的过程的视觉实例。

图3b是经历音频内容的选择检查及手动选择模块106的内容101的过程的视觉实例。

图4示出用于在正在使用的装置外显示的视觉内容的实时物项识别系统的一个实例的概况。

图4a示出使用智能电话从装置外显示的视觉内容识别感兴趣的物项。

图4b示出当使用智能电话作为装置110从视觉装置外内容112识别感兴趣的物项时的用户体验。

图5示出用于从正在使用的装置外显示的视觉内容捕获或保存信息的方法的一个实例的概述。

图5a示出使用智能电话来从正在使用的装置外显示的视觉内容捕获或保存物项信息。

图5b示出当使用智能电话作为装置110从视觉装置外内容112捕获或保存物项信息时的用户体验。

图6是用于从正在使用的装置播放的视觉内容捕获或保存物项信息的两种方法的实例的概述。

图6a示出利用智能电话作为装置110来从由使用中的装置播放的视觉内容识别并捕获或保存感兴趣的物项的过程。

图6b示出利用智能电话作为装置110来从由使用中的装置播放的视觉输出内容/选择116捕获或保存感兴趣的物项的过程。

图7示出用于在正在使用的装置外播放的音频内容的实时物项识别系统的一个实例的概述。

图7a示出使用智能电话作为装置110来从音频装置外内容112识别物项。

图8是用于从正在使用的装置外显示的音频内容捕获或保存信息的方法的一个实例的概述。

图8a示出使用智能电话作为装置110从音频装置外内容112捕获或保存物项。

图9示出用于从使用中的装置播放的音频内容捕获或保存物项信息的两种方法的实例的概述。

图9a示出利用智能电话作为装置110来从使用中的装置播放的音频内容识别并捕获或保存感兴趣的物项的过程。

图9b示出利用智能电话作为装置110来从使用中的装置播放的音频输出内容/选择116捕获或保存感兴趣的物项的过程。

图10示出用于访问交互式应用程序111的物项列表的用户的过程的一个实例的概述。

图10a示出用于从不同装置访问交互式应用程序111的物项列表的用户的过程。

图11示出显示物项列表的交互式应用程序111的界面。

图12示出显示采购标签的交互式应用程序111的界面。

图13示出用于从交互式应用程序111的用户进行的交互收集数据并使其可被参考工具或模块102的用户访问的系统及方法的一个实例。

图13a示出使用类似仪表盘等用户界面来为参考工具或模块102的用户呈现查看数据分析的系统以及方法。

图14示出在集体场景中使用的所提出的系统。

图15示出显示在视觉内容上的交互式目录。

在所有图中，除非另有说明，否则相同的参考编号及字符用于表示所示实施例中相同的元件、组件、部分或特征。鉴于示例性实施例，将结合附图详细描述本发明。

具体实施方式

根据图1描述了提供用于将视觉、听觉和/或其他形式的感官内容和体验转换成交互式媒体的系统及方法的一个或多个解决方案，所述交互式媒体可用于访问及保存信息、获得附加内容并且施行进一步的动作(例如采购)，图1是本文中公开的发明的例示性实施例或实施方案，并且不应限制在整个公开中叙述、呈现、解释或详述的任何发明的范围。所属领域的普通技术人员可通过本公开及本文中给出的教示认识到对附图中示出的那些实施例或实施方案的其他变化、修改和/或替换。

根据本发明的优选实施例，图1示出系统100的系统概述，其中示出在根据本发明的一个实施例中用于将视觉、听觉和/或其他形式的感官内容和体验转换成交互式媒体的系统及以方法，所述交互式媒体可用于访问并保存信息、获得附加内容以及进一步的动作(例如采购)。根据此实施例，系统100可通过由物理连接和/或无线连接进行连接的计算机化系统的网络实施、在所述网络上和/或在所述网络中实施。

根据此实施例，系统100开始于利用参考工具或模块102上传或输入内容101(在图1中用从内容101到参考工具或模块102的箭头示出)。内容101(或其部分)可表示内容101的上传者想要与之交互的任何内容。例如，内容101(或其部分)可绘示出物项、对象、人、地点、公司、音乐、声音、短语、位置、场景、信用、产品、服务等。在本发明的一些实施例中，内容101可采取(但不限于)文件的形式，例如用户使用参考工具或模块102输入、提供或上传的音频、图像或视频文件、URL或链接。并且内容101可包括图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、计算机或程序代码或语言、或听觉/视觉/感官表示等以及任何此种信息或其组合。

在本发明的另一方面，参考工具或模块102可用于使内容101(或其部分)是交互式的。根据此实例，参考工具或模块102可用于将内容101上传、传送或输入到服务器103中。在此种考虑下，参考工具或模块102还可提供自动或手动验证过程，用于基于质量、格式、文件大小、分辨率、文件类型或图1中所示的系统100所支持的内容101所需的任何其他标准来批准或拒绝内容101而作为内容合规性118。关于这一点，并且在一些实施例中，如果内容101被拒绝，则可向参考工具或模块102的用户呈现“不合规警告”或“错误”，以要求纠正某些标准以继续进行，或者相反地，可简单地使所述过程停滞并要求重新开始符合适当标准的内容101。相反，如果满足批准，则参考工具或模块102可继续将内容101上传、传送或输入到服务器103中。在本发明的另一方面，参考工具或模块102可用于对自动选择模块105的结果进行验证(如以下在自动选择模块105下进一步讨论)和/或借助于选择检查及手动选择模块106选择全部或部分内容101(如以下在选择检查及手动选择模块106下进一步讨论)。在本发明的又一方面，参考工具或模块102可用于借助于指定模块107输入、上传、传送、选择和/或分配结果及详细信息(如以下在指定模块107下进一步讨论)。此外，在本发明的另一方面，参考工具或模块102可用于将输出内容/选择116输出(如下以面在输出内容/选择116下进一步讨论)。此外，在本发明的另一方面，参考工具或模块102可用于借助于分析模块117访问数据和/或分析(如以下在分析模块117下进一步讨论)。除了上述功能之外，在本发明的另一方面，参考工具或模块102还可包括或提供对一个或多个用户界面的访问，所述用户界面可允许用户创建、认证、登录、注销、编辑和/或维护账户。

根据本发明的至少一些实施例，参考工具或模块102还可向用户提供在其账户内组织其上传或输入(包括内容101、选择、详细信息和/或结果)和/或在上述任何过程之前、期间和/或之后保存、访问、存储、改变、搜索、修改、定义、控制、检索、创建、操纵、删除、编辑、启用、禁用、更新、管理和/或维护它们中的任何一者的能力。在本发明的至少一些实施例中，所有这些功能可在数据库管理系统的帮助下进行(如以下在单个访问地点或模块115下进一步解释)。组织的一个实例可为将内容101(或其部分)分类或组织在活动、类别、群组、文件夹等中。

在本发明的一些实施例中，参考工具或模块102可采取网页、网站、网络应用程序、基于网络的工具或模块、仪表盘、在线工具或模块、SaaS平台、本地应用、软件和/或任何类型的工具或模块、应用程序或站点等的形式。

在本发明的另一方面，系统100(或其部分)可借助于客户端-服务器架构运行或发挥作用，因此一些实施例可允许存在一个或多个服务器、计算机或服务器集群、计算机化程序及过程和/或装置用于运行、辅助、传送、共享资源及数据、与系统100和/或其任何组件交互和/或向其提供整体功能。出于例示目的，图1示出具有服务器103的一个实施例。根据此实施例，服务器103可提供数据库服务、计算机视觉服务、机器学习服务、存储及共享服务(针对文件、媒体、音频)、网络服务、通信服务、计算服务、目录服务、声音服务器服务、代理服务器服务、虚拟服务器服务、邮件服务器服务、打印服务器服务、网络服务器服务、游戏服务、应用程序服务以及完成本文汇总归于服务器103的功能及服务所需的任何此种工具或模块。然而在本发明的其他实施例中，系统100(或其部分)可借助于对等架构来运行或发挥作用，以完成相似的目标。

此外，在本发明的一些实施例中，服务器103可提供和/或管理图1中呈现在其内的组件的所有功能。然而对于本发明的其他实施例，这些功能中的一些可被外包。为清楚起见，将这些功能标记为批准/拒绝分析模块104、自动选择模块105、服务器数据库108、交互引擎或模块114及单个访问地点或模块115。

再次参照图1，在本发明的另一方面，当利用参考工具或模块102上传、输入和/或传送内容101时(并且由参考工具或模块102批准)，可通过一个或多个过程(例如批准/拒绝分析模块104)自动验证内容101。根据此实施例，批准/拒绝分析模块104可确定内容101是否符合自动选择模块105、选择检查及手动选择模块106以及参考内容109的要求。批准/拒绝分析模块104考虑的要求可为安全因素、定义特性、唯一性、质量、内容类型、格式、文件大小、分辨率、文件类型、容量、可分辨性等。

在本发明的另一实施例中，当内容101被批准/拒绝分析模块104批准时，将内容101存储在服务器数据库108中，并且自动选择模块105自动初始化，或者可准许手动启动自动选择模块105的能力。在本发明的另一实施例中，当内容101被批准/拒绝分析模块104批准并且借助于参考工具或模块102存储在服务器数据库108中时，可绕过自动选择模块105并且可启动选择检查及手动选择模块106作为系统中的下一步骤。在本发明的又一实施例中，当内容101被批准/拒绝分析模块104批准并且借助于参考工具或模块102存储在服务器数据库108中时，可绕过自动选择模块105及选择检查和手动选择模块106，并且可准许对指定模块107的访问；例如，当拟定并且可能将内容101作为参考内容109时(“按原样”)，其整体作为一个选择(如以下在自动选择模块105下进一步解释)。在本发明的大多数实施例中，当内容101被批准/拒绝分析模块104拒绝时，可向参考工具或模块102的用户呈现“不合规警告”或“错误”，以要求纠正某些标准以继续进行，可简单地停滞并且要求重新启动符合适当标准的内容101。此拒绝警告或错误可能会或者可能不会提供需要纠正的内容的规范。在本发明的一些实施例中，批准/拒绝分析模块104可采取处理引擎或单元的形式，或者能够从参考工具或模块102接收图像、音频和/或感官数据的任何其他组件、程序、应用程序或软件的形式。

关于以上解释的内容，必须注意，在本发明的某些实施例中，当利用参考工具或模块102上传、输入和/或传送内容101(并且被参考工具或模块102批准)时，可能存在内容101在通过批准/拒绝分析模块104之前被预先和/或临时存储在服务器数据库108中的可能性。根据此实例，如果内容101被批准/拒绝分析模块104批准，则内容101可保持存储在服务器数据库108中并且继续进行此过程，但如果被拒绝，则内容101可从服务器数据库108中删除，从而阻止此过程的继续。

在本发明的另一方面，在一些实施例中，当内容101被批准/拒绝分析模块104批准时，自动选择模块105可自动初始化或者可手动启动。对于本发明的一些实施例，自动选择模块105可由一个或多个过程或工具或模块组成，这些过程或工具或模块自动识别并选择内容101的全部或部分，以用于创建参考内容109(如以下在参考内容109下进一步描述)。

根据此实施例，自动选择模块105可识别字母、数字、符号、图像数据、视频数据、音频数据、文本数据、元数据、数字数据、快照、计算机或程序代码或语言、帧或任何听觉/视觉/感官表示等以及可构成内容101的全部或部分的任何此种信息或其组合，并且选择符合用作参考内容109所需的要求的内容。另外，根据此实例，选择可表示物项、对象、人、地点、公司、音乐、声音、短语、位置、场景、信用、产品、服务或任何可区分、可检测并且可用于指定模块107和/或参考内容109下描述的目的的事物。另外，根据此实施例，这些选择可构成上传内容101的全部或其一部分。此外，在一些实施例中，由自动选择模块105做出的选择可直接用于充当参考内容109。然而在其他实施例中，可能需要参考工具或模块102的用户批准或检查这些选择，以便将所述选择用作参考内容109(如在选择检查和手动选择模块106下描述)。

再次参照图1，在本发明的另一方面，在一些实施例中，当自动选择模块105已完成用于自动选择的一个或多个过程时，选择检查和手动选择模块106可由参考工具或模块102的用户访问(在图1中用从组件105到106的箭头示出)。在其他实施例中，当内容101被批准/拒绝分析模块104批准时，选择检查和手动选择模块106可由参考工具或模块102的用户直接访问，因此绕过自动选择模块105或与自动选择模块105同时运行(在图1中用从组件104到106的虚线箭头示出)。根据此实施例，选择检查和手动选择模块106可包括一个或多个过程或工具或模块，其允许参考工具或模块102的用户对自动选择模块105的选择进行检查、选择、取消选择和/或批准或拒绝。另外，根据此实施例，选择检查和手动选择模块106还可包括允许参考工具或模块102的用户手动选择内容101的一个或多个过程或工具或模块。在一些实施例中，借助于选择检查和手动选择模块106进行选择可构成与本文中针对自动选择模块105所解释的相同的考虑、描述和/或因素；除了在选择检查和手动选择模块106中，选择过程是手动完成的并且还可能需要对由自动选择模块105做出的选择进行验证、批准或拒绝。

参照图1，在本发明的另一方面，指定模块107可用于借助于参考工具或模块102将结果及详细信息分配给选择。因此，此过程可包括但不限于向服务器103(更具体来说，服务器数据库108)上传、输入、选择、提交和/或传送命令、动作和/或信息。依据所使用的实施例，指定模块107可为自动的或手动的。

根据此实施例，指定结果及详细信息的目的是为了向交互式应用程序111的用户提供期望的结果，如显示图像或视频、提供对信息或附加内容的访问、用于保存物项和/或采购产品的选项以及其他可能性。这些结果的实例可为但不限于视觉、听觉和/或感官体验，包括呈现增强现实体验、显示视频、显示图像、播放音乐、产生声音和/或语音响应以及提供类似振动的触觉体验。结果的其他实例可包括类似保存、采购、共享、保留等动作。在一些实施例中，某些结果可提供交互的可能性，如点击、按压、轻敲、划动、手势、语音命令等以产生附加的期望结果。

另外，根据此实施例，详细信息表示参考工具或模块102的用户想要呈现的信息和/或内容或者使其可与结果一起访问。详细信息的实例可包括产品/服务信息或规格(例如品牌、产品/服务名称、制造商、型号、颜色、大小、类型、标题、说明、关键词、图像、价格、产品/服务选项、交付选项、装运细节等)、位置、传记、影片、电影预告片、幕后场景、删除场景、彩蛋场景、导演剪辑及任何其他附加内容。与内容101相似，详细信息可采取(但不限于)文件的形式，例如音频、图像或视频文件、URL或链接；并且详细信息可包括图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、计算机或程序代码或语言、或听觉/视觉/感官表示等以及任何此种信息或其组合。

另外，参考工具或模块102的用户可借助于指定模块107将单个结果或多个结果分配给同一选择。此种情况的实例可为，单个选择显示多个物项(如在同一帧内呈现人物、其服装及位置的电影场景)，参考工具或模块102的用户为每一物项分配单独的结果。例如，当与角色或演员进行交互时，可向角色或演员分配供应关于所述演员的更多信息的结果；角色穿着的服装可被分配供应采购选项的结果；并且所述位置(例如，餐馆)可被分配供应预订选项的结果。另一方面，即使选择表示多个物项，参考工具或模块102的用户也可选择为整个选择仅分配一个结果。此种情况的实例可为，内容101是电影海报并且参考工具或模块102的用户选择整个内容101作为选择，以便分配显示海报中正在广告的电影的预告片的结果。此外，根据此实例，参考工具或模块102的同一用户稍后可选择编辑此结果并且将附加的多个结果分配给电影海报内呈现的物项。

另外，在本发明的一些实施例中，指定模块107可提供在数字市场(或任何其他类型的电子商务)上放置和/或列出产品、服务、物项、内容和/或任何其他详细信息的可能性，所述数字市场可由交互式应用程序111的用户访问(如以下在交互式应用程序111下进一步描述)。依据所使用的实施例，此过程可为自动的或手动的。

另外，在本发明的一些实施例中，当借助于指定模块107输入详细信息时，参考工具或模块102可要求并提供自动或手动验证过程(与在参考工具或模块102下针对内容101所讨论的过程相似)，以用于基于质量、格式、文件大小、分辨率、文件类型或系统100所支持的详细信息所需的任何其他标准来批准或拒绝详细信息(在图1中示出为详细信息与参考工具或模块102之间的“批准/拒绝”)。如果被拒绝，则可向参考工具或模块102的用户呈现“不合规警告”或“错误”，以要求纠正某些标准以继续进行，或者可简单地使此过程停滞并且要求符合适当标准的不同的详细信息。然而，如果满足批准，则参考工具或模块102可继续将详细信息上传、传送或输入到服务器103中。

同样，在一些实施例中，当利用参考工具或模块102上传、输入和/或传送详细信息时(并且由参考工具或模块102批准)，也可通过一个或多个过程(例如批准/拒绝分析模块104)自动验证所述详细信息，因此可确定信息是否符合用作详细信息所需的要求。如前所述，批准/拒绝分析模块104考虑的要求可为安全因素、定义特性、唯一性、质量、内容类型、格式、文件大小、分辨率、文件类型、容量、可分辨性等。此外，在本发明的一些实施例中，当详细信息被批准/拒绝分析模块104拒绝时，可向参考工具或模块102的用户呈现“不合规警告”或“错误”消息，以要求在准许进行之前纠正与指定模块107相关的某些标准，或者可简单地使此过程停滞并且可要求符合适当标准的不同的详细信息。此种“拒绝警告”或“错误”消息可能会也可能不会提供需要纠正的内容的说明。如果获得批准，上传的详细信息可被存储、保存和/或维护在服务器103中，或者在服务器103可与之通信和/或从其获得数据和/或向其发送数据的任何类型的储存库中(如在服务器数据库108下描述)。

另外，对于一些实施例，指定模块107可要求参考工具或模块102的用户将结果及详细信息手动提交或保存到服务器103中，以便完成对其进行分配的过程。在其他实施例中，参考工具或模块102可在此过程期间或在其完成之后自动(连续地或系统地)将输入的结果及详细信息提交或保存到服务器103中。

如图1中所示并且在本发明的一些实施例中，内容101、选择、结果及详细信息以及参考内容109(以下解释)、简档及账户信息(对于参考工具或模块102及交互式应用程序111二者)以及为分析模块117产生的数据(以下在分析模块117下进一步解释)可存储、保存和/或维护在例如数据库等一个或多个储存库中，使得它们可被参考工具或模块102和/或交互式应用程序111访问(如以下在单个访问地点或模块115下进一步讨论)。此外，这些储存库可为服务器103的组件，或者也可为服务器103可与之进行通信和/或从其获得数据和/或向其发送数据的服务器103外的任何类型的储存库。此种情况的一个实例可为在服务器103内运行的数据库，为清楚起见在图1中将其标记为服务器数据库108。

根据此实例并且在本发明的一些实施例中，参考工具或模块102的用户可访问服务器数据库108，目的是但不限于：访问他们的简档账户信息；创建、更新、管理和/或完成存储内容101、选择、结果、详细信息及参考内容109的过程；输出内容(如以下在输出内容/选择116下进一步解释)；和/或查看及检索数据分析(如以下在分析模块117下进一步描述)。在本发明的一些实施例中，所有这些功能可在数据库管理系统的帮助下进行(如以下在单个访问地点或模块115下讨论)。

另外，根据此实例并且在一些实施例中，交互式应用程序111可访问服务器数据库108，目的是但不限于：向交互式应用程序111的用户提供他们的账户信息以及借助于指定模块107存储及分配的结果及详细信息(如在交互式应用程序111下描述)。因此，交互引擎模块114和单个访问地点模块115可用于访问服务器数据库108(如在交互式引擎模块114及单个访问地点模块115下描述)。

在本发明的一些实施例中，参考工具或模块102的用户可在服务器数据库108中存储、保存和/或维护选择，目的是建立用于触发指定结果的匹配参考(如以下在请求A及交互引擎模块114下进一步讨论)。为清楚起见，这些匹配参考在图1中被标记为参考内容109。根据此实例，这可在指定模块107之前、期间和/或之后进行并且可为自动的或手动的。另外，根据此实例，构成参考内容109的内容将取决于参考工具或模块102的用户所施行的过程以及本发明的适当实施例。在本发明的一些实施例中，由自动选择模块105和/或选择检查和手动选择模块106(遵循先前描述的过程)做出的选择可作为参考内容109存储、保存和/或维护在服务器数据库108中。依据所使用的实施例，选择可构成内容101的全部或部分(如在自动选择模块105下建立)。在本发明的其他实施例中，可能是作为整体并且不具有选择的内容101可作为参考内容109。如果适当的实施例允许在通过批准/拒绝分析模块104接收批准之后立即将内容101直接存储、保存和/或维护为参考内容109，并且不经过选择过程(如自动选择模块105和/或选择检查和手动选择模块106)，则可能出现此种情况。在一些实施例中，如在服务器数据库108下建立的参考内容109可由参考工具或模块102的用户访问、存储、改变、搜索、修改、定义、控制、检索、创建、操纵、删除、编辑、启用、禁用、更新、管理和/或维护。

如图1中所示，在本发明的一些实施例中，装置110可表示可对装置外内容112(如以下在装置外内容112下进一步定义)进行读取、检测、感测、捕获、接收、解释和/或响应并且将这些读取、检测、感知、感测、捕获、接收和/或解释传输、链接、传递和/或传送到交互式应用程序111的装置、装备和/或设备。此外，在一些实施例中，装置110可表示如下的装置、装备和/或设备：所述装置、装备和/或设备可对装置播放的内容113(如以下在装置播放的内容113下进一步定义)进行显示、播放、投影、发出和/或执行(传递)，并且对装置播放的内容113进行读取、检测、感测、捕获、接收、识别、解释和/或响应并且将这些读取和/或由所述动作产生的任何其他数据传输、链接和/或传送到交互式应用程序111以向用户传递信息。在其他实施例中，装置110可为二者的组合。另外，对于一些实施例，装置110的用户可能够启用和/或禁用一些或所有这些功能。出于本发明的目的，用语“传递”、“正在传递”及“被传送”可互换使用，以包括允许系统显示信息/数据的任何可用手段，而不管它是视觉媒体、听觉媒体、触觉媒体等等。

根据以上实例，装置110可为任何类型的装置、装备和/或设备(便携式或非便携式)，例如但不限于智能电话、平板电脑、膝上型计算机、台式计算机、电视显示器、监控器、VR设备、AR设备、镜片、透镜、神经装置、智能手表和/或计算装置和/或电子装置。

在本发明的一些实施例中，装置110可为容纳、托管、持有和/或支持如图中1所示的交互式应用程序111的装置、装备和/或设备(便携式或非便携式)。在其他实施例中，装置110可为单独的装置、装备和/或设备(便携式或非便携式的)，其不容纳、托管、持有和/或支持交互式应用程序111，但仍可向交互式应用程序111传输、链接和/或传送上述读数、检测、捕获、接收和/或解释。在又一些实施例中，装置110可为二者的组合。此种情况的一个实例可为，交互式应用程序111的用户使用智能眼镜与智能电话的组合作为装置110，使得用户可用眼镜捕获装置外内容112，并且通过使用装有交互式应用程序111的智能电话来访问所捕获的内容。装置110可包括位置模块，例如但不限于GPS、WiFi、卫星或任何其他内部或外部模块，其可向系统和/或交互式应用程序111提供与用户和/或装置110的位置(例如，纬度、经度)相关的信息。根据本发明，此位置信息可与其他信息结合使用，以增强用户的体验。例如，如果用户与装置110内的电影流进行交互，则系统可基于所确定的装置110的位置向用户提供购买电影票及最近电影院列表的选项。当然，此种定位功能也可在本发明的其他实施例中实施，其中用户体验和/或与系统的交互可通过位置来增强。

对于一些实施例，交互式应用程序111可用于与视觉、听觉和/或感官内容进行交互。根据此实例，这些交互是为了获得和/或作用于由参考工具或模块102(参见指定模块107)的用户分配给内容的结果。此外，此类交互可向交互式应用程序111的用户提供保存与装置外内容112和/或装置播放的内容113相关联的物项(如以下进一步定义)、访问和/或收集信息、获取附加内容、进行进一步动作(例如采购)和/或体验由参考工具或模块102的用户指定的任何其他可能结果的能力。

另外，在一些实施例中，交互式应用程序111可包括或提供对一个或多个用户界面的访问，这些用户界面可允许用户对账户进行创建、认证、登录、注销、编辑和/或维护。因此，交互式应用程序111还可向用户提供将保存的物项、信息和/或内容存储和/或组织到账户中和/或对它们进行检索、创建、操纵、删除、编辑、更新、管理和/或维护能力(如以下在单个访问地点模块115下进一步描述)。此种情况的一个实例可为将此信息分类或组织在物项列表等中。除此之外，在本发明的一些实施例中，交互式应用程序111可提供电子商务服务和/或作为市场的功能，使得交互式应用程序111的用户可尤其采购、租赁、租借、许可和/或保留参考工具或模块102的用户借助于指定模块107列出的保存的物项(产品及服务)、信息和/或内容。此种情况的实例可为，交互式应用程序111的用户捕获并保存在电影、广告牌及电视广告中做广告的多个产品到应用市场内他/她的账户中的物项列表中。在方便时，交互式应用程序111的用户可通过访问物项列表来容易地返回到保存的产品，并且直接采购它们；因此，使用交互式应用程序111作为一站式商店。

在本发明的一些实施例中，交互式应用程序111可采取本机应用、网络应用程序、软件或任何类型的计算机化程序、系统、门户、平台或工具或模块的形式，其可利用由装置110从装置外内容112和/或装置播放的内容113读取、检测、捕获、接收、识别、解释和/或响应的读数和/或数据。另外，根据此实例，交互式应用程序111可具有创建、引发、发送和/或命令请求的能力以及读取、接收、检测、解释和/或捕获响应以便与服务器103进行通信的能力。另外，根据此实例，依据所产生的请求及响应，交互式应用程序111及服务器103可通过启动交互引擎模块114(如以下在交互引擎模块114下进一步描述)和/或单个访问地点模块115(如以下在单个访问地点模块115下进一步描述)来进行通信。为清楚起见，这些请求及响应在图1中表示为请求A、响应A、请求B及响应B，并且也将在以下进行进一步解释。

在系统100的另一方面，装置外内容112可为在装置110外显示、播放、呈现、展示、流传送、投影、发出、存在和/或执行的任何类型的内容。因此，装置外内容112可包括图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、计算机或程序代码或语言、或听觉/视觉/感官表示等以及任何此种信息或其组合。此外，装置外内容112可采取图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、横幅、服装、对象、结构、艺术、有声书籍、计算机游戏、视频游戏、软件、广告、标牌、虚拟现实内容、增强现实内容、混合现实内容、交互式内容、现场表演、体育赛事或戏剧放映等形式。除此之外，在一些实施例中，装置外内容112可独立于内容101。换句话说，参考工具或模块102的用户用来建立参考内容109的内容101不必是与被播放为装置外内容112相同的文件；因此，它可构成不同的文件和/或介质，只要它提供相同的内容。这个情况的一个实例可为，电影制片人决定在电影上映后让他/她的电影具有交互性。为此，他/她可使用与正在影院放映的电影文件分开的电影文件，然而一旦参考内容109被创建并且结果及详细信息被指定，所有影院放映将自动充当装置外内容112(不需要对它们进行任何改变)，因为所有放映都显示相同的内容。因此，电影观众可立即使用交互式应用程序111并获得指定的结果。

在本发明的又一方面，装置播放的内容113可为在装置110和/或交互式应用程序111内和/或由装置110和/或交互式应用程序111显示、播放、呈现、展示、流传送、投影、发出、存在、传送和/或执行的任何类型的内容。因此，根据此实例，装置播放的内容113可包括图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、计算机或程序代码或语言、或听觉/视觉/感官表示等以及任何此类信息或其组合。另外，根据此实例，装置播放的内容113可采取图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、有声书籍、计算机及视频游戏、软件、虚拟现实内容、增强现实内容、混合现实内容等形式。另外，根据此实例，装置播放的内容113可采取交互式内容和/或输出内容/选择116的形式(如以下在输出内容/选择116下进一步解释)。此外，在本发明的一些实施例中，与装置外内容112相似，装置播放的内容113可独立于内容101。

再次参照图1，在系统100的另一方面，请求A可表示由交互式应用程序111向交互引擎模块114(直接或间接)做出的任何单一或多种类型的请求、恳求或请愿，目的是辨别、识别、检测及匹配装置外内容112的全部或部分和/或装置播放的内容113与参考内容109，以便触发、启用或提供响应A。

在本发明的一些实施例中，此种辨别、识别、检测和/或匹配可借助于处理引擎或单元或者能够从交互式应用程序111接收图像、音频和/或感官数据并辨别、识别、检测和/或匹配此数据与参考内容109的任何其他组件、程序、应用或软件来进行。为清楚起见，此处理引擎、单元、组件、程序、应用程序或软件在图1中被标记为交互引擎模块114。

因此，在本发明的一些实施例中，当装置110从装置外内容112检测到图像并将其传输到交互式应用程序111时，交互式应用程序111可自动地(连续地或系统地)或手动地(通过要求用户的动作，例如点击、敲击、滑动、手势、语音命令等向交互引擎模块114发送请求A，以使其使用图像识别或计算机视觉在服务器数据库108中进行搜索，从而识别、检测或匹配来自装置外内容112的检测到的图像与参考内容109，以用于触发、启用或提供响应A。相似地，另一替代方案可为交互式应用程序111自动地(连续地或系统地)或手动地(通过要求例如点击、滑动、手势或语音命令)向交互引擎模块114发送请求A，以使其使用音频辨别、音频识别、人耳可检测或不可检测的音频信号或命令，或者任何音频相关的一个或多个过程来识别、检测或匹配来自装置外内容112的检测到的音频与参考内容109，以便触发、启用或提供响应A。又一实例可为其使用任何其他类型的感官辨别、识别、信号或命令(例如触觉技术或经验)来识别、检测或匹配装置外内容112的全部或部分和/或装置播放的内容113与参考内容109。

再次参照图1，响应A可表示任何单一或多种类型的响应、动作或命令，交互引擎模块114可直接或间接地将这些响应、动作或命令发送给交互式应用程序111作为对请求A的响应，以便产生指定的结果(如在指定模块107下描述)。例如，在一些实施例中，响应A可为有限的响应，如用于显示或传递图像、播放视频、向交互式应用程序111的用户提供信息的命令。根据此实例，当交互引擎模块114实现关于请求A的识别、匹配或检测时，它可向交互式应用程序111发送响应A，以便在交互式应用程序111内显示图像、播放视频或显示信息。然而，在其他实施例中，响应A可为供交互式应用程序111的用户与之进行交互的“行动号召”。例如，当交互引擎模块114实现关于请求A的识别、匹配或检测时，它可向交互式应用程序111发送响应A，以便产生鼓励用户采取行动的交互增强现实体验和/或任何其他交互体验(例如可点击按钮或可点击图像)。根据此实例，交互式应用程序111的用户可对此“行动号召”采取行动或与之进行交互，并产生请求B(如以下在请求B下定义)。根据上文，另一实例可为当交互引擎模块114确定关于请求A实现识别、匹配或检测时，它可向交互式应用程序111发送响应A，此响应A产生例如声音、振动或任何类型的指示的结果，使得交互式应用程序111的用户理解他们可采取例如点击显示器、按下按钮、打手势或发出声音和/或任何挺举/视觉/感官表示的动作来产生请求B。

在本发明的另一方面，请求B可表示由交互式应用程序111的用户(直接或间接)向单个访问地点模块115做出的任何单个或多个类型的请求、恳求或请愿。

在本发明的某些实施例中，这些请求可作为响应A的结果而做出和/或也可由与输出内容/选择116的交互而产生，如以下进一步解释。因此，请求B的一个实例可为，交互式应用程序111的用户对作为响应A的结果而发起的表现为增强现实体验和/或任何其他交互式体验(例如可点击按钮或可点击图像)的行动号召采取行动，这向单个访问地点模块115发起请求以获得期望的结果，如在物项列表中存储和/或显示物项信息。相似地，另一实例可为，交互式应用程序111的用户按照作为响应A的结果而产生的行动号召(例如声音、振动或任何类型的指示或警报)行动，这向单个访问地点模块115发起请求以获得期望的结果，例如在物项列表中存储和/或显示物项信息。此外，另一实例可为，交互式应用程序111的用户对例如热点、标签、可点击的按钮或图像、声音或任何其他类型的警报的行动号召，此种行动号召可叠加在输出内容/选择116上、由输出内容/选择116引起和/或包括在输出内容/选择116中(如以下在输出内容/选择116下描述)，这向单个访问地点模块115发起请求以获得期望的结果，例如在物项列表中存储和/或显示物项信息。

参照图1，单个访问地点模块115用于表示系统100的组件，此组件用作数据库管理系统，用于对服务器数据库108内的所有数据进行访问、存储、改变、搜索、编辑、管理、修改、定义、启用、禁用、操纵、创建、输入、删除、控制和/或检索，以用于与参考工具或模块102及交互式应用程序111相关的所有目的，除了分配给交互引擎模块114的那些目的。因此，参考工具或模块102及交互式应用程序111可通过与单个访问地点模块115接合、利用单个访问地点模块115和/或与单个访问地点模块115进行通信来向它们的用户提供访问、存储、改变、搜索、编辑、管理、修改、定义、启用、停用、操纵、创建、输入、删除、控制及检索与它们在服务器数据库108内的账户相关的某些信息、数据和/或文件的能力。根据此实例并且在本发明的一些实施例中，参考工具或模块102的用户可能够将这些动作的全部或一些应用于已存储在服务器数据库108中的其账户中的内容101、选择、详细信息、结果和/或参考内容109；因此，当这些用户与装置外内容112和/或装置播放的内容113进行交互时，他们可具有更新及改变(在任何时间)他们正在提供给交互式应用程序111的用户的体验的能力。相似地，他们也能够将所有或一些这些动作应用于存储在服务器数据库108中的他们的账户信息；例如他们的个人资料信息、活动详情及任何其他相关数据。

相比之下，在一些实施例中，交互式应用程序111的用户也可能够将这些动作中的全部或一些应用于存储在服务器数据库108中的他们的账户下的信息；因此，他们可管理他们的物项列表、编辑简档信息、访问保存的物项及细节、检索他们的交易历史、改变他们的采购细节、推荐产品、调出采购链接以及任何其他与他们的账户相关的动作。根据先前的实例并且在一些实施例中，单个访问地点模块115的使用可向参考工具或模块102的用户和交互式应用程序111的用户提供从不同种类的参考工具或模块102(例如，SAAS平台、本地应用)访问他们的账户(以及应用上述任何动作)的能力，装置110(例如，手机及膝上型电脑)和/或交互式应用程序111(例如，本地应用及网络应用)每次访问时都保持一致的体验，只要所使用的参考工具或模块102、装置110和/或交互式应用程序111可参与、利用、通信单个访问地点模块115并从其获得许可。因此，在本发明的一些实施例中，参考工具或模块102的用户及交互式应用程序111的用户可通过多种方式访问存储在他们账户中的信息，这允许更同质及更少限制的体验。

另外，在本发明的一些实施例中，单个访问地点模块115可服务和/或提供电子商务服务，用于借助于交互式应用程序111处理与商品及服务的采购及销售相关的支付和/或其他交易。这些服务可包括任何类型的电子商务及数字市场模式，如企业对消费者(B2C)、企业对企业(B2B)、消费者对消费者(C2C)及消费者对企业(C2B)，并且可涉及零售、批发、直运、众筹、订阅、实物产品和/或数字产品及服务。如图1中所示，电子商务服务可在单个访问地点模块115处直接提供或者经由市场模块119间接提供或者以两种类型服务的组合提供。

此外，根据此实例，单个访问地点模块115可采取处理引擎或单元的形式或者能够实现本文中归于单个访问地点模块115的功能及服务的任何其他组件、程序、应用程序或软件的形式。

再次参照图1，响应B可表示任何单一或多种类型的响应、动作或命令，单个访问地点模块115可直接或间接地将这些响应、动作或命令发送给交互式应用程序111作为对请求B的响应，以便产生指定的结果(如在指定模块107下描述)。例如，当单个访问地点模块115接收到请求B时，它可将物项存储在物项列表中、进行采购、共享信息、进行预订、提供附加内容和/或所请求的任何其他动作(包括提供进一步动作的选项)；以及向交互式应用程序111的用户提供所请求的动作已经完成的警告。因此，在一些实施例中，特定响应B可导致进一步的响应B。这种情况的一个实例可为响应B，响应B向他/她与之交互的交互式应用程序111的用户提供选项菜单，以向单个访问地点模块115产生另一请求B，单个访问地点模块115转而又提供另一响应B；且以此类推。

再次参照图1，在一些实施例中，交互引擎模块114、请求A及响应A可能是不需要的或被绕过的；从而避免使用辨别、识别、检测和/或匹配过程(如在交互引擎模块114下描述)。在这些实施例中，可实施替代选项以允许交互式应用程序111的用户与装置播放的内容113进行交互并且产生请求B而不具有请求A或响应A。因此，在这些实施例中，交互是通过单独与单个访问地点模块115接合来实施的，因此不使用交互引擎模块114。由于仍然使用单个访问地点模块115，因此在请求B之后进行的所有过程如前面针对系统100所讨论的那样进行；包括参考工具或模块102的用户在他们认为合适时更新结果及详细信息的能力并且存储每次交互的数据。因此，改变的内容只是针对交互引擎模块114讨论的过程。

例如，在本发明的一些实施例中，参考工具或模块102的用户可具有输出他们已使其交互的内容(例如，具有选择、指定结果及详细信息的内容101)的选项，使得交互式应用程序111的用户可与其进行交互，而无需辨识、识别、检测和/或匹配过程。在其他实施例中，为了实施相同的目的，可选择仅输出具有指定结果及详细信息的选择(其可与装置播放的内容113同步)。

对于这些实施例中的一些，可以不同的方式实施输出。一个实例可为交互式内容(例如，具有选择、指定结果及详细信息的内容101)被呈现为通过流传输的装置播放的内容113，使得交互式应用程序111的用户可与其进行交互以产生请求B而不具有请求A或响应A。另一个实例可为仅选择(具有指定结果及详细信息)被流传输并因此与装置播放的内容113同步。在又一些其他实施例中，参考工具或模块102的用户可输出交互式内容(例如，具有选择、指定结果及详细信息的内容101)的可下载文件，此文件具有嵌入的标签、链接、热点或行动号召，交互式应用程序111的用户在将其作为装置播放的内容113播放时可与进行之交互。因此，在本发明的其他实施例中，可采用相似的方法，但可下载文件仅包含标签、链接、热点、按钮或行动号召，其可与作为装置播放的内容113正在播放的内容同步。

出于例示的目的，这些输出(输出选择、指定的结果以及包括或不包括内容101的详细信息)在图1中被呈现为输出内容/选择116。

在本发明的另外的方面，交互式应用程序111的用户的交互的细节及数据(例如响应A及请求B)以及通过单个访问地点模块115及交互引擎模块114开发的任何其他数据可由服务器103收集到服务器数据库108和/或任何其他储存库中。另外，根据此实例并且依据本发明的实施例，此数据可由服务器103、参考工具或模块102和/或其他工具或模块来分析。此外，在本发明的某些实施例中，参考工具或模块102的用户可能够借助于参考工具或模块102的分析组件来访问此数据和/或分析；出于例示目的在图1中表示为分析模块117。然而在其他实施例中，参考工具或模块102的用户可通过其他方式接收那些数据和/或分析，例如电子邮件、文本、传统邮件、数据传送等。

图2以流程图的形式表示在根据本发明的一个实施例中将内容101、选择、结果及详细信息上传及存储到服务器数据库108中的过程的一个实例的概述。必须注意的是，图2表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中，将此过程描述为过程200。过程200从步骤201开始，此时用户通过网络浏览器或应用程序打开参考工具或模块102，并登录到他/她的账户。出于此实例的目的，在此种启动之前，用户已经利用参考工具或模块102创建了账户。然后是步骤202，在步骤202中用户借助于参考工具或模块102的界面输入内容101。接下来是步骤203，其示出参考工具或模块102批准或拒绝输入的内容101；可基于质量、格式、文件大小、分辨率、文件类型或系统100支持的内容101所需的任何其他标准的过程。接下来是步骤204，其示出如果内容101被批准，则参考工具或模块102会将其上传到服务器103，但是如果被拒绝，则用户可能会收到不合规警告并且被要求做出改变或解决问题。然后步骤205表明一旦内容101被批准，服务器103接收此内容并通过批准/拒绝分析模块104对其进行分析。接下来是处理两种可能性的步骤206。第一个是如果内容101被批准/拒绝分析模块104批准，则参考工具或模块102将内容101存储到服务器数据库108中。相反，第二种可能性是内容101可能被拒绝，在这种情况下，用户可能接收到不合规警告，并且可能需要修复(相似于在图1的批准/拒绝模块104的分析下呈现的)。之后是步骤207，其指示一旦内容101被批准/拒绝分析模块104批准并存储在服务器数据库108中，它便可通过自动选择模块105。一旦自动选择模块105的过程完成，便进行步骤208，这需要参考工具或模块102将自动选择存储在服务器数据库108中。接下来，在步骤209中，用户继续选择检查及手动选择模块106，以确认自动选择和/或手动添加其他选择。然后，当进行确认选择及手动选择时，参考工具或模块102将手动确认/添加的选择作为参考内容109存储到服务器数据库108中，如步骤210中所述。接下来，在步骤211中，用户继续进行指定模块107，并为选择指定结果及详细信息。一旦完成，步骤212通过参考工具或模块102将结果及详细信息存储在服务器数据库108中来实现。

图2a表示本发明实施例的一个实例的例示，其特征在于当处于SaaS平台的形式时，具有打开的上传或输入标签的参考工具或模块102的界面。必须注意的是，图2a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。对于此实例，参考工具或模块102(为清楚起见，在此实例中标记为200a)已在浏览器中打开，并且已经选择了“上传”标签205a，使得内容上传或输入的3个选项可用。首先，示出上传选项(201a)，其可通过点击上传图标(被绘示为带有箭头的云)或者通过将文件形式的内容拖放到图标上来发挥作用。第二，输入选项(202a)变得可用并且可通过用笔点击绘示为页面的图标来获得对它的访问。第三个选项可通过在所提供的空间中书写或复制粘贴希望上传的内容的URL(203a)并按下回车键来发挥作用。在此实例中，窗口左侧还以文件夹及文件结构的形式显示活动部分。出于例示的目的，这个实例显示一个打开的“活动”文件夹(204a)，并且在“活动”文件夹以下属“于活动”文件夹的是“所有”活动、“活动A”及“活动B”的复选框。此实例还示出当“上传”标签(205a)是活动的但没有选择活动的复选框时，将此上传选项作为默认窗口的可能性。此外，图2a还用于示出当已经创建账户时所有这些动作都是可用的，并且因此绘示出账户1(206a)。

图2b是当处于SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其中上传或输入标签打开且输入内容101。必须注意的是，图2b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。此实例示出当点击图2a的上传选项(201a)(在此实例中标记为200b)时，或者当内容被拖放到上传窗口上时，出现上传窗口(201b)的可能性。在此实例中，提供了用于提供物项名称(202b)的空间以及用于选择此物项所属的活动(203b)的复选框。图2a还绘示出示出文件名(205b)的空间，此文件名用于示出输入的文件被参考工具或模块102的批准/拒绝。此外，图2a还示出了上传图标(204b)，可按下此图标以将信息及内容提交给批准/拒绝分析模块104。

图2c是当采用SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其中上传或输入标签打开并示出已被批准/拒绝分析模块104拒绝的内容101的不合规警告通知。必须注意的是，图2c表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。根据图2中的步骤205，当内容101被上传时，服务器103借助于批准/拒绝模块104对其进行分析。然后根据图2的步骤206，它批准或拒绝内容101。因此，如果被拒绝，用户会收到不合规警告并且需要进行修复。图2c示出在本发明的一个实施例中此种不合规警告(200c)的一个实例。

图2d是当采用SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其示出所有活动并且上传的内容101经历自动选择模块105。必须注意的是，图2d表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图2d展示了当选择“所有”活动复选框(201d)时可能发生的情况。在此实例中，示出所有活动中每一内容101物项的标题(202d)。此外，此实例绘示出活动A的物项3仍在经历自动选择过程(203d)；这由93％的进度条示出。由此，图2d试图示出当一个物项正在经历自动选择过程时，用户在其他物项上继续利用参考工具或模块102的特征(200d)的可能性。此外，在此实例中，每一区块都描述了基本信息，特别是物项名称、其所属活动的身份及上传日期；以及“更多+”选项，以允许与物项相关的进一步信息或动作。另外，示出搜索选项(204d)以展示搜索特定物项或活动的可能性。

图2e是当处于SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其中活动A打开并且内容101经历自动选择模块105。必须注意的是，图2e表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。在图2e中，活动A(200e)的复选框被绘示为选中的并且显示了三个物项。此外，在右窗格中显示了三个区块(尤其是属于活动A的区块)，而不是图2d中显示的五个区块。此外，此实例绘示出活动A的物项3仍在经历自动选择模块105过程(201e)。

图2f是当采用SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其中内容101经历指定模块107以将结果分配给选择。必须注意的是，图2f表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图2f示出在本发明的一个实施例中参考工具或模块102的用户如何通过指定模块107将结果分配给内容101的选择的实例。在此例示中，在时间线(201f)内描绘了内容101(根据此实例的电影)及其选择。视频时间线(203f)下方的拉长圆圈表示自动选择模块105和/或选择检查和手动选择模块106先前对内容101做出的选择。放大的缩略图像(207f)表示参考工具或模块102的用户想要分配结果的选择。此图像可通过点击任何选择(203f)、在视频时间线上移动光标(202f)、用回放控制(216f)播放视频并停在期望的选择上，或者通过选中具有较小图像缩略图(211f)的列旁边的复选框(205f/210f)中的一个来出现，其中较小图像缩略图(211f)表示具有结果的选择。一旦用户选择了他/她想要分配结果的选项，他/她可通过点击“添加结果”(209f)来继续进行。根据此实例，此特征(209f)可向用户提供添加围绕耳环(206f)的边界框的选项作为期望的结果之一。另外，用户可通过选择“结果”菜单(214f)下的“S”来包括“保存物项”作为结果的选项。为了使此种交互对交互式应用程序111的用户可用，参考工具或模块102的用户可通过选中“结果”菜单旁边及“启用/禁用”(215f)下的复选框(215f)来启用指定的交互。因此，参考工具或模块102的用户可在任何时间停用这些交互中的任何一者，从而禁用交互式应用程序111的用户的交互的可能性。此过程也可应用于内容101的音频，其在视频时间线下的例示中被描绘为音频轨道(204f)。为了清楚起见，参考工具或模块102可指定用户正在交互的内容的类型，如选择的缩略图旁边的“类型”(212f)下的例示所示，其绘示出表示视频、音频或触觉内容的图标。此外，参考工具或模块102可向用户提供向名称输入名称或类别的选项，如“名称”下的例示所示(213f)。图2f还为参考工具或模块102的用户呈现通过点击图标208f来预览他们正在分配给选择的结果的选项。

图2g用于示出当采用SaaS平台的形式时参考工具或模块102的界面的一个实例，其中内容101经历指定模块107以输入详细信息。必须注意的是，图2g表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。在完成图2f中描述的过程之后，参考工具或模块102的用户可继续或移动到图2g中示出的过程，此过程在相同的界面中示出，但处于标题为“详细信息”(201g)的新标签下。根据此实例，选中的选择(来自图2f中的203f)可表示参考工具或模块102的用户将输入指定结果的详细信息的选择。因此，提供菜单(200g)用于选择应用哪个详细信息工具或模块(产品/信息/内容)；展示了具有不同工具或模块的可能性，这些工具或模块与期望的结果类型所需的信息有关。在此实例中，用于“产品”的工具或模块被启用(203g)，从而提供用于输入关于产品的详细信息的选项(相似于将产品列入数字市场所需的选项)，包括产品图像的上传(207g)，例如价格、品牌、大小等产品规格(206g)的输入以及用于认证目的的供应商信息(205g)。此外，给出标记为“市场”(208g)的复选框，以绘示出参考工具或模块102的用户启用此产品的采购选项的选项，并且因此使其可由交互式应用程序111的用户采购。

图2h表示当采用SaaS平台的形式时参考工具或模块102的界面的一个实例的例示，其示出用于提交或输出交互式内容的选项。必须注意的是，图2h表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。在此实例中，图2h绘示出提交(200h)选择及指定(结果及详细信息)的选项，以便将它们存储到服务器数据库108中，从而允许交互式应用程序111的用户与交互式内容进行交互。图2h还展示了用于图1中在输出内容/选择116下讨论的目的的导出选项(201h)；以及用于共享(例如但不限于通过社交或私人网络共享、共享预览、共享工作文件、共享选择和/或详细信息等)。

图3以流程图的形式表示经历选择检查及手动选择模块106的内容101的过程的实例的简化概述。必须注意的是，图3表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性性。为清楚起见，在此实例中将此过程描述为过程300。过程300从步骤301开始，在步骤301中内容101已经被批准/拒绝分析模块104批准，并且已经历自动选择模块105。因此，根据步骤302，用户通过参考工具或模块102访问由自动选择模块105做出的选择列表。之后是步骤303，由此用户利用参考工具或模块102批准或检查他/她想要保留的自动选择。此外，用户然后可继续进行步骤304，其表明他/她也可利用参考工具或模块102手动选择自动选择模块105错过的内容101的期望部分。

图3a表示当前发明的一个实施例的一个视觉实例，此实例是内容101经历视觉内容的选择检查及手动选择模块106的过程。必须注意的是，图3a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。根据此实例，此过程开始于内容101已被图1中所绘示的批准/拒绝分析模块104批准(301a)。因此，此实例随后通过绘示所选择的两个物项(由周围的边界框指示)来示出构成批准后的下一步骤的一种可能性的模块，即自动选择模块105(302a)。因此，对于此实例，应注意，自动选择模块105中的选择可由自动选择内容101的全部或部分的一个或多个过程或工具或模块组成。接下来，图3a通过在由自动选择模块105自动选择的物项旁边的复选框中的一者中示出复选标记来绘示选择检查106(303a)，这暗示参考工具或模块102的用户决定保持对所选物项中的一者的选择。接下来，图3a通过示出椅子物项上的光标、随后是椅子周围的边界框及它旁边的复选框(305a)的出现来示出手动选择模块106的一个实例(304a)；其后是包括已被选中的复选框的图像(306a)，以基于手动选择椅子的想法来演示对椅子的选择。

图3b是当前发明的一个实施例的视觉实例，其是内容101经历音频内容的选择检查和手动选择模块106的过程。必须注意的是，图3b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。根据本发明的一个实施例的此实例，此过程开始于内容101已被图1中所绘示的批准/拒绝分析模块104批准(301b)。因此，此实例然后通过绘示出被选择的声音轨道(302b)来示出构成批准后的下一步骤的一种可能性的模块，即自动选择模块105(302b)，其由周围的边界框及它旁边的复选框(303b)来指示。因此，对于此实例，应注意，自动选择模块105中的选择可包括自动选择内容101的全部或部分的一个或多个过程或工具或模块。接下来，图3b通过在由自动选择模块105自动选择的声音轨道旁边的复选框中的一者中示出复选标记(304b)来绘示选择检查106，这暗示参考工具或模块102的用户决定保持声音轨道的选择。接下来，图3b通过示出在对话轨道内的一个区域上的光标(305b)、随后出现围绕所述区域的边界框及其旁边的复选框(306b)来示出手动选择模块106的一个实例；其后是包括已被选中的复选框的图像(307b)，以表明此对话是手动选择的。

如所讨论的，在所提出的发明的一些实施例中，一旦内容101已借助于系统100变得可交互或可参与(例如，参考内容109)(包括但不限于本公开中呈现的任何过程)，装置110的用户便可能够参与此内容或其部分。为清楚起见，在以下一些附图中提供这些参与或交互的一些实例。必须注意的是，这些附图表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。

图4以流程图的形式表示用于显示在正在使用的装置外的视觉内容的实时物项识别系统的一个实例的概述。必须注意的是，图4表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程400。过程400开始于用户在装置110上打开交互式应用程序111，如步骤401中所建立的。出于此实例的目的，用户已在此种参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。然后是步骤402，在步骤402中用户将装置110的摄像机聚焦或指向装置外内容112或其部分(例如物项)。接下来是步骤403，在步骤403中装置110读取或捕获数据(例如，图像、文本或视频数据)并将其传输到交互式应用程序111，交互式应用程序111持续向交互引擎模块114发送请求A。然后在步骤404中，图4指示交互引擎模块114接收请求A并将此数据与服务器数据库108内的参考内容109进行比较。之后，根据步骤405，当交互引擎模块114识别出匹配时，交互引擎模块114向装置110内的交互式应用程序111发送响应A。接下来是步骤406，在步骤406中装置110内的交互式应用程序111接收响应A并显示增强现实体验，例如围绕对应的一个或多个物项的可点击边界框。

图4a示出利用智能电话从显示在装置外的视觉内容识别感兴趣的物项的实例。必须注意的是，图4a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。从上到下来看，图4a首先绘示出表示显示装置外内容112的屏幕或其他平台的矩形。在此实例中，矩形内的三角形表示在装置外内容112中示出的物项。然后，此实例接下来是指向下方的箭头，此箭头表示智能电话或装置110的相机正在接收或检测的视觉信息或数据。另外，在此实例中，可在智能电话或装置110内看到三角形，所述三角形表示在装置外内容112内示出的物项，此物项已被智能电话或装置110内的交互式应用程序111(402a)检测到。对于此实例，还必须注意，当装置110的相机聚焦于装置外内容112时，交互式应用程序111是打开的，从而发挥作用并向服务器103内的交互引擎模块114发送请求A。另外，此实例示出具有交互引擎模块114、服务器数据库108及单个访问地点模块115的服务器103的一种可能表示；还绘示出被检测为具有匹配参考内容109的物项(403a)。最后，可观察到，响应A被示出为指示交互引擎模块114对匹配的响应，并且其结果被绘示为在智能电话(装置110)中运行的交互式应用程序111内围绕三角形的AR边界框(401a)。

图4b示出当使用智能电话作为装置110从视觉装置外内容112识别感兴趣的物项时的用户体验的视觉实例。必须注意的是，图4b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。根据此实例，当在智能电话(装置110)上打开交互式应用程序111时，用户将智能电话的相机对准在装置外内容112的广告牌(401b)。然后，智能电话(402b)内的交互式应用程序111显示包围交互式应用程序111的用户可与之进行交互的物项的边界框(响应A)。

图5以流程图的形式表示用于从正在使用的装置外显示的视觉内容中捕获或保存信息的方法的一个实例的概述。必须注意的是，图5表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程500。过程500从步骤501开始，此时交互式应用程序111的用户轻敲或按下增强现实体验(边界框)从而选择所需物项。出于此实例的目的，用户已经在此中参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。接着是步骤502，在步骤502中作为步骤501中执行的动作的结果，交互式应用程序111向服务器103内的单个访问地点模块115发送请求B。接下来是步骤503，在步骤503中单个访问地点模块115接收请求B，将对应的物项信息存储在服务器数据库108中的用户账户中并发送响应B；在此实例中响应B是通知。然后在步骤504中，图5指示当用户方便时，用户可访问交互式应用程序111的物项列表。之后，根据步骤505，交互式应用程序111与单个访问地点模块115进行通信。接下来是步骤506，交互式应用程序111接收对经更新物项列表信息的访问。相应地，此过程继续进行步骤507，在步骤507中交互式应用程序111在物项列表下显示所需物项信息，并允许用户进行进一步的动作(例如采购)。

图5a示出利用智能电话来从正在使用的装置外显示的视觉内容捕获或保存物项信息的视觉实例。必须注意的是，图5a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图5a绘示出智能电话(装置110)，其具有打开的交互式应用程序111及已与参考内容109匹配并因此被交互式边界框(501a)包围的三角形或物项。相应地，图5a随后示出作为用户按下交互式边界框的结果的请求B，单个访问地点模块115通过在服务器数据库108中的用户账户的物项列表下存储对应的物项信息(503a)并发出产生指示物项被“保存”的通知的响应B来对此做出响应。在中间部分，图5a绘示出箭头(502a)以示出当用户方便时，他/她可使用交互式应用程序111(504a)来打开他们的物项列表；通过物项列表用户可选择采购任何所保存的物项。

图5b示出当使用智能电话作为“装置110”从“视觉装置外内容112”捕获或保存物项信息时用户体验的视觉实例的一种可能性。必须注意的是，图5b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。根据此实例，当在智能电话上打开交互式应用程序111(502B)并将智能电话的相机对准装置外内容112(501b)时，用户按下所需物项周围的边界框中的一者并产生请求B。然后，发生响应B(503b)，从而对物项周围的边界框着色以给出请求B已完成的警告或通知，以及显示红点以示出可在物项列表中查找所保存的物项。必须注意的是，根据此实例，即使用户只按下其中一个，两个耳环均显示为响应B的颜色，因为它们表示相同的产品或所需物项。

图6以流程图的形式表示用于从正在使用的装置播放的视觉内容中捕获或保存物项信息的两种方法的实例的概述。必须注意的是，图6表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程600。图6表明遵循相同过程的两种方法，不同之处在于，在如602所绘示的一种方法中，交互式应用程序111参与交互引擎模块114以便引发辨别过程(例如图像辨识等)以识别装置播放的内容113中示出的可收集物项并触发响应A(根据此实例，其可为AR体验)，而对于另一方法(如6-602所绘示)，交互式应用程序111作为装置播放的内容113或结合装置播放的内容113运行或播放输出内容/选择116，以便向用户展示识别可收集物项的行动号召。然后，依据所使用的方法，用户遵循步骤603和/或6-603，使得交互式应用程序111的用户轻敲/按下增强现实体验(603)或识别所需物项的行动号召(6-603)。出于此实例的目的，用户已经在此中参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。接下来是步骤604，在步骤604中作为步骤603和/或6-603中执行的动作的结果，交互式应用程序111向单个访问地点模块115发送请求B。接下来是步骤605，在步骤605中单个访问地点模块115接收请求B，并且然后是步骤606，在步骤606中单个访问地点模块115在服务器数据库108中的用户账户内的物项列表上存储所选择的物项信息。之后，图6示出步骤607，在步骤607中单个访问地点模块115向交互式应用程序111发送响应B。然后在步骤608中，图6指示当用户方便时，交互式应用程序111的用户可访问他/她的账户下的物项列表。接下来，根据步骤609，交互式应用程序111与单个访问地点模块115进行通信，使得用户可访问经更新的物项列表，如步骤610中所述。相应地，步骤611之后，交互式应用程序111在物项列表下显示所需物项信息，并允许用户进行进一步的动作(例如采购)。

图6a示出利用智能电话作为装置110来从使用中的装置播放的视觉内容识别及捕获或保存感兴趣的物项的过程的视觉实例的一种可能性。必须注意的是，图6a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图6a首先将智能电话(601a)绘示为装置110并表明装置播放的内容113的实例。以下图6a示出相同的图像(602a)，但具有围绕物项的边界框，从而指示图像辨别过程已发生以在交互式应用程序111中产生响应A(边界框)。然后是603a，603a示出边界框中的一者上的指纹，以示出交互式应用程序111的用户已按下此边界框，意图保存此物项，使得此应用引发请求B。在图6a的底部处是图像604a，图像604a示出彩色边界框(响应B)作为指示请求B已完成并且物项已被保存的警告或通知。必须注意的是，根据此实例，即使用户只按下其中一者，两个耳环均显示为响应B的颜色，因为它们表示相同的产品或所需物项。就用户体验而言，图6a表示作为本发明一个实施例中的可能实例的以下过程。当装置110的用户播放装置播放的内容113时，交互式应用程序111执行辨别过程(例如图像辨别)，使得围绕交互物项的边界框的出现。用户可通过按下其中一个边界框来保存所需物项。此动作将对边界框以及表示同一物项的任何其他边界框进行着色作为此物项已被保存到他/她的帐户中的通知；以及在物项列表图标中显示红点，以表明可在物项列表中查找所保存的物项。

图6b示出利用智能电话作为装置110来从使用中的装置播放的视觉输出内容/选择116捕获或保存感兴趣的物项的过程的视觉实例。必须注意的是，图6b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图6b首先将智能电话(601b)绘示为装置110并且表明视觉的装置播放内容113的实例。在同一图像(601b)中，图6b示出一些物项上的行动号召，表示装置播放的内容113正在作为或结合输出内容/选择116运行/流传输/播放。然后是602b，602b示出在一个行动号召上的指纹，以示出交互式应用程序111的用户已按下此行动号召，意图保存此物项，使得此应用引发请求B。在图6b的底部处是图像603b，示出作为警告或通知的彩色行动号召(响应B)，指示请求B已完成并且此物项已被保存。必须注意的是，跟这个实例，即使用户只按下其中一者，两个耳环均显示为响应B的颜色，因为它们表示相同的产品或所需物项。就用户体验而言，图6b表示作为本发明一个实施例中的可能实例的以下过程。当交互式应用程序111的用户播放装置播放的内容113时，交互式应用程序111与单个访问地点模块115进行通信，以作为或结合装置播放的内容113来运行/流传输/播放输出内容/选择116。随着装置播放的内容113被播放，用户可看到特定物项上的行动号召。用户可通过按下其中一个行动号召来保存所需物项。此操作将为行动号召以及表示同一物项的任何其他行动号召着色作为物项已保存到他/她的帐户中的通知；以及在物项列表图标中显示红点，以表明可在物项列表中查找所保存的物项。

图7以流程图的形式表示用于在所使用的装置外播放的音频内容的实时物项识别系统的一个实例的概述。必须注意的是，图7表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程700。过程700开始于用户在装置110上打开交互式应用程序111，如步骤701中所建立的。出于此实例的目的，用户已经在此中参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。然后是步骤702，在步骤702中交互式应用程序111(或本发明的一些实施例中的用户)启用装置110的麦克风以接收音频装置外内容112。接下来是步骤703，在步骤703中，装置110读取或捕获音频数据并将其传输到交互式应用程序111，交互式应用程序111持续向交互引擎模块114发送请求A。然后在步骤704中，交互引擎模块114接收请求A并将音频数据与服务器数据库108中的参考内容109进行比较。之后，根据步骤705，当交互引擎模块114识别出匹配时，交互引擎模块114向装置110内的交互式应用程序111发送响应A。接下来是步骤706，在步骤706中装置110内的交互式应用程序111接收响应A并显示可从装置外内容112获得的可收集物项的交互式图标。

图7a示出利用智能电话作为装置110来从音频装置外内容112识别物项的视觉实例。必须注意的是，图7a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。首先，图7a绘示出在播放音频装置外内容112的无线电装置(701a)。接下来，图7a示出指向智能电话(702a)的箭头，以示出装置110正在捕获音频内容。在智能电话显示屏内，图7a示出形成圆的两个弯曲箭头，从而指示已发生了音频辨别过程以在交互式应用程序111中产生响应A。在同一图像内，可收集物项的交互式图标显示在显示屏的底部，以示出响应A的结果。就用户体验而言，图7a表示作为本发明一个实施例中的可能实例的以下过程。当用户从装置外内容112听到歌曲时，他/她可使用交互式应用程序111通过音频辨别来识别指定给此歌曲的可收集物项。因此，应用程序会显示表示这些物项的交互式图标。

图8以流程图的形式表示用于从正在使用的装置外显示的音频内容捕获或保存信息的方法的一个实例的概述。必须注意的是，图8表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程800。过程800从步骤801开始，此时交互式应用程序111的用户轻敲或按下所需可收集物项的交互式图标。出于此实例的目的，用户已在此中参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。接着是步骤802，在步骤802中作为步骤801中执行的动作的结果，交互式应用程序111向服务器103内的单个访问地点模块115发送请求B。接下来是步骤803，在步骤803中单个访问地点模块115接收请求B，将对应的物项信息存储在服务器数据库108中的用户账户中，并发送响应B；在此实例中响应B是通知。然后在步骤804中，图8指示当用户方便时，用户可访问交互式应用程序111的物项列表。之后，根据步骤805，交互式应用程序111与单个访问地点模块115进行通信。接下来是步骤806，交互式应用程序111接收对经更新的物项列表信息的访问。相应地，此过程继续进行步骤807，在步骤807中，交互式应用程序111在物项列表下显示所需物项信息并允许用户进行进一步的动作(例如采购)。

图8a示出使用智能电话作为装置110从音频装置外内容112捕获或保存物项的视觉实例。必须注意的是，图8a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图8a绘示出播放音频装置外内容112的无线电装置(801a)。在此之后，图8a示出指向智能电话(802a)的箭头，其中两个弯曲箭头形成圆，因此指示音频辨别过程已发生以在交互式应用程序111中产生响应A。在同一图像内，可收集物项的交互式图标被示出在显示屏的底部，以示出响应A的结果，并且其中一个图标在其上示出指纹，以示出交互式应用程序111的用户已按下此图标，意图保存此物项，使得此应用引发请求B。接下来，图像803a将所收集物项的交互式图标着色(响应B)示出为指示请求B已完成并且此物项已被保存的警告或通知。就用户体验而言，图8a表示作为本发明一个实施例中的可能实例的以下过程。当用户从装置外内容112听到歌曲时，他/她可使用交互式应用程序111通过音频辨别来识别指定给此歌曲的可收集物项。因此，应用程序会显示表示这些物项的交互式图标。用户可通过按下其中一个交互式图标来保存所需物项。此操作会将交互式图标着色为通知，告知已收集的物项已保存到他/她的帐户中；以及在物项列表图标中显示红点，以表明可在物项列表中查找所保存的物项。

图9以流程图的形式表示用于从正在使用的装置播放的音频内容捕获或保存物项信息的两种方法的实例的概述。必须注意的是，图9表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程900。图9表明遵循相同过程的两种方法，不同之处在于，在如902所绘示的一种方法中，交互式应用程序111使用交互引擎模块114以便引发辨别过程(例如音频辨别等)，从而显示在装置播放的内容113中可用的可收集物项的交互式图标(响应A)，而在另一种方法中(如9-902所绘示)，交互式应用程序111运行或播放输出内容/选择116作为或结合装置播放的内容113，以便展示。然后，依据所使用的方法，用户遵循步骤903和/或9-903，使得交互式应用程序111的用户轻敲/按下显示所需可收集物项的交互式图标(903)或行动号召(9-903)。出于此实例的目的，用户已在此中参与之前创建了账户，但本发明的其他实施例可不要求创建账户，或者可在此过程的稍后阶段或者在所述过程之后要求创建账户。然后是步骤904，在步骤904中作为步骤903和/或9-903中执行的动作的结果，交互式应用程序111向单个访问地点模块115发送请求B。接下来是步骤905，在步骤905中单个访问地点模块115接收请求B，并且然后是步骤906，在步骤906中单个访问地点模块115在服务器数据库108中的用户账户内的物项列表上存储所选择的物项信息。之后，图9示出步骤907，在步骤907中单个访问地点模块115向交互式应用程序111发送响应B。然后在步骤908中，图9指示当用户方便时，交互式应用程序111的用户可访问他/她的账户下的物项列表。接下来，根据步骤909，交互式应用程序111与单个访问地点模块115进行通信，使得用户可访问经更新的物项列表，如步骤910中所述。相应地，步骤911之后，交互式应用程序111在物项列表下显示所需物项信息并允许用户进行进一步的动作(例如采购)。

图9a示出利用智能电话作为装置110来从使用中的装置播放的音频内容识别及捕获或保存感兴趣的物项的过程的视觉实例的一种可能性。必须注意的是，图9a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图9a首先将智能电话(901a)绘示为装置110并表明由音频的装置播放的内容113的实例。以下图9a示出相同的图像(902a)，但具有两个形成圆的弯曲箭头，从而指示音频辨别过程已发生，以在交互式应用程序111中产生响应A。在同一图像内，可收集物项的交互式图标示出于显示屏的底部部分处以示出响应A的结果。接着是903a，903a示出可收集物项的交互式图标中的一者上的指纹以示出交互式应用程序111的用户已按下它以打算保存物项，使得应用程序引发请求B。在图9a的底部是图像904a，图像904a示出所收集的物项的交互式图标，此图标被着色为指示请求B已完成并且此物项已经被保存的警告或通知(响应B)。就用户体验而言，图9a表示作为本发明一个实施例中的可能实例的以下过程。当装置110的用户播放由音频的装置播放的内容113时，交互式应用程序111执行辨别过程(例如音频辨别)，使得可收集物项的交互式图标的出现。用户可通过按下其中一个交互式图标来保存所需物项。此操作会将交互式图标着色为通知，告知收集的物项已保存到他/她的帐户中；以及在物项列表图标中显示红点，以表明可在物项列表中查找所保存的物项。

图9b示出利用智能电话作为装置110来从使用中的装置播放的音频输出内容/选择116捕获或保存感兴趣的物项的过程的视觉实例。必须注意的是，图9b表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图9b首先将智能电话(901b)绘示为装置110并表明音频的装置播放的内容113的实例。在同一图像(901b)中，示出显示可收集物项的行动号召，此可收集物项表示装置播放的内容113作为输出内容/选择116或结合输出内容/选择116正在运行/流传输/播放。然后是902b，902b示出在一个行动号召上的指纹，以示出交互式应用程序111的用户已按下此行动号召，意图保存此物项，使得此应用引发请求B。在图9b的底部处是图像903b，图像903b示出所收集的物项的行动号召，其被着色为指示请求B已完成并且此物项已经被保存的警告或通知(响应B)；以及在物项列表图标中显示红点，以表示可在物项列表中查找所保存的物项。

图10以流程图的形式表示用于访问交互式应用程序111的物项列表的用户的过程的一个实例的概览。必须注意的是，图10表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程1000。过程1000从步骤1001开始，步骤1001表明当用户方便的时，交互式应用程序111的用户可访问他/她的账户下的物项列表。接下来，根据步骤1002，交互式应用程序111与单个访问地点模块115进行通信，使得用户可访问更新的物项列表，如步骤1003中所述。相应地，步骤1004之后，交互式应用程序111在物项列表下显示所需物项信息并允许用户进行进一步的动作(例如采购)。

图10a示出用于从不同装置访问交互式应用程序111的物项列表的过程的视觉实例。必须注意的是，图10a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图10a绘示出可被交互式应用程序111的用户用作装置110来访问他/她的账户的物项列表的多个装置。如在图10a中可看到，全部连接到账户1(1001a)并且具有指向及来自网络的箭头，以指示所有都可使用网络(例如，因特网)来与服务器103内的单个访问地点模块115进行通信。另外，示出从网络指向单个访问地点模块115的标题为请求B的箭头，以暗示无论使用哪个装置110，都可通过网络向单个访问地点模块115请求交互式应用程序111的经更新的物项列表

信息(请求B)。相应地，从单个访问地点模块115到服务器数据库108(其保存标

记为1003a的物项列表信息)的前后箭头被示出，以暗示单个访问地点模块115从

数据库中检索账户1(1002a)的经更新的物项列表信息。另外，示出从单个访问地点模块115指向网络的箭头，以暗示单个访问地点模块115通过网络将经更新的物项列表信息传送回正在使用的装置110。图10a用于表明，在本发明的一些实施例中，交互式应用程序111的用户可不限于一个装置110来从所进行的交互访问他们已经存储在他们的账户中的信息(包括保存的物项)。因此，他们可改变装置110(例如，台式电脑、智能电话、平板电脑等)，只要它可运行交互式应用程序111并与单个访问地点模块115进行通信以获得对服务器数据库108内的他们的账户信息的访问。

图11是显示物项列表的交互式应用程序111的界面的视觉实例。必须注意的是，图11表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图11首先绘示出作为装置110的智能电话(1100)，其中显示屏示出交互式应用程序111内的物项列表，以作为在本发明一个实施例中用于访问保存的物项及详细信息的界面可能展现出的样子的实例。在此界面内，图11示出：收集的物项列表；左上角的图标，表示返回相机视图的选项；显示屏左上角的大购物袋图标，表示前往购物车的选项；以下的小购物袋，表示向购物车添加物项的选项；心形图标，表示将物项添加到收藏夹选项；带圆圈X的图标，表示图标不再可用的视觉指示；以及每一图标旁边的信息并带有获取更多详细信息的选项。以下是图像1101，图像1101示出在本发明的一个实施例的一个实例中，如果物项列表上的物项信息被按下或启用，同一智能电话显示详细信息窗口可能展现出的样子。

图12是显示采购标签的交互式应用程序111的界面的视觉实例。必须注意的是，图12表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图12绘示出作为装置110的智能电话(1200)，其显示屏示出在本发明一个实施例中交互式应用程序111的采购标签可能展现出的样子的实例。根据此实例，采购标签可包括：可从此标签直接编辑的装运地址及帐单信息；选择采购的物项以及相关信息，例如名称、数量及价格；小计、装运成本及订单总额；以及结帐或采购按钮。

图13以流程图的形式表示用于从交互式应用程序111的用户进行的交互收集数据并使其可被参考工具或模块102的用户访问的系统及方法的一个实例的概述。必须注意的是，图13表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。为清楚起见，在此实例中将此过程描述为过程1300。如步骤1301中所述，当交互式应用程序111的用户产生“请求A”从而启动交互引擎模块114时，过程1300开始。接下来是步骤1302，在步骤1302中交互引擎模块114识别与参考内容109的匹配，并将此匹配登记到服务器数据库108中。因此，交互引擎模块114向交互式应用程序111发送“响应A”，如步骤1303所示。相应地，如步骤1304中所述，交互式应用程序111接收响应A并呈现可点击边界框作为响应A的指定结果。然后，根据图13的步骤1305，交互式应用程序111的用户与边界框进行交互并产生“请求B”，从而使用单个访问地点模块115。当单个访问地点模块115接收到“请求B”时，单个访问地点模块115将此请求登记到服务器数据库108中，如步骤1306中所述。同时，如步骤1307中所述，单个访问地点模块115向交互式应用程序111发送“响应B”。最终，根据步骤1308，分析模块117可系统地(或当被请求时)从服务器数据库108检索及分析收集的数据(例如，匹配及交互式应用程序111的请求)，并将其呈现给参考工具或模块102的用户，使得他们可对所述数据进行研究并为了方便而利用所述数据。

图13a是利用类似仪表盘的用户界面来向参考工具或模块102的用户呈现查看数据分析的系统及方法的视觉实例。必须注意的是，图13a表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图13绘示出在本发明的一个实施例中，显示具有许多区块的仪表盘(1300a)的监控器或屏幕；以表示可通过此工具或模块访问的不同类型的信息或分析。根据此实例并且在所提出的系统及方法的一些实施例中，可获得的关于本发明的一些信息可涉及：可从注册的请求B获得的保存的物项(1303a)；可从注册的响应A获得的视图(1304a)；放弃购物车(1305a)、销售数据(1306a)及应用程序的用户人口统计数据(1307a)，其可通过单个访问地点模块115从用户账户获得；位置信息(1308a),其可利用地理定位从借助于交互式应用程序111进行的交互中获得；趋势(1309a)及统计(1310a)，其可从分析模块117进行的分析中获得。图13a还绘示出基于活动及物项的文件夹及文件系统(1301a)以及用于访问账户信息和/或设置的账户图标(1302a)。就用户体验而言，图13a表示作为本发明一个实施例中的可能实例的以下过程。用户通过网络浏览器打开参考工具或模块102并进入他/她的账户。因此，用户可访问有组织的及用户友好的仪表盘，此仪表盘提供与图13a中所示的信息相似的信息。相应地，参考工具或模块102的用户利用此信息来做出与所提供的信息相关的明智的商业决策(例如，增加或减少在特定位置和/或针对特定产品的广告类型)。

图14示出在集体场景中使用的所提出的系统的视觉实例。必须注意的是，图14表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图14示出可能的集体场景(图像1401及1402)的两个实例，绘示出装置110的用户在那些体验期间利用交互式应用程序111。在图14中，可看到图示1401表示电影院，并且图示1402表示现场音乐会或演出；然而，这不能被解释为将所提出的系统的使用仅限于这两种集合场景。例如，在所提出的系统的一些实施例中，现场剧院、体育设施及体育场、具有电视或计算机屏幕的家庭房间以及允许观看、听到或体验交互式内容的任何其他集体场景均可用作所提出的交互式体验的设置。

就用户体验而言，图14表示作为本发明一些实施例中的可能实例的以下过程。在图像1401中，电影院中的个人观看交互式电影(装置外内容112)。当他/她看到具有指示物项是交互式的行动号召的所需物项时，他/她打开交互式应用程序111，将装置110s的相机(例如，智能电话的相机)指向屏幕上的内容(装置外内容112)。装置110立即识别内容，并持续地将这些捕获传输到交互式应用程序111，交互式应用程序111将请求A发送到交互引擎模块114。当交互引擎模块114识别出与参考内容109的匹配时，交互引擎模块114发送响应A，允许观看者在交互式应用程序111上看到增强现实体验，如围绕装置110的相机聚焦的内容内的物项的边界框。当交互式应用程序111的用户看到所需物项周围的边界框时，他/她可按下边界框(请求B)以将此物项保存到他/她的账户中。服务器103借助于单个访问地点模块115接收请求B，并相应地将物项及其详细信息存储到用户的账户中；然后向交互式应用程序111发送响应B，此响应B通过给边界框着色来表示。此彩色框警告交互式应用程序111的用户此物项及其相关信息已被保存到他/她的账户中。

在图像1402中，音乐会上的个人听到已被宣布为交互式的歌曲。他/她拿出智能电话(装置110)，在交互式应用程序111上登录他/她的账户，并启用装置110的麦克风。装置110持续向交互式应用程序111发送音频捕获，交互式应用程序111经由互联网将其作为请求A发送给交互引擎模块114。当交互引擎模块114检测到与参考内容109的匹配时，交互引擎模块114向交互式应用程序111发送响应A，此响应A示出表示物项、信息或报价的交互式图标的列表。相应地，用户按下他/她所需的交互物项，向单个访问地点模块115发送请求B。因此，服务器103将此物项及其详细信息存储到用户的账户中；然后向交互式应用程序111发送响应B，这通过给交互式图标着色来表现。此颜色提醒交互式应用程序111的用户此物项及其相关信息已被保存到他/她的账户中。

图15是显示在视觉内容上的交互式目录的视觉实例。必须注意的是，图15表示实例，并且决不限制可从本公开中归纳或推导的任何其他可能性。图15绘示出通过不同平台在视觉内容上显示的交互式目录的若干实例；针对如图示1501所示的装置外内容112或者如图示1503、1504及1505所示的装置播放的内容113二者。为进一步阐明，在此实例中，1501指向图示1502，图示1502绘示出在其显示屏中具有椅子的装置110或智能电话，以提出装置外内容112中的物项已被此装置检测到的可能性。另外，图示1503、1504及1505在一些物项上方具有光标或指纹，以解决通过各种平台与目录中的物项交互的可能性。在本发明的若干实施例和/或本公开中提到的任何过程中，交互式目录可被准备为有组织的方式，以允许与来自或由视觉、听觉和/或其他形式的感官内容或体验所暗示的物项进行交互，以便获得对信息、附加内容和/或例如采购的进一步动作的执行的容易访问。另外，必须注意，在本发明的其他实施例中，交互式目录可采取不同的形式，例如但不限于音频列表。此外，在本发明的若干实施例中，这些交互式目录的定时或使用不限于内容的结束或开始，而是可在内容的所有者(参考工具或模块102的用户)认为适当或期望的任何时间及任何地方使用；甚至可作为唯一的内容。此外，交互式目录可用于任何类型的平台或通过任何渠道，包括但不限于印刷。

尽管在本文中已参照前述实例性实施例描述了本发明，然而此实施例不用于限制本发明的范围。因此，本发明所属领域中的技术人员将理解，可在不背离本发明的技术精神的情况下进行各种修改。

Claims (52)

1.一种用于增强用户体验的交互式多媒体管理系统，包括：

参考工具模块，所述参考工具模块从内容提供方接收感兴趣的媒体并且生成与所述感兴趣的媒体相关联的参考内容、与所述参考内容相关的详细信息以及与所述参考内容相关联的至少一个结果；

服务器数据库，所述服务器数据库存储所述参考内容、所述详细信息以及所述至少一个结果；

交互服务器模块，所述交互服务器模块从用户装置接收包括与所述用户装置相关联的媒体的交互请求，其中所述交互服务器模块将与所述用户装置相关联的所述媒体和所述服务器数据库上的所述参考内容进行比较，并且当所述参考内容与和所述用户装置相关联的所述媒体上的内容匹配时向所述用户装置发送交互响应；以及

单个访问模块，所述单个访问模块从所述参考工具模块接收所生成的所述参考内容以存储在所述服务器数据库上，其中所述单个访问模块基于所述交互响应进一步从所述用户装置接收单个访问交互请求，并且基于所述单个访问交互请求向所述用户装置发送单个访问交互响应。

2.根据权利要求1所述的交互式多媒体管理系统，其中所述参考工具模块包括选择模块，所述选择模块从所述感兴趣的媒体选择内容并且生成所述参考内容。

3.根据权利要求2所述的交互式多媒体管理系统，还包括自动选择所述内容的自动选择模块，其中所述内容由所述自动选择模块选择、由所述内容提供方手动选择或它们的组合。

4.根据权利要求3所述的交互式多媒体管理系统，其中自动选择的所述内容由所述内容提供方通过所述选择模块取消选择。

5.根据权利要求1所述的交互式多媒体管理系统，其中所述参考工具模块包括生成所述详细信息以及所述至少一个结果的指定模块。

6.根据权利要求1所述的交互式多媒体管理系统，其中发送到所述用户装置的所述交互响应包括以下中的至少一者：所述详细信息或所述至少一个结果。

7.根据权利要求1所述的交互式多媒体管理系统，其中所述详细信息包括以下中的至少一者：产品信息、服务信息、产品规格、服务规格、品牌、产品名称、服务名称、制造商名称、型号、颜色、大小、类型、标题、说明、关键词、图像、价格、产品选项、服务选项、交付选项、装运细节、支付选项、捐赠选项、折扣选项、报价、促销、新闻、位置、传记、影片、视频、电影预告片、幕后视频、删除场景视频、彩蛋视频、导演剪辑视频、图形、二维模型、三维模型、动画、音频、音乐、画外音、振动。

8.根据权利要求1所述的交互式多媒体管理系统，其中所述详细信息被提供为以下中的至少一者：音频文件、图像文件、视频文件、URL、超链接、图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言、其听觉表示/视觉表示/感官表示。

9.根据权利要求1所述的交互式多媒体管理系统，其中所述至少一个结果包括以下中的至少一者：视觉体验、听觉体验、感官体验、增强现实体验、显示视频、显示图像、播放音乐、产生声音、产生语音响应、提供触觉体验、产生振动、保存信息、采购产品、共享信息、预订产品、点击、按压、敲击、滑动、手势、语音命令。

10.根据权利要求1所述的交互式多媒体管理系统，其中所述感兴趣的媒体包括以下中的至少一者：物项、对象、人、动物、地点、公司、音乐、声音、短语、位置、场景、信用、产品、服务、广告、品牌。

11.根据权利要求1所述的交互式多媒体管理系统，其中所述感兴趣的媒体被提供为以下中的至少一者：音频文件、图像文件、视频文件、URL、超链接、图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言、其听觉表示/视觉表示/感官表示。

12.根据权利要求1所述的交互式多媒体管理系统，其中与所述用户装置相关联的所述媒体包括以下中的至少一者：表示所述用户装置外部内容的媒体或表示所述用户装置内部内容的媒体。

13.根据权利要求12所述的交互式多媒体管理系统，其中所述表示所述用户装置外部内容的媒体包括以下中的至少一者：图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言或听觉表示/视觉表示/感官表示。

14.根据权利要求12所述的交互式多媒体管理系统，其中所述表示所述用户装置外部内容的媒体被提供为以下中的至少一者：图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、横幅、服装、对象、结构、艺术、有声书籍、计算机游戏、视频游戏、软件、广告、标牌、虚拟现实内容、增强现实内容、混合现实内容、交互式内容、现场表演、体育赛事或戏剧放映。

15.根据权利要求12所述的交互式多媒体管理系统，其中所述表示所述用户装置内部内容的媒体包括以下中的至少一者：图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言或听觉表示/视觉表示/感官表示。

16.根据权利要求12所述的交互式多媒体管理系统，其中所述表示所述用户装置内部内容的媒体被提供为以下中的至少一者：图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、横幅、服装、对象、结构、艺术、有声书籍、计算机游戏、视频游戏、软件、广告、标牌、虚拟现实内容、增强现实内容、混合现实内容、交互式内容、现场表演、体育赛事或戏剧放映。

17.根据权利要求1所述的交互式多媒体管理系统，其中所述单个访问交互请求是基于以下中的至少一者而独立于所述交互响应生成的：存储在所述服务器数据库中的独立输出内容、指定结果或指定选择。

18.根据权利要求1所述的交互式多媒体管理系统，其中所述用户装置包括以下中的至少一者：智能电话、平板电脑、膝上型计算机、台式计算机、电视显示器、监控器、虚拟现实设备、增强现实设备、镜片、透镜、神经装置、智能手表、计算装置或电子装置。

19.根据权利要求18所述的交互式多媒体管理系统，其中所述用户装置被配置成进行以下操作中的至少一者：对所述用户装置外的内容及所述用户装置内的内容进行读取、检测、感测、捕获、接收、解释或响应并且进一步向在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序发送相关信息。

20.根据权利要求18所述的交互式多媒体管理系统，其中所述用户装置被配置成进行以下操作中的至少一者：对所述用户装置内的内容进行显示、播放、投影、发出、执行、读取、检测、感测、捕获、接收、识别、解释或响应并且进一步向在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序发送相关信息。

21.根据权利要求1所述的交互式多媒体管理系统，还包括在所述单个访问模块内、在所述单个访问模块外部或在它们的组合中实施的市场/电子商务模块。

22.根据权利要求1所述的交互式多媒体管理系统，还包括在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序，其中所述交互请求以及所述单个访问交互请求是由所述应用程序生成的，并且所述交互响应以及所述单个访问交互响应是在所述应用程序处接收的。

23.根据权利要求22所述的交互式多媒体管理系统，其中所述单个访问模块从所述应用程序接收至少一个单个访问交互请求，以便生成与所述至少一个单个访问交互请求相关联的所述用户感兴趣的物项的列表。

24.根据权利要求23所述的交互式多媒体管理系统，其中包含所述感兴趣的物项的所述列表在以下时间中的至少一者被传送到所述用户：在生成所述至少一个单个访问交互请求的时间或在稍后的时间。

25.根据权利要求23所述的交互式多媒体管理系统，还包括市场/电子商务模块，所述市场/电子商务模块向所述应用程序提供商家平台，以基于所述列表上所包含的所述物项来购买以及出售商品及服务。

26.根据权利要求1所述的交互式多媒体管理系统，其中所述参考工具模块包括分析模块，所述分析模块被配置成从所述服务器数据库检索并且分析所收集的数据，并且将所述数据传送到所述参考工具模块的用户。

27.一种用于增强用户的交互式多媒体体验的方法，包括：

在参考工具模块处从内容提供方接收感兴趣的媒体并且生成与所述感兴趣的媒体相关联的参考内容、与所述参考内容相关的详细信息以及与所述参考内容相关联的至少一个结果；

在单个访问模块处接收所述参考内容、所述详细信息以及所述至少一个结果以存储在服务器数据库上；

在交互服务器模块处接收包括与用户装置相关联的媒体的交互请求；

将与所述用户装置相关联的所述媒体和所述服务器数据库上的所述参考内容进行比较；

当所述参考内容与和所述用户装置相关联的所述媒体上的内容匹配时，从所述交互服务器模块向所述用户装置发送交互响应；以及

在所述单个访问模块处基于所述交互响应从所述用户装置接收单个访问交互请求，并且基于所述单个访问交互请求从所述单个访问模块向所述用户装置发送单个访问交互响应。

28.根据权利要求27所述的方法，其中由所述参考工具模块的选择模块执行从所述感兴趣的媒体选择所述内容并且生成所述参考内容。

29.根据权利要求28所述的方法，还包括由自动选择模块自动选择上述内容、由所述内容提供方手动选择所述内容或它们的组合。

30.根据权利要求29所述的方法，还包括通过所述选择模块手动将自动选择的所述内容取消选择。

31.根据权利要求27所述的方法，其中所述详细信息以及所述至少一个结果是由所述参考工具模块上的指定模块生成的。

32.根据权利要求27所述的方法，其中发送到所述用户装置的所述交互响应包括以下中的至少一者：所述详细信息或所述至少一个结果。

33.根据权利要求27所述的方法，其中所述详细信息包括以下中的至少一者：产品信息、服务信息、产品规格、服务规格、品牌、产品名称、服务名称、制造商名称、型号、颜色、大小、类型、标题、说明、关键词、图像、价格、产品选项、服务选项、交付选项、装运细节、支付选项、捐赠选项、折扣选项、报价、促销、新闻、位置、传记、影片、视频、电影预告片、幕后视频、删除场景视频、彩蛋视频、导演剪辑视频、图形、二维模型、三维模型、动画、音频、音乐、画外音、振动。

34.根据权利要求27所述的方法，其中所述详细信息被提供为以下中的至少一者：音频文件、图像文件、视频文件、URL、超链接、图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言、其听觉表示/视觉表示/感官表示。

35.根据权利要求27所述的方法，其中所述至少一个结果包括以下中的至少一者：视觉体验、听觉体验、感官体验、增强现实体验、显示视频、显示图像、播放音乐、产生声音、产生语音响应、提供触觉体验、产生振动、保存信息、采购产品、共享信息、预订产品、点击、按压、敲击、滑动、手势、语音命令。

36.根据权利要求27所述的方法，其中所述感兴趣的媒体包括以下中的至少一者：物项、对象、人、动物、地点、公司、音乐、声音、短语、位置、场景、信用、产品、服务、广告、品牌。

37.根据权利要求27所述的方法，其中所述感兴趣的媒体被提供为以下中的至少一者：音频文件、图像文件、视频文件、URL、超链接、图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言、其听觉表示/视觉表示/感官表示。

38.根据权利要求27所述的方法，其中与所述用户装置相关联的所述媒体包括以下中的至少一者：表示所述用户装置外部内容的媒体或表示所述用户装置内部内容的媒体。

39.根据权利要求38所述的方法，其中所述表示所述用户装置外部内容的媒体包括以下中的至少一者：图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言或听觉表示/视觉表示/感官表示。

40.根据权利要求38所述的方法，其中所述表示所述用户装置外部内容的媒体被提供为以下中的至少一者：图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、横幅、服装、对象、结构、艺术、有声书籍、计算机游戏、视频游戏、软件、广告、标牌、虚拟现实内容、增强现实内容、混合现实内容、交互式内容、现场表演、体育赛事或戏剧放映。

41.根据权利要求38所述的方法，其中所述表示所述用户装置内部内容的媒体包括以下中的至少一者：图像数据、视频数据、音频数据、文本数据、元数据、数字数据、符号、程序编码语言或听觉表示/视觉表示/感官表示。

42.根据权利要求38所述的方法，其中所述表示所述用户装置内部内容的媒体被提供为以下中的至少一者：图像、插图、视频、音频、音乐、照片、电影、音乐视频、商业广告、网剧、电视节目、纪录片、横幅、服装、对象、结构、艺术、有声书籍、计算机游戏、视频游戏、软件、广告、标牌、虚拟现实内容、增强现实内容、混合现实内容、交互式内容、现场表演、体育赛事或戏剧放映。

43.根据权利要求27所述的方法，其中所述单个访问交互请求是基于以下中的至少一者而独立于所述交互响应生成的：存储在所述服务器数据库中的独立输出内容、指定结果或指定选择。

44.根据权利要求27所述的方法，其中所述用户装置包括以下中的至少一者：智能电话、平板电脑、膝上型计算机、台式计算机、电视显示器、监控器、虚拟现实设备、增强现实设备、镜片、透镜、神经装置、智能手表、计算装置或电子装置。

45.根据权利要求44所述的方法，其中所述用户装置被配置成进行以下操作中的至少一者：对所述用户装置外的内容及所述用户装置内的内容进行读取、检测、感测、捕获、接收、解释或响应并且进一步向在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序发送相关信息。

46.根据权利要求44所述的方法，其中所述用户装置被配置成进行以下操作中的至少一者：对所述用户装置内的内容进行显示、播放、投影、发出、执行、读取、检测、感测、捕获、接收、识别、解释或响应并且进一步向在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序发送相关信息。

47.根据权利要求27所述的方法，还包括提供在所述单个访问模块内、在所述单个访问模块外部或在它们的组合中实施的市场/电子商务模块。

48.根据权利要求27所述的方法，还包括提供在所述用户装置上运行、在所述用户装置外运行或在它们的组合上运行的应用程序，其中所述交互请求以及所述单个访问交互请求是由所述应用程序生成的并且所述交互响应以及所述单个访问交互响应是在所述应用程序处接收的。

49.根据权利要求48所述的方法，其中所述单个访问模块从所述应用程序接收至少一个单个访问交互请求，以便生成与所述至少一个单个访问交互请求相关联的所述用户感兴趣的物项的列表。

50.根据权利要求49所述的方法，其中包含所述感兴趣的物项的所述列表在以下时间中的至少一者被传送到所述用户：在生成所述至少一个单个访问交互请求的时间或在稍后的时间。

51.根据权利要求49所述的方法，还包括提供市场/电子商务模块，所述市场/电子商务模块向所述应用程序提供商家平台，以基于所述列表上所包含的所述物项来购买并且出售商品及服务。

52.根据权利要求27所述的方法，还包括提供分析模块，所述分析模块从所述服务器数据库检索并且分析所收集的数据，并且将所述数据传送到所述参考工具模块的用户。

Images