CN111512270B - 用于在多通信装置中捕捉触感内容的方法 - Google Patents

Abstract

提出捕捉对象的触感内容的方法，其中该捕捉涉及多个通信装置。该方法包括识别由第一通信装置捕捉的触感内容和与所捕捉的触感内容相关联的性质以及识别与第二通信装置相关联的性质。然后执行至少部分基于所识别的性质来确定第二装置是否要参与触感内容的捕捉，并且如果确定这样的参与，则发起由第一通信捕捉的触感内容和相关联的性质的至少部分到第二通信装置的传输。由第二通信装置捕捉的触感内容然后被触感装置识别，并且然后可发起由第一通信装置捕捉的触感内容与由第二装置捕捉的触感内容的组合。还提出能够执行上文提出的方法的触感装置和系统。

Description

用于在多通信装置中捕捉触感内容的方法

技术领域

本公开涉及当对触感(haptic)内容的捕捉中涉及多于一个通信装置时用于所提到的捕捉的方法和布置。

背景技术

触感或触觉(tactile)互联网可视为向着移动互通(mobileinterworking)的下一步。尽管用户目前能够通过语音和视频高效地通信，但设想在不久未来网络化社会中，人们将通常能够还经由触感装置传递触摸的感觉。在过去的数年里，关于允许这样的通信发生的装置已经有大量研究。正在开发若干新的触感装置，特别是可被用户穿戴的装置，诸如例如手套、背心，而且诸如例如智能电话和智能手表之类的手持装置已经适于可用作可称为触感装置的装置。各种触感致动器技术(诸如例如超声、振动触觉、静电、压电和其他机械技术方案)也是可用的。

触感感知包括动觉和触觉并且可涉及各种感觉，包括例如物理对象和表面的大小、形状、质量、质地和硬度。动觉信息可指例如在移动人的关节、肌肉和/或肌腱时感知的信息，而触觉信息可以例如指经由人的皮肤取回的对象的描述性信息。

用于各种类型的手持或穿戴装置的若干技术方案考虑与用户界面的交互，或者它们提供关于在装置的触屏中正在显示的图形的触感反馈。在其他使用情况下，使用相应的触感装置的两个用户可以通过与相应触感装置的显示器实时交互而在彼此之间传递触摸的感觉。如果装置能够跟踪手指的位置，则每个用户将能够接收关于用户界面、图像、对象或另一用户的手指当被放置在特定位置上时的触感性质(诸如例如质地、摩擦或硬度)的触感反馈。通过在装置上应用压电致动屏幕，该装置还可以能够例如经由振动生成各种摩擦和质地效果。

设想未来用户交互技术(诸如触屏和可穿戴设备)将对用户提供额外且改进的触感反馈。此外，认为在未来柔性装置和可穿戴设备在人们的生活中变得无处不在，其中这样的柔性装置的范围将从纺织品和服装到智能手表，以及手持装置，包括智能电话和平板电脑。

期望确保在多于一个通信装置用于捕捉触感内容时的情形下也获得高质量最终触感相关产物。

发明内容

本文献的目的是解决或至少减轻上文描述的问题中的至少一些。

更具体地，根据一个方面，提出在捕捉涉及多个通信装置时的情形下捕捉对象的触感内容的方法，其中该方法包括识别由第一通信装置捕捉的触感内容以及与所捕捉的触感内容相关联的性质，并且识别与第二通信装置相关联的性质。方法通过发起至少部分基于所识别的性质来确定第二装置要参与触感内容的捕捉而继续，在此之后发起由第一通信装置捕捉的触感内容和相关联的性质的至少部分到第二通信装置的传输。一旦识别由第二通信装置捕捉的触感内容，发起由第一通信装置捕捉的触感内容与由第二装置捕捉的触感内容的组合。

通过应用上文提出的方法，可获得触感内容的更优化的捕捉，因为可采用优化的方式来利用不同通信装置之间的优势和/或权衡。

所提到的性质可以包括例如以下中的一个或多个：触感传感器相关特性；触感致动器相关特性；对象的类型；触感数据的类型，以及通信装置相关特性。

所提出的确定步骤可基于所识别的性质结合例如以下中的至少一个而被发起：第二通信装置的位置；第一通信装置与第二通信装置之间的能力差异；第一通信装置与第二通信装置之间的距离，以及由第一通信装置捕捉的触感信息的质量。

根据一个实施例，所提到的传输的发起还包括向第二通信装置提供关于如何在第二通信装置上捕捉触感数据的指令的数据的传输的发起。

根据又一实施例，还向两个通信装置提供同步数据，以便实现第一通信装置与第二通信装置的时间同步。

所传送的数据可以包括以下中的至少一个：指示关于在第二通信装置上显示的对象上在哪里开始捕捉触感内容的数据；指示关于在第二通信装置上显示的对象上要如何捕捉触感内容的数据；指示关于要如何定向第二通信装置的数据；指示关于在第二通信装置上显示的对象上在哪里已经捕捉了触感内容的数据，以及指示关于已经捕捉的触感内容已被捕捉到什么程度的数据。

根据一个实施例，由第二通信装置捕捉的触感内容的识别和识别与第二通信装置对触感内容的捕捉相关联的性质相组合。

根据一个实施例，所提出的确定包括发起由第一通信装置捕捉的要传送到第二通信装置的触感数据和性质的选择。

组合可以包括以下中的至少一个：将由通信装置并行捕捉的触感内容组合，以及将由通信装置中的每个通信装置按顺序捕捉的触感内容组合。

根据另一方面，提出用于捕捉对象的触感内容的触感装置，其中该触感装置能够涉及多个通信装置。这样的触感装置配置成执行根据上文描述的任何实施例的方法。

根据又一方面，提出用于在涉及多个通信装置时捕捉对象的触感内容的触感装置，其中该触感装置包括处理电路和存储器，所述存储器包括可执行指令，所述可执行指令在触感装置上执行时促使触感装置执行方法，诸如上文描述的方法。

通过提供这样的系统，在涉及多于一个通信装置时，触感装置将能够监管或控制触感内容的捕捉，使得可获得增强的触感内容。

附图说明

现在将关于附图更详细描述实施例，附图中：

图1是其中可应用如本文描述的方法的系统的概览。

图2a是图示根据一个实施例触感装置将能够如何与两个通信装置交互的信令方案。

图2b是图示根据另一实施例触感装置将能够如何与两个通信装置交互的另一信令方案。

图3是图示在触感装置中执行的方法的流程图。

图4a是图示根据一个实施例可如何在通信装置的显示器上呈现触感内容的捕捉的示例性视图。

图4b是图示根据另一实施例可如何在通信装置的显示器上呈现触感内容的捕捉的另一示例性视图。

图5是图示根据第一实施例的触感装置的框图。

图6是图示根据第二实施例的触感装置的框图。

具体实施方式

在捕捉与特定对象相关联的触感内容时，存在认为使用同一个通信装置不足以完成发起的捕捉时的情形。与触感感测、感测范围和分辨率(仅提及与捕捉触感内容相关的几种性质)有关的能力通常因装置而异，由此也对捕捉的最终结果造成差异，这取决于实际使用了哪种类型的装置。被认为对于捕捉例如具有某些性质的对象的特定表面足够好的通信装置可能有相当大的缺点，并且因此或多或少地适合或者甚至不适合用于捕捉另一表面或相同表面的其他性质。通信装置可能即将耗尽电池，并且代替完全从头开始重新进行发起的触感内容的捕捉，可能更加有利的是能够改为在另一通信装置上继续捕捉，同时仍然能够利用已经被捕捉的所有捕捉的触感内容。

可能还出现这样的情形，其中当用户想利用两个通信装置的优势时，第一通信装置非常适合用于捕捉一个或多个特定性质，而另一通信装置更适合用于捕捉一个或多个其他性质。在后一情形中，提出一种方法，其中由两个通信装置捕捉的触感内容可自动组合或聚合，使得提供优化的触感内容作为最终产物。用户还可能面对这样的情形，其中当使用固定通信装置时，例如当坐在房间中时，触感内容被初始捕捉，在此之后用户决定在行走时继续捕捉触感内容，其中这样的转变可能要求通信装置到移动装置的改变。

触感技术和在处置这样的内容时相关的考虑在许多方面与其他媒体技术(诸如例如音频和视频技术)的处置不同。

触感内容可以例如是广泛异构的，其中每个相关性质可以独立于或依赖于另一相关性质。在表示所捕捉的触感内容的单个触感数据文件中，可以考虑诸如例如质地、摩擦、硬度和/或运动之类的性质，其全部具有不同的相互依赖性。

触感内容还通常要求多个传感器和致动器能够捕捉、记录和呈现多个期望的性质，这与其中例如而是捕捉音频和视频的情形不同，在该情形中通常一个单独的传感器和一个单独的致动器(因此被特别地适配)是足够的。

触感内容的捕捉在很大程度上还依赖于位置。触觉相对于动觉触感内容以及在身体的不同部分上(诸如例如在手、臂、头或脚上)捕捉或呈现的触感内容不同，因为不同的身体部分对触感反馈具有不同的灵敏度。不同的身体部分还能够以不同的幅度以及在运动和力的不同范围内感测和致动。这也与处置音频和视频不同，所述处置音频和视频再次通常能够仅用一个单独类型的传感器捕捉相关性质。

触觉内容的捕捉还要求来自用户的主动参与，该用户正在与形成触感系统的一部分的对象交互。在许多情形中，这样的用户交互在用对象致动时至少在一定程度上还修改相应触感内容或数据，由此或多或少影响最终用户体验。

触感内容在许多情形中还要求非常低的时延，诸如例如当在基于遥控操作的场景中应用时，诸如例如当用户正在经由动觉触感装置实时远程操纵机器人时。对于超过10ms的时延，这样的用户的触感感知可能严重降低，因为在这样的场景中，用户可能不能正确地感受环境的相关触感性质，或机器人和触感装置所要求的稳定性水平可能不再得到保证。

因此，上文提到的问题中的每个问题是在用多于一个捕捉装置捕捉或构成触感内容时可能需要考虑的问题。

为了捕捉触感内容以用于向另一实体递送和呈现或用于存储以便以后被适合的实体取回和呈现的目的，例如当一个或多个用户正在同时或按顺序使用多个触感装置时，诸如上文提到的问题之类的问题可能变得明显。

为了高效地处置上文提到的潜在问题中的至少一些潜在问题，提出用于协调从多个通信装置提供的触感内容的方法。尽管本文档描述了用于处置从两个通信装置提供的内容的方法，但要理解如果多于两个装置用于提到的目的则所描述的方法也能适用。在后一情形中，可针对当前情况下认为需要的多个通信装置重复所描述的方法。

简要来描述，提出一种方法，其中通过使用第一通信装置捕捉触感内容发起过程，在该过程中确定是否有任何另外的通信装置可用，即任何另外的通信装置(其能够并行或在第一通信装置的捕捉之后捕捉触感内容)是否能够被访问并且用于所提到的捕捉目的。如果另一通信装置可访问且被选择，则由两个通信装置捕捉的触感内容被组合或聚合，在此之后它能够被传送到预期的接收者，或存储在本地或分布式存储设备或存储器中，以用于以后的取回和呈现。方法处置要在任何装置或任何其他实体之间交换哪些数据或性质。方法还能够在以优化方式应用多个通信装置时向用户或功能提供关于如何继续捕捉触感内容的帮助。

除提出可在诸如上文提出的场景中的任何场景之类的场景中使用的方法外，还提出配置成执行这样的方法的装置。这样的装置(其可以被配置为形成所涉及的通信装置中的一个通信装置的部分，或被配置为形成通常采用服务器的形式的单独的第三实体或节点的部分或者包括对应功能性的任何其他实体)在下文将被称为触感装置。

我们在这里所说的捕捉意指再现与对象的特定部分相关联或描述对象的特定部分的触感内容或触感效果的任何方式，其中该触感效果可由指示该对象的表面的一个或多个性质表示。这些性质可以包括可被捕捉的任何类型的触感数据，诸如例如质地、摩擦、硬度、运动或温度。性质还可以包括触感传感器相关特性和触感致动器相关特性中的一个或两者，其例如规定工作范围、分辨率和/或公差。提到的性质还可以包括关于对象类型的信息，诸如例如织物、木材、石头或陶瓷，以及通信装置相关特性，诸如例如存储器容量、装置形状或类型(形状因子，例如手套、背心、智能电话)、电池电量和显示器大小。所提到的捕捉可以备选地称为构成或感测，其中通过应用致动器和传感器来捕捉所要求的性质。传感器和致动器形成相应通信装置的部分或连接到相应通信装置，其中传感器和致动器可以相应地附连到可穿戴设备、手持装置或能够处置相应性质的任何其他类型的装置，或者与可穿戴设备、手持装置或能够处置相应性质的任何其他类型的装置集成。传感器可以包括例如一个或多个力传感器、触摸传感器、温度传感器和/或惯性测量单元，而致动器可以包括例如超声换能器、振动马达(诸如例如偏心旋转质量马达和线性谐振致动器)、静电致动器、压电致动器、电动马达、柔性致动材料(诸如例如弹性计和/或形状记忆合金致动器)和/或热致动器。

现在将参考图1简要描述其中可执行本文所提出的方法的系统。然而，要理解所描述的系统是简化概览，其中仅呈现和描述与理解所提出的方法相关的实体，而已知通信系统通常使用的其他实体(诸如例如接入节点和核心节点)已经由于简化原因而被省略。

图1的系统100包括第一通信装置101a和第二通信装置101b，两者都能够捕捉对象的触感内容。通信装置101a、101b可以是例如智能电话、智能手表、平板电脑、可穿戴设备(诸如例如触感手套或背心)或能够捕捉触感内容的任何类型的通信装置中的任何一种。系统100还包括触感装置102，其能够执行如本文提出的方法，并且可根据图1中示出的两个实施例之一实现。根据一个实施例，这样的触感装置102形成单独实体103的部分，所述单独实体103通常被配置为服务器或被配置为提供服务器功能性的装置，其中服务器或服务器功能性能够向提到的通信装置101a、101b提供一个或多个触感相关服务。根据第二实施例，触感装置102改为形成提到的通信装置101a、101b中的任何通信装置的部分，这里呈现为形成通信装置101a的部分。在前一情况下，经由单独的实体103和它的触感装置102在通信装置101a、101b之间执行与所提出的方法相关联的信息交换104a、104b，而在后一实施例中，改为直接在两个装置101a、101b之间执行对应的信息交换104c。然而，即使信令和数据交换在这里被描述为装置到装置直接地或经由中间装置103来执行，但要理解在两个实施例中，信息交换可以并且通常将经由构成通信网络的一个或多个额外中间实体或节点来执行，然而所述实体或节点超出了本文档的范围。如将在下文进一步详细阐述的，所提出的方法的一个或多个步骤的完整处理可以由触感装置自身来执行，或由分布到一个或多个单独的实体或节点(未示出)中的功能性(其可以形成例如基于云的技术方案的部分)来执行。在后一情况下，触感装置包括用于触发或发起所提出的触感内容的组合的功能性，而出于各种效率目的，可在别处执行全部或部分实际处理。

现在下面将参考图2a描述其中触感装置102布置在服务于多个通信装置的单独实体中或布置为服务于多个通信装置的单独实体的场景，所述多个通信装置在这里由第一通信装置101a和第二通信装置101b表示。然而，如果触感装置102形成通信装置101a、101b之一的部分，则上文描述的场景也能适用。本场景表示其中在两个通信装置上按顺序捕捉触感内容的情形，即首先在一个通信装置上捕捉触感内容，在此之后在另一通信装置上继续捕捉。作为先决条件，假设功能的用户已在通信装置101a之一(在这里由第一通信装置101a表示)上发起触感内容的捕捉，如用第一步骤2:1指示的。除在第一通信装置101a处捕捉触感内容并且相应地处理这样的内容之外，也使得所捕捉的触感内容对触感装置102可用，如用步骤2:2指示的。触感内容从第一通信装置101a到触感装置102的传输根据一个实施例可由第一通信装置101a发起。备选地，触感装置102配置成发起用于监测由第一通信装置101a捕捉的触感内容的过程。

在另一步骤2:3中，触感装置102识别从第一通信装置101a提供的触感内容。另外，触感装置102识别与第一通信装置101a相关联的性质，如用步骤2:4指示的。这样的性质可根据一个实施例与触感内容一起从第一通信装置101a接收，即被包括在步骤2:2中，或根据另一实施例，被提供在从第一通信装置101a接收的单独消息中。备选地，所识别的性质中的全部或一些可以已经从触感装置102可访问的存储设备中可用。

响应于从通信装置101a接收触感内容，触感装置102还获取与除第一通信装置101a以外的一个或多个通信装置(在这里由第二通信装置101b表示)相关联的触感性质，如用步骤2:5指示的。根据一个实施例，这些性质已经在触感装置102的存储设备处可用。在激活第二通信装置101b时或在第二通信装置101b处激活某一功能时，通信装置可以例如配置成向触感装置102自动传送选择的性质。备选地，触感装置102从所选择的通信装置请求相关性质，其中可以进行该选择使得例如活动的所有通信装置、在第一通信装置101a的某一范围内的所有活动通信装置、满足特定质量准则的所有活动通信装置或提到的条件中的一个或多个条件的组合。静态性质可以例如被预存储在触感装置102中，而动态性质在请求时或在改变时被触感装置102请求。

基于性质，可能结合触感内容，触感装置102在该阶段将能够确定除第一装置101a以外的任何通信装置(在本情况下是第二通信装置101b)是否要参与触感内容的捕捉，所述触感内容的捕捉正在第一通信装置101a处进行。在这被确定的情况下，用于组合由多于一个通信装置捕捉的触感内容的过程将被发起，如用步骤2:6指示的，而在没有声明这样的确定的情况下，第一通信装置101a处的捕捉将采用常规方式可能在触感装置102的支持下继续。这样的确定可以例如基于两个通信装置101a、101b的性质的比较，其中发现基于由触感装置102当前应用的规则和条件，第二通信装置101b更适合用于捕捉当前触感内容，并且因此从第一通信装置101a到第二通信装置101b的转换是优选的。

如上文指示的，该确定可以单独基于可用性质中的一些或全部可用性质的评估，或基于与由第一通信装置101a到目前为止捕捉的触感内容相结合的性质的评估。在后一情况下，所捕捉的触感内容的质量不佳或质量的不确定性可以触发切换到第二通信装置101b。在本场景中，由触感装置102执行实际确定。然而，根据备选场景，触感装置102可以触发这样的过程，而由远程定位的功能性(例如，由根据分布式云技术方案布置的功能性)执行实际的执行。采用相似的方式，前面的步骤2:3、2:4和2:5中的一个或多个可以被远程执行，仅使得触感装置102知道在所描述的过程中前进所要求的结论。通过允许这样的功能性的分布，可以减少所提到的决策中的一个或多个决策的延迟。

一旦在步骤2:6中已确定第二通信装置要被包括在捕捉触感内容的过程中，则由触感装置102发起由第一通信装置101a捕捉的触感内容和相关联的性质的至少部分的传输，如用步骤2:7指示的，其中触感装置102可访问的触感内容和性质被传送到第二通信装置101b。所提到的过程可以例如遵循以下规则：仅传送在最后的3分钟期间捕捉的触感内容，连同与由第二通信装置101b进行的继续的、即将到来的捕捉相关的性质。

指示如何在通信装置中的一个或两者上捕捉触感内容的指令也可在步骤2:7中被提供，该指令与已经提到的信息相结合或作为一个或多个单独消息来被发送。如用可选步骤2:8指示的，提到的过程可以另外包括触感装置102触发第一通信装置101a采取某一动作，诸如例如确定要从第一通信装置101a向第二通信装置101b提供哪个触感内容。在后一情况下，步骤2:7或单独的步骤(未示出)在第一通信装置101a处发起步骤2:8，并且另外的触感内容可以例如在执行从第一通信装置到第二通信装置的切换之前被传送到第二通信装置101b，例如以便获得触感内容的连续流。这样的在步骤2:8中触发的另外的内容在可选步骤2:9中被传送到第二通信装置101b。步骤2:10指示基于由第二通信装置101b获取的触感内容和性质的第二通信装置101b对触感内容的捕捉。作为在步骤2:10的捕捉的结果，在步骤2:10中捕捉的触感内容现在被传送到触感装置102，如用步骤2:11指示的。

要理解，步骤2:10可能在步骤2:7之后已经被发起，并且如果重复所述过程，则该过程可在连续的基础上继续，开始于步骤2:1。

如用另一步骤2:12指示的，触感装置102识别由第二通信装置101b捕捉的触感内容。在另一步骤2:13中，触感装置102发起从通信装置101a、101b获取的触感内容的组合。本示例描述其中由不同通信装置按顺序捕捉触感内容的场景。然而，要理解，上文描述的过程的一个或多个步骤可以重复，例如使得由多个通信装置重复触感内容的按顺序执行的捕捉，其中每个捕捉基于不同的性质，由此利用每个通信装置的优势。更具体地，可针对多个通信装置重复步骤2:6-2:12，其中在步骤2:13中组合来自不同通信装置的结果。在这样的场景中，每当考虑不同的性质时，可以向通信装置提供指令，该指令指示在相应通信装置上的每个捕捉从感兴趣对象的相同位置开始。在步骤2:14中，可存储组合捕捉的结果以供立即或以后使用。

将参考图2b在下文呈现另一备选场景，其中改为由多个通信装置并行进行捕捉，所述多个通信装置再次用单独的触感装置102、第一通信装置101a和第二通信装置101b来图示。该场景也能适用于其中触感装置102形成通信装置101a之一的部分的情形。

第一步骤2:1-2:10(步骤2:8除外)如参考图2a在上文呈现的场景中那样被执行，并且因此在这里将不重复。然而，另外，图2a的步骤2:8(在这里改为被称为2:8’)除了上面关于步骤2:8已经叙述的内容之外，还确定在随后的传送步骤2:9’中要向触觉装置102提供什么触觉内容。由此，来自第一通信装置101a和第二通信装置101b两者的触感内容将由触感装置102并行识别，如将在下文进一步详细描述的。要理解，在本文描述的过程中的任何过程中可使用多于两个通信装置，由此将重复相关步骤以便交换也来自这些通信装置的相关数据。还要理解，可组合上文描述的两个场景，使得可按顺序捕捉一些触感内容，而并行捕捉其他内容，由此争取优化的捕捉过程。此外，如上文已经提到的，触感装置102可以根据一个实施例形成通信装置之一的部分，由此在通信装置中内部执行触感装置202与第一通信装置101a的功能性之间的用于呈现和处置触感内容的信令。

现在将参考图3描述根据上文提出的两个实施例中的任何实施例的可在触感装置中执行的方法300。

在图3的第一步骤310中，识别到触感内容以及与所捕捉的触感内容相关联的性质已被通信装置捕捉。通过第一示例的方式，用户可以用手指触摸通信装置101a的屏幕，而根据第二示例，用户改为戴着触感手套与对象交互。根据第三示例，用户可以改为穿着装置(诸如例如可穿戴设备)经历活动，诸如例如坐过山车，所述装置能够捕捉触感效果，如本文描述的。

在另一步骤320中，与第二通信装置101b相关联的性质被触感装置102识别。基于获取的性质，可能也结合触感内容，现在将可能确定第二通信装置101b是否也要参与已经由第一通信装置101a发起的触感内容的捕捉。这样的发起的确定在图3中由另一步骤330指示。这样的确定的发起要理解为意指实际发起和确定两者由所提到的触感装置102执行，或在由触感装置102发起或触发所提到的过程时，所获取的内容的实际处理(其导致确定第二通信装置101b是否也要参与所提到的捕捉)在另一实体中执行，例如在形成云相关技术方案的部分的实体中执行，该实体是触感装置102可访问的。

可基于触感内容与性质的组合来发起上文提到的确定，使得例如仅位于某一区域中或足够接近第一通信装置的通信装置被视为要考虑用于触感内容的潜在组合的通信装置。对于位置确定，可适用于定位通信装置的任何类型的已知位置确定机制可被应用。步骤330包括发起以下确定：存在通过还涉及第二通信装置101b来改进从第一通信装置101a获取的触觉内容的潜力。该确定330通常涉及从第一通信装置101a获得的触感内容和性质的相关部分与规定捕捉的触感内容的要求和条件的一个或多个阈值、规则和条件的比较。所提到的确定或确定的发起可以在捕捉过程中发起第二通信装置101b之前要求来自用户的准许。在存在多个通信装置来从中选择的情况下，这样的用户交互当然可能甚至更相关。在后一情形中，可以对用户呈现可用选项，可能连同诸如例如相应可用通信装置的能力之类的优势。备选地，自动执行所有确定，对用户提供接受或拒绝所呈现选项的选项。

在确定只有第一通信装置101a要开始正在进行的捕捉(例如由于没有其他具有足够能力的通信装置当前对用户是可访问的)的情况下，则所提到的方法终止，并且触感内容的捕捉由第一通信装置以常规方式开始。

如果另一方面在步骤330确定捕捉中要涉及第二通信装置101b，则执行发起由第一通信装置101a捕捉的触感内容的至少一部分到第二通信装置101b的传输的另外的步骤340。这样的发起可以包括由第一通信装置101a捕捉的所有触感数据的传输。备选地，从第一通信装置101a提供的触感内容和性质的仅部分要被提供给第二通信装置101b。在后一情况下，根据步骤330的确定的发起进一步包括选择从第一通信装置101a提供的要传送到第二通信装置101b的触感内容和性质。这样的过程可称为步骤330的可选的子步骤335(未示出)。要理解根据步骤335的选择需要导致能够执行足以呈现暴露于触感内容捕捉的相关对象的触感内容和相关联的性质。

再次，在触感装置102处执行的是确定和/或传输的发起。通常，这样的发起意味着第一通信装置101a被触感装置102指示传送可能还根据步骤335选择所捕捉的触感内容连同相关联的性质的某些部分。这样选择的触感内容可以例如局限于指示用户在对象上的特定移动和/或致动的内容，和/或也可以决定用户在何时停止在第一通信装置101a上与对象交互。在后一情况下，这样的信息可以指示在第二通信装置101b上要在何时以及在哪里发起捕捉。通常，事件(诸如上文提到的事件)还触发指令到相关通信装置的用户的传输，关于在何时以及在哪里捕捉对象上的触感内容方面帮助相应用户。这样的指令通常与确定第二通信装置要参与触感数据的捕捉相关联地生成，而特定指令将涉及用于得出这样的结论的特定原因或条件，使得基于所述指令，源于两个通信装置101a、101b的触感内容可最终采用最高效的方式组合。

如果例如所提到的步骤330中的确定基于第一通信装置101a即将变得电池电量太低而不能继续操作致动器和传感器以用于捕捉相应触感内容这一事实，则指令可以包括指示第一通信装置101a的用户切换到所标识的第二通信装置101b并且继续在该装置上捕捉触感内容的指令。

指令可以例如指示用户关于在显示器上在哪里放置携带触感手套的手指、在哪里放置触感传感器笔或如何放置，或者引导触感使能的智能电话。如果例如用户在步骤330中选择执行通信装置的所提出的切换，则可以响应于用户做出所提到的选择或在执行切换时发起的指令可以被发送到所选择的第二通信装置101b，其指示用户在相应对象上在哪里开始触感内容的捕捉。这样的信息可以例如具有视觉信息的外观，如在图4a中呈现的，其可适用在用户在捕捉触感内容期间正在从一个通信装置切换到另一通信装置时的情形中，其中第二通信装置上的显示视图400a正在示出对象410a，诸如例如垫子、用户到目前为止在第一通信装置上已完成触感内容的捕捉的地方的踪迹或轨迹420a和明显斑点430a，在所述明显斑点430a处预期该用户开始在第二通信装置上的捕捉。采用相似的方式，预期用户呈现触感内容的速度可以呈现为视觉信息、呈现为例如以另一颜色呈现的移动指示符和/或区分图案。所呈现的类型的视觉指令可基于先前的步骤中提供的性质和触感内容而生成。呈现上的另外的指令(诸如例如色差、已经成功捕捉的触感内容的区域的阴影、指示性符号，诸如例如箭头)也可以用于突出或阐明指令，并且可以另外用作例如关于在记录触感内容时按压有多用力的指示符，以便与在第一通信装置上的捕捉保持一致。除指示如何捕捉内容外，还可以提供这样的指令，该指令指示用户关于如何定向第二通信装置以便简化触感内容的高效捕捉。因为所捕捉的触感内容和它的性质通常将根据如何以及在哪个方向上保持通信装置并且根据捕捉触感数据的速度而不同，因此当在装置之间切换时装置的姿态以及捕捉方向和速度可以有利地得到维持，以便维持给定触感内容和它的性质的一致和均匀的捕捉。

图4b图示当设想用户在第二通信装置上重复已在第一通信装置上开始的捕捉过程时可适用的备选场景，其中第二通信装置的显示器400b正在示出对象410b，以及用户已经在第一通信装置上捕捉触感内容所沿着的图案420b，以及点430b，从该点430b并且如用箭头指示的，在该方向上，用户要开始在第二通信装置上捕捉触感内容。

指令可以备选地或另外包括对用户的可听指令。同样在并行使用不同装置时或在捕捉触感内容期间在装置之间切换时，基于所提到的数据的收集和处理而创建的所提出的类型的指令可以帮助用户实时动态执行随后的捕捉过程。

上文提到的传输还可以包括用于使第一通信装置与一个或多个额外通信装置同步的同步信息。在不同通信装置上同时执行触感内容的捕捉的情况下，该类型的信息将尤其相关。同步精度将通常取决于正在捕捉的触感内容的类型。此外，通常，同步能够以分布式方式(其中通信装置交换关于它们的时钟和时钟属性的信息)实现，或者以集中式方式(其中可以或可以不形成触感装置的一部分的中央通信装置将它的时钟传送给触感装置，然后所述触感装置将它们的本地时钟与中央装置的时钟对齐)实现。这样的同步可根据用于使两个通信装置与彼此同步的已知过程来进行，并且因此超出了此文档的范围。

当再次考虑图3时，步骤330的确定通常是自动确定的结果，其中从两个通信装置101a、101b提供的所提到的信息被处理并且与逻辑相比较，该逻辑布置为预定义和/或可适配的规则和条件，通常包括预定义和/或可适配的阈值，其目标是提供优化的触感内容。备选地，所提到的步骤布置为半自动步骤，其中对通信装置101a、101b中的至少一个通信装置的用户提供关于如何将可由两个通信装置101a、101b捕捉的触感内容组合的各种选项。在后一场景中，所提到的步骤通常包括用户与触感装置102的决策逻辑之间经由相应通信装置101a、101b的图形用户界面(GUI)的对话。

根据一个可能场景，可对在通信装置上捕捉触感内容的用户指示存在例如两个备选通信装置可用，其中之一是固定的并且其中之一是移动的，其中移动通信装置具有比当前使用的固定通信装置更适合于正在进行的触感数据的捕捉的能力。然后可以对用户提供可能选项并且该用户能够选择是否仅用第一通信装置101a继续捕捉触感数据，或者是否应当用其他通信装置替换第一通信装置101a或将第一通信装置101a与其他通信装置组合。一旦已经确定要考虑第二通信装置101b，并且要组合仅某些触感数据，则将仅选择被认为与第二通信装置101b相关的内容，并且根据所提到的选择，生成相关指令。

根据另一示例，在只有具有根据特定质量性质的质量的内容(例如被发现低于预定阈值的捕捉的触感内容)要被由第二通信装置101b捕捉的内容替换或补充的情况下，选择这样的内容以用于传输。备选地，在意图由第二通信装置101b继续捕捉的情况下，在第一通信装置101a上作为触感内容301呈现的所选择的数据内容局限于由第一通信装置101a最新捕捉的内容。后一步骤也可作为全自动步骤来执行，其遵循预定义和/或可适配的规则和条件，或者它可作为半自动步骤来执行，其中例如允许用户通过经由GUI在用户交互期间选择可适用选项而参与决策，从而被适配。要传送的触感内容可以例如被选择为1D维度类型组成的最后5秒。

从通信装置101a、101b中的任何通信装置提供的触感内容可以是1、2或3D维度的，使得例如一块木头的触感数据被提供为基于时间的1D数据，而根据另一示例，指示沙发垫的触感数据被提供为具有在每个图像像素中提供的对应2D触感内容的2D图像。在基于时间的捕捉过程期间，通常提供指示当前时间实例和触感数据的持续时间的性质。对于静态和基于时间的捕捉两者，对象上的捕捉的当前位置的坐标以及空间坐标被包括在触感数据中。

在可适用于2D维度组成的另一示例中，仅选择被发现位于接近用户已经使用第一通信装置101a捕捉数据的对象的区域或区带的触感数据，以用于分发给第二通信装置101b。也可以作为在某一时间间隔期间捕捉的触感数据的汇总来选择并传送触感数据的至少部分，而捕捉的触感数据的其他部分可以被原封不动地选择并且传送。

继传输之后，如在图3的步骤340中指示的，由第二通信装置101b捕捉的触感内容被触感装置102识别，如在另一步骤350中和在另外的步骤360中指示的，由两个通信装置101a、101b捕捉的触感内容被组合。后一步骤也可布置为基于应用的规则和条件的自动或半自动步骤，所述应用的规则和条件布置成规定如何组合可用触感内容。在一个或多个半自动步骤的情况下，要理解其中选择用户偏好的实际用户交互可以与相应步骤相关联地或在与上文提到的步骤中的任何步骤相关联的一个或多个时机执行。

如上文已经暗示的，根据来自多个通信装置101a、101b的内容是否要用于改进触感捕捉的最终结果或触感内容是否更适合用于互相补充，提到的组合可以包括并行、按顺序或作为两者的组合而捕捉的内容的组合。通常，要组合触感数据的方式将依赖于确定步骤330的结果，并且可能还依赖于在步骤235中如何选择触感数据。

当在时间t从两个通信装置101a、101b提供的与诸如例如质地、运动或力之类的不同性质hi(t)相关联的触感内容被合并以便生成触感数据向量时，时间t的向量H可定义为：H(t)＝[h1(t)；h2(t)；…；hn(t)]

当在时间t在坐标x、y处从两个通信装置提供的与诸如例如质地、运动或力之类的不同性质hi(x,y,t)相关联的触感内容被合并以便生成触感数据向量时，在时间t的位置x、y的向量可定义为：

H(x,y,t)＝[h1(x,y,t),h2(x,y,t)；,…hn(x,y,t)]

对于不可访问或不满足某一准则的触感性质，这样的分量由于自然原因将不被合并。

一旦已经组合触感内容，它可被发送给接收者，或者被本地或远程存储在存储器或存储设备上，以用于以后的取回和呈现。这些都是可根据已知过程执行的步骤。因此，关于这些步骤中的每个步骤的细节已经被省略并且超出了此文档的范围。

通过应用所提出的方法，可以获得更加带宽和能量高效的触感相关过程，其中只有提到的过程所需要的数据(即，触感内容和性质)被选择并且在涉及的实体之间交换。

此外，在从一个装置切换到另一装置时或同时使用多于一个装置捕捉内容时，如上文提出的基于关于如何最佳组合触感内容的决策而生成的合适指令的交换帮助用户继续以更高效的方式捕捉触感内容。

触感装置102、500、600被配置用于在与至少两个通信装置交互时执行根据上文提到的实施例中的任何实施例的方法。这样的触感装置102、500、600可以能够执行硬件、软件或两者的组合。

现在将参考图5进一步详细地描述触感装置500，其如上文提到的那样根据一个方面可形成通信装置101a、101b中的任一个的部分或者单独装置或节点103的部分。触感装置500具有处理电路510，所述处理电路510包括适合的中央处理单元(CPU)、多处理器、微控制器、数字信号处理器(DSP)或专用集成电路中的一个或多个的任何组合，其能够执行存储器530中存储的可执行指令或代码520，其中存储器530可以是读写存储器(RAM)和只读存储器(ROM)的任何组合。存储器530通常还包括永久性存储设备，其例如可以是磁存储器、光存储器、固态存储器或甚至远程安装的存储器中的任何单独一个或组合。触感装置500还包括至少一个通信接口540，使触感装置500能够与通信装置和网络基础设施通信，如本文描述的。

上文描述的触感装置500包括处理电路510和软件指令520，所述软件指令在作为触感使能的计算机操作的触感装置500上执行时促使触感装置500执行根据上文描述的实施例中的任何实施例的方法。

现在将参考图6描述根据另一实施例的触感装置600，其也可形成单独装置或节点或者通信装置的部分，如上文描述的。根据图6，触感装置600包括多个相互交互的模块或单元。更具体地，触感装置600包括数据处理模块610，以用于识别由第一通信装置101a捕捉的触感内容(对应于图3的步骤310)和与该被捕捉内容相关联的性质，以及与第二通信装置101b相关联的性质。可通过被动接收从相应通信装置101a、101b传送的相应数据或通过主动请求相应通信装置101a、101b的相关数据来执行这样的识别。触感装置600还包括确定模块620，以用于确定或发起确定不只第一通信装置101a要参与用于捕捉触感内容的过程，这对应于图3的步骤330。所发起的确定基于上文提到的触感内容和性质，所述触感内容和性质在根据预定义规则和条件来被处理时，确定在哪些条件下来自多个通信装置101a、101b的触感内容的合并或组合是优选的。如上文描述的，在不是所有可用数据都要被提供而对于所述过程仅需要所要求的数据的情况下，确定模块620还可以配置成选择要提供给第二通信装置101b的触感数据和性质。后一模块还可以能够确定针对第二通信装置101b的触感相关指令。传输模块630配置成传送或发起触感内容从第一通信装置101a到第二通信装置101b的传输。可能也执行或至少发起指令从触感装置600的传输。更具体地，例如在触感装置600形成单独装置或节点的部分的情况下，传输模块630通过发起相关信令的方式来发起所提到数据的传输，或者例如如果触感装置600形成第一通信装置101a的部分，则传输模块630执行传输本身。

触感装置600的数据处理模块610还配置成识别由第二通信装置101b捕捉的触感内容，其在第二通信装置101b已从第一通信装置101a接收触感内容之后被接收，这对应于图3的步骤350。组合模块640配置成将从两个通信装置101a、101b获取的触感内容和性质组合，使得可获得丰富的和/或完整的触感内容以用于直接分发或存储以供以后使用。

对于上文描述的两个实施例，在触感装置500、600形成通信装置的部分的情况下，需要相应地适配通信装置中的至少一个通信装置，而余下的通信装置可配置为常规的触感使能的通信装置。在触感装置500、600改为配置为或形成单独实体(诸如例如服务器)的部分的情况下，两个通信装置都可配置为常规的触感使能的通信装置，其根据由触感装置发起的事件来提供和接收数据。

要理解，提到的模块的名称的选择只是为了举例目的，并且只要提到的功能性配置成如本文公开的那样交互，适合执行根据上文描述的方法中的任何方法的方法的装置或物理实体可以以多种备选方式来被配置，其中应用其他模块，以便能够执行所提出的过程动作。

Claims (18)

1.一种捕捉对象的触感内容的方法，当所述捕捉涉及多个通信装置时，所述方法包括：

-识别(310)由第一通信装置捕捉的触感内容和与所捕捉的触感内容相关联的性质；

-识别(320)与第二通信装置相关联的性质；

-发起(330)至少部分基于识别的性质来确定所述第二通信装置要参与所述触感内容的所述捕捉；

-发起(340)由所述第一通信装置捕捉的所述触感内容和所述相关联的性质的至少部分到所述第二通信装置的传输；

-识别(350)由所述第二通信装置捕捉的触感内容，以及

-发起(360)由所述第一通信装置捕捉的所述触感内容与由所述第二通信装置捕捉的所述触感内容的组合。

2.根据权利要求1所述的方法，其中所述性质包括以下中的至少一个：

-触感传感器相关特性；

-触感致动器相关特性；

-对象的类型；

-触感数据的类型，以及

-通信装置相关特性。

3.根据权利要求1所述的方法，其中所述确定(230)基于所述识别的性质结合以下中的至少一个而被发起：

-所述第二通信装置的位置；

-所述第一通信装置与所述第二通信装置之间的能力差异；

-所述第一通信装置与所述第二通信装置之间的距离，以及

-由所述第一通信装置捕捉的所述触感内容的质量。

4.根据权利要求1-3中的任一项所述的方法，其中所述传输的所述发起(340)还包括发起向所述第二通信装置提供关于在所述第二通信装置上如何捕捉触感数据的指令的数据的传输。

5.根据权利要求4所述的方法，包括向所述两个通信装置(101a、101b)提供同步数据以用于使所述第一通信装置与所述第二通信装置时间同步的另外的步骤。

6.根据权利要求4所述的方法，其中所传送的数据包括以下中的至少一个：

-指示关于在所述第二通信装置上显示的对象上在哪里开始捕捉触感内容的数据；

-指示关于在所述第二通信装置上显示的对象上要如何捕捉触感内容的数据；

-指示关于要如何定向所述第二通信装置的数据；

-指示关于在所述第二通信装置上显示的对象上在哪里已经捕捉了触感内容的数据，以及

-指示关于已经捕捉的触感内容已被捕捉到什么程度的数据。

7.根据权利要求1-3中的任一项所述的方法，其中由所述第二通信装置捕捉的触感内容的所述识别和识别与所述第二通信装置对触感内容的所述捕捉相关联的性质相组合。

8.根据权利要求1-3中的任一项所述的方法，其中所述确定包括：

发起由所述第一通信装置捕捉的要传送到所述第二通信装置的触感数据和性质的选择。

9.根据权利要求1-3中的任一项所述的方法，其中所述组合包括以下之一：

-将由所述通信装置并行捕捉的触感内容组合，以及

-将由所述通信装置中的每个通信装置按顺序捕捉的触感内容组合。

10.一种用于捕捉对象的触感内容的触感装置(600)，涉及多个通信装置(101a、101b)，所述触感装置(600)包括处理电路，所述处理电路包括处理器和存储器(530)和可执行指令，所述可执行指令在所述触感装置(600)上执行时促使所述触感装置(600)：

-识别由第一通信装置捕捉的触感内容和与所捕捉的触感内容相关联的性质；

-识别与第二通信装置相关联的性质；

-发起至少部分基于识别的性质来确定所述第二通信装置要参与所述触感内容的所述捕捉；

-发起由所述第一通信装置捕捉的所述触感内容和所述相关联的性质的至少部分到所述第二通信装置的传输；

-识别由所述第二通信装置捕捉的触感内容；以及

-发起由所述第一通信装置捕捉的所述触感内容与由所述第二通信装置捕捉的所述触感内容的组合。

11.根据权利要求10所述的触感装置(600)，其中所述性质包括以下中的至少一个：

-触感传感器相关特性；

-触感致动器相关特性；

-对象的类型；

-触感数据的类型，以及

-通信装置相关特性。

12.根据权利要求10所述的触感装置(600)，其中促使所述触感装置(600)基于所述识别的性质结合以下中的至少一个来发起所述确定：

-所述第二通信装置的位置；

-所述第一通信装置与所述第二通信装置之间的能力差异；

-所述第一通信装置与所述第二通信装置之间的距离，以及

-由所述第一通信装置捕捉的所述触感内容的质量。

13.根据权利要求10-12中的任一项所述的触感装置(600)，其中促使所述触感装置(600)通过还发起向所述第二通信装置提供关于在所述第二通信装置上如何捕捉触感数据的指令的数据的传输来发起所述传输。

14.根据权利要求13所述的触感装置(600)，其中进一步促使所述触感装置(600)向所述两个通信装置(101a、101b)提供同步数据，以用于使所述第一通信装置与所述第二通信装置时间同步。

15.根据权利要求13所述的触感装置(600)，其中促使所述触感装置(600)还向所述第二通信装置(101b)传送以下中的至少一个：

-指示关于在所述第二通信装置上显示的对象上在哪里开始捕捉触感内容的数据；

-指示关于在所述第二通信装置上显示的对象上要如何捕捉触感内容的数据；

-指示关于要如何定向所述第二通信装置的数据；

-指示关于在所述第二通信装置上显示的对象上在哪里已经捕捉了触感内容的数据，以及

-指示关于已经捕捉的触感内容已被捕捉到什么程度的数据。

16.根据权利要求10-12中的任一项所述的触感装置(600)，其中进一步促使触感装置(600)在识别由所述第二通信装置捕捉的触感内容时识别与所述第二通信装置对触感内容的所述捕捉相关联的性质。

17.根据权利要求10-12中的任一项所述的触感装置(600)，其中进一步促使触感装置(600)在确定第二通信装置要参与触感内容的所述捕捉时，发起由所述第一通信装置捕捉的要传送到所述第二通信装置的触感数据和性质的选择。

18.根据权利要求10-12中的任一项所述的触感装置(600)，其中促使所述触感装置(600)通过还执行以下中的至少一个来执行所述组合：

-将由所述通信装置并行捕捉的触感内容组合，以及

-将由所述通信装置中的每个通信装置按顺序捕捉的触感内容组合。