CN105393200B - 用户接口反馈元素 - Google Patents

Abstract

在用户接口（UI）中实施事实交互式元素和列表交互式元素的架构，用于帮助针对语义web和结构数据搜索而获得有关实体属性的用户反馈从而确保数据的正确性、新鲜度和用户相关性。该事实交互式元素使得用户能够与相对应属性的属性数据进行交互。该用户交互随后提供有关给定属性的属性数据的正确性的反馈。每种状态具有与其它状态具有明显视觉差异的相对应视觉状态。该交互式元素支持使用诸如利用输入设备之类的标准用户输入，以及使用诸如与自然用户接口（NUI）手势相关联的手势所进行的交互。

Description

用户接口反馈元素

背景技术

有效地搜索数量不断增加的数据对于用户而言始终是一项挑战，而且类似地，提供有所改进的搜索能力对于搜索引擎提供商而言也始终是一项具有竞争性的挑战。一种用于改进搜索效能的技术尝试获得用户反馈。对于语义web和结构数据搜索而言，虽然期望用户关于实体属性和列表的反馈以确保数据的正确性、新鲜度和用户相关性，但是获得肯定/否定反馈以及所建议的改变却是成问题的。

发明内容

以下给出简化的发明内容以便提供对这里所描述的一些新颖实施例的基本理解。该发明内容并非是扩展性综述，并且其并非意在标示出关键/必要元素或者对其范围加以限定。其目的仅在于以简化形式给出以下概念而作为随后给出的更为详细的描述的前序。

所公开的架构在用户接口（UI）中实施了诸如事实交互式元素和列表交互式元素之类的交互式反馈元素以帮助针对语义web和结构数据搜索而获得有关实体属性的用户反馈从而确保数据的正确性、新鲜度和用户相关性。

该UI呈现web和结构数据，后者包括根据实体和相对应的实体属性所定义的数据项目。该实体属性包括可以为正确、不正确或缺失以及期望用户反馈的属性数据（数值）。事实交互式元素与每个实体属性相关联。该事实交互式元素使得用户能够与相对应属性的属性数据进行交互。该用户交互随后提供有关给定属性的属性数据的正确性的反馈。交互式元素的每种状态具有与其它状态具有明显视觉差异的相对应视觉状态。该交互式元素支持使用诸如利用输入设备之类的标准用户输入，以及使用诸如与自然用户接口（NUI）手势相关联的手势所进行的交互。

该架构采用众包（crowd-sourcing）和建议信息来帮助web和结构数据的用户反馈。众包数据能够—在其它用户对相同属性数值进行寻址时—实时获得（在实际事件发生的时间跨度内进行处理），或者从捕捉并存储众包数据的数据源所获得，并且其分析能够由众包组件来执行从而针对该属性得出最为普遍的（多个）众包数值。在任何情况下，能够在UI中呈现（多个）众包属性数值（单一数值或顶端数值的列表）。

建议组件能够被采用，其（直接和/或经由众包组件）对众包数据进行处理从而得出（多个）建议属性数值（以便在UI中进行呈现）。（多个）建议属性数值能够从众包数据、从其它数据源（例如，诸如网站的在线源、其它结构数据源、离线源等）或者上述二者所得出。（多个）众包数值能够作为单一众包数值或者众包数值的列表在UI中进行呈现。类似地，（多个）建议数值能够作为单一建议数值或者建议数值的列表进行呈现。

除了标准UI元素特性之外，单一事实交互式反馈元素（至少）定义附加特性：属性类型，原始数值，状态和建议数值。该列表交互式反馈元素包括列表项目的集合，其中每个列表项目至少具有数值特性、原始位置和建议位置。

提供了手势处理组件和呈现组件。该呈现组件可以包括硬件和软件，它们通常被提供并且使得用户能够与触摸敏感显示器和应用用户接口进行交互。手势处理组件包括至少用于话音识别、语音识别、脸部识别、身体部分和附属物的姿态识别的硬件和软件功能。

为实现以上和相关目标，这里结合以下描述和附图对某些说明性的方面进行描述。这些方面指示了这里所公开的原则能够被加以实践的各种方式，并且所有方面及其等同形式都意在处于所请求保护主题的范围之内。其它优势和新颖特征在结合附图考虑时都将由于以下详细描述而变得显而易见。

附图说明

图1图示了依据所公开架构的系统。

图2图示了采用众包和建议信息来辅助结构数据的用户反馈的系统的可替换实施例。

图3图示了依据所公开架构的一般交互式事实反馈元素以及用户与实体属性进行交互的状态图。

图4图示了针对状态特性的示例性交互式事实反馈元素的详细示图。

图5图示了用户接口中属性的反馈元素状态的不同视觉状态的呈现形式。

图6A和6B图示了反馈用户接口元素的单一示图，其包括属性类型特性、建议数值特性和原始数值特性的容器项目。

图7图示了单一事实UI反馈元素的特性的示图。

图8图示了依据所公开架构的结果列表反馈元素的示图。

图9图示了依据所公开架构采用手势与属性、实体以及实体和属性的列表进行交互的用户接口系统。

图10图示了用于与如图8的反馈用户接口元素所促成的结果集列表进行交互的示图。

图11图示了所公开架构针对实体图形中的实体消歧的实施方式。

图12图示了依据所公开架构的方法。

图13图示了依据所公开架构的可替换方法。

图14图示了依据所公开架构的采用并执行交互式元素的计算系统的框图。

具体实施方式

所公开的架构在用户接口（UI）中实施了诸如事实交互式元素和列表交互式元素之类的交互式反馈元素以帮助针对语义web和结构数据搜索而获得有关实体属性的用户反馈从而改进数据的正确性、新鲜度和数据中的用户相关性。

该UI呈现web和结构数据，后者包括根据实体所定义的数据项目以及相对应的实体属性。该实体属性包括可以为正确、不正确或缺失以及期望用户反馈的属性数据（数值）。事实交互式元素与每个实体属性相关联。该事实交互式元素使得用户能够与相对应属性的属性数值进行交互。该用户交互随后提供有关给定属性的属性数据的正确性的反馈。交互式元素的每种状态具有与其它状态具有明显视觉差异的相对应视觉状态。该交互式元素支持使用诸如利用输入设备之类的标准用户输入，以及使用诸如与自然用户接口（NUI）手势相关联的手势所进行的交互。

交互式元素是表示正在进行的操作或变换的的状态的接口对象，其或者是用户意图的视觉提醒物（例如，指针）或者是展示用户可能进行交互的地方的可视线索（affordance）。

在支持触摸/手势的计算设备上，用户被呈现以来自实体数据库（例如，本地电话簿、名人列表等）的实体及其实体属性。UI提供了确认属性的正确性、指示标记不正确并且使得能够进行适当属性编辑的功能（ability）。在支持触摸/手势的设备的一种实施方式中，该UI提供了敲击属性以确认其正确性，双击属性以将其标记为不正确，或者敲击并保持在属性上而使得能够进行适当属性编辑的功能；然而，所要意识到的是，可以采用其它的手势/触摸交互。属性编辑模式使得用户能够通过替换所推荐的变化来建议针对属性的编辑。还能够通过元素上的“滑动”手势（转换操控）来执行有关属性数值复原的反馈。

诸如示出来自其它用户的实时反馈（在用户提供反馈时）和历史反馈（来自之前所提供并存储的信息）之类的附加状态能够被添加并且通过诸如缩放和旋转之类的其它手势进行调用。对于诸如图片之类的非文本内容而言，无接触手势和多点触碰手势能够为用户提供更为自然的提供反馈的方式。话音命令也能够与手势进行整合。

除了获得有关实体的单一事实/属性的反馈之外，经常需要获得有关重复项目和项目相关性的反馈。在这样的情行下，结果能够在项目的排序列表中被呈现给用户。

提供普通的标准UI元素，其使得用户能够将项目“对齐”在一起（例如，多点触碰手势，例如使用每只手的手指在视觉上将两个重复项目放在一起）以将该项目标记为是重复的，将项目拖动至列表中所期望的位置（顺序），将项目缩小以复原（撤销）重复反馈，缩小两个相邻项目以在其间增加新的项目，并且执行“滑动”以删除/恢复项目。

现在参考附图，其中同样的附图标记贯穿全文被用来指代同样的元素。在以下描述中，出于解释的目的，给出了多个具体细节以便提供对其的全面理解。然而，新颖的实施例显然可以在没有这些具体细节的情况下进行实践。在其它实例中，以框图形式展示了结构和设备以便促进对其的描述。意图在于覆盖落入所请求保护主题的精神和范围之内的所有修改、等同和替换形式。

图1图示了依据所公开架构的系统100。系统100包括呈现结构数据104的用户接口102。结构数据104包括根据实体106所定义的数据项目以及相对应的实体属性108。例如，实体属性108包括可以为正确、不正确或缺失以及在支持手势的搜索环境中期望用户反馈的属性。交互式元素与每个实体属性相关联。该交互式元素使得用户能够与相对应属性的属性数据进行交互。用户交互随后关于给定属性的属性数据的正确性提供反馈。

因此，交互式（反馈）元素110与属性112相关联，后者使得用户能够与属性112的的属性数据114进行交互。交互式元素110使得能够使用诸如利用输入设备所进行的标准用户输入，而且还支持使用诸如与自然用户接口（NUI）手势相关联的手势所进行的交互。

NUI可以被定义为使得用户能够以“自然”方式与设备进行交互的任意接口技术，其没有诸如鼠标、键盘、遥控器等的输入设备所施加的人为约束。NUI方法的示例包括采用手势的那些方法，其在这里被宽泛地定义为包括但并不局限于话音识别、触摸和输入笔识别、屏幕上或邻近屏幕的手势识别、空中手势、头部和眼部追踪、语音和话音发声，以及至少涉及视觉、话音、语音、姿态和触摸数据的机器学习。

NUI技术包括但并不局限于触摸敏感显示器，语音和话音识别，意图和目标理解，使用深度相机（例如，立体相机系统、红外相机系统、彩色相机系统以及它们的组合）进行的运动姿势检测，使用加速计/陀螺仪进行的运动姿势检测，面部识别，3D显示器，头部、眼部和注视追踪、沉浸式增强现实和虚拟现实系统，所有这些都提供更为自然的接口，以及用于使用电场感应电极（例如，脑电图描记器（EEG））和其它神经生物反馈方法感应大脑活动的技术。

在支持触摸/手势的计算设备上，例如，用户被呈现以实体及其相关联的实体属性。例如，本地商户的实体可以包括商户名称、地址、城市、州、电话、类别等的属性，并且名人实体则可以包括姓名、出生日期、死亡日期、职业等的实体属性。这些能够从诸如本地电话簿、名人列表等之类的结构实体数据库获得。

用户交互包括一种或多种自然用户接口手势。用户交互使得能够对属性的正确性或属性的不正确（不正确状态）加以确认。用户交互使得能够编辑属性数据。交互式元素110包括一种或多种状态，它们使得能够呈现其它用户的现场和历史反馈。用户交互作为反馈的一部分而提供了实体或实体属性的相关性。交互式元素110包括一种或多种状态，它们使得用户交互能够改变实体或实体属性的排名。该系统可以进一步包括列表反馈元素702，其使得能够对结构数据的列表中的多个实体/属性项目进行操控。

图2图示了系统200的可替换实施例，该系统200采用众包和建议信息来帮助结构数据的用户反馈。众包通过从人的集合尤其是来自在线团体的人而不是来自传统的雇员或供货方的集合征求或捕捉数据而获得服务、想法和/或内容，尽管上述雇员和/或供货方也可以是该集合的一部分。该过程能够在线和离线进行。众包不同于常规外包，其在于众包是在线的、分布式的问题解决和生产模型。

因此，系统200包括图1的系统100的实体和组件，以及附加的实体和组件，诸如访问并处理众包数据209的众包组件202。众包数据209可以在其它用户对相同属性数值进行寻址时实时获得，或者从捕捉并存储众包数据209的数据源获得，并且其分析能够由众包组件202所执行以得出针对该属性的最为普遍的（多个）众包数值204。在任意情况下，（多个）众包属性数值204（单一数值或者顶端数值的列表）能够在UI 102中呈现。

可能出现的情况是，采用建议组件206，其对众包数据209进行处理（直接和/或经由众包组件202）以得出（多个）建议属性数值208（以便在UI 102中呈现）。（多个）建议属性数值208能够从众包数据209、从其它数据源210（例如，诸如网站的在线源、其它结构数据源、离线源等）或者其二者所得出。

（多个）众包数值204能够在UI 102中被呈现为单一众包数值或者众包数值的列表。类似地，（多个）建议数值208可以被呈现为单一建议数值或建议数值的列表。

图3图示了依据所公开架构的一般交互式事实反馈元素300以及用户与实体属性302的交互的状态图。交互式反馈元素300的示例能够针对用户接口（UI）102中所呈现的每个属性（数据项目）而提供。

如所描绘的，反馈元素300具有状态特性，以及如与属性数值相关联的原始状态304。该状态特性仅是能够针对反馈元素300（并且类似地，图1的交互式元素110）被采用的多种特性之一。其它特性例如包括属性类型、原始数值和建议数值。该数值可以具有一个或多个原始数值状态306。在该示例性的用于用户交互和反馈的一般交互式反馈元素300中，原始状态304包括具有数值（with-value）状态（S1）308和没有（without-value）数值状态（S2）310。

此外，操作状态312涉及到原始状态304和所包括的数值状态306。操作状态312是能够对数值状态306执行的操作。例如，第一操作状态314（也被表示为SS₁）可以是标记状态，其中用户进行交互而以具体方式对属性施行标记（例如，正确、不正确等）。第二操作状态316（也被表示为SS₂）可以是编辑状态，其中用户进行交互而以具体方式对属性施行编辑（例如，正在标记、已编辑等）。第T操作状态318（也被表示为SS_T）可以是标记状态，其中用户进行交互而以具体方式对属性施行标记（例如，正确、不正确等）。

操作状态312能够以许多不同方式变换为其它状态、原始状态304以及数值状态306。展示了一些示例变换320；然而所要理解的是，这些仅是作为示例并且根据交互式反馈元素300的具体实施方式而可能有所不同。变换320可以根据手势（G）来完成。也就是说，第一手势可以是单次敲击（手指单次触碰触摸敏感显示器），并且不同变换能够使用另一个两次敲击（双重敲击）的手势来完成。其它变换手势可以包括话音、手部运动、使用双手的运动、头部运动、面部识别等。

图4图示了用于状态特性的示例性交互式事实反馈元素400的详细示图。原始状态402包括两个数值状态：具有数值状态404（例如，以代码表示为OriginalValue），和没有数值（或缺失数值）状态406（例如，以代码表示为OriginalMissingValue）。与交互式反馈元素400相关联的操作状态408包括已编辑状态410（例如，以代码表示为Edited）、编辑状态412（例如，以代码表示为Editing）、标记为不正确状态414（例如，以代码表示为MarkedIncorrect）和标记为正确状态416（例如，以代码表示为MarkedCorrect）。

每个状态具有相对应的视觉状态，其在视觉上明显不同于其它状态。此外，手势被用来从一种状态变换为另一种状态。

为了发起对原始状态402的数值的编辑，敲击保持手势使得从任一种原始状态402变换为编辑状态412。敲击保持手势可以是应用于触摸敏感显示器的单次持续触碰。在编辑完成之后，用户能够使用键入和/或（多种）失焦手势从编辑状态412变换至已编辑状态410。这可以是单个手势或者手势的组合。例如，键入手势（无论它是什么）可以指示所键入的数值要被保存。一旦新数值已经被输入（键入），则可以作出失焦手势，诸如将手以向后运动从前方位置水平移开，以便例如变换为已编辑状态410，这指示编辑已经完成。滑动手势从已编辑状态410变换回原始状态402。例如，该滑动手势可以是手部从左向右水平运动的移动。

如果用户选择简单地将数值标记为不正确，则用户从具有数值状态404变换为标记为不正确状态414。从具有数值状态404变换为标记为不正确状态414能够使用双重敲击手势来完成。该双重敲击手势可以被定义为触摸敏感显示器上的两次连续单次敲击。这指示属性的原始数值可能不正确并且用户想要改变该数值。

从标记为不正确状态414，用户能够使用相对应的手势而变换至不同状态（例如，正在编辑412、原始状态402或者标记为正确状态416）。例如，用户能够简单地将数值标记为不正确并且随后使用滑动手势变换回原始状态402。可替换地，用户能够通过使用敲击保持手势变换至编辑状态412而进入编辑模式，并且随后改变数值。再可替换地，用户能够使用单次敲击（触碰）手势变换至标记为正确状态416。该变换适合于用户在属性实际正确时可能意外地意图将其标记为不正确的情形。

从具有数值状态404，用户能够使用单次敲击手势变换至标记为正确状态416，以提供当前属性数值正确的反馈。在将属性标记为正确之后，能够使用滑动手势来完成回到原始状态402的变换。可替换地，用户能够使用双重敲击手势从标记为正确状态416变换为标记为不正确状态414。再可替换地，能够使用敲击保持手势从标记为正确状态416变换至编辑状态412。

手势显然能够重复用于某些变换以使得其对于用户而言更加容易。例如，滑动手势返回原始状态402，敲击保持手势从任意状态进入到编辑模式，单次敲击手势进入标记为正确状态416，并且双重敲击手势进入标记为不正确状态414。

图5图示了用户接口102中用于属性506的反馈元素状态504的不同视觉状态502的呈现形式500。用户接口102将多种属性和属性数据呈现为web和/或结构数据。这里，属性112具有属性数据（数值）114。属性为“address”并且属性数值为“15101 NE 40^th Street”。所图示的不同状态遵循图4的反馈元素400的状态特性的状态。因此，“address”的具有数值状态404为视觉状态“15101 NE 40^th Street”。如果“address”缺失，则没有数值状态406能够被呈现为视觉状态“<missing address>”。

如果用户选择将地址标记为正确，则变换至标记为正确状态416并且视觉状态能够被表示为斜体地址“15101 NE 40 ^th Street”以展示该地址已经被标记为正确。如果用户选择将该地址标记为不正确，则变换至标记为不正确状态414并且该属性数值的视觉状态能够被以粗斜体地址“15101 NE 40^th Street”进行呈现以展示该地址已经被标记为不正确。

如果用户选择对该数值进行编辑，则变换至编辑状态412并且该属性数值的视觉状态能够被呈现为带下划线的地址“15101 NE 40^th |Street”，该文本字段中的垂直线表示能够被移动到要添加或去除字符、文本、改变字体、高亮、样式等的位置的光标。这里，用户在处于编辑模式的同时去除了单词“street”中的一个字母“e”。如果用户选择保存编辑，则变换至已编辑状态410并且该属性数值的视觉状态可以被呈现为被编辑的地址“15101 NE40^th Stret”，其中该文本字段的灰色背景表示该地址已经被编辑。

这里所呈现的视觉状态仅是能够被用来以视觉表示各种状态的图形强调形式（例如，加粗、注释、标注、斜体、背景着色等）的几个示例。项目508关联于图6A和图6B的描述进行描述。因此，所展示的视觉状态并不被解释为局限于这些示例，其在于针对不同视觉状态采用文本着色，能够采用字体大小，等等。

图6A和图6B图示了包括属性类型特性602、建议数值特性604和原始数值特性402的容器项目的反馈用户接口元素的单一示图600。在图6A中，属性类型特性602包括具有与小时、地址（州、街道、邮政编码（zipcode））以及姓名、电话和类别相关的属性的实体类型604。

如图6B所展示，属性类型特性涉及到原始数值特性402。图6B中的大多数项目之前已经在图4中进行了描述；然而，建议数值特性604现在关联于已编辑状态410被展示。建议数值特性604（容器）与已编辑状态相关联，其在达到该状态时向系统指示这是建议数值。然而，在所公开架构的预期之内，容器（例如，外部建议数值特性）能够用编辑状态412实施以例如从众包源接收（多个）外部建议的编辑。如果用户同意或接受了（多个）建议编辑，则键入/失焦手势是用户同意的确认，由于状态迁移至已编辑状态410所以变为了建议数值。例如，对于针对标记为正确状态416和标记为不正确状态414的外部输入（例如，众包的）能够实施相似类型的容器。

协同该外部建议输入功能，图5的不同视觉状态502的状态能够被注释或者利用指示符508打标签（针对众包的CS以及针对外部源的ES，等等）以至少向用户指示该内容是外部来源的。例如，继续针对编辑状态412包括外部建议数值特性容器，能够呈现（例如，接近于地址字段）图形或图标（或者一些其它视觉/音频通知技术），其向用户清楚地指示该文本作为来自外部源的建议而被接收。可替换地，所采用的图形强调形式可以包括向用户清楚地指示文本（或内容）被一个或多个外部源所接收（或影响）的图形强调形式。

图7图示了单一事实UI反馈元素704的特性702的示图700。除了标准UI元素特性之外，单一事实UI反馈元素704（例如，图3的交互式反馈元素300）（至少）定义了另外的特性：属性类型706（例如，以代码表示为AttributeType）、原始数值708（例如，以代码表示为OriginalValue）、状态710（例如，以代码表示为State）和建议数值712（例如，以代码表示为SuggestedValue）。状态特性的状态（如图3和图4所示）可以是原始具有数值、原始缺失数值（也被称作没有数值）、标记为正确、标记为不正确、编辑和已编辑之一。每个状态具有相对应的视觉状态（如图5以及图6A和6B所展示），当在UI中显示时，上述视觉状态提供与其它状态的明显视觉区分。能够使用手势从一个状态变换至另一个状态。

图8图示了依据所公开架构的结果列表反馈元素802的示图800。该结果列表反馈元素802包括列表项目804的集合。每个列表项目至少具有以下特性806：数值808（例如，以代码表示为Value）、原始位置810（例如，以代码表示为OriginalPosition）和建议位置812（例如，以代码表示为SuggestedPostion）。

位置数值被用于并未处于列表中的项目（新项目的OriginalPosition和已删除项目的SuggestedPosition）。将项目拖动到项目的列表804中的所期望位置导致利用“from”位置和“to”位置之间的SuggestedPostion数值对该项目的SuggestedPostion特性进行更新。将项目对齐在一起（例如，使用被解释为将两个列表项目放在一起的姿态/语音手势）导致具有相同SuggestedPostion的项目，并且更新受影响项目的SuggestedPostion。在项目上进行缩小向当前SuggestedPostion处的项目给出相邻的新的SuggestedPostion数值。在两个相邻项目上进行缩小插入新的项目，并且重新定位下方的项目。在未删除项目上进行滑动（滑动手势）导致视觉变化（例如，移动至列表底部并且穿行通过）反映出该项目被删除。在被删除项目上进行滑动通过在视觉上将该项目变回正常样式并且将该项目移动至未删除项目列表的底部而逆转“删除”效果。

图9图示了依据所公开架构的采用手势与属性、实体、实体和属性的列表进行交互的用户接口系统900。UI 102展示了用户将向其提供反馈的web和/或结构数据的结果列表902。列表902包括两个实体/属性配对：第一实体/属性配对904以及第二实体/属性配对906。然而，所要意识到的是，列表902可以包括比所描绘的更多实体和实体属性。

列表902与结果列表UI反馈元素908（类似于图8的元素802）相关联。在系统900的所有实例中，虚线指示相关联的项目并不是视觉的而是编码的。结果列表902周围的短划线以及列表元素908的虚线指示了编程的关系。因此，列表元素908关联于实体/属性配对（904和906）进行工作而使能关联于图8所描述的功能。

类似地，实体/属性配对具有相关联的单一事实元素：第一配对904与第一单一事实反馈元素910相关联而第二配对906与第二单一事实反馈元素912相关联。单一事实反馈元素（910和912）使能至少关联于图1-8所描述的所有功能，而其它地方则用于与实体和属性的手势交互。

系统900还包括手势处理组件914（例如，算法）和呈现组件916。呈现组件916可以包括硬件和软件，它们通常被提供并且被使能而用于用户与触摸敏感显示器和应用用户接口的交互。手势处理组件914包括至少用于话音识别、语音识别、脸部识别、身体部分和附属物的姿态识别的硬件和软件功能。因此，使用手部918所进行的单手手势能够被解释为影响至少如这里所描述的列表和属性交互。所要意识到的是，如之前所指出的，该手势可以包括双手、眼睛移动、语音命令等，以创建被架构所配置并理解的期望效果。

因此，呈现拖动手势以对项目执行去往所期望位置的拖动操作导致利用列表中的“from”位置和“to”位置之间的建议位置数值来更新项目的建议位置特性。将项目对齐在一起导致项目具有相同建议位置，并且更新受影响项目的SuggestedPostion数值。在单个项目上进行缩小向当前SuggestedPostion的项目分配/更新相邻的新的SuggestedPostion数值。在两个相邻项目上进行缩小插入新的项目，并且重新定位下方的项目。在未删除项目上进行滑动（诸如水平左右移动手部的滑动手势）导致视觉变化（例如，移动至列表底部并且穿行通过）反映出该项目被删除。在被删除项目上进行滑动通过在视觉上将该项目变回正常样式并且将该项目移动至未删除项目列表的底部而逆转“删除”效果。

图10图示了用于与如图8的反馈用户接口元素802所促成的结果集列表进行交互的示图1000。示图1000图示了用于指示重复结果集列表项目并且随后撤销对重复列表项目的选择的手势的一个示例。如向用户所呈现的，在执行返回结果项目列表的搜索之后，结果集项目的初始状态A示出五个结果以及相对应的结果标题（其可以有多于五个的列出结果，例如，诸如十个）。从左向右移动，在状态B，用户已经应用了两手指触碰手势以接触来自结果集的两个选择——第一结果和第四结果——而进行敲击保持。用户随后通过在“捏取”运动中将手指移动在一起而作出手势，这被解释为指示将两个结果在组合记录中放在一起。这在状态C进行表示，其中第四结果在列表中向上移动而仅处于第一结果之下（SuggestedPostion），并且结果列表现在展示了第二结果针对列表中的其余结果继续作为第二结果列出（而不是被重新编号），等等。用户随后能够与提交按钮进行交互（例如，敲击）以将建议列表发送至搜索引擎。

还能够执行逆转（或撤销）操作。在状态C开始，用户应用被系统解释为将第一结果和第四结果的组合记录项目分开（如状态B所指出）的手势（例如，触碰和拖动分开）。将两个项目分开的该动作自动将结果项目返回至原始位置（第一结果保留在第一位置，而第四结果则返回第四位置），因此逆转到未被选择的起始状态A。

如图6A和6B中所描述的，外部源（ES）建议任选地也能够利用列表反馈UI元素来实施。这里，在状态A开始，提供ES按钮1002，当（使用手势）被选择时，其自动向（由诸如众包数据的外部源）所建议的一个或多个列表项目应用图形强调形式以便在结果集中被重新定位或组合。用户随后能够选择保留ES建议或者（使用手势）取消选择ES按钮1002以返回到如状态A所指出的先前状态，并且使用手势所使能的选择、组合、逆转等向前进行至状态B。

图11图示了所公开架构针对实体图形1100中的实体消歧的实施方式。例如，歧义基于有关实体如何在web文档中利用具有相同名称的实体而被引用的变化形式以及由于错误拼写而出现。

因此，所公开的架构能够被采用来与实体数据进行交互（例如，键入、纠正等），其中数据项目之间的已知关系被用来标记缺失或不正确的条目。例如，取决于具体实体（例如，总统、汽车、电影、城市等），实体“Lincoln”可以具有非常不同的实体数据项目集以及数据之间的图形关系。

将UI对象的简化且一般化的实体图形1100考虑为一个实体1102和三个实体数据项目：第一数据项目1104、第二实体数据项目1106和第三实体数据项目1108，每个均具有由指向实体1102的箭头所表示的关系。

每个对象可以具有与其相关联的如这里所描述的UI反馈元素以促成关于实体对象（例如，实体1102）、数据项目对象（例如，数据项目1106）和用于消歧的关系对象（箭头）的在标记正确/不正确、编辑/已编辑、具有/没有数值、列表位置等方面的手势所支持的用户反馈。用户不仅能够采用手势来针对每个对象提供反馈，而且还能够在用户接口102中的对象之间进行移动。例如，能够使用滑动手势移动至（如系统所确定的）另一个对象，在这种情况下，针对移动至对象的任何数据被呈现在用户交互区域1110中。用户随后能够针对该UI元素使用手势以便针对编辑、标记为正确等进行交互。

如前所述，建议编辑（或内容）能够在从外部源（例如，众包）所获得的时候被接收到用户接口102之中。能够在对象（例如，ES）附近例如向该对象提供图形强调形式，或者在交互区域1110中为具体对象提供图形强调形式以便指出所建议信息可用于该对象。

这里包括了表示用于执行所公开架构的新颖方面的示例性方法的一套流程图。虽然为了便于解释，这里例如以流程图或流程示图的形式所展示的一种或多种方法被展示并描述为一系列动作，但是要理解并意识到的是，该方法并不被动作的顺序所限制，因为一些动作以此为依据可以以不同顺序进行和/或与这里所展示并描述的其它动作同时进行。例如，本领域那些技术人员将会理解并意识到的是，方法可替换地能够诸如以状态图而被表示为一系列的相关状态或事件。此外，并非方法中所图示的所有动作对于新颖实施方式而言都是所必需的。

图12图示了依据所公开架构的方法。在1200，关联于web和结构数据实施的反馈元素（（多个）事实交互式元素和（多个）列表交互式元素）形成用户接口。例如，该反馈元素使得能够在支持手势的搜索环境中与作为用户反馈的属性数值和列表项目进行有关属性数值和列表项目的正确性的交互。在1202，对所接收的手势进行处理以如反馈元素所使能的与至少一个属性数值或列表项目进行交互。微处理器能够被配置为执行存储在存储器中的指令，该指令与实施或处理的至少一个动作相关联。

该方法可以进一步包括访问与其它用户所键入的属性数值相关的数据源并且将其它用户所键入的属性数值作为列表项目的一部分进行呈现。该方法可以进一步包括提供反馈元素的列表反馈元素，其使得能够使用相对应的手势在有序列表上进行有关条目添加、相关性和重复条目去除的反馈。该方法可以进一步包括将（单一）事实反馈元素实施为使能有关数值操作的不同视觉状态的反馈元素之一。

该方法可以进一步包括用与属性类型、属性的原始数值、状态和建议数值相关的事实反馈元素（例如，单一）定义特性并且针对与属性类型、属性的原始数值、状态和建议数值相关的事实反馈元素（例如，单一）定义手势。该方法可以进一步包括用与列表项目的数值、列表项目的原始位置和列表项目的建议位置相关的结果列表反馈元素定义特性并且针对与列表项目的数值、列表项目的原始位置和列表项目的建议位置相关的结果列表反馈元素定义手势。该方法可以进一步包括响应于手势呈现来自其它用户（例如，社交网络用户、众包用户等）的实时数据，并且使得能够选择该实时数据。

图13图示了依据所公开架构的可替换方法。在1300，关联于web和结构数据所实施的事实反馈元素形成用户接口，该事实反馈元素使得能够在支持手势的搜索环境中与项目的属性数值进行交互。在1302，能够关联于web和结构数据实施的列表反馈元素形成用户接口，该列表反馈元素使得能够在支持手势的搜索环境中对项目的列表进行操控。在1304，接收使得能够与属性数值和项目列表进行交互以关于该属性数值和项目列表提供相关性和正确性反馈的手势。微处理器能够被配置为执行存储器中的指令，该指令与实施该事实反馈元素、实施该列表反馈元素或者接收中的至少一个动作相关联。

该方法可以进一步包括基于众包数据和社交网络数据建议并呈现项目列表。该方法可以进一步包括接收变换状态以标记并编辑数值、去除列表的重复项目、向列表添加项目以及在列表上对项目重新定位的手势。该方法可以进一步包括在用户接口中在与事实反馈元素相关联的操作和与列表反馈元素相关联的操作之间进行视觉区分。该方法可以进一步包括接收使得能够进行与非文本内容（例如，图像、视频、音频、链接等）的相关性和正确性相关的反馈的手势。

如本申请中所使用的，术语“组件”和“系统”意图指计算机相关的实体，其是硬件、软件和有形硬件的组合、软件或者执行中的软件。例如，组件可以是诸如处理器、芯片存储器、大型存储设备（例如，光学驱动器、固态驱动器和/或磁性存储媒体驱动器），和计算机之类的有形组件，以及诸如在处理器上运行的处理、对象、可执行程序、数据结构（存储在易失性或非易失性存储介质中）、模块、执行的线程和/或程序之类的软件组件，但并不局限于此。

作为说明，在服务器上运行的应用和服务器都可以是组件。一个或多个组件可以处于处理和/或执行的线程之内，并且组件可以定位于一台计算机上和/或在两个或更多计算机之间进行分布。词语“示例性”在这里被用来意指用作示例、实例或说明。这里被描述为“示例性”的任何方面或设计都并非必然被解释为优选于或优于其它方面或设计。

现在参考图14，其图示了依据所公开架构的采用并执行交互式元素的计算系统1400的框图。然而，所要意识到的是，所公开的方法和/或系统的一些或全部方面能够被实施为片上系统，其中模拟、数字、混合信号以及其它功能被构建于单个芯片衬底之上。

为了针对其各个方面提供附加环境，图14和以下描述意图提供能够在其中实施各个方面的适当计算系统1400的简要的一般性描述。虽然以上描述处于能够在一个或多个计算机上运行的计算机可执行指令的一般环境之中，但是本领域那些技术人员将会认识到的是，新颖实施例也能够结合其它程序模块和/或作为硬件和软件的组合来实施。

用于实施各个方面的计算系统1400包括计算机1402，其具有（多个）处理单元1404（也被称作（多个）微处理器和（多个）处理器）、诸如系统存储器1406的计算机可读存储介质（计算机可读存储介质/媒体还包括磁盘、光谱、固态驱动器、外部存储器系统以及闪存驱动器），以及系统总线1408。（多个）处理单元1404可以是任意的各种可商业使用的处理器，诸如单处理器、多处理器、单核单元和多核单元。此外，本领域技术人员将会意识到，以上新颖方法能够利用其它计算机系统配置进行实践，其中包括小型计算机、大型计算机以及个人计算机（例如，台式机、膝上电脑、平板PC等）、手持计算设备、基于微处理器的或可编程消费电器等，它们每一个均能够操作耦合至一个或多个相关联设备。

计算机1402可以是在支持用于便携式和/或移动计算系统的云计算服务的数据中心和/或计算资源（硬件和/或软件）中所采用的若干计算机之一，上述移动计算系统诸如蜂窝电话和其它支持移动的设备。例如，云计算服务包括但并不局限于作为服务的基础设施、作为服务的平台、作为服务的软件、作为服务的存储、作为服务的桌面、作为服务的数据、作为服务的安全以及作为服务的API（应用编程接口）。

系统存储器1406可以包括计算机可读存储（物理存储）介质，诸如易失性（VOL）存储器1410（随机访问存储器（RAM））和非易失性存储器（NON-VOL）1412（例如，ROM、EPROM、EEPROM等）。基本输入/输出系统（BIOS）能够存储在非易失性存储器1412中，并且包括诸如在启动期间促成计算机1402内的组件之间的数据和信号通信的基本例程。易失性存储器1410还可以包括高速RAM，诸如用于对数据进行高速缓存的静态RAM。

系统总线1408为包括但并不局限于系统存储器1406到（多个）处理单元1404的系统组件提供接口。系统总线1408可以是若干类型的总线结构中的任意一种，其能够使用各种可商业使用的总线结构的任意一种进一步互连至存储器总线（具有或没有存储器控制器）以及外部总线（例如，PCI、PCIe、AGP、LPC等）。

计算机1402进一步包括（多个）机器可读存储子系统1414以及用于将（多个）存储子系统1414对接至系统总线1408和其它所期望的计算机组件的（多个）存储接口1416。例如，（多个）存储子系统1414（物理存储媒体）可以包括一个或多个硬盘驱动器（HDD）、磁性软盘驱动器（FDD）、固态驱动器（SSD）和/或光盘存储驱动器（例如，CD-ROM驱动器、DVD驱动器）。例如，（多个）存储接口1416可以包括诸如EIDE、ATA、SATA和IEEE 1394之类的接口技术。

一个或多个程序和数据能够存储在存储器子系统1406、机器可读且可移除的存储器子系统1418（例如，闪存驱动器形式因数的技术）和/或（多个）存储子系统1414（例如，光学、磁性、固态）中，它们包括操作系统1420、一个或多个应用程序1422、其它程序模块1424和程序数据1426。

例如，操作系统1420、一个或多个应用程序1422、其它程序模块1424和/或程序数据1426可以包括图1的系统140的实体和组件，图2的系统200的实体和组件，图3的元素300的实体和组件，图4的元素400的实体和组件，图5的呈现500的实体和组件，图6A和6B的示图600的实体和组件，图7的示图700的实体和组件，图8的示图800的实体和组件，图9的UI系统900的实体和组件，图10的示图1000的实体和组件，图11的实体图形1100有关的实体和组件以及图12和13的流程图所表示的方法。

通常，程序包括执行特定任务或者实施特定抽象数据类型的例程、方法、数据结构、其它软件组件等。例如，操作系统1420、应用1422、模块1424和/或数据1426的全部或部分都能够在诸如易失性存储器1410的存储器中进行高速缓存。应当意识到的是，所公开的架构能够利用各种可商业使用的操作系统或操作系统组合（例如，作为虚拟机）来实施。

（多个）存储子系统1414和存储器子系统（1406和1418）用作用于数据、数据结构、计算机可执行指令等的易失性和非易失性存储的计算机可读媒体。这样的指令在由计算机或其它机器所执行时能够使得该计算机或其它机器执行方法的一个或多个动作。用来执行该动作的指令能够存储在一个介质上，或者能够跨多个媒体进行存储，而使得该指令共同显现在一个或多个计算机可读存储介质/媒体上，而无论所有指令是否都处于相同媒体上。

计算机可读存储媒体（介质）排除传播信号本身，能够被计算机1402所访问，并且包括可移除和/或非可移除的易失性和非易失性内部和/或外部媒体。对于计算机1402而言，各种类型的存储媒体容纳了任意适当数字格式的数据的存储。本领域那些技术人员所应当意识到的是，能够采用其它类型的计算机可读介质，诸如zip驱动器、固态驱动器、磁带、闪存卡、闪存驱动器、卡盒等，以便存储用于执行所公开架构的新颖方法（动作）的计算机可执行指令。

用户能够使用诸如键盘和鼠标之类的输入设备1428以及通过话音识别所促成的语音命令与计算机1402、程序和数据进行交互。其它外部用户输入设备1428可以包括麦克风、IR（红外）遥控器、操纵杆、游戏板、相机识别系统、输入笔、触摸屏、姿态系统（例如，眼部移动、头部移动等）等等。例如，在计算机1402是便携式计算机的情况下，用户能够使用诸如触摸板、麦克风、键盘等的机载用户设备1430与计算机1402、程序和数据进行交互。

这些和其它输入设备经由系统总线1408通过（多个）输入/输出（I/O）接口1432连接至（多个）处理单元1404，但是能够通过其它接口进行连接，诸如并行端口、IEEE 1394串行端口、游戏端口、USB端口、IR接口、短距离无线（例如，蓝牙）和其它个人域网络（PAN）技术等。（多个）I/O接口1432还促成了诸如打印机、音频设备、相机设备等输出外设1434的使用，诸如声卡和/或机载音频处理功能。

一个或多个图形接口1436（一般也称作图形处理单元（GPU））在计算机1402和（多个）外部显示器1438（例如，LCD、等离子）和/或机载显示器1040（例如，用于便携式计算机）之间提供图形和视频信号。（多个）图形接口1436也可以被制造为计算机系统主板的一部分。

计算机1402能够使用经由有线/无线通信子系统1442到一个或多个网络和/或其它计算机的逻辑连接而在联网环境（例如，基于IP）中进行操作。其它计算机可以包括工作站、服务器、路由器、个人计算机、基于微处理器的娱乐电器、对等设备或其它普通网络节点，并且典型地包括关于计算机1402所描述的许多或全部元素。该逻辑连接可以包括到局域网（LAN）、广域网（WAN）、热点等的有线/无线连接。LAN和WAN联网环境常见于办公室和公司之中并且促成了诸如企业内部网之类的企业范围的计算机网络，所有这些都可以连接至诸如互联网的全局通信网络。

当在联网环境中使用时，计算机1402经由有线/无线通信子系统1042（例如，网络接口适配器、机载收发器子系统等）连接至网络来与有线/无线网络、有线/无线打印机、有线/无线输入设备1444等进行通信。计算机1402可以包括调制解调器和其它器件以便通过网络建立通信。在联网环境中，有关计算机1402的程序和数据能够存储在远程存储器/存储设备中，就像与分布式系统相关联那样。将要意识到的是，所展示的网络连接是示例性的并且能够使用在计算机之间建立通信链路的其它器件。

计算机1402能够进行操作以使用诸如IEEE 802.xx标准族之类的无线电技术与有线/无线设备或实体进行通信，上述设备或实体诸如在与例如打印机、扫描仪、台式和/或便携式计算机、个人数字助理（PDA）、通信卫星、与无线可检测标签相关联的任意一个设备或位置（例如柜员机、报摊、休息室）以及电话的无线通信（例如，IEEE 802.11空中调制技术）中操作部署的无线设备。这至少包括用于热点的WiFi^TM（用于证明无线计算机网络设备的互操作性）、WiMAX和蓝牙^TM无线技术。因此，通信可以是像利用常规网络那样的预定义结构，或者简单地是至少两个设备之间的专设（ad hoc）通信。WiFi网络使用称作IEEE 802.11x（a、b、g等）的无线电技术来提供安全、可靠、快速的无线连接。WiFi网络能够被用来将计算机互相连接、连接至互联网以及有线网络（其使用IEEE 802.3相关技术和功能）。

以上已经描述的内容包括所公开架构的示例。当然，不可能对组件和/或方法的每种可想到的组合都进行描述，但是本领域普通技术人员将会认识到许多另外的组合和排列是可能的。因此，该新颖架构意图涵盖落入所附权利要求的精神和范围之内的所有这些改变、修改和变化。此外，就在详细描述或权利要求中所使用的术语“包含”的范围而言，这样的术语意图如术语“包括”在权利要求中用作过渡词时所解读的那样类似于“包括”的方式而是包含性的。

Claims (10)

1.一种搜索系统，包括：

用户接口，其呈现结构数据，该结构数据包括根据实体和相对应的实体属性所定义，并且在支持手势的搜索环境中针对其期望用户反馈的数据项目；

与属性相关联的交互式元素，该交互式元素使得能够与该属性的属性数据进行用户交互从而关于该属性数据的正确性提供反馈；

微处理器，其执行与该用户接口或交互式元素的至少一个相关联的计算机可执行指令；和

众包组件，其能够分析众包数据以得出该属性一个或多个最为普遍的众包数值，其中该用户接口呈现该属性的该一个或多个最为普遍的众包数值。

2.根据权利要求1所述的系统，其中该用户交互包括一种或多种自然用户接口手势。

3.根据权利要求1所述的系统，其中该用户交互使得能够作为反馈的一部分而编辑属性数据，确认属性的正确性或属性的不正确性，以及实体或实体属性的相关性。

4.根据权利要求1所述的系统，其中该交互式元素包括使得能够呈现其它用户的现场和历史反馈的一种或多种状态，并且使得能够进行用户交互以改变实体或实体属性的排名。

5.根据权利要求1所述的系统，进一步包括列表反馈元素，其使得能够对结构数据的列表中的多个实体/属性项目进行操控。

6.一种由执行机器可读指令的计算机系统所执行的方法，该方法包括动作：

关联于web和结构数据实施反馈元素形成用户接口，该反馈元素使得能够在支持手势的搜索环境中与属性数值和列表项目进行交互而作为有关属性数值和列表项目的正确性的用户反馈；并且

对所接收到的手势进行处理以如该反馈元素所使能的与该属性数值或列表项目中的至少一个进行交互，

其中项目的列表是基于众包数据和社交网络数据的。

7.根据权利要求6所述的方法，进一步包括访问与其它用户所输入的属性数值相关的数据源并且作为该列表项目的一部分呈现其它用户所输入的属性数值。

8.根据权利要求6所述的方法，进一步包括提供反馈元素的列表反馈元素，其使得能够使用相对应的手势在有序列表上进行有关条目添加、相关性和重复条目去除的反馈，并且将事实反馈元素实施为使能有关数值操作的不同视觉状态的反馈元素之一。

9.根据权利要求6所述的方法，进一步包括，用与属性类型、属性的原始数值、状态和建议数值相关的事实反馈元素定义特性并且针对与属性类型、属性的原始数值、状态和建议数值相关的事实反馈元素定义手势，以及用与列表项目的数值、列表项目的原始位置和列表项目的建议位置相关的结果列表反馈元素定义特性并且针对列表项目的数值、列表项目的原始位置和列表项目的建议位置相关的结果列表反馈元素定义手势。

10.一种包括计算机可读指令的计算机可读介质，当被处理器所执行时，该计算机可读指令使得该处理器实施动作：

关联于web和结构数据实施事实反馈元素而形成用户接口，该事实反馈元素使得能够在支持手势的搜索环境中与项目的属性数值进行交互；

关联于web和结构数据实施列表反馈元素而形成用户接口，该列表反馈元素使得能够在支持手势的搜索环境中对项目的列表进行操控；并且

接收使得能够与属性数值和项目列表进行交互以关于该属性数值和项目列表提供相关性和正确性反馈的手势，

其中项目的列表是基于众包数据和社交网络数据的。