CN108027708A - 促成针对图形元素的属性值的选择 - Google Patents

促成针对图形元素的属性值的选择 Download PDF

Info

Publication number
CN108027708A
CN108027708A CN201680054896.9A CN201680054896A CN108027708A CN 108027708 A CN108027708 A CN 108027708A CN 201680054896 A CN201680054896 A CN 201680054896A CN 108027708 A CN108027708 A CN 108027708A
Authority
CN
China
Prior art keywords
user
skin
colour
graphic element
emoticon
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680054896.9A
Other languages
English (en)
Other versions
CN108027708B (zh
Inventor
J·B·托本斯三世
G·G·阿维利亚
A·S·格拉斯
C·J·洛曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN108027708A publication Critical patent/CN108027708A/zh
Application granted granted Critical
Publication of CN108027708B publication Critical patent/CN108027708B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本文中描述了一种用于促成用户与图形元素(诸如表情符号字符)的交互的计算机实现的技术。该技术需要：在用户界面机制的显示表面上呈现图形元素集合；在显示表面上呈现提供多个属性值选项(诸如肤色选项)的选择器机制；接收用户对属性值选项之一的选择，以提供所选择的属性值；基于所选择的属性值来全局修改该集合中的图形元素的至少一个子集，以及显示那些经修改的图形元素。在一种办法中，该技术以能够沿着至少第一移动轴进行平移的阵列来呈现图形元素集合。当用户沿着第二移动轴平移阵列时该技术揭示选择器机制。

Description

促成针对图形元素的属性值的选择
背景
计算设备的用户通常向消息添加表情符号(emoji)字符。表情符号字符是表示概念的图形元素。例如，许多表情符号字符表示人类和其他动物。更具体而言，许多表情符号字符表示不同的人类表情和活动。
表情符号字符通常使用突出的中性肤色，诸如黄色。最近，计算产业已提供允许用户改变个体表情符号字符的肤色的机制。例如，具有橄榄色面色的用户可能希望改变个体表情符号字符，以使其类似地具有橄榄色肤色。然而，如今在使用的用于改变肤色的机制可能难以发现，并且一旦被发现，使用起来也很麻烦。
概述
本文中描述了一种用于促成用户与图形元素(诸如表情符号字符)的交互的计算机实现的技术。在一种操作方式中，该技术需要：在用户界面机制的显示表面上呈现图形元素的集合；在显示表面上呈现提供多个属性值选项(诸如肤色选项)的选择器机制；接收用户对属性值选项之一的选择，以提供所选择的属性值；基于所选择的属性值来全局修改图形元素的至少一个子集，以及显示那些经修改的图形元素。
在一种办法中，该技术以能够沿着至少第一移动轴进行平移的阵列来呈现图形元素的集合。当用户沿着第二移动轴平移阵列时该技术揭示选择器机制。借助于该操作，该技术确保了用户可高效地访问选择器机制而不管用户沿第一移动轴的位置。该技术进一步提供了一种高效的机制，通过该机制用户可改变多个图形元素的属性值，而不是例如要求用户个体地配置每个图形元素。
以上技术可体现在各种类型的系统、设备、组件、方法、计算机可读存储介质、数据结构、图形用户界面呈现、制品等中。
提供本概述以便以简化的形式介绍一些概念；这些概念将在以下的详细描述中作进一步描述。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。
附图简述
图1示出了具有允许用户与表情符号字符集合交互的表情符号交互组件的计算设备。
图2示出了图1中所介绍的表情符号交互组件的一个实现。
图3示出了作为图1和图2的表情符号交互组件的一部分的全局绘画组件的一个实现。
图4示出了如由图1和2的表情符号交互组件提供的表情符号字符集合和肤色选择器机制(STSM)之间的空间关系。
图5示出了表情符号字符集合和STSM之间的空间关系的另一可选特征。
图6-11示出了可由图1的计算设备提供的用户界面呈现的不同实例化。
图12是图4的一般化对应物，其示出了图形元素集合和选择器机制之间的空间关系。
图13是图2的一般化对应物，其示出了图形元素交互组件。
图14示出了表示图13的图形元素交互组件的一种操作方式的过程。
图15示出了表示图2的表情符号交互组件的一种操作方式的过程。
图16示出了表示生成和呈现所预测的表情符号字符的一种方式的过程。
图17示出了可被用来实现前面的附图中所示出的诸特征的任何方面的说明性计算功能。
贯穿本公开和各附图，相同的附图标记被用来指代相同的组件和特征。100系列附图标记指代最初在图1中找到的特征，200系列附图标记指代最初在图2中找到的特征，300系列附图标记指代最初在图3中找到的特征，依此类推。
详细描述
本公开是按如下方式来组织的。章节A描述了一种用于促成用户与图形元素的交互的计算机实现的系统。章节B阐述了解释章节A的系统的操作的说明性方法。并且，章节C描述了可被用来实现章节A和B中所描述的诸特征的任何方面的说明性计算功能。
作为初步事宜，一些附图在也被称为功能、模块、特征、元件等的一个或多个结构组件的上下文中描述了诸概念。在一个实现中，附图中所示的各种组件可通过运行在计算机装备上的软件、或硬件(例如，芯片实现的逻辑功能)等或其任何组合来实现。在一种情形中，附图中所例示的将各种组件分离成有区别的单元可反映对应的有区别的物理及有形组件在实际实现中的使用。替代地或附加地，附图中所例示的任何单个组件均可由多个实际物理组件来实现。替代地或附加地，对附图中任何两个或更多个分开的组件的描绘可反映单个实际物理组件所执行的不同功能。章节C提供了关于附图中所示的功能的一个说明性物理实现的附加细节。
其他附图以流程图形式描述了概念。以此形式，某些操作被描述为构成按某一顺序被执行的有区别的框。这样的实现是说明性的而非限制性的。本文所描述的某些框可被分组在一起并在单个操作中被执行，某些框可被分解成多个组件框，并且某些框可按与本文所例示的不同的顺序来被执行(包括以并行方式执行这些框)。在一个实现中，流程图中所示的各个框可由运行在计算机装备上的软件或者硬件(例如，芯片实现的逻辑功能)等或其任何组合来实现。
至于术语，短语“被配置成”涵盖了用于执行所标识的操作的各种物理及有形机制。机制可被配置成使用例如运行在计算机装备上的软件、硬件(例如，芯片实现的逻辑功能)等或其任何组合来执行操作。
术语“逻辑”涵盖用于执行任务的各种物理及有形机制。例如，流程图中所例示的每个操作均对应于用于执行该操作的逻辑组件。操作可使用例如运行在计算机装备上的软件、硬件(例如，芯片实现的逻辑功能)等或其任何组合来被执行。在由计算装备实现时，逻辑组件表示作为计算系统的物理部分、而不管如何实现的电子组件。
本文所描述的任何存储资源或存储资源的任何组合都可被视作计算机可读介质。在许多情形中，计算机可读介质表示某种形式的物理及有形实体。术语计算机可读介质还涵盖传播的信号，例如经由物理管道和/或空气或其他无线介质传送或接收的传播的信号等。然而，特定术语“计算机可读存储介质”和“计算机可读存储介质设备”明确地排除了传播的信号本身，同时包括所有其他形式的计算机可读介质。
以下解释可将一个或多个特征标识为“任选的”。该类型的陈述不应被解读为可以被视作任选的特征的穷尽性指示；也就是说，虽然在文本中没有被明确地标识，但是其他特征也可被视作任选。此外，对单个实体的任何描述并不旨在排除对多个这样的实体的使用；类似地，对多个实体的描述不旨在排除对单个实体的使用。此外，尽管本描述可将某些特征解释为执行所标识的功能或实现所标识的机制的替代方式，但是这些特征也可以以任何组合来被组合在一起。最后，术语“示例性”或“说明性”指的是潜在的许多实现中的一个实现。
A.说明性系统
A.1.概览
图1示出了允许用户高效地修改图形元素的一个或多个属性值的计算设备102。子章节A.1和A.2解释了针对其中图形元素对应于表情符号字符的情形的计算设备102操作。子章节A.3将子章节A.1和A.2的示例一般化到其他类型的图形元素及其他使用情形场景。
如本文中所使用的术语表情符号字符指的是表示任何概念(诸如情绪、对象、活动等)的图形元素。表情符号字符具有被称为皮肤的主表面。在一些情形中，表情符号字符表示人，且皮肤表示与该人相关联的字面上的皮肤。在其他情形中，皮肤更一般地表示表情符号字符描绘的不论什么对象(包括任何种类的无生命对象或幻想图)的外表面。
表情符号字符的皮肤由肤色来表征。在许多情形中，肤色指的是表情符号字符的皮肤的颜色。在其他情形中，肤色还可由作为颜色的补充或颜色的替换的一个或多个其他属性值来表征。例如，肤色也可由与表情符号字符的皮肤相关联的透明度水平来定义。然而，为了便于解释，将在后文中假定肤色仅指代表情符号字符的皮肤的颜色。
在某些情形中，表情符号字符可具有与其相关联的可变肤色属性。取决于肤色属性被设置到的值，具有可变肤色属性的表情符号字符可按不同的肤色显示。其他表情符号字符不具有可变肤色属性，例如，因为它们具有固定的肤色属性值。
计算设备102可对应于具有任何性质的任何用户计算设备。例如，计算设备102可对应于固定工作站个人计算设备、膝上型计算设备、机顶盒设备、游戏控制台设备、平板型计算设备、智能电话或其他类型的电话设备、可穿戴计算设备，等等。在一个实现中，计算设备102实现下面将要描述的所有功能。但是在另一情形中，下面将要描述的特征中的一者或多者可以全部或部分地由远程计算系统104实现。远程计算系统104可表示一个或多个服务器计算设备，以及其他计算装备，诸如路由器、负载平衡器等。一个或多个计算机网络106可将计算设备102通信地耦合到远程计算系统104。(诸)计算机网络106可对应于广域网(例如，互联网)、局域网、一个或多个点对点通信链路，或其任何组合。
数据存储108储存表情符号字符的集合。更具体而言，数据存储108储存与相应的表情符号字符相关联的多个数据项。每个数据项包含定义表情符号字符在被显示时的视觉外观的与该表情符号字符相关联的数据。例如，数据项可提供描述表情符号字符的位图或该表情符号字符的向量表示等。如下面将要描述的，每个表情符号字符可由一个或多个编码表示，并且数据存储108还可为每个表情符号字符储存这些编码。
表情符号交互组件(EIC)110表示用于呈现表情符号字符集合和允许用户与表情符号字符交互的中央引擎。例如，EIC 110可提供允许用户选择肤色的功能(将在下面详细描述)。EIC 110将所选择的肤色储存在肤色选择存储112中。肤色至少描述了具有可变肤色属性的所有这些表情符号字符的皮肤的颜色。
用户可经由一个或多个用户界面UI机制与EIC 110交互。一种这样的机制是触敏UI机制114。触敏UI机制114包括用于提供用户界面呈现的显示表面116和用于当用户触摸或以其他方式接合触敏表面118时接收来自用户的输入的触敏表面118。在一个实现中，触敏UI机制114将显示表面116和触敏表面118组合成用户可用来与EIC 110交互的单个集成的表面。在另一情形中，触敏UI机制114可提供显示表面116和触敏表面118的物理上分开的实例化。例如，在该后一种情形中，触敏显示表面116可以由与显示表面116分开的数字化垫或类似物来实现。
在任何实现中，显示表面116可表示由电荷耦合显示设备、阴极射线管显示设备、投影机构等提供的表面。触敏表面118可表示电阻型触敏设备、电容型触敏设备、声学型触敏设备、红外型触敏设备，等等。
计算设备102还可包括其他UI机制120，诸如物理键盘设备、鼠标输入设备，一个或多个视频相机、一个或多个深度相机设备、自由空间姿势识别机制(其可依赖于视频和/或深度相机)、一个或多个话筒、语音识别机制、任何移动检测机制(例如，加速度计、陀螺仪等)，等等。
不同的应用可以在其操作过程中与EIC 110交互。例如，消息生成组件122可以在用户创建消息(诸如文本消息、电子邮件消息等)的过程中与EIC 110交互。在一种操作方式中，消息生成组件122可显示EIC-激活图标。用户可在创建消息的过程中激活EIC-激活图标。响应于用户的动作，EIC 110在显示表面116上呈现表情符号字符的集合。用户可选择一个或多个表情符号字符，其具有将这些表情符号字符添加到用户正在创建的消息的效果。在将表情符号字符添加到消息中之前，用户还可使用EIC 110按下面将要描述的方式来修改表情符号字符的肤色。
如下面更详细描述的，消息中的每个表情符号字符可如同任何其他字体字符一样由一个或多个编码来表示。因此，消息生成组件122可由此通过将与表情符号字符相关联的(诸)编码发送给接收方来将包含表情符号字符的消息传达给接收方。接收方的计算设备(未示出)可以基于与其相关联的(诸)编码和数据项(例如，位图、向量表示等)渲染消息中的表情符号字符(其中，在一个实现中，数据项可由接收方的计算设备本地地储存)。表情符号编码可被标准化，使得具有所选择的肤色的特定表情符号字符将在由(创建了该消息的用户所操作的)源计算设备和(接收到该消息的用户所操作的)目标计算设备呈现时具有相同的总体外观(包括肤色)。
预测组件124在创建消息的过程中接收包括用户迄今为止已指定了的字符和单词的消息信息。作为响应，预测组件124将消息信息映射到一个或多个所预测的短语、单词和字符，包括表情符号字符。例如，假定用户键入“我很愤怒”作为消息的初始部分。预测组件124可将该消息信息映射到表达愤怒的表情符号字符。预测组件124可接着将该表情符号字符呈现为建议以供用户考虑，从而给予用户将该表情符号字符添加到正被创建的消息的选项。在一个实现中，预测组件124显示具有可变肤色属性的任何所预测的表情符号字符，使得其采用已由用户设置、对应于被储存在肤色选择存储112中的肤色值的肤色。
计算设备102还可包括任何数量的附加功能组件126，其不与EIC 110的操作直接相关且因此将不在本文中具体描述。
前进到图2，该附图示出了图1中所介绍的表情符号交互组件(EIC)110的一个实现。EIC 110包括用于呈现表情符号字符的集合的表情符号集合呈现组件202。表情符号集合呈现组件202还例如通过响应于检测到的平移姿势而平移表情符号字符的集合来处置用户与该集合的交互。如本文中所使用的，术语“平移”涵盖其中用户可移动遍历表情符号字符的阵列的任何方式。在本文中所特有的示例中，用户通过在触敏表面118上执行平移姿势(例如，通过用一个或多个手指(或一些其他工具)触摸触敏表面118，并接着在期望的方向上跨表面118移动他或她的(诸)手指)来平移遍历表情符号字符的阵列。
EIC 110还包括选择器呈现组件204。选择器呈现组件204呈现肤色选择器机制(STSM)206。STSM 206进而对应于向用户呈现多个肤色选项的图形控制特征。用户可使STSM206从事于选择肤色选项之一，以例如通过在触敏表面118上触摸肤色选项之一来提供所选择的肤色。当用户作出这样的选择时，皮肤类型选择处理组件208将所选择的肤色储存在肤色选择存储112中。
表情符号集合呈现组件202包括全局绘画组件210。全局绘画组件210以与所选择的肤色相匹配的肤色来显示具有可变肤色属性的所有可见表情符号字符。例如，假定EIC110当前正在显示一百个表情符号字符的阵列，其中的五十个具有可变肤色属性。全局绘画组件210可改变这五十个表情符号字符中的每一个的外观，使得它们具有与所选择的肤色相匹配的肤色。
表情符号选择处理组件212响应于用户对正由表情符号集合呈现组件202呈现的表情符号字符的选择来执行处理。例如，表情符号选择处理组件212可将所选择的表情符号字符转发到消息生成组件122。消息生成组件122可接着将表情符号字符添加到正被创建的消息中。
表情符号预测组件214基于由用户经由消息生成组件122提供的消息信息来标识一个或多个所预测的表情符号字符。表情符号预测组件214可在不同的相应实现中按不同方式操作。在一个实现中，表情符号预测组件214可将消息信息中的关键字映射到与那些关键字相关联的一个或多个表情符号字符。例如，表情符号预测组件214可将用户的消息中的单词“愤怒”映射到用关键词“愤怒”标记的一个或多个表情符号字符。在另一实现中，表情符号预测组件214可使用机器学习式模型来将消息信息中的语言信息映射到一个或多个合适的表情符号字符。机器学习式模型是基于训练数据的语料库来训练的。训练数据中的每个示例都由消息、表情符号字符以及关于该表情符号字符是否与该消息相关(或不相关)的一些判断构成。
图3示出了全局绘画组件210的一个实现。在该实现中，数据存储108中所提供的每个表情符号字符由基本编码来描述，其对应于同该表情符号字符相关联的任何符号(例如，数字)的序列。此外，每个肤色与颜色编码相关联，其对应于同该颜色相关联的任何符号(例如，数字)的序列。在一些实现中，基本编码和颜色编码可被标准化以促进信息(例如，文本消息、电子邮件消息等)跨不同系统和设备的有意义的交换。在其他情形中，这些编码未被标准化，因为它们旨在用于单单一个特定的系统或设备的上下文中。
编码修改组件302从肤色选择存储112接收所选择的肤色。接着，对于数据存储108中的表情符号字符集合中具有可变肤色属性的每个表情符号字符，编码修改组件302用所选择的肤色替换该表情符号字符的当前颜色编码(如果有的话)。例如，假定在修改之前，表情符号具有基本编码B102和颜色编码C5。进一步假定所选择的肤色是颜色编码C3。编码修改组件302将为该特定的表情符号字符输出{B102,C3}。编码修改组件302可将经更新的编码储存在数据存储108中。表情符号渲染组件304接着基于每个表情符号字符的相应的基本编码和经修改的颜色编码连同数据存储108中的对应的数据项一起渲染每个表情符号字符。如上所述，表情符号字符的数据项以任何方式(例如，使用位图、向量表示等)指定其外观。
图4示出了表情符号字符的集合402与肤色选择器机制(STSM)206之间的空间关系。表情符号字符的集合402形成由两个维度定义的阵列。与第一移动轴相关联的第一维度对应于水平维度。与第二移动轴相关联的第二维度对应于垂直维度。在其他实现中，表情符号字符的集合402可具有多于两个维度，并且可容适沿多于两个移动轴对集合402的导航遍历。例如，用户可以与提供深度维度的用户界面呈现交互。用户可使用例如深度相机输入机制(诸如由华盛顿州雷蒙德市的微软公司提供的KINECT系统)来与此类用户界面呈现交互。
在图4的非限制性示例中，表情符号字符的集合402在垂直维度上是四个表情符号字符高且在水平方向上宽度为n个表情符号字符，其中n>>4。然而，更一般而言，该阵列可具有任何维度m x n。例如，在其他实现中，表情符号字符的集合402可以在垂直方向上具有大于水平方向上的宽度的长度。换言之，其他实现可将图4中所示的描绘转动90度，使得集合402的较长维度在垂直维度上延伸。
视口404定义由EIC 110在任何给定时间向用户呈现的信息的范围。如状态A所示，视口404仅示出二十个表情符号字符(或其部分)，其对应于集合402中的大得多的表情符号字符集合的小子集。而且，在状态A中，视口404不涵盖肤色选择器机制(STSM)206的任何部分。相比而言，在状态B中，视口404已经“向下移动”，使得其现在仅涵盖以上提到的二十个表情符号字符(或其部分)中的十五个表情符号字符。但在该时刻，视口404示出了STSM206。图4中所示的视口404的特定范围仅仅是说明性的。在其他实现中，与图4的示例相比，视口404可涵盖附加表情符号字符或更少的表情符号字符。
EIC 110允许用户通过平移表情符号字符的集合402来控制在视口404中呈现什么内容。例如，参考图4中所示的状态A，用户可在触敏表面118上执行向左平移姿势以在视口404的右侧示出表情符号字符。用户可执行向右平移姿势以在视口404的左侧示出表情符号字符。用户可在表情符号字符的集合402中执行向上平移姿势以示出STSM 206，由此产生与状态B相关联的条件。用户可接着执行向下平移姿势以返回到状态A.
换言之，STSM 206可被可视化为空间上位于表情符号字符集合402下方。用户可随时通过在集合402中向上平移来访问STSM 206。在另一实现中，如上所述，集合402可具有沿着垂直移动轴的“长”维度。此处，STSM 206可被定位在集合402的左侧或右侧。在该情形中，取决于STSM 206存在于集合402的哪一侧，用户可通过向右或向左平移来访问STSM 206。
根据另一特征，选择器呈现组件204被配置成呈现相同的STSM 206，而不管用户沿着水平移动轴的位置。换言之，选择器呈现组件204呈现相同的肤色选项阵列，而不管用户沿着水平移动轴所处的位置。
图5示出了相对于表情符号字符集合502布置STSM 206的另一种方式。此处，假定表情符号字符集合502包括沿着第一移动轴的跨度504，其将具有可变肤色属性的所有表情符号字符分组在一起。在该情形中，选择器呈现组件204仅在用户被定位在跨度504内时提供STSM 206。换言之，选择器呈现组件204仅在集合502的其适用的那些跨度中呈现STSM206。
假定用户被定位在跨度504之外，但仍尝试执行向上平移姿势以访问STSM 206。选择器呈现组件204可提供向用户传达STSM 206不可用的任何用户体验，诸如通过响应于用户的姿势在原位上执行小的碰撞提升(bump up)(但不示出STSM 206)，或者通过呈现音频提示等。
A.2.示例
在一个实现中，图1的计算设备102可生成图6-11中所示的用户界面呈现602。更具体而言，图6-11示出了在用户创建消息及在该过程中与表情符号字符交互时的不同相应状态中的用户界面呈现602。
首先参考图6，消息生成组件122生成消息撰写区域604。消息撰写区域604为用户提供工作空间以创建消息，诸如文本消息。在图6所示的状态下，用户已键入了文本“HelloJohn(你好，John)”606，并添加了表情符号字符608。
当EIC激活图标(未示出)已被激活时，EIC 110在视口612内的表情符号显示区域610中显示表情符号字符的集合。此处，视口612涵盖与表情符号显示区域610相同的内容。总的来说，视口612中的表情符号字符的集合表示更大的表情符号字符集合的子集。
表情符号主题区域614呈现与不同表情符号类别相关联的图标，诸如浪漫表情符号类别、基于文本的表情符号类别、人物相关的表情符号类别、聚会相关的表情符号类别、食物相关的表情符号类别、天气相关的表情符号类别，等等。替代地，用户可通过选择表情符号主题区域614的最左侧的“abc”图标来切换到键盘呈现。此处，用户已选择了与人物相关的表情符号类别有关的图标616。响应于该选择，EIC 110已在表情符号显示区域610中呈现了与人物有关的表情符号字符。EIC 110可通过将视口612移动到表情符号字符的主集合的包括人物相关的表情符号字符的子部分上来产生该结果。换言之，在一个实现中，表情符号字符的主集合已被组织成不同的主题事项类别。沿着水平移动轴的不同区域与不同的主题事项类别有关。在另一实现中，EIC 110可基于用户已选择了的类别来动态地重新安排集合中的表情符号字符的位置。
一开始，EIC 110可显示人物相关的表情符号字符，使得它们都具有中性肤色，诸如但不限于灰色肤色。因此，表情符号显示区域610中的表情符号字符中的每一个具有相同的肤色(即，灰色)。类似地，在假定用户尚未改变表情符号字符的默认肤色的情况下，用户已选择了的表情符号字符608具有灰色肤色。
假定用户现在希望选择一个或多个表情符号字符的肤色。为了执行该任务，用户可执行向上平移姿势，例如通过将手指或其他工具放置在触敏表面118上的位置618处，并接着在垂直方向拖动表情符号字符的集合。假定用户在图5所示的跨度504内，其中STSM206是可用的。
图7示出了用户的平移姿势的结果。视口612现在包括表情符号显示区域610连同肤色选择器机制(STSM)206的至少一部分。更具体而言，视口612现在示出了表情符号字符的视觉上截短了的顶部行(而表情符号字符的该顶部行之前在图6中以非截短的形式呈现)。视口612还示出了STSM 206的上半部分。
STSM 206包括表示不同肤色选项的多个图标。例如，此处，STSM 206示出了具有不同颜色的多个条。不同的颜色表示不同的肤色选项。更一般而言，STSM 206可示出任何数量的肤色选项以表示不同类型的人类肤色(和/或非人类肤色，诸如黄色或粉红色)。STSM 206还可使用不同风格的图标来表示肤色选项，诸如类似人脸的图标。在当前情形中，STSM 206以高亮形式示出图标702，其指示与该图标702相关联的肤色当前被选择。当前选择的肤色进而对应于灰色，即初始设置的默认肤色。
假定用户继续以向上的方向来移动表情符号字符的集合。例如，用户可继续以上所描述的平移姿势，例如，通过继续以向上的方向来移动现在定位在位置704处的他的手指。
图8示出了以上所描述的持续向上平移的姿势的结果。视口612现在完全省略了表情符号字符的顶部行并呈现STSM 206的完整(非截短)版本。在该时刻，假定用户试图选择与肤色图标802相关联的肤色选项No.1。用户通过触摸或以其他方式选择触敏表面118上的图标802来执行该任务。响应于该选择，EIC 110以高亮形式显示图标802。EIC 110可接着任选地关闭STSM 206，例如通过执行自动向下平移移动。EIC 110可基于用户已作出他或她的选择且因此不再需要与STSM 206交互的假设来执行该行为。但是，个体用户可配置EIC 110以禁用该行为，在这之后用户将在作出选择之际手动移除STSM 206。
在该时刻，EIC 110的全局绘画组件210以与所选择的肤色相匹配的肤色显示具有可变肤色属性的所有表情符号字符。换言之，EIC 110用所选择的肤色(假定所有这些表情符号字符都具有可变肤色属性)在表情符号显示区域610中显示所有的表情符号字符。在一个实现中，EIC 110保持所选择的肤色直到用户经由STSM 206选择另一肤色。因此，所选择的肤色可以在多个用户会话和上电/掉电事件中保持在原位。
在一个实现中，当EIC 110执行全局绘画操作时，EIC 110不改变已被选择并被添加到消息中(或已被选择并被添加到一组喜爱的表情符号字符)的表情符号字符的肤色。因此，EIC 110不改变消息撰写区域604中的表情符号字符608的灰色肤色(或者该组喜爱的表情符号字符(未示出)中的任何表情符号字符的肤色)。但在另一实现中，EIC 110还可改变在消息中出现的已被选择了的表情符号字符的肤色和/或该组喜爱的表情符号字符的肤色。
与图8所示的具体示例相比，STSM 206的其他实现可改变STSM 206的外观和/或功能。例如，STSM 206的另一实现可提供可以在一个或多个维度上平移以揭示附加选项的表面。此处，用户可以以独立于在表情符号显示区域610内所执行的平移的独立方式在STSM206内执行平移。例如，STSM 206可允许在水平方向上平移以揭示肤色选项的范围，该肤色选项范围中并非所有的肤色选项都可在任何一个时刻在视口612中可见。
前进到图9，假定用户现在以表情符号字符集合的水平方向进行平移。用户可通过将他或她的手指放置在触敏表面118上的位置902处并接着执行向左平移姿势(如此处所示)或向右平移姿势来执行该任务。然后，假定用户选择出现在视口612中的表情符号字符904，从而致使EIC 110将该表情符号字符904(及与其相关联的(诸)编码)添加到用户正在消息撰写区域604中撰写的消息。需要注意，在表情符号显示区域610中的所有表情符号字符以及在消息撰写区域604中的新选择的表情符号字符904以新选择的色调颜色(肤色No.1)来显示。
在图10中，假定用户现在通过触摸触敏表面118的位置1002处的表情符号字符集合并接着向上拖动该集合来再次执行向上平移姿势。该姿势再次揭示了STSM 206。需要注意，图10中所呈现的STSM 206具有与图8中所呈现的STSM 206相同的肤色选项。换言之，在假定STSM 206在所选择的位置处可用的情况下，EIC 110呈现相同的STSM 206，而不管用户沿着水平移动轴的位置。该特征使得STSM 206沿着其可应用的水平轴的那些跨度对用户而言是随时容易获得的。
现在假定用户再一次改变肤色，例如通过将其从肤色选项No.1改变为肤色选项No.2。作为响应，EIC 110高亮与肤色选项No.2相关联的图标804、关闭STSM 206，并且以新选择的肤色在表情符号显示区域610中显示所有的表情符号字符。
参考图11，假定用户删除消息撰写区域604中的两个表情符号(608、904)(图10中示出，但图11中未示出)，并接着键入新文本1102“I am angry(我很愤怒)”。作为响应，表情符号预测组件214将单词“愤怒”映射到与愤怒相关联的表情符号字符1104，并在建议区域1106中显示表情符号字符1104。用户可以任选地选择建议区域1106中的表情符号1104，据此消息生成组件122将其添加到消息撰写区域604。需要注意，表情符号预测组件214以用户当前已选择的肤色(肤色No.2)来呈现表情符号字符1104。
A.3.附加特征
以上所阐述的原理可扩展到其中用户希望全局地改变图形元素集合内的图形元素子集的属性值的任何上下文。例如，图12示出了任何一种或多种类型的图形元素的集合(例如，阵列)1202。图形元素1204表示集合1202中的一个图形元素。视口1206定义在任何给定时间处被致使对用户可见的信息的范围。与图4的示例类似，用户可沿着第一(例如，水平)移动轴来回平移集合1202。用户可进一步沿着第二(例如，垂直)移动轴平移集合1202以揭示选择器机制1208。选择器机制1208允许用户全局地改变图形元素的至少一个子集的一个或多个属性值。
例如，在购物相关的应用中，图形元素可表示可用于购买的产品和/或服务的缩略图描绘。用户可以与选择器机制交互以全局地改变这些产品或服务的任何属性值。例如，图形元素可表示供购买的不同型号的汽车。用户可以与选择器机制交互以将汽车的颜色全局地改变为所选择的颜色。在另一情形中，用户可以与选择器机制交互以选择供与汽车一起使用的特定类型的轮胎，等等。
图13表示图2的一般化对应物。该图示出了允许用户经由触敏用户界面机制114与任何图形元素交互的图形元素(GE)交互组件1302。如在图1和2的示例中，触敏用户界面机制114在显示表面116上呈现用户界面呈现，并且当用户触摸触敏表面118时接收来自用户的输入。
GE交互组件1302包括图形元素呈现组件1304，其被配置成在显示表面116上呈现图形元素的集合，该集合能够沿着第一移动轴被平移以揭示图形元素集合的不同部分。选择器呈现组件1306被配置成检测用户已经接合用户界面机制114的触敏表面118以沿着第二移动轴平移图形元素的集合。作为响应，选择器呈现组件1306在显示表面116上呈现选择器机制1208。选择器机制1208提供多个属性值选项。此外，如图12中所指示的，选择器机制1208表现为在空间上接近显示表面116上的图形元素的集合(例如，位于图形元素集合下方)。
属性值选择处理组件1308被配置成响应于用户经由触敏表面118与选择器机制1208的接合来接收用户对属性值选项之一的选择，以提供所选择的属性值。该属性值选择处理组件1308将所选择的属性值储存在属性值选择存储1308中。全局设置组件1312接着被配置成基于所选择的属性值来修改集合中的图形元素的至少一个子集，以及显示已在显示表面116上被修改了的图形元素。全局设置组件1312可将经修改的图形元素储存在数据存储中，其是图1所示的数据存储108的对应物。例如，全局设置组件1312可按以上关于图3所描述的方式将经修改的参考编码储存在该数据存储中。
GE选择处理组件1314处理用户对图形元素的选择。例如，在购物相关的应用中，GE选择处理组件1314可响应于用户选择对应的图形元素而将产品添加到购物车。
(图2的)EIC 110和图13的GE交互组件1302还可包括附加特征。为了便于解释，将参考EIC 110来描述这些附加特征，但是它们也可以与GE交互组件1302结合使用。
作为一个任选的附加特征，EIC 110可向用户呈现指导，以帮助用户发现位于表情符号显示区域610下方(或者在特定实现中，在其恰好被提供的任何地方)的STSM 206的存在。例如，EIC 110可呈现简短的动画小插图(vignette)(例如，3-5秒小插图)，其中表情符号显示区域610被抬高以示出底层的STSM 206的存在，并接着向下回落以隐蔽STSM 206。EIC 110可以在撰写消息的过程中在用户与EIC 110交互的前k次(例如，三次)呈现该动画小插图，在这之后假定用户将理解可以在哪里找到STSM 206。EIC 110还可给予用户经由配置界面来停用该特征的能力。在另一情形中，EIC 110可初始地呈现视口612，使得STSM 206的上部的一小部分可见。EIC 110可接着依靠用户经由向下平移姿势手动向下拉动表情符号显示区域610，以便完全隐蔽STSM 206。
作为另一任选特征，EIC 110可允许用户锁定一个或多个表情符号字符，以使得当用户作出以上所描述的全局肤色改变时，其肤色一旦被设置就不会改变。
作为另一任选特征，EIC 110可扩展STSM 206，使得其可被用来设置表情符号字符的其他属性的值，而不仅仅是肤色。例如，STSM 206可允许用户改变表情符号字符的大小、表情符号字符的透明度、动画表情符号字符的行为，等等。
作为另一任选特征，图1的系统可包括将由用户经由第一用户计算设备作出的肤色选择自动传播到同样与该用户相关联的一个或多个其他用户计算设备的功能。例如，返回到图1，假定除了用户计算设备102之外，该用户与一个或多个其他用户计算设备128的群相关联。例如，用户计算设备102可对应于智能电话，而其他计算设备128中的一者可对应于平板型计算设备。图1的系统可将由用户经由用户计算设备102作出的肤色选择传播到该其他用户计算设备128的群中的每一者。
图1的系统可按不同的方式执行以上任务。在一种情形中，该系统可以在远程计算系统104处提供全局数据存储130。全局数据存储130可为每个用户储存与表情符号字符的集合相关联的当前编码，其包括与表情符号字符相关联的基本编码和颜色编码。在一种操作方式中，当用户经由用户计算设备102改变肤色时，用户计算设备102的全局绘画组件210将所选择的肤色发送到远程计算系统104。在接收之际，远程计算系统104例如按以上参考图3所描述的方式来更新全局数据存储130中的用户的表情符号编码。或者，计算设备102可本地地生成表情符号编码的经更新的集合，并接着发送该经更新的表情符号编码以供存储在全局数据存储130中。与该用户相关联的任何其他用户计算设备可接着在其寻求呈现表情符号字符时(例如，在创建包含表情符号字符的新消息的过程中)咨询全局数据存储130中的该用户的表情符号编码。换言之，作为本地地储存这些表情符号编码的替换或补充，每个计算设备可使用全局数据存储130作为定义每个表情符号字符的组成的全局参考源。每个计算设备的本地数据存储108可继续储存与表情符号字符相关联的数据项(例如，位图、向量表示等)。
在另一实现中，计算设备102可将对等(peer-to-peer)消息发送到其他计算设备128中的每一者，其向其他计算设备警告用户经由计算设备102所指定的新选择的肤色。在接收到消息之际(例如，在消息已被发送之后首次联机上线时)，接收方计算设备可按以上关于图3所描述的方式来更新其本地数据存储108中的表情符号编码。替代地，作为在新肤色被选择时发送消息的替换，计算设备102可更新全局数据存储130中的反映所选择的肤色的条目。在渲染表情符号字符之际，与用户相关联的另一计算设备可咨询全局数据存储130中的该条目以确定当前肤色，并接着在适当的情况下更新其表情符号编码。
在对章节A的总结中，EIC 110和GE交互组件1302具有各种益处。这些益处将关于EIC 110进行总结，但是它们以相等的影响力应用于GE交互组件1302。首先，EIC 110提供了用于同时改变多个表情符号字符的肤色的高效机制，例如，取代要求用户分开地操纵每个表情符号字符以改变其肤色。换言之，EIC 110降低了用户需要执行以改变多个表情符号字符的肤色的输入动作的数量。其次，EIC 110允许用户高效地访问STSM 206，而不管用户在表情符号字符集合中的位置。也就是说，EIC 110允许用户在当前视口内向上平移以获得STSM 206，无论用户沿着水平移动轴所处的位置恰好在何处；不要求针对STSM 206的“搜索”。同时，当用户不与STSM 206交互时，STSM 206不会使视口混乱。第三，EIC 110提供了促成用户发现STSM 206的机制。
B.说明性过程
图14-16示出了以流程图形式解释章节A的图形元素(GE)交互组件1302和表情符号交互组件(EIC)110的操作的过程。由于在章节A中已经描述了GE交互组件1302和EIC 110的操作之下的原理，因此在本章节中将以概述的方式提出某些操作。如详细描述的前言部分所述，流程图被表达为以特定顺序执行的一系列操作。但是，这些操作的顺序仅仅是代表性的，并且可以以任何方式来被改变。
从图14开始，该图示出了过程1402，GE交互组件1302藉此可设置图形元素的属性值。在框1404中，GE交互组件1302在由用户界面机制114所提供的显示表面116上呈现图形元素的集合1202，该集合1202能够沿着第一移动轴被平移以揭示该图形元素的集合1202的不同部分。在框1406中，GE交互组件1302检测用户已经接合用户界面机制114的触敏表面118以沿着第二移动轴平移图形元素的集合1202。在框1408中，并且响应于框1406，GE交互组件1302在显示表面118上呈现选择器机制1208，该选择器机制1208提供多个属性值选项，并且该选择器机制1208表现为在空间上接近显示表面118上的图形元素的集合1202。在框1410中，GE交互组件1302响应于用户经由触敏表面118与选择器机制1208的接合来接收用户对属性值选项之一的选择，以提供所选择的属性值。在框1412中，GE交互组件1302基于所选择的属性值来全局地修改集合1202中的图形元素的至少一个子集。在框1414中，GE交互组件1302呈现已在显示表面116上被修改了的图形元素的子集。
图15示出了表示图14的过程1402的更详细实例化的另一过程1502。在框1504中，EIC 110在由用户界面机制114所提供的显示表面116上呈现表情符号字符的集合402，该集合402能够沿着第一移动轴被平移以揭示图形元素的集合402的不同部分。在框1506中，EIC110检测用户已经接合用户界面机制114的触敏表面118以沿着第二移动轴平移表情符号字符的集合402。在框1508中，并且响应于框1506，EIC 110在显示表面116上呈现肤色选择器机制(STSM)206，该STSM 206提供多个肤色选项，并且该STSM 206表现为在空间上接近显示表面116上的表情符号字符的集合402。在框1510中，EIC 110响应于用户经由触敏表面116与STSM 206的接合来接收用户对肤色选项之一的选择，以提供所选择的肤色。在框1512中，EIC 110通过将每个表情符号字符的可变肤色设置为所选择的肤色来全局地修改具有可变肤色属性的表情符号字符。在框1514中，EIC 110呈现已在显示表面116上被修改了的表情符号字符。
图16示出了表示呈现所预测的表情符号字符的方式的过程1602。在框1604中，(图2的)表情符号预测组件214接收用户已经由消息生成组件122提供了的消息信息。在框1606中，表情符号预测组件214确定与消息信息相关的至少一个所预测的表情符号字符。在框1608中，表情符号预测组件214在显示表面116上呈现所预测的(诸)表情符号字符，以使得所预测的(诸)表情符号字符具有所选择的肤色。
C.代表性计算功能
图17示出了可被用来实现在上述附图中阐述的机制的任何方面的计算功能1702。例如，图17中所示的计算功能1702的类型可被用来实现图1中所示的计算设备102和/或图1中所示的远程计算系统104中的任一者。在所有情形中，计算功能1702表示一个或多个物理且有形的处理机制。
计算功能1702可包括一个或多个硬件处理器1704，诸如一个或多个中央处理单元(CPU)、和/或一个或多个图形处理单元(GPU)等。计算功能1702还可包括用于储存诸如机器可读指令、设置、数据等的任何种类的信息的任何存储资源(也称为计算机可读存储介质或计算机可读存储介质设备)1706。不作为限制，例如，存储资源1706可包括任意(诸)类型的RAM、任意类型的ROM、闪存设备、硬盘、光盘等中的任何一者。更一般而言，任何存储资源都可使用用于储存信息的任何技术。此外，任何存储资源都可提供信息的易失性或非易失性保留。此外，任何存储资源都可表示计算功能1702的固定或可移除组件。当(诸)硬件处理器1704执行被储存在任何存储资源或存储资源的组合中的计算机可读指令时，计算功能1702可执行上述功能中的任何功能。计算功能1702还包括用于与诸如硬盘驱动机构、光盘驱动机构等的任何存储资源进行交互的一个或多个驱动机构1708。
计算功能1702还包括用于(经由输入设备1712)接收各种输入以及用于(经由输出设备1714)提供各种输出的输入/输出组件1710。说明性输入设备包括键盘设备、鼠标输入设备、触摸屏输入设备、数字化垫、一个或多个相机、一个或多个深度相机、自由空间姿势识别机构、一个或多个话筒、语音识别机构、任何移动检测机构(例如，加速度计、陀螺仪等)，等等。一种特定输出机制可包括呈现设备1716及相关联的图形用户界面呈现(GUI)1718。呈现设备1716可对应于物理监视器(例如，电荷耦合显示设备、阴极射线管设备、投影机构等)。其他输出设备包括打印机、模型生成机构、触觉输出机构、档案机构(用于储存输出信息)等。计算功能1702还可包括用于经由一个或多个通信管道1722与其他设备交换数据的一个或多个网络接口1720。一条或多条通信总线1724将上述组件通信地耦合在一起。
(多条)通信管道1722可以以任何方式(例如，通过局域网、广域网(例如，互联网)、点对点连接等或其任何组合)来被实现。(诸)通信管道1722可包括由任何协议或协议的组合管控的硬连线的链路、无线链路、路由器、网关功能、名称服务器等的任何组合。
替代地或附加地，前述各章节中所描述的任何功能可至少部分地由一个或多个硬件逻辑组件来执行。作为示例而非限制，计算功能1702(及其硬件处理器)可使用以下各项中的一者或多者来被实现：现场可编程门阵列(FPGA)；专用集成电路(ASIC)；应用专用标准产品(ASSP)；片上系统的系统(SOC)；复杂可编程逻辑器件(CPLD)等。在该情形中，机器可执行指令体现在硬件逻辑本身中。
下面的概述提供了本文中阐述的技术的说明性方面的非穷尽列表。
根据第一方面，本文中描述了一种用于与图形元素交互的计算设备。该计算设备包括一种用户界面机制，以用于在该用户界面机制的显示表面上呈现用户界面呈现，以及用于当用户触摸该用户界面机制的触敏表面时接收来自用户的输入。该计算设备还包括图形元素交互组件，其进而包括图形元素呈现组件、选择器呈现组件和属性值选择处理组件。图形元素呈现组件被配置成在显示表面上呈现图形元素集合，该集合能够沿着第一移动轴被平移以揭示图形元素集合的不同部分。选择器呈现组件被配置成：检测用户已接合用户界面机制的触敏表面以沿着第二移动轴平移图形元素集合；以及响应于以上所提到的检测，在显示表面上呈现选择器机制，该选择器机制提供多个属性值选项，并且该选择器机制表现为在空间上接近显示表面上的图形元素集合。属性值选择处理组件被配置成响应于用户经由触敏表面与选择器机制的接合来接收用户对属性值选项之一的选择，以提供所选择的属性值。图形元素呈现组件还包括全局设置组件，其被配置成基于所选择的属性值来修改集合中的图形元素的至少一个子集，以及在显示表面上显示已被修改了的图形元素。
根据第二方面，在一个实现中，图形元素集合对应于表情符号字符的集合。选择器机制对应于允许用户从多个肤色选项之中选择肤色以提供所选择的肤色的肤色选择器机制(STSM)。并且，全局设置组件被配置成修改具有可变肤色属性的表情符号字符的子集，使得该子集中的表情符号字符以所选择的肤色来显示。
根据第三方面，该计算设备进一步包括表情符号预测组件，其被配置成：接收用户已向消息生成组件输入的消息信息；确定与该消息信息相关的至少一个所预测的表情符号字符；以及在显示表面上呈现以上所提到的至少一个所预测的表情符号字符，使得以上所提到的至少一个所预测的表情符号字符具有所选择的肤色。
根据第四方面，第一移动轴是水平移动轴，而第二移动轴是垂直移动轴。
根据第五方面，选择器机制出现在图形元素集合下方。
根据第六方面，第一移动轴是垂直移动轴，而第二移动轴是水平移动轴。
根据第七方面，选择器机制出现在图形元素集合的左侧或右侧。
根据第八方面，选择器呈现组件被配置成当用户沿着第二移动轴平移时呈现相同的选择器机制，而不管沿第一移动轴的当前位置。
根据第九方面，选择器呈现组件被配置成仅针对图形元素集合的包括能够经由选择器机制修改的图形元素的跨度呈现选择器机制。
根据第十方面，图形元素呈现组件和选择器呈现组件被配置成在显示表面上提供动画指导呈现，其揭示选择器机制相对于图形元素集合的位置。
根据第十一方面，本文中描述了一种用于储存计算机可读指令的计算机可读存储介质。这些计算机可读指令在由一个或多个处理设备执行时执行一种方法，其包括：在用户界面机制所提供的显示表面上呈现表情符号字符的集合，该集合能够沿着第一移动轴被平移以揭示图形元素集合的不同部分；检测用户已接合用户界面机制的触敏表面以沿着第二移动轴平移表情符号字符的集合；响应于以上所提到的检测操作，在显示表面上呈现肤色选择器机制(STSM)，该STSM提供多个肤色选项，并且该STSM表现为在空间上接近显示表面上的表情符号字符的集合；响应于用户经由触敏表面与STSM的接合来接收用户对肤色选项之一的选择，以提供所选择的肤色；以及通过将每个表情符号字符的可变肤色设置为所选择的肤色来全局地修改具有可变肤色属性的表情符号字符。
根据第十二方面，本文中描述了一种由一个或多个计算设备实现的用于与图形元素交互的方法。该方法包括：在用户界面机制所提供的显示表面上呈现图形元素集合，该集合能够沿着第一移动轴被平移以揭示该图形元素集合的不同部分；检测用户已接合用户界面机制的触敏表面以沿着第二移动轴平移该图形元素集合；响应于以上所提到的检测，在显示表面上呈现选择器机制，该选择器机制提供多个属性值选项，并且该选择器机制表现为在空间上接近显示表面上的该图形元素集合；响应于用户经由触敏表面与选择器机制的接合来接收用户对属性值选项之一的选择，以提供所选择的属性值；基于所选择的属性值来全局地修改集合中的图形元素的至少一个子集；以及在显示表面上呈现已被修改了的图形元素的子集。
第十三方面对应于以上所提到的第一至第十二方面的任何组合(例如，任何排列或子集)。
第十四方面对应于与第一至第十三方面相关联的任何方法对应物、设备对应物、系统对应物、装置加功能对应物、计算机可读存储介质对应物、数据结构对应物、制品对应物、图形用户界面呈现对应物等。
最后，尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。更确切而言，上述具体特征和动作是作为实现权利要求的示例形式公开的。

Claims (15)

1.一种用于与图形元素交互的计算设备，包括：
用户界面机制，用于在所述用户界面机制的显示表面上呈现用户界面呈现，以及用于当用户触摸所述用户界面机制的触敏表面时接收来自所述用户的输入；以及
图形元素交互组件，包括：
被配置成在所述显示表面上呈现图形元素集合的图形元素呈现组件，所述集合能够沿着第一移动轴被平移以揭示所述图形元素集合的不同部分；
被配置成进行以下的选择器呈现组件：
检测所述用户已接合所述用户界面机制的所述触敏表面以沿着第二移动轴平移所述图形元素集合；以及
响应于检测到所述用户与所述触敏表面的接合，在所述显示表面上呈现选择器机制，所述选择器机制提供多个属性值选项，并且所述选择器机制表现为在空间上接近所述显示表面上的所述图形元素集合；以及
属性值选择处理组件，所述属性值选择处理组件被配置成响应于所述用户经由所述触敏表面与所述选择器机制的接合来接收所述用户对所述属性值选项之一的选择，以提供所选择的属性值，
图形元素呈现组件，所述图形元素呈现组件具有全局设置组件，所述全局设置组件被配置成基于所选择的属性值来修改所述集合中的所述图形元素的至少一个子集，以及在所述显示表面上显示已被修改了的图形元素。
2.根据权利要求1所述的计算设备，其特征在于，
其中所述图形元素集合对应于表情符号字符的集合，
其中所述选择器机制对应于允许用户从多个肤色选项之中选择肤色以提供所选择的肤色的肤色选择器机制(STSM)，以及
其中所述全局设置组件被配置成修改具有可变肤色属性的表情符号字符的子集，使得所述子集中的所述表情符号字符以所选择的肤色来显示。
3.根据权利要求2所述的计算设备，其特征在于，进一步包括被配置成进行以下的表情符号预测组件：
接收所述用户已向消息生成组件输入的消息信息；
确定与所述消息信息相关的至少一个所预测的表情符号字符；以及
在所述显示表面上呈现所述至少一个所预测的表情符号字符，使得所述至少一个所预测的表情符号字符具有所选择的肤色。
4.根据权利要求1所述的计算设备，其特征在于，所述选择器呈现组件被配置成当所述用户沿着所述第二移动轴平移时呈现相同的选择器机制，而不管沿所述第一移动轴的当前位置。
5.根据权利要求1所述的计算设备，其特征在于，所述选择器呈现组件被配置成仅针对所述图形元素集合的包括能够经由所述选择器机制修改的图形元素的跨度呈现所述选择器机制。
6.根据权利要求1所述的计算设备，其特征在于，所述图形元素呈现组件和所述选择器呈现组件被配置成在所述显示表面上提供动画指导呈现，所述动画指导呈现揭示所述选择器机制相对于所述图形元素集合的位置。
7.一种用于储存计算机可读指令的计算机可读存储介质，所述计算机可读指令在由一个或多个处理设备执行时执行一种方法，所述方法包括：
在用户界面机制所提供的显示表面上呈现表情符号字符的集合，所述集合能够沿着第一移动轴被平移以揭示所述图形元素集合的不同部分；
检测所述用户已接合所述用户界面机制的触敏表面以沿着第二移动轴平移所述表情符号字符的集合；
响应于所述检测，在所述显示表面上呈现肤色选择器机制(STSM)，所述STSM提供多个肤色选项，并且所述STSM表现为在空间上接近所述显示表面上的所述表情符号字符集合；
响应于所述用户经由所述触敏表面与所述STSM的接合来接收所述用户对所述肤色选项之一的选择，以提供所选择的肤色；以及
通过将每个表情符号字符的可变肤色设置为所选择的肤色来全局地修改具有所述可变肤色属性的表情符号字符。
8.一种由一个或多个计算设备实现的用于与图形元素交互的方法，所述方法包括：
在用户界面机制所提供的显示表面上呈现图形元素集合，所述集合能够沿着第一移动轴被平移以揭示所述图形元素集合的不同部分；
检测所述用户已接合所述用户界面机制的触敏表面以沿着第二移动轴平移所述图形元素集合；
响应于所述检测，在所述显示表面上呈现选择器机制，所述选择器机制提供多个属性值选项，并且所述选择器机制表现为在空间上接近所述显示表面上的所述图形元素集合；
响应于所述用户经由所述触敏表面与所述选择器机制的接合来接收所述用户对所述属性值选项之一的选择，以提供所选择的属性值；
基于所选择的属性值来全局地修改所述集合中的所述图形元素的至少一个子集；以及
在所述显示表面上呈现已被修改了的图形元素的所述子集。
9.根据权利要求8所述的方法，其特征在于，
其中所述图形元素集合对应于表情符号字符的集合，
其中所述选择器机制对应于允许用户从多个肤色选项之中选择肤色以提供所选择的肤色的肤色选择器机制(STSM)，以及
其中所述全局地修改包括全局地修改具有可变肤色属性的表情符号字符的子集，使得所述子集中的所述表情符号字符以所选择的肤色来显示。
10.根据权利要求9所述的方法，其特征在于，进一步包括：
接收所述用户已提供给消息生成组件的消息信息；
确定与所述消息信息相关的至少一个所预测的表情符号字符；以及
在所述显示表面上呈现所述至少一个所预测的表情符号字符，使得所述至少一个所预测的表情符号字符具有所选择的肤色。
11.根据权利要求7所述的计算机可读存储介质，其特征在于，所述STSM的所述呈现包括当所述用户沿着所述第二移动轴平移时呈现相同的STSM，而不管沿所述第一移动轴的当前位置。
12.根据权利要求7所述的计算机可读存储介质，其特征在于，所述方法进一步包括：
接收所述用户已提供给消息生成组件的消息信息；
确定与所述消息信息相关的至少一个所预测的表情符号字符；以及
向所述用户呈现所述至少一个所预测的表情符号字符，使得所述至少一个所预测的表情符号字符具有所选择的肤色。
13.根据权利要求8所述的方法，其特征在于，其中所述第一移动轴是水平移动轴，并且其中所述第二移动轴是垂直移动轴，并且其中所述选择器机制出现在所述图形控制元素集合的下方。
14.根据权利要求8所述的方法，其特征在于，进一步包括当所述用户沿着所述第二移动轴平移时呈现相同的选择器机制，而不管沿所述第一移动轴的当前位置。
15.根据权利要求8所述的方法，其特征在于，进一步包括在所述显示表面上提供动画指导呈现，所述动画指导呈现揭示所述选择器机制相对于所述图形元素集合的位置。
CN201680054896.9A 2015-09-21 2016-08-26 促成针对图形元素的属性值的选择 Active CN108027708B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562221592P 2015-09-21 2015-09-21
US62/221,592 2015-09-21
US14/884,721 2015-10-15
US14/884,721 US10203843B2 (en) 2015-09-21 2015-10-15 Facilitating selection of attribute values for graphical elements
PCT/US2016/048812 WO2017052986A1 (en) 2015-09-21 2016-08-26 Facilitating selection of attribute values for graphical elements

Publications (2)

Publication Number Publication Date
CN108027708A true CN108027708A (zh) 2018-05-11
CN108027708B CN108027708B (zh) 2021-08-24

Family

ID=58282716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680054896.9A Active CN108027708B (zh) 2015-09-21 2016-08-26 促成针对图形元素的属性值的选择

Country Status (4)

Country Link
US (1) US10203843B2 (zh)
EP (1) EP3353641A1 (zh)
CN (1) CN108027708B (zh)
WO (1) WO2017052986A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113741743A (zh) * 2021-01-04 2021-12-03 北京沃东天骏信息技术有限公司 一种显示方法及装置、设备、存储介质

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10491644B2 (en) * 2015-12-09 2019-11-26 Facebook, Inc. Systems and methods to present responses to an event in a social network
US10846475B2 (en) * 2015-12-23 2020-11-24 Beijing Xinmei Hutong Technology Co., Ltd. Emoji input method and device thereof
US10686899B2 (en) 2016-04-06 2020-06-16 Snap Inc. Messaging achievement pictograph display system
US11494547B2 (en) * 2016-04-13 2022-11-08 Microsoft Technology Licensing, Llc Inputting images to electronic devices
CN105930828B (zh) * 2016-04-15 2021-05-14 腾讯科技（深圳）有限公司 表情分类标识的控制方法及装置
CN105763431B (zh) * 2016-05-06 2019-03-26 腾讯科技（深圳）有限公司 一种信息推送方法、装置及系统
KR102338357B1 (ko) 2016-05-18 2021-12-13 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10852935B2 (en) 2016-05-18 2020-12-01 Apple Inc. Devices, methods, and graphical user interfaces for messaging
US20170344224A1 (en) * 2016-05-27 2017-11-30 Nuance Communications, Inc. Suggesting emojis to users for insertion into text-based messages
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10504260B2 (en) * 2016-08-09 2019-12-10 Pegge Vissicaro Keyboard with in-line user created emojis
US10515464B2 (en) * 2017-09-07 2019-12-24 Whatsapp Inc. Dynamic color customization of standardized (emoji) image characters
US10593087B2 (en) * 2017-10-23 2020-03-17 Paypal, Inc. System and method for generating emoji mashups with machine learning
KR20210012724A (ko) 2019-07-26 2021-02-03 삼성전자주식회사 아바타를 제공하는 전자 장치 및 그의 동작 방법
KR20220050187A (ko) * 2019-09-27 2022-04-22 애플 인크. 그래픽 객체들을 맞춤화하기 위한 사용자 인터페이스들
US11209964B1 (en) * 2020-06-05 2021-12-28 SlackTechnologies, LLC System and method for reacting to messages
US11609640B2 (en) * 2020-06-21 2023-03-21 Apple Inc. Emoji user interfaces
KR20220041624A (ko) * 2020-09-25 2022-04-01 삼성전자주식회사 전자 장치의 이모지 추천 방법 및 그 전자 장치
US11531406B2 (en) 2021-04-20 2022-12-20 Snap Inc. Personalized emoji dictionary
US11593548B2 (en) 2021-04-20 2023-02-28 Snap Inc. Client device processing received emoji-first messages
US11888797B2 (en) * 2021-04-20 2024-01-30 Snap Inc. Emoji-first messaging
US11601387B2 (en) * 2021-06-08 2023-03-07 Microsoft Technology Licensing, Llc Generating composite images by combining subsequent data
KR102652719B1 (ko) * 2021-06-25 2024-03-28 주식회사 카카오 커스텀 키워드를 이용하여 이모티콘을 표시하는 방법 및 사용자 단말
US11568131B1 (en) 2021-11-11 2023-01-31 Microsoft Technology Licensing, Llc Command based personalized composite templates
US11635871B1 (en) 2021-11-11 2023-04-25 Microsoft Technology Licensing, Llc Command based personalized composite icons
US11841898B2 (en) * 2021-12-01 2023-12-12 Whitestar Communications, Inc. Coherent pictograph organizer based on structuring pattern markers for hierarchal pictograph presentation
CN114531406A (zh) * 2021-12-30 2022-05-24 北京达佳互联信息技术有限公司 界面展示方法、装置及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102255820A (zh) * 2010-05-18 2011-11-23 腾讯科技（深圳）有限公司 即时通讯方法和装置
CN102265586A (zh) * 2008-11-19 2011-11-30 苹果公司 使用表情字符的便携式触摸屏设备、方法和图形用户界面
US20120162350A1 (en) * 2010-12-17 2012-06-28 Voxer Ip Llc Audiocons
CN102822786A (zh) * 2010-03-24 2012-12-12 微软公司 多轴导航
CN103313212A (zh) * 2012-03-16 2013-09-18 腾讯科技（深圳）有限公司 一种信息发送、接收的方法、发送终端及接收终端
US20140019885A1 (en) * 2012-07-13 2014-01-16 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN103562836A (zh) * 2011-05-23 2014-02-05 微软公司 用于输入表情符号和其他符号的设备用户界面
CN104125139A (zh) * 2013-04-28 2014-10-29 腾讯科技（深圳）有限公司 一种显示表情的方法和装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003072488A (ja) * 2001-08-31 2003-03-12 Sony Corp 車載装置、車両及び車両情報の処理方法
US20130159919A1 (en) 2011-12-19 2013-06-20 Gabriel Leydon Systems and Methods for Identifying and Suggesting Emoticons
US11269486B2 (en) * 2012-05-29 2022-03-08 Samsung Electronics Co., Ltd. Method for displaying item in terminal and terminal using the same
US8918339B2 (en) 2013-03-15 2014-12-23 Facebook, Inc. Associating an indication of user emotional reaction with content items presented by a social networking system
US20150100537A1 (en) 2013-10-03 2015-04-09 Microsoft Corporation Emoji for Text Predictions
US10013601B2 (en) 2014-02-05 2018-07-03 Facebook, Inc. Ideograms for captured expressions
US20160259502A1 (en) * 2014-09-10 2016-09-08 Katrina Parrott Diverse emojis/emoticons

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102265586A (zh) * 2008-11-19 2011-11-30 苹果公司 使用表情字符的便携式触摸屏设备、方法和图形用户界面
CN102822786A (zh) * 2010-03-24 2012-12-12 微软公司 多轴导航
CN102255820A (zh) * 2010-05-18 2011-11-23 腾讯科技（深圳）有限公司 即时通讯方法和装置
US20120162350A1 (en) * 2010-12-17 2012-06-28 Voxer Ip Llc Audiocons
CN103562836A (zh) * 2011-05-23 2014-02-05 微软公司 用于输入表情符号和其他符号的设备用户界面
CN103313212A (zh) * 2012-03-16 2013-09-18 腾讯科技（深圳）有限公司 一种信息发送、接收的方法、发送终端及接收终端
US20140019885A1 (en) * 2012-07-13 2014-01-16 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN103546611A (zh) * 2012-07-13 2014-01-29 Lg电子株式会社 移动终端及其控制方法
CN104125139A (zh) * 2013-04-28 2014-10-29 腾讯科技（深圳）有限公司 一种显示表情的方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113741743A (zh) * 2021-01-04 2021-12-03 北京沃东天骏信息技术有限公司 一种显示方法及装置、设备、存储介质

Also Published As

Publication number Publication date
US20170083174A1 (en) 2017-03-23
US10203843B2 (en) 2019-02-12
EP3353641A1 (en) 2018-08-01
WO2017052986A1 (en) 2017-03-30
CN108027708B (zh) 2021-08-24

Similar Documents

Publication Publication Date Title
CN108027708A (zh) 促成针对图形元素的属性值的选择
JP5981661B2 (ja) イメージに関連するアニメーション・シーケンス
KR102069020B1 (ko) 제3자 애플리케이션용 컨텐츠 작성기
US9965161B2 (en) Interactive browser-based semiotic communication system
CN106687889A (zh) 显示器便捷式文本输入和编辑
CN108463784A (zh) 交互式演示控制
CN105103111A (zh) 用于计算设备的用户界面
US10649618B2 (en) System and method for creating visual representation of data based on generated glyphs
CN108885729A (zh) 在协作平台中控制内容项通知的技术
US9513787B2 (en) Magnetic-like user interface for combining objects
KR20060128725A (ko) 전자기기에서의 사용자 인터페이스 제공 방법 및 그 장치
US11650717B2 (en) Using artificial intelligence to iteratively design a user interface through progressive feedback
Roßner et al. Visualization of the relevance: Using physics simulations for encoding context
Lee et al. What if we have meta GPT? From content singularity to human-metaverse interaction in AIGC era
AU2017310075A1 (en) System for composing or modifying virtual reality sequences, method of composing and system for reading said sequences
JP6796015B2 (ja) シーケンス生成装置およびその制御方法
Fernandes et al. UI Design for an iTV platform: an iterative approach
Berglund Design for extended reality (DfXR)–Exploring engineering and product design education in XR
Sedivy et al. Multimodal tool support for creative tasks in the visual arts
Fisher Strong concepts for designing non-verbal interactions in mixed reality narratives
Sun Petri net-based VR model interactive behaviour specification and control for maintaining training
Kaklanis et al. Hapgets, Towards Haptically-enhanced Widgets based on a User Interface Description Language
Reynolds An augmented Reality Editor: building data-focused tools to extend the capability, connectivity, and usability of a mobile Internet of Things browser
Beebe A Complete Bibliography of ACM Transactions on Computer-Human Interaction
He et al. Radial Cursor: an Efficient Technique to Explore Radial Hierarchy Visualizations on Touch Screens

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant