CN113874868A - 用于3d环境的文本编辑系统 - Google Patents

Abstract

本公开内容的示例描述了用于在3D环境中渲染3D文本的系统和方法。在一些方面，三维(3D)对象可以在虚拟现实、增强现实或混合现实(MR)环境中生成。二维(2D)图形用户界面(GUI)纹理可以应用于3D对象的平面。图形控制元素(例如文本框架)和相关联的内容可以被渲染在GUI纹理上。在一些方面，图形控制元素可以与使得能够在GUI纹理和/或3D对象的边界内修改图形控制元素的尺寸和/或方向的编辑控件相关联。

Description

用于3D环境的文本编辑系统

背景技术

在许多虚拟现实、增强现实和混合现实系统中，创作和使用文本是具有挑战性的。鉴于当前头戴式显示设备的分辨率，当某些字体/样式应用于文本和/或文本以某些方式旋转/定向时，在3D环境中阅读文本通常是困难的(如果不是不可能的话)。由于类似的原因，使用这些头戴式显示设备创作文本也是困难的。此类问题严重损害了这些系统的用户体验和可用性。

针对这些和其他一般考虑因素做出了本文中公开的方面。此外，尽管可能讨论了相对具体的问题，但应该理解的是：这些示例不应该局限于解决背景技术中或本公开内容中别处标识出的具体问题。

发明内容

本公开内容的示例描述了用于在3D环境中渲染2D文本的系统和方法。在一些方面，三维(3D)对象可以在虚拟现实、增强现实或混合现实(MR)环境中生成。二维(2D)图形用户界面(GUI)纹理可以应用于3D对象的平面。图形控制元素(例如文本框)和相关联的内容可以渲染在GUI纹理上。在一些方面，图形控制元素可以与使得能够在GUI纹理和/或3D对象的边界内修改图形控制元素的尺寸和/或方向的编辑控件相关联。

提供本发明内容以便以简化的形式对下面在具体实施方式中进一步描述的设计构思的选择进行介绍。本发明内容并不旨在标识要求保护的主题的关键特征或重要特征，也不旨在用于限制要求保护的主题的范围。示例的额外方面、特征和/或优点将部分地在下面的描述中阐述，并且部分地将从描述中显而易见，或者可以通过本公开内容的实施来习得。

附图说明

参考以下附图描述了非限制性和非穷举性示例。

图1示出了用于在如本文所述的3D环境中渲染2D文本的示例系统的概览。

图2示出了用于在如本文所述的3D环境中渲染2D文本的示例输入处理单元。

图3示出了用于在如本文所述的3D环境中渲染2D文本的示例方法。

图4A和图4B示出了用于如本文所述的渲染3D内容的示例3D环境。

图5A和图5B示出了用于在3D环境中操纵图形控件元素的方面的编辑控件的示例视图。

图6是示出可以用来实施本公开内容的方面的计算设备的示例物理组件的框图。

图7A和图7B是可以用来实施本公开内容的方面的移动计算设备的简化框图。

图8是可以在其中实施本公开内容的方面的分布式计算系统的简化框图。

图9示出了用于执行本公开内容的一个或多个方面的平板计算设备。

具体实施方式

下文参考附图更加全面地描述了本公开内容的各个方面，附图形成了本说明书的一部分，并且其示出了具体的示例方面。然而，本公开内容的不同方面可以用多种不同形式来实现，并且不应该被解释为对本文中阐述的方面是限制性的；而是提供这些方面以使得本公开内容将是透彻和完整的，并且将向本领域技术人员全面地传达这些方面的范围。各个方面可以被实施为方法、系统或设备。因此，各个方面可以采取硬件实现、整体软件实现或组合软件和硬件方面的实现的形式。因此，下文的具体实施方式不应被视为具有限制意义。

创作和使用3D内容，特别是2D文本，在许多3D系统中提出了各种挑战。其中一项挑战在于许多3D创作工具是特定于应用或特定于平台的。因此，当使用不同应用和平台的创作和查看工具来呈现时，使用此类工具创作的内容通常难以阅读(如果不是不能阅读的话)。例如，应用于使用一个文本编辑器创作的内容的字体或样式在其他文本编辑器中可能是不可用的。作为另一示例，应用于使用一个文本编辑器创作的内容的字体大小或缩放级别可能导致内容在不同的文本编辑器中渲染时不可读或不美观。对于许多3D系统而言的另一个挑战是在3D环境中渲染经更新内容的巨大处理成本。在这样的系统中，当3D对象的任何方面或属性被更新时，要重新渲染/重新加载整个3D对象(例如，对象几何形状、应用的纹理、应用的图形控制元素、文本/图像内容等)，如果不是整个3D环境的话。因此，在3D环境中更新多个对象会严重影响3D系统的性能。

为了解决3D系统中的此类挑战，本公开内容描述了用于在3D环境中渲染2D文本的系统和方法。在一些方面，用户可以访问虚拟现实(VR)、增强现实(AR)或混合现实(MR)系统。该系统可以包括用于向用户呈现包括二维(2D)和/或三维(3D)内容的环境的头戴式显示器(HMD)。内容可以包括例如2D和3D对象，诸如视频对象、图像对象、控件对象、音频对象等。在示例中，系统可以提供用于创作、编辑和/或消费环境中的至少文本内容的媒体实用程序。媒体实用程序可以采取跨平台方式实现，使得用户可以在第一平台或应用上创作内容，并在其他平台或应用上消费该内容。这样的实现可以使各种平台和设备的用户能够使用熟悉的特征、样式和工具来创作和消费内容。在至少一方面，媒体实用程序可以利用一个或多个内容框架来提供文本内容。内容框架可以被配置为：利用编辑控件来改变显示在内容框架中的内容的大小、方向和观看平面。作为一个示例，编辑控件可以使内容框架的2D属性(例如，宽度和高度)能够在环境内进行调整。作为另一示例，编辑控件可以使内容框架能够在3D空间中被操纵(例如，围绕环境的一个或多个轴旋转)。这样的编辑工具可以使得用户能够根据需要操纵内容框架以提高内容可读性并避免内容遮挡。

在一些方面，系统可以使用专门的渲染机制在环境中渲染内容框架(以及相应内容)。这种渲染机制包括：生成或访问环境中的3D平面。3D平面与放置在环境中的3D对象或环境本身的几何形状相关联。2D GUI纹理可以应用于3D平面。如本文中使用的，GUI纹理可以指用户界面元素可以被置于其上的2D图像。在示例中，纹理可以包括不能超过3D平面的边界的尺寸。可以在纹理上渲染图形控制元素，例如文本框架。文本框架可以包括不(并且不能被定制为)超过纹理边界的可定制尺寸。例如，当调整文本框架的尺寸时，文本框架的内容大小也相应调整，而3D平面和纹理的大小保持不变。在示例中，因为在更新纹理时只有纹理必须被重新加载(而不是重新加载整个3D对象)，因此这种专门的渲染机制降低了对于更新环境中3D对象的纹理和属性的处理要求。

因此，本公开内容提供了多个技术益处，包括但不限于：提供跨平台的媒体创作/消费实用程序，其为用户提供熟悉的特征和选项；通过提供各种编辑控件，提高在3D环境中渲染的内容的可读性；以及减少在3D环境中渲染经更新内容的时间和计算资源需求，以及其他示例。

图1示出了用于在如本文所述的3D环境中渲染2D文本的示例系统的概览。所呈现的示例系统100是相互依赖的组件的组合，其相互作用以形成用于在3D环境中渲染3D对象的一体化整体。系统的组件可以是在系统的硬件组件上实现和/或由系统的硬件组件执行的硬件组件或软件。在一些示例中，系统100可以包括硬件组件(例如，用于执行/运行操作系统(OS))，以及在硬件上运行的软件组件(例如，应用、应用编程接口(API)、模块、虚拟机、运行时库等)中的任意一项。在一个示例中，示例系统100可以提供用于软件组件运行的环境，遵守为操作设置的约束，并且利用系统100的资源或设施，其中组件可以是在一个或多个处理设备上运行的软件(例如，应用、程序、模块等)。例如，软件(例如，应用、操作指令、模块等)可以在诸如个人计算机(PC)、移动设备(例如，智能电话/电话、平板电脑、膝上型计算机、个人数字助理(PDA)等)的处理设备和/或任何其他电子计算设备上运行。作为处理设备操作环境的示例，参考图6-图9中描绘的示例操作环境。在其他示例中，本文中公开的系统的组件可以分布在多个设备上。例如，可以在客户端设备上键入输入，并且可以从网络中的其他设备(诸如一个或多个服务器设备)处理或访问信息。

作为一个示例，系统100包括计算设备102和104、3D环境服务106以及分布式网络108。本领域技术人员将理解：诸如系统100的系统的规模可以变化，并且可以包括比图1中描述的那些更多或更少的组件。在一些方面，计算设备102和104可以是多种计算设备中的任何一种，包括但不限于上述处理设备。计算设备102和104可以被配置为使用一个或多个输入选项来与3D环境服务106交互，例如头戴式显示设备或另外的3D可视化系统、键盘、指向/选择设备、麦克风、一个或多个触觉设备等。计算设备102和104还可以被配置为：实现媒体编辑/消费实用程序，例如文本编辑器。在示例中，媒体编辑/消费实用程序可以是被配置用于跨平台和/或跨应用使用的独立系统。使用媒体编辑/消费实用程序发布内容可以使得用户能够使用一系列设备和/或应用按照创作者的意图来阅读内容并与之交互。

3D环境服务106可以被配置为创建和/或呈现3D环境。在一些方面，3D环境服务106可以例如作为交互式生产力或游戏平台的一部分来提供。应当理解，虽然3D环境服务106被示为与计算设备102和104分开，但3D环境服务106(或其一个或多个组件或实例)可以由计算设备102和/或104单独或共同提供。作为特定示例，计算设备102和104可以各自提供3D环境服务106的单独实例。在这样的示例中，可以使用存储的可执行文件在计算设备102上本地访问3D环境服务106的实例；而计算设备104可以通过网络(例如分布式网络108)访问3D环境服务106的实例。

3D环境服务106可以被配置为：使内容创作者能够配置3D环境。例如，3D环境服务106可以包括创作组件。创作组件可提供对一个或多个3D模型的2D表示的显示，其可由创作者选择、定位和/或定制以创建3D环境。模型可以包括一个或多个内容点，创作者可以使用这些内容点在3D环境内定位内容。在一些示例中，创作组件可以提供要应用于3D环境或其中的模型和对象的各种主题和/或纹理。如上所述，创作组件可以另外提供媒体编辑/消费实用程序。媒体编辑/消费实用程序可以为使用媒体编辑/消费实用程序创作的内容提供编辑控件。编辑控件可以使得用户能够在3D环境内操纵创作内容的尺寸和方向。在一些方面，3D环境服务106可以另外包括渲染组件。渲染组件可以使用经改进的渲染过程来渲染使用媒体编辑/消费实用程序创作的内容。在示例中，渲染过程可以包括将2D纹理应用到3D环境的3D平面，并且在2D纹理上渲染内容。

3D环境服务106还可以被配置为：使内容消费者(例如用户)能够与创作的3D环境交互。例如，3D环境服务106可以包括查看组件。查看组件可用于查看、探索和/或与3D环境交互。在一些示例中，查看组件可以是可经由用户的网络浏览器访问的基于网络的应用。在其他示例中，查看组件可以是本地存储在用户的设备上的可执行应用。查看组件可以基于环境数据文件在一个或多个模型的各个内容点处用内容填充渲染的3D环境。环境数据文件可以包括与模型相关联的信息(例如，模型标识符、模型类型等)、定位信息(例如，坐标、锚点标识符等)、内容信息(例如，要显示的内容、对内容的引用等)以及自定义资源(例如，自定义纹理、声音等)，以及其他信息。

图2示出了用于在如本文所述的3D环境中渲染2D文本的示例输入处理系统200的概览。由输入处理系统200实现的渲染技术可以包括图1的系统中描述的渲染技术和数据。在一些示例中，输入处理系统200的一个或多个组件(或其功能)可以分布在多个设备上。在其他示例中，单个设备(至少包括处理器和/或存储器)可以包括输入处理系统200的组件。

关于图2，输入处理系统200可以包括3D环境引擎202、文本网络部件204、渲染引擎206以及编辑控件208。在一些方面，3D环境引擎202可以被配置为：提供包括各种2D/3D模型和对象的3D环境。3D环境引擎202可以使创作者(例如，内容创建者或编辑者)和用户(例如，内容消费者)能够使用各种工具和实用程序与3D环境的2D/3D模型和对象交互。与2D/3D模型和对象的交互可以涉及例如在3D环境中生成、选择、定位、定向、纹理化、着色或以其他方式编辑模型、对象和内容。应当理解，虽然文本网络部件204、编辑控件206和渲染引擎208被示为与3D环境引擎202分开，但元素204、206和208(或其功能)中的一个或多个可以并入3D环境引擎202。作为一个示例，渲染引擎208的渲染功能和文本网络部件204的方面可以并入3D环境引擎202。

文本网络部件204可以被配置为使创作者和用户能够在3D环境中编辑文本。在一些方面，文本网络部件204可以是用于在3D环境中生成、修改和查看内容的媒体编辑实用程序。文本网络部件204可以是被配置用于跨平台和/或跨应用使用的独立系统。例如，文本网络部件204可以被实现为用于多个应用和/或设备的插件或附加组件。或者，文本网络部件204可以被实现为输入处理系统200和/或3D服务(例如3D环境服务106)的专用实用程序。在示例中，文本网络部件204提供使得用户能够按照创作者的意图来阅读3D环境中的内容并与之交互的特征和选项。例如，文本网络部件204可以提供诸如水平和垂直文本对齐、自动换行、熟悉的字体和样式以及可识别的属性面板的特征。在至少一个示例中，由文本网络部件204提供的属性面板可以包括有限的可用属性集。该可用属性集可以表示在使在3D环境中显示的内容难以辨认、被遮挡或不美观的威胁最小化的同时可以被调整的那些属性。例如，可用属性集可以对3D环境中可以使用的缩放级别和/或字体大小设置限制。在一些方面，确定哪些属性在属性面板中可用可以是创作者的手动决定。在其他方面，可以使用规则集、决策逻辑或呈现算法来自动执行确定哪些属性在属性面板中可用。例如，文本网络部件204可以使用呈现算法基于对象的图像分辨率属性和检测到的文本的估计字体大小来计算3D环境中的可允许缩放。

渲染引擎206可以被配置为：渲染使用文本网络部件204生成的内容。在一些方面，使用文本网络部件204生成的内容可以被提供给渲染引擎206(或以其他方式可被渲染引擎206访问)。渲染引擎206可以实施改进的渲染技术，这些技术减少了在3D环境中更新对象的纹理和属性的处理需求。例如，为了在3D环境中渲染3D内容，渲染引擎206可以在3D环境中生成或访问3D平面。渲染引擎206可以将2D纹理应用于3D平面的至少一部分。渲染引擎206可以将图形控制元素应用于2D纹理，使得图形控制元素的尺寸不超过2D纹理的尺寸。渲染引擎206然后可以向图形控制元素渲染该内容。在示例中，渲染引擎206的改进的渲染技术规定，当2D纹理或2D纹理的内容被修改时，不需要重新加载整个3D环境或整个3D对象。相反，只重新加载应用于3D对象的2D纹理；因此，大大降低了与更新3D环境相关联的处理成本。

编辑控件208可以被配置为：操纵图形控制元素的方面。在一些方面，编辑控件208可以应用于3D环境中的一个或多个对象。编辑控件208可以使对象的尺寸和方向能够被修改。例如，可以将编辑控件208应用于图形控制元素以使得能够调整图形控制元素的宽度和高度。作为另一示例，编辑控件208可以应用于图形控制元素以使得图形控制元素能够围绕3D空间中的一个或多个轴旋转。

已经描述了可以由本文公开的方面采用的各种系统，本公开内容现在将描述可以由本公开内容的各个方面执行的一种或多种方法。在一些方面，方法300可以由诸如图1的系统100或图2的系统200之类的系统的执行环境来执行。然而，方法300不限于这些示例。在其他方面，方法300可以在提供3D环境的应用或服务上执行。在至少一个方面，方法300可由分布式网络的一个或多个组件执行(例如，计算机实现的操作)，例如网络服务/分布式网络服务(例如，云服务)。

图3示出了用于在如本文所述的3D环境中渲染3D文本的示例方法300。尽管本文中针对VR环境描述了方法300，但是应当理解，方法300的技术也可以应用于其他3D环境，例如AR和MR环境。在一些方面，3D应用/服务(例如3D环境服务106)可以提供包括各种2D和/或3D对象的3D环境。3D应用/服务可以使用渲染组件，例如渲染引擎206。渲染组件可用于渲染3D环境可用的各种2D和3D对象、模型和实用程序。在示例中，所渲染的对象中的至少一个对象可以是提供使得用户能够在3D环境中阅读3D内容并与3D内容进行交互的特征和选项的文本网络部件。

示例方法300开始于操作302，其中生成或识别3D平面以便渲染3D内容。在一些方面，3D环境中的3D平面可由渲染组件生成或识别。3D平面可以与置于环境中的3D模型或对象或者环境本身的几何形状相关联。

在操作304处，可以将2D GUI纹理应用于3D平面。在一些方面，渲染组件可以将2DGUI纹理应用于3D平面的至少一部分。应用2D GUI纹理可以包括：将2D GUI纹理置于3D平面的一部分上。在示例中，可以应用2D GUI纹理使得2D GUI纹理的尺寸不超过3D平面的边界。

在操作306处，可将文本框架应用于2D GUI纹理。在一些方面，文本框架(或替代的图形控制元素)可以应用于2D GUI纹理的至少一部分。应用文本框架可以包括：将文本框架置于应用于3D平面的2D平面的一部分上。在示例中，可以应用文本框架使得文本框架的尺寸不超过2D GUI纹理的边界。然后可以使用媒体编辑实用程序(例如文本网络部件204)将内容(例如文本或图像)输入到文本框架中。

在操作308处，可以渲染文本框架。在一些方面，可以使用3D渲染组件(例如渲染引擎206)在3D环境中渲染文本框架。渲染文本框架可以包括：渲染3D平面、2D GUI纹理、文本框架和/或3D环境中输入到文本框架的内容。在示例中，一个或多个所渲染的对象，例如3D平面和/或2D GUI纹理，在3D环境中可以是透明或半透明的。在一些方面，文本框架的尺寸在2D GUI纹理的边界内可以是可调的。在这些方面，当调整文本框架的尺寸时，可以相应地调整文本框架内的内容的属性，而3D平面和2D GUI纹理的大小保持不变。例如，当文本框架的尺寸减小时，文本框架中文本的字体大小可以减小和/或可以使用自动换行功能来减少文本框架的每行的文本量。

图4A和图4B示出了用于渲染3D内容的示例3D环境400。在一些方面，3D环境400可以包括3D平面402、2D GUI纹理404以及内容框架406。3D平面402可以表示3D环境400的3D空间中的任何平面。在图4A和图4B所示的具体示例中，3D平面402沿3D环境400的x轴和y轴延伸并且包括4米乘4米的面积。2D GUI纹理404是应用于3D平面402的纹理。2D GUI纹理404被应用于3D平面402的边界内并且不能延伸超出3D平面402的边界。在图4A和图4B所示的具体示例中，2D GUI纹理404的面积是4096像素乘以4096像素。内容框架406是应用于2D GUI纹理404的文本框架。内容框架406应用于2D GUI纹理404和3D平面402的边界内，并且不能延伸超出2D GUI纹理404或3D平面402的边界。在图4A所示的具体示例中，内容框架406的面积是2048像素乘以512像素。在一些方面，可以在不修改2D GUI纹理404和3D平面402的面积大小的情况下修改内容框架406的面积。例如，如图4B所示，内容框架406的面积增加到3072乘以512像素，而2D GUI纹理404的面积保持4096乘以4096像素，3D平面402的面积保持4米乘以4米。

图5A和图5B示出了用于操纵图形控件元素的方面的编辑控件的示例视图500和510。在一些方面，一个或多个编辑控件可以应用于本文讨论的3D环境中的对象。编辑控件可以使访问3D环境的创作者和/或用户能够修改对象的各种属性。在图5A所示的具体示例中，视图500包括文本框架502和编辑控件504和506。编辑控件504和506可以分别调整文本框架502在2D空间中的宽度和高度。在示例中，修改文本框架502的尺寸不会修改3D空间中的文本框架502的尺寸。在图5B所示的具体示例中，视图510包括文本框架502和编辑控件512和514。编辑控件512和514可以分别调整文本框架502围绕x轴和y轴的旋转。应当理解，文本框架502可以包括比描绘的更多或更少的编辑控件，并且编辑控件可以控制围绕与上述那些相比更多、更少或另外的旋转轴的旋转。

图6-图9和相关联的描述提供了可以在其中实施本公开内容的方面的各种操作环境的讨论。然而，所描绘的并且针对图6-图9讨论的设备和系统是出于示例和说明的目的，并不限制可用于实施本文中描述的本公开内容的方面的广大计算设备配置。

图6是示出可以用来实施本公开内容的方面的计算设备600的物理组件(例如，硬件)的框图。下述计算设备组件可适用于上述计算设备，包括计算设备102和104以及3D环境服务106。在基本配置中，计算设备600可以包括至少一个处理单元602和系统存储器604。根据计算设备的配置和类型，系统存储器604可以包括但不限于此：易失性存储单元(例如，随机存取存储器)、非易失性存储单元(例如，只读存储器)、闪存器或这样的存储器的任何组合。

系统存储器604可以包括操作系统605以及适合于运行软件应用620的一个或多个程序模块606，例如本文描述的系统所支持的一个或多个组件。作为示例，系统存储器604可以是3D环境应用624和文本网络部件626。例如，操作系统605可以适于控制计算设备600的操作。

另外，本公开内容的实施例可以结合图形库、其他操作系统或任何其他应用程序来实施，并且不局限于任何特定的应用或系统。这种基本配置在图6中由虚线608之内的那些组件示出。计算设备600可以具有额外的特征或功能。例如，计算设备600还可以包括额外的数据存储设备(可移除和/或不可移除的)，例如，如磁盘、光盘或磁带。这样的额外的存储单元在图6中由可移除存储设备609和不可移除存储设备610示出。

如上所述，多个程序模块和数据文件可以存储在系统存储器604中。当在处理单元602上执行时，程序模块606(例如，应用620)可以执行包括但不限于如本文所述方面的过程。可以根据本公开内容的方面使用的其他程序模块可以包括：电子邮件和联系人应用、文字处理应用、电子表格应用、数据库应用、幻灯片演示应用、绘图或计算机辅助应用程序等。

另外，本公开内容的实施例可以在包括下列各项的电路中实施：分立电子元件、包含逻辑门的封装或集成的电子芯片、使用微处理器的电路，或者在包含电子元件或微处理器的单个芯片上。例如，本公开内容的实施例可以经由片上系统(SoC)实施，在片上系统中，图6所示的组件中的每个或许多组件可以集成到单个集成电路上。这样的SOC设备可以包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元和各种应用功能，所有这些可以集成(或“烧制”)到芯片基板上作为单个集成电路。当经由SOC操作时，本文中针对客户端切换协议的能力描述的功能可以经由与单个集成电路(芯片)上的计算设备600的其他组件集成在一起的应用特定逻辑单元来进行操作。还可以使用能够执行逻辑运算(诸如，例如，AND、OR和NOT)的其他技术来实施本公开内容的实施例，这些技术包括但不限于：机械、光学、流体和量子技术。此外，可以在通用计算机或在任何其他电路或系统中实施本公开内容的实施例。

计算设备600还可以具有一个或多个输入设备612，如键盘、鼠标、笔、声音或语音输入设备、触摸或轻扫输入设备等。还可以包括诸如显示器、扬声器、打印机等的输出设备614。前述设备是示例，并且可以使用其他设备。计算设备600可以包括允许与其他计算设备650的通信的一个或多个通信连接616。合适的通信连接616的示例包括但不限于：射频(RF)发射机、接收机、和/或收发机电路、通用串行总线(USB)、并行和/或串行端口。

本文中所使用的术语计算机可读介质可以包括计算机存储介质。计算机存储介质可以包括用于存储诸如计算机可读指令、数据结构或程序模块的信息的、以任何方法或技术实现的易失性和非易失性、可移除和不可移除介质。系统存储器604、可移除存储设备609以及不可移除存储设备610都是计算机存储介质示例(例如，存储器存储单元)。计算机存储介质可以包括：RAM、ROM、电可擦除只读存储器(EEPROM)、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光学存储单元、磁带盒、磁带、磁盘存储单元或其他磁存储设备、或者可用于存储信息且可由计算设备600访问的任何其他制品。任何这样的计算机存储介质可以是计算设备600的一部分。计算机存储介质不包括载波波形或其他传播或调制的数据信号。

通信介质可以体现为计算机可读指令、数据结构、程序模块或调制数据信号(如载波波形)或其他传输机制中的其他数据并且包括任何信息传递介质。术语“调制数据信号”可以描述具有一个或多个特性集合或以对信号中的信息进行编码的方式改变的信号。通过举例而非限制的方式，通信介质可以包括诸如有线网络或直接线连接的有线介质，以及诸如声音、射频(RF)、红外线和其他无线介质的无线介质。

图7A和图7B示出了可用来实施本公开内容的实施例的移动计算设备700(例如，移动电话、智能电话、可穿戴计算机(如智能手表)、平板计算机、膝上型计算机等)。在一些方面中，客户端可以是移动计算设备。参考图7A，示出了用于实现这些方面的移动计算设备700的一个方面。在基本配置中，移动计算设备700是具有输入单元和输出单元二者的手持计算机。移动计算设备700通常包括显示器705和允许用户向移动计算设备700输入信息的一个或多个输入按钮710。移动计算设备700的显示器705也可用作输入设备(例如，触摸屏显示器)。

如果包括，那么可选的侧输入单元715允许进一步的用户输入。侧输入单元715可以是旋转开关、按钮、或任何其他类型的手动输入单元。在替换方面中，移动计算设备700可以并入更多或更少的输入单元。例如，在一些实施例中，显示器705可以不是触摸屏。

在又一个替换实施例中，移动计算设备700是便携式电话系统，如蜂窝电话。移动计算设备700还可以包括可选按键735。可选按键735可以是物理按键或在触摸屏显示器上生成的“软”按键。

在各个实施例中，输出单元包括：用于显示图形用户界面(GUI)的显示器705、视觉指示器720(例如，发光二极管)、和/或音频转换器725(例如，扬声器)。在一些方面中，移动计算设备700并入用于向用户提供触觉反馈的振动转换器。在又一个方面，移动计算设备700并入输入和/或输出端口，如音频输入(例如，麦克风插孔)、音频输出(例如，耳机插孔)、以及用于向外部设备发送信号或从外部设备接收信号的视频输出(例如，HDMI端口)。

图7B是示出移动计算设备的一个方面的架构的框图。也就是说，移动计算设备700可并入系统(例如，架构)702来实现一些方面。在一个实施例中，系统702被实现为能够运行一个或多个应用(例如，浏览器、电子邮件、日历、联系人管理器、消息传送客户端、游戏和媒体客户端/播放器)的“智能电话”。在一些方面中，系统702被集成为计算设备(如集成个人数字助理(PDA)和无线电话)。

一个或多个应用程序766可以载入存储器762中，并在操作系统764上运行或与操作系统764关联地运行。应用程序的示例包括：电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、文字处理程序、电子表格程序、互联网浏览器程序、消息传送程序等。系统702还包括存储器762内的非易失性存储区域768。非易失性存储区域768可用于存储如果系统702掉电不应该丢失的持久信息。应用程序766可使用和存储非易失性存储区域768中的信息，如由电子邮件应用使用的电子邮件或其他消息等。同步应用(未示出)也位于系统702上，并且被编程用于与驻留在主机计算机上的相应同步应用进行交互，以保持存储在非易失性存储区域768中的信息与存储在主机计算机处的相应信息同步。应该明白：其他应用可载入存储器762中并在本文中描述的移动计算设备700上运行(例如，搜索引擎、提取器模块、相关性排名模块、答案评分模块等)。

系统702具有电源770，其可实现为一个或多个电池。电源770可能还包括外部电源，如AC适配器或对电池进行补充或再充电的供电的底座。

系统702还可以包括执行发送和接收射频通信的功能的无线电接口层772。无线电接口层772经由通信载波或服务提供商来促进系统702与“外部世界”之间的无线连接。去往和来自无线电接口层772的传输在操作系统764的控制下进行。换句话说，由无线电接口层772接收的通信可经由操作系统764传播到应用程序766，反之亦然。

视觉指示器720可用于提供视觉通知，和/或音频接口774可用于经由音频转换器725产生可听见的通知。在示出的实施例中，视觉指示器720是发光二极管(LED)，而音频转换器725是扬声器。这些设备可直接耦接到电源770，以便当被激活时，它们在由通知机制指示的一段时间保持工作状态，即使处理器760和其他组件可能关闭以节省电池功率。可将LED编程为一直保持工作状态直到用户采取行动来指示设备的上电状态。音频接口774用于向用户提供可听见的信号以及从用户接收可听见的信号。例如，除了耦接到音频转换器725之外，音频接口774还可以耦接到麦克风来接收可听见的输入，例如以促进电话交谈。根据本公开内容的一些实施例，如同下文将描述的，麦克风还可以用作音频传感器来促进对通知的控制。系统702还可以包括视频接口776，其启动板上摄像头730的操作以记录静止图像、视频流等。

实现系统702的移动计算设备700可具有额外的特征或功能。例如，移动计算设备700还可以包括额外的数据存储设备(可移除和/或不可移除的)，如磁盘、光盘或磁带。这些额外的存储单元在图7B中由非易失性存储区域768示出。

由移动计算设备700生成或捕捉并经由系统702存储的数据/信息可以如上所述本地存储在移动计算设备700上，或者数据可存储在可由设备经由无线电接口层772或经由移动计算设备700与和移动计算设备700相关联的单独的计算设备(例如，分布式计算网络(如互联网)中的服务器计算机)之间的有线连接访问的任意数量的存储介质上。应该明白的是：可经由无线电接口层772或经由分布式计算网络，经由移动计算设备700来访问这样的数据/信息。类似地，这样的数据/信息可根据公知的数据/信息传输和存储手段(包括电子邮件和协作式数据/信息共享系统)容易地在计算设备之间传输来存储和使用。

图8示出了用于对在计算系统处从远程源(例如如上所述个人计算机804、平板计算设备806或移动计算设备808)接收的数据进行处理的系统的架构的一个方面。在服务器设备802处显示的内容可以存储在不同的通信信道或其他存储类型中。例如，可使用目录服务822、门户网站824、邮箱服务826、即时消息传送存储单元828或社交网站830来存储各种文档。

3D环境应用820可以由与服务器设备802通信的客户端使用，和/或3D环境数据存储单元821可以由服务器设备802使用。服务器设备802可以通过网络815向诸如个人计算机804、平板计算设备806和/或移动计算设备808(例如，智能电话)之类的客户端计算设备提供数据和提供来自这些设备的数据。通过举例的方式，上述计算机系统可以体现在个人计算机804、平板计算设备806、和/或移动计算设备808(例如，智能电话)中。除了接收可用于在图形发起系统处进行预处理或在接收计算系统处进行后处理的图形数据之外，计算设备的这些实施例中的任何一个实施例都可以从存储单元816获得内容。

图9示出了可以执行本文中公开的一个或多个方面的示例性平板计算设备900。另外，本文中描述的方面和功能可以在分布式系统(例如，基于云的计算系统)上操作，在分布式系统中，应用功能、存储器、数据存储和检索以及各种处理功能通过分布式计算网络(如互联网或内联网)可以相对于彼此远程操作。各种类型的用户接口和信息可以经由板上计算设备显示器，或经由与一个或多个计算设备相关联的远程显示单元来显示。例如，各种类型的用户接口和信息可以在各种类型的用户接口和信息投射到的墙面上显示和与这样的墙面进行交互。与可以用其来实施本发明的实施例的众多计算系统的交互包括：击键输入、触摸屏输入、语音或其他音频输入、在相关联计算设备配备有用于捕捉和解释用于控制计算设备的功能的用户手势的检测(例如，摄像头)功能的情况下的手势输入等。

例如，在上文中参考根据本公开内容的方面的方法、系统和计算机程序产品的框图和/或操作说明描述了本公开内容的方面。这些框中指出的功能/动作可以不按任何流程图中示出的顺序发生。例如，显示为相继的两个框实际上可基本并行执行，或者这些框有时可以以相反的次序执行，这取决于所涉及的功能/动作。

本申请中提供的一个或多个方面的描述和描绘不旨在以任何方式来局限或限制要求保护的公开内容的范围。认为本申请中提供的方面、示例和细节足以传递占有，并使他人能够制造和使用要求保护的公开内容的最佳模式。要求保护的公开内容不应被解释为局限于本申请中所提供的任何方面、示例或细节。不管是否以组合的方式或单独示出及描述，旨在选择性地包括或省略数个特征(结构性和方法性的)以产生具有特征的特定集合的实施例。已经提供了本申请的描述和说明，本领域技术人员可设想不脱离所要求保护的公开内容的更广泛范围的、落入本申请中体现的总的发明构思的更广泛的方面的精神内的变体、修改和替代方面。

Claims (15)

1.一种系统，包括：

一个或多个处理器；以及

存储器，耦合至所述一个或多个处理器中的至少一个处理器，所述存储器包括计算机可执行指令，当由所述至少一个处理器执行时，所述指令执行包括下列各项的方法：

在3D环境中识别3D平面；

将2D图形用户界面(GUI)纹理应用于所述3D平面的至少一部分；

将文本框架应用于所述2D GUI纹理的至少一部分，其中，当所述文本框架的尺寸被修改时，所述3D平面的尺寸和所述2D GUI纹理的尺寸保持不变；以及

在所述3D环境中渲染所述文本框架。

2.根据权利要求1所述的系统，其中，使用头戴式显示设备访问所述3D环境。

3.根据权利要求1所述的系统，其中，在所述3D环境中渲染所述文本框架包括：在所述3D环境中渲染所述3D平面和所述2D GUI纹理中的至少一项。

4.根据权利要求1所述的系统，其中，所述文本框架的所述尺寸不能超过所述2D GUI纹理的所述尺寸。

5.根据权利要求1所述的系统，所述方法还包括：

使用所述文本框架的一个或多个编辑控件在3D空间中修改所述文本框架的所述尺寸，其中，修改所述文本框架的所述尺寸不会造成所述2D GUI纹理在所述3D环境中被重新加载。

6.根据权利要求1所述的系统，所述方法还包括：

将内容应用于所述文本框架；以及

在渲染所述文本框架时渲染所述内容。

7.根据权利要求1所述的系统，所述方法还包括：

在所述3D环境中访问媒体编辑器；

使用所述媒体编辑器来更新所述文本框架的内容；以及

在所述3D环境中渲染经更新的内容，其中，渲染所述经更新的内容包括：更新所述2DGUI纹理。

8.根据权利要求7所述的系统，其中，所述媒体编辑器是所述3D环境可访问的跨平台、独立系统。

9.根据权利要求7所述的系统，其中，所述媒体编辑器与包括和所述文本框架相关的属性集合的属性面板相关联。

10.根据权利要求9所述的系统，其中，所述属性集合中的每个属性与属性值的可用范围相关联，其中，所述属性值的可用范围包括不会将所述文本框架的内容渲染得难以辨认的属性值。

11.根据权利要求10所述的系统，其中，确定所述属性值的可用范围包括：使用规则集、决策逻辑或呈现算法中的至少一项。

12.一种方法，包括：

在3D环境中识别3D平面；

将2D图形用户界面(GUI)纹理应用于所述3D平面的至少一部分；

将文本框架应用于所述2D GUI纹理的至少一部分，其中，当所述文本框架的尺寸被修改时，所述3D平面的尺寸和所述2D GUI纹理的尺寸保持不变；以及

在所述3D环境中渲染所述文本框架。

13.根据权利要求12所述的方法，还包括：

使用所述文本框架的一个或多个编辑控件在2D空间中修改所述文本框架的所述尺寸，其中，修改所述文本框架的所述尺寸不会造成所述2D GUI纹理在所述3D环境中被重新加载。

14.根据权利要求12所述的方法，还包括：

在所述3D环境中访问媒体编辑器；

使用所述媒体编辑器来更新所述文本框架的所述文本；以及

在所述3D环境中渲染经更新的文本，其中，渲染所述经更新的文本包括：在不重新加载所述3D平面的情况下更新所述2D GUI纹理。

15.一种3D环境系统，包括：

一个或多个处理器；以及

存储器，耦合至所述一个或多个处理器中的至少一个处理器，所述存储器包括计算机可执行指令，当由所述至少一个处理器执行时，所述指令执行包括下列各项的方法：

在所述3D系统的3D环境中识别3D平面；

使用渲染引擎将2D图形用户界面(GUI)纹理应用于所述3D平面的至少一部分；

使用所述渲染引擎将文本框架应用于所述2D GUI纹理的至少一部分，其中，当所述文本框架的尺寸被修改时，所述3D平面的尺寸和所述2D GUI纹理的尺寸保持不变；以及

使用所述渲染引擎在所述3D环境中渲染所述文本框架。

Images