CN110249379A - 使用虚拟或增强现实显示进行工业维护的方法和系统 - Google Patents

Abstract

本发明提供了一种提供虚拟现实或增强现实显示的方法。该方法包括利用设备的相机生成第一视频内容(例如，第一视频流)，该第一视频内容可以包括用于处理药品(例如，生物制品)的设施的组件的描绘，以及检测或选择所述组件(例如，容器，储罐和过滤器之间的管道)。该方法还包括生成第二视频内容，该第二视频内容可以包括与该组件(例如，容器，管道，储罐或过滤器)相关联的指示符，其中第一视频内容和第二视频内容提供虚拟现实或增强现实显示。

Description

使用虚拟或增强现实显示进行工业维护的方法和系统

相关申请的交叉引用

该PCT国际申请要求2017年1月24日提交的美国临时申请号62/449,803的优先权和权益，该临时申请通过引用整体明确地并入本文。

背景技术

本申请一般涉及描绘设施(例如，工业设施)的一个或多个组件的视觉显示系统，例如虚拟现实或增强现实显示系统，并且更具体地，一方面涉及用于提供在工业环境中使用的这种显示(display)的系统和方法。

工业设施，例如从事制造药品或生物制品的设施，可能包含数千件设备，如管道，储罐，过滤器，阀门等。许多组件可能需要在其使用寿命期间进行检查、监控、库存分析、维护或更换，和/或可能在几乎没有或没有通知的情况下发生故障或失灵。

此类系统的维护引起了许多问题。首先，在具有足够大小和/或复杂性的设施中，即使是定位有争议的组件并确认它是正确的组件，也可能是困难的。可以向工作人员提供用于定位所述组件的地图或指令，但是解释这些材料会引入人为错误的风险。此外，待执行的程序可以包含或影响在多于一个位置中的多于一个的组件，从而增加了另一层复杂性。其次，程序本身可能涉及几个步骤，这些步骤可能由批准的流程决定，并由质量管理标准(如ISO 9001)管理。出于合规性、效率和安全性的原因，精确度很重要。因此，可以以物理检查表(physical checklist)的形式向工作人员提供执行该程序的具体详细指令。然而，这些指令可能不清楚或不直观，并且可能被误解，导致错误或安全问题。在某些情况下，在制药和/或生物技术行业中，制造空间不允许使用纸张，这在向技术人员提供有意义且准确的指令时增加了挑战。

发明内容

本公开涉及用于向用户展示视觉显示系统的方法和系统，其包括增强现实或虚拟现实显示，该视觉显示系统描绘了设施(例如，生产设施，诸如工业设施)的一个或多个组件。所述显示可以便于执行与设施中的组件相关的任务(例如维护，诊断或识别)。所述显示(display)可以是可穿戴设备(例如，头戴式耳机)的一部分。可以向佩戴这种头戴式耳机的用户提供用户视野中的一个或多个组件的信息或任务。

根据一个方面，提供了一种提供虚拟现实或增强现实显示的方法。该方法包括以下操作：利用设备的相机生成第一视频内容(例如，第一视频流)，该第一视频内容包括用于处理药品(例如生物制品)的设施的组件的描绘；检测或选择部件(例如，容器，在储罐和过滤器之间的管道)；以及生成包括与该组件(例如，容器，管道，储罐或过滤器)相关联的指示符的第二视频内容，第一视频内容和第二视频内容提供虚拟现实或增强现实显示。

根据一实施方式，显示器是增强现实显示。根据另一实施方式，显示由增强现实显示系统提供。根据又一实施方式，显示是虚拟现实显示。根据又一实施方式，显示由虚拟现实显示系统提供。根据另一实施方式，指示符选自表1。

根据另一实施方式，指示符与组件的标识(例如组件(例如泵)的类型，序列号，型号)或组件的其他标识符相关联。根据又一实施方式，该方法包括生成视频内容，例如，第二视频内容，其包括第二指示符，例如表1的指示符。根据另一实施方式，该方法包括生成视频内容，例如，第二视频内容，其包括第二、第三、第四、第五或后续指示符，例如表1中的指示符。

根据另一实施方式，指示符包括用于组件或其部分的功能、状况或状态的值。根据另一实施方式，该值包括当前值或实时值，历史值或过去值或预选值(例如，功能、状况或状态的最大值或最小值(例如，在预选的时间范围，例如自安装以来，在指定的时间段内，或者自预定的事件(例如，连接的阀的最后打开，最后的检查值)以来，发生的预选值)。根据另一实施方式，比较指示符的值与参考值或呈现指示符的值与参考值(例如，将压力与压力的预定值(例如，压力的预定允许范围)进行比较或呈现)。根据另一实施方式，该组件选自表2。

根据一实施方式，该方法还包括在显示设备上显示组件(例如，第一视频内容的全部或一部分)和指示符(例如，第二个视频内容的全部或部分)的全部或部分的描绘。根据另一实施方式，该方法还包括合成显示，该显示包括对组件和指示符的全部或部分的描绘。根据又一实施方式，该方法还包括合成包括第一视频内容的全部或部分以及第二视频内容的全部或部分的显示。根据又一实施方式，该方法还包括在显示设备上显示实时或录制的第二视频内容的全部或部分(例如，第二视频流)以及第一视频内容的全部或部分(例如，第一视频流)，其中第一视频内容的全部或部分与实时或录制的第二视频内容的全部或部分重叠。

根据一实施方式，第一视频内容包括多个组件的描绘，还包括在显示设备处接收多个组件之一的选择(例如，来自操作员)。根据另一实施方式，该方法还包括接收来自位置接收器(例如，GPS)的位置信息，以及参考位置信息识别该组件。根据又一实施方式，该方法还包括从组件上或足够靠近组件的组件标识符(例如，RFID，条形码)接收关于组件的信息，以允许识别组件。

根据一实施方式，该方法还包括确定对组件待进行的至少一个操作项(例如，维护，修理，训练，更换或调整组件或第二组件，生产任务，例如，调整过程状况)。根据又一实施方式，该方法还包括确定至少一个操作项响应于指示符或指示符的值(例如，响应于已经超过最大小时数或运行的指示符，确定该组件应该被更换，确定生产过程需要采取该操作)。根据另一实施方式，该方法包括重新检查组件，例如，在已经执行了至少一个操作项之后重复权利要求1)的一个或多个步骤。

根据另一实施方式，该方法还包括将与该组件相关的信息(例如，推荐或采取的操作，例如检查，修理或更换)输入系统。根据另一实施方式，信息被记录在记录器(record)中，例如数据库或日志中。

根据另一方面，提供了一种显示设备。该显示设备包括配置成接收第一视频内容(例如，第一视频流)的相机，该第一视频内容包括用于处理药品或生物制品的工业设施的组件的描绘；显示屏，其被配置为定位成对显示设备的用户可见；和处理器，其被配置为生成第一视频内容(例如，第一视频流)，其包括用于处理药品或生物制品的工业设施的组件的描绘，生成包括与该组件(例如，管道，储罐或过滤器)相关联的指示符的第二视频内容，以及将第一视频内容和第二视频内容显示为增强现实或虚拟现实显示。

根据一实施方式，该设备包括配置成捕获第一视频内容的相机。根据另一实施方式，处理器被配置为检测在第一视频内容中的组件。

根据一实施方式，显示设备是可穿戴设备，其被配置为定位在佩戴者的视野中。根据另一实施方式，处理器被配置为在显示屏上显示组件(例如，第一视频内容的全部或一部分)和指示符(例如，第二视频内容的全部或部分)的全部或部分的描绘。根据另一实施方式，处理器被配置为合成显示，该显示包括组件和指示符的全部或部分的描绘。根据又一实施方式，处理器被配置为合成显示，该显示包括第一视频内容的全部或部分以及第二视频内容的全部或部分的描绘。

根据另一实施方式，处理器还被配置为在显示屏上显示第二视频内容(例如，第二视频流)的全部或部分以及第一视频内容(例如，第一视频流)的全部或部分，其中第一视频内容的全部或部分与第二视频内容的全部或部分重叠。根据一实施方式，该设备包括被配置为接收用户输入的用户界面。根据另一实施方式，用户输入是用户的手势，该手势在第一视频内容中被检测到。根据一实施方式，第一视频内容包括多个组件的描绘，并且其中用户界面被配置为接收多个组件之一的用户选择。根据另一实施方式，第一视频内容包括多个组件的描绘，并且其中用户界面被配置为接收对多个组件之一的用户选择。根据另一实施方式，用户界面被配置为接收与指示符的用户交互，并且其中，处理器还被配置为响应于用户交互来修改指示符。

根据另一实施方式，该设备包括配置成获得位置信息的位置接收器(例如，GPS)，其中该处理器还被配置为参考位置信息识别该组件。根据一实施方式，该设备包括无线电接收器(例如，RFID)，其被配置为从组件上或组件附近的信号装置接收接近信号(proximity signal)，其中，处理器还被配置为参考接近信号识别组件。根据另一实施方式，该设备包括网络接口，该网络接口被配置为经由网络与至少一个计算机通信。根据又一实施方式，该设备包括存储器(memory)，该存储器被配置为存储一部分第一视频内容和指示符中的至少一个。

根据一实施方式，该设备还包括陀螺仪、加速度计和指南针中的至少一个。根据另一实施方式，该设备包括用于用户眼睛、面部或头部的保护组件。根据又一实施方式，该设备被配置成在用户佩戴用于用户眼睛、面部或头部的保护装置时适合用户。根据另一实施方式，该装置被配置成在用户佩戴独立式呼吸系统(a contained breathing system)时适合用户。

根据另一方面，提供了一种显示可视内容的方法。该方法包括以下操作：向显示设备的用户显示由第一视频内容(例如，第一视频流)和第二视频内容组成的显示，该第一视频内容包括用于处理药品或生物制品的工业设施的组件的描绘，该第二视频内容包括与该组件(例如，容器，管道，储罐或过滤器)相关联的指示符，第一视频内容和第二视频内容提供增强现实显示；以及通过显示设备的用户界面接收用户输入。

根据一实施方式，所述显示是增强现实显示。根据另一实施方式，所述显示是虚拟现实显示。根据又一实施方式，接收用户输入包括在第一视频内容中检测用户的手势。根据一实施方式，该方法还包括：响应于指示符的值(例如，指示该组件已达到运行x小时的值)，为该组件或第二组件创建另一指示符。根据另一实施方式，该方法还包括接收将该另一指示符与不同用户相关联的输入。

根据一实施方式，该方法还包括：响应于指示符或指示符的值，向实体(例如，系统操作员，或维护工程师或设施管理者)发送信号。根据另一实施方式，该方法还包括捕获待存储在存储器中的第一视频内容和/或第二视频内容中的一些或全部。

根据一实施方式，该方法还包括在第一视频内容中检测事件(流体或气体的逃逸，存在警报)，以及创建与事件相关的另一指示符。根据另一实施方式，该方法包括将关于事件的信号发送到实体(例如，系统操作员，或维护工程师或设施管理者)。根据一实施方式，该方法还包括经由设备的网络接口接收关于组件的信息。

根据另一实施方式，指示符包括关于待相对于组件执行的操作项的信息。根据另一实施方式，操作项被呈现为第二视频内容中的任务列表的一部分。根据另一实施方式，操作项与涉及该组件的维护任务或工业过程中的至少一个相关。根据又一实施方式，任务列表包括与组件相关的操作项和与另一组件相关的操作项。根据另一实施方式，用户输入指示针对操作项采取的操作。

根据又一实施方式，第二视频内容包括提供到组件的位置的方向的另一指示符。根据又一实施方式，以对应于组件的特性、指示符或指示符的值的颜色显示第二视频内容中的一些或全部。根据另一实施方式，所述特性是组件的类型、组件的标识符、由组件存储或传送的材料的标识符，或由组件存储或传送的材料的温度。

附图简要说明

下面参考附图讨论至少一实施方式的各个方面，附图不旨在按比例绘制。包括附图以提供对各个方面和实施方式的说明和进一步理解，并且附图被并入并构成本说明书的一部分，但并不旨在作为任何特定实施例的限制的定义。附图与说明书的其余部分一起用于解释所描述和要求保护的方面和实施例的原理和操作。在附图中，在各个图中示出的每个相同或几乎相同的部件由相同的数字表示。为清楚起见，并非每个组件在每幅图中都被标记。在图中：

图1是根据一个或多个实施例的用于提供诸如虚拟现实或增强现实显示的视觉显示的显示设备的框图。

图2是根据一个或多个实施例的显示设备的用户界面的表示形式；

图3是根据一个或多个实施例的显示设备的用户界面的表示形式；

图4是根据一个或多个实施例的显示设备的用户界面的表示形式；

图5是根据一个或多个实施例的显示设备的用户界面的表示形式；

图6是根据一个或多个实施例的显示设备的用户界面的表示形式；

图7是根据一个或多个实施例的显示设备的用户界面的表示形式；

图8是根据一个或多个实施例的显示设备的用户界面的表示形式；和

图9是可以在其上实现本发明的方面和实施例的计算机系统的一个实例的框图。

具体实施方式

本公开的各方面涉及用于向用户呈现视觉显示系统的方法和系统，该视觉显示系统描绘了设施的一个或多个组件(例如，增强现实或虚拟现实显示)以帮助用户执行诸如与设施中的组件相关的检查、监控、库存分析、维护、诊断或识别之类的任务。在一实施方式中，该设施是生产设施，例如工业设施。所述显示可以是可穿戴设备(例如，头戴式耳机)的一部分。佩戴这种头戴式耳机的用户可以环视工业设施并且获得用户的视野中的一个或多个组件的信息或任务，该视野可以是可变的。

在一个方面或运行模式中，所述显示可以是虚拟现实显示，其中生成三维可视内容并向用户显示，其中所述内容的视图根据设备的位置而改变。在另一方面或运行模式中，所述显示可以是增强现实显示，其中由设备捕获的视频内容被显示并覆盖有特定于上下文的所生成的视觉内容。用于创建这种增强或虚拟现实显示的系统和方法在2000年3月21日授权的名称为“METHOD AND SYSTEM FOR VIRTUAL CINEMATRAPATION”的美国专利No.6,040,841和在2016年3月15日授权的名称为“WEARABLE DEVICE WITH INPUT”的美国专利No.9,285,592中进行了讨论，其中的每个内容出于所有目的在此整体并入本文。

在一个实例中，可以向佩戴该设备的维护人员呈现该组件的可视化表示形式，详细描述组件历史的文档，和/或用于完成该组件上的维护过程的任务的视觉列表。当用户完成所述列表上的任务时，可以更新列表(自动地或通过来自用户的交互，例如手势)以移除完成的任务。

在另一个实例中，可以向查看工业设施中的一个或多个组件的工作人员呈现关于组件的信息，包括识别信息或与组件的年龄，安装日期，制造商，更换单元的可获得性，预期使用年限，组件的功能、状况或状态相关联的信息。这些信息可包括在组件中材料的温度，通过组件的流速或组件中的压力。可以提供其他信息，例如涉及组件的近期问题或事件或检查结果。这样的信息可以以文本方式呈现，例如通过在显示中的组件上覆盖文本值(例如，温度)呈现，通过可以在覆盖图上打开和显示或者可以以图形方式呈现的文件/文档的视觉表示形式呈现，例如，通过根据值对组件进行颜色着色(例如，根据其内部材料的温度以红色阴影显示该组件)呈现。

在又一个实例中，可以向查看正在经历故障或其他问题的一个或多个组件的工作人员呈现关于故障的信息，并且还可以向其呈现用于创建警报状况、通知其他人或者以其他方式解决故障的界面。

在这些实例中的任何一个中，可以向用户呈现记录与组件的交互的程序，状况，故障或其他方面的机会。例如，可以用户在观看组件的同时向用户提供记录视频和/或捕获照片的机会。该内容可以用于记录程序的完成，或者可以存储或提供给其他人以用于记录或诊断组件的一个或多个问题。

图1中示出了根据一些实施方式的用于在工业设施中向用户呈现增强现实或虚拟现实显示信息的显示设备100的框图。该显示设备包括至少一个显示屏110，其被配置为向显示设备100的用户提供虚拟现实或增强现实显示。该显示可以包括工业设施中的一个或多个组件的视频或照片，或者可以包括一个或多个组件的计算机图形(例如，三维表示形式)。

可以提供至少一个相机130来捕获视频流或照片以用于生成虚拟现实或增强现实显示。例如，可以捕获包括一个或多个组件的工业设施的视频以显示为增强现实显示的一部分。在一些实施方式中，可以提供两个显示屏110和两个相机130。每个显示屏110可以布置在用户的每只眼睛上。每个相机130可以从用户的每只眼睛的相对视点捕获视频流或照相内容，并且所述内容可以显示在相应的显示屏110上以近似三维显示。至少一个相机130可以被配置为以各种分辨率或以不同的帧速率捕获图像。许多具有小形状因子的摄像机(例如，在移动电话或网络摄像机中使用的那些)可以合并到设备100的实施方式中。

提供处理器120用于从至少一个相机130捕获视频流或者照片并使得至少一个显示屏110向用户显示视频内容。处理器120包含被配置为执行计算的算术逻辑单元(ALU)(未示出)，用于临时存储数据和指令的多个寄存器(未示出)，以及用于控制设备100的运行的控制单元(未示出)。可以使用各种处理器中的任何一种，包括来自Digital Equipment，MIPS，IBM，Motorola，NEC，Intel，Cyrix，AMD，Nexgen等的处理器。尽管为了便于说明而以一个处理器120示出，但是设备100可替代地包括多个处理单元。

处理器120可以被配置为使用计算机视觉、深度学习或其他技术来检测视频流的图像中的一个或多个组件。处理器120可以参考GPS数据，RFID数据或其他数据来识别设备100附近和/或至少一个相机130的视野中的组件。在一些实施方式中，处理器120还可以识别视频流中的一个或多个条形码和/或QR码，并使用条形码中编码的标识符来识别相关组件。

提供存储器140以存储来自至少一个相机130的捕获内容的一些或全部，以及存储关于工业设施或其中的一个或多个组件的信息。存储器140可以包括主存储器和辅助存储装置。主存储器可以包括高速随机存取存储器(RAM)和只读存储器(ROM)。主存储器还可以包括任何附加的或替代的高速存储设备或存储器电路。辅助存储器适用于长期存储，例如ROM，光盘或磁盘，有机存储器或任何其他易失性或非易失性大容量存储系统。

从至少一个相机130捕获的视频流可以全部或部分地存储在存储器中。例如，用户可以通过选择性地记录(例如通过使用开始/停止记录按钮)来将感兴趣(或预期感兴趣)的视频流的部分存储到存储器140。在其他实施方式中，视频流的近期部分(例如，最后10秒，30秒，60秒等)可以滚动存储在存储器140中，例如使用循环缓冲器。

提供网络接口150以允许设备100与其他系统(包括服务器，其他设备等)之间的通信。在一些实施方式中，网络接口150可以允许处理器120与工业设施的控制系统通信。处理器120可以具有与控制系统交互的某些权限，例如通过使控制系统启用，禁用或以其他方式修改控制系统的组件的功能来实现。

网络接口150可以被配置为使用诸如无线电技术(包括蓝牙低功耗)之类的一种或多种协议，IEEE802.11(包括任何IEEE802.11修订版)中描述的通信协议，蜂窝技术(如GSM，CDMA，UMTS，EVDO，WiMAX或LTE)或技术以及其它可能技术等来创建无线通信。在其他实施方式中，可以提供有线连接。

在一些实施方式中，视频流可以经由网络接口150连续地(例如，实时地或接近实时地)发送到服务器或其他系统，允许其他人实时或者以后看到用户正在看什么或正在做什么。将视频流传输到存储系统可以允许对其进行检查，注释和保存作为记录，以供后期使用，例如在审计期间使用，或作为合规或维护记录的一部分。

可以提供位置传感器160(例如，GPS接收器)以允许处理器120确定显示设备100的当前位置。工业设施内的位置和/或组件的坐标可以是已知的；因此，使用GPS接收器来确定设备100的当前位置可以允许识别设备100附近的组件。还可以提供读取器170(例如，RFID读取器)以允许处理器120根据一个或多个信号检测当前位置。在一些实施方式中，可以为各个组件提供发射器(例如，RFID芯片)，其配置成在设备100附近时提供关于组件的信息。可以提供其他传感器(未示出)，包括至少一个加速度计，至少一个陀螺仪和指南针，其单独或组合输出可用于确定设备100的方向，移动和/或位置。

在一些实施方式中，处理器120被配置为检测由用户做出的并被捕获在视频流中的手势。例如，处理器120可以检测到用户的手臂和/或手中的一个或多个已经以任何数量的预定义或用户定义的手势移动，包括但不限于轻扫(swipe)，轻击，拖动，扭曲，推动，拉动，放大(例如，通过伸展开手指)，缩小(通过拉拢手指)等。当在显示或显示内容的手势区域中执行手势时可以检测到手势，这将在下面进一步描述；手势区域可以是显示或显示内容的子区域，或者可以基本上覆盖所有显示或显示内容。

响应于这样的手势，设备100可以相对于显示屏110上的一个或多个元素采取相应的操作。在其他实施方式中，用户可以通过点击设备100上的物理或虚拟按钮来与设备100交互。

当设备100用于工业设施时，显示屏可以显示设备100附近的组件的表示形式，以及关于这些组件的重叠信息，包括年龄，安装日期，制造商，更换单元的可获得性，预期的使用期限，组件的功能、状况或状态。在图2中示出了在设备100的显示屏110上显示的示例性显示内容200的图示。显示内容200包括组件210和220的表示形式，分别为储罐和管道。组件210、220可以显示在第一视频内容区域中，并且可以显示为视频或摄影图像(在增强现实显示的情况下)或者作为工业设施的当前区域中的组件210、220的三维表示形式。

分别对应于组件210、220的指示符212、222被重叠以提供关于每个组件210、220的信息。指示符212、222可以被显示为覆盖第一视频内容区域的第二视频内容区域。第二视频内容区域可以是部分透明的，使得第一视频内容区域是可见的，除了视觉显示元素设置在第二视频内容区域上之外，在这种情况下，这些视觉显示元素可能模糊下面的第一视频内容区域的部分。第二视频内容区域和/或在其上的视觉显示元素也可以是部分透明的，允许在第二视频内容区域后面一定程度地看到第一视频内容区域。

指示符212、222包括关于组件212、222的信息，包括标识信息，例如每个组件的名称，编号，序列号或其他指定名称。在一些实施方式中，指示符212、222可以指示组件(例如，泵)的型号(part number)或类型或组件的批号。

可以针对大多数或所有组件显示指示符212、222。例如，当设备100的用户走过工业设施并环顾四周时，显示中可见的每个组件可具有相关联的指示符。这些组件可以布置成层，使得在一些情况下，它们可以通过类似于212或222的可见层定义覆盖来打开和关闭。在其他实施方式中，仅某些组件可以具有指示符。可以定义哪些组件应该用指示符显示的标准，并且标准可以在用户使用设备100之前或期间由用户预定义或设置。例如，指示符可以仅针对某些类型的组件(例如，管道)显示，仅针对特定工业过程中涉及的组件显示，或仅针对当前正在执行维护的组件显示。

在一些实施方式中，可以向用户提供与指示符212、222交互的机会，以便改变指示符212、222，或者获得关于对应组件210、220的不同或附加信息。可以通过用户的手势进行交互。例如，附加显示空间(诸如指示符212、222的展开视图)可以显示关于组件210或其中的材料的当前或历史信息，诸如组件或者其一部分的值、状况或状态。该值可以包括该组件的可接受值范围的最小值和/或最大值。例如，显示的信息可包括充当正常运行范围的最小和最大温度或压力值；当经历超出范围的值时，可发出警报或采取其他操作。

还可以显示安装、运行和维护信息，例如安装日期，金融资产编号，组件上次检查或维护的日期，组件下次检查或维护的日期，或者组件在其使用期限内或自事件(例如最近的维护事件)发生后的运行小时数。还可以显示有关历史维护或难题/问题的信息。例如，可以向用户提供查看组件的维护记录的机会。

信息也可以从第三方来源获得。例如，组件(或更换组件本身)的更换部件的可获得性可以从第三方(例如供应商)获得并显示。例如，可以通知用户预期更换部件何时有库存，或者供应商当前库存的更换部件的数量。

图3中示出了显示内容200的另一视图300。在该视图中，用户已经与指示符212交互，例如通过执行“点击”手势交互。作为响应，指示符212已经扩展而提供了关于部件210的附加信息，其作为扩展指示符214的一部分。扩展指示符214示出了组件210内材料的当前温度的值，组件210内材料的每日平均温度，组件210自安装以来已经运行的小时数，以及组件210最后一次检查的日期。

指示符212和/或扩展指示符214可以显示在相对于组件210的显示位置的位置，该位置是根据人体工程学、可见性和其他因素确定的。例如，指示符212和/或扩展指示符214可以显示在组件210的一侧，或者在组件210的上方或下方，以允许组件210和指示符212和/或扩展指示符214都能同时观看到。在另一个实例中，指示符212和/或扩展指示符214可以在组件210上显示为不透明或半透明覆盖物。在另一个实例中，指示符212可以显示为组件210上的覆盖物，但是在用户的交互中，扩展指示符214可以显示在组件210的一侧或上方或下方。当用户在可能的许多组件之间移动时，该方法允许指示符212与组件210紧密视觉关联。然而，转换到扩展指示符214指示组件210是相关的，这意味着用户可能希望同时查看组件210和扩展指示符214。

可以允许用户通过使用手势或其他方式移动指示符212、222和/或扩展指示符214，以便定制显示内容200的外观。例如，用户可以在扩展指示符214上执行“拖动”的手势并向上、向下、向左或向右移动扩展指示符214。因为显示内容200是三维的，所以用户可以通过将扩展指示符214“拉”向用户来拖动扩展指示符214以使其看起来更近，或者可以将扩展指示符214“推”远以使其相对于该组件210显得更远。指示符212和/或扩展指示符214可以通过连接器或其他视觉关联提示以图形方式连接到组件210。当指示符212、222和/或扩展指示符214相对于组件210移动时，连接器被调整大小并重新定向以连续地保持视觉连接。在指示符212、222和/或扩展指示符214需要显示比放置在它们中的能看到的信息更多的信息的情况下，指示符212、222和/或扩展指示符214可以具有滚动功能。

指示符212、222和/或扩展指示符214可以包括关于组件或其性能、组件中的材料以及由组件执行或在组件上执行的过程的当前和/或历史信息。表1中提供了示例性指示符：

组件可能包括但不限于表2中列出的以下内容：

图4中示出了显示内容200的又一视图400。在该视图中，向用户呈现具有任务列表408的显示内容200。任务列表408包含用户可能希望完成的一个或多个任务，例如任务410至418。任务可以与生产任务，维护任务，检查/审计任务，库存任务等中的一个或多个相关。当显示任务列表408时，可以仅针对与任务列表408相关的那些组件显示指示符212、222和/或扩展指示符214。在一些实施方式中，用户可以选择任务列表408和/或任务410至418，使得仅显示分别与任务列表408和/或所选任务410至418相关的指示符212、222和/或扩展指示符214。

当用户完成一个或多个任务410至418时，用户可以更新任务的状态，例如通过将其标记为完成来更新。例如，用户可以在任务410上执行“轻扫”手势，使其消失或以其他方式从列表中移除。任务列表408中的剩余任务412至418可以向上移动。在另一个实例中，用户可以在任务410上执行“点击”手势，使其被标记为完成，其可以通过任务410旁边的复选标记、变灰色或其他视觉不强调任务410，或其他方式，可视地表示。已经完成一个或多个任务的通知可以经由网络接口150发送到计算机化维护管理系统或其他商业软件系统以进行跟踪。

任务列表408可以是可扩展的，因为对特定任务执行手势的用户创建具有关于任务的附加信息的扩展视图。这样的附加信息可以包括关于任务的更详细的指令(包括任务所需的任何前置步骤，子步骤或后续步骤)，安全信息，与最后在相关组件上执行任务的时间相关的历史信息，等等。

任务列表408和/或各个任务410至418可以由用户或其他人员预先加载到设备100上，或者根据预定的维护或观察到的需要解决的问题或状况自动加载到设备100上。任务列表408和/或任务410至418也可以经由网络接口150上传到设备100。

在其他实施方式中，任务列表408和/或各任务410至418可以在使用期间由用户实时创建和/或修改。在一些实施方式中，口头命令可以由设备100接收和处理，允许用户在任务列表408上动态地创建，修改或标记为完成任务。

图5中示出了显示内容200的又一视图500。在该视图中，再次向用户呈现具有任务列表的显示内容200。然而，在该实例中，列表上的第一任务(任务510)涉及被称为“储罐249(holding_tank_249)”的组件(未示出)，该组件当前在显示内容200中不可见。例如，该组件可能在显示的边缘外面，或者可能位于设施的完全不同的部分。因此，方向指示符520用于在组件的方向上引导用户，其位置可以存储在设备100中或由位置传感器160和/或读取器170确定。在一些实例中，方向指示符520可以是一系列线或箭头，如图5所示。在其他实例中，指示组件方向的显示区域可以发光，脉冲或以其他方式改变外观。在其他实例中，音频指示或其他命令(诸如口头指令)可以通过耳机或其他方式给出。

在一些实施方式中，可以示出与组件相关的覆盖特征或其他图形特征，以便传送关于组件或内部材料的附加信息。显示内容200的另一视图600在图6中示出。在该视图中，显示内容示出了多个图形数据特征610、620，其提供关于组件210、220的附加或增强信息。图形数据特征610、620可以显示为增强现实显示中的叠加，或作为虚拟现实显示中的附加图形。

图形数据特征610提供关于存储在作为组件210的储罐中的材料的一条或多条信息。例如，图形数据特征610的尺寸可以指示储罐中的流体体积。换句话说，图形数据特征610的一个或多个尺寸(例如，高度)可以对应于储罐中的流体水平，图形数据特征610的顶部显示在接近组件210中的流体表面的位置处。以这种方式，用户可以直观且快速地“看到”组件210中剩余多少流体。

图形数据特征610的其他方面可以指示附加信息。例如，图形数据特征610可以发光，闪烁，脉冲或以其他方式改变外观以指示组件210(或内部材料)需要关注或维护。作为另一实例，图形数据特征610可以通过其颜色或其他方式指示关于内部材料的性质的信息。例如，如果组件210容纳水，则图形数据特征610可以呈现蓝色。可以使用其他颜色关联，例如黄色指示气体，绿色指示氧气等。作为另一个实例，处理或安全特性可以由图形数据特征610的颜色指示。例如，健康危害的材料可以由蓝色图形数据特征610指示；可燃材料可由红色图形数据特征610指示；反应性材料可以由黄色图形数据特征610指示；腐蚀性材料可以由白色图形数据特征610指示；等等。其他常见或自定义颜色方案可以由用户预定义和/或定制。

在其他实施方式中，图形数据特征的尺寸或形状可能不同于相应的部件。例如，整个组件可以被覆盖或着色以提供关于组件的信息。

显示内容200的另一视图700在图7中示出。在该实例中，图形数据特征710与显示内容200中的组件210的区域共同延伸。图形数据特征710可以在视觉上强调整个组件210，以将注意力吸引到组件710以用于识别、表达安全问题、执行任务等。例如，图形数据特征710可以使整个组件210看起来发光，闪烁，脉冲或以其他方式改变外观。

图形数据特征(例如，图形数据特征610,710)可以改变外观以指示相关联的组件处于非功能或故障状态，需要维护，在限定范围(例如，温度)之外运行等。

返回图6，图形数据特征还可以提供关于组件的当前功能的信息。例如，组件220(管道)与图形数据特征620重叠，图形数据特征620可以是一系列箭头、线等，其绘制成动画以指示通过组件220的流动。图形数据特征620可以在视觉上指示诸如流动中的方向、流速和湍流量之类的信息。例如，箭头/线的大小，或动画的速度或强度，可以指示流的量级。作为另一实例，图形数据特征可以在视觉上指示组件内的马达或风扇正在工作。

显示内容200还可以包括用于使某些功能被执行的一个或多个交互元素。

图8中示出了显示内容200的另一视图800。在该视图中，提供了多个用户界面按钮810至816以分别允许用户捕获图片(例如，在显示内容200中看到的)，捕获视频，与另一个人或系统(例如控制室)通信，或触发警报。按钮810至816可以由用户在显示内容200中执行手势来激活，例如使用手指来“点击”它们。按钮810至816可以是上下文特定的，使得在工业设施周围移动和/或与不同组件交互导致出现与不同功能相关联的按钮。在其他实施方式中，可以由用户执行手势来执行这样的任务。

再次参见图1，处理器120可以被配置为检测在视频流和/或照片中捕获的或者以其他方式从设备100的传感器检测到的一个或多个事件。例如，在由相机130捕获的视频流中，处理器120可以检测爆炸或其他事件，例如蒸汽爆发或流体快速排出。作为另一实例，处理器120可以从陀螺仪和/或加速计的输出确定用户的平衡或运动是不规则的，甚至是员工已经坠落和/或失去意识。作为另一实例，处理器120可以从一个或多个音频传感器(例如，麦克风)确定警报正在发声，或者用户或其他人通过音调、语调抑扬变化(inflection)、音量或语言来喊叫或以其他方式指示，可能正在发生紧急情况。在做出这样的确定时，处理器120可以使警报响起，可以联系监督或管理人员，应急人员或其他人(例如，经由网络接口150联系)，可以开始记录视频流或以其他方式记录当前事件，或者可以自动对一个或多个组件采取行动，或提示用户这样做。

考虑一种情况，其中管道组件的阀门已经爆裂，导致极高温度的蒸汽以高速率从管道中排出，危及人员。处理器120可以检测视频流和/或音频流中的事件，例如，通过将视频流与蒸汽泄漏的已知视觉特性进行比较，和/或将来自一个或多个麦克风的音频输入与蒸汽泄漏的已知音频特性进行比较来检测。作为响应，处理器120可以使工业设施中的警报响起，可以开始记录事件的视频和/或音频以用于存档和稍后的分析，并且可以使工业设施的控制系统解决该事件，例如，通过关闭管道上的上游阀门，从而停止泄漏直到可以进行修理。

可以在一个或多个商业实施方式中提供设备100。例如，本文描述的组件和功能可以全部或部分地由虚拟或增强现实眼镜(例如，由Microsoft Corporation，Redmond，Washington提供的Microsoft Hololens，或由加利福尼亚州Mountain View的Google提供的Google Glass)，头戴式耳机或头盔执行。

设备100可以结合到工业设施中佩戴类型的保护设备或设计成与其兼容。例如，设备100可以设计成可拆卸地连接到防毒面具上，从而可以安全舒适地佩戴防毒面具和设备100。在另一个实例中，设备100可以被设计成舒适且安全地适合用户，而不会妨碍用户佩戴安全帽或其他头盔。

在其他实施方式中，设备100可以作为移动电话或平板电脑设备上的硬件和/或软件提供。例如，用户可以将设备100保持到一个或多个组件上，使得设备100(例如，平板电脑设备)的相机朝向组件。由相机捕获的照片和/或视频可用于形成本文所述的显示。

实施例计算机系统

图9是分布式计算机系统900的框图，其中可以实践上面讨论的各种方面和功能。分布式计算机系统900可以包括一个或多个计算机系统，包括设备100。例如，如图所示，分布式计算机系统800包括三个计算机系统902、904和906。如图所示，计算机系统902、904和906通过通信网络908互连，并且可以通过通信网络908交换数据。网络908可以包括计算机系统可以通过其交换数据的任何通信网络。为了通过网络908交换数据，计算机系统902、904和906以及网络908可以使用各种方法，协议和标准，包括尤其是使用令牌环，以太网，无线以太网，蓝牙，无线电信令，红外线信令，TCP/IP，UDP，HTTP，FTP，SNMP，SMS，MMS，SS7，JSON，XML，REST，SOAP，CORBA IIOP，RMI，DCOM和Web服务。

根据一些实施方式，所讨论的用于产生三维合成视点的功能和运行可以单独地和/或组合地在计算机系统902、904和906上执行。例如，计算机系统902、904和906支持例如参与协作网络。在一个替代方案中，单个计算机系统(例如，902)可以生成三维合成视点。计算机系统902、904和906可以包括个人计算设备，例如移动电话，智能电话，平板电脑，“fablet”等，并且还可以包括台式计算机，笔记本电脑等。

根据本文讨论的实施方式的各个方面和功能可以实现为在包括图9中所示的计算机系统902的一个或多个计算机系统中执行的专用硬件或软件。在一实施方式中，计算机系统902是专门配置成执行上述过程和/或运行的个人计算设备。如图所示，计算机系统902包括至少一个处理器910(例如，单核或多核处理器)，存储器912，总线914，输入/输出接口(例如，916)和存储装置918。处理器910可以包括一个或多个微处理器或其他类型的控制器，可以执行一系列操纵数据的指令。如图所示，处理器910通过互连元件(例如，总线914)连接到包括存储器912的其他系统组件。

存储器912和/或存储装置918可以用于在计算机系统902的运行期间存储程序和数据。例如，存储器912可以是相对高性能的易失性随机存取存储器，例如动态随机存取存储器(DRAM)或静态存储器(SRAM)。另外，存储器912可以包括用于存储数据的任何设备，诸如磁盘驱动器或其他非易失性存储设备，诸如闪存，固态或相变存储器(PCM)。在进一步的实施例中，关于生成和/或渲染合成三维视图所讨论的功能和运行可以体现在来自存储器912和/或存储装置918的在计算机系统902上执行的应用程序中。例如，该应用程序可通过“应用商店”提供下载和/或购买。一旦安装或可用于执行，计算机系统902可以被专门配置为执行与产生合成三维视图相关联的功能。

计算机系统902还包括一个或多个接口916，诸如输入设备(例如，用于捕获图像的相机)，输出设备和组合输入/输出设备。接口916可以接收输入，提供输出或两者。存储装置918可以包括计算机可读和计算机可写的非易失性存储介质，其中存储有指令以定义将由处理器执行的程序。存储系统918还可以包括在介质上或介质中录制的信息，并且该信息可以由应用程序处理。可以与各种实施例一起使用的介质可以包括例如光盘，磁盘或闪存，SSD等。此外，方面和实施例不是针对特定存储器系统或存储系统。

在一些实施方式中，计算机系统902可以包括管理计算机系统902中包括的至少一部分硬件组件(例如，输入/输出设备，触摸屏，相机等)的操作系统。一个或多个处理器或控制器，例如处理器910，可以执行操作系统，该操作系统尤其可以是微软公司提供的基于Windows的操作系统(例如，Windows NT，ME，XP，Vista，7，8或RT)，Apple Computer提供的操作系统(例如，MAC OS，包括System X)，许多基于Linux的操作系统发行版之一(例如，可从Red Hat Inc.获得的Enterprise Linux操作系统)，Oracle公司提供的Solaris操作系统，或从各种来源获得的UNIX操作系统。可以使用许多其他操作系统，包括为个人计算设备设计的操作系统(例如，iOS，Android等)，并且实施例不限于任何特定的操作系统。

处理器和操作系统一起定义计算平台，在该计算平台上可以执行应用程序(例如，可从“应用商店(app store)”获得的“app”)。另外，用于生成和操纵图像的各种功能可以在非编程环境中实现(例如，以HTML，XML或其他格式创建的文档，当在浏览器程序的窗口中查看时，其提供图形用户界面的各个方面或执行其他功能)。此外，根据本发明的方面的各种实施例可以实现为编程或非编程组件，或其任何组合。各种实施例可以部分地实现为MATLAB功能，脚本和/或批处理作业。因此，本发明不限于特定的编程语言，也可以使用任何合适的编程语言。

尽管计算机系统902作为实施例示出为可以在其上实现用于产生三维合成视图的各种功能的一种类型的计算机系统，但是方面和实施例不限于在计算机系统上实现，如图9所示。可以在具有与图9中所示的架构或组件不同的架构或组件的一个或多个计算机或类似设备上实践各个方面和功能。

工业应用

使用这种设备和系统的设备，系统和方法，例如，视觉显示系统，例如描绘设施的一个或多个组件的视觉显示系统，例如增强现实或虚拟现实显示，可用于许多工业环境中，例如，在生产药品的工业设施中。该设施可以是生产设施或工业设施。所述设施，例如工业设施或装置，可以是生产设施，例如用于中试试验，扩大生产或商业生产。这些设施包括工业设施，其包括适合于培养任何所需细胞系(包括原核和/或真核细胞系)的组件。还包括工业设施，其包括适合于培养悬浮细胞或依赖贴壁(粘附)细胞的组件，并且适用于配置用于生产药品和生物制品(例如多肽产品，核酸产品(例如DNA或RNA)，或细胞和/或病毒，例如用于细胞和/或病毒治疗的细胞和/或病毒)的生产运作。

在实施方式中，细胞表达或产生产物，例如重组治疗或诊断产物。如下文更详细描述的，细胞产生的产物的实例包括但不限于抗体分子(例如，单克隆抗体，双特异性抗体)，抗体模拟物(与抗原特异性结合但在结构上与抗体无关的多肽分子，所述抗体为例如DARPins，affibodies，adnectin或IgNARs)，融合蛋白(例如，Fc融合蛋白，嵌合细胞因子)，其他重组蛋白(例如，糖基化蛋白，酶，激素)，病毒治疗剂(例如，抗癌溶瘤病毒，用于基因治疗和病毒免疫疗法的病毒载体)，细胞疗法(例如多能干细胞，间充质干细胞和成体干细胞)，疫苗或脂质包裹的颗粒(例如，外泌体，病毒样颗粒)，RNA(诸如例如siRNA)或DNA(例如质粒DNA)，抗生素或氨基酸。在实施方式中，设备、设施和方法可用于生产生物仿制药。

还包括工业设施，其包括组件，所述组件允许产生真核细胞，例如哺乳动物细胞或低等真核细胞，例如酵母细胞或丝状真菌细胞，或原核细胞，例如革兰氏阳性或革兰氏阴性细胞，和/或真核细胞或原核细胞的产物，例如蛋白质，肽，抗生素，氨基酸，核酸(例如DNA或RNA)，其由真核细胞以大规模方式合成。除非本文另有说明，否则所述设备，设施和方法可包括任何所需的体积或生产能力，包括但不限于实验室规模，中试规模和全生产规模能力。

此外，除非本文另有说明，否则该设施可包括任何合适的反应器，包括但不限于搅拌罐，空气升液器(airlift)，纤维，微纤维，中空纤维，陶瓷基质，流化床，固定床和/或喷射床生物反应器。如本文所用，“反应器”可包括发酵器或发酵单元，或任何其他反应容器，术语“反应器”可与“发酵器”互换使用。例如，在一些方面，示例性生物反应器单元可执行一个或多个或者全部以下项：营养物和/或碳源的进料，合适的气体(例如氧气)的注入，发酵或细胞培养基的入口和出口流动，气相和液相的分离，温度的维持，维护氧气和二氧化碳水平，维持pH水平，搅动(例如搅拌)和/或清洁/灭菌。示例性反应器单元，例如发酵单元，可以在单元内包含多个反应器，例如该单元可以在每个单元中具有1、2、3、4、5、10、15、20、25、30、35、40、45、50、60、70、80、90或100或更多个生物反应器和/或设施可包含在设施内具有单个或多个反应器的多个单元。在各种实施方式中，生物反应器可适用于分批，半补料分批，补料分批，灌注和/或连续发酵过程。可以使用任何合适的反应器直径。在实施方式中，生物反应器可具有约100mL至约50,000L的容积。非限制性实例包括100mL，250mL，500mL，750mL，1升，2升，3升，4升，5升，6升，7升，8升，9升，10升，15升，20升，25升，30升，40升，50升，60升，70升，80升，90升，100升，150升，200升，250升，300升，350升，400升，450升，500升，550升，600升，650升，700升，750升，800升，850升，900升，950升，1000升，1500升，2000升，2500升，3000升，3500升，4000升，4500升，5000升，6000升，7000升，8000升，9000升，10,000升，15,000升，20,000升，和/或50,000升的容积。另外，合适的反应器可以是多次使用的，单次使用的，一次性的或非一次性的，并且可以由任何合适的材料形成，所述材料包括金属合金，例如不锈钢(例如，316L或任何其他合适的不锈钢)和Inconel，塑料和/或玻璃。

在实施方式中并且除非本文另有说明，否则设施还可包括任何合适的单元操作和/或未另外提及的设备，例如用于分离、纯化和隔离这些产品的操作和/或设备。可以使用任何合适的设施和环境，例如传统的杆式设施(stick-built facilities)，模块化，移动和临时设施，或任何其他合适的结构，设施和/或布局。例如，在一些实施方式中，可以使用模块化洁净室。另外并且除非另有说明，否则本文描述的设备，系统和方法可以在单个位置或设施中容纳和/或执行，或者可选地在单独的或多个位置和/或设施处容纳和/或执行。

作为非限制性实例且非限制性地，美国公开号2013/0280797；2012/0077429；2011/0280797；2009/0305626；和美国专利号8,298,054；7,629,167；和5,656,491在此通过引用方式整体并入本文，其描述了可能适合的示例性设施、装备和/或系统。

在实施方式中，该设施可包括使用细胞是真核细胞，例如哺乳动物细胞。哺乳动物细胞可以是例如人或啮齿动物或牛细胞系或细胞株。这种细胞，细胞系或细胞株的实例是例如小鼠骨髓瘤(NSO)-细胞系，中国仓鼠卵巢(CHO)-细胞系，HT1080，H9，HepG2，MCF7，MDBKJurkat，NIH3T3，PC12，BHK(幼仓鼠肾细胞)，VERO，SP2/0，YB2/0，Y0，C127，L细胞，COS，例如COS1和COS7，QC1-3，HEK-293，VERO，PER.C6，HeLA，EB1，EB2，EB3，溶瘤或杂交瘤细胞系。优选地，哺乳动物细胞是CHO细胞系。在一实施方式中，细胞是CHO细胞。在一实施方式中，细胞是CHO-K1细胞，CHO-K1 SV细胞，DG44 CHO细胞，DUXB11 CHO细胞，CHOS，CHO GS敲除细胞，CHOFUT8 GS敲除细胞，CHOZN或CHO衍生细胞。CHO GS敲除细胞(例如，GSKO细胞)是例如CHO-K1SV GS敲除细胞。CHO FUT8敲除细胞是例如CHOK1 SV(Lonza Biologics，Inc.)。真核细胞也可以是禽细胞，细胞系或细胞株，例如细胞，EB14，EB24，EB26，EB66或EBv13。

在一实施方式中，真核细胞是干细胞。干细胞可以是，例如，多能干细胞，包括胚胎干细胞(ESCs)，成体干细胞，诱导多能干细胞(iPSC)，组织特异性干细胞(例如，造血干细胞)和间充质干细胞(MSC)。

在一实施方式中，细胞是本文描述的任何细胞的分化形式。在一实施方式中，细胞是衍生自培养中的任何原代细胞的细胞。

在实施方式中，细胞是肝细胞，例如人肝细胞，动物肝细胞或非实质细胞。例如，细胞可以是可转移的代谢合格的人肝细胞，可转移的诱导合格的人肝细胞，可转移的QualystTransporter Certified^TM人肝细胞，悬浮合格的人肝细胞(包括10供体和20供体合并的肝细胞)，人肝库普弗细胞，人肝星状细胞，狗肝细胞(包括单一和合并的比格犬肝细胞)，小鼠肝细胞(包括CD-1和C57BI/6肝细胞)，大鼠肝细胞(包括Sprague-Dawley，Wistar Han和Wistar肝细胞)，猴肝细胞(包括食蟹猴(Cynomolgus)或恒河猴(Rhesus monkey)肝细胞)，猫肝细胞(包括国内短毛猫肝细胞)和兔肝细胞(包括新西兰白肝细胞)。示例性肝细胞可从Triangle Research Labs，LLC，6Davis Drive Research Triangle Park，NorthCarolina，USA 27709商购获得。

在一实施方式中，真核细胞是低等真核细胞，例如酵母细胞(例如毕赤酵母属(例如巴斯德毕赤酵母，甲醇毕赤酵母，克鲁维毕赤酵母(Pichia kluyveri)和安格斯毕赤酵母(Pichia angusta))，Komagataella属(例如Komagataella pastoris，Komagataellapseudopastoris或Komagataella phaffii)，酵母菌属(例如酿酒酵母，酿酒酵母，克鲁酵母，葡萄汁酵母(Saccharomyces uvarum))，克鲁维酵母菌属(Kluyveromyces genus)(例如乳酸克鲁维酵母，马克斯克鲁维酵母)，假丝酵母菌属(例如产朊假丝酵母(Candidautilis)，可可假丝酵母(Candida cacaoi)，博伊丁假丝酵母(Candida boidinii))，地丝菌属(例如发酵地丝菌属(Geotrichum fermentans))，多型汉逊酵母，耶氏解脂假丝酵母或粟酒裂殖酵母(Schizosaccharomyces pombe)。优选巴斯德毕赤酵母(Pichia pastoris)。巴斯德毕赤酵母菌株的实例是X33，GS115，KM71，KM71H和CBS7435。

在一实施方式中，真核细胞是真菌细胞(例如曲霉属(例如黑曲霉，烟曲霉，米曲霉，构巢曲霉)，枝顶孢霉属(例如嗜热枝顶孢霉)，毛壳菌属(例如嗜热毛壳菌)，金孢子菌属(如嗜热金孢子菌)，虫草菌属(如蛹虫草)，棒囊壳属，栉霉属，镰刀菌属(如尖孢镰刀菌属)，小丛壳菌属(如禾生小丛壳菌)，肉座菌属(如红褐肉座菌)，稻瘟病菌属(Magnaporthe)(如M.orzyae)，毁丝霉属(如嗜热毁丝霉属)，丛赤壳菌属(如红球丛赤壳菌)，链孢霉属(如粗糙链孢霉)，青霉菌属，侧孢霉属(如嗜热侧孢霉)，梭孢壳霉属(如太瑞斯梭孢壳霉，异梭孢壳霉)，木霉属(如里氏木霉)，或轮枝菌属(如大丽轮枝菌)。

在一实施方式中，真核细胞是昆虫细胞(例如，Sf9，Mimic^TMSf9，Sf21，High Five^TM(BT1-TN-5B1-4)或BT1-Ea88细胞)，藻类细胞(例如，双眉藻属，硅藻纲，杜氏藻属，小球藻属，衣藻属，蓝藻门(Cyanophyta)(蓝藻纲(cyanobacteria))，微绿球藻属，螺旋藻属或棕鞭藻属的细胞)，或植物细胞(如单子叶植物(如玉米，水稻，小麦或狗尾草)细胞，或来自双子叶植物(例如，木薯，马铃薯，大豆，番茄，烟草，苜蓿，小立碗藓(Physcomitrella patens)或拟南芥(Arabidopsis)的细胞)。

在一实施方式中，细胞是细菌或原核细胞。

在实施方式中，原核细胞是革兰氏阳性细胞，例如芽孢杆菌，链霉菌链球菌，葡萄球菌或乳杆菌。可以使用的芽孢杆菌是，例如，枯草芽孢杆菌，淀粉芽孢杆菌，地衣芽孢杆菌，纳豆芽孢杆菌或巨大芽孢杆菌。在实施方式中，细胞是枯草芽孢杆菌，例如枯草芽孢杆菌3NA和枯草芽孢杆菌168。芽孢杆菌可从例如Bacillus Genetic Stock Center，Biological Sciences 556,484West 12^th Avenue，Columbus OH 43210-1214获得。

在一实施方式中，原核细胞是革兰氏阴性细胞，例如沙门氏菌属或大肠杆菌，例如TG1，TG2，W3110，DH1，DHB4，DH5a，HMS174，HMS174(DE3)，NM533，C600，HB101，JM109，MC4100，XL1-Blue和Origami，以及衍生自大肠杆菌B-菌株(例如BL-21或BL21(DE3))的那些细胞，所有这些都是可商购的。

合适的宿主细胞可商购，例如，购自培养物保藏中心，例如DSMZ(DeutscheSammlung von Mikroorganismen和Zellkulturen GmbH，Braunschweig，Germany)或美国典型培养物保藏中心(ATCC)。

在实施方式中，培养的细胞用于生产用于治疗用途的蛋白质，例如抗体，例如单克隆抗体和/或重组蛋白质。在实施方式中，培养的细胞产生肽，氨基酸，脂肪酸或其他有用的生物化学中间体或代谢物。例如，在实施方式中，可以制备分子量为约4000道尔顿至大于约140,000道尔顿的分子。在实施方式中，这些分子可具有一系列复杂性并且可包括翻译后修饰，包括糖基化。

在实施方式中，蛋白质是例如BOTOX，Myobloc，Neurobloc，Dysport(或肉毒杆菌神经毒素的其他血清型)，阿葡糖苷酶α(alglucosidase alpha)，达托霉素，YH-16，绒毛膜促性腺激素α，非格司亭，西曲瑞克，白细胞介素-2，阿地白介素，teceleulin，地尼白介素-毒素连接物(denileukin diftitox)，干扰素α-n3(注射)，干扰素α-nl，DL-8234，干扰素，Suntory(γ-1a)，干扰素γ，胸腺肽α1，他索纳明，DigiFab，ViperaTAb，EchiTAb，CroFab，奈西利肽，阿巴西普，阿法西普，利比(Rebif)，eptoterminalfa，特立帕肽(骨质疏松症)，降钙素注射剂(骨病)，降钙素(鼻，骨质疏松症)，依那西普，聚戊二醛血红蛋白250(HemoglobinGlutamer 250)(牛)，drotrecogin alpha，胶原酶，卡培立肽(carperitide)，重组人表皮生长因子(局部凝胶，伤口愈合)，DWP401，达贝泊汀α(darbepoetin alpha)，依泊汀ω，依泊汀β，依泊汀α，地西卢定，来匹卢定，比伐卢定，诺那凝血素α(nonacog alpha)，凝血因子IX粉针剂(Mononine)，依他凝血素α(eptacogalfa)(活化的)，重组因子VIII+VWF，重组因子VIII，因子VIII(重组)，Alphnmate，辛凝血素α，因子VIII，帕利夫明(palifermin)，Indikinase，替尼普酶，阿替普酶，帕米普酶，瑞替普酶，那替普酶，孟替普酶，促卵泡素α，rFSH，hpFSH，米卡芬净，培非格司亭，来格司亭，那托司亭，舍莫瑞林，胰高血糖素，艾塞那肽，普兰林肽，iniglucerase，加硫酶，Leucotropin，molgramostirn，醋酸曲普瑞林，组氨瑞林(皮下植入，Hydron)，地洛瑞林，组氨瑞林，那法瑞林，亮丙瑞林缓释库(ATRIGEL)，亮丙瑞林植入剂(DUROS)，戈舍瑞林，尤得盼(Eutropin)，KP-102程序(KP-102program)，生长激素，美卡舍明(生长不足)，enlfavirtide，Org-33408，甘精胰岛素，赖谷胰岛素，胰岛素(吸入式)，赖脯胰岛素，地特胰岛素，胰岛素(口腔，RapidMist)，美卡舍明-林菲培，阿那白滞素，西莫白介素，99mTc-apcitide注射用，myelopid，Betaseron，醋酸格拉替雷，Gepon，沙莫司亭，奥普瑞白介素，人类白细胞衍生的α干扰素，倍尔来福(Bilive)，胰岛素(重组)，重组人胰岛素，门冬胰岛素，mecasenin，Roferon-A，干扰素-α2，Alfaferone，干扰素alfacon-1，干扰素α，Avonex'重组人黄体生成激素，阿法链道酶(dornase alpha)，曲弗明，齐考诺肽，他替瑞林，阿法地博特明(diboterminalfa)，阿托西班，贝卡普勒明，依替巴肽，杰特贝林(Zemaira)，CTC-111，Shanvac-B，HPV疫苗(四价)，奥曲肽，兰瑞肽，ancestirn，阿加西酶β(agalsidase beta)，阿加西酶α(agalsidase alpha)，拉罗尼酶(laronidase)，醋肽铜(局部凝胶)，拉布立酶，兰尼单抗，Actimmune，PEG-内含子，Tricomin，重组屋尘螨过敏脱敏注射剂，重组人甲状旁腺激素(PTH)1-84(sc，骨质疏松症)，依泊汀δ，转基因抗凝血酶III，Granditropin，Vitrase，重组胰岛素，干扰素-α(口服锭剂)，GEM-21S，伐普肽，艾度硫酸酯酶，奥马曲拉，重组血清白蛋白，妥珠单抗，羧肽酶，人重组C1酯酶抑制剂(血管神经性水肿)，拉诺替普酶，重组人生长激素，恩夫韦肽(无针注射，Biojector 2000)，VGV-1，干扰素α，芦西纳坦(lucinactant)，阿肽地尔(吸入，肺部疾病)，艾替班特，ecallantide，奥米加南(omiganan)，Aurograb，醋酸培西加南，ADI-PEG-20，LDI-200，地加瑞克，贝辛白介素(cintredelinbesudotox)，Favld，MDX-1379，ISAtx-247，利拉鲁肽，特立帕肽(骨质疏松症)，替法可近(tifacogin)，AA4500，T4N5脂质体洗剂，卡妥索单抗，DWP413，ART-123，Chrysalin，去氨普酶，安地普酶，corifollitropin alpha，TH-9507，替度鲁肽，Diamyd，DWP-412，生长激素(持续释放注射)，重组G-CSF，胰岛素(吸入，AIR)，胰岛素(吸入，Technosphere)，胰岛素(吸入，AERx)，RGN-303，DiaPep277，干扰素β(丙型肝炎病毒感染(HCV))，干扰素α-n3(口服)，贝拉西普，透皮胰岛素贴剂，AMG-531，MBP-8298，Xerecept，奥培巴坎，AIDSVAX，GV-1001，LymphoScan，豹蛙酶(ranpirnase)，Lipoxysan，芦舒普肽，MP52(β-磷酸三钙载体，骨再生)，黑色素瘤疫苗，sipuleucel-T，CTP-37，Insegia，维特斯朋(vitespen)，人凝血酶(冷冻，手术出血)，凝血酶，TransMID，alfimeprase，普瑞凯希，特利加压素(静脉注射，肝肾综合征)，EUR-1008M，重组FGF-I(注射，血管疾病)，BDM-E，缝隙连接增强剂(rotigaptide)，ETC-216，P-113，MBI-594AN，耐久霉素(吸入，囊性纤维化)，SCV-07，OPI-45，内皮抑素，血管抑制素，ABT-510，Bowman Birk抑制剂浓缩物，XMP-629，99mTc-Hynic-膜联蛋白V，kahalalide F，CTCE-9908，替维瑞克(延释)，ozarelix，罗咪酯肽(rornidepsin)，BAY-504798，白细胞介素4，PRX-321，肽扫描(Pepscan)，iboctadekin，rhlactoferrin，TRU-015，IL-21，ATN-161，西仑吉肽，Albuferon，Biphasix，IRX-2，ω干扰素，PCK-3145，CAP-232，帕瑞肽，huN901-DMI，卵巢癌免疫治疗疫苗，SB-249553，Oncovax-CL，OncoVax-P，BLP-25，CerVax-16，多表位肽黑素瘤疫苗(MART-1，gp100，酪氨酸酶)，奈米非肽，rAAT(吸入)，rAAT(皮肤病学)，CGRP(吸入，哮喘)，pegsunercept，胸腺素β4，plitidepsin，GTP-200，雷莫拉宁，GRASPA，OBI-1，AC-100，鲑鱼降钙素(口服，eligen)，降钙素(口服，骨质疏松症)，testorelin，卡普瑞林(capromorelin)，Cardeva，velafermin，131I-TM-601，KK-220，T-10，乌拉立肽(ularitide)，地来司他(depelestat)，hematide，Chrysalin(局部)，rNAPc2，重组因子V111(聚乙二醇化脂质体)，bFGF，聚乙二醇化重组葡萄球菌激酶变体，V-10153，SonoLysis Prolyse，NeuroVax，CZEN-002，胰岛细胞再生疗法，rGLP-1，BIM-51077，LY-548806，艾塞那肽(控制释放，Medisorb)，AVE-0010，GA-GCB，阿伏瑞林，ACM-9604，醋酸利那洛肽(linaclotid eacetate)，CETi-1，Hemospan，VAL(可注射)，速效胰岛素(注射剂，Viadel)，鼻内胰岛素，胰岛素(吸入)，胰岛素(口服，eligen)，重组甲硫氨酸人瘦素，pitrakinra皮下注射，湿疹)，pitrakinra(吸入干粉，哮喘))，Multikine，RG-1068，MM-093，NBI-6024，AT-001，PI-0824，Org-39141，Cpn10(自身免疫疾病/炎症)，乳铁传递蛋白(局部)，rEV-131(眼科)，rEV-131(呼吸系统疾病)，口服重组人胰岛素(糖尿病)，RPI-78M，奥普瑞白介素(口服)，CYT-99007CTLA4-Ig，DTY-001，伐拉斯特(valategrast)，干扰素α-n3(局部用)，IRX-3，RDP-58，Tauferon，胆盐刺激脂肪酶，Merispase，碱性磷酸酶(alaline phosphatase)，EP-2104R，美那诺坦-II(Melanotan-II)，布雷默浪丹，ATL-104，重组人微纤溶酶，AX-200，SEMAX，ACV-1，Xen-2174，CJC-1008，强啡肽A，SI-6603，LAB GHRH，AER-002，BGC-728，疟疾疫苗(病毒颗粒，PeviPRO)，ALTU-135，细小病毒B19疫苗，流感疫苗(重组神经氨酸酶)，疟疾/HBV疫苗，炭疽疫苗，Vacc-5q，Vacc-4x，HIV疫苗(口服)，HPV疫苗，Tat类毒素，YSPSL，CHS-13340，PTH(1-34)脂质体乳膏(Novasome)，Ostabolin-C，PTH类似物(局部，牛皮癣)，MBRI-93.02，MTB72F疫苗(结核病)，MVA-Ag85A疫苗(结核病)，FARA04，BA-210，重组鼠疫FIV疫苗，AG-702，OxSODrol，rBetV1，Der-p1/Der-p2/Der-p7过敏原靶向疫苗(尘螨过敏)，PR1肽抗原(白血病)，突变ras疫苗，HPV-16E7脂肽疫苗，labyrinthin疫苗(腺癌)，CML疫苗，WT1-肽疫苗(癌症)，IDD-5，CDX-110，Pentrys，Norelin，CytoFab，P-9808，VT-111，艾罗卡肽(icrocaptide)，替柏明(telbermin)(皮肤病学，糖尿病足溃疡)，芦平曲韦，reticulose，rGRF，HA，α-半乳糖苷酶A，ACE-011，ALTU-140，CGX-1160，血管紧张素治疗性疫苗，D-4F，ETC-642，APP-018，rhMBL，SCV-07(口服，结核)，DRF-7295，ABT-828，ErbB2特异性免疫毒素(抗癌)，DT3SSIL-3，TST-10088，PRO-1762，Combotox，缩胆囊素-B/胃泌素受体结合肽，111In-hEGF，AE-37，trasnizumab-DM1，拮抗剂G，IL-12(重组)，PM-02734，IMP-321，rhIGF-BP3，BLX-883，CUV-1647(局部)，基于L-19的放射免疫治疗剂(癌症)，Re-188-P-2045，AMG-386，DC/1540/KLH疫苗(癌症)，VX-001，AVE-9633，AC-9301，NY-ESO-1疫苗(肽)，NA17.A2肽，黑素瘤疫苗(脉冲抗原治疗)，前列腺癌疫苗，CBP-501，重组人乳铁蛋白(干眼)，FX-06，AP-214，WAP-8294A(可注射)，ACP-HIP，SUN-11031，肽YY[3-36](肥胖症，鼻内)，FGLL，阿塞西普，BR3-Fc，BN-003，BA-058，人甲状旁腺激素1-34(鼻，骨质疏松症)，F-18-CCR1，AT-1100(乳糜泻/糖尿病)，JPD-003，PTH(7-34)脂质体乳膏(Novasome)，耐久霉素(眼科，干眼症)，CAB-2，CTCE-0214，糖基化聚二乙醇化促红细胞生成素，EPO-Fc，CNTO-528，AMG-114，JR-013，因子XIII，氨基康定，PN-951,716155，SUN-E7001，TH-0318，BAY-73-7977，替维瑞克(立即释放)，EP-51216，hGH(控释，Biosphere)，OGP-1，西夫韦肽，TV4710，ALG-889，Org-41259，rhCC10，F-991，胸腺五肽(肺病)，r(m)CRP，肝脏选择性胰岛素，subalin，L19-IL-2融合蛋白，弹性蛋白酶抑制剂(elafin)，NMK-150，ALTU-139，EN-122004，rhTPO，血小板生成素受体激动剂(血小板减少症)，AL-108，AL-208，神经生长因子拮抗剂(疼痛)，SLV-317，CGX-1007，INNO-105，口服特立帕肽(eligen)，GEM-OS1，AC-162352，PRX-302，LFn-p24融合疫苗(Therapore)，EP-1043，肺炎链球菌儿科疫苗，疟疾疫苗，脑膜炎奈瑟菌B组疫苗，新生儿B组链球菌疫苗，炭疽疫苗，HCV疫苗(gpE1+gpE2+MF-59)，中耳炎治疗，HCV疫苗(核心抗原+ISCOMATRIX)，hPTH(1-34)(透皮，ViaDerm)，768974，SYN-101，PGN-0052，aviscumnine，BIM-23190，结核疫苗，多表位酪氨酸酶肽，癌症疫苗，恩卡斯替母(enkastim)，APC-8024，GI-5005，ACC-001，TTS-CD3，血管靶向TNF(实体瘤)，去氨加压素(口腔控释)，奥那西普和TP-9201。

在一些实施方式中，所述多肽是阿达木单抗(HUMIRA)，英夫利昔单抗(REMICADE^TM)，利妥昔单抗(RITUXAN^TM/MAB THERA^TM)依那西普(ENBREL^TM)，贝伐单抗(AVASTIN^TM)，曲妥珠单抗(HERCEPTIN^TM)，pegrilgrastim(NEULASTA^TM)，或任何其他合适的多肽，包括生物仿制药和改良型生物相似性药(biobetter)。

其他合适的多肽是下面和US2016/0097074的表1中列出的那些：

表3

表3

表3

表3

表3

在实施方式中，多肽是激素，血液凝结/凝血因子，细胞因子/生长因子，抗体分子，融合蛋白，蛋白疫苗或肽，如表4所示。

表4.示例性产品

在实施方式中，蛋白质是多特异性蛋白质，例如表5中所示的双特异性抗体。

表5：双特异性版式

Claims (27)

1.一种提供虚拟现实或增强现实显示的方法，其包括以下操作：

利用设备的相机产生第一视频内容，该第一视频内容包括用于处理药品的设施的组件的描绘；

检测或选择所述组件；和

产生包括与所述组件相关联的第一指示符的第二视频内容，所述第一视频内容和所述第二视频内容提供虚拟现实或增强现实显示。

2.根据权利要求1所述的方法，其中，所述指示符与以下中的一个或多个相关联：(i)所述组件的标识或类型，(ii)与所述组件的维护或更换相关的信息，(iii)与功能上连接所述组件的第二组件相关的信息，(iv)与所述组件的功能、状况或状态相关的信息或值，(v)与所述组件的使用寿命相关的信息，(vi)与所述组件的年龄相关的信息，(vii)与安装所述组件的日期相关的信息，(viii)与所述组件制造商相关的信息，(ix)与所述组件更换的可获得性相关的信息，(x)与所述组件的更换位置相关的信息，(xi)与所述组件的预期使用寿命周期相关的信息，(xii)与所述组件的温度相关的信息；(xiii)与所述组件中材料的温度相关的信息；(xiv)与通过所述组件的流速相关的信息，(xv)与所述组件中的压力相关的信息，以及(xvi)与所述组件的事件或检查相关的信息。

3.根据权利要求1所述的方法，还包括：产生包括第二指示符的第三视频内容。

4.根据权利要求2所述的方法，其中与所述组件的功能、状况或状态相关的值包括当前或实时值、历史或过去值或预选值。

5.根据权利要求1所述的方法，其中所述组件是(i)罐，(ii)蒸发器，(iii)管道，(iv)离心机，(v)过滤器，(vi)压力机，(vii)混合器，(viii)输送机，(ix)反应器，(x)锅炉，(xi)发酵器，(xii)泵，(xiii)冷凝器，(xiv)洗涤器，(xv)阀门，(xvi)分离器，(xvii)计量器，(xviii)干燥器，(xix)热交换器，(xx)蒸煮机，(xxi)调节器，(xxii)滗析器，(xxiii)柱，(xxiv)冷冻机，(xxv)中试/生产系统色谱仪，(xxvi)培养箱，或(xxvii)流动板。

6.根据权利要求1所述的方法，还包括在显示设备上显示以下中的一个或多个的全部或部分的描绘：(i)所述组件和(ii)所述指示符。

7.根据权利要求1所述的方法，还包括：合成包括所述第一视频内容的全部或部分以及所述第二视频内容的全部或部分的显示。

8.根据权利要求1所述的方法，其中所述第一视频内容的全部或部分与所述第二视频内容的全部或部分重叠，所述第一和第二视频内容是实况的或被录制的。

9.根据权利要求1所述的方法，其中，所述第一视频内容包括多个组件的描绘，并且所述方法还包括在显示设备处接收对所述多个组件之一的选择。

10.根据权利要求1所述的方法，还包括确定与所述组件相关的至少一个待执行的操作项。

11.一种显示设备，其包括：

配置成接收和捕获与第一视频内容相关联的图像的相机，所述第一视频内容包括用于处理药品或生物制品的工业设施的组件的描绘；

显示屏，其被配置为定位成对所述显示设备的用户可见；和

至少一个处理器，其被配置为：

产生所述第一视频内容，所述第一视频内容包括用于所述处理药品或生物制品的工业设施的组件的描绘；

产生包括与该组件相关联的指示符的第二视频内容；和

将所述第一视频内容和所述第二视频内容显示为增强现实或虚拟现实显示。

12.根据权利要求11所述的设备，其中，所述显示设备是可穿戴设备，所述可穿戴设备被配置为定位在佩戴者或用户的视野中。

13.根据权利要求11所述的设备，其进一步包括：用户界面，其被配置为接收用户输入，其中，所述用户输入是在所述第一视频内容中可检测的手势。

14.根据权利要求11所述的设备，其进一步包括：位置接收器，其被配置为获得位置信息，其中，所述至少一个处理器还被配置为至少部分地基于所述位置信息来识别所述组件。

15.根据权利要求11所述的设备，其进一步包括无线电接收器，其被配置以从所述组件上或所述组件附近的信号装置接收接近信号，其中所述至少一个处理器进一步被配置以至少部分地基于所述接近信号来识别所述组件。

16.根据权利要求11所述的设备，其进一步包括：网络接口，其被配置为经由网络与至少一个计算设备通信。

17.根据权利要求11所述的设备，其进一步包括以下中的一个或多个：(i)陀螺仪，(ii)加速度计，以及(iii)指南针。

18.一种显示视觉内容的方法，该方法包括：

向显示设备的用户显示由以下各项组成的显示：(i)第一视频内容，其包括用于处理药品或生物制品的工业设施的组件的描绘；以及(ii)包括与所述组件相关联的指示符的第二视频内容，其中所述第一视频内容和所述第二视频内容提供增强现实显示和/或虚拟现实显示；和

通过所述显示设备的用户界面接收用户输入。

19.根据权利要求18所述的方法，其中，所述用户输入包括将另一指示符与不同用户相关联。

20.根据权利要求18所述的方法，还包括基于所述指示符或基于与所述指示符相关联的值向实体发送信号。

21.根据权利要求18所述的方法，还包括：

在所述第一视频内容中检测与该组件相关联的事件；和

创建与该事件相关的另外的指示符。

22.根据权利要求18所述的方法，其中，所述指示符包括与所述组件相关联的待执行的操作项相关的信息。

23.根据权利要求22所述的方法，其中，所述操作项被呈现在所述第二视频内容中的任务列表中。

24.根据权利要求22所述的方法，其中所述操作项涉及以下中的一个或多个：(i)维护任务和(ii)涉及所述组件的工业过程。

25.根据权利要求18所述的方法，其中，所述第二视频内容包括提供到所述组件的位置的方向的另一指示符。

26.根据权利要求18所述的方法，其中，以对应于所述组件的特性、所述指示符或所述指示符的值的颜色显示所述第二视频内容中的一些或全部。

27.根据权利要求26所述的方法，其中，所述特性是所述组件的类型、所述组件的标识符、由所述组件存储或传送的材料的标识符，或由所述组件存储或传送的所述材料的温度。