CN113448434A - 用于跟踪实验室资源的方法和装置 - Google Patents

用于跟踪实验室资源的方法和装置 Download PDF

Info

Publication number
CN113448434A
CN113448434A CN202110318891.5A CN202110318891A CN113448434A CN 113448434 A CN113448434 A CN 113448434A CN 202110318891 A CN202110318891 A CN 202110318891A CN 113448434 A CN113448434 A CN 113448434A
Authority
CN
China
Prior art keywords
laboratory
information
augmented reality
reality device
resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110318891.5A
Other languages
English (en)
Inventor
U·苏特尔
J·希梅内斯罗达
S·布切利
I·坎内卡斯特容
D·阿贝林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
F Hoffmann La Roche AG
Original Assignee
F Hoffmann La Roche AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by F Hoffmann La Roche AG filed Critical F Hoffmann La Roche AG
Publication of CN113448434A publication Critical patent/CN113448434A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/40ICT specially adapted for the handling or processing of patient-related medical or healthcare data for data related to laboratory analysis, e.g. patient specimen analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/40ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/50Nature of the object
    • G03H2210/52Alphanumerical
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/50Nature of the object
    • G03H2210/53Coded object not directly interpretable, e.g. encrypted object, barcode

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Automatic Analysis And Handling Materials Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了用于跟踪实验室资源的方法和装置。实验室资源包括至少一个识别特征。方法包括以下步骤:a)至少一个识别步骤,包括利用至少一个增强现实装置的至少一个成像传感器检测实验室中的实验室资源,以及通过从识别特征接收至少一个识别信息,利用增强现实装置的至少一个识别单元来识别实验室资源;b)至少一个数据检索步骤,包括经由增强现实装置的至少一个通信接口从至少一个数据服务器检索关于识别出的实验室资源的信息;c)至少一个跟踪步骤,包括在增强现实装置的至少一个显示装置上生成和显示至少一个增强现实信息,其中增强现实信息包括至少一个全息图。

Description

用于跟踪实验室资源的方法和装置
技术领域
本发明涉及一种用于跟踪实验室资源的计算机实现的方法和跟踪系统。根据本发明的方法和装置主要可主要由实验室工作人员使用以支持和促进工作流程。其他应用通常是可行的。
背景技术
实验室操作员在日常工作中需要跟踪大量不同资源的状态。这些资源的实例是样品管、仪器、试剂盒、处理板或内部控件。资源可具有自己的身份,需要独立地进行跟踪和管理。资源可用条形码进行标记,这可允许唯一地识别对资源。
在已知的识别方法中,对条形码进行手动扫描并接收条形码上的信息。这意味着,如果操作员想要获得某个资源的信息,诸如放置在实验室仪器中的一个试剂盒的信息,操作员需要直接来到实验室仪器旁边,扫描那里的试剂盒的条形码来获得所述信息。对于样品管,可能更加困难,因为可能只有实验室信息系统(LIS)或中间件才知道样品的当前状态,例如,样品类型是什么,上次对它执行的测试是什么及其结果,或者下一个目标仪器是什么。要获得任何此类信息,操作员需要到专用的工作站(诸如个人计算机或笔记本电脑),扫描样品管条形码并获得信息。
使用平板装置或智能手机,从不同的资源获得此类信息,是本领域众所周知的。然而,这种方法不包括对基础实验室数据的聚合,因此,没有解决不同系统的不同应用需求。此外,在实验室环境中,此类装置本身的操作仍然是困难的,操作员通常需要戴上妨碍触摸屏的应用的防护手套,此外,在执行工作流程期间,操作员通常必须使用两只手:一只手处理资源,且另一只手操作平板电脑或智能手机。除了在实验室环境中操作此类触摸屏时存在的困难之外,屏幕尺寸也仍然是一个问题,在某些情况下,屏幕尺寸对于某些操作员来说可能太小。最后,为了使用实验室的不同仪器进行操作,操作员需要亲自到每台仪器前。
可佩戴式电子装置的使用在其他以及不同的技术领域中(诸如在临床工作流程的背景下)是已知的。例如,US 9,832,412 B2描述了一种用于确认流体样品的采集的系统。该系统包括配置成由用户佩戴的可佩戴式电子装置。该装置具有外壳、与外壳相关联的至少一个成像传感器、用于向外部电子装置发送数据或从外部电子装置接收数据的数据传输接口、用于管理至少一个成像传感器和数据传输接口的微处理器、以及用于获取和处理由至少一个成像传感器获取的图像的程序。该系统进一步包括用于收集样品容器中的流体样品的取样装置以及附接到取样装置或样品容器或与取样装置或样品容器一体地形成的至少一个识别标签。所述至少一个识别标签包括跟踪代码或与跟踪代码相关联。
在US 2017/0142324 A1中,提出了一种为实验室电子日志生成条目的方法。该方法包括选择实验室工作流程,该实验室工作流程指定操作员必须执行的至少一个操作。所述操作涉及一件或多件实验室装设备。该方法还包括:通过使用与操作员所佩戴的增强现实装置相关联的相机来记录操作员执行的操作的一个或多个图像或视频,以及基于所记录的一个或多个图像或视频为实验室电子日志生成条目。
在实验室分析仪的技术领域中,可佩戴式电子装置的用途,仅针对不同的问题是已知的,诸如用于协助操作员处理样品(如WO 2013/170204 A1中所述)或用于为实验室电子日志生成条目(如US 2017/0142324 A1 中所述)。此外,WO 2017/053462 A1描述了一种实时帮助系统,其在用户的图形用户界面上提供帮助信息的显示内容。
发明内容
待解决的问题
因此,本发明的目的是提供一种用于跟踪实验室中的至少一个实验室资源的计算机实现的方法和跟踪系统,其至少部分地避免了这类已知装置和方法的缺点,并且至少部分地解决了上述挑战。具体地,应公开能够对实验室资源进行简化并使操作员舒适地识别实验室资源的装置和方法。
概述内容
这个问题通过具有独立权利要求的特征的方法和装置来解决。在从属权利要求中列出了可以以单独方式或以任意组合实现的有利实施例。
如下文所使用,术语“具有”、“包括”或“包含”或其任意语法变化形式均以非排他性方式使用。因此,这些术语既可指除了由这些术语引入的特征之外,在此上下文中描述的实体中不存在其他特征的情况,也可指存在一个或多个其他特征的情况。作为示例,表述“A具有B”、“A 包括B”和“A包含B”都可指以下情况:除B之外,A中不存在其他任何元素(即,A由B单独且唯一地组成的情况),并且可指以下情况:除 B之外,实体A中还存在一个或多个其他元素,诸如元素C、元素C和D 或甚至其他元素。
此外,应注意,在引入相应的特征或元素时,表示特征或元素可存在一次或多次的术语“至少一个/种”、“一个/种或多个/种”或类似表达通常将仅使用一次。下文中,在大多数情况下,当提到相应的特征或元素时,尽管该相应的特征或元素可能存在一次或多次,但不会重复使用“至少一个/种”或“一个/种或多个/种”的表达。
此外,如下文所使用,术语“特别地”、“更特别地”、“具体地”、“更具体地”或类似的术语与任选的特征结合使用,而不限制替代的可能性。因此,由这些术语引入的特征是可选特征,并且不旨在以任何方式限制权利要求的范围。如技术人员将认识到的,本发明可通过使用替代特征来执行。同样地,由“在本发明的一实施例中”引入的特征或类似表达意指可选特征,而对于本发明的替代实施例没有任何限制,对于本发明的范围没有任何限制,并且对于将以这种方式引入的特征与本发明的其他可选或非可选特征相结合的可能性没有任何限制。
在本发明的第一方面,公开了一种用于跟踪实验室中的至少一个实验室资源的计算机实现的方法。
如本文所用,术语“计算机实现的方法”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于涉及至少一台计算机和/或至少一个计算机网络的方法。计算机和/或计算机网络可包括至少一个处理器,该处理器配置成用于执行根据本发明的方法的方法步骤中的至少一个。具体地,每个方法步骤由计算机和/或计算机网络执行。该方法可完全自动地(具体地,在没有用户交互的情况下)执行。如本文所用,术语“自动地”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于完全借助于至少一台计算机和/或计算机网络和/或机器来执行的过程,特别地,不需要手动操作和/或与用户交互。
如本文所用,术语“实验室”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于至少一个环境,该至少一个环境包括至少一个分析仪和/或配置成用于分析至少一个样品的至少一个仪器。实验室可以是配置成用于自然科学和/或工程领域中的工作的场所,从某种意义上说,实验室提供了进行相应测量和控制的机会。
如本文所用,术语“实验室资源”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于实验室中存在的任何物理对象和/或信息。实验室资源可包括选自由以下项组成的组中的至少一种元件:至少一个样品管;至少一个试剂盒;至少一个处理板;至少一个仪器;至少一个内部控制件等。如本文所用,术语“仪器”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于配置成用于分析至少一个样品的任意装置。例如,仪器可配置成用于进行至少一种化学分析。如本文所用,术语“内部控制件”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于使用至少一种质控品(特别是对照样品)的控制机构的至少一个元件,所述元件配置用于检测、减少和纠正实验室的分析过程中的一个或多个缺陷。
如本文所用,术语“跟踪”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于确定至少一个实验室资源在至少一个时间点、具体地在至少两个不同的时间点的位置和/或状态的过程。例如,跟踪可以包括确定至少一个实验室资源在任意时间点的位置和/或状态。
实验室资源包括至少一个识别特征。如本文所用,术语“识别特征”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于适于识别实验室资源的任意特征。识别特征可以是或包括实验室资源的任何方面、特征或细节。识别特征例如可以是或可包括置于其上的形状、颜色或识别标签中的一个或多个。识别特征可配置成用于在视觉上区分所述实验室资源与其他实验室资源。识别特征可包括至少一个元素或元素的组合,其配置成用于存储可识别实验室资源的一个或多个信息项,诸如以可读方式,具体地以机器可读方式。识别特征可包括光学识别特征、电子识别特征、磁性识别特征或机械识别特征中的至少一个。识别特征可包括至少一个标记。作为实例,识别特征(具体地,光学识别特征)可以是或可包括一维或二维码和/或可读信息标签中的至少一个,诸如直接地或间接地附接到实验室资源的条形码、QR码或另一种类型的代码中的一个或多个,诸如通过直接贴附于实验室资源和/或经由至少一个标贴或标签贴附于实验室资源的方式。可以使用适当的读取装置来读取存储在识别特征中的信息。识别特征可包括至少一个条形码、至少一个QR码、至少一个射频识别标签和至少一个近场通信标签中的一者或多者。
识别特征可包括识别信息。如本文所用,术语“识别信息”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于配置成用于识别实验室资源和/或实验室资源的状态的信息。作为实例,识别信息具体地可包括实验室资源的至少一个识别号码。识别信息可包括形状、颜色、条形码、RFID标签或其他标记系统中的一者或多者。如本文所用,术语“识别号码”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于编码特定实验室资源的识别信息的数组或者数字和/或字母序列中的一个或多个。对于特定实验室资源,识别号码可以是唯一的。因此,根据相应的识别号码来识别特定实验室资源是可能的。
如本文所用,术语“条形码”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于二进制光学信息,诸如光学信息的二进制序列,诸如具有不同宽度的平行线的序列、编码信息的二进制序列(诸如数字和/ 或数字和/或字母的数组)。因此,条形码可以是与背景相比具有高对比度的单色线的序列。具体地,条形码可包括白色背景上的黑色线。
如本文所用,术语“QR码”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于二进制像素的二次型的矩阵、编码信息的矩阵 (诸如数字和/或数字和/或字母的数组)。与背景相比,二次型的矩阵的像素可以具有高对比度。具体地,矩阵的像素可包括布置在白色背景上的黑色方块。进一步地,QR码可包括使QR码的读取装置能够对齐矩阵的定向指示。
如本文所用,术语“RFID标签”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于标签,其配置成用于通过利用射频电磁辐射、特别地通过利用NFC标准与读取装置交换数据信息。RFID标签可进一步包括:配置成用以接收和发射射频信号的天线,以及配置成用以存储数据信息的电子芯片(诸如微芯片)。具体地,RFID标签可以是具有电子导电线圈和任选地至少一个微芯片的柔性基板。
该方法包括以下步骤,这些步骤作为示例可以按照给定的顺序进行。然而,应当注意的是,不同的顺序也是可能的。此外,还可以一次或重复执行一个或多个方法步骤。此外,可以同时或以及时重叠的方式执行两个或更多个方法步骤。该方法可包括未列出的其他方法步骤。
该方法包括以下步骤:
a)至少一个识别步骤,其中该识别步骤包括:利用至少一个增强现实装置的至少一个成像传感器检测所实验室中的实验室资源,以及通过从识别特征接收至少一个识别信息,利用增强现实装置的至少一个识别单元来识别实验室资源;
b)至少一个数据检索步骤,其中该数据检索步骤包括经由增强现实装置的至少一个通信接口从至少一个数据服务器检索关于识别出的实验室资源的信息;
c)至少一个跟踪步骤,其中该跟踪步骤包括在增强现实装置的至少一个显示装置上生成和显示至少一个增强现实信息,其中该增强现实信息包括至少一个全息图,该全息图包含关于识别出的实验室资源的检索到的信息和/或取决于该识别出的实验室资源的检索到的信息的至少一个指令。
步骤a)至步骤c)可以全自动地执行。如本文所用,术语“全自动”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于,步骤a) 至步骤c)涉及使用至少一台计算机和/或至少一个计算机网络。具体地,步骤a)至步骤c)可在以下情况下执行:在实验室资源的识别期间,除了通过增强现实装置进行查看之外,实验室操作员不需要执行任何操作。实验室操作员可不需要在任何特定位置。具体地,在检索步骤b)中涉及的数据服务器可包括至少一台计算机、至少一个计算机网络和至少一个云服务器中的一者或多者。
如本文所用,术语“增强现实装置”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于任意装置,其配置成利用基于计算机的附加信息来增强物理对象的图像。附加信息可在下文中表示为增强现实信息。增强现实信息可包括例如视觉和/或听觉信息。增强现实信息可以是通过画中画淡入(picture-in-picture fade-in)的方式来自数据服务器的至少一个虚拟对象。增强现实信息可以是构造性的(诸如添加物)或者可以是破坏性的(诸如通过掩码)。增强现实装置可包括至少一个处理装置、至少一个显示装置、至少一个传感器(诸如至少一个成像传感器)、至少一个加速度计、至少一个陀螺仪等以及至少一个输入装置中的一者或多者。增强现实装置可包括光学投影系统,其配置成用于将增强现实信息投影给实验室操作员。
增强现实装置可以是至少一个便携式和/或可佩戴式增强现实装置。增强现实装置作为一个整体可进一步是便携式和/或可佩戴式的,使得它可以容易地定位在实验室中的感兴趣的位置。增强现实装置可以由用户(诸如由实验室操作员)佩戴。增强现实装置可包括眼镜。例如,增强现实装置可设计为微软HOLOLENSTM装置。
如本文所用,术语“成像传感器”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于具有至少一个成像元件的至少一个传感器装置,该成像元件配置成用于记录或捕获空间分辨的一维、二维或甚至三维的光学数据或信息。作为实例,成像传感器可包括至少一个相机芯片,诸如配置成用于记录图像的至少一个CCD芯片和/或至少一个CMOS芯片。成像传感器可配置成用于生成和/或记录实验室资源和/或实验室资源的至少一部分(诸如识别特征)的至少一个图像。成像传感器可以集成在增强现实装置中。如本文进一步所用的,术语“检测实验室资源”是一个广义术语且将被赋予对于本领域普通技术人员来说普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于对实验室资源和/ 或实验室资源的至少分区或部分进行成像。具体地,对实验室资源的检测可包括对物理世界上的至少一个物理对象(诸如样品管、试剂盒、仪器等)的检测。
如本文所用,术语“图像”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于通过使用成像传感器记录的数据,诸如来自成像传感器的多个电子读数,诸如相机芯片的像素。因此,图像可以是或可包括信息值的至少一个数组,诸如灰度值和/或颜色信息值的数组。图像可以是单色图像,也可以是多色或彩色图像。
步骤a)可包括:利用成像传感器对实验室资源成像;以及使用增强现实装置的至少一个处理装置来评估实验室资源的至少一个图像。因此,作为实例,增强现实装置可包括诸如一个或多个计算机、微处理器、专用集成电路(ASIC)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)的一个或多个可编程器件,该可编程器件配置成用以执行评估。所述评估可包括使用至少一个图像处理算法。
增强现实装置可包括至少一个处理装置,也表示为处理器。如本文所用,术语“处理器”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于配置成用于执行计算机或系统的基本操作的任意逻辑电路,和/ 或通常地是指配置成用于执行计算或逻辑运算的器件。特别地,处理器可配置成用于处理驱动计算机或系统的基本指令。作为实例,处理器可包括至少一个算术逻辑单元(ALU)、至少一个浮点运算单元(FPU)(诸如,算术协处理器或数值协处理器)、多个寄存器(具体地是配置成用于向ALU 提供运算对象以及存储运算结果的寄存器)以及存储器(诸如L1和L2高速缓冲存储器)。特别地,处理器可以是多核处理器。具体地,处理器可以是或可包括中央处理单元(CPU)。附加地或另选地,处理器可以是或可包括微处理器,因此,具体地,处理器的元件可以包含在单个集成电路 (IC)芯片中。附加地或另选地,处理器可以是或可包括一个或多个专用集成电路(ASIC)和/或一个或多个现场可编程门阵列(FPGA)等。处理器具体地可配置成(诸如通过软件编程)用于执行一个或多个评估操作。
该方法可包括将实验室中的增强现实装置定位在感兴趣的位置。实验室可包括多个实验室资源。在增强现实装置包括眼镜的情况下,实验室操作员可通过观看增强现实装置来将其引导到感兴趣的实验室资源中的一个。
步骤a)可包括扫描识别特征。如本文所用,术语“扫描”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于检索至少一个信息项的过程,诸如存储在识别信息中(诸如以电子格式存储)的至少一个信息项。读取操作具体地可通过电子方式进行。扫描的过程可取决于识别信息的类型。因此,在识别信息包括诸如条形码和/或QR码的光学识别信息的情况下,扫描过程可包括光学读取操作,例如通过光学扫描进行读取。在识别信息包括诸如RFID代码的电子识别信息的情况下,读取操作可包括电子读取,诸如通过近场通信(NFC)进行的读取。其他选择也是可行的。
增强现实装置包括至少一个识别单元。如本文所用,术语“识别单元”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于增强现实装置的元件或者设计为单独的装置,该单独的装置配置成用于将身份分配给成像的实验室装置。识别单元可包括至少一个读取装置。如本文所用,术语“读取装置”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于配置成用以执行如上文所定义的扫描过程的装置,诸如配置成用以读取由识别特征存储的识别信息的装置。具体地,读取装置可以是或可包括以下项中的至少一个:一维或二维扫描器、相机和/或射频读取装置(诸如NFC读取器)。读取装置可集成到增强现实装置中。附加地或另选地,读取装置可设计为单独的元件。读取装置可进一步配置成用以与识别单元通信。具体地,读取装置可配置成用以将识别信息传输到识别单元,诸如传输到识别单元的处理器。如本文所用,术语“识别”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于将至少一个身份分配给成像的实验室资源。
如本文所用,术语“通信接口”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于形成边界的物项或元件,该边界配置成用于传输信息。特别地,通信接口可配置成用于传输来自计算装置(例如计算机)的信息,诸如将信息发送或输出到例如另一装置上。附加地或另选地,通信接口可配置成用于将信息传输到计算装置上(例如传输到计算机上),诸如,以便接收信息。通信接口可具体地提供用于传输或交换信息的途径。特别地,通信接口可提供数据传输连接,例如蓝牙、NFC、电感耦合等。作为实例,通信接口可以是或可包括至少一个端口,该端口包括网络或Internet端口、USB端口和磁盘驱动器中的一者或多者。通信接口可以是至少一个Web接口。
如本文所用,术语“检索信息”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于从数据服务器接收数据和/或下载数据。具体地,在步骤b)中,通信接口可以向数据服务器发送至少一个请求,请求获得含有识别信息的关于识别出的实验室资源的信息。请求可以是基于 HTTP的请求和/或基于AMQP的请求。
数据服务器可包括至少一台计算机、至少一个计算机网络、至少一个云服务器中的一者或多者。数据服务器可部署在本地,例如内部部署,也可部署在云端。数据服务器可包括至少一个数据库。如本文所用,术语“数据库”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于通常从计算机或计算机系统以电子方式存储和访问的有组织的数据集合。数据库可包括数据存储装置,或者可由数据存储装置组成。数据库可包括至少一个数据库管理系统,该数据库管理系统包括在计算机或计算机系统上运行的软件,该软件允许与用户、应用程序或数据库本身中的一个或多个进行交互,诸如以便捕获和分析包含在数据库中的数据。数据库管理系统可进一步包括用以管理数据库的设施。因此,包含数据的数据库可由数据库系统组成,该数据库系统除了包含数据之外,还包含一个或多个相关联的应用程序。
数据服务器可配置成用于订阅由至少一个实验室仪器生成的一些事件。该方法可包括至少一个数据发布步骤。数据服务器可提供消息总线的实例,其中实验室的仪器以及实验室信息系统(LIS)和/或中间件可以以事件的形式发布信息。数据发布步骤可包括实验室的至少一个LIS和/或中间件和/或仪器在数据服务器上发布关于实验室资源和/或实验室和/或仪器的数据。数据服务器可订阅这些事件并利用它们将数据投影到数据库中,诸如投影到文档数据库中,当增强现实装置查询数据时,文档数据库将用于将数据返回给增强现实装置。数据服务器可配置成用于生成和存储数据库中接收到的事件中的所投影的数据。如本文所用,术语“数据发布步骤”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于如下过程:提供信息和/或以便允许访问信息和/或以便使信息可用于诸如数据服务器的其他装置。具体地,数据发布步骤可包括确认在数据服务器上提交的对感兴趣的实验室资源的搜索请求以及后续操作。
如本文所用,术语“事件”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于人机交互,诸如按键和/或传感器输出,诸如某个视觉信号和/或来自其他程序的软件命令。这些事件可以使程序执行具体的相应例程,而不是通过基础程序代码线性地运行。
如本文所用,术语“实验室信息系统(LIS)”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于支持实验室工作流程和数据跟踪的软件工具,该软件工具提供用于与其他系统进行数据交换的接口。
如本文所用,术语“中间件”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于计算机软件,该计算机软件提供用于在计算机的操作系统级别之上的不同应用程序之间进行通信的平台和接口。
如本文所用,术语“消息总线”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于软件基础架构,该软件基础架构允许不同的系统的,还具体地允许跨计算机的系统,经由消息传送,通过一组共享接口进行相互通信。这些消息可以是例如但不限于是数据包、信号或函数调用。
数据服务器可配置成用于提供实例,其中仪器和/或LIS和/或中间件可以有机会以事件形状发布信息。为此目的,可以使用消息总线。数据服务器可包括用于数据访问的至少一个接口,特别地,至少一个基于HTTP 的接口。具体地,数据服务器可提供RESTFul API,其可以使增强现实装置能够查询数据。RESTful API是指表述性状态转移(REST)编程范型(主要用于Web服务)的应用程序编程接口(API)。
如以上概述的,数据服务器可配置成用于订阅事件,使得可以执行对应于特定事件的定义的例程。数据服务器可配置成用于将数据投影到数据库中,当增强现实装置查询数据时,数据库可用于将数据返回给增强现实装置。除了实时跟踪数据服务器收集的数据之外,如果需要,还可以稍后用于数据分析。
增强现实装置可连接到数据服务器。针对识别出的实验室资源的信息和指令的检索和显示操作,可以完全地由与数据服务器连接的增强现实装置来执行,并且完全不需要实验室操作员执行任何操作。除了显示针对用户端的其他操作的交互式指导之外,增强现实装置还可以直接显示关于感兴趣的实验室资源的增强现实信息。
如本文所用,术语“关于识别出的实验室资源的信息”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于关于实验室资源的任何任意信息。关于识别出的实验室资源的信息可以包括选自由以下项组成的组中的至少一者:识别特征、批号、条形码、样品类型、管类型、上一个可用结果、上次执行的测试或方案、下一个目标仪器、要执行的下一个测试、有效期、从冰箱取出后的时间范围、有效性、隔室剩余容积、在机时间、剩余tick数、仪器状态、当前处理的测试或批次、当前正在处理的指令ID、已装载资源状态、相关资源、下次维护、软件版本、允许在仪器上运行的测试、上次示教、运行时间表、之前的结果、排序信息、仪器中加载的样品状态、仪器中已装载资源的状态、正在执行的运行的状态、待处理运行的列表、直到下一个结果和下次开始运行之前的估计时间。
增强现实装置还包括显示装置。如本文所用,术语“显示装置”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于配置成用于接收至少一个电信号并提供相应的视觉输出的任意装置。显示装置可包括至少一个投影仪和/或至少一个屏幕。增强现实装置可包括至少一个头戴式显示器(HMD)。显示装置可配置成用于在用户的视野范围内对物理世界、真实实验室资源和虚拟对象进行成像。
增强现实信息包括至少一个全息图,该全息图包含关于识别出的实验室资源的检索到的信息和/或取决于关于识别出的实验室资源的检索到的信息的至少一个指令。如本文所用,术语“增强现实信息”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于基于计算机的、由增强现实装置从数据服务器检索到的关于识别出的实验室资源的信息。该信息可包括例如视觉和/或听觉信息。增强现实信息可以是来自数据库的至少一个虚拟对象。增强现实信息可以是构造性的(诸如添加物)或者可以是破坏性的(诸如通过掩码)。增强现实信息可以是或可包括实验室资源的不同状态的至少一个增强现实表示。增强现实信息可以是或可包括数位信息。
如本文所用,术语“全息图”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于基于计算机的内容,该内容包括关于识别出的实验室资源的信息。如上所概述,关于识别出的实验室资源的信息可由增强现实装置从数据服务器检索,并且可由增强现实装置的显示装置(例如经由画中画淡入的方式)显示给实验室操作员。
全息图可包含至少一个虚拟对象。该全息图可包含选自由以下项组成的组的至少一个对象:识别特征、批号、条形码、样品类型、管类型、上一个可用结果、上次执行的测试或方案、下一个目标仪器、要执行的下一个测试、有效期、存储信息、有效性信息、隔间容积信息、在机时间、剩余tick、状态信息、处理信息、已装载资源状态、相关资源、维护信息、软件版本、使用情况信息、上次示教、至少一个请求、至少一个管理或控制信息、至少一个处理信息以及至少一个示教信息、至少一个指导信息。全息图可包含基础干涉图案,该干涉图案可以由相干光波的叠加而生成或可以通过算法计算。全息图的生成或呈现可能非常依赖于所使用的技术。基本上,它可以是地理定位算法与标记系统的组合。利用标签,增强现实装置可以有能力识别并记住实验室中具体资源的位置。具体地,它可以同时记住很多资源。增强现实装置可以保持跟踪增强现实装置自身的当前位置。有了这两份数据,即增强现实装置的当前地理位置和资源的地理位置,系统可以有能力在正确的位置呈现全息图。
增强现实信息包括至少一个全息图,该全息图包含取决于关于识别出的实验室资源的检索到的信息的至少一个指令。如本文所用,术语“取决于关于识别出的实验室资源的检索到的信息的指令”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于书面指令和/或命令和/或其他视觉指令,诸如图示、图像、视频等。指令可包括针对实验室的实验室操作员的指令和/或针对实验室的至少一个装置的指令。指令可包括至少一个请求、至少一个管理或控制信息、至少一个处理信息和至少一个示教信息中的一者或多者。术语“操作员”可指增强现实装置和或实验室中的任何系统的用户。
该方法可包括增强现实装置,该增强现实装置将全息图和实验室资源相关联,使得全息图显示于显示装置上的实验室资源的旁边。如本文所用,术语“关联”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于使实验室资源和全息图相关和/或组合。具体地,关联可以包括生成全息图所指的实验室资源的指示。如本文所用,术语“显示装置上的实验室资源的旁边”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于如下事实:全息图和实验室资源的位置是以直接邻近的方式显示,其中偏离直接邻近是可能的,和/或指显示装置上存在从全息图指向实验室资源的指示。增强现实装置可配置成用于在物理对象旁边呈现全息图。如以上概述的,可以通过地理定位算法、跟踪和标记的组合来执行全息图的生成或呈现。实验室资源和全息图之间的距离可能是可以配置的,但建议该距离不超过50cm。术语“在显示装置上”可包括其中全息图显示在显示装置的屏幕上的实施例,以及其中显示装置包括用于投影全息图的至少一个投影仪的实施例。
例如,实验室资源可包括样品管。全息图可包含条形码、样品类型、管类型、关于测试结果的信息、以及关于测试的信息(诸如测试方案)中的一者或多者。如本文所用,术语“测试”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于实验,诸如涉及样品管的至少一种化学分析。如所述的方法那样,这些实验也遵循编入测试方案的特定步骤顺序。它们进一步可以在过去已经被完成并且具有相应的测试结果。在该实例中,佩戴增强现实装置的实验室操作员可直接查看感兴趣的样品管。然后,增强现实装置可首先识别实验室操作员正在查看的实验室资源,诸如通过检测形状或信息标签。识别出实验室资源是样品管之后,增强现实装置就可以开始扫描识别标签。识别标签被读取之后,增强现实装置就可以向数据服务器发送基于HTTP的请求,请求获得关于所述样品管的信息。然后,数据服务器可以返回所请求的信息(如果有的话),或者在样品管未知的情况下,返回信息“无”。信息“无”可包括:表明数据库中不知道或不存在识别信息的信息,和/或关于重复步骤a)和/或更新数据库的提示。如此,增强现实装置便可在实验室资源旁边呈现全息图,显示所接收的信息,该信息包括例如信息特征、样品类型、管类型、相应的上一个可用结果、执行的测试或方案、下一个目标仪器或要执行的下一个测试。通过再次查看样品管来重复操作,在任何时间都是可能的。
例如,实验室资源可包括试剂盒。全息图可包含批号、条形码、有效期、存储信息、有效性信息和状态信息中的一者或多者。试剂盒可以是特殊的,因为,它们可能存放在冰箱中,并且在不改变其性质的情况下,只可在冰箱外停留一定的时间。因此,跟踪试剂盒从冰箱中取出多长时间可以是重要的。此外,仪器可能会由于多种原因而使试剂盒失效,并且实验室操作员需要在将试剂盒装入仪器之前了解试剂盒是否仍然有效。最后,试剂盒可以由包含不同液体的一个或多个隔室制成。有些仪器可能使用所有的隔室,有些只使用几个隔室。对于实验室操作员来说,了解每个隔室的剩余容积以便区分所述试剂盒是否足以进行特定的测试,这一点可能很重要。在该实例中,佩戴增强现实装置的实验室操作员可再次直接查看感兴趣的试剂盒。然后,增强现实装置可首先识别实验室操作员正在查看的实验室资源,诸如通过检测形状或信息标签。检测出实验室资源是试剂盒之后,增强现实装置就可以开始扫描识别标签。识别标签被读取之后,应用程序就可以向数据服务器发送基于HTTP的请求,请求获得关于所述试剂盒的信息。然后,服务器可以返回所请求的信息(如果有的话),或者在试剂盒未知的情况下,返回信息“无”。如此,增强现实装置便可在实验室资源旁边呈现全息图,显示所接收的信息,该信息包括例如批号、条形码、有效期、试剂盒从冰箱中取出多长时间、它是有效的还是无效的、每个隔室上剩余多少容积、在机时间(如果试剂盒在仪器内)或剩余tick 数,例如用途。像以前一样,通过再次查看试剂盒来重复操作,在任何时间都是可能的。
例如,实验室资源可包括至少一个仪器。全息图可包含状态信息、处理信息、维护信息、软件版本、相关资源列表和使用情况信息中的一者或多者。仪器可不包括固有的显示装置。仪器可通过部署在单独的PC或笔记本电脑上的应用程序来操作。这可能导致实验室操作员可能移动到另一位置,以便与仪器进行交互,比如在简单的状态控制期间。佩戴增强现实装置的实验室操作员可直接查看感兴趣的仪器。然后,增强现实装置可通过检测形状或标记来识别实验室操作员正在查看的实验室资源。对于仪器,可以利用标记来识别实验室操作员正在查看的仪器的类型。检测出实验室资源是仪器之后,增强现实装置就可以开始扫描序列号。序列号被读取之后,增强现实装置就可以向数据服务器发送基于HTTP的请求,请求获得关于所述仪器的信息。然后,服务器可以返回所请求的信息(如果有的话),或者在仪器未知的情况下,返回信息“无”。如此,增强现实装置便可在显示装置中,在实验室资源的旁边呈现全息图,显示所接收的信息,该信息包括例如仪器状态、当前正在处理的测试、批次或指令ID、已装载资源的状态、下一次定期维护、正在运行的软件版本、允许在其上运行的测试或上次示教。通过再次查看仪器来重复操作,在任何时间都是可能的。
如上所述,除了关于实验室资源的信息之外,增强现实信息还可包含对实验室操作员的相应指令。这些指令可包括至少一个请求、至少一个管理或控制信息、至少一个处理信息和至少一个示教信息中的一者或多者。例如,增强现实装置可以例如在对仪器进行维修时支持实验室操作员。通过数据服务器上发布的相应事件,可以导出针对实验室操作员的通知。然后,当实验室操作员查看仪器时,增强现实装置可以例如在仪器旁边显示用于指导或针对所需材料的指令。在维修模式下,增强现实装置可显示进一步的细节,诸如安全备注、服务活动的模拟或根据命令的辅助服务视频。如本文所用,术语“命令”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于由实验室操作员进行的手势和/或语言表达和/或按键动作等。如本文所用,术语“根据命令”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于由增强现实装置登记的命令,该命令作为相应后续操作的指令,后续操作诸如具体显示新的信息和/或指令。在这种情况下,实验室操作员也可有机会从一组不同的信息和/或指令中进行选择。
增强现实装置可依如下方式进行配置:实验室操作员能够根据当前位置,从诸如用户菜单、所有物或任务列表的不同交互机会中选择。然后,在执行选定的操作时,仪器可以例如唤醒、校准、打开抽屉并定位样品,或者如果是IT解决方案,可以更新库存和状态。
具体地,也可给出指导,用以更换备件。它可以通过如上所述的增强现实装置来显示,可以捕获要更换的部件和备件的ID,以及确认其适当的位置。信息可存储在数据服务器上,以用于文档记录。在整个过程中,可不需要进一步的支持,这样就可以达到显著减少现场服务工程师(FSE)的目的。
增强现实信息可用于以下目的中的一个或多个:向实验室操作员示教、改变实验室资源的状态(诸如更新仪器或修理仪器)、使样品管或试剂盒失效或确认样品管或试剂盒有效。当使用实验室资源进行测试、跟踪不同状态、故障排除目的、影响整个系统工作流程、执行系统维护、执行示教和诊断服务时,可以考虑增强现实信息。
例如,增强现实信息可用于达到改变实验室资源的目的。例如,试剂盒可能由于多种原因而失效,因此也可能被丢弃。可以通过遵循增强现实装置给出的信息和/或指令,利用实验室资源来执行某些测试。由此,还可以对实验室资源进行修改,诸如,例如试剂盒的隔室中的容积变化。具体地,对于作为实验室资源的仪器,经由增强现实信息而引导的维修和示教不仅对实验室资源,而且对实验室操作员都可产生直接影响。对仪器的修改可以是更换部件或更新软件。对实验室操作员的影响可指相应的技术知识的获得。
在本发明的另一方面,公开了一种跟踪系统。该跟踪系统包括:
-至少一个数据服务器
-至少一个增强现实装置,其中该增强现实装置包括至少一个成像传感器,该成像传感器配置成用于检测实验室中的实验室资源,其中该增强现实装置包括至少一个识别单元,该至少一个识别单元配置成用于通过从识别特征接收至少一个识别信息来识别实验室资源,其中该增强现实装置包括至少一个通信接口,其中该述通信接口配置成用于从数据服务器检索关于识别出的实验室资源的信息,其中该增强现实装置包括至少一个显示装置,其中该增强现实装置配置成用于在显示装置上生成和显示至少一个增强现实信息,其中该增强现实信息包括至少一个全息图,该全息图包含关于识别出的实验室资源的检索到的信息和/或取决于关于识别出的实验室资源的检索到的信息的至少一个指令。
具体地,分析系统可配置成用于执行根据本发明的方法和/或用于根据本发明的方法。对于跟踪系统的特征的定义和跟踪系统的任选特征,可以参考如上所公开的或下文进一步详细公开的方法的实施例中的一个或多个。
如本文所用,术语“系统”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于形成整体的一组任意的相互作用或相互依存的组件部分。具体地,组件可以彼此交互以便实现至少一个公同的功能。至少两个组件可以独立地处理,或者可以耦接或是可连接的。如本文所用,术语“跟踪系统”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于至少两个元件或组件所构成的组,它们能够相互作用以便执行实验室中的至少一个实验室资源的至少一个跟踪过程。跟踪过程可包括根据本发明的方法步骤a)至步骤c)。
在本发明的另一方面,公开了一种计算机程序,该计算机程序包含指令,当根据本发明的跟踪系统执行该程序时,诸如根据上文公开的任何一个实施例和/或根据下文进一步详细公开的任何一个实施例,所述指令使得跟踪系统执行根据本发明的方法的至少步骤a)至步骤c),所述方法诸如根据上文公开的任何一个实施例和/或根据下文进一步详细公开的任何一个实施例。
除了用户操作之外,所述方法还可包括部分地由计算机实现的且必要的步骤。对于非计算机实现的或计算机可实现的步骤,计算机程序可以隐含地提示用户执行特定行为。因此,作为实例,计算机程序可包含指令,当这些指令被执行时,提示所述用户查看实验室资源,诸如用于执行所述方法的步骤a)。作为实例,所述提示可通过例如在所述增强现实装置的显示器上可视地显示指令和/或通过其他方式(诸如通过提供可听指令)而发生。步骤b)可通过计算机程序完全地由计算机实现,特别地,只要增强现实装置连接到数据服务器。如果增强现实装置未连接到数据服务器,则可能要求实验室操作员进行连接。如果实验室资源是未知的,则在步骤b)和步骤c)中,数据服务器可能返回并显示信息“无”。如果数据服务器返回的信息表明实验室资源是未知的,则增强现实装置可提示实验室操作员更新数据服务器的数据库和/或重复步骤a)。计算机程序可包含指令,当根据本发明的跟踪系统执行该程序时,所述指令使得跟踪系统提示所述用户开始执行步骤a),必要时任选地提示用户协助执行步骤b),并且进一步地,任选地自动执行步骤c)。
本文公开并提出了一种包含可由计算机系统或计算机网络读取的指令的调制数据信号,用于执行根据本文所公开的一个或多个实施例的方法。
类似地,公开了一种计算机可读存储介质,其包含指令,当由根据本发明的跟踪系统执行时,诸如根据上文公开的任何一个实施例和/或根据下文进一步详细公开的任何一个实施例,所述指令使得分析系统执行根据本发明的方法的至少步骤a)至步骤c),诸如根据上文公开的任何一个实施例和/或根据下文进一步详细公开的任何一个实施例。对于提示用户协助某些方法步骤的选项,具体地是在步骤a)和步骤b)中,请参考关于计算机程序的描述。
如本文所用,术语“计算机可读存储介质”是一个广义术语且被赋予对本领域普通技术人员而言普通且惯常的含义,并且不限于特殊或自定义的含义。该术语具体地可以指但不限于非暂时性数据存储器件,诸如在其上存储有计算机可执行指令的硬件存储介质。计算机可读数据载体或存储介质具体地可以是或可包括存储介质,诸如随机存取存储器(RAM)和/或只读存储器(ROM)。
计算机程序还可以体现为计算机程序产品。如本文所用,计算机程序产品可以指作为可交易产品的程序。该产品一般可以任意格式(诸如纸质格式)存在,或在计算机可读数据载体上和/或在计算机可读存储介质上存在。具体地,计算机程序产品可分布在数据网络上。
所提出的方法和系统与已知的同类方法和装置相比具有大量的优点。使用能够通过不同特征来识别实验室资源的增强现实装置,实验室操作员在识别过程中不需要再接触潜在的有害实验室资源。他们可以不受干扰地进行工作流程。这尤其包括要求他们在实验室环境中佩戴安全防护手套以及使用双手的情况。针对感兴趣的实验室资源的信息和指令是由增强现实装置直接显示的,因此,向能够分析实验室资源的相应仪器的传输变得多余。具体地,考虑到此类仪器本身作为实验室资源,使用增强现实装置作为指导,进一步导致针对设备中的小规模升级,FSE的存在减少。总体而言,所述的方法和装置因此不仅允许更安全地而且还允许更快速地访问信息和指令,无论实验室操作员的位置如何,因为借助于这种方法,先前以装置为中心的访问变成了以用户为中心的访问。以这种方式,所述的方法使得实验室环境中的工作流程更安全且更高效。
总结且不排除其他可能的实施例,可以设想以下实施例:
实施例1:一种用于计算机实现的方法,该方法用于跟踪实验室中的至少一个实验室资源,其中实验室资源包括至少一个识别特征,其中该方法包括以下步骤:
a)至少一个识别步骤,其中该识别步骤包括:利用至少一个增强现实装置的至少一个成像传感器检测所实验室中的实验室资源,以及通过从识别特征接收至少一个识别信息,利用增强现实装置的至少一个识别单元来识别实验室资源;
b)至少一个数据检索步骤,其中该数据检索步骤包括经由增强现实装置的至少一个通信接口从至少一个数据服务器检索关于识别出的实验室资源的信息;
c)至少一个跟踪步骤,其中该跟踪步骤包括在增强现实装置的至少一个显示装置上生成和显示至少一个增强现实信息,其中该增强现实信息包括至少一个全息图,该全息图包含关于识别出的实验室资源的检索到的信息和/或取决于该识别出的实验室资源的检索到的信息的至少一个指令。
实施例2:根据前述实施例所述的方法,其中步骤a)至步骤c)是全自动执行的。
实施例3:根据前述实施例中任一项所述的方法,其中实验室资源包括选自由以下项组成的组中的至少一种元件:至少一个样品管;至少一个试剂盒;至少一个处理板;至少一个仪器;至少有一个内部控制件。
实施例4:根据前述实施例所述的方法,其中实验室资源包括样品管,其中全息图包含条形码、样品类型、管类型、关于测试结果的信息以及诸如测试方案的关于测试的信息中的一者或多者。
实施例5:根据前述实施例中任一项所述的方法,其中实验室资源包括试剂盒,其中全息图包含批号、条形码、有效期、存储信息、有效性信息和状态信息中的一者或多者。
实施例6:根据前述三个实施例中任一项所述的方法,其中实验室资源包括至少一个仪器,其中全息图包含状态信息、处理信息、维护信息、软件版本和使用情况信息中的一者或多者。
实施例7:根据前述实施例中任一项所述的方法,其中指令包括针对实验室的实验室操作员的指令和/或针对所述实验室的至少一个装置的指令,其中指令包括至少一个请求、至少一个管理或控制信息、至少一个处理信息和至少一个示教信息中的一者或多者。
实施例8:根据前述实施例中任一项所述的方法,其中识别特征包括至少一个条形码、至少一个QR码、至少一个射频识别标签和至少一个近场通信标签中的一者或多者。
实施例9:根据前述实施例中任一项所述的方法,其中步骤a)包括扫描识别标签。
实施例10:根据前述实施例中任一项所述的方法,其中步骤a)包括利用成像传感器对实验室资源成像,以及使用增强现实装置的至少一个处理器来评估实验室资源的至少一个图像。
实施例11:根据前述实施例中任一项所述的方法,其中数据服务器包括至少一台计算机、至少一个计算机网络、至少一个云服务器中的一者或多者。
实施例12:根据前述实施例中任一项所述的方法,其中该方法包括至少一个数据发布步骤,其中该数据发布步骤包括实验室的至少一个实验室信息系统(LIS)和/或中间件和/或仪器在所述数据服务器上发布关于实验室资源和/或实验室和/或仪器的数据。
实施例13:根据前述实施例中任一项所述的方法,其中在步骤b) 中,通信接口向数据服务器发送至少一个请求,请求获得含有识别信息的关于识别出的实验室资源的信息。
实施例14:根据前述实施例所述的方法,其中请求是基于HTTP或 AMQP的请求。
实施例15:根据前述实施例中任一项所述的方法,其中该方法包括增强现实装置将全息图和实验室资源相关联,使得全息图在显示装置上显示于实验室资源的旁边。
实施例16:根据前述实施例中任一项所述的方法,其中增强现实装置是至少一个便携式和/或可佩戴式增强现实装置,其中该方法包括将增强现实装置定位在实验室中的感兴趣的位置。
实施例17:一种用于跟踪实验室中的至少一个实验室资源的跟踪系统,其中实验室资源包括至少一个识别特征,其中跟踪系统包括:
-至少一个数据服务器
-至少一个增强现实装置,其中该增强现实装置包括至少一个成像传感器,该成像传感器配置成用于检测实验室中的实验室资源,其中该增强现实装置包括至少一个识别单元,该至少一个识别单元配置成用于通过从识别特征接收至少一个识别信息来识别实验室资源,其中该增强现实装置包括至少一个通信接口,其中该述通信接口配置成用于从数据服务器检索关于识别出的实验室资源的信息,其中该增强现实装置包括至少一个显示装置,其中该增强现实装置配置成用于在显示装置上生成和显示至少一个增强现实信息,其中该增强现实信息包括至少一个全息图,该全息图包含关于识别出的实验室资源的检索到的信息和/或取决于关于识别出的实验室资源的检索到的信息的至少一个指令。
实施例18:根据前一项实施例所述的跟踪系统,其中该跟踪系统配置成用于执行根据涉及方法的前述实施例中的任一项的方法。
实施例19:一种计算机程序,其包括指令,当由根据涉及跟踪系统的前述实施例中任一项所述的跟踪系统执行时,所述指令使得该跟踪系统执行根据涉及方法的前述实施例中任一项所述的方法的至少步骤a)至步骤c)。
20:一种计算机可读存储介质,其包括指令,当由根据涉及跟踪系统的前述实施例中任一项所述的跟踪系统执行时,所述指令使得该跟踪系统执行根据涉及方法的前述实施例中任一项所述的方法的至少步骤a)至步骤 c)。
附图说明
具体地结合从属权利要求,在随后的实施例描述中将更详细地公开进一步的任选特征和实施例。其中,如技术人员将认识到的,相应的可选特征可以以单独方式以及以任何任意可行的组合来实现。本发明的范围不受具体实施例的限制。在附图中示意性地描绘了实施例。其中,这些图中相同的附图标记指涉相同或功能上可比较的元件。
在附图中:
图1示出了用于跟踪实验室中的样品管的根据本发明的用于跟踪至少一个实验室资源的跟踪系统和方法的实施例;
图2示出了使用根据本发明的跟踪系统和方法来跟踪实验室中的试剂盒;
图3示出了使用根据本发明的跟踪系统和方法来跟踪实验室中的仪器的状态;
图4示出了根据本发明的方法的实施例的流程图;以及
图5示出了实验室中的实验室操作员的与仪器相关的可能任务的流程图。
具体实施方式
图1示出了用于跟踪实验室中样品管114的根据本发明的用于跟踪至少一个实验室资源112的跟踪系统110和方法的实施例。实验室可以是配置成用于自然科学和/或工程领域中的工作的场所,从某种意义上说,实验室提供了进行相应测量和控制的机会。
实验室资源112可包括选自由以下项组成的组中的至少一种元件:至少一个样品管;至少一个试剂盒;至少一个处理板;至少一个仪器;至少一个内部控制件等。在图1的实例中,感兴趣的实验室资源112可以是样品管114。
实验室资源112包括至少一个识别特征116。识别特征116可以是或包括实验室资源112的任何方面、特征或细节。识别特征116例如可以是或可包括置于其上的形状、颜色或识别标签中的一者或多者。识别特征 116可配置成用于在视觉上区分所述实验室资源与其他实验室资源。识别特征116可包括至少一个元素或元素的组合,其配置成用于存储可识别实验室资源的一个或多个信息项,诸如以可读方式,具体地以机器可读方式。识别特征116可包括光学识别特征、电子识别特征、磁性识别特征或机械识别特征中的至少一个。识别特征116可包括至少一个标记。作为实例,识别特征(具体地,光学识别特征)可以是或可包括一维或二维码和/ 或可读信息标签中的至少一个,诸如直接地或间接地附接到实验室资源的条形码、QR码或另一种类型的代码中的一个或多个,诸如通过直接贴附于实验室资源和/或经由至少一个标贴或标签贴附于实验室资源的方式。可以使用适当的读取装置来读取存储在识别特征116中的信息。识别特征可包括至少一个条形码、至少一个QR码、至少一个射频识别标签和至少一个近场通信标签中的一者或多者。
识别特征116可包括识别信息。作为实例,识别信息具体地可包括实验室资源112的至少一个识别号码。识别信息可包括形状、颜色、条形码、RFID标签或其他标记系统中的一者或多者。对于特定实验室资源112,识别号码,可以是唯一的。因此,根据相应的识别号码来识别特定实验室资源112是可能的。
例如,样品管114可包括至少一个条形码。条形码可包括二进制光学信息,诸如光学信息的二进制序列,诸如具有不同宽度的平行线的序列、编码信息的二进制序列(诸如数字和/或数字和/或字母的数组)。因此,条形码可以是与背景相比具有高对比度的单色线的序列。具体地,条形码可包括白色背景上的黑色线。
在图1所示的实施例中,样品管114可由仪器118(诸如预分析仪器)接纳。在所述仪器118上对样品114进行处理后,鉴于非自动化实验室的情况,实验室操作员120首先需要确认处理结果以及下一个需要接纳样品管的仪器是什么。利用已知的方法,实验室操作员120首先需要在处理样品的预分析仪器或LIS上确认处理的结果是什么,其次需要在LIS或中间件上确认哪个仪器需要接纳处理后的样品管114。这种已知的方法既费时又复杂。本发明的方法和跟踪系统110的优点是允许简化,并且对于实验室操作员120来说,可以舒适地识别实验室资源112。
跟踪系统110包括至少一个增强现实装置122。增强现实装置122可配置成利用基于计算机的附加信息来增强物理对象的图像。附加信息可在下文中表示为增强现实信息124。增强现实信息124可包括例如视觉和/或听觉信息。增强现实信息124可以是通过画中画淡入的方式来自数据服务器的至少一个虚拟对象。增强现实124信息可以是构造性的(诸如添加物)或者可以是破坏性的(诸如通过掩码)。增强现实装置122可以包括至少一个处理装置126、至少一个显示装置150、至少一个传感器128(诸如至少一个成像传感器130)、至少一个加速度计、至少一个陀螺仪等以及至少一个输入装置中的一者或多者。增强现实装置122可包括光学投影系统,其配置成用于将增强现实信息124投影给实验室操作员120。
增强现实装置122可以是至少一个便携式和/或可佩戴式增强现实装置。增强现实装置122作为一个整体还可进一步是便携式和/或可佩戴式的,使得它可以容易地定位在实验室中的感兴趣的位置。增强现实装置 122可以由用户(诸如由实验室操作员120)佩戴。增强现实装置122可包括眼镜。例如,增强现实装置122可设计为微软HOLOLENSTM装置。
增强现实装置122包括至少一个成像传感器130,该成像传感器配置成用于检测实验室中的实验室资源112。作为实例,成像传感器130可包括至少一个相机芯片,诸如配置成用于记录图像的至少一个CCD芯片和/ 或至少一个CMOS芯片。成像传感器130可配置成用于生成和/或记录实验室资源112和/或实验室资源112的至少一部分(诸如识别特征116)的至少一个图像。成像传感器130可以集成在增强现实装置122中。对实验室资源112的检测可包括对实验室资源112和/或实验室资源112的至少分区或部分进行成像。具体地,对实验室资源112的检测可包括对物理世界上的至少一个物理对象(诸如样品管114)的检测。
在图1的实施例中,佩戴增强现实装置122的实验室操作员120可直接查看样品管114,以附图标记132示出。增强现实装置122可尝试通过检测识别特征116来发现用户正在查看哪种元件。该方法可包括:利用成像传感器130对实验室资源112进行成像;以及使用增强现实装置122的至少一个处理装置126来评估实验室资源112的至少一个图像。因此,作为实例,增强现实装置122可包括诸如一个或多个计算机、微处理器、专用集成电路(ASIC)、数字信号处理器(DSP)或现场可编程门阵列(FPGA) 的一个或多个可编程器件,该可编程器件配置成用以执行评估。所述评估可包括使用至少一个图像处理算法。
检测出元件的类型之后,增强现实装置122就可以开始扫描样品管 114上的条形码,以附图标记134标示。扫描过程可包括检索至少一个信息项,诸如存储在识别信息中(诸如以电子格式存储)的至少一个信息项。读取操作具体地可通过电子方式进行。扫描的过程可取决于识别信息的类型。因此,在识别信息包括诸如条形码和/或QR码的光学识别信息的情况下,扫描过程可包括光学读取操作,例如通过光学扫描进行读取。在识别信息包括诸如RFID代码的电子识别信息的情况下,读取操作可包括电子读取,诸如通过近场通信(NFC)进行的读取。其他选择也是可行的。
增强现实装置122包括至少一个识别单元136。识别单元136可包括至少一个读取装置。读取装置可配置成用以执行如上文所定义的扫描过程,诸如作为配置成用以读取由识别特征116存储的识别信息的装置。具体地,读取装置可以是或可包括以下项中的至少一个:一维或二维扫描器、相机和/或射频读取装置(诸如NFC读取器)。读取装置可集成到增强现实装置122中。附加地或另选地,读取装置可设计为单独的元件。读取装置可进一步配置成用以与识别单元136通信。具体地,读取装置可配置成用以将识别信息传输到识别单元136,诸如传输到识别单元136的处理器。
增强现实装置122包括至少一个通信接口138。通信接口138可配置成用于传输来自计算装置(例如计算机)的信息,诸如将信息发送或输出到例如另一装置上。附加地或另选地,通信接口138可配置成用于将信息传输到计算装置上(例如传输到计算机上),诸如,以便接收信息。通信接口138可具体地提供用于传输或交换信息的途径。特别地,通信接口138可提供数据传输连接,例如蓝牙、NFC、电感耦合等。作为实例,通信接口138可以是或可包括至少一个端口,该端口包括网络或Internet端口、USB端口和磁盘驱动器中的一者或多者。通信接口138可以是至少一个Web接口。
跟踪系统110包括至少一个数据服务器140。通信接口138配置成用于从数据服务器140检索关于识别出的实验室资源112的信息。通信接口 138可以向数据服务器140发送至少一个请求,请求获得含有识别信息的关于识别出的实验室资源112的信息,以附图标记139表示。请求可以是基于HTTP的请求和/或基于AMQP的请求。
数据服务器140可包括至少一太计算机、至少一个计算机网络、至少一个云服务器中的一者或多者。数据服务器140可部署在本地,例如内部部署,也可部署在云端。数据服务器140可包括至少一个数据库。数据库可包括数据存储装置,或者可由数据存储装置组成。数据库可包括至少一个数据库管理系统,该数据库管理系统包括在计算机或计算机系统上运行的软件,该软件允许与用户、应用程序或数据库本身中的一个或多个进行交互,诸如以便捕获和分析包含在数据库中的数据。数据库管理系统可进一步包括用以管理数据库的设施。因此,包含数据的数据库可由数据库系统组成,该数据库系统除了包含数据之外,还包含一个或多个相关联的应用程序。
数据服务器140可配置成用于订阅由诸如仪器118的至少一个实验室仪器生成的一些事件。该方法可包括至少一个数据发布步骤,以附图标记 142表示。数据服务器140可提供消息总线的实例,其中实验室的仪器以及实验室信息系统(LIS)144和/或中间件146可以以事件的形式发布信息。数据发布步骤142可包括实验室的至少一个LIS 144和/或中间件146 和/或仪器在数据服务器140上发布关于实验室资源112和/或实验室和/或仪器的数据。LIS和/或中间件可发布关于工作流程和/或样品状态的数据。仪器可发布关于其状态和/或资源使用情况和/或资源装载的数据。数据服务器140可订阅这些事件并利用它们将数据投影到数据库中,诸如投影到文档数据库中,当增强现实装置122查询数据时,文档数据库将用于将数据返回给增强现实装置122。数据服务器140可配置成用于生成和存储数据库中接收到的事件中的所投影的数据。具体地,数据发布步骤142可包括确认在数据服务器140上提交的对感兴趣的实验室资源112的搜索请求以及后续操作。
事件可包括人机交互,诸如按键和/或传感器输出,诸如某个视觉信号和/或来自其他程序的软件命令。这些事件可以使程序执行具体的相应例程,而不是通过基础程序代码线性地运行。
数据服务器140可配置成用于提供实例,其中仪器和/或LIS 144和/或中间件146可以有机会以事件形状发布信息。为此目的,可以使用消息总线。数据服务器140可包括用于数据访问的至少一个接口,特别地,至少一个基于HTTP的接口。具体地,数据服务器140可提供RESTFul API,其可以使增强现实装置能够查询数据。RESTful API是指表述性状态转移 (REST)编程范型(主要用于Web服务)的应用程序编程接口(API)。
在图1所示的实例中,响应于来自增强现实装置122的请求,数据服务器140可返回关于样品管114的信息,或者在样品管114未知的情况下,返回信息“无”,参见附图标记148。
增强现实装置122包括至少一个显示装置150。显示装置150可包括至少一个投影仪和/或至少一个屏幕。增强现实装置122可包括至少一个头戴式显示器(HMD)。显示装置150可配置成用于在用户的视野范围内对物理世界、真实实验室资源和虚拟对象进行成像。
增强现实装置122配置成用于在显示装置150上生成和显示至少一个增强现实信息124。增强现实信息124包括至少一个全息图152,该全息图包含关于识别出的实验室资源112的检索到的信息和/或取决于关于识别出的实验室资源112的检索到的信息的至少一个指令。增强现实信息124 可包括例如视觉和/或听觉信息。增强现实信息124可以是来自数据库的至少一个虚拟对象。增强现实信息124可以是构造性的(诸如添加物)或者可以是破坏性的(诸如通过掩码)。增强现实信息124可以是或可包括实验室资源112的不同状态的至少一个增强现实表示。增强现实信息可以是或可包括数位信息。
利用从数据服务器140接收的数据,增强现实装置122可以在物理对象旁边呈现全息图152,以显示接受到的信息。如以上概述的,关于识别出的实验室资源的信息可由增强现实装置从数据服务器检索,并且可由增强现实装置的显示装置例如经由画中画淡入的方式显示给实验室操作员。全息图152可包含选自由以下项组成的组中的至少一个:条形码、样品类型、管类型、上一个可用结果、上次执行的测试或方案、下一个目标仪器、要执行的下一个测试、有效期、存储信息、有效性信息、状态信息、处理信息、维护信息、软件版本、使用情况信息、至少一个请求、至少一个管理或控制信息、至少一个处理信息以及至少一个示教信息。例如,对于图1的实施例,全息图152可包含条形码、样品类型、管类型、上一个可用结果、上次执行的测试或方案、下一个目标仪器、要执行的下一个测试中的一者或多者。通过再次查看样品管114来重复操作,在任何时间都是可能的。
图2示出了使用根据本发明的跟踪系统110和方法来跟踪实验室中的试剂盒154。试剂盒154可以总是存放在冰箱中,并且在不改变其性质的情况下,只可在冰箱外停留一定的时间。因此,跟踪它们未被冷藏的时间尤为重要。此外,仪器可以因为多种原因而使试剂盒154失效。在将试剂盒154装入仪器之前,实验室操作员120可能需要知道试剂盒154是否仍然有效。最后,试剂盒154可以由包含不同液体的一个或多个隔室制成。有些仪器可能会使用所有的隔室,或者只使用其中的几个隔室。对于操作员来说,为了使用或不使用试剂盒154进行混凝土试验,了解每个隔室上剩余多少容积可能很重要。
如图1中的样品管114的情况,对于此处的试剂盒154,所提供的方法和装置也为实验室操作员120提供支持,如图2所示。如关于图1所描述的,在至少一个数据发布步骤142中,仪器以及LIS 144或中间件146 可在数据服务器140上发布数据。
在这一点上应注意到,此处和以下几行中提到的元件和步骤可能与图 1中的那些元件和步骤相同,但也可能在从属于所提供的方法原理的重要性方面有所不同。例如,所述仪器可以是一个不同的仪器,在实验室中完成不同的任务,因此而发布例如其状态的不同数据。然而,对于所提供的方法来说,它仍然是一种工具的角色,所提供的方法不受这种修改的影响。
在图2的实施例中,佩戴增强现实装置122的实验室操作员120可直接查看的感兴趣的试剂盒154,以附图标记132表示。然后,增强现实装置122可以尝试通过检测该识别特征116来找出实验室操作员120正在查看哪种类型的实验室资源112。检测出类型(在这种情况下是试剂盒 154),增强现实装置122就可以开始扫描条形码,以附图标记134表示。条形码被读取之后,增强现实装置122可以向数据服务器140发送至少一个请求,请求获得含有识别信息的关于识别出的实验室资源112的信息,以附图标记139表示。在图2所示的实例中,响应于来自增强现实装置122的请求,数据服务器140可以返回关于试剂盒154的信息,或者在试剂盒154未知的情况下,返回信息“无”,参见附图标记148。增强现实装置122可以将全息图152呈现在试剂盒154旁边,以便在显示装置 150上显示增强现实信息124。增强现实信息124可包括以下项中的一者或多者:批号、条形码、有效期、在仪器内的在机时间、诸如使用情况的剩余tick数、或试剂盒154的每个隔室上的剩余容积、关于试剂盒154已从冰箱中取出多长时间的信息、或其是否仍然有效或无效都可以是这种情况下的选项。通过再次查看试剂盒154来重复操作,在任何时间都是可能的。
图3示出了使用根据本发明的跟踪系统110和方法来跟踪实验室中的仪器156的状态。并不是每个仪器都有显示器。其中一些仪器可通过部署在单独的PC或笔记本电脑上的应用程序来操作。这可能要求实验室操作员120移动到另一个位置,以便与仪器交互,或者仅仅是为了检查仪器正在做什么。根据本发明的跟踪系统110和方法通过呈现全息图152来解决这个问题,所述全息图显示其旁边仪器的当前状态。
在图3的实施例中,佩戴增强现实装置122的实验室操作员120可直接查看感兴趣的仪器156,以附图标记132表示。然后,增强现实装置 122可以尝试通过检测该识别特征116来找出实验室操作员120正在查看哪种类型的实验室资源112。在仪器156的情况下,可以利用标记来识别操作员正在查看的仪器的类型。检测出类型(在这种情况下是仪器156)之后,增强现实装置122就可以开始扫描条形码,以附图标记134表示。条形码被读取之后,增强现实装置122可以向数据服务器140发送至少一个请求,请求获得含有识别信息的关于识别出的实验室资源112的信息,以附图标记139表示。在图3所示的实例中,响应于来自增强现实装置 122的请求,数据服务器140可以返回关于仪器156的信息,或者在试剂盒154未知的情况下,返回信息“无”,参见附图标记148。增强现实装置122可以将全息图152呈现在试剂盒154旁边,以便在显示装置150上显示增强现实信息124。增强现实信息124可包括以下项中的一者或多者:仪器状态、当前正在处理的测试、批次或指令ID、下次维护、已装载资源状态(诸如已装载试剂盒上剩余多少容积或在吸头架中放入了多少吸头)、软件版本、上次示教、允许在仪器156上运行的测试、运行时间表、之前的结果、排序信息、仪器中已装载样品的状态、仪器中已装载资源的状态、正在执行的运行的状态、待处理运行的列表、直到下一个结果和下次开始运行之前的估计时间。通过再次查看仪器156来重复操作,在任何时间都是可能的。
图4示出了根据本发明的方法的实施例的流程图。具体地,图4示出了基于跟踪系统110的对事件的高度反应。本实施例涉及在仪器上进行维修。在公布了事件的情况下(以附图标记158表示),可以经由增强现实装置122直接向实验室操作员120显示通知160,以便提供指导和/或列出所需材料。在步骤162中,可以向操作员提供关于事件的位置的信息。事件反映系统中发生的事实。它是一个事实的过去式表述,之后用于系统的行为分析。位置可以是实验室资源的物理地理位置。增强现实装置122可以切换到维修模式164并且可以根据命令操作。维修模式细节166可包括指导和确认,以及维修活动的模拟、诸如标记污染区域和检查实验室操作员的位置的安全活动、辅助服务、至少一个视频。
图5示出了实验室中的实验室操作员的与仪器相关的可能任务的流程图。具体地,图5示出了基于跟踪系统110的对事件的反应的高层次视图。图5注重于实验室操作员120关于仪器的可能任务。在步骤162中,可以向操作员提供关于事件的位置的信息。全息图152可包含操作168的选择,其包括任务列表、所有物和用户菜单中的一者或多者。所有物可以是实验室操作员或客户执行任务时可能需要的物理对象或虚拟对象。实验室操作员120可以执行(表示为附图标记170)和进行操作。例如,以附图标记172表示,操作可包括唤醒仪器、校准、打开抽屉和定位样品中的一者或多者。另选地,以附图标记174表示,实验室操作员120可执行诸如库存和状态更新的IT解决方案。
附加地或另选地,全息图152可包含关于更换备件的指导。例如,可以显示指导,可以捕获部件的ID,可以捕获备件的ID,以及正确放置的确认,并将其存储以用于文档记录。这种情况可减少实验室对FSE的需求。
附图标记列表
110 跟踪系统
112 实验室资源
114 样品管
116 识别特征
118 仪器
120 实验室操作员
122 增强现实装置
124 增强现实信息
126 处理装置
128 传感器
130 成像传感器
132 直接查看实验室资源
134 扫描
136 识别单元
138 通信接口
139 请求
140 数据服务器
142 数据发布步骤
144 实验室信息系统(LIS)
146 中间件
148 返回
150 显示装置
152 全息图
154 试剂盒
156 仪器
158 事件
160 通知
162 位置
164 维修模式
166 维修模式细节
168 操作的选择
170 执行
172 操作
174 IT解决方案

Claims (16)

1.一种计算机实现的方法,所述方法用于跟踪实验室中的至少一个实验室资源(112),其中所述实验室资源(112)包括至少一个识别特征(116),其中所述方法包括以下步骤:
a)至少一个识别步骤,其中所述识别步骤包括利用至少一个增强现实装置(122)的至少一个成像传感器(130)检测所述实验室中的所述实验室资源(112),以及通过从所述识别特征(116)接收至少一个识别信息,利用所述增强现实装置(122)的至少一个识别单元(136)来识别所述实验室资源(112);
b)至少一个数据检索步骤,其中所述数据检索步骤包括经由所述增强现实装置(122)的至少一个通信接口(138)从至少一个数据服务器(140)检索关于识别出的实验室资源(112)的信息;
c)至少一个跟踪步骤,其中所述跟踪步骤包括在所述增强现实装置(122)的至少一个显示装置(150)上生成和显示至少一个增强现实信息(124),其中所述增强现实信息(124)包括至少一个全息图(152),所述全息图(152)包含关于所述识别出的实验室资源(112)的检索到的信息和/或取决于关于所述识别出的实验室资源(112)的所述检索到的信息的至少一个指令;
其中所述方法进一步包括至少一个数据发布步骤(142),其中所述数据发布步骤(142)包括所述实验室的至少一个实验室信息系统(LIS)(144)和/或中间件(146)和/或仪器(118、156)在所述数据服务器(140)上发布关于所述实验室资源(112)和/或所述实验室和/或所述仪器(118、156)的数据。
2.根据前述权利要求所述的方法,其中步骤a)至步骤c)是全自动执行的。
3.根据前述权利要求中任一项所述的方法,其中所述实验室资源(112)包括选自由以下项组成的组中的至少一种元件:至少一个样品管(114);至少一个试剂盒(154);至少一个处理板;至少一个仪器(156);至少一个内部控制件。
4.根据前述权利要求所述的方法,其中所述实验室资源包括所述样品管(114),其中所述全息图(152)包含条形码、样品类型、管类型、关于测试结果的信息以及诸如测试方案的关于测试的信息中的一者或多者。
5.根据前述两项权利要求中任一项所述的方法,其中所述实验室资源(112)包括所述试剂盒(154),其中所述全息图(152)包含批号、条形码、有效期、存储信息、有效性信息和状态信息中的一者或多者。
6.根据前述三项权利要求中任一项所述的方法,其中所述实验室资源包括(112)至少一个仪器(156),其中所述全息图(152)包含状态信息、处理信息、维护信息、软件版本和使用情况信息中的一者或多者。
7.根据前述权利要求中任一项所述的方法,其中所述指令包括针对所述实验室的实验室操作员(120)的指令和/或针对所述实验室的至少一个装置的指令,其中所述指令包括至少一个请求、至少一个管理或控制信息、至少一个处理信息和至少一个示教信息中的一者或多者。
8.根据前述权利要求中任一项所述的方法,其中所述识别特征(116)可包括至少一个条形码、至少一个QR码、至少一个射频识别标签和至少一个近场通信标签中的一者或多者。
9.根据前述权利要求中任一项所述的方法,其中步骤a)包括扫描(134)所述识别特征(116)。
10.根据前述权利要求中任一项所述的方法,其中步骤a)包括利用所述成像传感器(130)对所述实验室资源(112)成像,以及使用所述增强现实装置(122)的至少一个处理器来评估所述实验室资源(112)的至少一个图像。
11.根据前述权利要求中任一项所述的方法,其中所述数据服务器(140)包括至少一台计算机、至少一个计算机网络、至少一个云服务器中的一者或多者。
12.根据前述权利要求中任一项所述的方法,其中,在步骤b)中,所述通信接口(138)向所述数据服务器(140)发送至少一个请求(139),请求获得含有所述识别信息的关于所述识别出的实验室资源(112)的信息。
13.根据前述权利要求所述的方法,其中所述请求(139)是基于HTTP的请求和/或基于AMQP的请求。
14.根据前述权利要求中任一项所述的方法,其中所述方法包括所述增强现实装置(122)将所述全息图(152)与所述实验室资源(112)相关联,使得所述全息图(152)显示于所述显示装置(150)上的所述实验室资源(112)的旁边。
15.根据前述权利要求中任一项所述的方法,其中所述增强现实装置(122)是至少一个便携式和/或可佩戴式增强现实装置(122),其中所述方法包括将所述增强现实装置(122)定位在所述实验室中的感兴趣的位置。
16.一种用于跟踪实验室中的至少一个实验室资源(112)的跟踪系统,其中所述实验室资源(122)包括至少一个识别特征(116),其中所述跟踪系统包括:
至少一个数据服务器(140);
至少一个增强现实装置(122),其中所述增强现实装置(122)包括至少一个成像传感器(130),所述成像传感器(130)配置成用于检测所述实验室中的所述实验室资源(112),其中所述增强现实装置(122)包括至少一个识别单元(136),所述识别单元(136)配置成用于通过从所述识别特征(116)接收至少一个识别信息来识别所述实验室资源(112),其中所述增强现实装置(122)包括至少一个通信接口(138),其中所述通信接口(138)配置成用于从所述数据服务器(140)检索关于识别出的实验室资源(112)的信息,其中所述增强现实装置(122)包括至少一个显示装置(150),其中所述增强现实装置(112)配置成用于在所述显示装置(150)上生成和显示至少一个增强现实信息(124),其中所述增强现实信息(124)包括至少一个全息图(152),所述全息图(152)包含关于所述识别出的实验室资源(112)的检索到的信息和/或取决于关于所述识别出的实验室资源(112)的所述检索到的信息的至少一个指令。
CN202110318891.5A 2020-03-26 2021-03-25 用于跟踪实验室资源的方法和装置 Pending CN113448434A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP20165929.9A EP3886112A1 (en) 2020-03-26 2020-03-26 Method and devices for tracking laboratory resources
EP20165929.9 2020-03-26

Publications (1)

Publication Number Publication Date
CN113448434A true CN113448434A (zh) 2021-09-28

Family

ID=70049895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110318891.5A Pending CN113448434A (zh) 2020-03-26 2021-03-25 用于跟踪实验室资源的方法和装置

Country Status (4)

Country Link
US (1) US20210304886A1 (zh)
EP (1) EP3886112A1 (zh)
JP (1) JP7324794B2 (zh)
CN (1) CN113448434A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240020626A1 (en) * 2022-07-14 2024-01-18 ThirdEye Gen, Inc Augmented reality system for supply chain operational environments

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8710958B2 (en) * 2008-07-10 2014-04-29 Abbott Laboratories Containers having radio frequency identification tags and method of applying radio frequency identification tags to containers
WO2011154072A1 (en) * 2010-06-10 2011-12-15 Sartorius Stedim Biotech Gmbh Assembling method, operating method, augmented reality system and computer program product
US10867274B2 (en) * 2011-12-14 2020-12-15 Abbott Laboratories System and method for automated laboratory inventory management using RFID technology
WO2013170204A1 (en) 2012-05-11 2013-11-14 Siemens Healthcare Diagnostics Inc. Augmented reality for workflow assistance
JP6669658B2 (ja) 2014-01-29 2020-03-18 ベクトン・ディキンソン・アンド・カンパニーBecton, Dickinson And Company 臨床的な使用時に収集確認およびサンプル追跡を行うためのシステムおよび方法
US9832412B2 (en) 2014-01-29 2017-11-28 Becton, Dickinson And Company System and method for collection confirmation and sample tracking at the clinical point of use
CN108291921B (zh) 2015-08-25 2020-12-01 株式会社日立高新技术 自动分析装置以及检测体检查自动化系统
US10725801B2 (en) 2015-09-23 2020-07-28 IntegenX, Inc. Systems and methods for live help
EP3171302A1 (en) 2015-11-18 2017-05-24 F. Hoffmann-La Roche AG A method for generating an entry for an electronic laboratory journal
JP2017187962A (ja) 2016-04-07 2017-10-12 株式会社島津製作所 拡張現実技術を用いた装置説明用プログラム
IL251134B (en) * 2016-05-17 2018-03-29 Sheena Haim A system and method for monitoring and managing laboratory procedures
US11099057B2 (en) * 2016-09-01 2021-08-24 Imam Abdulrahman Bin Faisal University Grossing workstation with electronic scale
US11250947B2 (en) * 2017-02-24 2022-02-15 General Electric Company Providing auxiliary information regarding healthcare procedure and system performance using augmented reality
EP3782013A1 (en) * 2018-04-14 2021-02-24 The California State University - San Marcos Hands on laboratory and demonstration equipment with a hybrid virtual/augmented environment, along with their methods of use
WO2019226688A1 (en) * 2018-05-22 2019-11-28 Agilent Technologies, Inc. Method and system for implementing augmented reality (ar)-based assistance within work environment
WO2020163218A1 (en) * 2019-02-04 2020-08-13 Beam Therapeutics Inc. Systems and methods for implemented mixed reality in laboratory automation
US11705226B2 (en) * 2019-09-19 2023-07-18 Tempus Labs, Inc. Data based cancer research and treatment systems and methods

Also Published As

Publication number Publication date
US20210304886A1 (en) 2021-09-30
JP2021157797A (ja) 2021-10-07
JP7324794B2 (ja) 2023-08-10
EP3886112A1 (en) 2021-09-29

Similar Documents

Publication Publication Date Title
AU2021201311B2 (en) Method and system for monitoring operation of instruments using a transceiver over a communication network
US9674050B2 (en) Handheld device for on-site datacenter management
EP3832569A1 (en) System and method for automated laboratory inventory management using rfid technology
US20120278242A1 (en) System and method for providing product data collection, monitoring, and tracking
US9665956B2 (en) Graphically based method for displaying information generated by an instrument
CN109545366B (zh) 用于汇总诊断分析仪相关信息的方法和系统
CN102243692A (zh) 医疗会议系统及方法
US9613233B1 (en) Interactive industrial maintenance, testing, and operation procedures
JP6641352B2 (ja) 自動分析装置
US20180268924A1 (en) Methods for laboratory sample tracking and devices thereof
JP7324794B2 (ja) 研究室資源を追跡するための方法およびデバイス
JP2024032936A (ja) 検体検査システム
WO2008007597A1 (fr) Système d'analyse
CN100433028C (zh) 图像管理系统和图像管理方法
CN112272836A (zh) 信息处理装置、图像数据生成装置、信息处理系统、信息处理方法和程序
JP2013207492A (ja) 携帯端末装置
JP7500661B2 (ja) コンピュータ装置、制御方法、およびコンピュータプログラム
TWM589830U (zh) 檢測試片無線射頻辨識防偽裝置
JP7303385B2 (ja) 患者サンプルに対する不変台帳ベースのワークフロー管理
JP2023080836A (ja) 記録システム、サーバ装置、作業者装置、および記録方法
CN116964686A (zh) 用于光学检查的处理装置和检查设备以及对应的方法
JP2017041089A (ja) 情報管理システム、情報管理プログラム、情報管理方法、及び情報処理装置
JP2024521347A (ja) 時間トラッキング装置およびラボラトリシステム
US20190341128A1 (en) Secure system for coordinating and providing blood sample analysis
JP2011044162A (ja) Icタグリーダ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination