CN118140133A - 用于经改良的光学分析物测量的方法和系统 - Google Patents
用于经改良的光学分析物测量的方法和系统 Download PDFInfo
- Publication number
- CN118140133A CN118140133A CN202280070974.XA CN202280070974A CN118140133A CN 118140133 A CN118140133 A CN 118140133A CN 202280070974 A CN202280070974 A CN 202280070974A CN 118140133 A CN118140133 A CN 118140133A
- Authority
- CN
- China
- Prior art keywords
- test strip
- video stream
- identifying
- vial
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000005259 measurement Methods 0.000 title claims abstract description 129
- 230000003287 optical effect Effects 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 99
- 239000012491 analyte Substances 0.000 title claims abstract description 70
- 238000012360 testing method Methods 0.000 claims abstract description 196
- 230000008021 deposition Effects 0.000 claims abstract description 58
- 239000012530 fluid Substances 0.000 claims abstract description 57
- 239000003153 chemical reaction reagent Substances 0.000 claims abstract description 37
- 230000004044 response Effects 0.000 claims abstract description 30
- 230000004913 activation Effects 0.000 claims abstract description 10
- 230000003213 activating effect Effects 0.000 claims abstract description 5
- 239000003550 marker Substances 0.000 claims abstract description 5
- 230000008859 change Effects 0.000 claims description 21
- 230000008569 process Effects 0.000 description 52
- 238000004891 communication Methods 0.000 description 17
- 238000001514 detection method Methods 0.000 description 11
- 239000008280 blood Substances 0.000 description 8
- 210000004369 blood Anatomy 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 238000012549 training Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- WQZGKKKJIJFFOK-GASJEMHNSA-N Glucose Natural products OC[C@H]1OC(O)[C@H](O)[C@@H](O)[C@@H]1O WQZGKKKJIJFFOK-GASJEMHNSA-N 0.000 description 5
- 238000013500 data storage Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 239000008103 glucose Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000004061 bleaching Methods 0.000 description 2
- 210000001124 body fluid Anatomy 0.000 description 2
- 239000010839 body fluid Substances 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 239000012466 permeate Substances 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 230000018044 dehydration Effects 0.000 description 1
- 238000006297 dehydration reaction Methods 0.000 description 1
- 206010012601 diabetes mellitus Diseases 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 238000003487 electrochemical reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 125000002791 glucosyl group Chemical group C1([C@H](O)[C@@H](O)[C@H](O)[C@H](O1)CO)* 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 238000012956 testing procedure Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/75—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated
- G01N21/77—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator
- G01N21/78—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator producing a change of colour
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/8483—Investigating reagent band
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/01—Arrangements or apparatus for facilitating the optical investigation
- G01N2021/0106—General arrangement of respective parts
- G01N2021/0118—Apparatus with remote processing
- G01N2021/0143—Apparatus with remote processing with internal and external computer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N2201/00—Features of devices classified in G01N21/00
- G01N2201/02—Mechanical
- G01N2201/022—Casings
- G01N2201/0221—Portable; cableless; compact; hand-held
Landscapes
- Health & Medical Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Pathology (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Immunology (AREA)
- Plasma & Fusion (AREA)
- Chemical Kinetics & Catalysis (AREA)
- Engineering & Computer Science (AREA)
- Molecular Biology (AREA)
- Investigating Or Analysing Materials By The Use Of Chemical Reactions (AREA)
- Investigating Or Analysing Biological Materials (AREA)
Abstract
本公开涉及一种用于测量分析物的方法,所述方法包括:基于与描绘在由相机生成的视频流中的测试条相关联的至少一个配准标记,识别所述视频流中的所述测试条;基于所述视频流,识别流体剂量向形成在所述测试条上的沉积位点的施加;响应于识别到所述流体剂量的所述施加,激活定时器;生成位于所述测试条上的测量位点处的试剂的至少一个光学测量;以及,仅响应于在所述定时器的激活后预定最小时间段已经过之后且预定最大时间段经过之前生成所述试剂的所述至少一个光学测量,基于所述至少一个光学测量,生成所述流体剂量中的分析物的测量。
Description
技术领域
本公开一般而言涉及分析物测量系统领域,并且更具体地,涉及帮助用户执行分析物测量过程的光学测量系统。
背景技术
本领域已知的分析物测量系统能够使用电子装置和一种或多种电化学反应分析用户所提供的体液剂量,以识别用户体内的一种或多种分析物的水平。这些分析物测量系统对于个人用户准确测量流体样品(即,生物或环境样品)中的分析物提供了显著益处。一些分析物测量系统使用带有化学试剂的测试条。在接收到包含分析物的流体剂量后,试剂与分析物之间的化学反应使试剂的颜色发生变化,其中颜色变化基于分析物的浓度而变化,这继而提供对分析物的测量。尽管以这种方式测量了许多分析物,但流体剂量中所测量的分析物的一个具体实例为葡萄糖,该葡萄糖作为糖尿病监测和治疗的一部分在体液剂量中测量。
颜色发生变化的旧测试条系统依赖于人类观察者通过观察试剂中颜色的变化来判断分析物测量,通常在印刷的比色标帮助下进行。这种手动系统可能会出现准确度降低和基于不同人类观察者的感知的测量不一致的问题。最近,已开发出使用相机观察试剂的自动分析物测量装置,以提供分析物测量准确度的改善。例如,广泛使用的智能手机包括光学传感器和数字图像处理硬件,当智能手机执行特定配置的分析物测量软件应用程序时,这些传感器和硬件使智能手机能够生成测试条中分析物的测量值。
尽管使用特定配置的光学测量装置改进了分析物测量,但在确保测量过程的准确度方面仍然存在挑战。一个此类挑战出现在确保测试条的光学测量在测试条接收到流体剂量的剂量之后适当时间进行。过早进行的光学测量可能不准确,因为试剂没有足够的时间完成与分析物的化学反应,但如果光学测量进行得太晚,则试剂可能会经历干燥或漂白,从而影响试剂的颜色。即使测试条和分析物测量装置完全可操作,上述任何一种情况都可能导致不准确的分析物测量结果。因此,对克服这些挑战的光学分析物测量系统的改进将是有益的。
发明内容
在一个实施例中,已开发出一种用于测量分析物的方法。该方法包括:基于与描绘在由相机生成的视频流中的测试条相关联的至少一个配准标记,用处理器识别视频流中的测试条;基于视频流,用处理器识别流体剂量向形成在测试条上的沉积位点的施加;响应于识别到流体剂量的施加,用处理器激活定时器;用光学传感器生成位于测试条上的测量位点处的试剂的至少一个光学测量;以及仅响应于在定时器的激活后预定最小时间段已经过之后且在定时器的激活后预定最大时间段经过之前生成至少一个光学测量,基于试剂的至少一个光学测量,用处理器生成流体剂量中的分析物的测量值。
在进一步的实施例中,该方法包括:基于测试小瓶的轮廓形状或位于描绘在由相机生成的视频流中的小瓶上的至少一个配准标记中的至少一者,用处理器识别视频流中的小瓶;基于位于小瓶的盖上的至少一个配准标记,用处理器识别视频流中的小瓶的开口;以及基于与描绘视频流中的测试条相关联的至少一个配准标记,在识别视频流中的小瓶的开口之后,用处理器识别测试条从小瓶中的取出。
在该方法的进一步的实施例中,与小瓶相关联的至少一个配准标记进一步包括形成在小瓶的标签上的标识符。
在该方法的进一步的实施例中,位于小瓶的盖上的至少一个配准标记进一步包括形成在盖的内表面上的色标。
在该方法的进一步的实施例中,与测试条相关联的至少一个配准标记进一步包括形成在测试条的面上相对于沉积位点的预定位置处的印刷标记。
在进一步的实施例中,该方法包括:基于形成在测试条该面上的印刷标记不存在,用处理器识别测试条的相反侧暴露在视频流中;以及用处理器和输出装置生成输出消息,该输出消息指示应旋转测试条以暴露测试条的带有印刷标记的该侧。
在该方法的进一步的实施例中,与测试条相关联的至少一个配准标记进一步包括形成在固持测试条的色卡的后表面上的标识符。
在进一步的实施例中,识别剂量的施加的方法包括:用处理器识别视频流中的用户的手指;以及用处理器识别视频流中的手指与沉积位点之间的接触;以及响应于在手指与沉积位点之间的接触之后视频流中的沉积位点的光学特性的变化,用处理器识别剂量的施加。
在进一步的实施例中,识别施加剂量的方法进一步包括响应于视频流中的沉积位点的光学特性的变化,用处理器识别剂量的施加。
在进一步的实施例中,识别剂量的施加的方法进一步包括响应于视频流中的手指与沉积位点之间的接触,用处理器识别剂量的施加。
在进一步的实施例中,该方法包括:响应于在预定最小时间段已经过之后且在预定最大时间段经过之前没有生成测量位点的光学测量,用处理器和输出装置生成输出消息,该输出消息通知用户无法完成流体剂量中的分析物的测量。
在该方法的进一步的实施例中,生成测量值的光学传感器为生成视频流的相机。
在该方法的进一步的实施例中,生成测量值的光学传感器为不同于生成视频流的相机的相机。
在该方法的进一步的实施例中,相机结合于可穿戴电子装置中,且光学传感器结合于移动电子装置中。
在进一步的实施例中,已开发出一种测量分析物的系统。该系统包括可穿戴电子装置和移动电子装置。可穿戴电子装置包括配置为生成视频流的相机和配置为将视频流发送至移动电子装置的发送器。该移动电子装置包括:配置为接收从可穿戴电子装置发送的视频流的接收器;配置为生成光学测量的光学传感器;配置为储存程序指令的存储器;以及可操作地连接至接收器、光学传感器和存储器的处理器。处理器配置为执行程序指令以基于与描绘在视频流中的测试条相关联的至少一个配准标记,识别视频流中的测试条;基于视频流,识别施加流体剂量至形成在测试条上的沉积位点;响应于流体剂量的施加而激活定时器;用光学传感器生成位于测试条上的测量位点处的试剂的至少一个光学测量;以及仅响应于在定时器的激活后预定最小时间段已经过之后且在定时器的激活后预定最大时间段经过之前生成至少一个光学测量,基于试剂的至少一个光学测量,生成流体剂量中的分析物的测量值。
在进一步的实施例中,处理器进一步配置为基于位于描绘在由相机生成的视频流中的小瓶上的至少一个配准标记,识别视频流中的小瓶,基于测试小瓶的轮廓形状或位于小瓶的盖上的至少一个配准标记中的至少一者,识别视频流中的小瓶的开口,以及基于与描绘在视频流中的测试条相关联的至少一个配准标记,在识别视频流中的小瓶的开口之后,识别测试条从小瓶中的取出。
在该系统的进一步的实施例中,与小瓶相关联的至少一个配准标记进一步包括形成在小瓶的标签上的标识符。
在该系统的进一步的实施例中,位于小瓶的盖上的至少一个配准标记进一步包括形成在盖的内表面上的色标。
在该系统的进一步的实施例中,与测试条相关联的至少一个配准标记进一步包括形成在测试条的表面上相对于沉积位点的预定位置处的标识符。
在进一步的实施例中,处理器配置为基于形成在测试条的表面上的标识符不存在,识别测试条的相反侧暴露在视频流中;以及用输出装置生成输出消息,该输出消息指示应旋转测试条以暴露测试条的带有标识符的表面。
在该系统的进一步的实施例中,与测试条相关联的至少一个配准标记进一步包括形成在固持测试条的色卡的后表面上的标识符。
在进一步的实施例中,处理器配置为识别视频流中的用户的手指,识别视频流中的手指与沉积位点之间的接触,以及响应于在手指与沉积位点之间的接触之后视频流中的沉积位点的光学特性的变化,识别剂量的施加。
在进一步的实施例中,处理器配置为响应于视频流中的沉积位点的光学特性的变化,识别剂量的施加。
在进一步的实施例中,处理器配置为响应于视频流中的手指与沉积位点之间的接触,识别剂量的施加。
在进一步的实施例中,该系统包括:输出装置,其在可穿戴电子装置或移动电子装置中的至少一者中;处理器,其可操作地连接至输出装置并且进一步配置为响应于在预定最小时间段已经过之后且在预定最大时间段经过之前没有生成测量位点的光学测量,生成输出消息,该输出消息通知用户无法完成流体剂量中的分析物的测量。
附图说明
当考虑下列详细说明时,除上述以外的优点、效果、特征和目的将变得更加显而易见。此类详细说明参考以下附图,其中:
图1为描绘分析物测量系统中的部件的图,该系统使用可穿戴电子装置和移动电子装置来识别在分析物测量过程期间测试条何时接收剂量。
图2为描绘图1的可穿戴电子装置和移动电子装置的部件的示意图。
图3为分析物测量系统的操作的流程的框图。
图4为当小瓶打开并从小瓶中取出测试条时容纳测试条的小瓶的一系列视图。
图5为接收流体剂量的测试条的一系列视图。
图6为放置于色卡中以接收流体剂量的测试条的一系列视图。
具体实施方式
由下列实施方式,将更好地理解这些及其它优点、效果、特征和目的。在说明书中,参考附图,这些附图构成本发明的一部分,并且其中以说明而非限制的方式显示本发明概念的实施例。对应的附图标记在附图中的多个视图中指示对应的部分。
尽管本发明概念允许各种修改和替代形式,但其示例性实施例在附图中以实例的方式显示并在本文中详细说明。然而,应理解,以下示例性实施例的描述并非旨在使本发明概念限于所公开的特定形式,而是相反地,是意在涵盖落于如本文所述实施例和下述实施例中所定义的发明的精神和范畴内的所有优点、效果和特征。因此,为了解释本发明概念的范围,应参考本文所述的实施例和下述的实施例。如此,应注意的是,本文所述的实施例可具有在解决其他问题中有用的优点、效果和特征。
现将在下文中参考附图(其中显示本发明概念的某些但并非所有的实施例)而更完整地描述装置、系统和方法。实际上,可以许多不同形式来具体化装置、系统和方法,且不应被解释为限于本文所提出的实施例;反而是,提供这些实施例以便使本公开满足适用的法律要件。
同样地,得益于前述说明书和相关附图呈递的教示,本领域技术人员中的一者将想到本文所述的装置、系统和方法的许多修改和其他实施例。因此,应理解的是,装置、系统和方法并不限于所公开的具体实施例,且修改和其他实施例意在包括在实施例的范畴内。尽管本文中采用特定术语,但它们是仅作一般性和描述性意义的用途而非用于限制的目的。
除非另有定义,否则本文所使用的全部的技术和科学术语具有与具有本公开本领域技术人员中的一者一般理解的相同意义。尽管与本文所述那些方法或材料相似或等同的任何方法和材料都可用于该方法的实施或测试,但优选的方法和材料叙述在本文中。
再者,不定冠词“一个”或“一种”所指的部件并不排除存在一个以上的部件的可能性,除非上下文明确要求只有一个部件。因此,不定冠词“一个”或“一种”通常意指“至少一个”。同样地,术语“具有”、“包含”或“包括”或其任何任意文法变化以非排他性方式使用。因此,这些术语既可指其中除了通过这些术语所引入的特征之外,在本文中描述的实体中并无进一步特征存在的情形,也可指其中存在一个或多个进一步特征的情形。举例而言,表述“A具有B”、“A包含B”和“A包括B”既可指其中除了B之外无其他部件存在于A中的情形(即,其中A仅由和排他性地由B组成的情形)或可指其中除了B之外一个或多个其他部件(诸如部件C、部件C和D或甚至其他部件)存在于A中的情形。
如本文所用,术语“移动电子装置”指向用户提供以下部件中的每一者中的一项或多项的便携式计算装置:由移动电子装置中的一个或多个处理器控制的输出装置、输入装置、存储器和无线通信装置。如本文所用,术语“可穿戴电子装置”指一种移动电子装置,其进一步经适配以由人类用户以类似于眼镜、衣服、手表或珠宝的方式佩戴。输出装置的实例包括但不限于液晶显示器(LCD)显示器、有机或无机发光二极管(LED)显示器以及其他形式的图形显示装置、音频扬声器和触觉回馈装置。输入装置的实例包括但不限于按钮、键盘、触控屏幕和音频麦克风。存储器的实例包括但不限于诸如随机存取存储器(RAM)之类的易失性数据储存装置和诸如磁盘、光盘之类的非易失性数据储存装置以及包括EEPROM、NAND快闪的固态储存装置或其他形式的固态数据储存装置。无线通信装置的实例包括但不限于使用近场通信(NFC)协议、蓝牙协议家族(包括低功耗蓝牙(BLE))、IEEE 802.11协议家族(“Wi-Fi”)和蜂窝数据传输标准(“4G”、“5G”等)运行的无线收发器。处理器的实例包括数字逻辑装置,其实现一个或多个中央处理单元(CPU)、图形处理单元(GPU)、神经网络处理器(NPU)、数字信号处理器(DSP)、现场可程序化逻辑门阵列(FPGA)、应用程序特定集成电路(ASIC),以及整合式装置中的任何其他合适的数字逻辑装置或作为一起运行以实现处理器的装置的组合。移动电子装置的常见实例包括但不限于智能手机、平板计算装置和笔记本电脑。可穿戴电子装置的常见实例包括但不限于智能手表和智能眼镜。
图1描绘了包括可穿戴电子装置104和移动电子装置140的分析物测量系统100。在操作期间,可穿戴电子装置104生成视频流,该视频流使移动电子装置140能够追踪容纳一个或多个测试条170的小瓶160,以识别测试条170何时接收到流体剂量,诸如来自人类测试受试者的手指190的血液剂量。如下文进一步详细描述的,系统100在检测到流体剂量向测试条170的一侧上的沉积位点172的施加时激活定时器,以使移动电子装置140中的光学传感器142能够在经过预定最小时间之后和经过预定最大时间之前生成测试条相反侧170’上测量位点178的光学测量。
在图1中,测试条170包括用户提供液体血液样品处的沉积位点172。测试条170还包括配准标记174,其被描绘为在测试条170的表面上相对于沉积位点172的预定位置处的标识符箭头形式的印刷标记。孔176也穿过测试条170的一端形成。配准标记174能够有效地识别和追踪测试条170,包括识别视频流中的测试条170的哪一侧朝向相机。在图1的说明性实例中,仅测试条170的一侧配置为接收血液样品,并且配准标记174仅形成在测试条170的这一侧上,但是在替代实施例中,测试条可以配置为在测试条的任一侧上接收血液剂量。测试条相反侧170’指相同的测试条170,但包括测量位点178和孔176的测试条的相反侧在视野中。当测试条相反侧170’在视野中时,配准标记箭头标识符174和沉积位点172对于相机108都是不可见的。在一些实施例中,系统100可以检测到测试条相反侧170’暴露于相机108。在测试条170中,沉积位点172提供流体入口,该流体入口使流体剂量能够渗透入测试条中的一个或多个内部层,从而能够与测试条中的一种或多种试剂发生化学反应。内部层的实例包括例如过滤器和与流体剂量中的一种或多种分析物反应的不同化学试剂的层。测量位点178为形成在测试条相反侧170’上的光学暴露区域,其响应于从沉积位点172渗透入测试条的流体剂量中的分析物水平而改变颜色。在一种配置中,试剂直接暴露在测量位点178处,而在另一配置中,诸如膜之类的光透层覆盖试剂同时提供光学孔径。两种配置都能够生成试剂的光学测量,以检测由于与流体剂量中的分析物反应而引起的试剂的颜色变化。
参考图1并参考图2中的示意图,在系统100的一个实施例中,可穿戴电子装置104体现为一副眼镜,也称为“智能眼镜”,但包括智能手表在内的其他形式的可穿戴电子装置可以替代配置使用。可穿戴电子装置104包括类似于传统眼镜的镜框和任选镜片。可穿戴电子装置104还包括相机108、位置传感器112和抬头显示器(HUD)116,它们各自可操作地连接至电子控制单元120。相机108为例如CMOS或其他合适的数字成像装置,其生成与佩戴可穿戴电子装置104的人的视野相对应的可穿戴电子装置104前面区域的图像和视频流。在一些实施例中,单个单色或彩色相机将视频流生成为二维视频流。在其他实施例中,相机108进一步配置为生成提供三维物体数据的视频流。在一种配置中,相机108进一步结合两个或更多个提供立体视频的相机,并且在另一配置中,相机108包括提供与视频流中的物体相对应的三维深度信息的深度传感器。位置传感器112包括例如微机电(MEM)三轴陀螺仪和一个或多个加速计,它们提供数据以识别可穿戴电子装置104在操作期间的空间定向。HUD 116向佩戴者提供视觉输出,而不需要佩戴者将他或她的目光转向特定显示装置。尽管图1描绘了与可穿戴电子装置104中的玻璃镜片分离的HUD 116,但替代配置提供了一种或多种整合至镜片中或将图形输出投影到镜片上的视觉显示装置。尽管未进一步详细描绘,可穿戴电子装置104也任选地包括音频输出装置。
电子控制单元120容纳至少一个可穿戴电子装置处理器204,该电子控制单元可操作地连接至相机108、位置传感器112和HUD 116。电子控制单元120还容纳可操作地连接至可穿戴电子装置处理器204的存储器208和通信收发器228。在图2的实施例中,存储器208储存控制可穿戴电子装置104的操作的固件指令212。通信收发器228包括发送器,该发送器能够将包括视频流的数据发送至移动电子装置140中的对应通信收发器258。通信收发器228还包括接收器,该接收器使可穿戴电子装置104能够从移动电子装置140接收数据,并且特别地,能够从移动电子装置140接收消息以供由HUD 116向用户显示。在图2的说明性实例中,通信收发器228为蓝牙或低功耗蓝牙无线数据通信收发器,但是替代配置可以使用不同的无线通信标准或者可以采用诸如通用串行总线(USB)之类的有线连接接口。
参考图1和参考图2中的示意图,在系统100的一个实施例中,移动电子装置140还包括移动电子装置处理器224,该移动电子装置处理器可操作地连接至定时器226、存储器232、通信收发器258、光学传感器142以及一个或多个显示器和用户输入/输出(I/O)装置146。移动电子装置140可操作地连接至可穿戴电子装置104,前者使用收发器258与可穿戴电子装置104中的对应收发器228通信。
在移动电子装置140中,光学传感器142为例如生成测试条170的静止图像或视频的数字相机,该测试条包括位于测试条相反侧170’的测量位点178,并且任选地包括色卡180以生成至少一个光学测量用于分析以测量施加至测试条的流体剂量中的分析物水平。虽然可穿戴电子装置104中的光学传感器142和相机108在一些实施例中可以配置为具有类似的硬件,但在图1的配置中,相机108被配置用于生成视频流,该视频流捕获包括小瓶160、测试条170和沉积位点172,任选地包括色卡180和手指190的整个场景,用于识别测试条170接收流体剂量的时间。光学传感器142配置为在流体剂量的施加后适当时间,生成在测试条相反侧170’上的测量位点178的一个或多个光学测量,以向分析物测量过程提供输入。光学测量为例如包括测试条相反侧170’上的测量位点178的数字照片。因此,相机108提供分析物测试过程中使用的多个部件的更广阔视野,而光学传感器142提供测试条170上的试剂的更详细的数字图像或视频以及任选地提供在色卡180上提供的校正数据。在替代配置中,单个相机执行可穿戴电子装置104中的相机108和移动电子装置140中的光学传感器142两者的功能。例如,单个相机可以被重新配置为生成具有降低的分辨率的视频流,用于识别和追踪小瓶160、测试条170、色卡180和手指190,以使移动电子装置140能够识别测试条170接收流体剂量的时间。随后,单个相机可以以更高的分辨率操作以单独或与色卡180结合来捕获测试条相反侧170’的一个或多个高画质图像,从而为分析物测量过程提供输入。
在移动电子装置140中,用户输入/输出(I/O)装置146包括触控屏幕显示装置,其向用户提供图形输出并接收触控输入以控制移动电子装置140的操作,并且更具体地,以为分析物测量过程提供输入。I/O装置的其他实例包括用于语音输入的麦克风和用于音频输出的扬声器、机械按钮等。在一些配置中,可穿戴电子装置104实现诸如音频输入装置或手势追踪输入装置之类的用户I/O装置,该可穿戴电子装置使用相机108记录相机108发送到移动电子装置140的来自用户的输入。可穿戴电子装置104还可以从移动电子装置140接收输出资料以供经由HUD 116向用户显示。
在移动电子装置140中,定时器226使移动电子装置处理器224能够在操作期间保持对经过时间计数,这包括对从测试条170接收流体剂量开始的经过时间进行计数,以确保用于分析物测量的试剂的光学测量在预定最小时间已经过之后和预定最大时间经过之前发生。尽管出于说明性目的将定时器226描绘为离散部件,但在许多实际实施例中,定时器226作为定时器电路整合至移动电子装置处理器224中或作为软件定时器实现。
在移动电子装置140中,存储器232包括一个或多个非易失性和易失性数据储存装置。在图2的配置中,存储器232储存应用软件250和操作系统软件254,它们两者都包括供移动电子装置处理器144执行的指令。应用软件250包括实现用户接口和分析物分析程序的指令,以基于对测试条170上的试剂的一个或多个光学测量的图像分析来执行分析物测量过程。应用软件250还储存预定最小和最大经过时间阈值,以确保在流体剂量已有足够的时间与测试条170中的试剂反应之后但在用于测量分析物的最大有用时间段经过之前生成光学测量。如下文进一步详细描述的,分析物测量过程的一部分包括识别小瓶160、测试条170的取出以及识别手指190与测试条170之间的接触以将流体剂量施加至沉积位点172。应用软件250还包括物体识别数据252,其使移动电子装置处理器224能够对从可穿戴电子装置104接收的视频流中的小瓶160和测试条170执行自动物体识别和追踪。物体识别数据252为透过在应用软件250发布之前进行的训练过程生成的。特别地,训练过程利用形成在小瓶160、测试条170、测试条相反侧170’和色卡180上的配准标记的预定形状、颜色和图案来实现对视频流中的这些部件的自动识别和追踪。物体识别数据252的实例包括图像分类器,诸如神经网络(特别是卷积类神经网络)、支持向量机、隐马尔可夫模型、一维和二维条形码扫描引擎等。此外,物体识别数据252可以包括用于颜色检测和边缘检测的过滤器以及诸如物体检测和图像分割等任务所需的其他图像处理数据,以使得能够对视频流中的小瓶160、测试条170和色卡180之类的物体进行追踪。操作系统(OS)软件254包括软件内核、驱动程序、库和与标准市售操作系统相关联的其他系统软件。OS软件254提供标准化服务,诸如网络和图形堆栈,用于数据储存和管理的文件系统,对光学传感器142、显示器和I/O装置146、定时器226、通信收发器258和移动电子装置140中的其他部件的软件存取。
在移动电子装置140中,通信收发器258包括发送器,该发送器其能够将包括命令数据和输出消息数据的数据发送至可穿戴电子装置104中的对应收发器228。通信收发器258还包括接收器,该接收器使移动电子装置140能够从移动电子装置140接收数据,并且特别地,能够从可穿戴电子装置104中的相机108接收视频流。在图2的说明性实例中,通信收发器258为蓝牙或低功耗蓝牙无线数据通信收发器,但替代配置可以使用不同的无线通信标准或者可以采用诸如USB之类的有线连接接口。
图1进一步描绘了小瓶160和色卡180。小瓶160储存一个或多个测试条170。除了提供储存之外,小瓶160还保护测试条免受环境中的污染,这包括防止测试条170中的试剂从周围环境吸收过量水分和光。小瓶160进一步包括带有一个或多个配准标记的印刷标记162,该配准标记被描绘为沿图1中标签162的一个或多个边缘或进一步的实施例中小瓶160的另一合适的表面印刷的虚线标识符配准标记163。小瓶160的轮廓形状和配准标记163形成简单的视觉标识符,该视觉标识符使得能够有效地识别和追踪可穿戴电子装置104生成并发送到移动电子装置140的视频流中的小瓶160。配准标记163广泛分布在小瓶160的外部,以从宽范围的视角和在用户的手握住小瓶160时识别和追踪小瓶160。小瓶160的配准标记的替代实施例包括例如印刷图案标识符(包括条形码),或形成在小瓶160外部上的雕刻或浮凸的几何形状,这些有助于自动识别和追踪小瓶160。在图1的实施例中,盖164提供至小瓶160内部的通路。盖164在打开时可以完全移除,或者可以保持附接到小瓶160的主体。在任一配置中,第二配准标记168形成在小瓶盖164的内表面上。第二配准标记168为例如圆形或其他几何形状,该第二配准标记具有与小瓶160的颜色形成对比的预定颜色,以在使用小瓶160期间清楚地指示在可穿戴电子装置104生成的视频流中小瓶160已被打开。在替代实施例中,配准标记168为一维或二维条形码或自动视觉算法可识别的其他配准标记。配准标记163和168使得能够准确识别小瓶160并确定小瓶160何时关闭或打开。
在操作期间,光学传感器142响应于与流体剂量中的分析物的一种或多种化学反应,检测试剂的颜色变化,该试剂的颜色变化对测试条相反侧170’上的测量位点178可见。在图1的说明性实例中,位于测量位点178处的试剂的颜色变化指示血液样品中葡萄糖分析物的水平。如上所述,系统100识别沉积位点172何时接收流体剂量并使用定时器来确定光学传感器何时应生成测量位点178的后续光学测量以确保血糖水平的准确测量。尽管出于说明性目的,系统100描绘了包括单独的沉积位点172和测量位点178的测试条,但是本领域技术人员将认识到替代的测试条提供带有试剂的单个沉积位点和测量位点,它们共同位于测试条的同一区域。因此,在一些实施例中,沉积位点和试剂处于测试条上的不同位置,而在其他实施例中,沉积位点和试剂指测试条的单个位置。
在图1中,色卡180为一种任选的部件,该部件具有图1所示的后侧面,该后侧面在剂量施加前将测试条170保持在适当位置。色卡180还具有正面(未示出),该正面包括预定的颜色布置和其他基准标记,以协助校正来自光学传感器142的图像,以便对暴露的测量位点178进行准确的颜色测量。色卡180中的孔径186使得光学传感器能够在色卡180的色彩型内测量测试条相反侧170’上的测量位点178。色卡180的后侧面包括配准标记182和184,它们在图1的说明性实施例中被描绘为印刷在色卡108的后侧面上的箭头标识符。配准标记182和184与测试条170相关联并且进一步帮助识别和追踪视频流中的测试条170以检测测试条170何时接收流体剂量。色卡180是任选的,并且系统100配置为在测试条相反侧170’中的测量位点178处生成试剂的光学测量,以单独或与色卡180结合使用测试条相反侧170’测量血液样品中的葡萄糖分析物。
图3描绘了用于操作系统100以执行分析物测试操作的流程300,其中自动检测何时将流体剂量向测试条的沉积位点的施加以及自动安排系统100何时应生成测量位点的一个或多个光学测量以测量流体剂量中的分析物水平的时间。在流程300的描述中,对执行功能或动作的流程的引用指操作一个或多个数字处理器,诸如可穿戴电子装置104和移动电子装置140中的处理器,以与系统100中的其他部件一起执行用于执行功能或动作的储存的程序指令。
流程300开始于激活相机,诸如可穿戴电子装置104中的相机108,以在分析物测试过程开始时生成用户面前场景的视频流(框304)。在系统100中,用户开始执行应用软件250,并且移动电子装置140向可穿戴电子装置104传输命令以激活相机108。在图1的实施例中,可穿戴电子装置处理器204激活相机108并使用收发器228将视频流从相机108发送到移动电子装置140,这使得移动电子装置处理器224能够接收视频流以使用对应的收发器258进行进一步处理。如本领域中通常已知的,视频流包括一系列图像数据帧,其描绘了在分析物测试过程期间随着时间的推移来自相机108的视图。
当移动电子装置处理器224识别出由可穿戴电子装置104生成的视频流中的小瓶160时,流程300继续(框308)。尽管可以使用多种数字图像处理技术来识别物体,诸如在流程300期间在视频流中检测到的小瓶160或其他物体,但这里更详细地描述了优选技术的非限制性实例。小瓶160的识别过程还包括物体追踪操作,该物体追踪操作分割包括物体的视频流中的帧的不同部分,以及物体识别操作,该物体识别操作使用图像分类器来识别被追踪的物体。
在物体追踪操作中,移动电子装置140中的移动电子装置处理器224识别并追踪视频流中描绘的一个或多个物体。为了追踪物体,移动电子装置处理器224执行轮廓检测操作,该操作识别视频流中具有相似图像强度值的各种物体的边界,包括小瓶160的边界。特别地,视频流的每一帧被形成为二维像素数组,并且移动电子装置处理器224基于在颜色数据(例如红色/绿色/蓝色)或单色图像数据(例如灰度值)中具有相同或相似数字像素值的像素的连续区域来识别轮廓。在一些配置中,移动电子装置处理器224执行图像预处理操作,诸如将彩色视频流转换为灰度、灰度像素的阈值化以及执行边缘检测处理以提高轮廓检测过程的准确度。移动电子装置处理器224使用例如围绕检测到的轮廓区域的矩形边界框来分割原始图像,并且移动电子装置处理器224对一系列视频帧执行轮廓检测过程以追踪物体的移动,诸如当用户移动小瓶160时。例如,如图4的视图404所示,视频流描绘了小瓶160,并且移动电子装置处理器224在包括检测到的小瓶160的轮廓的视频流的帧中生成矩形边界框406片段。虽然视图404单独描绘了小瓶160,但视频流中的一些帧包括多于一个物体,并且上述轮廓检测过程使得能够追踪视频流中的多个物体。
在完成追踪操作后,移动电子装置处理器224可以存取一个或多个包括物体的图像片段,但尚未确定特定物体的身份。例如,移动电子装置处理器224已追踪图像片段406中的物体,但尚未识别该对像为小瓶160或一些其他物体。物体追踪过程生成多个图像片段,可以提高图像分类器用于检测可能处于视频流中帧的不同部分的多个相关物体的准确度。为了完成物体识别过程,移动电子装置处理器224将包括被追踪物体的图像的分割部分作为输入提供给与物体识别数据252一起储存在存储器232中的经训练的图像分类器。图像分类器为例如经训练的卷积神经网络(CNN)或经训练以识别预定物体集的其他合适的图像分类器,该物体集例如小瓶160和小瓶盖164的内部、测试条170/170’的任一侧、色卡180或手指190。图像分类器的训练过程发生在流程300之前,并使用训练图像集,该训练图像集包括在分析物测试过程期间可能发生的各种预期情况下要识别的物体的多个实例。使用例如本领域另外已知的梯度下降训练过程来训练图像分类器。图像分类器经过训练以明示或隐含地识别小瓶160的轮廓形状、形成在小瓶160上、小瓶盖164的内部、测试条170/170’的任一侧上,以及色卡180上的配准标记特征163中的一些或全部,以提高识别预定物体的准确度。此外,训练过程可以包括以下情况下发生的训练实例:当配准标记对相机108仅部分可见,诸如当用户将小瓶160握在手中时,这可能会遮挡一些配准标记163。移动电子装置处理器224任选地执行额外的图像数据预处理,该预处理可以包括将图像数据的大小调整为预定分辨率,或者基于从可穿戴电子装置104中的位置传感器112接收的元数据对图像执行旋转转换,该可穿戴电子装置在生成视频流的每一帧时识别相机108的角定向,以提高图像分类器的准确度。在一些配置中,图像分类器使用单色图像数据进行训练,但在其他配置中,彩色图像为优选的,包括其中使用有助于图像分类以识别物体的预定颜色形成配准标记的配置。分类器还将视频流中可能存在的无关物体视为不相关而拒绝。此外,由于视频流包括一系列帧,即使在视频流帧的一部分中追踪和识别过程不成功,移动电子装置140也可以在视频流的一个或多个帧中识别小瓶160。在应用软件250中实现上述图像处理操作的软件框架的一个实例是可在https://opencv.org/获得的Open Computer Vision(OpenCV)专案。上文描述的用于识别小瓶160的过程与下文描述的用于在流程300期间识别视频流中的其他物体的过程基本相同。
在小瓶识别过程中,移动电子装置140任选地向可穿戴电子装置104传输图形,诸如图标或动画,以帮助用户识别流程中的下一步以执行测试分析。例如,移动电子装置140将对应于小瓶160的形状的图形图标发送到可穿戴电子装置104,并且可穿戴电子装置处理器204使用HUD 116生成图标的图形显示以提醒用户取回小瓶160并将其放置在相机108的视野中,直到在视频流中成功识别小瓶160。在图4中,视图404描绘了HUD 116迭加在相机108记录的场景上的图标408,以提示用户取回小瓶160。
再次参考图3,当移动电子装置处理器224响应于检测到形成在小瓶160中的盖164的内部上的配准标记168,识别出小瓶160被打开时(框312),流程300继续。参考图4,视图412描绘了从小瓶160取下的盖164,其中配准标记168在盖164的内部可见。移动电子装置处理器224以与上述关于小瓶160所述的方式相同的方式追踪和识别图像片段416内的盖164。此外,移动电子装置140任选地将盖的图标发送到可穿戴电子装置104,并且可穿戴电子装置104在HUD 116中显示图标420以向用户提供指导。
再次参考图3和图4,当移动电子装置处理器224识别出测试条170已从打开的小瓶160中的取出时,流程300继续(框316)。移动电子装置处理器224以与上述关于小瓶160和盖164所述的方式相同的方式追踪和识别图像片段428内的测试条170,如视图424中所示。此外,移动电子装置140任选地将测试条的图标发送到可穿戴电子装置104,并且可穿戴电子装置104在HUD 116中显示图标432以向用户提供指导。如图4所示,在某些情况下,用户取下测试条,其相反侧170’对相机108可见。移动电子装置处理器224追踪和识别区域430中的测试条的相反侧170',并且任选地由HUD 116或另一输出装置146为用户生成输出消息以旋转测试条使得测试条170带有配准标记174和沉积位点172的一侧在视频流中可见。测试条的相反侧170’上没有配准标记174以及任选地选用的相反侧170’的其他不同特征为图像分类器提供了足够的差异来区分测试条的一侧170/170'。如果在测试条170接收流体剂量之前,测试条170被翻转以暴露其相反侧170',则在流程300的后续阶段执行此操作。尽管出于说明性目的,视图424同时描绘了小瓶160、盖164的内部和测试条170,但是从小瓶160取出测试条170的检测仅需要在相对较短的时间段(诸如10秒、30秒或60秒的时间窗口)内的同一视频流中检测小瓶160、盖内部164和测试条170的顺序。因此,小瓶160、盖164和测试条170不需要在视频流中同时被识别,以使流程300识别测试条170已从小瓶160中取出。
在流程300期间,如果移动电子装置处理器224未能识别小瓶160、盖164的内部的顺序(表明小瓶160被打开)或在预定时间段内取出测试条170(框320),则然后流程300参考框308返回到上面描述的流程,以使用户能够重复流程。在成功地识别出测试条170已从小瓶160中取出(框320)后,当移动电子装置处理器224继续追踪已在视频流中识别的测试条170时,流程300继续(框328)。在一种配置中,移动电子装置处理器224独立地追踪测试条170,如图5的视图504所示。在使用色卡180的另一配置中,移动电子装置处理器224至少部分地基于配准标记箭头182和184来识别色卡180,并追踪测试条170插入色卡180中,如图6的视图604所示。在识别测试条170之后并且在测试条170接收流体剂量之前,移动电子装置处理器224在存储器232中储存测试条的至少一个图像(包括沉积位点172)。如下文进一步详细描述的,沉积位点172的至少一种光学特性在沉积位点172接收流体剂量之后发生变化,并且光学特性的变化使得能够检测测试条170接收流体剂量的时间。
移动电子装置处理器224基于视频流识别流体剂量向测试条170上的沉积位点172的施加,并且在识别流体剂量施加而激活定时器226时,流程300继续(框332)。在一种配置中,移动电子装置处理器224使用上述用于识别小瓶160、盖164、测试条170和色卡180的相同程序来识别视频流中用户的手指190。移动电子装置处理器224进一步识别视频流中手指与沉积位点172之间的接触。例如,响应于手指190在视频流中遮挡测试条170,识别出接触,如图5的视图508和图6的视图608所示。在识别接触之后,移动电子装置处理器224基于视频流中的沉积位点172的至少一种光学特性相对于先前记录的沉积位点172的图像的变化来识别流体剂量已被施加至沉积位点172,如图5的视图512和图6的视图612所示。在沉积位点172接收流体剂量之后改变的沉积位点172的光学特性的实例包括由于流体剂量的施加而发生的沉积位点172的颜色、对比度和亮度中的一项或多项的改变。在另一配置中,移动电子装置处理器224在视频流中省略了手指190以及手指190与测试条170之间的接触的识别。在这一简化的配置中,移动电子装置处理器224继续追踪测试条170,直到检测到沉积位点172的至少一种光学特性的变化,以识别测试条170已接收流体剂量。在又一配置中,移动电子装置处理器224省略了对沉积位点172的光学特性变化的识别,而是基于对视频流中手指190与测试条170之间的接触的检测来检测测试条170的剂量施加。在这一简化的配置中,移动电子装置处理器224基于视频流中手指190遮挡测试条170(诸如在视图508和608中),或者基于手指190与测试条170紧邻,识别接触。这种配置使得能够在环境光条件差,从而难以检测剂量施加位点172处的光学特性变化的情况下检测测试条剂量施加。在所有三种配置中,移动电子装置处理器224在检测到流体剂量向测试条170上的沉积位点172的施加时激活定时器226。
当定时器226达到预定最小时间并且移动电子装置处理器224任选地向用户生成输出信号,指示应使用光学传感器142生成测试条相反侧170’上的测量位点178的一个或多个光学测量时,流程300继续(框336)。移动电子装置处理器224在移动电子装置140的显示触控屏幕146上或经由可穿戴电子装置104的HUD 116生成输出,以指示当光学传感器142生成测量位点178的一个或多个光学测量时,测试条的光学测量应该继续(框340)。移动电子装置处理器224任选地生成输出,其包括倒数定时器以指示在用以生成光学测量的最小时间段到期之后且预定最大时间段到期之前在预定时间窗口中剩余的时间量。在一种配置中,移动电子装置处理器224仅在定时器226指示预定最小时间段已到期之后才激活光学传感器142,而在另一配置中,移动电子装置处理器224仅接受来自光学传感器142的具有落于预定时间窗口内的时间戳的光学测量。虽然用于生成光学测量的精确预定最小和最大时间段在实施例之间可能不同,但在一种配置中,流体剂量之后的最小时间段为13秒并且最大时间段为45秒。这为光学传感器142提供了32秒的时间窗口,以生成测量位点178的一个或多个光学测量。
在定时器226达到预定最大时间段到期之后,移动电子装置224生成指示最大时间段已到期的输出(框344)。如果在预定最大时间段到期之前已生成足够数量的光学测量(框348),则移动电子装置处理器224继续基于光学测量进行分析物测量过程(框352)。在另一配置中,如果光学传感器142在预定最大时间段到期之前生成足够数量的光学测量,则移动电子装置处理器224任选地开始框352的测量过程而不等待定时器226到期。尽管本文未进一步详细描述,但分析物测量过程分析测试条上测量位点178处的试剂的颜色和任选地选用的其他光学特性,以确定流体样品中的分析物水平,诸如血液样品中的葡萄糖水平。在使用色卡180的配置中,移动电子装置处理器224使用来自色卡180的额外光学数据来帮助分析物测量过程。移动电子装置140由显示装置146、可穿戴电子装置104中的HUD 116或由其他输出装置向用户显示分析物水平的测量值。系统100和流程300提高了分析物测量过程的可靠性,因为所有的光学测量都是在预定时间窗口内生成,以确保在生成光学测量之前,测试条170中的试剂有足够的时间完成化学反应,而且在光学测量过程完成之前不会经历脱水或漂白。
在流程300期间,如果在生成足够数量的光学测量之前,预定最大时间段到期(框348),则移动电子装置处理器224不继续分析物测量过程并且移动电子装置140由显示装置146、可穿戴电子装置104中的HUD 116或由其他输出装置生成输出消息,该消息指示分析物测量无法完成并指示用户使用新的测试条再次开始分析物测试过程(框356)。
如上所述,流程300执行物体识别,该物体识别开始于对视频流中测试条小瓶160和盖164的开口的识别,这使得系统100能够验证测试条170是从小瓶160中提取出,而不是可能已经在小瓶160外部持续很长时间的未固定的测试条。如果长时间置于小瓶外部,一些测试条可能会被污染。然而,在流程300的简化的配置中,系统100省略了对测试条小瓶160、盖164以及测试条170从小瓶160中的提取的识别。简化的配置开始于视频流的生成以及追踪和识别测试条170,其方式与上述相同。在这种配置中,流程300不验证测试条170是从小瓶中提取出的,该验证对于一些分析物测试系统可能不是必需的。流程300的这种简化配置在其他方面与上述流程相同。
尽管出于说明性目的,此处公开的实施例使用单独的可穿戴电子装置104和移动电子装置140,但是本领域技术人员将认识到单个电子装置可以配置为执行本文所述的操作。特别地,虽然现有技术的可穿戴电子装置通常与移动电子装置连接以进行复杂的操作,但功能更强大的可穿戴电子装置可以实现本文所述的所有功能。可替代地,移动电子装置140可以配置为使用光学传感器142作为相机来执行本文所述的所有功能,以生成视频流并执行上述其他流程。因此,对处理器操作的具体引用涉及上文描述中的可穿戴电子装置处理器204和移动电子装置处理器224两者单独地、组合地,以及可替代地,涉及在使用单个电子装置的配置中的单个处理器的操作。
本公开被认为是结合最实际和优选的实施例来描述。然而,这些实施例是通过图解说明的方式呈现,而该公开并不意在受限于所公开的实施例。因此,本领域的技术人员将认识到,本公开包括在本公开的精神与范围和后附权利要求书中的所有修改和替代配置。
Claims (25)
1.一种用于测量分析物的方法,所述方法包括:
-基于与描绘在由相机生成的视频流中的测试条相关联的至少一个配准标记,用处理器识别所述视频流中的所述测试条;
-基于所述视频流,用所述处理器识别流体剂量向形成在所述测试条上的沉积位点的施加;
-响应于识别到所述流体剂量的所述施加,用所述处理器激活定时器;
-用光学传感器生成位于所述测试条上的测量位点处的试剂的至少一个光学测量;以及
-仅响应于在所述定时器的激活后预定最小时间段已经过之后且在所述定时器的所述激活后预定最大时间段经过之前生成所述试剂的所述至少一个光学测量,基于所述至少一个光学测量,用所述处理器生成所述流体剂量中的分析物的测量。
2.根据权利要求1所述的方法,所述方法进一步包括:
-基于测试小瓶的轮廓形状或位于描绘在由相机生成的视频流中的小瓶上的至少一个配准标记中的至少一者,用所述处理器识别所述视频流中的所述小瓶;
-基于位于所述小瓶的盖上的至少一个配准标记,用所述处理器识别所述视频流中的所述小瓶的开口;以及
-基于与描绘在所述视频流中的所述测试条相关联的所述至少一个配准标记,在识别到所述视频流中的所述小瓶的所述开口之后,用处理器识别所述测试条从所述小瓶的取出。
3.根据权利要求2所述的方法,其中与所述小瓶相关联的至少一个配准标记进一步包括形成在所述小瓶的标签上的指示符。
4.根据权利要求2或3所述的方法,其中位于所述小瓶的所述盖上的所述至少一个配准标记进一步包括形成在所述盖的内表面上的色标。
5.根据权利要求1至4中的一项所述的方法,其中与所述测试条相关联的所述至少一个配准标记进一步包括形成在所述测试条的一侧上相对于所述沉积位点的预定位置处的印刷标记。
6.根据权利要求5所述的方法,所述方法进一步包括:
-基于形成在所述测试条的所述一侧上的所述印刷标记的不存在,用所述处理器识别所述测试条的相反侧暴露在所述视频流中;以及
-用所述处理器和输出装置生成输出消息,所述输出消息指示应旋转所述测试条以暴露所述测试条的带有所述印刷标记的所述一侧。
7.根据权利要求1至6中的一项所述的方法,其中与所述测试条相关联的所述至少一个配准标记进一步包括形成在固持所述测试条的色卡的后表面上的指示符。
8.根据权利要求1至7中的一项所述的方法,对所述剂量的所述施加的所述识别进一步包括:
-用所述处理器识别所述视频流中的用户的手指;
-用所述处理器识别所述视频流中的所述手指与所述沉积位点之间的接触;以及
-响应于在所述手指与所述沉积位点之间的所述接触之后所述视频流中的所述沉积位点的光学特性的变化,用所述处理器识别所述剂量的所述施加。
9.根据权利要求1至8中的一项所述的方法,对所述剂量的所述施加的所述识别进一步包括:
-响应于所述视频流中的所述沉积位点的光学特性的变化,用所述处理器识别所述剂量的所述施加。
10.根据权利要求1至9中的一项所述的方法,对所述剂量的所述施加的所述识别进一步包括:
-响应于所述视频流中的所述手指与所述沉积位点之间的接触,用所述处理器识别所述剂量的所述施加。
11.根据权利要求1至10中的一项所述的方法,所述方法进一步包括:
-响应于在所述预定最小时间段已经过之后且在所述预定最大时间段经过之前没有生成所述测量位点的光学测量,用所述处理器和输出装置生成输出消息,所述输出消息通知所述用户无法完成所述流体剂量中的所述分析物的所述测量。
12.根据权利要求1至11中的一项所述的方法,其中生成所述测量的所述光学传感器为生成所述视频流的所述相机。
13.根据权利要求1至12中的一项所述的方法,其中生成所述测量的所述光学传感器为不同于生成所述视频流的所述相机的相机。
14.根据权利要求13所述的方法,其中所述相机结合于可穿戴电子装置中,且所述光学传感器结合于移动电子装置中。
15.一种用于测量分析物的系统,所述系统包括:
可穿戴电子装置和移动电子装置,所述可穿戴电子装置包括:
-相机,所述相机配置为生成视频流;以及
-发送器,所述发送器配置为将所述视频流发送至所述移动电子装置;且
所述移动电子装置包括:
-接收器,所述接收器配置为接收从所述可穿戴电子装置发送的所述视频流;
-光学传感器,所述光学传感器配置为生成光学测量;
-存储器,所述存储器配置为存储程序指令;以及
-处理器,所述处理器可操作地连接至所述接收器、所述光学传感器和所述存储器,所述处理器配置为执行所述程序指令以:
-基于与描绘在所述视频流中的测试条相关联的至少一个配准标记,识别所述视频流中的所述测试条;
-基于所述视频流,识别流体剂量向形成在所述测试条上的沉积位点的施加;
-响应于所述流体剂量的所述施加,激活定时器;
-用所述光学传感器生成位于所述测试条上的测量位点处的试剂的至少一个光学测量;以及
-仅响应于在所述定时器的激活后预定最小时间段已经过之后且在所述定时器的所述激活后预定最大时间段经过之前生成所述试剂的所述至少一个光学测量,基于所述至少一个光学测量,生成所述流体剂量中的分析物的测量。
16.根据权利要求15所述的系统,所述处理器进一步配置为:
-基于位于描绘在由相机生成的所述视频流中的小瓶上的至少一个配准标记,识别所述视频流中的所述小瓶;
-基于测试小瓶的轮廓形状或位于所述小瓶的盖上的至少一个配准标记中的至少一者,识别所述视频流中的所述小瓶的开口;以及
-基于与描绘在所述视频流中的所述测试条相关联的所述至少一个配准标记,在识别到所述视频流中的所述小瓶的所述开口之后,识别所述测试条从所述小瓶的取出。
17.根据权利要求16所述的系统,其中与所述小瓶相关联的至少一个配准标记进一步包括形成在所述小瓶的标签上的指示符。
18.根据权利要求16或17所述的系统,其中位于所述小瓶的所述盖上的所述至少一个配准标记进一步包括形成在所述盖的内表面上的色标。
19.根据权利要求15至18中的一项所述的系统,其中与所述测试条相关联的所述至少一个配准标记进一步包括形成在所述测试条的表面上相对于所述沉积位点的预定位置处的指示符。
20.根据权利要求19所述的系统,所述处理器进一步配置为:
-基于形成在所述测试条的所述表面上的所述指示符的不存在,识别所述测试条的相反侧暴露在所述视频流中;以及
-用输出装置生成输出消息,所述输出消息指示应旋转所述测试条以暴露所述测试条的带有所述指示符的所述表面。
21.根据权利要求15至20中的一项所述的系统,其中与所述测试条相关联的所述至少一个配准标记进一步包括形成在固持所述测试条的色卡的后表面上的指示符。
22.根据权利要求15至21中的一项所述的系统,所述处理器进一步配置为:
-识别所述视频流中的用户的手指;
-识别所述视频流中的所述手指与所述沉积位点之间的接触;以及
-响应于在所述手指与所述沉积位点之间的所述接触之后所述视频流中的所述沉积位点的光学特性的变化,识别所述剂量的所述施加。
23.根据权利要求15至22中的一项所述的系统,所述处理器进一步配置为:
-响应于所述视频流中的所述沉积位点的光学特性的变化,识别所述剂量的所述施加。
24.根据权利要求15至23中的一项所述的系统,所述处理器进一步配置为:
-响应于所述视频流中的所述手指与所述沉积位点之间的接触,识别所述剂量的所述施加。
25.根据权利要求15至24中的一项所述的系统,所述系统进一步包括:
-输出装置,所述输出装置在所述可穿戴电子装置或所述移动电子装置中的至少一者中,所述处理器可操作地连接至所述输出装置且进一步配置为:
-响应于在所述预定最小时间段已经过之后且在所述预定最大时间段经过之前没有生成所述测量位点的光学测量,生成输出消息,所述输出消息通知所述用户无法完成所述流体剂量中的所述分析物的所述测量。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP21204232.9 | 2021-10-22 | ||
EP21204232.9A EP4170324A1 (en) | 2021-10-22 | 2021-10-22 | Method and system for improved optical analyte measurements |
PCT/EP2022/079379 WO2023067140A1 (en) | 2021-10-22 | 2022-10-21 | Method and system for improved optical analyte measurements |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118140133A true CN118140133A (zh) | 2024-06-04 |
Family
ID=78371976
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280070974.XA Pending CN118140133A (zh) | 2021-10-22 | 2022-10-21 | 用于经改良的光学分析物测量的方法和系统 |
Country Status (5)
Country | Link |
---|---|
EP (1) | EP4170324A1 (zh) |
CN (1) | CN118140133A (zh) |
CA (1) | CA3230524A1 (zh) |
TW (1) | TW202332900A (zh) |
WO (1) | WO2023067140A1 (zh) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104969068B (zh) * | 2012-08-08 | 2019-06-18 | 思勘度股份有限公司 | 用于在自动校准环境中执行及量化由特定浓度的生物分析物诱发的色彩改变的方法及设备 |
US11506656B2 (en) * | 2016-12-09 | 2022-11-22 | Basil Leaf Technologies, Llc | Automated camera-based optical assessment system and method |
ES2971658T3 (es) * | 2017-09-21 | 2024-06-06 | Becton Dickinson Co | Plantilla y método de demarcación reactiva para pruebas de contaminantes peligrosos |
-
2021
- 2021-10-22 EP EP21204232.9A patent/EP4170324A1/en active Pending
-
2022
- 2022-10-21 WO PCT/EP2022/079379 patent/WO2023067140A1/en active Application Filing
- 2022-10-21 CN CN202280070974.XA patent/CN118140133A/zh active Pending
- 2022-10-21 TW TW111139957A patent/TW202332900A/zh unknown
- 2022-10-21 CA CA3230524A patent/CA3230524A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2023067140A1 (en) | 2023-04-27 |
TW202332900A (zh) | 2023-08-16 |
EP4170324A1 (en) | 2023-04-26 |
CA3230524A1 (en) | 2023-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111247422A (zh) | 用于执行分析测量的方法和设备 | |
EP3792815A1 (en) | Sports timing based on a camera system | |
US20220291134A1 (en) | Method of performing an analytical measurement | |
US20220283097A1 (en) | Methods and devices for performing an analytical measurement | |
CN114667452A (zh) | 确定体液中分析物的浓度的方法 | |
EP4170324A1 (en) | Method and system for improved optical analyte measurements | |
CN114445759A (zh) | 一种用于远程采样的数据共享方法、装置、电子设备及可读存储介质 | |
KR20240088918A (ko) | 향상된 광학 분석물 측정을 위한 방법 및 시스템 | |
EP4170325A1 (en) | System for automated optical analyte measurements via wearable smart devices | |
EP4170326A1 (en) | System and method for automated optical analyte measurements via wearable smart devices | |
KR20240088915A (ko) | 웨어러블 스마트 장치를 통한 자동화된 광학 분석물 측정을 위한 시스템 및 방법 | |
KR20240088913A (ko) | 웨어러블 스마트 장치를 통한 자동화된 광학 분석물 측정을 위한 시스템 및 방법 | |
US20230419481A1 (en) | Image capture for diagnostic test results | |
US20230152239A1 (en) | Method of performing an analytical measurement using a mobile device | |
CN211604135U (zh) | 一种基于因果模型的人脸信息与体温信息检测系统 | |
CN118229767A (zh) | 位置偏移检测方法、装置、系统、电子设备及存储介质 | |
CN114829911A (zh) | 用于调整分析方法的设置的调整方法 | |
TWM505918U (zh) | 快篩試紙之即時辨識系統 | |
CN109360310A (zh) | 生物识别方法、芯片级系统和通道设备 | |
KR20170108648A (ko) | 전자 장치 및 그것의 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |