CN111903114A - 用于获取对象状态信息的电子设备及其控制方法 - Google Patents

用于获取对象状态信息的电子设备及其控制方法 Download PDF

Info

Publication number
CN111903114A
CN111903114A CN201980021100.3A CN201980021100A CN111903114A CN 111903114 A CN111903114 A CN 111903114A CN 201980021100 A CN201980021100 A CN 201980021100A CN 111903114 A CN111903114 A CN 111903114A
Authority
CN
China
Prior art keywords
electronic device
incident light
spectrum
present disclosure
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980021100.3A
Other languages
English (en)
Inventor
V.V.利查戈夫
M.V.波波夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2019/003301 external-priority patent/WO2019190122A1/ko
Publication of CN111903114A publication Critical patent/CN111903114A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0272Handheld
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0256Compact construction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/443Evaluating skin constituents, e.g. elastin, melanin, water
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0205Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
    • G01J3/0208Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using focussing or collimating elements, e.g. lenses or mirrors; performing aberration correction
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0264Electrical interface; User interface
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/30Measuring the intensity of spectral lines directly on the spectrum itself
    • G01J3/36Investigating two or more bands of a spectrum by separate detectors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/45Interferometric spectrometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/45Interferometric spectrometry
    • G01J3/453Interferometric spectrometry by correlation of the amplitudes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/45Interferometric spectrometry
    • G01J3/453Interferometric spectrometry by correlation of the amplitudes
    • G01J3/4531Devices without moving parts
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/457Correlation spectrometry, e.g. of the intensity
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/31Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/31Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
    • G01N21/314Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry with comparison of measurements at specific and non-specific wavelengths
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/02Food
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • G01N33/483Physical analysis of biological material
    • G01N33/4833Physical analysis of biological material of solid biological material, e.g. tissue samples, cell cultures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • G01N33/483Physical analysis of biological material
    • G01N33/487Physical analysis of biological material of liquid biological material
    • G01N33/493Physical analysis of biological material of liquid biological material urine
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J2003/283Investigating the spectrum computer-interfaced
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/31Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
    • G01N21/314Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry with comparison of measurements at specific and non-specific wavelengths
    • G01N2021/3155Measuring in two spectral ranges, e.g. UV and visible
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725Cordless telephones

Abstract

根据本公开的实施例,提供了一种电子设备,包括:光学元件,其被固定并被配置为将从对象反射的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束;光学传感器,其与光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域,并被配置为检测入射光;和至少一个处理器,被配置为基于从检测到的入射光获取的第一光谱与至少一个参考光谱之间的相似度来确定关于对象的状态信息。

Description

用于获取对象状态信息的电子设备及其控制方法
技术领域
本公开的实施例涉及一种电子设备、一种电子设备控制方法以及一种用于执行该电子设备控制方法的计算机程序产品。本公开的实施例涉及测量工程领域。而且,本公开的实施例涉及一种小型设备,其可适用于可穿戴电子设备、移动设备或其他类型的电子设备。根据本公开实施例的电子设备及其控制方法可以应用于用于分析对象的各种领域。
背景技术
最近,包括光学元件的电子设备被广泛使用。电子设备可以包括诸如光谱仪的光学系统。
WO 2016/180551中公开了一种这样的光谱仪。在WO 2016/180551中,公开了一种静态傅立叶变换光谱仪(以下称为第一公知光谱仪),其包括分束器、镜装置和会聚光学单元。分束器将输入光束分为第一臂和第二臂,其中第一臂被分束器反射,第二臂穿过分束器。在被镜装置反射之后,第一臂无偏转地延伸到会聚光学单元。第二臂在通过分束器后无偏转地延伸到会聚光学单元。会聚光学单元使第一臂和第二臂会聚在一起以产生干涉。但是,第一个众所周知的光谱仪与诸如智能电话、智能手表等的智能设备不兼容,并且具有复杂的设计。这些问题限制了光谱仪的使用领域。此外,第一台公知的光谱仪与低干涉光(即白光)不兼容,并且需要时间、成本和精确的对准。
美国专利第5,541,728号公开了一种固定傅立叶变换光谱仪(以下称为第二公知光谱仪),其包括分束器、干涉仪、辐射源、傅立叶变换透镜和光学检测器。该干涉仪包括两个直角棱镜和预选的五棱镜的非常牢固的组件,两个直角棱镜和预选的五棱镜的每个都具有孔径大小。第二公知光谱仪包括昂贵的光学元件,具有复杂的设计,并且也难以对准。此外,第二公知光谱仪与移动设备不兼容。
美国专利第2016/0290863号克服了上述移动设备的不兼容问题,该专利公开了一种适用于例如手机的移动设备的紧凑型光谱仪系统(以下称为第三公知光谱仪)。在优选的实施例中,第三公知光谱仪包括滤波器、至少一个傅里叶变换聚焦元件、微透镜阵列和检测器。但是,第三公知光谱仪不使用任意的分散元素。美国专利第2016/0290863号公开了一种使用第三公知光谱仪作为最终用户设备的方法,该最终用户设备通过与该设备的所有用户均可访问的可更新数据库进行比较来确定光斑上的食品的质量。然而,第三公知光谱仪具有复杂的设计,因为它使用光滤波器而不是多个发光二极管(LED)。而且,由于第三公知光谱仪与发光二极管-光电二极管(LED-PD)系统的相似性,因此其光谱分辨率低。另外,第三公知光谱仪仅用于食品分析,并且具有有限的使用领域。
因此,所引用的专利文件的光谱仪具有复杂的设计和难以充分小型化的困难。因此,在移动设备中使用光谱仪存在困难。另外,所引用的专利文件的光谱仪由于光谱分辨率低而具有困难,该光谱分辨率不适用于除食品分析以外的目的。
发明内容
技术问题
本公开的实施例是要在电子设备中从对象反射的入射光获得关于对象的状态信息。
此外,本公开的实施例将提供一种不需要光学元件和准直器的精确对准的电子设备及其控制方法。
此外,本公开的实施例将包括光学元件、准直器、光学传感器等的光学系统应用于诸如移动设备、可穿戴电子设备等的小型电子设备,在小型电子设备中,从对象反射的入射光中获取对象的状态信息。
此外,本公开的实施例将通过使用具有不同波长范围的多个传感器来检测宽范围的波长,而无需调整传感器。
解决方案
根据本公开的实施例的电子设备包括:光学元件,其被固定并被配置为将从对象反射到其上的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束;光学传感器,其与光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域,并被配置为检测入射光;和至少一个处理器,被配置为基于从检测到的入射光获取的第一光谱与至少一个参考光谱之间的相似度来确定关于对象的状态信息。
根据本公开的实施例的电子设备可以进一步包括准直器,该准直器被固定并且被配置为准直从对象反射的入射光。
根据本公开的实施例的光学元件可以包括具有分别与所述两个或更多个光路对应的两个或更多个面的轴锥。
根据本公开的实施例的光学元件可以包括分别对应于两个或更多个光路的多个棱镜。
根据本公开的实施例的光学传感器可以包括具有不同波长范围的多个子传感器,并且所述多个子传感器可以包括具有不同波长范围的多个子传感器,所述多个子传感器包括具有300nm至500nm的波长范围的第一传感器、波长范围为400nm至750nm的第二传感器、或波长范围为750nm至1000nm的第三传感器中的至少一个或组合。
根据本公开的实施例的处理器可以被配置为对所述入射光执行傅立叶变换以获得幅度信息和相位信息,并且基于所述幅度信息和相位信息来确定第一光谱和至少一个参考光谱之间的相似度。
根据本公开的实施例,通过执行傅立叶变换而获得的幅度信息和相位信息分别对应于实部和虚部。
根据本公开的实施例的处理器可以被配置为获取关于与所述第一光谱相对应的对象的类型信息,并且将所述第一光谱与所述与该类型信息相对应的至少一个参考光谱进行比较以确定状态信息。
根据本公开的实施例的电子设备可以进一步包括通信器,其中,所述处理器还被配置为通过所述通信器从外部设备获得所述至少一个参考光谱。
根据本公开的实施例的处理器可以被配置为基于不同的两个波长的光谱强度的部分的变化来确定与健康有关的状态信息。
根据本公开的实施例的处理器可以被配置为基于脱水时水合能级的光谱变化和再水合时水合能级的光谱变化来确定与皮肤有关的状态信息。
根据本公开的实施例的对象可以与尿液相对应的第一对象;以及包括尿液和第一化合物的混合物的第二对象,并且处理器可以被配置为基于第一对象的第一光谱和第二对象的第二光谱确定与疾病有关的信息。
根据本公开的实施例的状态信息可以包括产品是真品还是假品、食物的新鲜度、成熟度或烹饪程度中的至少一项。
根据本公开的实施例的包括光学元件和光学传感器的电子设备的控制方法包括:将从对象反射的入射光分成沿光学元件中的两个或更多个光路行进的两个或更多个入射光束;检测光学传感器上的入射光;和基于从检测到的入射光获得的第一光谱与至少一个参考光谱之间的相似度,确定关于对象的状态信息,其中,所述光学传感器与所述光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域。
一种计算机程序产品,包括存储程序命令的记录介质,所述程序命令在由处理器执行时使所述处理器执行确定关于对象的状态信息的方法,所述确定关于对象的状态信息的方法包括:将从对象反射的入射光分成沿光学元件中的两个或更多个光路行进的两个或更多个入射光束;检测光学传感器上的入射光;和基于从检测到的入射光获得的第一光谱与至少一个参考光谱之间的相似度,确定关于对象的状态信息,其中,所述光学传感器与所述光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域。
本公开的有益效果
根据本公开的实施例,电子设备可以从对象反射的入射光获得关于对象的状态信息。
此外,根据本公开的实施例,可以提供不需要光学元件和准直器的精确对准的电子设备以及控制该电子设备的方法。
此外,根据本公开的实施例,通过将包括光学元件、准直器、光学传感器等的光学系统应用于诸如移动设备、可穿戴电子设备等的小型电子设备,小型电子设备可以从对象反射的入射光获得关于对象的状态信息。
根据本公开的实施例,可以通过使用具有不同波长范围的多个传感器来检测宽范围的波长,而无需调整传感器。
通过以下详细描述和附图,本公开的其他特征和优点将显而易见。
附图说明
图1是示出根据本公开的实施例的通过使用电子设备获得关于对象的状态信息的示意图。
图2示出了根据本公开实施例的电子设备的结构。
图3是示出根据本公开的实施例的电子设备控制方法的流程图。
图4示出了根据本公开实施例的光学设备的结构。
图5示出了根据本公开实施例的光学设备的另一结构。
图6A示出了根据本公开实施例的由光学设备的光学传感器检测到的波长范围。
图6B示出了在不同橄榄油的不同混合比下的橄榄油混合物的吸收光谱,该吸收光谱由根据本公开的电子设备的光学传感器检测。
图7是示出根据本公开的实施例的确定第一频谱和参考频谱之间的相似度的过程的流程图。
图8示出了根据本公开实施例的第一光谱与参考光谱之间的基于相似度的匹配的确定结果。
图9A示出了根据本公开实施例的电子设备的操作。
图9B示出了根据本公开实施例的电子设备的操作。
图10示出根据本公开的实施例的通过测量从对象反射的随时间变化的入射光的光谱而获得的结果。
图11示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。
图12示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。
图13示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。
图14示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。
图15示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。
图16是示出根据本公开的实施例的电子设备和通过网络与电子设备交互的外部设备的框图。
具体实施方式
在下文中,将参照附图详细描述本公开的各种实施例。然而,本公开可以以不同的形式实现,并且不限于在以下描述中给出的任意特定的结构或功能。提供实施例以详细描述本公开并完成本公开。根据本公开的描述,对于本领域普通技术人员将显而易见的是,本公开的范围包括在本说明书中公开的本公开的任意实施例,而不管这些实施例是独立实现还是与另一任意实施例一起实现。例如,可以通过使用本说明书中公开的任意实施例来实际实现本说明书中公开的方法和设备。本公开的任意实施例可以通过使用权利要求中提出的一个或多个元件来实现。
另外,在附图中,为了清楚地描述本公开的实施例,可以不示出与描述无关的部分。在整个说明书中,相似的部分将被赋予相似的附图标记。
在本说明书中,将理解的是,将某个部分“连接”到另一部分的情况包括其中通过期间的另一设备将该部分“电连接”到另一部分的情况,以及该部分“直接连接”到另一部分的情况。另外,将理解的是,当特定部分“包括”特定组件时,除非上下文另外明确指出,否则该部分不排除另一组件而是可以进一步包括另一组件。
词语“示例性”在本文中用于表示说明书中的“用作示例或示例”。本文中描述为“示例性”的任何实施例决不必然被解释为比其他实施例优选或具有优点。
如在本说明书中使用的,术语“对象”表示要测试的对象,并且应当借助于本说明书中公开的电子设备来检测。对象110的一些非限制性示例可以包括产品/商品(食物、水果、蔬菜等),液体(水、酒精饮料、铀、血液、丹参等)和生物组织(皮肤、肌肉、骨组织等)。
在下文中,将参照附图详细描述本公开的实施例。
图1是示出根据本公开的实施例的通过使用电子设备来确定关于对象的状态信息的示意图。
公开了一电子设备120,其包括光学设备130,以通过使用光学设备130来获取对象110的状态信息。
根据本公开的实施例,电子设备120可以通过使用光学设备130来测量宽范围电磁谱内的光波长。作为电子设备120的示例的光谱仪可以用于对象110的光谱分析。从光源110发出的光可以从对象110反射然后透射,或者光可以在对象110中吸收或从对象110反射。当从光源发出的光与对象110相互作用时产生的变化可以表示对象110的特性。从对象110反射并入射到光学设备130的入射光可以通过色散元件或非色散元件调整为感兴趣的波长。
根据本公开的实施例的电子设备120可以包括光学设备130,并且通过使用光学设备130和至少一个处理器来分析对象110来确定对象110的状态信息。对象110的状态信息可以包括关于产品/商品的质量(食物的新鲜度,对真假的判定,烹饪的程度,成熟度等)、关于检测到的生物组织的状态(氧化,水合水平等)的信息、关于电子设备120的用户或患者等的健康状态的信息等。光学设备130的示例性类型将参考图4至6B详细描述。
图2示出了根据本公开实施例的电子设备的结构。根据本公开的实施例的电子设备120可以包括:光学设备130,其包括光学元件210和光学传感器220;以及处理器230。
根据本公开的实施例的电子设备120可以以各种形式实现。电子设备120可以以例如通用计算机、移动设备、光谱仪、冰箱、信息亭等的形式来实现。移动设备可以以例如智能手机、平板个人计算机(PC)、可穿戴设备等的形式来实现。可穿戴设备可以以眼镜、手表、衣服、鞋子、插入式生物芯片、戒指等形式实现。
光学元件210可以是用于改变入射光的路径的光学设备。根据本公开的实施例的光学元件210可以将从对象110反射的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束。根据一个实施例,光学元件210可以具有用于将入射光分成沿着两个或更多个光路行进的两个或更多个入射光束的几何结构。根据另一实施例,光学元件210可以包括用于将入射光传输到不同的光路的多个光学设备的组合。
光学传感器220可以将入射光转换成电信号。光学传感器220可以检测由光学元件210分成沿着两个或更多个光路行进的两个或更多个入射光束的入射光。根据本公开的实施例,光学元件210可以包括多个具有不同波长范围的子传感器。根据本公开的实施例,不同的波长范围可以包括紫外线(UV)区域、可见(VIS)射线区域和近红外(NIR)区域中的至少一个或组合。光学传感器220中包括的多个子传感器可以分别对应于不同波长范围的至少一些范围。例如,光学传感器220可以包括紫外线检测子传感器、可见光检测子传感器和近红外线检测子传感器。根据实施例,子传感器中的至少一个可以同时操作以检测紫外线区域、可见光区域或近红外线区域的波长。
处理器230可以控制电子设备120的整体操作并处理数据。处理器230可包括一个或多个处理器。处理器230可以包括中央处理单元(CPU)、应用处理器(AP)或通信处理器(CP)中的一个或多个。
可以通过使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑设备(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器和其他用于执行功能的电子设备中的至少一种来实现处理器230。
根据本公开的实施例,处理器230可将从从对象110反射的入射光获取并由光学传感器220检测到的第一光谱与参考数据(例如,参考光谱)进行比较以确定相似度,并根据相似度确定对象110的状态信息。在这种情况下,参考光谱可已经存储在电子设备120或外部设备的存储器(未示出)中。
当参考光谱已经存储在电子设备120的存储器中时,处理器230可以访问电子设备120的存储器以获取参考光谱,并且当没有参考光谱存储在电子设备120的存储器中时,处理器230可以请求外部设备发送参考数据。根据本公开的实施例,处理器230可以对应于处理从外部设备接收的参考数据的一个或多个处理器。
根据本公开的实施例,参考数据可以取决于对象110的类型。例如,参考数据可以是经受傅立叶变换的复数形式,并且具有实部和虚部、根据波长的吸收光谱的改变、波长随时间的强度变化或特定波长的吸收光谱随时间的变化量。
根据本公开的实施例,处理器230可以根据电子设备120的用户想要知道的对象110的状态信息,在对第一频谱执行傅里叶变换之后或者不对第一频谱执行傅里叶变换,将第一频谱与参考频谱进行比较。在这种情况下,可以提供两个或更多个参考光谱。
根据本公开的实施例,对象110的状态信息可以包括关于对象110(例如,产品/商品)的质量(食物的新鲜度、对真假的确定、烹饪的程度、成熟度等)的信息、关于生物组织的检测状态(氧合,水合水平等)的信息、关于电子设备120的用户或患者的健康状态的信息等。将随后参考图9A至15详细描述确定对象110的状态信息的详细示例。
尽管未在图2中示出,电子设备120可以进一步包括通信器。通信器可以包括使得能够与另一设备通信的一个或多个组件。例如,通信器可以包括短距离通信模块、有线通信模块和无线通信模块中的至少一个。
图3是示出根据本公开的实施例的电子设备控制方法的流程图。
根据本公开的电子设备控制方法的各个操作可以由各种电子设备执行,电子设备包括用于将入射光分成沿多个光路行进的多个光束的光学元件210、光学传感器220和处理器230。在本说明书中,将描述根据本公开的实施例的电子设备120(以下,将120用作参照本说明书中公开的电子设备的附图标记)执行电子设备控制方法的的实施例。因此,针对电子设备120描述的实施例可以适用于电子设备控制方法,并且,针对电子设备控制方法描述的实施例可以适用于电子设备120的实施例。实施例不限于由本说明书中公开的电子设备120执行,并且可以由各种电子设备执行。
在操作S310中,电子设备120可以通过使用光学元件210将从对象110反射的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束。根据实施例,可以使用用于向对象110照射光以从对象110获取光学信息的光源。光源可以以外部设备的形式实现,或者被提供为电子设备120的组件。
根据本公开的实施例,从对象110反射的入射光可以在通过光学元件210之前由准直器准直。根据本公开的实施例,可以省略准直器。
根据本公开的实施例,在操作S310中,光学元件210可以将从对象110反射的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束。然后,分离的入射光可以被聚集在光接收表面上以形成干涉区域。
然后,在操作S320中,连接到光接收表面的光学传感器220可以检测从对象110反射的入射光。
此后,在操作S330中,处理器230可以从检测到的入射光中获取第一光谱。
然后,在操作S340中,处理器230可基于第一光谱与参考光谱之间的相似度来确定对象110的状态信息。根据本公开的实施例,对象110的种类和参考光谱可以取决于用户使用电子设备120在应用上做出的输入。用户可以输入他/她想在应用上知道的对象110的状态信息。在这种情况下,处理器230可以基于在应用上做出的用户输入来访问电子设备120或外部设备的存储器(未示出),以获取关于与对象110的种类相对应的参考光谱的信息。用户可以通过应用向电子设备120输入他/她想要知道的状态信息或对象110的图像中的至少一个。例如,当电子设备120的用户想要知道的对象110的状态信息是关于对象110是真品还是假冒产品的信息时,用户可以输入检查对象110是否为真品的命令以及由通过能够拍摄的对象110的诸如照相机之类的摄影设备拍摄的对象110的图像。在这种情况下,对象110的种类可以是诸如手表和包之类的产品,并且参考光谱可以对应于与用户输入的对象110相同种类的产品中与对象110具有相同型号和品牌的产品。
图4示出了根据本公开实施例的光学设备的结构。
当光源410向对象110照射光时,光可以入射到对象110,并且入射光可以从对象110反射。光源410可以是自然光源,例如太阳或人造光源。人造光源可以是由人类制造的任意种类的光源,例如闪光灯、发光二极管(LED)、激光二极管、激光器等。源410的种类可以取决于电子设备120的使用目的。
如图4所示,电子设备120可以分析从光源410向其照射了光的对象110的光谱,以确定对象110的状态信息。光源410可以是诸如太阳的自然光源,或人造光源。人造光源可以是由人类制造的任意种类的光源,诸如闪光灯、LED、激光二极管、激光器等。根据本公开的实施例,光源410可以是安装在智能手机背面或智能电视正面的闪光灯或LED。根据本公开的另一实施例,当需要节省智能电话或智能手表的电池电量时,可以将光源410设置在智能电话或智能手表的外部。光源410的种类可以取决于电子设备120的使用目的。根据本公开的实施例,当电子设备120是智能电话并且通过使用智能电话来确定对象110是否是真品时,光源410可以是安装在智能电话中的闪光灯。根据另一实施例,当电子设备120是冰箱并且确定食物的新鲜度时,光源410可以是安装在冰箱中的照明器。
根据本公开的实施例,电子设备120可以根据对象110的种类和从对象获取的状态信息的种类中的至少一个或组合来改变光源410的波长范围。110。例如,当对象110是固体时,光源410可以照射具有第一波长范围的光,并且,当对象110是液体时,光源410可以照射具有与第一波长范围不同的第二波长范围的光。作为另一示例,当从对象110获取成分A的内容信息时,光源410可以照射具有第三波长范围的光,并且,当从对象110获取成分B的内容信息时,该光源410可以照射具有与第三波长范围不同的第四波长范围的光。
根据本公开的一个实施例,如图4所示,光学设备130可以包括准直器420a、光学元件210a和光学传感器220。根据本公开的实施例,可以省略准直器420a。
准直器420a可以转换从对象110反射的入射光的光路以准直入射光。
根据本公开的实施例,光学元件210a可以将穿过准直器420a而准直的光分离成沿着两个或更多个光路行进的两个或更多个入射光束。根据本公开的实施例,图2中的光学元件210可以是具有圆锥形表面的光学元件210a,光学元件210a可以是作为专用类型的透镜的轴锥的形式。
根据本公开的实施例,光学元件210a可以是修改的轴锥的形式,例如,具有切下边缘的轴锥。从对象110反射并然后穿过准直器420a的入射光最终穿过的轴锥的面可以分别对应于两个或更多个光路。入射光的光路可以根据光通过的轴锥的面的朝向和光学元件210a的光学特性(例如,折射率)而变化。
根据本公开的实施例,准直器420a和光学元件210a可以定位在电子设备120中的固定位置。通过固定准直器420a和光学元件210a,可以不需要光学设备130的预对准或预调节,因此,可以加速对象110的光谱分析。
此外,根据本公开的实施例,准直器420a和光学元件210a可以涂覆有抗反射涂层以最小化光学损失。
穿过光学元件210a的入射光可以沿着来自光学元件210a的多个表面的不同光路朝向光学传感器220的光接收表面430行进。如图4所示,沿着两个或更多个光路行进的入射光束可以入射到光学传感器220的光接收表面430。根据本公开的实施例,沿着两个或更多个光路行进的入射光束可以与彼此在预定义区域进行干涉。在这种情况下,不同的光路可以会聚在光接收表面430上以在入射光束之间产生干涉条纹。光学传感器430的光接收表面430上的在沿着两个或更多个光路行进的入射光束之间发生干涉的区域被称为干涉区域440。
可以基于光学元件210a的尺寸、光学元件210a与光接收表面430之间的分隔距离450、准直器420a的尺寸等来确定光学设备130的尺寸。分隔距离450可以表示光学元件210a的预定参考点与光学传感器220的预定参考点之间的距离。例如,分隔距离450可以被定义为光学元件210a的最低位置与光学传感器220的光接收表面430之间的距离。根据实施例的光学设备130的水平、垂直和高度长度可以为5mm。根据本公开的实施例,θ460可以是不同光路之间的角度。根据本公开的实施例,可以确定θ460的大小和间隔距离450以检测从光学传感器220的光接收表面430在两个或更多路径的入射光束之间发生干涉的干涉区域440。可以从干涉区域440检测两条或更多条路径的入射光束之间的干涉条纹。准直器420a和光学元件210a可以被固定。
根据本公开的实施例,可以计算光学设备130可检测的波长范围以及光学设备130的分辨率。例如,光学传感器220可以具有1.12μm的像素大小和4656×3496的总像素数。在这种情况下,每个干涉条纹可能需要5个像素才能正确检测入射光。因此,干涉条纹可以具有至少5个像素*1.12um至6um的周期。当干涉条纹的周期为6μm时,θ460 5.7°。在这种情况下,光学设备130可检测的波长范围可以是400nm至900nm,并且光学设备130的分辨率可以是1nm。
图5示出了根据本公开实施例的光学设备的另一结构。
如图5所示,准直器420b可以准直从对象110反射的入射光。根据一个实施例,可以省略准直器420b。
根据本公开的实施例,图2的光学元件210可以是包括分别对应于两个或更多个光路的多个棱镜的光学元件210b。多个棱镜中的每个可以具有各种形状的三维(3D)结构,例如,每个棱镜可以是具有四边形、五边形等的面的多面体形状。可以将多个棱镜集成在一体或通过结合单位棱柱形成。可以根据实施例不同地确定棱镜的数量。例如,可以根据需要通过分割入射光而产生的光路的数量来确定棱镜的数量。而且,可以配置多个棱镜的形状,取向,结构等,使得入射到光学元件210中的入射光被分成沿着两个或更多个光路行进的两个或更多个入射光束,然后在光接收面430的干涉区域被精确地收集。在图5中,示出了两个棱镜,其一个面彼此接触,但是不限于此。
根据本公开的实施例,分隔距离510可以表示光学元件210b的预定参考点与光学传感器220的预定参考点之间的距离。例如,可以定义分隔距离510作为光学元件210b的最低位置与光学传感器220的光接收表面430之间的距离。在这种情况下,可以确定分隔距离510以检测从光学传感器220的光接收表面430发生两个或更多个路径的入射光束之间的干涉的干涉区域。此外,可以确定分隔距离510以从光接收表面430检测具有预定尺寸或更大尺寸的干涉区域。可以从干扰区域检测到两条或更多条路径的入射光束之间的干涉条纹。准直器420b和光学元件210b可以是固定的。
尽管在图4和图5中未示出,但是电子设备120可以进一步包括存储器、处理器230和显示器。存储器可以存储包括多个参考光谱的数据。每个参考光谱可以对应于如上所述的特定对象类型。处理器230可以连接到光学传感器220以获取第一光谱,并访问存储器以选择与对象110相同类型对应的参考光谱,并确定第一光谱是否与参考光谱匹配。显示器可以显示确定结果。
光学设备130可以充当光谱仪,并且被包括在诸如智能电话或智能手表的移动设备中。本公开的实施例可以包括具有小尺寸的光学设备130,用于在包括存储器、处理器230、显示器等的小型移动设备中从对象110获取光学信息,以使小型移动设备能够容易且快速地获取对象110的状态信息。
图6A示出了根据本公开实施例的由光学设备的光学传感器检测到的波长范围。
根据本公开的实施例,光学元件210a或210b可以使光学传感器220能够检测从对象110反射的入射光束之间的干涉区域440。
如图6A所示,光学传感器220可以包括多个子传感器,以分别检测不同波长范围内的光谱。多个子传感器可以包括能够检测紫外线(UV)波长范围的光谱的第一传感器610a、能够检测可见(VIS)射线波长范围的光谱的第二传感器610b和能够检测近红外(NIR)波长范围的光谱的第三传感器610c。根据本公开的实施例,光学传感器220可以包括第一传感器610a至第三传感器610c中的至少一个子传感器,并且子传感器610a、610b和610c可以分别检测不同波长范围的光谱。根据本公开的实施例,第一传感器610a可以检测300nm至500nm的波长范围的光谱,第二传感器610b可以检测400nm至750nm的波长范围的光谱,并且第三传感器610c可以检测750nm至1000nm的波长范围的光谱。
曲线图620a可以代表第一传感器610a的吸收光谱,曲线图620b可以代表第二传感器610b的吸收光谱,曲线图620c可以代表第三传感器610c的吸收光谱。根据本公开的实施例,因为光学传感器220包括第一至第三传感器610a至610c中的至少一个子传感器,所以如曲线图630所示,可以检测到对应于由各个子传感器检测到的所有波长范围的光谱。如曲线图630所示,光学传感器220可以通过使用第一传感器610a、第二传感器610b和第三传感器610c的全部来获得宽波长范围的吸收光谱。
图6B示出了在不同橄榄油的不同混合比下的橄榄油混合物的吸收光谱,该吸收光谱由根据本公开的电子设备的光学传感器检测。
曲线图640显示了根据波长的、在特级初榨橄榄油和劣质橄榄油的不同混合比下混合的橄榄油混合物的吸收光谱、由光学传感器220检测到吸收光谱。表650表示劣质橄榄油相对于特级初榨橄榄油的混合比。如图6B所示,曲线图640的吸收光谱660a至660e可以分别对应于以劣质橄榄油相对于特级初榨橄榄油的不同混合比(例如4:0、3:1、2:2、1:3以及0:4)混合的橄榄油混合物的检测到的吸收光谱。根据本公开的实施例,曲线图640示出了大约380nm至大约680nm的检测到的波长范围,并且该波长范围可以被包括在由第一传感器610a和第二传感器610b检测到的波长范围中。根据本公开的实施例,处理器230可以在大约380nm的波长和大约530nm的波长之间比较吸收光谱660a至660e,以确定橄榄油的质量。在这种情况下,当处理器230仅比较由第二传感器610a检测到的吸收光谱660a至660e时,处理器230可能难以准确地确定橄榄油的质量。然而,当处理器230比较由第一传感器610a和第二传感器610b检测到的吸收光谱660a至660e时,处理器230可以更准确地确定橄榄油的质量。
图7是示出根据本公开的实施例的确定第一光谱与参考光谱之间的相似度的过程的流程图。
上面已经通过图3的操作S310至S330描述了获取第一频谱的过程。根据本公开的实施例,在操作S710中,处理器230可以将傅立叶变换应用于第一频谱以生成包括实部和虚部的复数形式。实部和虚部可以分别对应于幅度信息(或幅度谱)和相位信息(或相位谱)。傅里叶变换是本领域技术人员众所周知的,因此,在本说明书中将省略其描述。
然后,在操作S720中,处理器230可以将经过傅里叶变换的第一光谱的实部和虚部分别与参考光谱的实部和虚部进行比较。
然后,在操作S730中,处理器230可基于第一光谱和参考光谱之间的相似度来确定第一光谱的实部和虚部是否分别与参考光谱的实部和虚部匹配。相似度是指两个或多个要比较的对象之间的匹配程度。处理器230可以通过卷积、对归一化后的差的确定、模式匹配等来确定相似度。根据本公开的实施例,确定两个比较的频谱彼此匹配可能不需要两个频谱完全重叠,并且,当两个光谱的变化彼此匹配预定程度或更大时,可以确定两个光谱彼此匹配。两个频谱的变化彼此匹配预定程度或更大意味着频谱的倾斜度或拐点彼此匹配预定级别或更大的情况、卷积结果值大于或等于的情况等。根据本公开的实施例,当处理器230确定相似度大于或等于预定水平时,处理器230可以确定比较的对象彼此匹配,否则,处理器230可以确定比较的对象彼此不匹配。
然后,当处理器230基于相似度确定经受傅立叶变换的第一频谱的实部和虚部分别与参考频谱的实部和虚部匹配时,在操作S740中,处理器230可确定第一频谱分别与参考频谱匹配。并且,当处理器230确定第一频谱的实部和虚部中的任何一个与参考频谱的实部和虚部中的相应的一个不匹配时,在操作S750中,处理器230可以确定第一光谱与参考光谱不匹配。
图8示出了根据本公开实施例的第一光谱与参考光谱之间的基于相似度的匹配的确定结果。如上所述,可以对第一光谱和参考光谱进行傅立叶变换,以分别成为具有实部和虚部的复数形式。在这种情况下,实部和虚部可以分别对应于幅度信息(或幅度谱)和相位信息(或相位谱)。如图8所示,根据本公开的实施例,实线810代表参考光谱的傅立叶变换形式,而虚线820代表第一光谱的傅立叶变换形式。在这种情况下,参考光谱不一定是一个光谱,并且可以提供两个或更多个参考光谱。当处理器230确定傅立叶变换后的第一光谱的实部和虚部分别与傅立叶变换后的参考光谱的实部和虚部相匹配时,处理器230可以确定第一光谱与参考光谱相匹配(830),并且当处理器230确定傅立叶变换后的第一频谱的实部和虚部中的任何一个与傅立叶变换后的参考频谱的实部和虚部中的相应的一个不匹配时,处理器230可以确定第一光谱与参考光谱不匹配(840)
图9A示出了根据本公开实施例的电子设备的操作。
根据本公开的实施例,电子设备120可以确定对象110是否是真品。根据本公开的实施例,当电子设备120的用户在应用上输入用于检查对象110是否为真品的命令或者用户执行用于识别真品的模式时,处理器230可以准备识别真品。然后,处理器230可以显示消息,该消息请求用户输入要被确定是否为真品的对象110的图像。然后,在应用上,用户可以通过使用摄影设备(未示出)来拍摄对象110以将拍摄的图像输入到电子设备120。所拍摄的图像可以由安装在电子设备120中的拍摄设备拍摄,或者由与电子设备120分离的拍摄设备拍摄,然后传送到电子设备120。根据本公开的另一实施例,用户可以在处理器230显示请求用户输入拍摄的图像的消息之前输入他/她的意图,以通知他/她想要检查对象110是否是真品,以及拍摄的对象110的拍摄图像。此后,当通过光学设备130将对象110的第一光谱输入到电子设备120时,处理器230可以访问存储器以获得与对象110具有相同类型的真品的对应的参考光谱。在这种情况下,对象110的类型可以是要被确定是否为真品的产品,例如手表、包、鞋等。此后,处理器230可以通过图7所示的一系列处理基于相似度来确定对象110是否是真品。
框910示出了如图8所示的处理器230基于相似度的匹配确定的结果。根据本公开的实施例,当第一光谱与参考光谱不匹配使得对象110被确定为假冒产品时,处理器230可以基于相似度计算对象110将为真品的概率,并通过电子设备120的屏幕向用户显示关于对象110是否为真品的确定结果以及对象110将为真品的概率。
根据本公开的实施例,对象110可以是手表。在这种情况下,当用户输入他/她的意图通知他/她想要检查手表是否为真品产品以及要确定是否为真品的手表的拍摄图像时,处理器230可以确定手表是否为真品,计算手表为真品的概率,并通过电子设备120的屏幕为用户显示确定手表是否为真品的结果以及手表为真品的概率,如图9A所示。
根据本公开的另一实施例,可能存在电子设备120的用户想要检查对象110的成熟度、烹饪程度等的情况。在这种情况中,对象110可以是食物,例如水果、鱼或肉。
图9B示出了根据本公开实施例的电子设备的操作。
根据本公开的实施例,电子设备120可以确定对象110的状态信息,并且与电子设备120分离的第一外部设备920可以为用户示出确定的结果。然而,电子设备120可以通过安装在电子设备120上的屏幕而不是经由第一外部设备920来显示对象110的状态信息的确定结果。
根据本公开的实施例,可以将用户使用的应用安装在第一外部设备920或电子设备120中的至少一个中。当提供第一外部设备920时,处理器230可以通过服务器930与第一外部设备920进行交互。
根据本公开的实施例,当电子设备120的用户想要确定对象110的状态信息时,通过电子设备120的输入装置(例如,当屏幕是触摸屏时,通过触摸),用户可以输入他/她的意图通知他/她想要确定对象110的状态信息。但是,当第一外部设备920的用户输入他/她的意图通知他/她想要通过第一外部设备920的应用来确定对象110的状态信息时,第一外部设备920可以通过服务器930向电子设备120发送用于确定对象110的状态信息的请求。此后,处理器230可以基于第一光谱和参考光谱之间的相似度,通过图7所示的过程来确定对象110的状态信息,通过服务器930将结果数据发送到第一外部设备920。
框940示出了如图8所示由处理器230确定相似度的结果的示例。根据本公开的实施例,当提供第一外部设备920时,用户可以通过第一外部设备920的屏幕看到对象110的确定的状态信息,并且,当不提供第一外部设备920时,用户可以通过电子设备120的屏幕看到对象110的确定的状态信息。
根据本公开的实施例,电子设备120可以是冰箱,对象110的状态信息可以是食物的新鲜度,并且对象110可以是西兰花。在这种情况下,对象110的类型可以是食物。当用户通过第一外部设备920或电子设备120的应用输入他/她的意图以通知他/她想要检查西兰花的新鲜度时,处理器230可以基于相似度确定西兰花是否新鲜以及西兰花的新鲜度,如框940所示。然后,处理器230可以将确定的结果数据发送到第一外部设备920,并且第一外部设备920可以基于确定的结果数据通过屏幕显示西兰花是否新鲜以及西兰花的新鲜度。根据本公开的实施例,处理器120可以直接通过电子设备120的屏幕示出确定的结果数据。
图10示出根据本公开的实施例的通过测量从对象反射的随时间变化的入射光的光谱而获得的结果。
如图10所示,电子设备120可以是可穿戴智能手表,并且光学设备130可以足够小以被安装在智能手表中。根据本公开的实施例,如曲线图1010所示,可以通过使用电子设备120同时获取多个光谱。然后,处理器230可以对所获取的光谱进行傅立叶变换以根据每种材料的波长获取吸收系数,如曲线图1020所示。
根据一个实施例,对象可以是在用户的皮肤中包含的预定成分,并且电子设备120可以检测包含在用户的皮肤中的预定成分的一部分随时间的变化,以获取关于用户的健康状态的信息。例如,预定成分可以是黑色素、蛋白质、血红蛋白、氧化的血红蛋白、水或胶原蛋白中的至少一种或其组合。电子设备120可以以规则的间隔或当满足预定条件时获取关于预定成分的量的信息。例如,当用户的心率大于或等于预定值时,电子设备120可以获取关于预定成分的量的信息。根据另一示例,每当佩戴在用户身上的辐射计的计数增加预定数量时,电子设备120就可以获取关于预定成分的量的信息。
图11示出了根据本公开的实施例的确定电子设备中的对象的状态信息的示例。
根据本公开的实施例,对象110可以是油,并且参考对象可以是第一参考油和第二参考油。处理器230可以对作为对象110的油的光谱执行傅立叶变换,并且确定与对应于第一参考油和第二参考油的参考数据的匹配和匹配程度。如图11所示,曲线图1110示出通过应用傅立叶变换而获得的对象110的吸收光谱的幅度信息、第一参考油的吸收光谱的幅度信息以及第二参考油的吸收光谱的幅度信息。曲线图1120示出了对象110的吸收光谱的相位信息、第一参考油的吸收光谱的相位信息以及第二参考油的吸收光谱的相位信息。在油的情况下,仅通过比较曲线图1110中所示的幅度信息,可能难以确定哪一种参考油与对象110相似。但是,如曲线图1120所示,通过比较对象110的相位信息与参考油的相位信息,可以确定对象110的相位信息与第二参考油的相位信息匹配。因此,处理器230可以基于相似度确定对象110与第二参考油而不是第一参考油匹配,并且通过图7所示的过程来计算匹配程度。因此,根据当前实施例,通过将幅度信息和相位信息一起比较,可以获取对象110的更准确的状态信息。
对象110的状态信息可以取决于用户使用的应用的目的。根据本公开的实施例,对象110的状态信息可以是油的质量,参考对象可以是低质量的油和高质量的油,或者具有特定水平或更高质量的油。根据本公开的实施例,对象110的状态信息可以是产品的变性程度,并且参考对象可以是与对象110相同的、在产油后很短时间的油和在产油后的很长时间的油或者在产油后预定时间时的油。
图12示出了根据本公开实施例的确定电子设备中的对象的状态信息的示例。
根据本公开的实施例,电子设备120可以测量特定呼吸中断时间1230中血液的氧合水平(或氧饱和度)随时间的变化。在这种情况下,可以将对象110的状态信息确定为心脏问题、是否存在疾病、空气污染、是否存在缺氧等。测得的氧饱和度可以是相对于与对象110相同类型的多个参考对象的值。根据本公开的实施例,对象110可以是感兴趣的血液,第一光谱可以是感兴趣的血液的氧饱和度随时间的变化,并且,参考光谱可以是健康人的氧饱和度随时间的变化,特别是在特定的呼吸中断时间1230中。然后,根据第一光谱和参考光谱之间的比较,处理器230可以确定是否存在疾病、空气污染,是否存在缺氧等。
根据本公开的实施例,可以基于不同两个波长的光谱强度的部分的变化来测量氧饱和度的变化。基于两个不同波长的光谱强度的部分的变化来测量氧饱和度的变化对于本领域技术人员是众所周知的,因此,在本说明书中将省略其详细描述。根据本公开的实施例,曲线图1210可以示出氧饱和度随时间的变化,并且各个曲线可以是在不同皮肤上测量的对象110的氧饱和度随时间的变化。处理器230可以测量氧饱和度的变化以确定呼吸中断时间1230,并且基于呼吸中断时间1230中的氧饱和度变化来确定对象110的状态信息。曲线图1220示出了在不同皮肤上测得的氧饱和度变化的另一示例。
图13示出了根据本公开实施例的确定电子设备中的对象的状态信息的示例。在这种情况下,对象110可以是血液,并且电子设备120可以是可穿戴智能手表。可以基于两个不同波长的光谱强度的部分的变化来测量血糖的变化。
曲线图1300显示了血糖水平随时间的变化。根据本公开的实施例,处理器230可以测量餐后血糖反应水平,并基于餐后血糖反应水平的变化来确定对象110的状态信息。根据本公开的实施例,对象110的状态信息可以是是否存在消化功能问题,是否需要饮食控制或是否需要食物摄入等。
图14示出根据本公开的实施例的确定关于电子设备中的对象的状态信息的示例。根据本公开的实施例,可以通过使用电子设备120来确定皮肤的状态信息。在这种情况下,对象110可以是皮肤,并且对象110的状态信息可以是皮肤的年龄、护肤功效等。曲线图1410示出了根据波长的各个水合水平的吸收光谱。曲线图1410的每条曲线代表皮肤的水合水平。
根据本公开的实施例,如曲线图1410所示,水合水平可以随时间而降低。当水合水平低于预定水平时,处理器230可以通过电子设备120的屏幕显示指示水合水平低的信息。例如,指示水合度低的信息可以是单词“喝水”(未示出)。此后,电子设备120的用户可以执行预定义的操作(例如,饮用水的操作或涂抹面油的操作)以增加水合水平,如曲线图1420a所示。根据实施例,电子设备120可以基于状态信息为用户输出针对推荐行为的指南。例如,当水合水平低时,电子设备120可以通过显示器显示表示涂抹面油的操作、涂抹水的操作等的指导信息,或者可以通过扬声器输出指导语音。
然后,当用户采取提高水合水平的操作时,水合水平可以随着时间增加,如曲线图1430所示。根据本公开的实施例,处理器230可以测量脱水时皮肤的水合水平的光谱变化和再水合后的水合水平的光谱变化以确定对象110的状态信息。例如,处理器230可以测量脱水后从水合水平0.97到水合水平0.06的光谱变化,以及在再水合后从水合水平0.06到水合水平0.97的光谱变化,并基于光谱变化率确定对象110的状态信息。在这种情况下,要比较的水合水平不限于2,并且可以由电子设备120的产品设计者进行各种设置。
图15示出了根据本公开实施例的确定电子设备中的对象的状态信息的示例。
根据本公开的实施例,电子设备120可以是包括光学设备130的马桶,并且对象110可以包括尿液(在下文中,称为第一对象)以及尿液和化合物的混合物(在下文中,称为第二对象)。在这种情况下,处理器230可以将根据波长的第一对象的吸收光谱与根据波长的第二对象的吸收光谱进行比较,以确定是否存在疾病,例如碱性蛋白尿症或苯丙酮尿症。
根据本公开的实施例,曲线图1510表示根据波长的健康人的第一对象和第二对象的吸收光谱。曲线图1520代表根据波长的被怀疑患有碱性蛋白尿症的人的第一对象和第二对象的吸收光谱,而曲线图1530代表根据波长的被怀疑具有苯丙酮尿症的人的第一对象和第二对象的吸收光谱。如曲线图1510所示,根据波长,健康人的第一对象和第二对象的吸收光谱从相似的吸收量开始,并且随着波长的增加而不断减小。但是,如曲线图1520所示,根据波长,患有碱性蛋白尿症的人的第一对象的吸收光谱从低吸收量开始,并且随着波长的增加而减小,而根据波长,该人的第二对象的吸收光谱的吸收量比第一对象开始明显高,并且随着波长的增加而减少。这样,电子设备120可以基于根据疾病的吸收光谱的特性,从对象的吸收光谱中获取关于疾病的信息。
根据另一个实施例,如曲线图1530所示,根据波长,没有苯丙酮尿症的人的第一对象和第二对象的吸收光谱从相似的吸收量开始,并且随着波长的增加而不断减小,而根据波长,具有苯丙酮尿症的人的第二对象的吸收光谱的吸收量比第一对象开始明显高,并且随着波长的增加而不断减小,与与第一对象的吸收光谱不同。
处理器230可以根据波长测量第一对象和第二对象的吸收光谱的变化的差异,以检测患有碱性蛋白尿症或苯丙酮尿症的特定人。
根据本公开的实施例,电子设备120可以将关于疾病的存在或不存在的信息发送到用户使用的外部设备1540。根据本公开的另一实施例,电子设备120可以通过使用光学设备130根据波长仅获取第一对象和第二对象的吸收光谱,并且将关于所获取的吸收光谱的信息发送给医生1550。医生1550可以诊断疾病的存在或不存在,并且将诊断结果发送到外部设备1540。例如,医生1550的诊断结果可以通过医生1550的终端、医疗信息服务器等发送到电子设备120。诊断疾病存在与否的主体可以是医生1550或单独的服务器,尽管不限于此。
图16是示出根据本公开的实施例的电子设备和通过网络与电子设备交互的外部设备的框图。
根据本公开的实施例,为了确定对象110的状态信息,电子设备120的处理器230可以访问电子设备120的存储器(未示出),或者在存储器不存储参考频谱时请求第二外部设备1610通过网络1620上的电子设备120的通信器(未示出)发送参考频谱。接收到对参考频谱的请求的第二外部设备1610可以通过网络1620上的通信器将参考频谱发送到电子设备120。
根据另一实施例,第二外部设备1610可以包括第三电子设备(未示出)以直接执行根据所公开的实施例的方法。在这种情况下,电子设备120可以仅获取对象110的第一光谱,并且通过通信器将第一光谱发送到服务器,并且第二外部设备1610(例如,云服务器,人工智能服务器等)可以使用第二外部设备1610的第三电子设备来执行存储在第二外部设备1610中的计算机程序产品,以直接执行根据所公开的实施例的方法。在这种情况下,第二外部设备1610可以将基于根据所公开的实施例的方法的结果发送到电子设备120,并且电子设备120可以在屏幕上显示结果。
通信器可以根据各种通信方法与各种类型的外部设备进行通信。通信器可以包括无线保真(WiFi)芯片、蓝牙芯片、无线通信芯片和近场通信(NFC)芯片中的至少一个。
WiFi芯片和蓝牙芯片可以分别根据WiFi方法和蓝牙方法执行通信。当通信器使用WiFi芯片或蓝牙芯片时,通信器可以首先发送和接收各种连接信息,例如服务集标识符(SSID)、会话密钥等,以通过使用各种类型的连接信息来建立通信,然后发送和接收各种信息。无线通信芯片可以是根据各种通信标准执行通信的芯片,例如电气和电子工程师协会(IEEE)、Zigbee、第三代(3G)、第三代合作伙伴计划(3GPP)、长期演进(LTE)等。NFC芯片可以是使用例如135kHz,13.56MHz,433MHz,860MHz至960MHz,2.45GHz等的各种RF-ID频段的13.56MHz频段根据NFC方法运行的芯片。
到目前为止,已经参考附图描述了所公开的实施例。显而易见的是,本领域普通技术人员可以在不改变本公开的技术精神和必要特征的情况下对所公开的实施例进行各种修改。因此,应当理解,上述公开的实施例在所有方面仅用于说明目的,而不用于限制目的。

Claims (15)

1.一种电子设备,包括:
光学元件,其被固定并被配置为将从对象反射到其上的入射光分成沿着两个或更多个光路行进的两个或更多个入射光束;
光学传感器,其与光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域,并被配置为检测入射光;和
至少一个处理器,被配置为基于从检测到的入射光获取的第一光谱与至少一个参考光谱之间的相似度来确定关于对象的状态信息。
2.根据权利要求1所述的电子设备,还包括准直器,所述准直器被固定并且被配置为准直从所述对象反射的入射光。
3.根据权利要求1所述的电子设备,其中,所述光学元件包括具有分别与所述两个或更多个光路对应的两个或更多个面的轴锥。
4.根据权利要求1所述的电子设备,其中,所述光学元件包括分别对应于所述两个或更多个光路的多个棱镜。
5.根据权利要求1所述的电子设备,其中,所述光学传感器包括具有不同波长范围的多个子传感器,所述多个子传感器包括具有300nm至500nm的波长范围的第一传感器、波长范围为400nm至750nm的第二传感器、或波长范围为750nm至1000nm的第三传感器中的至少一个或组合。
6.根据权利要求1所述的电子设备,其中,所述处理器被配置为对所述入射光执行傅立叶变换以获得幅度信息和相位信息,并且基于所述幅度信息和相位信息来确定第一光谱和至少一个参考光谱之间的相似度。
7.根据权利要求6所述的电子设备,其中,通过执行傅立叶变换而获得的幅度信息和相位信息分别对应于实部和虚部。
8.根据权利要求1所述的电子设备,其中,所述处理器被配置为获取关于与所述第一光谱相对应的对象的类型信息,并且将所述第一光谱与所述与该类型信息相对应的至少一个参考光谱进行比较以确定状态信息。
9.根据权利要求1所述的电子设备,还包括通信器,其中,所述处理器还被配置为通过所述通信器从外部设备获得所述至少一个参考光谱。
10.根据权利要求1所述的电子设备,其中,所述处理器被配置为基于不同的两个波长的光谱强度的部分的变化来确定与健康有关的状态信息。
11.根据权利要求1所述的电子设备,其中,所述处理器被配置为基于脱水时水合能级的光谱变化和再水合时水合能级的光谱变化来确定与皮肤有关的状态信息。
12.根据权利要求1所述的电子设备,其中,所述对象包括:与尿液相对应的第一对象;以及包括尿液和第一化合物的混合物的第二对象,以及
所述处理器被配置为基于第一对象的第一光谱和第二对象的第二光谱确定与疾病有关的信息。
13.根据权利要求1所述的电子设备,其中,所述状态信息包括产品是真品还是假品、食物的新鲜度、成熟度或烹饪程度中的至少一项。
14.一种包括光学元件和光学传感器的电子设备的控制方法,所述控制方法包括:
将从对象反射的入射光分成沿光学元件中的两个或更多个光路行进的两个或更多个入射光束;
检测光学传感器上的入射光;和
基于从检测到的入射光获得的第一光谱与至少一个参考光谱之间的相似度,确定关于对象的状态信息,
其中,所述光学传感器与所述光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域。
15.一种计算机程序产品,包括存储程序命令的记录介质,所述程序命令在由处理器执行时使所述处理器执行确定关于对象的状态信息的方法,所述确定关于对象的状态信息的方法包括:
将从对象反射的入射光分成沿光学元件中的两个或更多个光路行进的两个或更多个入射光束;
检测光学传感器上的入射光;和
基于从检测到的入射光获得的第一光谱与至少一个参考光谱之间的相似度,确定关于对象的状态信息,
其中,所述光学传感器与所述光学元件间隔开一间隔距离,使得分开的入射光束在光接收表面上形成干涉区域。
CN201980021100.3A 2018-03-30 2019-03-21 用于获取对象状态信息的电子设备及其控制方法 Pending CN111903114A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
RU2018111477A RU2682593C1 (ru) 2018-03-30 2018-03-30 Ультракомпактный спектрометр высокого разрешения и способ его применения
RU2018111477 2018-03-30
KR1020190030560A KR20190114775A (ko) 2018-03-30 2019-03-18 대상체의 상태정보를 획득하는 전자장치 및 그 제어 방법
KR10-2019-0030560 2019-03-18
PCT/KR2019/003301 WO2019190122A1 (ko) 2018-03-30 2019-03-21 대상체의 상태정보를 획득하는 전자장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
CN111903114A true CN111903114A (zh) 2020-11-06

Family

ID=65806029

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980021100.3A Pending CN111903114A (zh) 2018-03-30 2019-03-21 用于获取对象状态信息的电子设备及其控制方法

Country Status (4)

Country Link
EP (1) EP3737077A4 (zh)
KR (1) KR20190114775A (zh)
CN (1) CN111903114A (zh)
RU (1) RU2682593C1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220049599A (ko) * 2019-12-17 2022-04-21 구글 엘엘씨 관통 디스플레이 분광기로 구성된 방출형 디스플레이
WO2022080284A1 (ja) * 2020-10-13 2022-04-21 国立研究開発法人理化学研究所 携帯機器、食品特性判断装置、食品特性判断方法及びプログラム

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006127840A2 (en) * 2005-05-24 2006-11-30 Sean Xiaolu Wang Spectroscopic sensor on mobile phone
CN101371128A (zh) * 2006-01-20 2009-02-18 住友电气工业株式会社 分析装置、真伪判定装置、真伪判定方法及地下探测方法
CN102812346A (zh) * 2010-03-24 2012-12-05 Nec软件系统科技有限公司 分析装置
CN103281459A (zh) * 2013-06-06 2013-09-04 仝晓萌 一种可测水果甜度和ph值的手机
CN104040309A (zh) * 2011-11-03 2014-09-10 威利食品有限公司 用于最终使用者食品分析的低成本光谱测定系统
CN104062007A (zh) * 2014-06-05 2014-09-24 深圳先进技术研究院 手机光谱仪模块及具有该手机光谱仪模块的手机光谱仪
CN105527269A (zh) * 2014-10-21 2016-04-27 王基旆 可携式电子装置、结合该装置的光谱仪及利用该装置检测物品品质的方法
CN105593651A (zh) * 2013-08-02 2016-05-18 威利食品有限公司 光谱测定系统和方法、光谱设备和系统
CN205593911U (zh) * 2016-03-24 2016-09-21 曾凡宇 一种便携式食品安全检测仪
CN105973466A (zh) * 2016-04-27 2016-09-28 华为技术有限公司 用于光谱检测的方法和终端
CN205754455U (zh) * 2016-05-06 2016-11-30 严斌 一种装有近红外线微型光谱仪的手机
CN107076665A (zh) * 2014-09-11 2017-08-18 赫普塔冈微光有限公司 包括光栅结构的光传感器模块和光谱仪
CN107084790A (zh) * 2017-04-24 2017-08-22 西安交通大学 基于智能手机的便携式光谱仪及其光谱检测方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2184950C1 (ru) * 2001-05-28 2002-07-10 Московское конструкторское бюро "Параллель" Устройство для идентификации и контроля качества нефтепродуктов и горючесмазочных материалов
SG173235A1 (en) * 2010-01-29 2011-08-29 Dso Nat Lab Hyperspectral imaging device
CA2886368C (en) * 2012-10-05 2017-08-29 National University Corporation Kagawa University Spectroscopic measurement device
US8830475B1 (en) * 2013-08-19 2014-09-09 National Cheng Kung University Interferometer and spatial interference fourier transform spectrometer
SG10201501196PA (en) * 2015-02-16 2016-09-29 Lighthaus Photonics Pte Ltd Compact spectrometer
DE102015219672A1 (de) * 2015-09-10 2017-03-16 Robert Bosch Gmbh Miniaturspektrometer und Verfahren zur Ermittlung eines Spektrums der von einem Objekt reflektierten, transmittierten oder emittierten Strahlung
WO2017149543A1 (en) * 2016-03-03 2017-09-08 Ci Systems (Israel) Ltd. System and method for interferometric based spectrometry and compact spectrometer using same
US10254215B2 (en) * 2016-04-07 2019-04-09 Verifood, Ltd. Spectrometry system applications
US10228283B2 (en) * 2016-08-12 2019-03-12 Spectral Insights Private Limited Spectral imaging system

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006127840A2 (en) * 2005-05-24 2006-11-30 Sean Xiaolu Wang Spectroscopic sensor on mobile phone
CN101371128A (zh) * 2006-01-20 2009-02-18 住友电气工业株式会社 分析装置、真伪判定装置、真伪判定方法及地下探测方法
CN102812346A (zh) * 2010-03-24 2012-12-05 Nec软件系统科技有限公司 分析装置
CN104040309A (zh) * 2011-11-03 2014-09-10 威利食品有限公司 用于最终使用者食品分析的低成本光谱测定系统
CN103281459A (zh) * 2013-06-06 2013-09-04 仝晓萌 一种可测水果甜度和ph值的手机
CN105593651A (zh) * 2013-08-02 2016-05-18 威利食品有限公司 光谱测定系统和方法、光谱设备和系统
CN104062007A (zh) * 2014-06-05 2014-09-24 深圳先进技术研究院 手机光谱仪模块及具有该手机光谱仪模块的手机光谱仪
CN107076665A (zh) * 2014-09-11 2017-08-18 赫普塔冈微光有限公司 包括光栅结构的光传感器模块和光谱仪
CN105527269A (zh) * 2014-10-21 2016-04-27 王基旆 可携式电子装置、结合该装置的光谱仪及利用该装置检测物品品质的方法
CN205593911U (zh) * 2016-03-24 2016-09-21 曾凡宇 一种便携式食品安全检测仪
CN105973466A (zh) * 2016-04-27 2016-09-28 华为技术有限公司 用于光谱检测的方法和终端
CN205754455U (zh) * 2016-05-06 2016-11-30 严斌 一种装有近红外线微型光谱仪的手机
CN107084790A (zh) * 2017-04-24 2017-08-22 西安交通大学 基于智能手机的便携式光谱仪及其光谱检测方法

Also Published As

Publication number Publication date
EP3737077A4 (en) 2021-03-24
EP3737077A1 (en) 2020-11-11
RU2682593C1 (ru) 2019-03-19
KR20190114775A (ko) 2019-10-10

Similar Documents

Publication Publication Date Title
JP6672406B2 (ja) 単一センサのハイパースペクトル撮像デバイス
US10760964B2 (en) Spectrometry system applications
Shen et al. Open-source mobile multispectral imaging system and its applications in biological sample sensing
US20190282097A1 (en) Personal Wellness Monitoring System
WO2015143417A1 (en) Systems and methods for measuring tissue oxygenation
US11092542B2 (en) Quality evaluation method and quality evaluation device
CN111903114A (zh) 用于获取对象状态信息的电子设备及其控制方法
CN107822592A (zh) 用于测量组织氧合的系统和方法
JP2015172570A (ja) 測定装置、および測定方法
EP3763281A1 (en) Ocular fundus image processing device and ocular fundus image processing program
Hasan et al. Analyzing the existing noninvasive hemoglobin measurement techniques
US11330983B2 (en) Electronic device for acquiring state information on object, and control method therefor
JP2023120414A (ja) 光計測装置、方法、およびプログラム
JP2019207239A (ja) 品質評価方法及び品質評価装置
CN111094917A (zh) 用于共形视觉的系统和方法
JP2019219375A (ja) スペクトルイメージ補正装置及び方法、ならびに対象体の成分分析装置
US10249214B1 (en) Personal wellness monitoring system
WO2022150449A1 (en) Dermatological imaging systems and methods for generating three-dimensional (3d) image models
Aloupogianni et al. Effects of dimension reduction of hyperspectral images in skin gross pathology
US11698370B2 (en) Home toilet system for monitoring urine components in real time while urination
US20230000357A1 (en) Virtual hyperspectral imaging of biological tissue for blood hemoglobin analysis
WO2023161331A1 (en) Spatially resolved nir spectrometer
KR20220077277A (ko) 피부 진단 및 처방 매칭 시스템
RU2642918C2 (ru) Аппаратно-программный комплекс для цифровой биомикроскопии
KR20210079090A (ko) 모바일 피부촬영장치 및 영상분석 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination