CN117017618B - 基于红外图像获取耳部状态的方法、电子设备及存储介质 - Google Patents
基于红外图像获取耳部状态的方法、电子设备及存储介质 Download PDFInfo
- Publication number
- CN117017618B CN117017618B CN202311251454.1A CN202311251454A CN117017618B CN 117017618 B CN117017618 B CN 117017618B CN 202311251454 A CN202311251454 A CN 202311251454A CN 117017618 B CN117017618 B CN 117017618B
- Authority
- CN
- China
- Prior art keywords
- temperature
- ear
- image
- acquiring
- infrared
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000003068 static effect Effects 0.000 claims abstract description 24
- 230000002159 abnormal effect Effects 0.000 claims abstract description 4
- 241000475481 Nebula Species 0.000 claims description 4
- 101000872084 Danio rerio Delta-like protein B Proteins 0.000 claims description 3
- 238000002372 labelling Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 210000005069 ears Anatomy 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F11/00—Methods or devices for treatment of the ears or hearing sense; Non-electric hearing aids; Methods or devices for enabling ear patients to achieve auditory perception through physiological senses other than hearing sense; Protective devices for the ears, carried on the body or in the hand
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
Abstract
本发明提供了一种基于红外图像获取耳部状态的方法、电子设备和存储介质,包括:获取目标用户的静置红外视频;按照设定时间间隔,从第L静置红外视频采集图像,得到对应的红外图像集AL;基于AL,确定目标用户的耳部区域温度信息BL=(BL1,BL2,BL3,BL4);如果|BL1‑B0|>△B,如果(BL2‑BL3)>t1且(BL2‑BL4)>t2,则确定对应的耳部的状态为正常状态;如果(BL3‑BL2)>t1且(BL4‑BL2)>t3时,则确定对应的耳部的状态为异常状态;否则,确定对应的耳部的状态为正常状态。本发明能够基于红外图像获取耳部状态,能够提高用户体验。
Description
技术领域
本发明涉及图像处理领域,特别是涉及一种基于红外图像获取耳部状态的方法、电子设备及存储介质。
背景技术
耳部健康是人体健康的一个重要组成部分。当前,关于耳部健康的检测一般是通过专业的检查工具进行检查。然而,在实际检查过程中,由于耳部会跟专业的检查工具发生亲密接触,会给被检查对象的耳部带来不适。
发明内容
针对上述技术问题,本发明采用的技术方案为:
本发明实施例提供一种基于红外图像获取耳部状态的方法,包括以下步骤:
S100,获取目标用户的静置红外视频;所述静置红外视频包括第1静置外红视频和第2静置红外视频,其中,第1静置红外视频中的每帧图像为目标用户露出左侧耳部的头部侧部图像,第2静置红外视频中的每帧图像为目标用户露出右侧耳部的头部侧部图像;
S200,按照设定时间间隔,从第L静置红外视频采集图像,得到对应的红外图像集AL={AL1,AL2,……,ALi,……,ALm},ALi为基于第L静置红外视频得到的第i个红外图像,i的取值为1到m,m为红外图像的数量;L的取值为1或2;
S300,基于AL,确定目标用户的耳部区域温度信息BL=(BL1,BL2,BL3,BL4),其中,BL1为对应耳部区域的温度变化率,BL2为对应耳部区域内的目标温度,BLBL3为对应耳部区域的第一关联温度,BL4为耳部区域的第二关联温度;
S400,如果|BL1-B0|>△B,执行S500;否则,确定对应的耳部的状态为正常状态;其中,B0为标准温度变化率,△B为预设温度变化率差阈值;
S500,如果(BL2-BL3)>t1且(BL2-BL4)>t2,则确定对应的耳部的状态为正常状态;如果(BL3-BL2)>t1且(BL4-BL2)>t3,则确定对应的耳部的状态为异常状态;其中,t1为第一设定温度阈值,t2为第二设定温度阈值,t3为第三设定温度阈值;t1<t2<t2。
本发明实施例还提供一种非瞬时性计算机可读存储介质,所述存储介质中存储有至少一条指令或至少一段程序,其所述至少一条指令或所述至少一段程序由处理器加载并执行以实现前述方法。
本发明实施例还提供一种电子设备,包括处理器和前述的非瞬时性计算机可读存储介质。
本发明至少具有以下有益效果:
本发明实施例提供的基于红外图像获取耳部状态的方法,能够基于红外图像获取耳部状态,能够实现无创耳部检测,能够提高用户体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的基于红外图像获取耳部状态的方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种基于红外图像获取耳部状态的方法,如图1所示,所述方法可包括以下步骤:
S100,获取目标用户的静置红外视频;所述静置红外视频包括第1静置外红视频和第2静置红外视频,其中,第1静置红外视频中的每帧图像为目标用户露出左侧耳部的头部侧部图像,第2静置红外视频中的每帧图像为目标用户露出右侧耳部的头部侧部图像.
在本发明实施例中,目标用户的静置红外视频为目标用户从室外进入拍摄空间内,按照设定拍摄姿态即露出耳部并且头部侧部对着红外摄像机时,在设定静置时间内拍摄的视频。设定静置时间可基于实际需要进行设置。在一个示意性实施例中,可基于试验获取得到。具体,可获取N个测试对象从拍摄开始的耳洞温度恢复到耳洞正常温度的恢复时间,然后将N个恢复时间的平均值作为设定静置时间。在一个优选实施例中,设定静置时间可为15min。
S200,按照设定时间间隔,从第L静置红外视频采集图像,得到对应的红外图像集AL={AL1,AL2,……,ALi,……,ALm},ALi为基于第L静置红外视频得到的第i个红外图像,i的取值为1到m,m为红外图像的数量;L的取值为1或2。
在本发明实施例中,设定时间间隔可为自定义值。在一个示意性实施例中,设定时间间隔可为1~3秒,优选可为1秒。
S300,基于AL,确定目标用户的耳部区域温度信息BL=(BL1,BL2,BL3,BL4),其中,BL1为对应耳部区域的温度变化率,BL2为对应耳部区域内的目标温度,BLBL3为对应耳部区域的第一关联温度,BL4为耳部区域的第二关联温度。
在本发明实施例中,所述第一关联温度为翳风穴的温度,所述第二关联温度为耳轮穴的温度。
在本发明实施例中,耳部区域、翳风穴和耳轮穴可基于经训练的AI模型获取得到。
本领域技术人员知晓的是,经训练的AI模型可基于标注了耳廓区域、翳风穴和耳轮穴的样本图像训练得到,具体训练方法可采用现有方法。
在本发明实施例中,BL1可通过如下步骤获取得到:
S301,获取AL对应的特征温度集FL={FL1,FL2,……,FLi,……,FLm}和对应的采集时间集TL={TL1,TL2,……,TLi,……,TLm};FLi为ALi中的耳部区域对应的特征温度,TLi为ALi对应的采集时间;TLi=T0+i×△T,T0为从静置红外视频中开始采集图像的开始时间,△T为设定时间间隔。△T可为自定义值,例如,可为1秒。
S302,获取[(FLr+1-FLr)/(TLr+1-TLr)]×[(FLr-FLr-1)/(TLr-TLr-1)],如果[(FLr+1-FLr)/(TLr+1-TLr)]×[(FLr-FLr-1)/(TLr-TLr-1)]<0,说明从TLr开始,目标用户的耳轮区域温度趋于稳定,则将FLr作为目标特征温度;r的取值为1到m-1。
S303,获取BL1=FLi/(i×△TL)。
进一步地,在本发明实施例中,特征温度可为平均温度、温度方差等,优选,可为平均温度,即,FLi=(∑w(i) p=1HLip)/w(i),HLip为ALi对应的耳部区域内的第p个像素点对应的温度,p的取值为1到w(i),w(i)为ALi对应的耳部区域内的像素点数量。
本领域技术人员知晓,获取耳部区域内的每个像素点的温度可为现有技术。
进一步地,在本发明一示意性实施例中,BL2通过如下步骤获取得到:
S31,获取中间采集时间集TL0={TL0 1,TL0 2,……,TL0 j,……,TL0 n};其中,TL0 j为TL0中的第j个中间采集时间,j的取值为1到n,n为TL0中的时间数量;TL0 1=TLr+1;TL0 n=TLm,即TL0为TL中位于TLr之后的时间形成的集合。
S32,获取TL0 j对应的温度集QL0=(QL0 1,QL0 2,……,QL0 j,……,QL0 n),QL0 j为TL0 j对应的耳部区域的耳洞的特征温度。
在本发明实施例中,QL0 j可为平均温度,即QL0 j=(∑p(j) b=1QL0 bj)/p(j)。其中,QL0 bj为TL0 j对应的耳部区域的耳洞中的第b个像素点的温度,b的取值为1到p(j),p(j)为TL0 j对应的耳部区域的耳洞中的像素点的数量。
在本发明实施例中,耳洞是指耳朵的外耳道口。
在本发明一实施例中,可基于现有耳洞识别方法来获取耳部区域的耳洞。例如,可基于经训练的AI模型获取耳部区域的耳洞,也可以通过标注的方式得到,因为,在红外图像中,耳洞区域的温度会比其他脸部其余区域的温度都高,因此很容易标注出耳洞区域。此外,获取耳洞对应区域内的每个像素点的温度可为现有技术。
在本发明另一实施例中,可基于如下方法获取目标用户的耳洞的特征温度。
S1,获取目标用户对应的目标图像的参考点信息C=(G1,G2,D12,θ12),其中,G1为目标图像的第一参考点的位置,G1=(x1,y1),x1和y1分别为目标图像的第一参考点在对应直角坐标中的横坐标和纵坐标;G2为目标图像的第二参考点的位置,G2=(x2,y2),x2和y2分别为目标图像的第二参考点在对应直角坐标中的横坐标和纵坐标;D12为目标图像的第一参考点和第二参考点之间的距离,θ12为目标用户的第一参考点和第二参考点相对于对应的直角坐标系的Y轴负方向的夹角。
在本发明实施例中,所述第一参考点和所述第二参考点位于头部侧部的外轮廓上。具体地,所述第一参考点为鼻尖,所述第二参考点为下颏即下颚的最前端。本领域技术人员知晓,鼻尖和下颏可基于现有方法确定,例如,经训练的AI模型或者人工标注等。
在本发明实施例中,目标图像对应的直角坐标系为以目标图像的第一参考点为原点、以水平方向为X轴、以竖直方向为Y轴构建的直角坐标系,其中,目标图像中的头顶方向为Y轴正方向,目标图像中的后脑勺方向为X轴负方向。S2,获取C与基础信息表I中的任一C12 a之间的相似度Sa,如果Sa≥S0,则将Sa存放至候选列表S中;候选列表S的初始值为空集;S0为预设相似度阈值。
在本发明实施例中,基础信息表I为预先获取得到的信息表。其中,I的第a行为Ia=(Ua,Ga,Da,θa,C12 a);其中,Ia为第a个样本图像的基础信息;Ua为第a个样本图像的ID,Ga为第a个样本图像的耳洞的位置,Ga=(xa,ya),xa和ya分别为第a个样本图像的耳洞的横坐标和纵坐标;Da=(Da1,Da2),Da1为Ga与第a个样本图像的第一参考点之间的距离,Da2为Ga与第a个样本图像的第二参考点之间的距离,θa=(θa1,θa2),θa1为Ga与第a个样本图像的第一参考点之间相对于对应的直角坐标系的X轴负方向的夹角,θa2为Ga与第a个样本图像的第二参考点之间相对于对应的直角坐标系的Y轴负方向的夹角;C12 a为第a个样本图像的参考点信息,C12 a=(D12 a,θ12 a),D12 a为第a个样本图像的第一参考点和第二参考点之间的距离,θ12 a为第a个样本图像的第一参考点和第二参考点之间相对于对应的直角坐标系的Y轴负方向的夹角;a的取值为1到Q1,Q1为样本图像的数量;第a个样本图像为头部侧部图像,第a个样本图像对应的直角坐标系为以第a个样本图像的第一参考点为原点、以水平方向为X轴、以竖直方向为Y轴构建的直角坐标系,其中,第a个样本图像中的头顶方向为Y轴正方向,第a个样本图像中的后脑勺方向为X轴负方向。
在本发明实施例中,图像的ID可为自定义值,例如编号。
在本发明实施例中,样本图像可为不同年龄不同体型的头部侧部图像,可包括头部左侧和头部右侧的图像。在一个示意性实施例中,图像可为红外图像。样本图像的数量可基于实际情况进行设置,理论上越多越好。
本发明实施例中,采用以第一参考点为原点构建直角坐标系,与采用图像的左上角或者右下角为原点构建的图像坐标系相比,能够避免由于拍摄姿态误差所导致的参考点之间的距离和夹角以及耳洞中心位置与参考点之间的距离和夹角的差异,例如,由于每个人的姿态不可能安全一直,有的可能在拍摄过程会头稍微低一下,有的可能头会稍微抬一点,如果以图像坐标系为基准,会导致夹角会存在误差。
本领域知晓的是,与目标图像进行相似度计算的样本图像为与目标图像的头部朝向一直的图像,即如果目标图像是头部左侧图像,则所有的比较图像也是头部左侧图像。
在本发明实施例中,S0可为经验值。优选,S0≥0.85。
在本发明一示意性实施例中,Sa=w1×(1-∣D12-D12 a∣/D12 a)+w2×(1-∣θ12-θ12 a∣/θ12 a),其中,w1和w2分别为第一预设权重和第二预设权重,w1+w2=1。
在本发明实施例中,w1和w2的具体值可基于实验得到,可为经验值,在一个示意性实施例中,w1=w2=0.5。
S3,如果当前的候选列表不为空集,则获取maxS对应的样本图像作为基准图像;其中,maxS为S中的最大值。
本领域技术人员知晓的是,如果当前的候选列表中存在多个最大值,则可随机选择一个最大值对应的样本图像作为基准图像即可。
S4,基于G1、G2和所述基准图像对应的基础信息确定所述目标图像中的耳洞中心位置。
进一步地,在本发明实施例中,S4可具体包括:
S41,基于G1、Df1和θf1获取第一候选耳洞中心位置G01=(x01,y01);x01和y01分别为第一候选耳洞中心位置在目标图像中的横坐标和纵坐标。
在本发明实施例中,根据三角函数关系,可推导到:x01=-(Df1/(1+tan2θf1)1/2),如果yf>0,y01=(Df1×tanθf1)/(1+tan2θf1)1/2,如果yf<0,y01=-(Df1×tanθf1)/(1+tan2θf1)1/2;其中,Df1为基准图像的耳洞中心位置与基准图像的第一参考点之间的距离,θf1为基准图像的耳洞中心位置与基准图像的第一参考点之间相对于对应的直角坐标系的X轴负方向的夹角,yf为基准图像的耳洞中心位置的纵坐标。
S42,基于G2、Df2和θf2获取第二候选耳洞中心位置G02=(x02,y02);x02和y02分别为第二候选耳洞中心位置在目标图像中的横坐标和纵坐标。
在本发明实施例中,根据三角函数关系,x02=x2-Df2×sinθf2,y02=y2+Df2×cosθf2;其中,Df2为基准图像的耳洞中心位置与基准图像的第二参考点之间的距离,θf2为基准图像的耳洞中心位置与基准图像的第二参考点之间相对于对应的直角坐标系的X轴负方向的夹角。
本领域技术人员知晓的是,一般人的鼻尖和耳洞中心位置不会完全位于同一水平线上即耳洞中心位置的纵坐标不为0。如果yf=0,则x01=-Df1,y01=y02=0,x02=x2-Df2×sinθf2。
S43,获取G01和G02的中间值作为目标图像的耳洞中心位置。
具体地,如果yf>0,目标图像的耳洞中心位置的横坐标为(x2-Df2×sinθf2-(Df1/(1+tan2θf1)1/2))/2,纵坐标为((Df1×tanθf1)/(1+tan2θf1)1/2+y2+Df2×cosθf2)/2,如果yf<0,目标图像的耳洞中心位置的横坐标为(x2-Df2×sinθf2-(Df1/(1+tan2θf1)1/2))/2,纵坐标为(y2+Df2×cosθf2-(Df1×tanθf1)/(1+tan2θf1)1/2)/2。
S5,将所述目标图像的耳洞中心位置对应的温度作为目标用户的耳洞的特征温度。
在本发明另一实施例中,S5还可以基于如下步骤实现:
S6,基于目标图像的耳洞中心位置获取对应的耳洞位置。
在一个示意性实施例中,可以目标图像的耳洞中心位置为圆心,以预设半径为半径绘制圆心区域,作为对应的耳洞位置。其中,预设半径可为基准图像的耳洞的半径。
在另一个示意性实施例中,可以目标图像的耳洞中心位置为地点,向外扩充,得到扩充区域,其中,该扩充区域内的像素点连续并且任一像素点的温度与目标图像的耳洞中心位置对应的温度之间的差小于设定温度阈值。设定温度阈值可为经验值,例如,可等于(△t1+△t2+……+△ta+……+△TQ1)/Q1,其中,△ta为第a个样本图像对应的耳洞中心位置的温度与耳洞的平均温度之间的差值的绝对值。
由于通过将与耳洞中心位置的温度之间的温度差值位于设定温度阈值内的区域作为耳洞位置,与直接使用预设半径绘制圆形区域作为耳洞位置相比,能够使得得到的耳洞位置更加准确。
S7,将所述目标图像的耳洞位置对应的平均温度作为目标用户的耳洞的特征温度。
进一步地,在本发明实施例中,S3还包括:如果当前候选列表为空集,则基于经训练的AI模型和/或人工标注的方法获取所述目标图像的耳洞中心位置。
本领域技术人员知晓,经训练的AI模型可基于标注了耳洞位置和耳洞中心位置的样本训练得到,具体训练方式可为现有技术。
进一步地,在本发明实施例中,S3还包括:将所述目标图像作为样本图像,以更新I。
具体地,可基于获取的目标图像的耳洞中心位置获取其耳洞中心位置与对应第一参考点和第二参考点之间的距离和夹角,然后基于C,得到目标图像的基础信息,然后,将得到的目标图像的基础信息存储至基础信息表中,以更新基础信息表,从而能够使得基础信息表中的样本图像更加丰富,能够使得后续耳洞中心位置的计算更加准确。
进一步地,在本发明另一实施例中,BL2通过如下步骤获取得到:S310,获取中间采集时间集TL0={TL0 1,TL0 2,……,TL0 j,……,TL0 n};其中,TL0 j为TL0中的第j个中间采集时间,j的取值为1到n,n为TL0中的时间数量;TL0 1=TLr+1;TL0 n=TLm。
S320,获取TL0对应的温度信息HL0=(HL0 1,HL0 2,……,HL0 j,……,HL0 n),HL0 j为TL0 j对应的温度集,HL0 j={HL0 j1,HL0 j2,……,HL0 js,……,HL0 jFL(j)};HL0 js为TL0 j对应的红外图像中的耳部区域中的第s个像素点对应的温度,s的取值为1到f(j),f(j)为HL0 j中的温度数量;
S330,遍历HL0 j,如果HL0 js≥HL0,将HL0 js存放至HL0 j对应的中间温度列表GLj={GL1j,GL2j,……,GLxj,……,GLz(j)j}中;GLj的初始值为空集,HL0为设定温度阈值;GLxj为GLj中的第x个温度,x的取值为1到z(j),z(j)为GLj中的温度数量。
在本发明实施例中,HL0可为经验值。例如,可为M个耳部状态为正常状态的用户的耳洞温度的平均值。
S340,设置j=j+1,如果j≤n,执行S330,否则,执行S350。
S350,获取BL2=(∑n j=1∑z(j) x=1GLxj)/(n×z(j))。
与前述实施例相比,由于将每个图像对应的耳轮区域内大于设定温度阈值的温度作为计算目标温度的依据,能够避免AI模型的识别误差或者人工标注误差所导致识别的耳洞不够准确的问题,从而使得目标温度更加准确。S400,如果|BL1-B0|>△B,执行S500;否则,确定所述目标用户的耳部状态为正常状态;其中,B0为标准温度变化率,△B为预设温度变化率差阈值。
在本发明实施例中,B0可为经验值,具体可通过如下步骤获取得到:
S401,基于c个耳部状态为正常状态的测试用户的静置红外视频获取对应的耳轮区域的温度变化率,得到温度变化率集E={E1,E2,……,Eo,……,Ec}。Eo为第o个测试用户对应的温度变化率,o的取值为1到c。
S402,获取B0=(∑c =1Eo)/c。
在本发明实施例中,△B为经验值。例如,在一个示意性实施例中,△B=maxE-hmaxE。其中,maxE为E中的最大值,hmaxE为E中的次大值。又例如,在另一个示意性实施例中,△B=(∑c o=1(Eo-Eo-1))/c。
S500,如果(BL2-BL3)>t1且(BL2-BL4)>t2,则确定所述目标用户的耳部状态为正常状态;如果(BL3-BL2)>t1且(BL4-BL2)>t3,则确定所述目标用户的耳部状态为异常状态;其中,t1为第一设定温度阈值,t2为第二设定温度阈值,t3为第三设定温度阈值;t1<t2<t2。
在发明实施例中,t1至t3为经验值。在一个示意性实施例中,t1=0.2℃,t2=0.5℃,t3=0.6℃。
进一步地,在本发明实施例中,还包括如下步骤:
S600,如果∣B12-B22∣>BS,则输出提示信息。其中,BS为设定温度差阈值,可为经验值。具体可为耳部状态为正常状态的多个测试对象的左右耳洞温度差的平均值。
在本发明实施例中,提示信息可为提示目标用户的耳部可能存在问题的信息。S600的技术效果在于,如果判断两只耳朵的目标温度相差较大,目标用户的耳朵也可能存在问题。
本发明实施例提供的基于红外图像获取耳部状态的方法,能够基于红外图像获取耳部状态,能够实现无创耳部检测,能够提高用户体验。本发明的实施例还提供了一种非瞬时性计算机可读存储介质,该存储介质可设置于电子设备之中以保存用于实现方法实施例中一种方法相关的至少一条指令或至少一段程序,该至少一条指令或该至少一段程序由该处理器加载并执行以实现上述实施例提供的方法。
本发明的实施例还提供了一种电子设备,包括处理器和前述的非瞬时性计算机可读存储介质。
本发明的实施例还提供一种计算机程序产品,其包括程序代码,当所述程序产品在电子设备上运行时,所述程序代码用于使该电子设备执行本说明书上述描述的根据本发明各种示例性实施方式的方法中的步骤。
虽然已经通过示例对本发明的一些特定实施例进行了详细说明,但是本领域的技术人员应该理解,以上示例仅是为了进行说明,而不是为了限制本发明的范围。本领域的技术人员还应理解,可以对实施例进行多种修改而不脱离本发明的范围和精神。本发明公开的范围由所附权利要求来限定。
Claims (10)
1.一种基于红外图像获取耳部状态的方法,其特征在于,包括以下步骤:
S100,获取目标用户的静置红外视频;所述静置红外视频包括第1静置外红视频和第2静置红外视频,其中,第1静置红外视频中的每帧图像为目标用户露出左侧耳部的头部侧部图像,第2静置红外视频中的每帧图像为目标用户露出右侧耳部的头部侧部图像;
S200,按照设定时间间隔,从第L静置红外视频采集图像,得到对应的红外图像集AL={AL1,AL2,……,ALi,……,ALm},ALi为基于第L静置红外视频得到的第i个红外图像,i的取值为1到m,m为红外图像的数量;L的取值为1或2;
S300,基于AL,确定目标用户的耳部区域温度信息BL=(BL1,BL2,BL3,BL4),其中,BL1为对应耳部区域的温度变化率,BL2为对应耳部区域内的目标温度,BL3为对应耳部区域的第一关联温度,BL4为耳部区域的第二关联温度;
S400,如果|BL1-B0|>△B,执行S500;否则,确定对应的耳部的状态为正常状态;其中,B0为标准温度变化率,△B为预设温度变化率差阈值;
S500,如果(BL2-BL3)>t1且(BL2-BL4)>t2,则确定对应的耳部的状态为正常状态;如果(BL3-BL2)>t1且(BL4-BL2)>t3,则确定对应的耳部的状态为异常状态;其中,t1为第一设定温度阈值,t2为第二设定温度阈值,t3为第三设定温度阈值;t1<t2<t3。
2.根据权利要求1所述的方法,其特征在于,所述第一关联温度为翳风穴的温度,所述第二关联温度为耳轮穴的温度。
3.根据权利要求1所述的方法,其特征在于,BL1通过如下步骤获取得到:
S301,获取AL对应的特征温度集FL={FL1,FL2,……,FLi,……,FLm}和对应的采集时间集TL={TL1,TL2,……,TLi,……,TLm};FLi为ALi中的耳部区域对应的特征温度,TLi为ALi对应的采集时间;TLi=T0+i×△T,T0为从静置红外视频中开始采集图像的开始时间,△T为设定时间间隔;
S302,获取[(FLr+1-FLr)/(TLr+1-TLr)]×[(FLr-FLr-1)/(TLr-TLr-1)],如果[(FLr+1-FLr)/(TLr+1-TLr)]×[(FLr-FLr-1)/(TLr-TLr-1)]<0,则将FLr作为目标特征温度;r的取值为1到m-1;
S303,获取BL1=FLi/(i×△T)。
4.根据权利要求3所述的方法,其特征在于,FLi=(∑w(i) p=1HLip)/w(i),HLip为ALi对应的耳部区域内的第p个像素点对应的温度,p的取值为1到w(i),w(i)为ALi对应的耳部区域内的像素点数量。
5.根据权利要求3所述的方法,其特征在于,BL2通过如下步骤获取得到:
S31,获取中间采集时间集TL0={TL0 1,TL0 2,……,TL0 j,……,TL0 n};其中,TL0 j为TL0中的第j个中间采集时间,j的取值为1到n,n为TL0中的时间数量;TL0 1=TLr+1;TL0 n=TLm;
S32,获取TL0 j对应的温度集QL0=(QL0 1,QL0 2,……,QL0 j,……,QL0 n),QL0 j为TL0 j对应的耳部区域的耳洞的特征温度;
S33,获取BL2=(∑n j=1QL0 j)/n。
6.根据权利要求3所述的方法,其特征在于,BL2通过如下步骤获取得到:
S310,获取中间采集时间集TL0={TL0 1,TL0 2,……,TL0 j,……,TL0 n};其中,TL0 j为TL0中的第j个中间采集时间,j的取值为1到n,n为TL0中的时间数量;TL0 1=TLr+1;TL0 n=TLm;
S320,获取TL0对应的温度信息HL0=(HL0 1,HL0 2,……,HL0 j,……,HL0 n),HL0 j为TL0 j对应的温度集,HL0 j={HL0 j1,HL0 j2,……,HL0 js,……,HL0 jFL(j)};HL0 js为TL0 j对应的红外图像中的耳部区域中的第s个像素点对应的温度,s的取值为1到f(j),f(j)为HL0 j中的温度数量;
S330,遍历HL0 j,如果HL0 js≥HL0,将HL0 js存放至HL0 j对应的中间温度列表GLj={GL1j,GL2j,……,GLxj,……,GLz(j)j}中;GLj的初始值为空集,HL0为设定温度阈值;GLxj为GLj中的第x个温度,x的取值为1到z(j),z(j)为GLj中的温度数量;
S340,设置j=j+1,如果j≤n,执行S330,否则,执行S350;
S350,获取BL2=(∑n j=1∑z(j) x=1GLxj)/(n×z(j))。
7.根据权利要求1所述的方法,其特征在于,在S300中,目标耳廓区域基于经训练的AI模型获取得到。
8.根据权利要求1所述的方法,其特征在于,t1=0.2℃,t2=0.5℃,t3=0.6℃。
9.一种非瞬时性计算机可读存储介质,所述存储介质中存储有至少一条指令或至少一段程序,其特征在于,所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如权利要求1-8中任意一项的所述方法。
10.一种电子设备,其特征在于,包括处理器和权利要求9中所述的非瞬时性计算机可读存储介质。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311251454.1A CN117017618B (zh) | 2023-09-26 | 2023-09-26 | 基于红外图像获取耳部状态的方法、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311251454.1A CN117017618B (zh) | 2023-09-26 | 2023-09-26 | 基于红外图像获取耳部状态的方法、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117017618A CN117017618A (zh) | 2023-11-10 |
CN117017618B true CN117017618B (zh) | 2024-03-01 |
Family
ID=88643405
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311251454.1A Active CN117017618B (zh) | 2023-09-26 | 2023-09-26 | 基于红外图像获取耳部状态的方法、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117017618B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130101566A (ko) * | 2010-11-17 | 2013-09-13 | (주)이지템 | 적외선 어레이 센서를 이용한 온도측정장치 및 온도측정방법 |
CN105358034A (zh) * | 2013-02-04 | 2016-02-24 | 特洛伊海伦有限公司 | 确定受试者的耳部的状况的耳部检查装置和方法 |
CN111751001A (zh) * | 2019-03-26 | 2020-10-09 | 奇酷互联网络科技(深圳)有限公司 | 温度检测方法、存储介质及移动终端 |
CN115695734A (zh) * | 2022-11-04 | 2023-02-03 | 烟台艾睿光电科技有限公司 | 红外热成像防护监控方法、装置、设备、系统和介质 |
CN116077024A (zh) * | 2023-02-20 | 2023-05-09 | 北京鹰之眼智能健康科技有限公司 | 基于头部红外图像的数据处理方法、电子设备和存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023044115A1 (en) * | 2021-09-17 | 2023-03-23 | TurningMode, LLC | Physiological well-being and positioning monitoring |
-
2023
- 2023-09-26 CN CN202311251454.1A patent/CN117017618B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130101566A (ko) * | 2010-11-17 | 2013-09-13 | (주)이지템 | 적외선 어레이 센서를 이용한 온도측정장치 및 온도측정방법 |
CN105358034A (zh) * | 2013-02-04 | 2016-02-24 | 特洛伊海伦有限公司 | 确定受试者的耳部的状况的耳部检查装置和方法 |
CN111751001A (zh) * | 2019-03-26 | 2020-10-09 | 奇酷互联网络科技(深圳)有限公司 | 温度检测方法、存储介质及移动终端 |
CN115695734A (zh) * | 2022-11-04 | 2023-02-03 | 烟台艾睿光电科技有限公司 | 红外热成像防护监控方法、装置、设备、系统和介质 |
CN116077024A (zh) * | 2023-02-20 | 2023-05-09 | 北京鹰之眼智能健康科技有限公司 | 基于头部红外图像的数据处理方法、电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN117017618A (zh) | 2023-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104978548B (zh) | 一种基于三维主动形状模型的视线估计方法与装置 | |
WO2020042542A1 (zh) | 眼动控制校准数据获取方法和装置 | |
CN109008944A (zh) | 视线计测装置、视线计测程序及视线计测方法 | |
JP2016173313A (ja) | 視線方向推定システム、視線方向推定方法及び視線方向推定プログラム | |
RU2667790C1 (ru) | Способ автоматической регулировки экспозиции для инфракрасной камеры и использующее этот способ вычислительное устройство пользователя | |
CN111488775B (zh) | 注视度判断装置及方法 | |
CN113936324A (zh) | 注视检测方法、电子设备的控制方法及相关设备 | |
CN109522887A (zh) | 一种视线追踪方法、装置、设备及存储介质 | |
CN108133189B (zh) | 医院候诊信息显示方法 | |
CN106843492B (zh) | 一种多人视点校准系统及方法 | |
WO2015176502A1 (zh) | 一种图像特征的估计方法和设备 | |
CN117017618B (zh) | 基于红外图像获取耳部状态的方法、电子设备及存储介质 | |
CN112766097A (zh) | 视线识别模型的训练方法、视线识别方法、装置及设备 | |
US11849999B2 (en) | Computer-implemented method for determining a position of a center of rotation of an eye using a mobile device, mobile device and computer program | |
JPWO2017221597A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN112419399A (zh) | 一种图像测距方法、装置、设备和存储介质 | |
CN115471671A (zh) | 一种网络模型的训练方法、目标识别方法及相关设备 | |
CN110765852B (zh) | 一种获取图像中人脸方向的方法及装置 | |
CN114723659A (zh) | 穴位检测效果确定方法、装置及电子设备 | |
CN110119674B (zh) | 一种作弊检测的方法、装置、计算设备及计算机存储介质 | |
CN117291979B (zh) | 一种耳洞定位方法、电子设备及存储介质 | |
CN109766012B (zh) | 视线计算方法及装置 | |
WO2021093744A1 (zh) | 一种瞳孔直径的测量方法、装置及计算机可读存储介质 | |
CN117291979A (zh) | 一种耳洞定位方法、电子设备及存储介质 | |
JP2022023643A5 (zh) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |