CN104220854A - 利用立体热成像的车辆内温度测量装置 - Google Patents

利用立体热成像的车辆内温度测量装置 Download PDF

Info

Publication number
CN104220854A
CN104220854A CN201380019434.XA CN201380019434A CN104220854A CN 104220854 A CN104220854 A CN 104220854A CN 201380019434 A CN201380019434 A CN 201380019434A CN 104220854 A CN104220854 A CN 104220854A
Authority
CN
China
Prior art keywords
mentioned
thermal imaging
vehicle
temperature
infrared ray
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380019434.XA
Other languages
English (en)
Other versions
CN104220854B (zh
Inventor
李亭勋
金宁吉
宋升澈
白昌铉
金英民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hanon Systems Corp
Original Assignee
Halla Climate Control Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Halla Climate Control Corp filed Critical Halla Climate Control Corp
Publication of CN104220854A publication Critical patent/CN104220854A/zh
Application granted granted Critical
Publication of CN104220854B publication Critical patent/CN104220854B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01FMEASURING VOLUME, VOLUME FLOW, MASS FLOW OR LIQUID LEVEL; METERING BY VOLUME
    • G01F1/00Measuring the volume flow or mass flow of fluid or fluent solid material wherein the fluid passes through a meter in a continuous flow
    • G01F1/68Measuring the volume flow or mass flow of fluid or fluent solid material wherein the fluid passes through a meter in a continuous flow by using thermal effects
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/0022Radiation pyrometry, e.g. infrared or optical thermometry for sensing the radiation of moving bodies
    • G01J5/0025Living bodies
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02Constructional details
    • G01J5/04Casings
    • G01J5/041Mountings in enclosures or in a particular environment
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02Constructional details
    • G01J5/07Arrangements for adjusting the solid angle of collected radiation, e.g. adjusting or orienting field of view, tracking position or encoding angular position
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02Constructional details
    • G01J5/08Optical arrangements
    • G01J5/0806Focusing or collimating elements, e.g. lenses or concave mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H04N23/23Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J2005/0077Imaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/271Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Fluid Mechanics (AREA)
  • Radiation Pyrometers (AREA)
  • Air-Conditioning For Vehicles (AREA)

Abstract

本发明涉及一种利用立体热成像的车辆内温度测量装置,其特征在于,包括:一对立体声红外线传感器(3、4),以相互分隔的方式分别配置于车辆室内的前面一侧,用于测量包括搭乘人员的上述车辆室内的热成像;运算部(10),将上述一对立体声红外线传感器(3、4)测量的二维热成像立体化为三维热成像;以及控制部(20),根据影响上述车辆室内的温度的变量值,来校正上述运算部(10)立体化的三维热成像信息。像这样,在上述装置中,能够借助左右配置于车辆室内的前方侧的一对立体声红外线传感器,来立体地测量车辆室内的温度分布,因此能够进一步提高用于对车辆室内进行制冷的温度测量的精密度或准确性。

Description

利用立体热成像的车辆内温度测量装置
技术领域
本发明涉及一种利用红外线传感器来测量车辆室内的温度的装置,更详细地,涉及借助以分隔规定间隔的方式配置于车辆室内的前方的左右一对立体声红外线传感器,来以立体热成像形态测量包括搭乘人员的车辆室内的温度的利用立体热成像的车辆内温度测量装置。
背景技术
为了调节车辆的室内空间的空气,尤其,为了使制冷最佳化,首先需要准确地测量室内空间的温度。
为此而使用最广的方法为利用红外线传感器的非接触式温度测量方法。根据上述方法,借助设置于车辆室内的红外线传感器,来以非接触式测量搭乘人员的脸部位的温度,可根据其结果来调节车辆室内的空气,尤其可控制制冷状态。
作为应用利用这种红外线传感器的非接触式温度测量方法的汽车空调装置的一例,可例举图1所示的汽车空调装置。
就上述汽车空调装置而言,如图1的附图标记101所示,在位于室内空间的前面的仪表板103上以向后上向倾斜的方式安装前方传感器105,并在前座位靠背107的背面以向后上向倾斜的方式安装后方传感器109,由此如图中的箭头所表示,借助前方红外线传感器105及后方红外线传感器107,来直接测量驾驶员等搭乘人员的脸部位的温度。
但就这种前方传感器105及后方传感器107的配置而言,尤其在测量后座位的搭乘人员的脸温度的过程中,由于后方传感器107有可能被前座椅座套覆盖,因此存在需要以使得后方传感器107向外部露出的方式除去前座椅座套或者使前座椅座套变形等利用方面受限的问题。
并且,由于后方传感器107和后座位搭乘人员之间的分隔距离过短,因此要想同时测量后座位搭乘人员的脸、上半身和下半身的温度或者用一个传感器来测量后座位左右侧搭乘人员的温度,就必然要使用具有视角宽的广角镜头的红外线传感器或者增加传感器的数量,并存在传感器的设置费用倍增的问题。
为了解决这种问题,就以往的另一个汽车空调装置而言,如图2的附图标记201所示,以可测量后座位搭乘人员的全身温度的方式将红外线传感器203配置于车辆室内的,例如,室内灯单元等前面上端位置,也可以借助具有视角窄的窄角镜头的一个红外线传感器203,来测量搭乘于后座位的后方左右侧座位207、208的搭乘人员的全身和搭乘于前座位前方左右侧座位203、204的搭乘人员脸一部分的温度。
但是,如图2的实线所表示,由于如上配置的以往的红外线传感器203的视角窄而无法确保借助具有广角镜头的传感器来测量的以图2的隐线表示的宽的视角,因此要想与后座位同时测量前座位的前方左右侧座位205、206的搭乘人员的温度,就需要采用高价的广角镜头传感器或者增加传感器的使用数量,因此存在设备费用等制造成本上升的问题。
发明内容
本发明是为了解决用于测量如上所述的以往的车辆室内温度的红外线传感器结构所具有的问题而提出的,其目的在于,将一对立体声红外线传感器以相互分隔适当间隔的方式配置于车辆室内,并将各个红外线传感器测量的车辆室内的各个二维热成像立体化为三维热成像来立体地精密测量车辆室内的温度分布,以提高用于冷冻空气调节的车辆室内温度测量的准确度。
为了达成这种目的,本发明提供利用立体热成像的车辆内温度测量装置,其特征在于,包括:一对立体声红外线传感器,以相互分隔的方式分别配置于车辆室内的前面一侧,用于测量包括搭乘人员的上述车辆室内的热成像;运算部,将上述一对立体声红外线传感器测量的二维热成像立体化为三维热成像;以及控制部,根据影响上述车辆室内的温度的变量值,来校正上述运算部立体化的三维热成像信息。
并且,优选地,上述一对立体声红外线传感器分别测量车辆座位中的前方座位中的某一个和2席后方座位的温度。
并且,优选地,上述立体声红外线传感器以与上述车辆的室内镜的后方相邻的方式配置。
并且,优选地,上述立体声红外线传感器的红外线镜头为窄角镜头。
并且,优选地,上述立体声红外线传感器的红外线镜头的视角为55°至75°。
并且,优选地,上述立体声红外线传感器配置于上述车辆的室内镜的左右末端。
并且,优选地,上述一对立体声红外线传感器分别测量车辆座位中的2席后方座位中的某一个和2席前方座位的温度。
并且,优选地,上述立体声红外线传感器分别配置于上述车辆的左右A柱。
并且,优选地,上述立体声红外线传感器的红外线镜头为窄角镜头。
并且,优选地,上述立体声红外线传感器的红外线镜头的视角为55°至75°。
并且,优选地,上述立体声红外线传感器分别配置于上述车辆的左右A柱的下端部。
并且,优选地,上述控制部经过如下的步骤校正上述运算部立体化的三维热成像的温度信息,上述步骤包括:传感器校正步骤,校准配置于车辆室内的立体声红外线传感器来校正热成像的失真,热成像测量步骤,借助在上述传感器校正步骤中校准的上述传感器来测量上述车辆室内的热成像,立体声匹配步骤,比较在上述热成像测量步骤中测量的各个热成像来求出各热成像的对应点之间的坐标位移,以及立体热成像形成步骤,将在上述立体声匹配步骤中求出的坐标位移成像化并映射,来获得立体热成像。
并且,优选地,上述控制部还经过温度过滤步骤校正上述运算部立体化的三维热成像的温度信息,上述温度过滤步骤中,从在上述热成像测量步骤中测量的热成像除去热残像、抖动及噪声。
并且,优选地,上述控制部还经过热成像矫正步骤校正上述运算部立体化的三维热成像的温度信息,上述热成像矫正步骤中,根据在上述传感器校正步骤中获得的上述传感器的校准特性值,来改正在上述热成像测量步骤中测量的热成像。
并且,优选地,上述控制部在从测量上述车辆室内的热成像的一对立体声红外线传感器至车辆室内的特定坐标的距离为规定距离以上而被判断为远的情况下,对于上述特定坐标,进行将测量的温度测量值补偿为更高的温度值的校正。
并且,优选地,上述控制部反复比较上述一对立体声红外线传感器分别测量的上述车辆室内的特定坐标的温度测量值,在比较的温度差为公差值(Ttol)以上的情况下,判断为上述一对立体声红外线传感器发生了故障。
并且,优选地,上述控制部在上述比较的温度差超过上述公差值的情况下,将上述车辆室内的特定坐标视为错误点,计算上述错误点的产生频率,当计算的上述错误点的产生频率为50%以上时,统一对上述一对立体声红外线传感器测量的温度测量值进行偏移处理,当上述错误点的产生频率小于50%时,校正与产生了超过上述公差值的温度差的上述特定坐标相对应的热成像的有关像素的温度值。
并且,优选地,上述控制部在上述比较的温度差超过上述公差值的情况下,利用位于上述车辆室内的单独部件的预置的温度测量值,来检测上述一对立体声红外线传感器中的产生了误差的红外线传感器,校正产生了误差的红外线传感器测量的热成像的温度值。
并且,优选地,上述控制部考虑按照预先被掌握的各部件的不同材质或人体的不同部位来设定的固有辐射率,根据上述车辆室内的坐标信息来补偿上述立体热成像的温度值,校正上述运算部立体化的三维热成像的温度信息。
并且,优选地,上述控制部在根据上述车辆室内的坐标信息按照预先被掌握的各部件的不同材质或人体的不同部位来补偿立体热成像的温度值的过程中,按照各不同部件或人体不同部位来保留辐射能加权值来补偿上述立体热成像的温度值,加权值的大小顺序按照人体、车辆的天花板、门饰板、衣服、车辆的座位、车辆的玻璃顺序适用。
附图说明
图1为说明以往的利用红外线传感器的车辆室内温度测量方法的车辆的简要侧视图。
图2为说明以往的另一个利用红外线传感器的车辆室内温度测量方法的部分俯视图。
图3为示出本发明的利用立体热成像的车辆内温度测量装置的一实施例的车辆的部分切缺俯视图。
图4为图3的侧视图。
图5为图3的立体图。
图6为图3的俯视图。
图7为示出本发明的利用立体热成像的车辆内温度测量装置的另一个实施例的车辆室内的部分抽取立体图。
图8为示出图7的温度测量装置的车辆室内俯视图。
图9为示出本发明的基于利用立体热成像的车辆内温度测量装置的温度测量方法的框图。
图10为图9所示的温度测量方法的流程图。
图11为表示基于车辆室内的相同部件的从立体声红外线传感器的距离的温度检测特性的曲线图。
具体实施方式
以下,参照附图对本发明一实施例的利用立体热成像的车辆内温度测量装置进行说明。
如图3的附图标记1所示,本发明一实施例的温度测量装置大致包括左右一对立体声红外线(IR)传感器3、4、运算部10及控制部20。
在此,首先,上述立体声红外线传感器3、4是以相互分隔的状态配置于车辆室内的前面一侧,并分别测量用于形成车辆室内的立体热成像的二维热成像的单元,若相对于车辆的中心线维持左右对称,则可配置于车辆前面的各种地点,如图3至图5所示,上述立体声红外线传感器3、4可分别从车辆的左右A柱11、12朝向后方配置,从而最大限度地将更多的车辆搭乘人员包括在视角内。
另一方面,在受限的车辆空间内,上述立体声红外线传感器3、4越位于车辆的左右A柱11、12的下端,上述立体声红外线传感器3、4的视角就越宽。因此,为了最大限度地使上述立体声红外线传感器3、4的视角变宽,优选地,将上述立体声红外线传感器3、4的支撑支架3配置于车辆的左右A柱11、12的下端部。
上述立体声红外线传感器3、4测量包括搭乘人员的车辆室内的2D即二维平面的热成像,而如常规所示,采用红外线镜头为窄角的窄角传感器,对测量有利。尤其,有利的是,红外线镜头的视角优选为55°至75°,红外线镜头的视角更优选为60°至70°,红外线镜头的视角尤其优选为60°。因为红外线传感器3、4与使用视角为75°以上100°左右的广角镜头的红外线传感器相比,基于视角的测量范围窄接近两倍,但相对地,测量的热成像的失真少,且成本便宜一半以上,相反,若视角变窄至55°以下,则即使红外线传感器3、4在车辆室内设置于从后方座位分隔最大的A柱11、12,也不能使整个后方座位包括在测量范围。
此时,左侧传感器3测量包括从配置于车辆室内的左侧的前方座位5及后方座位7的左侧端边角部分至前方右侧座位4,即副驾驶席的右侧上端边角部分的范围的可视区域的温度。相反,右侧传感器4与左侧传感器相反,测量包括从配置于车辆室内的右侧的前方座位6及后方座位8的右侧端边角部分至前方左侧座位3,即驾驶席的左侧上端边角部分的范围的可视区域的温度。
像这样,如图3至图5所示,就各个红外线传感器3、4而言,视角的测量范围由斜边的夹角为60°左右的圆锥形态形成,因此测量后座位左右搭乘人员中的某一侧搭乘人员的几乎全身和前座位搭乘人员两个人,即驾驶员和副驾驶席搭乘人员的上半身。即,左侧红外线传感器3测量后座位右侧搭乘人员的几乎全身,但左侧搭乘人员因被驾驶席遮挡而几乎不能被测量,相反,右侧红外线传感器4测量后座位左侧搭乘人员的几乎全身,但右侧搭乘人员因被副驾驶席遮挡而几乎不能被测量。
由此,如图6所示,各个红外线传感器3、4相互交替地测量搭乘于车辆座位中的2席后方座位7、8中的某一个和2席前方座位5、6的搭乘人员或座位本身的温度,并对于前方座位5、6形成共同区域。
另一方面,上述立体声红外线传感器3、4作为另一种配置形态如图7及图8所示地配置于车辆前面的中央部分,但可在车辆的室内镜15的后方与室内镜15相邻地配置,或者虽然未图示,但也能够以相互分隔规定间隔的方式并排地配置于室内灯和太阳镜保管盒之间。并且,为了最大限度地使左右视角变宽,可配置于车辆的室内镜15的左右末端。
如上所述,当在车辆前面的中央部分配置上述立体声红外线传感器3、4时,左侧传感器3测量包括从前方左侧座位5,即驾驶席的左侧端边角部分至后方右侧座位8的右侧端边角部分的范围的可视区域的温度,右侧传感器4测量包括从前方右侧座位6,即副驾驶席的右侧端边角部分至后方左侧座位7的左侧端边角部分的范围的可视区域的温度。
因此,配置于车辆室内的前方中央部分的立体声红外线传感器3、4测量车辆座位中的1席前方座位(5或6)和2席后方座位7、8的温度,其结果,如图6所示,在后方座位7、8形成共同区域。
上述运算部10作为借助各个立体声红外线传感器3、4来将以如上方式测量的二维热成像立体化为三维热成像的部分,通过借助传感器3、4来测量的2个二维热成像相互对应来获取的三维坐标求出三维变换矩阵,并根据立体声映像接合方式从各个二维热成像获得三维立体热成像,而其详细说明如下。
上述控制部20与普通的空调控制单元相同,是控制整个车辆的空气调节状况的部分,除了车辆室内外温度之外,还接收影响车辆室内的温度的如风速、湿度等各种变量值,来校正基于运算部10立体化的三维热成像的温度信息。
在此,上述控制部20在从测量上述车辆室内的热成像的一对立体声红外线传感器3、4至车辆室内的特定坐标的距离为规定距离以上而判断为远的情况下,对于上述特定坐标,进行将测量的温度测量值补偿为更高的温度值的校正。
基于这种距离的温度补偿考虑了基于如图11所示的从车辆室内的相同部件的立体声红外线传感器3、4的距离的温度检测特性。即,是反映从上述立体声红外线传感器3、4的距离越远,车辆室内的相同部件的热成像的温度就越急剧减小,且从上述立体声红外线传感器3、4的距离越远,车辆室内的相同部件的热成像的长度就越缓慢减小的特性的温度补偿。另一方面,在图11所示的曲线图中,横轴为车辆室内的相同部件的从立体声红外线传感器3、4的距离(米),纵轴左侧为车辆室内的相同部件的侧测定温度(℃),纵轴右侧为车辆室内的相同部件的热成像的长度(像素(pixel))。
并且,上述控制部20反复比较上述一对立体声红外线传感器3、4分别测量的上述车辆室内的特定坐标的温度测量值,在比较的温度差为公差值以上的情况下,判断为上述一对立体声红外线传感器3、4发生了故障。
并且,上述控制部20在上述比较的温度差超过上述公差值的情况下,将上述车辆室内的特定坐标视为错误点,并计算上述错误点的产生频率,当计算的上述错误点的产生频率为50%以上时,统一对上述一对立体声红外线传感器3、4测量的温度测量值进行偏移处理,当上述错误点的产生频率小于50%时,校正与产生了超过上述公差值的温度差的上述特定坐标相对应的热成像的有关像素的温度值。
并且,上述控制部20在上述比较的温度差超过上述公差值的情况下,利用位于上述车辆室内的单独部件的预置的温度测量值,来检测上述一对立体声红外线传感器3、4中的产生了误差的红外线传感器3、4,校正产生了误差的红外线传感器3、4测量的热成像的温度值。
并且,上述控制部20考虑按照预先被掌握的各部件的不同材质或人体的不同部位来设定的固有辐射率,根据上述车辆室内的坐标信息来补偿上述立体热成像的温度值,校正上述运算部10立体化的三维热成像的温度信息。
并且,上述控制部20在根据上述车辆室内的坐标信息按照预先被掌握的各部件的不同材质或人体的不同部位来补偿立体热成像的温度值的过程中,按照各不同部件或人体不同部位来保留辐射能加权值来补偿上述立体热成像的温度值,加权值的大小顺序按照人体、车辆的天花板、门饰板、衣服、车辆的座位、车辆的玻璃顺序适用。
接下来,对利用以如上方式构成的立体热成像的车辆内温度测量装置的作用进行更为详细的说明,具体如下。
根据本发明一实施例的温度测量装置,如图9所示,经过传感器校正步骤S10、热成像测量步骤S20、立体声匹配步骤S30及立体热成像形成步骤S40形成车辆室内的三维立体热成像。并且,还经过温度过滤步骤S50、热成像矫正步骤S60、温度补偿步骤S70及温度再补偿步骤S80形成车辆室内的三维立体热成像。
在此,首先,如图9及图10所示,上述传感器校正步骤S10作为校正配置于车辆室内的立体声红外线传感器3、4的热成像的失真的步骤,如为了校正光学图像的失真而利用黑白格纹板材,通过从传感器3、4分隔规定距离的方式以各种姿势变更冷温区域与格纹相同地交替配置的校正板的配置并测量温度之后,根据测量的热成像信息,按照普通的光学校准方法,执行校准(calibration)来获取校准矩阵(calibrationmatrix)。
然后,如图9及图10所示,上述热成像测量步骤S20作为借助在上述传感器校正步骤S10中校准的立体声红外线传感器3、4来测量车辆室内的热成像的步骤,传感器3、4分别测量在车辆室内构成的虚拟坐标上的相同地点的热成像,来形成各自的二维热成像。
在上述热成像测量步骤S20中,在测量二维热成像之后,可执行温度过滤步骤S50,而如图9及图10所示,上述温度过滤步骤S50作为除去在上述热成像测量步骤S20中测量的热成像所产生的热残像、抖动及热成像噪声的步骤,用于改善热成像的画质,例如,以从红外线传感器3、4输出的热成像信号除去固定图像噪声等各种方式除去噪声来提高热成像的画质。
接着,在上述温度过滤步骤S50或热成像测量步骤S20之后,可在执行立体声匹配步骤S30之前执行热成像矫正步骤S60,而如图9及图10所示,上述热成像矫正步骤S60作为根据在上述传感器校正步骤S10中获得的红外线传感器3、4的校准特性值来矫正在上述热成像测量步骤S20中测量的热成像的步骤,对利用在传感器校正步骤S10中求出的校准特性值即校准矩阵来校正的热成像执行改正(rectification)。
在此,对热成像的改正作为满足左右各个红外线传感器3、4测量的热成像的极线约束(epipolar constraint)的过程,根据极线约束,当立体声传感器3、4的光轴平行时,一侧传感器3测量的热成像的一点与另一侧传感器4测量的热成像的一点相对应,此时,将连接两个对应点的线称为极线。
之后,如图9及图10所示,上述立体声匹配步骤S30作为比较在上述热成像矫正步骤S60中矫正的各个热成像来求出各热成像的对应点之间的坐标位移(disparity)的步骤,以立体声传感器3、4测量的热成像中的某一个热成像为基准,将另一个热成像作为目标之后,求出车辆室内的虚拟坐标上的特定地点投影于基准热成像和目标热成像的特定像素的热成像内位置。之后,求出如上所述地得出的各个热成像内对应点之间的热成像坐标上的差异,来最终获得位移。
再之后,如图9及图10所示,上述立体热成像形成步骤S40作为将在上述立体声匹配步骤S30中求出的热成像的坐标位移成像化并映射,来获得立体热成像的步骤,在从二维图像获得三维立体信息的各种方法中,例如,基于立体声映像接合方式,从各个热成像获得三维立体热成像。为此,相对于基准热成像的各个像素进行计算,从而将在上述立体声匹配步骤S30中求出的位移储存为一个图像形态,来形成位移图(disparity map)。之后,可反复如上所述的过程来生成基于各种时刻变化的多个位移图,并通过结合所生成的多个位移图来最终获得三维立体热成像。
另一方面,如图10所示,上述温度补偿步骤S70作为相对于在上述立体热成像形成步骤S40中获得的立体热成像除去基于与各个传感器3、4的距离差的偏差的步骤,从相当于如上所述的立体热成像的特定地点的车辆室内的特定坐标除去因分别到达传感器3、4的距离的差异而发生的温度差。
为此,如图10所示,温度补偿步骤S70由再次温度比较步骤S71、温度差确认步骤S72、温度误差频率系数步骤S73及温度值校正步骤S74构成。
在此,如图10所示,上述温度比较步骤S71作为反复相互比较测量的车辆室内的特定坐标的温度值的步骤,反复测定与在上述立体热成像形成步骤S40中获得的立体热成像的多个特定地点相对应的车辆室内的多个特定坐标的红外线传感器3、4各自的温度测量值之后,相互比较测定的温度测量值。
之后,如图10所示,上述温度差确认步骤S72作为确认在上述温度比较步骤S71中比较的温度测量值的差异是否在公差限度内的步骤,确认在上述温度比较步骤S71中比较的各个特定坐标上的温度测量值相互之间的温度差是否超过公差值。
之后,如图10所示,上述温度误差频率系数步骤S73作为计算在上述温度差确认步骤S72中确认的温度差超过公差值的频率的步骤,在上述温度差确认步骤S72中,将左右传感器3、4测量的车辆室内的特定坐标的温度测定值差异超过公差值的坐标视为错误点,并计算产生如上所述的错误点的频率。
最后,如图10所示,上述温度值校正步骤S74作为在左右立体声传感器3、4测量的温度测量值的温度差超过公差值的情况下解决这一情况的步骤,当在上述温度误差频率系数步骤S73中计算的错误点的产生频率例如为50%以上时,统一对产生了误差的一侧传感器3、4测量的温度测量值进行偏移处理,来补偿左右传感器3、4之间的温度测量值偏差。然而,相反,当错误点产生频率小于50%时,左右传感器3、4测量的温度值的差异超过公差值的错误点并不多,因此校正与有关坐标相对应的热成像的像素,来补偿温度测量值偏差。
另一方面,如图10所示,上述温度再补偿步骤S80作为决定立体热成像的最终步骤,经过上述温度补偿步骤S70除去缘于左右传感器3、4之间的距离差的温度差之后,最终再次补偿基于温度测量对象部位的材质的偏差。为此,在温度再补偿步骤S80中,考虑按照预先被掌握而储存的不同坐标的车辆部件即座位、天花板、玻璃等不同材质或搭乘人员的不同身体部位来设定的固有辐射率,根据车辆室内的坐标信息来再次补偿在上述温度补偿步骤S70中除去基于左右传感器3、4之间的距离差的温度差的立体热成像的温度值。此时,就各温度测定部位的固有辐射率而言,黑体(black body)等异常体为1,例如,人体为0.95、玻璃为0.5、天花板为0.8。
产业上的可利用性
根据本发明的利用立体热成像的车辆内温度测量装置,能够借助左右配置于车辆室内的前方侧的一对立体声红外线传感器,来立体地测量车辆室内的温度分布,因此能够进一步提高温度分布的测量精密度或准确性。
并且,借助左右两个红外线传感器,来重复测量形成于车辆室内的虚拟坐标上的一个地点的温度,从而容易校正传感器之间的温度,因此能够更加提高温度测量准确度。
并且,能够校正因各传感器和温度测量坐标之间的距离差而产生的立体热成像信息的误差,能够按照车辆室内的温度测量地点的不同部件或身体不同部位考虑辐射率,来再校正立体热成像信息,因此能够更加提高温度测量准确度。

Claims (20)

1.一种利用立体热成像的车辆内温度测量装置,其特征在于,包括:
一对立体声红外线传感器(3、4),以相互分隔的方式分别配置于车辆室内的前面一侧,用于测量包括搭乘人员的上述车辆室内的热成像;
运算部(10),将上述一对立体声红外线传感器(3、4)测量的二维热成像立体化为三维热成像;以及
控制部(20),根据影响上述车辆室内的温度的变量值,来校正上述运算部(10)立体化的三维热成像信息。
2.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述一对立体声红外线传感器(3、4)分别测量车辆座位中的前方座位中的某一个(5或6)和2席后方座位(7、8)的温度。
3.根据权利要求2所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)以与上述车辆的室内镜(15)的后方相邻的方式配置。
4.根据权利要求2所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)的红外线镜头为窄角镜头。
5.根据权利要求4所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)的红外线镜头的视角为55°至75°。
6.根据权利要求2所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)配置于上述车辆的室内镜(15)的左右末端。
7.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述一对立体声红外线传感器(3、4)分别测量车辆座位中的2席后方座位中的某一个(7或8)和2席前方座位(5、6)的温度。
8.根据权利要求7所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)分别配置于上述车辆的左右A柱(11、12)。
9.根据权利要求7所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)的红外线镜头为窄角镜头。
10.根据权利要求9所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)的红外线镜头的视角为55°至75°。
11.根据权利要求7所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述立体声红外线传感器(3、4)分别配置于上述车辆的左右A柱(11、12)的下端部。
12.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)经过如下的步骤校正上述运算部(10)立体化的三维热成像的温度信息,上述步骤包括:
传感器校正步骤(S10),校准配置于车辆室内的立体声红外线传感器(3、4)来校正热成像的失真,
热成像测量步骤(S20),借助在上述传感器校正步骤(S10)中校准的上述传感器(3、4)来测量上述车辆室内的热成像,
立体声匹配步骤(S30),比较在上述热成像测量步骤(S20)中测量的各个热成像来求出各热成像的对应点之间的坐标位移,以及
立体热成像形成步骤(S40),将在上述立体声匹配步骤(S30)中求出的坐标位移成像化并映射,来获得立体热成像。
13.根据权利要求12所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)还经过温度过滤步骤(S50)校正上述运算部(10)立体化的三维热成像的温度信息,上述温度过滤步骤(S50)中,从在上述热成像测量步骤(S20)中测量的热成像除去热残像、抖动及噪声。
14.根据权利要求12所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)还经过热成像矫正步骤(S60)校正上述运算部(10)立体化的三维热成像的温度信息,上述热成像矫正步骤(S60)中,根据在上述传感器校正步骤(S10)中获得的上述传感器(3、4)的校准特性值,来改正在上述热成像测量步骤(S20)中测量的热成像。
15.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)在从测量上述车辆室内的热成像的一对立体声红外线传感器(3、4)至车辆室内的特定坐标的距离为规定距离以上而判断为远的情况下,对于上述特定坐标,进行将测量的温度测量值补偿为更高的温度值的校正。
16.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)反复比较上述一对立体声红外线传感器(3、4)分别测量的上述车辆室内的特定坐标的温度测量值,在比较的温度差为公差值以上的情况下,判断为上述一对立体声红外线传感器(3、4)发生了故障。
17.根据权利要求16所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)在上述比较的温度差超过上述公差值的情况下,将上述车辆室内的特定坐标视为错误点,计算上述错误点的产生频率,当计算的上述错误点的产生频率为50%以上时,统一对上述一对立体声红外线传感器(3、4)测量的温度测量值进行偏移处理,当上述错误点的产生频率小于50%时,校正与产生了超过上述公差值的温度差的上述特定坐标相对应的热成像的有关像素的温度值。
18.根据权利要求16所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)在上述比较的温度差超过上述公差值的情况下,利用位于上述车辆室内的单独部件的预置的温度测量值,来检测上述一对立体声红外线传感器(3、4)中的产生了误差的红外线传感器(3、4),校正产生了误差的红外线传感器(3、4)测量的热成像的温度值。
19.根据权利要求1所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)考虑按照预先被掌握的各部件的不同材质或人体的不同部位来设定的固有辐射率,根据上述车辆室内的坐标信息来补偿上述立体热成像的温度值,校正上述运算部(10)立体化的三维热成像的温度信息。
20.根据权利要求19所述的利用立体热成像的车辆内温度测量装置,其特征在于,
上述控制部(20)在根据上述车辆室内的坐标信息按照预先被掌握的各部件的不同材质或人体的不同部位来补偿立体热成像的温度值的过程中,按照各不同部件或人体不同部位来保留辐射能加权值来补偿上述立体热成像的温度值,加权值的大小顺序按照人体、车辆的天花板、门饰板、衣服、车辆的座位、车辆的玻璃顺序适用。
CN201380019434.XA 2012-06-26 2013-06-26 利用立体热成像的车辆内温度测量装置 Expired - Fee Related CN104220854B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
KR20120068620 2012-06-26
KR10-2012-0068620 2012-06-26
KR20120068619 2012-06-26
KR10-2012-0068619 2012-06-26
PCT/KR2013/005646 WO2014003433A1 (ko) 2012-06-26 2013-06-26 입체 열화상을 이용한 차량 내 온도계측 장치
KR10-2013-0073438 2013-06-26
KR1020130073438A KR101724788B1 (ko) 2012-06-26 2013-06-26 입체 열화상을 이용한 차량 내 온도계측 장치

Publications (2)

Publication Number Publication Date
CN104220854A true CN104220854A (zh) 2014-12-17
CN104220854B CN104220854B (zh) 2017-10-24

Family

ID=49783494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380019434.XA Expired - Fee Related CN104220854B (zh) 2012-06-26 2013-06-26 利用立体热成像的车辆内温度测量装置

Country Status (5)

Country Link
US (1) US10132666B2 (zh)
KR (1) KR101724788B1 (zh)
CN (1) CN104220854B (zh)
DE (1) DE112013003301T5 (zh)
WO (1) WO2014003433A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106989824A (zh) * 2017-04-26 2017-07-28 华中科技大学 一种红外测温成像装置及检测方法
CN110672212A (zh) * 2019-09-19 2020-01-10 珠海格力电器股份有限公司 一种空间三维温度场检测方法、计算机可读存储介质及智能家电

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160088696A1 (en) * 2014-09-19 2016-03-24 Osamu Kizaki System for controlling control target units, method of controlling control target units, and recording medium
WO2016048012A1 (ko) * 2014-09-24 2016-03-31 한온시스템 주식회사 차량용 공조장치
KR20160036502A (ko) 2014-09-24 2016-04-04 한온시스템 주식회사 차량용 공조장치
EP3226754B1 (en) 2014-12-02 2021-02-03 Brainlab AG Human body measurement using thermographic images
US10352762B2 (en) 2014-12-27 2019-07-16 Guardian Optical Technologies Ltd. System and method for detecting surface vibrations
KR102246665B1 (ko) * 2015-04-28 2021-05-03 한온시스템 주식회사 차량용 공조장치
DE102015208960A1 (de) * 2015-05-15 2016-11-17 Vaillant Gmbh Heizungs-Lüftungs-Klimatechnik-System
FR3039461B1 (fr) * 2015-07-30 2018-12-07 Valeo Systemes Thermiques Systeme de commande pour installation de conditionnement d'air d'un vehicule automobile
CN107543616B (zh) 2016-06-24 2019-08-20 丘国强 利用三维热成像的机器状况监测系统
EP3520571B1 (en) 2016-09-29 2022-03-16 Signify Holding B.V. Depth queue by thermal sensing
EP3719772A4 (en) * 2017-11-30 2020-12-30 Panasonic Intellectual Property Management Co., Ltd. IMAGE PROCESSING DEVICE, IMAGE PROCESSING SYSTEM, IMAGE CAPTURE DEVICE, IMAGE ACQUISITION SYSTEM, AND IMAGE PROCESSING METHOD
WO2019124381A1 (ja) * 2017-12-22 2019-06-27 パナソニックIpマネジメント株式会社 温度検出装置、空調制御システム、温度検出方法、及びプログラム
KR102085625B1 (ko) * 2018-04-30 2020-03-06 주식회사 허브테크 멀티 포인트 온도 보정 기능을 갖는 열화상 카메라 장치 및 이를 이용한 온도 보정 방법
CN109115347A (zh) * 2018-07-23 2019-01-01 深圳供电局有限公司 一种电缆沟热点检测方法及系统
KR102246575B1 (ko) * 2019-09-03 2021-04-30 인하대학교 산학협력단 열화상 카메라를 이용한 실내 표면 온도 측정 장치 및 그 방법
KR20190112681A (ko) 2019-09-16 2019-10-07 엘지전자 주식회사 차량 공조 제어 장치 및 방법
KR20210074792A (ko) 2019-12-12 2021-06-22 삼성전자주식회사 공기 조화 장치 및 그 제어 방법
US20210207838A1 (en) * 2020-01-03 2021-07-08 AlgoLook, Inc. Air particulate classification
KR102325903B1 (ko) * 2020-09-15 2021-11-11 김기복 열화상체온측정표시수단 다채널 모니터링 시스템

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1182249A (zh) * 1996-11-05 1998-05-20 三星电子株式会社 红外物体探测器
US6021956A (en) * 1996-12-04 2000-02-08 Zexel Corporation Thermal image judging method and air conditioner control method
JP2005140571A (ja) * 2003-11-05 2005-06-02 Denso Corp 車両用非接触温度センサおよび車両用空調装置
JP2006234383A (ja) * 2005-02-22 2006-09-07 Urban Sekkei:Kk コンクリート構造物の劣化診断方法
JP2006250733A (ja) * 2005-03-10 2006-09-21 Rikogaku Shinkokai 全球熱画像収録装置及び全球熱画像収録方法とそのシステム並びに記録媒体
JP2007176203A (ja) * 2005-12-27 2007-07-12 Stanley Electric Co Ltd 車両用空調装置
JP2008001220A (ja) * 2006-06-22 2008-01-10 Nissan Motor Co Ltd 車両用温度検出装置
US20090273675A1 (en) * 2008-05-05 2009-11-05 Flir Systems Ab Ir camera and method for use with ir camera
US20100189313A1 (en) * 2007-04-17 2010-07-29 Prokoski Francine J System and method for using three dimensional infrared imaging to identify individuals
US20100224772A1 (en) * 2009-03-06 2010-09-09 Lemieux Dennis H Apparatus and Method for Temperature Mapping a Rotating Turbine Component in a High Temperature Combustion Environment
KR20100125596A (ko) * 2009-05-21 2010-12-01 현대자동차주식회사 좌석별 탑승 승객에 기초하는 차량용 온도 제어 장치
KR20110034248A (ko) * 2009-09-28 2011-04-05 한라공조주식회사 차량용 공조 제어장치

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4376653B2 (ja) * 2004-02-17 2009-12-02 富士重工業株式会社 車外監視装置
WO2005088970A1 (ja) * 2004-03-11 2005-09-22 Olympus Corporation 画像生成装置、画像生成方法、および画像生成プログラム
CA2848272C (en) * 2008-10-22 2017-11-14 International Electronic Machines Corp. Thermal imaging-based vehicle analysis
DE102009040017A1 (de) * 2009-09-04 2011-03-24 Rene Beaujean System und Verfahren zur Detektion einer Temperatur auf einer Oberfläche eines Körpers

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1182249A (zh) * 1996-11-05 1998-05-20 三星电子株式会社 红外物体探测器
US6021956A (en) * 1996-12-04 2000-02-08 Zexel Corporation Thermal image judging method and air conditioner control method
JP2005140571A (ja) * 2003-11-05 2005-06-02 Denso Corp 車両用非接触温度センサおよび車両用空調装置
JP2006234383A (ja) * 2005-02-22 2006-09-07 Urban Sekkei:Kk コンクリート構造物の劣化診断方法
JP2006250733A (ja) * 2005-03-10 2006-09-21 Rikogaku Shinkokai 全球熱画像収録装置及び全球熱画像収録方法とそのシステム並びに記録媒体
JP2007176203A (ja) * 2005-12-27 2007-07-12 Stanley Electric Co Ltd 車両用空調装置
JP2008001220A (ja) * 2006-06-22 2008-01-10 Nissan Motor Co Ltd 車両用温度検出装置
US20100189313A1 (en) * 2007-04-17 2010-07-29 Prokoski Francine J System and method for using three dimensional infrared imaging to identify individuals
US20090273675A1 (en) * 2008-05-05 2009-11-05 Flir Systems Ab Ir camera and method for use with ir camera
US20100224772A1 (en) * 2009-03-06 2010-09-09 Lemieux Dennis H Apparatus and Method for Temperature Mapping a Rotating Turbine Component in a High Temperature Combustion Environment
KR20100125596A (ko) * 2009-05-21 2010-12-01 현대자동차주식회사 좌석별 탑승 승객에 기초하는 차량용 온도 제어 장치
KR20110034248A (ko) * 2009-09-28 2011-04-05 한라공조주식회사 차량용 공조 제어장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106989824A (zh) * 2017-04-26 2017-07-28 华中科技大学 一种红外测温成像装置及检测方法
CN110672212A (zh) * 2019-09-19 2020-01-10 珠海格力电器股份有限公司 一种空间三维温度场检测方法、计算机可读存储介质及智能家电

Also Published As

Publication number Publication date
CN104220854B (zh) 2017-10-24
DE112013003301T5 (de) 2015-06-11
US10132666B2 (en) 2018-11-20
KR101724788B1 (ko) 2017-04-10
KR20140001766A (ko) 2014-01-07
US20150103141A1 (en) 2015-04-16
WO2014003433A1 (ko) 2014-01-03

Similar Documents

Publication Publication Date Title
CN104220854A (zh) 利用立体热成像的车辆内温度测量装置
CN111243002A (zh) 应用于高精度三维测量的单目激光散斑投影系统标定及深度估计方法
KR102657198B1 (ko) 화상 처리 장치 및 화상 처리 시스템
KR102085228B1 (ko) 깊이 센서의 깊이 보정을 위한 이미지 처리방법 및 그 장치
CN103115613B (zh) 一种空间三维定位方法
EP3158731B1 (en) System and method for adjusting a baseline of an imaging system with microlens array
CN104075688A (zh) 一种双目立体凝视监控系统的测距方法
CN108038885B (zh) 多深度相机标定方法
US9418435B2 (en) Three-dimensional measurement method
CN102194226A (zh) 摄像机校准装置
CN104616284A (zh) 彩色深度相机的彩色图像到深度图像的像素级对准算法
CN104567728A (zh) 激光视觉轮廓测量系统及测量方法、立体靶标
US20160221503A1 (en) Method and apparatus for displaying the surroundings of a vehicle, and driver assistance system
CN110375648A (zh) 棋盘格靶标辅助的单台相机实现的空间点三维坐标测量方法
US20110187827A1 (en) Method and apparatus for creating a stereoscopic image
CN105389543A (zh) 基于全方位双目视觉深度信息融合的移动机器人避障装置
CN107514745A (zh) 一种智能空调立体视觉定位的方法及系统
CN113091646B (zh) 基于条纹标定的三维形貌测量方法
CN106340045A (zh) 三维人脸重建中基于双目立体视觉的标定优化方法
CN107576264A (zh) 一种振动及小尺寸空间内对象立体视觉测量方法
CN110675436A (zh) 基于3d特征点的激光雷达与立体视觉配准方法
KR101597163B1 (ko) 스테레오 카메라 교정 방법 및 장치
Starr et al. Application of thermal infrared stereo vision in fire environments
JP2012198031A (ja) 画像補正方法及び画像補正装置
KR101408591B1 (ko) 무안경 3차원 영상 디스플레이 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Daejeon

Applicant after: HANON SYSTEMS

Address before: Daejeon

Applicant before: Halla Visteon Climate Control (Shanghai) Technology Co.,Ltd.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Daejeon

Patentee after: HANON SYSTEMS

Address before: Daejeon

Patentee before: HANON SYSTEMS

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171024