CN110645670B - 空气调节装置所执行的传感器的控制方法 - Google Patents
空气调节装置所执行的传感器的控制方法 Download PDFInfo
- Publication number
- CN110645670B CN110645670B CN201910976469.1A CN201910976469A CN110645670B CN 110645670 B CN110645670 B CN 110645670B CN 201910976469 A CN201910976469 A CN 201910976469A CN 110645670 B CN110645670 B CN 110645670B
- Authority
- CN
- China
- Prior art keywords
- thermal image
- air
- scanning
- conditioning apparatus
- infrared sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 145
- 238000004378 air conditioning Methods 0.000 claims abstract description 240
- 238000000605 extraction Methods 0.000 claims abstract description 5
- 238000012545 processing Methods 0.000 claims description 193
- 230000008569 process Effects 0.000 claims description 58
- 238000010586 diagram Methods 0.000 description 93
- 230000008859 change Effects 0.000 description 24
- 238000001514 detection method Methods 0.000 description 21
- 230000007246 mechanism Effects 0.000 description 11
- CURLTUGMZLYLDI-UHFFFAOYSA-N Carbon dioxide Chemical compound O=C=O CURLTUGMZLYLDI-UHFFFAOYSA-N 0.000 description 10
- 230000005855 radiation Effects 0.000 description 8
- 238000012546 transfer Methods 0.000 description 8
- 230000001143 conditioned effect Effects 0.000 description 7
- VZSRBBMJRBPUNF-UHFFFAOYSA-N 2-(2,3-dihydro-1H-inden-2-ylamino)-N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]pyrimidine-5-carboxamide Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)C(=O)NCCC(N1CC2=C(CC1)NN=N2)=O VZSRBBMJRBPUNF-UHFFFAOYSA-N 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 229910002092 carbon dioxide Inorganic materials 0.000 description 5
- 238000004590 computer program Methods 0.000 description 5
- 238000012360 testing method Methods 0.000 description 5
- HMUNWXXNJPVALC-UHFFFAOYSA-N 1-[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]-2-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethanone Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)C(CN1CC2=C(CC1)NN=N2)=O HMUNWXXNJPVALC-UHFFFAOYSA-N 0.000 description 4
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 4
- WZFUQSJFWNHZHM-UHFFFAOYSA-N 2-[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]-1-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethanone Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)CC(=O)N1CC2=C(CC1)NN=N2 WZFUQSJFWNHZHM-UHFFFAOYSA-N 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000011410 subtraction method Methods 0.000 description 3
- YLZOPXRUQYQQID-UHFFFAOYSA-N 3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)-1-[4-[2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidin-5-yl]piperazin-1-yl]propan-1-one Chemical compound N1N=NC=2CN(CCC=21)CCC(=O)N1CCN(CC1)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F YLZOPXRUQYQQID-UHFFFAOYSA-N 0.000 description 2
- AFCARXCZXQIEQB-UHFFFAOYSA-N N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C(CCNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 AFCARXCZXQIEQB-UHFFFAOYSA-N 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000001569 carbon dioxide Substances 0.000 description 2
- 238000004883 computer application Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000005265 energy consumption Methods 0.000 description 2
- 229910052742 iron Inorganic materials 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- LDXJRKWFNNFDSA-UHFFFAOYSA-N 2-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)-1-[4-[2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidin-5-yl]piperazin-1-yl]ethanone Chemical compound C1CN(CC2=NNN=C21)CC(=O)N3CCN(CC3)C4=CN=C(N=C4)NCC5=CC(=CC=C5)OC(F)(F)F LDXJRKWFNNFDSA-UHFFFAOYSA-N 0.000 description 1
- 238000012935 Averaging Methods 0.000 description 1
- 229910000530 Gallium indium arsenide Inorganic materials 0.000 description 1
- 229910000661 Mercury cadmium telluride Inorganic materials 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000007664 blowing Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- WPYVAWXEWQSOGY-UHFFFAOYSA-N indium antimonide Chemical compound [Sb]#[In] WPYVAWXEWQSOGY-UHFFFAOYSA-N 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/30—Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/30—Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
- F24F11/32—Responding to malfunctions or emergencies
- F24F11/33—Responding to malfunctions or emergencies to fire, excessive heat or smoke
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/52—Indication arrangements, e.g. displays
- F24F11/526—Indication arrangements, e.g. displays giving audible indications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/56—Remote control
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
- F24F11/63—Electronic processing
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
- F24F11/63—Electronic processing
- F24F11/65—Electronic processing for selecting an operating mode
- F24F11/66—Sleep mode
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/70—Control systems characterised by their outputs; Constructional details thereof
- F24F11/72—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure
- F24F11/74—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling air flow rate or air velocity
- F24F11/77—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling air flow rate or air velocity by controlling the speed of ventilators
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/70—Control systems characterised by their outputs; Constructional details thereof
- F24F11/72—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure
- F24F11/79—Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling the direction of the supplied air
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/89—Arrangement or mounting of control or safety devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/0022—Radiation pyrometry, e.g. infrared or optical thermometry for sensing the radiation of moving bodies
- G01J5/0025—Living bodies
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/02—Constructional details
- G01J5/025—Interfacing a pyrometer to an external device or network; User interface
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/02—Constructional details
- G01J5/026—Control of working procedures of a pyrometer, other than calibration; Bandwidth calculation; Gain control
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/02—Constructional details
- G01J5/07—Arrangements for adjusting the solid angle of collected radiation, e.g. adjusting or orienting field of view, tracking position or encoding angular position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
- H04N23/23—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/56—Remote control
- F24F11/58—Remote control using Internet communication
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2110/00—Control inputs relating to air properties
- F24F2110/10—Temperature
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2120/00—Control inputs relating to users or occupants
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2120/00—Control inputs relating to users or occupants
- F24F2120/10—Occupancy
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J2005/0077—Imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/10—Radiation pyrometry, e.g. infrared or optical thermometry using electric radiation detectors
- G01J2005/106—Arrays
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B30/00—Energy efficient heating, ventilation or air conditioning [HVAC]
- Y02B30/70—Efficient control or regulation technologies, e.g. for control of refrigerant flow, motor or heating
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Human Computer Interaction (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Fluid Mechanics (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Radiation Pyrometers (AREA)
- Air Conditioning Control Device (AREA)
- Image Input (AREA)
- Image Analysis (AREA)
- Geophysics And Detection Of Objects (AREA)
Abstract
一种空气调节装置所执行的传感器的控制方法,包括:第1热图像取得步骤,使用红外线传感器,按照第1扫描方法来扫描配置有空气调节装置的空调空间,取得第1热图像;提取步骤,基于不存在对象物的空调空间的背景热图像与第1热图像之差,从第1热图像中提取对象物热图像;决定步骤,在对象物热图像的尺寸比阈值尺寸小的情况下,决定与第1扫描方法不同的第2扫描方法;第2热图像取得步骤,使用红外线传感器,按照第2扫描方法来扫描空调空间内的与对象物热图像对应的区域,取得第2热图像。根据上述构成,能够通过第2扫描方法仅对提取出的对象物热图像中小于阈值尺寸的特定区域进行再扫描,能够高效地取得空调空间的热图像。
Description
本申请是于2015年5月19日提交的申请号为201580003472.5、名称为“空气调节装置所执行的传感器的控制方法”的专利申请的分案申请。
技术领域
本公开涉及空气调节装置所执行的传感器的控制方法,具体而言,涉及为了空气调节和其他应用而提高红外线传感器的识别性能且提高由红外线传感器取得的热图像的图像分辨率的红外线传感器的控制方案和图像处理。
背景技术
红外线传感器在空气调节装置中被活用于取得空调空间内的温度环境和人的存在。空气调节装置活用这些数据来控制气温、风向、风的强度等,由此实现使处于该空调空间内的人感到舒适的空气状态。另外,空气调节装置也可以为了空调空间内的火灾检测、火灾报知等其他应用而活用这些数据。
红外线传感器根据其构造而被分类为两类。一类是多个红外线受光元件被配置成1列的线红外线传感器。本公开所述的线红外线传感器也包括红外线受光元件被配置成多条线状的红外线传感器。另一类是多个红外线受光元件被配置成平面状的矩阵红外线传感器。在本公开中,主要使用线红外线传感器进行说明,但也可以应用矩阵红外线传感器。
为了取得空调空间的热图像,线红外线传感器对关心区域进行扫描。在不同的扫描角度下取得的线图像数据被活用于构建用于识别空调空间(空气调节空间)内的对象物体或热事件(热现象)的后图像处理用的平面图像。但是,由于线红外线传感器内的红外线受光元件的数量少,所以取得的平面图像的分辨率低。因此,几乎无法识别空调空间内的对象物体或热事件的详情。
为了解决低分辨率的问题,作为图像处理法的一种的超分辨率重建受到活用。超分辨率重建是由包含运动效果、模糊效果以及降采样(downsampling)效果的图像数字化实现的应对图像劣化的方法。通过与图像处理一并活用红外线传感器的光学特性来取得图像的不同的景象,能够提高该图像的分辨率。因此,无需使红外线传感器内的红外线受光元件的数量增加而使传感器的成本增加,就能够良好地识别空调空间内的对象物体或热事件的详情。
现有技术文献
专利文献
专利文献1:日本特许第5111417号公报
发明内容
本公开的传感器的控制方法是搭载有由多个红外线受光元件构成的线型的红外线传感器的空气调节装置所执行的传感器的控制方法,包括:
第1热图像取得步骤,使用所述红外线传感器,按照第1扫描方法来扫描配置有所述空气调节装置的空调空间,取得第1热图像;
提取步骤,基于不存在对象物的空调空间的背景热图像与所述第1热图像之差,从所述第1热图像中提取对象物热图像;
决定步骤,在所述对象物热图像的尺寸比阈值尺寸小的情况下,决定与所述第1扫描方法不同的第2扫描方法;以及
第2热图像取得步骤,使用所述红外线传感器,按照所述第2扫描方法来扫描空调空间内的与所述对象物热图像对应的区域,取得第2热图像。
根据上述构成,能够通过第2扫描方法仅对提取出的对象物热图像中小于阈值尺寸的特定区域进行再扫描。因此,能够高效地取得空调空间的热图像。
附图说明
图1是示出空气调节装置的概略结构的一例的图。
图2是示出图1的处理部的硬件结构例的图。
图3是示出空气调节装置的外观结构的一例的图。
图4A是示出红外线传感器的构造例1的图。
图4B是示出红外线传感器的构造例1的图。
图5是用于说明红外线传感器的扫描方法的图。
图6是用于说明红外线传感器的扫描方案的一例的图。
图7是用于说明红外线传感器的扫描方案的另一例的图。
图8是用于说明红外线传感器的扫描方案的另一例的图。
图9是用于说明红外线传感器的扫描方案的另一例的图。
图10A是示出红外线传感器的构造例2的图。
图10B是示出红外线传感器的构造例2的图。
图11A是示出具有绝缘板的红外线传感器的构造的一例的图。
图11B是示出具有绝缘板的红外线传感器的构造的一例的图。
图11C是用于说明穿过绝缘板的红外线的情形的图。
图11D是用于说明穿过绝缘板的红外线的情形的图。
图12A是示出使绝缘板倾斜的机构的一例的图。
图12B是示出使绝缘板倾斜的机构的一例的图。
图12C是示出使绝缘板倾斜的机构的一例的图。
图13A是示出使红外线传感器倾斜的机构的一例的图。
图13B是示出使红外线传感器倾斜的机构的一例的图。
图14是示出从空气调节装置的前方观望作为空调空间的房间的情形的图。
图15是示出空气调节装置的使用事例1-1的图。
图16是示出空气调节装置的使用事例1-1的图。
图17A是示出空气调节装置的用户接口的一例的图。
图17B是示出空气调节装置的用户接口的一例的图。
图18是示出空气调节装置的使用事例1-2的图。
图19是示出空气调节装置的使用事例1-2的图。
图20A是示出空气调节装置的用户接口的一例的图。
图20B是示出空气调节装置的用户接口的一例的图。
图21是说明第1实施方式的空气调节装置所执行的处理的一例的流程图。
图22是说明第1实施方式的空气调节装置所执行的处理的一例的流程图。
图23是说明第1实施方式的空气调节装置所执行的处理的一例的流程图。
图24是示出空气调节装置的使用事例2-1的图。
图25是示出空气调节装置的使用事例2-1的图。
图26A是示出空气调节装置的用户接口的一例的图。
图26B是示出空气调节装置的用户接口的一例的图。
图27A是示出空气调节装置的用户接口的一例的图。
图27B是示出空气调节装置的用户接口的一例的图。
图28是示出空气调节装置的使用事例2-3的图。
图29是说明第2实施方式的空气调节装置所执行的处理的一例的流程图。
图30是说明第2实施方式的空气调节装置所执行的处理的一例的流程图。
图31是说明第2实施方式的空气调节装置所执行的处理的一例的流程图。
图32是表示空气调节装置的使用事例3-1的图。
图33A是示出空气调节装置的使用事例3-2的图。
图33B是示出空气调节装置的使用事例3-2的图。
图34A是说明第3实施方式的空气调节装置所执行的处理的一例的流程图。
图34B是说明第3实施方式的空气调节装置所执行的处理的一例的流程图。
图35是说明第3实施方式的空气调节装置所执行的处理的一例的流程图。
图36是示出空气调节装置的使用事例4-1的图。
图37A是示出空气调节装置的用户接口的一例的图。
图37B是示出空气调节装置的用户接口的一例的图。
图38是说明第4实施方式的空气调节装置所执行的处理的一例的流程图。
图39是说明第4实施方式的空气调节装置所执行的处理的一例的流程图。
具体实施方式
以下,参照附图对本技术革新的各种实施方式进行说明。通过以下的描述,能够明确地理解本技术革新的原理。除了以下的实施方式以外,实施方式的任意组合或实施方式的某些部分也能够应用于本技术革新。
首先,对本申请的发明人在完成本公开的各技术方案的发明时所研究的事项进行说明。
(成为本发明的基础的见解)
在专利文献1的现有技术和科技中,为了取得空调空间整体的热图像数据而活用垂直线红外线传感器对空调空间进行扫描。该热图像数据之后被活用于通过超分辨率重建来重建空调空间整体的高分辨率热图像。空调空间内的区域整体的重建出的高分辨率热图像之后被活用于以更高的精度和精密性来取得空调空间内的热事件或对象物体的位置和/或热状态。
但是,由上述专利文献1重建出的高分辨率热图像是关于空调空间内的区域整体的图像,不限定于特定的关心区域。因此,被活用于超分辨率重建的热图像数据过大,在活用重建出的高分辨率热图像的多个部分时会花费运算成本。其结果,会因大的运算负荷而导致高的能量消耗量和运算效率降低。而且,由于对空调空间内的区域整体进行扫描需要较长时间,所以空气调节装置的控制处理会产生延迟。另外,有可能依赖于空调空间内的不同区域的超分辨率重建的算法缺乏灵活性。
在本技术革新中,通过采用触发器事件来识别用于超分辨率重建的空调空间的特定的关心区域。根据该特定的关心区域的特征来决定超分辨率重建的必要事项和/或算法。如将在本技术革新的说明中详细描述那样,触发器事件存在各个种类,由此会引起红外线传感器的不同的移动模式。
根据上述构成,能够仅在要求必要信息的空调空间内的特定的关心区域中进行超分辨率重建。因此,能够改善能量消耗量和运算效率,能够通过取得的热图像数据以更小的延迟执行空气调节装置的控制处理。而且,能够改善超分辨率重建处理的灵活性,取得用于各应用的重建出的合适的高分辨率热图像。
本公开是一种搭载有由多个红外线受光元件构成的线型的红外线传感器的空气调节装置所执行的传感器的控制方法,包括:第1热图像取得步骤,使用红外线传感器,按照第1扫描方法来扫描配置有空气调节装置的空调空间,取得第1热图像;提取步骤,基于不存在对象物的空调空间的背景热图像与第1热图像之差,从第1热图像中提取对象物热图像;决定步骤,在对象物热图像的尺寸比阈值尺寸小的情况下,决定与第1扫描方法不同的第2扫描方法;以及第2取得步骤,使用红外线传感器,按照第2扫描方法来扫描空调空间内的与对象物热图像对应的区域,取得第2热图像。
通过该控制,能够通过第2扫描方法仅对提取出的对象物热图像中的小于阈值尺寸的特定区域进行再扫描。因此,能够高效地取得空调空间的热图像。
另外,在决定步骤中,可以基于对象物热图像的分辨率和空气调节装置所需的分辨率来决定第2扫描方法。在该情况下,第2扫描方法可以是扫描速度与第1扫描方法不同,也可以是扫描间隔与第1扫描方法不同。
通过该控制,能够取得对于空气调节装置而言最佳的热图像。
另外,在提取步骤中,可以提取第1热图像中的与背景热图像的温度差比预定的阈值温度大的像素的区域,来作为对象物热图像。
通过该控制,能够提高对象物的检测精度。
另外,可以还具备:再次热图像取得步骤,在提取步骤中提取了对象物热图像之后,使用红外线传感器,按照第1扫描方法对与对象物热图像对应的区域进行再扫描,取得再次热图像;和检测步骤,检测在第1热图像与再次热图像之间产生的热图像的变化,在决定步骤中,可以在检测步骤中检测到的热图像的变化比预定值小的情况下,决定第2扫描方法。
通过该控制,能够对正在移动的对象物进行合适的控制。
另外,可以使用红外线传感器,在将空气调节装置所吹出的风吹送到存在于空调空间内的特定区域的状态下取得背景热图像。对于该特定区域,可以进行反复扫描,也可以变更扫描频度。
通过该控制,能够提高对象物的检测精度。
另外,可以还包括使用第2热图像执行超分辨率重建处理的步骤。并且,也可以还包括按照该超分辨率重建处理的结果来提供针对对象物的经由空气调节装置进行的空调控制的步骤,也可以还包括进行与对象物的状态相关的通知的步骤。
通过该控制,能够以高分辨率取得空调空间的热图像。
<空气调节装置的概要>
首先,参照图1~图3,对与本公开中的所有实施方式相关的空气调节装置100的概要进行说明。
图1是示出空气调节装置100的概略结构的一例的图。图2是示出图1所示的处理部800的硬件结构例的图。图3是示出空气调节装置100的外观结构的一例的图。
(1)空气调节装置的概略结构
图1所示的本公开的空气调节装置100由百叶窗110、风扇120、空气压缩机130、红外线传感器300、温度传感器600、致动器控制器710、遥控器720、网络模块730以及处理部800构成。红外线传感器300的数量既可以是1个也可以是多个。虚线所示的红外线传感器300的框表示根据空气调节装置100的形态可以附加也可以除去的红外线传感器。
此外,空气调节装置100也可以不是严格地由上述说明的所有部件构成。可以去除某些部件,也可以添加新的其他部件。例如,可以从空气调节装置100中去除遥控器720,也可以为了与用户对话而在空气调节装置100内设置扬声器和麦克风。
红外线传感器300取得处于设置有空气调节装置100的空调空间(例如房间)的对象物的热数据。红外线传感器300例如可以是热电堆传感器、焦电传感器或者测辐射热计(bolometer)等。温度传感器600取得空调空间的温度。温度传感器600例如可以是通常的温度计。由红外线传感器300和温度传感器600的双方取得的数据被传送给处理部800。
致动器控制器710控制预定的致动器。预定的致动器包括空气调节装置100的百叶窗110、风扇120以及空气压缩机130。预定的致动器的状况数据由致动器控制器710掌握,根据要求而被传送给处理部800。
空气调节装置100的用户活用遥控器720来对处理部800发送指示或要求。而且,遥控器720从处理部800取得空气调节装置100的当前状况数据,并在遥控器720所具有的状况显示部721对用户显示该状况。状况显示部721可以是用户能够输入数据和/或进行对话的例如触控传感器式的显示部。
网络模块730将空气调节装置100与局域网或互联网等网络连接。空气调节装置100内的数据可以经由网络模块730被传送给网络。而且,网络上的数据可以经由网络模块730被取入到空气调节装置100。
处理部800从与之连接的结构取得数据,按照程序或应用来处理该数据。该程序或应用既可以保存在经由网络模块730而连接的网络上,也可以存储在处理部800中。接着,处理部800使用处理后的数据,决定用于使致动器控制器710使用百叶窗110、风扇120以及空气压缩机130等致动器来控制空调空间内的空气状态的指示。例如,在取得了空调空间的温度之后处理部800识别到当前的温度与用户经由遥控器720而设定的要求温度不同的情况下,处理部800向致动器控制器710输出当前的室温与要求温度之差。致动器控制器710根据从处理部800提供的温度差来控制致动器。
而且,为了取得特定对象物的热数据,处理数据用于决定对红外线传感器300发出的指示。例如,在空调空间内没有人的情况下,处理部800指示红外线传感器300使其粗略且高速地扫描,在空调空间内有人的情况下,处理部800指示红外线传感器300使其密集且低速地扫描。
处理部800不仅经由遥控器720取得来自用户的要求,还为了与用户对话或者为了对用户进行显示而将各种数据传送给遥控器720。作为该各种数据,可举出空调空间内的空气状态的当前状况、用户的当前的热数据、过去取得的用户或空调空间的热数据、从经由网络模块730而连接的网络取得的数据、应用或程序等。状况显示部721可以是用户能够对这些应用和/或程序输入数据和/或进行对话的具有触控传感器式的显示部的接口。
另外,处理部800也可以不仅在其内部处理数据,还为了在特定地址处理数据而向经由网络模块730而连接的网络传送数据。特定地址可以是网络服务器、分散的计算机网络或者云运算服务等。在所连接的网络中处理了数据之后,处理部800也可以取得为了在空气调节装置100内使用而处理后的数据。
另外,处理部800也可以不仅在其内部存储数据,还为了将数据存储于特定地址而向经由网络模块730而连接的网络传送数据。特定地址可以是网络服务器、分散的网络存储器或者云存储器服务等。
另外,处理部800的软件和操作系统也可以通过活用来自经由网络模块730而连接的网络的数据传送而进行更新。
而且,在处理部800上执行的程序或应用不限于最初安装的程序或应用,也可以是从经由网络模块730而连接的网络新下载的程序或应用。用户可以经由遥控器720来要求程序或应用的下载。
用户可以经由连接于网络模块730的网络来与空气调节装置100连接。例如,用户可以经由智能手机与连接于空气调节装置100的网络模块730的网络连接,将该智能手机用作与空气调节装置100通信的装置。可以为了向空气调节装置100发送用户的要求而活用智能手机,也可以为了从空气调节装置100取得数据而活用智能手机。
(2)处理部的硬件结构
图2示出处理部800的硬件结构例。图2中的虚线的结构表示这些结构处于处理部800的外部,为了明确处理部800的内部与外部的连接而示出。
处理部800包括CPU(Central Processing Unit:中央处理器)801、ROM(Read OnlyMemory:只读存储器)802、RAM(Random Access Memory:随机存取存储器)803、储存器(memory storage)804、接口(在图2中记为“I/F”)820以及母线830。
ROM802保存定义处理部800的基本工作的预定的计算机程序和数据。储存器804可以具有闪存、固态硬盘或硬盘驱动器。储存器804保存空气调节装置100所需的其他计算机程序、应用以及数据。存储在储存器804内的程序、应用以及数据可以经过经由网络模块730而连接的网络,根据经由遥控器720或智能手机取得的用户的要求而更新或变更。而且,存储在储存器804内的程序、应用以及数据也可以在来自经由网络模块730而连接的网络内的服务器的指示下自动更新。
CPU801、ROM802和RAM803连接于母线830。储存器804经由接口820连接于母线830。虚线所示的红外线传感器300、温度传感器600、致动器控制器710、遥控器720以及网络模块730这些外部结构分别经由接口820连接于处理部800的母线830。
CPU801经由母线830从ROM802读取用于基本工作的计算机程序和/或数据,经由界面820和母线830从储存器804读取其他计算机程序、应用以及数据。RAM803可以在CPU801工作的期间暂时存储计算机程序和/或数据。在本实施方式中,CPU801是单一的CPU。或者,也可以活用数个CPU作为处理部800。
处理部800和遥控器720也可以通过无线信号连接。在该情况下,例如可以包括在处理部800与遥控器720之间收发无线信号的模块(未图示)。
CPU801从作为外部单元的红外线传感器300、温度传感器600、致动器控制器710、遥控器720以及网络模块730取得的数据可以在由CPU801使用之前,经由界面820和母线830被传送给RAM803或储存器804。
(3)空气调节装置的外观结构
图3示出空气调节装置100的外观结构的一例。图3所例示的空气调节装置100是所谓的空调,在空气调节装置100的壳体150设置有左右的百叶窗110、空气吸入口140以及红外线传感器300。
[红外线传感器的构造例1]
图4A、图4B是示出红外线传感器300的构造的一例(构造例1)的图。如图4A所示,构造例1的红外线传感器300是构成为包括摇动马达(pan motor)312和具有多个红外线受光元件311的元件体的线型的红外线传感器。
图4B是图4A所示的红外线传感器300中的多个红外线受光元件311的放大图。
如图4B的放大图所示,多个红外线受光元件311构成为在元件体的表面并列设置有2个线元件组,该线元件组是2个以上的红外线受光元件311(在图4A、图4B的例子中为8个元件)排成1列的线元件组。该并列设置的2个线元件组的元件数量相等,另外,被配置成错开红外线受光元件的高度(h)一半的量。该多个红外线受光元件311可以是测辐射热计、热电堆或量子型检测元件。量子型检测元件可以是InSb检测器、HgCdTe检测器或InGaAs检测器。各线元件组的红外线受光元件311的数量也可以是8个以外的16或32元件。
摇动马达312连接于与红外线受光元件311排成1列的方向平行地设置的元件体的旋转轴,通过使旋转轴旋转来使元件体旋转。该摇动马达312用于使多个红外线受光元件311在与红外线受光元件311排成1列的方向垂直的水平方法上摇动(pan)。
图5是用于说明为了取得空调空间内的热图像而进行的图4A、图4B所示的红外线传感器300的扫描方法的图。该扫描通过由摇动马达312使红外线传感器300在水平方向上旋转而进行。通过扫描而取得的多个线热图像314反映在红外线传感器300的视野范围方向上进行的红外辐射。
如以下说明那样,线热图像314可以通过不同的扫描方案(扫描方法)来取得。
图6是用于说明红外线传感器300的扫描方案的一例的图。在该扫描方案中,红外线传感器300以2个元件宽度(2W)间隔的步幅水平地扫描,在各步幅中取得线热图像314。取得的线热图像314为了构建2维(2D)热图像而如图6所示那样被配置成瓷砖状。通过该扫描方案而构建出的2维热图像内的最小元件的尺寸具有红外线受光元件311的1元件量的尺寸。
图7是用于说明红外线传感器300的扫描方案的另一例的图。在该扫描方案中,红外线传感器300以1个元件宽度(1W)间隔的步幅水平地扫描,在各步幅中取得线热图像314。其结果,将取得的线热图像314配置成瓷砖状而得到的2维热图像具有如图7所示的在与扫描方向垂直的方向上重叠的图案(pattern)。因此,通过超分辨率重建(SRR)而重建出的2维热图像的分辨率沿着垂直方向成为2倍。因而,通过图7的扫描方案而取得的2维热图像具有通过图6的扫描方案而取得的2维热图像的分辨率的2倍的分辨率。
图8是用于说明红外线传感器300的扫描方案的另一例的图。在该扫描方案中,红外线传感器300以1/2元件宽度(0.5W)间隔的步幅水平地扫描,在各步幅中取得线热图像314。其结果,将取得的线热图像314配置成瓷砖状而得到的2维热图像具有如图8所示的在扫描方向(水平方向)和与扫描方向垂直的方向上都重叠的图案。因此,通过超分辨率重建(SRR)而重建出的2维热图像的分辨率沿着垂直方向和水平的双方都成为2倍。因而,通过图8的扫描方案而取得的2维热图像具有通过图6的扫描方案而取得的2维热图像的分辨率的4倍的分辨率。
图9是用于说明红外线传感器300的扫描方案的另一例的图。在该扫描方案中,红外线传感器300以1/4元件宽度(0.25W)间隔的步幅水平地扫描,在各步幅中取得线热图像314。其结果,将取得的线热图像314配置成瓷砖状而得到的2维热图像具有如图9所示的在扫描方向(水平方向)和与扫描方向垂直的方向上都重叠的图案。因此,通过超分辨率重建(SRR)而重建出的2维热图像的分辨率沿着垂直方向成为2倍,且沿着水平方向成为4倍。因而,通过图9的扫描方案而取得的2维热图像具有通过图6的扫描方案而取得的2维热图像的分辨率的8倍的分辨率。
此外,在上述图6~图9中说明的扫描方案是例示。取得2维热图像的不同分辨率的扫描方案不限于在图6~图9中说明的扫描方案。根据不同的应用或目的,也可以应用更精细或更粗略的扫描步幅图案或者用于扫描间隙的不同的元件宽度。
[红外线传感器的构造例2]
图10A、图10B是示出红外线传感器300的构造的另一例(构造例2)的图。如图10A所示,构造例2的红外线传感器300是构成为包括摇动马达312和具有多个红外线受光元件311的元件体的线型的红外线传感器。
图10B是图10A所示的构造例2的红外线传感器300中的多个红外线受光元件311的放大图。
如图10B的放大图所示,多个红外线受光元件311构成为2个以上的红外线受光元件311(在图10A、图10B的例子中为8个元件)排成1列。该多个红外线受光元件311的构造和/或数量与在上述构造例1中说明的相同。摇动马达312用于使多个红外线受光元件311在与红外线受光元件311排成1列的方向垂直的水平方向上摇动(pan)。
通过使构造例2的红外线传感器300按照上述图7~图9的扫描方案进行扫描而取得的2维热图像不像由构造例1的红外线传感器300取得的2维热图像那样在垂直方向上具有重叠图案。于是,为了使多个红外线受光元件311沿着垂直方向移动,例如活用图11A所示的构造。
图11A、图11B是示出具有绝缘板的红外线传感器的构造的一例的图。
图11C是用于说明在图11A的状态下穿过绝缘板350的红外线的情形的图。
图11D是用于说明在图11B的状态下穿过绝缘板350的红外线的情形的图。
在图11A的构造中,在红外线传感器300的前方设置有具有能够使红外线透射的均一厚度的绝缘板350。该绝缘板350能够以与元件体的旋转轴正交的旋转轴351为中心而以任意的角度倾斜。在绝缘板350的入射面与红外线传感器300的辐射面平行的情况下(图11A),如图11C所示,到达了绝缘板350的红外线原样通过(或透射)绝缘板350。通过了绝缘板350的红外线到达红外线受光元件311。
另一方面,在绝缘板350的入射面相对于红外线传感器300的辐射面倾斜的情况下(图11B),如图11D所示,到达了绝缘板350的红外线在垂直方向上错开δ而透射输出。因此,通过使绝缘板350以合适的角度倾斜,能够使取得的线热图像314移动。
在此,例示性地说明用于使绝缘板350倾斜的不同方法。
图12A~图12C是分别示出使绝缘板倾斜的机构的一例的图。
图12A是在绝缘板350的旋转轴351安装马达313,使马达313旋转来使绝缘板350倾斜的例子。
图12B是用滑动机构支撑绝缘板350的两端,使绝缘板350滑动来使绝缘板350倾斜的例子。
在图12B所示的例子中,滑动机构例如具有按压部件355a、台356、弹性部件357以及台358。台356例如具有凹部,截面为凹形状。按压部件355a例如具有棒状部件,且具有向该棒状部件的一端施力的单元。按压部件355a的一端固定于台356的壁面。台358例如具有凹部,截面为凹形状。弹性部件357例如是弹簧、橡胶这样的弹性变形的部件。弹性部件357的一端例如固定于台358的壁面。
例如,在绝缘板350的入射面与红外线传感器300的辐射面平行的情况下,如图12B的左侧的图所示,绝缘板350的一端部被夹在弹性部件357与台358的壁面之间而支撑。另外,按压部件355a所具有的棒状部件的一端与绝缘板350的另一端部附近接触。
在该状态下,若向按压部件355a所具有的棒状部件的一端施力,则绝缘板350绕旋转轴351顺时针旋转。
此时,绝缘板350的另一端部移动至与台356的壁面接触的位置。
另外,绝缘板350的一端部成为按压弹性部件357的状态。
此时,成为绝缘板350的入射面相对于红外线传感器300的辐射面倾斜的状态。该状态是图12B的右侧所示的图。
另外,在图12B的右侧所示的状态下,若消除向按压部件355a所具有的棒状部件的一端施加的力,则绝缘板350因弹性部件357的复原力而绕旋转轴351逆时针旋转,成为图12B的左侧所示的状态。
图12C是用滑动机构支撑绝缘板350的一端,使绝缘板350滑动来使绝缘板350倾斜的例子。
在图12C所示的例子中,滑动机构例如具有按压部件355a、355b和台356。
按压部件355b例如具有棒状部件,且具有向该棒状部件的一端施力的单元。按压部件355b的一端固定于台356的壁面。固定按压部件355a的台356的壁面和固定按压部件355b的台356的壁面彼此相对。
例如,在绝缘板350的入射面与红外线传感器300的辐射面平行的情况下,如图12C的左侧的图所示,绝缘板350的一端部的两侧被按压部件355a的棒状部件和按压部件355b的棒状部件夹持而支撑。此时,向按压部件355a的棒状部件施加的力与向按压部件355b的棒状部件施加的力彼此相等。
接着,若使向按压部件355a的棒状部件施加的力比向按压部件355b的棒状部件施加的力大,则绝缘板350绕旋转轴351顺时针旋转。此时,成为绝缘板350的入射面相对于红外线传感器300的辐射面倾斜的状态。表示该状态的图是图12C的中央所示的图。
接着,若进一步使向按压部件355a的棒状部件施加的力比向按压部件355b的棒状部件施加的力大,则绝缘板350进一步绕旋转轴351顺时针旋转。此时,成为绝缘板350的入射面相对于红外线传感器300的辐射面进一步倾斜的状态。表示该状态的图是图12C的右侧所示的图。
另外,在如图12C的右侧所示的状态下,若使向按压部件355a的棒状部件施加的力比向按压部件355b的棒状部件施加的力小,则绝缘板350绕旋转轴351进一步逆时针旋转,成为如图12C的中央所示的状态。
另外,在如图12C的中央所示的状态下,若减小向按压部件355a的棒状部件施加的力以使其与向按压部件355b的棒状部件施加的力相等,则绝缘板350绕旋转轴351进一步逆时针旋转,成为如图12C的左侧所示的状态。
另外,关于不使用绝缘板350的红外线传感器300,可考虑如下构造。图13A、图13B是示出使红外线传感器300倾斜的机构的一例的图。图13A是在构造例2的红外线传感器300的壳体安装倾斜马达313,使倾斜马达313旋转来使多个红外线受光元件311在垂直方向上倾斜的例子。此外,也可以如图13B那样在构造例1的红外线传感器300的壳体安装倾斜马达313,使倾斜马达313旋转来使多个红外线受光元件311在垂直方向上倾斜。
通过上述构造,能够取得在垂直方向和水平方向上都具有重叠部分的2维热图像,所以能够通过超分辨率重建使垂直和水平分辨率的双方都增加。当然,也能够对具有绝缘板350的红外线传感器300应用上述图6~图9的扫描方案。
<空气调节装置的控制方法>
以下,进一步参照附图,对由具有上述构造的空气调节装置100实现的特征性的传感器的控制方法进行说明。
图14是示出从空气调节装置100的前方观望作为空调空间的房间的情形的图。如图14所示,为了取得房间的热数据,空气调节装置100使用红外线传感器300对房间进行扫描,取得各位置下的线热图像314。此外,在图14中,虽然未图示空气调节装置100,但空气调节装置100例如处于与后面说明的图32、图33A、图33B等中所示的位置同样的位置。
此外,在以下的各实施方式中,为了使内容容易理解,对空气调节装置100搭载有构造例2的红外线传感器300而通过该红外线传感器300取得的线热图像314是1列的线图像的情况进行说明。但是,在空气调节装置100搭载构造例1的红外线传感器300的情况下,由红外线传感器300取得由2列的线图像实现的线热图像314。
(1)第1实施方式
利用使用事例,对第1实施方式的空气调节装置100所执行的传感器的控制方法(使红外线传感器300进行的扫描方案的决定方法)进行具体说明。
[使用事例1-1]
图15和图16是用于说明空气调节装置的使用事例1-1的图。具体而言,图15和图16是表示使用事例1-1中的从空气调节装置100的前方观望房间的情形的图。该使用事例1-1是在房间中有2个人的例子。第1人201处于比第2人202靠近空气调节装置100的位置,第2人202处于比第1人201远离空气调节装置100的位置。此外,在图15和图16中,虽然未图示空气调节装置100,但空气调节装置100例如处于与后面说明的图32、图33A、图33B等中所示的位置同样的位置。
空气调节装置100例如为了取得房间整体的热数据而粗略地扫描房间(第1扫描方法)。为了区分人的热图像(对象物热图像)和没有人的场所的热图像(背景热图像),空气调节装置100可以使用背景减除法(background subtraction method)来检测2人的存在。背景减除法通过首先登记房间中没有人时的热图像,然后从当前的热图像减去该登记的热图像来进行。例如,若从当前的热图像的像素的值减去对应的登记的热图像的像素的值而得到的相减值(或相减值的绝对值)比预定值大,则判断为是与背景热图像不同的像素(也就是构成对象物热图像的像素)。通过该相减而得到的与背景热图像不同的部分成为对象物热图像。在检测到对象物热图像之后,取得对象物热图像的尺寸。此外,对象物热图像的尺寸与构成对象物热图像的像素数含义相同。
在对象物热图像的尺寸为预先设定的尺寸(阈值尺寸)以下的情况下,对对象物热图像进行超分辨率重建的处理。该阈值是按照处理部800正在执行的应用所需的分辨率而设定的图像的尺寸。在决定为进行超分辨率重建的处理的情况下,根据对象物热图像的当前的分辨率和依赖于正在执行的应用的期待分辨率来决定扫描方案(第2扫描方法)。在决定了对象物热图像的扫描方案之后,红外线传感器300使用决定出的扫描方案对由对象物热图像确定的对象区域进行再扫描。之后,进行超分辨率重建的处理,针对对象区域的热图像得到提高后的分辨率。
另一方面,在对象物热图像的尺寸比阈值尺寸大的情况下,不对对象物热图像进行超分辨率重建的处理。
图16是说明用于取得第1人201和第2人202的热图像的超分辨率重建的不同扫描方案的图。由于第2人202处于远离空气调节装置100的位置,所以通过红外线传感器300的粗略的扫描而取得的第2人202的热图像的分辨率比通过同一扫描而取得的第1人201的热图像的分辨率低。因此,对于第1人201和第2人202,热图像用的超分辨率重建的扫描方案应该不同。用于取得第2人202的热图像的扫描方案可以具有比用于取得第1人201的热图像的扫描方案更精细的扫描步幅。
另一方面,在第1人201的热图像的尺寸比阈值尺寸大,通过粗略的扫描而取得的第1人201的热图像具有合适的分辨率的情况下,不进行第1人201的区域的再扫描。
图17A和图17B分别是示出房间中的关心区域和各区域的所取得的热数据的品质的用户接口例的图。具体而言,图17A是示出操作空气调节装置100的遥控器720的一例的图,图17B是示出经由网络操作空气调节装置100的便携电话722的一例的图。
作为用户接口,例如以遥控器720所具备的显示画面或便携电话722所具备的显示画面上显示的信息为例进行说明。在这些显示画面上例如显示基于空气调节装置100中的处理结果的信息。
另外,在遥控器720或便携电话722具备未图示的扬声器的情况下,用户接口也可以是从扬声器输出的声音。遥控器720或便携电话722所具备的未图示的扬声器例如将对于空气调节装置100中的处理结果的信息作为声音而输出。
在图15和图16中说明的使用事例1-1中,第1人201和第2人202所处的区域是关心区域。
例如,图17A和图17B的区域R201表示第1人201的区域,对区域R201标注的圆圈标记表示良好地取得了关心区域内的热数据。另外,例如,图17A和图17B的区域R202表示第2人202的区域,对区域R202标注的问号表示当前正在取得关心区域内的热数据或者没有适当地取得关心区域内的数据。该数据可以经由遥控器720向用户显示,或者也可以向经由网络模块730而连接的网络发送然后在用户的便携电话722上显示。
[使用事例1-2]
图18和图19是示出空气调节装置100的使用事例1-2的图。具体而言,图18和图19是示出使用事例1-2中的从空气调节装置100的前方观望房间的情形的图。该使用事例1-2是在房间中发生了火灾的情况(图18)、在房间中使用了热的咖啡杯或熨斗等高温物体的情况(图19)的例子。此外,在图18和图19中,虽然未图示空气调节装置100,但空气调节装置100例如处于与后面说明的图32、图33A、图33B等中所示的位置同样的位置。
在很多情况下,初始的火灾场所和/或高温物体的尺寸与人体的大小相比较小。因此,它们的热图像的分辨率高以及它们的热数据的精度高是重要的,需要进行超分辨率重建。在检测火灾的情况下,空气调节装置100可以向用户发送火灾警报的通知,以使得能够在火灾变得严重之前灭火。火灾警报的通知可以是经由设置于空气调节装置100的扬声器进行的声音通知,或者也可以为了通过使用便携电话722的通知等其他方法来通知用户而向经由网络模块730连接的网络发送信号。在高温物体的情况下,也可以应用某些应用。
为了在房间中检测小型高温物体,空气调节装置100例如首先为了取得房间整体的热数据而粗略地扫描房间。然后,通过背景减除法取得小型高温物体的对象物热图像。在小型高温物体的对象物热图像的尺寸比阈值尺寸小的情况下,进行超分辨率重建的处理。
因此,超分辨率重建的扫描方案(第2扫描方法)根据对象物热图像的当前的分辨率和依赖于正在执行的应用的期待分辨率来决定。在对象物热图像的当前的分辨率比期待分辨率小得多的情况下,需要更精细的扫描步幅。
尤其是,在对象物热图像的尺寸为1~9像素等而过小的情况下,为了减少由红外线传感器300引起的高斯热噪声的效应,决定出的扫描方案的扫描速度应该减慢,以使得红外线传感器300能够在同一位置暂时停止从而能够实现同一位置的热数据的时间平均。
在决定了对象物热图像的扫描方案和速度之后,红外线传感器300使用决定出的扫描方案,对由对象物热图像确定的对象区域进行再扫描。之后,进行超分辨率重建的处理,针对高温物体的热图像得到提高后的分辨率。在取得了高温物体的重建热图像之后,比较图像内的最高温度与表示火灾的发生的阈值温度。
在图像内的最高温度比阈值温度高的情况下,空气调节装置100推定为高温物体是火灾部位,向用户发送火灾警报的通知。火灾警报的通知可以是各种不同的形式。例如,空气调节装置100可以为了向用户传达警报而经由附属的扬声器产生大的声音。空气调节装置100也可以向经由网络模块730而连接的网络发送警报,使得连接于该网络的用户能够远程接收该警报。
图20A、图20B分别是示出空气调节装置100的用户接口的一例的图。具体而言,图20A、图20B分别是示出经由网络来操作空气调节装置100的便携电话722的一例的图。
图20A是显示有向用户的便携电话722发送出的警报的用户接口例。便携电话722经由网络从空气调节装置100接收警报。如图20A所示,在警报画面中,可以显示由空气调节装置100预测为发生了火灾的区域的位置。而且,为了确认用户是否已接收了警报,在画面中也可以包括用户的反馈。在图20A中,在火灾区域的显示的下方显示有例示的反馈。来自用户的反馈接着经由连接的网络被发送给空气调节装置100。
另一方面,在图像内的最高温度为阈值温度以下的情况下,空气调节装置100推定为该高温物体不是火灾。在该情况下,检测后的工作可以依赖于应用程序。例如,空气调节装置100可以向用户发送告知用户可能处于在没有人的房间内家电设备正在工作而发热的状况的通知。由此,确认了来自便携电话722的通知的用户能够出于安全方面和经济方面的观点,为了切断该设备的电源而返回房间。例示性的用户接口可以是图20B所示的接口。
[在本实施方式中执行的处理例]
图21是说明处理部800所进行的处理的一例的流程图。在图21中,对处理部800对房间内进行监视并基于通过监视而检测到的内容来执行与针对空气调节、火灾报告以及变热的物体进行通知等不同种类的应用相应的处理的情况。使用事例1-1和1-2中的处理部800的工作能够通过图21的流程图系统地进行说明。此外,图21的流程图只不过是例示。因此,处理部800也可以除了图21的步骤之外还执行各种辅助步骤。
在步骤S110中,处理部800取得房间内的当前的热数据,对与背景的热数据进行了比较的情况下的当前的热数据进行解析,区分背景热图像和背景热图像内包含的对象物热图像。背景的热数据既可以在房间中没有人的时候进行收集,也可以根据与房间的热数据相关的统计来决定。背景的热数据可以通过盲更新(blind update)或选择性更新(selective update)等各种方法进行更新。该步骤S110的输出是检测到的对象物。之后,执行步骤S120。
在步骤S120中,处理部800基于步骤S110的结果来确认是否取得了与背景热图像相区分的对象物热图像,也就是说房间中是否存在对象物。在不存在对象物的情况下,处理部800使用当前的热数据更新背景的热数据,再次执行步骤S110的处理。在存在对象物的情况下,执行步骤S130。
在步骤S130中,处理部800决定所取得的对象物热图像的尺寸是否比按照处理部800正在执行的各应用所需的分辨率而设定的阈值尺寸大。在对象物热图像的尺寸比阈值尺寸大的情况下(在步骤S130中为是),判定为对象物热图像的分辨率足够而不需要进行超分辨率重建。另一方面,在对象物热图像的尺寸为阈值尺寸以下的情况下(在步骤S130中为否),判断为对象物热图像的分辨率不够而需要进行超分辨率重建。因此,处理部800进入步骤S140。
在步骤S140中,根据当前的分辨率和根据处理部800正在执行的各应用而设定的期待分辨率,决定用于超分辨率重建的扫描方案(第2扫描方法)。例如,在期待分辨率比当前的分辨率高的情况下,选择具有更密集的扫描步幅的扫描方案,在期待分辨率比当前的分辨率低的情况下,选择具有通常的扫描步幅的扫描方案。之后,执行步骤S150。
在步骤S150中,根据对象物热图像的尺寸,决定超分辨率重建的扫描速度。例如,在对象物热图像的尺寸为9像素以下的情况下,扫描速度被设定为比登记的通常速度慢,在对象物热图像的尺寸超过9像素的情况下,扫描速度被设定为与通常的扫描速度相等或者比其快。用于决定扫描速度的对象物热图像的尺寸可以根据处理部800正在执行的各应用而设定。
在步骤S160中,处理部800向红外线传感器300发出指示,通过在步骤S140和S150中决定出的扫描方案和扫描速度,对由检测到的对象物热图像确定出的区域进行再扫描。在扫描处理完成之后,执行步骤S170。
在步骤S170中,处理部800使用从步骤S160中的扫描得到的数据权标(datatoken)来运算超分辨率重建。若该步骤S170完成,则可得到具有更高的分辨率的重建出的对象物热图像。在适当执行了步骤S170之后,处理结束。
此外,也可以由处理部800检测多个对象物热图像。在该情况下,在超分辨率重建的处理中,针对多个对象物热图像分别独立地执行上述处理步骤。
图22是说明图21的步骤S110的详细处理的一例的流程图。此外,图22的流程图只不过是例示。因此,处理部800也可以除了图22的步骤之外还执行各种辅助步骤。
在步骤S111中,处理部800通过相减来运算当前的热数据相对于背景的热数据的温度差。之后,执行步骤S112。在步骤S112中,处理部800决定在步骤S111中运算出的温度差的绝对值是否比对象物检测用的阈值温度高。在温度差比阈值温度高的情况下,在步骤S113中判定为具有温度差的区域是对象物。在温度差为阈值温度以下的情况下,在步骤S114中判定为具有温度差的区域不是对象物,也就是说是背景。
通过基于上述图21和图22所示的流程图的处理而得到的对象物热图像在与应用相应的处理中加以利用。例如,若是房间的空气调节的应用,则控制百叶窗110、风扇120以及空气压缩机130等,若是火灾报知和/或变热的物体的通知的应用,则进行告知用户的工作。
图23是说明火灾报知的应用中的工作的一例的流程图。在通过图21和图22所示的流程图得到了对象物热图像时,对房间中是否发生了火灾进行评价。该评价根据对象物热图像内的最大温度是否比由火灾检测应用设定的阈值温度高来进行(步骤S210)。在对象物热图像内的最大温度比阈值温度高的情况下,向用户和空气调节装置100发送火灾警报的通知(步骤S220)。
处理部800可以在在结束该处理之前,等待接收用户接收到了该通知这一反馈。在没有从用户得到用户接收到了通知这一反馈的情况下,处理部800可以在经过预定时间之后再次发送通知,也可以在经过预定时间之后结束处理。
此外,图23所示的处理也可以不在图21的步骤S110中区分背景热图像和背景热图像内包含的对象物热图像而针对背景热图像的整体执行。
在上述第1实施方式中,应该考虑到存在2个主要的使用事例。使用事例1-1中,焦点放在提高具有不同尺寸的热图像的多个物体的分辨率。使用事例1-2中,焦点放在检测火灾和/或变热的设备等小型且高温的物体。
在使用事例1-1中,重要的点在于决定图21的步骤S140中的红外线传感器300的合适的扫描方案(第2扫描方法),以使得对象物热图像的尺寸与对于特定的应用而言足够的分辨率相匹配。在该情况下,超分辨率重建的触发器(trigger)可归结为是对象物热图像的尺寸。红外线传感器300可以对触发器进行响应而以图6~图9所示的扫描方案或其他扫描方案进行扫描。也可以如图17A、图17B所示那样向用户提供扫描(检测)的品质。
在使用事例1-2中,重要的点在于决定图21的步骤S140中的红外线传感器300的合适的扫描方案(第2扫描方法)和决定图21的步骤S150中的红外线传感器300的合适的扫描速度。其理由在于,该使用事例1-2中的大部分的对象物是小型对象物,为了噪音削减的算法而需要低的扫描速度。超分辨率重建的触发器可归结为是小型且发热的点(spot)的对象物检测的事件。可以对触发器进行响应而调整红外线传感器300的扫描速度和扫描方案。正在执行的应用可以向用户发送如图20所例示的不同种类的用户接口。
[本实施方式的处理的优点]
此外,本公开中的根据不同的触发器而为了改善热图像的分辨率进行超分辨率重建的决定与以往的技术相比,具有以下优点。
1)少的延迟时间:通过仅在特定的区域进行超分辨率重建,与在整个区域进行超分辨率重建的以往的方案相比,能够削减取得房间数据的处理时间。这也因为,超分辨率重建的扫描方案比通常的扫描方案慢。
2)高效的运算能力的活用:这一点通过指定仅在特定的关心区域进行使超分辨率重建来实现。与尽管使用重建出的图像的一部分却对房间的区域整体进行超分辨率重建的情况相比,运算的负荷变低。
3)适应性提高:用于收集在超分辨率重建的处理中活用的数据的扫描方案根据各区域的期待分辨率和原来的分辨率来确定。因此,分辨率的提高可适应性地进行。
4)高的精度:在存在尺寸小的对象物的情况下,扫描的速度和/或红外线传感器在各扫描位置停止的时间应该与尺寸大的物体的情况不同。根据对象物的特征决定的扫描速度和/或停止时间能够实现各应用所要求的良好的精度。
(2)第2实施方式
利用使用事例,对第2实施方式的空气调节装置100所执行的传感器的控制方法(使红外线传感器300进行的扫描方案的决定方法)进行说明。
[使用事例2-1]
图24和图25是示出空气调节装置的使用事例2-1的图。具体而言,图24和图25是示出使用事例2-1中的从空气调节装置100的前方观望房间的情形的图。该使用事例2-1是在房间中有2个人的例子。第1人201处于静止,第2人202正在移动。此外,在图24和图25中,虽然未图示空气调节装置100,但空气调节装置100例如处于与后面说明的图32、图33A、图33B等中所示的位置同样的位置。
空气调节装置100例如为了取得房间整体的热数据而粗略地扫描房间。空气调节装置100也可以为了区分背景热图像和这2个人的对象物热图像而使用背景减除法来检测2人的存在。在决定是否需要进行超分辨率重建之前,应该进行各对象物热图像的运动的调查。其理由在于,该运动尤其在活用无法取得实时2维热图像的线型的红外线传感器的系统中容易引起超分辨率重建的处理产生错误。该运动通过对检测到的对象物热图像的区域上及其周围高速地进行再扫描来调查。
如图24所示,为了调查对象区域的运动和该运动的方向,再扫描的区域可以比检测到的对象物热图像的区域大。对象物的运动通过将在第1扫描中收集到的热图像(第1热图像)与在对区域进行再扫描时收集到的另一热图像(第2热图像)进行比较来决定。在扫描时与再扫描时之间对象区域热图像的变化小的情况下,决定为对象物是静止物体。在对象物处于静止的情况下,决定是否需要进行超分辨率重建。在对象物正在运动的情况下,不进行超分辨率重建的处理。在决定超分辨率重建的必要事项之前,取得对象物热图像的尺寸。
在对象物热图像的尺寸为阈值尺寸以下的情况下,对对象物热图像进行超分辨率重建的处理。在决定为进行超分辨率重建的处理的情况下,根据对象物热图像的当前的分辨率和依赖于正在执行的应用的期待分辨率来决定扫描方案(第2扫描方法)。在决定了对象物热图像的扫描方案之后,红外线传感器300使用决定出的扫描方案,对由对象物热图像确定出的对象区域进行再扫描。之后,进行超分辨率重建的处理,针对对象区域的热图像得到提高后的分辨率。在对象物热图像的尺寸比阈值尺寸大的情况下,不进行超分辨率重建的处理。
图25是示出运动调查后的超分辨率重建的执行状态的图。图25表示对第1人201坐着处于静止或者正在进行较小的运动的区域进行超分辨率重建的处理。另一方面,对于第2人202正在快速移动的区域,不进行超分辨率重建的处理。
图26A、图26B是示出空气调节装置100的用户接口的一例的图。
具体而言,图26A、图26B是示出房间中的关心区域和各区域的所取得的热数据的品质的用户接口的一例的图。
更具体而言,图26A是示出操作空气调节装置100的遥控器的一例的图,图26B是示出经由网络与空气调节装置100连接的便携电话722的一例的图。
在用户接口中也可以显示各区域中的移动的方向等移动数据。在图24和图25中说明的使用事例2-1中,第1人201和第2人202所处的区域是关心区域。例如,图26A、图26B的区域R201表示第1人201的区域,对区域R201标注的圆圈标记表示良好地取得了关心区域内的热数据。另外,例如,图26A、图26B的区域R202表示第2人202的区域,对区域R202标注的三角标记表示以比圆圈标记的区域低的品质取得了关心区域的热数据。而且,区域R202也可以具有显示区域中的对象物的运动方向的箭头。该数据可以经由遥控器720向用户显示,或者也可以向经由网络模块730而连接的网络发送然后显示于用户的便携电话722。
[使用事例2-2]
图27A是示出空气调节装置100的用户接口的一例的图。在用户要求空气调节装置100的应用的执行且该应用需要超分辨率重建的情况下,空气调节装置100也可以经由如图27A所示的遥控器720等用户接口而要求人(用户等)静止以进行超分辨率重建的扫描处理。在图27A的纸面左侧所示的图中,例如通过在遥控器720的显示画面上显示“请静止”这一消息来要求人(用户等)静止。
在将该要求发送给人之后,应该为了确认而调查人的运动。在人还未静止的情况下,空气调节装置100可以再次对人发出要求,直到能够确认到人处于静止为止。在确认到人处于静止的情况下,进行超分辨率重建的处理。
然后,在空气调节装置100的应用完成了超分辨率重建的处理的情况下,空气调节装置100经由遥控器720等用户接口来通知应用已完成了超分辨率重建的处理。
在图27A的纸面右侧所示的图中,例如通过在遥控器720的显示画面上显示“操作处理已完成。请自便!”这一消息来向人(用户等)通知应用已完成了超分辨率重建的处理。
图27B是示出空气调节装置100的另一用户接口的一例的图。在空气调节装置100发现了多个对象物热图像且用户要求执行需要超分辨率重建的应用的情况下,用户可以通过遥控器720或者经由网络与空气调节装置100连接的便携电话722等用户接口来从检测到的对象物热图像中识别出特定的对象物热图像。在图27B中,处于对象物热图像的中央的指示箭头意味着用户为了应用而选择了该区域作为对象区域。
[使用事例2-3]
图28是示出空气调节装置100的使用事例2-3的图。具体而言,图28是示出使用事例2-3中的从空气调节装置100的前方观望房间的情形的图。该使用事例2-3是在最初的房间中仅有处于静止的第1人201和第2人202这2个人,之后第3人203进入了房间的例子。此外,在图28中,虽然未图示空气调节装置100,但空气调节装置100例如处于与后面说明的图32、图33A、图33B等中所示的位置同样的位置。
空气调节装置100通过防止在超分辨率重建时因运动而产生错误的上述算法,来决定对第1人201和第2人202所处的双方的区域进行超分辨率重建的处理。在进行再扫描的处理的过程中,由于第3人203进入了房间,所以空气调节装置100会从再扫描得到的热图像数据中发现在第2人202的区域的再扫描中产生了突然的变化。其结果,空气调节装置100为了防止超分辨率重建的处理产生错误而停止对第2人202的对象物热图像进行超分辨率重建的处理。
空气调节装置100内的处理部800可以通过其人工智能而学习在门所处的图28内的区域那样的房间中的区域中以高频度发生突然的变化这一情况。因此,在执行超分辨率重建的对象区域存在多个的情况下,距离突然的变化为高频度的区域越远的区域,则超分辨率重建的再扫描的优先级被设定得越高。
[在本实施方式中执行的处理例]
图29是说明第2实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图29是说明处理部800所进行的处理的一例的流程图。在图29中,对处理部800对房间内进行监视并基于通过监视而检测到的内容来执行与自动气温设定等不同种类的应用相应的处理的情况进行说明。图29的流程图也包括防止由进行用于超分辨率重建的再扫描处理的期间的物体的运动引起的错误的处理。使用事例2-1中的处理部800的工作能够通过图29的流程图系统地进行说明。此外,图29的流程图只不过是例示。因此,处理部800也可以除了图29的步骤之外还执行各种辅助步骤。
图29中的步骤S110和步骤S140~步骤S170的处理与在第1实施方式中参照图21说明的步骤相同。因而,步骤S110和步骤S140~步骤S170的处理的说明也适用于第2实施方式。
在图29的流程图中,处理部800分别执行步骤S120A和步骤S130A来取代图21的步骤S120和步骤S130。另外,还添加了步骤S121和步骤S122。
在步骤S120A中,处理部800基于步骤S110的结果,进行是否取得了与背景热图像相区分的对象物热图像也就是说房间中是否存在对象物的检测处理。在不存在对象物的情况下,处理部800使用当前的热数据来更新背景的热数据,再次执行步骤S110的处理。在存在对象物的情况下,执行步骤S121。
在步骤S121中,通过对在步骤S110中检测到的对象物热图像的区域上及其周围高速地进行再扫描来调查对象物热图像的运动。对象物的运动通过对在第1扫描中收集到的热图像与在对区域进行再扫描时收集到的另一热图像进行比较来决定。在第1扫描时与再扫描时之间对象区域的变化小的情况下,决定为对象物是静止物体。之后,执行步骤S122。
在步骤S122中,判断对象物是否是静止物体。除了对象物完全停止的情况以外,也可以在对象物的运动比预先设定的量少的情况下也判断为对象物是静止物体。在判断为对象物是静止物体的情况下,进入步骤S130A。否则,结束处理。
在步骤S130A中,处理部800决定对象物热图像的尺寸是否比根据处理部800正在执行的各应用所需的分辨率而设定的阈值尺寸大。在对象物热图像的尺寸比阈值尺寸大的情况下,判定为前景热图像的分辨率足够而无需进行超分辨率重建。在对象物热图像的尺寸为阈值尺寸以下的情况下,判定为对象物热图像的分辨率不够而需要进行超分辨率重建。因此,处理部800进入步骤S140。以后,执行在图21中说明的步骤S140~S170的处理。
图30是说明第2实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图30是说明处理部800所进行的另一处理的一例的流程图。在图30中,对空气调节装置100的用户要求了需要超分辨率重建的应用的情况进行说明。使用事例2-2中的处理部800的工作能够通过图30的流程图系统地进行说明。此外,图30的流程图只不过是例示。因此,处理部800也可以除了图30的步骤之外还执行各种辅助步骤。
图30中的步骤S150~步骤S170的处理与在第1实施方式中参照图21说明的步骤相同。因而,步骤S150~步骤S170的处理的说明也适用于第2实施方式。
在图30的流程图中,处理部800执行步骤S140A来取代图21的步骤S140。图21的步骤S110~步骤S130的处理被删除,并新添加了步骤S101~步骤S103的处理。
在步骤S101中,在从用户接收到执行需要超分辨率重建的特定的应用的要求之后,处理部800通过用户的便携电话或遥控器720等用户接口装置来对人(用户等)进行请求其静止的要求。这是为了防止因对象物的运动而导致超分辨率重建的处理发生错误。之后,执行步骤S102。
此外,在处理开始之前已经取得对象物热图像。在因房间中有多个人而检测到多个对象物热图像的情况下,持有用户接口装置的用户也可以确定应用的对象用户。
在步骤S102中,通过对对象物热图像的区域上及其周围高速地进行再扫描来调查对象用户的对象物热图像的运动。之后,执行步骤S103。
在步骤S103中,判断对象物是否是静止物体。除了对象物完全停止的情况以外,也可以在对象物的运动比预先设定的量少的情况下也判断为对象物是静止物体。在判断为对象物是静止物体的情况下,进入步骤S140A。否则,处理返回步骤S101。
在步骤S140A中,根据当前的分辨率和由处理部800正在执行的各应用设定的期待分辨率来决定超分辨率重建用的扫描方案(第2扫描方法)。例如,在期待分辨率比当前的分辨率高的情况下,选择具有更密集的扫描步幅的扫描方案,在期待分辨率比当前的分辨率低的情况下,选择具有通常的扫描步幅的扫描方案。之后,以后执行在图21中说明的步骤S150~S170的处理。
图31是说明第2实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图31是说明处理部800所进行的处理的一例的流程图。在图31中,对处理部800对房间内进行监视并基于通过监视而检测到的内容来执行与自动气温设定等不同种类的应用相应的处理的情况进行说明。图31的流程图包括用于防止由超分辨率重建的再扫描处理的期间的物体的运动引起的错误的处理。物体的运动可以是物体本身的运动,或者是物体周围的背景热图像的变化。使用事例2-3中的处理部800的工作能够通过图31的流程图系统地进行说明。此外,图31的流程图只不过是例示。因此,处理部800也可以除了图31的步骤之外还执行各种辅助步骤。
图31中的步骤S110~步骤S150的处理与参照图29说明的步骤相同。因而,图29的步骤S110~步骤S150的处理的说明也适用于图31。
在图31的流程图中,处理部800分别执行步骤S160A和步骤S170A来取代图29的步骤S160和步骤S170。另外,还添加了步骤S161。
在步骤S160A中,处理部800向红外线传感器300发出指示,使其根据在步骤S140和S150中决定出的扫描方案和扫描速度,对由检测到的对象物热图像确定出的区域进行再扫描。在步骤S160A的扫描处理的期间,在扫描区域中产生了可能由对象物热图像中的变化引起的突然的变化的情况下,在步骤S161中停止处理。否则,执行步骤S170A。此外,对象物热图像的突然的变化可以通过对在步骤S160A的扫描处理的期间在同一位置取得的线热图像的不同帧进行比较来检测。
在步骤S170A中,处理部800使用从步骤S160A中的扫描得到的数据权标来进行超分辨率重建的运算。若该步骤S170A完成,则可得到具有更高的分辨率的重建出的对象物热图像。在适当执行了步骤S170之后,处理结束。
在上述第2实施方式中,应该考虑到存在3个主要的使用事例。使用事例2-1中,焦点放在防止在由空气调节装置100自动进行的超分辨率重建的处理中因对象物的运动而发生错误。使用事例2-2中,焦点放在防止在由空气调节装置100的用户指示的超分辨率重建的处理中因对象物的运动而发生错误。使用事例2-3中,焦点放在防止在超分辨率重建中因背景热图像的突然的变化而发生错误。
在使用事例2-1中,重要的点在于防止在超分辨率重建中由对象物的运动引起的错误。因此,步骤S121和步骤S122包含于图29或图31的处理。在该情况下,处理由空气调节装置100自动进行。在图29或图31的处理中的超分辨率重建中,防止错误的方案中的空气调节装置100的工作能够容易地评价。事件的触发器是人的移动状态。红外线传感器300的扫描模式根据触发器而变化。而且,由不同种类的触发器引起的空气调节装置100的工作的效果能够如图26A、图26B例示那样经由各种用户接口明确地通知用户。
在使用事例2-2中,重要的点在于防止由用户要求的正在执行的应用所指示的超分辨率重建中的对象物的运动引起的错误。因此,包括图30所示的步骤S101~步骤S103的处理。图30的处理中的防止超分辨率重建的错误的方案中的空气调节装置100的工作能够容易地评价。事件的触发器是用户要求了需要超分辨率重建的应用。空气调节装置100对触发器进行响应而经由用户接口要求对象用户静止,红外线传感器300的扫描模式根据各应用的详情而变化。而且,处理的输出根据所选择的应用而变化。输出可以例如可以通过显示由自动温度选择应用自动选择的温度等方式,经由用户接口通知用户。
在使用事例2-3中,重要的点在于防止由超分辨率重建中的对象物周围的背景的突然变化引起的错误。因此,包括图31所示的步骤S161的处理。图31的处理中的防止超分辨率重建的错误的方案中的空气调节装置100的工作能够评价。事件的触发器是对象物周围的背景的突然变化。空气调节装置100的红外线传感器300的运动根据触发器而变化。而且,由不同种类的触发器引起的空气调节装置100的工作的效果能够如图26A、图26B例示那样经由各种用户接口明确地通知用户。
(3)第3实施方式
利用使用事例,对第3实施方式的空气调节装置100所执行的传感器的控制方法(使红外线传感器300进行的扫描方案的决定方法)进行说明。
[使用事例3-1]
图32是示出空气调节装置100的使用事例3-1的图。具体而言,图32是示出使用事例3-1中的从空气调节装置100的前方观望房间的情形的图。该使用事例3-1是房间中没有人时那样的在房间中检测不到对象物的情况的例子。
空气调节装置100例如使背景特征取得模式工作,收集与房间中的各区域的热相关的特征。窗帘401、墙壁501、地面502以及门503等房间中的不同物体有可能由不同的材料制作而具有不同的体积。因此,这些物体具有不同的热容量。热能在房间中的空气与这些物体之间传递,其结果,产生温度变化。尤其是,在直接从百叶窗110对物体吹风的情况下,若物体与空气之间存在温度差,则热能的传递进程会加速。温度变化取决于物体的热容量,可大可小,可慢可快。
在房间中的物体的各热容量存在差异的情况下,无法适当更新背景的热数据,因而对象物检测处理可能会发生错误。因此,本实施方式的空气调节装置100在未检测到对象物的期间测试房间中的各区域的背景的热传递的特征并存储。为了测试关心区域的背景的热传递的特征,空气调节装置100使来自百叶窗110的风朝向测试区域599,为了检测对象区域的温度而移动红外线传感器300,存储由风品质引起的温度变化率等测试出的区域的特征数据。存储的特征数据可以为了提高对象物检测处理的精度而在更新背景的热数据的处理中加以利用。
背景的温度发生了变化的信息受到风向和/或房间中的物体的热传递的特征的显著影响。来自百叶窗110的风所朝向的区域或者背景的热容量低的区域与其他区域相比,可以更频繁地反复扫描。
[使用事例3-2]
图33A和图33B是示出空气调节装置100的使用事例3-2的图。具体而言,图33A和图33B是示出使用事例3-2中的从空气调节装置100的前方观望房间的情形的图。该使用事例3-2是房间中仅有第1人201这一个人的例子。
空气调节装置100检测第1人201的存在,并使风朝向第1人201。因此,第1人201周围的背景区域的温度有可能受到该风的影响。为了有效更新该区域的背景的热数据,红外线传感器300可以比其他区域频繁地扫描区域A201。而且,在区域A202中存在热容量较低的窗帘401。因此,红外线传感器300可以为了取得区域A202的合适的更新数据而比除了区域A201以外的其他区域更频繁地反复扫描区域A202。
如图33B所示,第2人202在进入到房间中并向区域A202移动的情况下,通过适当更新区域A202的背景的热数据,可适当且准确地检测第2人202。
[在本实施方式中执行的处理例]
图34A是说明第3实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图34A是说明处理部800所进行的处理的一例的流程图。在图34A中,对处理部800工作而取得设置有空气调节装置100的空调空间(房间)的背景的特征的情况。使用事例3-1中的处理部800的工作能够通过图34A的流程图系统地进行说明。此外,图34A的流程图只不过是例示。因此,处理部800也可以除了图34A的步骤之外还执行各种辅助步骤。
在步骤S310中,处理部800对与背景的热数据进行了比较的情况下的当前的热数据进行解析,区分表示对象物的背景热图像和背景热图像内包含的对象物热图像。之后,执行步骤S320。在步骤S320中,处理部800基于步骤S310的结果,进行是否存在对象物的检测处理。在不存在对象物的情况下,处理部800为了取得背景的特征而进入步骤S330。否则,处理部800在结束处理之前为了其他工作模式而进入步骤S390。在步骤S330中,处理部800取得房间中的区域的背景的特征。之后,处理结束。
图34B是说明第3实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图34B是说明图34A的步骤S330中的详细处理的一例的流程图。
在步骤S331中,控制百叶窗110的方向以使得对要取得与背景的热量相关的特征的对象区域吹风。之后,执行步骤S332。在步骤S332中,控制红外线传感器300的方向,以取得来自百叶窗110的风所朝向的区域的周围的热数据。之后,执行步骤S333。在步骤S333中,根据在向区域吹风的期间收集到的热数据,决定与该区域的热相关的特征并登记。之后,执行步骤S334。在步骤S334中,处理部800确认是否残留有应该取得背景的特征的其他区域。在残留有应该取得背景的特征的区域的情况下,处理部800再次执行步骤S331。否则,步骤S330结束。
图35是说明第3实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图35是说明为了更新百叶窗110使风所朝向的区域的背景数据而处理部800使红外线传感器300工作来得到合适的数据的情况下的处理部800的处理的一例的流程图。
在步骤S410中,处理部800从致动器控制器710取得百叶窗110的方向。之后,执行步骤S420。在步骤S420中,处理部800根据在步骤S410中取得的百叶窗110的方向来修正红外线传感器300的扫描频度。之后,处理结束。
在上述第3实施方式中,应该考虑到存在彼此的关联密切的2个主要的使用事例。使用事例3-1中,焦点放在取得房间中的区域的背景的特征。使用事例3-2中,焦点放在适当更新通过风向和已经取得的背景的特征而存储的背景数据。
在使用事例3-1中,重要的点在于在房间中不存在重要的热事件的情况下,取得根据背景的物体的体积及其材料而不同的背景的特征。因此,在决定使背景特征取得模式工作之前,为了调查房间中是否存在重要的热事件而执行步骤S310和步骤S320。上述扫描方案中的空气调节装置100的工作能够容易地评价。事件的触发器是房间中没有人等不存在由当前的房间中的状态引起的对象物的情况。百叶窗110的运动和/或红外线传感器300的扫描方向根据触发器而变化。
在使用事例3-2中,重要的点在于根据以前取得的背景的热传递的特征和风向(或百叶窗的方向),适当调整红外线传感器300的扫描方案。如图35所例示,红外线传感器300的扫描频度可以根据百叶窗110的方向来修正。上述扫描方案中的空气调节装置100的工作能够容易地评价。事件的触发器是百叶窗110的方向。红外线传感器300的扫描方案根据触发器而变化。
除了上述说明之外,在与房间中的各区域的背景的热传递特征相应的红外线传感器300的扫描频度的修正以外,也可以进行扫描速度或扫描步幅的修正。关于热容量高的区域,由于该区域的背景温度有可能几乎不变,所以红外线传感器可以以粗略的扫描步幅或高的速度大致地扫描。关于热容量小的区域,由于该区域的背景温度有可能容易地变化,所以红外线传感器可以以细的扫描步幅或低的速度细密地扫描。
(4)第4实施方式
利用使用事例,对第4实施方式的空气调节装置100所执行的传感器的控制方法(使红外线传感器300进行的扫描方案的决定方法)进行说明。
[使用事例4-1]
图36是示出空气调节装置100的使用事例4-1的图。具体而言,图36是使用事例4-1中的从空气调节装置100的前方观望房间的情形的图。该使用事例4-1是房间中的人201正躺着放松的例子。在房间中的光强度变低了的情况下,可推测为人201接下来要修养。例如,人201为了进行午睡或就寝等修养,有可能关闭顶灯402或进行调光。此外,在图36中,虽然未图示空气调节装置100,但空气调节装置100例如处于与图32、图33A、图33B等中所示的位置同样的位置。
在人201从红外线传感器300通常扫描的区域A301移动到空气调节装置100附近或下方的位置等不同的位置而改变了场所的情况下,红外线传感器300有可能丢失人201的行踪。因此,红外线传感器300对通常扫描的区域A301进行再扫描,调查人201是否移动到了区域A301内的新的位置。在空气调节装置100未能在通常扫描的区域A301中未找到人201进行的情况下,空气调节装置100使红外线传感器300朝下倾倒,如图36所示那样,使取得线热图像314向更低的位置移动。之后,红外线传感器300为了检测人201的存在而在该低的位置对房间整体进行水平扫描。在该低的位置检测到人201的情况下,空气调节装置100可以根据人201和/或人201的状态而变更工作模式。空气调节装置100未能在房间中检测到人201的情况下,可以为了节能而切断自身的开关。
在人201在通常扫描的区域A301内移动而改变场所的情况下,或者在人201不改变场所的情况下,可以根据人201和/或人201的状态而变更空气调节装置100的工作模式。
关于上述说明的工作模式的变更,空气调节装置100可以使用人201的运动等人的状态而自动决定模式的变更。或者,空气调节装置100也可以向询问人201以使其选择睡眠模式等期望的工作模式。
在房间中的光强度因外部的光强度等外因而变小了的情况下,空气调节装置100可以执行图36中说明的上述工作。
另一方面,在人201自身经由接口要求空气调节装置100变更为睡眠模式等不同模式的情况下,空气调节装置100可以在通常扫描的区域A301无法检测到人201时,使红外线传感器300向下倾倒而对低的位置进行扫描。
此外,房间中的光条件可以由设置于空气调节装置100的照度传感器取得,或者也可以取得与顶灯402的通断和/或调光状态相关的网络信息。网络信息可以经由空气调节装置100与顶灯402之间的局域的共用网络或者互联网那样的公众网络来传送。
另一方面,也可以活用由空气调节装置100的人工智能学习到的用户的日常生活的模式,来使空气调节装置100成为睡眠模式。
图37A、图37B是示出空气调节装置100的用户接口的一例的图。具体而言,图37A、图37B是示出用于选择空气调节装置100的工作模式的用户接口的一例的图。用户接口可以经由遥控器720或者连接于与空气调节装置100共用的网络的便携电话(智能手机)而与用户通信。用户接口可以对用户通知工作模式的变更的确认。另外,用户接口也可以进行空气调节装置100的工作模式选择。
[在本实施方式中执行的处理例]
图38是说明第4实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图38是说明处理部800所进行的处理的一例的流程图。在图38中,说明房间中的光条件变化的情况。使用事例4-1中的处理部800的工作能够通过图38的流程图系统地进行说明。此外,图38的流程图只不过是例示。因此,处理部800也可以除了图38的步骤之外还执行各种辅助步骤。
在步骤S510中,调查房间中的光条件。在光强度低的情况下,进入步骤S520。否则,进入步骤S599。在步骤S520中,在通常扫描的区域中,执行针对用户的对象物检测处理。之后,执行步骤S530。在步骤S530中,处理部800基于步骤S520的结果,进行通常扫描的区域内是否存在对象物的检测处理。在不存在对象物的情况下,处理部800进入步骤S540。在存在对象物的情况下,执行步骤S580。
在步骤S540中,空气调节装置100使红外线传感器300向下倾倒而朝向低的位置。之后,执行步骤S550。在步骤S550中,空气调节装置100利用红外线传感器300水平地扫描房间的低的位置,在该扫描的区域中执行针对用户的对象物检测处理。之后,执行步骤S560。在步骤S560中,处理部800基于步骤S550的结果,确认在低的区域是否存在对象物。在不存在对象物的情况下,处理部800进入步骤S570。在存在对象物的情况下,执行步骤S580。在步骤S570中,切断空气调节装置100的开关,处理结束。
在步骤S580中,根据用户或/或用户的状态来决定空气调节装置100的工作模式。之后,执行步骤S590。在步骤S590中,执行在步骤S580中决定出的工作模式,处理结束。在步骤S599中,继续执行当前的模式,调查光条件的处理结束。
图39是说明第4实施方式的空气调节装置100所执行的处理的一例的流程图。具体而言,图39是说明图38的步骤S580中的详细处理的一例的流程图。
在步骤S581中,通过对对象物热图像的区域上及其周围高速地进行再扫描来调查用户的对象物热图像的运动。之后,执行步骤S582。在步骤S582中,对象物热图像处于静止或者其运动少到能够作为静止物体来考虑的程度的情况下,进入步骤S585。否则,处理进入步骤S583。在步骤S583中,空气调节装置100询问用户是否想要将工作模式向睡眠模式变更。在用户确认了将工作模式向睡眠模式变更的情况下,执行步骤S585。否则,执行步骤S584。在步骤S584中,处理部继续执行空气调节装置100的当前的工作模式。在步骤S585中,处理部800将空气调节装置100的工作模式向睡眠模式变更。
上述第4实施方式的使用事例4-1中,焦点放在基于房间中的光条件的空气调节装置100及其红外线传感器300的工作。上述扫描方案中的空气调节装置100的工作能够容易地评价。事件的触发器是房间中的光条件。红外线传感器300的运动和空气调节装置100的工作模式能够根据触发器而变更。
<应用例>
对通过不同的反复扫描方案来改善热图像的品质的方法进行说明。该方法能应用于上述的所有实施方式。
[反复扫描方案例1]
在对象物的热图像尺寸小的情况下,有可能为了提高该图像的分辨率而需要进行超分辨率重建。红外线传感器的噪音比较高,有可能虽然如在上述实施方式所述那样选择了合适的扫描方案和扫描速度,但却无法很好地执行热图像的重建。因此,在对象物的热图像小的情况下,需要在相同的区域中进行反复扫描。通过反复扫描,能够执行多次超分辨率重建,能够通过由反复数据实现的统计量来提高重建出的结果的可靠性。
另一方面,在推测为物体没有运动的情况下,通过以与最初的扫描不同的扫描角度反复扫描不同的图像数据,能够为了提高分辨率而在超分辨率重建中使用集合性的数据。因而,进行越多的反复,则分辨率越提高。而且,在通过反复扫描而取得了来自与最初的扫描相同的扫描角度的图像数据的情况下,反复数据可以用于对热噪音减少进行平均。
该第1反复扫描方案中的空气调节装置100的工作能够容易地评价。事件的触发器是对象物的热图像的尺寸。扫描的反复根据触发器而变更。
[反复扫描方案例2]
在房间中存在多个对象物的情况下,反复扫描优先对运动更慢的对象物进行。通过扫描型线红外线传感器取得移动体的热数据是困难的,因此,高速移动体的热数据的可靠性有可能比运动慢的物体的热数据的可靠性低。因此,在存在多个对象物的情况下,反复扫描优先对运动慢的物体进行。因此,检测的可靠性和空气状态控制的可靠性提高。
该第2反复扫描方案中的空气调节装置100的工作能够容易地评价。事件的触发器是对象物的运动。扫描的反复根据触发器而变更。
<变形例>
在上述实施方式中,说明了使用红外线传感器300检测对象物的例子。在此,对还使用与红外线传感器300不同的传感器而能够高精度地和/或迅速地检测对象物的变形例进行说明。
[变形例1]
在人等对象物的检测中,也可以除了红外线传感器300之外还使用人感传感器。通过人感传感器,能够检测对象物的有无,确定对象物的位置,判定对象物是移动还是静止的状态。红外线传感器300能够不对房间整体而仅对由人感传感器确定出的对象物的位置进行扫描。另外,若由人感传感器判定为对象物正在移动,则红外线传感器300能够停止为了超分辨率重建而正在执行的扫描。另外,在由人感传感器检测出房间内没有人时,红外线传感器300能够更新背景的热数据,测试热传递的特征(使用事例3-1)。
由此,能够缩短检测到对象物所需的时间。另外,由于不再需要对房间整体的热数据进行处理,所以也能够减少消耗电力。此外,在夜间等时,也可以由照度传感器进行房间内是否有人的检测。
[变形例2]
在高温物体等对象物的检测中,也可以除了红外线传感器300还使用CO2传感器。通过CO2传感器,能够测定房间内的二氧化碳的浓度。在由CO2传感器测定出的二氧化碳的浓度超过了预定的阈值的情况下,红外线传感器300能够提高房间整体的扫描速度,关注对象物热图像的区域而进行超分辨率重建处理。
由此,能够在更早的阶段进行火灾检测等。此外,通过进一步与人感传感器进行组合,也能够高效地判定是在无人时产生了火灾,还是人正在喝咖啡休息或者正在使用熨斗等。
<应用方式>
在上述实施方式中,说明了整合有红外线传感器和处理部的空气调节装置。但是,也可以使红外线传感器、处理部和/或其他结构模块化而成为另外的结构。另外,也可以使上述实施方式所记载的处理部等的各处理作为软件而成为另外的结构(未图示)。即,也可以是写入有各处理(程序)的记录介质(包括盘(disc)、外置存储器等)。另外,也包括经由网络提供各处理(程序)的行为。在该情况下,处理该软件的主体可以是搭载于空气调节装置的运算部,也可以是PC(个人计算机)、智能手机等所包含的运算部。另外,该软件可以经由网络而由云服务器等进行处理。
产业上的可利用性
本公开作为空气调节装置所执行的传感器的控制方法是有用的。
标号说明
100:空气调节装置
110:百叶窗
201~203:人
300:红外线传感器
311:红外线受光元件
312:摇动马达
313:倾斜马达
314:线热图像
350:绝缘板
599:测试区域
710:致动器控制器
720:遥控器
721:状况显示部
730:网络模块
800:处理部
Claims (13)
1.一种空气调节装置所执行的传感器的控制方法,是搭载有由多个红外线受光元件构成的线型的红外线传感器的空气调节装置所执行的传感器的控制方法,包括:
第1热图像取得步骤,使用所述红外线传感器,取得通过扫描配置有所述空气调节装置的空调空间的作为通常扫描的区域的第1区域而得到的热图像、或通过扫描与所述第1区域不同的所述空调空间的第2区域而得到的热图像作为第1热图像;和
判定步骤,基于不存在对象物的空调空间的背景热图像与所述第1热图像之差,判定是否从所述第1热图像检测出对象物热图像,
在所述判定步骤中判定为没有从所述第1区域的热图像检测出所述对象物热图像的情况下,在所述第1热图像取得步骤中,取得所述第2区域的热图像作为所述第1热图像,在所述判定步骤中,判定是否从作为所述第1热图像而取得的所述第2区域的热图像检测出对象物热图像,
所述第1热图像取得步骤包括:
通过使用所述红外线传感器扫描所述第1区域,取得所述第1区域的热图像作为所述第1热图像的步骤;
使所述红外线传感器向所述空调空间的下方倾斜的步骤;以及
取得通过使用向所述空调空间的下方倾斜了的所述红外线传感器扫描所述第2区域而得到的所述第2区域的热图像作为所述第1热图像的步骤,
所述判定步骤包括:
基于所述背景热图像与所述第1区域的热图像之差,判定是否从作为所述第1热图像而取得的所述第1区域的热图像检测出所述对象物热图像的步骤;和
基于所述背景热图像与所述第2区域的热图像之差,判定是否从作为所述第1热图像而取得的所述第2区域的热图像检测出所述对象物热图像的步骤,
在没有从所述第1区域的热图像检测出所述对象物热图像的情况下,使所述红外线传感器倾斜,取得所述第2区域的热图像作为所述第1热图像,
作为所述第1热图像的所述第2区域的热图像通过按照第1扫描方法来扫描而取得,
所述控制方法还包括:
提取步骤,基于所述背景热图像与作为所述第1热图像的所述第2区域的热图像之差,从所述第2区域的热图像中提取对象物热图像;
决定步骤,在所提取出的所述对象物热图像的尺寸为预定尺寸以下的情况下,决定与所述第1扫描方法不同的第2扫描方法;和
第2热图像取得步骤,使用所述倾斜了的红外线传感器,按照所述第2扫描方法来扫描所述第2区域内的与所述对象物热图像对应的区域,取得第2热图像。
2.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
所述空气调节装置所执行的传感器的控制方法还包括:
新的第1热图像取得步骤,在所述判定步骤中判定为从所述第1区域的热图像或所述第2区域的热图像检测出所述对象物热图像的情况下,使用所述红外线传感器,取得通过对包括检测出所述对象物热图像的区域的所述第1区域或所述第2区域进行再扫描而得到的新的热图像作为新的第1热图像;
判断步骤,基于所述对象物热图像、和基于所述背景热图像与所述新的第1热图像之差而检测出的新的对象物热图像来判断所述对象物是否处于静止;以及
控制步骤,基于所述判断步骤的判断结果来控制所述空气调节装置。
3.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
所述空气调节装置所执行的传感器的控制方法还取得由照度传感器检测出的所述空调空间的照度,
在所述取得的照度比预定的值低的情况下,取得所述第1热图像。
4.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
所述空气调节装置所执行的传感器的控制方法还包括:
在没有从所述第2区域的热图像检测出所述对象物热图像的情况下,切断所述空气调节装置的开关的步骤。
5.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
在所述决定步骤中,基于所述对象物热图像的分辨率和所述空气调节装置所需的分辨率来决定所述第2扫描方法。
6.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
所述第2扫描方法的扫描速度与所述第1扫描方法的扫描速度不同。
7.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
所述第2扫描方法的扫描间隔与所述第1扫描方法的扫描间隔不同。
8.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
使用所述红外线传感器,在将所述空气调节装置吹出的风吹送到存在于空调空间内的特定区域的状态下取得所述背景热图像。
9.根据权利要求8所述的空气调节装置所执行的传感器的控制方法,
对所述特定区域进行反复扫描。
10.根据权利要求8所述的空气调节装置所执行的传感器的控制方法,
对所述特定区域变更扫描频度。
11.根据权利要求1所述的空气调节装置所执行的传感器的控制方法,
还包括使用所述第2热图像执行超分辨率重建处理的步骤。
12.根据权利要求11所述的空气调节装置所执行的传感器的控制方法,
还包括按照所述超分辨率重建处理的结果来提供针对对象物的经由所述空气调节装置进行的空调控制的步骤。
13.根据权利要求11所述的空气调节装置所执行的传感器的控制方法,
还包括按照所述超分辨率重建处理的结果来进行与对象物的状态相关的通知的步骤。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014-109064 | 2014-05-27 | ||
JP2014109064 | 2014-05-27 | ||
JP2015-075930 | 2015-04-02 | ||
JP2015075930 | 2015-04-02 | ||
CN201580003472.5A CN105874284B (zh) | 2014-05-27 | 2015-05-19 | 空气调节装置所执行的传感器的控制方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580003472.5A Division CN105874284B (zh) | 2014-05-27 | 2015-05-19 | 空气调节装置所执行的传感器的控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110645670A CN110645670A (zh) | 2020-01-03 |
CN110645670B true CN110645670B (zh) | 2021-10-15 |
Family
ID=54698418
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580003472.5A Active CN105874284B (zh) | 2014-05-27 | 2015-05-19 | 空气调节装置所执行的传感器的控制方法 |
CN201910976469.1A Active CN110645670B (zh) | 2014-05-27 | 2015-05-19 | 空气调节装置所执行的传感器的控制方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580003472.5A Active CN105874284B (zh) | 2014-05-27 | 2015-05-19 | 空气调节装置所执行的传感器的控制方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US10375301B2 (zh) |
JP (2) | JP6567511B2 (zh) |
CN (2) | CN105874284B (zh) |
WO (1) | WO2015182061A1 (zh) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015182061A1 (ja) * | 2014-05-27 | 2015-12-03 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 空気調和装置が実行するセンサの制御方法 |
JP6374757B2 (ja) * | 2014-10-21 | 2018-08-15 | アズビル株式会社 | 人検知システムおよび方法 |
US11328152B2 (en) | 2019-06-17 | 2022-05-10 | Pixart Imaging Inc. | Recognition system employing thermal sensor |
WO2018011940A1 (ja) * | 2016-07-14 | 2018-01-18 | アツミ電氣株式会社 | 熱線センサ |
DE102016212940A1 (de) * | 2016-07-15 | 2018-01-18 | Siemens Aktiengesellschaft | Verfahren zur Steuerung einer Belüftung eines Innenraums und Detektions-Steuer-Einrichtung |
JP6810666B2 (ja) * | 2017-08-03 | 2021-01-06 | アズビル株式会社 | 放射環境評価システムおよび放射環境評価方法 |
CN107560113B (zh) * | 2017-08-18 | 2019-12-31 | 青岛海尔空调器有限总公司 | 一种智能空调器控制方法及空调器 |
CN113837939A (zh) * | 2017-10-09 | 2021-12-24 | 华为技术有限公司 | 一种图像处理方法及设备 |
CN108387945B (zh) * | 2018-02-02 | 2020-01-24 | 珠海格力电器股份有限公司 | 一种传感器检测区域确定方法、装置、存储介质及设备 |
CN108919373B (zh) * | 2018-06-29 | 2019-12-24 | 珠海格力电器股份有限公司 | 目标物检测控制设备及其检测控制方法、装置和存储介质 |
KR101979247B1 (ko) * | 2018-08-09 | 2019-05-16 | 주식회사 에프에스 | 지능적 공간 안전 모니터링 장치 및 그 시스템 |
JP7086223B2 (ja) * | 2018-12-17 | 2022-06-17 | 三菱電機株式会社 | センサ制御システム、空気調和機、およびセンサ制御方法 |
WO2020219694A1 (en) * | 2019-04-23 | 2020-10-29 | Apple Inc. | Systems and methods for resolving hidden features in a field of view |
WO2020251550A1 (en) * | 2019-06-11 | 2020-12-17 | Hewlett-Packard Development Company, L. P. | Adapting manufacturing simulation |
KR102661364B1 (ko) * | 2019-07-05 | 2024-04-25 | 엘지전자 주식회사 | 열적 쾌적성 기반의 공조 방법 및 공조기 |
EP3786598A1 (en) * | 2019-08-30 | 2021-03-03 | ABB Schweiz AG | System for monitoring a switchgear |
DE112019007870T5 (de) * | 2019-10-31 | 2022-09-08 | Mitsubishi Electric Corporation | Klimaanlage |
US10819923B1 (en) * | 2019-11-19 | 2020-10-27 | Waymo Llc | Thermal imaging for self-driving cars |
WO2021117645A1 (ja) * | 2019-12-12 | 2021-06-17 | パナソニックIpマネジメント株式会社 | 熱画像処理装置、熱画像処理モジュール、熱画像処理方法、及びプログラム |
US11359969B2 (en) * | 2020-01-31 | 2022-06-14 | Objectvideo Labs, Llc | Temperature regulation based on thermal imaging |
CN113622143B (zh) * | 2020-05-06 | 2024-05-31 | 重庆海尔滚筒洗衣机有限公司 | 洗衣机控制方法、控制设备、洗衣机及存储介质 |
CN111706951B (zh) * | 2020-07-03 | 2021-08-24 | 湖南大学 | 一种有限空间空气稳定性的热舒适通风与污染物控制方法 |
CN112032987B (zh) * | 2020-07-28 | 2022-04-08 | 四川虹美智能科技有限公司 | 基于红外人体追踪的空调控制方法及装置 |
WO2023032770A1 (ja) * | 2021-08-31 | 2023-03-09 | パナソニックIpマネジメント株式会社 | 人検知システム、及び、人検知方法 |
WO2024176354A1 (ja) * | 2023-02-21 | 2024-08-29 | 日本電気株式会社 | 人物検出装置、人物検出システム、人物検出方法及び非一時的なコンピュータ可読媒体 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1620603A (zh) * | 2002-01-23 | 2005-05-25 | 马雷纳系统有限公司 | 采用红外热成像法进行缺陷检测和分析 |
CN101672498A (zh) * | 2008-09-10 | 2010-03-17 | 三菱电机株式会社 | 空调机 |
CN102761706A (zh) * | 2011-04-26 | 2012-10-31 | 株式会社理光 | 成像设备、成像方法及程序 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6090091A (ja) * | 1983-10-25 | 1985-05-21 | Nec Corp | シリカ除去法 |
JPS6420474A (en) * | 1987-07-15 | 1989-01-24 | Matsushita Electric Works Ltd | Number of person detector |
JPH03269384A (ja) * | 1990-03-20 | 1991-11-29 | Fujitsu Ltd | 赤外線撮像装置 |
JPH0413036A (ja) * | 1990-04-27 | 1992-01-17 | Matsushita Electric Ind Co Ltd | 空気調和装置 |
US5326028A (en) * | 1992-08-24 | 1994-07-05 | Sanyo Electric Co., Ltd. | System for detecting indoor conditions and air conditioner incorporating same |
JP3216280B2 (ja) * | 1992-12-11 | 2001-10-09 | 松下電器産業株式会社 | 空気調和機の制御装置と画像処理装置の応用機器 |
US5555512A (en) * | 1993-08-19 | 1996-09-10 | Matsushita Electric Industrial Co., Ltd. | Picture processing apparatus for processing infrared pictures obtained with an infrared ray sensor and applied apparatus utilizing the picture processing apparatus |
JP3409538B2 (ja) * | 1995-10-20 | 2003-05-26 | 日産自動車株式会社 | 人体検出装置 |
US7983802B2 (en) * | 1997-10-22 | 2011-07-19 | Intelligent Technologies International, Inc. | Vehicular environment scanning techniques |
CA2616700A1 (en) * | 2005-08-09 | 2007-02-15 | Gil Zwirn | High resolution radio frequency medical imaging and therapy system |
CN101490479B (zh) * | 2006-09-07 | 2010-12-15 | 三菱电机株式会社 | 空气调和机 |
JP4885017B2 (ja) | 2007-03-12 | 2012-02-29 | 三菱電機株式会社 | 空気調和装置 |
JP4870059B2 (ja) | 2007-10-05 | 2012-02-08 | 三菱電機株式会社 | 空気調和機 |
JP5300602B2 (ja) | 2008-10-31 | 2013-09-25 | 三菱電機株式会社 | 空気調和機 |
JP5478075B2 (ja) | 2009-01-06 | 2014-04-23 | 三菱電機株式会社 | 空気調和装置 |
JP5111417B2 (ja) | 2009-03-13 | 2013-01-09 | 三菱電機株式会社 | 空気調和機 |
CN101737907B (zh) * | 2009-12-24 | 2011-10-05 | 于震 | 基于热成像技术的室内环境智能控制方法 |
EP3040697A4 (en) * | 2013-08-28 | 2017-07-19 | Mitsubishi Electric Corporation | Thermal image sensor and air conditioner |
WO2015114833A1 (ja) * | 2014-02-03 | 2015-08-06 | 株式会社プロスパークリエイティブ | 画像検査装置及び画像検査プログラム |
WO2015182061A1 (ja) * | 2014-05-27 | 2015-12-03 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 空気調和装置が実行するセンサの制御方法 |
CN107407489B (zh) * | 2015-03-23 | 2019-10-22 | 三菱电机株式会社 | 空气调节机 |
-
2015
- 2015-05-19 WO PCT/JP2015/002503 patent/WO2015182061A1/ja active Application Filing
- 2015-05-19 CN CN201580003472.5A patent/CN105874284B/zh active Active
- 2015-05-19 JP JP2016523116A patent/JP6567511B2/ja active Active
- 2015-05-19 CN CN201910976469.1A patent/CN110645670B/zh active Active
-
2016
- 2016-07-15 US US15/210,886 patent/US10375301B2/en active Active
-
2019
- 2019-06-14 US US16/442,097 patent/US10819906B2/en active Active
- 2019-06-24 JP JP2019116452A patent/JP6775068B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1620603A (zh) * | 2002-01-23 | 2005-05-25 | 马雷纳系统有限公司 | 采用红外热成像法进行缺陷检测和分析 |
CN101672498A (zh) * | 2008-09-10 | 2010-03-17 | 三菱电机株式会社 | 空调机 |
CN101672498B (zh) * | 2008-09-10 | 2012-09-12 | 三菱电机株式会社 | 空调机 |
CN102761706A (zh) * | 2011-04-26 | 2012-10-31 | 株式会社理光 | 成像设备、成像方法及程序 |
Also Published As
Publication number | Publication date |
---|---|
CN105874284A (zh) | 2016-08-17 |
WO2015182061A1 (ja) | 2015-12-03 |
CN110645670A (zh) | 2020-01-03 |
US20160320085A1 (en) | 2016-11-03 |
US20190313019A1 (en) | 2019-10-10 |
US10819906B2 (en) | 2020-10-27 |
JP2019174109A (ja) | 2019-10-10 |
JP6775068B2 (ja) | 2020-10-28 |
JPWO2015182061A1 (ja) | 2017-04-20 |
US10375301B2 (en) | 2019-08-06 |
JP6567511B2 (ja) | 2019-08-28 |
CN105874284B (zh) | 2019-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110645670B (zh) | 空气调节装置所执行的传感器的控制方法 | |
EP3593332B1 (en) | Safety cooking device and method | |
JP6137425B2 (ja) | 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム | |
US20180330169A1 (en) | Methods and Systems for Presenting Image Data for Detected Regions of Interest | |
US20180349708A1 (en) | Methods and Systems for Presenting Image Data for Detected Regions of Interest | |
EP4006860A1 (en) | Security and/or monitoring devices and systems | |
JP6074143B2 (ja) | 空気調和機 | |
JP2006245829A (ja) | 電気機器制御装置、電気機器制御システム、電気機器制御方法、電気機器制御プログラム、および記録媒体 | |
JP2014020569A (ja) | 空気調和機 | |
WO2018208365A1 (en) | Methods and systems for presenting image data for detected regions of interest | |
CA3114075A1 (en) | Adaptive smart shelf for autonomous retail stores | |
JP6227284B2 (ja) | 物体検出システム | |
US11259076B2 (en) | Tactile launching of an asymmetric visual communication session | |
JP7033940B2 (ja) | 空気調和機 | |
JP7228767B2 (ja) | センサシステム、空気調和システム、物体検知方法及びプログラム | |
JP6920873B2 (ja) | 空気調和機 | |
JP2019215274A (ja) | 情報処理装置および情報処理装置の制御方法 | |
TWI664426B (zh) | 檢測系統、檢測方法以及程式 | |
TWI716921B (zh) | 偵測裝置、偵測系統及偵測方法 | |
KR20090084477A (ko) | 공기조화기의 보안 시스템 및 그 제어방법 | |
JP6881167B2 (ja) | 情報コード読取システム | |
WO2024004553A1 (ja) | 水検知装置、水検知システム、及び、水検知方法 | |
US20220189004A1 (en) | Building management system using video analytics | |
JP6255207B2 (ja) | 空気調和機の室内機及びこれを用いた空気調和機 | |
TWI628421B (zh) | 人員偵測器的非警戒區域設定系統及其設定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |