CN104896685B - 传感方法、传感系统及包含它们的空调设备 - Google Patents

传感方法、传感系统及包含它们的空调设备 Download PDF

Info

Publication number
CN104896685B
CN104896685B CN201510062129.XA CN201510062129A CN104896685B CN 104896685 B CN104896685 B CN 104896685B CN 201510062129 A CN201510062129 A CN 201510062129A CN 104896685 B CN104896685 B CN 104896685B
Authority
CN
China
Prior art keywords
thermal image
sensor
information
user
based system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510062129.XA
Other languages
English (en)
Other versions
CN104896685A (zh
Inventor
楠龟弘一
式井慎一
中东秀人
N·斯拉万
米田亚旗
船濑和记
清水努
佐佐木映
赤岭育雄
八田多代
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to CN201910504637.7A priority Critical patent/CN110274355B/zh
Publication of CN104896685A publication Critical patent/CN104896685A/zh
Application granted granted Critical
Publication of CN104896685B publication Critical patent/CN104896685B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/30Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/52Indication arrangements, e.g. displays
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2120/00Control inputs relating to users or occupants
    • F24F2120/10Occupancy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image

Abstract

传感方法、传感系统及具备它们的空调设备,传感方法包括:热图像取得步骤(S10),取得对象空间的热图像;识别步骤(S11),基于在热图像取得步骤(S10)中取得的热图像,识别该热图像中包含的对象空间内的对象物;提示步骤(S12),对该热图像附加表示识别步骤(S11)中的识别结果的信息并提示给用户;以及受理步骤(S13),受理针对附加了在提示步骤(S12)中提示的所述信息的该热图像的应答。

Description

传感方法、传感系统及包含它们的空调设备
技术领域
本发明涉及传感方法、传感系统及包含所述传感方法、传感系统的空调设备。
背景技术
有人提出过通过用热图像传感器计测室内温度分布及人位置信息来实现节能及舒适空调的技术(例如专利文献1)。
专利文献1:日本专利第5289518号公报
专利文献2:日本特开2011-80667号公报
发明内容
但是,在专利文献1所公开的技术中,即使存在热图像传感器取得的热图像的识别精度较低的情况,用户也不能确认,所以存在不得不享受空调机在较低的识别精度的状态下实施的低效率的空调控制的问题。
本发明是着眼于上述问题而做出的,目的是提供一种能够提高热图像的识别精度的传感方法、传感系统及包含所述传感方法、传感系统的空调设备。
有关本申请的一技术方案的传感方法,包括:热图像取得步骤,取得对象空间的热图像;识别步骤,基于在上述热图像取得步骤中取得的上述热图像,识别上述热图像中包含的上述对象空间内的对象物;提示步骤,对上述热图像附加表示上述识别步骤中的识别结果的信息,向用户提示;受理步骤,受理针对附加了在上述提示步骤中提示的上述信息的上述热图像的应答。
另外,这些概括性的或者具体的方式也可以通过系统、方法、集成电路、计算机程序或者计算机可读的CD-ROM等记录介质来实现,也可以利用系统、方法、集成电路、计算机程序以及记录介质的任意组合来实现。
根据本申请,能够提供一种具备能够提高识别精度的传感方法、传感系统及包含了所述传感方法、传感系统的空调设备。
附图说明
图1是表示实施方式1的传感系统的结构的一例的图。
图2是表示实施方式1的识别单元的详细结构的一例的图。
图3是表示实施方式1的受理单元的详细结构的一例的图。
图4是表示实施方式1的传感系统的动作的一例的流程图。
图5是表示实施方式1的传感系统的动作的一例的流程图。
图6A是表示实施方式1的实施例1的热图像的一例的示意图。
图6B是表示实施方式1的实施例1的热图像的一例的示意图。
图7A是表示实施方式1的实施例2的热图像的一例的示意图。
图7B是表示实施方式1的实施例2的热图像的一例的示意图。
图7C是表示实施方式1的实施例2的热图像的一例的示意图。
图8是表示实施方式2的传感系统的结构的一例的图。
图9是表示实施方式2的计测单元的详细结构的一例的图。
图10是表示实施方式2的传感系统的动作的一例的流程图。
图11是表示实施方式2的实施例1的热图像的一例的示意图。
图12A是表示实施方式2的实施例1的可视图像的一例的示意图。
图12B是表示实施方式2的实施例1的热图像的一例的示意图。
图13是表示实施方式3的传感系统的结构的一例的图。
图14是表示实施方式3的传感系统的动作的一例的流程图。
图15是表示实施方式3的实施例2的热图像的一例的示意图。
图16A是表示实施方式3的实施例2的热图像的一例的示意图。
图16B是表示实施方式3的实施例2的热图像的一例的示意图。
图17是表示实施方式3的变形例的传感系统的结构的一例的图。
图18是表示实施方式3的变形例的传感系统的动作的一例的流程图。
图19是表示实施方式3的实施例3的热图像的一例的示意图。
图20是表示实施方式4的传感系统的结构的一例的图。
图21是表示实施方式4的识别单元的详细结构的一例的图。
图22是表示实施方式4的传感系统的动作的一例的流程图。
图23是表示实施方式4的实施例2的热图像的一例的示意图。
图24是表示实施方式4的实施例3的热图像的一例的示意图。
图25是表示实施方式4的实施例4的热图像的一例的示意图。
图26是表示实施方式4的传感系统的结构的另一例的图。
图27是表示有关实施方式5的热图像处理单元和热图像传感器、热图像显示装置的块图。
图28是表示包括热图像传感器及热图像显示装置的系统的概略图。
图29是表示有关实施方式5的热图像处理方法的流程图。
图30是表示有关实施方式5的其他热图像处理方法的流程图。
图31是表示由热图像传感器取得的热图像的图。
图32是表示使用有关实施方式5的热图像处理方法修正后的修正图像的图(示意图)。
图33是表示使用有关实施方式5的其他热图像处理方法修正后的修正图像的图(示意图)。
图34是表示使用有关实施方式5的其他热图像处理方法修正后的修正图像的图(示意图)。
图35是表示使用有关实施方式5的其他热图像处理方法修正后的修正图像的图(示意图)。
图36是表示有关实施方式5的其他热图像处理方法的流程图。
图37是表示脸部插图(illustration)的图。
图38是表示由热图像传感器取得的其他热图像的图。
图39是表示使用有关实施方式5的其他热图像处理方法修正后的修正图像的图(示意图)。
图40是表示全身示意图的图。
具体实施方式
本申请的一个方式的传感方法包括:热图像取得步骤,取得对象空间的热图像;识别步骤,基于在上述热图像取得步骤中取得的上述热图像,识别上述热图像中包含的上述对象空间内的对象物;提示步骤,对上述热图像附加表示上述识别步骤中的识别结果的信息,并提示给用户;以及受理步骤,受理针对附加了在上述提示步骤中提示的上述信息的上述热图像的应答。
根据该结构,能够提供一种能够提高识别精度的传感方法。
此外,例如,在上述识别步骤中,也可以在上述受理步骤中受理的上述应答是针对上述识别结果的修正指示的情况下,按照上述修正指示,修正上述热图像中包含的对象物的识别结果。
此外,例如,上述对象物也可以包括上述对象空间内的人、动物、家电设备及被洗涤物的至少一种。
此外,例如,上述识别步骤也可以包括:热分布判定步骤,判定由在上述热图像取得步骤中取得的上述热图像表现的温度分布;对象物判定步骤,基于在上述热分布判定步骤中判定出的温度分布,判定并识别上述对象物;以及对象物位置判定步骤,判定在上述对象物判定步骤中识别出的上述对象物在上述对象空间内的位置,在上述提示步骤中,将上述对象物及上述对象物的位置包含在表示上述识别结果的信息中而进行提示。
此外,例如,在上述对象物判定步骤中,也可以将在上述热图像取得步骤中取得的上述热图像中的表示规定的温度范围的像素群的区域,判定为上述对象物;在上述对象物位置判定步骤中,将在上述热图像取得步骤中取得的上述热图像中的表示规定的温度范围的像素群的区域的位置,判定为上述对象物的位置。
此外,例如,在上述对象物判定步骤中,也可以将在上述热图像取得步骤中取得的上述热图像中的表示规定的第1温度范围的像素群的区域,判定为人;将在上述热图像取得步骤中取得的上述热图像中的表示与上述第1温度范围不同的规定的第2温度范围的像素群的区域,判定为动物。
此外,例如,上述传感方法还可以包括:温度分布计测步骤,计测上述对象空间的温度分布,并作为上述热图像输出;状态判定步骤,基于上述热图像,判定包含在上述识别步骤中识别出的上述对象物的上述对象空间的状态;以及通知步骤,通知与在上述状态判定步骤中判定出的上述对象空间的状态有关的信息、而且是针对上述用户的信息。
此外,例如,上述传感方法还可以包括:通知判定步骤,判定是否有作为应当通知上述用户的信息的通知信息;以及湿度信息取得步骤,取得上述对象空间的湿度信息,在上述状态判定步骤中,基于上述热图像及上述湿度信息,判定包含在上述识别步骤中识别出的上述对象物的上述对象空间的状态;在上述通知步骤中,在上述通知判定步骤中判定为有上述通知信息的情况下,将上述通知信息通知给上述用户。
此外,例如,上述传感方法还可以包括基于在上述状态判定步骤中判定出的上述对象空间的状态、判定是否有作为应当通知上述用户的信息的通知信息的通知判定步骤,在上述通知步骤中,在上述通知判定步骤中判定为有上述通知信息的情况下,将上述通知信息通知给上述用户。
此外,例如,上述传感方法还可以包括基于在上述状态判定步骤中判定的上述对象物的状态控制上述对象空间的空气环境的空调控制步骤。
此外,例如,上述传感方法还可以包括取得上述对象空间的湿度信息的湿度信息取得步骤,在上述空调控制步骤中,基于在上述状态判定步骤中判定出的上述对象空间的状态及上述湿度信息,控制上述对象空间的空气环境。
此外,例如,上述空气环境也可以包括上述对象空间的空气的温度、湿度、风速及风向的至少1种。
此外,例如,上述传感方法还可以包括:湿度信息取得步骤,取得上述对象空间的湿度信息;分析步骤,基于上述热图像及上述湿度信息,分析在上述识别步骤中识别出的上述对象物的状态;以及通知判定步骤,基于上述分析步骤的分析结果,判定是否有作为应当通知上述用户的信息的通知信息,在上述通知步骤中,在上述通知判定步骤中判定为有上述通知信息的情况下,将上述通知信息通知给上述用户。
此外,例如,在上述受理步骤中,还可以预先受理关于上述对象物的信息的登记。
此外,例如,关于上述对象物的信息也可以包括上述对象物的种类、体重、年龄及位置的至少一种。
此外,例如,上述对象空间的湿度信息也可以是上述对象空间的湿度分布,在上述湿度信息取得步骤中,计测上述对象空间的湿度,基于计测出的上述湿度和由在上述热图像取得步骤中取得的上述热图像表现的温度分布,计算上述对象空间的湿度分布。
此外,例如,在上述通知步骤中,也可以通知作为至少基于上述温度分布向上述用户提议生活改善方法的信息的生活改善提议信息。
此外,有关本申请的另一技术方案的传感系统,可以具备:热图像取得单元,取得对象空间的热图像;识别单元,基于上述热图像取得单元取得的上述热图像,识别上述热图像中包含的上述对象空间内的对象物;提示单元,对上述热图像附加表示上述识别单元中的识别结果的信息,并提示给用户;以及受理单元,受理针对附加了在上述提示单元中提示的上述信息的上述热图像的应答。
另外,这些概括性的或者具体的方式也可以以系统、方法、集成电路、计算机程序或者计算机可读的CD-ROM等记录介质来实现,也可以利用系统、方法、集成电路、计算机程序或者记录介质的任意组合来实现。
以下,参照附图对有关本申请的一个方式的传感方法等进行具体说明。
另外,以下说明的实施方式都是表示本申请的一个具体例子。在以下的实施方式中表示的数值、形状、材料、构成要素、构成要素的配置位置等是一例,不是限定本申请的意思。此外,关于以下的实施方式的构成要素中的、在表示最上位概念的独立技术方案中没有记载的构成要素,作为任意的构成要素进行说明。
即,下面对作为用于实现本申请的一个方式的传感方法等的一例的实施方式进行说明,但各实施方式只不过是一例,并不限定于以下的记载。此外,在各实施方式中记载的任何内容都能够组合。
(实施方式1)
[传感系统的结构]
以下,参照附图对实施方式1的传感系统进行说明。
图1是表示实施方式1的传感系统1的结构的一例的图。图2是表示实施方式1的识别单元12的详细结构的一例的图。图3是表示实施方式1的受理单元14的详细结构的一例的图。
图1所示的传感系统1具备最小结构单元10、计测单元15、状态判定单元16和通知单元17,最小结构单元10具备热图像取得单元11、识别单元12、提示单元13和受理单元14。即,在传感系统1中,计测单元15、状态判定单元16和通知单元17是任意的要素。
热图像取得单元11取得对象空间的热图像。在本实施方式中,热图像取得单元11取得计测单元15输出的热图像。
识别单元12基于热图像取得单元11取得的热图像,识别该热图像中包含的对象空间内的对象物。这里,对象物包括对象空间内的人、动物、家电设备及被洗涤物的至少一个。此外,识别单元12在受理单元14中受理的应答是针对识别结果的修正指示的情况下,按照该修正指示,对热图像中包含的对象物的识别进行修正。另外,识别单元12也可以通过与能够与传感系统1通信的云或安装在传感系统1中的应用协作而对基于热图像取得单元11取得的热图像的对象物进行识别。
在本实施方式中,识别单元12例如如图2所示那样,具备热分布判定单元121、对象物判定单元122和对象物位置判定单元123。
热分布判定单元121判定用由热图像取得单元11取得的热图像表达(表现)的温度分布。
对象物判定单元122基于由热分布判定单元121判定的温度分布判定并识别对象物。对象物判定单元122将由热图像取得单元11取得的热图像中的表示规定的温度范围的像素群的区域作为对象物。例如,对象物判定单元122也可以将由热图像取得单元11取得的热图像中的表示规定的第1温度范围的像素群的区域判定为人,将该热图像中的表示与第1温度范围不同的规定的第2温度范围的像素群的区域判定为动物。
对象物位置判定单元123判定由对象物判定单元122识别出的对象物在对象空间内的位置。例如,对象物位置判定单元123将由热图像取得单元11取得的热图像中的表示规定的温度范围的像素群的区域的位置判定为对象物的位置。此外,例如对象物位置判定单元123也可以将由热图像取得单元11取得的热图像中的表示规定的第1温度范围的像素群的区域的位置判定为人的位置,将该热图像中的表示与第1温度范围不同的规定的第2温度范围的像素群的区域的位置判定为动物的位置。
提示单元13对该热图像附加表示识别单元12的识别结果的信息并向用户提示。另外,提示单元13也可以将对象物及该对象物的位置包含在表示识别结果的信息中而进行提示。此外,提示单元13也可以通过对用户持有的智能电话等便携终端发送附加了表示识别结果的信息的该热图像来进行提示。
受理单元14受理针对附加了由提示单元13提示的上述信息的热图像的应答。另外,受理单元14既可以受理来自用户持有的智能电话等便携终端的该应答,也可以通过直接受用户指示而受理该应答。此外,受理单元14也可以预先受理关于对象物的信息的登记。由此,传感系统1能够以良好的精度进行热图像中的对象物的识别。
在本实施方式中,受理单元14例如如图3所示,具备登记受理单元141、位置信息受理单元142和修正受理单元143。
登记受理单元141预先受理关于对象物的信息的登记。即,登记受理单元141在识别单元12识别对象物之前,预先受理识别单元12在对象物的识别中能够利用的信息、而且是关于对象物的信息的登记。这里,关于对象物的信息既可以包括例如对象物的种类、体重及年龄的至少一个,也可以如在实施例1及实施例2中后述那样,例如是用户正在饲养宠物的情况、宠物的饲料的种类等、宠物的小便位置。此外,作为针对附加了由提示单元13提示的上述信息的热图像的应答,如在实施例1及实施例2中后述那样,例如也可以指定(登记)金鱼等宠物存在的区域、热图像中的表示宠物的区域。
位置信息受理单元142预先受理关于对象物的位置的信息的登记。另外,作为针对附加了由提示单元13提示的上述信息的热图像的应答,位置信息受理单元142也可以受理关于对象物的位置的信息的登记。
修正受理单元143受理针对附加了由提示单元13提示的上述信息的热图像的应答。例如,在受理单元14受理的应答是针对识别结果的修正指示的情况下,识别单元12按照该修正指示,对热图像中包含的对象物的识别进行修正。
计测单元15计测对象空间的温度分布,并作为热图像输出。
状态判定单元16基于热图像取得单元11取得的热图像,判定包含识别单元12识别出的对象物的对象空间的状态。另外,状态判定单元16如在实施例1及实施例2中后述那样,例如既可以判定为在对象空间中没有人的状态(外出),也可以判定为人及动物都处于对象空间中。此外,状态判定单元16也可以在对象物是狗的情况下判定狗的种类(犬种),也可以在对象物是人的情况下,通过人的温度分布判定中暑容易度,也可以在对象物是宠物的情况下判定宠物的状态。
通知单元17通知与由状态判定单元16判定出的对象空间的状态对应的信息、而且是针对用户的信息。另外,通知单元17也可以对用户持有的智能电话等便携终端通知该信息。作为该信息,如在实施例1及实施例2中后述那样,例如可以是在对象空间中没有人的意思(外出的意思),也可以是与判定出的犬种对应的按照每个季节的推荐控制内容,也可以是适当的空调方式,也可以是判定出的宠物的状态等。
[传感系统的动作]
接着,对如上述那样构成的传感系统1的动作进行说明。
图4是表示实施方式1的传感系统1的动作的一例的流程图。
首先,传感系统1取得对象空间的热图像(S10)。
接着,传感系统1基于在S10中取得的热图像,识别在该热图像中包含的对象空间内的对象物(S11)。
接着,传感系统1对该热图像附加表示S11中的识别结果的信息并向用户提示(S12)。
接着,传感系统1受理针对附加了在S12中提示的上述信息的该热图像的应答(S13)。
这样,通过将附加了识别结果的热图像向用户提示,用户能够确认识别结果,所以用户能够安心享受基于识别结果的动作。此外,在识别结果错误的情况下,作为应答,用户能够进行识别结果的修正指示,所以能够提高识别精度。此外,作为应答,用户不仅能够修正识别结果,还能够使传感系统学习热图像的哪个区域是对象物(即能够进行由用户实行的教育),所以能够进一步提高对于热图像的识别精度。
接着,对在经过图4所示的动作后传感系统1进行的动作进行说明。
图5是表示实施方式1的传感系统1的动作的一例的流程图。
首先,传感系统1取得对象空间的热图像(S20)。
接着,传感系统1基于在S20中取得的热图像,识别在该热图像中包含的对象空间内的对象物,并识别该对象物的位置(S21)。
接着,传感系统1基于该热图像,判定包含在S21中识别出的对象物的对象空间的状态(S22)。
接着,传感系统1根据在S22中判定的对象空间的状态,将信息通知给用户(S23)。
以下,使用实施例1及实施例2,对图5所示的传感系统1的动作的一例进行说明。
(实施例1:宠物空调机的空调或监护)
在实施例1中,对具备传感系统1的空调设备(宠物空调机)的动作的一例进行说明。
图6A及图6B是表示实施方式1的实施例1的热图像的一例的示意图。在图6A及图6B所示的热图像中,将温度分布简单化表示。
传感系统1在取得了图6A所示那样的热图像的情况下,根据图6A所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,判定对象物及其位置,能够判定为该对象物是人。同样,传感系统1在取得了图6B所示那样的热图像的情况下,根据图6B所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,判定对象物及其位置,能够判定为该对象物是猫。
1)外出模式、在家模式的通知
例如,传感系统1基于热图像,能够判定对象空间中是否有人。因此,传感系统1例如也可以在判定为在家等对象空间中没有人的情况下判定为外出,并通知该消息(是外出、外出模式的消息等)。另外,传感系统1也可以还与用户的智能电话等便携终端通信,利用便携终端的位置判定是外出。
另外,具备传感系统1的空调设备也可以根据判定出的模式(外出模式或在家模式)进行动作。
2)推荐的通知
例如,传感系统1能够基于热图像判定在对象空间中是否有人及动物。因此,传感系统1在判定为人及动物都处于对象空间中的情况下,也可以选择人和动物的哪一方优先,并通知这一事情(是在家模式这一事情等)。
另外,具备传感系统1的空调设备在判定为人及动物都处于对象空间中的情况下,也可以针对人和动物中选择为优先的一方进行空调机动作。此外,人和动物的哪一方为优先,既可以事前登记到传感系统1中,也可以例如预先登记为夏季以动物优先、冬季以人优先。
此外,具备传感系统1的空调设备也可以在能够基于热图像判定为对象物是狗、并能够进一步判定其犬种的情况下,按照每个季节提议(通知)与判定出的犬种对应的推荐控制内容。进而,具备传感系统1的空调设备也可以在能够基于热图像判定为对象物是狗、并且该狗正伸出舌头的情况下,判断出对象空间较热,进行使对象空间降温的方向的控制。即,具备传感系统1的空调设备也可以通过基于热图像判定狗等动物是否正伸出舌头,来变更空调控制。动物的舌头的形状只要预先由用户设定(登记)即可。另外,由于动物的舌头比其他(舌头以外的部位)高温,所以可以设定任意的阈值,将超过阈值的部位判断为舌头。
3)其他的推荐(recommend)的通知
另外,具备传感系统1的空调设备也可以基于热图像判定识别出的对象物是人,根据该人的状态(表面温度分布)判定该人是否容易中暑。在此情况下,作为对策,具备传感系统1的空调设备也可以通知应预先放置水等建议,如果该空调设备有合适的空调方式,可以也通知该方式。作为中暑的容易度的判定基准,也可以使用人的前额部的温度。例如,也可以在前额部的温度超过了规定的值的情况下判断为容易中暑的状态。另外,作为其他的判定基准,也可以基于人的鼻子的温度和此人的前额部的温度的温度差,在低于规定的温度差的情况下判断为容易中暑的状态。
4)通知宠物的状态
例如,传感系统1基于热图像,能够判定在对象空间中是否有宠物(动物)。因此,传感系统1在判定为在对象空间中有宠物的情况下,也可以再基于热图像判定宠物的状态,并作为日志保存。这里,所谓宠物的状态,例如是宠物的睡眠时间、宠物的起床时间、或根据这些推测的宠物的身体状况。对宠物的状态的判定也可以基于热图像来计算宠物的移动或运动的次数、姿势、体表温度等来进行。
并且,传感系统1也可以将处于对象空间中的宠物的状态向用户通知。
5)宠物的喂食
例如,传感系统1可以基于热图像判定在对象空间中是否有宠物(动物)。因此,传感系统1在判定为在对象空间中有宠物的情况下,也可以还基于热图像判定宠物的位置和宠物所用的喂食器的位置。在此情况下,传感系统1在宠物靠近喂食器的情况下,也可以通过向喂食器通知将喂食器的盖子打开的时间等,对宠物提供饲料。
另外,传感系统1也可以还根据判定出的宠物的位置推测(判定)宠物的活动量,通过通知调整喂食器的盖子的打开时间的信息来一并进行饲料量的调节。
6)用户登记
如上所述,在传感系统1中,为了使针对热图像的识别精度提高,向传感系统1预先进行关于对象物的信息的登记。
例如,作为关于对象物(宠物)的信息,既可以登记用户正在饲养宠物的情况,也可以登记宠物的种类(狗、猫、虫、金鱼)。此外,也可以登记宠物的体重、年龄,例如也可以登记宠物的饲料的种类。另外,在宠物的体重较大的情况下,难以将宠物及人区别判定。因此,传感系统1在登记的宠物的体重较大的情况下,也可以提示难以根据热图像判定宠物的意思的警告。
此外,在具备传感系统1的空调设备中,虽然也可以设为能够选择人在外出中的宠物空调模式,但也可以在人在家的情况下不能选择宠物空调模式或用户空调模式。
另外,在宠物是金鱼的情况下,不能根据热图像的热分布判定金鱼。因此,也可以用户指定传感系统1提示的热图像中的包含金鱼的水槽等的场所。在此情况下,具备传感系统1的空调设备进行空调,以使用户指定的场所(像素)的温度成为设定范围内。
7)监护地点登记
也可以通过指定具备传感系统1的空调设备提示的热图像中的点(场所)而进行空调,以使用户指定的地点(场所)的温度不要成为设定范围以上。作为用户指定的地点,例如可以考虑包含植物、金鱼、虫等的一定的区域。
8)图像登记
例如,也可以为了识别热图像中的宠物而登记宠物的图像。由此,能够根据宠物的图像以更高的精度来识别热图像中的宠物。进而,在传感系统1提示的热图像中,也可以通过用户指示表示宠物的区域来识别热图像中的宠物。
9)小便位置的登记
作为关于宠物的信息,也可以预先登记宠物的小便位置。在此情况下,如果在预先登记的位置以外的位置温度上升、然后因气化热而温度下降,则传感系统1也可以通知用户。
此外,传感系统1也可以在基于热图像在预先登记的位置以外的位置检测(判定)到小便的情况下,通知(指示)清扫机器人(清扫装置)等使清扫机器人等不运动。此外,传感系统1也可以在预先登记的位置以外的位置检测到宠物的小便的情况下,立即响起用户发怒的声音(例如“干嘛!!”等)或者鸣宠物认为不愉快的声音。
另外,传感系统1基于热图像,如果与宠物的热源不同的热源增加、并且该不同的热源不运动,则检测(判定)为宠物的小便。当然,传感系统1也可以将附加了识别结果的热图像发送给用户,通过用户的应答来进行是否是小便的最终判断。
(实施例2:家电使用状态检查)
接着,在实施例2中,对具备传感系统1的空调设备的动作的一例进行说明。
图7A~图7C是表示实施方式1的实施例2的热图像的一例的示意图。在图7A~图7C所示的热图像中,将温度分布简单化表示。
传感系统1在取得了图7A所示的热图像的情况下,根据图7A所示的热图像中的表示规定的温度变化的区域、该区域的形状和该区域的运动,判定对象物及其位置,可以判定该对象物是电话。同样,传感系统1在取得了图7B所示那样的热图像的情况下,根据图7B所示的热图像中的表示规定的温度变化范围的区域、该区域的形状和该区域的运动,判定对象物及其位置,可以判定为该对象物是空气净化机。此外,同样地,传感系统1在取得了图7C所示那样的热图像的情况下,根据图7C所示的热图像中的表示规定的温度变化范围的区域、该区域的形状和该区域的运动,判定对象物及其位置,可以为判定该对象物是电视机。
1)掌握对象空间的家电设备的位置和动作状态
传感系统1基于热图像识别对象空间中的对象物及其位置,能够判定该对象物的状态。
由于消耗电力的家电设备必定会发热,所以根据热图像中的温度变化及区域的形状等,能够判定出对象物是家电设备、并判定该家电设备的种类。由此,传感系统1例如在室内等对象空间中能够掌握驱动中的家电设备及其位置。
由此,传感系统1能够在用户忘记将家电设备关掉的情况下通知用户。即,传感系统1能够用于家电设备的忘记关掉的确认或防止。
此外,传感系统1也可以根据对象物(家电设备)的温度和尺寸推测各家电的耗电量。在此情况下,传感系统1能够对用户发送促进节能行动的通知。
另外,传感系统1也可以通过与云等通信来取得各家电设备的种类的耗电量的履历。在此情况下,能够精度更好地在对象空间中掌握驱动中的家电设备和其位置(家电MAP)。并且,如果能够得到家电MAP,则能够进行更高水平的家电设备协作(同室的空调机与加湿器、电风扇的协作等)。
2)显示图像的价值
此外,传感系统1也可以显示附加了家电设备的种类等判定结果的热图像。由此,不仅容易知道哪个家电设备是驱动中(发热中),用户还能够掌握哪个家电设备忘记关掉了。这里,在传感系统1对家外(在外)的用户通知该消息的情况下,用户能够从家外(外头)掌握哪个家电设备忘记关掉了。
此外,传感系统1能够根据热图像中的家电设备的温度和尺寸概算各家电设备的耗电量,所以也可以将该概算结果通知用户。由此,用户能够建立有效果的节能对策。
此外,传感系统1还能够基于热图像进行家电设备的异常发热部位(漏电痕迹(tracking)等的漏电部位)的判定,所以也可以将该判定结果通知用户。由此,用户能够掌握有异常发热部位的家电设备,能够进行针对异常发热的对策。
[实施方式1的效果]
以上,根据本实施方式,能够实现能够使识别精度提高的传感方法、传感系统及具备传感方法、传感系统的空调设备。
另外,在本实施方式的传感方法、传感系统及具备传感方法、传感系统的空调设备中,通过基于热图像识别人、再判定人的位置,能够掌握对象空间内的人能够移动的空间,所以能够掌握对象空间的布局。由此,能够按照掌握的对象空间的布局进行更适合的空调等,进行与所掌握的对象空间的布局对应的动作。
(实施方式2)
[传感系统的结构]
以下,参照附图对实施方式2的传感系统进行说明。
图8是表示实施方式2的传感系统1A的结构的一例的图。图9是表示实施方式2的计测单元15A的详细结构的一例的图。另外,对于与图1同样的要素赋予相同的标号,省略详细的说明。
图8所示的传感系统1A相对于实施方式1的传感系统1追加了通知判定单元19,并且最小结构单元10A和计测单元15A的结构不同。图8所示的最小结构单元10A的结构相对于图1所示的最小结构单元10在追加了湿度信息取得单元18这一点上不同。
湿度信息取得单元1取得对象空间的湿度信息。
通知判定单元19判定是否有作为应当通知用户的信息的通知信息。
状态判定单元16A基于热图像及湿度信息,判定包含由识别单元12识别出的对象物的对象空间的状态。另外,状态判定单元16A也可以如在实施例1及实施例2中后述,例如判定对象空间的可能会结露的地方,也可以判定对象空间中的热泄漏的场所,也可以判定用户的生活。所谓用户的生活,例如可以是室内晾晒衣物的位置及其干燥状态,也可以是用户的餐食内容。
通知单元17A在由通知判定单元19判断为有通知信息的情况下,将该通知信息通知用户。例如,通知单元17A也可以基于温度分布及湿度分布对用户通知生活改善提议信息,来作为通知信息。另外,生活改善提议信息如在实施例1及实施例2中后述那样,例如可以是对象空间中的可能会结露的地方,也可以是对象空间中的热泄漏的地方,也可以是结露场所或热泄漏场所的防止对策。此外,通知单元17A也可以将针对控制对象空间的空气环境的空调设备的控制命令等作为通知信息通知空调设备。
计测单元15A计测对象空间的温度分布,作为热图像输出。
在本实施方式中,计测单元15A例如如图9所示,具备热分布计测单元151和湿度信息计测单元152。
热分布计测单元151计测对象空间的温度分布,作为上述热图像输出。
湿度信息计测单元152计测对象空间的湿度,基于计测出的湿度和在由热图像取得单元11取得的热图像中表现的温度分布,计算对象空间的湿度分布。这里,对象空间的湿度信息可以是对象空间的湿度分布,也可以是对象空间的湿度。
[传感系统的动作]
接着,对如上述那样构成的传感系统1A的动作进行说明。
图10是表示实施方式2的传感系统1A的动作的一例的流程图。
首先,传感系统1A取得对象空间的热图像及湿度信息(S30)。
接着,传感系统1A基于在S30中取得的热图像,识别该热图像中包含的对象空间内的对象物并识别该对象物的位置(S31)。
接着,传感系统1A基于该热图像及该湿度信息,判定包含S31中识别出的对象物的对象空间的状态(S32)。
接着,传感系统1A判定是否有作为应当通知用户的信息的通知信息(S33)。
在S33中,在有作为应当通知用户的信息的通知信息的情况下(在S33中有通知信息),传感系统1A将在S33中判定出的通知信息通知用户(S34)。另外,另一方面,在S33中没有作为应当通知用户的信息的通知信息的情况下(在S33中没有通知信息),传感系统1A结束处理。
以下,使用实施例1及实施例2对图10所示的传感系统1A的动作的一例进行说明。
(实施例1:使用户看到室内的温度分布而敦促生活改善)
在实施例1中,对基于湿度信息和热图像中的温度分布通知的生活改善提议信息的例子进行说明。
图11是表示实施方式2的实施例1的热图像的一例的示意图。在图11所示的热图像中,将温度分布简单化表示。
传感系统1A在取得了图11所示的热图像的情况下,根据图11所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,判定对象物及其位置,能够判定为该对象物是人。此外,传感系统1A能够判定图11所示的热图像中的比较高的温度区域(图中高温区域)。
在此,传感系统1A也可以作为生活改善提议信息而对热图像叠加(附加)冬季可能会结露的场所,通知“注意霉菌”。由于湿度计和辐射温度计能够计算各场所的相对湿度,所以传感系统1A根据由计测单元15A测定的湿度信息和温度分布,能够判定可能会结露的场所。并且,例如传感系统1A也可以例如向用户通知在热图像内指示相对湿度接近100%的场所(90%)等的生活改善提议信息。
此外,具备传感系统1A的空调设备可以将在制冷时温度较高的场所(在制暖时温度较低的场所)判定为热泄漏的场所。在此情况下,传感系统1A也可以作为生活改善提议信息而对用户通知“热泄漏场所”或敦促隔热对策的消息。
此外,具备传感系统1A的空调设备也可以根据室外机的温度计和室内的墙壁温度计算各墙壁的隔热性等,判定房间(对象空间)的隔热性水平即隔热程度(与别人家的相对值)。在此情况下,传感系统1A作为生活改善提议信息而通知根据热图像中的形状或位置信息识别出的热泄漏场所。作为生活改善提议信息,也可以通知例如“热从窗户散逸了”、“请关上窗帘”或“推荐双层窗户”等。
另外,具备传感系统1A的空调设备可以在基于热图像能够判定为墙壁、地板相对于冬季的室温较冷的情况下进行强化制暖,如果在房间内的墙壁及地板较冷的地方有人,则也可以对该方向进行暖气送风。
这里,对作为生活改善提议信息而通知注意霉菌的情况下的例子进行说明。
图12A是表示实施方式2的实施例1的可视图像的一例的示意图。图12B是表示实施方式2的实施例1的热图像的一例的示意图。在图12B所示的热图像中,将温度分布简单化表示。
即,具备传感系统1A的空调设备能够根据设置在空调设备的室内机中的湿度传感器(湿度信息计测单元152)的湿度信息和图12B所示的热图像,判定墙壁、地板、窗边的面湿度分布,由此检测(判定)房间(对象空间)的结露而提请注意(通知)。在图12A及图12B所示的例子中,房间(对象空间)的左角即将结露。因此,具备传感系统1A的空调设备例如通知“房间(对象空间)的左角即将结露。要进行除湿吗?”等生活改善提议信息。
此外,具备传感系统1A的空调设备还可以将附加了识别结果的热图像向用户通知。由于用户能够确认对象空间的温度分布,所以用户容易接纳生活改善提议。例如,传感系统1A也可以在对象空间(室内)的窗边与其他部分的温度差太显著的情况下,通知警告因结露造成的发霉、推荐除湿、或推荐设置窗帘或双层窗户等的生活改善提议信息。
(实施例2:与生活状态匹配的动作的一例)
在实施例2中,作为具备传感系统1A的空调设备的动作的一例,对与生活状态匹配的动作的一例进行说明。另外,在实施例2中,对基于在实施例1中说明的温冷感推测的动作以外的例子进行说明。
具备传感系统1A的空调设备也可以根据热图像的温度分布判定用户的生活,匹配于所判定的生活来动作。
1)与室内晾晒衣物的位置及干燥状态匹配的空调
例如,传感系统1A也可以在判定室内晾晒衣物的位置及干燥状态的同时控制空调设备的除湿风。由此,传感系统1A能够实现将衣服干燥的功能。
2)与用户的就餐匹配的空调
例如,传感系统1A也可以根据热图像的温度分布等掌握(判定)餐食的内容,进行空调设备的控制。例如,如果餐食的内容是火锅料理,则传感系统1A可以控制空调设备的空调使制暖减弱。此外,在餐食的内容是烤肉、能够掌握(判定)冒烟的情况下,也可以通知清扫空调机机内的过滤器的清扫机器人(清扫装置)使其开启。
另外,传感系统1A在根据热图像的温度分布等判定用户是就餐中的情况下,也可以控制空调以使避开餐桌而送风等。
3)与电视视听过程中匹配的空调
传感系统1A由于能够根据热图像的温度分布等掌握用户是否正在视听电视,所以也可以在用户正在视听电视时控制空调设备的空调,以成为平缓的送风(使空调的声音变安静)。
另外,传感系统1A也可以还在能够取得用户正在视听的电视的节目内容的情况下,匹配于节目来控制空调设备的空调。
[实施方式2的效果]
以上,根据本实施方式,能够实现能够提高识别精度的传感方法、传感系统及具备它们的空调设备。
此外,根据本实施方式,能够实现能够基于温度分布及湿度信息进行空调控制的具备传感系统1A的空调设备。
(实施方式3)
[传感系统的结构]
以下,参照附图对实施方式3的传感系统进行说明。
图13是表示实施方式3的传感系统1B的结构的一例的图。另外,对于与图1及图8同样的要素赋予相同的标号,省略详细的说明。
图13所示的传感系统1B相对于实施方式1的传感系统1,追加了通知判定单元19B,并且状态判定单元16B及通知单元17B的结构不同。
状态判定单元16B基于热图像判定由识别单元12识别出的对象物的状态。另外,状态判定单元16B也可以如在实施例1及实施例2中后述,作为对象物的状态而例如判定(检测)在对象空间有可疑的人的状态,也可以判定(检测)在对象空间中有跌倒的人的状态,也可以判定人从处于对象空间中的床脱离等。
通知判定单元19B基于在状态判定单元16中判定的对象物的状态,判定是否有作为应当通知用户的信息的通知信息。
通知单元17B在通知判定单元19B中判断为有通知信息的情况下,将该通知信息通知用户。另外,通知单元17B也可以将附加了状态判定单元16的判定结果的热图像、或仅将判定结果、或仅将热图像作为通知信息通知给用户。此外,通知单元17B作为该通知信息,也可以如在实施例1及实施例2中后述,通知在对象空间中有可疑的人的消息、在对象空间中有跌倒的人的消息、人从处于对象空间中的床脱离等的消息。
[传感系统的动作]
接着,对如上述那样构成的传感系统1B的动作进行说明。
图14是表示实施方式3的传感系统1B的动作的一例的流程图。
首先,传感系统1B取得对象空间的热图像(S40)。
接着,传感系统1B基于在S40中取得的热图像,识别在该热图像中包含的对象空间内的对象物,并识别该对象物的位置(S41)。
接着,传感系统1B基于该热图像,判定在S41中识别出的对象物的状态(S42)。
接着,传感系统1B判定是否有作为应当通知用户的信息的通知信息(S43)。
在S43中,在有作为应当通知用户的信息的通知信息的情况下(在S43中有通知信息),传感系统1B将在S43中判定出的通知信息通知用户(S44)。另外,另一方面,在S43中,在没有作为应当通知用户的信息的通知信息的情况下(在S43中没有通知信息),传感系统1B结束处理。
以下,使用实施例1~实施例3,对图14所示的传感系统1B的动作的一例进行说明。
(实施例1:通过家庭安保进行监护)
在实施例1中,对传感系统1B检测可疑者并进行通知的动作的一例进行说明。
目前,作为家庭安保用传感器而主要使用焦电型的传感器。但是,焦电型的传感器误检测较多,存在为了确认而需要白白赶赴现场等课题。作为焦电型的传感器的误检测的原因,可以举出不能将宠物和人区别检测、例如检测到从外出地点进行的空调机操作所带来的温度变化等、检测到接收传真时的发热等等。
另一方面,在使用热图像传感器作为家庭安保用传感器的情况下,能够通过热图像中的形状、尺寸、运动的速度,来区别宠物及家电的发热与可疑的人并检测(判定)。即,根据热图像,能够确认室内等对象空间的状态。因而,如果利用传感系统1B,则能够使用热图像检测(判定)用户不在家时的入侵者。
并且,传感系统1B在使用热图像检测(判定)到用户不在家时的入侵者的情况下,能够对保安公司或保安人员(以下简称为“保安”)通知检测到可疑的人的消息。这里,传感系统1B也可以对保安通知附加了判断结果的热图像作为判断资料。在此情况下,保安通过确认热图像,能够判断是真的有入侵者、还是只是检测(判定)到用户饲养的宠物等(误识别)。
例如,传感系统1B在用户外出时检测(判定)到入侵者的情况下,也可以对用户通知检测到可疑的人的消息。这里,传感系统1B也可以对用户通知附加了判断结果的热图像作为判断资料。
另外,传感系统1B对用户或保安通知附加了判断结果的热图像,但并不限定于此。作为判断资料也可以是通知热图像。此外,作为传感系统1B判断人在不在的方法,并不限于使用热图像的情况。例如也可以按下外出模式按钮等而向传感系统1B登记,传感系统1B也可以使用用户的智能电话等便携终端的位置信息来判断。
(实施例2:通过倒下检测进行监护)
接着,在实施例2中,对传感系统1B进行倒下(跌倒等)检测的情况下的动作的一例进行说明。
1)灾害中的倒下检测
图15是表示实施方式3的实施例2的热图像的一例的示意图。在图15所示的热图像中,将温度分布简单化表示。
传感系统1B在取得了图15所示那样的热图像的情况下,能够根据图15所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,判定对象物及其位置。另外,在图15所示的热图像中,能够检测(判定)火和跌倒的人。
这样,传感系统1B也可以在检测(判定)出火和跌倒的人的情况下,向保安等通知灾害发生的消息和有需要救出的人的消息。
2)高龄者的倒下检测
图16A及图16B是表示实施方式3的实施例2的热图像的一例的示意图。在图16A及图16B所示的热图像中,将温度分布简单化表示。
传感系统1B在取得了图16A或图16B所示的热图像的情况下,能够根据图16A或图16B所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,判定对象物及其位置。另外,在图16A的热图像中,能够判定就寝中的人,在图16B所示的热图像中,能够判定起床中的人。
这样,传感系统1B能够判定例如高龄者的起床、从床的脱离等。在此情况下,传感系统1B也可以对家人或介护人员(介护住宅的情况下)也通知附加判定结果的热图像。由此,用户(介护人员、子女夫妇等)看到附加了判定结果的热图像,能够判断传感系统1B的判定结果是否为误检测,所以就用不着每当有通知就去现场确认高龄者的跌倒或徘徊。
另外,在传感系统1B中,也可以为了提高对于热图像的识别精度而例如在热图像中设定高龄者利用的床的区域范围等,进行关于对象物的信息的登记。
(变形例)
[传感系统的结构]
以下,参照附图对实施方式3的变形例的传感系统进行说明。
图17是表示实施方式3的变形例的传感系统1C的结构的一例的图。另外,对于与图1及图13同样的要素赋予相同的标号,省略详细的说明。
图17所示的传感系统1C的结构相对于实施方式1的传感系统1,在追加了空调控制单元20这一点上不同。
空调控制单元20基于由状态判定单元16判定的对象物的状态控制对象空间的空气环境。这里,空气环境包括对象空间的空气的温度、湿度、风速及风向的至少1个。
另外,传感系统1C也可以取得对象空间的湿度信息。在此情况下,空调控制单元20基于由状态判定单元16判定的对象物的状态及湿度信息,控制对象空间的空气环境。
[传感系统的动作]
接着,对如上述那样构成的传感系统1C的动作进行说明。
图18是表示实施方式3的变形例的传感系统1C的动作的一例的流程图。
首先,传感系统1C取得对象空间的热图像(S50)。
接着,传感系统1C基于在S50中取得的热图像,识别该热图像中包含的对象空间内的对象物,并识别该对象物的位置(S51)。另外,如在实施例3~实施例6中后述,对象物例如可以是对象空间中的热源或人,也可以是幼儿或高龄者,也可以是用户睡眠时的被子或睡衣,也可以是用户的部位(腿、头)。此外,如在实施例3~实施例6中后述,对象物例如也可以是洗涤物。
接着,传感系统1C基于该热图像判定在S51中识别的对象物的状态(S52)。另外,如在实施例3~实施例6中后述,对象物的状态例如可以是对象空间中的热源与人的距离,也可以是由人的体表面温度引起的中暑症状的危险性,也可以是用户睡眠时的是否踹了被子或睡衣穿着的状况,也可以是用户的就寝位置。此外,对象物的状态也可以是人的位置或动作,也可以是人的活动量,也可以是用户的穿衣量,也可以是洗涤物的干燥状态。
接着,传感系统1C基于由状态判定单元16判定出的对象物的状态,判定是否需要对象空间的空气环境的控制的变更(S53)。
在S53中,在需要变更对象空间的空气环境的控制的情况下(S53中的“是”),传感系统1C变更对象空间的空气环境的控制(S54)。另外,另一方面,在S53中不需要变更对象空间的空气环境的控制的情况下(S53中的“否”),传感系统1C结束处理。
以下,使用实施例3~实施例6,对图18所示的传感系统1C的动作的一例进行说明。
(实施例3:监护空调机)
在实施例3中,对具备传感系统1C的空调设备检测儿童或老年人、保护其不受中暑或烧伤(灼伤)的动作的一例进行说明。
图19是表示实施方式3的实施例3的热图像的一例的示意图。在图19所示的热图像中,将温度分布简单化表示。
传感系统1C在取得了图19所示的热图像的情况下,根据图19所示的热图像中的表示规定的温度范围的区域、该区域的形状和该区域的运动,能够判定对象物及其位置。另外,在图19所示的热图像中,能够检测(判定)热源和人(儿童)。
例如传感系统1C检测(判定)热源和人(儿童),在人(儿童)靠近了热源的情况下,也可以对人(儿童)进行表示警告的通知。这里,在对象空间(同室)中没有人(父母)的情况下,作为表示警告的通知,也可以使警报变强(使警报声变大)。这样,传感系统1C能够检测人(儿童)和热源,进行用于规避危险(防止烧伤)的动作。
另外,传感系统1C在检测到人(幼儿)或人(高龄者)的情况下,也可以还基于热图像判定人的体表面温度(对象物的状态)。由此,传感系统1C能够对人(幼儿)或人(高龄者)进行用于防止中暑的动作。
(实施例4:熟睡空调机)
在实施例4中,作为具备传感系统1C的空调设备(熟睡空调机)的动作的一例,对匹配于生活状态的动作的一例进行说明。
1)与睡眠时的踢被子、睡衣穿着状况匹配的空调
传感系统1C也可以在基于热图像进行例如睡眠时是否踹被子、睡衣穿着状况的判定的同时,控制空调设备的空调。例如,传感系统1C在用户睡眠时判定为被子未盖好(被踹了)的情况下,也可以进行控制以使空调设备的空调加强制暖。
2)与体表面温度和就寝位置(脚、腿、头)匹配的空调
此外,传感系统1C也可以在基于热图像进行用户的体表面温度和就寝位置(脚、腿、头)的判定的同时,控制空调设备的空调。例如,传感系统1C也可以基于用户的就寝位置(脚、腿、头)的判定结果,避开用户的头部而控制空调设备的送风,也可以基于用户的体表面温度的判定结果控制空调设备的空调,以使用户的体温不会过度下降(防止空调病)。
3)与手势匹配的空调
此外,传感系统1C由于通过使用热图像的温度分布,即使在黑暗处也能够检测(判定)人的位置及人的状态、动作,所以也可以匹配于检测到的结果控制空调设备的空调。例如,传感系统1C也可以判定黑暗的卧室(对象空间)的用户的手势,基于该判定结果控制空调设备的空调。即,传感系统1C通过使用热图像的温度分布,也可以作为能够用用户的手势控制的黑暗处遥控器而发挥功能。
这样,传感系统1C根据室内温度分布检测用户的生活,由此能够匹配于生活状态进行空调设备的控制。
另外,传感系统1C也可以通过使用热图像的温度分布,判定用户就寝时的翻身或体表温度,基于这些履历控制空调设备的空调。此外,传感系统1C也可以基于上述履历,向用户通知“本周是排毒期。请避免刺激物并重视皮肤保养。”等用于美容、健康的建议。
(实施例5:与人的状态匹配的空调机)
在实施例5中,作为具备传感系统1C的空调设备的动作的一例,对与人的状态匹配的动作的一例进行说明。另外,在实施例5中,对基于在实施例1中说明的温冷感推测的动作以外的例子进行说明。
1)与热源匹配的空调
如果作为用户的状态而判定用户处于热源的附近,则传感系统1C也可以根据该判定结果控制空调设备的空调。例如,传感系统1C在判定用户处于熨衣中或烹调中等用户处于热源的附近的情况下,也可以进行空调设备的控制以成为加强制冷(抑制制暖)。
2)与个人匹配的空调
传感系统1C也可以作为人的状态而判定用户个人的喜好,根据该判定结果控制空调设备的空调。例如,传感系统1C也可以在判定为将空调设备的室温设定偏高的人物A处于对象空间的情况下,进行空调设备的控制以成为加强制暖,也可以识别用户个人,进行空调设备的控制以将喜好的室温再现。
3)与活动量对应的空调
此外,如果作为用户的状态而判定用户的活动量,则传感系统1C也可以根据该判定结果控制空调设备的空调。
4)与处于对象空间中的体温不同的人匹配的空调
此外,传感系统1C在作为用户的状态而判定为在对象空间中有体温不同的人的情况下,也可以根据该判定结果控制空调设备的空调。例如,传感系统1C在判定为在对象空间中有体温不同的人的情况下,也可以进行空调设备的控制以朝向体温较低的人进行暖气送风。进而,传感系统1C也可以根据体温不同的人的体表温度判定是怕热、怕冷或畏寒性,根据判定结果控制空调设备的空调,以使这些人感到舒适。
5)与穿衣量匹配的空调
此外,传感系统1C也可以作为用户的状态而判定用户的穿衣量,根据该判定结果控制空调设备的空调。例如,传感系统1C在基于室温和用户的温度分布,判定出用户的衣着是一件内衣或衬衫的情况下,也可以将空调设备的空调控制为加强制暖或加强制冷等以使用户感到舒适。另外,用户的穿衣量也可以根据用户表面的温度分布来计算。一般而言,穿衣量越多则衣着表面的温度越接近于室温,所以能够根据衣着表面温度与室温、体温各自的温度差来计算穿衣量。
(实施例6:干燥状态检验器)
此外,传感系统1C也可以确认(判定)在对象空间中晾干的洗涤物的干燥状态,通知干燥结束。洗涤后的洗涤物由于表面的气化热被带走,所以比室温低5℃左右(也取决于湿度、风速),并具有随着洗涤物的干燥进展而与室温的差消失的关系。因此,传感系统1C能够基于热图像判定干燥状态,能够通知干燥结束。此外,传感系统1C由于能够区分洗涤物的干燥较快的部分和较慢的部分,所以也可以将风向朝向干燥较慢的部分(裤子或衬衫的下摆、口袋等)调节。
[实施方式3的效果等]
以上,根据本实施方式,能够实现能够提高识别精度的传感方法、传感系统及具备它们的空调设备。
此外,根据本实施方式,能够实现具备能够基于温度分布进行空调控制的传感系统1B的空调设备。
(实施方式4)
[传感系统的结构]
以下,参照附图对实施方式4的传感系统进行说明。
图20是表示实施方式4的传感系统1D的结构的一例的图。图21是表示实施方式4的识别单元12D的详细结构的一例的图。另外,对于与图1及图8等同样的要素赋予相同的标号,省略详细的说明。
图20所示的传感系统1D相对于实施方式1的传感系统1,没有状态判定单元16,追加了通知判定单元19D及分析单元21,并且识别单元12D和通知单元17D的结构不同。
识别单元12D基于热图像取得单元11取得的热图像,识别该热图像中包含的对象空间内的对象物。在本实施方式中,识别单元12D例如如图21所示,具备热分布判定单元121和对象物判定单元122。热分布判定单元121及对象物判定单元122如在实施方式1中说明,所以省略这里的说明。
分析单元21基于热图像取得单元11取得的热图像,分析由识别单元12D识别出的对象物的状态。另外,分析单元21如在实施例1~实施例3中后述那样,例如也可以分析用户的每日的睡眠状态,也可以分析用户的体脂,也可以分析用户该日的身体状况和用户的服装是否适合于室外气温。此外,分析单元21如在实施例4及实施例5中后述那样,也可以通过分析用户的脸部的温度分布进行用户的脸部的干燥、斑点或松弛的确认,分析用户的畏寒性类型。
通知判定单元19D基于分析单元21的分析结果,判定是否有作为应当通知用户的信息的通知信息。
通知单元17D在由通知判定单元19D判断为有通知信息的情况下,将该通知信息通知给用户。另外,通知单元17D例如也可以作为通知信息而通知分析单元21的分析结果,也可以通知所取得的热图像,也可以通知附加了分析结果的热图像。此外,通知单元17D也可以作为针对用户的通知信息而通知生活改善提议信息。这里,生活改善提议信息如后述,例如也可以推荐脸颊肌肉锻炼或进行熟睡环境的提议。
[传感系统的动作]
接着,对如上述那样构成的传感系统1D的动作进行说明。
图22是表示实施方式4的传感系统1D的动作的一例的流程图。
首先,传感系统1D取得对象空间的热图像(S60)。
接着,传感系统1D基于在S60中取得的热图像,识别该热图像中包含的对象空间内的对象物(S61)。
接着,传感系统1D基于该热图像,分析在S61中识别出的对象物(S62)。
接着,传感系统1D基于分析单元21的分析结果,判定是否有作为应当通知用户的信息的通知信息(S63)。
在S63中,在有作为应当通知用户的信息的通知信息的情况下(在S63中有通知信息),传感系统1D将在S63中判定出的通知信息通知给用户(S64)。另外,另一方面,在S63中没有作为应当通知用户的信息的通知信息的情况下(在S63中没有通知信息),传感系统1D将处理结束。
以下,使用实施例1~实施例5,对图22所示的传感系统1D的动作的一例进行说明。
(实施例1:健康空调机)
在实施例1中,对具备传感系统1D的空调设备(健康空调机)的动作的一例进行说明。
例如,具备传感系统1D的空调设备(健康空调机)也可以计测(分析)用户的每日的睡眠状态,并通知生活改善提议信息。
这里,作为能够基于热图像计测(分析)的项目(睡眠状态)包括:1)睡眠时间;2)睡眠深度(快速眼动/无快速眼动);3)睡眠时体温变动;4)翻身次数、频率及时间带;5)被子未盖好(是否踹被子);6)基础体温等。
传感系统1D例如可以通过通知将每日的睡眠状态(能够计测的项目的履历)可视化的标志,对用户通知生活改善提议信息。传感系统1D作为生活改善提议信息,例如也可以通知“本周是皮肤干燥期。请避免长时间泡澡,使房间的湿度高一些。”等。另外,由于确认了伴随着睡眠节奏的体温变动,所以也可以通知基于体温变动或身体运动等能够用热图像取得的生物体信息的、熟睡环境的提议(生活改善提议信息)。
(实施例2:体脂测量)
在实施例2中,对传感系统1D使用热图像进行用户的体脂测量的情况下的动作的一例进行说明。
图23是表示实施方式4的实施例2的热图像的一例的示意图。在图23所示的热图像中,将温度分布简单化表示。
传感系统1D取得图23所示的热图像,在判定了该对象物是人的情况下,还可以通过分析此人的温度分布来测定(分析)此人的体脂。由于脂肪不易传热,所以可以基于体表面的温度(裸)计测全身的脂肪厚度分布。例如在此人的热图像中,脂肪较厚的部分温度较低,脂肪较薄的部分温度较高。因此,传感系统1D通过通知叠加(附加)了各部位的推测脂肪厚度的热图像,能够激起用户减肥的危机感,对用户敦促生活改善(改善生活习惯)。
(实施例3:外出前检查)
在实施例3中,对传感系统1D使用热图像进行用户的外出前检查的情况下的动作的一例进行说明。
图24是表示实施方式4的实施例3的热图像的一例的示意图。在图23所示的热图像中,将温度分布简单化表示。
传感系统1D取得图24所示的热图像,在判定该对象物是人(用户)的情况下,还分析人(用户)的温度分布。由此,传感系统1D能够确认(分析)用户此日的身体状况和用户的服装是否适合于室外气温,能够将确认结果通知用户。例如,室外气温只要从能够与传感系统1D通信的云等取得即可,用户的体温可以根据热图像中的脸部温度来推测(分析)。此外,用户的穿衣量可以通过根据衣着表面温度计算穿衣量(隔热性)来得到。
此外,传感系统1D作为确认结果,例如也可以通知“今日的规定的地域是晴,气温最低6℃、最高14℃。您现在的穿衣量是1.2clo(clo为穿衣量的单位)。最好多加一件出门”,也可以通知“体温是37.1℃。有点感冒所以请注意。”等。
(实施例4:脸部检查及美容建议)
在实施例4中,对传感系统1D使用热图像进行用户的脸部检查及美容建议的情况下的动作的一例进行说明。
图25是表示实施方式4的实施例4的热图像的一例的示意图。在图25所示的热图像中,将温度分布简单化表示。在本实施例中,传感系统1D的计测单元15通过以距用户1m左右的距离计测用户的热分布,能够精度良好地分析用户的脸部的温度分布。
传感系统1D取得图25所示那样的热图像,在判定该对象物是人(用户)的脸部的情况下,还分析用户的脸部的温度分布。由此,传感系统1D能够进行用户的脸部的干燥、斑点或松弛的确认,能够将确认结果通知用户。例如,传感系统1D在基于用户的脸部的热图像分析出脸部是低温的情况下,认为血液流量下降,通知会带来脸部干燥、斑点或松弛。
此外,例如传感系统1D在基于用户的脸部的热图像分析出脸颊温度较低的情况下,也可以作为确认结果而通知生活改善提议信息。作为生活改善提议信息,例如也可以进行“推荐脸颊肌肉锻炼。”的通知、或通知“斑点、松弛的危险度”。此外,传感系统1D也可以将关于脸颊肌肉锻炼的信息作为生活改善提议信息通知。进而,传感系统1D也可以再次基于用户的脸部的热图像分析用户的脸部的温度分布,在脸部整体成为最优温度(34℃)的情况下通知该消息。
这样,用户能够确认附加了由传感系统1D通知的确认结果的热图像。由此,用户能够通过自己的眼睛判断锻炼不足的部位,或一目了然地判断由温感面霜、化妆品或美容器带来的促进血液循环的效果,或选择适合自己的商品。
(实施例5:畏寒性类型区分诊断)
在实施例5中,对传感系统1D使用用户的热图像诊断(分析)用户的畏寒性类型的情况下的动作的一例进行说明。在本实施例中,传感系统1D的计测单元15通过以距用户2m左右的距离计测用户的热分布,能够诊断(分析)用户的畏寒性类型。并且,传感系统1D也可以将该诊断结果附加到用户的热图像中并通知给用户。
这里,作为诊断结果,例如是“你是内脏温度低下型畏寒性(隠畏寒性)。请保暖腹部,食用生姜等,提高内部发热。”、或“你是末梢血管收缩型畏寒性。推荐进行手脚的温水冷水刺激或按摩。”等。
这样,用户能够确认附加了由传感系统1D通知的诊断结果的热图像。由此,用户容易知道寒冷的部位,而且能够理解诊断结果。
另外,通过利用传感系统1D,能够对按摩前后的用户的热图像等进行比较,所以还能够确认由按摩带来的畏寒性的改善效果。
此外,通过利用传感系统1D,能够基于用户的热图像,由用户自身或应用等诊断用户的身体的寒冷状况等。
[实施方式4的效果等]
以上,根据本实施方式,能够实现能够提高识别精度的传感方法、传感系统及具备传感方法、传感系统的空调设备。
另外,实施方式4的传感系统并不限于图20所示的情况。以下,参照附图对实施方式4的传感系统的其他的结构进行说明。
图26是表示实施方式4的传感系统1E的结构的一例的图。另外,对于与图1、图8及图20同样的要素赋予相同的标号,省略详细的说明。
图26所示的传感系统1E相对于图20所示的传感系统1D,追加了湿度信息取得单元18,并且计测单元15A、分析单元21E、通知判定单元19E和通知单元17E的结构不同。
湿度信息取得单元18取得对象空间的湿度信息。
分析单元21E基于热图像取得单元11取得的热图像和湿度信息取得单元18取得的湿度信息,分析由识别单元12D识别出的对象物的状态。
通知判定单元19E基于分析单元21E的分析结果,判定是否有作为应当通知用户的信息的通知信息。
通知单元17E在由通知判定单元19E判断为有通知信息的情况下,将该通知信息通知用户。
(实施方式5:追加的实施方式)
在本实施方式中,关于由热图像传感器得到的热图像的图像处理方法进行说明。
(得到本发明的一技术方案的经过)
近年来,以取得2维热图像(温度分布)为目的,研究了具备红外线传感器的空调机等的空气调节装置,并且,使用红外线传感器(以下称作热图像传感器)检测人体或发热设备的位置并使其反映到空调控制中的空气调节装置已商品化。
此外,如专利文献2所示,关于通过将拍摄到的热图像向用户提示而向用户自身提示体感温度及地面温度信息的空气调节装置也进行了提案。
但是,在如上所述取得热图像、检测室内人体和/或发热设备的位置并反映到空气控制中的空气调节装置中,存在不能从设置有热图像传感器的房间(家)之外确认由热图像传感器取得的热图像的课题。
所以,在本实施方式中,目的是解决上述以往的课题,提供一种能够从外部确认由红外线传感器取得的热图像的手段。
(作为有关本实施方式的热图像处理方法的基础的认识)
如上所述,研究了例如将由空气调节装置(空调机)取得的热图像向用户提示的服务等。另一方面,近年来,为了实现室内温度的舒适控制,搭载在空调机中的热图像传感器取得的热图像的分辨率提高。也可以考虑通过高分辨率化,能够通过取得的热图像清晰地表现物体及人的轮廓而掌握个人的特征。
由此,当讨论能够将在家中取得的热图像在家外显示的服务、或将所取得的热图像向拥有者以外的第三方提供等的系统(业务)时,虽说是热图像,但也存在对隐私的保护不够的问题。
为了解决以上的问题,本热图像处理方法是具备图像取得单元、隐私区域判定单元和修正图像生成单元的热图像处理装置中的热图像处理方法,其特征在于,上述图像取得单元取得热图像,上述隐私区域判定单元将与上述热图像的特定的温度域对应的像素判定为隐私区域,上述修正图像生成单元修正与上述隐私区域对应的像素。
由此,能够仅对图像中的隐私保护的必要性较高的部位修正图像。由此,能够生成加强了对隐私的保护的图像而不减少在利用热图像的服务及收集到的热图像的解析中需要的信息。
此外,上述特定的温度域也可以是25℃以上40℃以下。
由此,能够将更合适的区域(人体温度)作为修正对象的区域。
此外,上述特定的温度域中的下限温度的值也可以是根据环境温度而变化的值。
由此,能够将考虑了周围的温度的更适当的温度区域作为修正对象的区域。
此外,上述图像取得单元也可以包括将所取得的热图像存储的热图像存储机构;上述隐私区域判定单元将上述热图像存储机构存储的计测时刻不同的多个热图像进行比较,将符合上述特定的温度域的像素、而且是在不同的多个热图像中温度差较大的像素的温度信息判定为隐私区域。
由此,能够将设备(家电等)等人体以外的、不需要修正的部位从隐私区域排除。由此能够进行更合适的隐私区域的设定。
此外,上述图像取得单元也可以包括将关于所取得的热图像的信息存储的热图像存储机构;上述隐私区域判定单元将作为上述热图像的特定的温度域、而且是热图像中的人体的一部分的区域判定为隐私区域;上述热画存储手段将关于上述热图像中的人体的一部分的区域中的温度分布的信息存储。
此外,上述隐私区域判定单元也可以包括脸部图像识别机构;上述脸部图像识别机构在所取得的热图像中识别人脸部的区域,将识别出的脸部的区域作为上述人体的一部分的区域。
此外,修正图像生成单元将上述隐私区域判定单元也可以判定为隐私区域的人体的一部分的区域的形状变更为其他形状,也可以将关于上述温度分布的信息叠加到上述变更后的形状的一部分上。
通过这些,能够提供使用热图像的服务且不丢失本来需要的温度分布等的信息,生成加强了隐私的保护的图像。
此外,上述热图像处理装置还可以具备模式判定机构;上述模式判定机构从所取得的热图像中取得人的位置,并基于所取得的人的位置与拍摄图像取得单元取得的热图像的热图像传感器之间的距离,至少由上述隐私区域判定单元、修正图像生成单元变更要执行的处理模式。
由此,能够不会强迫使用者进行模式选择,而进行与使用场景匹配的最合适的图像生成。
这样,有关本实施方式的热图像处理方法的特征还在于,取得热图像,将热图像的符合特定的温度域的像素修正。
此外,有关本实施方式的另一热图像处理方法的特征还在于,识别人体的一部分,将识别出的人体的一部分的形状改变,将温度分布信息叠加到上述变更后的形状的上述人体的一部分上。
根据本实施方式的热图像处理方法,能够将由热图像传感器取得的热图像向处于室外(屋外)的用户自身或第三方提示,在图像流出的情况下也能够实现隐私保护。
以下,参照附图对本实施方式进行说明。
此外,有时对相同的构成要素赋予相同的标号,并省略说明。
另外,以下说明的实施方式都是表示概括或具体的例子。在以下的实施方式中表示的数值、形状、材料、构成要素、构成要素的配置位置及连接形态、步骤、步骤的顺序等是一例,而不是对本实施方式的限定。此外,关于以下的实施方式的构成要素中的、在表示最上位概念的独立技术方案中没有记载的构成要素,作为任意的构成要素进行说明。
另外,以下所示的实施方式只不过是一例,并不限定本系统。此外,也可以将各个实施方式组合而构成本系统。
(实施方式5)
在图28中表示包括热图像显示装置和热图像传感器的系统的一例。
热图像传感器201至少具备信号发送机构,热图像显示装置204至少具备信号接收机构,并构成为经由网络202将热图像的图像数据从热图像传感器201向热图像显示装置204发送的结构。
这里,热图像传感器201也可以是由热电偶或测辐射热计等的红外线传感器构成的温度分布计测机构。此外,热图像传感器201也可以是如上所述向空调机搭载的结构,但并不限定于此。
热图像显示装置204也可以是有机EL等的自发光型的显示器,也可以是具备背灯和液晶等空间调制元件的显示器。热图像显示装置204可以考虑是例如使用热图像传感器201的用户拥有的智能电话或平板电脑等。此外,也可以是使用热图像传感器201的用户以外的用户(或从业者)能够确认的显示器等。
此外,热图像传感器201、装备在热图像显示装置204中的信号收发机构也可以是使用Wi-Fi(注册商标)或Bluetooth(注册商标)、LTE等的通信方式的收发机构。
通过图28的结构,能够对处于从设置有热图像传感器的场所离开的场所的用户或第三方提示热图像。
此外,在如图28那样经由网络202对热图像显示装置204发送热图像的图像数据的系统中,热图像显示装置204或热图像传感器201的某一方或两者具备图27那样的热图像处理单元300。
此外,在网络202中也可以连接服务器203。服务器203也可以具备热图像处理单元300。由此,在服务器203中能够保管由热图像传感器201取得的热图像。此外,在服务器203中,还能够将由热图像传感器201取得的热图像通过图像处理来修正。
在进行上述图像处理的情况下,也可以在热图像传感器201或热图像显示装置204自身中具备保存热图像的存储器及/或进行图像处理的信号处理单元,但通过使用连接在网络202上的服务器203,能够使用更小型且便宜的热图像传感器201及/或热图像显示装置204。
如图27所示,热图像处理单元300具备图像取得单元301、隐私区域判定单元302、修正图像生成单元303。
在上面也说明了,热图像处理单元300具备的一部分或全部的结构可以包含在热图像传感器201内,也可以包含在热图像显示装置204中。此外,当服务器203连接在网络202中时,热图像处理单元300具备的一部分或全部的结构也可以包含在服务器203中。以下对热图像处理单元300的各结构的处理进行说明。
图像取得单元301从热图像传感器201取得热图像。这里,图像取得单元301也可以包含作为将所取得的热图像存储的热图像存储机构(存储器)的功能。
隐私区域判定单元302判定图像取得单元301所取得(存储)的热图像中的隐私区域(像素)。关于隐私区域的判定方法后述。
修正图像生成单元303将由隐私区域判定单元302判定出的隐私区域(像素)的温度信息修正。或者,修正图像生成单元303也可以不显示由隐私区域判定单元302判定出的隐私区域(像素)。由此,修正图像生成单元303将所取得的热图像修正为隐私性较低的热图像。
将由修正图像生成单元303生成的隐私性较低的图像向热图像显示装置204发送并显示。
如上所述,在本系统中,通过具备热图像处理单元300,能够将由热图像传感器201拍摄的对于用户而言不想被他人看到的图像修正为即使被他人看到也不用担心的图像。由此,例如当运营服务器203的运营商以研究等目的向第三方(公司、个人)提供时,能够将所取得的热图像作为隐私性较低的图像提供,所以能够使隐私得到保护。此外,还能够期待将拥有终端204的个人所取得的热图像运用到应用中,例如与处于远离的场所的家人或他人共享、或在因特网上公开等。
作为向第三方提供热图像的用途,可以考虑例如在高龄者的自家中设置热图像传感器,将所取得的热图像向远离的家人、医院、介护施设的职员提供,来监护高龄者的生存的用途等。在该用途中,使用可视摄像机会不利于保护高龄者的隐私。由此,虽然通过使用热图像传感器会增多对此不太在意的高龄者,但通过具备图28所示的热图像处理单元300,能够进一步加强对高龄者的隐私的保护。即,与没有实施修正处理的情况下的热图像比较,能够使高龄者在隐私进一步得到保护的情况下得到监护。
此外,因洗澡间或厕所等温度差较大的环境中的热冲击(心肌梗塞、脑梗塞等)造成的跌倒等不限于高龄者有监护的需要,洗澡间及厕所还都存在较大的因设置图像传感器带来的隐私保护的课题。对此,根据具备本实施方式所示的热图像处理单元的系统,由于能够在保护洗澡间、厕所的用户的隐私的同时进行监护,所以是优选的。
以下,对热图像处理单元300的动作和由热图像处理单元300进行的图像的修正的方式更详细地说明。
图29是表示热图像处理单元300内的处理的一例的流程图。
在图29的例子中,首先由图像取得单元301取得热图像数据(S70)。
接着,隐私区域判定单元302从由图像取得单元301取入的热图像的数据中提取25℃至40℃的范围的像素(S71)。并且,隐私区域判定单元302将符合的像素判定为“模糊范围”(S73)。
接着,修正图像生成单元303对该像素赋予与本来的温度分布不同的温度分布的信息等,生成模糊图像(S74)。这里,例如通过对判定为模糊范围的区域的像素进行与相邻像素的平均化处理而生成模糊图像。
接着,修正图像生成单元303与原来的热图像的“模糊范围”以外的像素合成,生成修正图像(S75)。修正图像生成单元303输出生成的修正图像(S76)。将输出的修正图像发送到热图像显示装置204。
这里使用的由隐私区域判定单元302进行的隐私区域判定方法是“温度进入25℃至40℃的范围”。该温度是依据于普通的人体温度。人体不论周围的气温如何都总是保持一定的温度。由此,通过使用将体温附近的温度的像素作为隐私区域的判断条件,能够稳定地将人体模糊化。通过将人体的形态、具有与个人特点有关系的信息的“人体”的区域不进行原样显示,能够保护隐私。
另外,将隐私区域的下限温度设为25℃、上限温度设为40℃,但并不一定是该温度区域。例如关于下限温度,也可以是比该场所的温度(以下称作环境温度)高2℃以上的温度。由此,即使是高温环境下,也能够更多地保留人体区域以外的区域的信息。即,能够减轻用于隐私保护的信息减少。在此情况下,可以是具备计测热图像传感器设置场所的温度的机构。
此外,如果设环境温度为T℃,则也可以将下限温度设为{(36+X×T)÷(1+X)}℃。即,将36℃(设想体温)与环境温度之间的温度设为下限温度。例如,如果设X=1,则36℃和环境温度的平均温度为下限温度。通过将体温与环境温度之间的温度设为边界温度,不论是高温环境下还是低温环境下,都能够减轻因隐私保护带来的信息减少。
此外,在上述中,也可以在高温环境下和低温环境下改变X的值。优选的是越是高温环境下使X越小。与低温环境下相比,在高温环境下用户的穿衣量较小的情况较多,穿衣量越小,衣着表面温度越是相比环境温度更接近体温,所以通过越是高温环境下使X越小,能够设定最优的下限温度。
无论在高温环境下还是低温环境下,都抑制用于隐私保护的信息减少,并与此同时将穿衣部位稳定地判断为隐私区域,还能够提高隐私保护的稳定性。
此外,也可以将下限的温度较高地设定为33℃。由此,能够将穿衣部分从隐私区域省去,将人的皮肤露出的部分(像素)作为隐私区域。对于只要不是裸露显示就可以的用户而言,能够兼顾最低限度的隐私保护和最小限度的信息减少。
以上,设定了几个下限温度,并提出了隐私区域判定方法,但也可以不是仅将通过上述方法判定出的像素作为隐私区域,而是还包含周边的像素而设定隐私区域。例如,也可以将符合从下限温度到上限温度的范围的像素的相邻的像素也作为隐私区域。通过设定更大范围的隐私区域,能够成为能够稳定地进行隐私保护的热图像。同样,也可以将符合从下限温度到上限温度的范围的像素的两个相邻的像素、3个相邻的像素也作为隐私区域。
此外,在图29的例子中,采用将隐私区域“模糊化”的手段生成修正图像,但也可以使用其他手段进行修正。例如,也可以将隐私区域整体进行“涂黑”“涂白”“斜线”“水珠图案”等,设为“不显示”(不显示温度信息)。此外,也可以进行“一定的温度”(例如全部修正为30℃)等的修正。
此外,例如也可以使用随机地选择相邻的4个像素的某个像素的温度并显示该温度等,使用所谓的马赛克处理。
使用附图表示通过以上的热图像处理得到的修正图像的例子。
例如在取得了图31所示那样的热图像的情况下,如果使用将25℃至40℃的区域还有相邻的像素都设定为隐私区域、用斜线涂满的热图像处理,则得到图32那样的修正图像。
此外,在设隐私区域的下限温度为33℃的情况下,如图33所示,得到仅将人体的皮肤露出的区域用斜线涂满那样的图像。
此外,人体的皮肤的温度也根据环境温度而有一些温度变动,所以更优选基于环境温度推测体表温度而设定下限温度。
图30示出了有关在热图像处理单元300内的处理的一个例子的流程图。在图30中,对于与图29同样的步骤赋予相同的标号,并省略具体的说明。
此外,如图30所示,也可以将隐私区域判定条件设为“温度进入25℃至40℃的范围”和“相比前帧的温度变化为1℃以上的像素”的两个条件双方成立。以下说明“相比前帧的温度变化是1℃以上的像素”的判定方法。
这里,图像取得单元301包括作为将所取得的热图像存储的热图像存储机构(未图示)的功能。隐私区域判定单元302将存储在热图像存储机构中的计测时刻不同的多个热图像比较,确定温度差较大的像素。更具体地讲,将当前帧与前帧(取得时刻比当前帧靠前一个的帧)做比较。并且,隐私区域判定单元302将“温度进入25℃至40℃的范围”和“相比前帧的温度变化为1℃以上的像素”的两个条件双方成立的像素决定为隐私区域(S72)。
由此,通过追加根据物体相比前帧移动、结果相同像素的温度变化1℃以上来检测的条件,如图34所示,能够不将作为人体以外的发热体的家电等判定为隐私区域,而仅将人体的像素作为隐私区域。
这里,使比较对象为前帧,但也可以是与数帧前的图像比较,也可以是与从数帧前到再数帧前的各帧的像素的平均值比较。
此外,也可以将除了运动的物体以外的背景图像保存到图像存储器中,通过背景差分法检测运动体,仅将运动体的区域设为隐私区域。更准确地讲,能够仅将运动体设为隐私区域。
此外,也可以将包含由上述方法判定的隐私区域的最小尺寸的矩形区域设为隐私区域。由此,如图35所示,用户的姿势及体型等的信息也不能读取,能够进行更大范围的防止信息泄漏的隐私保护。
以上,介绍了如图29、图30所示的流程那样、判定隐私区域并变更隐私区域(像素)的温度信息、或进行使温度信息不显示的修正的例子。
接着,表示图36的流程图中表示的再其他的热图像处理方法。在图36中,对与图29同样的步骤赋予相同的标号,并省略具体的说明。
在图36所示的例子中,首先,隐私区域判定单元302从由热图像传感器201取得的热图像中检测人体的一部分(这里是人的脸部)(S81)。并且,图像取得单元301(热图像存储机构)将隐私区域判定单元302判定出的人的脸部的温度分布(以后,记作实际脸部温度分布)存储(S82)。这里,图像取得单元301(热图像存储机构)也可以将人的脸部以外的区域的温度分布也包含而存储。
并且,修正图像生成单元303将实际脸部温度分布对图37所示的脸部示意图叠加(S83)。将叠加了实际脸部温度分布的脸部示意图盖写到原来的热图像的脸部的位置上,作为修正图像(S84)。
这里,隐私区域判定单元302判定人的脸部的区域的方法没有特别限定。也可以是隐私区域判定单元包含脸部图像识别机构,将热图像中的满足表示脸部的特征的规定条件的区域识别为脸部的区域。这里,所谓表示脸部的特征的规定的条件,例如是脸部形状中的规定的温度条件,或关于规定的形状的条件等。例如在脸部中,呈现鼻子的温度比其他脸部区域的温度低、前额的温度较高等热图像中的特征。脸部图像识别机构利用这些特征确定脸部的位置。
通过图36的流程图那样的热图像处理,例如图38所示的热图像成为图39所示的修正图像。
通过这样的热图像处理,可以例如虽然传递脸部的温度分布,但并不知道是谁的图像。
例如,在将由热图像传感器拍摄用户自身的热图像向处于远离的场所的皮肤科的医生等提出,并就是否脸部温度下降、成为容易发生斑点或皱纹的状态等进行交谈,并获得改善脸部温度的脸部锻炼或推荐就餐菜单等的建议的情况下,用户能够在隐藏自己自身的脸部形状的同时仅传递温度分布。
即,能够实现隐私保护和传递自身的脸部温度分布信息的兼顾。
此外,作为其他用途,例如有使用用户的全身裸露的热图像的“畏寒性类型诊断”等。在畏寒性中有几种类型,按照类型不同而对策也不同,所以通过基于全身的温度分布来承蒙判定畏寒性类型,能够获得更有效果的改善对策。
在此情况下,与图36的流程的情况同样,通过使用户的身体的温度分布为“实际身体温度分布”、并叠加到图40所示的全身的示意图(illustration)上,能够传递用户的体表温度分布而看不到实际的用户的裸体热图像。
以上,表示了仅将脸部或身体等的皮肤的温度分布显示到热图像显示装置上、并变更形状信息的例子。
这里,作为脸部检测方法,例如也可以通过背景差分来检测运动体,将作为运动体的像素中40℃以下的最高温的区域判定为脸部。
此外,作为身体温度检测方法,也可以在入浴后的全身温度较高的状态下拍摄全身裸体热图像,将33℃以上的区域判定为身体。
此外,关于脸部或身体的边界线,也可以使用提取与相邻像素的温度差较大的像素、引出边界线的方法。
此外,在上述记载中表示的“叠加实际温度分布”,只要是在示意图上再现实际图像上的温度分布的方法即可,例如也可以是将各实际图像的像素放大以使实际图像上的轮廓与插图的轮廓一致的方法。
以上,表示了本实施方式的热图像处理方法。
如上述所示,通过使用本实施方式的热图像处理方法,修正了隐私区域(人体)的形状及温度分布的信息,但例如也可以基于修正前的本来的温度分布及形状的信息,使用图像识别技术识别个人,显示表示此人的名称(个人名或家人中的地位:父亲等)。
通过在保护隐私的同时增加信息,能够扩大热图像的用途。
此外,本实施方式的热图像处理方法优选的是具备用户能够从几个准备好的热图像处理方法中自由地选择喜好的热图像处理方法的手段(UI)。
例如,如在本实施方式中介绍,用户自身能够对隐私区域的判定条件及热图像的修正方法进行选择。根据用途,能够兼顾实现合适的隐私保护和信息公开。
此外,用户还能够选择显示的热图像的像素数及配色。通过能够按照每个用户来选择像素数或者配色,能够调节各个用户在意的信息公开量。
此外,也可以准备几个动作模式等,热图像处理的方法及显示的像素数等的信息按照每个模式而变化。
例如在美容模式中,进行使像素数变少、使色调为灰阶、改变形状的热图像处理,在监护模式中,进行使像素数变多、使色调为铁色、使特定的温度区域的像素不显示的热图像处理等,可以按照用途进行最优的热图像处理及像素数、色调的选择。
此外,热图像处理单元300也可以具备能够自动判断模式的模式判定机构(未图示)。
模式判定机构例如在热图像传感器201的附近有运动体(人)的情况下,判定为美容模式,对图像取得单元301、隐私区域判定单元302、修正图像生成单元303做出进行图36所示的处理的指示。另一方面,在热图像传感器201的远处有运动体(人)的情况下,判断为监护模式,对图像取得单元301、隐私区域判定单元302、修正图像生成单元303做出指示以进行图29或图30所示的处理。
由此,省去用户自身进行模式变更的工夫。运动体(人)处于热图像传感器201的附近还是远处的判断,例如也可以在所取得的热图像中被判断为隐私区域的区域的像素数在规定的阈值以上的情况下判断为处于附近,在小于阈值的情况下判断为处于远处。此外,也可以与其他传感器(人感传感器或搭载在其他设备中的传感器等)协作来判断运动体(人)是否处于附近。
在本实施方式中,热图像处理单元300也可以内置在热图像传感器201中,也可以内置在热图像显示装置204中,但优选的是处在处于网络202中的服务器203内。由此,热图像传感器201、热图像显示装置204成为更加小型而轻量。
此外,内置在热图像传感器201中的结构在安全性较高的观点下是最优选的结构。
此外,图28所示的热图像传感器201以单独设置来描述,但并不一定是单独的。例如也可以装备在空气调节装置或加湿器等的家电中,也可以装备在洗面台或浴缸等的设备中。
此外,关于本实施方式的热图像处理方法,如图28所示,除了用于热图像传感器和热图像显示装置经由网络相连的系统以外,也能够用于热图像传感器和热图像显示装置为一体的装置。
即使是传感器和显示装置一体型,例如也有可能拍摄到的热图像被其他的第三方看到,此外,还有通过使第三方确认而成为有效的使用方法,所以优选的是使用本实施方式所示那样的热图像处理方法。还能够兼顾实现必要信息的保留、和隐私保护。
另外,在上述各实施方式中,各构成要素也可以由专用的硬件构成、或通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过CPU或处理器等的程序执行单元将记录在硬盘或半导体存储器等的记录介质中的软件程序读出并执行来实现。
这样,有关本实施方式的热图像处理方法能够将热图像中包含的隐私性较高的信息除去。此外,有关本实施方式的热图像显示装置及热图像处理方法能够用于高龄者的监护及使用脸部或身体的皮肤温度分布的信息的美容服务等各种各样的用途。
(其他变形例)
以上,基于实施方式对有关本申请的一个或多个方式的传感方法、传感系统及具备它们的空调设备及热图像处理方法进行了说明,但本申请并不限定于该实施方式。只要不脱离本申请的主旨,对本实施方式实施了本领域的技术人员能够想到的各种变形的方式、或将不同实施方式的构成要素组合而构建的方式也可以包含在本申请的一个或多个方式的范围内。例如,以下这样的情况也包含在本申请中。
(1)上述各装置具体而言是由微处理器、ROM、RAM、硬盘单元、显示器单元、键盘、鼠标等构成的计算机系统。在上述RAM或硬盘单元中存储有计算机程序。通过上述微处理器按照上述计算机程序动作,各装置实现其功能。这里,计算机程序是为了实现规定的功能而将表示针对计算机的指令的命令代码组合多个而构成的。
(2)构成上述各装置的构成要素的一部分或全部也可以由1个系统LSI(LargeScale Integration:大规模集成电路)构成。系统LSI是将多个结构单元集成到1个芯片上而制造的超多功能LSI,具体而言是包括微处理器、ROM、RAM等而构成的计算机系统。在上述RAM中存储有计算机程序。通过上述微处理器按照上述计算机程序动作,系统LSI实现其功能。
(3)构成上述各装置的构成要素的一部分或全部也可以由能够对各装置拆装的IC卡或单体的模组构成。上述IC卡或上述模组是由微处理器、ROM、RAM等构成的计算机系统。上述IC卡或上述模组也可以包括上述超多功能LSI。通过微处理器按照计算机程序动作,上述IC卡或上述模组实现其功能。该IC卡或该模组也可以具有防篡改性。
(4)本申请也可以是上述所示的方法。此外,也可以是将这些方法通过计算机实现的计算机程序,也可以是由上述计算机程序构成的数字信号。
此外,本申请也可以是将上述计算机程序或上述数字信号记录到能够由计算机读取的记录介质、例如软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray(注册商标)Disc)、半导体存储器等中的产品。此外,也可以是记录在这些记录介质中的上述数字信号。
此外,本申请也可以将上述计算机程序或上述数字信号经由电气通信线路、无线或有线通信线路、以因特网为代表的网络、数据广播等传送的系统。
此外,本申请也可以是具备微处理器和存储器的计算机系统,上述存储器存储有上述计算机程序,上述微处理器按照上述计算机程序动作。
此外,也可以通过将上述程序或上述数字信号记录到上述记录介质中并移送、或通过将上述程序或上述数字信号经由上述网络等移送,由独立的其他计算机系统实施。
(5)也可以将上述实施方式及上述变形例分别组合。
本申请能够在传感方法、传感系统及具备它们的空调设备中使用,特别能够在搭载于宠物空调机、监护空调机、健康空调机等的空调设备中的传感方法、传感系统及具备它们的空调设备中使用。
标号说明
1、1A、1B、1C、1D、1E 传感系统
10、10A、10D 最小结构单元
11 热图像取得单元
12、12D 识别单元
13 提示单元
14 受理单元
15、15A 计测单元
16、16A、16B 状态判定单元
17、17A、17B、17D、17E 通知单元
18 湿度信息取得单元
19、19B、19D、19E 通知判定单元
20 空调控制单元
21、21E 分析单元
121 热分布判定单元
122 对象物判定单元
123 对象物位置判定单元
141 登记受理单元
142 位置信息受理单元
143 修正受理单元
151 热分布计测单元
152 湿度信息计测单元
201 热图像传感器
202 网络
203 服务器
204 热图像显示装置
300 热图像处理单元
301 图像取得单元
302 隐私区域判定单元
303 修正图像生成单元

Claims (18)

1.一种传感方法,包括:
热图像取得步骤,取得对象空间的热图像;
识别步骤,基于在所述热图像取得步骤中取得的所述热图像,识别所述热图像中包含的所述对象空间内的对象物;
提示步骤,对所述热图像附加表示所述识别步骤中的识别结果的信息,并提示给用户;以及
受理步骤,受理针对附加了在所述提示步骤中提示的所述信息的所述热图像的应答,
在所述识别步骤中,在所述受理步骤中受理的所述应答是针对所述识别结果的修正指示的情况下,按照所述修正指示,修正所述热图像中包含的对象物的识别结果。
2.如权利要求1所述的传感方法,
所述对象物包括所述对象空间内的人、动物、家电设备及被洗涤物的至少一种。
3.如权利要求1所述的传感方法,
所述识别步骤包括:
热分布判定步骤,判定由在所述热图像取得步骤中取得的所述热图像表现的温度分布;
对象物判定步骤,基于在所述热分布判定步骤中判定出的温度分布,判定并识别所述对象物;以及
对象物位置判定步骤,判定在所述对象物判定步骤中识别出的所述对象物在所述对象空间内的位置,
在所述提示步骤中,将所述对象物及所述对象物的位置包含在表示所述识别结果的信息中而进行提示。
4.如权利要求3所述的传感方法,
在所述对象物判定步骤中,将在所述热图像取得步骤中取得的所述热图像中的表示规定的温度范围的像素群的区域,判定为所述对象物;
在所述对象物位置判定步骤中,将在所述热图像取得步骤中取得的所述热图像中的表示规定的温度范围的像素群的区域的位置,判定为所述对象物的位置。
5.如权利要求3或4所述的传感方法,
在所述对象物判定步骤中,将在所述热图像取得步骤中取得的所述热图像中的表示规定的第1温度范围的像素群的区域,判定为人;
将在所述热图像取得步骤中取得的所述热图像中的表示与所述第1温度范围不同的规定的第2温度范围的像素群的区域,判定为动物。
6.如权利要求1~3中任一项所述的传感方法,
还包括:
温度分布计测步骤,计测所述对象空间的温度分布,并作为所述热图像输出;
状态判定步骤,基于所述热图像,判定包含在所述识别步骤中识别出的所述对象物的所述对象空间的状态;以及
通知步骤,通知与在所述状态判定步骤中判定出的所述对象空间的状态有关的信息、而且是针对所述用户的信息。
7.如权利要求6所述的传感方法,
还包括:
通知判定步骤,判定是否有作为应当通知所述用户的信息的通知信息;以及
湿度信息取得步骤,取得所述对象空间的湿度信息,
在所述状态判定步骤中,基于所述热图像及所述湿度信息,判定包含在所述识别步骤中识别出的所述对象物的所述对象空间的状态;
在所述通知步骤中,在所述通知判定步骤中判定为有所述通知信息的情况下,将所述通知信息通知给所述用户。
8.如权利要求6所述的传感方法,
还包括基于在所述状态判定步骤中判定出的所述对象空间的状态,判定是否有作为应当通知所述用户的信息的通知信息的通知判定步骤,
在所述通知步骤中,在所述通知判定步骤中判定为有所述通知信息的情况下,将所述通知信息通知给所述用户。
9.如权利要求6所述的传感方法,
所述方法还包括基于在所述状态判定步骤中判定出的所述对象物的状态控制所述对象空间的空气环境的空调控制步骤。
10.如权利要求9所述的传感方法,
所述方法还包括取得所述对象空间的湿度信息的湿度信息取得步骤,
在所述空调控制步骤中,基于在所述状态判定步骤中判定出的所述对象空间的状态及所述湿度信息,控制所述对象空间的空气环境。
11.如权利要求9所述的传感方法,
所述空气环境包括所述对象空间的空气的温度、湿度、风速及风向的至少1种。
12.如权利要求6所述的传感方法,
所述方法还包括:
湿度信息取得步骤,取得所述对象空间的湿度信息;
分析步骤,基于所述热图像及所述湿度信息,分析在所述识别步骤中识别出的所述对象物的状态;以及
通知判定步骤,基于所述分析步骤的分析结果,判定是否有作为应当通知所述用户的信息的通知信息,
在所述通知步骤中,在所述通知判定步骤中判定为有所述通知信息的情况下,将所述通知信息通知给所述用户。
13.如权利要求1~4中任一项所述的传感方法,
在所述受理步骤中,还预先受理关于所述对象物的信息的登记。
14.如权利要求13所述的传感方法,
关于所述对象物的信息包括所述对象物的种类、体重、年龄及位置的至少一种。
15.如权利要求12所述的传感方法,
所述对象空间的湿度信息是所述对象空间的湿度分布,
在所述湿度信息取得步骤中,计测所述对象空间的湿度,基于计测出的所述湿度和由在所述热图像取得步骤中取得的所述热图像表现的温度分布,计算所述对象空间的湿度分布。
16.如权利要求6所述的传感方法,
在所述通知步骤中,通知生活改善提议信息,所述生活改善提议信息是至少基于所述温度分布向所述用户提议生活改善方法的信息。
17.一种传感系统,具备:
热图像取得单元,取得对象空间的热图像;
识别单元,基于所述热图像取得单元取得的所述热图像,识别所述热图像中包含的所述对象空间内的对象物;
提示单元,对所述热图像附加表示所述识别单元中的识别结果的信息,并提示给用户;以及
受理单元,受理针对附加了在所述提示单元中提示的所述信息的所述热图像的应答,
在所述识别单元中,在所述受理单元中受理的所述应答是针对所述识别结果的修正指示的情况下,按照所述修正指示,修正所述热图像中包含的对象物的识别结果。
18.一种空调设备,
执行权利要求1~16中任一项所述的传感方法。
CN201510062129.XA 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备 Active CN104896685B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910504637.7A CN110274355B (zh) 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2014-040828 2014-03-03
JP2014040828 2014-03-03
JP2014208308 2014-10-09
JP2014-208308 2014-10-09

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910504637.7A Division CN110274355B (zh) 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备

Publications (2)

Publication Number Publication Date
CN104896685A CN104896685A (zh) 2015-09-09
CN104896685B true CN104896685B (zh) 2019-06-28

Family

ID=54006611

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910504637.7A Active CN110274355B (zh) 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备
CN201510062129.XA Active CN104896685B (zh) 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910504637.7A Active CN110274355B (zh) 2014-03-03 2015-02-05 传感方法、传感系统及包含它们的空调设备

Country Status (3)

Country Link
US (1) US9863660B2 (zh)
JP (2) JP6596207B2 (zh)
CN (2) CN110274355B (zh)

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6374757B2 (ja) * 2014-10-21 2018-08-15 アズビル株式会社 人検知システムおよび方法
EP3142355B1 (en) * 2015-09-08 2017-10-25 Axis AB Method and apparatus for enhancing local contrast in a thermal image
CN105258279A (zh) * 2015-09-25 2016-01-20 四川长虹电器股份有限公司 一种空调控制方法及空调
CN106562793B (zh) * 2015-10-08 2021-12-21 松下电器(美国)知识产权公司 信息提示装置的控制方法、以及信息提示装置
EP3232132B1 (en) * 2016-03-01 2019-04-24 Mitsubishi Electric Corporation Air conditioning system
WO2017173222A1 (en) * 2016-04-01 2017-10-05 Gentherm Inc. Occupant thermal state detection and comfort adjustment system and method
WO2017183207A1 (ja) * 2016-04-22 2017-10-26 三菱電機株式会社 空気調和機
RU2626798C1 (ru) * 2016-05-04 2017-08-01 Федеральное государственное бюджетное образовательное учреждение высшего образования "Комсомольский-на-Амуре государственный технический университет" (ФГБОУ ВО "КнАГТУ") Субоптимальная энергетическая система
WO2017195286A1 (ja) * 2016-05-11 2017-11-16 三菱電機株式会社 空調可視化システム
WO2018014326A1 (zh) * 2016-07-22 2018-01-25 绿仕科技控股有限公司 安全系统及方法
CN106151090A (zh) * 2016-08-27 2016-11-23 蔡璟 一种基于室内探测待散热物体自动运行的智能风扇
CN106292789B (zh) * 2016-08-30 2019-07-30 广东美的制冷设备有限公司 温度输出设备的温度设定方法和装置
CN106403174B (zh) * 2016-09-12 2019-02-19 格力电器(芜湖)有限公司 一种空调控制方法、空调及装置
WO2018058132A1 (en) * 2016-09-26 2018-03-29 Whirlpool Corporation Controlled microclimate system
JP6441546B2 (ja) * 2016-10-31 2018-12-19 株式会社オプティム コンピュータシステム、物体の診断方法及びプログラム
KR101845077B1 (ko) 2016-12-12 2018-04-03 김한주 윤곽 분석 서버의 동작 방법, 윤곽 분석 서버와 통신하는 온도 윤곽 센싱 장치, 및 윤곽 분석 서버를 포함하는 보안 시스템
CN108241300B (zh) * 2016-12-26 2023-05-02 开利公司 预定空间区域的设备控制
CN106766019B (zh) * 2017-03-17 2022-04-19 珠海格力电器股份有限公司 空调化霜控制系统和空调化霜控制方法
US10323854B2 (en) * 2017-04-21 2019-06-18 Cisco Technology, Inc. Dynamic control of cooling device based on thermographic image analytics of cooling targets
JP6920873B2 (ja) * 2017-04-25 2021-08-18 三菱電機株式会社 空気調和機
CN107289586B (zh) * 2017-06-15 2020-06-05 广东美的制冷设备有限公司 空调系统、空调器和通过空调系统进行跌倒报警的方法
CN107228463B (zh) * 2017-07-10 2019-07-05 长虹美菱股份有限公司 一种空调以及空调业务实现方法
JP2019052889A (ja) * 2017-09-13 2019-04-04 サクサ株式会社 画像処理装置
CN107560090A (zh) * 2017-09-20 2018-01-09 珠海格力电器股份有限公司 空调的送风控制方法及装置、终端
JP7050457B2 (ja) * 2017-11-02 2022-04-08 三菱電機株式会社 浴室空調装置
US11761662B2 (en) * 2017-12-31 2023-09-19 Universal Electronics Inc. Method and apparatus for intelligent temperature control
US11015832B2 (en) * 2018-01-12 2021-05-25 Carrier Corporation Thermographic sensing of human thermal conditions to improve thermal comfort
JP2019163875A (ja) * 2018-03-19 2019-09-26 東京瓦斯株式会社 警報システムおよびプログラム
JP6801688B2 (ja) * 2018-03-30 2020-12-16 ダイキン工業株式会社 環境調整システム
US20190309968A1 (en) * 2018-04-05 2019-10-10 Carrier Corporation Thermal management system with thermographic sensing
WO2019203351A1 (ja) * 2018-04-20 2019-10-24 パナソニックIpマネジメント株式会社 画像表示装置及び画像表示方法
CN108895603B (zh) * 2018-06-19 2020-06-19 芜湖美智空调设备有限公司 送风设备及其送风控制方法、装置和可读存储介质
JP7086187B2 (ja) * 2018-06-21 2022-06-17 三菱電機株式会社 監視システム及び監視方法
US10225492B1 (en) * 2018-07-23 2019-03-05 Mp High Tech Solutions Pty Ltd. User interfaces to configure a thermal imaging system
US11306937B2 (en) * 2018-08-24 2022-04-19 Pixart Imaging Inc. Temperature detecting device and air conditioner
JP6898286B2 (ja) * 2018-10-10 2021-07-07 シャープ株式会社 ネットワークシステム、サーバ、および情報処理方法
US11631259B2 (en) * 2018-11-02 2023-04-18 The Regents Of The University Of Michigan Multimodal sensing of thermal comfort for adaptable climate control
WO2020121370A1 (ja) * 2018-12-10 2020-06-18 三菱電機株式会社 空調機、制御装置、空調システム、空調制御方法及びプログラム
US20200217550A1 (en) * 2019-01-08 2020-07-09 Johnson Controls Technology Company Hvac infrared detection systems and methods
US20220061272A1 (en) * 2019-01-30 2022-03-03 Panasonic Intellectual Property Management Co., Ltd. Livestock house monitoring method and livestock house monitoring system
CN109916017A (zh) * 2019-03-08 2019-06-21 广东美的制冷设备有限公司 空调器的控制方法、空调器、智能移动终端及存储介质
CN110319937A (zh) * 2019-05-21 2019-10-11 广州供电局有限公司 红外测温图像处理方法、装置、计算机设备和存储介质
JP7195423B2 (ja) * 2019-06-06 2022-12-23 三菱電機株式会社 空調換気システム及び空調換気システムの制御装置
WO2021038663A1 (ja) 2019-08-23 2021-03-04 三菱電機株式会社 空気調和機システム
KR102335526B1 (ko) * 2019-09-04 2021-12-07 (주)이앤제너텍 온도 윤곽 센싱 장치와 통신하는 제어 서버의 동작 방법
JP7431536B2 (ja) * 2019-09-10 2024-02-15 シャープ株式会社 空気調和機およびサーバ
US11353228B2 (en) * 2019-09-19 2022-06-07 Lg Electronics Inc. Electronic apparatus for managing heating and cooling and controlling method of the same
KR20210049564A (ko) * 2019-10-25 2021-05-06 삼성전자주식회사 공기 조화 장치 및 이의 제어 방법
DE112019007870T5 (de) * 2019-10-31 2022-09-08 Mitsubishi Electric Corporation Klimaanlage
TWI742497B (zh) * 2019-12-27 2021-10-11 友拓科技股份有限公司 環境監控系統與方法
CN111442466B (zh) * 2020-03-27 2021-09-21 青岛海尔空调器有限总公司 空调器室内机及其控制方法
JP7325060B2 (ja) * 2020-03-27 2023-08-14 パナソニックIpマネジメント株式会社 着衣量推定装置、空調制御装置及び皮膚温推定装置
JP6954568B2 (ja) * 2020-03-31 2021-10-27 クラシエホールディングス株式会社 健康管理支援システム、健康管理支援方法、及びプログラム
JP6979103B2 (ja) * 2020-04-08 2021-12-08 三菱電機インフォメーションシステムズ株式会社 画像生成装置、画像生成方法及び画像生成プログラム
CN111520867B (zh) * 2020-05-15 2021-10-15 宁波奥克斯电气股份有限公司 一种控制方法及空调器
WO2021229801A1 (ja) * 2020-05-15 2021-11-18 三菱電機株式会社 空調制御装置、空調システム、及び、位置情報出力方法
IL275524B (en) * 2020-06-18 2021-12-01 Elbit Systems C4I And Cyber Ltd System and method for measuring parameters without contact
JP7142955B2 (ja) * 2020-07-15 2022-09-28 アルスデザインアソシエイツ株式会社 監視システム、監視方法、及びプログラム
CN112666837A (zh) * 2020-11-13 2021-04-16 广州大学 一种基于群体自适应行为识别的室内环境监控系统及方法
WO2022130474A1 (ja) * 2020-12-14 2022-06-23 三菱電機株式会社 熱画像処理装置、熱画像処理システムおよび熱画像処理方法
US11829166B2 (en) * 2020-12-17 2023-11-28 International Business Machines Corporation Image analysis for temperature modification
JP7345687B2 (ja) * 2020-12-18 2023-09-15 三菱電機株式会社 空気調和システム
CN113154618B (zh) * 2021-02-26 2022-03-08 珠海格力电器股份有限公司 一种空调的控制方法、装置、空调、存储介质及处理器
CN113091248B (zh) * 2021-03-29 2022-09-06 青岛海尔空调器有限总公司 空调的控制方法、装置、设备和存储介质
CN113375275B (zh) * 2021-06-28 2023-01-10 海信(广东)空调有限公司 空调器控制方法和空调器
JP7438401B2 (ja) 2021-08-04 2024-02-26 三菱電機株式会社 空気調和機及びセンサ制御装置
CN113819625B (zh) * 2021-08-19 2022-10-28 青岛海尔空调器有限总公司 用于控制空调的方法、装置及空调
CN113899395B (zh) * 2021-09-03 2023-04-18 珠海格力电器股份有限公司 温度湿度测量方法、装置、计算机设备和存储介质
CN114596683A (zh) * 2022-02-09 2022-06-07 青岛海信日立空调系统有限公司 入侵检测方法及装置
WO2023157449A1 (ja) * 2022-02-15 2023-08-24 パナソニックIpマネジメント株式会社 状態推定方法、状態推定装置、およびプログラム
WO2023215466A1 (en) * 2022-05-05 2023-11-09 Beam Tech Inc. Personalized heating system
CN115143601B (zh) * 2022-07-05 2023-11-24 浙江思科制冷股份有限公司 一种基于人工智能的中央空调冷热效果监测分析调控方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101490479A (zh) * 2006-09-07 2009-07-22 三菱电机株式会社 空气调和机
CN104995909A (zh) * 2012-12-21 2015-10-21 菲力尔系统公司 时间间隔的红外图像增强

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03247939A (ja) * 1990-02-27 1991-11-06 Sanyo Electric Co Ltd 空気調和装置
JP3216280B2 (ja) * 1992-12-11 2001-10-09 松下電器産業株式会社 空気調和機の制御装置と画像処理装置の応用機器
JPH09200714A (ja) * 1996-01-17 1997-07-31 Casio Comput Co Ltd テレビ電話付き画像処理装置
JP3588666B2 (ja) * 1996-07-30 2004-11-17 日産自動車株式会社 運転制御装置
KR20010001673A (ko) * 1999-06-02 2001-01-05 이방현 인체 감지 장치
JP2001153966A (ja) * 1999-11-26 2001-06-08 Mitsubishi Electric Corp 温度分布表示装置
JP2003319158A (ja) * 2002-04-18 2003-11-07 Toshiyuki Tani 画像処理システム
JP2003326936A (ja) * 2002-05-09 2003-11-19 Denso Corp 車両用防曇装置
JP4036051B2 (ja) * 2002-07-30 2008-01-23 オムロン株式会社 顔照合装置および顔照合方法
RU2313815C2 (ru) * 2002-09-26 2007-12-27 Сименс Акциенгезелльшафт Устройство и способ для контроля технической установки, содержащей множество систем, в частности установки электростанции
JP4450206B2 (ja) * 2004-12-24 2010-04-14 株式会社デンソー プローブシステム
JP4534973B2 (ja) * 2005-11-29 2010-09-01 株式会社デンソー 窓曇り検出装置
JP4693731B2 (ja) * 2006-09-21 2011-06-01 株式会社東芝 空調用センサーシステム
JP5111445B2 (ja) * 2008-09-10 2013-01-09 三菱電機株式会社 空気調和機
JP5289518B2 (ja) 2008-09-10 2013-09-11 三菱電機株式会社 空気調和機及び輻射温度計算方法
JP4972069B2 (ja) * 2008-10-28 2012-07-11 ナガノサイエンス株式会社 空調装置の制御方法、空調装置及び環境試験装置
JP5300602B2 (ja) * 2008-10-31 2013-09-25 三菱電機株式会社 空気調和機
US9843743B2 (en) * 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
JP5247647B2 (ja) 2009-10-06 2013-07-24 三菱電機株式会社 空気調和機
JP5258816B2 (ja) * 2010-02-27 2013-08-07 三菱電機株式会社 空気調和機
JP5484205B2 (ja) * 2010-06-09 2014-05-07 三菱電機株式会社 空気調和機
JP5525960B2 (ja) * 2010-08-10 2014-06-18 アズビル株式会社 空調制御装置および方法
JP5772272B2 (ja) * 2011-06-16 2015-09-02 富士通株式会社 情報処理装置、及び情報処理方法
JP2013080413A (ja) * 2011-10-05 2013-05-02 Sony Corp 入力装置、入力認識方法
JP5389243B2 (ja) * 2012-10-17 2014-01-15 三菱電機株式会社 空気調和機
JP6586076B2 (ja) * 2013-03-15 2019-10-02 フルークコーポレイションFluke Corporation 分離した無線モバイル装置を用いて赤外線画像に可視的な視聴覚の注釈付け
US20140365017A1 (en) * 2013-06-05 2014-12-11 Jason Hanna Methods and systems for optimized hvac operation
JP5575317B2 (ja) * 2013-09-09 2014-08-20 三菱電機株式会社 空気調和機

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101490479A (zh) * 2006-09-07 2009-07-22 三菱电机株式会社 空气调和机
CN104995909A (zh) * 2012-12-21 2015-10-21 菲力尔系统公司 时间间隔的红外图像增强

Also Published As

Publication number Publication date
JP6596207B2 (ja) 2019-10-23
JP6835926B2 (ja) 2021-02-24
US20150247647A1 (en) 2015-09-03
JP2016065848A (ja) 2016-04-28
CN104896685A (zh) 2015-09-09
US9863660B2 (en) 2018-01-09
CN110274355A (zh) 2019-09-24
JP2020079784A (ja) 2020-05-28
CN110274355B (zh) 2022-01-11

Similar Documents

Publication Publication Date Title
CN104896685B (zh) 传感方法、传感系统及包含它们的空调设备
US10535995B2 (en) Power control system, healthcare instrument, activity measurement apparatus, and power instruction apparatus
Aryal et al. A comparative study of predicting individual thermal sensation and satisfaction using wrist-worn temperature sensor, thermal camera and ambient temperature sensor
CN104981963B (zh) 家庭用电力指令装置以及家庭用电力控制系统
US10709335B2 (en) Infant monitoring system with observation-based system control and feedback loops
JP5300602B2 (ja) 空気調和機
JP6505514B2 (ja) 空気調和機、センサシステムおよびその温冷感推定方法
KR102423752B1 (ko) 수면 중인 대상체의 쾌면을 유도하는 방법 및 이를 위한 쾌면 유도 장치
US9044101B2 (en) Climate controlled sleeping space
JP6520831B2 (ja) 表示制御装置、表示制御システム、表示制御方法、表示制御プログラム、記録媒体
Jung et al. Vision-based thermal comfort quantification for HVAC control
US9672426B2 (en) Intelligent monitoring system
CN110513840A (zh) 基于智能家居操作系统的温度控制方法及系统
JP6068280B2 (ja) 空気調和機
JP6365967B2 (ja) 環境制御装置、および環境制御システム
US20150248754A1 (en) Method and Device for Monitoring at Least One Interior Space of a Building, and Assistance System for at Least One Interior Space of a Building
CN108592347A (zh) 空调器及其控制方法、控制装置和可读存储介质
JP6409624B2 (ja) 保湿用空気供給機及び家電機器の運転管理システム
CA3169653A1 (en) Temperature regulation based on thermal imaging
Nicol Temperature and sleep
WO2023088058A1 (zh) 用于控制空调的方法及装置、空调、存储介质
CN114120214B (zh) 踢被子检测方法、空调控制方法及检测装置
JP6563763B2 (ja) 機器制御システム
Garcia-Souto Temperature and comfort monitoring systems for humans
US20210208625A1 (en) Adjustable textiles

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant