具体实施方式
对于本发明的实施方式,适当参照附图详细说明。其中,对于各图中共用的部分附加相同的符号,省略重复的说明。
《第一实施方式》
<空调机的结构>
图1是本实施方式的空调机的室内机、室外机和遥控器的正面图。如图1所示,空调机A具有室内机100、室外机200和遥控器Re。室内机100和室外机200用制冷剂配管(未图示)连接,通过公知的制冷剂循环,对设置室内机100的室内进行空气调节。此外,室内机100与室外机200通过通信线缆(未图示)相互发送接收信息。
遥控器Re被用户操作,对室内机100的遥控器接收部Q发送红外线信号。该信号的内容是运转请求、设定温度的变更、定时器、运转模式的变更、停止请求等指令。空调机A基于这些信号,进行供冷模 式、供暖模式、除湿模式等空气调节运转。
此外,在室内机100的前面板106的左右方向中央的下部,设置有拍摄单元110。其中,对于拍摄单元110的详情在之后叙述。
图2是室内机的侧截面图。壳体基座101收纳有热交换器102、送风风扇103、过滤器108等内部结构体。
热交换器102具有多根导热管102a,构成为使由送风风扇103导入到室内机100内的空气,与在导热管102a中流通的制冷剂进行热交换,将上述空气加热或冷却。其中,导热管102a与上述制冷剂配管(未图示)连通,构成公知的制冷剂循环(未图示)的一部分。
左右风向板104根据来自室内机微型计算机(未图示)的指示,以设置于下部的转动轴(未图示)为支点通过左右风向板用电机(未图示)而转动。
上下风向板105根据来自室内机微型计算机的指示,以设置于两端部的转动轴(未图示)为支点通过上下风向板用电机(未图示)而转动。
前面板106以覆盖室内机100的前表面的方式设置,是能够以下端为轴通过前面板用电机(未图示)而转动的结构。此外,也可以将前面板106固定于下端。
通过由图2所示的送风风扇103旋转,通过空气吸入107和过滤器108导入室内空气,在热交换器102中进行热交换后的空气吹出并被导向吹出风路109a。进而,被导向吹出风路109a的空气,由左右风向板104和上下风向板105调整风向,从空气吹出109b向外部送出,对室内进行空气调节。
图3是表示包括空调机所具有的控制单元的结构的框图。
拍摄单元110例如是CCD(Charge Coupled Device:电荷耦合器件)摄像机,如上所述,设置在前面板106的左右方向中央的下部(参照图1)。此外,拍摄单元110,以镜头g(参照图11)的光轴相对于水平线按规定角度朝向下方的方式设置,能够对设置了室内机100的室内适当地拍摄。此外,拍摄单元110对空调室内随时间经过地拍摄,将拍摄到的图像作为图像信息输出到A/D转换器120。
A/D转换器120是将从拍摄单元110作为模拟信号输入的图像信 息转换为数字信号,对控制单元130的人体检测部131和脸部检测部132输出的电路。其中,也可以将A/D转换器120内置于拍摄单元110。
控制单元130根据从拍摄单元110输入的图像信息、从遥控器Re输入的指令信号、以及各种传感器(未图示)输入的传感器信号等,对空调机A的动作进行综合控制。
存储单元140例如包括ROM(Read Only Memory:只读存储器)、RAM(RandomAccess Memory:随机访问存储器)等构成。而且,ROM中存储的程序被控制单元130的CPU(Central Processing Unit)读出、展开至RAM并执行。
负载150例如包括室内机100所具有的室内风扇电机(未图示)、室外机200所具有的压缩机电机(未图示)、设置于上下风向板105的上下风向板用电机(未图示)、设置于左右风向板104的左右风向板用电机(未图示)。这些负载150按照从控制单元130的驱动控制部137输入的驱动信号而驱动。
<控制单元的结构>
如图3所示,控制单元130具有人体检测部131、脸部检测部132、综合处理部133、移动量计算部134、活动量计算部135、修正值计算部136和驱动控制部137。
人体检测部131基于从拍摄单元110输入的图像信息每规定时间检测室内的人的包括头部的人体,将关于该人体的信息(以下记作人体信息)保存到存储单元140中。此外,“检测包括头部的人体”指的是包括检测包含头部(头部区域)、肩部(肩部区域)、以及腿部(腿部区域)的全身的情况。
其中,人体检测部131的处理与后述的脸部检测部132的处理相比,以较大的像素间隔执行。
脸部检测部132基于从拍摄单元110输入的图像信息每规定时间检测室内的人的脸部,将关于该脸部的信息(以下记作脸部信息)保存到存储单元140中。
以下,说明对于以较大的像素间隔检测人体的人体检测处理和以较小的像素间隔检测脸部的处理随时间经过地切换执行的情况。
综合处理部133,随时间经过地切换执行人体检测部131的处理和 脸部检测部132的处理,并且使由人体检测部131检测的人体与由脸部检测部132检测的脸部基于人体与脸部的位置关系关联,保存到存储单元140中。
例如,在某一个时刻检测出人体,在比上述时刻靠后的时刻检测出脸部的情况下,需要判定检测出的人体和脸部是否是同一个人。综合处理部133,在判定检测出的人体与脸部是同一个人的情况下,使用作为识别信息的标签值使各图像信息关联。
其中,对于使用标签值的关联的详情在之后叙述。
移动量计算部134,基于由人体检测部131检测的人体的位置和大小、或者由脸部检测部132检测的脸部的位置和大小的随时间经过的变化,计算上述用标签值关联的室内的人的移动量。然后,移动量计算部134使计算出的移动量与标签值关联并输出至活动量计算部135。
其中,“移动量”是指在真实世界的空间内推定室内的人在规定时间内移动的距离。
活动量计算部135基于由移动量计算部134计算的移动量,计算室内的人的活动量。然后,活动量计算部135使计算出的活动量与上述标签值关联并输出至修正值计算部136。
其中,“活动量”指的是人体的每单位表面积的代谢量[W/m2],与上述移动量为正相关。
修正值计算部136,根据由活动量计算部135计算的活动量,变更用于空气调节控制的参数值,将该参数输出至驱动控制部137。
其中,上述参数包括空调机A的设定温度、室外机200所具有的压缩机电机(未图示)的旋转速度、以及对压缩机电机(未图示)供给的最大电流量中的至少一项。此外,上述参数还包括室内风扇电机(未图示)的旋转速度、上下风向板用电机(未图示)的驱动、以及左右风向板用电机(未图示)的驱动。
驱动控制部137,根据通过遥控器接收部Q从遥控器Re输入的遥控器信号、以及从温度检测器(未图示)等传感器类输入的传感器信号,对空调机A的负载150(室内风扇电机、压缩机电机、上下风向板用电机、左右风向板用电机等)的驱动进行控制。进而,驱动控制部137除了上述信息之外,还根据从修正值计算部136输入的修正量 变更负载150的控制。
其中,修正值计算部136和驱动控制部137相当于根据由活动量计算部135计算的活动量变更空气调节控制的“控制变更部”。
<控制单元的处理流程>
接着,参照图5,使用图4说明控制单元130执行的一系列处理的概要。图4是表示控制单元进行的处理的流程的流程图。
图4的步骤S101中控制单元130将n的值设定为1(n=1),保存到存储单元140。其中,n是用于对计算上述移动量和活动量的次数进行计数的值。
图4的步骤S102中控制单元130判定开始处理后(即,从START的时刻开始)是否经过了规定时间Δt1。其中,规定时间Δt1是预先设定的时间(例如数msec),被保存在存储单元140中。
在开始处理后经过了规定时间Δt1的情况下(S102→Yes),控制单元130的处理前进至步骤S103。另一方面,开始处理后还未经过规定时间Δt1的情况下(S102→NO),控制单元130反复进行步骤S102的处理。
步骤S103中控制单元130接受来自拍摄单元110的图像信息的输入,将该图像信息保存到存储单元140。
例如,用拍摄单元110拍摄与图5(a)所示的这样的RGB图像对应的图像信息,通过A/D转换部输入至控制单元130的人体检测部131。
接着,在图4的步骤S104中,控制单元130从存储单元140读出图像信息,执行人体检测处理。然后,控制单元130使对人体图像附加特征的信息(即,人体信息)和作为每个人体的识别记号的人体标签值关联,保存至存储单元140(参照图9(a))。
此外,进行人体检测处理时,控制单元130与后述的脸部检测处理相比,以较大的像素间隔检测室内的人的人体。由此,能够减轻控制单元130进行人体检测处理时的处理负载。
例如,图5(a)中大致全身被拍摄单元110拍摄到的室内的人A、B、C,通过人体检测部131检测为符号A1、B1、C1(参照图5(b))表示的二值图像。另一方面,对于仅有身体的一部分(头部、肩部)被拍摄单元110拍摄到的室内的人D(参照图5(a)),没有检测出人 体(参照图5(b))。
接着,图4的步骤S105中控制单元130从存储单元140读出图像信息,执行脸部检测处理。然后,控制单元130使对脸部图像附加特征的信息(即脸部信息)与作为每个脸部的识别记号的脸部标签值关联,保存到存储单元140(参照图9(b))。
例如,图5(a)中脸部被拍摄单元110拍摄到的室内的人A、B、D,通过脸部检测部132检测为符号A2、B2、D2(参照图5(c))所示的脸部图像。另一方面,对于朝向后方的室内的人C(参照图5(a)),没有检测出脸部(参照图5(c)的符号C1)。
接着,在图4的步骤S106中控制单元130对由人体检测处理(S104)取得的人体信息与由脸部检测处理(S105)取得的脸部信息使用上述各标签值关联。即,由人体检测处理检测的各人体的头部的中心位置与由脸部检测处理检测的脸部的中心位置为规定距离以内的情况下,对该人体和脸部使用标签值关联。
由此,能够适当地判定由人体检测处理检测的人体与由脸部检测处理检测的脸部是否对应同一个室内的人。
接着,图4的步骤S107中,控制单元130计算通过上述标签值关联的每个室内的人的移动量。然后,控制单元130将计算出的移动量,与标签值关联地保存到存储单元140。
图5所示的例子中,对于检测出脸部的室内的人A、B、D(参照图5(a)),使用与脸部图像A2、B2、D2(参照图5(c))对应的脸部信息计算移动量。
另一方面,尽管没有检测出脸部,对于检测出人体的室内的人C(参照图5(a)),使用与人体图像C1(参照图5(c))对应的人体信息计算移动量。
在步骤S108中控制单元130计算通过上述标签值关联的每个室内的人的活动量。
然后,控制单元130将计算出的活动量与标签值关联地保存到存储单元140。其中,在上述n的值为2以上的情况下,控制单元130按通过标签值关联的每个室内的人对活动量逐次累计(即计算和)。
步骤S 109中控制单元130判定n的值是否等于N。其中,N是预 先设定的自然数,被保存在存储单元140中。
在n的值等于N的情况下(S109→Yes),控制单元130的处理前进至步骤S111。另一方面,在n的值不等于N的情况下(S109→No),控制单元130的处理前进至步骤S110。
步骤S109中控制单元130对n的值加1。即,使步骤S101中设定的n的值“1”加1成为“2”。
这样,控制单元将步骤S102~108的处理反复执行N次。
步骤S111中控制单元130计算空气调节控制的修正值。即,控制单元130基于通过标签值关联的每个室内的人的活动量(时间Δt1×N期间的活动量),计算空气调节控制的修正值。
其中,该修正值的计算能够使用室内的活动量的分布(左侧区域和右侧区域的分布等),或使用特定的室内的人的位置和活动量。
步骤S112中控制单元130使用步骤S111中计算出的修正值执行空气调节控制的变更处理。即,控制单元130的驱动控制部137,除了上述遥控器信号和传感器信号之外,还使用基于活动量计算出的修正值执行空气调节控制的变更处理。
<各处理的详情>
(1.人体检测处理)
图6是表示人体检测处理的流程的流程图。
步骤S201中控制单元130执行二值化处理。即,控制单元130,从存储单元140读出通过A/D转换器120从拍摄单元110输入的图像信息,将RGB图像转换为二值图像。其中,该二值化处理例如按预先设定的多个像素间隔分割RGB图像,使用各区域(例如5×5像素的区域)中亮度值的累计执行二值化。由此,能够以较大的像素间隔执行人体识别而降低运算量,能够减轻控制单元130的负载并使处理高速化。
步骤S202中控制单元130使用由上述二值化处理取得的二值图像的信息检测头部区域。即,控制单元130从二值化图像的从上向下调查横向的线的0或1的分布,基于该分布根据是否存在相当于头部图像的形状(大致圆形)的部分来检测头部区域。
步骤S203中控制单元130使用二值图像的信息检测腿部区域。例 如,控制单元130从二值化图像的从下向上调查横向的线的0或1的分布,根据步骤S202中取得的头部的下方是否存在腿部来检测腿部区域。
步骤S204中控制单元130计算人体中心。例如,控制单元130基于步骤S202中取得的头部区域和步骤S203中取得的腿部区域的位置,计算人体的中心(或重心)位置即人体中心。此外,该人体中心的信息,作为确定规定的像素的位置信息(纵向位置、横向位置)被取得。
步骤S205中控制单元130提取肩部区域。例如,控制单元130例如通过从头部区域的上端到腿部区域的下端的像素数、以头部区域和腿部区域为基准推定的肩部区域的位置的像素值是否为1,来执行肩部区域的提取处理。
步骤S206中控制单元130使步骤S201~S205的处理中取得的信息与用于识别室内的人的标签值关联,作为人体信息保存到存储单元140。
通过这样的处理,能够取得图5(b)所示的人体图像相关的人体信息。
(2.脸部检测处理)
图7是表示脸部检测处理的流程的流程图。
步骤S301中控制单元130执行滤波处理从图像信息除去噪声。即,控制单元130从存储单元140读出关于由拍摄单元110拍摄到的图像的信息,例如,使用小波变换从RGB图像信息中除去噪声。
在步骤S302控制单元130检测脸部区域。例如,控制单元130对于上述除去了噪声的RGB图像信息取得颜色直方图,将与存储单元140中预先存储的脸部图像的颜色直方图的差异在规定值以下的区域检测为脸部区域。
步骤S303中控制单元130检测口部区域。即,控制单元130通过在步骤S202检测出的脸部区域中,与预先存储在存储单元140的口部蒙板图像信息进行比较,检测口部区域。
步骤S304中控制单元130检测眼部区域。即,控制单元130通过在步骤S202检测出的脸部区域中,与预先存储在存储单元140的眼部蒙板图像信息进行比较,检测眼部区域。
在步骤S305中控制单元130使步骤S301~S304的处理中取得的信息,与用于识别室内的人的标签值关联,作为脸部信息存储到存储单元140(参照图9(b))。
通过这样的处理,能够取得关于图5(c)所示的脸部图像的脸部信息。
(3.通过标签值进行的关联)
接着,使用图8说明控制单元130执行的使用标签值的关联处理。
图8的步骤S401中控制单元130将k的值设定为1(k=1),存储到存储单元140。其中,k是进行关于人体检测处理(参照图4的S104)检测出的M个人体的处理时,逐次增加的值。
步骤S402中控制单元130判定距离L是否为规定距离L0以下。另外,距离L指的是同上述k的值对应的特定的人体图像的头部中心与由脸部检测处理检测的脸部中心之间的距离(像素数)。即,控制单元130判定是否存在位于距离人体图像的头部中心规定距离L0以内的脸部区域。
存在L≤L0的脸部区域的情况下(S402→Yes),控制单元130的处理前进至步骤S403。另一方面,在不存在L≤L0的脸部区域的情况下(S402→No),控制单元130的处理前进至步骤S404。
步骤S403中控制单元130将与k=1对应的脸部图像的标签值(脸部标签值),作为该室内的人的标签值保存到存储单元140。由此,能够通过用标签值关联而确保人体检测和脸部检测分别检测出的室内的人的同一性。此外,对于被人体检测和脸部检测双方识别出的室内的人,在计算后述的移动量时能够优先使用脸部图像。
在步骤S404中控制单元130将人体标签值作为室内的人的标签值保存到存储单元140。由此,在不能检测出脸部的情况下,也能够使用人体图像计算移动量。
图9(a)是表示被检测出人体的室内的人与人体标签值的对应关系的表。例如,对于图5(a)所示的室内的人C取得人体图像信息时(参照图5(b)的C1),控制单元130在上述人体检测处理中使该图像信息与人体标签值“bbbC”关联地保存到存储单元140。
其中,由于对于图5(a)中所示的室内的人D没有检测出人体, 所以不附加人体标签值(参照图9(a))。
图9(b)是表示被检测出脸的室内的人与脸部标签值的对应关系的表。例如,对于图5(b)所示的室内的人D取得脸部信息时(参照图5(c)的D2),控制单元130在上述脸部检测处理中使该脸部信息与脸部标签值“fffD”关联地保存到存储单元140。
其中,由于对于图5(a)中所示的室内的人C没有检测出脸部,所以不附加脸部标签值(参照图9(b))。
图9(c)是表示室内的人与标签值的对应关系的表。例如,室内的人A的人体图像A1(参照图5(b))的头部中心与脸部图像A2(参照图5(c))的脸部中心之间的距离L为规定距离L0以内的情况下(图8的S402→Yes),控制单元130识别为它们是同一个人的图像。然后,采用作为脸部标签值的“fffA”作为对该室内的人附加的标签值(参照图9(c))。
即,控制单元130关于后述的移动量的计算处理,使用与脸部标签值fffA关联的图像信息A2(参照图5(c))。由此,能够准确地计算室内的人的移动量和活动量。
另一方面,如图5(a)、(c)所示,关于背对拍摄单元110的室内的人C,没有检测出脸部。在这样的情况下(图8的S402→No),控制单元130采用作为人体标签值的“bbbC”作为对室内的人C附加的标签值(参照图9(c))。
即,控制单元130对于后述移动量的计算处理,使用与人体标签值bbbC关联的图像信息C1(参照图5(c))。由此,在室内的人背对拍摄单元110的情况、或因逆光而不能检测出脸部的情况下,也能够计算该室内的人的活动量。
再次返回图8继续说明。
步骤S405中控制单元130判定是否为k=M。其中,M的值是检测出的室内的人的数量,图5(b)所示的例子中M=4。
在k=M的情况下(S405→Yes),控制单元130结束使用标签值的关联处理,前进至移动量的计算(参照图4的步骤S107)。另一方面,如果不是k=M(S405→No),控制单元130的处理前进至步骤S406。
在步骤S406,控制单元130对k的值加1,返回步骤S402的处理。
这样,控制单元130,通过标签值使人体图像信息与脸部图像关联而确保室内的人的同一性地,优先采用脸部图像信息作为活动量计算处理的对象(参照图5(c)、图9(c))。此外,对于未能检测出脸部图像的信息,采用人体图像信息作为活动量计算处理的对象(参照图5(c)、图9(c))。
其中,上述处理按每规定时间Δt1(参照图4)反复进行,是同一个室内的人的情况下也存在某一个时刻使用脸部图像,其他时刻使用人体信息的情况。这样,通过确保室内的人的同一性地切换作为处理对象的图像的种类,能够与室内的人的朝向和光的照射状态无关地追踪各室内的人。
(3.移动量的计算处理)
接着,参照图11,使用图10说明控制单元130执行的移动量计算处理。
步骤S501中,控制单元130计算拍摄单元110的拍摄面p上的脸部的像的横向宽度P2(参照图11(b))。其中,关于检测出人体但是未检测出脸部的室内的人,计算拍摄面p上的人体像的头部的横向宽度。
另外,脸部的像的横向宽度P2能够通过脸部的像的横向的最大像素数乘以每个像素的横向宽度而计算。
在步骤S502,控制单元130使用拍摄面p上的脸部(或头部)的中心位置的变化量,计算室内的人的左右上下方向上的移动量ΔX。
例如,考虑室内的人从图11(a)所示的状态(从拍摄单元110来看)向右侧的跟前移动(向右移动ΔX,向跟前侧移动ΔY),成为图11(b)的状态的情况。此时的移动量ΔX能够使用以下表示的(式1)计算。
其中,(式1)中,符号H是室内的人的脸部(或头部)的横向宽度,作为规定值预先保存在存储单元140中。此外,符号X1是移动前的脸部的像的中心位置,符号X2是移动后的脸部的像的中心位置。此外,上下方向上的移动量也能够用同样的方法计算。
……(式1)
接着,图10的步骤S503中,控制单元130使用拍摄面p上的脸 部(或头部)的横向宽度的变化量,通过以下所示的(式2)计算室内的人在进深方向上的移动量ΔY。
其中,(式2)中符号D1是从移动前的室内的人至镜头g的距离,符号D2是从移动后的室内的人至镜头g的距离。此外,符号P1是移动前拍摄面p的脸部的像的横向宽度,符号P2是移动后拍摄面p的脸部的像的横向宽度。此外,符号F是从镜头g至拍摄面p的距离。
……(式2)
接着,在图10的步骤S504中,控制单元130使用左右方向的移动量ΔX和进深方向的移动量ΔY,通过以下所示的(式3)计算室内的人的实际移动量ΔD。
……(式3)
这样,控制单元130基于左右上下方向的移动量和进深方向的移动量计算上述规定时间Δt1(参照图4的S102)的室内的人的移动量ΔD。从而,能够准确地计算每个室内的人的移动量。
接着,步骤S505中控制单元130使计算的室内的人的移动量ΔD与该室内的人的标签值关联地存储到存储单元140。
此处,使用图12、图13,说明各室内的人的每规定时间Δt1(参照图4)的移动量的计算。其中,此处,设规定时间Δt1=1sec。
例如,在时刻9点15分00秒,拍摄单元110拍摄了图12(a)所示的图像,在时刻9点15分01秒,拍摄了图12(b)所示的图像。图12(a)中背对拍摄单元110的室内的人C,在图12(b)中背对拍摄单元110。此外,室内的人A向拍摄单元110靠近。
控制单元130,在计算从时刻9点15分00秒至时刻9点15分01秒之间室内的人A的移动量时,基于图12(a)、(b)各脸部图像的位置和大小的变化计算出移动量7.259(参照图13),与标签值NNNA关联地保存到存储单元140(参照图13)。
此外,在时刻9点15分02秒,拍摄单元110拍摄了图12(c)所示的图像,在时刻9点15分03秒,拍摄了图12(d)所示的图像。其中,图12(c)中面对拍摄单元110的室内的人B,在图12(d)中背对拍摄单元110。此外,图12(c)中没有拍摄到的室内的人D在图 12(d)中被拍摄到。
控制单元130如下所述地计算从时刻9点15分02秒至时刻9点15分03秒之间室内的人B的移动量。即,控制单元130基于图12(c)的脸部图像的位置和大小、图12(d)的人体图像的头部的位置和大小,计算出室内的人B的移动量1.268(参照图13),与标签值NNNB关联地保存到存储单元140(参照图13)。
这样,控制单元130基于随时间经过地变化的室内的人的脸部的位置和大小(横向宽度)的变化、或头部的位置和大小(横向宽度)的变化计算移动量,与标签值关联地保存到存储单元140。
(4.活动量的计算处理)
图14是表示室内的人的每规定时间的移动量与活动量的关系的图。
控制单元130计算活动量时,逐次计算上述每规定时间Δt1(参照图4)的移动量ΔD并累计,计算规定时间Δt1×N(参照图4)中的合计移动量。
此外,以随着每规定时间Δt1×N的移动量增大,活动量也越大的方式,将与图14的图相当的信息预先保存到存储单元140。
控制单元130计算上述移动量,计算与该移动量对应的活动量,与上述标签值关联地保存到存储单元140。
(5.修正值的计算处理)
接着,作为一例,说明使用在规定时间Δt1×N期间检测出的各室内的人的活动量的合计值,计算空调机A的设定温度的修正值的情况。
图15(a)、(b)是表示活动量与设定温度的修正值的关系的图。控制单元130,根据从遥控器Re接收并保存在存储单元140的运转模式(供冷运转/供暖运转)切换修正值的计算方法。
[5-1.供冷时的修正值的计算处理]
即,在图15(a)所示的供冷时的情况下,控制单元130在计算出的活动量越大时越减小设定温度的修正值。此处,“设定温度”指的是使用从遥控器Re输入的设定温度信息和上述活动量由控制单元130计算并被驱动控制部137参照的值。
其中,在活动量为0以上不足W1的范围内的情况下,无人的可 能性较高,所以设定为使设定温度的修正值较高。
[5-2.供暖时的修正值的计算处理]
此外在供暖时控制单元130在计算出的活动量为0以上不足W1的情况下,增大设定温度的修正值T8(<0)的绝对值。即,在活动量非常小的情况下,控制单元130判定室内没有人,为了降低消耗电力而降低设定温度。
其中,上述室内是否有人的判定,优选不仅考虑活动量,还考虑人体检测部131或脸部检测部132是否检测出室内有人。
此外,活动量W1以上的区域中,控制单元130在活动量的值越大时越增大修正值(<0)的绝对值(即降低设定温度)。
这样,能够进行适合室内的活动量的空气调节,并且降低消耗电力。此外,通过在室内的人的活动量越大时越降低设定温度,能够提供舒适性较好的空调机A。
(6.空气调节控制的变更处理)
[1.与活动量的分布相应的风向控制]
图16是表示空气调节控制的变更处理的流程的流程图。其中,图16中,作为一例,说明在供暖运转时决定向室内的左侧区域、中央区域、右侧区域中的哪一个方向送风的情况。
在步骤S601中控制单元130判定活动量计算处理计算出的活动量是否为规定值W以上。其中,规定值W是预先设定的活动量的值。在活动量为规定值W以上的情况下(S601→Yes),控制单元130的处理前进至步骤S602。另一方面,在活动量不足规定值W的情况下(S601→No),控制单元130的处理前进至步骤S606。
在步骤S602中控制单元130使设定温度降低规定值ΔT。例如,在供暖运转时的活动量处于图15(b)所示的W3以上不足W4的范围内的情况下,控制单元130将设定温度加上修正值T7(<0),使设定温度降低|T7|(=ΔT)。
步骤S603中控制单元130判定左右区域的活动量的差是否为ΔW以上。其中,上述ΔW的值被预先设定并保存在存储单元140中。
其中,上述的判定处理中使用的活动量,是处于室内的左侧区域的室内的人的每时每刻的活动量的合计值和处于室内的右侧区域的室 内的人的每时每刻的活动量的合计值。
在左右区域的活动量的差为ΔW以上的情况下(S603→Yes),控制单元130的处理前进至步骤S604。另一方面,在左右区域的活动量的差不足ΔW的情况下(S603→No),控制单元130的处理前进至步骤S605。
在步骤S604中,控制单元130,向活动量更小的区域(例如右侧区域)输送对设定温度进行修正后的暖风。
步骤S605中,控制单元130,向空调室内的中央输送对设定温度进行修正后的暖风。
步骤S604、605的处理中的风向控制,通过以设置于室内机100的下部的转动轴(未图示)为支点驱动左右风向板用电机(未图示),变更左右风向板104的朝向来进行。
在步骤S601中活动量不足规定值W的情况下(S601→No),控制单元130进行通常运转(S606)。
这样,通过对活动量较小的区域重点地输送暖风,能够使房间整体的温度分布均匀化。此外,通过降低供暖运转的设定温度,能够削减空气调节所需的消耗电力。
[2.与室内的人的位置和活动量相应的风向控制]
图17是表示空气调节控制的变更处理的其他例子的流程图。其中,图17中,说明了在进行供冷运转的情况下根据室内的人的位置和活动量进行风向控制的情况。
由于步骤S701、S702、S704分别与图6的步骤S601、S602、S606相同,所以省略说明。
在步骤S703中控制单元130执行与室内的人的位置和活动量相应的风向控制。
例如,空调室内的右侧区域中存在活动量140W/m2的室内的人,左侧区域中存在活动量60W/m2的室内的人的情况下,控制单元130依次反复向右侧区域在7sec中输送冷风,之后,向左侧区域在3sec中输送冷风这样的控制。由此,由于进行与位于各区域内的室内的人的活动量的比(7:3)相应的风向控制,所以能够提供对室内的人而言舒适的空气调节环境。
<效果>
根据本实施方式的空调机A,通过对于由人体检测部131取得的人体信息和由脸部检测部132取得的脸部信息用标签值关联,能够适当地检测空调室内的人。
此外,关于由人体检测部131和脸部检测部132双方识别出的室内的人,通过优先使用脸部图像计算移动量,能够准确地计算室内的人的移动量。
此外,对于被人体检测部131检测出、而没有被脸部检测部132检测出的室内的人使用人体信息计算移动量。从而,在室内的人背对拍摄单元110的情况、或因逆光不能检测出室内的人的脸的情况下,也能够适当地计算移动量。
此外,在脸部检测处理中以较小的像素间隔检测室内的人的脸部,而脸部区域是人体整体的区域的一部分。从而,与以较小的像素间隔检测室内的人的全身的情况相比能够减少运算量,能够准确地捕捉室内的人的动作。
此外,进行人体检测处理时,与脸部检测处理相比以较大的像素间隔检测室内的人的人体。由此,能够减轻控制单元130进行人体检测处理时的处理负载。
此外,本实施方式的空调机A中,基于左右上下方向的移动量和进深方向的移动量计算每规定时间的室内的人的移动量。从而,能够准确地计算每个室内的人的移动量。
此外,由于根据空调室内的活动量的总和、或者根据空调室内的活动量的分布和室内的人的位置进行细致的空气调节控制,所以能够实现对各室内的人而言舒适的空气调节控制。
《第二实施方式》
第二实施方式中,首先,基于根据用户的操作从遥控器Re输入的用户信息和由拍摄单元110拍摄的用户的脸部图像信息,进行与特定的用户对应的空气调节控制,这一点与第一实施方式不同。从而,对于该不同的部分进行说明,省略关于其他部分的说明。
(1.用户信息的登录的处理流程)
本实施方式中,首先,一边控制单元130与遥控器Re相互进行通 信,一边对用户要求用户信息的输入,将通过遥控器接收部Q输入的用户信息保存到存储单元(第一存储单元)140。
此处,用户信息指的是用户名、年龄、性别、怕热或怕冷等与特定的用户相关的信息。根据用户的操作从遥控器Re通过遥控器接收部Q输入表示“开始登录处理”的信息时,控制单元130一边与遥控器Re相互进行通信,一边对用户要求逐次输入上述用户信息。
然后,控制单元130将通过遥控器接收部Q接收的该用户信息保存到存储单元(第一存储单元)140。
接着,控制单元130对于用户要求站在设置于室内机100的拍摄单元110的正面,用脸部图像检测部检测该用户的脸部,与登录的用户信息关联地保存到存储单元140。
其中,取得关于多个用户的用户信息时,控制单元130对各用户附加不同的识别记号。
(2.与识别结果相应的空气调节控制)
图18是表示控制单元进行的处理的流程的流程图。
由于图18中所示的步骤S201~205与图4中所示的步骤S101~S105相同,所以省略说明。
在步骤S206中,控制单元130执行个人认证的处理。即,通过对步骤S205中取得的一个或多个脸部图像与上述登录处理时登录的脸部图像进行比较来执行个人认证。其中,关于个人认证,只要采用使用特征矢量等的公知的方法即可,所以省略说明。
由于步骤S207~S211与图4所示的步骤S106~S110相同,所以省略说明。
步骤S212中控制单元130根据识别出的用户计算空气调节控制的修正值。即,在检测出存储单元140中存储的用户的情况下,控制单元130从存储单元140读出与该用户对应的用户信息。然后,根据该用户信息和步骤S209中累计的活动量计算空气调节控制的修正值。
例如,供冷运转时检测出脸部的用户为“怕热”的情况下,控制单元130使设定温度比通常的空气调节控制低规定值。然后,控制左右风向板104和上下风向板105的朝向,向该用户输送冷风。
由此,能够执行与登录过的用户信息对应的细致的空气调节控制。
其中,图18所示的例子中,每规定时间Δt1进行个人认证,但是不限于此。例如,也可以每规定时间Δt1×N(参照图18)、或每其他预先设定的规定时间进行用户认证。
<效果>
根据本实施方式的空调机A,预先使用拍摄单元110拍摄用户的脸部,取得该用户的脸部图像信息。从而,在空调室内存在登录过的用户的情况下,能够可靠地检测该用户。
此外,在检测出登录过的用户的情况下,参照由该用户输入的用户信息,根据该用户信息计算空气调节控制的修正值。
从而,能够实行与登录过的各用户对应的细致的空气调节控制。
《第三实施方式》
第三实施方式是除了上述第一实施方式中的处理之外,还进行确定空调室内的房间布局的处理,执行与该处理结果相应的空气调节控制。从而,对于与第一实施方式重复的部分省略说明。
一般而言,在与设置空调机的室内机的墙相对的一侧,设置有门(通过其开闭,人能够出入空调室内的门)。从而,用拍摄单元110拍摄该门,能够确定门的位置。
(1.确定门区域的处理)
控制单元130将上述由人体检测处理或脸部检测处理检测出的室内的人的每时每刻的位置保存到存储单元(第二存储单元)140。然后,控制单元130将拍摄单元110的拍摄范围内检测出的室内的人的人体和脸部不再被检测到的区域,确定为存在门的“门区域”,将该门区域的位置信息保存到存储单元140(第二存储单元)。即,控制单元130将室内的人离开空调室内时,室内的人从视野(拍摄范围)中消失的区域确定为门区域。
其中,门区域的确定按照预先设定的每个期间进行。
(2.与门的位置相应的空气调节控制)
控制单元130,根据门区域中门的开闭状态和空调室内是否有人执行空气调节控制。
例如,在不进行定时地进行供冷运转的状态下门为打开、并且持续规定时间空调室内无人的情况下,控制单元130从室内的人离开起 规定时间后停止供冷运转。在这样的情况下,室内的人离开空调室内时忘记停止空调机A的运转的可能性较高,所以通过停止供冷运转,能够抑制不必要的电力消耗。
另外,门为打开的状态和关闭的状态,例如能够使用门区域的边界周围的图像模式识别。该识别处理中,利用门关闭的状态下门区域周围的图像模式大致相同的情况。
此外,上述例子中,说明了在门打开的情况下停止运转的情况,但不限于此。例如,也可以在门为打开的情况下,变更设定温度(在供冷运转的情况下使其上升,在供暖运转的情况下使其降低)以降低消耗设定。
<效果>
根据本实施方式的空调机A,能够用拍摄单元110适当地确定设置在空调室内的门的位置,进行与门的开闭状态相应的空气调节控制。即,空调室内的门为打开、室内空无一人的状态持续规定时间的情况下停止或减弱空气调节运转,由此能够抑制不必要的电力消耗。
《变形例》
以上,根据各实施方式说明了本发明的空调机A,而本发明的实施方式不限于这些记载,能够进行各种变更等。
例如,上述各实施方式中,说明了随时间经过地切换执行人体检测处理和脸部检测处理的情况(参照图4的步骤S104、S105),但是不限于此。
例如,也可以使人体检测处理和脸部检测处理并行地执行。在这种情况下,控制单元130基于由人体检测处理检测的人体头部与由脸部检测处理检测的脸部的位置关系每规定时间Δt2地判定室内的人的同一性。然后,基于各室内的人的脸部信息(只能检测出人体的情况下为人体信息)计算移动量和活动量,用与第一实施方式相同的方法执行空气调节控制的变更处理。
由此,与随时间经过地切换人体检测处理和脸部检测处理的情况相比,能够减小检测脸部或人体的时间间隔而使处理高速化,所以能够更准确地检测出室内的人的位置变化。
此外,上述实施方式中说明了通过设定温度的变更执行空气调节 控制的变更处理,但不限于此。
即,也可以根据活动量计算处理中计算的活动量,变更设定温度、室外机200所具有的压缩机电机(未图示)的旋转速度、对压缩机电机供给的最大电流量中至少一个控制信息,以变更后的该控制信息为目标值变更空气调节控制。
具体而言,控制单元130,在供冷运转时,活动量计算处理中计算的活动量的值越大,则越减小以下所示的(式4)的温度变更量ΔT1(≥0)、(式5)的旋转速度变更量ΔR1(≥0)和(式6)的最大电流变更量ΔA1(≥0)中的至少一个变更量。
设定温度+ΔT1=变更后的设定温度……(式4)
压缩机电机的旋转速度-ΔR1=变更后的压缩机电机的旋转速度
……(式5)
最大电流量-ΔA1=变更后的最大电流量……(式6)
另一方面,控制单元130,在供暖运转时,活动量计算处理中计算的活动量的值越大,则越增大以下所示的(式7)的温度变更量ΔT2(≥0)、(式8)的旋转速度变更量ΔR2(≥0)和(式9)的最大电流变更量ΔA2(≥0)中的至少一个变更量。
设定温度-ΔT2=变更后的设定温度 ……(式7)
压缩机电机的旋转速度-ΔR2=变更后的压缩机电机的旋转速度
……(式8)
最大电流量-ΔA2=变更后的最大电流量 ……(式9)
此外,上述第一实施方式中,说明了不推定室内的人的年龄和性别的例子,但不限于此。例如,也可以是控制单元130对每个基于人体与上述位置关系关联的室内的人,使用脸部检测部132的检测结果推定室内的人的年龄和性别。在这种情况下,控制单元130根据由活动量计算处理计算出的活动量和上述推定结果,执行空气调节控制的变更处理。
其中,关于室内的人的年龄和性别的推定处理的详情,省略说明。
此外,也可以推定室内的人的年龄和性别中的一方,根据该推定结果和活动量执行空气调节控制的变更处理。
此外,上述各实施方式中,说明了根据活动量的分布变更风向的 情况(参照图16、图17),但不限于此。即,也可以根据活动量计算处理中计算出的活动量变更室内机100所具有的室内风扇电机(未图示)的旋转速度。例如,在进行供冷运转时空调室内的活动量较大的情况下,控制单元130通过加快室内风扇电机的旋转速度来增大冷风的风量。
此外,也可以是变更上下风向板105的角度、左右风向板104的角度和室内风扇电机的旋转速度中的某一项。
此外,上述各实施方式中的脸部检测处理是对于拍摄到的图像的所有区域执行脸部检测处理,但不限于此。例如,也可以限定在由人体检测处理检测出的人体的头部周围的区域执行脸部检测处理。
由此,能够减轻控制单元130进行脸部检测处理时的处理负载。
此外,上述第三实施方式中,说明了作为房间的布局确定门的位置的情况,但不限于此。即,也可以判定室内机100从拍摄单元110来看设置在房间的右侧还是左侧,进行基于该判定结果的风向控制。
例如,通过检测室内图像的边缘判别从拍摄单元110来看室内机100设置在右侧还是设置在左侧。即,可以比较拍摄面上右侧墙壁的像的面积和左侧墙壁的像的面积,判定室内机100设置在面积较小一侧。
例如,在从拍摄单元110来看室内机100设置在右侧的情况下,认为室内机100的右侧面附近有墙壁。从而,通过偏向未设置室内机100的左侧送风,能够更高效地进行空气调节。
此外,第二实施方式中,说明了基于关于登录过的用户的用户信息进行空气调节控制的变更处理的情况,进而,还可以学习各用户的行动模式,进行基于该学习结果的空气调节控制。
例如,可以具有学习单元(未图示),该学习单元按照在存储单元(第一存储单元)140内保存为用户信息的每个用户,使用户在空调室内的位置与包括用户在室内时的设定温度和风向的空调信息关联地进行学习,生成行动模式信息。
在这种情况下,学习单元将学习到的行动模式信息与上述用户信息关联地保存到存储单元140。然后,控制单元130在脸部检测处理中识别出用户的情况下,从存储单元140读出与该用户对应的行动模式信息,基于该行动模式信息执行空气调节控制。
例如,在学习了以在供冷运转时使从室内机100输送的冷风不直接吹到特定的用户的方式行动的情况下,学习单元将该学习结果(行动模式信息)与用户信息关联地保存到存储单元140中。然后,控制单元130在脸部检测处理中检测出该用户的情况下,从存储单元140读出与该用户对应的行动模式信息,控制左右风向板104和上下风向板105的朝向从而使冷风不直接吹到该用户。
其中,上述学习单元执行的学习处理,例如能够使用分层神经网络。
此外,上述各实施方式中,检测出同一个室内的人的人体和脸部双方的情况下,优先使用脸部图像计算移动量,但不限于此。即,在这样的情况下,也可以优先使用人体图像计算移动量。
此外,上述各实施方式中,说明了拍摄单元110在室内机100的前面板106的左右方向中央的下部设置一台的情况,但不限于此。例如,也可以将拍摄单元设置在前面板106的右侧或左侧。
此外,还可以在前面板106设置多个拍摄单元。
此外,拍摄单元110也可以具有驱动单元(未图示)。例如,拍摄单元110与作为驱动单元的步进电机的轴连接,通过电机的运转在规定的角度的范围内往复。在这种情况下,电机为了对将规定的角度的范围内分割为多个区域的每个区域拍摄而停止,拍摄后为了使拍摄单元110朝向下一个区域而重新开始运转。其中,与拍摄单元110的驱动的速度相比,拍摄所需的时间充分短的情况下,步进电机也可以连续运转。
由此,能够使用视角窄而廉价的拍摄单元110。此外,通过配合每个区域的照度和亮度地变更噪声除去、脸部检测、人体检测等图像处理,能够以更高的精度进行脸部检测和人体检测、基于它们的位置和活动量的推定。进而,能够避免因装载多个视角窄而廉价的拍摄单元110而导致的成本提高、避免因确保多个拍摄单元110的设置空间而导致室内机的大型化。
此外,上述各实施方式和变形例能够适当组合。例如,可以将第二实施方式与第三实施方式组合,执行基于用户信息和房间布局的空气调节控制。