CN105204351B - 空调机组的控制方法及装置 - Google Patents

Abstract

本发明公开了一种空调机组的控制方法及装置。其中，该方法包括：获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；识别每帧视频图像中所包含的手势特征；根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；结合手势动作和显示屏当前显示的界面内容，生成控制信号；通过控制信号控制空调机组执行相应的功能。本发明解决了现有技术中通过触控或者按键的方式来控制空调机组而导致的控制操作不便捷的技术问题。

Description

空调机组的控制方法及装置

技术领域

本发明涉及机组控制领域，具体而言，涉及一种空调机组的控制方法及装置。

背景技术

随着经济的发展，人们对生活的需求越来越高。而空调是人们生活中必不可少的生活电器。而现有空调的显示屏控制方式是接触式的，特别是空调机组的显示屏控制。这种控制方式需要用户接触显示屏，操作不方便且使用次数多会损坏显示屏。在智能家居系统中，空调的控制也是通过手机APP控制，但这个控制方式需要WIFI的支持。智能家电和智能家居的出现更需要一种自然灵活的空调机组显示控制方式。

然而，现有技术中，空调机组显示屏的操作都是按键式和触摸点控式，这些都是接触式的操作方法，需要用户近距离操作显示屏，并且现有的显示屏控制方式对屏幕的设计要求高。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种空调机组的控制方法及装置，以至少解决现有技术中通过触控或者按键的方式来控制空调机组而导致的控制操作不便捷的技术问题。

根据本发明实施例的一个方面，提供了一种空调机组的控制方法，包括：获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；识别每帧视频图像中所包含的手势特征；根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；结合手势动作和显示屏当前显示的界面内容，生成控制信号；通过控制信号控制空调机组执行相应的功能。

进一步地，根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作包括：依序读取每帧视频图像中包含的手势特征；获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作。

进一步地，当一组手势动作模型包括一个起始动作模型和一个结束动作模型时，其中，在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作包括：依序将每帧视频图像中所包含的手势特征依次与起始动作模型进行匹配；在第i帧视频图像中所包含的手势特征与起始动作模型匹配成功的情况下，依序将第i帧之后的每帧视频图像中所包含的手势特征依次与结束动作模型进行匹配；在第j帧视频图像中包含的手势特征与结束动作模型匹配成功的情况下，将起始动作模型和结束动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作，其中，i和j为自然数，且j大于i。

进一步地，结合手势动作和显示屏当前显示的界面内容，生成控制信号包括：读取显示屏当前显示的界面内容中包含的至少一个控件；根据预设规则，将手势动作映射为第一控件，其中，第一控件为显示屏当前显示的界面内容中包含的其中一个控件；根据第一控件的预设功能，生成控制信号。

进一步地，在根据预设规则，将手势动作映射为第一控件之后，结合手势动作和显示屏当前显示的界面内容，生成控制信号还包括：更新第一控件的显示状态，用于表征用户对空调机组进行的手势操作已被识别。

进一步地，在识别每帧视频图像中所包含的手势特征之前，方法还包括：设置摄像头拍摄手势操作的参数，使得摄像头生成多帧视频图像的速率与识别每帧视频图像中所包含的手势特征的速率相匹配。

进一步地，在根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作之后，方法还包括：当手势动作为关闭动作时，控制摄像头关闭。

根据本发明实施例的另一方面，还提供了一种空调机组的控制装置，包括：获取模块，用于获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；识别模块，用于识别每帧视频图像中所包含的手势特征；确定模块，用于根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；生成模块，用于结合手势动作和显示屏当前显示的界面内容，生成控制信号；控制模块，用于通过控制信号控制空调机组执行相应的功能。

进一步地，确定模块包括：第一读取单元，用于依序读取每帧视频图像中包含的手势特征；获取单元，用于获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；匹配单元，用于在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作。

进一步地，当一组手势动作模型包括一个起始动作模型和一个结束动作模型时，其中，匹配单元包括：第一匹配子单元，用于依序将每帧视频图像中所包含的手势特征依次与起始动作模型进行匹配；第二匹配子单元，用于在第i帧视频图像中所包含的手势特征与起始动作模型匹配成功的情况下，依序将第i帧之后的每帧视频图像中所包含的手势特征依次与结束动作模型进行匹配；第三匹配子单元，用于在第j帧视频图像中包含的手势特征与结束动作模型匹配成功的情况下，将起始动作模型和结束动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作，其中，i和j为自然数，且j大于i。

进一步地，生成模块包括：第二读取单元，用于读取显示屏当前显示的界面内容中包含的至少一个控件；映射单元，用于根据预设规则，将手势动作映射为第一控件，其中，第一控件为显示屏当前显示的界面内容中包含的其中一个控件；生成单元，用于根据第一控件的预设功能，生成控制信号。

进一步地，生成模块还包括：显示单元，用于更新第一控件的显示状态，用于表征用户对空调机组进行的手势操作已被识别。

进一步地，装置还包括：设置模块，用于设置摄像头拍摄手势操作的参数，使得摄像头生成多帧视频图像的速率与识别每帧视频图像中所包含的手势特征的速率相匹配。

进一步地，装置还包括：关闭模块，用于当手势动作为关闭动作时，控制摄像头关闭。

在本发明实施例中，采用获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像的方式，通过识别每帧视频图像中所包含的手势特征，并根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；达到了结合手势动作和显示屏当前显示的界面内容，生成控制信号的目的，从而实现了通过控制信号控制空调机组执行相应的功能的技术效果，进而解决了现有技术中通过触控或者按键的方式来控制空调机组而导致的控制操作不便捷的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例一的空调机组的控制方法的流程示意图；

图2是根据本发明实施例一的一种可选地空调机组的控制方法的流程示意图；

图3是根据本发明实施例一的一种可选地确定与显示屏当前显示的界面内容相对应的手势动作的流程示意图；

图4是根据本发明实施例一的一种可选地显示控制界面的示意图；以及

图5是根据本发明实施例二的空调机组的控制装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例1

根据本发明实施例，提供了一种空调机组的控制方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图1是根据本发明实施例一的空调机组的控制方法的流程示意图，如图1所示，该方法包括如下步骤：

步骤S102，获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；

在本发明实施例上述步骤S102中，空调机组是指商用空调，比如水冷螺杆机、离心机、模块机等大型机组。空调机组的显示屏是用来显示和保存机组需要查看和修改的参数，是一个专门用来供使用者了解机组运行状态的显示设备。显示界面指显示屏中用于显示的区域，显示界面中显示的内容例如可以包括图片、按键、文本和页面标签等。摄像头安装于空调机组中，可选地，摄像头安装于显示屏的水平中位或垂直中位，便于当用户在正面查看显示界面时，无偏角捕捉用户的手势操作。摄像头用来获取图像的数据供处理器处理，是显示屏实现手势操作的数据捕捉设备。在用户对大型机组的显示屏中当前显示的界面内容进行远距离手势操作时，可以通过启动摄像头拍摄用户作出的动态手势，并生成多帧视频图像。

步骤S104，识别每帧视频图像中所包含的手势特征；

在本发明实施例上述步骤S104中，通过图像识别技术，处理器在识别一帧视频图像时，可以获取该帧视频图像中包含的手势特征。手势特征可以用一些手势的特有属性来表示，例如手的轮廓、颜色、纹理和手指的弧度等。

步骤S106，根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；

在本发明实施例上述步骤S106中，根据识别出的每帧视频图像中包含的手势特征，可以通过手势识别流程，判断多针视频图像所对应的一个手势动作。由于同一时间只可能出现同一显示界面，因此将判断出的该手势动作视为在当前时间，用户对当前显示的界面内容进行操作的手势动作。

步骤S108，结合手势动作和显示屏当前显示的界面内容，生成控制信号；

在本发明实施例上述步骤S108中，根据显示屏当前显示的界面，将该手势动作对应针对当前显示的界面的具体的控制动作，并生成控制信号。在一种应用场景中，显示屏显示的界面可以有一种固定的框架结构，只有该框架结构中的部分参数发生变化，此时，用户可以通过同一个手势动作在不同的界面中执行基本类似的控制，例如在温度显示界面，用户作出A手势动作来上调温度控制参数，而在湿度显示界面还可以作出该A手势动作来上调湿度控制参数。在另一种应用场景中，显示屏显示的界面可以没有固定的框架结构，不同的显示界面对应不同的框架结构，此时，用户的同一个手势操作可能对应不同的控制功能，例如，在显示预览界面，用户作出B手势动作时期望上滑显示页面，在参数设置页面，用户作出B手势动作时期望上调参数。因此，同一手势动作所对应的具体的控制含义，需要结合当前显示的界面内容来判断。

步骤S110，通过控制信号控制空调机组执行相应的功能。

在本发明实施例上述步骤S110中，控制空调机组的控制器执行上述控制信号，以实现通过手势操作对该空调机组进行控制的技术效果。

在本发明实施例中，采用获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像的方式，通过识别每帧视频图像中所包含的手势特征，并根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；达到了结合手势动作和显示屏当前显示的界面内容，生成控制信号的目的，从而实现了通过控制信号控制空调机组执行相应的功能的技术效果，进而解决了现有技术中通过触控或者按键的方式来控制空调机组而导致的控制操作不便捷的技术问题。通过手势操作代替原来的按键操作和触摸电控操作，可以减少因为用户接触操作而造成显示屏损坏和减轻显示屏的屏幕设计要求，同时提升了显示屏控制的快捷方便性。

此处需要说明的是，随着传感技术的快速发展，手势操作成为一种新的交互技术。手势操作具有自然、直观、易于学习的特点，将成为未来交互的主要控制方式。现有技术中空调机组显示屏的操作都是按键式和触摸点控式，这些都是接触式的操作方法，需要用户近距离操作显示屏，根本不能隔空按照用户的指示来控制显示屏，并且现有的显示屏控制方式对显示屏的设计要求高。

可选地，在本发明实施例中，步骤S106：根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作包括：

步骤S1062，依序读取每帧视频图像中包含的手势特征；

在本发明实施例上述步骤S1062中，可以是识别一帧视频图像后即读取该帧视频图像中包含的手势特征，也可以是识别多帧视频图像后，按顺序读取多帧视频图像中包含的手势特征。

步骤S1064，获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；

在本发明实施例上述步骤S1064中，一组手势动作模型中包含至少一个手势动作模型。当待识别的手势动作为静态手势时，一组手势动作模型中可以仅包含一个模型。当待识别的手势动作为动态手势时，一组手势动作模型中可以包含多个模型，其中，多个手势动作模型按顺序组合成一组手势动作模型后，可唯一标识一个手势动作。

步骤S1066，在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作。

在本发明实施例上述步骤S1066中，当一组手势动作模型包含多个模型时，鉴于一组手势动作模型具有一定的顺序性，因此，也需要按照次序判断多帧视频图像中包含的手势特征逐一与一组手势动作模型中包含的每个模型进行匹配，只有多帧视频图像中包含的多个手势特征按照次序与一组手势动作模型中的多个模型匹配成功时，才认为视频图像中包含的手势特征与一组手势动作模型匹配成功。

此处需要说明的是，在连续图像数据帧中出现的相同手势特征不影响匹配结果。例如，使用者做出手势的时间可能为3s，在3s内摄像头可能采集了90帧数据。其中，可能会出现多帧视频图像数据中的手势特征基本相同的情况，因此，判断出只要有一帧图像与一个模型匹配后，则判断后续帧图像与下一个模型是否匹配即可。只有当帧图像按照次序与每一个模型匹配后，才认为该视频图像与一组手势动作模型匹配。

由上可知，上述步骤S1062至步骤S1066提供了一种确定显示屏当前显示的界面内容相对应的手势动作的可选方案。通过上述方案，提高了确定手势动作的精确度。

可选地，在步骤S1064：获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作之前，上述方法还包括：

步骤S1：将一个动态手势动作拆分为多个静态手型；

步骤S2：对每一个静态手型，采集多个手势训练样本；

步骤S3：使用多个手势训练样本来训练该一个静态手型数据，以建立该静态手型相对应的手势动作模型。

可选地，在本发明实施例中，当一组手势动作模型包括一个起始动作模型和一个结束动作模型时，步骤S1066：在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作包括：

步骤S10662，依序将每帧视频图像中所包含的手势特征依次与起始动作模型进行匹配；

在本发明实施例上述步骤S10662中，示例性的，用一个起始动作模型和一个结束动作模型的组合，来唯一标识一个手势动作。起始动作模型表征手势动作开始时的手势特征，结束动作模型表征手势动作结束时的手势特征。

步骤S10664，在第i帧视频图像中所包含的手势特征与起始动作模型匹配成功的情况下，依序将第i帧之后的每帧视频图像中所包含的手势特征依次与结束动作模型进行匹配；

在本发明实施例上述步骤S10664中，可以以任意一帧作为第一帧。可选地，在循环执行步骤S10662至步骤S10666的方案时，可以将与一个结束动作模型相匹配的一帧视频图像作为分界，以该帧视频图像的后一帧视频图像作为第一帧，以实现往复循环，而不会对计数器提出过高的要求。

步骤S10666，在第j帧视频图像中包含的手势特征与结束动作模型匹配成功的情况下，将起始动作模型和结束动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作，其中，i和j为自然数，且j大于i。

在本发明实施例上述步骤S10666中，示例性的，第2帧视频图像中的手势特征与起始动作模型匹配，然后按序判断第3帧、第4帧等视频图像中的手势特征是否与结束动作模型匹配，直至判断出第8帧视频图像中的手势特征与结束动作模型匹配，则将第2帧至第8帧视频图像对应的手势操作，与该起始动作模型和结束动作模型的组合建立关联关系。

由上可知，上述步骤S10662至步骤S10666提供了一种确定显示屏当前显示的界面内容相对应的手势动作的可选方案，实现了判断视频图像所对应的手势操作为哪一种可识别的手势动作的效果。

此处需要说明的是，上述方案仅通过一组手势动作模型包括一个起始动作模型和一个结束动作模型为例，示例性的说明了一种确定显示屏当前显示的界面内容相对应的手势动作。本领域技术人员在不付出创造性劳动的情况下，将上述方案作出适应性修改，以适用当一组手势动作模型包括三个及以上模型时的方案，也应当属于本发明的保护范围。

可选地，在本发明实施例中，步骤S108：结合手势动作和显示屏当前显示的界面内容，生成控制信号包括：

步骤S1082，读取显示屏当前显示的界面内容中包含的至少一个控件；

在本发明实施例上述步骤S1082中，控件为显示界面的一个显示单元，控件可以包括：图像控件(用于显示图像)、文本控件(用于显示文本)、编辑控件(用来接收并显示用户输入的字符)、按钮控件(用来接收用户命令)、选择控件(用于接收用户选择并显示被选择的情况)等等，囿于篇幅，此处无法穷尽列举。

步骤S1084，根据预设规则，将手势动作映射为第一控件，其中，第一控件为显示屏当前显示的界面内容中包含的其中一个控件；

在本发明实施例上述步骤S1084中，当前显示的界面内容所支持的手势类别，可以通过当前显示的界面内容所包含的控件来确定。示例性的，当前显示的界面内容中包括一个确认按钮控件和若干选择控件时，可预先将第一手势动作对应为在不同的选择控件之间进行切换，其中，至少有一个选择控件处于活动状态，切换后，处于活动状态的选择控件发生变化；将第二手势动作对应为对当前活动的选择控件在选择与被选择之间切换；将第三手势动作对应为确认按钮被触发时的状态。预先建立好的对应关系可视为上述预设规则。可以通过查找方式将手势动作映射为第一控件。

步骤S1086，根据第一控件的预设功能，生成控制信号。

在本发明实施例上述步骤S1086中，可以预先赋予每个控件一个功能，例如，当前显示的界面内容中包含多个图象控件时，第一图像控件显示温度图标，第二图像控件显示湿度图标，第三图像控件显示警示图标，当手势动作映射为第一图像控件时，可生成显示机组温度的控制信号；当手势动作映射为第二图像控件时，可生成显示机组湿度的控制信号；当手势动作映射为第三图像控件时，可生成显示机组的警示信息的控制信号。

由上可知，上述步骤S1082至步骤S1086提供了一种结合手势动作和显示屏当前显示的界面内容，生成控制信号的可选方案。通过将手势动作与当前显示的界面内容结合考虑，确定该手势动作在当前显示界面下的具体控制内容，实现了当显示的界面内容不一致时，还可以根据预设规则识别手势动作所对应的控制内容的效果，使得本发明实施例中的空调机组控制方法在实际中有更高的灵活性。

可选地，在本发明实施例中，在步骤S1084：根据预设规则，将手势动作映射为第一控件之后，步骤S108：结合手势动作和显示屏当前显示的界面内容，生成控制信号还包括：

步骤S1085：更新第一控件的显示状态，用于表征用户对空调机组进行的手势操作已被识别。

在本发明实施例上述步骤S1085中，例如，改变对应控件的颜色、大小、亮度、纵横比、灰度等等特征，使得用户能够直观的看出该空调机组已经识别出当前的手势动作，并且即将执行该第一控件所对应控制功能。

可选地，在本发明实施例中，在步骤S104：识别每帧视频图像中所包含的手势特征之前，空调机组的控制方法还包括：

步骤S103：设置摄像头拍摄手势操作的参数，使得摄像头生成多帧视频图像的速率与识别每帧视频图像中所包含的手势特征的速率相匹配。

在本发明实施例上述步骤S103中，通过优化图像处理算和调整处理器处理的图像大小，可以使得显示屏处理器的图像处理速度和摄像头采集图像的速度一致，以保证显示屏的操作和操作者的手势的实时性，实现用户和机组显示屏间的实时体感操作。

可选地，在本发明实施例中，在步骤106：根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作之后，空调机组的控制方法还包括：

步骤S112：当手势动作为关闭动作时，控制摄像头关闭。

在本发明实施例上述步骤S112中，可以通过预留几种手势动作的方式，通过直接赋予预留的手势动作某一控制功能的方式，使得预留的手势动作不用与当前显示的界面内容结合，即可执行预留的手势动作所对应的功能。

图2是根据本发明实施例一的一种可选地空调机组的控制方法的流程示意图；

步骤S20，开始。

具体的，当感应到靠操作者进行手势操作时，启动摄像头采集用户正在进行的手势操作，

步骤S21，摄像头采集图像。

具体的，摄像头生成一帧数据，发送至空调机组的处理器。

步骤S22，处理器识别。

具体的，处理器对一帧图像中的手势特征进行识别；可选地，摄像头采集一帧数据就传输给机组显示屏的处理器进行图像预处理和手势识别，从而提取有效手势。

步骤S23，判断是否为有效手势。

具体的，处理器结合之前若干帧图像中的手势特征，判断该若干帧中的手势特征是否能构成一个有效手势，在判断为是的情况下，执行步骤S24；在判断为否的情况下，返回步骤S21：处理器接收摄像头生成的下一帧图像数据；

步骤S24，生成控制信号。

具体的，处理器将识别出的有效手势对应为一个控制信号；

步骤S25，控制对象。

具体的，处理器使用该控制信号对对象进行控制动作。

步骤S26，判断是否控制功能切换。

具体的，用户是否要切换控制功能，在是的情况下执行步骤S27，在否的情况下返回执行步骤S21；

步骤S27，改变手势。

具体的，用户改变手势操作，并返回步骤S21。

由上可知，图2提供的可选技术方案可以在需要操作空调机组显示屏时，启动显示屏中的摄像头来采集屏幕前方一定范围内的视频图像；并提取手势特征，实时跟踪到该手势特征，然后将处理器手势识别提取的有效手势作为控制信号来实现相应的控制功能，直接使用该手势特征控制空调机组的显示屏，实现了用户和机组显示屏间的实时体感操作。

图3是根据本发明实施例一的一种可选地确定与显示屏当前显示的界面内容相对应的手势动作的流程示意图；当一组手势动作模型包含一个起始动作模型和一个结束动作模型时，该步骤又包括如下具体实施步骤：

步骤S31，接收一帧视频图像，并执行步骤S32。

步骤S32，提取当前帧视频图像中包含的手势特征，并执行步骤S33。

具体的，在处理器处理一个连贯动作时，处理器处理该连贯动作的每一帧数据。处理器处理一帧数据就会得到该帧数据的手势特征(手势特征是有一些手势的特有属性来表示手势，如手的轮廓、颜色、纹理和手指的弧度等)，

步骤S33，判断是否处于识别模式中，其中，在判断为是的情况下执行步骤S36，在判断为否的情况下执行步骤S34。

步骤S34，判断是否与起始动作模型匹配，其中，在判断为是的情况下执行步骤S35，在判断为否的情况下返回执行步骤S31。

具体的，当该帧数据的手势特征满足起始动作模型时，认为该数据帧为手势起始帧。

步骤S35，进入识别模式，并返回执行步骤S31。

步骤S36，添加当前帧视频图像中包含的手势特征至手势特征集，并执行步骤S37。

步骤S37，判断是否与结束动作模型匹配，其中，在判断为是的情况下执行步骤S38，在判断为否的情况下返回执行步骤S31。

步骤S38，退出识别模式，并执行步骤S39。

步骤S39，将当前手势特征集与手势动作匹配，并返回执行步骤S31。

具体的，当遇到手势起始帧时，处理器接着处理数据帧，直到提取的手势特征匹配上结束动作模型才算完成一个手势，认为该数据帧为手势结束帧，并判定该手势才是有效手势，该手势的类别由该手势起始动作模型和结束动作模型确定。其中，对于每一种手势都会使用事先采集的手势样本训练起始动作数据和结束动作数据分别来建立手势起始动作模型和手势结束动作模型。

图4是根据本发明实施例一的一种可选地显示控制界面的示意图；如图4所示，在空调机组的显示屏中显示的每个页面都有一个控件，在图本可选实施例中或称按键导航；如图4所示，显示的控件包括：向上控件41、向下控件42、向左控件43、向右控件44、及确认控件45。

下面结合图4中所示的控制界面，对手势动作与控件的映射规则进行详细说明：

1.从手处于平躺到手势完全朝向的手势动作，映射为向上控件41，示例性的，向上控件41的预设功能可以为上调参数；

2.从手处于平躺到手势完全朝下的手势动作，映射为向下控件42，示例性的，向下控件42的预设功能可以为下调参数；

3.从手处于平躺到手势完全向左的手势动作，映射为向左控件43，示例性的，向左控件43的预设功能可以为向左切换界面；

4.从手处于平躺到手势完全向右的手势动作，映射为向右控件44，示例性的，向右控件44的预设功能可以为向右切换界面。

5.从手张开到拳头的手势动作，映射为确定控件45，示例性的，确定控件45，的第一预设功能可以为确定并关闭；

6.从拳头到手张开的手势动作，映射为确定控件45，示例性的，确定控件45的第二预设功能可以为确定并打开；其中，第5和第6可选择一次确定控件后，切换确定控件的功能，例如，播放中按一下暂停按键则暂停，再按一下暂停按键则继续播放。

实施例2

根据本发明实施例，还提供了一种空调机组的控制装置实施例，该空调机组的控制装置主要用于执行本发明实施例所提供的空调机组的控制方法，本发明上述实施例提供的空调机组的控制方法也可以通过该空调机组的控制装置来执行。以下对本发明实施例所提供的空调机组的控制装置做具体介绍，在本发明方法实施例中进行过说明的不再赘述。

图5是根据本发明实施例二的空调机组的控制装置的结构示意图。如图5所示，根据本发明实施例的空调机组的控制装置包括：采集模块51、识别模块52、确定模块53、生成模块54以及控制模块55，其中：

获取模块51，用于获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；

识别模块52，用于识别每帧视频图像中所包含的手势特征；

确定模块53，用于根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；

生成模块54，用于结合手势动作和显示屏当前显示的界面内容，生成控制信号；

控制模块55，用于通过控制信号控制空调机组执行相应的功能。

由上可知，本发明实施例上述获取模块51、识别模块52、确定模块53、生成模块54以及控制模块55，采用获取空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像的方式，通过识别每帧视频图像中所包含的手势特征，并根据每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；达到了结合手势动作和显示屏当前显示的界面内容，生成控制信号的目的，从而实现了通过控制信号控制空调机组执行相应的功能的技术效果，进而解决了现有技术中通过触控或者按键的方式来控制空调机组而导致的控制操作不便捷的技术问题。通过手势操作代替原来的按键操作和触摸电控操作，可以减少因为用户接触操作而造成显示屏损坏和减轻显示屏的屏幕设计要求，同时提升了显示屏控制的快捷方便性。

此处需要说明的是，上述采集模块51、识别模块52、确定模块53、生成模块54以及控制模块55，对应于实施例一中的步骤S102至步骤S110，五个模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，确定模块53包括：第一读取单元、获取单元以及匹配单元，其中，

第一读取单元，用于依序读取每帧视频图像中包含的手势特征；

获取单元，用于获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；

匹配单元，用于在每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作。

由上可知，本发明实施例上述第一读取单元、获取单元以及匹配单元提供了一种确定显示屏当前显示的界面内容相对应的手势动作的可选方案。通过上述方案，提高了确定手势动作的精确度。

此处需要说明的是，上述第一读取单元、获取单元以及匹配单元，对应于实施例一中的步骤S1062至步骤S1066，两个模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，当一组手势动作模型包括一个起始动作模型和一个结束动作模型时，其中，匹配单元包括：第一匹配子单元、第二匹配子单元以及第三匹配子单元，其中，

第一匹配子单元，用于依序将每帧视频图像中所包含的手势特征依次与起始动作模型进行匹配；

第二匹配子单元，用于在第i帧视频图像中所包含的手势特征与起始动作模型匹配成功的情况下，依序将第i帧之后的每帧视频图像中所包含的手势特征依次与结束动作模型进行匹配；

第三匹配子单元，用于在第j帧视频图像中包含的手势特征与结束动作模型匹配成功的情况下，将起始动作模型和结束动作模型所表征的手势动作确定为与显示屏当前显示的界面内容相对应的手势动作，其中，i和j为自然数，且j大于i。

由上可知，本发明实施例上述第一匹配子单元、第二匹配子单元以及第三匹配子单元提供了一种确定显示屏当前显示的界面内容相对应的手势动作的可选方案，实现了判断视频图像所对应的手势操作为哪一种可识别的手势动作的效果。

此处需要说明的是，上述第一匹配子单元、第二匹配子单元以及第三匹配子单元，对应于实施例一中的步骤S10662至步骤S10666，三个模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，生成模块54包括：第二读取单元、映射单元以及生成单元，其中，

第二读取单元，用于读取显示屏当前显示的界面内容中包含的至少一个控件；

映射单元，用于根据预设规则，将手势动作映射为第一控件，其中，第一控件为显示屏当前显示的界面内容中包含的其中一个控件；

生成单元，用于根据第一控件的预设功能，生成控制信号。

由上可知，本发明实施例上述第二读取单元、映射单元以及生成单元提供了一种结合手势动作和显示屏当前显示的界面内容，生成控制信号的可选方案。通过将手势动作与当前显示的界面内容结合考虑，确定该手势动作在当前显示界面下的具体控制内容，实现了当显示的界面内容不一致时，还可以根据预设规则识别手势动作所对应的控制内容的效果，使得本发明实施例中的空调机组控制方法在实际中有更高的灵活性。

此处需要说明的是，上述第二读取单元、映射单元以及生成单元，对应于实施例一中的步骤S1082至步骤S1086，三个模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，生成模块54还包括：显示单元，其中，

显示单元，用于更新第一控件的显示状态，用于表征用户对空调机组进行的手势操作已被识别。

由上可知，本发明实施例上述显示单元通过改变对应控件的颜色、大小、亮度、纵横比、灰度等等特征，使得用户能够直观的看出该空调机组已经识别出当前的手势动作，并且即将执行该第一控件所对应控制功能。

此处需要说明的是，上述显示单元，对应于实施例一中的步骤S1085，模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，空调机组的控制装置还包括：设置模块，其中，

设置模块用于设置摄像头拍摄手势操作的参数，使得摄像头生成多帧视频图像的速率与识别每帧视频图像中所包含的手势特征的速率相匹配。

由上可知，本发明实施例上述设置模块通过优化图像处理算法和调整处理器处理的图像大小，可以使得显示屏处理器的图像处理速度和摄像头采集图像的速度一致，以保证显示屏的操作和操作者的手势的实时性，实现用户和机组显示屏间的实时体感操作。

此处需要说明的是，上述设置模块，对应于实施例一中的步骤S103，模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

可选地，在本发明实施例中，空调机组的控制装置还包括：关闭模块，其中，

关闭模块，用于当手势动作为关闭动作时，控制摄像头关闭。

由上可知，本发明实施例上述关闭模块可以通过预留几种手势动作的方式，通过直接赋予预留的手势动作某一控制功能的方式，使得预留的手势动作不用与当前显示的界面内容结合，即可执行预留的手势动作所对应的功能。

此处需要说明的是，上述关闭模块，对应于实施例一中的步骤S112，两个模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例一所公开的内容。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种空调机组的控制方法，其特征在于，包括：

获取所述空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；

识别每帧视频图像中所包含的手势特征；

根据所述每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；

结合所述手势动作和所述显示屏当前显示的所述界面内容，生成控制信号；

通过所述控制信号控制所述空调机组执行相应的功能；

其中，根据所述每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作包括：

依序读取每帧视频图像中包含的手势特征；

获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；

在所述每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与所述显示屏当前显示的界面内容相对应的手势动作；

其中，当一组手势动作模型包括一个起始动作模型和一个结束动作模型时，其中，在所述每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与所述显示屏当前显示的界面内容相对应的手势动作包括：

依序将所述每帧视频图像中所包含的手势特征依次与所述起始动作模型进行匹配；

在第i帧视频图像中所包含的手势特征与所述起始动作模型匹配成功的情况下，依序将第i帧之后的所述每帧视频图像中所包含的手势特征依次与所述结束动作模型进行匹配；

在第j帧视频图像中包含的手势特征与所述结束动作模型匹配成功的情况下，将所述起始动作模型和所述结束动作模型所表征的手势动作确定为与所述显示屏当前显示的界面内容相对应的手势动作，其中，i和j为自然数，且j大于i。

2.根据权利要求1所述的方法，其特征在于，结合所述手势动作和所述显示屏当前显示的所述界面内容，生成控制信号包括：

读取所述显示屏当前显示的所述界面内容中包含的至少一个控件；

根据预设规则，将所述手势动作映射为第一控件，其中，所述第一控件为所述显示屏当前显示的界面内容中包含的其中一个控件；

根据所述第一控件的预设功能，生成所述控制信号。

3.根据权利要求2所述的方法，其特征在于，在根据预设规则，将所述手势动作映射为第一控件之后，结合所述手势动作和所述显示屏当前显示的所述界面内容，生成控制信号还包括：

更新所述第一控件的显示状态，用于表征对所述空调机组进行的所述手势操作已被识别。

4.根据权利要求1所述的方法，其特征在于，在识别每帧视频图像中所包含的手势特征之前，所述方法还包括：

设置所述摄像头拍摄所述手势操作的参数，使得所述摄像头生成所述多帧视频图像的速率与识别所述每帧视频图像中所包含的手势特征的速率相匹配。

5.根据权利要求1所述的方法，其特征在于，在根据所述每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作之后，所述方法还包括：

当所述手势动作为关闭动作时，控制所述摄像头关闭。

6.一种空调机组的控制装置，其特征在于，包括：

获取模块，用于获取所述空调机组中的摄像头所拍摄的手势操作，并生成多帧视频图像；

识别模块，用于识别每帧视频图像中所包含的手势特征；

确定模块，用于根据所述每帧视频图像中所包含的手势特征，确定与显示屏当前显示的界面内容相对应的手势动作；

生成模块，用于结合所述手势动作和所述显示屏当前显示的所述界面内容，生成控制信号；

控制模块，用于通过所述控制信号控制所述空调机组执行相应的功能；

其中，所述确定模块包括：

第一读取单元，用于依序读取每帧视频图像中包含的手势特征；

获取单元，用于获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；

匹配单元，用于在所述每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与所述显示屏当前显示的界面内容相对应的手势动作；

其中，所述确定模块包括：

第一读取单元，用于依序读取每帧视频图像中包含的手势特征；

获取单元，用于获取预存的至少一组手势动作模型，其中，一组手势动作模型用于表征一个手势动作；

匹配单元，用于在所述每帧视频图像中所包含的手势特征与其中一组手势动作模型匹配成功时，将匹配成功的一组手势动作模型所表征的手势动作确定为与所述显示屏当前显示的界面内容相对应的手势动作。

7.根据权利要求6所述的装置，其特征在于，所述生成模块包括：

第二读取单元，用于读取所述显示屏当前显示的所述界面内容中包含的至少一个控件；

映射单元，用于根据预设规则，将所述手势动作映射为第一控件，其中，所述第一控件为所述显示屏当前显示的界面内容中包含的其中一个控件；

生成单元，用于根据所述第一控件的预设功能，生成所述控制信号。

8.根据权利要求7所述的装置，其特征在于，所述生成模块还包括：

显示单元，用于更新所述第一控件的显示状态，用于表征对所述空调机组进行的所述手势操作已被识别。

9.根据权利要求6所述的装置，其特征在于，所述装置还包括：

设置模块，用于设置所述摄像头拍摄所述手势操作的参数，使得所述摄像头生成所述多帧视频图像的速率与识别所述每帧视频图像中所包含的手势特征的速率相匹配。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括：

关闭模块，用于当所述手势动作为关闭动作时，控制所述摄像头关闭。