CN111355992A - 空调电视机的控制方法、装置、空调电视机及存储介质 - Google Patents

空调电视机的控制方法、装置、空调电视机及存储介质 Download PDF

Info

Publication number
CN111355992A
CN111355992A CN202010165933.1A CN202010165933A CN111355992A CN 111355992 A CN111355992 A CN 111355992A CN 202010165933 A CN202010165933 A CN 202010165933A CN 111355992 A CN111355992 A CN 111355992A
Authority
CN
China
Prior art keywords
television
character
scene image
frame
air
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010165933.1A
Other languages
English (en)
Other versions
CN111355992B (zh
Inventor
宋德超
陈翀
李孟宸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Zhuhai Lianyun Technology Co Ltd
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Zhuhai Lianyun Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai, Zhuhai Lianyun Technology Co Ltd filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN202010165933.1A priority Critical patent/CN111355992B/zh
Publication of CN111355992A publication Critical patent/CN111355992A/zh
Application granted granted Critical
Publication of CN111355992B publication Critical patent/CN111355992B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Abstract

本申请提供一种空调电视机的控制方法、装置、空调电视机及存储介质，该方法包括获取电视屏幕正对范围内的场景图像；获取所述场景图像中的人物位置信息和人物动作信息；根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。同时结合了空调与电视的功能，不仅可以根据用户的位置信息和动作信息分别调整电视屏幕朝向和空调温度，使用户可以拥有更好的电视观看体验和空调使用体验，为用户提供方便，而且将电视和空调结合成一个设备，缩小了空调与电视占地空间。

Description

空调电视机的控制方法、装置、空调电视机及存储介质
技术领域
本申请涉及家电控制技术领域，特别地涉及一种空调电视机的控制方法、装置、空调电视机及存储介质。
背景技术
客厅是现今家庭内的最主要的活动空间，客厅的可用空间的增大能增加用户的生活体验，空调和电视是客厅中最主要的家用电器，同时也占据了较大的空间。
而且随着客厅面积增加，用户在客厅中的活动范围也相应增加，而传统电视屏幕只有固定朝向，只有限定范围内的用户才有最佳的观看体验，进而限制用户的活动范围。除此之外，用户在活动和静止时，需要的环境温度并不相同，随着运动越激烈，舒适的环境温度就越低，但是现有的空调只能提供固定的温度，需要用户手动的调节温度，影响用户体验。
发明内容
针对上述问题，本申请提供一种空调电视机的控制方法、装置、空调电视机及存储介质，解决了现有技术中电视不能根据用户位置调整屏幕朝向和空调不能根据用户动作信息调节温度以及电视和空调占地空间较大的问题。
第一方面，本申请提供了一种空调电视机的控制方法，所述方法包括：
获取电视屏幕正对范围内的场景图像；
获取所述场景图像中的人物位置信息和人物动作信息；
根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；
根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
根据本申请的实施例，优选的，上述空调电视机的控制方法中，所述获取所述场景图像中的人物位置信息的步骤，包括以下步骤：
将所述场景图像输入预先训练好的特征提取网络，以得到所述场景图像的特征图；
将所述场景图像的特征图输入下采样网络，以缩小所述场景图像的特征图的尺度；
将下采样后的所述场景图像的特征图输入预先训练好的检测网络，以得到多个不同尺度的人物位置框；
采用非极大值抑制的方法从多个不同尺度的所述人物位置框中选取最佳人物位置框，以获得所述场景图像中的人物位置信息；其中，所述人物位置信息至少包括所述最佳人物位置框的坐标。
根据本申请的实施例，优选的，上述空调电视机的控制方法中，所述检测网络包括多个预先训练好的且由卷积神经网络组成的子检测网络；所述将下采样后的所述场景图像的特征图输入预先训练好的检测网络，以得到多个不同尺度的人物位置框的步骤，包括以下步骤：
将下采样后的所述场景图像的特征图依次输入串联的多个所述子检测网络，以使每个所述子检测网络输出一个不同尺度的人物位置框，从而得到多个不同尺度的所述人物位置框；
其中，所述特征图在输入每个所述子检测网络之前，先经过上采样处理，经增大后才输入对应的所述子检测网络。
根据本申请的实施例，优选的，上述空调电视机的控制方法中，所述采用非极大值抑制的方法从多个不同尺度的所述人物位置框中选取最佳人物位置框，以获得所述场景图像中的人物位置信息的步骤，包括：
将多个不同尺度的所述人物位置框按照检测置信度从高到低排序；
根据期望抑制的程度，设置抑制阈值；
计算检测置信度最高的所述人物位置框与其它所述人物位置框的重叠面积比例，将其它所述人物位置框中所述重叠面积比例超过所述抑制阈值的所述人物位置框筛除，从而选出最佳人物位置框，以获得所述场景图像中的人物位置信息。
根据本申请的实施例，优选的，上述空调电视机的控制方法中，所述获取所述场景图像中的人物动作信息的步骤，包括以下步骤：
以所述最佳人物位置框为截取区域，从连续多帧的所述场景图像中截取连续多帧的子图像；
将每一帧的所述子图像分别输入所述特征提取网络，以得到每一帧的所述子图像对应的特征图；
将每一帧的所述子图像对应的特征图分别输入长短期记忆网络结构，识别出每一帧的所述子图像中的人物动作；
根据所有所述子图像中的人物动作获得所述场景图像中的人物动作信息。
根据本申请的实施例，优选的，上述空调电视机的控制方法中，所述根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内的步骤，包括以下步骤：
根据所述电视屏幕面向的指定范围，在所述场景图像上设置一个预设位置框；其中，所述预设位置框的大小大于所述人物位置框的大小；
当所述最佳人物位置框位于所述预设位置框外时，将电视屏幕旋转相应角度，使所述最佳人物位置框回到所述预设位置框内，以使所述人物处于所述电视屏幕面向的指定范围内。
根据本申请的实施例，优选的，上述空调电视机的控制方法中：
所述特征提取网络包括若干卷积层；和/或
所述下采样网络包括若干不填充卷积的卷积层。
第二方面，本申请提供一种空调电视机的控制装置，所述装置包括：
图像获取模块，用于获取电视屏幕正对范围内的场景图像；
信息获取模块，用于获取所述场景图像中的人物位置信息和人物动作信息；
第一调整模块，用于根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；
第二调整模块，用于根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
第三方面，本申请提供一种空调电视机，所述空调电视机包括存储器、控制器、空调、电视和摄像装置；；
所述存储器上存储有计算机程序，该计算机程序被所述控制器执行时，执行如第一方面中任一项所述的空调电视机的控制方法；
所述摄像装置，用于采集电视屏幕正对范围内的场景图像。
根据本申请的实施例，优选的，上述空调电视机中，所述空调、所述电视和所述摄像装置为一体结构。
第四方面，本申请提供一种存储介质，该存储介质存储的计算机程序，可被一个或多个处理器执行，可用来实现如第一方面中任一项所述的空调电视机的控制方法。
与现有技术相比，上述方案中的一个或多个实施例可以具有如下优点或有益效果：
本申请提供的一种空调电视机的控制方法、装置、空调电视机及存储介质，该方法包括获取电视屏幕正对范围内的场景图像；获取所述场景图像中的人物位置信息和人物动作信息；根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。同时结合了空调与电视的功能，不仅可以根据用户的位置信息和动作信息分别调整电视屏幕朝向和空调温度，使用户可以拥有更好的电视观看体验和空调使用体验，为用户提供方便，而且将电视和空调结合成一个设备，缩小了空调与电视占地空间。
附图说明
在下文中将基于实施例并参考附图来对本申请进行更详细的描述：
图1为本申请实施例提供的一种空调电视机的控制方法的流程示意图；
图2为本申请实施例提供的一种空调电视机的控制方法的另一流程示意图；
图3为本申请实施例提供的一种空调电视机的控制装置的连接框图；
图4为本申请实施例提供的一种空调电视机的连接框图。
在附图中，相同的部件使用相同的附图标记，附图并未按照实际的比例绘制。
具体实施方式
以下将结合附图及实施例来详细说明本申请的实施方式，借此对本申请如何应用技术手段来解决技术问题，并达到相应技术效果的实现过程能充分理解并据以实施。本申请实施例以及实施例中的各个特征，在不相冲突前提下可以相互结合，所形成的技术方案均在本申请的保护范围之内。
实施例一
请参阅图1，本申请提供一种空调电视机的控制方法，包括：
步骤S101：获取电视屏幕正对范围内的场景图像。
具体的，通过设置于电视屏幕上的摄像装置采集电视屏幕正对范围内的场景图像。所述场景图像内可能包括多个人物。
步骤S102：获取所述场景图像中的人物位置信息和人物动作信息。
具体的，获取所述场景图像中的人物位置信息的步骤，包括以下步骤：
步骤S102a：将所述场景图像输入预先训练好的特征提取网络，以得到所述场景图像的特征图；
步骤S102b：将所述场景图像的特征图输入下采样网络，以缩小尺度；
步骤S102c：将下采样后的所述场景图像的特征图输入预先训练好的检测网络，以得到多个不同尺度的人物位置框；
步骤S102d：采用非极大值抑制的方法从多个个不同尺度的人物位置框中选取最佳人物位置框，以获得所述场景图像中的人物位置信息；其中，所述人物位置信息至少包括所述最佳人物位置框的坐标。
所述特征提取网络包括若干卷积层，可以提取人物的人脸特征和肢体特征，通过大量的人物图像训练而成。所述下采样网络包括若干不填充卷积的卷积层，以使通过每层卷积层后得到的特征图都会缩小，起到下采样的作用。
所述检测网络包括多个预先训练好的且由卷积神经网络组成的子检测网络，步骤S102c具体包括：将下采样后的所述场景图像的特征图依次输入串联的多个所述子检测网络，以使每个所述子检测网络输出一个不同尺度的人物位置框，从而得到多个不同尺度的所述人物位置框；其中，所述特征图在输入每个所述子检测网络之前，先经过上采样处理，经增大后才输入对应的所述子检测网络。
步骤S102d具体包括：将多个不同尺度的所述人物位置框按照检测置信度从高到低排序；根据期望抑制的程度，设置抑制阈值；计算检测置信度最高的所述人物位置框与其他所述人物位置框的重叠面积比例(IoU，Intersection-over-Union，即两个位置框的交集部分面积除以它们的并集面积)，将其它所述人物位置框中所述重叠面积比例超过所述抑制阈值的所述人物位置框进行筛除，从而选出最佳人物位置框，以获得所述场景图像中的人物位置信息。
本实施例中，以所述人物位置框的数量为三个为例(不限于此，也可以是其它数量)。如果所述场景图像中包括多个人物时，三个不同尺度的人物位置框中包括不同比率的人物特征(检测置信度)，通过非极大值抑制的方法，从三个不同尺度的人物位置框选取包含所述人物特征概率最大的一个位置框，并筛除重复的位置框。因此，所述最佳人物位置框包含了最多人物特征，以尽可能地满足当前场景中更多人物的需求。
具体的，获取所述场景图像中的人物动作信息的步骤，包括以下步骤：
步骤S102e：以所述最佳人物位置框为截取区域，从连续多帧的所述场景图像中截取连续多帧的子图像；
步骤S102f：将每一帧的所述子图像分别输入所述特征提取网络，以得到每一帧的所述子图像对应的特征图；
步骤S102g：将每一帧的所述子图像对应的特征图分别输入长短期记忆网络(LSTM，Long Short Term Memory)结构，识别出每一帧的所述子图像中的人物动作；
步骤S102h：根据所有所述子图像中的人物动作获得所述场景图像中的人物动作信息。
其中，所述预设帧数一般为15帧(不限于此，也可以是其它帧数)。
步骤S103：根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内。
具体的，步骤S103包括以下步骤：
步骤S103a：根据所述电视屏幕面向的指定范围，在所述场景图像上设置一个预设位置框；其中，所述预设位置框的大小大于所述人物位置框的大小；
步骤S103b：当所述最佳人物位置框位于所述预设位置框外时，将电视屏幕旋转相应角度，使所述最佳人物位置框回到所述预设位置框内，以使所述人物处于所述电视屏幕面向的指定范围内。
其中，所述预设位置框一般位于所述场景图像的中心区域(不限于此，也可以是其它位置，以用户最佳观看角度为准)，以使电视屏幕可以实时正对用户。需要说明的是，可将摄像装置内置于电视屏幕上，使得摄像装置与电视屏幕一起旋转，实时采集电视屏幕正对范围内的场景图像。
实时采集当前场景图像并实时监测人物位置信息，以对电视屏幕进行实时地调整，使用户的使用体验更佳。若最佳人物位置框中某个人物走出当前位置框外时，那么重复步骤S101至步骤S102之后，最佳人物位置框的位置可能会发生变化，以使最佳人物位置框尽可能的包括更多的人物，这时最佳人物位置框可能会位于预设位置框外面，这就需要调整电视屏幕的角度，使最佳人物位置框重新回到预设位置框内。
需要说明的是，电视屏幕调整前后，预设位置框一直处于场景图像的固定位置，只是最佳人物位置框在场景图像中的位置发生变化。
步骤S104：根据所述人物动作信息匹配对应的适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
具体的，当所述最佳人物位置框中只有一个人物时，以此人物的动作信息匹配的预设适宜温度为准，来调整空调温度。当所述最佳人物位置框中肯包括多个人物，这些人物可能在做不同的动作，有的在沙发上睡觉，有的在练瑜伽，有的在跑步机上跑步等。这些动作信息匹配的预设适宜温度不同，睡觉动作需要较高的预设适宜温度，跑步动作的需要较低的预设适宜温度，这时，以这些动作信息中的预设适宜温度较高者为准，与当前的环境温度进行对比，并根据对比结果来调整空调温度，即以睡觉动作对应的预设适宜温度为准。至于温度的调控有多种方式，可以只要预设适宜温度与当前的环境温度不同就调整空调温度，也可以预设适宜温度与当前的环境温度的温度差值超过预设阈值才调整空调温度。
需要说明的是，请参阅图2，本实施例还提供空调电视机的控制方法的另一流程示意图。
本申请提供一种空调电视机的控制方法，该方法包括获取电视屏幕正对范围内的场景图像；获取所述场景图像中的人物位置信息和人物动作信息；根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。同时结合了空调与电视的功能，不仅可以根据用户的位置信息和动作信息分别调整电视屏幕朝向和空调温度，使用户可以拥有更好的电视观看体验和空调使用体验，为用户提供方便，而且将电视和空调结合成一个设备，缩小了空调与电视占地空间。
实施例二
请参阅图3，本申请提供一种空调电视机的控制装置100，包括：图像获取模块101、信息获取模块102、第一调整模块103和第二调整模块104。
图像获取模块101，用于获取电视屏幕正对范围内的场景图像。
信息获取模块102，用于获取所述场景图像中的人物位置信息和人物动作信息。
第一调整模块103，用于根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内。
第二调整模块104，用于根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
图像获取模块101获取电视屏幕正对范围内的场景图像，信息获取模块102获取所述场景图像中的人物位置信息和人物动作信息，第一调整模块103根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内，第二调整模块104根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度调控空调。
上述方法步骤的具体实施例过程可参见实施例一，本实施例在此不再赘述。
实施例三
请参阅图4，本实施例提供一种空调电视机200，包括：存储器201、控制器202、空调203、电视204和摄像装置205。
所述存储器201上存储有计算器程序，该计算机程序被所述控制器102执行时实现如实施例一中所述的空调电视机的控制方法。
其中，控制器202用于执行如实施例一中所述的空调电视机的控制方法中的全部或部分步骤。存储器201用于存储各种类型的数据，这些数据例如可以包括空调电视机中的任何应用程序或方法的指令，以及应用程序相关的数据。
所述存储器201可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，例如静态随机存取存储器(Static Random Access Memory，简称SRAM)，电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，简称EEPROM)，可擦除可编程只读存储器(Erasable Programmable Read-Only Memory，简称EPROM)，可编程只读存储器(Programmable Read-Only Memory，简称PROM)，只读存储器(Read-OnlyMemory，简称ROM)，磁存储器，快闪存储器，磁盘或光盘。
所述控制器202可以是控制器、微控制器或其他电子元件实现，用于执行上述实施例一中所述的空调电视机的控制方法。
空调203、电视204和摄像装置205为一体结构，且分别连接至控制器202。空调203的进出风口置于电视204的电视屏幕的四周，以减少占地空间。将电视和空调结合成一个设备，缩小了空调与电视占地空间。
其中，摄像装置205，用于采集电视屏幕正对范围内的场景图像。摄像装置205内置电视204的电视屏幕上，以实现摄像装置跟随电视204的电视屏幕一起转动，实时采集电视屏幕正对范围内的场景图像。
基于上述各模块执行空调电视机的控制方法的具体实施例已在实施例一中详述，此处不再赘述。
实施例四
本实施例提供一种计算机可读存储介质，如闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘、服务器、App应用商城等等，其上存储有计算机程序，所述计算机程序被处理器执行时可以实现如下方法步骤：
步骤S101：获取电视屏幕正对范围内的场景图像；
步骤S102：获取所述场景图像中的人物位置信息和人物动作信息；
步骤S103：根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；
步骤S104：根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
上述方法步骤的具体实施例过程可参见实施例一，本实施例在此不再赘述。
综上，本申请提供的一种空调电视机的控制方法、装置、空调电视机及存储介质，该方法包括获取电视屏幕正对范围内的场景图像；获取所述场景图像中的人物位置信息和人物动作信息；根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。同时结合了空调与电视的功能，不仅可以根据用户的位置信息和动作信息分别调整电视屏幕朝向和空调温度，使用户可以拥有更好的电视观看体验和空调使用体验，为用户提供方便，而且将电视和空调结合成一个设备，缩小了空调与电视占地空间。
在本申请实施例所提供的几个实施例中，应该理解到，所揭露的方法，也可以通过其它的方式实现。以上所描述的方法实施例仅仅是示意性的。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然本申请所揭露的实施方式如上，但所述的内容只是为了便于理解本申请而采用的实施方式，并非用以限定本申请。任何本申请所属技术领域内的技术人员，在不脱离本申请所揭露的精神和范围的前提下，可以在实施的形式上及细节上作任何的修改与变化，但本申请的专利保护范围，仍须以所附的权利要求书所界定的范围为准。

Claims (10)

1.一种空调电视机的控制方法，其特征在于，所述方法包括：
获取电视屏幕正对范围内的场景图像；
获取所述场景图像中的人物位置信息和人物动作信息；
根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；
根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
2.根据权利要求1所述的方法，其特征在于，所述获取所述场景图像中的人物位置信息的步骤，包括以下步骤：
将所述场景图像输入预先训练好的特征提取网络，以得到所述场景图像的特征图；
将所述场景图像的特征图输入下采样网络，以缩小所述场景图像的特征图的尺度；
将下采样后的所述场景图像的特征图输入预先训练好的检测网络，以得到多个不同尺度的人物位置框；
采用非极大值抑制的方法从多个不同尺度的所述人物位置框中选取最佳人物位置框，以获得所述场景图像中的人物位置信息；其中，所述人物位置信息至少包括所述最佳人物位置框的坐标。
3.根据权利要求2所述的方法，其特征在于，所述检测网络包括多个预先训练好的且由卷积神经网络组成的子检测网络；所述将下采样后的所述场景图像的特征图输入预先训练好的检测网络，以得到多个不同尺度的人物位置框的步骤，包括以下步骤：
将下采样后的所述场景图像的特征图依次输入串联的多个所述子检测网络，以使每个所述子检测网络输出一个不同尺度的人物位置框，从而得到多个不同尺度的所述人物位置框；
其中，所述特征图在输入每个所述子检测网络之前，先经过上采样处理，经增大后才输入对应的所述子检测网络。
4.根据权利要求2所述的方法，其特征在于，所述采用非极大值抑制的方法从多个不同尺度的所述人物位置框中选取最佳人物位置框，以获得所述场景图像中的人物位置信息的步骤，包括：
将多个不同尺度的所述人物位置框按照检测置信度从高到低排序；
根据期望抑制的程度，设置抑制阈值；
计算检测置信度最高的所述人物位置框与其它所述人物位置框的重叠面积比例，将其它所述人物位置框中所述重叠面积比例超过所述抑制阈值的所述人物位置框筛除，从而选出最佳人物位置框，以获得所述场景图像中的人物位置信息。
5.根据权利要求2所述的方法，其特征在于，所述获取所述场景图像中的人物动作信息的步骤，包括以下步骤：
以所述最佳人物位置框为截取区域，从连续多帧的所述场景图像中截取连续多帧的子图像；
将每一帧的所述子图像分别输入所述特征提取网络，以得到每一帧的所述子图像对应的特征图；
将每一帧的所述子图像对应的特征图分别输入长短期记忆网络结构，识别出每一帧的所述子图像中的人物动作；
根据所有所述子图像中的人物动作获得所述场景图像中的人物动作信息。
6.根据权利要求2所述的方法，其特征在于，所述根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内的步骤，包括以下步骤：
根据所述电视屏幕面向的指定范围，在所述场景图像上设置一个预设位置框；其中，所述预设位置框的大小大于所述人物位置框的大小；
当所述最佳人物位置框位于所述预设位置框外时，将电视屏幕旋转相应角度，使所述最佳人物位置框回到所述预设位置框内，以使所述人物处于所述电视屏幕面向的指定范围内。
7.一种空调电视机的控制装置，其特征在于，包括：
图像获取模块，用于获取电视屏幕正对范围内的场景图像；
信息获取模块，用于获取所述场景图像中的人物位置信息和人物动作信息；
第一调整模块，用于根据所述人物位置信息调整所述电视屏幕的角度，以使所述人物处于所述电视屏幕面向的指定范围内；
第二调整模块，用于根据所述人物动作信息匹配对应的预设适宜温度，并根据所述预设适宜温度与当前的环境温度的对比结果调控空调。
8.一种空调电视机，其特征在于，包括存储器、控制器、空调、电视和摄像装置；
所述存储器上存储有计算机程序，该计算机程序被所述控制器执行时，执行如权利要求1至6中任一项所述的空调电视机的控制方法；
所述摄像装置，用于采集电视屏幕正对范围内的场景图像。
9.根据权利要求8所述的空调电视机，其特征在于，所述空调、所述电视和所述摄像装置为一体结构。
10.一种存储介质，其特征在于，该存储介质存储的计算机程序，可被一个或多个处理器执行，可用来实现如权利要求1至6中任一项所述的空调电视机的控制方法。
CN202010165933.1A 2020-03-11 2020-03-11 空调电视机的控制方法、装置、空调电视机及存储介质 Active CN111355992B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010165933.1A CN111355992B (zh) 2020-03-11 2020-03-11 空调电视机的控制方法、装置、空调电视机及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010165933.1A CN111355992B (zh) 2020-03-11 2020-03-11 空调电视机的控制方法、装置、空调电视机及存储介质

Publications (2)

Publication Number Publication Date
CN111355992A true CN111355992A (zh) 2020-06-30
CN111355992B CN111355992B (zh) 2021-02-26

Family

ID=71194443

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010165933.1A Active CN111355992B (zh) 2020-03-11 2020-03-11 空调电视机的控制方法、装置、空调电视机及存储介质

Country Status (1)

Country Link
CN (1) CN111355992B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112584212A (zh) * 2020-12-03 2021-03-30 深圳创维－Rgb电子有限公司 一种电视机的调节方法、装置、电子设备及存储介质
CN114411401A (zh) * 2021-12-16 2022-04-29 珠海格力电器股份有限公司 衣物分拣方法、衣物处理方法、装置、系统及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101055103A (zh) * 2007-05-28 2007-10-17 汪铁良 一种带液晶电视机的柜式空调机
CN101615032A (zh) * 2009-07-15 2009-12-30 中山大学 一种自动调节电视机角度的装置
CN201699843U (zh) * 2010-06-22 2011-01-05 天津三星电子显示器有限公司 一种画面跟随用户移动而转动的电视机
JP2015084467A (ja) * 2013-10-25 2015-04-30 永島 郁二 テレビまたは液晶ディスプレイ付きの空調機
CN104864558A (zh) * 2015-04-30 2015-08-26 广东美的制冷设备有限公司 空调控制方法、装置及终端
CN205860313U (zh) * 2016-08-01 2017-01-04 珠海格力电器股份有限公司 家用电器
CN108119970A (zh) * 2017-12-20 2018-06-05 珠海格力电器股份有限公司 空调电视机
CN108253605A (zh) * 2018-01-20 2018-07-06 宁夏博文利奥科技有限公司 一种瑜伽室空调及其控制方法
CN108304808A (zh) * 2018-02-06 2018-07-20 广东顺德西安交通大学研究院 一种基于时空信息与深度网络的监控视频对象检测方法
CN109858472A (zh) * 2019-04-09 2019-06-07 武汉领普科技有限公司 一种嵌入式实时人形检测方法和装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101055103A (zh) * 2007-05-28 2007-10-17 汪铁良 一种带液晶电视机的柜式空调机
CN101615032A (zh) * 2009-07-15 2009-12-30 中山大学 一种自动调节电视机角度的装置
CN201699843U (zh) * 2010-06-22 2011-01-05 天津三星电子显示器有限公司 一种画面跟随用户移动而转动的电视机
JP2015084467A (ja) * 2013-10-25 2015-04-30 永島 郁二 テレビまたは液晶ディスプレイ付きの空調機
CN104864558A (zh) * 2015-04-30 2015-08-26 广东美的制冷设备有限公司 空调控制方法、装置及终端
CN205860313U (zh) * 2016-08-01 2017-01-04 珠海格力电器股份有限公司 家用电器
CN108119970A (zh) * 2017-12-20 2018-06-05 珠海格力电器股份有限公司 空调电视机
CN108253605A (zh) * 2018-01-20 2018-07-06 宁夏博文利奥科技有限公司 一种瑜伽室空调及其控制方法
CN108304808A (zh) * 2018-02-06 2018-07-20 广东顺德西安交通大学研究院 一种基于时空信息与深度网络的监控视频对象检测方法
CN109858472A (zh) * 2019-04-09 2019-06-07 武汉领普科技有限公司 一种嵌入式实时人形检测方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
罗明柱等: "全卷积神经网络的多尺度人脸检测的研究", 《计算机工程与应用》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112584212A (zh) * 2020-12-03 2021-03-30 深圳创维－Rgb电子有限公司 一种电视机的调节方法、装置、电子设备及存储介质
CN114411401A (zh) * 2021-12-16 2022-04-29 珠海格力电器股份有限公司 衣物分拣方法、衣物处理方法、装置、系统及存储介质

Also Published As

Publication number Publication date
CN111355992B (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
JP7285778B2 (ja) コンテンツ捕捉デバイスのための設定を決定するための技法
CN111355992B (zh) 空调电视机的控制方法、装置、空调电视机及存储介质
EP3335412B1 (en) Method and electronic apparatus for providing service associated with image
CN110476405A (zh) 用于提供与拍摄有关的推荐信息的方法和系统
CN104794462B (zh) 一种人物图像处理方法及装置
CN106295533B (zh) 一种自拍图像的优化方法、装置和拍摄终端
US9633462B2 (en) Providing pre-edits for photos
KR101725884B1 (ko) 이미지들에 대한 자동 프로세싱
KR20170115350A (ko) 전자 장치 및 그의 동작 방법
US20190281211A1 (en) Adaptive System for Autonomous Machine Learning and Control in Wearable Augmented Reality and Virtual Reality Visual Aids
US20120071706A1 (en) System and method for eliciting a relaxation response
US10701220B2 (en) Image print proposal device, method, and program
CN111147751B (zh) 拍照模式的生成方法、装置和计算机可读存储介质
CN113108437A (zh) 一种空调控制方法、装置、存储介质及空调
CN109658486B (zh) 图像处理方法及装置、存储介质
CN110568770B (zh) 一种控制智能家居设备的方法及控制设备
CN113495487A (zh) 一种调节目标设备运行参数的终端和方法
CN113179421B (zh) 视频封面选择方法、装置、计算机设备和存储介质
CN112944611A (zh) 空调器的控制方法、装置、存储介质及处理器
CN110047115B (zh) 星辰图像拍摄方法、装置、计算机设备和存储介质
CN116643494A (zh) 一种场景推荐方法、装置、系统及电子设备
CN113038257B (zh) 音量调节方法、装置、智能电视及计算机可读存储介质
CN110879944A (zh) 基于人脸相似度的主播推荐方法、存储介质、设备及系统
CN107608729A (zh) 一种在应用中展示动态效果的方法和装置
CN114885180B (zh) 一种智慧城市公共景观直播控制方法和物联网系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant