CN105988369A - 一种内容驱动的智能家居控制方法 - Google Patents

Abstract

本发明提供了一种以内容驱动的智能家居控制方法，所述方法通过基于视频中关键帧的图像主色调和/或场景情节特征对视频碎片进行标记，或者依据音频数据特征进行标记，添加相应的标签，每次播放这些多媒体内容时，标记的这些标签都会驱动智能家居设备工作。通过本发明的方法进行智能家居的驱动控制可以大大简化人为控制这一繁琐的过程，并且本发明使得控制系统更加灵活。

Description

一种内容驱动的智能家居控制方法

技术领域

本发明涉及智能家居技术领域，具体地，涉及一种内容驱动的智能家居控制方法。

背景技术

当人们看到各种视频感受各种音响时，会不自觉的把这些视觉听觉感受和其它器官的感受联系起来，这种现象称为联觉，属于一种异质异构多一同态对应现象。一般情况下，高音区的音符经常和明亮的视觉感受、积极或快乐的情态感受等联系在一起，低音区的音符经常和昏暗的视觉感受、消沉或哀伤的情态感受等联系在一起；舒缓的节奏容易让人感受到开阔的空间或较为平静的情绪，而急促的节奏则容易让人感到空间狭窄、情绪躁动等等。

随着智能家居的普及，越来越多的智能设备以不同的方式影响着我们的生活，例如西安大雁塔景区的“音乐喷泉”利用音乐的音调来控制喷泉的舞姿及高度，Philips公司推出的智能灯具产品hue可以根据不同的音乐或不同彩色的图片控制灯泡的颜色。但是这些智能家居的控制形式大多需要人为手动的添加控制程序，或者是简单的根据声音的响度或音调的高低来控制，这样做的局限性在于控制灵活性不够高，重复利用率不高，不够智能。再例如在某些晚会场合，音响师和灯光师需要根据每个表演节目的不同而做出相应的音响和灯光效果，由于表演节目过多或者节目经常变化导致音响师和灯光师的工作量剧增。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种内容驱动的智能家居控制方法，从而解决上述存在的问题，使得控制系统更加灵活。

为实现上述的目的，本发明采用的技术方案是：一种以内容驱动的智能家居控制方法，通过在多媒体内容中添加相应的标签，通过这些标签内容来驱动驱动智能家居控制系统，有利于自动控制智能家居系统。

具体的，所述方法通过基于视频中关键帧的图像主色调和/或场景情节特征对 视频碎片进行标记，或者依据音频数据特征进行标记，添加相应的标签，每次播放这些多媒体内容时，标记的这些标签都会驱动智能家居设备工作。

优选地，所述通过基于视频中关键帧的图像主色调对视频碎片进行标记，具体为：提取视频MPU中关键帧的主色调并对其进行标记，利用MPUBox中预留的reserved字段定义color_tag，对于不同的颜色可以用不一样的color_tag。

进一步的，通过视频MPU中关键主色调分析而对color_tag进行赋值，或者通过算法自动对MPU的主色调提取赋值。

进一步的，将MPUBox中的reserved的7bit用于color_tag，该bit位根据需要可扩展。

优选地，所述通过基于视频中场景情节特征对视频碎片进行标记，具体为：提取视频中某段场景的模式，进而对MPU进行标记，将MPUBox中的reserved字段定义为scene_tag。scene_tag可以通过人工定义的方式进行赋值，也可以通过不同算法，如图像视频识别技术自动进行赋值。

优选地，所述依据音频数据特征进行标记，具体为：提取音频MPU中的音调特征，进而对MPU进行标记，将MPUBox中的reserved字段定义为tone_tag。tone_tag可以通过人工定义的方式进行赋值，也可以通过不同算法，如声音识别技术自动进行赋值。

本发明在使用的多媒体内容中添加相应的标签，每次播放这些多媒体内容时这些标签都会驱动智能设备工作。例如对于某段电影视频节目，每个场景的情节可能发生变化，有时比较浪漫有时比较忧伤，对于每个镜头的主色调也可能出现变化，有时主色调为蓝色有时主色调为红色。本发明可以根据这些图像特征和视频场景特征为每段小的视频片段增加相应的标签。

与现有技术相比，本发明具有如下的有益效果：

本发明提供了一种以内容驱动的智能家居控制方法，可以通过多媒体内容自动的驱动智能家居控制系统，目前大多数需要人为评价多媒体内容之后再去手动的控制智能系统，通过本发明的内容驱动控制智能家居系统可以大大简化人为控制这一繁琐的过程，并且本发明使得控制系统更加灵活。

附图说明

通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特 征、目的和优点将会变得更明显：

图1为本发明一实施例中利用MPU控制hue系统图。

具体实施方式

下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进。这些都属于本发明的保护范围。

目前智能家居设备逐渐出现在每个人的家庭中，本发明以飞利浦(Philips)公司推出的一款被称为“世界上最聪明的LED灯泡”的产品——Philips hue为例，给出如何对视频和音频数据进行标记以驱动hue系统的方法。

1.飞利浦hue简介

飞利浦hue它表上面看起来和普通的灯泡一样，但是它可以通过桥接的方式连接到家里的路由器从而让用户可以对照明进行更为个性化的控制。飞利浦hue应用了LED照明技术和无线互联技术，在提供LED照明基础之上，让灯光在更多方面为人们的生活创造便利——通过手机定位功能，hue可以在回家或外出时，自动地开灯、关灯或是改变灯光颜色。通过设置定时提醒功能，hue可以让每天的生活更有规律：比如早上通过让屋里的灯光逐渐变亮，而晚上灯光会提醒人们入睡。飞利浦hue可以提供“深浅不同的白色色调，从暖色调到冷色调”，同时还有经过预编程设置好的超过1600万种颜色选择(红绿蓝组合)，同时还提供了包括放松、阅读、集中以及活力在内的四种不同预设模式。为特定氛围创建特定灯光场景、远程控制和监视家中的灯光情况、设置计时器管理日常灯光需求、通过灯光助眠或叫醒家人，这一切飞利浦hue都能帮你完成。除此之外，用户甚至还可以使用设备中的某张照片作为调色板来进行取色，并设置程序在一天的特定时间内激活特定的颜色。

hue的功能可以不断被丰富，有网络平台向开发者们开放API接口和软件开发工具包SDK，新的应用方案不断诞生；而用户也可以通过该平台分享其个性化的灯光配方，已经有超过40个新的应用程序被开发出来。这些程序让hue与更多的设备和应用程序相联：有的能够用灯光的变化来显示心跳；有的能够让人们通过声音来控制灯光；有的还能和电视屏幕的变化同步。

本发明则通过多媒体内容自动的驱动智能家居控制系统，比如上述飞利浦hue。

本发明在使用的多媒体内容中添加相应的标签，每次播放这些多媒体内容时这些标签都会驱动智能设备工作。具体说明如下。

2.对媒体数据碎片进行标记

在异构网络传输协议Mpeg media transport(MMT)中对所有媒体数据以碎片化MPU格式进行封装，每个MPU时间长度大约为0.5秒，并且将多媒体音视频数据的视频video和音频audio分开封装。基于此媒体数据封装格式，本发明提出可以按照如下几种方法对MPU进行标记。

a)对视频MPU按照关键帧主色调标记

在Philips hue系统中，可以通过图片的颜色来控制灯泡颜色的改变，所以本发明可以提取视频MPU中关键帧的主色调并对其进行标记，利用MPUBox中预留的reserved字段7bit定义color_tag，对于不同的颜色可以用不一样的color_tag，如下表所示。

color_tag的取值，可以通过视频MPU中关键主色调分析而对color_tag进行赋值，MPUBox要加入所需新属性。或者通过算法自动对MPU的主色调提取赋值。目前本发明将reserved的7bit用于color_tag，将来如果需要更多bit位，可以增加扩展。

b)对视频MPU按照场景情节标记

在Philips hue系统中，可以根据生活中不同的氛围呈现不同的灯光模式，所以本发明可以提取视频中某段场景的模式，例如是否属于浪漫或者激烈等等模式，进而对MPU进行标记。仿照上表，可以将MPUBox中的reserved字段定义为scene_tag，可以采用不同的算法提取场景中的模式。

c)对音频MPU按照音调标记

在Philips hue系统中，可以利用音乐音调的高低控制灯光模式，所以本发明可以提取音频MPU中的音调特征，进而对MPU进行标记。仿照上表，可以将MPUBox中的reserved字段定义为tone_tag，可以采样各种不同的算法提取音频数据的音调。

由于在媒体内容中加载了相应的scene_tag,tong_tag,当媒体内容在正常播放时，设备读取到相应的新属性后，会将此属性信息传送给照明的控制设备接口中。此时，照明设备将根据接收到的属性信息，解析出控制照明系统的指令和参数。从而实现灯光随着媒体内容的播放而实时调节变化。

这里以MPUBox为例，说明如何加入新的属性，以实现媒体内容与灯光的结合呈现。但是实际应用中，新属性可以根据实际需要加在其它信令位置。本发明也是以照明为例，说明传统的多媒体与智能家居如何结合。应用于本发明的思路和方法，也可以扩展应用于其它智能家居，甚至智慧城市系统中。

以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变形或修改，这并不影响本发明的实质内容。

Claims (6)

1.一种以内容驱动的智能家居控制方法，其特征在于，所述方法通过基于视频中关键帧的图像主色调和/或场景情节特征对视频碎片进行标记，或者依据音频数据特征进行标记，添加相应的标签，每次播放这些多媒体内容时，标记的这些标签都会驱动智能家居设备工作。

2.根据权利要求1所述的以内容驱动的智能家居控制方法，其特征在于，所述通过基于视频中关键帧的图像主色调对视频碎片进行标记，具体为：提取视频MPU中关键帧的主色调并对其进行标记，利用MPUBox中预留的reserved字段定义color_tag，对于不同的颜色可以用不一样的color_tag。

3.根据权利要求2所述的以内容驱动的智能家居控制方法，其特征在于，通过视频MPU中关键主色调分析而对color_tag进行赋值，或者通过算法自动对MPU的主色调提取赋值。

4.根据权利要求2所述的以内容驱动的智能家居控制方法，其特征在于，将MPUBox中的reserved的7bit用于color_tag，该bit位根据需要可扩展。

5.根据权利要求1-4任一项所述的以内容驱动的智能家居控制方法，其特征在于，所述通过基于视频中场景情节特征对视频碎片进行标记，具体为：提取视频中某段场景的模式，进而对MPU进行标记，将MPUBox中的reserved字段定义为scene_tag。

6.根据权利要求1-4任一项所述的以内容驱动的智能家居控制方法，其特征在于，所述依据音频数据特征进行标记，具体为：提取音频MPU中的音调特征，进而对MPU进行标记，将MPUBox中的reserved字段定义为tone_tag。