CN113593583B - 一种实现家电协同工作的智能手机 - Google Patents

一种实现家电协同工作的智能手机 Download PDF

Info

Publication number
CN113593583B
CN113593583B CN202110942541.6A CN202110942541A CN113593583B CN 113593583 B CN113593583 B CN 113593583B CN 202110942541 A CN202110942541 A CN 202110942541A CN 113593583 B CN113593583 B CN 113593583B
Authority
CN
China
Prior art keywords
sub
information
user
voice
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110942541.6A
Other languages
English (en)
Other versions
CN113593583A (zh
Inventor
林庆华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Yunji Intelligent Technology Co ltd
Original Assignee
Shenzhen Yunji Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Yunji Intelligent Technology Co ltd filed Critical Shenzhen Yunji Intelligent Technology Co ltd
Priority to CN202110942541.6A priority Critical patent/CN113593583B/zh
Publication of CN113593583A publication Critical patent/CN113593583A/zh
Application granted granted Critical
Publication of CN113593583B publication Critical patent/CN113593583B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/22Interactive procedures; Man-machine interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/10Speech classification or search using distance or distortion measures between unknown speech and reference templates
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/06Decision making techniques; Pattern matching strategies
    • G10L17/08Use of distortion metrics or a particular distance between probe pattern and reference templates
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Abstract

本发明提供了一种实现家电协同工作的智能手机包括:采集模块,用于获取用户的任务指令,控制模块,用于基于任务指令,生成子操作命令,切换模块,用于基于子操作命令,切换子家电的工作状态,使得住宅内家电和家电互联组成系统,增强协同工作能力,实现智能家居功能。

Description

一种实现家电协同工作的智能手机
技术领域
本发明涉及家电协同工作领域,特别涉及一种实现家电协同工作的智能手机。
背景技术
近年来,在电子技术日新月异般的变革下,智能家居被广大网友关注,各式各样的智能家电走入了人们的生活,例如电冰箱和消毒柜等,这些智能家电极大的方便了人们的生活。随着5G技术的兴起,万物互联的概念更是被提出,智能家居互联也开始走进广大网友的视线,从单个智能家居到整体的智能家居的变革,将微处理器、传感器技术、网络通信技术引入家电设备后形成的家电产品,具有自动感知住宅空间状态和家电自身状态、家电服务状态,能够自动控制及接收住宅用户在住宅内或远程的控制指令;同时,智能家电作为智能家居的组成部分,能够与住宅内其它家电和家居、设施互联组成系统,实现智能家居功能。
然而,传统的智能家居仍然利用独立的控制终端对大量的智能家电进行粗略控制,智能家居系统分工不够明确细化,使得智能家电不能更为高效地工作。
发明内容
本发明提供一种实现家电协同工作的智能手机,以解决上述背景技术中提出的问题,从而是操控家电更加方便智能。
为实现上述目的,本发明提供如下技术方案:一种实现智能家电协同工作的智能手机,其特征在于,包括:
采集模块,用于获取用户的任务指令;
控制模块,用于基于任务指令,生成子操作命令;
切换模块,用于基于子操作命令,切换子家电的工作状态。
进一步地,所述子家电包括:智能摄像头、人脸识别门禁系统、智能温空系统、智能窗帘、智能开关中的任一种或多种的组合。
进一步地,,所述子操作命令包括:对单一子家电的单一指令、对单一子家电的综合指令或对多个子家电的联动指令。
进一步地,所述的一种实现家电协同工作的智能手机中控制模块,还包括:
定位单元:用于获取所述智能手机的位置信息;
控制单元:用于基于位置信息获取的智能手机与住所的距离小于预设值时,对智能手机的移动轨迹进行捕捉,获得用户的行动轨迹,并基于道路信息和行动轨迹对用户的目的地进行预估,当用户的预估目的地为住所所在地时,控制相关智能设备开始工作。
进一步地,所述的一种实现家电协同工作的智能手机中采集模块,包括:
状态采集单元:用于周期性对子家电进行状态查询,获得若干子状态信息,并对子状态信息进行识别,获得子状态信息的子代码,并基于子代码确定子状态信息对应的子家电,从而获得子家电的子工作状态;
状态更新单元:用于基于智能手机对子家电的子工作状态进行状态更新。
进一步地,所述的一种实现家电协同工作的智能手机中采集模块,还包括:
验证单元:用于接收用户发出的任务口令,获得用户的第一语音信息,对所述第一语音信息进行声纹量化,获得第一语音信息的第一声纹序列,基于滑动窗口函数对第一声纹序列和历史语音信息的声纹序列进行比对,获得第一语音信息与历史语音信息的相似度;
所述验证单元:还用于在对任务口令处理的过程中,获取产生的字符序列,并所述字符序列进行分割处理,构建处理事件集合;
所述验证单元:还用于对所述任务口令进行口令解析,获得口令标识,从口令事件数据库中提取预设事件集合,将所述处理事件集合与预设事件集合进行比较,获得事件重叠度,并根据事件的重叠次序,对所述事件重叠度进行调整,获得事件合格度;
当所述相似度大于预设相似度,且所述事件合格度大于预设合格度时,判定所述第一语音信息通过权限验证;
指令采集单元:基于储存单元获取第一语音信息,并对通过权限验证第一语音信息进行特征提取,获取第一语音特征,将所述第一语音特征进行处理,得到第一音素信息,将所述第一音素信息输入预设的声学模型中,得到第一语音识别结果,确定所述第一语音信息对应的第一音频内容;
基于预设的标准命令库,确定所述第一语音对应的第一音频内容与标准命令库中子标准指令的关联度,获得若干子关联度,并判断第一最大子关联度是否大于预设关联度,若是,则将第一最大子关联度所对应的子标准指令作为用户的子任务指令;
否则,则对第一音频内容进行关键词提取,获得第一音频内容的关键词,并基于关键词在第一音频内容中的时间顺序对关键词进行语句重构,获得第二音频内容,确定所述第一语音对应的第一音频内容与所述标准命令库中子标准指令的关联度,获得若干子关联度,并判断第二最大子关联度是否大于预设关联度,若是,则将第二最大子关联度所对应的子标准指令作为用户的子任务指令,,若最大的子关联度不大于预设关联度,则提醒用户语音识别失败;
将子任务指令传输至储存单元进行储存。
进一步地,所述的一种实现家电协同工作的智能手机中采集模块,还进行以下操作:
位置采集单元:用于据家庭住址信息查询该住址所在地理位置,并根据所述地理位置,从云端网络收集该地理位置的天气预报信息,并请示用户是否需要关窗,并根据所述家庭住址信息查询该住址所在社区信息,并根据所述社区信息,从云端网络收集该社区的水电供给公告,分析确定水电断供和恢复的时间信息,并提醒用户水电断供和恢复的时间。
进一步地,所述的一种实现家电协同工作的智能手机中控制模块,还包括:
分析单元:用于对任务指令进行分析,确定任务指令中预启动的子家电和预关闭的子家电,同时,对分析时刻前且处于运行状态的子家电的功率进行累加计算,获得住所内家电的第一总功率;
所述分析单元:还用于基于预启动的子家电和第一预关闭的子家电对第一总功率进行更新,获得第二总功率,将所述第二总功率与预设的最大允许功率进行比较,当所述第二总功率大于住所最大允许功率时,获取住所内正在同时工作的子家电对应的子工作内容;
基于预设的工作内容所对应的优先等级,将所有子工作内容进行排序,得到排序结果;
基于排序结果、住所最大允许功率、预启动的子家电的信息,确定第二预关闭的子家电序列,并向用户发送预关闭的子家电序列,请示用户是否关闭预关闭家电,若用户同意,则关闭预关闭家电,若用户不同意,则请求用户更改任务指令。
进一步地,所述的一种实现家电协同工作的智能手机中切换模块,还包括:
检测单元单元:基于人脸识别门禁系统对预进入人员进行面部图像采集,获得预进入人员的面部视频数据,并对面部视频数据中每一子图像进行灰度检测,获得子图像中每个像素点的灰度值,基于所述子图像中每个像素点的灰度值,提取预进入人员的面部轮廓,从而获得预进入人员的面部图像区域;
预处理单元:基于面部图像区域的平均亮度值与预设的目标亮度值的差异,确定所述面部图像区域的亮度调整比例值,基于面部图像区域的亮度值,设置面部图像区域的亮度调整权重值,基于所述面部图像区域的亮度调整权重值,对面部图像区域的亮度进行调整,得到标准亮度图像,对所述标准亮度图像进行面部检测,获取面部的关键点,并对所述关键点进行定位,获得定位信息,基于所述定位信息,对所述关键点进行特征提取,获得对应关键点的特征向量,并将所述特征向量与对应关键点的定位信息建立对应关系,从而得到标准亮度图像中人脸的面部特征;
识别单元:基于标准亮度图像中人脸的面部特征在预设权限库中进行检索,确定预进入人员的准入权限,若预进入人员具有准入权限,则打开门禁系统,若预进入人员无准入权限,则向用户发送预进入人员的面部视频数据,并请示是否需要打开门禁系统。
进一步地,所述的一种实现家电协同工作的智能手机中控制模块,还包括:
采集单元:对所述子家电进行实时监测,当子家电开始工作时,获取采集指令,预设设备根据所述采集指令分别对正在工作的子家电进行声音采集,获得若干子声音数据;
处理单元:对采集到的子声音数据进行预处理,以得到实时声音数据,并将所述实时声音数据分解为若干阶瞬时频率的乘积函数分量,并将所述乘积函数分量的能量与实时声音数据的总能量之比作为声音特征向量;
检测单元:用于将所述声音特征向量作为声音特征,并基于声音特征判断所述实时声音数据是否异常;
当所述实时声音数据异常时,确定所述子家电存在故障,并进行报警;
当所述实时声音数据无异常时,确定所述目标家电不存在故障。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明所述智能手机的结构图;
图2为本发明所述采集模块的结构图;
图3为本发明所述控制模块的结构图;
图4为本发明所述切换模块的结构图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例1
一种实现家电协同工作的智能手机,如图1所示,包括:
采集模块,用于获取用户的任务指令;
控制模块,用于基于任务指令,生成子操作命令;
切换模块,用于基于子操作命令,切换子家电的工作状态。
上述方案的有益效果为:通过对采集用户的语音信息,并进行分析确定用户的语音内容,并基于语音内容生成任务指令,并基于任务指令分别对子家电下发子操作命令,控制家电的运行状态,使得住宅内家电和家电互联组成系统,增强协同工作能力,实现智能家居功能。
实施例2
基于实施例1的基础上,所述子家电包括:智能摄像头、人脸识别门禁系统、智能温空系统、智能窗帘、智能开关中的任一种或多种的组合。
实施例3
基于实施例1的基础上,所述子操作命令包括:对单一子家电的单一指令、对单一子家电的综合指令或对多个子家电的联动指令。
实施例4
基于实施例1的基础上,如图1所示,控制模块,还包括:
定位单元:用于获取所述智能手机的位置信息;
控制单元:用于基于位置信息获取的智能手机与住所的距离小于预设值时,对智能手机的移动轨迹进行捕捉,获得用户的行动轨迹,并基于道路信息和行动轨迹对用户的目的地进行预估,当用户的预估目的地为住所所在地时,控制相关智能设备开始工作。
本本实施例中,预估目的地为根据用户的行动轨迹,以及道路信息,确定若干用户可能的目的地;
上述方案的有益效果为:通过对用户的目的地进行预测,当用户正在回家的路上时,进行通风,使得用户回到住所时,住所已完成通风,排出室内污浊块钱,让用户回家即可呼吸新鲜空气,提高了住所的舒适程度。
实施例5
基于实施例1的基础,如图2所示,所述采集模块,包括:
状态采集单元:用于周期性对子家电进行状态查询,获得若干子状态信息,并对子状态信息进行识别,获得子状态信息的子代码,并基于子代码确定子状态信息对应的子家电,从而获得子家电的子工作状态;
状态更新单元:用于基于智能手机对子家电的子工作状态进行状态更新。
在本实施例中,子状态信息包含子家电的识别代码,以及子家电的开关状态、已工作时长、耗电量信息。
上述方案的有益效果为:通过对周期性对子家电进行状态查询,在手机端更新家电的子状态,使得用户在户外也可以掌握住所内家电的工作情况,并且每一子状态信息都包含子地址代码,使得子家电之间的数据不会出现混乱,保障了家电子状态的可信度。
实施例6
基于实施例1的基础上,如图2所示,采集模块,还包括:
验证单元:用于接收用户发出的任务口令,获得用户的第一语音信息,对所述第一语音信息进行声纹量化,获得第一语音信息的第一声纹序列,基于滑动窗口函数对第一声纹序列和历史语音信息的声纹序列进行比对,获得第一语音信息与历史语音信息的相似度;
所述验证单元:还用于在对任务口令处理的过程中,获取产生的字符序列,并所述字符序列进行分割处理,构建处理事件集合;
所述验证单元:还用于对所述任务口令进行口令解析,获得口令标识,从口令事件数据库中提取预设事件集合,将所述处理事件集合与预设事件集合进行比较,获得事件重叠度,并根据事件的重叠次序,对所述事件重叠度进行调整,获得事件合格度;
当所述相似度大于预设相似度,且所述事件合格度大于预设合格度时,判定所述第一语音信息通过权限验证;
指令采集单元:基于储存单元获取第一语音信息,并对通过权限验证第一语音信息进行特征提取,获取第一语音特征,将所述第一语音特征进行处理,得到第一音素信息,将所述第一音素信息输入预设的声学模型中,得到第一语音识别结果,确定所述第一语音信息对应的第一音频内容;
基于预设的标准命令库,确定所述第一语音对应的第一音频内容与标准命令库中子标准指令的关联度,获得若干子关联度,并判断第一最大子关联度是否大于预设关联度,若是,则将第一最大子关联度所对应的子标准指令作为用户的子任务指令;
否则,则对第一音频内容进行关键词提取,获得第一音频内容的关键词,并基于关键词在第一音频内容中的时间顺序对关键词进行语句重构,获得第二音频内容,确定所述第一语音对应的第一音频内容与所述标准命令库中子标准指令的关联度,获得若干子关联度,并判断第二最大子关联度是否大于预设关联度,若是,则将第二最大子关联度所对应的子标准指令作为用户的子任务指令,,若最大的子关联度不大于预设关联度,则提醒用户语音识别失败;
将子任务指令传输至储存单元进行储存。
该本实施例中,相似度为音频内容与预设内容的相似度。
该本实施例中,预先训练好的声学模型为GMM-HMM语音识别模型。
在本实施例中,第一声纹序列为将第一语音信息的声波频谱通过spade算法计算得到声纹数据的频繁序列。
在本实施例中,历史语音信息的声纹序列为历史中进行验证的语音信息所对应的频繁序列,通过比较历史语音信息的声纹序列和第一声纹序列,可以判断第一声纹序列所对应的用户是否为与以往声音信息所对应的用户一致。
在本实施例中,字符序列为对任务口令处理的过程中产生的数据,包括任务口令的时间和任务口令对应的声纹序列。
在本实施例中,处理事件集合为对字符序列进行分割,得到任务口令处理的过程中产生的数据,包括任务口令的时间和任务口令对应的声纹序列,并基于任务口令的时间将对任务口令的处理过程进行记录,从而获得处理事件集合。
在本实施例中,任务口令为用户所发出的口令。
在本实施例中,口令标识为任务口令中的关键词,如打开、关闭、电视、空调等。
在本实施例中,预设事件集合为根据口令标识所生成的事件,如根据打开和电视两个关键词,生成打开冰箱的预设事件。
在本实施例中,事件重叠度为处理事件集合中事件与预设事件集合中事件之间的匹配度。
在本实施例中,事件合格度为第一语音信息中所包含事件的合格度。
在本实施例中,事件的重叠次序为处理事件集合中事件与预设事件集合中事件之间相互重叠的次序。
在本实施例中,若干子关联度为第一语音对应的第一音频内容与标准命令库中每一子标准指令的关联度。
在本实施例中,滑动窗口函数为python滑动窗口函数。
在本实施例中,第一音素信息为提取第一语音信息的频率、强度、音素特征后,将音素分离出得到的信息。
上述方案的有益效果为:通过采集用户的语音,识别用户进行权限验证,当用户有权限时,才可以对家电进行控制,防止不法分子通过智能家电危害用户的人身健康和财产安全,当用户通过验证后,对语音内容进行识别,当语音为标准指令时,直接下发指令,当语音内容不是标准指令时,提取关键词进行识别,方便用户下发指令。
实施例7
基于实施例1的基础上,如图2所示,采集模块,还进行以下操作:
位置采集单元:用于据家庭住址信息查询该住址所在地理位置,并根据所述地理位置,从云端网络收集该地理位置的天气预报信息,并请示用户是否需要关窗,并根据所述家庭住址信息查询该住址所在社区信息,并根据所述社区信息,从云端网络收集该社区的水电供给公告,分析确定水电断供和恢复的时间信息,并提醒用户水电断供和恢复的时间。
上述方案的有益效果为:通过云端数据采集模块获取用户小区位置的天气预报信息和社区的水电断供时间信息,方便电控制中枢模块对智能家电进行更有效的管控。
实施例8
基于实施例1的基础上,如图1所示,本发明实施例提供了一种实现家电协同工作的智能手机,包括:
所述智能门禁系统对预进入人员进行权限验证时,首先,获取预进入人员的图像信息;然后,针对用户的图像信息进行分析得到预进入人员的面部特征;接着,基于预进入人员的面部特征和如下公式判断预进入人员是否具有准入权限:
上述公式中表示预进入人员的面部特征与准入权限库中人员的面部特征的判断值的最小值,/>表示预进入人员的面部特征与准入权限库中人员的面部特征的判断值的最大值,/>表示预进入人员的面部特征与准入权限库中人员的面部特征的平均判断值,/>{ }表示最小函数,/>ax{ }表示最大函数,/>表示具有准入权限的所有用户的第i个面部特征的平均特征值,/>表示所述预进入人员的面部特征中的第/>个特征的值,/>表示准入权限库中第/>名用户的第/>个特征的值,/>表示常数,/>表示具有准入权限库的所有用户的个数;
在通过公式针对预进入人员面部特征中第/>个特征与准入权限库中所有人员依次判断,从而得到/>个数据,/>是获取m个数据中最小数据,例如/>的取值为5时得到的/>,那么/>的取值为-0.14,/>是获取m个数据中的最大数据,例如,/>,/>的取值为0.56,则/>表示为0.21,当/>小于0.5时,则预进入人员的准入权限进行持续验证,其包括:向需要持续验证的预进入人员分配识别次数,且识别次数根据如下公式实现:
其中,h表示最终识别次数,a1、a2、a3表示不同平均判断值对应的分配的识别次数;
根据所述最终识别次数,对所述预进入人员进行对应次数的识别验证,若所有识别验证结果对应的平均判断值都小于0.5,则进行报警提醒,且判定所述预进入人员不具备准入权限。
该实施例中,门禁系统是设置在智能手机上的智能识别软件。
上述方案的有益效果为:门禁系统通过分析得到预进入人员的面部特征,并与准入库中的面部特征进行对比,判断预进入人员是否具有进入权限,在为用户提供智能化服务的同时,提供了安全保障,且通过进行识别次数的分配,有效保证人员的有效识别,进一步丰富智能手机的功能性。
实施例9
基于实施例1的基础上,如图3所示,控制模块,还包括:
分析单元:用于对任务指令进行分析,确定任务指令中预启动的子家电和预关闭的子家电,同时,对分析时刻前且处于运行状态的子家电的功率进行累加计算,获得住所内家电的第一总功率;
所述分析单元:还用于基于预启动的子家电和第一预关闭的子家电对第一总功率进行更新,获得第二总功率,将所述第二总功率与预设的最大允许功率进行比较,当所述第二总功率大于住所最大允许功率时,获取住所内正在同时工作的子家电对应的子工作内容;
基于预设的工作内容所对应的优先等级,将所有子工作内容进行排序,得到排序结果;
基于排序结果、住所最大允许功率、预启动的子家电的信息,确定第二预关闭的子家电序列,并向用户发送预关闭的子家电序列,请示用户是否关闭预关闭家电,若用户同意,则关闭预关闭家电,若用户不同意,则请求用户更改任务指令。
上述方案的有益效果为:在用户下发指令后,获取正在运行的智能家电的总功率,并判断执行指令后总功率是否超出的允许范围,当该总功率超出允许范围后,根据支路上同时工作的多个智能家电当前的工作内容,基于预设的工作内容所对应的优先等级,将工作内容进行排序得到排序结果,并根据排序结果,在保证所排多个工作内容所对应的多个智能家电的总功率和住所总功率最大允许范围的前提下,同时进行最多个数的智能家电运行。保证工作任务能够快速完成。提高智能家电的工作效率的同时,降低安全隐患。
实施例10
基于实施例1的基础上,如图4所示,切换模块,还包括:
分析单元:用于对任务指令进行分析,确定任务指令中预启动的子家电和预关闭的子家电,同时,对分析时刻前且处于运行状态的子家电的功率进行累加计算,获得住所内家电的第一总功率;
所述分析单元:还用于基于预启动的子家电和第一预关闭的子家电对第一总功率进行更新,获得第二总功率,将所述第二总功率与预设的最大允许功率进行比较,当所述第二总功率大于住所最大允许功率时,获取住所内正在同时工作的子家电对应的子工作内容;
基于预设的工作内容所对应的优先等级,将所有子工作内容进行排序,得到排序结果;
基于排序结果、住所最大允许功率、预启动的子家电的信息,确定第二预关闭的子家电序列,并向用户发送预关闭的子家电序列,请示用户是否关闭预关闭家电,若用户同意,则关闭预关闭家电,若用户不同意,则请求用户更改任务指令。
在本实施例中,特征向量为关键点在线性变换中方向不变的本征向量。
在本实施例中,对应关系为关键点的定位信息与关键点的特征向量之间一一对应的关系。
在本实施例中,关键点为脸部的边缘点以及眼睛、嘴巴、鼻子的边缘点。
在本实施例中,定位信息为每一子关键点在以第二关键图像的中心点为原点的坐标系中的坐标。
在本实施例中,对应关系为同一特征点的位置与特征向量之间的不可分割关系。
在本实施例中,子预设点位为子标记帧图像中的预设点位。
上述技术方案的有益效果是:门禁系统通过对预进入人员进行面部图像采集,并进行处理分析后得到预进入人员的面部特征,并与准入库中的面部特征进行对比,判断预进入人员是否具有进入权限,在预进入人员无准入权限,则向用户发送预进入人员的面部视频数据,并请示用户是否需要打开门禁系统,使得用户可以远程控制是否允许预进入人员进入住宅,在为用户提供智能化服务的同时,提供了安全保障。
实施例11
基于实施例1的基础上,如图2所示,控制模块,还包括:
采集单元:对所述子家电进行实时监测,当子家电开始工作时,获取采集指令,预设设备根据所述采集指令分别对正在工作的子家电进行声音采集,获得若干子声音数据;
处理单元:对采集到的子声音数据进行预处理,以得到实时声音数据,并将所述实时声音数据分解为若干阶瞬时频率的乘积函数分量,并将所述乘积函数分量的能量与实时声音数据的总能量之比作为声音特征向量;
检测单元:用于将所述声音特征向量作为声音特征,并基于声音特征判断所述实时声音数据是否异常;
当所述实时声音数据异常时,确定所述子家电存在故障,并进行报警;
当所述实时声音数据无异常时,确定所述子家电不存在故障。
在本实施例中,瞬时频率为将实时声音数据分成若干个全波段,然后以一组递增的反正弦函数定义每个全波段的瞬时相位,从而得到瞬时相位。
在本实施例中,乘积函数分量为瞬时相位的局部均值分解中乘积函数分量。
上述方案的有益效果为:获取执行设备在运行时的第一音频信号,并进行变换、计算、提取、识别,判断家电是否发生故障,若发生故障,则进行故障报警,使得用户可以实时掌握家电的情况,并及时修理。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种实现智能家电协同工作的智能手机,其特征在于,包括:
采集模块,用于获取用户的任务指令;
控制模块,用于基于任务指令,生成子操作命令;
切换模块,用于基于子操作命令,切换子家电的工作状态;
采集模块,还包括:
验证单元:用于接收用户发出的任务口令,获得用户的第一语音信息,对所述第一语音信息进行声纹量化,获得第一语音信息的第一声纹序列,基于滑动窗口函数对第一声纹序列和历史语音信息的声纹序列进行比对,获得第一语音信息与历史语音信息的相似度;
所述验证单元:还用于在对任务口令处理的过程中,获取产生的字符序列,并所述字符序列进行分割处理,构建处理事件集合;
所述验证单元:还用于对所述任务口令进行口令解析,获得口令标识,从口令事件数据库中提取预设事件集合,将所述处理事件集合与预设事件集合进行比较,获得事件重叠度,并根据事件的重叠次序,对所述事件重叠度进行调整,获得事件合格度;
当所述相似度大于预设相似度,且所述事件合格度大于预设合格度时,判定所述第一语音信息通过权限验证;
指令采集单元:基于储存单元获取第一语音信息,并对通过权限验证第一语音信息进行特征提取,获取第一语音特征,将所述第一语音特征进行处理,得到第一音素信息,将所述第一音素信息输入预设的声学模型中,得到第一语音识别结果,确定所述第一语音信息对应的第一音频内容;
基于预设的标准命令库,确定所述第一语音对应的第一音频内容与标准命令库中子标准指令的关联度,获得若干子关联度,并判断第一最大子关联度是否大于预设关联度,若是,则将第一最大子关联度所对应的子标准指令作为用户的子任务指令;
否则,则对第一音频内容进行关键词提取,获得第一音频内容的关键词,并基于关键词在第一音频内容中的时间顺序对关键词进行语句重构,获得第二音频内容,确定所述第一语音对应的第一音频内容与所述标准命令库中子标准指令的关联度,获得若干子关联度,并判断第二最大子关联度是否大于预设关联度,若是,则将第二最大子关联度所对应的子标准指令作为用户的子任务指令,若最大的子关联度不大于预设关联度,则提醒用户语音识别失败;
将子任务指令传输至储存单元进行储存;
智能门禁系统对预进入人员进行权限验证时,首先,获取预进入人员的图像信息;然后,针对用户的图像信息进行分析得到预进入人员的面部特征;接着,基于预进入人员的面部特征和如下公式判断预进入人员是否具有准入权限:
上述公式中表示预进入人员的面部特征与准入权限库中人员的面部特征的判断值的最小值,/>表示预进入人员的面部特征与准入权限库中人员的面部特征的判断值的最大值,/>表示预进入人员的面部特征与准入权限库中人员的面部特征的平均判断值,/>{ }表示最小函数,/>ax{ }表示最大函数,/>表示具有准入权限的所有用户的第i个面部特征的平均特征值,/>表示所述预进入人员的面部特征中的第/>个特征的值,/>表示准入权限库中第/>名用户的第/>个特征的值,/>表示常数,/>表示具有准入权限库的所有用户的个数;
在通过公式针对预进入人员面部特征中第/>个特征与准入权限库中所有人员依次判断,从而得到/>个数据,/>是获取m个数据中最小数据,当/>小于0.5时,则预进入人员的准入权限进行持续验证,其包括:向需要持续验证的预进入人员分配识别次数,且识别次数根据如下公式实现:
其中,h表示最终识别次数,a1、a2、a3表示不同平均判断值对应的分配的识别次数;
根据所述最终识别次数,对所述预进入人员进行对应次数的识别验证,若所有识别验证结果对应的平均判断值都小于0.5,则进行报警提醒,且判定所述预进入人员不具备准入权限。
2.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,所述子家电包括:智能摄像头、人脸识别门禁系统、智能温空系统、智能窗帘、智能开关中的任一种或多种的组合。
3.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,所述子操作命令包括:对单一子家电的单一指令、对单一子家电的综合指令或对多个子家电的联动指令。
4.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,所述控制模块,包括:
定位单元:用于获取所述智能手机的位置信息;
控制单元:用于基于位置信息获取的智能手机与住所的距离小于预设值时,对智能手机的移动轨迹进行捕捉,获得用户的行动轨迹,并基于道路信息和行动轨迹对用户的目的地进行预估,当用户的预估目的地为住所所在地时,控制相关智能设备开始工作。
5.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,所述采集模块,包括:
状态采集单元:用于周期性对子家电进行状态查询,获得若干子状态信息,并对子状态信息进行识别,获得子状态信息的子代码,并基于子代码确定子状态信息对应的子家电,从而获得子家电的子工作状态;
状态更新单元:用于基于智能手机对子家电的子工作状态进行状态更新。
6.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,采集模块,还包括:
位置采集单元:用于据家庭住址信息查询该住址所在地理位置,并根据所述地理位置,从云端网络收集该地理位置的天气预报信息,并请示用户是否需要关窗,并根据所述家庭住址信息查询该住址所在社区信息,并根据所述社区信息,从云端网络收集该社区的水电供给公告,分析确定水电断供和恢复的时间信息,并提醒用户水电断供和恢复的时间。
7.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,控制模块,还包括:
分析单元:用于对任务指令进行分析,确定任务指令中预启动的子家电和预关闭的子家电,同时,对分析时刻前且处于运行状态的子家电的功率进行累加计算,获得住所内家电的第一总功率;
所述分析单元:还用于基于预启动的子家电和第一预关闭的子家电对第一总功率进行更新,获得第二总功率,将所述第二总功率与预设的最大允许功率进行比较,当所述第二总功率大于住所最大允许功率时,获取住所内正在同时工作的子家电对应的子工作内容;
基于预设的工作内容所对应的优先等级,将所有子工作内容进行排序,得到排序结果;
基于排序结果、住所最大允许功率、预启动的子家电的信息,确定第二预关闭的子家电序列,并向用户发送预关闭的子家电序列,请示用户是否关闭预关闭家电,若用户同意,则关闭预关闭家电,若用户不同意,则请求用户更改任务指令。
8.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,切换模块,包括:
检测单元单元:基于人脸识别门禁系统对预进入人员进行面部图像采集,获得预进入人员的面部视频数据,并对面部视频数据中每一子图像进行灰度检测,获得子图像中每个像素点的灰度值,基于所述子图像中每个像素点的灰度值,提取预进入人员的面部轮廓,从而获得预进入人员的面部图像区域;
预处理单元:基于面部图像区域的平均亮度值与预设的目标亮度值的差异,确定所述面部图像区域的亮度调整比例值,基于面部图像区域的亮度值,设置面部图像区域的亮度调整权重值,基于所述面部图像区域的亮度调整权重值,对面部图像区域的亮度进行调整,得到标准亮度图像,对所述标准亮度图像进行面部检测,获取面部的关键点,并对所述关键点进行定位,获得定位信息,基于所述定位信息,对所述关键点进行特征提取,获得对应关键点的特征向量,并将所述特征向量与对应关键点的定位信息建立对应关系,从而得到标准亮度图像中人脸的面部特征;
识别单元:基于标准亮度图像中人脸的面部特征在预设权限库中进行检索,确定预进入人员的准入权限,若预进入人员具有准入权限,则打开门禁系统,若预进入人员无准入权限,则向用户发送预进入人员的面部视频数据,并请示是否需要打开门禁系统。
9.根据权利要求1所述的一种实现家电协同工作的智能手机,其特征在于,控制模块,还包括:
采集单元:对所述子家电进行实时监测,当子家电开始工作时,获取采集指令,预设设备根据所述采集指令分别对正在工作的子家电进行声音采集,获得若干子声音数据;
处理单元:对采集到的子声音数据进行预处理,以得到实时声音数据,并将所述实时声音数据分解为若干阶瞬时频率的乘积函数分量,并将所述乘积函数分量的能量与实时声音数据的总能量之比作为声音特征向量;
检测单元:用于将所述声音特征向量作为声音特征,并基于声音特征判断所述实时声音数据是否异常;
当所述实时声音数据异常时,确定所述子家电存在故障,并进行报警;
当所述实时声音数据无异常时,确定所述子家电不存在故障。
CN202110942541.6A 2021-08-17 2021-08-17 一种实现家电协同工作的智能手机 Active CN113593583B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110942541.6A CN113593583B (zh) 2021-08-17 2021-08-17 一种实现家电协同工作的智能手机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110942541.6A CN113593583B (zh) 2021-08-17 2021-08-17 一种实现家电协同工作的智能手机

Publications (2)

Publication Number Publication Date
CN113593583A CN113593583A (zh) 2021-11-02
CN113593583B true CN113593583B (zh) 2024-02-13

Family

ID=78258441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110942541.6A Active CN113593583B (zh) 2021-08-17 2021-08-17 一种实现家电协同工作的智能手机

Country Status (1)

Country Link
CN (1) CN113593583B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115801840B (zh) * 2022-12-05 2023-12-15 北京金安道大数据科技有限公司 一种大数据检测系统

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1375802A (zh) * 2002-04-17 2002-10-23 吴远彪 多个电器单元的单线传输控制装置
CN101599270A (zh) * 2008-06-02 2009-12-09 海尔集团公司 语音服务器及语音控制的方法
CN103730109A (zh) * 2014-01-14 2014-04-16 重庆大学 一种公共场所异常声音特征提取方法
CN103944941A (zh) * 2013-01-22 2014-07-23 联想(北京)有限公司 一种电子设备的控制方法、装置及系统
CN104994306A (zh) * 2015-06-29 2015-10-21 厦门美图之家科技有限公司 一种基于脸部亮度自动调整曝光度的摄像方法和摄像装置
CN105743094A (zh) * 2016-04-22 2016-07-06 国网江苏省电力公司连云港供电公司 电网需求响应控制系统
CN106647645A (zh) * 2015-11-02 2017-05-10 中兴通讯股份有限公司 一种家居控制调节的方法及系统
CN108090406A (zh) * 2016-11-23 2018-05-29 浙江宇视科技有限公司 人脸识别方法及系统
CN207966013U (zh) * 2018-03-07 2018-10-12 广州群志科技股份有限公司 一种异步识别口令、声纹与指纹的电子开关控制装置
CN108702313A (zh) * 2018-04-28 2018-10-23 深圳魔耳智能声学科技有限公司 智能家居语音控制方法、装置、设备和系统
CN108766432A (zh) * 2018-07-02 2018-11-06 珠海格力电器股份有限公司 一种控制家电间协同工作的方法
CN108877009A (zh) * 2018-07-04 2018-11-23 深圳大图科创技术开发有限公司 一种基于人脸识别的智能门禁系统
CN109784152A (zh) * 2018-12-10 2019-05-21 尹强国 一种面部识别系统
CN111079712A (zh) * 2019-12-31 2020-04-28 中国银行股份有限公司 基于人脸识别的权限管理方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070127787A1 (en) * 2005-10-24 2007-06-07 Castleman Kenneth R Face recognition system and method
CN102117062A (zh) * 2009-12-31 2011-07-06 青岛海尔软件有限公司 智能家居系统
CN102625007A (zh) * 2011-01-26 2012-08-01 中山爱科数字家庭产业孵化基地有限公司 一种语音识别的家庭设备控制方法
JP2015195477A (ja) * 2014-03-31 2015-11-05 ブラザー工業株式会社 プログラム、端末装置および方法
CN104683193A (zh) * 2015-02-02 2015-06-03 惠州Tcl移动通信有限公司 一种通讯终端的应用方法及智能家庭系统

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1375802A (zh) * 2002-04-17 2002-10-23 吴远彪 多个电器单元的单线传输控制装置
CN101599270A (zh) * 2008-06-02 2009-12-09 海尔集团公司 语音服务器及语音控制的方法
CN103944941A (zh) * 2013-01-22 2014-07-23 联想(北京)有限公司 一种电子设备的控制方法、装置及系统
CN103730109A (zh) * 2014-01-14 2014-04-16 重庆大学 一种公共场所异常声音特征提取方法
CN104994306A (zh) * 2015-06-29 2015-10-21 厦门美图之家科技有限公司 一种基于脸部亮度自动调整曝光度的摄像方法和摄像装置
CN106647645A (zh) * 2015-11-02 2017-05-10 中兴通讯股份有限公司 一种家居控制调节的方法及系统
CN105743094A (zh) * 2016-04-22 2016-07-06 国网江苏省电力公司连云港供电公司 电网需求响应控制系统
CN108090406A (zh) * 2016-11-23 2018-05-29 浙江宇视科技有限公司 人脸识别方法及系统
CN207966013U (zh) * 2018-03-07 2018-10-12 广州群志科技股份有限公司 一种异步识别口令、声纹与指纹的电子开关控制装置
CN108702313A (zh) * 2018-04-28 2018-10-23 深圳魔耳智能声学科技有限公司 智能家居语音控制方法、装置、设备和系统
CN108766432A (zh) * 2018-07-02 2018-11-06 珠海格力电器股份有限公司 一种控制家电间协同工作的方法
CN108877009A (zh) * 2018-07-04 2018-11-23 深圳大图科创技术开发有限公司 一种基于人脸识别的智能门禁系统
CN109784152A (zh) * 2018-12-10 2019-05-21 尹强国 一种面部识别系统
CN111079712A (zh) * 2019-12-31 2020-04-28 中国银行股份有限公司 基于人脸识别的权限管理方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
A Face Detection Algorithm Based on Two Information Flow Block and Retinal Receptive Field Block;Shaoqi Hou,et al.;《IEEE Access》;第8卷;全文 *
基于人脸识别的电网用户身份自动认证系统设计;盛妍等;《自动化与仪器仪表》;第11卷;全文 *
王克.《五邑大学"挑战杯"获奖作品集》.广东人民出版社 ,2008,第412-419页. *

Also Published As

Publication number Publication date
CN113593583A (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
CN105700363B (zh) 一种智能家居设备语音控制装置的唤醒方法及系统
CN109980781B (zh) 一种变电站智能监控系统
US11252378B1 (en) Batteryless doorbell with rectified power delivery
US11647165B1 (en) Audio/video recording and communication doorbell devices including transistor assemblies, and associated systems and methods
US10803719B1 (en) Batteryless doorbell with energy harvesters
CN112001284A (zh) 基于人工智能的劳务实名制管理系统
WO2014139415A1 (zh) 一种智能门窗防入侵装置以及系统、智能门禁系统
US20210043018A1 (en) Smart door system
CN113593583B (zh) 一种实现家电协同工作的智能手机
CN109118617A (zh) 一种应用于变电站的门禁系统及其识别方法
CN111126885B (zh) 一种基于物联网的智慧用电调度方法及系统
CN105931338A (zh) 一种基于人脸识别的智慧小区管理系统
CN105701457A (zh) 基于人脸识别控制的直流电磁继电器装置及其控制方法
CN113129495A (zh) 一种智慧社区门禁识别系统
CN109188931A (zh) 一种智能家居远程监控系统及其使用方法
US11412189B1 (en) Batteryless doorbell with multi-load power delivery
CN115567690A (zh) 一种自动识别现场作业危险点的智慧监控系统
CN113110094B (zh) 一种基于物联网的智能家居控制系统
CN112785765A (zh) 基于大数据分析的智能家居远程控制用户授权方法及智能家居云控制平台
US10834366B1 (en) Audio/video recording and communication doorbell devices with power control circuitry
CN215580544U (zh) 基于图像识别的智能变电站状态监控系统
CN204759561U (zh) 一种人脸识别的门禁安防装置
CN114241649A (zh) 一种基于计算机的人工智能识别系统
CN107452103A (zh) 一种楼宇智能门禁系统
CN113177453A (zh) 一种基于图像识别的智慧小区智能监管系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant