CN107360157A - 一种用户注册方法、装置及智能空调器 - Google Patents

一种用户注册方法、装置及智能空调器 Download PDF

Info

Publication number
CN107360157A
CN107360157A CN201710558273.1A CN201710558273A CN107360157A CN 107360157 A CN107360157 A CN 107360157A CN 201710558273 A CN201710558273 A CN 201710558273A CN 107360157 A CN107360157 A CN 107360157A
Authority
CN
China
Prior art keywords
targeted customer
user
image
registered images
air conditioner
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710558273.1A
Other languages
English (en)
Inventor
张江鹏
唐食明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Meiling Union Technology Co Ltd
Original Assignee
Mianyang Meiling Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mianyang Meiling Software Technology Co Ltd filed Critical Mianyang Meiling Software Technology Co Ltd
Priority to CN201710558273.1A priority Critical patent/CN107360157A/zh
Publication of CN107360157A publication Critical patent/CN107360157A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1073—Registration or de-registration
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0815—Network architectures or network communication protocols for network security for authentication of entities providing single-sign-on or federations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G10L2015/025—Phonemes, fenemes or fenones being the recognition units
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Abstract

本发明提供了一种用户注册方法、装置及智能空调器，装置应用于智能空调器，包括：音频处理模块、图像处理模块、信息采集模块和控制模块；其中，音频处理模块，用于采集目标用户输入的第一语音信息，在采集的第一语音信息携带预设唤醒词时，向图像处理模块发送第一触发信号；图像处理模块，用于在接收到第一触发信号时，获取并存储目标用户的注册图像，确定注册图像对应的标识信息，并向信息采集模块发送第二触发信号；信息采集模块，用于在接收到第二触发信号时，采集目标用户的偏好信息；控制模块，用于将标识信息和偏好信息确定为目标用户的注册信息，并存储。本发明实施例提供的技术方案，用户体验较好。

Description

一种用户注册方法、装置及智能空调器
技术领域
本发明涉及电子信息技术领域，特别涉及一种用户注册方法、装置及智能空调器。
背景技术
随着经济的发展和人们生活水平的提高，为了满足用户不断增长的个性化需求，智能空调器的应用已得到广泛的普及，智能空调器可通过采集相应用户的注册图像(比如，人脸图像)及偏好信息来形成用户所对应的注册信息，实现用户注册，空调器则可在后续过程中根据形成的注册信息实现个性化运行。
目前，智能空调器在实现用户注册时，通常需要部署相应的服务端和移动终端，用户通过与移动终端进行人机交互以输入注册图像和偏好信息，输入的注册图像和编号信息由服务端转发至智能空调器，实现过程复杂，用户操作繁琐，导致用户体验相对较差。
发明内容
本发明实施例提供了一种用户注册方法、装置及智能空调器，用户体验较好。
第一方面，本发明提供了一种用户注册装置，应用于智能空调器，包括：
音频处理模块、图像处理模块、信息采集模块和控制模块；其中，
所述音频处理模块，用于采集目标用户输入的第一语音信息，在采集的第一语音信息携带预设唤醒词时，向所述图像处理模块发送第一触发信号；
所述图像处理模块，用于在接收到第一触发信号时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息，并向信息采集模块发送第二触发信号；
所述信息采集模块，用于在接收到第二触发信号时，采集所述目标用户的偏好信息；
所述控制模块，用于将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
优选地，
所述信息采集模块，包括：存储单元、音频播放单元、音频解析单元和对比处理单元；
所述存储单元，用于存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
所述音频播放单元，用于在接收到所述图像处理模块发送的第二触发信号时，播放预设提示语音；
所述音频处理模块，进一步用于采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
所述音频解析单元，用于解析第二语音信息以形成至少一帧语音信息，提取每一帧所述语音信息的音素特征；
所述对比处理单元，用于将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息；
优选地，
所述信息采集模块，用于在接收到第二触发信号时，监测所述智能空调器的空调本体在指定时间段内的运行状态，根据所述运行状态确定所述目标用户的偏好信息。
优选地，
所述图像处理模块，用于在接收到第二触发信号时，采集指定区域的监控图像；从采集的监控图像中提取出所述目标用户的人脸图像；在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。
优选地，
还包括：光线感应器和红外二极管补光阵列；
所述光线感应器，用于实时检测所述指定区域的光照强度，并将所述光照强度发送至所述控制模块；
所述控制模块，用于判断接收的光照强度是否小于预设强度阈值，在接收的光照强度小于预设阈值时，控制所述红外二极管补光阵列为所述指定区域补光。
优选地，
所述音频处理模块，进一步用于接收登录用户输入的第三语音信息，在接收的第三语音信息中携带登录关键词时，向所述图像处理模块发送第三触发信号；
所述图像处理模块，用于在接收到第三触发信号时，获取所述登录用户的当前图像，从存储的各个注册图像中确定出对应当前图像的目标注册图像，将目标注册图像所对应的目标标识信息发送至所述控制模块；
所述控制模块，用于根据存储的各个注册信息，确定对应所述目标标识信息的目标偏好信息，根据目标偏好信息控制所述智能空调器的空调本体运行。
优选地，
所述图像处理模块，用于从存储的各个注册图像中选择一个未被选择过的注册图像；通过如下公式计算选择的注册图像与获取的当前图像之间的相似度：
其中，X表征注册图像与当前图像之间的相似度、Mi表征选择的注册图像中第i个采样块的直方图、Si表征当前图像中第i个采样块的直方图；
在计算的相似度大于设定阈值时，将选择的注册图像确定为目标注册图像。
第二方面，本发明实施例提供了一种智能空调器，包括如上述第一方面中任一所述的用户注册装置。
第三方面，本发明实施例提供了一种用户注册方法，应用于智能空调器的用户注册装置，包括：
采集目标用户输入的第一语音信息；
在采集的第一语音信息携带预设唤醒词时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息；
采集所述目标用户的偏好信息；
将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
优选地，
在所述确定注册图像对应的标识信息之后，在所述采集所述目标用户的偏好信息之前，还包括：
播放预设提示语音；
预先存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
则，所述采集所述目标用户的偏好信息，包括：
采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
解析第二语音信息以形成至少一帧语音信息，并提取每一帧所述语音信息的音素特征；
将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息；
优选地，
所述采集所述目标用户的偏好信息，包括：监测所述智能空调器的空调本体在指定时间段内的运行状态，根据所述运行状态确定所述目标用户的偏好信息。
优选地，
所述获取并存储所述目标用户的注册图像，包括：
采集指定区域的监控图像；
从采集的监控图像中提取出所述目标用户的人脸图像；
在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。
本发明实施例提供了一种用户注册方法、装置及智能空调器，该用户注册装置应用于智能空调器，其音频处理模块在采集到由目标用户输入、且携带有预设唤醒词的第一语音信息时，则可触发图像处理模块获取并存储目标用户的注册图像，图像处理模块还可以针对采集的注册图像分配相应的标识信息，即分配对应于目标用户的标识信息，并触发信息采集模块，信息采集模块则可继续采集用户的偏好信息，比如通过对用户行为进行监控以采集用户的偏好信息或接收用户通过语音输入的命令词以实现采集用户的偏好信息，控制模块则可将图像处理模块分配的标识信息和信息采集模块采集的偏好信息确定为目标用户所对应的注册信息，并存储。综上可见，本发明实施例提供的用户注册装置一体化设置到智能空调器中，无需用户与其他的移动终端进行人机交互即可实现用户注册，用户体验较好。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明一实施例提供的用户注册装置的结构示意图；
图2是本发明一实施例提供的另一种用户注册装置的结构示意图；
图3是本发明一实施例提供的又一种用户注册装置的结构示意图；
图4是本发明一实施例提供的一种智能空调器的结构示意图；
图5是本发明一实施例提供的一种用户注册方法的流程图；
图6是本发明一实施例提供的另一种用户注册方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例，基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，本发明实施例提供了一种用户注册装置，应用于智能空调器，包括：
音频处理模块101、图像处理模块102、信息采集模块103和控制模块104；其中，
所述音频处理模块101，用于采集目标用户输入的第一语音信息，在采集的第一语音信息携带预设唤醒词时，向所述图像处理模块102发送第一触发信号；
所述图像处理模块102，用于在接收到第一触发信号时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息，并向信息采集模块103发送第二触发信号；
所述信息采集模块103，用于在接收到第二触发信号时，采集所述目标用户的偏好信息；
所述控制模块104，用于将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
本发明上述实施例中，该用户注册装置应用于智能空调器，其音频处理模块在采集到由目标用户输入、且携带有预设唤醒词的第一语音信息时，则可触发图像处理模块获取并存储目标用户的注册图像，图像处理模块还可以针对采集的注册图像分配相应的标识信息，即分配对应于目标用户的标识信息，并触发信息采集模块，信息采集模块则可继续采集用户的偏好信息，比如通过对用户行为进行监控以采集用户的偏好信息或接收用户通过语音输入的命令词以实现采集用户的偏好信息，控制模块则可将图像处理模块分配的标识信息和信息采集模块采集的偏好信息确定为目标用户所对应的注册信息，并存储。综上可见，本发明实施例提供的用户注册装置一体化设置到智能空调器中，无需用户与其他的移动终端进行人机交互即可实现用户注册，用户体验较好。
相应的，为了实现根据目标用户所对应的偏好信息对智能空调器中空调器本体的运行状态进行控制，本发明一个实施例中，
所述音频处理模块101，进一步用于接收登录用户输入的第三语音信息，在接收的第三语音信息中携带登录关键词时，向所述图像处理模块102发送第三触发信号；
所述图像处理模块102，用于在接收到第三触发信号时，获取所述登录用户的当前图像，从存储的各个注册图像中确定出对应当前图像的目标注册图像，将目标注册图像所对应的目标标识信息发送至所述控制模块104；
所述控制模块104，用于根据存储的各个注册信息，确定对应所述目标标识信息的目标偏好信息，根据目标偏好信息控制所述智能空调器的空调本体运行。
本发明上述实施例中，当存在目标用户注册完成之后，后续过程中存在一个登录用户需要使用智能空调时，登录用户则可发出携带登录关键词的语音信息，音频处理模块在采集到携带登录关键词的第三语音信息之后，则可触发图像处理模块继续采集登录用户的当前图像(比如，登录用户的人脸图像)，通过图像识别算法对采集的当前图像与已经存储的各个注册图像进行对比以确定登录用户的身份，即检测存储的各个注册图像中是否存在该登录用户的注册图像时，如果是，则通过该登录用户的注册图像所对应的标识信息确定出登录用户的身份；控制器则可通过相应的标识信息从存储的各个注册信息中确定出登录用户的偏好信息，并根据确定的偏好信息控制智能空调器的空调器本体个性化运行。
具体地，本发明一个实施例中，所述图像处理模块102，用于从存储的各个注册图像中选择一个未被选择过的注册图像；通过如下公式1计算选择的注册图像与获取的当前图像之间的相似度；
公式1包括：
其中，X表征注册图像与当前图像之间的相似度、Mi表征选择的注册图像中第i个采样块的直方图、Si表征当前图像中第i个采样块的直方图；
在计算的相似度大于设定阈值时，将选择的注册图像确定为目标注册图像。
应当理解的是，图像处理模块也可调用其他图像识别算法来计算登录用户的当前图像与存储的各个注册图像之间的相似度。
为了便于根据注册图像来区别不同用户的身份，本发明一个实施例中，所述图像处理模块102，用于在接收到第二触发信号时，采集指定区域的监控图像；从采集的监控图像中提取出所述目标用户的人脸图像；在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。具体地，被确定为注册图像的人脸图像中应当存在目标用户的眼睛、鼻子、嘴巴和脸部等重要特征，脸部面积应当有不小于80％位于人脸图像内，且人脸图像的亮度符合相应的要求，便于后续过程中能够通过存储的各个注册图像对登录用户的身份进行识别。
应当理解的是，当图像处理模块在后续过程中再次采集到目标用户的人脸图像时，即使像素点和人脸角度等存在细微变化，也可以自动将该人脸图像再次确定为该目标用户的一个注册图像，且同一个目标用户所分别对应的多个注册图像具有相同的标识信息；在后续过程中通过存储的各个注册图像针对登录用户的身份进行识别时，可提高识别效率。
相应的，为了能够清楚准确的获取目标用户的注册图像及登录用户的当前图像，如图2所示，本发明一个实施例中，所述用户注册装置还包括：光线感应器201和红外二极管补光阵列202；
所述光线感应器201，用于实时检测所述指定区域的光照强度，并将所述光照强度发送至所述控制模块104；
所述控制模块104，用于判断接收的光照强度是否小于预设强度阈值，在接收的光照强度小于预设阈值时，控制所述红外二极管补光阵列202为所述指定区域补光。
本发明一个实施例中，信息采集模块具体可以通过如下三种方式中的任意一种或多种来采集目标用户的偏好信息：
方式1：通过提取用户输入的语音信息中携带的至少一个目标命令次来确定目标用户的偏好信息。
方式2：通过在获取并存储了目标用户的注册图像，并针对目标用户的注册图像分配相应的标识信息之后，监控智能空调器中空调器本体在设定时间段内的运行状态来确定目标用户的偏好信息。
方式3，通过在获取并存储了目标用户的注册图像，并针对目标用户的注册图像分配相应的标识信息之后，在设定时间段内对目标用户针对智能空调器的操作行为进行监控，根据监控的操作行为来确定目标用户的偏好信息。
针对于方式1，如图3所示，本发明一个实施例中，所述信息采集模块103，包括：存储单元1031、音频播放单元1032、音频解析单元1033和对比处理单元1034；
所述存储单元1031，用于存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
所述音频播放单元1032，用于在接收到所述图像处理模块102发送的第二触发信号时，播放预设提示语音；
所述音频处理模块101，进一步用于采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
所述音频解析单元1033，用于解析第二语音信息以形成至少一帧语音信息，提取每一帧所述语音信息的音素特征；
所述对比处理单元1034，用于将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息。
该实施例中，音频播放单元在接收到第二触发信号之后，则说明目标用户需要进行用户注册，通过音频播放模块播放预设提示语音，比如播放“请输入命令词”等提示语音，目标用户在收听到播放的预设提示语音之后，即可根据实际需求输入携带相应目标命令词的第二语音信息。
本发明上述实施例中，具体可以采用隐马尔可夫模型基于音素进行建模，即基于汉语中声母和韵母的发音进行建模。这里以通过在存储单元中存储命令词“风随人动”，以及命令词“风随人动”所对应的至少一个音素特征为例：音频处理模块可以是麦克风，首先针对麦克风采集的第二语音信息进行预处理，滤除非必要的信息和噪声，并针对预处理之后的声音数据进行端点检测以得出其起始位置，从而得到有效声音信息；然后通过音频解析单元对有效声音数据进行分帧处理以得到多帧语音信息，这里，每一帧语音信息的长度可以是10-30ms，同时，还可以对每一帧语音信息中的高频部分进行加重处理，使得每一帧语音信息中的音素特征更加明显；后续则可继续提取每一帧语音信息中的音素特征，将提取的音素特征与存储单元中存储的各个命令词所分别对应的至少一个音素特征进行匹配，若从连续的多帧语音信息中提取的各个音素特征与存储单元中命令词“风随人动”所对应的各个音素特征完全匹配且顺序正确，则将存储单元中存储的命令词“风随人动”确定为目标命令词，后续则可将目标命令词“风随人动”确定为目标用户所对应的偏好信息。
针对上述方式2，图像处理模块在针对目标用户的注册图像分配相应的标识信息之后，即实现针对目标用户分配相应的身份标识。控制模块可以控制智能空调器的空调器本体以默认运行状态运行，后续可持续监控空调器本体的运行状态，在设定时间段内，目标用户可以根据自身需求及偏好去调整空调器本体的运行状态，信息采集模块则可对设定时长内空调器本体的运行状态进行分析以确定出目标用户的偏好信息。
针对上述方式3，图像处理模块在针对目标用户的注册图像分配相应的标识信息之后，即实现针对目标用户分配相应的身份标识。控制模块可以首先控制智能空调器的空调器本体以默认运行状态运行，然后开始记录外部针对以默认运行状态运行的空调进行操作时所对应的操作行为，同时通过图像处理模块持续采集相应指定区域的监控图像，并将采集的监控图像与目标用户的注册图像进行对比以确定指定区域是否仅存在目标用户一个人，如果是，则根据记录的操作行为确定目标用户的偏好信息。举例来说，在时间点A1获取到目标用户的注册图像，并针对目标用户的注册图像分配了相应的标识信息，在时间点A1之后通过摄像头持续采集指定区域的监控图像，同时，检测到外部存在通过遥控器控制、语音控制或手势控制等操作方式改变空调器本体的运行状态，比如检测到存在用户通过语音信息输入命令词“风随人动”以改变智能空调器中空调器本体的运行状态，则可对检测的命令词进行记录，若在时间点A1至时间点A2之间的时间段内采集的各个监控图像均表明指定区域仅存在目标用户一个人，则可将命令词“风随人动”确定为目标用户的偏好信息。
如图4所示，本发明实施例提供了一种智能空调器40，所述智能空调器40包括本发明任意一个实施例中提供的用户注册装置401。
如图5所示，本发明实施立体提供了一种用户注册方法，应用于智能空调器的用户注册装置，包括：
步骤501，采集目标用户输入的第一语音信息；
步骤502，在采集的第一语音信息携带预设唤醒词时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息；
步骤503，采集所述目标用户的偏好信息；
步骤504，将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
本发明一个优选实施例中，在所述确定注册图像对应的标识信息之后，在所述采集所述目标用户的偏好信息之前，还包括：
播放预设提示语音；
预先存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
则，所述采集所述目标用户的偏好信息，包括：
采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
解析第二语音信息以形成至少一帧语音信息，并提取每一帧所述语音信息的音素特征；
将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息；
本发明一个优选实施例中，所述采集所述目标用户的偏好信息，包括：监测所述智能空调器的空调本体在指定时间段内的运行状态，根据所述运行状态确定所述目标用户的偏好信息。
本发明一个优选实施例中，所述获取并存储所述目标用户的注册图像，包括：
采集指定区域的监控图像；
从采集的监控图像中提取出所述目标用户的人脸图像；
在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。
为了更加清楚的说明本发明的技术方案及优点，下面结合本发明各个实施例提供的用户注册装置及智能空调器，请参考图1、图2、图3及图4，以利用本发明实施例提供的智能空调器实现用户注册为例，如图6所示，具体可以如下各个步骤：
步骤601，用户注册装置存储至少一个命令词以及每一个命令词所分别对应的至少一个样本音素特征。
步骤602，用户注册装置实时检测指定区域的光照强度，在光照强度小于预设阈值时，控制红外二极管补光阵列为指定区域补光。
步骤603，用户注册装置采集到携带预设唤醒词的第一语音信息时，采集指定区域的监控图像。
步骤604，用户注册装置从采集的监控图像中提取目标用户的人脸图像，并检测提取的人脸图像是否符合预设要求。
应当理解的是，用户注册装置采集到携带预设唤醒词的第一语音信息时，可以进行相应的语音提示以提醒用户站到指定区域，以便准确有效的采集符合预设要求的人脸图像，提高注册成功率。
应当理解的是，也可以无需进行相应的语音提示就直接采集指定区域的监控图像，并自动继续后续的注册流程。
应当理解的是，用户注册装置还可以通过其他方式提醒需要注册的目标用户，比如通过显示设定颜色的指示灯对目标用户进行梯形。
步骤605，在提取的人脸图像符合预设要求时，将提取的人脸图像确定为目标用户的注册图像，并形成对应该注册图像的标识信息。
本发明实施例中，在采集指定区域的监控图像时，可以以设定频率持续采集还定区域的监控图像，直到从监控图像中提取的人脸图像符合预设要求时停止采集。
应当理解的是，在不同时间点下采集的同一个目标用户的多张人脸图像均符合预设要求时，则可将多张人脸图像均确定为目标用户的注册图像，同一个目标用户所对应的多张注册图像可以对应同一个标识信息，以便通过该标识信息对相应的目标用户进行唯一标识。
步骤606，用户注册装置播放预设提示语音，以提示用户根据用户需求输入携带相应目标命令词的第二语音信息。
步骤607，用户注册装置采集目标用户根据播放的预设提示语音输入的第二语音信息，解析第二语音信息以形成至少一帧语音信息，并提取每一帧语音信息的音素特征。
步骤608，用户注册装置将提取的各个音素特征于存储的每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为目标用户的偏好信息。
步骤609，用户注册装置将形成的标识信息和确定的偏好信息确定为目标用户的注册信息。
通过上述各个步骤，即可实现用户注册业务，相应的，再通过后续各个步骤，即可实现根据用户需求控制相应智能空调器的空调器本体个性化运行。
步骤610，在用户注册装置接收到登录用户输入的携带登录关键词的第三语音信息时，获取登录用户的当前图像。
步骤611，用户注册装置从存储的各个注册图像中确定出对应当前图像的目标注册图像，并确定出目标注册图像所对应的目标标识信息。
应当理解的是，在用户注册装置接收到携带登录关键词的第三语音信息时，则说明存在用户需要登录智能空调器，并需要根据其偏好信息控制智能空调器的空调器本体运行，因此，用户注册装置则可再次采集指定区域的监控图像，并从采集的监控图像中提取登录用户的当前图像(比如人脸图像)，后续则可通过相应的图像识别算法计算登录用户的当前图像与存储的各个注册图像之间的相似度以实现对登录用户的身份进行识别。
步骤612，用户注册装置根据存储的各个注册信息，确定对应目标标识信息的目标偏好信息，根据目标偏好信息控制智能空调器的空调本体运行。
综上所述，本发明各个实施例至少具有如下有益效果：
1、本发明一实施例中，该用户注册装置应用于智能空调器，其音频处理模块在采集到由目标用户输入、且携带有预设唤醒词的第一语音信息时，则可触发图像处理模块获取并存储目标用户的注册图像，图像处理模块还可以针对采集的注册图像分配相应的标识信息，即分配对应于目标用户的标识信息，并触发信息采集模块，信息采集模块则可继续采集用户的偏好信息，比如通过对用户行为进行监控以采集用户的偏好信息或接收用户通过语音输入的命令词以实现采集用户的偏好信息，控制模块则可将图像处理模块分配的标识信息和信息采集模块采集的偏好信息确定为目标用户所对应的注册信息，并存储。综上可见，本发明实施例提供的用户注册装置一体化设置到智能空调器中，无需用户与其他的移动终端进行人机交互即可实现用户注册，用户体验较好。
2、本发明一实施例中，当存在目标用户注册完成之后，后续过程中存在一个登录用户需要使用智能空调时，登录用户则可发出携带登录关键词的语音信息，音频处理模块在采集到携带登录关键词的第三语音信息之后，则可触发图像处理模块继续采集登录用户的当前图像(比如，登录用户的人脸图像)，通过图像识别算法对采集的当前图像与已经存储的各个注册图像进行对比以确定登录用户的身份，即检测存储的各个注册图像中是否存在该登录用户的注册图像时，如果是，则通过该登录用户的注册图像所对应的标识信息确定出登录用户的身份；控制器则可通过相应的标识信息从存储的各个注册信息中确定出登录用户的偏好信息，并根据确定的偏好信息控制智能空调器的空调器本体个性化运行。
3、本发明一个实施例中，被确定为注册图像的人脸图像中应当存在目标用户的眼睛、鼻子、嘴巴和脸部等重要特征，脸部面积应当有不小于80％位于人脸图像内，且人脸图像的亮度符合相应的要求，便于后续过程中通过存储的各个注册图像对登录用户的身份进行识别。
4、本发明一个实施例中，在不同时间点下采集的同一个目标用户的多张人脸图像均符合预设要求时，则可将多张人脸图像均确定为目标用户的注册图像，同一个目标用户所对应的多张注册图像可以对应同一个标识信息，以便通过该标识信息对相应的目标用户进行唯一标识，在后续过程中通过存储的各个注册图像针对登录用户的身份进行识别时，可提高识别效率。
5、本发明一个实施例中，在光线感应器检测的指定区域的光照强度小于预设阈值时，控制器可以控制二极管补光阵列为指定区域补光，以便清楚准确的获取目标用户的注册图像及登录用户的当前图像。
6、本发明一个实施例中，用户注册装置采集到携带预设唤醒词的第一语音信息时，可以进行相应的语音提示以提醒用户站到指定区域，以便准确有效的采集符合预设要求的人脸图像，提高注册成功率。
需要说明的是，在本文中，诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个······”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同因素。
最后需要说明的是：以上所述仅为本发明的较佳实施例，仅用于说明本发明的技术方案，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所做的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (10)

1.一种用户注册装置，其特征在于，应用于智能空调器，包括：
音频处理模块、图像处理模块、信息采集模块和控制模块；其中，
所述音频处理模块，用于采集目标用户输入的第一语音信息，在采集的第一语音信息携带预设唤醒词时，向所述图像处理模块发送第一触发信号；
所述图像处理模块，用于在接收到第一触发信号时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息，并向信息采集模块发送第二触发信号；
所述信息采集模块，用于在接收到第二触发信号时，采集所述目标用户的偏好信息；
所述控制模块，用于将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
2.根据权利要求1所述的用户注册装置，其特征在于，
所述信息采集模块，包括：存储单元、音频播放单元、音频解析单元和对比处理单元；
所述存储单元，用于存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
所述音频播放单元，用于在接收到所述图像处理模块发送的第二触发信号时，播放预设提示语音；
所述音频处理模块，进一步用于采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
所述音频解析单元，用于解析第二语音信息以形成至少一帧语音信息，提取每一帧所述语音信息的音素特征；
所述对比处理单元，用于将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息；
或，所述信息采集模块，用于在接收到第二触发信号时，监测所述智能空调器的空调本体在指定时间段内的运行状态，根据所述运行状态确定所述目标用户的偏好信息。
3.根据权利要求1所述的用户注册装置，其特征在于，
所述图像处理模块，用于在接收到第二触发信号时，采集指定区域的监控图像；从采集的监控图像中提取出所述目标用户的人脸图像；在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。
4.根据权利要求3所述的用户注册装置，其特征在于，
还包括：光线感应器和红外二极管补光阵列；
所述光线感应器，用于实时检测所述指定区域的光照强度，并将所述光照强度发送至所述控制模块；
所述控制模块，用于判断接收的光照强度是否小于预设强度阈值，在接收的光照强度小于预设阈值时，控制所述红外二极管补光阵列为所述指定区域补光。
5.根据权利要求1至4中任一所述的用户注册装置，其特征在于，
所述音频处理模块，进一步用于接收登录用户输入的第三语音信息，在接收的第三语音信息中携带登录关键词时，向所述图像处理模块发送第三触发信号；
所述图像处理模块，用于在接收到第三触发信号时，获取所述登录用户的当前图像，从存储的各个注册图像中确定出对应当前图像的目标注册图像，将目标注册图像所对应的目标标识信息发送至所述控制模块；
所述控制模块，用于根据存储的各个注册信息，确定对应所述目标标识信息的目标偏好信息，根据目标偏好信息控制所述智能空调器的空调本体运行。
6.根据权利要求5所述的用户注册装置，其特征在于，
所述图像处理模块，用于从存储的各个注册图像中选择一个未被选择过的注册图像；通过如下公式计算选择的注册图像与获取的当前图像之间的相似度：
<mrow> <msup> <mi>X</mi> <mn>2</mn> </msup> <mo>=</mo> <munder> <mo>&amp;Sigma;</mo> <mi>i</mi> </munder> <mfrac> <msup> <mrow> <mo>(</mo> <msub> <mi>S</mi> <mi>i</mi> </msub> <mo>-</mo> <msub> <mi>M</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mn>2</mn> </msup> <mrow> <msub> <mi>S</mi> <mi>i</mi> </msub> <mo>+</mo> <msub> <mi>M</mi> <mi>i</mi> </msub> </mrow> </mfrac> </mrow>
其中，X表征注册图像与当前图像之间的相似度、Mi表征选择的注册图像中第i个采样块的直方图、Si表征当前图像中第i个采样块的直方图；
在计算的相似度大于设定阈值时，将选择的注册图像确定为目标注册图像。
7.一种智能空调器，其特征在于，包括如上述权利要求1至6中任一所述的用户注册装置。
8.一种用户注册方法，其特征在于，应用于智能空调器的用户注册装置，包括：
采集目标用户输入的第一语音信息；
在采集的第一语音信息携带预设唤醒词时，获取并存储所述目标用户的注册图像，确定注册图像对应的标识信息；
采集所述目标用户的偏好信息；
将所述标识信息和所述偏好信息确定为所述目标用户的注册信息，并存储。
9.根据权利要求8所述的方法，其特征在于，
在所述确定注册图像对应的标识信息之后，在所述采集所述目标用户的偏好信息之前，还包括：
播放预设提示语音；
预先存储至少一个命令词，以及存储各个所述命令词所分别对应的至少一个样本音素特征；
则，所述采集所述目标用户的偏好信息，包括：
采集所述目标用户根据播放的预设提示语音输入的第二语音信息；
解析第二语音信息以形成至少一帧语音信息，并提取每一帧所述语音信息的音素特征；
将提取的各个音素特征与每一个命令词所分别对应的至少一个样本因素特征进行匹配，根据匹配结果从存储的各个命令词中确定出至少一个目标命令词，并将确定的各个目标命令词确定为所述目标用户的偏好信息；
或，所述采集所述目标用户的偏好信息，包括：监测所述智能空调器的空调本体在指定时间段内的运行状态，根据所述运行状态确定所述目标用户的偏好信息。
10.根据权利要求8所述的方法，其特征在于，
所述获取并存储所述目标用户的注册图像，包括：
采集指定区域的监控图像；
从采集的监控图像中提取出所述目标用户的人脸图像；
在所述人脸图像符合预设要求时，将所述人脸图像确定为所述目标用户的注册图像，并存储。
CN201710558273.1A 2017-07-10 2017-07-10 一种用户注册方法、装置及智能空调器 Pending CN107360157A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710558273.1A CN107360157A (zh) 2017-07-10 2017-07-10 一种用户注册方法、装置及智能空调器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710558273.1A CN107360157A (zh) 2017-07-10 2017-07-10 一种用户注册方法、装置及智能空调器

Publications (1)

Publication Number Publication Date
CN107360157A true CN107360157A (zh) 2017-11-17

Family

ID=60292556

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710558273.1A Pending CN107360157A (zh) 2017-07-10 2017-07-10 一种用户注册方法、装置及智能空调器

Country Status (1)

Country Link
CN (1) CN107360157A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108538298A (zh) * 2018-04-04 2018-09-14 科大讯飞股份有限公司 语音唤醒方法及装置
CN108592301A (zh) * 2018-04-28 2018-09-28 四川虹美智能科技有限公司 一种声控智能空调、系统及使用方法
CN108758989A (zh) * 2018-04-28 2018-11-06 四川虹美智能科技有限公司 一种空调及其使用方法
CN108959889A (zh) * 2018-07-12 2018-12-07 四川虹美智能科技有限公司 一种智能家电的注册系统及方法
CN109067883A (zh) * 2018-08-10 2018-12-21 珠海格力电器股份有限公司 信息推送方法及装置
CN109243024A (zh) * 2018-08-29 2019-01-18 上海交通大学 一种基于人脸识别的汽车解锁系统及方法
CN109670298A (zh) * 2019-01-30 2019-04-23 咪付（广西）网络技术有限公司 一种用于身份识别的注册方法及系统
CN110858841A (zh) * 2018-08-07 2020-03-03 三星电子株式会社 通过已注册用户的认证来注册新用户的电子设备和方法
WO2020078076A1 (zh) * 2018-10-18 2020-04-23 珠海格力电器股份有限公司 控制空调的方法及系统、空调器、家用电器
CN111475717A (zh) * 2020-03-27 2020-07-31 珠海格力电器股份有限公司 妆容服饰推荐方法、装置、智能空调及存储介质
CN111625794A (zh) * 2019-02-28 2020-09-04 广东美的制冷设备有限公司 录入方法、运行控制模块、家电设备、系统和存储介质
CN111860285A (zh) * 2020-07-15 2020-10-30 北京思图场景数据科技服务有限公司 用户注册方法、装置、电子设备及存储介质
CN113094563A (zh) * 2020-01-08 2021-07-09 珠海格力电器股份有限公司 点餐及菜品确认方法、设备、系统、存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104865927A (zh) * 2015-03-27 2015-08-26 北京海尔广科数字技术有限公司 构建用户模型的方法和装置、以及设备控制方法和装置
CN105957527A (zh) * 2016-05-16 2016-09-21 珠海格力电器股份有限公司 一种语音控制电器的方法、装置及语音控制空调
US20160373269A1 (en) * 2015-06-18 2016-12-22 Panasonic Intellectual Property Corporation Of America Device control method, controller, and recording medium
CN106895552A (zh) * 2017-02-14 2017-06-27 珠海格力电器股份有限公司 空调的控制方法、装置及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104865927A (zh) * 2015-03-27 2015-08-26 北京海尔广科数字技术有限公司 构建用户模型的方法和装置、以及设备控制方法和装置
US20160373269A1 (en) * 2015-06-18 2016-12-22 Panasonic Intellectual Property Corporation Of America Device control method, controller, and recording medium
CN105957527A (zh) * 2016-05-16 2016-09-21 珠海格力电器股份有限公司 一种语音控制电器的方法、装置及语音控制空调
CN106895552A (zh) * 2017-02-14 2017-06-27 珠海格力电器股份有限公司 空调的控制方法、装置及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
STEFANSALVATORE: "图像相似度--直方图方法", 《HTTPS://BLOG.CSDN.NET/STEFANSALVATORE/ARTICLE/DETAILS/73863412》 *

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108538298A (zh) * 2018-04-04 2018-09-14 科大讯飞股份有限公司 语音唤醒方法及装置
CN108592301A (zh) * 2018-04-28 2018-09-28 四川虹美智能科技有限公司 一种声控智能空调、系统及使用方法
CN108758989A (zh) * 2018-04-28 2018-11-06 四川虹美智能科技有限公司 一种空调及其使用方法
CN108959889A (zh) * 2018-07-12 2018-12-07 四川虹美智能科技有限公司 一种智能家电的注册系统及方法
CN110858841B (zh) * 2018-08-07 2023-04-07 三星电子株式会社 通过已注册用户的认证来注册新用户的电子设备和方法
CN110858841A (zh) * 2018-08-07 2020-03-03 三星电子株式会社 通过已注册用户的认证来注册新用户的电子设备和方法
CN109067883A (zh) * 2018-08-10 2018-12-21 珠海格力电器股份有限公司 信息推送方法及装置
CN109243024A (zh) * 2018-08-29 2019-01-18 上海交通大学 一种基于人脸识别的汽车解锁系统及方法
WO2020078076A1 (zh) * 2018-10-18 2020-04-23 珠海格力电器股份有限公司 控制空调的方法及系统、空调器、家用电器
US11852357B2 (en) 2018-10-18 2023-12-26 Gree Electric Appliances, Inc. Of Zhuhai Method for controlling air conditioner, air conditioner
CN109670298A (zh) * 2019-01-30 2019-04-23 咪付（广西）网络技术有限公司 一种用于身份识别的注册方法及系统
CN111625794A (zh) * 2019-02-28 2020-09-04 广东美的制冷设备有限公司 录入方法、运行控制模块、家电设备、系统和存储介质
CN111625794B (zh) * 2019-02-28 2024-03-05 广东美的制冷设备有限公司 录入方法、运行控制模块、家电设备、系统和存储介质
CN113094563A (zh) * 2020-01-08 2021-07-09 珠海格力电器股份有限公司 点餐及菜品确认方法、设备、系统、存储介质
CN111475717A (zh) * 2020-03-27 2020-07-31 珠海格力电器股份有限公司 妆容服饰推荐方法、装置、智能空调及存储介质
CN111860285A (zh) * 2020-07-15 2020-10-30 北京思图场景数据科技服务有限公司 用户注册方法、装置、电子设备及存储介质
CN111860285B (zh) * 2020-07-15 2023-10-17 北京思图场景数据科技服务有限公司 用户注册方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN107360157A (zh) 一种用户注册方法、装置及智能空调器
CN107818798B (zh) 客服服务质量评价方法、装置、设备及存储介质
CN108735209B (zh) 唤醒词绑定方法、智能设备及存储介质
US10013977B2 (en) Smart home control method based on emotion recognition and the system thereof
WO2019210796A1 (zh) 语音识别方法、装置、存储介质及电子设备
CN109558512B (zh) 一种基于音频的个性化推荐方法、装置和移动终端
CN110570873B (zh) 声纹唤醒方法、装置、计算机设备以及存储介质
CN108711430B (zh) 语音识别方法、智能设备及存储介质
CN105139858B (zh) 一种信息处理方法及电子设备
CN112863547A (zh) 虚拟资源转移处理方法、装置、存储介质及计算机设备
CN107045386A (zh) 一种基于人群状态检测的智能播放系统及实现方法
CN106251874A (zh) 一种语音门禁和安静环境监控方法及系统
CN110517670A (zh) 提升唤醒性能的方法和装置
CN103530912A (zh) 一种具有情绪识别功能的考勤系统及方法
CN101211484A (zh) 防止在atm取款时密码被偷窥的方法及装置
CN109271533A (zh) 一种多媒体文件检索方法
CN110148405A (zh) 语音指令处理方法及装置、电子设备及存储介质
CN108074571A (zh) 增强现实设备的语音控制方法、系统及存储介质
CN103945140B (zh) 视频字幕的生成方法及系统
CN104965589A (zh) 一种基于人脑智慧和人机交互的人体活体检测方法与装置
CN107918726A (zh) 距离感应方法、设备及存储介质
CN111583937A (zh) 一种语音控制唤醒方法及存储介质、处理器、语音设备、智能家电
CN104754112A (zh) 用户信息获取方法及移动终端
CN111835522A (zh) 一种音频处理方法及装置
CN110491384B (zh) 一种语音数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 621050 No. 303 Jiuzhou Road, Fucheng District, Mianyang, Sichuan.

Applicant after: SICHUAN HONGMEI INTELLIGENT TECHNOLOGY Co.,Ltd.

Address before: 621050 No. 303 Jiuzhou Road, Fucheng District, Mianyang, Sichuan.

Applicant before: MIANYANG MEILING SOFTWARE TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190509

Address after: 230000 First Floor of Nanmeiling R&D and Test Center, Lianhua Road East and Tangkou Road, Hefei Economic and Technological Development Zone, Anhui Province

Applicant after: Hefei Meiling Union Technology Co.,Ltd.

Address before: 621050 No. 303 Jiuzhou Road, Fucheng District, Mianyang, Sichuan.

Applicant before: SICHUAN HONGMEI INTELLIGENT TECHNOLOGY Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20171117