CN106440192A - 一种家电控制方法、装置、系统及智能空调 - Google Patents

一种家电控制方法、装置、系统及智能空调 Download PDF

Info

Publication number
CN106440192A
CN106440192A CN201610832923.2A CN201610832923A CN106440192A CN 106440192 A CN106440192 A CN 106440192A CN 201610832923 A CN201610832923 A CN 201610832923A CN 106440192 A CN106440192 A CN 106440192A
Authority
CN
China
Prior art keywords
user
sound source
source position
household electrical
electrical appliances
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610832923.2A
Other languages
English (en)
Other versions
CN106440192B (zh
Inventor
刘光有
郑文成
毛跃辉
王子
陈瑶
梁博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201610832923.2A priority Critical patent/CN106440192B/zh
Priority to PCT/CN2017/073466 priority patent/WO2018049782A1/zh
Priority to US16/330,642 priority patent/US11373646B2/en
Priority to EP17849993.5A priority patent/EP3517849B1/en
Publication of CN106440192A publication Critical patent/CN106440192A/zh
Application granted granted Critical
Publication of CN106440192B publication Critical patent/CN106440192B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/30—Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/50—Control or safety arrangements characterised by user interfaces or communication
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2120/00—Control inputs relating to users or occupants
    • F24F2120/10—Occupancy
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/24—Speech recognition using non-acoustical features
    • G10L15/25—Speech recognition using non-acoustical features using position of the lips, movement of the lips or face analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/50—Control or safety arrangements characterised by user interfaces or communication
    • F24F11/61—Control or safety arrangements characterised by user interfaces or communication using timers
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2120/00—Control inputs relating to users or occupants
    • F24F2120/10—Occupancy
    • F24F2120/12—Position of occupants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones

Abstract

本发明公开一种家电控制方法、装置、系统及智能空调。其中，该方法包括：通过摄像头定位声源位置；针对声源位置拾取用户的语音信息；根据所述语音信息对家电进行相应控制；其中，语音信息匹配相应的控制指令。应用本发明的技术方案，能够根据摄像头检测用户位置，进而增强用户位置处的拾取音频信号，从而提高语音识别的准确度，增强用户互动性，提高用户体验。

Description

一种家电控制方法、装置、系统及智能空调
技术领域
本发明涉及家电技术领域，具体而言，涉及一种家电控制方法、装置、系统及智能空调。
背景技术
随着智能家居的发展，家用电器也将越来越智能化和功能多元化，具有语音智能控制的空调也逐渐变得普及。但是针对部分群体却无法体验，例如不会说普通话的人群或者哑巴等。而另外一种基于图像的手势交互方式，因为手势动作单一，手势动作不规则容易造成误动作，所以体验效果不佳。
部分家用电器的安装位置相对比较固定，且使用者的位置距离家电也较近，可以达到很好的语音识别效果(如电视、灯具)。但对于具有语音控制的空调而言，一般柜机安装在角落中，用户距离空调的位置可能较远，由于信号衰减的原因容易造成语音识别效果差。在相关技术中，一般采用阵列式双麦克风的方式来实现定向增强拾取音频信号，改善语音识别效果，但是用户在移动过程中或者不同方位的其余用户发出语音控制指令时，由于定位未能及时更新，造成拾取音频信号无法针对有人的地方增强，导致识别率偏低。
针对现有技术中家电语音识别的准确度较低的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例中提供一种家电控制方法、装置、系统及智能空调，以解决现有技术中家电语音识别的准确度较低的问题。
为解决上述技术问题，本发明提供了一种家电控制方法，其中，该方法包括：通过摄像头定位声源位置；针对所述声源位置拾取用户的语音信息；根据所述语音信息对家电进行相应控制；其中，所述语音信息匹配相应的控制指令。
进一步地，通过摄像头定位声源位置，包括：通过所述摄像头获取家电场景内图像信息；对所述图像信息进行分析，识别所述家电场景内的用户信息；根据所述用户信息定位声源位置。
进一步地，所述用户信息至少包括以下之一：用户人数、用户位置、用户口型；根据所述用户信息定位声源位置，包括：在所述用户人数为一个时，将所述用户位置定位为声源位置；在所述用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。
进一步地，针对所述声源位置拾取用户的语音信息，包括：增强阵列式双麦克风在所述声源位置处的拾取音频信号；基于所述拾取音频信号拾取用户的语音信息。
进一步地，通过摄像头定位声源位置之前，所述方法还包括：获取用户的唤醒操作信息；其中，所述唤醒操作信息包括：手势信息和/或语音信息；根据所述唤醒操作信息触发所述家电从待机状态进入工作状态。
进一步地，根据所述唤醒操作信息触发所述家电进入工作状态之后，所述方法还包括：获取用户的手势信息；根据所述手势信息对所述家电进行相应控制。
进一步地，在所述家电进行工作状态之后，若在预设时间段内未拾取到语音信息以及未获取到手势信息，则触发所述家电重新进入待机状态。
进一步地，根据所述唤醒操作信息触发所述家电进入工作状态之后，所述方法还包括：获取用户的结束操作信息；其中，所述结束操作信息包括：手势信息和/或语音信息；根据所述结束操作信息触发所述家电退出所述工作状态。
本发明还提供了一种家电控制装置，其中，该装置包括：定位模块，用于通过摄像头定位声源位置；拾取模块，用于针对所述声源位置拾取用户的语音信息；控制模块，用于根据所述语音信息对家电进行相应控制；其中，所述语音信息匹配相应的控制指令。
进一步地，所述定位模块包括：图像获取单元，用于通过所述摄像头获取家电场景内图像信息；信息识别单元，用于对所述图像信息进行分析，识别所述家电场景内的用户信息；定位单元，用于根据所述用户信息定位声源位置。
进一步地，所述用户信息至少包括以下之一：用户人数、用户位置、用户口型；所述定位单元，具体用于在所述用户人数为一个时，将所述用户位置定位为声源位置；在所述用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。
进一步地，所述拾取模块包括：增强单元，用于增强阵列式双麦克风在所述声源位置处的拾取音频信号；拾取单元，用于基于所述拾取音频信号拾取用户的语音信息。
进一步地，所述装置还包括：唤醒模块，用于获取用户的唤醒操作信息；其中，所述唤醒操作信息包括：手势信息和/或语音信息；根据所述唤醒操作信息触发所述家电从待机状态进入工作状态。
进一步地，所述装置还包括：退出模块，用于获取用户的结束操作信息；其中，所述结束操作信息包括：手势信息和/或语音信息；根据所述结束操作信息触发所述家电退出所述工作状态。
本发明还提供了一种智能空调，其中，该智能空调包括上述的家电控制装置。
本发明还提供了一种家电控制系统，其中，该系统包括：摄像头，用于拍摄家电场景内图像信息；图像识别模块，用于提取所述图像信息，并对所述图像信息进行分析以定位声源位置；麦克风，用于针对所述声源位置拾取用户的语音信息；语音识别模块，用于将所述语音信息进行分析，确定与其匹配的控制指令；主控模块，用于根据所述控制指令对家电进行相应控制。
进一步地，所述主控模块，还用于控制所述麦克风增强所述声源位置处的拾取音频信号；所述麦克风，还用于基于增强后的拾取音频信号拾取用户的语音信息。
进一步地，所述系统还包括：WIFI模块，用于与客户端连接，实现所述客户端与所述主控模块的交互；客户端，用于与所述主控模块进行交互；语音播放模块，用于向用户播报语音信息以实现与用户的交互。
应用本发明的技术方案，能够根据摄像头检测用户位置，进而增强用户位置处的拾取音频信号，从而提高语音识别的准确度，增强用户互动性，提高用户体验。
附图说明
图1是根据本发明实施例的家电控制方法的流程图；
图2是根据本发明实施例的家电控制装置的结构框图；
图3是根据本发明实施例的智能空调的结构框图；
图4是根据本发明实施例的家电控制系统的结构框图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细描述，但不作为对本发明的限定。
实施例一
图1是根据本发明实施例的家电控制方法的流程图，如图1所示，该方法包括以下步骤：
步骤S101，通过摄像头定位声源位置；
步骤S102，针对声源位置拾取用户的语音信息；
步骤S103，根据语音信息对家电进行相应控制；其中，语音信息匹配相应的控制指令。
通过本实施例，能够根据摄像头检测用户位置，进而增强用户位置处的拾取音频信号，从而提高语音识别的准确度，增强用户互动性，提高用户体验。
在步骤S101中，通过摄像头定位声源位置，可以通过以下优选实施方式实现：通过摄像头获取家电场景内图像信息；对图像信息进行分析，识别家电场景内的用户信息；根据用户信息定位声源位置。其中，用户信息至少包括以下之一：用户人数、用户位置、用户口型。根据用户信息定位声源位置，具体包括：在用户人数为一个时，将用户位置定位为声源位置；在用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。通过上述优选实施方式，能够准确识别进行语音控制操作的用户的位置，为后续提高语音信息的拾取准确度提供基础。
在具体实施时，可以提前设置相应的语音指令，例如：制冷、制热等，并将语音指令对应的口型信息输入家电中，从而便于根据口型确定发出正确语音的用户。
在步骤S102中，针对声源位置拾取用户的语音信息，可以通过以下优选实施方式实现：增强阵列式双麦克风在声源位置处的拾取音频信号；基于拾取音频信号拾取用户的语音信息。基于此，可以有效提高语音信息的拾取准确度，提高家电语音控制操作的准确性，提高用户体验。
另外，本实施例还提供了一种唤醒方案，即通过手势识别或语音识别的方式唤醒家电。具体地，获取用户的唤醒操作信息；其中，唤醒操作信息包括：手势信息和/或语音信息；根据唤醒操作信息触发家电从待机状态进入工作状态。在唤醒家电之后，还可以获取用户的手势信息；根据手势信息对家电进行相应控制。即，实现家电手势控制操作。
为了节省家电能耗，在家电进行工作状态之后，若在预设时间段内未拾取到语音信息以及未获取到手势信息，则触发家电重新进入待机状态。
为了避免误操作，本实施例还提供了一种退出方案，即获取用户的结束操作信息；根据结束操作信息触发家电退出工作状态。该结束操作信息可以是手势信息和/或语音信息。
本实施例中所述的家电，可以是智能空调等家用设备。
实施例二
对应于图1介绍的家电控制方法，本实施例提供了一种家电控制装置，如图2所示的家电控制装置的结构框图，该装置包括：
定位模块10，用于通过摄像头定位声源位置；
拾取模块20，连接至定位模块10，用于针对声源位置拾取用户的语音信息；
控制模块30，连接至拾取模块20，用于根据语音信息对家电进行相应控制；其中，语音信息匹配相应的控制指令。
通过本实施例，能够根据摄像头检测用户位置，进而增强用户位置处的拾取音频信号，从而提高语音识别的准确度，增强用户互动性，提高用户体验。
优选地，定位模块10可以包括：图像获取单元，用于通过摄像头获取家电场景内图像信息；信息识别单元，用于对图像信息进行分析，识别家电场景内的用户信息；定位单元，用于根据用户信息定位声源位置。用户信息至少包括以下之一：用户人数、用户位置、用户口型；定位单元，具体用于在用户人数为一个时，将用户位置定位为声源位置；在用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。通过上述优选实施方式，能够准确识别进行语音控制操作的用户的位置，为后续提高语音信息的拾取准确度提供基础。
在具体实施时，可以提前设置相应的语音指令，例如：制冷、制热等，并将语音指令对应的口型信息输入家电中，从而便于根据口型确定发出正确语音的用户。
优选地，拾取模块20可以包括：增强单元，用于增强阵列式双麦克风在声源位置处的拾取音频信号；拾取单元，用于基于拾取音频信号拾取用户的语音信息。基于此，可以有效提高语音信息的拾取准确度，提高家电语音控制操作的准确性，提高用户体验。
另外，本实施例还提供了一种唤醒方案，即上述装置还可以包括：唤醒模块，用于获取用户的唤醒操作信息；其中，唤醒操作信息包括：手势信息和/或语音信息；根据唤醒操作信息触发家电从待机状态进入工作状态。为了节省家电能耗，在家电进行工作状态之后，若在预设时间段内未拾取到语音信息以及未获取到手势信息，则触发家电重新进入待机状态。
为了避免误操作，本实施例还提供了一种退出方案，即上述装置还可以包括：退出模块，用于获取用户的结束操作信息；根据结束操作信息触发家电退出工作状态。该结束操作信息可以是手势信息和/或语音信息。
本实施例还提供了一种智能空调，如图3所示的智能空调的结构框图，该智能空调包括上述介绍的家电控制装置。
实施例三
对应于图2介绍的家电控制装置，本实施例提供了一种家电控制系统，如图4所示的家电控制系统的结构框图，该系统包括：
摄像头，可以安装在空调中，用于拍摄家电场景内图像信息。
图像识别模块，用于提取图像信息，并对图像信息进行分析以定位声源位置；对图像信息的分析包括是否有人、人体特征、人体识别等。
麦克风，用于针对声源位置拾取用户的语音信息。
语音识别模块，用于将语音信息进行分析，确定与其匹配的控制指令。
主控模块，用于根据控制指令对家电进行相应控制。还可以接收图像识别模块的分析结果，并根据场景通过扬声器、麦克风与手机客户端(用户侧)或者空调厂家客服中心进行信息交互。
另外，主控模块，还用于控制麦克风增强声源位置处的拾取音频信号；麦克风，还用于基于增强后的拾取音频信号拾取用户的语音信息。从而提高语音信息的拾取准确度，提高家电语音控制的准确性，提高用户体验。
上述系统还包括：WIFI模块，用于与客户端连接，实现客户端与主控模块的交互；客户端(手机APP)，与WIFI模块无线连接，用于与主控模块进行交互；语音播放模块，用于向用户播报语音信息以实现与用户的交互。
空调搭载有摄像头，以及阵列式双麦克风。麦克风的作用是拾取环境中的声音信号，并将其传输给语音模块进行处理和识别。摄像头检测场景内图像信息并将其传输给图像识别模块进行处理和识别，判别室内中人体的位置、口型(是否发出语音)等。
用户需要进行手势或语音交互时，需要先进行唤醒操作，特定手势动作和特定语音指令均可进行唤醒。例如手势唤醒动作可以是面向空调手掌悬停一定时间，或者用户发出语音指令“你好，智能空调”即可唤醒。经唤醒后，空调的手势识别模块和语音识别模块即可接受交互指令。唤醒后，手势交互和语音交互可交叉发出指令，语音识别模块和图像识别模块持续保持工作，以模块信号处理的时间为优先级进入对应指令的参数。当用户控制空调指令发送完毕后，用户仍可主动用特定手势或语音指令控制空调退出工作状态，使不会造成误动作。例如用户控制指令发送完毕但一定时间未匹配有手势动作或语音指令时，则空调退出工作状态，需重新唤醒后方可进行交互操作。
空调等家电的实际运行环境中大多存在较大的环境噪声和比较强的声音反射，麦克风在语音接收过程中因为噪声与人的声音相互混合，容易造成音频采集不准确。本发明的技术方案基于摄像头对用户定位，进而获取其用户位置处的声源，并对其方位信号增强拾音处理。当室内场景中仅有一人时，则语音识别模块根据此人的方位角在拾音时进行信号增强及降噪处理。当检测有多人时，首先判别人群所在的方位以及口型发声的人员进行定位，同时结合基于双麦克风矩阵式的信号时延估计算法、强度估计算法定位，即通过摄像头检测发声用户结合语音定位确定声源的准确位置，进而语音识别模块根据此人的方位角在拾音时进行信号增强及降噪处理。
从以上的描述中可知，本发明的技术方案突破了解决语音交互方式和手势交互方式的局限性，实现了以下效果：1)家电语音交互时识别率提高；2)手势、语音唤醒及操作，增强了用户互动性，增强空调等家电的应用效果。
当然，以上是本发明的优选实施方式。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明基本原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (18)

1.一种家电控制方法，其特征在于，所述方法包括：
通过摄像头定位声源位置；
针对所述声源位置拾取用户的语音信息；
根据所述语音信息对家电进行相应控制；其中，所述语音信息匹配相应的控制指令。
2.根据权利要求1所述的方法，其特征在于，通过摄像头定位声源位置，包括：
通过所述摄像头获取家电场景内图像信息；
对所述图像信息进行分析，识别所述家电场景内的用户信息；
根据所述用户信息定位声源位置。
3.根据权利要求2所述的方法，其特征在于，所述用户信息至少包括以下之一：用户人数、用户位置、用户口型；
根据所述用户信息定位声源位置，包括：
在所述用户人数为一个时，将所述用户位置定位为声源位置；
在所述用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。
4.根据权利要求1所述的方法，其特征在于，针对所述声源位置拾取用户的语音信息，包括：
增强阵列式双麦克风在所述声源位置处的拾取音频信号；
基于所述拾取音频信号拾取用户的语音信息。
5.根据权利要求1所述的方法，其特征在于，通过摄像头定位声源位置之前，所述方法还包括：
获取用户的唤醒操作信息；其中，所述唤醒操作信息包括：手势信息和/或语音信息；
根据所述唤醒操作信息触发所述家电从待机状态进入工作状态。
6.根据权利要求5所述的方法，其特征在于，根据所述唤醒操作信息触发所述家电进入工作状态之后，所述方法还包括：
获取用户的手势信息；
根据所述手势信息对所述家电进行相应控制。
7.根据权利要求6所述的方法，其特征在于，在所述家电进行工作状态之后，若在预设时间段内未拾取到语音信息以及未获取到手势信息，则触发所述家电重新进入待机状态。
8.根据权利要求5所述的方法，其特征在于，根据所述唤醒操作信息触发所述家电进入工作状态之后，所述方法还包括：
获取用户的结束操作信息；其中，所述结束操作信息包括：手势信息和/或语音信息；
根据所述结束操作信息触发所述家电退出所述工作状态。
9.一种家电控制装置，其特征在于，所述装置包括：
定位模块，用于通过摄像头定位声源位置；
拾取模块，用于针对所述声源位置拾取用户的语音信息；
控制模块，用于根据所述语音信息对家电进行相应控制；其中，所述语音信息匹配相应的控制指令。
10.根据权利要求9所述的装置，其特征在于，所述定位模块包括：
图像获取单元，用于通过所述摄像头获取家电场景内图像信息；
信息识别单元，用于对所述图像信息进行分析，识别所述家电场景内的用户信息；
定位单元，用于根据所述用户信息定位声源位置。
11.根据权利要求10所述的装置，其特征在于，所述用户信息至少包括以下之一：用户人数、用户位置、用户口型；
所述定位单元，具体用于在所述用户人数为一个时，将所述用户位置定位为声源位置；在所述用户人数为多个时，根据用户口型确定发出正确语音的用户，将该用户位置定位为声源位置。
12.根据权利要求9所述的装置，其特征在于，所述拾取模块包括：
增强单元，用于增强阵列式双麦克风在所述声源位置处的拾取音频信号；
拾取单元，用于基于所述拾取音频信号拾取用户的语音信息。
13.根据权利要求9所述的装置，其特征在于，所述装置还包括：
唤醒模块，用于获取用户的唤醒操作信息；其中，所述唤醒操作信息包括：手势信息和/或语音信息；根据所述唤醒操作信息触发所述家电从待机状态进入工作状态。
14.根据权利要求13所述的装置，其特征在于，所述装置还包括：
退出模块，用于获取用户的结束操作信息；其中，所述结束操作信息包括：手势信息和/或语音信息；根据所述结束操作信息触发所述家电退出所述工作状态。
15.一种智能空调，其特征在于，包括权利要求9至14中任一项所述的家电控制装置。
16.一种家电控制系统，其特征在于，所述系统包括：
摄像头，用于拍摄家电场景内图像信息；
图像识别模块，用于提取所述图像信息，并对所述图像信息进行分析以定位声源位置；
麦克风，用于针对所述声源位置拾取用户的语音信息；
语音识别模块，用于将所述语音信息进行分析，确定与其匹配的控制指令；
主控模块，用于根据所述控制指令对家电进行相应控制。
17.根据权利要求16所述的系统，其特征在于，
所述主控模块，还用于控制所述麦克风增强所述声源位置处的拾取音频信号；
所述麦克风，还用于基于增强后的拾取音频信号拾取用户的语音信息。
18.根据权利要求16所述的系统，其特征在于，所述系统还包括：
WIFI模块，用于与客户端连接，实现所述客户端与所述主控模块的交互；
客户端，用于与所述主控模块进行交互；
语音播放模块，用于向用户播报语音信息以实现与用户的交互。
CN201610832923.2A 2016-09-19 2016-09-19 一种家电控制方法、装置、系统及智能空调 Active CN106440192B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201610832923.2A CN106440192B (zh) 2016-09-19 2016-09-19 一种家电控制方法、装置、系统及智能空调
PCT/CN2017/073466 WO2018049782A1 (zh) 2016-09-19 2017-02-14 一种家电控制方法、装置、系统及智能空调
US16/330,642 US11373646B2 (en) 2016-09-19 2017-02-14 Household appliance control method, device and system, and intelligent air conditioner by determining user sound source location based on analysis of mouth shape
EP17849993.5A EP3517849B1 (en) 2016-09-19 2017-02-14 Household appliance control method, device and system, and intelligent air conditioner

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610832923.2A CN106440192B (zh) 2016-09-19 2016-09-19 一种家电控制方法、装置、系统及智能空调

Publications (2)

Publication Number Publication Date
CN106440192A true CN106440192A (zh) 2017-02-22
CN106440192B CN106440192B (zh) 2019-04-09

Family

ID=58166234

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610832923.2A Active CN106440192B (zh) 2016-09-19 2016-09-19 一种家电控制方法、装置、系统及智能空调

Country Status (4)

Country Link
US (1) US11373646B2 (zh)
EP (1) EP3517849B1 (zh)
CN (1) CN106440192B (zh)
WO (1) WO2018049782A1 (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107152768A (zh) * 2017-06-28 2017-09-12 广东美的制冷设备有限公司 空调控制方法及其设备
CN107247923A (zh) * 2017-05-18 2017-10-13 珠海格力电器股份有限公司 一种指令识别方法、装置、存储设备、移动终端及电器
CN107703764A (zh) * 2017-09-27 2018-02-16 珠海格力电器股份有限公司 设备控制方法和装置
CN107734149A (zh) * 2017-09-25 2018-02-23 努比亚技术有限公司 一种拍摄方法、终端及计算机可读存储介质
CN108831474A (zh) * 2018-05-04 2018-11-16 广东美的制冷设备有限公司 语音识别设备及其语音信号捕获方法、装置和存储介质
CN109210703A (zh) * 2017-06-29 2019-01-15 广东美的制冷设备有限公司 空调的语音控制方法和语音控制的空调
WO2019061292A1 (zh) * 2017-09-29 2019-04-04 深圳传音通讯有限公司 一种终端降噪方法及终端
CN109584871A (zh) * 2018-12-04 2019-04-05 北京蓦然认知科技有限公司 一种车辆中语音指令的用户身份识别方法、装置
CN109754814A (zh) * 2017-11-08 2019-05-14 阿里巴巴集团控股有限公司 一种声音处理方法、交互设备
CN109812925A (zh) * 2019-01-14 2019-05-28 珠海格力电器股份有限公司 一种空调的控制方法、装置、存储介质及空调
CN109949812A (zh) * 2019-04-26 2019-06-28 百度在线网络技术（北京）有限公司 一种语音交互方法、装置、设备及存储介质
CN110223690A (zh) * 2019-06-10 2019-09-10 深圳永顺智信息科技有限公司 基于图像与语音融合的人机交互方法及装置
CN110594831A (zh) * 2019-10-24 2019-12-20 成都启英泰伦科技有限公司 一种吸油烟机及其控制方法
CN110825217A (zh) * 2018-08-13 2020-02-21 珠海格力电器股份有限公司 家电控制方法及装置
CN111243585A (zh) * 2020-01-07 2020-06-05 百度在线网络技术（北京）有限公司 多人场景下的控制方法、装置、设备及存储介质
CN112141834A (zh) * 2020-10-26 2020-12-29 华中科技大学同济医学院附属协和医院 一种电梯的语音控制系统及控制方法
WO2021031335A1 (zh) * 2019-08-20 2021-02-25 广东美的制冷设备有限公司 空调系统及空调指令检测方法、控制装置
CN112433770A (zh) * 2020-11-19 2021-03-02 北京华捷艾米科技有限公司 设备的唤醒方法及装置、电子设备、计算机存储介质
CN112578338A (zh) * 2019-09-27 2021-03-30 阿里巴巴集团控股有限公司 声源定位方法、装置、设备及存储介质
CN112578677A (zh) * 2019-09-29 2021-03-30 广东美的制冷设备有限公司 家用电器及其控制方法、wifi模块及其控制方法
CN113091245A (zh) * 2021-03-19 2021-07-09 青岛海尔空调器有限总公司 用于空调的控制方法、装置及空调

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6927237B2 (ja) * 2019-01-29 2021-08-25 ダイキン工業株式会社 空気調和システム
CN110687815B (zh) * 2019-10-29 2023-07-14 北京小米智能科技有限公司 设备控制方法、装置、终端设备及存储介质
CN112188363B (zh) * 2020-09-11 2022-02-18 北京猎户星空科技有限公司 音频播放的控制方法、装置、电子设备和可读存储介质
US11895466B2 (en) 2020-12-28 2024-02-06 Hansong (Nanjing) Technology Ltd. Methods and systems for determining parameters of audio devices
CN114216228B (zh) * 2021-11-11 2023-07-18 青岛海尔空调器有限总公司 空调的控制方法、控制系统、电子设备和存储介质
CN114279074B (zh) * 2021-12-02 2024-01-09 珠海格力节能环保制冷技术研究中心有限公司 一种睡眠唤醒控制方法、控制系统、空调装置、家用电器

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008196842A (ja) * 2007-01-17 2008-08-28 Daikin Ind Ltd 空調制御システム
CN101656908A (zh) * 2008-08-19 2010-02-24 深圳华为通信技术有限公司 控制声音聚焦的方法、通讯设备及通讯系统
CN102135882A (zh) * 2010-01-25 2011-07-27 微软公司 语音-身体身份相关
CN204390737U (zh) * 2014-07-29 2015-06-10 科大讯飞股份有限公司 一种家庭语音处理系统
CN105184214A (zh) * 2015-07-20 2015-12-23 北京进化者机器人科技有限公司 一种基于声源定位和人脸检测的人体定位方法和系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150052253A1 (en) 2014-09-22 2015-02-19 Weaved, Inc. Multi-server fractional subdomain dns protocol
US9836276B2 (en) * 2009-05-27 2017-12-05 Hon Hai Precision Industry Co., Ltd. Voice command processing method and electronic device utilizing the same
JP2011012907A (ja) * 2009-07-03 2011-01-20 Fujitsu General Ltd 空気調和機
JPWO2015166811A1 (ja) * 2014-04-30 2017-04-20 みこらった株式会社 自動運転車及び自動運転車用プログラム
US9807492B1 (en) * 2014-05-01 2017-10-31 Ambarella, Inc. System and/or method for enhancing hearing using a camera module, processor and/or audio input and/or output devices
CN204358886U (zh) 2014-12-01 2015-05-27 广州博斯特智能科技有限公司 一种智能开启空气净化器的家居机器人
US9855890B2 (en) * 2014-12-11 2018-01-02 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle interaction with external environment
CN205038456U (zh) 2015-04-30 2016-02-17 广东美的制冷设备有限公司 家用电器的控制装置
CN104879882B (zh) 2015-04-30 2017-09-22 广东美的制冷设备有限公司 空调器的控制方法和系统
CN205351642U (zh) 2015-11-20 2016-06-29 珠海格力电器股份有限公司 空调器控制电路及空调器
CN105700372A (zh) * 2016-03-11 2016-06-22 珠海格力电器股份有限公司 智能设备及其控制方法
US9934632B2 (en) * 2016-09-06 2018-04-03 Denso International America, Inc. Wireless passenger proximity detection system for autonomous vehicles

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008196842A (ja) * 2007-01-17 2008-08-28 Daikin Ind Ltd 空調制御システム
CN101656908A (zh) * 2008-08-19 2010-02-24 深圳华为通信技术有限公司 控制声音聚焦的方法、通讯设备及通讯系统
CN102135882A (zh) * 2010-01-25 2011-07-27 微软公司 语音-身体身份相关
CN204390737U (zh) * 2014-07-29 2015-06-10 科大讯飞股份有限公司 一种家庭语音处理系统
CN105184214A (zh) * 2015-07-20 2015-12-23 北京进化者机器人科技有限公司 一种基于声源定位和人脸检测的人体定位方法和系统

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107247923A (zh) * 2017-05-18 2017-10-13 珠海格力电器股份有限公司 一种指令识别方法、装置、存储设备、移动终端及电器
CN107152768A (zh) * 2017-06-28 2017-09-12 广东美的制冷设备有限公司 空调控制方法及其设备
CN109210703B (zh) * 2017-06-29 2021-06-18 广东美的制冷设备有限公司 空调的语音控制方法和语音控制的空调
CN109210703A (zh) * 2017-06-29 2019-01-15 广东美的制冷设备有限公司 空调的语音控制方法和语音控制的空调
CN107734149A (zh) * 2017-09-25 2018-02-23 努比亚技术有限公司 一种拍摄方法、终端及计算机可读存储介质
CN107703764A (zh) * 2017-09-27 2018-02-16 珠海格力电器股份有限公司 设备控制方法和装置
CN107703764B (zh) * 2017-09-27 2020-02-21 珠海格力电器股份有限公司 设备控制方法和装置
WO2019061292A1 (zh) * 2017-09-29 2019-04-04 深圳传音通讯有限公司 一种终端降噪方法及终端
CN109754814B (zh) * 2017-11-08 2023-07-28 阿里巴巴集团控股有限公司 一种声音处理方法、交互设备
CN109754814A (zh) * 2017-11-08 2019-05-14 阿里巴巴集团控股有限公司 一种声音处理方法、交互设备
CN108831474A (zh) * 2018-05-04 2018-11-16 广东美的制冷设备有限公司 语音识别设备及其语音信号捕获方法、装置和存储介质
CN108831474B (zh) * 2018-05-04 2021-05-25 广东美的制冷设备有限公司 语音识别设备及其语音信号捕获方法、装置和存储介质
CN110825217A (zh) * 2018-08-13 2020-02-21 珠海格力电器股份有限公司 家电控制方法及装置
CN109584871A (zh) * 2018-12-04 2019-04-05 北京蓦然认知科技有限公司 一种车辆中语音指令的用户身份识别方法、装置
CN109812925A (zh) * 2019-01-14 2019-05-28 珠海格力电器股份有限公司 一种空调的控制方法、装置、存储介质及空调
CN109949812A (zh) * 2019-04-26 2019-06-28 百度在线网络技术（北京）有限公司 一种语音交互方法、装置、设备及存储介质
CN110223690A (zh) * 2019-06-10 2019-09-10 深圳永顺智信息科技有限公司 基于图像与语音融合的人机交互方法及装置
WO2021031335A1 (zh) * 2019-08-20 2021-02-25 广东美的制冷设备有限公司 空调系统及空调指令检测方法、控制装置
CN112578338A (zh) * 2019-09-27 2021-03-30 阿里巴巴集团控股有限公司 声源定位方法、装置、设备及存储介质
CN112578677A (zh) * 2019-09-29 2021-03-30 广东美的制冷设备有限公司 家用电器及其控制方法、wifi模块及其控制方法
CN110594831A (zh) * 2019-10-24 2019-12-20 成都启英泰伦科技有限公司 一种吸油烟机及其控制方法
CN111243585B (zh) * 2020-01-07 2022-11-22 百度在线网络技术（北京）有限公司 多人场景下的控制方法、装置、设备及存储介质
CN111243585A (zh) * 2020-01-07 2020-06-05 百度在线网络技术（北京）有限公司 多人场景下的控制方法、装置、设备及存储介质
CN112141834A (zh) * 2020-10-26 2020-12-29 华中科技大学同济医学院附属协和医院 一种电梯的语音控制系统及控制方法
CN112433770A (zh) * 2020-11-19 2021-03-02 北京华捷艾米科技有限公司 设备的唤醒方法及装置、电子设备、计算机存储介质
CN113091245A (zh) * 2021-03-19 2021-07-09 青岛海尔空调器有限总公司 用于空调的控制方法、装置及空调

Also Published As

Publication number Publication date
US11373646B2 (en) 2022-06-28
WO2018049782A1 (zh) 2018-03-22
EP3517849A4 (en) 2019-11-13
EP3517849B1 (en) 2023-09-27
EP3517849A1 (en) 2019-07-31
CN106440192B (zh) 2019-04-09
US20210280179A1 (en) 2021-09-09

Similar Documents

Publication Publication Date Title
CN106440192A (zh) 一种家电控制方法、装置、系统及智能空调
CN108231079B (zh) 用于控制电子设备的方法、装置、设备以及计算机可读存储介质
US10796694B2 (en) Optimum control method based on multi-mode command of operation-voice, and electronic device to which same is applied
CN107464564B (zh) 语音交互方法、装置及设备
CN106910500B (zh) 对带麦克风阵列的设备进行语音控制的方法及设备
CN106847298B (zh) 一种基于弥漫式语音交互的拾音方法和装置
WO2017134935A1 (ja) 情報処理装置、情報処理方法、及びプログラム
CN110853619B (zh) 人机交互方法、控制装置、被控装置及存储介质
CN110892476A (zh) 具有语音命令输入能力的装置
CN108320742A (zh) 语音交互方法、智能设备及存储介质
CN102932212A (zh) 一种基于多通道交互方式的智能家居控制系统
CN206353839U (zh) 一种电视语音控制系统
CN109166575A (zh) 智能设备的交互方法、装置、智能设备和存储介质
CN110767225B (zh) 一种语音交互方法、装置及系统
CN109949801A (zh) 一种基于耳机的智能家居设备语音控制方法及系统
CN106940997B (zh) 一种向语音识别系统发送语音信号的方法和装置
CN105068722A (zh) 一种面向智能家居环境的人机交互控制方法
WO2020211405A1 (zh) 一种移动机器人与智能设备的交互方法
CN112230877A (zh) 一种语音操作方法、装置、存储介质及电子设备
CN111583922A (zh) 智能语音助听器及智能家具系统
CN104202694A (zh) 语音拾取装置的定向方法和系统
CN208848361U (zh) 镶体式红外线家电控制器
US20210208550A1 (en) Information processing apparatus and information processing method
CN205862788U (zh) 家用电器的语音控制系统
CN113495617A (zh) 设备控制的方法、装置、终端设备以及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant