CN114095821A - 一种无低功耗唤醒芯片耳机唤醒语音助手的方法 - Google Patents
一种无低功耗唤醒芯片耳机唤醒语音助手的方法 Download PDFInfo
- Publication number
- CN114095821A CN114095821A CN202111324934.7A CN202111324934A CN114095821A CN 114095821 A CN114095821 A CN 114095821A CN 202111324934 A CN202111324934 A CN 202111324934A CN 114095821 A CN114095821 A CN 114095821A
- Authority
- CN
- China
- Prior art keywords
- audio
- voice assistant
- earphone
- waking
- ear
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 230000002618 waking effect Effects 0.000 title claims abstract description 21
- 238000001514 detection method Methods 0.000 claims abstract description 38
- 238000004364 calculation method Methods 0.000 claims abstract description 4
- 239000000872 buffer Substances 0.000 claims description 11
- 238000004519 manufacturing process Methods 0.000 claims description 4
- 230000001133 acceleration Effects 0.000 claims description 2
- 230000003139 buffering effect Effects 0.000 claims description 2
- 230000008859 change Effects 0.000 claims description 2
- 210000000613 ear canal Anatomy 0.000 claims description 2
- 210000000214 mouth Anatomy 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 208000035742 Air-borne transmission Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000005557 airborne transmission Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 210000001260 vocal cord Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1016—Earpieces of the intra-aural type
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1025—Accumulators or arrangements for charging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
Abstract
一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其包括入耳检测、开口检测、音频A循环缓存、音频B录制和唤醒判断计算单元。其具体步骤为：先执行所述入耳检测；检测到入耳后同时启动所述开口检测和所述音频A循环缓存；当检测到使用者开口后，开始录制音频B并将音频A和音频B传输到所述唤醒判断计算单元，当所述语音助手唤醒判断条件成立，唤醒语音助手；当所述语音助手唤醒判断条件不成立，则回到初始状态运行入所述耳检测算法。本发明具有节约空间、增加设计灵活度和降低成本低的有益技术效果。
Description
技术领域
本发明涉及电子设备领域，特别是涉及一种无低功耗唤醒芯片耳机唤醒语音助手的方法。
背景技术
真无线蓝牙耳机搭配智能语音助手的功能有方便、易用、智能的特点，在近年越来越被广泛使用。为使用户能够通过对耳机说话来唤醒手机上的语音助手，而不用拿起手机，或对耳机或手机进行手动唤醒操作，部分耳机厂商选择在耳机上搭载低功耗唤醒芯片。
搭载低功耗唤醒芯片的方案中，主要连接线路为：耳机上的麦克风—低功耗唤醒芯片—主计算单元。耳机上的麦克风拾取用户语音，然后用低功耗唤醒芯片的算力检测是否需要唤醒，再通知主计算单元完成后续动作。
随着无线耳机的体积小型化和对长续航时间的强烈需求，无线耳机内部空间极其紧张，减少其它器件占用空间来增大电池容量是目前主要的一种趋势。但是，独立的低功耗唤醒芯片就存在占用耳机线路板和耳机内部空间，进而增大线路板体积和耳机体积，同时会使得布板更加复杂。
发明内容
本发明的目的是解决不使用低功耗唤醒芯片唤醒语音助手的问题。
为了解决上述问题，本发明提出一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其包括入耳检测、开口检测、音频A循环缓存、音频B录制和唤醒判断计算单元。
其具体步骤为：先执行所述入耳检测；检测到入耳后同时启动所述开口检测和所述音频A循环缓存；当检测到使用者开口后，开始录制音频B并将音频A和音频B传输到所述唤醒判断计算单元，当所述语音助手唤醒判断条件成立，唤醒语音助手；当所述语音助手唤醒判断条件不成立，则回到初始状态运行入所述耳检测算法。
所述唤醒判断计算单元或其它计算单元将音频A和音频B根据时序进行拼合后进行所述语音助手唤醒判断。
所述入耳检测是通过电容传感器或光传感器的信号改变来检测耳机是否置入使用者的耳道中。
所述开口检测是通过麦克风、震动传感器或加速度传感器来检测使用者口腔发声或者震动来判断耳机使用者是否进入开口说话的状态。
所述音频A循环缓存是循环缓存麦克风接收到的音频的最后一小段音频，通过对耳机使用者发出的语音进行前置预存，以获得完整的语音指令用于唤醒语音助手。所述最后一小段音频的目的是为了避免由于系统延迟造成使用者说话开始的一部分语音未被录音，其时间长度一般处于100ms-1000ms。
优选地，耳机是在检测到入耳之后不断循环缓存音频并保留最后300ms作为所述音频A，同时运行所述开口检测算法；当检测到使用者开口之后，开始录制使用者发出的语音B，将述音频A以及开口之后录制的语音B一起传输到智能充电仓内的所述唤醒判断计算单元，所述唤醒判断计算单元判断是否唤醒充电仓内置的语音助手。
所述唤醒判断计算单元位于耳机的充电仓内。
初始状态下，耳机运行入耳检测算法。若未检测到入耳，耳机将持续运行入耳检测。
若检测到入耳，耳机将同时循环运行开口检测和所述音频A循环缓存。所述音频A循环缓存是指通过麦克风循环缓存音频并保留最后300ms。若未检测到使用者开口，耳机将停留在此状态，持续运行开口检测并循环缓存音频。若检测到开口，耳机将会通过无线连接将缓存的300ms所述音频A循环缓存以及开口之后的音频传输到充电仓，在充电仓上运行算法以判断是否唤醒语音助手。若用户语音被算法识别为唤醒，则唤醒语音助手。
若算法将用户语音识别为不唤醒，则回到初始状态运行入耳检测算法。
本发明具有如下优点：
1.节约空间：不搭载低功耗唤醒芯片减小了耳机和线路板的体积限制；
2.增加设计灵活度：不搭载低功耗唤醒芯片给其他部件的选择增加了灵活度；
3.降低成本：不搭载低功耗唤醒芯片减少了产品成本。
附图说明
图1为本发明流程示意图；
图2为本发明智能耳机前FPC电容传感器安装位置示意图；
图3为本发明智能耳机后FPC电容传感器安装位置示意图；
图4为本发明六轴传感器的安装位置示意图；
图中：1.耳机壳体；2.前FPC电容传感器；3.前FPC电容传感器；4.六轴传感器；5.耳机主板。
具体实施方式
下面结合附图1-4和具体实施例对技术方案做进一步说明，以助于理解本发明的内容。
如图1所示，一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其包括入耳检测、开口检测、音频A循环缓存、音频B录制以及唤醒判断计算单元。
其具体步骤为：先执行所述入耳检测；检测到入耳后同时启动所述开口检测和所述音频A循环缓存；当检测到使用者开口后，开始录制音频B并将音频A和音频B根据时序合并，然后传输到所述唤醒判断计算单元，所述唤醒判断计算单元对合并后的音频A和音频B进行所述语音助手唤醒判断；当所述语音助手唤醒判断条件成立，唤醒语音助手；当所述语音助手唤醒判断条件不成立，则回到初始状态运行入所述耳检测算法。
循环缓存的实现方法：使用一个Ring Buffer(环形缓存)盛放300ms的录音，并用一根写指针指向缓存中每个时刻写入的位置，该指针在环形缓存中沿固定方向旋转。因为环形缓存头尾相接的特点，使得缓存中始终保存最后300ms的录音。
如图2所示，在一侧的耳机壳体1内部贴合有前FPC电容传感器2。
如图3所示，在另一侧耳机壳体1内部贴合有后FPC电容传感器3。所述入耳检测通过检测佩戴时感应所述前FPC电容传感器2和后FPC电容传感器3的电容变化，来判断是否正确入耳，通过精确校准生产过程引入的基准电容偏差，保证产品一致性；经过优选的所述前FPC电容传感器2和后FPC电容传感器3的位置及面积，适应各种耳朵形状，确保入耳检测有较好灵敏度，同时不易被误触发；检测耳机出耳后，触发事件，配置耳机进入低功耗，延长待机时间。
如图4所示，所述开口检测是通过耳机壳体内的六轴传感器4对佩戴者发出的振动进行收集,其包括3轴加速度计和3轴陀螺仪。所述六轴传感器4固定在耳机主板5，耳机主板5与耳机壳体1刚性连接，佩戴者开口说话，声带会同时引起的骨骼振动信号传导到所述六轴传感器4，并通过过滤噪声及算法进行语音识别。而非佩戴者的语音空气传播无法引起六轴传感器震动。
所述入耳检测、开口检测、充电仓判断唤醒的判断均采用标准算法。
以上所述，只是本发明的一个实例，不能以此限定本发明的范围，凡依此发明专利申请范围及说明内容所做的简单的等效变化与修饰，皆属于本发明专利涵盖的范围。
Claims (10)
1.一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：包括入耳检测、开口检测、音频A循环缓存、音频B录制和唤醒判断计算单元；
其具体步骤为：先执行所述入耳检测；检测到入耳后同时启动所述开口检测和所述音频A循环缓存；当检测到使用者开口后，开始录制音频B并将音频A和音频B传输到所述唤醒判断计算单元，当所述语音助手唤醒判断条件成立，唤醒语音助手；当所述语音助手唤醒判断条件不成立，则回到初始状态运行入所述耳检测算法。
2.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述唤醒判断计算单元或其它计算单元将音频A和音频B根据时序进行拼合后进行所述语音助手唤醒判断。
3.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述入耳检测是通过电容传感器或光传感器的信号改变来检测耳机是否置入使用者的耳道中。
4.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述开口检测是通过麦克风、震动传感器或加速度传感器来检测使用者口腔发声或者震动来判断耳机使用者是否进入开口说话的状态。
5.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述音频A循环缓存是循环缓存麦克风接收到的音频的最后一小段音频。
6.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述音频A循环缓存是指通过麦克风循环缓存音频并保留最后300ms。
7.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述唤醒判断计算单元位于耳机的充电仓内。
8.如权利要求1所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述入耳检测通过检测佩戴时感应所述前FPC电容传感器和后FPC电容传感器的电容变化，来判断是否正确入耳。
9.如权利要求8所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于，所述入耳检测通过检测佩戴时感应所述前FPC电容传感器和后FPC电容传感器的电容变化，来判断是否正确入耳，通过精确校准生产过程引入的基准电容偏差，保证产品一致性；当检测耳机出耳后，耳机进入低功耗。
10.如权利要求4所述的一种无低功耗唤醒芯片耳机唤醒语音助手的方法，其特征在于：所述开口检测是通过耳机壳体内的六轴传感器对佩戴者发出的振动进行收集,其包括三轴加速度计和三轴陀螺仪；所述六轴传感器固定在耳机主板，耳机主板与耳机壳体刚性连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111324934.7A CN114095821A (zh) | 2021-11-10 | 2021-11-10 | 一种无低功耗唤醒芯片耳机唤醒语音助手的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111324934.7A CN114095821A (zh) | 2021-11-10 | 2021-11-10 | 一种无低功耗唤醒芯片耳机唤醒语音助手的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114095821A true CN114095821A (zh) | 2022-02-25 |
Family
ID=80299860
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111324934.7A Pending CN114095821A (zh) | 2021-11-10 | 2021-11-10 | 一种无低功耗唤醒芯片耳机唤醒语音助手的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114095821A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190037298A1 (en) * | 2017-07-31 | 2019-01-31 | Bose Corporation | Adaptive headphone system |
| CN109792573A (zh) * | 2018-12-26 | 2019-05-21 | 深圳市汇顶科技股份有限公司 | 佩戴检测方法、装置、可穿戴设备及存储介质 |
| CN110677769A (zh) * | 2019-11-04 | 2020-01-10 | 珠海普林芯驰科技有限公司 | 耳机及其控制方法 |
| CN112216277A (zh) * | 2019-07-12 | 2021-01-12 | Oppo广东移动通信有限公司 | 通过耳机进行语音识别的方法、耳机、语音识别装置 |
| CN112437374A (zh) * | 2020-11-06 | 2021-03-02 | 维沃移动通信有限公司 | 耳机及调音方法 |
-
2021
- 2021-11-10 CN CN202111324934.7A patent/CN114095821A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190037298A1 (en) * | 2017-07-31 | 2019-01-31 | Bose Corporation | Adaptive headphone system |
| CN109792573A (zh) * | 2018-12-26 | 2019-05-21 | 深圳市汇顶科技股份有限公司 | 佩戴检测方法、装置、可穿戴设备及存储介质 |
| CN112216277A (zh) * | 2019-07-12 | 2021-01-12 | Oppo广东移动通信有限公司 | 通过耳机进行语音识别的方法、耳机、语音识别装置 |
| CN110677769A (zh) * | 2019-11-04 | 2020-01-10 | 珠海普林芯驰科技有限公司 | 耳机及其控制方法 |
| CN112437374A (zh) * | 2020-11-06 | 2021-03-02 | 维沃移动通信有限公司 | 耳机及调音方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8831240B2 (en) | Bluetooth device and audio playing method using the same | |
| US10694286B2 (en) | Systems and methods of reducing acoustic noise | |
| CN104144377A (zh) | 话音激活设备的低功率激活 | |
| US11232800B2 (en) | Personalized talking detector for electronic device | |
| CN112216277A (zh) | 通过耳机进行语音识别的方法、耳机、语音识别装置 | |
| WO2020207376A1 (zh) | 一种去噪方法及电子设备 | |
| US10681451B1 (en) | On-body detection of wearable devices | |
| CN111696562B (zh) | 语音唤醒方法、设备及存储介质 | |
| US11533574B2 (en) | Wear detection | |
| CN110896511A (zh) | 一种耳机控制方法、装置、存储介质及计算机设备 | |
| CN111683329B (zh) | 麦克风检测方法、装置、终端及存储介质 | |
| CN109039355B (zh) | 语音提示方法及相关产品 | |
| CN114095821A (zh) | 一种无低功耗唤醒芯片耳机唤醒语音助手的方法 | |
| CN204578621U (zh) | 一种语音唤醒系统及移动终端 | |
| US20220230657A1 (en) | Voice control method and apparatus, chip, earphones, and system | |
| CN114049886A (zh) | 波形信号的处理方法及处理装置 | |
| CN113162837B (zh) | 语音消息的处理方法、装置、设备及存储介质 | |
| CN113647083B (zh) | 用于电子设备的个性化说话检测器 | |
| CN110049395B (zh) | 耳机控制方法及耳机设备 | |
| US20200336819A1 (en) | Wearable device and power saving method for wearable device | |
| CN111681654A (zh) | 语音控制方法、装置、电子设备及存储介质 | |
| CN217388974U (zh) | 一种具有加速度传感器和环境音侦测的骨传导耳机 | |
| US20230260537A1 (en) | Single Vector Digital Voice Accelerometer | |
| CN113825063B (zh) | 耳机的语音识别启动方法及耳机的语音识别方法 | |
| CN220067657U (zh) | 耳机及耳机组件 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |