CN107404682B - 一种智能耳机 - Google Patents

一种智能耳机 Download PDF

Info

Publication number
CN107404682B
CN107404682B CN201710682434.8A CN201710682434A CN107404682B CN 107404682 B CN107404682 B CN 107404682B CN 201710682434 A CN201710682434 A CN 201710682434A CN 107404682 B CN107404682 B CN 107404682B
Authority
CN
China
Prior art keywords
information
sound
module
processing module
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710682434.8A
Other languages
English (en)
Other versions
CN107404682A (zh
Inventor
马希通
段然
耿立华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201710682434.8A priority Critical patent/CN107404682B/zh
Publication of CN107404682A publication Critical patent/CN107404682A/zh
Priority to US16/021,610 priority patent/US10511910B2/en
Application granted granted Critical
Publication of CN107404682B publication Critical patent/CN107404682B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/323—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/103—Combination of monophonic or stereophonic headphones with audio players, e.g. integrated in the headphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2400/00—Loudspeakers
    • H04R2400/01—Transducers used as a loudspeaker to generate sound aswell as a microphone to detect sound
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/01—Input selection or mixing for amplifiers or loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/03—Aspects of the reduction of energy consumption in hearing devices

Abstract

本发明提供了一种智能耳机，涉及耳机技术领域，用于自动控制智能耳机内的音频信息的播放状态，改善了用户的使用体验。智能耳机包括用于采集外界信息的采集单元、用于存储特征信息的存储单元、以及分别与采集单元和存储单元相连的控制单元，控制单元用于将采集单元所采集的外界信息与存储单元所存储的特征信息进行比对，并根据比对结果，控制智能耳机内的音频信息的播放状态。上述智能耳机用于听取音频信息。

Description

一种智能耳机
技术领域
本发明涉及耳机技术领域，尤其涉及一种智能耳机。
背景技术
在日常生活中，耳机作为重要的电子配件，已经得到了非常广泛的应用。目前常见的耳机主要有入耳式耳机和头戴式耳机两种类型。
以头戴式耳机为例，当用户在使用头戴式耳机听歌或者听广播时，用户的耳中会听到头戴式耳机内持续播放的音频信息，此时，如果有人想要跟用户进行对话，头戴式耳机内所持续播放的音频信息就势必会对用户带来干扰，使用户无法听清他人的说话内容，这时用户就需要将头戴式耳机摘取下来，以保证能够与他人进行无障碍对话。但是这样一来，就会对头戴式耳机的使用带来一定的不便性，进而影响用户的使用体验。
发明内容
本发明提供了一种智能耳机，用于自动控制智能耳机内的音频信息的播放状态，改善了用户的使用体验。
为达到上述目的，本发明采用如下技术方案：
本发明提供的智能耳机包括：
采集单元，用于采集外界信息；
存储单元，用于存储特征信息；
控制单元，分别与所述采集单元和所述存储单元相连，用于将所述采集单元所采集的外界信息与所述存储单元所存储的特征信息进行比对，并根据比对结果，控制智能耳机内的音频信息的播放状态。
本发明所提供的智能耳机包括采集单元、存储单元、以及分别与采集单元和存储单元相连的控制单元，其中，存储单元中预先存储有特征信息。在用户使用智能耳机听取音频信息的过程中，采集单元采集用户周边的外界信息，并将所采集的外界信息传输至控制单元中，控制单元将采集单元所采集的外界信息与存储单元所存储的特征信息进行比对，当比对出外界信息中存在与特征信息相匹配的信息时，控制单元可以自动控制智能耳机内的音频信息的播放状态。与现有的耳机相比，本发明所提供的智能耳机可以对音频信息的播放状态进行自动切换，用户无需再手动将智能耳机摘取下来，从而提高了用户对智能耳机的使用体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例提供的智能耳机的连接关系示意图一；
图2为本发明实施例提供的智能耳机的连接关系示意图二；
图3为本发明实施例提供的智能耳机的结构示意示意图三；
图4a为本发明实施例提供的智能耳机的结构示意图一；
图4b为本发明实施例提供的智能耳机的结构示意图二；
图5为本发明实施例提供的智能耳机的连接关系示意图四；
图6为本发明实施例提供的智能耳机的连接关系示意图五；
图7为本发明实施例提供的智能耳机的连接关系示意图六；
图8为本发明实施例提供的智能耳机的结构示意图三。
附图标记说明：
1-采集单元； 11-声音采集模块；
111-声音采集子模块； 12-图像采集模块；
13-距离采集模块 2-存储单元；
3-控制单元； 31-声音处理模块；
32-调控模块； 33-图像处理模块；
34-方位处理模块； 35-距离处理模块；
36-声音调制模块。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例，均属于本发明保护的范围。
如图1所示，本实施例提供了一种智能耳机，该智能耳机包括采集单元1、存储单元2和控制单元3。其中，采集单元1用于采集外界信息，存储单元2用于存储特征信息，控制单元3分别与采集单元1和存储单元2相连，用于将采集单元1所采集的外界信息与存储单元2所存储的特征信息进行比对，并根据比对结果，控制智能耳机内的音频信息的播放状态。
在用户使用智能耳机听取音频信息的过程中，采集单元1采集用户周边的外界信息，并将所采集的外界信息传输至控制单元3中，控制单元3将采集单元1所采集的外界信息与存储单元2所存储的特征信息进行比对，当比对出外界信息中存在与特征信息相匹配的信息时，控制单元3可以自动控制智能耳机内的音频信息的播放状态。与现有的耳机相比，本实施例所提供的智能耳机可以对音频信息的播放状态进行自动切换，用户无需再手动将智能耳机摘取下来，从而提高了用户对智能耳机的使用体验。
在上述实施例中，采集单元1可以实时采集外界信息，也可根据需要定时采集外界信息。例如，当用户在室内使用智能耳机时，为了防止错过室内其他人输送给用户的信息，采集单元1可以实时采集外界信息，相应的，控制单元3将采集单元1所实时采集的外界信息与存储单元2所存储的特征信息进行实时比对。又如，当用户在公共场合使用智能耳机时，可以根据实际情况，令采集单元1仅在特定的时间段内采集外界信息，在其他时段内不采集外界信息，这样不仅可以节省智能耳机的能耗，也可以减少智能耳机内控制单元3的信息处理量。
采集单元1所述采集的外界信息可以是外界声音信息和/或外界图像信息。例如，当采集单元1所述采集的外界信息为外界声音信息时，对应存储单元2所存的特征信息为声音特征信息。如图2所示，采集单元1所采集的外界信息为外界声音信息时，采集单元1通常包括声音采集模块11，控制单元3包括声音处理模块31和调控模块32，声音处理模块31分别与声音采集模块11、存储单元2和调控模块32相连。
声音处理模块31用于将声音采集模块11所采集的外界声音信息与存储单元2中所存储的声音特征信息进行比对，当声音处理模块31比对出外界声音信息中包含与声音特征信息匹配的声音匹配信息时，调控模块32控制智能耳机停止播放音频信息或播放音频信息。
示例性的，声音特征信息可包括用于识别开始对话的第一类声音特征信息以及用于识别结束对话的第二类声音特征信息。其中，第一类声音特征信息具体可包括你好、HI、用户姓名等声音特征信息，第二类声音特征信息具体可包括再见、BYEBYE等声音特征信息。当然，第一类声音特征信息和第二类声音特征信息也可包括其他声音特征信息，具体可根据实际情况进行设定。
当用户在使用智能耳机听取音频信息的过程中，声音采集模块11采集外界声音信息，当声音处理模块31比对出声音采集模块11所采集的外界声音信息中存在与第一类声音特征信息相匹配的第一类声音匹配信息时，说明此时有人想要和用户开始进行对话，这时，调控模块32就可控制智能耳机进入对话模式，自动停止播放音频信息。并且，在智能耳机处于对话模式的过程中，声音采集模块11继续采集外界声音信息，当声音处理模块31比对出声音采集模块11所采集的外界声音信息中存在与第二类声音特征信息相匹配的第二类声音匹配信息时，说明此时已结束对话，这时，调控模块32就可控制智能耳机退出对话模式，使音频信息自动继续播放。
进一步的，采集单元1还可采集图像信息，此时对应存储单元2所存的特征信息还可包括人脸图像特征信息。请再次参见图2，采集单元1还包括图像采集模块12，控制单元3还包括图像处理模块33。其中，图像采集模块12与声音处理模块31相连，当声音处理模块31比对出外界声音信息中包含与声音特征信息相匹配的声音匹配信息时，图像采集模块12用于采集模块采集外界图像信息。图像处理模块33分别与存储单元2、图像采集模块12和调控模块32相连，图像处理模块33用于将图像采集模块12所采集的外界图像信息与存储单元2中所存储的人脸图像特征信息进行比对。
可以理解的是，存储单元2中所存储的人脸图像特征信息可包括与用户相识的人的人脸图像信息。示例性的，当声音处理模块31比对出外界声音信息中包含与第一类声音特征信息相匹配的第一类声音匹配信息时，图像采集模块12开始采集外界图像信息，图像处理模块33将图像采集模块12所采集的外界图像信息与存储单元2中所存储的人脸图像特征信息进行比对。当图像处理模块33比对出外界图像信息中包含与所存储的人脸图像特征信息匹配的人脸图像匹配信息时，说明声音处理模块31所识别出的第一类声音匹配信息是由与用户相识的人发出的，进而确定发出第一类声音匹配信息的人是要与用户进行对话，这时可通过调控模块32控制智能耳机进入对话模式，停止播放音频信息。然而，当图像处理模块33比对出外界图像信息中不包含与所存储的人脸图像特征信息匹配的人脸图像匹配信息时，说明声音处理模块31所识别出的第一类声音匹配信息是由与用户不相识的人发出，这也就说明是用户周边的陌生人在与别人进行对话，此时智能耳机无需进入对话模式，调控模块32控制智能耳机继续播放音频信息。
同理，当声音处理模块31比对出外界声音信息中包含与第二类声音特征信息相匹配的第二类声音匹配信息时，图像处理模块33同样可将图像采集模块12所采集的外界图像信息与存储单元2中所存储的人脸图像特征信息进行比对，当图像处理模块33比对出外界图像信息中包含与人脸图像特征信息相匹配的人脸图像匹配信息时，说明发出第二类声音匹配信息的人是用户周边的陌生人，用户的对话并未结束，此时，调控模块32控制智能耳机停止播放音频信息。当比图像处理模块33对出外界图像信息中不包含与人脸图像特征信息相匹配的人脸图像匹配信息时，说明与用户进行对话的人已经离开，对话已经结束，此时，调控模块32控制智能耳机继续播放音频信息。
当采集单元1包括图像采集模块12，控制单元3包括图像处理模块33时，在声音处理模块31比对出所采集的外界声音信息中包含与声音特征信息相匹配的声音匹配信息后，可对外界图像信息进行进一步的比对，这样可以对发出声音匹配信息的人的身份进行进一步确定，进而对智能耳机是否需要进入对话模式或退出对话模式进行更加准确的判定。
结合图4a所示的智能耳机的正面图，以及图4b所示智能耳机的俯视图，为了全方位采集外界声音信息，声音采集模块11可包括环设在智能耳机顶部的多个声音采集子模块111，用以全方位的采集外界声音信息。其中，多个声音采集子模块111与声音处理模块31相连。同理，图像采集模块12也可设于智能耳机顶部，用以全方位的采集外界图像信息。
当声音处理模块31比对出外界声音信息中包含与声音特征信息匹配的声音匹配信息时，为了控制图像采集模块12可以采集声音匹配信息对应方位处的外界图像信息，还可令图像处理模块33与多个声音采集子模块111相连。这样一来，图像处理模块33可以根据多个声音采集子模块111所分别采集的声音匹配信息的音量大小，确定出采集的声音匹配信息的音量较大的声音采集子模块111对应的位置，进而确定声音匹配信息的声源方位，并根据所确定的声源方位，控制图像采集模块12采集声源方位处的外界图像信息。
需要说明的是，当多个声音采集子模块111外界声音信息对外界声音信息进行实时采集时，图像处理模块33可根据多个声音采集子模块111所分别实时采集的声音匹配信息的音量大小，对声音匹配信息的声源方位进行实时确定，也就是说，图像采集模块12可以根据所实时确定的声源方位，对声源方位处的外界图像信息也进行实时采集。
进一步的，如图5所示，控制单元3还可包括方位处理模块34，方位处理模块34分别与调控模块32和图像处理模块33相连。
当图像处理模块33比对出声音采集模块11所采集的外界图像信息中包含与存储单元2所存储的人脸图像特征信息相匹配的人脸图像匹配信息时，方位处理模块34根据图像处理模块33所识别出的人脸图像匹配信息，判断人脸图像匹配信息对应的人与用户之间的相对方位是否在预设方位范围内。当判断出人脸图像匹配信息对应的人与用户之间的相对方位在预设方位范围内时，说明此人与用户之间的相对方位符合两人进行对话时应该对应的相对方位，则进一步证明此人是在与用户进行对话，此时调控模块32控制智能耳机停止播放音频信息。当方位处理模块34判断出人脸图像匹配信息对应的人与用户之间的相对方位超出预设方位范围内时，说明此人与用户之间的相对方位不符合两人对话时应该对应的相对方位，则证明此人并不是在与用户进行对话，此时调控模块32控制智能耳机播放音频信息。
需要说明的是，在判断人脸图像匹配信息对应的人与用户之间的相对方位是否超出预设方位范围时，可以通过此人的面部与用户的面部之间的相对角度是否超出预设角度范围来进行判断。例如，当识别出此人的面部与用户的面部之间的角度为+180°时，说明此人与用户面对面，即，此人在用户的正前方，这就符合两人对话时应该对应的相对方位。当识别出此人的面部与用户的面部之间的角度为-180°时，说明此人的面部朝向用户的背面，即此人在用户的后方，这就不符合两人对话时应该对应的相对方位。其中，预设角度范围可以根据实际情况进行设定，本实施例对此不作具体限制。
此外，如图6所示，采集单元1还可包括与图像处理模块33相连的距离采集模块13。相应的，控制单元3还包括距离处理模块35，距离处理模块35分别与调控模块32和距离采集模块13相连。当图像处理模块33比对出所采集的外界图像信息中包含与所存储的人脸图像特征信息匹配的人脸图像匹配信息时，距离采集模块13根据图像处理模块33所确定出的人脸图像匹配信息，采集人脸图像匹配信息对应的人与用户之间的相对距离，距离处理模块35判断距离采集模块13所采集的相对距离是否在预设距离范围内。
示例性的，当声音处理模块31比对出外界声音信息中包含与第一类声音特征信息相匹配的第一类声音匹配信息，且图像处理模块33比对出所采集的外界图像信息中包含与所存储的人脸图像特征信息匹配的人脸图像匹配信息时，距离采集模块13根据图像处理模块33所识别出的人脸图像匹配信息，采集人脸图像匹配信息对应的人与用户之间的相对距离。当后续声音处理模块31比对出外界声音信息中包含与第二类声音特征信息相匹配的第二类声音匹配信息时，若距离处理模块35判断出人脸图像匹配信息对应的人与用户之间的相对距离在预设距离范围内，则说明此人与用户之间并没有结束对话，此时，调控模块32控制智能耳机停止播放音频信息。若距离处理模块35判断出人脸图像匹配信息对应的人与用户之间的相对距离超出预设距离范围时，则说明与用户对话的人已经离开，对话结束，此时，调控模块32控制智能耳机播放音频信息。
基于图6，下面结合智能耳机的控制方法，对本实施例所提供的智能耳机进行更加清楚的说明：
步骤S1：在存储单元2中预先存储第一类声音特征信息、第二类声音特征信息和人脸图像特征信息。
步骤S2：多个声音采集子模块111采集用户周边的外界声音信息。
步骤S3：声音处理模块31将声音采集子模块111所采集的外界声音信息与存储单元2所存储的第一类声音特征信息进行比对，当比对出外界声音信息中存在与第一类声音特征信息匹配第一类声音匹配信息时，进入步骤S4。
步骤S4：图像处理模块33根据多个声音采集子模块111所分别采集的第一类声音匹配信息的音量大小，确定第一类声音匹配信息的声源方位；根据所确定的声源方位，控制图像采集模块12采集声源方位处的外界图像信息。
步骤S5：图像处理模块33将图像采集模块12所采集的外界图像信息与存储单元2中所存储的人脸图像特征信息进行比对，当比对出外界图像信息中不存在与人脸图像特征信息相匹配的人脸图像匹配信息时，调控模块32控制智能耳机内的音频信息处于播放状态；当比对出外界图像信息中存在与人脸图像特征信息相匹配的人脸图像匹配信息时，进入步骤S6。
步骤S6：方位处理模块34根据图像处理模块33识别出的人脸图像匹配信息，判断人脸图像匹配信息对应的人与用户之间的角度是否在预设角度范围内，当判断出出人脸图像匹配信息对应的人与用户之间的角度超出预设角度范围时，调控模块32控制智能耳机播放音频信息；当判断出人脸图像匹配信息对应的人与用户之间的角度在预设角度范围内时，调控模块32控制智能耳机停止播放音频信息。
步骤S7：声音处理模块31将声音采集子模块111所采集的外界声音信息与存储单元2所存储的第二类声音特征信息进行比对，当比对出外界声音信息中存在与第二类声音特征信息匹配第二类声音匹配信息时，进入步骤S8。
步骤S8：图像处理模块33将图像采集模块12所采集的外界图像信息与存储单元2中所存储的人脸图像特征信息进行比对，当比对出外界图像信息中存在与人脸图像特征信息相匹配的人脸图像匹配信息时，调控模块32控制智能耳机内的音频信息处于停止播放状态，当比对出外界图像信息中不存在与人脸图像特征信息相匹配的人脸图像匹配信息时，调控模块32控制智能耳机内的音频信息处于播放状态。
需要说明的是，当采集单元1包括距离采集模块13，控制单元3包括距离处理模块35时，在步骤S5中比对出外界图像信息中存在与人脸图像特征信息相匹配的人脸图像匹配信息时之后，距离采集模块13还可根据图像处理模块33所识别出的人脸图像匹配信息，采集人脸图像匹配信息对应的人与用户之间的相对距离。
对应的，步骤S8还可为：距离处理模块35判断距离采集模块13所采集的相对距离是否在预设距离范围内，当判断出人脸图像匹配信息对应的人与用户之间的相对距离在预设距离范围内时，调控模块32控制智能耳机停止播放音频信息，当判断出人脸图像匹配信息对应的人与用户之间的相对距离超出预设距离范围内时，调控模块32控制智能耳机播放音频信息。
需要进一步说明的是，上述步骤S1～S8仅是为了示意说明智能耳机由进入对话模式到退出对话模式的控制流程，并不代表对每个步骤执行的先后顺序的具体限定。
可以理解的是，当智能耳机内的音频信息停止播放后，对话者的声音信息可以通过多个声音采集子模块111传输至用户的耳中。进一步的，如图7所示，控制单元3还可包括声音调制模块36，声音调制模块36分别与图像处理模块33和多个声音采集子模块111相连。声音调制模块36用于根据图像处理模块33所确定出的声音匹配信息的声源方位，对多个声音采集子模块111所采集的外界声音信息进行调制，将调制后的外界声音信息传输至用户的耳中。
其中，声音调制模块36可以通过比例加成的方式对个声音采集子模块111所采集的外界声音信息进行调制。示例性的，声音调制模块36可以根据图像处理模块33所确定出的声音匹配信息的声源方位，对声源方位处对应的声音采集子模块111所采集的外界声音信息的音量调大，和/或，将其他方位处对应的声音采集子模块111所采集的外界声音信息的音量调小，这样，就可以将对话者发出的声音信息的音量相较于外界声音信息中的杂音的音量进行增大，进而有针对性的抑制周边环境的噪声，使用户不受外界杂音的干扰，提高对话质量。
需要说明的是，如图8所示，本实施例所提供的智能耳机可包括弧形支架和两个听筒，其中，两个听筒分别可拆卸的设与弧形支架的两端。上述声音采集子模块111可为麦克风，图像采集模块12可为全景摄像头，距离采集模块13可为红外探测器，控制单元3可为集成有声音处理模块31、调控模块32、图像处理模块33、方位处理模块34、距离处理模块35和声音调制模块36的微控制器(Micro Control Unit，简称MCU)。其中，全景摄像头和多个麦克风分别设于弧形支架的顶部，以实现全方位的采集外界图像信息和外界声音信息，红外探测器和微控制器可以分别设于智能耳机的两个听筒内，也可均设于智能耳机的同一听筒内。
以上所述仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (8)

1.一种智能耳机，其特征在于，包括：
采集单元，用于采集外界信息；所述采集单元包括图像采集模块；
存储单元，用于存储特征信息；所述特征信息包括声音特征信息，所述声音特征信息包括用于识别开始对话的第一类声音特征信息以及用于识别结束对话的第二类声音特征信息；所述特征信息还包括人脸图像特征信息；
控制单元，分别与所述采集单元和所述存储单元相连，用于将所述采集单元所采集的外界信息与所述存储单元所存储的特征信息进行比对，并根据比对结果，控制智能耳机内的音频信息的播放状态；所述控制单元包括方位处理模块、图像处理模块和调控模块，所述方位处理模块分别与所述调控模块和所述图像处理模块相连；所述图像处理模块分别与所述存储单元和所述图像采集模块相连；
所述图像采集模块采集外界图像信息，所述图像处理模块将所述图像采集模块所采集的外界图像信息与所述存储单元中所存储的人脸图像特征信息进行比对；当所述图像处理模块比对出所述图像采集模块所采集的外界图像信息中包含与所述存储单元中所存储的人脸图像特征信息匹配的人脸图像匹配信息时，所述方位处理模块根据所述人脸图像匹配信息，判断所述人脸图像匹配信息对应的人与用户之间的相对方位是否在预设方位范围内；当所述方位处理模块判断出所述相对方位在预设方位范围内时，所述调控模块控制智能耳机停止播放音频信息，当所述方位处理模块判断出所述相对方位超出预设方位范围内时，所述调控模块控制智能耳机播放音频信息。
2.根据权利要求1所述的智能耳机，其特征在于，所述采集单元包括声音采集模块，所述控制单元包括声音处理模块；其中，所述声音处理模块分别与所述声音采集模块、所述存储单元和所述调控模块相连；
所述声音处理模块用于将所述声音采集模块所采集的外界声音信息与所述存储单元中所存储的声音特征信息进行比对；
当所述声音处理模块比对出所述外界声音信息中包含与所述声音特征信息匹配的声音匹配信息时，所述调控模块控制智能耳机停止播放音频信息或播放音频信息。
3.根据权利要求2所述的智能耳机，其特征在于，所述图像采集模块与所述声音处理模块相连，所述图像处理模块与所述调控模块相连；
当所述声音处理模块比对出所述外界声音信息中包含与所述声音特征信息匹配的声音匹配信息时，所述图像采集模块采集外界图像信息，所述图像处理模块将所述图像采集模块所采集的外界图像信息与所述存储单元中所存储的人脸图像特征信息进行比对；
当所述图像处理模块比对出所述图像采集模块所采集的外界图像信息中包含与所述存储单元中所存储的人脸图像特征信息匹配的人脸图像匹配信息时，所述调控模块控制智能耳机停止播放音频信息；当所述图像处理模块比对出所述图像采集模块所采集的外界图像信息中不包含与所述存储单元中所存储的人脸图像特征信息匹配的人脸图像匹配信息时，所述调控模块控制智能耳机播放音频信息。
4.根据权利要求3所述的智能耳机，其特征在于，所述声音采集模块包括环设在智能耳机顶部的多个声音采集子模块，多个所述声音采集子模块用于全方位采集外界声音信息，所述图像采集模块设于智能耳机顶部，所述图像采集模块用于全方位采集外界图像信息；多个所述声音采集子模块分别与所述声音处理模块和所述图像处理模块相连；
当所述声音处理模块比对出所述外界声音信息中包含与所述声音特征信息匹配的声音匹配信息时，所述图像处理模块还用于根据多个所述声音采集子模块所分别采集的声音匹配信息的音量大小，确定所述声音匹配信息的声源方位；根据所确定的声源方位，控制所述图像采集模块采集所述声源方位处的外界图像信息。
5.根据权利要求4所述的智能耳机，其特征在于，所述声音采集子模块为麦克风，所述图像采集模块为全景摄像头。
6.根据权利要求4所述的智能耳机，其特征在于，所述采集单元还包括距离采集模块，所述控制单元还包括距离处理模块；其中，所述距离采集模块与所述图像处理模块相连，所述距离处理模块分别与所述调控模块和所述距离采集模块相连；
当所述图像处理模块比对出所采集的外界图像信息中包含与所存储的人脸图像特征信息匹配的人脸图像匹配信息时，所述距离采集模块根据所述图像处理模块所确定出的人脸图像匹配信息，采集所述人脸图像匹配信息对应的人与用户之间的相对距离，所述距离处理模块判断所述距离采集模块所采集的相对距离是否在预设距离范围内；
当所述距离处理模块判断出所述相对距离在预设距离范围内时，所述调控模块控制智能耳机停止播放音频信息；当所述距离处理模块判断出所述相对距离超出预设距离范围时，所述调控模块控制智能耳机播放音频信息。
7.根据权利要求6所述的智能耳机，其特征在于，所述距离采集模块为红外探测器，所述红外探测器设于智能耳机的任一听筒内。
8.根据权利要求4所述的智能耳机，其特征在于，所述控制单元还包括声音调制模块，所述声音调制模块分别与所述图像处理模块和多个所述声音采集子模块相连；
所述声音调制模块用于根据所述图像处理模块所确定出的声音匹配信息的声源方位，对多个所述声音采集子模块所采集的外界声音信息进行调制，将调制后的外界声音信息传输至用户的耳中。
CN201710682434.8A 2017-08-10 2017-08-10 一种智能耳机 Active CN107404682B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710682434.8A CN107404682B (zh) 2017-08-10 2017-08-10 一种智能耳机
US16/021,610 US10511910B2 (en) 2017-08-10 2018-06-28 Smart headphone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710682434.8A CN107404682B (zh) 2017-08-10 2017-08-10 一种智能耳机

Publications (2)

Publication Number Publication Date
CN107404682A CN107404682A (zh) 2017-11-28
CN107404682B true CN107404682B (zh) 2019-11-05

Family

ID=60396505

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710682434.8A Active CN107404682B (zh) 2017-08-10 2017-08-10 一种智能耳机

Country Status (2)

Country Link
US (1) US10511910B2 (zh)
CN (1) CN107404682B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2566935B (en) * 2017-09-20 2021-09-22 Ford Global Tech Llc Selective sound system and method for a vehicle
CN109257498B (zh) * 2018-09-29 2021-01-08 维沃移动通信有限公司 一种声音处理方法及移动终端
CN111935581A (zh) * 2020-08-13 2020-11-13 长春市长光芯忆科技有限公司 电子记忆耳机

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1997161A (zh) * 2006-12-30 2007-07-11 华为技术有限公司 一种视频终端以及一种音频码流处理方法
CN101478614A (zh) * 2009-01-19 2009-07-08 深圳华为通信技术有限公司 自适应音量调节的方法、装置及通信终端
CN102474681A (zh) * 2010-06-30 2012-05-23 松下电器产业株式会社 交谈检测装置、助听器和交谈检测方法
CN103137155A (zh) * 2011-12-05 2013-06-05 英顺源（上海）科技有限公司 根据外在声音信号变化调整声音信号的播放系统及其方法
CN103702256A (zh) * 2013-12-18 2014-04-02 黑龙江大学 防打扰式耳麦
CN104580992A (zh) * 2014-12-31 2015-04-29 广东欧珀移动通信有限公司 一种控制方法及移动终端
CN105100635A (zh) * 2015-07-23 2015-11-25 深圳乐行天下科技有限公司 摄像头装置及摄像头控制方法
CN105159111A (zh) * 2015-08-24 2015-12-16 百度在线网络技术（北京）有限公司 基于人工智能的智能交互设备控制方法及系统
CN106709402A (zh) * 2015-11-16 2017-05-24 优化科技（苏州）有限公司 基于音型像特征的真人活体身份验证方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070189544A1 (en) * 2005-01-15 2007-08-16 Outland Research, Llc Ambient sound responsive media player
US8625819B2 (en) * 2007-04-13 2014-01-07 Personics Holdings, Inc Method and device for voice operated control
US20090082994A1 (en) * 2007-09-25 2009-03-26 Motorola, Inc. Headset With Integrated Pedometer and Corresponding Method
US8320578B2 (en) * 2008-04-30 2012-11-27 Dp Technologies, Inc. Headset
US20090296951A1 (en) * 2008-05-30 2009-12-03 Sony Ericsson Mobile Communications Ab Tap volume control for buttonless headset
EP2430753B1 (en) * 2009-05-14 2012-10-03 Koninklijke Philips Electronics N.V. A method and apparatus for providing information about the source of a sound via an audio device
CN103310339A (zh) * 2012-03-15 2013-09-18 凹凸电子（武汉）有限公司 身份识别装置和方法以及支付系统和方法
US9391580B2 (en) * 2012-12-31 2016-07-12 Cellco Paternership Ambient audio injection
US8891817B2 (en) * 2013-03-15 2014-11-18 Orcam Technologies Ltd. Systems and methods for audibly presenting textual information included in image data
US20140294257A1 (en) * 2013-03-28 2014-10-02 Kevin Alan Tussy Methods and Systems for Obtaining Information Based on Facial Identification
KR20140141916A (ko) * 2013-06-03 2014-12-11 삼성전자주식회사 사용자 기기의 알림 기능 운용 방법 및 장치
TWI543635B (zh) * 2013-12-18 2016-07-21 jing-feng Liu Speech Acquisition Method of Hearing Aid System and Hearing Aid System
WO2015127194A1 (en) * 2014-02-20 2015-08-27 Harman International Industries, Inc. Environment sensing intelligent apparatus
US20160249126A1 (en) * 2015-02-20 2016-08-25 Harman International Industries, Inc. Personalized headphones
US20170195795A1 (en) * 2015-12-30 2017-07-06 Cyber Group USA Inc. Intelligent 3d earphone
CN105657185B (zh) * 2016-02-29 2019-03-08 宇龙计算机通信科技(深圳)有限公司 控制移动终端的方法及控制移动终端的装置
US10303929B2 (en) * 2016-10-27 2019-05-28 Bose Corporation Facial recognition system
US10405081B2 (en) * 2017-02-08 2019-09-03 Bragi GmbH Intelligent wireless headset system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1997161A (zh) * 2006-12-30 2007-07-11 华为技术有限公司 一种视频终端以及一种音频码流处理方法
CN101478614A (zh) * 2009-01-19 2009-07-08 深圳华为通信技术有限公司 自适应音量调节的方法、装置及通信终端
CN102474681A (zh) * 2010-06-30 2012-05-23 松下电器产业株式会社 交谈检测装置、助听器和交谈检测方法
CN103137155A (zh) * 2011-12-05 2013-06-05 英顺源（上海）科技有限公司 根据外在声音信号变化调整声音信号的播放系统及其方法
CN103702256A (zh) * 2013-12-18 2014-04-02 黑龙江大学 防打扰式耳麦
CN104580992A (zh) * 2014-12-31 2015-04-29 广东欧珀移动通信有限公司 一种控制方法及移动终端
CN105100635A (zh) * 2015-07-23 2015-11-25 深圳乐行天下科技有限公司 摄像头装置及摄像头控制方法
CN105159111A (zh) * 2015-08-24 2015-12-16 百度在线网络技术（北京）有限公司 基于人工智能的智能交互设备控制方法及系统
CN106709402A (zh) * 2015-11-16 2017-05-24 优化科技（苏州）有限公司 基于音型像特征的真人活体身份验证方法

Also Published As

Publication number Publication date
US20190052964A1 (en) 2019-02-14
US10511910B2 (en) 2019-12-17
CN107404682A (zh) 2017-11-28

Similar Documents

Publication Publication Date Title
US10674247B2 (en) Hearing protection earphone, hearing protection method and computer program storage medium for the same
CN106162413B (zh) 具体环境声音提醒模式的耳机装置
CN107404682B (zh) 一种智能耳机
CN208908482U (zh) 可调降噪的耳机
CN108563941A (zh) 一种智能家居设备控制方法、智能音箱及智能家居系统
CN103139351B (zh) 音量控制方法、装置及通信终端
CN106941641B (zh) 一种翻译耳机的翻译方法和翻译耳机
US20120264481A1 (en) Mobile Terminal, and Volume Adjusting Method and Device Thereof
CN106210960B (zh) 具有本地通话情况确认模式的耳机装置
US20090073950A1 (en) Wireless Audio Gateway Headset
WO2010009636A1 (zh) 自动开关终端应用程序的蓝牙耳机及方法
WO2022142224A1 (zh) 一种入耳式耳机的音频播放方法、装置及系统
CN106970774A (zh) 一种音量调节装置及方法、一种终端
CN104754462B (zh) 音量自动调节装置及方法和耳机
CN105827793B (zh) 一种语音定向输出方法及移动终端
CN204044454U (zh) 多功能骨导助听式眼镜
CN106170108A (zh) 具有分贝提醒模式的耳机装置
CN206301081U (zh) 具有双麦克风的智能眼镜和智能交互系统
CN109951784A (zh) 具有智能引导的听力装置和方法
CN208940178U (zh) 一种双麦克风tws耳机
CN107205193A (zh) 一种播放控制方法、耳机及智能设备
WO2013131367A1 (zh) 多解码器音频系统、系统信号流程及其组成的移动设备
CN109539347A (zh) 一种集成灶
CN206182459U (zh) 具有通讯功能的智能头盔
CN207443088U (zh) 一种能够进行身份识别的耳机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant