CN115623123B - 一种音频处理方法及设备 - Google Patents
一种音频处理方法及设备 Download PDFInfo
- Publication number
- CN115623123B CN115623123B CN202110790588.5A CN202110790588A CN115623123B CN 115623123 B CN115623123 B CN 115623123B CN 202110790588 A CN202110790588 A CN 202110790588A CN 115623123 B CN115623123 B CN 115623123B
- Authority
- CN
- China
- Prior art keywords
- sound
- environment
- frequency band
- screen
- play
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 230000005236 sound signal Effects 0.000 claims abstract description 216
- 238000000034 method Methods 0.000 claims description 69
- 230000007613 environmental effect Effects 0.000 claims description 57
- 230000006854 communication Effects 0.000 claims description 44
- 238000004891 communication Methods 0.000 claims description 43
- 230000004044 response Effects 0.000 claims description 39
- 238000003860 storage Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 description 73
- 238000004519 manufacturing process Methods 0.000 description 39
- 230000006870 function Effects 0.000 description 27
- 238000010586 diagram Methods 0.000 description 11
- 210000005069 ears Anatomy 0.000 description 11
- 238000010295 mobile communication Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 6
- 230000035945 sensitivity Effects 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 4
- 239000000919 ceramic Substances 0.000 description 4
- 230000007547 defect Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 235000019800 disodium phosphate Nutrition 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/03—Constructional features of telephone transmitters or receivers, e.g. telephone hand-sets
- H04M1/035—Improving the acoustic characteristics by means of constructional features of the housing, e.g. ribs, walls, resonating chambers or cavities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6016—Substation equipment, e.g. for use by subscribers including speech amplifiers in the receiver circuit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/03—Constructional features of telephone transmitters or receivers, e.g. telephone hand-sets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
- H04M1/6041—Portable telephones adapted for handsfree use
- H04M1/605—Portable telephones adapted for handsfree use involving control of the receiver volume to provide a dual operational mode at close or far distance from the user
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Abstract
本申请实施例公开了一种音频处理方法及设备,涉及电子设备领域,解决了手机听筒在安静环境下播放声音时会漏音,而通过屏幕发声时音质较差的问题。具体方案为:检测到第一触发条件;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
Description
技术领域
本申请实施例涉及电子设备领域,尤其涉及一种音频处理方法及设备。
背景技术
目前,大部分手机是采用设置在手机顶部的听筒实现手机的通话发声的。通常,手机需要在设置听筒的位置对应设置出音孔以释放听筒发声时的能量,出音孔一般开设在手机的前面板上。但是出音孔设置在手机前面板,会增加手机边框的宽度。
随着大屏以及全面屏手机的发展,一些全面屏手机的出音孔设计为长缝形态,位于手机中框和前面板的连接处,同时为了确保外放出声面积够大,具有良好出音效果,在一些全面屏手机上还会在中框顶部增加开孔作为出音孔。但是当听筒的声音能量由开设在手机上的长缝或中框顶部开孔等形态的出音孔出来时,在安静环境下会有漏音现象。而有些手机为了避免安静环境下漏音,会采用屏幕发声来替代听筒,但是屏幕发声的音质较差很难满足通话要求。
发明内容
本申请实施例提供一种音频处理方法及设备,解决了手机听筒在安静环境下播放声音时会漏音,而通过屏幕发声时音质较差的问题。
为了达到上述目的,本申请实施例采用如下技术方案:
第一方面,本申请实施例提供一种音频处理方法,该方法可应用于电子设备,该电子设备可包括听筒和屏幕发声装置,屏幕发声装置用于驱动屏幕进行屏幕发声;该方法包括:检测到第一触发条件;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
采用上述技术方案,电子设备可以根据不同的触发条件对听筒和屏幕发声的频段分别进行调整,再通过听筒和屏幕同时播放声音信号,从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。
在一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处的声音环境的类别;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
如此,电子设备可以根据确定出的不同的声音环境的类别,对听筒和屏幕输出的频段分别进行调整,以控制听筒和屏幕分别播放声音信号中对应频段内的声音。从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中的对应频段,包括:当电子设备当前所处的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
如此,当电子设备处于安静环境时,控制听筒播放相对低频的声音部分,而通过屏幕发声播放相对高频的声音部分。可以使响度较小正对人耳的屏幕发声播放人耳敏感的高频声音避免漏音,同时通过听筒播放人耳不敏感的低频声音再避免被其他用户听清的情况下,填补屏幕发声的低频不足,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中的对应频段,包括:当电子设备当前所处的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
如此,当电子设备处于一般环境时,控制听筒播放全频段声音而屏幕发声播放听筒频响凹坑频段的声音,能够利用屏幕发声填补听筒发声的频响凹坑,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中的对应频段,包括:当电子设备当前所处的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
如此,当电子设备处于嘈杂环境时,控制听筒播放全频段声音而屏幕发声播放人耳听音敏感频段的声音,能够利用屏幕发声提高人耳听音敏感频段的声音的整体音量,从而提高电子设备播放声音时的清晰度。
在另一种可能的实现方式中,方法还包括:确定电子设备当前所处的声音环境的类别。
在另一种可能的实现方式中,确定电子设备当前所处的声音环境的类别,包括:检测电子设备当前所处环境的环境音的音量;根据环境音的音量大小确定当前所处的声音环境的类别。
如此,通过检测环境音的音量,根据环境音音量来确定声音环境的类别,相对简便便于实施。
在另一种可能的实现方式中,根据环境音的音量大小确定当前所处的声音环境的类别,包括:当环境音的音量大于第一阈值时,确定当前所处的声音环境的类别为嘈杂环境;当环境音的音量大于第二阈值,且小于第一阈值时,确定当前所处的声音环境的类别为一般环境;当环境音的音量小于第二阈值时,确定当前所处的声音环境的类别为安静环境。
其中,上述第一阈值和第二阈值可以根据实际需要进行设置,即划分不同声音环境类别的环境音音量大小范围可以根据实际需要进行设置。
在另一种可能的实现方式中,第一触发条件包括:用户选择声音环境的类别的操作;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
如此,电子设备可以根据用户选择的不同的声音环境的类别,对听筒和屏幕输出的频段分别进行调整,以控制听筒和屏幕分别播放声音信号中对应频段内的声音。从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
如此,当用户选择安静环境时,电子设备控制听筒播放相对低频的声音部分,而通过屏幕发声播放相对高频的声音部分。可以使响度较小正对人耳的屏幕发声播放人耳敏感的高频声音避免漏音,同时通过听筒播放人耳不敏感的低频声音再避免被其他用户听清的情况下,填补屏幕发声的低频不足,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
如此,当用户选择一般环境时,电子设备控制听筒播放全频段声音而屏幕发声播放听筒频响凹坑频段的声音,能够利用屏幕发声填补听筒发声的频响凹坑,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
如此,当用户选择嘈杂环境时,电子设备控制听筒播放全频段声音而屏幕发声播放人耳听音敏感频段的声音,能够利用屏幕发声提高人耳听音敏感频段的声音的整体音量,从而提高电子设备播放声音时的清晰度。
在另一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处环境的环境音的音量;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
如此,电子设备可以根据确定出的不同的环境音的音量,对听筒和屏幕输出的频段分别进行调整,以控制听筒和屏幕分别播放声音信号中对应频段内的声音。从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。
在另一种可能的实现方式中,根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当环境音的音量大于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
如此,当环境音的音量大于第一阈值时,控制听筒播放全频段声音而屏幕发声播放人耳听音敏感频段的声音,能够利用屏幕发声提高人耳听音敏感频段的声音的整体音量,从而提高电子设备播放声音时的清晰度。即在环境音的音量较高时,能够提升播放的声音的整体音量,提高清晰度。
在另一种可能的实现方式中,根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当环境音的音量大于第二阈值,且小于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
如此,当环境音的音量在第一阈值和第二阈值之间时,控制听筒播放全频段声音而屏幕发声播放听筒频响凹坑频段的声音,能够利用屏幕发声填补听筒发声的频响凹坑,从而提高电子设备播放声音的整体音质。即在环境音的音量处于正常大小时,能够提升播放的声音的音质。
在另一种可能的实现方式中,根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当环境音的音量小于第二阈值时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
如此,当环境音的音量小于第二阈值时,控制听筒播放相对低频的声音部分,而通过屏幕发声播放相对高频的声音部分。可以使响度较小正对人耳的屏幕发声播放人耳敏感的高频声音避免漏音,同时通过听筒播放人耳不敏感的低频声音再避免被其他用户听清的情况下,填补屏幕发声的低频不足,从而提高电子设备播放声音的整体音质。即在环境音的音量较小时,能够避免漏音且具有较好音质。
在另一种可能的实现方式中,第一触发条件包括:用户选择听音模式的操作;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:根据用户选择的听音模式的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
如此,电子设备可以根据用户选择的不同的听音模式,对听筒和屏幕输出的频段分别进行调整,以控制听筒和屏幕分别播放声音信号中对应频段内的声音。从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。
在另一种可能的实现方式中,听音模式包括:隐私模式、一般模式、大音量模式。
在另一种可能的实现方式中,根据用户选择的听音模式,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的听音模式为隐私模式时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
如此,当用户选择隐私模式时,电子设备控制听筒播放相对低频的声音部分,而通过屏幕发声播放相对高频的声音部分。可以使响度较小正对人耳的屏幕发声播放人耳敏感的高频声音避免漏音保护隐私,同时通过听筒播放人耳不敏感的低频声音再避免被其他用户听清的情况下,填补屏幕发声的低频不足,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据用户选择的听音模式,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的听音模式为一般模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
如此,当用户选择一般模式时,电子设备控制听筒播放全频段声音而屏幕发声播放听筒频响凹坑频段的声音,能够利用屏幕发声填补听筒发声的频响凹坑,从而提高电子设备播放声音的整体音质。
在另一种可能的实现方式中,根据用户选择的听音模式,控制听筒和屏幕分别播放声音信号中对应频段内的声音,包括:当用户选择的听音模式为大音量模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
如此,当用户选择大音量模式时,电子设备控制听筒播放全频段声音而屏幕发声播放人耳听音敏感频段的声音,能够利用屏幕发声提高人耳听音敏感频段的声音的整体音量,从而提高电子设备播放声音时的清晰度。
在另一种可能的实现方式中,第一频段的频率小于1kHz,第二频段的频率大于1kHz。
在另一种可能的实现方式中,第三频段为1kHz-2kHz。
在另一种可能的实现方式中,第四频段为1kHz-2kHZ,和/或,3kHZ-4kHz。
在另一种可能的实现方式中,在检测到第一触发条件之前,方法还包括:检测到电子设备处于贴耳听音状态,或,检测到用户选择听筒模式。
即当电子设备处于贴耳听音状态,或用户选择了听筒模式时,电子设备执行该方法。其中,贴耳听音状态是指用户耳朵靠近听筒和屏幕进行听音的状态。
在另一种可能的实现方式中,方法还包括:检测到人耳远离电子设备时,增加听筒和屏幕播放声音的音量,并降低听筒发声输出的第一频段的上限。
如此,当人耳远离电子设备时,可通过增加音量的方式保证用户正常听音。同时,通过降低听筒发声输出的频段的上限,能够使听筒仅播放频率更低的声音,从而避免听筒因提高音量而出现漏音被其他用户听清声音。
在另一种可能的实现方式中,声音信号为电子设备进行语音通信时接收到的声音数据,或,电子设备中保存的音频数据。
在另一种可能的实现方式中,第一阈值为70分贝,第二阈值为20分贝。
第二方面,本申请实施例提供一种音频处理装置,该装置可以应用于包括听筒和屏幕发声装置的电子设备,用于实现上述第一方面中的方法。该装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块,例如,处理模块和检测模块等。
其中,检测模块,可以用于检测第一触发条件;处理模块,可以用于检测到第一触发条件时根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处的声音环境的类别;处理模块,具体用于根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,处理模块,具体用于当电子设备当前所处的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块,具体用于当电子设备当前所处的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块,具体用于当电子设备当前所处的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,处理模块,还用于确定电子设备当前所处的声音环境的类别。
在另一种可能的实现方式中,处理模块,具体用于检测电子设备当前所处环境的环境音的音量;根据环境音的音量大小确定当前所处的声音环境的类别。
在另一种可能的实现方式中,处理模块,具体用于当环境音的音量大于第一阈值时,确定当前所处的声音环境的类别为嘈杂环境;当环境音的音量大于第二阈值,且小于第一阈值时,确定当前所处的声音环境的类别为一般环境;当环境音的音量小于第二阈值时,确定当前所处的声音环境的类别为安静环境。
其中,上述第一阈值和第二阈值可以根据实际需要进行设置,即划分不同声音环境类别的环境音音量大小范围可以根据实际需要进行设置。
在另一种可能的实现方式中,第一触发条件包括:用户选择声音环境的类别的操作;处理模块,具体用于根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处环境的环境音的音量;处理模块,具体用于根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,处理模块,具体用于当环境音的音量大于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,处理模块,具体用于当环境音的音量大于第二阈值,且小于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块,具体用于当环境音的音量小于第二阈值时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,第一触发条件包括:用户选择听音模式的操作;处理模块,具体用于根据用户选择的听音模式的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,听音模式包括:隐私模式、一般模式、大音量模式。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的听音模式为隐私模式时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的听音模式为一般模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块,具体用于当用户选择的听音模式为大音量模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,第一频段的频率小于1kHz,第二频段的频率大于1kHz。
在另一种可能的实现方式中,第三频段为1kHz-2kHz。
在另一种可能的实现方式中,第四频段为1kHz-2kHZ,和/或,3kHZ-4kHz。
在另一种可能的实现方式中,检测模块,还用于检测电子设备处于贴耳听音状态,或,检测用户选择听筒模式。
即当电子设备处于贴耳听音状态,或用户选择了听筒模式时,电子设备执行该方法。其中,贴耳听音状态是指用户耳朵靠近听筒和屏幕进行听音的状态。
在另一种可能的实现方式中,处理模块,还用于检测到人耳远离电子设备时,增加听筒和屏幕播放声音的音量,并降低听筒发声输出的第一频段的上限。
在另一种可能的实现方式中,声音信号为电子设备进行语音通信时接收到的声音数据,或,电子设备中保存的音频数据。
在另一种可能的实现方式中,第一阈值为70分贝,第二阈值为20分贝。
第三方面,本申请实施例提供一种电子设备,包括:处理器,用于存储该处理器可执行指令的存储器。该处理器被配置为执行上述指令时,使得该电子设备实现如第一方面或第一方面的可能的实现方式中任一项所述的音频处理方法。
第四方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序指令。当计算机程序指令被电子设备执行时,使得电子设备实现如第一方面或第一方面的可能的实现方式中任一项所述的音频处理方法。
第五方面,本申请实施例提供一种计算机程序产品,包括计算机可读代码,当所述计算机可读代码在电子设备中运行时,使得电子设备实现如第一方面或第一方面的可能的实现方式中任一项所述的音频处理方法。
应当理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
图1为本申请实施例提供的一种电子设备的结构示意图;
图2为本申请实施例提供的一种用户通过电子设备进行语音通信的场景示意图;
图3为本申请实施例提供的另一种电子设备的结构示意图;
图4为本申请实施例提供的一种音频处理方法的流程示意图;
图5为本申请实施例提供的一种音频处理方法应用时的界面示意图;
图6为本申请实施例提供的一种音频处理方法应用时的界面示意图;
图7为本申请实施例提供的一种频响曲线示意图;
图8为本申请实施例提供的另一种音频处理方法应用时的界面示意图;
图9为本申请实施例提供的另一种音频处理方法应用时的界面示意图;
图10为本申请实施例提供的一种音频处理装置的结构示意图。
具体实施方式
目前,大部分手机是采用设置在手机顶部的听筒实现手机的语音通信发声的。通常,手机需要在听筒的位置对应设置出音孔以释放听筒发声时的能量,出音孔一般开设在手机的前面板上。但是,随着手机的不断发展,为了向用户提供更好的屏幕观看体验,手机屏幕的屏占比越来越高。设置在前面板上的出音孔由于占用了手机的前面板部分区域,会增加手机边框的宽度,所以会影响手机进一步提高屏幕的屏占比。
因此,随着大屏以及全面屏手机的发展,为了减小用于语音通信中通话发声的听筒(也称为受话器)的出音孔在手机的前面板上占用的面积,以进一步提高屏幕的屏占比,一些全面屏手机的听筒出音孔设计为长缝形态,位于手机中框和前面板的连接处,同时为了确保外放出声面积够大,具有良好出音效果,在一些全面屏手机上还会增加中框顶部开孔作为出音孔。但是,此种方式设置的出音孔,在用户正常使用手机进行语音通信时,用户的耳廓无法完全覆盖包裹出音孔,所以当扬声器的声音能量由开设在手机中框顶部的出音孔出来时,会有漏音现象。
为解决上述问题,本申请实施例提供一种音频处理方法。该方法可以应用于具有语音通信功能的电子设备。其中,上述电子设备可以包括屏幕发声装置(即能够通过屏幕振动发声的装置),听筒(即上述的用于语音通信中通话发声的扬声器,也称为受话器)以及对应该听筒开设的出音孔。例如,图1示出了本申请实施例提供的一种电子设备的结构示意图。如图1所示,该电子设备可以包括用于设置屏幕的前面板(通常包括屏幕和边框)、用于支撑内部电路的后面板以及中框,通过前面板、后面板以及中框能够围合成壳体结构。如图1中的(a)所示,在该壳体结构内位于顶部的位置(即电子设备顶部位置)设置有听筒101(即用于语音通信中通话发声的扬声器,也称为受话器)。对应于该听筒101,电子设备设置有两处出音孔(如,出音孔102和出音孔103)。结合图1中的(b)所示,其中出音孔102位于该电子设备前面板和中框的连接处(即侧缝处)。出音孔103则位于该电子设备的中框上距离上述听筒较近的位置(即电子设备的中框顶部位置)。如图1中的(a)所示,在上述前面板、后面板以及中框围合成的壳体结构内,还设置有屏幕发声装置104(例如,与屏幕连接的振动源)。
示例地,该音频处理方法可以应用于用户通过上述电子设备进行贴耳听音(如,用户通过听筒进行语音通信,用户通过听筒收听即时通讯应用中的语音消息等)的场景中。例如,以电子设备为手机为例,图2示出了本申请实施例提供的一种用户通过电子设备进行语音通信的场景示意图。如图2所示,用户手持手机通过听筒进行语音通信的过程中,手机听筒的出音孔201靠近用户的耳朵(或者说耳廓)。手机听筒用于播放语音通信过程中对侧用户的声音信号(即手机听筒为上述用于语音通信中通话发声的扬声器)。如此,由于手机听筒的出音孔201(如位于手机侧缝处的出音孔和中框顶部的出音孔)无法被用户的耳朵完全包裹覆盖,所以由出音孔201出来的声音不光能够被该用户听到,在安静环境下还能够被其他用户听到。而有些手机为了避免安静环境下漏音,会采用屏幕发声来替代听筒,但是屏幕发声的音质较差很难满足通话要求。
基于此,该音频处理方法可以包括:检测到第一触发条件;根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音。其中,第一触发条件可以是电子设备确定出当前所处的声音环境的类别、电子设备确定出当前所处环境的环境音的音量、用户选择听音模式的操作、用户选择声音环境的类别的操作等。示例地,以第一触发条件为电子设备确定出当前所处的声音环境的类别为例,在用户通过上述电子设备进行贴耳听音时,电子设备可以同时通过听筒和屏幕进行发声。并且,可以根据当前所处的听音环境(或称为声音环境,如包括嘈杂环境、安静环境、一般环境等类别)的类别对听筒发声的频段和屏幕发声的频段分别进行调整,即根据当前所处的听音环境的类别,控制听筒和屏幕发声分别播放声音信号中对应频段内的声音。
如此,电子设备可以根据不同的听音环境对听筒和屏幕发声的频段分别进行调整,再通过听筒和屏幕同时播放声音信号,从而使听筒和屏幕发声可以互补,以使电子设备播放声音信号时既可以避免安静环境下漏音还可以具有良好音质。例如,可以在通过屏幕发声来播放声音信号的中高频段内的声音时,使听筒播放声音信号的中低频段内的声音。由于屏幕本身刚性大,屏幕发声响度相对较小且频率较高,并且大部分能量都正对人耳发声,因此利用屏幕发声来输出中高频的声音信号能够减少人耳听音敏感的中高频声音信号向附近散播,从而不被附近其他用户听到,减少漏音。而屏幕发声中可能还存在少量低频声音,该低频声音则主要依靠骨传导实现人耳听音,因此,该部分低频声音也不会被附近其他用户听到,避免漏音。而利用听筒发声来输出中低频声音信号,可以弥补屏幕发声输出中高频声音信号时的低频缺失,从而使电子设备整体输出的声音信号更加饱满,具有更好的声音质量。并且,由于人耳对中低频的声音信号感知不太敏感,因此通过听筒发声来输出中低频声音信号,该中低频声音信号由设置在电子设备中框顶部的出音孔发出并散播到附近区域后,即使该中低频声音信号被附近其他用户听到,其他用户对该中低频声音信号也感知不强难以听清。因此,在用户通过上述电子设备进行贴耳听音时,电子设备同时通过听筒和屏幕进行发声,并利用屏幕发声来输出中高频的声音信号,利用听筒发声来输出中低频的声音信号,能够较好的避免听筒出音孔设置在中框顶部时出现漏音的情况发生。从而能够良好的保护用户的隐私,使电子设备在用户进行贴耳听音时具有更好的私密性。
以下,将结合附图对本申请实施例提供的音频处理方法进行说明。
示例性的,本申请实施例中的电子设备可以是手机、平板电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、可穿戴式设备(如:智能手表、智能手环),等具备语音通信功能的设备,本申请实施例对该电子设备的具体形态不作特殊限制。
示例地,以电子设备为手机为例,图3示出了本申请实施例提供的另一种电子设备的结构示意图。也即,示例性的,图3所示的电子设备可以是手机。
如图3所示,手机可以包括:处理器310,外部存储器接口320,内部存储器321,通用串行总线(universal serial bus,USB)接口330,充电管理模块340,电源管理模块341,电池342,天线1,天线2,移动通信模块350,无线通信模块360,音频模块370,扬声器370A,受话器(即听筒)370B,麦克风370C,耳机接口370D,传感器模块380,按键390,马达391,指示器392,摄像头393,显示屏394,以及用户标识模块(subscriber identification module,SIM)卡接口395,屏幕发声装置396等。
其中,上述传感器模块可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器和骨传导传感器等传感器。在本申请实施例中,电子设备可以通过接近光传感器(即光线传感器)、距离传感器等传感器来检测用户耳朵是否贴靠在听筒附近。例如,电子设备可以通过距离传感器检测手机前面板(或者屏幕)前方是否有遮挡,以及遮挡物与屏幕之间的距离,确定当前用户耳朵是否贴靠在听筒附近。
可以理解的是,本实施例示意的结构并不构成对手机的具体限定。在另一些实施例中,手机可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器310可以包括一个或多个处理单元,例如:处理器310可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以是手机的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器310中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器310中的存储器为高速缓冲存储器。该存储器可以保存处理器310刚用过或循环使用的指令或数据。如果处理器310需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器310的等待时间,因而提高了系统的效率。
在一些实施例中,处理器310可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对手机的结构限定。在另一些实施例中,手机也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
在本申请实施例中,电子设备可以通过处理器310来确定当前所处的听音环境的类别,然后根据该类别对听筒发声的频段和屏幕发声的频段分别进行调整,以控制听筒和屏幕发声分别播放声音信号中对应频段内的声音,从而避免安静环境下人耳听音时电子设备出现漏音。
充电管理模块340用于从充电器(如无线充电器或有线充电器)接收充电输入,为电池342充电。电源管理模块341用于连接电池342,充电管理模块340与处理器310。电源管理模块341接收电池342和/或充电管理模块340的输入,为电子设备的各个器件供电。
手机的无线通信功能可以通过天线1,天线2,移动通信模块350,无线通信模块360,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。手机中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
在一些实施例中,手机的天线1和移动通信模块350耦合,天线2和无线通信模块360耦合,使得手机可以通过无线通信技术与网络以及其他设备通信。上述移动通信模块350可以提供应用在手机上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块350可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块350可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。
移动通信模块350还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块350的至少部分功能模块可以被设置于处理器310中。在一些实施例中,移动通信模块350的至少部分功能模块可以与处理器310的至少部分模块被设置在同一个器件中。
无线通信模块360可以提供应用在手机上的包括无线局域网(wireless localarea networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequencymodulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。
无线通信模块360可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块360经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器310。无线通信模块360还可以从处理器310接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
当然,上述无线通信模块360也可以支持手机进行语音通信。例如,手机可以通过无线通信模块360接入Wi-Fi网络,然后使用任一种可提供语音通信服务的应用程序与其他设备进行交互,为用户提供语音通信服务。例如,上述可提供语音通信服务的应用程序可以是即时通讯应用。
手机可以通过GPU,显示屏394,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏394和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器310可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。显示屏394用于显示图像,视频等。
手机可以通过ISP,摄像头393,视频编解码器,GPU,显示屏394以及应用处理器等实现拍摄功能。ISP用于处理摄像头393反馈的数据。在一些实施例中,ISP可以设置在摄像头393中。摄像头393用于捕获静态图像或视频。在一些实施例中,手机可以包括1个或N个摄像头393,N为大于1的正整数。
外部存储器接口320可以用于连接外部存储卡,例如Micro SD卡,实现扩展手机的存储能力。内部存储器321可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器310通过运行存储在内部存储器321的指令,从而执行手机的各种功能应用以及数据处理。例如,在本申请实施例中,处理器310可以通过执行存储在内部存储器321中的指令,内部存储器321可以包括存储程序区和存储数据区。
手机可以通过音频模块370,扬声器370A,受话器(即听筒)370B,麦克风370C,耳机接口370D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块370用于将数字音频信号转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块370还可以用于对音频信号编码和解码。在一些实施例中,音频模块370可以设置于处理器310中,或将音频模块370的部分功能模块设置于处理器310中。扬声器370A,也称“喇叭”,用于将音频电信号转换为声音信号。受话器370B,也称“听筒”,用于将音频电信号转换成声音信号。麦克风370C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。耳机接口370D用于连接有线耳机。耳机接口370D可以是USB接口330,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association ofthe USA,CTIA)标准接口。
其中,该受话器370B(即“听筒”)可以是图1所示的听筒101。
示例性的,本申请实施例中,音频模块370可以将移动通信模块350和无线通信模块360接收到的音频电信号转换为声音信号。由音频模块370的受话器370B(即“听筒”)播放该声音信号,同时由屏幕发声装置396来驱动屏幕(即显示屏)进行屏幕发声以播放该声音信号。
示例地,在本申请实施例中,电子设备可以通过麦克风370C来检测当前所处环境的环境音的声音强度大小。从而便于处理器310根据检测到的环境音的声音强度大小来确定当前所处的听音环境的类别。
按键390包括开机键,音量键等。马达391可以产生振动提示。指示器392可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口395用于连接SIM卡。手机可以支持1个或N个SIM卡接口,N为大于1的正整数。
当然,可以理解的,上述图3所示仅仅为电子设备的设备形态为手机时的示例性说明。若电子设备是平板电脑,手持计算机,PDA,可穿戴式设备(如:智能手表、智能手环)等其他设备形态时,电子设备的结构中可以包括比图3中所示更少的结构,也可以包括比图3中所示更多的结构,在此不作限制。
以下实施例中的方法均可以在具有上述硬件结构的电子设备中实现。下面将结合附图对本申请实施例进行举例说明。
以电子设备为如图1所示的手机,第一触发条件为电子设备确定出当前所处的声音环境的类别为例,图4示出了本申请实施例提供的一种音频处理方法的流程示意图。如图4所示,该音频处理方法可以包括以下S401-S402。
在用户通过手机进行贴耳听音,或用户选择听筒模式(即手机通过听筒播放声音的模式)时,手机可以对当前的听音环境进行判断。例如,执行以下S401。其中,用户通过手机进行贴耳听音(即手机所处的贴耳听音状态),可以是用户耳朵贴靠在听筒附近,通过手机的听筒收听手机内存储的音频数据(如录音数据、歌曲数据等)。还可以是用户耳朵贴靠在听筒附近进行语音通信(语音通信可以是通过手机中的电话功能与其他电子设备进行的语音通信,也可以是通过手机中安装的即时通讯应用与其他电子设备进行的语音通信)时,通过手机的听筒收听手机接收到的对侧用户手机传输来的声音数据。还可以是用户耳朵贴靠在听筒附近,通过手机的听筒收听即时通讯应用中的语音消息等。如,手机通过即时通讯应用接收来自其他手机的语音消息。手机可以显示即时通讯应用的聊天界面,该聊天界面包括来自其他手机的语音消息。响应于用户对该语音消息的点击操作,手机可以通过听筒播放来自其他手机的语音消息(即声音信号)。
示例地,手机可以通过光线传感器、距离传感器等传感器来检测用户耳朵是否贴靠在听筒附近。例如,手机可以通过距离传感器检测手机前面板(或者屏幕)前是否有遮挡,当前面板前近距离处有遮挡,则可确定当前用户耳朵贴靠在听筒附近。又例如,当手机光线传感器检测到光线强度瞬间降低且变化较大时,则可确定当前用户耳朵贴靠在听筒附近。当然,在本申请的其他实施例中,手机还可以通过其他方式或算法检测用户耳朵是否贴靠在听筒附近,也可以参考常规技术中的相关介绍,此处不做限制。
S401、手机确定当前所处的听音环境(即听音环境的类别)。
示例地,听音环境的类别可以包括嘈杂环境,安静环境以及一般环境。
其中,在一些可能的实施方式中,嘈杂环境、安静环境以及一般环境可以通过环境音的音量大小来区分确定。例如,手机可以对环境音的音量进行检测,当环境音的音量在第一阈值(如70分贝)以上时可确定当前所处的听音环境为嘈杂环境;当环境音的音量在第二阈值(如20分贝)和上述第一阈值(如70分贝)之间时可确定当前所处的听音环境为一般环境;当环境音的音量在上述第二阈值(如20分贝)以下时可确定当前所处的听音环境为安静环境。其中,当环境音的音量为第一阈值时可确定所处的听音环境为嘈杂环境,也可以确定所处的听音环境为一般环境;当环境音的音量为第二阈值时可确定所处的听音环境为一般环境,也可以确定所处的听音环境为安静环境,可根据实际情况设定。且第一阈值大于第二阈值。
当然,在另一些可能的实施方式中,手机还可以通过其他方式或算法来确定当前所处的听音环境,也可以参考常规技术中的相关介绍,此处不做限制。
在一些其他可能的实施方式中,手机还可以根据用户输入确定当前所处的听音环境。即用户可以手动选择当前所处的听音环境。以便于手机后续根据用户选择的听音环境执行S402。
示例地,当用户使用手机进行贴耳听音时,手机可以显示供用户选择当前听音环境的界面,以便用户通过该界面选择当前的听音环境。可选地,手机还可以默认确定当前听音环境为一般环境。例如,以用户使用手机进行语音通信(如,拨打或接听电话)的场景为例,如图5中的(a)所示,手机的通话界面中可以显示有指示当前听音环境的控件,例如当前听音环境为一般环境时,手机的通话界面显示有控件“一般环境”。用户可以通过点击该用于指示当前听音环境的控件,来对当前听音环境进行选择。例如,当用户点击如图5中的(a)所示的控件“一般环境”时,如图5中的(b)所示,手机可以显示听音环境列表,该列表中可以包括“安静环境”、“嘈杂环境”等供用户选择。用户可以点击听音环境列表中相应的听音环境来选择当前的听音环境。例如,当用户点击如图5中的(b)所示的“安静环境”时,手机便能够切换当前的听音环境的类别为安静环境,从而执行后续根据当前听音环境的类别同时通过听筒和屏幕发声播放声音信号的步骤。即手机能够根据用户输入的指示来确定当前听音环境的类别为安静环境,从而后续执行安静环境对应的听筒和屏幕发声的声音播放策略。
示例地,当用户使用手机进行贴耳听音时,手机可以显示可供用户选择的听音模式,其中,不同的听音模式可以对应上述不同的听音环境类别。以便用户可以手动选择听音模式,以使手机后续执行相应的听筒和屏幕发声的声音播放策略。可选地,听音模式可以包括隐私模式,一般模式以及大音量模式。其中,隐私模式可以与安静环境对应,一般模式可以与一般环境对应,大音量模式可以与嘈杂环境对应。例如,如图6中的(a)所示,手机的通话界面中可以显示有指示当前听音模式的控件,例如当前听音模式为一般模式时,手机的通话界面显示有控件“一般模式”。用户可以通过点击该用于指示当前听音模式的控件,来对当前听音模式进行选择。例如,当用户点击如图6中的(a)所示的控件“一般模式”时,如图6中的(b)所示,手机可以显示听音模式列表,该列表中可以包括“隐私模式”、“大音量模式”等可供用户选择的其他听音模式。用户可以点击听音模式列表中相应的听音模式来选择当前的听音模式。例如,当用户点击如图6中的(b)所示的“隐私模式”时,手机便能够切换当前的听音模式为隐私模式。后续,手机便可以根据用户选择的听音模式对应的听音环境的类别采用相应的听筒和屏幕发声的声音播放策略来播放声音。
需要说明的是,上述示例中,可以在手机内预设不同听音模式分别与听音环境的类别间的对应关系,以便于手机可以根据用户输入的选择听音模式的操作,对应用户选择的听音模式确定出相应的听音环境的类别,从而根据确定出的听音环境的类别通过听筒和屏幕发声同时播放声音信号。或者,上述示例中,可以不在手机内预设不同听音模式分别与听音环境的类别间的对应关系,而是直接将手机根据听音环境的类别对应采用的听筒和屏幕发声的声音播放策略与相应的听音模式对应。以便手机接收到用户输入的选择听音模式的操作后,可以直接采用相对应的听筒和屏幕发声的声音播放策略来播放声音。
S402、手机根据当前所处的听音环境(即听音环境的类别),通过听筒和屏幕发声同时播放声音信号。
其中,根据上述示例的用户贴耳听音的各种场景,听筒和屏幕发声播放的声音信号可以是手机中保存的任一个音频数据,例如,声音信号是手机中保存的录音数据或歌曲数据等。还可以是手机进行语音通信时手机接收到的对侧用户手机传输来的声音数据。还可以是手机中安装的即时通讯应用中的语音消息等。
作为一种示例,手机根据当前所处的听音环境后,可以根据当前的听音环境对听筒发声的频率(或频段)以及屏幕发声的频率(或频段)进行设定,然后使听筒和屏幕发声分别采用不同频率策略来同时播放声音信号。即手机可以根据当前所处的听音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。也即,手机可根据听音环境的类别,采用听音环境的类别对应的听筒和屏幕发声的声音播放策略来播放声音。
示例地,当手机确定当前所处的听音环境为安静环境时,则手机可以通过听筒和屏幕发声进行分频以同时播放声音信号。
具体地,在听音环境为安静环境时,手机可以通过屏幕发声来播放声音信号中的中高频(在本申请中也可称为第二频段)部分,而通过听筒来播放声音信号中的中低频(在本申请中也可称为第一频段)部分。其中,中高频部分可以是声音信号中频率大于1kHz的部分,中低频部分可以是声音信号中频率小于1kHz的部分,其中声音信号中频率等于1kHz的部分可以作为中高频部分,也可以作为中低频部分,可根据实际情况设定。由于屏幕发声响度相对较小,因此利用屏幕发声来输出中高频的声音信号能够减少人耳听音敏感的中高频声音信号向附近散播而被附近其他用户听到,从而减少漏音。并且,通过屏幕发声来输出中高频的声音信号,还可以减小屏幕发声装置的低频高阻推动,避免不必要的功耗损失。而如图7所示,根据屏幕发声的频响曲线可以看出,屏幕发声的中高频频响较好,中低频频响较差,因此屏幕发声时,声音的中低频有所缺失不饱满。而根据听筒发声的频响曲线可以看出,听筒发声的中低频频响较好,中高频频响较差。因此,通过屏幕发声来输出中高频声音信号,而利用听筒发声来输出中低频声音信号,可以使听筒发声弥补屏幕发声输出中高频声音信号时的低频缺失,从而使电子设备整体输出的声音信号更加饱满,具有更好的声音质量(例如,如图7所示,通过屏幕发声输出中高频声音信号,同时通过听筒输出中低频声音信号时,频响曲线相对平缓凹坑较少)。并且,由于人耳对中低频的声音信号感知不太敏感,因此通过听筒发声来输出中低频声音信号,该中低频声音信号由设置在电子设备中框顶部的出音孔发出并散播到附近区域后,即使该中低频声音信号被附近其他用户听到,其他用户对该中低频声音信号也感知不强难以听清。
可选地,在本申请实施例中,安静环境下,手机还可以根据人耳与手机(或听筒)间的距离来调整听筒发声和屏幕发声的音量(或称为响度)。同时,还可以对听筒发声输出的频段以及屏幕发声输出的频段进行调整。例如,当人耳远离手机时,手机可以增加听筒发声和屏幕发声的音量。同时,手机还可以减少听筒发声输出的频段中相对高频的部分的发声,即降低屏幕发声输出的频段和听筒发声输出的频段间的分界频率,使听筒发声输出更低的频段。由于屏幕发声的能量大部分正对人耳,而听筒发声的部分能量会从手机中框顶部的出音孔释放,因此提高音量后听筒发声相比于屏幕发声更易漏音,所以进一步调低听筒发声输出的频段,能够避免提高音量后其他用户听清听筒发声输出的声音。
示例地,当手机确定当前所处的听音环境为一般环境时,则手机可以采用听筒为主屏幕发声为辅的方式同时播放声音信号。
具体地,在听音环境为一般环境时,手机可以通过听筒进行主要发声,即通过听筒播放声音信号的全部频段(即全频段)。而由于听筒的设置位置以及声学结构设计的不同,听筒的播放声音的频响会在部分频段或频点上会具有凹坑。因此,以屏幕发声为辅,使屏幕发声以播放声音信号中对应于听筒的频响凹坑的频段或频点部分的声音(即屏幕发声播放声音信号中与听筒的频响凹坑的频段对应的频段(或称为第三频段)内的声音),能够使屏幕发声对听筒的频响凹坑进行填补优化,从而能够提高手机整体播放声音信号的声音质量。例如,根据声学结构设计,听筒的频响凹坑的频段为1kHz-2kHz之间,则可以使屏幕发声以播放声音信号中与听筒的频响凹坑的频段对应的频率在1kHz-2kHz之间的部分声音信号。
需要说明的是,听筒的频响曲线可以通过出厂调试获得,因此可以根据听筒的频响曲线预先对屏幕发声时对应的发声频段或频点进行预设,当手机确定当前听音环境为一般环境时,手机可以根据该预设频段或频点来控制屏幕发声播放声音信号中相应的频段或频点对应的声音。
在该示例中,屏幕发声播放的声音信号为了能够更好的填补听筒发声的频响凹坑,可以根据屏幕发声的灵敏度对屏幕发声的声音强度进行设置。即,根据屏幕发声的灵敏度不同,设置的屏幕发声的声音强度也可以有所不同。
例如,在本申请实施例中,屏幕发声可以通过屏幕发声装置(例如,如图1所示的屏幕发声装置)实现,根据不同的屏幕发声方案,屏幕发声装置也有所不同。如,屏幕发声装置可以是连接在屏幕背面的振动源(通常为压电陶瓷,也可以是马达振子、激励器或其他振动单元),可以通过电流信号控制压电陶瓷振动以带动屏幕振动,从而实现屏幕发声。又如,屏幕发声装置还可以是通过悬臂梁结构固定在手机中框上的压电陶瓷,可以通过电流信号控制压电陶瓷振动,利用手机中框将振动传递至屏幕带动屏幕振动,从而实现屏幕发声。又如,屏幕发声装置还可以是固定在手机中框上的激励器,可以通过电流信号控制激励器振动,利用手机中框将振动传递至屏幕带动屏幕振动,从而实现屏幕发声。又例如,屏幕发声装置还可以分体式磁悬浮振子。其中一个振子固定在手机中框上,另一个振子固定在屏幕上,可以通过电流信号控制固定在屏幕上的振子相对于固定在手机中框上的振子振动,从而推动屏幕振动实现屏幕发声。受屏幕发声装置设置的类型、位置、手机中框重量、手机内部结构布局等的影响,不同的屏幕发声方案的屏幕发声灵敏度均有所不同,可以为灵敏高的屏幕发声设置相对较小的屏幕发声声音强度和推动功率,而为灵敏度低的屏幕发声设置相对较大的屏幕发声声音强度和推动功率。
示例地,当手机确定当前所处的听音环境为嘈杂环境时,则手机可以采用听筒为主,屏幕发声辅助增强的方式同时播放声音信号。
具体地,在听音环境为嘈杂环境时,手机可以通过听筒进行主要发声,即通过听筒播放声音信号的全部频段,并增强听筒播放声音信号时的声音强度(可以将声音强度增强至大于上述一般环境下听筒播放声音信号时的声音强度,从而抵抗手机所处的嘈杂环境中环境音的干扰)。手机可以通过屏幕发声来播放声音信号中与人耳听音敏感的频段(例如,频段1kHz-2kHZ,和/或,频段3kHZ-4kHz)对应的部分的声音(即通过屏幕发声来播放声音信号中人耳敏感的关键频段的声音,也即屏幕发声播放声音信号中的第四频段内的声音,该第四频段为人耳敏感频段),从而提高手机整体播放的声音中人耳听音敏感的频段部分的声音强度,进一步抵抗嘈杂环境下环境音的干扰,提升嘈杂环境下用户的贴耳听音体验。
可选地,在本申请实施例中,电子设备(如手机)可以自动开启上述方法所实现的功能,也可以设置为用户手动开启上述方法所实现的功能。
例如,可以在设置列表中为用户提供手动开启上述方法所实现的功能的选项。示例地,如图8所示,手机可以显示用于开启上述功能的功能选项“听音优化”,当用户点击该功能选项时,手机便能够开启上述方法所实现的功能,即手机便能够在用户进行贴耳听音时执行上述方法。
可选地,当手机即可以通过如图4所示方法中S401中所述的自动检测并确定当前所处的听音环境,也可以通过如图5所示的用户手动选择当前听音环境的方式确定当前所处的听音环境时,基于如图8所示,当用户通过手机设置的用于开启上述方法所实现的功能的功能选项开启上述功能后,手机还可以供用户选择是否自动检测当前听音环境。例如,当用户点击如图8所示的功能选项“听音优化”之后,如图9所示,手机可以显示功能选项“自动检测听音环境”以及功能选项“手动选择听音环境”。当用户点击“自动检测听音环境”时,手机便能够在执行如图4所示的方法时,自动检测并确定当前所处的听音环境。当用户点击“手动选择听音环境”时,手机便能够在执行如图4所示的方法时,根据用户选择的听音环境确定当前所处的听音环境。可选地,此时手机可以在用户进行语音通信时显示如图5所示的界面。
示例地,在本申请的其他实施例中,基于上述图4所示的方法,当手机通过检测环境音的音量来确定所处的声音环境的类别时,手机还可以不根据检测到的环境音的音量所处的范围先确定相应的声音环境类别,再控制听筒和屏幕发声分别播放声音信号中对应频段内的声音,而是直接根据环境音的音量所处的相应范围(例如,上述图4所示方法中举例的第一阈值和第二阈值)控制听筒和屏幕发声分别播放声音信号中对应频段内的声音。即第一触发条件为电子设备确定出当前所处环境的环境音的音量。具体实施方式,可参考前述图4所示方法中的说明,此处不做赘述。
示例地,在本申请的其他实施例中,基于上述图4所示的方法,当用户通过如图5所示的方式手动选择声音环境的类别时,手机还可以不根据用户选择的声音环境的类别先确定当前所处的声音环境的类别,再控制听筒和屏幕发声分别播放声音信号中对应频段内的声音,而是直接根据用户选择的声音环境的类别控制听筒和屏幕发声分别播放声音信号中对应频段内的声音。即第一触发条件为用户选择声音环境的类别的操作。具体实施方式,可参考前述图4所示方法中的说明,此处不做赘述。
示例地,在本申请的其他实施例中,基于上述图4所示的方法,当用户通过如图6所示的方式手动选择听音模式时,手机还可以不根据用户选择的听音模式先确定当前所处的声音环境的类别,再控制听筒和屏幕发声分别播放声音信号中对应频段内的声音,而是直接根据用户选择的听音模式控制听筒和屏幕发声分别播放声音信号中对应频段内的声音。即第一触发条件为用户选择听音模式的操作。具体实施方式,可参考前述图4所示方法中的说明,此处不做赘述。
采用上述实施例中的方法,能够使电子设备在不同听音环境下能够分别优化声音信号播放效果,提高用户听音体验,防止漏音。例如,在安静环境下由于屏幕发声响度相对较小频率较高,且主要依靠骨传导实现人耳听音,因此利用屏幕发声来输出中高频的声音信号能够减少人耳听音敏感的中高频声音信号向附近散播而被附近其他用户听到,从而减少漏音。而利用听筒发声来输出中低频声音信号,可以弥补屏幕发声输出中高频声音信号时的低频缺失,从而使电子设备整体输出的声音信号更加饱满,具有更好的声音质量。并且,由于人耳对中低频的声音信号感知不太敏感,因此通过听筒发声来输出中低频声音信号,该中低频声音信号由设置在电子设备中框顶部的出音孔发出并散播到附近区域后,即使该中低频声音信号被附近其他用户听到,其他用户对该中低频声音信号也感知不强难以听清。因此,在用户通过上述电子设备进行贴耳听音时,电子设备同时通过听筒和屏幕进行发声,并利用屏幕发声来输出中高频的声音信号,利用听筒发声来输出中低频的声音信号,能够较好的避免听筒出音孔设置在中框顶部时出现漏音的情况发生。从而能够良好的保护用户的隐私,使电子设备在用户进行贴耳听音时具有更好的私密性。
对应于前述实施例中的方法,本申请实施例还提供一种音频处理装置。该装置可以应用于上述的电子设备用于实现前述实施例中的方法。该装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块。例如,图10示出了一种音频处理装置的结构示意图,如图10所示,该装置包括:检测模块1001和处理模块1002等。
其中,检测模块1001,可以用于检测第一触发条件;处理模块1002,可以用于检测到第一触发条件时根据第一触发条件对应的策略,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处的声音环境的类别;处理模块1002,具体用于根据电子设备当前所处的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,处理模块1002,具体用于当电子设备当前所处的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块1002,具体用于当电子设备当前所处的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块1002,具体用于当电子设备当前所处的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,处理模块1002,还用于确定电子设备当前所处的声音环境的类别。
在另一种可能的实现方式中,处理模块1002,具体用于检测电子设备当前所处环境的环境音的音量;根据环境音的音量大小确定当前所处的声音环境的类别。
在另一种可能的实现方式中,处理模块1002,具体用于当环境音的音量大于第一阈值时,确定当前所处的声音环境的类别为嘈杂环境;当环境音的音量大于第二阈值,且小于第一阈值时,确定当前所处的声音环境的类别为一般环境;当环境音的音量小于第二阈值时,确定当前所处的声音环境的类别为安静环境。
其中,上述第一阈值和第二阈值可以根据实际需要进行设置,即划分不同声音环境类别的环境音音量大小范围可以根据实际需要进行设置。
在另一种可能的实现方式中,第一触发条件包括:用户选择声音环境的类别的操作;处理模块1002,具体用于根据用户选择的声音环境的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,声音环境的类别包括:安静环境、一般环境、嘈杂环境。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的声音环境的类别为安静环境时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的声音环境的类别为一般环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的声音环境的类别为嘈杂环境时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,第一触发条件包括:电子设备确定出当前所处环境的环境音的音量;处理模块1002,具体用于根据环境音的音量,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,处理模块1002,具体用于当环境音的音量大于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,处理模块1002,具体用于当环境音的音量大于第二阈值,且小于第一阈值时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块1002,具体用于当环境音的音量小于第二阈值时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,第一触发条件包括:用户选择听音模式的操作;处理模块1002,具体用于根据用户选择的听音模式的类别,控制听筒和屏幕分别播放声音信号中对应频段内的声音。
在另一种可能的实现方式中,听音模式包括:隐私模式、一般模式、大音量模式。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的听音模式为隐私模式时,控制听筒播放声音信号中的第一频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第二频段内的声音,第一频段低于第二频段。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的听音模式为一般模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第三频段内的声音,第三频段与听筒的频响凹坑的频段对应。
在另一种可能的实现方式中,处理模块1002,具体用于当用户选择的听音模式为大音量模式时,控制听筒播放声音信号的全频段内的声音,控制屏幕进行屏幕发声播放声音信号中的第四频段内的声音,第四频段为人耳听音敏感频段。
在另一种可能的实现方式中,第一频段的频率小于1kHz,第二频段的频率大于1kHz。
在另一种可能的实现方式中,第三频段为1kHz-2kHz。
在另一种可能的实现方式中,第四频段为1kHz-2kHZ,和/或,3kHZ-4kHz。
在另一种可能的实现方式中,检测模块1001,还用于检测电子设备处于贴耳听音状态,或,检测用户选择听筒模式。
即当电子设备处于贴耳听音状态,或用户选择了听筒模式时,电子设备执行该方法。其中,贴耳听音状态是指用户耳朵靠近听筒和屏幕进行听音的状态。
在另一种可能的实现方式中,处理模块1002,还用于检测到人耳远离电子设备时,增加听筒和屏幕播放声音的音量,并降低听筒发声输出的第一频段的上限。
在另一种可能的实现方式中,声音信号为电子设备进行语音通信时接收到的声音数据,或,电子设备中保存的音频数据。
在另一种可能的实现方式中,第一阈值为70分贝,第二阈值为20分贝。
应理解以上装置中单元或模块(以下均称为单元)的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且装置中的单元可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分单元以软件通过处理元件调用的形式实现,部分单元以硬件的形式实现。
例如,各个单元可以为单独设立的处理元件,也可以集成在装置的某一个芯片中实现,此外,也可以以程序的形式存储于存储器中,由装置的某一个处理元件调用并执行该单元的功能。此外这些单元全部或部分可以集成在一起,也可以独立实现。这里所述的处理元件又可以称为处理器,可以是一种具有信号的处理能力的集成电路。在实现过程中,上述方法的各步骤或以上各个单元可以通过处理器元件中的硬件的集成逻辑电路实现或者以软件通过处理元件调用的形式实现。
在一个例子中,以上装置中的单元可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个ASIC,或,一个或多个DSP,或,一个或者多个FPGA,或这些集成电路形式中至少两种的组合。
再如,当装置中的单元可以通过处理元件调度程序的形式实现时,该处理元件可以是通用处理器,例如CPU或其它可以调用程序的处理器。再如,这些单元可以集成在一起,以片上系统(system-on-a-chip,SOC)的形式实现。
在一种实现中,以上装置实现以上方法中各个对应步骤的单元可以通过处理元件调度程序的形式实现。例如,该装置可以包括处理元件和存储元件,处理元件调用存储元件存储的程序,以执行以上方法实施例所述的方法。存储元件可以为与处理元件处于同一芯片上的存储元件,即片内存储元件。
在另一种实现中,用于执行以上方法的程序可以在与处理元件处于不同芯片上的存储元件,即片外存储元件。此时,处理元件从片外存储元件调用或加载程序于片内存储元件上,以调用并执行以上方法实施例所述的方法。
例如,本申请实施例还可以提供一种装置,如:电子设备,可以包括:处理器,用于存储该处理器可执行指令的存储器。该处理器被配置为执行上述指令时,使得该电子设备实现如前述实施例所述的音频处理方法。该存储器可以位于该电子设备之内,也可以位于该电子设备之外。且该处理器包括一个或多个。
在又一种实现中,该装置实现以上方法中各个步骤的单元可以是被配置成一个或多个处理元件,这些处理元件可以设置于对应上述的电子设备上,这里的处理元件可以为集成电路,例如:一个或多个ASIC,或,一个或多个DSP,或,一个或者多个FPGA,或者这些类集成电路的组合。这些集成电路可以集成在一起,构成芯片。
例如,本申请实施例还提供一种芯片,该芯片可以应用于上述电子设备。芯片包括一个或多个接口电路和一个或多个处理器;接口电路和处理器通过线路互联;处理器通过接口电路从电子设备的存储器接收并执行计算机指令,以实现以上方法实施例中所述的方法。
本申请实施例还提供一种计算机程序产品,包括电子设备,如上述电子设备,运行的计算机指令。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,如:程序。该软件产品存储在一个程序产品,如计算机可读存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
例如,本申请实施例还可以提供一种计算机可读存储介质,其上存储有计算机程序指令。当计算机程序指令被电子设备执行时,使得电子设备实现如前述方法实施例中所述的音频处理方法。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (15)
1.一种音频处理方法,其特征在于,应用于电子设备,所述电子设备包括听筒和屏幕发声装置,所述屏幕发声装置用于驱动屏幕进行屏幕发声;所述方法包括:
检测到第一触发条件;
在所述第一触发条件是所述电子设备确定出所述电子设备所处的声音环境的类别为安静环境,或者,用户选择的声音环境的类别为安静环境,或者,所述电子设备确定出所述电子设备当前所处环境的环境音的音量小于第二阈值,或者,所述用户选择听音模式为隐私模式的情况下,控制所述听筒播放声音信号中的第一频段内的声音,控制所述屏幕进行屏幕发声播放所述声音信号中的第二频段内的声音,所述第一频段低于所述第二频段。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第一触发条件是所述电子设备确定出所述电子设备当前所处的声音环境的类别为所一般环境,或者,所述用户选择的声音环境的类别为一般环境,或者,所述电子设备确定出所述电子设备当前所处环境的环境音的音量大于第二阈值小于第一阈值,或者,所述用户选择听音模式为一般模式的情况下,控制所述听筒播放所述声音信号的全频段内的声音,控制所述屏幕进行屏幕发声播放所述声音信号中的第三频段内的声音,所述第三频段与所述听筒的频响凹坑的频段对应。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第一触发条件是所述电子设备确定出所述电子设备当前所处的声音环境的类别为嘈杂环境,或者,所述用户选择的声音环境的类别为嘈杂环境,或者,所述电子设备确定出所述电子设备当前所处环境的环境音的音量大于第一阈值,或者,所述用户选择听音模式为大音量模式的情况下,控制所述听筒播放所述声音信号的全频段内的声音,控制所述屏幕进行屏幕发声播放所述声音信号中的第四频段内的声音,所述第四频段为人耳听音敏感频段。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:确定所述电子设备当前所处的声音环境的类别。
5.根据权利要求4所述的方法,其特征在于,所述确定所述电子设备当前所处的声音环境的类别,包括:
检测所述电子设备当前所处环境的环境音的音量;
根据所述环境音的音量大小确定当前所处的声音环境的类别。
6.根据权利要求5所述的方法,其特征在于,所述根据所述环境音的音量大小确定当前所处的声音环境的类别,包括:
当所述环境音的音量大于第一阈值时,确定当前所处的声音环境的类别为嘈杂环境;
当所述环境音的音量大于第二阈值,且小于所述第一阈值时,确定当前所处的声音环境的类别为一般环境;
当所述环境音的音量小于所述第二阈值时,确定当前所处的声音环境的类别为安静环境。
7.根据权利要求1所述的方法,其特征在于,所述第一频段的频率小于1kHz,所述第二频段的频率大于1kHz。
8.根据权利要求2所述的方法,其特征在于,所述第三频段为1kHz-2kHz。
9.根据权利要求3所述的方法,其特征在于,所述第四频段为1kHz-2kHZ,和/或,3kHZ-4kHz。
10.根据权利要求1所述的方法,其特征在于,在所述检测到第一触发条件之前,所述方法还包括:
检测到所述电子设备处于贴耳听音状态,或,检测到用户选择听筒模式。
11.根据权利要求1所述的方法,其特征在于,所述方法还包括:
检测到人耳远离所述电子设备时,增加所述听筒和所述屏幕播放声音的音量,并降低所述听筒发声输出的所述第一频段的上限。
12.根据权利要求1所述的方法,其特征在于,所述声音信号为所述电子设备进行语音通信时接收到的声音数据,或,所述电子设备中保存的音频数据。
13.一种电子设备,其特征在于,包括:处理器,用于存储所述处理器可执行指令的存储器,所述处理器被配置为执行所述指令时,使得所述电子设备实现如权利要求1-12中任一项所述的方法。
14.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-12中任一项所述的方法。
15.一种计算机程序产品,其特征在于,包括计算机可读代码,当所述计算机可读代码在电子设备中运行时,使得电子设备实现如权利要求1-12任一项所述的方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110790588.5A CN115623123B (zh) | 2021-07-13 | 2021-07-13 | 一种音频处理方法及设备 |
PCT/CN2022/093616 WO2023284403A1 (zh) | 2021-07-13 | 2022-05-18 | 一种音频处理方法及设备 |
US18/270,326 US20240106927A1 (en) | 2021-07-13 | 2022-05-18 | Audio processing method and device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110790588.5A CN115623123B (zh) | 2021-07-13 | 2021-07-13 | 一种音频处理方法及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115623123A CN115623123A (zh) | 2023-01-17 |
CN115623123B true CN115623123B (zh) | 2024-07-23 |
Family
ID=84854879
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110790588.5A Active CN115623123B (zh) | 2021-07-13 | 2021-07-13 | 一种音频处理方法及设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240106927A1 (zh) |
CN (1) | CN115623123B (zh) |
WO (1) | WO2023284403A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118714219A (zh) * | 2023-01-29 | 2024-09-27 | 荣耀终端有限公司 | 一种通话方法及电子设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111163197A (zh) * | 2020-01-14 | 2020-05-15 | 青岛海信移动通信技术股份有限公司 | 一种移动终端设备及其屏幕发声的方法 |
CN112543250A (zh) * | 2019-09-04 | 2021-03-23 | 中兴通讯股份有限公司 | 音频播放控制方法、智能手机、装置及可读存储介质 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103778909B (zh) * | 2014-01-10 | 2017-03-01 | 瑞声科技(南京)有限公司 | 屏幕发声系统及其控制方法 |
CN104935742B (zh) * | 2015-06-10 | 2017-11-24 | 瑞声科技(南京)有限公司 | 移动通讯终端及改善其在听筒模式下的音质的方法 |
CN105450871A (zh) * | 2015-12-03 | 2016-03-30 | 广东欧珀移动通信有限公司 | 一种移动终端通话模式的切换方法和装置 |
CN105681948A (zh) * | 2016-01-14 | 2016-06-15 | 瑞声光电科技(常州)有限公司 | 改善移动终端听筒模式下的音质的系统及其方法 |
CN108769868B (zh) * | 2018-04-10 | 2020-11-24 | 华南理工大学 | 基于频分超声参量阵的手机屏下听筒实现方法与装置 |
CN108810198B (zh) * | 2018-05-17 | 2020-06-23 | Oppo广东移动通信有限公司 | 发声控制方法、装置、电子装置及计算机可读介质 |
CN108769327A (zh) * | 2018-05-17 | 2018-11-06 | Oppo广东移动通信有限公司 | 显示屏发声的方法、装置、电子装置及存储介质 |
CN110047392B (zh) * | 2019-03-11 | 2021-02-02 | 武汉华星光电技术有限公司 | 一种显示装置 |
CN111984220B (zh) * | 2019-05-23 | 2022-08-12 | 海信视像科技股份有限公司 | 一种屏幕发声设备及方法 |
CN115334185A (zh) * | 2019-06-20 | 2022-11-11 | 华为技术有限公司 | 电子设备、信号处理的方法和装置 |
EP3840405A1 (de) * | 2019-12-16 | 2021-06-23 | M.U. Movie United GmbH | Verfahren und system zur übermittlung und wiedergabe akustischer informationen |
CN112286484A (zh) * | 2020-11-12 | 2021-01-29 | Oppo广东移动通信有限公司 | 屏幕发声控制方法、装置和电子设备 |
-
2021
- 2021-07-13 CN CN202110790588.5A patent/CN115623123B/zh active Active
-
2022
- 2022-05-18 US US18/270,326 patent/US20240106927A1/en active Pending
- 2022-05-18 WO PCT/CN2022/093616 patent/WO2023284403A1/zh active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112543250A (zh) * | 2019-09-04 | 2021-03-23 | 中兴通讯股份有限公司 | 音频播放控制方法、智能手机、装置及可读存储介质 |
CN111163197A (zh) * | 2020-01-14 | 2020-05-15 | 青岛海信移动通信技术股份有限公司 | 一种移动终端设备及其屏幕发声的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN115623123A (zh) | 2023-01-17 |
WO2023284403A1 (zh) | 2023-01-19 |
US20240106927A1 (en) | 2024-03-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108430003B (zh) | 音效补偿方法和装置、可读存储介质、终端 | |
JP6505252B2 (ja) | 音声信号を処理するための方法及び装置 | |
CN113613238B (zh) | 一种sim模块的管理方法及电子设备 | |
CN111050250B (zh) | 降噪方法、装置、设备和存储介质 | |
CN110764730A (zh) | 播放音频数据的方法和装置 | |
CN114466097A (zh) | 防漏音的移动终端及移动终端的声音输出方法 | |
CN107483735A (zh) | 移动终端的音量控制方法、装置及存储介质和移动终端 | |
US11272304B2 (en) | Method and terminal for playing audio data, and storage medium thereof | |
CN107371102A (zh) | 音频播放音量的控制方法、装置及存储介质和移动终端 | |
EP4319116A1 (en) | Volume adjustment method and terminal device | |
CN115623123B (zh) | 一种音频处理方法及设备 | |
CN113301544B (zh) | 一种音频设备间语音互通的方法及设备 | |
US20240135946A1 (en) | Method and apparatus for improving sound quality of speaker | |
CN106657621B (zh) | 一种声音信号自适应调节装置及方法 | |
CN115167802A (zh) | 一种音频切换播放方法及电子设备 | |
CN116033304B (zh) | 一种音频输出方法、电子设备及可读存储介质 | |
CN108377298B (zh) | 一种切换接听模式的方法、装置、移动终端和计算机可读存储介质 | |
CN117119089A (zh) | 一种可折叠电子设备及漏音抵消方法 | |
CN114489556B (zh) | 一种播放声音的方法及设备 | |
CN109348021B (zh) | 移动终端及音频播放方法 | |
CN108989578B (zh) | 提醒信息的展示方法、装置、终端及存储介质 | |
CN109618062B (zh) | 语音交互方法、装置、设备以及计算机可读存储介质 | |
WO2023160204A1 (zh) | 音频处理方法及电子设备 | |
CN113168302A (zh) | 一种音频模式校正的方法、装置及电子设备 | |
CN117692848B (zh) | 驱动发声器件进行发声的方法及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |