CN105706427B - 提供环境声处理的音频信息的方法和装置 - Google Patents

提供环境声处理的音频信息的方法和装置 Download PDF

Info

Publication number
CN105706427B
CN105706427B CN201480060926.8A CN201480060926A CN105706427B CN 105706427 B CN105706427 B CN 105706427B CN 201480060926 A CN201480060926 A CN 201480060926A CN 105706427 B CN105706427 B CN 105706427B
Authority
CN
China
Prior art keywords
audio
environment
frequency information
ambient sound
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480060926.8A
Other languages
English (en)
Other versions
CN105706427A (zh
Inventor
K·奥兹卡恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Technologies Oy
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Technologies Oy filed Critical Nokia Technologies Oy
Publication of CN105706427A publication Critical patent/CN105706427A/zh
Application granted granted Critical
Publication of CN105706427B publication Critical patent/CN105706427B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6008Substation equipment, e.g. for use by subscribers including speech amplifiers in the transmitter circuit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/605Portable telephones adapted for handsfree use involving control of the receiver volume to provide a dual operational mode at close or far distance from the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Environmental & Geological Engineering (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Telephone Function (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)

Abstract

公开了一种方法,其包括:接收输入的指示,该输入的指示指示用户没有面向装置,至少部分地基于所述输入来确定与音频上行链路相关联的环境声非限制的指令,接收其它音频信息,至少部分地基于所述其它音频信息来确定环境声非限制的音频信息,以及使得通过所述音频上行链路来传输所述环境声非限制的音频信息。

Description

提供环境声处理的音频信息的方法和装置
技术领域
本申请一般涉及环境声处理的音频信息的确定。
背景技术
许多用户已经变得依赖于电子装置以管理他们生活的各种方面。例如,出于许多不同的目的(诸如通信、查找信息、导航、渲染媒体和/或诸如此类),用户已经变得习惯于随身带着至少一个电子装置。随着用户已经变得更加依赖于用于通信的电子装置,用户使用他们的电子装置彼此通信的方式已经演进。可能希望的是,向用户提供一种方式以彼此更好地和更容易地通信,该方式考虑了用户期望的通信类型。
发明内容
在权利要求书中阐述了本发明的示例的各种方面。
一个或多个实施例可以提供装置、计算机可读介质、非短暂性的计算机可读介质、计算机程序产品、以及方法,它们用于针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息,确定与所述音频上行链路相关联的环境声指令(directive),所述环境声指令是从一组可能的环境声指令确定的,该一组可能的环境声指令包括至少环境声限制的指令和环境声非限制的指令,至少部分地基于所述音频信息来确定与所述环境声指令一致的环境声处理的音频信息,以及使得通过所述音频上行链路传输所述环境声处理的音频信息。
一个或多个实施例可以提供装置、计算机可读介质、计算机程序产品、非短暂性的计算机可读介质,它们具有用于针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息的构件,用于确定与所述音频上行链路相关联的环境声指令的构件,所述环境声指令是从一组可能的环境声指令确定的,该一组可能的环境声指令包括至少环境声限制的指令和环境声非限制的指令,用于至少部分地基于所述音频信息来确定与所述环境声指令一致的环境声处理的音频信息的构件,以及用于使得通过所述音频上行链路传输所述环境声处理的音频信息的构件。
在至少一个示例实施例中,所述环境声限制的指令与导致环境声的降低有关。
在至少一个示例实施例中,所述环境声限制的指令与一个或多个语音增强技术的使用有关。
在至少一个示例实施例中,所述环境声指令与所述环境声限制的指令有关,以及所述环境声处理的音频信息是环境声限制的音频信息。
在至少一个示例实施例中,确定所述环境声限制的音频信息包括:一个或多个环境声降低技术的使用。
在至少一个示例实施例中,所述音频信息与与多个麦克风相关联的音频信息有关,以及所述环境声降低技术与方向性音频信息的确定有关。
在至少一个示例实施例中,至少部分地基于单一的音频源的推定来确定所述方向性音频信息。
在至少一个示例实施例中,所述环境声限制的音频信息的确定包括:环境声消除。
在至少一个示例实施例中,所述音频信息与以下音频信息有关:与至少一个语音麦克风相关联的音频信息和与至少一个环境麦克风相关联的音频信息,以及所述环境声限制的音频信息的确定包括:至少部分地基于与所述环境麦克风相关联的音频信息来消除与语音麦克风相关联的音频信息的至少一部分。
在至少一个示例实施例中,所述环境声限制的音频信息的确定包括:禁用一个或多个环境麦克风。
在至少一个示例实施例中,所述环境声非限制的指令与不存在环境声降低有关。
在至少一个示例实施例中,所述环境声非限制的指令与一个或多个语音增强技术的排除有关。
在至少一个示例实施例中,所述环境声指令与所述环境声非限制的指令有关,以及所述环境声处理的音频信息是环境声非限制的音频信息。
在至少一个示例实施例中,确定所述环境声非限制的音频信息包括:一个或多个环境声降低技术的排除。
在至少一个示例实施例中,所述音频信息与与多个麦克风相关联的音频信息有关,以及所述环境声非限制的音频信息与全向的音频信息有关。
在至少一个示例实施例中,至少部分地基于多个音频源的推定来确定所述全向的音频信息。
在至少一个示例实施例中,所述环境声非限制的音频信息的确定包括:环境声的包含。
在至少一个示例实施例中,所述音频信息与以下音频信息有关:与至少一个语音麦克风相关联的音频信息以及与至少一个环境麦克风相关联的音频信息,以及所述环境声非限制的音频信息的确定包括:包含与语音麦克风相关联的音频信息的至少一部分以及与所述环境麦克风相关联的音频信息(至少一部分)。
在至少一个示例实施例中,确定所述环境声非限制的音频信息包括:启用一个或多个环境麦克风。
在至少一个示例实施例中,所述音频上行链路与语音呼叫有关。
在至少一个示例实施例中,确定向其它装置发送所述音频信息至少部分地基于来自所述装置的语音呼叫的起源。
在至少一个示例实施例中,确定以向其它装置发送所述音频信息至少部分地基于由其它装置接收所述语音呼叫的起源的指示。
在至少一个示例实施例中,所述环境声指令的确定至少部分地基于预定设置。
在至少一个示例实施例中,所述预定设置与默认设置有关。
在至少一个示例实施例中,所述预定设置与用户能够配置的设置有关。
一个或多个示例实施例还执行:接收输入的指示,该输入的指示指示环境声指令,其中所述环境声指令的确定至少部分地基于所述输入。
在至少一个示例实施例中,所述输入指示所述装置接近用户的耳朵,以及所述环境声指令与环境声限制的指令有关。
在至少一个示例实施例中,所述输入指示所述装置被放置在接近用户的耳朵的地方,以及所述环境声指令与环境声限制的指令有关。
在至少一个示例实施例中,所述输入指示所述装置远离于用户的耳朵,以及所述环境声指令与环境声非限制的指令有关。
在至少一个示例实施例中,所述输入指示所述装置被放置在远离于用户的耳朵的地方,以及所述环境声指令与环境声非限制的指令有关。
一个或多个示例实施例还执行:使得与所述环境声指令相关联的接口元素的显示,其中所述输入与所述接口元素有关。
在至少一个示例实施例中,所述接口元素指示所述环境声指令。
在至少一个示例实施例中,所述输入指示所述接口元素的选择,以及所述环境声指令与环境声限制的指令有关。
在至少一个示例实施例中,所述输入指示所述接口元素的选择,以及所述环境声指令与环境声非限制的指令有关。
在至少一个示例实施例中,当所述音频上行链路是活动的时,使得显示所述接口元素。
在至少一个示例实施例中,所述输入指示所述用户面向所述装置,以及所述环境声指令与环境声限制的指令有关。
在至少一个示例实施例中,所述输入指示所述装置被定向以面向所述用户,以及所述环境声指令与环境声限制的指令有关。
在至少一个示例实施例中,所述输入指示所述用户没有面向所述装置,以及所述环境声指令与环境声非限制的指令有关。
在至少一个示例实施例中,所述输入指示所述装置被定向以不面向所述用户,以及所述环境声指令与环境声非限制的指令有关。
在至少一个示例实施例中,所述环境声指令与环境声限制的指令有关,以及所述环境声处理的音频信息是环境声限制的音频信息,以及还执行:接收输入的指示,该输入的指示指示所述装置远离于用户的耳朵,至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令,接收其它音频信息,至少部分地基于所述其它音频信息来确定环境声非限制的音频信息,以及使得通过所述音频上行链路传输所述环境声非限制的音频信息。
在至少一个示例实施例中,所述环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及还执行:接收输入的指示,该输入的指示指示所述用户没有面向所述装置,至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令,接收其它音频信息,至少部分地基于所述其它音频信息来确定环境声非限制的音频信息,以及使得通过所述音频上行链路来传输所述环境声非限制的音频信息。
在至少一个示例实施例中,所述环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及还执行:使得显示与所述环境声指令相关联的接口元素,接收输入的指示,该输入的指示指示所述接口元素的选择,至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令,接收其它音频信息,至少部分地基于所述其它音频信息来确定环境声非限制的音频信息,以及使得通过所述音频上行链路来传输所述环境声非限制的音频信息。
在至少一个示例实施例中,所述环境声指令与指定环境音频信息的量级的指令有关。
在至少一个示例实施例中,环境音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给所述环境音频信息。
在至少一个示例实施例中,所述环境声指令与指定语音音频信息的量级的指令有关。
在至少一个示例实施例中,语音音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给所述语音音频信息。
在至少一个示例实施例中,所述环境声指令与指定与语音音频信息有关的环境音频信息的量级的指令有关。
在至少一个示例实施例中,与语音音频信息有关的环境音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给所述语音音频信息和环境声信息。
在至少一个示例实施例中,所述比例因子与百分比有关。
在至少一个示例实施例中,与指定量级的环境声指令一致的环境声处理的音频信息的确定包括:与所述量级一致的所述环境声处理的音频信息的确定。
在至少一个示例实施例中,与量级一致的环境声处理的音频信息的确定与环境声处理的音频信息的确定有关,使得所述环境声处理的音频信息包括以下至少之一:与所述量级成比例的环境声信息,或与所述量级成比例的语音声音信息。
一个或多个示例实施例还执行:接收输入的指示,输入的指示指示所述量级。
一个或多个示例实施例还执行:使得显示与所述环境声指令相关联的滑动接口元素,其中指示所述量级的输入与指示在所述滑动接口元素上的方位的输入有关。
在至少一个示例实施例中,所述滑动接口元素包括:与语音音频信息相关联的滑动端点和与环境音频信息相关联的滑动端点,以及与语音音频信息有关的环境音频信息的量级与比例因子有关,该比例因子将所述量级指示为环境声处理的音频信息的比例以分配给所述语音音频信息和环境声信息,使得在所述滑动接口元素上的方位指示所述比例。
在至少一个示例实施例中,在所述滑动接口元素上的所述方位指示所述比例,使得所述比例与指示从所述方位到至少一个滑动端点的距离的因子的有关。
在至少一个示例实施例中,环境声限制的指令与环境声指令有关,该环境声指令指定环境声信息的量级,该环境声信息的量级指示环境声信息的降低。
在至少一个示例实施例中,环境声非限制的指令与环境声指令有关,该环境声指令指定环境声信息的量级,该环境声信息的量级不指示环境声信息的降低。
在至少一个示例实施例中,不指示环境声信息的降低的环境声信息的量级与以下至少一个有关:与接收的环境声信息对应的环境声信息的量级,或与环境声信息的增加对应的环境声信息的量级。
附图说明
为了更加完全地理解本发明的实施例,现在参照结合附图的以下描述,其中:
图1是示出根据示例实施例的装置的框图;
图2A-2C是根据至少一个示例实施例的说明装置的至少一个麦克风的示意图;
图3A-3C是根据至少一个示例实施例的说明指示环境声指令的输入的示意图;
图4A-4C是根据至少一个示例实施例的说明与环境声指令相关联的接口元素的示意图;
图5是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图6是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图7是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图8是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图9是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图10是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图;
图11是根据至少一个示例实施例的说明与环境声指令相关联的接口元素的示意图;以及
图12是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。
具体实施方式
通过参照附图的图1到图12来理解本发明的实施例及其潜在的优点。
现在,在下文将参照附图,更充分地描述一些实施例,在附图中示出了一些实施例而不是全部的实施例。本发明的各种实施例可以以许多不同形式来具体化,并且不应当被认为限制于本文所阐述的实施例;相反,提供这些实施例,以便本公开将满足可适用的法律要求。在全文中,相同的标记指相同的元素。如本文所使用的,术语“数据”、“内容”、“信息”以及类似的术语可交换地使用,以指依照本发明的实施例能够被传送、接收和/或存储的数据。因此,任何此类术语的使用不应当被认为是限制本发明的实施例的精神和范围。
另外,如本文所使用的,术语‘电路’指:(a)仅硬件电路实现方式(例如,在模拟电路和/或数字电路中的实现方式);(b)电路和计算机程序产品(多个)的组合,所述计算机程序产品(多个)包括:存储在一个或多个计算机可读存储器上的软件和/或固件指令,所述组合一起工作以使得装置执行本文描述的一个或多个功能;以及(c)要求用于运行的软件或固件的电路(诸如例如,微处理器(多个)或微处理器(多个)的一部分),即使所述软件或固件不是物理呈现的。‘电路’的这种定义应用于本文中(包括在任何权利要求中)的这个术语的所有使用。作为进一步示例,如本文所使用的,术语‘电路’还包含:包括一个或多个处理器和/或其部分(多个),并且伴随有软件和/或固件的实现方式。作为另一示例,如本文所使用的术语‘电路’例如还包括:用于移动电话的基带集成电路或应用处理器集成电路,或在服务器、蜂窝网络装置、其它网络装置和/或其它计算装置中的类似集成电路。
如本文所限定的“非短暂性的计算机可读介质”,其指物理介质(例如,易失性或非易失性存储设备),能够与“短暂性的计算机可读传输介质”(其指电磁信号)进行区分。
图1是示出根据至少一个示例实施例的装置(诸如电子装置10)的框图。然而,应当理解的是,在本文中说明的以及在下文中描述的电子装置仅是说明可以受益于本发明的实施例的电子装置,以及因此不应当被认为是限制本发明的范围。虽然出于示例的目的,说明了并且将在下文中将描述电子装置10,但是其它类型的电子装置可以容易地利用本发明的实施例。电子装置10可以是便携式数字助理(PDA),寻呼机,移动计算机,台式计算机、电视,游戏装置,便携式计算机,媒体播放器、相机,视频记录器、移动电话、全球定位系统(GPS)装置,和/或任何其它类型的电子系统。此外,在其它示例实施例中,至少一个示例实施例的装置不需要是整个电子装置,而是可以是电子装置的组件或组件组。
此外,装置可以容易地利用本发明的实施例而不管它们提供移动性的意图。在这点上,即使可以结合移动应用来描述本发明的实施例,但是应当理解的是,可以结合各种其它应用(在移动通信行业中和在移动通信行业外两者的各种其它应用)来使用本发明的实施例。
在至少一个示例实施例中,电子装置10包括处理器11和存储器12。处理器11可以是任何类型的处理器、控制器、嵌入式控制器、处理器核心、和/或诸如此类。在至少一个示例实施例中,处理器11使用计算机程序代码以使得装置执行一个或多个动作。存储器12可以包括:易失性存储器,诸如易失性随机存取存储器(RAM)(其包含用于数据的临时存储的缓存区域),和/或其它存储器,例如,非易失性存储器,其可以是嵌入式的和/或可以是可移动的。非易失性存储器可以包括:EEPROM、闪速存储器和/或诸如此类。存储器12可以存储任何数量的信息片段,以及数据。信息和数据可以由电子装置10使用以实现电子装置10的一个或多个功能,诸如本文中描述的功能。在至少一个示例实施例中,存储器12包括:计算机程序代码,使得存储器和计算机程序代码被配置为与处理器一起工作使得该装置执行本文中描述的一个或多个动作。
电子装置10还可以包括:通信设备15。在至少一个示例实施例中,通信设备15包括:天线(或多个天线)、有线连接器、和/或诸如此类,它们操作地与传送器和/或接收器通信。在至少一个示例实施例中,处理器11提供信号给传送器和/或从接收器接收信号。信号可以包括:根据通信接口标准的信令信息、用户语音、接收的数据、用户生成的数据、和/或诸如此类。通信设备15可以使用一个或多个空中接口标准、通信协议、调制类型、和接入类型进行操作。作为说明,电子通信设备15可以根据以下进行操作:第二代(2G)无线通信协议IS-136(时分多址接入(TDMA))、全球移动通信系统(GSM)、以及IS-95(码分多址接入(CDMA)),第三代(3G)无线通信协议,诸如通用移动通信系统(UMTS)、CDMA2000、宽带CDMA(WCDMA)和时分同步CDMA(TD-SCDMA),和/或第四代(4G)无线通信协议,无线联网协议(诸如802.11),短距无线协议(诸如蓝牙)和/或诸如此类。通信设备15可以依照有线协议进行操作,诸如以太网、数字订户线(DSL)、异步转移模式(ATM)和/或诸如此类。
处理器11可以包括诸如电路的构件,该构件用于实现音频、视频、通信、导航、逻辑功能、和/或诸如此类,以及用于实现本发明的实施例,其包括例如本文中描述的功能中的一个或多个。例如,处理器11可以包括用于执行各种功能(其包括例如本文中描述的一个或多个功能)的构件,诸如数字信号处理器设备、微处理器设备、各种模拟至数字转换器、数字至模拟转换器、处理电路和其它支持电路。该装置可以执行:根据这些设备的各自能力在这些设备之中的电子装置10的控制和信号处理功能。因此,处理器11可以包括:在调制和传输之前对消息和数据进行编码和交织的功能性。处理器1可以另外包括内部语音编码器,可以包括内部数据调制解调器。此外,处理器11可以包括功能性以操作一个或多个软件程序,该软件程序可被存储在存储器中,以及该软件程序可以除了其它之外使得处理器11实现至少一个实施例,其包括例如本文中描述功能中的一个或多个功能。例如,处理器11可以操作连通性程序,诸如常规网络浏览器。连通性程序可以允许电子装置10根据以下来传送和接收网络内容(诸如基于位置的内容和/或其它网页内容):例如传输控制协议(TCP)、互联网协议(IP)、用户数据包协议(UDP)、互联网消息访问协议(IMAP)、邮局协议(POP)、简单邮件传输协议(SMTP)、无线应用协议(WAP)、超文本传输协议(HTTP)和/或诸如此类。
电子装置10可以包括:用户接口,该用户接口用于提供输出和/或接收输入。电子装置10可以包括输出设备14。输出设备14可以包括:音频输出设备,诸如振铃器、耳机、扬声器、和/或诸如此类。输出设备14可以包括:触感输出设备,诸如振动传感器、电变形表面、电变形结构、和/或诸如此类。输出设备14可以包括:可视化输出设备,诸如显示器、灯、和/或诸如此类。电子装置可以包括:输入设备13。输入设备13可以包括:光传感器、接近传感器、麦克风、触摸传感器、力传感器、按钮、小键盘、运动传感器、磁场传感器、相机、和/或诸如此类。触摸传感器和显示器可以以触摸显示器为特点。在包括触摸显示器的实施例中,触摸显示器可以被配置为接收来自单点触摸、多点触摸和/或诸如此类的输入。在此类实施例中,触摸显示器和/或处理器可以至少部分地基于方位、运动、速度、接触区域和/或诸如此类来确定输入。
电子装置10可以包括各种触摸显示器,其包括以下触摸显示器:该触摸显示器被配置为使得能够通过各种电阻式、电容式、红外线、应变仪(strain gauge)、表面波、光学成像、色散信号技术、声脉冲识别和/或其它技术的触摸识别以及然后提供指示与触摸相关联的位置和其它参数的信号。另外,触摸显示器可以被配置为接收以触摸事件的形式的输入的指示,触摸事件可以被定义为在选择对象(例如,手指、触针、笔、铅笔或其它定点设备)和触摸显示器之间的实际物理触摸。可替代地,触摸事件可以被定义为将选择对象带到接近于触摸显示器、在显示的对象上的悬停或接近在预定距离内的对象,即使与触摸显示器没有进行物理接触。因此,触摸输入可以包括由触摸显示器检测的任何输入,其包括涉及实际物理接触的触摸事件和不涉及物理接触但是以其它方式被触摸显示器检测的触摸事件,诸如选择对象接近于触摸显示器的结果。触摸显示器可以能够接收与触摸输入有关的与应用于触摸屏的力相关联的信息。例如,触摸屏可以在重压触摸输入和轻压触摸输入之间进行区分。在至少一个示例实施例中,显示器可以显示二维信息、三维信息和/或诸如此类。
在包含小键盘的实施例中,小键盘可以包括数字(0-9)键、符号键(例如#,*)、字母键和/或诸如此类,它们用于操作电子装置10。例如,小键盘可以包括:常规的QWERTY小键盘布置。小键盘还可包括:具有相关联功能的各种软键。任何键可以是物理键,其中例如物理地做出或打断电连接,或电连接可以是虚拟的。虚拟键可以是例如在触摸敏感表面上的图形表示,从而通过在该表面上或在该表面附近执行悬停或触摸手势来驱动键。另外,或可替代地,电子装置10可以包括接口设备,诸如控制杆或其它用户输入接口。
输入设备13可以包括媒体捕获元件。媒体捕获元件可以是用于捕获用于存储、显示或传输的图像、视频、和/或音频的任何构件。例如,在至少一个示例实施例(其中,媒体捕获元件是相机模块)中,相机模块可以包括数字相机,其可以从捕获的图像形成数字图像文件。因此,相机模块可以包括:用于从捕获的图像创建数字图像所需要的硬件(诸如镜头或其它光学组件(多个))和/或软件。可替代地,相机模块可以包括:仅用于查看图像的硬件,而电子装置10的存储设备以软件的形式存储用于由处理器11执行的指令,该指令用于从捕获的图像创建数字图像。在至少一个示例实施例中,相机模块还可以包括:处理元件(诸如协处理器)和编码器和/或解码器,处理元件协助处理器11来处理图像数据,编码器和/或解码器用于压缩和/或解压缩图像数据。编码器和/或解码器可以根据标准格式(诸如联合图像专家组(JPEG)标准格式)进行编码和/或解码。
图2A-2C是根据至少一个示例实施例的说明装置的至少一个麦克风的示意图。图2A-2C的示例仅是装置的至少一个麦克风的示例,并且不限制权力要求书的范围。例如,麦克风的数量可以变化,麦克风的放置可以变化,装置的壳体可以变化,和/或诸如此类。
随着电子装置已经变得更加丰富,用户已经变得越来越依赖于使用电子装置以用于通信。例如,用户依赖于电子装置以用于彼此通信,诸如移动电话、平板计算机、膝上型计算机、台式计算机、和/或诸如此类。用户可以利用的通信的方式可以变化。例如,装置可以通过消息、信息传递、语音呼叫、视频呼叫、和/或诸如此类来进行通信。例如,装置可以建立至另一个装置的上行链路以用于向其他装置发送音频信息、视频信息和/或诸如此类。上行链路可以与如前所述的蜂窝通信协议、互联网语音协议(VOIP)和/或诸如此类相关联。在至少一个示例实施例中,语音呼叫涉及装置,该装置通过音频上行链路向另一个装置发送音频信息。应当理解的是,可以通过音频上行链路直接、通过中间的装置和/或诸如此类向其它装置传送音频信息。应当理解的是,有许多协议和传递机制对于装置而言可以使用,以及许多其它的协议和传递机制将在将来将可以使用,以及此类协议和传递机制不以任何方式限制权利要求书。
替代地,上行链路音频可以涉及在语音呼叫之外将被发送的消息。例如,它可以指音频,该音频正在或已经被记录以创建记录的语音或其他记录的音频消息,它们将通过诸如互联网、广域网和/或局域网的数据网络被传递给接收者。例如,消息可以被上载到服务器,接收者从给服务器能够下载该消息。
在至少一个示例实施例中,装置确定通过音频上行链路向另一个装置发送音频信息。在至少一个示例实施例中,音频上行链路可以与视频上行链路相关联,例如与视频呼叫相关联。在至少一个示例实施例中,装置例如从至少一个麦克风接收针对音频上行链路的音频信息。例如,出于通过音频上行链路向另一个装置发送音频信息的目的,装置可以确定获取音频信息。
在至少一个示例实施例中,针对通过音频上行链路发送音频信息的确定可以涉及与音频传输相关联的通信的实例化。例如,针对向其他装置发送音频信息的确定可以至少部分地基于语音呼叫的开始。在至少一个示例实施例中,开始涉及装置调用与建立呼叫相关联的操作,诸如发送如下信息:指示建立电话呼叫、建立语音通信会话、建立视频通信会话和/或诸如此类。在至少一个示例实施例中,针对向其他装置发送音频信息的确定可以至少部分地基于来自装置的语音呼叫的开始。装置可以至少部分地基于用户输入(诸如与呼叫按钮相关联的输入)来确定以开始语音呼叫,该用户输入指示语音呼叫的开始。在至少一个示例实施例中,针对向其他装置发送音频信息的确定可以至少部分地基于由其它装置接收语音呼叫的开始的指示。例如,该装置可以接收请求以接收呼叫、以加入与呼叫相关联的会话,和/或诸如此类。
在至少一个示例实施例中,该装置使得通过音频上行链路传输音频信息。在至少一个示例实施例中,音频信息的传输涉及通过介质和/或协议来发送音频信息,该介质和/或协议允许其它装置接收音频信息(至少一部分)。该装置可以使得通过传送音频信息,通过发送音频信息给不同的装置(其传送音频信息)和/或诸如此类来传送音频信息。
音频信息可以是表示音频的任何信息。例如,音频信息可以涉及压缩的音频格式(诸如任何的运动图像专家组(MPEG)格式)和未压缩的音频格式(诸如任何的脉冲编码调制(PCM)信息)和/或诸如此类。应当理解的是,有许多音频格式可以由装置来使用,以及许多其它音频格式在将来将可以使用,以及此类音频格式不以任何方式限制权利要求书。该装置可以从一个或多个麦克风接收音频信息。应当理解的是,有许多类型的麦克风可以由装置使用,以及许多其它类型的麦克风在将来将可以使用,以及此类类型的麦克风不以任何方式限制权利要求书。该装置可以包括麦克风,可以通过另一个装置从麦克风接收音频信息,和/或诸如此类。
图2A是根据至少一个示例实施例的说明装置201的麦克风202的示意图。能够看出,麦克风202被放置在装置202上,使得当向装置201说话时,麦克风可以接收在用户的嘴附近的音频信息。该放置可以使得当用户以类似于图3A的示例来把持装置201时,麦克风202接近于用户的嘴。在至少一个示例实施例中,装置201从麦克风202来接收音频信息。
语音活动检测器(VAD)是在许多通信标准中的强制要求。在此类情况中,语音活动检测器与合适的噪声抑制算法结合使用以在没有检测到语音活动的期间降低环境噪声。即使具有单个麦克风的装置可能能够评价语音和/或环境声。术语“环境声”用于描述“背景噪声”。在许多情况中,环境声的估计在许多装置中可能是期望的。估计环境声的基本思想可以是在与语音活动的缺失相关联的时间段期间分析输入信号帧。例如,可以确定当前帧是否含有语音和/或环境声。在此类示例中,VAD的输出可能是期望的。在至少一个示例实施例中,基于VAD信息,可以针对语音信号的质量和可懂性来抑制环境声。在具有多个麦克风配置的一些装置中,可能希望的是提供高级水平的噪声抑制或噪声方向性。例如,可能期望的是,上行链路音频通过降低环境声来强调语音。
在一些情况中,可能希望的是,处理关于环境声的音频信息。在至少一个示例实施例中,装置处理音频信息以确定环境声处理的音频信息。例如,可以确定音频信息,使得环境声被限制、使得环境声补充其他音频信息、使得环境声被保留、和/或诸如此类。在至少一个示例实施例中,环境声涉及不是由用户说话引起的音频信息。例如,用户可以向装置的麦克风说话。由用户语音所引起的声音可以被认为是非环境声。在此类示例中,可以有由麦克风接收的其它声音,诸如背景声、音乐、和/或诸如此类。在至少一个示例实施例中,该装置接收音频信息,该音频信息包括语音和环境声。该装置可以至少部分地基于音频信息来确定环境声处理的音频信息。例如,该装置可以通过音频信息的修改、组合与不同麦克风相关联的音频信息、限制与不同的麦克风相关联的音频信息、消除与不同的麦克风相关联的音频信息、和/或诸如此类,来确定所处理的音频信息。此类信息也可以依赖于用例(例如,该装置是否被配置为当进行所谓的“手机呼叫”时,被放置在接近于用户的嘴的地方,或者被配置为被放置在远离于用户的嘴的地方以便进行所谓的“免提电话呼叫”或“免提扬声器呼叫”)。在一些实施例中,由设备包括的麦克风可以与一个或多个麦克风(它们是其它装置的一部分)协作,例如麦克风形成外围装置(诸如耳机、免提电话、或车辆的音频系统)的一部分。
在至少一个示例实施例中,环境声处理的音频信息涉及环境声限制的音频信息。在至少一个示例实施例中,环境声限制的音频信息涉及音频信息,该音频信息指示降低的环境声成分。例如,环境声限制的音频信息可以涉及环境声处理的音频信息,该环境声处理的音频信息指示已经遭受到环境声限制的音频信息。例如,确定环境声限制的音频信息可以包括:一个或多个环境声降低技术的使用。在另一个示例中,确定环境声限制的音频信息可以包括:一个或多个语音增强技术的使用。在至少一个示例实施例中,环境声限制的音频信息涉及音频信息,在该音频信息中,环境声可以被限制以及非环境声可以被保留。
在至少一个示例实施例中,环境声处理的音频信息涉及环境声非限制的音频信息。在至少一个示例实施例中,环境声非限制的音频信息涉及:指示包括环境声成分的音频信息。例如,环境声非限制的音频信息可以涉及:环境声处理的音频信息,其指示还没有遭受到环境声限制的音频信息、已经遭受到环境声增强的音频信息、和/或诸如此类。例如,确定环境声非限制的音频信息可以包括:一个或多个环境声降低技术的排除。在另一个示例中,确定环境声非限制的音频信息可以包括:一个或多个语音增强技术的排除。
在至少一个示例实施例中,语音增强技术涉及与以偏爱包括语音声音而不偏爱包括环境声的方式来处理音频信息相关联的一个或多个操作。语音增强技术可以包括至少一个过滤技术、至少一个恢复技术、至少一个语音模型技术、和/或诸如此类。在至少一个示例实施例中,过滤技术涉及与指示环境声的音频信息的移除相关联的技术,诸如谱减法、维纳滤波、信号子空间方法(SSA)滤波、和/或诸如此类。在至少一个示例实施例中,频谱恢复涉及指示语音的音频信息的增强,诸如最小均方误差短时间频谱振幅估计(MMSE-STSA)恢复,或任何类似的技术。在至少一个示例实施例中,语音模型技术涉及与指示语音的预定声音相关联的音频信息的识别。
在至少一个示例实施例中,音频信息涉及与多个麦克风相关联的音频信息。可以由装置包括一个或多个麦克风。一个或多个麦克风可以与装置(诸如分离的装置,其向该装置提供音频信息)分离。
在至少一个示例实施例中,环境声降低技术涉及方向性音频信息的确定。例如,环境声限制的音频信息可以是方向性音频信息。在至少一个示例实施例中,方向性音频信息涉及音频信息,该音频信息涉及从指定方向接近该装置的声音波。该装置可以至少部分地基于在与在装置上的不同方位处的多个麦克风相关联的音频信息之间的关联来确定方向性音频信息。例如,该装置可以评估与多个麦克风相关联的音频信息,以及至少部分地基于指示在该装置上的多个麦克风的方位的信息来关联音频信息,使得与来自其它方向的音频相比,偏爱指示在自该装置的指定方向处的音频源的音频信息。在至少一个示例实施例中,方向性音频信息的确定涉及将全向音频信息转换为方向性音频信息。在至少一个示例实施例中,方向性音频信息涉及音频信息,该音频信息表示从各种方向(例如从多个声音源)感知的音频信息。例如,全向音频信息可以涉及缺少方向性修改的音频信息。
图2B是根据至少一个示例实施例的说明装置的多个麦克风的示意图。在图2B的示例中,装置221包括麦克风222、223、和224。在图2B的示例中,麦克风222、223和224正在接收来自声音源231和232的音频信息。能够看出的是,声音源232比声音源231更接近麦克风222。在至少一个示例实施例中,装置221接收来自麦克风222、223和224的音频信息,以及基于音频信息来确定方向性音频信息。例如,该装置可以确定指示与音频源231相对应的方向的方向性音频。在此类示例中,该装置可以通过与与麦克风222相关联的音频信息相关联的时间对与与麦克风223相关联的音频信息相关联的时间、对与与麦克风224相关联的音频信息相关联的时间来识别与音频源231相关联的音频信息。在此类示例中,方向性音频信息可以指示与预定方向相关联的声音的提取、与和预定方向不相对应的方向相关联的声音的限制、和/或诸如此类。
在至少一个示例实施例中,至少部分地基于单一的音频源的推定来确定方向性音频信息。例如,方向性音频信息可以基于以下推定:希望被包含在方向性音频信息中的声音与单个方向相关联。以这种方式,方向性音频信息可以涉及与预定方向相关联的声音。在至少一个示例实施例中,预定方向涉及与向该装置讲话的用户相关联的方向。例如,可以以如下方式来配置该装置:从该装置到用户的嘴的方向是可以预测的。在此类示例中,预定方向可以指示用户的嘴的此类预测方向。
在一些情况中,可能希望的是,将麦克风放置在装置上使得麦克风被指向远离于期望的语音源的方向。例如,如果用户的嘴可能指向麦克风,则可能希望的是有一个或多个麦克风指向不同的方向。在至少一个示例实施例中,指向用户的嘴的预测方位的麦克风涉及语音麦克风。在至少一个示例实施例中,指向与语音麦克风不同方向的麦克风涉及环境麦克风。以这种方式,语音麦克风可以被如此放置使得与语音麦克风相关联的音频信息可能具有比与环境麦克风相关联的音频信息更大的语音成分。类似地,环境麦克风可以被如此放置使得与环境麦克风相关联的音频信息可能比与语音麦克风相关联的音频信息具有更大的环境成分。
出于易于说明而提供了图2B中的麦克风222、223、224的布置。实际上,合适的装置可以包括:不同数量的麦克风,和/或在不同位置中的麦克风。例如,该装置可以包括:位于朝向设备的正面的底部的第一麦克风以便当该装置在使用中时第一麦克风被放置在接近于用户的嘴的地方,以及被放置在朝向设备的背面的顶部的第二麦克风。在此类布置中,与与第二麦克风相关联的音频信息相比,与第一麦克风相关联的音频信息可以具有相对于环境音频的更大的语音音频的成分。
在一些情况中,确定环境声限制的音频信息可以涉及与与不同的一个或多个麦克风(诸如一个或多个环境麦克风)相关联的音频信息相比,更偏爱与一个或多个麦克风(诸如一个或多个语音麦克风)相关联的音频信息。例如,麦克风可以与方向相关联,以及不同的麦克风可以与不同的方向相关联。例如,如果麦克风是方向性的,则它们可以被如此放置使得麦克风在不同的方向中最敏感,以及无论是方向性的还是全向的,麦克风可以位于不同的位置中,从而在它们被放置在离潜在的声音源的不同的距离处和/或在麦克风和声音源之间具有不同的障碍物的意义上,它们可以指向不同的方向。在此类示例中,该装置可以通过排除与不同方向相关联的音频信息来确定环境声限制的音频信息。在一些示例中,该装置可以降低音频信息,该音频信息指示与不同方向相关联的音频信息。例如,该装置可以至少部分地基于与一个或多个麦克风相关联的音频信息来消除音频信息。在至少一个示例实施例中,此类消除涉及环境声消除。在至少一个示例实施例中,该装置可以通过禁用一个或多个环境声麦克风来确定环境声限制的音频信息。在至少一个示例实施例中,该装置可以通过应用于来自麦克风中的一个或多个麦克风的音频信息的合适的环境声抑制算法来确定环境声限制的音频信息。
在至少一个示例实施例中,环境声限制的音频信息的确定包括:环境声消除。例如,音频信息涉及与至少一个语音麦克风相关联的音频信息和与至少一个环境麦克风相关联的音频信息。在此类示例中,环境声限制的音频信息的确定包括:至少部分地基于与环境麦克风相关联的音频信息来消除与语音麦克风相关联的音频信息的至少一部分。例如,消除可以涉及反转环境音频信息(其至少一部分)以及将反转的环境音频信息与音频信息组合。
在至少一个示例实施例中,环境声非限制的音频信息涉及音频信息,该音频信息包括或旨在包括:环境音频信息。例如,环境声非限制的音频信息可以涉及全向的音频信息。在至少一个示例实施例中,确定环境声非限制的音频信息包括:启用一个或多个环境麦克风。例如,环境声非限制的音频信息的确定可以包括:包含与语音麦克风相关联的音频信息的至少一部分,以及与环境麦克风相关联的音频信息(其至少一部分)。在其他示例中,确定环境声非限制的音频信息不包括:启用一个或多个环境麦克风,而是替代地包括:包含与语音麦克风相关联的音频信息(例如使用VAD,其被识别为与环境声有关)。
图2C是根据至少一个示例实施例的说明装置的多个麦克风的示意图。在图2C的示例中,装置251包括:多个麦克风。能够看出,麦克风252和253在装置251的同一面上的不同方位处,麦克风255在装置251的与麦克风252和253的相对面上,以及麦克风254在装置251的侧面上。在至少一个示例实施例中,麦克风252可以是语音麦克风,以及麦克风253-255中的一个或多个麦克风可以是环境麦克风。在一些示例中,当该装置在使用时,麦克风252本身可以是用于朝向用户的嘴的波束成型而布置的密集的麦克风的阵列。
图3A-3C是根据至少一个示例实施例的说明指示环境声指令的输入的示意图。图3A-3C的示例仅是指示环境声指令的输入的示例,并且不限制权力要求书的范围。例如,用户和装置之间的相互关系可以变化,装置的定向可以变化,用户与装置的接近性可以变化,和/或诸如此类。
在许多情况中,可能期望的是,音频上行链路的音频信息是环境声限制的音频信息。例如,上行链路音频的目的可以是出于语音通信的目的。在此类情况中,装置的用户可能希望针对音频上行链路限制在音频信息中的环境声。
随着电子装置已经变得更加普遍,通过电子装置的通信的作用已经改变。例如,除了仅语音通信之外,出于社交目的,用户已经变得依赖于电子装置。尽管许多用户可能依赖于电子装置以用于语音通信,但是许多用户也依赖于他们的装置以与他们的社交熟人来分享他们的经历。例如,在一些情况中,用户可能希望通过音频上行链路的语音通信,以及在其他情况中,用户可能希望环境声被包含在语音上行链路中。例如,用户可能希望接收上行链路音频的一方来感知除了该用户正在说的内容之外或替代该用户正在说的内容,该用户正在听的东西。例如,可能有该用户希望他方体验的背景中的音乐。在另一个示例中,该用户可能希望他方收听周围环境的负载是怎么样的。在此类示例中,用户可能希望通过允许他方来收听一方的环境声来传递该方的环境。
在至少一个示例实施例中,该装置确定与音频上行链路相关联的环境声指令。在至少一个示例实施例中,环境声指令涉及指令,该指令控制与音频上行链路相关联的音频信息是否是环境声限制的音频信息,环境声非限制的音频信息,和/或诸如此类。例如,可以有该装置可以确定的一组可能的环境声指令。例如,可以有与限制音频上行链路的音频信息中的环境声的各种方式相关联的一个或多个环境声限制指令,可以有与在音频上行链路的音频信息中包括环境声的各种方式相关联的一种或多种环境声非限制的指令。在至少一个示例实施例中,一组可能的环境声指令包括:至少一个环境声限制的指令和至少一个环境声非限制的指令。在至少一个示例实施例中,环境声限制的指令涉及导致针对音频上行链路的环境声限制的音频信息的确定。在至少一个示例实施例中,环境声非限制的指令涉及导致针对上行链路的环境声非限制的音频信息的确定。
在至少一个示例实施例中,该装置确定与环境声指令一致的环境声处理的音频信息。在至少一个示例实施例中,与环境声指令一致涉及该装置以与环境声指令一致的方式来确定环境声处理的音频信息。例如,环境声限制的音频信息的确定可以与环境声限制的指令一致,环境声非限制的音频信息的确定可以与环境声非限制的指令一致,和/或诸如此类。
在至少一个示例实施例中,该装置可以至少部分地基于指示环境声指令的输入来确定环境声指令。该输入可以涉及用户使用装置的方式、用户执行与该装置的接口元素有关的选择、和/或诸如此类。该输入可以是由该装置识别的语音命令。
该装置可以接收输入的指示。在至少一个示例实施例中,输入的指示涉及传递输入的出现的任何信息、识别输入的信息、描述输入的特点的信息、和/或诸如此类。该装置可以通过接收输入、通过接收指示来自另一个装置的输入的信息、和/或诸如此类,来接收输入的指示。在至少一个示例实施例中,指示环境声指令的输入涉及输入,该输入涉及用户相对于该装置的方位、用户相对于该装置的定向、和/或诸如此类。
图3A是说明根据至少一个示例实施例的指示环境声指令的输入的示意图。在图3A的示例中,指示环境声指令的输入涉及用户302邻近于用户的面部(例如紧挨着用户的耳朵)把持装置301。装置的此类方位和/或定向可以指示用户希望语音通信。在至少一个示例实施例中,该装置接收输入的指示,该输入的指示指示该装置被放置在接近用户的耳朵的地方,以及确定该输入指示环境声限制的指令。没有以任何方式限制权利要求书,与至少部分地基于指示该装置接近于用户的耳朵的输入来确定环境声限制的指令相关联的至少一个技术优点可以是允许用户通过在电子装置上的私人会话期间通常使用的方位中把持该装置来启用环境声限制。例如,用户可以针对至少以下原因来直观地识别进行专用于语音的会话的该装置的此类方位:此类方位与把持电话的方位一致。在至少一个示例实施例中,用户可以将该装置移动到由图3A的示例所指示的方位。在此类情况中,该装置可以至少部分地基于该装置被放置在接近于用户的耳朵的地方来确定环境声限制的指令。
该装置可以通过接近传感器、光传感器、加速计、陀螺仪、触控传感器、使用相机的面部检测和/或诸如此类,来确定指示与该装置接近于用户的耳朵相关联的方位和/或定向的输入。
图3B是说明根据至少一个示例实施例的指示环境声指令的输入的示意图。在图3B的示例中,指示环境声指令的输入涉及用户322如此把持装置321使得用户面向该装置,例如面向装置的显示器。装置的此类方位和/或定向可以指示用户希望语音通信。在至少一个示例实施例中,该装置接收输入的指示,该输入的指示指示用户面向该装置,以及确定该输入指示环境声限制的指令。没有以任何方式限制权利要求书,与至少部分地基于指示用户面向装置的输入来确定环境声限制的指令相关联的至少一个技术优点可以允许用户通过在在电子装置上会话期间通常使用的方位中来把持该装置,来启用环境声限制。例如,用户可以针对至少以下原因来直观地识别进行专用于语音的会话的该装置的此类方位:此类方位与面向装置的方位(其用于视频呼叫、查看装置以用于免提呼叫、和/或诸如此类)一致。免提呼叫可以涉及该装置使用扬声器而不是耳机扬声器,或某些类似物。在至少一个示例实施例中,用户可以将该装置移动到由图3B的示例所指示的方位。在此类情况中,该装置可以至少部分地基于该装置被定向为面向用户来确定环境声限制的指令。
该装置可以通过接近传感器、光传感器、加速计、陀螺仪、触控传感器、面部检测、面部识别、和/或诸如此类,来确定指示与用户面向装置相关联的方位和/或定向的输入。
图3C是说明根据至少一个示例实施例的指示环境声指令的输入的示意图。在图3C的示例中,指示环境声指令的输入涉及用户352如此把持装置351使得用户以与纯语音通信不一致的方式把持该装置,其指示希望在音频上行链路中包含环境声,和/或诸如此类。例如,用户远离于他自己来把持该装置,远离于用户的耳朵来把持该装置,定向该装置使得用户没有面向该装置,和/或诸如此类。装置的此类方位和/或定向可以指示用户希望环境声通信。在至少一个示例实施例中,该装置接收输入的指示,该输入的指示指示用户没有面向该装置,该装置没有接近于用户的耳朵,远离于用户来把持该装置,和/或诸如此类。在此类示例中,该装置可以确定该输入指示环境声非限制的指令。没有以任何方式限制权利要求书,与至少部分地基于指示用户没有面向装置、该装置没有接近于用户的耳朵、和/或远离于该用户来把持该装置的输入来确定环境声非限制的指令相关联的至少一个技术优点可以允许用户通过在在电子装置上会话期间不是通常使用的方位中、在与尝试捕获环境声相关联的方位中、和/或诸如此类来把持该装置,来避免环境声限制。例如,用户可以针对至少以下原因来直观地识别增强装置的能力以接收环境声的装置的此类方位:此类方位与捕获除了仅语音之外的声音一致、与希望限制音频为语音不一致、和/或诸如此类。在至少一个示例实施例中,用户可以将该装置移动到由图3C的示例所指示的方位。在此类情况中,该装置可以至少部分地基于远离于用户来把持该装置、该装置远离于用户的耳朵、该装置被定向为不面向用户、和/或诸如此类来确定环境声非限制的指令。
该装置可以通过接近传感器、光传感器、加速计、陀螺仪、触控传感器、面部检测、面部识别、和/或诸如此类,来确定指示与用户面向装置相关联的方位和/或定向的输入。
图4A-4C是根据至少一个示例实施例的说明与环境声指令相关联的接口元素的示意图。图4A-4C的示例仅是与环境声指令相关联的接口元素的示例,并且不限制权力要求书的范围。例如,接口元素的表示可以变化,接口元素的方位可以变化,接口元素的数量可以变化,和/或诸如此类。
在一些情况下,可能希望的是允许用户执行选择以控制针对音频上行链路的音频信息是否包括环境声限制的音频信息、环境声非限制的音频信息、和/或诸如此类。例如,用户可能希望执行与在显示器上提供的接口元素相关联的输入。
在至少一个示例实施例中,该装置使得与环境声指令相关联的接口元素的显示。在至少一个示例实施例中,接口元素涉及信息的可视化表示,其指示用户可以交互的信息。例如,接口元素可以是图标、按钮、超链接、文本和/或诸如此类。在至少一个示例实施例中,接口元素可以通过指示环境声指令、通过与环境声指令的调用相关联、和/或诸如此类与环境声指令相关联。例如,接口元素可以通过文本、图像等指示接口元素表示针对环境声指令的设置。
在至少一个示例实施例中,使得显示涉及以下操作的执行:该操作使得显示接口元素。例如,使得显示可以包括:在显示器上显示接口元素,向分离的装置发送指示接口元素的信息以便该分离的装置显示该接口元素,和/或诸如此类。
在至少一个示例实施例中,该装置接收与接口元素有关的输入的指示。在此类示例中,环境声指令的确定可以至少部分地基于该输入。例如,该输入可以指示接口元素的选择。例如,该装置可以确定:该输入指示接口元素的选择,以及该装置可以确定环境声指令以与环境声限制的指令、环境声非限制的指令、和/或诸如此类有关。
图4A是说明根据至少一个示例实施例的与与显示器401有关的环境声指令相关联的接口元素402的示意图。能够看出的是,接口元素包括麦克风的图像,然而可以替代地使用麦克风的任何其他指示(诸如文本描述)。麦克风的图像可以向用户指示接口元素与从麦克风接收的音频信息有关。还能够看出的是,接口元素包括:指示“仅我的语音”的文本。在至少一个示例实施例中,文本指示可以指示当前选择的环境声指令、根据与接口元素的相关联的输入将选择的环境声指令、和/或诸如此类。例如,“仅我的语音”可以指示:当前活动的、当前选择的、根据与接口元素相关联的输入将变成活动的和/或诸如此类的环境声限制的指令。
在至少一个示例实施例中,当音频上行链路是活动的时,使得显示接口元素。例如,可以结合其它接口元素(其与活动的音频上行链路相关联)(诸如呼叫终结接口元素、静音接口元素、音量接口元素、和/或诸如此类)来提供接口元素。
图4B是说明根据至少一个示例实施例的与与显示器421有关的环境声指令相关联的接口元素422的示意图。能够看出的是,接口元素包括麦克风的图像。麦克风的图像可以向用户指示接口元素与从麦克风接收的音频信息有关。还能够看出的是,接口元素包括:指示“我的声音+环境”的文本。在至少一个示例实施例中,文本指示可以指示当前选择的环境声指令、根据与接口元素的相关联的输入将选择的环境声指令、和/或诸如此类。例如,“我的声音+环境”可以指示:当前活动的、当前选择的、根据与接口元素相关联的输入将变成活动的环境声限制的指令,和/或诸如此类。
在至少一个示例实施例中,环境声指令的确定至少部分地基于预定设置。预定设置可以涉及环境声指令的存储表示,其可以被取回以允许该装置确定使用哪个环境声指令。例如,预定设置可以涉及当建立音频上行链路时、在接收指示环境声指令的任何输入之前和/或诸如此类将应用的默认设置。在至少一个示例实施例中,预定设置涉及用户能够配置的设置。例如,用户可能能够指定预定设置的值。用户可以与如关于图4A和图4B的描述类似地通过与活动音频上行链路相关联的接口元素来指定该值。在至少一个示例实施例中,当音频上行链路是不活动的时,该装置使得显示与环境声指令相关联的接口元素。在此类示例中,接口元素可以涉及与环境声指令相关联的预定设置的指定。
图4C是根据至少一个示例实施例的说明与有关于显示器451的环境声指令相关联的接口元素452和453的示意图。能够看出的是,接口元素452涉及“定向声音”以及接口元素453涉及“全向声音”。在至少一个示例实施例中,接口元素452涉及环境声限制的指令,以及接口元素453涉及环境声非限制的指令。图4C的示例可以涉及针对与环境声指令相关联的预定设置的值的指定。
图5是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图5的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图5的一组操作。
在框504处,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。该接收、音频上行链路、另一个装置以及麦克风可以与如关于图2A-2C描述的类似。在至少一个示例实施例中,该装置通过音频上行链路来确定向另一个装置发送音频信息。在此类示例中,该确定、发送、音频信息、另一个装置、以及音频上行链路可以与如关于图2A-2C描述的类似。
在框506处,该装置确定与音频上行链路相关联的环境声指令。该确定和环境声指令可以与如关于图3A-3C、图4A-4C和图11描述的类似。
在框508处,该装置至少部分地基于音频信息来确定与环境声指令一致的环境声处理的音频信息。该确定、环境声处理的音频信息、以及该一致可以与如关于图2A-2C、图3A-3C和图11描述的类似。
在框510处,该装置通过音频上行链路使得环境声处理的音频信息的传输。该使得和传输可以与如关于图2A-2C描述的类似。
图6是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图6的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图6的一组操作。
在框604处,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。
在框606处,该装置接收输入的指示,其指示环境声指令。该接收、指示、输入和环境声指令可以与如关于图3A-3C、图4A-4C和图11描述的类似。
在框608处,该装置至少部分地基于该输入来确定环境声指令。该确定可以与如关于图3A-3C和图11描述的类似。
在框610处,与如关于图5的框508描述的类似,该装置至少部分地基于音频信息来确定与环境声指令一致的环境声处理的音频信息。在框612处,与如关于图5的框510描述的类似,该装置通过音频上行链路使得环境声处理的音频信息的传输。
图7是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图7的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图7的一组操作。
在框704处,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。
在框706处,该装置使得显示与环境声指令相关联的接口元素。使得显示和接口元素可以与如关于图4A-4C和图11描述的类似。
在框708处,该装置接收输入的指示,其指示接口元素的选择。该指示和输入可以与如关于图4A-4C和图11描述的类似。
在框710处,与如关于图6的框608描述的类似,该装置至少部分地基于该输入来确定环境声指令。在框712处,与如关于图5的框508描述的类似,该装置至少部分地基于音频信息来确定与环境声指令一致的环境声处理的音频信息。在框714处,与如关于图5的框510描述的类似,该装置通过音频上行链路使得环境声处理的音频信息的传输。
图8是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图8的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图8的一组操作。
在一些情况下,该装置可以初始化与环境声指令相关联的音频上行链路,以及当音频上行链路是活动的时改变环境声指令。例如,用户可能希望在音频上行链路一部分期间限制环境音频,以及可能希望在上行链路的不同部分期间包含环境音频。以这种方式,针对音频上行链路,用户可能能够在环境声限制的音频信息和环境声非限制的音频信息之间动态地转变。即使图8的示例说明了从环境声限制的指令到环境声非限制的指令的改变,但是转变的任何组合或置换可能是可能的。
在框804处,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。
在框806处,该装置确定与音频上行链路相关联的环境声限制的指令。该确定和环境声限制的指令可以与如关于图3A-3C、图4A-4C和图11描述的类似。
在框808处,该装置至少部分地基于音频信息来确定与环境声限制的指令一致的环境声限制的音频信息。该确定、环境声限制的音频信息和一致可以与如关于图2A-2C、图3A-3C和图11描述的类似。
在框810处,该装置使得在音频上行链路上传输环境声限制的音频信息。该使得和传输可以与如关于图2A-2C描述的类似。
在框812处,该装置接收输入的指示,其指示装置远离于用户的耳朵。该接收、指示和输入可以与如关于图3A-3C和图11描述的类似。
在框814处,该装置至少部分地基于该输入确定与音频上行链路相关联的环境声非限制的指令。该确定和环境声非限制的指令可以与如关于图3A-3C和图11描述的类似。
在框816处,针对音频上行链路,该装置从至少一个麦克风接收其它音频信息。该接收和麦克风可以与如关于图2A-2C描述的类似。
在框818处,该装置至少部分地基于音频信息来确定与环境声非限制的指令一致的环境声非限制的音频信息。该确定、环境声非限制的音频信息和一致可以与如关于图2A-2C、图3A-3C和图11描述的类似。
在框820处,该装置使得通过音频上行链路传输环境声非限制的音频信息。该使得和传输可以与如关于图2A-2C描述的类似。
图9是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图9的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图9的一组操作。即使图9的示例说明了从环境声限制的指令到环境声非限制的指令的改变,但是转变的任何组合或置换可能是可能的。
在框904处,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。在框906处,与如关于图8的框806描述的类似,该装置确定与音频上行链路相关联的环境声限制的指令。在框908处,与如关于图8的框808描述的类似,该装置至少部分地基于音频信息来确定与环境声限制的指令一致的环境声限制的音频信息。在框910处,与如关于图8的框810描述的类似,该装置使得通过音频上行链路传输环境声限制的音频信息。
在框912处,该装置接收输入的指示,其指示用户没有面向装置。该接收、指示和输入可以与如关于图3A-3C和图11描述的类似。
在框914处,该装置至少部分地基于该输入确定与音频上行链路相关联的环境声非限制的指令。该确定和环境声非限制的指令可以与如关于图3A-3C和图11描述的类似。
在框916处,与如关于图8的框816描述的类似,针对音频上行链路,该装置从至少一个麦克风接收其它音频信息。在框918处,与如关于图8的框818描述的类似,该装置至少部分地基于音频信息来确定与环境声非限制的指令一致的环境声非限制的音频信息。在框920处,与如关于图8的框820描述的类似,该装置使得通过音频上行链路传输环境声非限制的音频信息。
图10是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图10的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图10的一组操作。即使图10的示例说明了从环境声限制的指令到环境声非限制的指令的改变,但是转变的任何组合或置换可能是可能的。
在框1004处,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。在框1006处,与如关于图8的框806描述的类似,该装置确定与音频上行链路相关联的环境声限制的指令。在框1008处,与如关于图8的框808描述的类似,该装置至少部分地基于音频信息来确定与环境声限制的指令一致的环境声限制的音频信息。在框1010处,与如关于图8的框810描述的类似,该装置使得通过音频上行链路传输环境声限制的音频信息。
在框1012处,与如关于图7的框706描述的类似,该装置使得显示与环境声指令相关联的接口元素。在框1014处,与如关于图7的框708描述的类似,该装置接收输入的指示,其指示接口元素的选择。
在框1016处,该装置至少部分地基于该输入确定与音频上行链路相关联的环境声非限制的指令。该确定和环境声非限制的指令可以与如关于图3A-3C和图11描述的类似。
在框1018处,与如关于图8的框816描述的类似,针对音频上行链路,该装置从至少一个麦克风接收其它音频信息。在框1020处,与如关于图8的框818描述的类似,该装置至少部分地基于音频信息来确定与环境声非限制的指令一致的环境声非限制的音频信息。在框1022处,与如关于图8的框820描述的类似,该装置使得通过音频上行链路传输环境声非限制的音频信息。
图11是根据至少一个示例实施例的说明与环境声指令相关联的接口元素的示意图。图11的示例仅是与环境声指令相关联的接口元素的示例,并且不限制权力要求书的范围。例如,接口元素的表示可以变化,接口元素的定向可以变化,接口元素(其至少一部分)的方位可以变化,和/或诸如此类。
在一些情况下,可能希望的是控制通过音频上行链路提供的语音音频信息和/或环境声信息的数量。例如,可能希望的是,在一些情况下,装置提供某一量级的环境声信息,以及在不同的情况下,提供不同量级的环境声信息。在一些情况下,可能希望的是,装置允许用户改变通过音频上行链路提供的语音音频信息和/或环境音频信息的数量。例如,在聚会处的用户,当希望通过音频上行链路来分享聚会体验时,可能希望提供高量级的环境声,以及当希望仅允许音频上行链路指示出席聚会时,可能希望提供低量级的环境声。
在至少一个示例实施例中,环境声指令与指定环境音频信息的量级的指令有关。在至少一个示例实施例中,音频信息的量级涉及由音频信息传递的音频的强度的水平。例如,与由较低量级的音频信息所指示的相比,更高量级的音频信息可以指示响亮的音频。环境音频信息的量级可以与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给环境音频信息。例如,比例因子可以涉及百分比、因子、乘数和/或诸如此类。在至少一个示例实施例中,环境声指令与指定语音音频信息的量级的指令有关。环境音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给环境音频信息。
比例因子可以与接收的音频有关,与确定的环境声处理的音频信息有关,和/或诸如此类。例如,比例因子可以指示当确定环境声处理的音频信息时,应用于接收的音频信息的比例因子。在另一个示例中,比例因子可以指示比例因子,该比例因子表示环境声处理的音频信息包括的特定类型的音频信息(诸如语音音频信息、环境声信息等)的数量。在此类示例中,比例因子可以指示:环境声处理的音频信息包括:某一百分比的环境音频信息。
在至少一个示例实施例中,语音音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给语音音频信息。例如,环境声指令可以指示环境音频信息相对于语音音频信息的特定构成。在此类示例中,环境声指令可以包括比率,该比率指示在环境音频信息和语音音频信息之间的量级关系。在至少一个示例实施例中,与语音音频信息有关的环境音频信息的量级与比例因子有关,该比例因子将量级指示为环境声处理的音频的比例以分配给语音音频信息和环境声信息。在此类示例中,环境声指令可以指导的是,环境声处理的音频信息包括某一百分比的环境声信息使得由环境声处理的音频信息包括的剩余百分比的音频信息是语音音频信息。以这种方式,环境声指令可以与指令有关,该指令指定与语音音频信息有关的环境声信息的量级,指定与环境音频信息有关的语音音频信息的量级,和/或诸如此类。
在至少一个示例实施例中,与指定量级的环境声指令一致的环境声处理的音频信息的确定包括:与量级一致的环境声处理的音频信息的确定。在至少一个示例实施例中,与量级一致的环境声处理的音频信息的确定与环境声处理的音频信息的确定有关,使得环境声处理的音频信息包括:与该量级成比例的环境声信息,或与该量级成比例的语音声音信息,和/或诸如此类。
在至少一个示例实施例中,环境声限制的指令与环境声指令有关,该环境声指令指定环境声信息的量级(其指示环境声信息降低)。例如,如果环境声指令指示的是,当确定环境声处理的音频信息时,该装置降低环境声音频信息的量级,则环境声指令可以与环境声限制的指令有关。在至少一个示例实施例中,环境声非限制的指令与环境声指令有关,该环境声指令指定环境声信息的量级(其不指示环境声信息的降低)。在至少一个示例实施例中,不指示环境声信息的降低的环境声信息的量级与以下有关:与接收的环境声信息对应的环境声信息的量级、与环境声信息的增加对应的环境声信息的量级、和/或诸如此类。例如,如果环境声指令指示的是,当确定环境声处理的音频信息时,该装置避免环境声音频信息的量级的降低,则环境声指令可以与环境声非限制的指令有关。在另一个示例中,如果环境声指令指示的是,当确定环境声处理的音频信息时,该装置增加环境声音频信息的量级,则环境声指令可以与环境声非限制的指令有关。
在一些情况下,如果可能希望的是提供简单和直观的方式,用户可以以该方式来改变环境音频信息的量级、语音音频信息的量级和/或诸如此类,其由环境声处理的音频信息来提供。在至少一个示例实施例中,该装置可以提供滑动接口元素,该滑动接口元素允许用户来设置和/或修改环境声指令。在至少一个示例实施例中,该装置使得显示与环境声指令相关联的滑动接口元素。在此类示例中,该装置可以接收输入指示,其指示量级。例如,指示量级的输入可以与指示在所述滑动接口元素上的方位的输入有关。在此类示例中,该方位可以指示量级。
在至少一个示例实施例中,滑动接口元素包括:与语音音频信息相关联的滑动端点和与环境音频信息相关联的滑动端点。在此类示例中,在与语音音频信息有关的环境声音频信息的量级可以与比例因子有关的情况中,该比例因子将量级指示为环境声处理的音频的比例以分配给语音音频信息和环境声信息,使得在滑动接口元素上的方位指示该比例。例如,在滑动接口元素上的方位可以指示该比例,使得该比例与指示从该方位到至少一个滑动端点的距离的因子有关。
在图11的示例中,滑动接口元素1102包括:在滑动接口元素1102上的某个方位处的滑动选择点1104。在至少一个示例实施例中,滑动接口元素与环境声指令有关。在图11的示例中,滑动端点1106与语音音频信息有关,以及滑动端点1108与环境音频信息有关。以这种方式,与由滑动接口元素1102的方位(与滑动端点1106相比,其更接近于滑动端点1108)所指示的相比,在滑动接口元素1102上与滑动端点1108相比更接近滑动端点1006的方位可以指示环境声指令,该环境声指令指示更高量级的语音音频信息。类似地,与由滑动接口元素1102的方位(与滑动端点1108相比,其更接近于滑动端点1106)所指示的相比,在滑动接口元素1102上与滑动端点1106相比更接近滑动端点1008的方位可以指示环境声指令,该环境声指令指示更高量级的环境音频信息。
图12是根据至少一个示例实施例的说明环境声处理的音频信息的确定的流程图。在至少一个示例实施例中,有对应于图12的活动的一组操作。装置(例如图1的电子装置10或其部分)可以使用该组操作。该装置可以包括用于此类操作的执行的构件,其包括例如图1的处理器11。在示例实施例中,通过具有存储器(例如图1的存储器12)来改造装置(例如图1的电子装置10),该存储器包括计算机代码,其被配置为与处理器一起(例如图1的处理器11)工作使得该装置执行图12的一组操作。
在框1202,该装置使得显示与环境声指令相关联的滑动接口元素。该滑动接口元素可以与如关于图11描述的类似。
在框1204,该装置接收输入,其指示在滑动接口元素上的方位。该接收和输入可以与如关于图3A-3C、图4A-4C和图11描述的类似。
在框1206,与如关于图5的框504描述的类似,该装置针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息。
在框1208,该装置确定与音频上行链路相关联的环境声指令,使得环境声指令指定指示该方位的量级。该确定、量级和环境声指令可以与如关于图3A-3C、图4A-4C和图11描述的类似。
在框1210,与如关于图5的框508描述的类似,该装置至少部分地基于音频信息来确定与环境声指令一致的环境声处理的音频信息。在框1212,与如关于图5的框510描述的类似,该装置通过音频上行链路使得环境声处理的音频信息的传输。
本发明的实施例可以被实现在软件、硬件、应用逻辑或软件、硬件和应用逻辑的组合中。软件、应用逻辑和/或硬件可以位于在装置、分离的设备、或多个分离的设备上。如果需要,软件、应用逻辑和/或硬件的一部分可以位于装置上,软件、应用逻辑和/或硬件的一部分可以位于分离的设备上,以及软件、应用逻辑和/或硬件可以位于多个分离的设备上。在示例实施例中,应用逻辑、软件或指令集被维护在各种传统计算机可读介质中的任何一种计算机可读介质上。
如果需要,可以以不同的顺序和/或彼此并发地执行本文中论述的不同功能。例如,可以在框706后执行图7的框704。此外,如果需要,上述功能中的一个或多个功能可以是非必需的或可以被组合。例如,图6的框606和608可以是非必需的和/或可以与图5的框506组合。
尽管在独立权利要求中阐述了本发明的各种方面,但是本发明的其它方面包括来自所描述的实施例和/或具有独立权利要求的特征的从属权利要求的特征的其它组合,而不仅是在权利要求书中明确阐述的组合。
本文中还需要注意的是,尽管以上描述了本发明的示例实施例,但是这些描述不应当被视为限制的含义。相反,在不背离如在所附权利要求书中限定的本发明的范围的情况下,存在可以做出的各种变型和修改。

Claims (20)

1.一种提供环境声处理的音频信息的装置,包括:
至少一个处理器;
通信设备;
输出设备;
至少一个存储器,其包含计算机程序代码,所述至少一个存储器、所述通信设备、所述输出设备和所述计算机程序代码被配置为与处理器一起工作使得所述装置执行至少以下:
针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息;
在显示器上显示接口元素,其中,所述接口元素表示用于与所述音频上行链路相关联的环境声指令的设置,所述接口元素包括用于用户的语音的指示和用于用户的语音和环境声的指示;
基于指示所述环境声指令的输入来确定与所述音频上行链路相关联的环境声指令,其中,所述输入是所述接口元素的选择,所述接口元素的选择与和所述环境声指令相关联的设置的指定有关,所述环境声指令是从一组可能的环境声指令中确定的,该一组可能的环境声指令包括至少环境声限制的指令和环境声非限制的指令;
至少部分地基于所述音频信息来确定与所确定的环境声指令一致的环境声处理的音频信息;以及
使得通过所述音频上行链路传输所述环境声处理的音频信息。
2.权利要求1所述的装置,其中,所确定的环境声指令与所述环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息。
3.权利要求2所述的装置,其中,所述环境声限制的音频信息的确定包括:一个或多个环境声降低技术的使用。
4.权利要求1所述的装置,其中,所确定的环境声指令与所述环境声非限制的指令有关,所述环境声处理的音频信息是环境声非限制的音频信息。
5.权利要求1所述的装置,其中,所确定的环境声指令与指定环境音频信息的量级的指令有关。
6.权利要求1所述的装置,其中,所确定的环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及所述存储器还包括计算机程序代码,所述计算机程序代码使得所述装置执行:
接收输入的指示,该输入的指示指示所述装置远离于用户的耳朵;
至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令;
接收其它音频信息;
至少部分地基于所述其它音频信息来确定环境声非限制的音频信息;以及
使得通过所述音频上行链路传输所述环境声非限制的音频信息。
7.权利要求1所述的装置,其中,所确定的环境声指令与环境声限制的指令有关,以及所述环境声处理的音频信息是环境声限制的音频信息,以及所述存储器还包括计算机程序代码,所述计算机程序代码使得所述装置执行:
接收输入的指示,该输入的指示指示所述用户没有面向所述装置;
至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令;
接收其它音频信息;
至少部分地基于所述其它音频信息来确定环境声非限制的音频信息;以及
使得通过所述音频上行链路来传输所述环境声非限制的音频信息。
8.权利要求1所述的装置,其中,所确定的环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及所述存储器还包括计算机程序代码,所述计算机程序代码使得所述装置执行:
接收输入的指示,该输入的指示指示所述接口元素的选择;
至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令;
接收其它音频信息;
至少部分地基于所述其它音频信息来确定环境声非限制的音频信息;以及
使得通过所述音频上行链路来传输所述环境声非限制的音频信息。
9.权利要求1所述的装置,其中,所述装置包括麦克风。
10.一种提供环境声处理的音频信息的方法,包括:
在第一装置处,针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息;
在显示器上显示接口元素,其中,所述接口元素表示用于与所述音频上行链路相关联的环境声指令的设置,所述接口元素包括用于用户的语音的指示和用于用户的语音和环境声的指示;
基于指示所述环境声指令的输入来确定与所述音频上行链路相关联的环境声指令,其中,所述输入是所述接口元素的选择,所述接口元素的选择与和所述环境声指令相关联的设置的指定有关,所述环境声指令是从一组可能的环境声指令中确定的,该一组可能的环境声指令包括至少环境声限制的指令和环境声非限制的指令;
至少部分地基于所述音频信息来确定与所确定的环境声指令一致的环境声处理的音频信息;以及
使得通过所述音频上行链路传输所述环境声处理的音频信息。
11.权利要求10所述的方法,其中,所确定的环境声指令与所述环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息。
12.权利要求11所述的方法,其中,确定所述环境声限制的音频信息包括:一个或多个环境声降低技术的使用。
13.权利要求10所述的方法,其中,所确定的环境声指令与所述环境声非限制的指令有关,所述环境声处理的音频信息是环境声非限制的音频信息。
14.权利要求10所述的方法,其中,所确定的环境声指令与指定环境音频信息的量级的指令有关。
15.权利要求10所述的方法,其中,所确定的环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及还包括:
接收输入的指示,该输入的指示指示所述第一装置远离于用户的耳朵;
至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令;
接收其它音频信息;
至少部分地基于所述其它音频信息来确定环境声非限制的音频信息;以及
使得通过所述音频上行链路传输所述环境声非限制的音频信息。
16.权利要求10所述的方法,其中,所确定的环境声指令与环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息,以及还包括:
接收输入的指示,该输入的指示指示所述用户没有面向所述第一装置;
至少部分地基于所述输入来确定与所述音频上行链路相关联的环境声非限制的指令;
接收其它音频信息;
至少部分地基于所述其它音频信息来确定环境声非限制的音频信息;以及
使得通过所述音频上行链路来传输所述环境声非限制的音频信息。
17.编码有指令的至少一个计算机可读介质,当由处理器执行所述指令时,所述指令执行:
在第一装置处,针对与另一个装置相关联的音频上行链路,从至少一个麦克风接收音频信息;
在显示器上显示接口元素,其中,所述接口元素表示用于与所述音频上行链路相关联的环境声指令的设置,所述接口元素包括用于用户的语音的指示和用于用户的语音和环境声的指示;
基于指示所述环境声指令的输入来确定与所述音频上行链路相关联的环境声指令,其中,所述输入是所述接口元素的选择,所述接口元素的选择与和所述环境声指令相关联的设置的指定有关,所述环境声指令是从一组可能的环境声指令中确定的,该一组可能的环境声指令包括至少环境声限制的指令和环境声非限制的指令;
至少部分地基于所述音频信息来确定与所确定的环境声指令一致的环境声处理的音频信息;以及
使得通过所述音频上行链路传输所述环境声处理的音频信息。
18.权利要求17所述的介质,其中,所确定的环境声指令与所述环境声限制的指令有关,所述环境声处理的音频信息是环境声限制的音频信息。
19.权利要求18所述的介质,其中,确定所述环境声限制的音频信息包括:一个或多个环境声降低技术的使用。
20.权利要求17所述的介质,其中,所确定的环境声指令与所述环境声非限制的指令有关,所述环境声处理的音频信息是环境声非限制的音频信息。
CN201480060926.8A 2013-09-09 2014-09-01 提供环境声处理的音频信息的方法和装置 Active CN105706427B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/021,815 US9143875B2 (en) 2013-09-09 2013-09-09 Determination of ambient sound processed audio information
US14/021,815 2013-09-09
PCT/FI2014/050665 WO2015033019A1 (en) 2013-09-09 2014-09-01 Determination of ambient sound processed audio information

Publications (2)

Publication Number Publication Date
CN105706427A CN105706427A (zh) 2016-06-22
CN105706427B true CN105706427B (zh) 2019-06-04

Family

ID=51626054

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480060926.8A Active CN105706427B (zh) 2013-09-09 2014-09-01 提供环境声处理的音频信息的方法和装置

Country Status (4)

Country Link
US (1) US9143875B2 (zh)
EP (1) EP3044942B1 (zh)
CN (1) CN105706427B (zh)
WO (1) WO2015033019A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015097826A1 (ja) * 2013-12-26 2015-07-02 株式会社東芝 電子機器、制御方法およびプログラム
US9392368B2 (en) * 2014-08-25 2016-07-12 Comcast Cable Communications, Llc Dynamic positional audio
CN106294331B (zh) 2015-05-11 2020-01-21 阿里巴巴集团控股有限公司 音频信息检索方法及装置
US9479885B1 (en) 2015-12-08 2016-10-25 Motorola Mobility Llc Methods and apparatuses for performing null steering of adaptive microphone array
US9641935B1 (en) 2015-12-09 2017-05-02 Motorola Mobility Llc Methods and apparatuses for performing adaptive equalization of microphone arrays
US10482901B1 (en) 2017-09-28 2019-11-19 Alarm.Com Incorporated System and method for beep detection and interpretation

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2327012A (en) * 1997-07-04 1999-01-06 Samsung Electronics Co Ltd Hands free apparatus with multiple microphones
CN1604010A (zh) * 2003-09-30 2005-04-06 株式会社东芝 执行噪声消除的电子设备和用于该装置的语音输入方法
CN101015001A (zh) * 2004-09-07 2007-08-08 皇家飞利浦电子股份有限公司 提高了噪声抑制能力的电话装置
CN101163164A (zh) * 2006-10-10 2008-04-16 索尼爱立信移动通信日本株式会社 用于音频通信的装置、系统、控制方法和控制程序
CN102165521A (zh) * 2008-09-30 2011-08-24 苹果公司 多个麦克风切换和配置
US8086265B2 (en) * 2008-07-15 2011-12-27 At&T Intellectual Property I, Lp Mobile device interface and methods thereof
CN202334643U (zh) * 2010-12-31 2012-07-11 和硕联合科技股份有限公司 移动通信装置
CN102754148A (zh) * 2009-08-15 2012-10-24 阿凯维埃德斯·乔治欧 用于选择性的声音消除的方法,系统以及项目

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070154049A1 (en) * 2006-01-05 2007-07-05 Igor Levitsky Transducer, headphone and method for reducing noise
US8447031B2 (en) * 2008-01-11 2013-05-21 Personics Holdings Inc. Method and earpiece for visual operational status indication
US8189429B2 (en) * 2008-09-30 2012-05-29 Apple Inc. Microphone proximity detection
KR20100060457A (ko) * 2008-11-27 2010-06-07 삼성전자주식회사 이동통신 단말기의 동작모드 제어장치 및 방법
TWI439111B (zh) * 2009-06-05 2014-05-21 Htc Corp 切換行動裝置之通話模式之方法以及可自動切換通話模式之行動裝置
US8600743B2 (en) * 2010-01-06 2013-12-03 Apple Inc. Noise profile determination for voice-related feature
US8320974B2 (en) * 2010-09-02 2012-11-27 Apple Inc. Decisions on ambient noise suppression in a mobile communications handset device
KR20140145108A (ko) * 2012-03-01 2014-12-22 본 톤 커뮤니케이션즈 (이스라엘) 엘티디. 이동 통신 장치에서의 음성 통신 개선방법 및 시스템
US9184791B2 (en) * 2012-03-15 2015-11-10 Blackberry Limited Selective adaptive audio cancellation algorithm configuration
US20130260834A1 (en) * 2012-04-03 2013-10-03 Voxer Ip Llc Proximity detection system for operating a mobile communication device in either a handset mode or speakerphone mode
US9129588B2 (en) * 2012-09-15 2015-09-08 Definitive Technology, Llc Configurable noise cancelling system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2327012A (en) * 1997-07-04 1999-01-06 Samsung Electronics Co Ltd Hands free apparatus with multiple microphones
CN1604010A (zh) * 2003-09-30 2005-04-06 株式会社东芝 执行噪声消除的电子设备和用于该装置的语音输入方法
CN101015001A (zh) * 2004-09-07 2007-08-08 皇家飞利浦电子股份有限公司 提高了噪声抑制能力的电话装置
CN101163164A (zh) * 2006-10-10 2008-04-16 索尼爱立信移动通信日本株式会社 用于音频通信的装置、系统、控制方法和控制程序
US8086265B2 (en) * 2008-07-15 2011-12-27 At&T Intellectual Property I, Lp Mobile device interface and methods thereof
CN102165521A (zh) * 2008-09-30 2011-08-24 苹果公司 多个麦克风切换和配置
CN102754148A (zh) * 2009-08-15 2012-10-24 阿凯维埃德斯·乔治欧 用于选择性的声音消除的方法,系统以及项目
CN202334643U (zh) * 2010-12-31 2012-07-11 和硕联合科技股份有限公司 移动通信装置

Also Published As

Publication number Publication date
CN105706427A (zh) 2016-06-22
US9143875B2 (en) 2015-09-22
EP3044942B1 (en) 2019-07-10
EP3044942A1 (en) 2016-07-20
US20150071449A1 (en) 2015-03-12
WO2015033019A1 (en) 2015-03-12

Similar Documents

Publication Publication Date Title
CN105706427B (zh) 提供环境声处理的音频信息的方法和装置
KR102102647B1 (ko) 무선 리시버 및 그 제어 방법
CN113873378B (zh) 一种耳机噪声处理方法、装置及耳机
CN106030700B (zh) 至少部分地基于空间音频属性来确定操作指令
CN110493678B (zh) 耳机的控制方法、装置、耳机和存储介质
CN110221798A (zh) 一种投屏方法、系统及相关装置
CN108540655B (zh) 一种来电显示处理方法及移动终端
WO2016184295A1 (zh) 即时通讯方法、用户设备及系统
CN109743464A (zh) 桌面背景显示方法、移动终端及计算机可读存储介质
CN105808469B (zh) 数据处理方法、装置、终端及智能设备
CN113873379A (zh) 一种模式控制方法、装置及终端设备
US20210377642A1 (en) Method and Apparatus for Implementing Automatic Translation by Using a Plurality of TWS Headsets Connected in Forwarding Mode
CN110198362A (zh) 一种在联系人中添加智能家居设备的方法及系统
WO2023125847A1 (zh) 一种音频处理方法、系统及相关装置
CN109358940A (zh) 桌面同步方法、移动终端及计算机可读存储介质
WO2019120190A1 (zh) 拨号方法及移动终端
CN106796629A (zh) 向用户提供发送者标识信息同时向其他人隐藏该信息
WO2022242217A1 (zh) 线性马达的控制方法、装置、设备及可读存储介质
CN114466283A (zh) 音频采集方法、装置、电子设备及外设组件方法
CN103167127A (zh) 基于距离传感器和手势操作实现手机来电静音的系统及方法
KR20160023212A (ko) 글래스 타입의 이동 단말기 및 그 제어방법
CN109543193B (zh) 一种翻译方法、装置及终端设备
CN108055389A (zh) 未接来电处理方法及移动终端
CN111131606A (zh) 一种状态控制方法、电子设备
US20120300126A1 (en) Electronic apparatus and tv phone method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant