KR20190055832A - 멀티-배향 재생 장치 마이크로폰 - Google Patents

멀티-배향 재생 장치 마이크로폰 Download PDF

Info

Publication number
KR20190055832A
KR20190055832A KR1020197012192A KR20197012192A KR20190055832A KR 20190055832 A KR20190055832 A KR 20190055832A KR 1020197012192 A KR1020197012192 A KR 1020197012192A KR 20197012192 A KR20197012192 A KR 20197012192A KR 20190055832 A KR20190055832 A KR 20190055832A
Authority
KR
South Korea
Prior art keywords
microphone
playback
microphone array
playback device
sound input
Prior art date
Application number
KR1020197012192A
Other languages
English (en)
Other versions
KR102158514B1 (ko
Inventor
브렌단 웰치
로미 카드리
조나단 라일리
Original Assignee
소노스 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소노스 인코포레이티드 filed Critical 소노스 인코포레이티드
Publication of KR20190055832A publication Critical patent/KR20190055832A/ko
Application granted granted Critical
Publication of KR102158514B1 publication Critical patent/KR102158514B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/004—Monitoring arrangements; Testing arrangements for microphones
    • H04R29/005—Microphone arrays
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/802—Systems for determining direction or deviation from predetermined direction
    • G01S3/803—Systems for determining direction or deviation from predetermined direction using amplitude comparison of signals derived from receiving transducers or transducer systems having differently-oriented directivity characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/007—Monitoring arrangements; Testing arrangements for public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/8003—Diversity systems specially adapted for direction finding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
    • H04R2201/401—2D or 3D arrays of transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
    • H04R2201/405—Non-uniform arrays of transducers or a plurality of uniform arrays with different transducer spacing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
    • H04R2205/024—Positioning of loudspeaker enclosures for spatial sound reproduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/003—Digital PA systems using, e.g. LAN or internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/005—Audio distribution systems for home, i.e. multi-room use
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H04R2430/21—Direction finding using differential microphone array [DMA]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone

Abstract

적어도 하나의 마이크로폰 어레이가 포함된 멀티-배향 재생 장치의 양태가 논의된다. 방법은 적어도 하나의 마이크로폰 어레이를 포함하는 재생 장치의 배향을 결정하는 단계 및 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 단계를 포함할 수 있다. 적어도 하나의 마이크로폰 어레이는 사운드 입력을 검출할 수 있고, 적어도 하나의 마이크로폰 트레이닝 응답 및 검출된 사운드 입력에 기초하여 사운드 입력의 소스의 위치 정보가 결정될 수 있다. 소스의 위치 정보에 기초하여 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정될 수 있고, 조정된 방향성 초점에 기초하여 상기 사운드 입력이 캡처될 수 있다.

Description

멀티-배향 재생 장치 마이크로폰
본 출원은 2016년 9월 30일에 출원된 미국 특허 출원 제15/282,554호 "멀티-배향 재생 장치 마이크로폰(Multi-Orientation Playback Device Microphones)”에 대한 우선권을 주장한다. 이 출원 내용 전체는 그 모든 용도를 위해 참조로서 여기에 포함된다.
본 개시는 소비재, 특히 미디어 재생에 관련되는 방법, 시스템, 제품, 특징, 서비스 및 기타 요소 또는 그 일부 태양에 관련된다.
2003년 소노스 사(SONOS, Inc.)가 그 최초 특허 출원 중 하나인 "다수의 네트워킹된 장치들 사이의 오디오 재생을 동기화하기 위한 방법(Method for Synchronizing Audio Playback between Multiple Networked Devices)"을 출원하고 2005년 미디어 재생 시스템을 판매 제공하기 시작하기 전까지, 음향 환경(out-loud setting)에서 디지털 오디오를 액세스하고 듣기 위한 옵션은 제한적이었다. 소노스 무선 하이파이 시스템(Sonos Wireless HiFi System)은 사람들로 하여금 하나 이상의 네트워킹된 재생 장치를 통하여 다수의 소스로부터 음악을 경험하는 것을 가능하게 한다. 스마트폰, 태블릿 또는 컴퓨터 상에 설치된 소프트웨어 제어 애플리케이션을 통하여, 네트워킹된 재생 장치를 가지는 임의의 공간에서 원하는 것을 재생할 수 있다. 또한, 컨트롤러를 사용하여, 예컨대 다양한 노래가 재생 장치를 구비한 각각의 공간에서 스트리밍될 수 있거나, 공간이 동시 재생을 위해 함께 그룹핑될 수 있거나, 같은 노래가 모든 공간에서 동시에 들릴 수 있다.
계속 성장하는 디지털 미디어에 대한 관심을 고려하여 볼 때, 청취 경험을 더 향상시키기 위한 소비자가 액세스할 수 있는 기술을 개발할 필요가 계속 있다.
여기에 개시되는 기술의 특징, 태양 및 이점은 이하의 설명, 첨부된 청구범위 및 첨부 도면에 관련하여 더 잘 이해될 수 있다.
도 1은 특정 실시예가 실시될 수 있는 예시적인 미디어 재생 시스템 구성을 도시한다.
도 2는 여기에 설명되는 태양에 따르는 예시적인 재생 장치의 기능 블록도를 도시한다.
도 3은 여기에 설명되는 태양에 따르는 예시적인 제어 장치의 기능 블록도를 도시한다.
도 4는 여기에 설명되는 태양에 따르는 예시적인 컨트롤러 인터페이스를 도시한다.
도 5는 여기에 설명되는 태양에 따르는 예시적인 복수의 네트워크 장치를 도시한다.
도 6은 여기에 설명되는 태양에 따르는 예시적인 네트워크 마이크로폰 장치의 기능 블록도를 도시한다.
도 7a 및 도 7b는 여기에 설명되는 태양에 따르는 예시적인 재생 장치의 배향의 각각에 대한 사시도를 도시한다.
도 8은 여기에 설명되는 태양에 따르는 재생 장치 배향에 기초한 사운드 입력을 처리하는 방법의 예시적인 흐름도 800을 도시한다.
도 9는 여기에 설명되는 태양에 따르는 예시적인 계산 설정의 상면도를 도시한다.
도면은 예시적인 실시예를 묘사하기 위한 것이나, 도면에 도시된 배열 및 수단에 발명이 제한되지 않음이 이해된다.
I. 개관
여기에 설명된 일부 실시예들은 재생 장치의 배향에 기초하여 트레이닝된 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정하는 것을 포함한다. 멀티-배향 장치 상의 마이크로폰 어레이는 장치의 상이한 배향을 거쳐 동일한 방향에서 나오는 사운드에 대한 응답 프로파일 및 상이한 감도를 가질 수 있다. 상이한 재생 장치 배향에서 마이크로폰 어레이의 트레이닝 응답 값(예를 들어, 캘리브레이션 응답 값, 측정된 응답 값)을 획득함에 있어서, 다양한 재생 장치 배향에 대한 일반적인 응답 프로파일이 생성될 수 있다. 수신된 사운드 입력 응답의 응답 프로파일과 일반적인 응답 프로파일을 비교할 때, 사운드 입력의 소스의 위치(예를 들어, 하나 이상의 차원에서의 방향)가 식별되거나 추정될 수 있다.
여기에 제공되는 예들은 방법, 재생 장치 및 시스템을 포함한다. 방법은 적어도 하나의 마이크로폰 어레이를 포함하는 재생 장치의 배향을 결정하는 단계 및 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 단계를 포함할 수 있다. 적어도 하나의 마이크로폰 어레이는 사운드 입력을 검출할 수 있고, 적어도 하나의 마이크로폰 트레이닝 응답 및 검출된 사운드 입력에 기초하여 사운드 입력의 소스의 위치 정보가 결정될 수 있다. 소스의 위치 정보에 기초하여 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정할 수 있고, 조정된 방향성 초점에 기초하여 상기 사운드 입력이 캡처될 수 있다.
다른 양상에서, 비-일시적이인 컴퓨터 판독 가능한 매체가 제공된다. 비-일시적 컴퓨터 판독 가능한 매체는 컴퓨팅 장치에 실행되어 컴퓨터 장치로 하여금 기능들을 수행하게 하는 명령들을 저장하고 있다. 기능들은 적어도 하나의 마이크로폰 어레이를 포함하는 재생 장치의 배향을 결정하는 기능 및 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 기능을 포함할 수 있다. 적어도 하나의 마이크로폰 어레이는 사운드 입력을 검출할 수 있고, 적어도 하나의 마이크로폰 트레이닝 응답 및 검출된 사운드 입력에 기초하여 사운드 입력의 소스의 위치 정보가 결정될 수 있다. 소스의 위치 정보에 기초하여 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정될 수 있고, 조정된 방향성 초점에 기초하여 상기 사운드 입력이 캡처될 수 있다.
또다른 양태에서, 장치가 제공된다. 장치는 프로세서 및 메모리를 포함한다. 메모리는 장치에 실행되어 시스템으로 하여금 기능들을 수행하게 하는 명령들을 저장하고 있다. 기능들은 적어도 하나의 마이크로폰 어레이를 포함하는 재생 장치의 배향을 결정하는 기능 및 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 기능을 포함할 수 있다. 적어도 하나의 마이크로폰 어레이는 사운드 입력을 검출할 수 있고, 적어도 하나의 마이크로폰 트레이닝 응답 및 검출된 사운드 입력에 기초하여 사운드 입력의 소스의 위치 정보가 결정될 수 있다. 소스의 위치 정보에 기초하여 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정될 수 있고, 조정된 방향성 초점에 기초하여 상기 사운드 입력이 캡처될 수 있다.
여기에서 설명되는 일부 예시가 "사용자" 및/또는 다른 엔티티(entity)와 같은 소정의 행위자에 의해 수행되는 기능을 참조할 수 있으나, 이는 단지 설명을 위한 것임이 이해되어야 한다. 청구범위는 청구범위 자체의 언어에 의하여 명시적으로 요구되지 않는 한 임의의 그러한 예시적인 행위자에 의한 액션을 요구하는 것으로 해석되어서는 안된다. 본 개시가 다양한 다른 실시예들을 포함함이 당업자에 의해 이해될 것이다.
II. 예시적인 동작 환경
도 1은 여기에 개시되는 하나 이상의 실시예가 실시 또는 구현될 수 있는 미디어 재생 시스템(100)의 예시적인 구성을 도시한다. 도시된 미디어 재생 시스템(100)은, 예컨대 주침실, 사무실, 식당 및 거실과 같은 여러 공간 및 장소를 가지는 예시적인 집 환경과 연관된다. 도 1의 예시에 도시된 바와 같이, 미디어 재생 시스템(100)은 재생 장치(102-124), 제어 장치(126 및 128) 및 유선 또는 무선 네트워크 라우터(130)를 포함한다.
예시적인 미디어 재생 시스템(100)의 상이한 컴포넌트와 상이한 컴포넌트가 어떻게 사용자에게 미디어 경험을 제공하도록 상호작용할 수 있는지에 관한 추가적인 논의가 이하의 부분에서 발견될 수 있다. 여기의 논의가 일반적으로 예시적인 미디어 재생 장치(100)를 참조할 수 있으나, 여기에 설명되는 기술이 다른 것들 중에서도 도 1에 도시된 집 환경 내의 적용에 제한되지 않는다. 예를 들어, 여기에 설명되는 기술은, 예컨대 레스토랑, 몰 또는 공항과 같은 상업 설정, SUV(sports utility vehicle), 버스 또는 자동차와 같은 차량, 선박 또는 배, 비행기 등과 같이 다수 구역 오디오가 요구될 수 있는 환경에서 유용할 수 있다.
a. 예시적인 재생 장치
도 2는 도 1의 미디어 재생 시스템(100)의 재생 장치(102-124) 중 하나 이상으로 구성될 수 있는 예시적인 재생 장치(200)의 기능 블록도를 도시한다. 재생 장치(200)는 프로세서(202), 소프트웨어 컴포넌트(204), 메모리(206), 오디오 처리 컴포넌트(208), 오디오 증폭기(210), 스피커(212), 무선 인터페이스(216) 및 유선 인터페이스(218)를 포함하는 네트워크 인터페이스(214) 및 마이크로폰(220)을 포함할 수 있다. 한 경우에, 재생 장치(200)는 스피커(212)를 포함하지 않고 재생 장치(200)를 외부 스피커에 연결하기 위한 스피커 인터페이스를 포함할 수 있다. 다른 경우에, 재생 장치(200)는 스피커(212)와 오디오 증폭기(210)를 포함하지 않고 재생 장치(200)를 외부 오디오 증폭기 또는 오디오비주얼 수신기에 연결하기 위한 오디오 인터페이스를 포함할 수 있다.
일 예시에서, 프로세서(202)는 메모리(206)에 저장된 명령어에 따라 입력 데이터를 처리하도록 구성되는 클럭 구동(clock-driven) 컴퓨팅 컴포넌트일 수 있다. 메모리(206)는 프로세서(202)에 의해 실행 가능한 명령어를 저장하도록 구성되는 유형의 컴퓨터 판독 가능 매체일 수 있다. 예를 들어, 메모리(206)는 어떠한 기능을 달성하기 위해 프로세서(202)에 의해 실행 가능한 소프트웨어 컴포넌트(204) 중 하나 이상으로 로딩될 수 있는 데이터 스토리지일 수 있다. 일 예시에서, 기능은 재생 장치(200)가 오디오 소스 또는 다른 재생 장치로부터 오디어 데이터를 검색하는 것을 수반할 수 있다. 다른 예시에서, 기능은 재생 장치(200)가 네트워크 상에서 다른 장치 또는 재생 장치로 오디오 데이터를 전송하는 것을 수반할 수 있다. 또 다른 예시에서, 기능은 다채널 오디오 환경을 생성하도록 재생 장치(200)를 하나 이상의 재생 장치와 페어링하는 것을 수반할 수 있다.
어떠한 기능은 재생 장치(200)가 오디오 콘텐트의 재생을 하나 이상의 다른 재생 장치와 동기화하는 것을 수반할 수 있다. 동시 재생 동안, 청취자는 재생 장치(200)와 하나 이상의 다른 재생 장치의 오디오 콘텐트의 재생 사이의 시간 지연 차이를 바람직하게는 감지하지 않을 수 있을 것이다. 여기에 참조로서 포함되는 미국 특허 제8,234,395호 "복수의 독립적으로 클로킹되는 디지털 데이터 처리 장치 사이에서 동작을 동기화하기 위한 시스템 및 방법(System and method for synchronizing operations among a plurality of independently clocked digital data processing devices)"은 재생 장치 사이의 오디오 재생 동기화에 대한 더 상세한 일부 예시를 제공한다.
메모리(206)는 재생 장치(200)가 일부인 하나 이상의 구역 및/또는 구역 그룹, 재생 장치(200)에 의해 액세스 가능한 오디오 소스 또는 재생 장치(200)(또는 일부 다른 재생 장치)가 연관될 수 있는 재생 큐와 같은 재생 장치(200)와 연관되는 데이터를 저장하도록 더 구성될 수 있다. 데이터는 주기적으로 갱신되고 재생 장치(200)의 상태를 설명하는 데에 사용되는 하나 이상의 상태 변수로서 저장될 수 있다. 메모리(206)는 또한 미디어 시스템의 다른 장치의 상태와 연관되고 장치 중 하나 이상이 시스템과 연관되는 가장 최신 데이터를 가지도록 장치 사이에서 때때로 공유되는 데이터를 포함할 수 있다. 다른 실시예도 가능하다.
오디오 처리 컴포넌트(208)는 하나 이상의 디지털 아날로그 변환기(DAC), 오디오 전처리 컴포넌트, 오디오 개선 컴포넌트 또는 디지털 신호 처리기(DSP) 등을 포함할 수 있다. 일 실시예에서, 오디오 처리 컴포넌트(208) 중 하나 이상은 프로세서(202)의 서브컴포넌트일 수 있다. 일 예시에서, 오디오 콘텐트는 오디오 처리 컴포넌트(208)에 의하여 처리 및/또는 의도적으로 변경되어 오디오 신호를 산출할 수 있다. 산출된 오디오 신호는 이후 증폭을 위해 오디오 증폭기(210)에 제공되고 스피커(212)를 통해 재생될 수 있다. 특히, 오디오 증폭기(210)는 스피커(212) 중 하나 이상을 구동하기 위한 수준으로 오디오 신호를 증폭하도록 구성되는 장치를 포함할 수 있다. 스피커(212)는 개별 트랜스듀서(transducer)(예컨대, "드라이버(driver)") 또는 하나 이상의 드라이버를 가지는 인클로저(enclosure)를 수반하는 완전한 스피커 시스템을 포함할 수 있다. 스피커(212)의 특정 드라이버는, 예컨대(예컨대 낮은 주파수를 위한) 서브우퍼(subwoofer),(예컨대 중간 주파수를 위한) 미드레인지(mid-range) 드라이버 및/또는(예컨대 높은 주파수를 위한) 트위터(tweeter)를 포함할 수 있다. 일부 경우에, 하나 이상의 스피커(212)의 각각의 트랜스듀서는 오디오 증폭기(210)의 개별의 대응하는 오디오 증폭기에 의해 구동될 수 있다. 재생 장치(200)에 의한 재생을 위한 아날로그 신호를 산출하는 것에 더하여, 오디오 처리 컴포넌트(208)는 재생을 위해 하나 이상의 다른 재생 장치로 전송될 오디오 콘텐트를 처리하도록 구성될 수 있다.
재생 장치(200)에 의해 처리 및/또는 재생될 오디오 콘텐트는 오디오 라인인(line-in) 입력 연결(예컨대, 자동 검출 3.5mm 오디오 라인인 연결) 또는 네트워크 인터페이스(214)를 통해서와 같이 외부 소스로부터 수신될 수 있다.
네트워크 인터페이스(214)는 데이터 네트워크 상에서 재생 장치(200)와 하나 이상의 다른 장치 사이의 데이터 흐름을 용이하게 하도록 구성될 수 있다. 이와 같이, 재생 장치(200)는 재생 장치(200)와 통신하는 하나 이상의 다른 재생 장치, 근거리 네트워크 내의 네트워크 장치, 또는 인터넷과 같은 광역 네트워크 상에서 오디오 콘텐트 소스로부터 데이터 네트워크 상에서 오디오 콘텐트를 수신하도록 구성될 수 있다. 일 예시에서, 재생 장치(200)에 의해 송신 및 수신되는 오디오 콘텐트 및 다른 신호는 IP(Internet Protocol) 기반 소스 어드레스 및 IP 기반 목적지 어드레스를 포함하는 디지털 패킷 데이터의 형태로 송신될 수 있다. 그러한 경우, 네트워크 인터페이스(214)는 재생 장치(200)로 향하는 데이터가 재생 장치(200)에 의해 적절하게 수신 및 처리되도록 디지털 패킷 데이터를 파싱하도록 구성될 수 있다.
도시된 바와 같이, 네트워크 인터페이스(214)는 무선 인터페이스(216) 및 유선 인터페이스(218)를 포함할 수 있다. 무선 인터페이스(216)는 재생 장치(200)가 통신 프로토콜(예컨대, IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.1lac, 802.15, 4G 모바일 통신 표준 등을 포함하는 임의의 무선 표준)에 따라 다른 장치(예컨대, 재생 장치(200)가 연관되는 데이터 네트워크 내의 다른 재생 장치, 스피커, 수신기, 네트워크 장치, 제어 장치)와 무선으로 통신하기 위한 네트워크 인터페이스 기능을 제공할 수 있다. 유선 인터페이스(218)는 재생 장치(200)가 통신 프로토콜(예컨대, IEEE 802.3)에 따라 다른 장치와 유선 연결 상에서 통신하기 위한 네트워크 인터페이스 기능을 제공할 수 있다. 도 2에 도시된 네트워크 인터페이스(214)는 무선 인터페이스(216)와 유선 인터페이스(218)를 모두 포함하나, 일부 실시예에서 네트워크 인터페이스(214)는 무선 인터페이스만 또는 유선 인터페이스만 포함할 수 있다.
마이크로폰(220)은 재생 장치(200)의 환경에서 사운드를 검출하도록 배열될 수 있다. 예를 들어, 마이크로폰은 재생 장치의 하우징의 외부 벽에 장착될 수 있다. 마이크로폰은 콘덴서(condenser) 마이크로폰, 일렉트레트(electret) 콘덴서 마이크로폰 또는 다이내믹(dynamic) 마이크로폰과 같이 지금 알려진 또는 추후에 개발되는 임의의 유형의 마이크로폰일 수 있다. 마이크로폰은 스피커(220)의 주파수 범위의 일부에 민감할 수 있다. 스피커(220) 중 하나 이상은 마이크로폰(220)과 역으로 동작할 수 있다. 일부 태양에서, 재생 장치(200)는 마이크로폰(220)을 가지지 않을 수 있다.
일 예시에서, 재생 장치(200) 및 하나의 다른 재생 장치가 페어링되어 오디오 콘텐트의 두 별도 오디오 컴포넌트를 재생할 수 있다. 예를 들어, 재생 장치(200)는 좌측 채널 오디오 컴포넌트를 재생하도록 구성될 수 있고, 다른 재생 장치는 우측 채널 오디오 컴포넌트를 재생하도록 구성될 수 있어, 오디오 콘텐트의 스테레오 효과를 산출 또는 향상시킬 수 있다. ("결합된 재생 장치"로도 언급되는) 페어링된 재생 장치는 다른 재생 장치와 동시에 오디오 콘텐트를 더 재생할 수 있다.
다른 예시에서, 재생 장치(200)는 단일의 통합된 재생 장치를 형성하도록 하나 이상의 다른 재생 장치와 음파적으로(sonically) 통합될 수 있다. 통합된 재생 장치는 페어링된 재생 장치나 통합되지 않은 재생 장치와 다르게 사운드를 처리 또는 복제(reproduce)하도록 구성될 수 있는데, 이는 통합된 재생 장치가 오디오 콘텐트가 렌더링 될 수 있는 추가적인 스피커 드라이버를 가질 수 있기 때문이다. 예를 들어, 재생 장치(200)가 낮은 주파수 범위 오디오 콘텐트를 렌더링하도록 설계된 재생 장치(즉, 서브우퍼)인 경우, 재생 장치(200)는 모든 주파수 범위 오디오 콘텐트를 렌더링하도록 설계된 재생 장치와 통합될 수 있다. 그러한 경우, 모든 주파수 범위 재생 장치는 낮은 주파수 재생 장치(200)와 통합되는 경우 오디오 콘텐트의 중간 및 높은 주파수 컴포넌트만을 렌더링하도록 구성될 수 있고, 낮은 주파수 범위 재생 장치(200)는 오디오 콘텐트의 낮은 주파수 컴포넌트를 렌더링한다. 통합된 재생 장치는 단일의 재생 장치 또는 또 다른 통합된 재생 장치와 더 페어링될 수 있다.
예를 들어, 소노스 사는"PLAY:1", "PLAY:3", "PLAY:5", "PLAYBAR", "CONNECT:AMP", "CONNECT" 및 "SUB"를 포함하는 어떠한 재생 장치를 현재 판매 제공한다(또는 제공해 왔다). 임의의 다른 과거, 현재 및/또는 미래의 재생 장치가 추가적으로 또는 대안적으로 여기에 개시되는 예시적인 실시예의 재생 장치를 구현하는 데에 사용될 수 있다. 추가적으로, 재생 장치는 도 2에 도시된 예시나 소노스 제품 제공에 제한되지 않음이 이해된다. 예를 들어, 재생 장치는 유선 또는 무선 헤드폰을 포함할 수 있다. 다른 예시에서, 재생 장치는 개인 모바일 미디어 재생 장치를 위한 도킹 스테이션을 포함하거나 이와 상호작용할 수 있다. 또 다른 예시에서, 재생 장치는 텔레비전, 조명 기구 또는 실내 또는 실외 사용을 위한 일부 다른 장치와 같은 다른 장치 또는 컴포넌트에 통합될 수 있다.
b. 예시적인 재생 구역 구성
다시 도 1의 미디어 재생 시스템(100)을 참조하면, 환경은 각각이 하나 이상의 재생 장치를 가지는 하나 이상의 재생 구역을 가질 수 있다. 미디어 재생 시스템(100)은 하나 이상의 재생 구역으로 성립될 수 있고, 도 1에 도시된 예시적인 구성에 도달하도록 그 후에 하나 이상의 구역이 추가 또는 제거될 수 있다. 각각의 구역에는 사무실, 욕실, 주침실, 침실, 주방, 식당, 거실 및/또는 발코니와 같은 상이한 공간 또는 장소에 따라 이름이 주어질 수 있다. 한 경우에, 단일의 재생 구역은 다수의 공간 또는 장소를 포함할 수 있다. 다른 경우에, 단일의 공간 또는 장소는 다수의 재생 구역을 포함할 수 있다.
도 1에 도시된 바와 같이, 발코니, 식당, 주방, 욕실, 사무실 및 침실 구역은 각각 하나의 재생 장치를 가지고, 거실과 주침실 구역은 각각 다수의 재생 장치를 가진다. 거실 구역에서, 재생 장치(104, 106, 108 및 110)는 개별 재생 장치, 하나 이상의 결합된 재생 장치, 하나 이상의 통합된 재생 장치 또는 그 임의의 조합으로서 동시에 오디오 콘텐트를 재생하도록 구성될 수 있다. 유사하게, 주침실의 경우, 재생 장치(122 및 124)는 개별 재생 장치, 결합된 재생 장치 또는 통합된 재생 장치로서 동시에 오디오 콘텐트를 재생하도록 구성될 수 있다.
일 예시에서, 도 1의 환경에서의 하나 이상의 재생 구역은 각각 상이한 오디오 콘텐트를 재생하고 있을 수 있다. 예를 들어, 사용자는 발코니 구역에서 그릴에 구우면서 재생 장치(102)에 의해 재생되고 있는 힙합 음악을 듣고 있을 수 있는 한편, 다른 사용자는 주방 구역에서 음식을 준비하면서 재생 장치(114)에 의해 재생되고 있는 클래식 음악을 듣고 있을 수 있다. 다른 예시에서, 재생 구역은 다른 재생 구역과 동시에 동일한 오디오 콘텐트를 재생할 수 있다. 예를 들어, 사용자는 발코니 구역에서 재생 장치(102)에 의해 재생되고 있는 것과 같은 락 음악을 재생 장치(118)가 재생하고 있는 사무실 구역에 있을 수 있다. 그러한 경우, 재생 장치(102 및 118)는 사용자가 다른 재생 구역 사이를 이동하면서 사운드 내어 재생되고 있는 오디오 콘텐트를 끊김없이(또는 적어도 실질적으로 끊김없이) 즐길 수 있도록 동시에 락 음악을 재생하고 있을 수 있다. 재생 구역 사이의 동기화는 이전에 참조된 미국 특허 제8,234,395호에 설명된 재생 장치 사이의 동기화와 유사한 방식으로 달성될 수 있다.
위에서 제안된 바와 같이, 미디어 재생 시스템(100)의 구역 구성은 동적으로 수정될 수 있고, 일부 실시예에서, 미디어 재생 시스템(100)은 다수의 구성을 지원한다. 예를 들어, 사용자가 하나 이상의 재생 장치를 구역으로 또는 구역으로부터 물리적으로 이동하는 경우, 미디어 재생 시스템(100)은 변화를 수용하도록 재구성될 수 있다. 예를 들어, 사용자가 재생 장치(102)를 발코니 구역에서 사무실 구역으로 물리적으로 이동하는 경우, 사무실 구역은 이제 재생 장치(118)와 재생 장치(102) 둘 다를 포함할 수 있다. 재생 장치(102)는 제어 장치(126 및 128)와 같은 제어 장치를 통하여 요구되는 경우 오피스 구역과 페어링 또는 그룹핑 및/또는 재명명될 수 있다. 한편, 아직 재생 구역이 아닌 집 환경 내 특정 영역으로 하나 이상의 재생 장치가 이동되는 경우, 새로운 재생 구역이 특정 영역에 대하여 생성될 수 있다.
또한, 미디어 재생 시스템(100)의 상이한 재생 구역은 동적으로 구역 그룹으로 조합되거나 개별 재생 구역으로 나누어질 수 있다. 예를 들어, 식당 구역 및 주방 구역(114)은 저녁 파티를 위한 구역 그룹으로 조합되어 재생 장치(112 및 114)가 동시에 오디오 콘텐트를 렌더링할 수 있다. 한편, 사용자가 거실 장소에서 음악을 청취하기를 원하면서 다른 사용자가 텔레비전을 보기를 원하는 경우, 거실 구역은 재생 장치(104)를 포함하는 텔레비전 구역과 재생 장치(106, 108 및 110)을 포함하는 청취 구역으로 나누어질 수 있다.
c. 예시적인 제어 장치
도 3은 미디어 재생 시스템(100)의 제어 장치(126 및 128) 중 하나 또는 둘 다로 구성될 수 있는 예시적인 제어 장치(300)의 기능 블록도를 도시한다. 도시된 바와 같이, 제어 장치(300)는 프로세서(302), 메모리(304), 네트워크 인터페이스(306), 사용자 인터페이스(308), 마이크로폰(310) 및 소프트웨어 컴포넌트(312)를 포함할 수 있다. 일 예시에서, 제어 장치(300)는 미디어 재생 시스템(100)을 위한 전용 컨트롤러일 수 있다. 다른 예시에서, 제어 장치(300)는 아이폰(iPhone)™, 아이패드(iPad)™ 또는 임의의 다른 스마트폰, 태블릿 또는 네트워크 장치(예컨대 PC 또는 맥(Mac)™과 같은 네트워킹된 컴퓨터)와 같이 미디어 재생 시스템 컨트롤러 애플리케이션 소프트웨어가 설치될 수 있는 네트워크 장치일 수 있다.
프로세서(302)는 미디어 재생 시스템(100)의 사용자 액세스, 제어 및 구성을 가능하게 하는 것에 관련되는 기능을 수행하도록 구성될 수 있다. 메모리(304)는 그러한 기능을 수행하도록 프로세서(302)에 의해 실행 가능한 소프트웨어 컴포넌트 중 하나 이상이 로드될 수 있는 데이터 스토리지일 수 있다. 메모리(304)는 또한 미디어 재생 시스템 컨트롤러 애플리케이션 소프트웨어 및 사용자와 미디어 재생 시스템(100)과 연관되는 다른 데이터를 저장하도록 구성될 수 있다.
일 예시에서, 네트워크 인터페이스(306)는 산업 표준(예컨대, 적외선, 라디오, IEEE 802.3을 포함하는 유선 표준, IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.1lac, 802.15, 4G 모바일 통신 표준을 포함하는 무선 표준 등)에 기초할 수 있다. 네트워크 인터페이스(306)는 제어 장치(300)가 미디어 재생 시스템(100) 내 다른 장치와 통신하기 위한 수단을 제공할 수 있다. 일 예시에서, (예컨대, 상태 변수와 같은) 정보 및 데이터가 네트워크 인터페이스(306)를 통하여 제어 장치(300)와 다른 장치 사이에서 통신될 수 있다. 예를 들어, 네트워크 인터페이스(306)를 통하여 미디어 재생 시스템(100)에서의 재생 구역 및 구역 그룹 구성이 제어 장치(300)에 의해 재생 장치 또는 다른 네트워크 장치로부터 수신되거나 제어 장치(300)에 의해 다른 재생 장치 또는 네트워크 장치로 송신될 수 있다. 일부 경우에, 다른 네트워크 장치는 다른 제어 장치일 수 있다.
음량 제어와 오디오 재생 제어와 같은 재생 장치 제어 명령 또한 네트워크 인터페이스(306)를 통하여 제어 장치(300)로부터 재생 장치로 통신될 수 있다. 위에서 제안된 바와 같이, 미디어 재생 시스템(100)의 구성에 대한 변경 또한 제어 장치(300)를 사용하여 사용자에 의해 수행될 수 있다. 구성 변경은 다른 것들 중에서도 구역으로/으로부터 하나 이상의 재생 장치를 추가/제거, 구역 그룹으로/으로부터 하나 이상의 구역을 추가/제거, 결합된 또는 통합된 재생 장치를 형성, 결합된 또는 통합된 재생 장치로부터 하나 이상의 제어 장치를 분리하는 것을 포함할 수 있다. 따라서, 제어 장치(300)가 전용 컨트롤러이든 미디어 재생 시스템 컨트롤러 애플리케이션 소프트웨어가 설치된 네트워크 장치이든, 제어 장치(300)는 때때로 컨트롤러로서 지칭될 수 있다.
제어 장치(300)는 마이크로폰(310)을 포함할 수 있다. 마이크로폰(310)은 제어 장치(300)의 환경에서 사운드를 검출하도록 배열될 수 있다. 마이크로폰(310)은 콘덴서 마이크로폰, 일렉트레트 콘덴서 마이크로폰 또는 다이내믹 마이크로폰과 같이 지금 알려진 또는 추후에 개발되는 임의의 유형의 마이크로폰일 수 있다. 마이크로폰은 주파수 범위의 일부에 민감할 수 있다. 둘 이상의 마이크로폰(310)이 오디오 소스(예컨대, 음성, 들을 수 있는 사운드)의 위치 정보를 캡쳐 및/또는 배경 잡음을 필터링하는 것을 돕도록 배열될 수 있다.
제어 장치(300)의 사용자 인터페이스(308)는 도 4에 도시된 컨트롤러 인터페이스(400)와 같은 컨트롤러 인터페이스를 제공함으로써 미디어 재생 시스템(100)의 사용자 액세스 및 제어를 용이하게 하도록 구성될 수 있다. 컨트롤러 인터페이스(400)는 재생 제어 영역(410), 재생 구역 영역(420), 재생 상태 영역(430), 재생 큐 영역(440) 및 오디오 콘텐트 소스 영역(450)을 포함한다. 도시된 사용자 인터페이스(400)는 도 3의 제어 장치(300)(및/또는 도 1의 제어 장치(126 및 128))와 같은 네트워크 장치 상에 제공될 수 있고 미디어 재생 시스템(100)과 같은 미디어 재생 시스템을 제어하도록 사용자에 의해 액세스될 수 있는 사용자 인터페이스의 단지 하나의 예시이다. 미디어 재생 시스템에 비슷한 제어 액세스를 제공하도록 다양한 포맷, 스타일 및 상호작용 시퀀스의 다른 사용자 인터페이스가 하나 이상의 네트워크 장치 상에 대안적으로 구현될 수 있다.
재생 제어 영역(410)은 선택된 재생 구역 또는 구역 그룹 내 재생 장치가 재생 또는 일시 정지, 빨리 감기, 뒤로 감기, 다음으로 스킵, 이전으로 스킵, 셔플(shuffle) 모드 시작/끝, 반복 모드 시작/끝, 크로스 페이드(cross fade) 모드 시작/끝 하도록(예컨대, 터치의 방식으로 또는 커서를 사용하여) 선택 가능한 아이콘을 포함할 수 있다. 재생 제어 영역(410)은 또한 다른 가능성 중에서도 이퀄라이제이션(equalization) 설정 및 재생 음량을 변경하도록 선택 가능한 아이콘을 포함할 수 있다.
재생 구역 영역(420)은 미디어 재생 시스템(100) 내의 재생 구역의 표상(representation)을 포함할 수 있다. 일부 실시예에서, 다른 가능성 중에서도 결합된 구역의 생성, 구역 그룹의 생성, 구역 그룹의 분리 및 구역 그룹의 재명명과 같은 미디어 재생 시스템의 재생 구역을 관리 또는 구성하기 위한 추가적인 선택 가능한 아이콘을 띄우도록 재생 구역의 그래픽 표상이 선택 가능할 수 있다.
예를 들어, 도시된 바와 같이, "그룹" 아이콘이 재생 구역의 그래픽 표상 각각 내에 제공될 수 있다. 특정 구역의 그래픽 표상 내에 제공되는 "그룹" 아이콘은 특정 구역과 그룹핑될 미디어 재생 시스템의 하나 이상의 다른 구역을 선택하기 위한 옵션을 띄우도록 선택 가능할 수 있다. 그룹핑되면, 특정 구역과 그룹핑된 구역 내 재생 장치는 특정 구역 내 재생 장치와 동시에 오디오 콘텐트를 재생하도록 구성될 것이다. 비슷하게, "그룹" 아이콘이 구역 그룹의 그래픽 표상 내에 제공될 수 있다. 이러한 경우, "그룹" 아이콘은 구역 그룹으로부터 제거될 구역 그룹 내 하나 이상의 구역을 선택 해제하기 위한 옵션을 띄우도록 선택 가능할 수 있다. 사용자 인터페이스(400)와 같은 사용자 인터페이스를 통하여 구역을 그룹핑 및 그룹핑 해제 하기 위한 다른 상호 작용 및 구현도 가능하다. 재생 구역 영역(420) 내 재생 구역의 표상은 재생 구역 또는 구역 그룹이 변경됨에 따라 동적으로 갱신될 수 있다.
재생 상태 영역(430)은 선택된 재생 구역 또는 구역 그룹에서 현재 재생되고 있는, 이전에 재생된 또는 다음에 재생하기로 스케줄된 오디오 콘텐트의 그래픽 표상을 포함할 수 있다. 재생 구역 영역(420) 및/또는 재생 상태 영역(430) 내에서와 같이 선택된 재생 구역 또는 구역 그룹은 사용자 인터페이스 상에서 시각적으로 구분될 수 있다. 그래픽 표상은 트랙 타이틀, 아티스트 이름, 앨범 이름, 앨범 연도, 트랙 길이 및 사용자 인터페이스(400)를 통하여 미디어 재생 시스템을 제어하는 경우 사용자가 알기에 유용할 수 있는 다른 관련 정보를 포함할 수 있다.
재생 큐 영역(440)은 선택된 재생 구역 또는 구역 그룹과 연관되는 재생 큐 내의 오디오 콘텐트의 그래픽 표상을 포함할 수 있다. 일부 실시예에서, 각각의 재생 구역 또는 구역 그룹은 재생 구역 또는 구역 그룹에 의한 재생을 위한 0 이상의 오디오 항목에 대응하는 정보를 포함하는 재생 큐와 연관될 수 있다. 예를 들어, 재생 큐 내의 각각의 오디오 항목은 아마 재생 장치에 의한 재생을 위해 재생 구역 또는 구역 그룹 내 재생 장치에 의해 로컬 오디오 콘텐트 소스 또는 네트워킹된 오디오 콘텐트 소스로부터 오디오 항목을 탐색 및/또는 검색하는 데에 사용될 수 있는 URI(uniform resource identifier), URL(uniform resource locator) 또는 일부 다른 식별자를 포함할 수 있다.
일 예시에서, 재생 목록이 재생 큐에 부가될 수 있으며, 그러한 경우 재생 목록 내 각각의 오디오 항목에 대응하는 정보가 재생 큐에 부가될 수 있다. 다른 예시에서, 재생 큐 내 오디오 항목은 재생 목록으로서 저장될 수 있다. 추가적인 예시에서, 재생 구역 또는 구역 그룹이 재생 기간을 가지는 개별 오디오 항목 대신 멈출 때까지 계속 재생할 수 있는 인터넷 라디오와 같은 계속적으로 스트리밍하는 오디오 콘텐트를 재생하고 있는 경우, 재생 큐는 비어 있거나, 차 있더라도 "사용되지 않을" 수 있다. 대안적인 실시예에서, 재생 큐는 재생 구역 또는 구역 그룹이 그러한 항목을 재생하고 있는 경우 인터넷 라디오 및/또는 다른 스트리밍 오디오 콘텐트 항목을 포함할 수 있고 "사용될" 수 있다. 다른 예시도 또한 가능하다.
재생 구역 또는 구역 그룹이 "그룹핑" 또는 "그룹핑 해제"되는 경우, 영향을 받는 재생 구역 또는 구역 그룹과 연관되는 재생 큐는 소거되거나 재연관될 수 있다. 예를 들어, 제1 재생 큐를 포함하는 제1 재생 구역이 제2 재생 큐를 포함하는 제2 재생 구역과 그룹핑되는 경우, 수립된 구역 그룹은 처음에는 비어 있고(제2 재생 구역이 제1 재생 구역에 부가된 경우에서와 같이) 제1 재생 큐로부터의 오디오 항목을 포함하고(제1 재생 구역이 제2 재생 구역에 부가된 경우에서와 같이) 제2 재생 큐로부터의 오디오 항목 또는 제1 및 제2 재생 큐 둘 다로부터의 오디오 항목의 조합을 포함하는 연관된 재생 큐를 가질 수 있다. 후속적으로, 수립된 구역 그룹이 그룹핑 해제되는 경우, 결과로 나오는 제1 재생 구역은 이전의 제1 재생 큐와 재연관될 수 있거나, 비어 있거나 수립된 구역 그룹이 그룹핑 해제되기 전에 수립된 구역 그룹과 연관된 재생 큐로부터의 오디오 항목을 포함하는 새로운 재생 큐와 연관될 수 있다. 유사하게, 결과로 나오는 제2 재생 구역은 이전의 제2 재생 큐와 재연관될 수 있거나, 비어 있거나 수립된 구역 그룹이 그룹핑 해제되기 전에 수립된 구역 그룹과 연관된 재생 큐로부터의 오디오 항목을 포함하는 새로운 재생 큐와 연관될 수 있다. 다른 예시도 가능하다.
다시 도 4의 사용자 인터페이스(400)를 참조하면, 재생 큐 영역(440) 내의 오디오 콘텐트의 그래픽 표상은 트랙 타이틀, 아티스트 이름, 트랙 길이 및 재생 큐 내의 오디오 콘텐트와 연관되는 다른 관련 정보를 포함할 수 있다. 일 예시에서, 오디오 콘텐트의 그래픽 표상은 재생 큐 및/또는 재생 큐 내에 표시되는 오디오 콘텐트를 관리 및/또는 조작하기 위해 추가적인 선택 가능한 아이콘을 띄우도록 선택 가능할 수 있다. 예를 들어, 표시된 오디오 콘텐트는 다른 가능성 중에서도 재생 큐로부터 제거, 재생 큐 내의 다른 위치로 이동, 또는 즉시 또는 임의의 현재 재생 중인 오디오 콘텐트 후에 재생되도록 선택될 수 있다. 재생 구역 또는 구역 그룹과 연관되는 재생 큐는 재생 구역 또는 구역 그룹 내 하나 이상의 재생 장치, 재생 구역 또는 구역 그룹 내에 있지 않은 재생 장치 및/또는 일부 다른 지정된 장치 상에서 메모리에 저장될 수 있다.
오디오 콘텐트 소스 영역(450)은 오디오 콘텐트가 선택된 재생 구역 또는 구역 그룹에 의해 검색 및 재생될 수 있는 선택 가능한 오디오 콘텐트 소스의 그래픽 표상을 포함할 수 있다.
d. 예시적인 오디오 콘텐트 소스
앞서 말한 바와 같이, 구역 또는 구역 그룹 내 하나 이상의 재생 장치는 다양한 이용 가능한 오디오 콘텐트 소스로부터(예컨대, 오디오 콘텐트를 위한 대응하는 URI 또는 URL에 따라) 재생 오디오 콘텐트를 검색하도록 구성될 수 있다. 일 예시에서, 오디오 콘텐트는 대응하는 오디오 콘텐트 소스로부터 직접(예컨대, 라인인 연결) 재생 장치에 의해 검색될 수 있다. 다른 예시에서, 오디오 콘텐트는 하나 이상의 다른 재생 장치 또는 네트워크 장치를 통하여 네트워크 상에서 재생 장치로 제공될 수 있다.
예시적인 오디오 콘텐트 소스는, 다른 가능성 중에서도, 도 1의 미디어 재생 시스템(100)과 같은 미디어 재생 시스템 내 하나 이상의 재생 장치의 메모리,(예컨대, 제어 장치, 네트워크 가능 개인용 컴퓨터 또는 네트워크 부착 스토리지(networked-attached storage(NAS))와 같은) 하나 이상의 네트워크 장치 상의 로컬 음악 라이브러리, 인터넷을 통해 오디오 콘텐트를 제공하는 스트리밍 오디오 서비스(예컨대, 클라우드), 또는 재생 장치 또는 네트워크 장치 상에서 라인인 입력 연결을 통하여 미디어 재생 시스템에 연결되는 오디오 소스를 포함할 수 있다.
일부 실시예에서, 오디오 콘텐트 소스는 도 1의 미디어 재생 시스템(100)과 같은 미디어 재생 시스템으로부터 정기적으로 추가 또는 제거될 수 있다. 일 예시에서, 하나 이상의 오디오 콘텐트 소스가 추가, 제거 또는 갱신될 때마다 오디오 항목의 인덱싱(indexing)이 수행될 수 있다. 오디오 항목의 인덱싱은 미디어 재생 시스템 내 재생 장치에 의해 액세스 가능한 네트워크 상에서 공유되는 모든 폴더/디렉토리에서 식별 가능한 오디오 항목을 스캐닝하는 것과 메타데이터(예컨대, 다른 것들 중에서도, 타이틀, 아티스트, 앨범, 트랙 길이)와 탐색되는 각각의 식별 가능한 오디오 항목에 대한 URI 또는 URL과 같은 다른 연관되는 정보를 포함하는 오디오 콘텐트 데이터베이스를 생성 또는 갱신하는 것을 수반할 수 있다. 오디오 콘텐트 소스를 관리 및 유지하기 위한 다른 예시도 가능하다.
재생 장치, 제어 장치, 재생 구역 구성 및 미디어 콘텐트 소스에 관한 위의 논의는 아래에서 설명되는 기능 및 방법이 구현될 수 있는 동작 환경의 일부 예시만을 제공한다. 여기에 명시적으로 설명되지 않은 미디어 재생 시스템, 재생 장치 및 네트워크 장치의 다른 동작 환경 및 구성도 기능 및 방법의 구현에 적합하고 적용 가능할 수 있다.
e. 예시적인 복수의 네트워크 장치
도 5는 음성 제어에 기초하여 오디오 재생 경험을 제공하도록 구성될 수 있는 예시적인 복수의 장치(500)를 도시한다. 당업자는 도 5에 도시된 장치가 예시의 목적일 뿐이고 상이한 및/또는 추가적인 장치를 포함하는 변형이 가능할 수 있음을 알 것이다. 도시된 바와 같이, 복수의 장치(500)는 컴퓨팅 장치(504, 506 및 508), 네트워크 마이크로폰 장치(NMD)(512, 514 및 516), 재생 장치(PBD)(532, 534, 536 및 538) 및 컨트롤러 장치(CR)(522)를 포함한다.
복수의 장치(500) 각각은, 다른 가능성 중에서 광역 네트워크(WAN), 근거리 네트워크(LAN) 및 개인 영역 네트워크(PAN)와 같은 하나 이상의 유형의 네트워크 상에서, 다른 예시 중에서도 NFC, 블루투스(Bluetooth), 이더넷(Ethernet) 및 IEEE 802.11과 같은 하나 이상의 네트워크 프로토콜에 따라 복수의 장치 중 하나 이상의 다른 장치와 통신을 수립할 수 있는 네트워크 가능 장치일 수 있다.
도시된 바와 같이, 컴퓨팅 장치(504, 506 및 508)는 클라우드 네트워크(502)의 일부일 수 있다. 클라우드 네트워크(502)는 추가적인 컴퓨팅 장치를 포함할 수 있다. 일 예시에서, 컴퓨팅 장치(504, 506 및 508)는 상이한 서버일 수 있다. 다른 예시에서, 컴퓨팅 장치(504, 506 및 508) 중 둘 이상은 단일 서버의 모듈일 수 있다. 비슷하게, 컴퓨팅 장치(504, 506 및 508) 각각은 하나 이상의 모듈 또는 서버를 포함할 수 있다. 여기에서 설명의 편의를 위해, 컴퓨팅 장치(504, 506 및 508) 각각은 클라우드 네트워크(502) 내에서 특정 기능을 수행하도록 구성될 수 있다. 예를 들어, 컴퓨팅 장치(508)는 스트리밍 음악 서비스를 위한 오디오 콘텐트의 소스일 수 있다.
도시된 바와 같이, 컴퓨팅 장치(504)는 통신 경로(542)를 통하여 NMD(512, 514 및 516)와 인터페이스하도록 구성될 수 있다. NMD(512, 514 및 516)는 하나 이상의 "스마트 홈" 시스템의 컴포넌트일 수 있다. 한 경우에, NMD(512, 514 및 516)는 도 1의 장치의 분포와 유사하게 집 도처에 물리적으로 분산될 수 있다. 다른 경우에, NMD(512, 514 및 516) 중 둘 이상은 물리적으로 서로 상대적으로 가까이 근접하여 위치될 수 있다. 통신 경로(542)는 다른 가능성 중에서도 인터넷을 포함하는 WAN, LAN 및/또는 PAN과 같은 하나 이상의 유형의 네트워크를 포함할 수 있다.
일 예시에서, NMD(512, 514 및 516) 중 하나 이상은 주로 오디오 검출하도록 구성되는 장치일 수 있다. 다른 예시에서, NMD(512, 514 및 516) 중 하나 이상은 다양한 주된 쓸모를 가지는 장치의 컴포넌트일 수 있다. 예를 들어, 도 2 및 3에 관하여 위에서 논의된 바와 같이, NMD(512, 514 및 516) 중 하나 이상은 재생 장치(200)의 마이크로폰(220) 또는 네트워크 장치(300)의 마이크로폰(310)일 수 있다. 또한, 일부 경우에, NMD(512, 514 및 516) 중 하나 이상은 재생 장치(200) 또는 네트워크 장치(300)일 수 있다. 일 예시에서, NMD(512, 514 및/또는 516) 중 하나 이상은 마이크로폰 어레이로 배열되는 다수의 마이크로폰을 포함할 수 있다.
도시된 바와 같이, 컴퓨팅 장치(506)는 통신 경로(544)를 통하여 CR(522) 및 PBD(532, 534, 536 및 538)와 인터페이스하도록 구성될 수 있다. 일 예시에서, CR(522)은 도 2의 네트워크 장치(200)와 같은 네트워크 장치일 수 있다. 따라서, CR(522)은 도 4의 컨트롤러 인터페이스(400)를 제공하도록 구성될 수 있다. 유사하게, PBD(532, 534, 536 및 538)는 도 3의 재생 장치(300)와 같은 재생 장치일 수 있다. 이와 같이, PBD(532, 534, 536 및 538)는 도 1에 도시된 바와 같이 집 도처에 물리적으로 분산될 수 있다. 예시의 목적으로, PBD(536 및 538)는 결합된 구역(530)의 일부일 수 있고, PBD(532 및 534)는 자신의 각각의 구역의 일부일 수 있다. 위에서 설명한 바와 같이, PBD(532, 534, 536 및 538)는 동적으로 결합, 그룹핑, 결합 해제 및 그룹핑 해제될 수 있다. 통신 경로(544)는 다른 가능성 중에서도 인터넷을 포함하는 WAN, LAN 및/또는 PAN과 같은 하나 이상의 유형의 네트워크를 포함할 수 있다.
일 예시에서, NMD(512, 514 및 516)와 같이, CR(522) 및 PBD(532, 534, 536 및 538)도 하나 이상의 "스마트 홈" 시스템의 컴포넌트일 수 있다. 한 경우에, PBD(532, 534, 536 및 538)는 NMD(512, 514 및 516)와 같은 집 도처에 분산될 수 있다. 또한, 위에서 제안된 바와 같이, PBD(532, 534, 536 및 538) 중 하나 이상은 NMD(512, 514 및 516) 중 하나 이상일 수 있다.
NMD(512, 514 및 516)는 근거리 네트워크의 일부일 수 있으며, 통신 경로(542)는 WAN(도시되지 않은 통신 경로) 상에서 NMD(512, 514 및 516)의 근거리 네트워크를 컴퓨팅 장치(504)에 링크하는 액세스 포인트를 포함할 수 있다. 비슷하게, NMD(512, 514 및 516) 각각은 그러한 액세스 포인트를 통하여 서로 통신할 수 있다.
유사하게, CR(522) 및 PBD(532, 534, 536 및 538)는 근거리 네트워크 및/또는 이전 부분에서 논의된 바와 같은 로컬 재생 네트워크의 일부일 수 있고, 통신 경로(544)는 WAN 상에서 CR(522) 및 PBD(532, 534, 536 및 538)의 근거리 네트워크 및/또는 로컬 재생 네트워크를 컴퓨팅 장치(506)에 링크하는 액세스 포인트를 포함할 수 있다. 이와 같이, CR(522) 및 PBD(532, 534, 536 및 538) 각각은 또한 그러한 액세스 포인트를 통하여 서로 통신할 수 있다.
일 예시에서, 통신 경로(542 및 544)는 같은 액세스 포인트를 포함할 수 있다. 일 예시에서, NMD(512, 514 및 516), CR(522) 및 PBD(532, 534, 536 및 538) 각각은 집을 위한 같은 액세스 포인트를 통하여 클라우드 네트워크(502)에 액세스할 수 있다.
도 5에 도시된 바와 같이, NMD(512, 514 및 516), CR(522) 및 PBD(532, 534, 536 및 538) 각각은 또한 통신 수단(546)을 통하여 다른 장치들 중 하나 이상과 직접 통신할 수 있다. 여기에서 설명되는 통신 수단(546)은 하나 이상의 유형의 네트워크 상에서 하나 이상의 네트워크 프로토콜에 따르는 장치 사이의 하나 이상의 형태의 통신을 수반, 및/또는 하나 이상의 다른 네트워크 장치를 통한 통신을 수반할 수 있다. 예를 들어, 통신 수단(546)은 예컨대, 다른 가능성 중에서, 블루투스™(IEEE 802.15), NFC, 무선 다이렉트(Wireless direct) 및/또는 독점 무선(Proprietary wireless) 중 하나 이상을 포함할 수 있다.
일 예시에서, CR(522)은 블루투스™ 상에서 NMD(512)와 통신할 수 있고, 다른 근거리 네트워크 상에서 PBD(534)와 통신할 수 있다. 다른 예시에서, NMD(514)는 다른 근거리 네트워크 상에서 CR(522)과 통신할 수 있고, 블루투스 상에서 PBD(536)과 통신할 수 있다. 추가적인 예시에서, PBD(532, 534, 536 및 538) 각각은 로컬 재생 네트워크 상에서 스패닝 트리 프로토콜(spanning tree protocol)에 따라 서로 통신할 수 있고, 각각은 로컬 재생 네트워크와 다른 근거리 네트워크 상에서 CR(522)과 통신할 수 있다. 다른 예시 또한 가능하다.
일부 경우에, NMD(512, 514 및 516), CR(522) 및 PBD(532, 534, 536 및 538) 사이의 통신 수단은 장치 사이의 통신의 유형, 네트워크 상황 및/또는 지연(latency) 요구에 따라 변할 수 있다. 예를 들어, PBD(532, 534, 536 및 538)를 가지는 집에 NMD(516)가 처음 도입되는 경우 통신 수단(546)이 사용될 수 있다. 한 경우에, NMD(516)는 NFC를 통하여 PBD(538)로 NMD(516)에 대응하는 식별 정보를 송신할 수 있고, PBD(538)는 응답하여 NFC(또는 일부 다른 형태의 통신)를 통하여 NMD(516)로 근거리 네트워크 정보를 송신할 수 있다. 그러나, 일단 NMD(516)가 집 안에 구성되면, NMD(516)과 PBD(538) 사이의 통신 수단은 변할 수 있다. 예를 들어, NMD(516)는 후속적으로 통신 경로(542), 클라우드 네트워크(502) 및 통신 경로(544)를 통하여 PBD(538)와 통신할 수 있다. 다른 예시에서, NMD와 PBD는 로컬 통신 수단(546)을 통하여 통신하지 않을 수 있다. 추가적인 예시에서, NMD와 PBD는 주로 로컬 통신 수단(546)을 통하여 통신할 수 있다. 다른 예시도 가능하다.
일 예시에서, NMD(512, 514 및 516)는 PBD(532, 534, 536 및 538)를 제어하기 위한 음성 입력을 수신하도록 구성될 수 있다. 이용 가능한 제어 명령은 다른 가능성 중에서도 재생 음량 제어, 재생 수송 제어, 음악 소스 선택 및 그룹핑과 같은 앞서 논의된 임의의 미디어 재생 시스템 제어를 포함할 수 있다. 일 예시에서, NMD(512)는 PBD(532, 534, 536 및 538) 중 하나 이상을 제어하기 위한 음성 입력을 수신할 수 있다. 음성 입력을 수신하는 것에 응답하여, NMD(512)는 통신 경로(542)를 통하여 처리를 위해 컴퓨팅 장치(504)로 음성 입력을 송신할 수 있다. 일 예시에서, 컴퓨팅 장치(504)는 음성 입력을 상당하는 텍스트 명령으로 변환하고 텍스트 명령을 파싱하여 명령을 식별할 수 있다. 컴퓨팅 장치(504)는 이후 후속적으로 텍스트 명령을 컴퓨팅 장치(506)로 송신할 수 있다. 다른 예시에서, 컴퓨팅 장치(504)는 음성 입력을 상당하는 텍스트 명령으로 변환하고 이후 후속적으로 텍스트 명령을 컴퓨팅 장치(506)로 송신할 수 있다. 컴퓨팅 장치(506)는 이후 텍스트 명령을 파싱하여 하나 이상의 재생 명령을 식별할 수 있다.
예를 들어, 텍스트 명령이 "'구역 1'에서 '스트리밍 서비스 1'로부터 '아티스트 1'에 의한 '트랙 1'을 재생하라"인 경우, 컴퓨팅 장치(506)는(i) "스트리밍 서비스 1"로부터 이용 가능한 "아티스트 1"에 의한 "트랙 1"을 위한 URL, 및(ii) "구역 1" 내의 적어도 하나의 재생 장치를 식별할 수 있다. 이러한 예시에서, "스트리밍 서비스 1"로부터의 "아티스트 1"에 의한 "트랙 1"을 위한 URL은 컴퓨팅 장치(508)를 가리키는 URL일 수 있고 "구역 1"은 결합된 구역(530)일 수 있다. 이와 같이, URL과 PBD(536 및 538) 중 하나 또는 둘 다를 식별한 후, 컴퓨팅 장치(506)는 통신 경로(544)를 통하여 PBD(536 및 538) 중 하나 또는 둘 다로 재생을 위한 식별된 URL을 송신할 수 있다. PBD(536 및 538) 중 하나 또는 둘 다는 응답하여 수신된 URL에 따라 컴퓨팅 장치(508)로부터 오디오 콘텐트를 검색하고 "스트리밍 서비스 1"로부터 "아티스트 1"에 의한 "트랙 1"을 재생하기 시작할 수 있다.
또 다른 예시에서, 컴퓨팅 장치(504)는 일부 처리를 수행하여 관련된 명령 또는 사용자의 의도를 식별하고 컴퓨팅 장치(506)로 음성 입력에 관련되는 미디어 콘텐트에 관한 정보를 제공할 수 있다. 예를 들어, 컴퓨팅 장치(504)는 음성 입력의 음성 텍스트 변환(speech-to-text conversion)을 수행하고 명령 또는 의도(예컨대, 재생, 일시 정지, 정지, 음량 증가, 음량 감소, 스킵, 다음, 그룹핑, 그룹핑 해제)와 명령을 어떻게 실행할 것인가에 관한 다른 정보를 위해 음성 입력을 해석할 수 있다. 컴퓨팅 장치(504) 또는 컴퓨팅 장치(506)는 어떠한 PBD 명령이 컴퓨팅 장치(504)에 의해 결정된 명령 또는 의도에 대응하는지 결정할 수 있다. 음성 입력으로부터 결정되는 명령 또는 의도 및/또는 명령을 실행하는 것에 관련되는 기타 정보는 컴퓨팅 장치(504)로부터 컴퓨팅 장치(506)로 송신될 수 있다. 컴퓨팅 장치(504) 상의 처리는 애플리케이션, 모듈, 애드온(add-on) 소프트웨어, 네이티브 네트워킹된 마이크로폰 시스템 소프트웨어 플랫폼과의 통합(integration) 및/또는 네이티브 네트워킹된 마이크로폰 시스템 소프트웨어 플랫폼에 의해 수행될 수 있다.
이상은 단지 하나의 예시이고 다른 구현 또한 가능함을 당업자는 알 것이다. 한 경우에, 위에서 설명된 복수의 장치(500) 중 하나 이상에 의해 수행되는 동작은 복수의 장치(500) 중 하나 이상의 다른 장치에 의해 수행될 수 있다. 예를 들어, 음성 입력으로부터 텍스트 명령으로의 변환은 NMD(512), 컴퓨팅 장치(506), PBD(536) 및/또는 PBD(538)와 같은 다른 장치 또는 장치들에 의해 대안적으로, 부분적으로 또는 전체적으로 수행될 수 있다. 비슷하게, URL의 식별은 NMD(512), 컴퓨팅 장치(504), PBD(536) 및/또는 PBD(538)와 같은 다른 장치 또는 장치들에 의해 대안적으로, 부분적으로 또는 전체적으로 수행될 수 있다.
f. 예시적인 네트워크 마이크로폰 장치
도 6은 도 5의 NMD(512, 514 및 516) 중 하나 이상으로 구성될 수 있는 예시적인 네트워크 마이크로폰 장치(600)의 기능 블록도를 도시한다. 도시된 바와 같이, 네트워크 마이크로폰 장치(600)는 프로세서(602), 메모리(604), 마이크로폰 어레이(606), 네트워크 인터페이스(608), 사용자 인터페이스(610), 소프트웨어 컴포넌트(612) 및 스피커(614)를 포함한다. 당업자는 다른 네트워크 마이크로폰 장치 구성 및 배열 또한 가능함을 알 것이다. 예를 들어, 네트워크 마이크로폰 장치는 대안적으로 스피커(614)를 배제할 수 있거나, 마이크로폰 어레이(606) 대신 단일의 마이크로폰을 가질 수 있다.
프로세서(602)는 범용 또는 특수 목적 프로세서 또는 컨트롤러의 형태를 취할 수 있는 하나 이상의 프로세서 및/또는 컨트롤러를 포함할 수 있다. 예를 들어, 처리 유닛(602)은 마이크로프로세서, 마이크로컨트롤러, 주문형 집적 회로(application-specific integrated circuit), 디지털 신호 프로세서 등을 포함할 수 있다. 메모리(604)는 이러한 기능을 수행하도록 프로세서(602)에 의해 실행 가능한 소프트웨어 컴포넌트 중 하나 이상이 로드될 수 있는 데이터 스토리지일 수 있다. 따라서, 메모리(604)는 하나 이상의 비일시적 컴퓨터 판독 가능 저장 매체를 포함할 수 있으며, 그 예는 다른 가능성 중에서도 랜덤 액세스 메모리, 레지스터, 캐시 등과 같은 휘발성 저장 매체 및 읽기 전용 메모리, 하드 디스크 드라이브, 고체 상태 드라이브, 플래시 메모리 및/또는 광학 저장 장치와 같은 비휘발성 저장 매체를 포함할 수 있다.
마이크로폰 어레이(606)는 네트워크 마이크로폰 장치(600)의 환경에서 사운드를 검출하도록 배열되는 복수의 마이크로폰일 수 있다. 마이크로폰 어레이(606)는 다른 가능성 중에서도 콘덴서 마이크로폰, 일렉트레트 콘덴서 마이크로폰 또는 다이내믹 마이크로폰과 같이 지금 알려진 또는 추후에 개발되는 임의의 유형의 마이크로폰을 포함할 수 있다. 일 예시에서, 마이크로폰 어레이는 네트워크 마이크로폰 장치에 대한 하나 이상의 방향으로부터 오디오를 검출하도록 배열될 수 있다. 마이크로폰 어레이(606)는 주파수 범위의 일부에 민감할 수 있다. 일 예시에서, 마이크로폰 어레이(606)의 제1 부분집합은 제1 주파수 범위에 민감할 수 있고, 마이크로폰 어레이의 제2 부분집합은 제2 주파수 범위에 민감할 수 있다. 마이크로폰 어레이(606)는 오디오 소스(예컨대, 음성, 들을 수 있는 사운드)의 위치 정보를 캡쳐 및/또는 배경 잡음을 필터링하는 것을 돕도록 더 배열될 수 있다. 특히, 일부 실시예에서, 마이크로폰 어레이는 복수의 마이크로폰 대신 단일의 마이크로폰으로만 구성될 수 있다.
네트워크 인터페이스(608)는 다른 가능성 중에서도 도 5를 참조하여 CR(522), PBD(532-538), 클라우드 네트워크(502) 내 컴퓨팅 장치(504-508) 및 다른 네트워크 마이크로폰 장치와 같은 다양한 네트워크 장치 사이의 무선 및/또는 유선 통신을 용이하게 하도록 구성될 수 있다. 이와 같이, 네트워크 인터페이스(608)는 이러한 기능을 수행하기 위한 임의의 적절한 형태를 취할 수 있으며, 그 예시는 이더넷 인터페이스, 직렬 버스 인터페이스(예컨대, 파이어와이어, USB 2.0 등), 무선 통신을 용이하게 하도록 적응된 칩셋 및 안테나, 및/또는 무선 및/또는 유선 통신을 제공하는 임의의 다른 인터페이스를 포함할 수 있다. 일 예시에서, 네트워크 인터페이스(608)는 산업 표준(예컨대, 적외선, 라디오, IEEE 802.3을 포함하는 유선 표준, IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.11ac, 802.15, 4G 모바일 통신 표준을 포함하는 무선 표준 등)에 기초할 수 있다.
네트워크 마이크로폰 장치(600)의 사용자 인터페이스(610)는 네트워크 마이크로폰 장치와의 사용자 상호 작용을 용이하게 하도록 구성될 수 있다. 일 예시에서, 사용자 인터페이스(608)는 사용자가 네트워크 마이크로폰 장치(600)에 직접 입력을 제공하도록, 다른 가능성 중에서도 물리적 버튼, 터치 감지 스크린 및/또는 표면 상에 제공되는 그래픽 인터페이스 중 하나 이상을 포함할 수 있다. 사용자 인터페이스(610)는 사용자에게 시각적 및/또는 오디오 피드백을 제공하도록 조명 및 스피커(614) 중 하나 이상을 더 포함할 수 있다. 일 예시에서, 네트워크 마이크로폰 장치(600)는 스피커(614)를 통하여 오디오 콘텐트를 재생하도록 더 구성될 수 있다.
III. 예시적인 미디어 재생 시스템의 멀티-배향 마이크로폰 어레이
위에서 논의된 바와 같이, 여기에서 설명되는 실시예는 재생 장치의 특정 배향에 기초하여 사운드 입력을 캡처하고 처리하도록 트레이닝될 수 있는 하나 이상의 마이크로폰 어레이를 수반할 수 있다.
도 7a-7b는 상이한 배향의 예시적인 재생 장치(700)의 각각의 사시도를 도시한다. 재생 장치(700)는 재생 장치(700)의 다른 면(face) 또는 측면(side)에 있는 설정에 의해 다른 배향으로 위치될 수 있고, 도 7a 및 7b는 재생 장치(700)에 대한 두 예시적인 배향을 도시한다. 도 7a는 제1 배향의 재생 장치의 사시도를 도시하고, 도 7b는 제1 배향의 재생 장치의 사시도를 도시한다. 쉬운 논의를 위해, 재생 장치(700)가 보다 긴 측면 중 하나로 놓여 있는 도 7a에 도시된 제1 배향은 수평 배향으로 지칭될 수 있으며, 재생 장치(700)가 보다 짧은 측면 중 하나로 누워있는 도 7b에 도시된 제2 배향은 수직 배향으로 지칭될 수 있다. 재생 장치(700)는 임의의 측면 또는 면을 따라 표면 위에 놓일 수 있다.
재생 장치(700)는 재생 장치(700)의 하우징 또는 본체 안에 설치되거나 하우징 또는 본체 상에 장착되는 하나 이상의 마이크로폰 어레이(702)(예컨대, 마이크로폰 어레이(702a), 마이크로폰 어레이(702b), 마이크로폰 어레이(702c), 마이크로폰 어레이(702d))를 가질 수 있다. 마이크로폰 어레이(702a-d)는 재생 장치 안에 통합되는 근사 마이크로폰 어레이 배치의 예시로서 도시된다. 보다 많은 또는 보다 적은 마이크로폰 어레이가 사용될 수 있으며, 마이크로폰 어레이는 도 7a-7b에 도시되지 않은 다른 측면 및 벽을 따라 배치될 수 있다. 또한, 하나 이상의 마이크로폰 어레이는 재생 장치의 같은 측면 상에 위치될 수 있다.
재생 장치(700)는 재생 장치(200) 일 수 있고, 마이크로폰 어레이(702)는 마이크로폰(220) 일 수 있다. 일부 태양에서, 마이크로폰 어레이(702)는 재생 장치(700)의 상이한 벽들 또는 측면들 상에 장착되거나 다른 방식으로 부착될 수 있는 NMD(예컨대, NMD들(512, 514, 516))를 포함하거나, 마이크로폰 어레이(606) 일 수 있다. 상이한 재생 장치 배향에서, 마이크로폰 어레이(702)는 또한 상이한 배향을 가질 것이고, 상이한 마이크로폰 어레이는 그들의 개별 배향에 따라 사운드 입력(예를 들어, 음성 입력(voice input), 오디오 입력(audio input), 음색 입력(tonal input))을 캡처하는데 더 도움이 될 수 있다. 각각의 마이크로폰 어레이는 어레이의 상이한 지점에 위치한 2개 이상의 개별 마이크로폰으로 구성될 수 있다. 마이크로폰 어레이(702)는 원형 형상을 가질 수 있고, 개별 마이크로폰은 마이크로폰 어레이(702)의 원주 둘레에 (예를 들어, 0도 내지 360도 사이의 x 도 마다) 분포될 수 있다. 예를 들어, 마이크로폰 어레이(702a)는 개별 마이크로폰(704a-704f)을 갖는다.
도 7a에 도시된 바와 같이, 재생 장치(700)는, 재생 장치(700)의 최장 측면이 x-z 평면을 따르는 표면(예를 들어, 테이블, 플로어)에 평행하는, 실질적 또는 대략의 수평 배향으로 배치될 수 있다. 이러한 배향에서, 마이크로폰 어레이(702)는 다양한 배향을 갖는다. 예를 들어, 제1 마이크로폰 어레이(702a)는 이러한 배향에서 상부면 상에 있을 수 있고, x-z 평면에 실질적으로 평행할 수 있으며, 제2 마이크로폰 어레이(702b)는 실질적으로 y-z 평면을 따라 배치될 수 있고 실질적으로 수직한 배향을 가질 수 있다. 마이크로폰 어레이(702)는 마이크로폰 어레이에 평행한 평면을 따르는 사운드에 가장 민감할 수 있다. 예를 들어, 수평 배향(예를 들어, 중력에 수직)의 마이크로폰 어레이(702a)는 사운드 소스의 위치를 더 잘 파악할 수 있다. 마이크로폰 어레이(702a)는 재생 장치(700)의 상부에 배치되어 있기 때문에 사운드 입력을 가장 잘 검출하고 캡처할 수 있는 위치에 있을 수 있다.
도 7b는 재생 장치(700)의 최장 측면이 x-z 평면을 따르는 표면에 실질적으로 수직이고 y축에 실질적으로 평행하는 실질적 수직 배향인 제2 배향의 재생 장치(700)를 도시한다. 이러한 배향에서, 마이크로폰 어레이(702b, 702c)는 실질적으로 수평 일 수 있고 마이크로폰 어레이(702a, 702d)는 실질적으로 수직 일 수 있다.
또한, 예를 들어 재생 장치(700)의 정면 또는 배면을 따르는 도시되지 않은 다른 배치 위치들이 가능하다. 추가적으로, 상이한 평면들 사이에 배향될 수 있는 마이크로폰 어레이 배향을 제공하는 다른 형태의 스피커(예컨대, 원통형, 삼각형, 비정규형)가 가능할 수 있다. 일부 양태에서, 마이크로폰 어레이는 그에 가장 가까운 재생 장치의 벽과 평행하지 않게 위치될 수 있다.
도 8은 재생 장치 배향에 기초하여 사운드 입력을 처리하는 방법의 예시적인 흐름도(800)를 도시한다. 방법(800)은 예를 들어 도 1의 미디어 재생 시스템(100), 도 2의 재생 장치(200) 중 하나 이상, 도 3의 제어 장치(300) 중 하나 이상, 도 5의 시스템(500) 내의 복수의 장치들 중 하나 이상, 시스템(600) 내의 복수의 장치들 중 하나 이상, 및 도 7a-7b의 재생 장치(700)를 포함하는 동작 환경(operating environment) 내에서 구현될 수 있는 방법의 실시예를 나타낸다. 방법(800)은 하나 이상의 동작(operation), 기능(function), 또는 행동(action)을 포함할 수 있다. 도 8의 블록은 순차적인 순서로 도시되어 있지만, 이들 블록은 여기에서 설명된 것과 다른 순서 및/또는 병렬로 수행될 수도 있다. 또한, 다양한 블록들은 원하는 구현에 기초하여, 제거되거나, 더 적은 블록으로 결합, 및/또는 추가 블록으로 분할될 수도 있다.
더하여, 여기에 개시된 방법(800) 및 다른 프로세스 및 방법에 대하여, 흐름도는 본 실시예의 하나의 가능한 구현의 기능 및 동작을 도시한다. 이러한 점에서, 각각의 블록은 프로세서에서 특정 로직 기능 또는 단계를 구현하기 위한 하나 이상의 프로세서에 의해 실행 가능한 하나 이상의 명령어를 포함하는 모듈, 세그먼트, 또는 프로그램 코드의 일부를 나타낼 수 있다. 프로그램 코드는 예컨대 디스크 또는 하드 드라이브를 포함하는 저장 장치와 같은 임의의 유형의 컴퓨터 판독 가능 매체 상에 저장될 수 있다. 컴퓨터 판독 가능 매체는 예컨대 레지스터 메모리, 프로세서 캐시 및 랜덤 액세스 메모리(RAM)와 같은 짧은 기간 동안 데이터를 저장하는 컴퓨터 판독 가능 매체와 같은 비일시적인 컴퓨터 판독 가능 매체를 포함할 수 있다. 컴퓨터 판독 가능 매체는 또한 예컨대 읽기 전용 메모리(ROM), 광 또는 자기 디스크, 컴팩트 디스크 읽기 전용 메모리(CD-ROM)와 같은 이차적인 또는 지속성의 장기 스토리지와 같은 비일시적인 매체를 포함할 수 있다. 컴퓨터 판독 가능 매체는 또한 임의의 다른 휘발성 또는 비휘발성 저장 시스템일 수 있다. 컴퓨터 판독 가능 매체는 예컨대 컴퓨터 판독 가능 저장 매체 또는 유형의 저장 장치로 고려될 수 있다. 또한, 방법(800) 및 여기에 설명된 방법 및 다른 프로세스에 대하여, 도 8 내의 블록은 프로세스에서 특정 로직 기능을 수행하기 위해 배선되는 회로를 나타낼 수 있다.
블록(802)에서, 마이크로폰 트레이닝은 재생 장치(700)의 마이크로폰 어레이(702) 상에서 수행될 수 있다. 마이크로폰 트레이닝은 재생 장치(700)의 마이크로폰 어레이에 대한 응답 프로파일을 생성할 수 있다. 마이크로폰 트레이닝은, 예를 들어 제조 프로세스 또는 제조 후의 일부로서의 캘리브레이션 프로세스(calibration process) 중에 완성될 수 있다. 마이크로폰 트레이닝은 스피커로부터 재생된 오디오(예를 들어, 톤, 오디오, 사운드, 음성, 잡음)를 테스트하기 위한 개별 마이크로폰 응답(예를 들어, 극 응답(polar response))을 캡처하는 것을 포함할 수 있다. 마이크로폰 어레이(702)에 대한 트레이닝 응답 프로파일을 생성하기 위해, 재생 장치(700)는 완벽하거나 거의 완벽한 음향 환경(예컨대, 무반향 챔버(anechoic chamber)) 또는 다른 음향 환경에서 제1 배향으로 배치될 수 있다. 테스트 오디오는 재생 장치(700)를 향하는 스피커(예를 들어, 스피커(902))로부터 재생될 수 있다.
캘리브레이션 셋업(900)의 예에 대한 평면도는 블록(802)과 관련하여 설명되고, 도 9에 도시된다. 제1 측정 캡처의 경우, 스피커(902)는 마이크로폰 어레이(702a)의 중심이 축 상에 위치될 수 있는 재생 장치(700)의 전방 중심으로 지향될 수 있으며, 이러한 위치는 시작 테스트 위치로서 지칭될 수 있고 및/또는 0도 위치에 있는 것으로 식별될 수 있다. 테스트 오디오는 스피커(902)에 의해 재생될 수 있다. 제1 마이크로폰 어레이는 테스트 오디오를 수신하고 어레이 내의 개별 마이크로폰 각각의 응답을 측정할 수 있다. 테스트 오디오에 대한 각각의 개별 마이크로폰의 측정된 응답은 제1 테스트 오디오 위치(예를 들어, 0도 위치)에 대한 측정된 응답의 세트로서 저장될 수 있고, 및/또는 측정된 응답은 제1 테스트 오디오 위치(예를 들어, 0도 위치)에 대한 개별 마이크로폰의 상이한 짝들의 응답들 사이의 상대 값(예를 들어, 차이)으로서 저장될 수 있다. 각 응답 값은 크기 및 위상 컴포넌트를 가질 수 있다. 측정된 응답의 제1 세트는 아래의 표 1과 같은 매트릭스 또는 표로서 저장될 수 있다. 마이크로폰 어레이(702a)는 마이크로폰(704a, 704b, 704c, 704d, 704e 및 704f)으로 식별된 6개의 개별 마이크로폰을 가질 수 있다.
Mic 704 a b c d e f
a -- -- -- -- -- --
b Rb, a = Rb - Ra -- -- -- -- --
c Rc, a = Rc - Ra Rc, b = Rc - Rb -- -- -- --
d Rd, a = Rd - Ra Rd, b = Rd - Rb Rd, c = Rd - Rc -- -- --
e Re, a = Re - Ra Re, b = Re - Rb Re, c = Re - Rc Re, d = Re - Rd -- --
f Rf, a = Rf - Ra Rf, b = Rf - Rb Rf, c = Rf - Rc Rf, d = Rf - Rd Rf, e = Rf - Re --
표 1에서, (b행 a열)에 저장된 값 Rb, a는 마이크로폰(704b)에 대해 측정된 응답 값(Rb) 빼기(minus) 마이크로폰(704a)의 응답 값(Ra)의 형태의 마이크로폰(704a)에 대한 마이크로폰(704b)의 응답의 상대 값일 수 있다. 이는, 동일한 규칙에 따르는 표 1에 도시된 바와 같이, 마이크로폰 어레이 내의 모든 다른 마이크들에 대한 각각의 마이크로폰에 대해 반복될 수 있다. 응답 값은 복소수 일 수 있으며, 여기서 응답의 크기는 값의 실수부 일 수 있고 위상은 값의 허수부 일 수 있다. 응답 Ra, b 인 값(a행, b열)은 응답 Rb, a(b행 a열)와 중복될 수 있으므로, 응답 값은, 표 1에서 대시(즉, "--")를 가지고 있는 셀들로 도시된 바와 같이, 이러한 상대적인 응답에 대한 응답 값은 저장되지 않을 수 있다. 표 1 내의 값의 세트는 테스트 오디오를 재생하는 스피커(902)의 위치상 배치(positional placement)(예를 들어, 상대 각도)와 관련될 수 있다.
유사한 값의 세트는, 마이크로폰 어레이(702) 또는 재생 장치(700)의 중심으로부터 일정한 거리를 유지하면서 주어진 각도의 개수에 의해 재생 장치(700)의 전방 중심에 대한 스피커의 위치를 변경함으로써 제2 스피커 위치와 연관된 마이크로폰 어레이(702)에 대해 생성될 수 있다. 예를 들어, 90도의 상대 각도에서의 제1 마이크로폰 어레이에 대한 값의 제2 세트는 스피커(902)를 90도 위치로 이동시키거나 또는 마이크로폰 어레이(702a)를 수직 축(예를 들어, 요우(yaw))으로 회전하여 스피커(902)가 마이크로폰 어레이(702a)의 90도 위치하게 함으로써 생성되거나 획득될 수 있다. 측정은 재생 장치(700)를 중심으로 0도 내지 360도의 원하는 데이터 해상도(data resolution)에 따라 재생 장치를 중심으로 회전하여(예컨대, 시계 방향, 반 시계 방향) x 도씩(예컨대, 매 1도마다, 매 5도마다, 매 10도마다 등) 조금씩 증가시켜 수행될 수 있다.
블록(802)에서의 측정 프로세스는 각각의 배향의 재생 장치(700)의 각각의 마이크로폰 어레이(702)에 대한 값을 수집하기 위해 반복될 수 있다. 예를 들어, 제1 스피커 위치 동안, 상이한 마이크로폰 어레이의 마이크로폰의 모두에 대한 응답 값은 테스트 오디오가 재생되는 각각의 시간에 결정될 수 있다. 경우에 따라, 테스트 오디오는 동일한 테스트 오디오 재생을 기초로 결정된 모든 마이크로폰 어레이 및 모든 개별 마이크로폰에 대한 개별 응답 값 및 각도 위치 마다 한 번씩 재생될 수 있다. 응답 값을 획득하기 위한 다른 방법이 사용될 수 있다.
블록(802)이 끝날 때 또는 그 후, 이러한 프로세스를 통해 획득된 측정은 다수의 배향에 대한 마이크로폰 어레이의 모두의 응답 값을 포함할 수 있다. 측정은 각각의 마이크로폰 어레이에 대한 측정의 콜렉션과 같은 상이한 응답 프로파일에 대해 상이한 데이터 세트로 조직될 수 있다. 예를 들어, 측정의 제1 콜렉션은 마이크로폰 어레이(702a)에 대해 획득된 모든 측정을 포함할 수 있고, 측정의 제2 콜렉션은 마이크로폰 어레이(702b)에 대해 캡처된 모든 측정을 포함할 수 있다.
일부 양태에서, 응답 값은 2개 이상의 상이한 재생 장치 배향에서 동일한 마이크로폰 어레이에 대해 결정된 응답 값의 그룹의 형태로 서로 연관될 수 있다. 캘리브레이션 측정의 그룹은, 재생 장치가 특정 배향인 동안 취해진 특정 마이크로폰 어레이에 대한 측정들 일 수 있다. 예를 들어, 캘리브레이션 측정의 제1 그룹은 재생 장치(700)가 도 7a에 도시된 수평 배향인 동안 획득된 마이크로폰 어레이(702a)에 대한 측정 일 수 있고, 캘리브레이션 측정의 제2 그룹은 재생 장치(700)가 도 7b에 도시된 수직 배향인 동안 마이크로폰 어레이(702a)에 대해 획득된 측정 일 수 있다.
다른 양태에서, 위에서 논의된 바와 같이, 측정의 제1 세트는 예를 들어, 제1 재생 장치 배향 동안 제1 마이크로폰 어레이에 대해 제1 각도 위치로부터 재생된 테스트 오디오로부터 생성된 마이크로폰에 대한 측정일 수 있는 표 1에 나타난 예시적인 측정일 수 있다. 특히, 측정의 제1 세트는 마이크로폰 어레이(702a)의 각각의 개별 마이크로폰(704)에 대한 측정 일 수 있다.
일부 양태에서, 측정은 벡터로 구성될 수 있다. 각각의 벡터는 하나의 개별 마이크로폰에 대응할 수 있으며 동일한 배향에 대해 하나 이상의 스피커 위치에 걸쳐 개별 마이크로폰에 대한 측정 값을 포함할 수 있다. 예를 들어, 제1 벡터는 스피커(902)의 위치에 대해 0도 내지 360도 사이의 모든 또는 모든 측정된 증가분에 대한 수평 배향의 마이크로폰(704a)와 마이크로폰(704b) 사이의 차이에 대한 상대 값 또는 마이크로폰(704a)에 대한 값을 포함할 수 있다.
일부 양태에서, 동일한 테스트 오디오로부터의 모든 마이크로폰 어레이들에 대한 측정이 수행될 수 있다. 예를 들어 테스트 오디오는 배향마다 한 번씩 재생될 수 있고, 마이크로폰 어레이의 개별 마이크로폰 중 일부 또는 모두에 대한 응답 값이 수집될 수 있다. 표 1 내의 값은 하나 이상의 마이크로폰 어레이의 개별 마이크로폰에 대한 상대 응답 값 또는 응답 값을 포함하도록 확장될 수 있다. 마이크로폰 어레이(702a) 및 마이크로폰 어레이(702c)에 대한 예가 아래의 표 2에 도시된다. 마이크로폰 어레이(702c)는 개별 마이크로폰(706a-f)을 포함한다. 아래의 표 2의 예에서, Ry, z는 마이크로폰(y)의 응답 값 빼기(minus) 마이크로폰(z)의 응답 값을 나타낸다. 예를 들어, R706d, 704c = 마이크로폰(706d)의 응답 값 - 마이크로폰(704c)의 응답 값이다.
Mic 704a 704b 704c 704d 704e 704f 706a 706b 706c 706d 706e 706f
704a -- -- -- -- -- -- -- -- -- -- -- --
704b R704b, 704a -- -- -- -- -- -- -- -- -- -- --
704c R704c, 704a R704c, 704b -- -- -- -- -- -- -- -- -- --
704d R704d, 704a R704d, 704b R704d, 704c -- -- -- -- -- -- -- -- --
704e R704e, 704a R704e, 704b R704e, 704c R704e, 704d -- -- -- -- -- -- -- --
704f R704f, 704a R704f, 704b R704f, 704c R704f, 704d R704f, 704e -- -- -- -- -- -- --
706a R706a, 704a R706a, 704b R706a, 704c R706a, 704d R706a, 704e R706a, 704f -- -- -- -- -- --
706b R706b, 704a R706b, 704b R706b, 704c R7046b, 704d R706b, 704e R706b, 704f R706b, 706a -- -- -- -- --
706c R706c, 704a R706c, 704b R706c, 704c R706c, 704d R706c, 704e R706c, 704f R706c, 706a R706c, 706b -- -- -- --
706d R706d, 704a R706d, 704b R706d, 704c R706d, 704d R706d, 704e R706d, 704f R706d, 706a R706d, 706b R706d, 706c -- -- --
706e R706e, 704a R706e, 704b R706e, 704c R706e, 704d R706e, 704e R706e, 704f R706e, 706a R706e, 706b R706e, 706c R706e, 706d -- --
706f R706f, 704a R706f, 704b R706f, 704c R706f, 704d R706f, 704e R706f, 704f R7046, 706a R706f, 706b R706f, 706c R706f, 706d R706f, 706e --
위에서 논의한 응답 값은 일반적으로 평면 측정 값을 나타낼 수 있다. 다시 말하면, 값은 2 차원에 대해 수집된 측정 정보에 해당할 수 있다. 예를 들어, 도 7a에 도시된 수평 배향의 마이크로폰 어레이(702a)의 경우, 측정은 수평 평면(예를 들어, x-z 평면)에 따르는 데이터를 나타낼 수 있다. 이것은, 예를 들어, 테스트 오디오가 재생될 때 스피커(902)의 배치가 동일한 높이를 유지함으로써 달성될 수 있다. 예들은 수평 평면을 따르는 응답 데이터를 수집하는 것에 관해 논의되었지만, 데이터는, 재생 장치(700) 또는 스피커(902)가 수직으로(예를 들어, 롤(roll) 및/또는 피치(pitch)) 상이한 축(예를 들어, 종 및/또는 횡 방향)을 중심으로 중심점과 동일한 거리를 유지하면서 회전하는 수직 평면 내에서 수집될 수 있다.
일부 양태에서, 캘리브레이션 값은 상이한 평면들로부터의 데이터의 조합을 사용함으로써, 예를 들어, 제2 평면(예를 들어, 제1 평면에 수직인 평면)을 따라 수집된 정보를 제1 평면을 따라 수집된 정보에 추가함으로써, 3 차원(예를 들어, 구형)이 될 수 있다. 예를 들어, 측정은 x 축을 중심으로 스피커(902)를 회전시키고 전술한 바와 유사한 방식으로 응답을 측정함으로써, y-z 평면(예를 들어, 수직 방향)을 따라 수집될 수 있다.
여기에서 논의된 트레이닝 또는 측정 값은 시스템에서 하나 이상의 장치를 사용하여 획득될 수 있다. 예를 들어, 재생 장치(700)는 마이크로폰 어레이에 의해 수신된 테스트 오디오의 응답을 결정할 수 있다. 재생 장치(700)는 재생 장치(700)의 메모리에 응답 값을 국부적으로 저장할 수 있고, 및/또는 프로세싱 및/또는 저장을 위해 컴퓨팅 장치(예를 들어, 서버, 컴퓨터 또는 다른 측정 장치)에 응답 값을 전송할 수 있다.
주어진 재생 장치 모델에 대해 획득된 측정된 응답 값은 주어진 재생 장치 모델 및/또는 스피커 타입과 연관될 수 있고, 주어진 재생 장치 모델 및/또는 마이크로폰 어레이 모델 및/또는 개별 마이크로폰 컴포넌트에 대한 대표 값으로서 데이터베이스 또는 서버에 저장될 수 있다. 예를 들어, 재생 장치 식별자(예컨대, 모델 번호, 일련 번호, 공급자 식별자), 또는 마이크로폰 식별자(예컨대, 모델 번호, 일련 번호, 공급자 식별자), 또는 재생 장치 식별자와 마이크로폰 식별자의 동일한 조합을 가리키는 다른 캘리브레이션 식별자의 임의의 조합을 사용하여 식별될 수 있는 동일한 재생 장치 모델이 사용되는 동일한 공급자로부터 제공된 개별 마이크로폰 또는 마이크로폰 어레이에 동일한 값이 사용될 수 있다. 식별자를 사용하여, 재생 장치(700)는 제조 중에 또는 재생을 사용자에게 제공하기 전에 대표적인 캘리브레이션 데이터로 미리 로딩될 수 있고, 재생 장치는 그 마이크로폰 어레이의 방향성 초점을 조절하도록 준비될 수 있다. 일부 양태에서, 재생 장치에 대한 응답 값은 재생 장치가 네트워크에 연결될 때 로딩되거나 업데이트 될 수 있다. 값은 네트워크를 통해 컴퓨팅 장치로부터 재생 장치에 의해 검색되거나 재생 장치로 전송될 수 있다. 일부 예에서, 값의 로딩 또는 업데이트는 재생 장치 셋업 프로세스 또는 재생 장치에 대한 다른 캘리브레이션 프로세스(예를 들어, 환경 재생 장치 튜닝, 재생 이퀄라이저 조정 프로세스) 동안 발생할 수 있다.
블록(804)에서, 재생 장치의 배향이 결정될 수 있다. 배향은 재생 장치(700)의 센서(예를 들어, 가속도계, 자이로스코프 등)에 기초하여 결정될 수 있다. 재생 장치의 배향은 2011년 7월 19일 출원된 미국 특허출원 제13/186,249호, 2013년 5월 26일 발행된 미국 특허 제9,042,556, 2015년 4월 24일에 출원된 미국 특허출원 제14/696,041호, 및 2016년 10월 27일 발행된 미국 특허출원 공보 2016/0315384 A1 에 개시되어 있는 것과 같이 결정될 수 있으며, 이들의 내용은 그 전체가 참고로 인용된다. 재생 장치의 배향은 미리 결정될 수 있다. 예를 들어, 소정의 배향은 트레이닝 응답이 블록(802)에서 측정된 배향에 대응할 수 있다.
블록(806)에서, 하나 이상의 마이크로폰 어레이가 사운드 입력을 캡처하거나 처리하기 위한 사용을 위해 결정될 수 있다. 재생 장치(700)는 단일 마이크로폰 어레이를 가질 수 있고, 이러한 경우 단일 마이크로폰 어레이는 사운드 입력 캡처에 사용되도록 선택될 수 있다. 일부 양태에서, 재생 장치(700)는 하나 이상의 마이크로폰 어레이를 가질 수 있고, 이러한 경우 하나 이상의 마이크로폰 어레이가 선택될 수 있다.
마이크로폰 어레이(702)의 개수 및 사용을 위해 선택된 특정 마이크로폰 어레이는 마이크로폰 어레이(702)의 위치, 이용 가능한 처리 능력, 재생 장치의 배향 및/또는 다른 전후 관계의 정보(contextual information)(예컨대, 환경과 관련된 마이크로폰의 위치)와 같은 요소의 다양성에 달려 있을 수 있다.
이용 가능한 처리 능력의 양을 평가할 때, 시스템 내의 재생 장치(700) 또는 다른 장치는 재생 장치(700)에 국부적으로, 하나 이상의 네트워크(예를 들어, 로컬 영역 네트워크, 광역 네트워크)를 통해, 및/또는 하나 이상의 컴퓨팅 장치를 통해 재생 장치(700)에 이용 가능한 처리 능력이 평가의 기초가 될 수 있다. 예를 들어, 재생 장치(700)의 선택된 마이크로폰 어레이는 사운드 입력의 초기 부분(initial portion)을 캡처하고 캡처된 초기 부분을 나타내는 데이터를 다른 장치(예를 들어, 서버, 제어 장치, 다른 재생 장치)에 전송하여 위치 정보를 처리할 수 있다. 일부 양태에서, 재생 장치(700)는 데이터를 국부적으로 처리하여 사운드 입력과 연관된 위치 정보를 결정할 수 있다.
사용하기 위한 마이크로폰 어레이의 개수는 초기 셋업 프로세스 동안 및/또는 재생 환경(예를 들어, 재생 환경에 기초한 재생 장치의 튜닝)에서의 재생 장치 캘리브레이션 프로세스 동안 결정될 수 있다.
일부 양태에서, 재생 장치의 상단에 있는 마이크로폰 어레이가 선택될 수 있다. 일부 예에서 재생 장치 앞에서 사운드에 가장 민감한 마이크로폰 어레이가 선택될 수 있다. 더 많은 양태에서, 중력에 가장 수직인 마이크로폰이 선택될 수 있다. 마이크로폰 배열의 가중치 또는 우선 순위는 재생 장치의 배향에 기초하여 주어질 수 있다.
재생 장치(700)가 단일 마이크로폰 어레이(702)만을 가지거나 복수의 마이크로폰 어레이(702) 중 하나의 마이크로폰 어레이 만이 사운드 입력 캡처 또는 처리를 위해 작동 가능하거나 사용되도록 선택되면, 하나의 선택된 마이크로폰 어레이(702)는 사운드 입력 캡처를 위해 작동 가능하게 되거나 활성화될 수 있다. 일부 양태에서, 마이크로폰 어레이의 방향성 초점의 조정은 필요하지 않을 수 있으며, 재생 장치(700)는 작동 가능하게 되거나 또는 활성화되기 위해 하나 이상의 마이크로폰 어레이를 선택한 후 명령의 실행을 위한 사운드 입력을 처리할 준비가 될 수 있다.
작동 가능하게 될 마이크로폰 어레이가 결정되어진 후, 시스템은 선택된 마이크로폰 어레이 및 재생 장치(700)의 배향에 대응하는 응답 데이터의 세트를 식별할 수 있다. 예를 들어, 재생 장치(700)가 도 7a에 도시된 바와 같은 제1 배향으로 현재 배향되어 있고 마이크로폰 어레이(702a)가 사운드 입력을 위해 선택되거나 활성화되면, 시스템(예를 들어, 도 5의 임의의 장치)은 마이크로폰 어레이(702a) 및 재생 장치(700)의 현재 배향(예컨대, 제1 배향)에 대응하는 응답 값의 그룹을 식별할 수 있다.
블록(808)에서, 사운드 입력은 선택된 마이크로폰 어레이에 의해 검출될 수 있다. 예를 들어, 선택된 마이크로폰 어레이는 음성 명령의 시작을 지속적으로 모니터링할 수 있다. 음성 명령은 명령을 말하는 사용자가 시스템에 의한 실행을 위한 명령을 말할 준비가 되었다는 것을 시스템에게 알리는 활성 단어 또는 구문(예를 들어, 웨이크업 워드(wake-up word), 핫워드(hotword))로 시작될 수 있다. 활성 단어의 발화는 시스템으로 하여금 음성 명령을 위한 활성 단어 다음에 나오는 단어의 처리를 시작하게 할 수 있다. 활성 단어의 발화의 검출 후의 또는 활성 단어의 발화의 검출을 포함하는, 음성 명령의 시작을 검출하면, 선택된 마이크로폰 어레이는 음성 명령 처리를 위해 사운드 입력(예컨대, 음성 입력)의 캡처(예컨대, 기록, 스트리밍, 처리)를 시작할 수 있다.
블록(810)에서, 사운드 입력의 소스(예를 들어, 음성 입력, 오디오 입력)의 위치(예를 들어, 하나 이상의 차원에서의 방향, 하나 이상의 평면에서의 방향)가 결정될 수 있다. 사운드 입력의 소스의 위치는 다양한 정도의 정밀도로 결정될 수 있다. 예를 들어, 위치는 마이크로폰 어레이 또는 재생 장치(700) 마다 대략적인 방향 또는 정확한 방향일 수 있으며, 또는 선택된 마이크로폰 어레이 또는 재생 장치(700)에 대한 방향 일 수 있다. 사운드 입력의 일부 또는 샘플은 캡처되어 사운드 입력 소스의 위치를 결정하는 데 사용될 수 있다. 예를 들어, 사운드 입력 샘플은 선택된 마이크로폰 어레이의 개별 마이크로폰에 의해 픽업된 응답의 형태 일 수 있다. 응답 값은 개별 마이크로폰의 각각에 의해 픽업된 실제 응답 일 수 있거나 마이크로폰 어레이의 개별 마이크로폰의 서로 다른 쌍 사이의 상대 값일 수 있다. 이들 값은 블록(802)에서 획득된 트레이닝 응답 값과 유사한 방식으로 계산될 수 있다. 예를 들어, 수신된 샘플 입력은, 하나 이상의 마이크로폰 어레이의 개별 마이크로폰의 서로 다른 쌍 사이의 차이가 계산되는 테스트 오디오와 동일한 방식으로 처리될 수 있다. 다시 말하면, 수신된 샘플 입력은 각도 연관성(angle association)이 알려지지 않은 표 1 또는 표 2와 동일한 포맷으로 조직될 수 있으며, 블록(810)에서 결정될 것이다.
사운드 입력 샘플의 응답 값은 트레이닝 응답 값과 비교되어 입력의 소스의 재생 장치 또는 마이크로폰 어레이에 대한 방향을 결정할 수 있다. 비교는 트레이닝 응답 값의 각 세트를 비교하여 샘플 입력 응답에 대응하는 값의 세트를 결정하는 것을 포함할 수 있다. 트레이닝 응답 값의 각 세트가 각도 값에 대응하기 때문에, 사운드 입력의 방향은 사운드 입력에 대응하는 트레이닝 응답의 세트의 각도 값에 대응할 수 있다. 확률 함수(예컨대, 확률 분포 함수(probability distribution function, pdf), 가우시안 분포(gaussian distribution)는 샘플 입력 응답이 연관된 트레이닝 응답 세트 또는 값 및 상기 트레이닝 응답 세트 또는 값의 대응 각도 위치를 결정함으로써 사운드 입력의 가장 가능성 있는 방향을 결정하는데 사용될 수 있다.
단일 마이크로폰 어레이가 활성화 또는 작동 가능하게 되는 양태에서, 샘플 입력 응답 값은 모든 테스트 위치 각도에 대해 하나의 마이크로폰 어레이와 관련된 트레이닝 응답 값의 그룹과 비교되어, 사운드 입력의 가장 가능성 있는 방향을 결정할 수 있다. 예를 들어, 샘플 응답 값의 세트는 확률 밀도 함수와 같은 확률 함수에 입력될 수 있고, 0도 위치로부터의 사운드 입력의 방향의 가장 가능성 있는 상태(likelihood)를 결정하기 위해, 표 1의 응답 값의 세트와 비교될 수 있다. 확률 함수의 결과는 사운드 입력 방향이 값의 세트와 연관된 방향(예컨대, 0도 위치) 일 확률을 나타내는 확률 값(예를 들어, 확률 밀도 함수 거리 값) 일 수 있다. 일부 양태에서, 확률 값은 퍼센티지가 클수록, 사운드 입력 값이 값의 세트와 연관된 방향과 대응할 가능성이 커지는 퍼센티지 일 수 있다. 다른 양태에서, 확률 값은, 값이 작을수록 사운드 입력 값이 값의 세트와 관련된 방향에 대응할 가능성이 커지는 확률 밀도 함수 거리 값일 수 있다.
샘플 입력 응답 값은 서브 세트 또는 값의 그룹 각각에 대한 확률 값을 생성하는 전체 그룹 또는 값의 그룹의 서브 세트와 비교될 수 있다. 예를 들어, 0에서 360도 사이의 5도마다 교육 응답이 획득될 수 있다. 이러한 데이터의 높은 해상도는 필요하지 않을 수 있으며, 시스템은 0에서 360 사이의 10도마다 교육 응답을 비교할 수 있다. 경우에 따라 교육 응답은 20도마다 비교될 수 있으며, 비교 프로세스는 확률 값으로 표시되는 가장 가능성 있는 대응 방향의 ± 특정 숫자의 각도(예컨대, 10도, 15도 등)내의 모든 각도(예컨대, 1도, 5도 등) 마다 반복될 수 있다. 예를 들어, 확률 밀도 함수 거리 값이 확률을 나타내는 경우에, 최소 또는 최소 확률 밀도 함수 거리 값 및 그것과 연관된 각도 위치(degree position)는 사운드 입력의 가장 가능성 있는 방향에 대응할 수 있다.
여기에서 논의된 바와 같이, 일부 양태에서, 2개 이상의 마이크로폰 어레이는 사운드 입력을 검출하고 기록하기 위해 활성화될 수 있다. 2개 이상의 마이크로폰 어레이에 대한 처리는 각각의 선택된 마이크로폰 어레이에 대해 개별적으로 수행될 수 있다. 예를 들어, 샘플 입력 응답은 2개 이상의 마이크로폰 어레이 각각에 대한 확률 값의 세트를 생성할 때 한 마이크로폰 어레이에 대한 응답 값의 그룹과 비교될 수 있다. 확률 값의 세트 내의 값은 사운드 입력의 소스가 주어진 방향으로부터 일 가능성을 각각 나타낼 수 있다.
특정 마이크로폰 어레이에 대한 확률 값의 세트는 가중치가 할당될 수 있다. 할당된 가중치는 재생 장치의 배향에 따라 변화할 수 있는 특정 마이크로폰 어레이와 관련된 가중치 일 수 있다. 예를 들어, 도 7b에 도시된 수직 배향에서, 마이크로폰 어레이(702c)와 관련된 값은 마이크로폰 어레이(702a)와 관련된 값보다 큰 가중치가 주어질 수 있는데, 이는 마이크로폰 어레이(702c)가 수직 마이크로폰 보다 오디오 소스의 위치에 관한 보다 유용한 정보를 제공할 수 있기 때문이다.
샘플 입력 응답은 동시에 마이크로폰 어레이 내의 모든 개별 마이크로폰에 대한 응답 값의 그룹과 비교될 수 있다. 예를 들어, 사운드 입력 값은 개별 마이크로폰 쌍의 모든 고유 한 조합에 대한 상대적 응답 값을 갖는 일련의 입력 응답 값으로 조직될 수 있다. 입력 응답 값의 세트는 트레이닝 응답 값의 세트가 개별 마이크로폰들의 쌍들의 모든 고유 한 조합에 대한 트레이닝 응답 값을 포함하는 하나 이상의 트레이닝 응답 값 세트와 비교될 수 있다.
이전의 논의와 유사하게, 특정 마이크로폰 어레이에 대한 응답 값은 그 마이크로폰 어레이에 대해 생성된 대응 확률 값을 가중함으로써 더 크게 가중될 수 있다.
유사하게, 샘플 입력 응답 값은 트레이닝 응답 값의 벡터와 비교될 수 있다.
여기에서 논의된 바와 같이, 응답 값은 2개의 컴포넌트, 즉 크기 컴포넌트 및 위상 컴포넌트를 가질 수 있다. 크기는 마이크로폰에 의해 수신된 사운드의 음량 또는 진폭을 나타낼 수 있으며, 위상은 마이크로폰에 의해 수신된 사운드의 타이밍을 나타낼 수 있다. 예를 들어 두 마이크로폰 사이의 위상 정보를 비교하면 한 마이크가 다른 마이크로폰에 앞서 특정 사운드를 수신했음을 나타낼 수 있다. 위상 정보는 수신된 사운드가 언제 반사(reflection)되는지를 식별하는 데 사용될 수 있다.
여기에 논의된 샘플 입력 응답과 트레이닝 응답 값 사이의 비교에서, 사운드 소스가 특정 방향에 있을 가능성을 결정함에 있어서 응답 값의 크기 및 위상의 임의의 조합이 비교될 수 있다. 예를 들어, 크기만 비교되거나, 위상 값만 비교되거나, 크기와 위상 값이 비교될 수 있다.
블록(812)에서, 블록(810)에서 결정된 소스의 위치에 기초하여 선택된 마이크로폰 어레이의 방향성 초점이 조정될 수 있다. 예를 들어, 위치 정보는 캡처된 음성 입력의 품질을 향상시키기 위해 음성 입력 캡처 프로세스 동안 빔포밍 및/또는 음향 에코 교정(acoustic echo correction, aec) 프로세스를 알리기 위해 사용될 수 있다
블록(814)에서, 사운드 입력은 마이크로폰 어레이의 조정된 방향성 초점에 기초하여 캡처될 수 있다. 예를 들어, 선택된 마이크로폰 어레이는 블록(810)에서 결정된 위치에 기초하여 결정된 방향으로 빔포밍될 수 있다. 어떤 예에서는 조정이 필요하지 않을 수 있다. 예를 들어, 시스템은 기존 또는 현재 방향성 초점이 적절하거나 충분하다고 결정할 수 있거나, 시스템은 방향성 초점이 사운드 입력 캡처를 필요하지 않을 수 있다고 결정할 수 있다.
블록(816)에서, 캡처된 사운드 입력은 사운드 입력에 포함된 임의의 음성 명령을 식별하도록 처리될 수 있다. 캡처된 사운드 입력은 말하기(speaking)로부터 텍스트(text)로 변환될 수 있으며, 블록(818)에서, 미디어 재생 시스템에 대한 사운드 입력에 포함된 임의의 명령이 실행될 수 있다.
블록(804 내지 806)은 재생 장치(700) 또는 시스템 내의 다른 장치가 재생 장치(700)의 배향 및/또는 위치가 미디어 재생 환경(예를 들어, 도 1에 도시된 환경)에서 변경된 것으로 결정할 때마다 반복될 수 있다. 예를 들어, 재생 장치 내의 센서(예를 들어, 가속도계, 자이로스코프)는 배향의 변화 및/또는 움직임이 언제 변화되는지 언제 결정할 수 있다.
방법(800) 또는 방법(800)의 블록들의 서브 세트는 주기적으로, 비 주기적으로 및/또는 발생하는 특정 이벤트(예를 들어, 환경에 맞춘 재생 특성의 튜닝, 새로운 환경으로의 셋업, 장치 배향의 변경)에 응답하여 반복될 수 있다.
IV. 결론
위의 설명은 다른 컴포넌트들 중에서도 하드웨어 상에서 실행되는 소프트웨어 및/또는 펌웨어를 포함하는, 다른 것들 중에서도 다양한 예시적인 시스템, 방법, 기기 및 제조 물품을 개시한다. 그러한 예시는 단지 예시적이고 제한하는 것으로서 간주되어서는 안됨이 이해된다. 예를 들어, 펌웨어, 하드웨어 및/또는 소프트웨어 태양 또는 컴포넌트 중 임의의 것 또는 모두가 하드웨어로만, 소프트웨어로만, 펌웨어로만, 또는 하드웨어, 소프트웨어 및/또는 펌웨어의 임의의 조합으로 구현될 수 있음이 고려된다. 따라서, 제공되는 예시는 그러한 시스템, 방법, 기기 및/또는 제조 물품을 구현하기 위한 유일한 방식이 아니다.
또한, 여기에서 "실시예"에 대한 참조는 실시예와 관련하여 설명되는 특정 특징, 구조 또는 특성이 발명의 적어도 하나의 예시적인 실시예에 포함될 수 있음을 의미한다. 명세서에서 다양한 곳에서 이러한 어구의 등장은 반드시 모두 같은 실시예를 참조하는 것이 아니며, 다른 실시예와 상호 배타적인 독립된 또는 대안적인 실시예가 아니다. 이와 같이, 당업자에 의해 명시적 및 암시적으로 이해되는 여기에 설명되는 실시예는 다른 실시예와 조합될 수 있다.
명세서는 주로 예시적인 환경, 시스템, 절차, 단계, 논리 블록, 처리 및 네트워크에 결합되는 데이터 처리 장치의 동작에 직접 또는 간접적으로 유사한 다른 심볼 표현의 관점에서 제공된다. 이러한 프로세스 설명 및 표현은 통상적으로 당업자에 의해 가장 효과적으로 자신의 연구의 본질을 다른 분야에 전달하기 위해 사용된다. 본 개시의 완전한 이해를 제공하기 위해 다수의 구체적인 세부 사항이 개시된다. 그러나, 본 개시의 어떠한 실시예는 어떠한 구체적인 세부 사항 없이 실시될 수 있음이 당업자에게 이해된다. 다른 경우에, 잘 알려진 방법, 절차, 컴포넌트 및 회로는 실시예의 태양을 불필요하게 흐리는 것을 피하기 위해 상세히 설명되지 않았다. 따라서, 본 개시의 범위는 앞의 실시예의 설명이 아니라 첨부된 청구범위에 의해 정의된다.
첨부된 청구범위 중 임의의 것이 순전히 소프트웨어 및/또는 펌웨어 구현을 커버하는 것으로 읽히는 경우, 적어도 하나의 예시에서의 구성요소 중 적어도 하나는 여기에서 명시적으로 메모리, DVD, CD, 블루레이 등과 같이 소프트웨어 및/또는 펌웨어를 저장하는 유형의 비일시적인 매체를 포함하는 것으로 정의된다.

Claims (15)

  1. 재생 장치에 있어서,
    프로세서,
    적어도 하나의 마이크로폰 어레이; 및
    상기 프로세서에 의해 실행될 때 상기 재생 장치가 기능들을 수행하게 하는 명령어들을 포함하는 메모리를 포함하고, 상기 기능들은:
    상기 재생 장치의 배향을 결정하는 기능;
    상기 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 기능;
    상기 적어도 하나의 마이크로폰 어레이를 통해 사운드 입력을 검출하는 기능;
    상기 결정된 적어도 하나의 마이크로폰 트레이닝 응답 및 상기 검출된 사운드 입력에 기초하여, 상기 사운드 입력의 소스의 위치를 결정하는 기능;
    상기 결정된 소스의 위치에 기초하여 상기 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정하는 기능; 및
    상기 적어도 하나의 마이크로폰 어레이의 조정된 방향성 초점에 기초하여 상기 사운드 입력을 캡처하는 기능을 포함하는 재생 장치.
  2. 제1항에 있어서, 상기 기능들은:
    상기 재생 장치의 배향에 기초하여 사운드 캡처를 가능하게 하는 적어도 하나의 마이크로폰 어레이를 결정하는 기능을 더 포함하는 재생 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 재생 장치의 배향에 기초하여, 복수의 마이크로폰 트레이닝 응답으로부터 재생 장치에 대한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 기능은:
    상기 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치의 배향에 대응하는 상기 적어도 하나의 마이크로폰 어레이에 대한 마이크로폰 트레이닝 응답의 세트를 식별하는 기능을 포함하는 재생 장치.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 결정된 적어도 하나의 마이크로폰 트레이닝 응답 및 상기 검출된 사운드 입력에 기초하여, 상기 사운드 입력의 소스의 위치 정보를 결정하는 기능은:
    상기 마이크로폰 트레이닝 응답의 세트와 상기 검출된 사운드 입력을 비교하는 기능; 및
    상기 적어도 하나의 마이크로폰 어레이 각각에 대한 상기 검출된 사운드 입력의 상대적인 방향을 결정하는 기능을 포함하는 재생 장치.
  5. 제4항에 있어서,
    상기 마이크로폰 트레이닝 응답의 세트와 상기 검출된 사운드 입력을 비교하는 기능은:
    상기 마이크로폰 트레이닝 응답의 세트의 크기 및 위상 중 적어도 하나와 상기 검출된 사운드 입력의 크기 및 위상 중 적어도 하나를 비교하는 기능을 포함하는 재생 장치.
  6. 제1항 내지 제5항 중 적어도 어느 한 항에 있어서,
    상기 재생 장치는 제1 마이크로폰 어레이 및 제2 마이크로폰 어레이를 포함하고,
    상기 기능들은 추가로 사운드 입력 캡처를 위한 상기 제1 마이크로폰 어레이를 선택하는 기능을 포함하고, 및
    상기 재생 장치의 배향에 기초하여 상기 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치를 위한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 기능은:
    상기 제1 마이크로폰 어레이 및 상기 재생 장치의 배향에 대응하는 마이크로폰 트레이닝 응답의 세트를 결정하는 기능을 포함하는 재생 장치.
  7. 제8항에 있어서,
    상기 재생 장치는 제1 마이크로폰 어레이 및 제2 마이크로 어레이를 포함하고, 및
    상기 방법은:
    상기 제1 마이크로폰 어레이의 제1 배향 및 상기 제1 마이크로폰 어레이의 제2 배향에 기초하여 상기 제1 마이크로폰 어레이와 상기 제2 마이크로폰 어레이를 선택하는 단계를 더 포함하는, 재생 장치.
  8. 적어도 하나의 마이크로폰 어레이를 포함하는 재생 장치의 배향을 결정하는 단계;
    상기 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치를 위한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 단계;
    상기 적어도 하나의 마이크로폰 어레이를 통해 사운드 입력을 검출하는 단계;
    상기 결정된 적어도 하나의 마이크로폰 트레이닝 응답 및 상기 검출된 사운드 입력에 기초하여 상기 사운드 입력의 소스의 위치를 결정하는 단계;
    상기 결정된 소스의 위치에 기초하여 상기 적어도 하나의 마이크로폰 어레이의 방향성 초점을 조정하는 단계; 및
    상기 적어도 하나의 마이크로폰 어레이의 조절된 방향성 초점에 기초하여 상기 사운드 입력을 캡처하는 단계를 포함하는 방법.
  9. 제15항에 있어서,
    상기 재생 장치의 배향에 기초하여 사운드 캡처를 가능하게 하는 적어도 하나의 마이크로폰 어레이를 결정하는 단계를 더 포함하는 방법.
  10. 제9항에 있어서,
    상기 적어도 하나의 마이크로폰 어레이를 결정하는 단계는 복수의 마이크로폰 어레이를 결정하는 단계를 더 포함하고; 및
    상기 사운드 소스의 위치를 결정하는 단계는, 상기 재생 장치의 검출된 배향에 따라, 마이크로폰 어레이 각각에 의해 검출된 상기 사운드 입력을 가중(weighting)하는 단계를 포함하는 방법.
  11. 제8항 또는 제9항에 있어서,
    상기 재생 장치의 배향에 기초하여 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치를 위한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 단계는:
    상기 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치의 배향에 대응하는 상기 적어도 하나의 마이크로폰 어레이를 위한 마이크로폰 트레이닝 응답의 세트를 식별하는 단계를 포함하는 방법.
  12. 제11항에 있어서,
    상기 결정된 적어도 하나의 마이크로폰 트레이닝 응답 및 상기 검출된 사운드 입력에 기초하여, 상기 사운드 입력의 소스의 위치를 결정하는 단계는:
    상기 마이크로폰 트레이닝 응답의 세트와 상기 검출된 사운드 입력을 비교하는 단계; 및
    상기 적어도 하나의 마이크로폰 어레이 각각을 위한 상기 검출된 사운드 입력의 각 방향을 결정하는 단계를 포함하는 방법.
  13. 제12항에 있어서,
    상기 마이크로폰 트레이닝 응답의 세트와 상기 검출된 사운드 입력을 비교하는 단계는:
    상기 마이크로폰 트레이닝 응답의 세트의 크기 및 위상 중 적어도 하나와 상기 검출된 사운드 입력의 크기 및 위상 중 적어도 하나를 비교하는 단계를 포함하는 방법.
  14. 제8항 및 제10항 내지 제13항 중 어느 한 항에 있어서,
    상기 재생 장치는 제1 마이크로폰 어레이 및 제2 마이크로폰 어레이를 포함하고,
    상기 방법은 사운드 입력 캡처를 위한 상기 제1 마이크로폰 어레이를 선택하는 단계를 더 포함하고,
    상기 재생 장치의 배향에 기초하여 상기 복수의 마이크로폰 트레이닝 응답으로부터 상기 재생 장치를 위한 적어도 하나의 마이크로폰 트레이닝 응답을 결정하는 단계는, 상기 재생 장치의 배향 및 상기 제1 마이크로폰 어레이에 대응하는 마이크로폰 트레이닝 응답의 세트를 결정하는 단계를 포함하는 방법.
  15. 프로세서에 의해 실행될 때 재생 장치로 하여금 제8항 내지 제14항 중 어느 한 청구항에 따른 방법을 수행하게 하는 명령어를 저장한, 유형이고 비-일시적인 컴퓨터 판독 가능한 기록매체.
KR1020197012192A 2016-09-30 2017-09-28 멀티-배향 재생 장치 마이크로폰 KR102158514B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/282,554 2016-09-30
US15/282,554 US9743204B1 (en) 2016-09-30 2016-09-30 Multi-orientation playback device microphones
PCT/US2017/054063 WO2018064362A1 (en) 2016-09-30 2017-09-28 Multi-orientation playback device microphones

Publications (2)

Publication Number Publication Date
KR20190055832A true KR20190055832A (ko) 2019-05-23
KR102158514B1 KR102158514B1 (ko) 2020-09-23

Family

ID=59581665

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197012192A KR102158514B1 (ko) 2016-09-30 2017-09-28 멀티-배향 재생 장치 마이크로폰

Country Status (6)

Country Link
US (7) US9743204B1 (ko)
EP (1) EP3520436B1 (ko)
JP (1) JP6986071B2 (ko)
KR (1) KR102158514B1 (ko)
CN (1) CN109997370B (ko)
WO (1) WO2018064362A1 (ko)

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10509626B2 (en) 2016-02-22 2019-12-17 Sonos, Inc Handling of loss of pairing between networked devices
US9826306B2 (en) 2016-02-22 2017-11-21 Sonos, Inc. Default playback device designation
US9978390B2 (en) 2016-06-09 2018-05-22 Sonos, Inc. Dynamic player selection for audio signal processing
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10446165B2 (en) 2017-09-27 2019-10-15 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10897680B2 (en) * 2017-10-04 2021-01-19 Google Llc Orientation-based device interface
CN117544884A (zh) 2017-10-04 2024-02-09 谷歌有限责任公司 基于房间特性自动均衡音频输出的方法和系统
US20190166424A1 (en) * 2017-11-28 2019-05-30 Invensense, Inc. Microphone mesh network
US10880650B2 (en) 2017-12-10 2020-12-29 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
US11343614B2 (en) 2018-01-31 2022-05-24 Sonos, Inc. Device designation of playback and network microphone device arrangements
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10847178B2 (en) 2018-05-18 2020-11-24 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
CN108900959B (zh) * 2018-05-30 2020-09-11 北京百度网讯科技有限公司 测试语音交互设备的方法、装置、设备和计算机可读介质
US10986437B1 (en) * 2018-06-21 2021-04-20 Amazon Technologies, Inc. Multi-plane microphone array
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US11335357B2 (en) * 2018-08-14 2022-05-17 Bose Corporation Playback enhancement in audio systems
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
US10587430B1 (en) 2018-09-14 2020-03-10 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US10692518B2 (en) 2018-09-29 2020-06-23 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
KR20200043642A (ko) * 2018-10-18 2020-04-28 삼성전자주식회사 동작 상태에 기반하여 선택한 마이크를 이용하여 음성 인식을 수행하는 전자 장치 및 그의 동작 방법
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
EP3654249A1 (en) 2018-11-15 2020-05-20 Snips Dilated convolutions and gating for efficient keyword spotting
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
USD923638S1 (en) 2019-02-12 2021-06-29 Sonos, Inc. Display screen or portion thereof with transitional graphical user interface
WO2020218634A1 (ko) * 2019-04-23 2020-10-29 엘지전자 주식회사 응답 기기 결정 방법 및 장치
US10812921B1 (en) 2019-04-30 2020-10-20 Microsoft Technology Licensing, Llc Audio stream processing for distributed device meeting
US11875796B2 (en) 2019-04-30 2024-01-16 Microsoft Technology Licensing, Llc Audio-visual diarization to identify meeting attendees
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
WO2021021857A1 (en) * 2019-07-30 2021-02-04 Dolby Laboratories Licensing Corporation Acoustic echo cancellation control for distributed audio devices
EP4005229A2 (en) * 2019-07-30 2022-06-01 Dolby Laboratories Licensing Corporation Acoustic zoning with distributed microphones
US11659332B2 (en) 2019-07-30 2023-05-23 Dolby Laboratories Licensing Corporation Estimating user location in a system including smart audio devices
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
CN110853657B (zh) * 2019-11-18 2022-05-13 北京小米智能科技有限公司 空间划分方法、装置及存储介质
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
CN110954867B (zh) * 2020-02-26 2020-06-19 星络智能科技有限公司 一种声源定位方法、智能音箱及存储介质
CN113411487B (zh) * 2020-03-17 2023-08-01 中国电信股份有限公司 设备的控制方法、装置、系统和计算机可读存储介质
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130034241A1 (en) * 2011-06-11 2013-02-07 Clearone Communications, Inc. Methods and apparatuses for multiple configurations of beamforming microphone arrays
US20150271593A1 (en) * 2014-03-18 2015-09-24 Cisco Technology, Inc. Techniques to Mitigate the Effect of Blocked Sound at Microphone Arrays in a Telepresence Device

Family Cites Families (829)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3014423A (en) 1959-11-27 1961-12-26 Jersey Prod Res Co Apparatus for drilling boreholes with explosive charges
US4941187A (en) 1984-02-03 1990-07-10 Slater Robert W Intercom apparatus for integrating disparate audio sources for use in light aircraft or similar high noise environments
US4741038A (en) 1986-09-26 1988-04-26 American Telephone And Telegraph Company, At&T Bell Laboratories Sound location arrangement
US4974213A (en) 1988-12-16 1990-11-27 Siwecki Thomas L Passive active underwater sound detection apparatus
US5036538A (en) 1989-11-22 1991-07-30 Telephonics Corporation Multi-station voice recognition and processing system
US5440644A (en) 1991-01-09 1995-08-08 Square D Company Audio distribution system having programmable zoning features
EP0548836B1 (en) 1991-12-20 1997-06-11 Matsushita Electric Industrial Co., Ltd. A bass reproduction speaker apparatus
US6311157B1 (en) 1992-12-31 2001-10-30 Apple Computer, Inc. Assigning meanings to utterances in a speech recognition system
US5740260A (en) 1995-05-22 1998-04-14 Presonus L.L.P. Midi to analog sound processor interface
US7174299B2 (en) 1995-08-18 2007-02-06 Canon Kabushiki Kaisha Speech recognition system, speech recognition apparatus, and speech recognition method
JP3094900B2 (ja) 1996-02-20 2000-10-03 ヤマハ株式会社 ネットワーク機器およびデータ送受信方法
US6404811B1 (en) 1996-05-13 2002-06-11 Tektronix, Inc. Interactive multimedia system
JP3679526B2 (ja) 1996-10-31 2005-08-03 キヤノン株式会社 画像共有装置、画面制御方法及びコンピュータ可読メモリ
US6469633B1 (en) 1997-01-06 2002-10-22 Openglobe Inc. Remote control of electronic devices
US6078886A (en) 1997-04-14 2000-06-20 At&T Corporation System and method for providing remote automatic speech recognition services via a packet network
US6611537B1 (en) 1997-05-30 2003-08-26 Centillium Communications, Inc. Synchronous network for digital media streams
US6408078B1 (en) 1997-10-30 2002-06-18 Maximilian Hobelsberger Active reactive acoustical elements
US6088459A (en) 1997-10-30 2000-07-11 Hobelsberger; Maximilian Hans Loudspeaker system with simulated baffle for improved base reproduction
US6032202A (en) 1998-01-06 2000-02-29 Sony Corporation Of Japan Home audio/video network with two level device control
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US6301603B1 (en) 1998-02-17 2001-10-09 Euphonics Incorporated Scalable audio processing on a heterogeneous processor array
US6953886B1 (en) 1998-06-17 2005-10-11 Looney Productions, Llc Media organizer and entertainment center
IL127569A0 (en) 1998-09-16 1999-10-28 Comsense Technologies Ltd Interactive toys
US6839410B2 (en) 1998-09-01 2005-01-04 At&T Corp. Method and apparatus for setting user communication parameters based on voice identification of users
US20020116196A1 (en) 1998-11-12 2002-08-22 Tran Bao Q. Speech recognizer
US7130616B2 (en) 2000-04-25 2006-10-31 Simple Devices System and method for providing content, management, and interactivity for client devices
US6256554B1 (en) 1999-04-14 2001-07-03 Dilorenzo Mark Multi-room entertainment system with in-room media player/dispenser
US6414251B1 (en) 1999-04-19 2002-07-02 Breck Colquett Weighing apparatus and method having automatic tolerance analysis and calibration
US7657910B1 (en) 1999-07-26 2010-02-02 E-Cast Inc. Distributed electronic entertainment method and apparatus
GB2352933A (en) 1999-07-31 2001-02-07 Ibm Speech encoding in a client server system
US6542868B1 (en) 1999-09-23 2003-04-01 International Business Machines Corporation Audio notification management system
US6937977B2 (en) 1999-10-05 2005-08-30 Fastmobile, Inc. Method and apparatus for processing an input speech signal during presentation of an output audio signal
US6611604B1 (en) 1999-10-22 2003-08-26 Stillwater Designs & Audio, Inc. Ultra low frequency transducer and loud speaker comprising same
US7725307B2 (en) 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
US6594630B1 (en) 1999-11-19 2003-07-15 Voice Signal Technologies, Inc. Voice-activated control for electrical device
US6522886B1 (en) 1999-11-22 2003-02-18 Qwest Communications International Inc. Method and system for simultaneously sharing wireless communications among multiple wireless handsets
ES2277419T3 (es) 1999-12-03 2007-07-01 Telefonaktiebolaget Lm Ericsson (Publ) Un metodo para producir simultaneamente ficheros de audio en dos telefonos.
US20010042107A1 (en) 2000-01-06 2001-11-15 Palm Stephen R. Networked audio player transport protocol and architecture
US7661107B1 (en) 2000-01-18 2010-02-09 Advanced Micro Devices, Inc. Method and apparatus for dynamic allocation of processing resources
AU2001231115A1 (en) 2000-01-24 2001-07-31 Zapmedia, Inc. System and method for the distribution and sharing of media assets between mediaplayers devices
JP2004500651A (ja) 2000-01-24 2004-01-08 フリスキット　インコーポレイテッド ストリーミングメディアの検索および再生システム
DE60138266D1 (de) 2000-02-18 2009-05-20 Bridgeco Ag Verteilung einer zeitreferenz über ein netzwerk
JP2001236093A (ja) 2000-02-24 2001-08-31 Omron Corp 電子機器制御装置および電子機器
US6631410B1 (en) 2000-03-16 2003-10-07 Sharp Laboratories Of America, Inc. Multimedia wired/wireless content synchronization system and method
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
AU4219601A (en) 2000-03-31 2001-10-15 Classwave Wireless Inc. Dynamic protocol selection and routing of content to mobile devices
GB2363036B (en) 2000-05-31 2004-05-12 Nokia Mobile Phones Ltd Conference call method and apparatus therefor
US20050164664A1 (en) 2000-07-21 2005-07-28 Difonzo Daniel F. Dynamically reconfigurable wireless networks (DRWiN) and methods for operating such networks
US20040105566A1 (en) 2000-07-27 2004-06-03 International Business Machines Corporation Body set type speaker unit
US8165867B1 (en) 2000-09-15 2012-04-24 Fish Robert D Methods for translating a device command
US6934756B2 (en) 2000-11-01 2005-08-23 International Business Machines Corporation Conversational networking via transport, coding and control conversational protocols
US20020072816A1 (en) 2000-12-07 2002-06-13 Yoav Shdema Audio system
US7016847B1 (en) 2000-12-08 2006-03-21 Ben Franklin Patent Holdings L.L.C. Open architecture for a voice user interface
US6778869B2 (en) 2000-12-11 2004-08-17 Sony Corporation System and method for request, delivery and use of multimedia files for audiovisual entertainment in the home environment
US7143939B2 (en) 2000-12-19 2006-12-05 Intel Corporation Wireless music device and method therefor
US20020124097A1 (en) 2000-12-29 2002-09-05 Isely Larson J. Methods, systems and computer program products for zone based distribution of audio signals
US7617099B2 (en) 2001-02-12 2009-11-10 FortMedia Inc. Noise suppression by two-channel tandem spectrum modification for speech signal in an automobile
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
US7136934B2 (en) 2001-06-19 2006-11-14 Request, Inc. Multimedia synchronization method and device
KR100420069B1 (ko) 2001-08-23 2004-02-25 한국과학기술원 인지 특성을 반영한 메뉴 설계 및 아이템 제시방법
US6892083B2 (en) 2001-09-05 2005-05-10 Vocera Communications Inc. Voice-controlled wireless communications system and method
US7536704B2 (en) 2001-10-05 2009-05-19 Opentv, Inc. Method and apparatus automatic pause and resume of playback for a popup on interactive TV
CA2407123C (en) 2001-10-16 2007-12-18 Audio Products International Corp. Low distortion loudspeaker cone suspension
CA2408045A1 (en) 2001-10-16 2003-04-16 Audio Products International Corp. Loudspeaker with large displacement motional feedback
US7006639B2 (en) 2001-11-20 2006-02-28 Maximilian Hans Hobelsberger Active noise-attenuating duct element
US7103542B2 (en) 2001-12-14 2006-09-05 Ben Franklin Patent Holding Llc Automatically improving a voice recognition system
WO2003054686A2 (en) 2001-12-17 2003-07-03 Becomm Corporation Method and system for synchronization of content rendering
US7853341B2 (en) 2002-01-25 2010-12-14 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
US8103009B2 (en) 2002-01-25 2012-01-24 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
JP4086280B2 (ja) 2002-01-29 2008-05-14 株式会社東芝 音声入力システム、音声入力方法及び音声入力プログラム
EP1477033A2 (en) 2002-02-20 2004-11-17 Meshnetworks, Inc. A system and method for routing 802.11 data traffic across channels to increase ad-hoc network capacity
JP3715584B2 (ja) 2002-03-28 2005-11-09 富士通株式会社 機器制御装置および機器制御方法
US7657224B2 (en) 2002-05-06 2010-02-02 Syncronation, Inc. Localized audio networks and associated digital accessories
KR100966415B1 (ko) 2002-05-09 2010-06-28 넷스트림스 엘엘씨 오디오 네트워크 분산 시스템
US6961423B2 (en) 2002-06-24 2005-11-01 Freescale Semiconductor, Inc. Method and apparatus for performing adaptive filtering
JP3815388B2 (ja) 2002-06-25 2006-08-30 株式会社デンソー 音声認識システムおよび端末
US8060225B2 (en) 2002-07-31 2011-11-15 Hewlett-Packard Development Company, L. P. Digital audio device
DE60210177T2 (de) 2002-08-14 2006-12-28 Sony Deutschland Gmbh Bandbreitenorientierte Neukonfigurierung von drahtlosen Ad-Hoc-Netzen
US7228275B1 (en) 2002-10-21 2007-06-05 Toyota Infotechnology Center Co., Ltd. Speech recognition system having multiple speech recognizers
KR20040042242A (ko) 2002-11-13 2004-05-20 삼성전자주식회사 홈서버를 이용하는 홈로봇 및 이를 포함하는 홈네트워크시스템
US7295548B2 (en) 2002-11-27 2007-11-13 Microsoft Corporation Method and system for disaggregating audio/visual components
US7076428B2 (en) 2002-12-30 2006-07-11 Motorola, Inc. Method and apparatus for selective distributed speech recognition
JP2004347943A (ja) 2003-05-23 2004-12-09 Clarion Co Ltd データ処理装置、楽曲再生装置、データ処理装置の制御プログラムおよび楽曲再生装置の制御プログラム
JP2004354721A (ja) 2003-05-29 2004-12-16 Shimizu Corp 音声制御装置、音声制御方法および音声制御プログラム
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7961892B2 (en) 2003-07-28 2011-06-14 Texas Instruments Incorporated Apparatus and method for monitoring speaker cone displacement in an audio speaker
US8234395B2 (en) 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US10613817B2 (en) 2003-07-28 2020-04-07 Sonos, Inc. Method and apparatus for displaying a list of tracks scheduled for playback by a synchrony group
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US20050031132A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Control system
US20050031140A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using a capacitance measurement
US20050031131A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of modifying dynamics of a system
US20050031134A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using infrared light
US20050031138A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of measuring a cant of an actuator
US20050031137A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Calibration of an actuator
US20060104451A1 (en) 2003-08-07 2006-05-18 Tymphany Corporation Audio reproduction system
US20050031139A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using impedance
US20050031133A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Process for position indication
KR20050023841A (ko) 2003-09-03 2005-03-10 삼성전자주식회사 비선형 왜곡 저감 방법 및 장치
US7099821B2 (en) 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
US20050077843A1 (en) 2003-10-11 2005-04-14 Ronnie Benditt Method and apparatus for controlling a performing arts show by an onstage performer
WO2005041618A1 (en) 2003-10-24 2005-05-06 Koninklijke Philips Electronics N.V. Adaptive sound reproduction
US20090018828A1 (en) 2003-11-12 2009-01-15 Honda Motor Co., Ltd. Automatic Speech Recognition System
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
JP4269973B2 (ja) 2004-02-27 2009-05-27 株式会社デンソー カーオーディオシステム
US7483538B2 (en) 2004-03-02 2009-01-27 Ksc Industries, Inc. Wireless and wired speaker hub for a home theater system
US7415117B2 (en) 2004-03-02 2008-08-19 Microsoft Corporation System and method for beamforming using a microphone array
JP4059214B2 (ja) 2004-03-04 2008-03-12 ソニー株式会社 情報再生システムの制御方法、情報再生システム、情報提供装置、および情報提供プログラム
US10200504B2 (en) 2007-06-12 2019-02-05 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US7372966B2 (en) 2004-03-19 2008-05-13 Nokia Corporation System for limiting loudspeaker displacement
JP2005284492A (ja) 2004-03-29 2005-10-13 Mitsubishi Electric Corp 音声利用操作装置
US7630501B2 (en) 2004-05-14 2009-12-08 Microsoft Corporation System and method for calibration of an acoustic system
US7792311B1 (en) 2004-05-15 2010-09-07 Sonos, Inc., Method and apparatus for automatically enabling subwoofer channel audio based on detection of subwoofer device
US7346846B2 (en) 2004-05-28 2008-03-18 Microsoft Corporation Strategies for providing just-in-time user assistance
US7006938B2 (en) 2004-06-16 2006-02-28 Ami Semiconductor, Inc. Reactive sensor modules using Pade' Approximant based compensation and providing module-sourced excitation
US7672845B2 (en) 2004-06-22 2010-03-02 International Business Machines Corporation Method and system for keyword detection using voice-recognition
US20060004834A1 (en) 2004-06-30 2006-01-05 Nokia Corporation Dynamic shortcuts
JP2006092482A (ja) 2004-09-27 2006-04-06 Yamaha Corp 音声認識通報装置
US7720232B2 (en) 2004-10-15 2010-05-18 Lifesize Communications, Inc. Speakerphone
US8386523B2 (en) 2004-12-30 2013-02-26 Texas Instruments Incorporated Random access audio decoder
TWI272860B (en) 2005-01-03 2007-02-01 Lite On Technology Corp Audio receiver and volume reminder method
US20070189544A1 (en) 2005-01-15 2007-08-16 Outland Research, Llc Ambient sound responsive media player
US20060190968A1 (en) 2005-01-31 2006-08-24 Searete Llc, A Limited Corporation Of The State Of The State Of Delaware Sharing between shared audio devices
US7991167B2 (en) 2005-04-29 2011-08-02 Lifesize Communications, Inc. Forming beams with nulls directed at noise sources
US7720684B2 (en) 2005-04-29 2010-05-18 Nuance Communications, Inc. Method, apparatus, and computer program product for one-step correction of voice interaction
US9300790B2 (en) 2005-06-24 2016-03-29 Securus Technologies, Inc. Multi-party conversation analyzer and logger
JP4760160B2 (ja) * 2005-06-29 2011-08-31 ヤマハ株式会社 集音装置
JP4804052B2 (ja) 2005-07-08 2011-10-26 アルパイン株式会社 音声認識装置、音声認識装置を備えたナビゲーション装置及び音声認識装置の音声認識方法
US20070018844A1 (en) 2005-07-19 2007-01-25 Sehat Sutardja Two way remote control
JP4285457B2 (ja) 2005-07-20 2009-06-24 ソニー株式会社 音場測定装置及び音場測定方法
US8073149B2 (en) 2005-07-29 2011-12-06 Panasonic Corporation Loudspeaker device
CN1909625A (zh) 2005-08-05 2007-02-07 鸿富锦精密工业（深圳）有限公司 一种自动调整音量的电视装置及控制方法
EP1934828A4 (en) 2005-08-19 2008-10-08 Gracenote Inc METHOD AND SYSTEM FOR MANAGING THE OPERATION OF A REPRODUCTION DEVICE
JP4519041B2 (ja) 2005-09-20 2010-08-04 ローランド株式会社 楽器用スピーカ装置
WO2007051493A1 (en) 2005-11-07 2007-05-10 Telecom Italia S.P.A. Method for managing a conference call in a telephone network
EP1971183A1 (en) 2005-11-15 2008-09-17 Yamaha Corporation Teleconference device and sound emission/collection device
JP4929685B2 (ja) * 2005-11-15 2012-05-09 ヤマハ株式会社 遠隔会議装置
US20070140058A1 (en) 2005-11-21 2007-06-21 Motorola, Inc. Method and system for correcting transducer non-linearities
US7600194B2 (en) 2005-12-02 2009-10-06 Microsoft Corporation Start menu operation for computer user interface
JP2007174233A (ja) 2005-12-21 2007-07-05 Pioneer Electronic Corp スピーカー装置及び携帯電話機
JP4677341B2 (ja) 2005-12-21 2011-04-27 パイオニア株式会社 スピーカー装置及び携帯電話機
KR100762636B1 (ko) 2006-02-14 2007-10-01 삼성전자주식회사 네트워크 단말의 음성 검출 제어 시스템 및 방법
US8284982B2 (en) 2006-03-06 2012-10-09 Induction Speaker Technology, Llc Positionally sequenced loudspeaker system
CN101467142A (zh) 2006-04-04 2009-06-24 约翰逊控制技术公司 在车辆中从数字媒体存储设备提取元数据以用于媒体选择的系统和方法
KR100786108B1 (ko) 2006-05-01 2007-12-18 김준식 음파통신 네트워크
US9208785B2 (en) 2006-05-10 2015-12-08 Nuance Communications, Inc. Synchronizing distributed speech recognition
US8207936B2 (en) 2006-06-30 2012-06-26 Sony Ericsson Mobile Communications Ab Voice remote control
US20080037814A1 (en) 2006-08-09 2008-02-14 Jeng-Jye Shau Precision audio speakers
WO2008018099A1 (en) 2006-08-10 2008-02-14 Claudio Lastrucci Improvements to systems for acoustic diffusion
US10013381B2 (en) 2006-08-31 2018-07-03 Bose Corporation Media playing from a docked handheld media device
US8483853B1 (en) 2006-09-12 2013-07-09 Sonos, Inc. Controlling and manipulating groupings in a multi-zone media system
US8473618B2 (en) 2006-09-19 2013-06-25 Motorola Solutions, Inc. Method and system for processing multiple communication sessions in a communication network
JP2008079256A (ja) 2006-09-25 2008-04-03 Toshiba Corp 音響信号処理装置、音響信号処理方法及びプログラム
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US7747293B2 (en) 2006-10-17 2010-06-29 Marvell Worl Trade Ltd. Display control for cellular phone
TWI435591B (zh) 2006-10-17 2014-04-21 Marvell World Trade Ltd 用於蜂巢電話之顯示控制
JP2010507294A (ja) 2006-10-17 2010-03-04 アベガ システムズ ピーティーワイ リミテッド マルチメディアデバイスの統合
US9124650B2 (en) 2006-12-13 2015-09-01 Quickplay Media Inc. Digital rights management in a mobile environment
US20080146289A1 (en) 2006-12-14 2008-06-19 Motorola, Inc. Automatic audio transducer adjustments based upon orientation of a mobile communication device
JP2008158868A (ja) 2006-12-25 2008-07-10 Toyota Motor Corp 移動体、及びその制御方法
KR101316750B1 (ko) 2007-01-23 2013-10-08 삼성전자주식회사 수신된 위치 정보에 따라 오디오 파일을 재생하는 장치 및그 방법
TW200833152A (en) 2007-01-31 2008-08-01 Bluepacket Comm Co Ltd Multimedia switching system
US20090228919A1 (en) 2007-11-16 2009-09-10 Zott Joseph A Media playlist management and viewing remote control
US20080208594A1 (en) 2007-02-27 2008-08-28 Cross Charles W Effecting Functions On A Multimodal Telephony Device
US8880405B2 (en) 2007-03-07 2014-11-04 Vlingo Corporation Application text entry in a mobile environment using a speech processing facility
US8886545B2 (en) 2007-03-07 2014-11-11 Vlingo Corporation Dealing with switch latency in speech recognition
US8635243B2 (en) 2007-03-07 2014-01-21 Research In Motion Limited Sending a communications header with voice recording to send metadata for use in speech recognition, formatting, and search mobile search application
US8019076B1 (en) 2007-03-14 2011-09-13 Clearone Communications, Inc. Portable speakerphone device and subsystem utilizing false doubletalk detection
GB0706074D0 (en) 2007-03-28 2007-05-09 Skype Ltd Detection of communication states
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8983051B2 (en) 2007-04-03 2015-03-17 William F. Barton Outgoing call classification and disposition
US8406439B1 (en) 2007-04-04 2013-03-26 At&T Intellectual Property I, L.P. Methods and systems for synthetic audio placement
US8848879B1 (en) 2007-05-03 2014-09-30 Avaya Inc. Customizable notification based on recent communication history
KR100827613B1 (ko) 2007-05-04 2008-05-07 삼성전자주식회사 휴대용 단말기의 마이크 제어 장치 및 방법
US8041565B1 (en) 2007-05-04 2011-10-18 Foneweb, Inc. Precision speech to text conversion
US8032383B1 (en) 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
US8136040B2 (en) 2007-05-16 2012-03-13 Apple Inc. Audio variance for multiple windows
EP2156401A4 (en) 2007-05-18 2013-04-17 Shorthand Mobile Inc SYSTEM AND METHOD FOR ADVANCED COMMUNICATION VIA COMMUNICATION SYSTEMS AT SMALL DATA RATE
EP1998446A1 (en) 2007-05-31 2008-12-03 Alcatel Lucent Remote control for devices with connectivity to a service delivery platform
US8068925B2 (en) 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
JP4985151B2 (ja) 2007-06-29 2012-07-25 ヤマハ株式会社 コンテンツ配信システム及びセンタ装置
JP4916394B2 (ja) 2007-07-03 2012-04-11 富士通株式会社 エコー抑圧装置、エコー抑圧方法及びコンピュータプログラム
US8323201B2 (en) 2007-08-06 2012-12-04 Orison Corporation System and method for three-dimensional ultrasound imaging
US8073125B2 (en) 2007-09-25 2011-12-06 Microsoft Corporation Spatial audio conferencing
US8013720B2 (en) 2007-11-02 2011-09-06 Reverse Control, Inc. Signal apparatus for facilitating safe backup of vehicles
US8542861B2 (en) 2007-11-20 2013-09-24 Panasonic Corporation Loudspeaker, video device, and portable information processing apparatus
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US9386154B2 (en) 2007-12-21 2016-07-05 Nuance Communications, Inc. System, method and software program for enabling communications between customer service agents and users of communication devices
US8473081B2 (en) 2007-12-25 2013-06-25 Personics Holdings, Inc. Method and system for event reminder using an earpiece
WO2009086599A1 (en) 2008-01-07 2009-07-16 Avega Systems Pty Ltd A user interface for managing the operation of networked media playback devices
US9992314B2 (en) 2008-01-24 2018-06-05 Garmin Switzerland Gmbh Automatic device mode switching
DE102008039329A1 (de) 2008-01-25 2009-07-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Berechnung von Steuerinformationen für ein Echounterdrückungsfilter und Vorrichtung und Verfahren zur Berechnung eines Verzögerungswerts
US8072905B2 (en) 2008-02-04 2011-12-06 Sony Ericsson Mobile Communications Ab Intelligent interaction between devices in a local network
US8194882B2 (en) 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US9113240B2 (en) 2008-03-18 2015-08-18 Qualcomm Incorporated Speech enhancement using multiple microphones on multiple devices
US20090249222A1 (en) 2008-03-25 2009-10-01 Square Products Corporation System and method for simultaneous media presentation
US20090248397A1 (en) 2008-03-25 2009-10-01 Microsoft Corporation Service Initiation Techniques
CN101562671A (zh) 2008-04-18 2009-10-21 鸿富锦精密工业（深圳）有限公司 音频设备的音量控制方法及通信装置
US8831948B2 (en) 2008-06-06 2014-09-09 At&T Intellectual Property I, L.P. System and method for synthetically generated speech describing media content
US8385557B2 (en) 2008-06-19 2013-02-26 Microsoft Corporation Multichannel acoustic echo reduction
US8693663B2 (en) 2008-06-27 2014-04-08 Centurylink Intellectual Property Llc System and method for implementing do-not-disturb during playback of media content
US8364481B2 (en) 2008-07-02 2013-01-29 Google Inc. Speech recognition with parallel recognition tasks
US8505056B2 (en) 2008-07-10 2013-08-06 Apple Inc. Updating properties of remote A/V performance nodes
EP2146519B1 (en) 2008-07-16 2012-06-06 Nuance Communications, Inc. Beamforming pre-processing for speaker localization
US8639830B2 (en) 2008-07-22 2014-01-28 Control4 Corporation System and method for streaming audio
JP5206234B2 (ja) * 2008-08-27 2013-06-12 富士通株式会社 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム
KR20100034229A (ko) 2008-09-23 2010-04-01 삼성전자주식회사 이어폰 회로를 포함하는 휴대 단말기 및 이의 운용방법
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
KR102339297B1 (ko) 2008-11-10 2021-12-14 구글 엘엘씨 멀티센서 음성 검출
US8386261B2 (en) 2008-11-14 2013-02-26 Vocollect Healthcare Systems, Inc. Training/coaching system for a voice-enabled work environment
JP5347472B2 (ja) 2008-12-12 2013-11-20 ヤマハ株式会社 遠隔制御装置および遠隔制御システム
US8548812B2 (en) 2008-12-22 2013-10-01 Avaya Inc. Method and system for detecting a relevant utterance in a voice session
KR101467796B1 (ko) 2009-01-12 2014-12-10 엘지전자 주식회사 이동단말기 및 그 제어 방법
US20100179874A1 (en) 2009-01-13 2010-07-15 Yahoo! Inc. Media object metadata engine configured to determine relationships between persons and brands
US8428758B2 (en) 2009-02-16 2013-04-23 Apple Inc. Dynamic audio ducking
FR2943875A1 (fr) 2009-03-31 2010-10-01 France Telecom Procede et dispositif de classification du bruit de fond contenu dans un signal audio.
KR101064976B1 (ko) 2009-04-06 2011-09-15 한국과학기술원 음원위치추정시스템 및 이를 구비한 음원에 반응하는 로봇
JP4820434B2 (ja) 2009-06-08 2011-11-24 レノボ・シンガポール・プライベート・リミテッド マイクロフォンのミュート・コントロール
US8478982B2 (en) 2009-08-06 2013-07-02 Broadcom Corporation Media access control security management in physical layer
US8625775B2 (en) 2009-08-06 2014-01-07 Hti Ip, L.L.C. Method and system for reducing echo and noise in a vehicle passenger compartment environment
JP5440053B2 (ja) 2009-09-14 2014-03-12 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
CN102577436B (zh) 2009-09-17 2015-02-11 株式会社日立医疗器械 超声波探头及超声波摄像装置
US20110091055A1 (en) 2009-10-19 2011-04-21 Broadcom Corporation Loudspeaker localization techniques
US8600073B2 (en) 2009-11-04 2013-12-03 Cambridge Silicon Radio Limited Wind noise suppression
US20110145581A1 (en) 2009-12-14 2011-06-16 Verizon Patent And Licensing, Inc. Media playback across devices
JP5641186B2 (ja) 2010-01-13 2014-12-17 ヤマハ株式会社 雑音抑圧装置およびプログラム
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
WO2011091402A1 (en) 2010-01-25 2011-07-28 Justin Mason Voice electronic listening assistant
US8718290B2 (en) 2010-01-26 2014-05-06 Audience, Inc. Adaptive noise reduction using level cues
US8713571B2 (en) 2010-02-17 2014-04-29 Microsoft Corporation Asynchronous task execution
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9209987B2 (en) 2010-03-02 2015-12-08 Microsoft Technology Licensing, Llc Social media playback
EP2375779A3 (en) 2010-03-31 2012-01-18 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Apparatus and method for measuring a plurality of loudspeakers and microphone array
US9112989B2 (en) 2010-04-08 2015-08-18 Qualcomm Incorporated System and method of smart audio logging for mobile devices
US9514476B2 (en) 2010-04-14 2016-12-06 Viacom International Inc. Systems and methods for discovering artists
US8437339B2 (en) 2010-04-28 2013-05-07 Hewlett-Packard Development Company, L.P. Techniques to provide integrated voice service management
EP3418917B1 (en) 2010-05-04 2022-08-17 Apple Inc. Methods and systems for synchronizing media
US9307340B2 (en) 2010-05-06 2016-04-05 Dolby Laboratories Licensing Corporation Audio system equalization for portable media playback devices
US9736600B2 (en) 2010-05-17 2017-08-15 Iii Holdings 4, Llc Devices and methods for collecting acoustic data
US8395653B2 (en) 2010-05-18 2013-03-12 Polycom, Inc. Videoconferencing endpoint having multiple voice-tracking cameras
US20110289506A1 (en) 2010-05-18 2011-11-24 Google Inc. Management of computing resources for applications
US8831761B2 (en) 2010-06-02 2014-09-09 Sony Corporation Method for determining a processed audio signal and a handheld device
JP2011259097A (ja) 2010-06-07 2011-12-22 Sony Corp 音声信号処理装置及び音声信号処理方法
US8588849B2 (en) 2010-07-09 2013-11-19 Blackberry Limited System and method for resuming media
US8699723B2 (en) 2010-07-20 2014-04-15 International Business Machines Corporation Audio device volume manager using measured volume perceived at a first audio device to control volume generation by a second audio device
US8762144B2 (en) 2010-07-21 2014-06-24 Samsung Electronics Co., Ltd. Method and apparatus for voice activity detection
US8359020B2 (en) 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
US8731939B1 (en) 2010-08-06 2014-05-20 Google Inc. Routing queries based on carrier phrase registration
KR101607419B1 (ko) 2010-08-27 2016-03-29 인텔 코포레이션 원격 제어 장치
US20120078635A1 (en) 2010-09-24 2012-03-29 Apple Inc. Voice control system
US8861756B2 (en) 2010-09-24 2014-10-14 LI Creative Technologies, Inc. Microphone array system
CN103038816B (zh) 2010-10-01 2015-02-25 三菱电机株式会社 声音识别装置
US9240111B2 (en) 2010-10-06 2016-01-19 Microsoft Technology Licensing, Llc Inferring building metadata from distributed sensors
US9805734B2 (en) 2010-10-08 2017-10-31 Nec Corporation Signal processing device, signal processing method and signal processing program for noise cancellation
EP2630805A2 (en) 2010-10-22 2013-08-28 Phorus LLC Media distribution architecture
US9552840B2 (en) * 2010-10-25 2017-01-24 Qualcomm Incorporated Three-dimensional sound capturing and reproducing with multi-microphones
US9226069B2 (en) 2010-10-29 2015-12-29 Qualcomm Incorporated Transitioning multiple microphones from a first mode to a second mode
EP2456199A3 (en) 2010-11-22 2014-07-16 DDS Newco Inc. Method and systems of dynamically managing content for use by a media playback device
US20120148075A1 (en) 2010-12-08 2012-06-14 Creative Technology Ltd Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
CN103238182B (zh) 2010-12-15 2015-07-22 皇家飞利浦电子股份有限公司 具有远程噪声检测器的降噪系统
JP5771002B2 (ja) 2010-12-22 2015-08-26 株式会社東芝 音声認識装置、音声認識方法および音声認識装置を搭載したテレビ受像機
US9241227B2 (en) 2011-01-06 2016-01-19 Bose Corporation Transducer with integrated sensor
JP2012150237A (ja) 2011-01-18 2012-08-09 Sony Corp 音信号処理装置、および音信号処理方法、並びにプログラム
US8929564B2 (en) 2011-03-03 2015-01-06 Microsoft Corporation Noise adaptive beamforming for microphone arrays
CN102123188A (zh) 2011-03-03 2011-07-13 曾超宁 移动电话耳麦装置
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9342516B2 (en) 2011-05-18 2016-05-17 Microsoft Technology Licensing, Llc Media presentation playback annotation
KR101569863B1 (ko) 2011-05-31 2015-11-27 구글 인코포레이티드 통신 세션에서의 참가자들의 묵음화
US8897465B2 (en) 2011-06-01 2014-11-25 Robert Bosch Gmbh Class D micro-speaker
US8958571B2 (en) 2011-06-03 2015-02-17 Cirrus Logic, Inc. MIC covering detection in personal audio devices
US8738925B1 (en) 2013-01-07 2014-05-27 Fitbit, Inc. Wireless portable biometric device syncing
US9307321B1 (en) 2011-06-09 2016-04-05 Audience, Inc. Speaker distortion reduction
US9762967B2 (en) 2011-06-14 2017-09-12 Comcast Cable Communications, Llc System and method for presenting content with time based metadata
US8731765B2 (en) 2011-06-28 2014-05-20 GM Global Technology Operations LLC Method and apparatus for fault detection in a torque machine of a powertrain system
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US20130024018A1 (en) 2011-07-22 2013-01-24 Htc Corporation Multimedia control method and multimedia control system
JP5289517B2 (ja) 2011-07-28 2013-09-11 株式会社半導体理工学研究センター センサネットワークシステムとその通信方法
US9148742B1 (en) 2011-07-29 2015-09-29 Google Inc. Proximity detection via audio
JP5640918B2 (ja) 2011-08-05 2014-12-17 ブラザー工業株式会社 サーバ装置、対応付け方法、及び携帯機器用プログラム
US20130039527A1 (en) 2011-08-08 2013-02-14 Bang & Olufsen A/S Modular, configurable speaker and a method of operating it
KR101252167B1 (ko) 2011-08-18 2013-04-05 엘지전자 주식회사 가전기기 진단장치 및 그 진단방법
US20130211826A1 (en) 2011-08-22 2013-08-15 Claes-Fredrik Urban Mannby Audio Signals as Buffered Streams of Audio Signals and Metadata
US9094539B1 (en) 2011-09-22 2015-07-28 Amazon Technologies, Inc. Dynamic device adjustments based on determined user sleep state
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
CN103052001B (zh) 2011-10-17 2015-06-24 联想(北京)有限公司 智能设备及其控制方法
US8983089B1 (en) 2011-11-28 2015-03-17 Rawles Llc Sound source localization using multiple microphone arrays
CN102567468B (zh) 2011-12-06 2014-06-04 上海聚力传媒技术有限公司 一种用于对媒体文件的播放音量进行调节的方法与设备
GB2497343B (en) 2011-12-08 2014-11-26 Skype Processing audio signals
KR101863149B1 (ko) 2011-12-13 2018-06-01 인텔 코포레이션 연결된 미디어 장치들에서의 키워드 선택을 통한 채널 네비게이션
US9084058B2 (en) 2011-12-29 2015-07-14 Sonos, Inc. Sound field calibration using listener localization
KR102022318B1 (ko) 2012-01-11 2019-09-18 삼성전자 주식회사 음성 인식을 사용하여 사용자 기능을 수행하는 방법 및 장치
US8825020B2 (en) 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
US9654817B2 (en) 2012-01-27 2017-05-16 Avaya Inc. System and method to synchronize video playback on mobile devices
US9431980B2 (en) 2012-01-30 2016-08-30 Echostar Ukraine Llc Apparatus, systems and methods for adjusting output audio volume based on user location
US9401058B2 (en) 2012-01-30 2016-07-26 International Business Machines Corporation Zone based presence determination via voiceprint location awareness
US9947333B1 (en) 2012-02-10 2018-04-17 Amazon Technologies, Inc. Voice interaction architecture with intelligent background noise cancellation
US8453058B1 (en) 2012-02-20 2013-05-28 Google Inc. Crowd-sourced audio shortcuts
US9065895B2 (en) 2012-02-22 2015-06-23 Broadcom Corporation Non-linear echo cancellation
US9361878B2 (en) 2012-03-30 2016-06-07 Michael Boukadakis Computer-readable medium, system and method of providing domain-specific information
US9633186B2 (en) 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
US8886524B1 (en) 2012-05-01 2014-11-11 Amazon Technologies, Inc. Signal processing based on audio context
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
US9584909B2 (en) 2012-05-10 2017-02-28 Google Inc. Distributed beamforming based on message passing
US8908879B2 (en) 2012-05-23 2014-12-09 Sonos, Inc. Audio content auditioning
US9633368B2 (en) 2012-05-25 2017-04-25 Apple Inc. Content ranking and serving on a multi-user device or interface
CN103456332A (zh) 2012-05-28 2013-12-18 富泰华工业（深圳）有限公司 音频播放装置及音量调节方法
US20130324031A1 (en) 2012-05-31 2013-12-05 Nokia Corporation Dynamic allocation of audio channel for surround sound systems
US9060224B1 (en) 2012-06-01 2015-06-16 Rawles Llc Voice controlled assistant with coaxial speaker and microphone arrangement
WO2013177665A1 (en) 2012-06-01 2013-12-05 Research In Motion Limited Universal synchronization engine based on probabilistic methods for guarantee of lock in multiformat audio systems
US9997069B2 (en) 2012-06-05 2018-06-12 Apple Inc. Context-aware voice guidance
US9881616B2 (en) 2012-06-06 2018-01-30 Qualcomm Incorporated Method and systems having improved speech recognition
US8903526B2 (en) 2012-06-06 2014-12-02 Sonos, Inc. Device playback failure recovery and redistribution
US9301073B2 (en) 2012-06-08 2016-03-29 Apple Inc. Systems and methods for determining the condition of multiple microphones
US9142215B2 (en) 2012-06-15 2015-09-22 Cypress Semiconductor Corporation Power-efficient voice activation
US10354650B2 (en) 2012-06-26 2019-07-16 Google Llc Recognizing speech with mixed speech recognition models to generate transcriptions
US9674587B2 (en) 2012-06-26 2017-06-06 Sonos, Inc. Systems and methods for networked music playback including remote add to queue
US9706323B2 (en) 2014-09-09 2017-07-11 Sonos, Inc. Playback device calibration
US9137564B2 (en) 2012-06-28 2015-09-15 Sonos, Inc. Shift to corresponding media in a playback queue
US9106192B2 (en) 2012-06-28 2015-08-11 Sonos, Inc. System and method for device playback calibration
US9384737B2 (en) 2012-06-29 2016-07-05 Microsoft Technology Licensing, Llc Method and device for adjusting sound levels of sources based on sound source priority
US20140006825A1 (en) 2012-06-30 2014-01-02 David Shenhav Systems and methods to wake up a device from a power conservation state
US9497544B2 (en) 2012-07-02 2016-11-15 Qualcomm Incorporated Systems and methods for surround sound echo reduction
US9615171B1 (en) 2012-07-02 2017-04-04 Amazon Technologies, Inc. Transformation inversion to reduce the effect of room acoustics
US20140003635A1 (en) 2012-07-02 2014-01-02 Qualcomm Incorporated Audio signal processing device calibration
US9536528B2 (en) 2012-07-03 2017-01-03 Google Inc. Determining hotword suitability
KR101972955B1 (ko) 2012-07-03 2019-04-26 삼성전자 주식회사 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치
US8972762B2 (en) 2012-07-11 2015-03-03 Blackberry Limited Computing devices and methods for resetting inactivity timers on computing devices
US8983844B1 (en) 2012-07-31 2015-03-17 Amazon Technologies, Inc. Transmission of noise parameters for improving automatic speech recognition
US8831957B2 (en) 2012-08-01 2014-09-09 Google Inc. Speech recognition models based on location indicia
CN104508850B (zh) 2012-08-03 2017-03-22 株式会社半导体能源研究所 发光元件、发光装置、电子设备以及照明装置
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
US9532153B2 (en) 2012-08-29 2016-12-27 Bang & Olufsen A/S Method and a system of providing information to a user
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
US20140075306A1 (en) 2012-09-12 2014-03-13 Randy Rega Music search and retrieval system
US8798598B2 (en) 2012-09-13 2014-08-05 Alain Rossmann Method and system for screencasting Smartphone video game software to online social networks
US8983383B1 (en) 2012-09-25 2015-03-17 Rawles Llc Providing hands-free service to multiple devices
US9319816B1 (en) 2012-09-26 2016-04-19 Amazon Technologies, Inc. Characterizing environment using ultrasound pilot tones
JP2014071138A (ja) 2012-09-27 2014-04-21 Xing Inc カラオケ装置
KR102091236B1 (ko) 2012-09-28 2020-03-18 삼성전자 주식회사 전자기기 및 그 제어방법
US8725125B2 (en) 2012-09-28 2014-05-13 United Video Properties, Inc. Systems and methods for controlling audio playback on portable devices with vehicle equipment
WO2014055312A1 (en) 2012-10-02 2014-04-10 Mh Acoustics, Llc Earphones having configurable microphone arrays
US8484025B1 (en) 2012-10-04 2013-07-09 Google Inc. Mapping an audio utterance to an action using a classifier
CN102902253B (zh) 2012-10-09 2015-07-15 鸿富锦精密工业（深圳）有限公司 具有语音控制功能的智能开关及智能控制系统
WO2014062729A1 (en) 2012-10-15 2014-04-24 Msi Dfat Llc Direct field acoustic testing in a semi-reverberant enclosure
US9232310B2 (en) 2012-10-15 2016-01-05 Nokia Technologies Oy Methods, apparatuses and computer program products for facilitating directional audio capture with multiple microphones
DE102012020271A1 (de) 2012-10-17 2014-04-17 Wolfgang Klippel Anordnung und Verfahren zur Steuerung von Wandlern
KR101978688B1 (ko) * 2012-10-22 2019-05-15 삼성전자주식회사 마이크로폰 장치를 갖는 전자 장치 및 그 운용 방법
US9319445B2 (en) 2012-10-22 2016-04-19 Spotify Ab Systems and methods for pre-fetching media content
US20150228274A1 (en) 2012-10-26 2015-08-13 Nokia Technologies Oy Multi-Device Speech Recognition
KR20140054643A (ko) 2012-10-29 2014-05-09 삼성전자주식회사 음성인식장치 및 음성인식방법
US10381001B2 (en) 2012-10-30 2019-08-13 Google Technology Holdings LLC Voice control user interface during low-power mode
US9584642B2 (en) 2013-03-12 2017-02-28 Google Technology Holdings LLC Apparatus with adaptive acoustic echo control for speakerphone mode
US9275637B1 (en) 2012-11-06 2016-03-01 Amazon Technologies, Inc. Wake word evaluation
KR20140060040A (ko) 2012-11-09 2014-05-19 삼성전자주식회사 디스플레이장치, 음성취득장치 및 그 음성인식방법
US9275642B2 (en) 2012-11-13 2016-03-01 Unified Computer Intelligence Corporation Voice-operated internet-ready ubiquitous computing device and method thereof
US9685171B1 (en) 2012-11-20 2017-06-20 Amazon Technologies, Inc. Multiple-stage adaptive filtering of audio signals
WO2014142702A1 (en) 2013-03-15 2014-09-18 Obschestvo S Ogranichennoy Otvetstvennostiyu "Speaktoit" Selective speech recognition for chat and digital personal assistant systems
US9124966B2 (en) 2012-11-28 2015-09-01 Qualcomm Incorporated Image generation for collaborative sound systems
US9203045B2 (en) 2012-11-29 2015-12-01 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
US9171092B2 (en) 2012-12-07 2015-10-27 Empire Technology Development Llc Personal assistant context building
US9704486B2 (en) 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
US9226071B2 (en) 2012-12-13 2015-12-29 Maxim Integrated Products, Inc. Direct measurement of an input signal to a loudspeaker to determine and limit a temperature of a voice coil of the loudspeaker
US9300910B2 (en) 2012-12-14 2016-03-29 Biscotti Inc. Video mail capture, processing and distribution
US9271111B2 (en) 2012-12-14 2016-02-23 Amazon Technologies, Inc. Response endpoint selection
WO2014098477A1 (ko) 2012-12-18 2014-06-26 삼성전자 주식회사 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치
US9098467B1 (en) 2012-12-19 2015-08-04 Rawles Llc Accepting voice commands based on user identity
WO2014102722A1 (en) 2012-12-26 2014-07-03 Sia Technology Ltd. Device, system, and method of controlling electronic devices via thought
KR102051588B1 (ko) 2013-01-07 2019-12-03 삼성전자주식회사 휴대 단말기의 오디오 컨텐츠 재생 방법 및 그 장치
JP2014137590A (ja) 2013-01-18 2014-07-28 Yoji Fukinuki 音楽コンテンツ配信方法
US9646605B2 (en) 2013-01-22 2017-05-09 Interactive Intelligence Group, Inc. False alarm reduction in speech recognition systems using contextual information
DE102013001219B4 (de) 2013-01-25 2019-08-29 Inodyn Newmedia Gmbh Verfahren und System zur Sprachaktivierung eines Software-Agenten aus einem Standby-Modus
US20140215332A1 (en) 2013-01-31 2014-07-31 Hewlett-Packard Development Company, Lp Virtual microphone selection corresponding to a set of audio source devices
TWI593294B (zh) 2013-02-07 2017-07-21 晨星半導體股份有限公司 收音系統與相關方法
US9818407B1 (en) 2013-02-07 2017-11-14 Amazon Technologies, Inc. Distributed endpointing for speech recognition
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
US9300266B2 (en) 2013-02-12 2016-03-29 Qualcomm Incorporated Speaker equalization for mobile devices
US9842489B2 (en) 2013-02-14 2017-12-12 Google Llc Waking other devices for additional data
US9172747B2 (en) 2013-02-25 2015-10-27 Artificial Solutions Iberia SL System and methods for virtual assistant networks
RU2648604C2 (ru) 2013-02-26 2018-03-26 Конинклейке Филипс Н.В. Способ и аппаратура для генерации сигнала речи
US9195432B2 (en) 2013-02-26 2015-11-24 Sonos, Inc. Pre-caching of audio content
CN104010251B (zh) * 2013-02-27 2018-06-19 晨星半导体股份有限公司 收音系统与相关方法
US9460715B2 (en) 2013-03-04 2016-10-04 Amazon Technologies, Inc. Identification using audio signatures and additional characteristics
US20140258292A1 (en) 2013-03-05 2014-09-11 Clip Interactive, Inc. Apparatus, system, and method for integrating content and content services
US9349386B2 (en) 2013-03-07 2016-05-24 Analog Device Global System and method for processor wake-up based on sensor data
JP6429465B2 (ja) 2013-03-07 2018-11-28 株式会社半導体エネルギー研究所 装置及びその作製方法
US10091583B2 (en) 2013-03-07 2018-10-02 Apple Inc. Room and program responsive loudspeaker system
US9161126B2 (en) 2013-03-08 2015-10-13 Cirrus Logic, Inc. Systems and methods for protecting a speaker
CN104053088A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 一种麦克风阵列调整方法、麦克风阵列及电子设备
AU2014249575B2 (en) 2013-03-11 2016-12-15 Apple Inc. Timbre constancy across a range of directivities for a loudspeaker
TWI533686B (zh) 2013-03-11 2016-05-11 緯創資通股份有限公司 虛擬頻道之管理方法、具有虛擬頻道之網路多媒體重現系統和電腦可讀取記錄媒體
US9173021B2 (en) 2013-03-12 2015-10-27 Google Technology Holdings LLC Method and device for adjusting an audio beam orientation based on device location
CN105009203A (zh) 2013-03-12 2015-10-28 纽昂斯通讯公司 用于检测语音命令的方法和装置
US9357306B2 (en) 2013-03-12 2016-05-31 Nokia Technologies Oy Multichannel audio calibration method and apparatus
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
KR101571338B1 (ko) 2013-03-13 2015-11-24 삼성전자주식회사 복수의 재생 장치들이 스트리밍 컨텐트를 동기화하여 재생하는 방법 및 이를 위한 장치
KR102152754B1 (ko) 2013-03-14 2020-09-07 삼성전자주식회사 블루루스 디바이스에서 통신 연결 방법 및 그 장치
JP6084750B2 (ja) 2013-03-14 2017-02-22 アップル インコーポレイテッド スピーカー及び携帯リスニング装置を用いた室内の適応等化
US20140274185A1 (en) 2013-03-14 2014-09-18 Aliphcom Intelligence device connection for wireless media ecosystem
WO2014144773A2 (en) 2013-03-15 2014-09-18 The Echo Nest Corporation Systems, methods, and computer readable medium for generating playlists
US9854081B2 (en) 2013-03-15 2017-12-26 Apple Inc. Volume control for mobile device using a wireless device
WO2014149050A1 (en) 2013-03-21 2014-09-25 Nuance Communications, Inc. System and method for identifying suboptimal microphone performance
WO2014157433A1 (en) 2013-03-26 2014-10-02 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
US9462115B2 (en) 2013-04-04 2016-10-04 James S. Rand Unified communications system and method
JP6300589B2 (ja) 2013-04-04 2018-03-28 株式会社半導体エネルギー研究所 半導体装置の作製方法
WO2014172299A1 (en) 2013-04-15 2014-10-23 Chacha Search, Inc. Method and system of increasing user interaction
US9501533B2 (en) 2013-04-16 2016-11-22 Sonos, Inc. Private queue for a media playback system
US9875494B2 (en) 2013-04-16 2018-01-23 Sri International Using intents to analyze and personalize a user's dialog experience with a virtual personal assistant
US9304736B1 (en) 2013-04-18 2016-04-05 Amazon Technologies, Inc. Voice controlled assistant with non-verbal code entry
WO2014171144A1 (ja) 2013-04-19 2014-10-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 家電機器の制御方法、家電機器制御システム、及びゲートウェイ
KR102230139B1 (ko) 2013-05-17 2021-03-18 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 조명 장치, 발광 장치, 및 전자 기기
US9472201B1 (en) 2013-05-22 2016-10-18 Google Inc. Speaker localization by means of tactile input
US9390708B1 (en) 2013-05-28 2016-07-12 Amazon Technologies, Inc. Low latency and memory efficient keywork spotting
US9215545B2 (en) 2013-05-31 2015-12-15 Bose Corporation Sound stage controller for a near-field speaker-based audio system
US20140357248A1 (en) 2013-06-03 2014-12-04 Ford Global Technologies, Llc Apparatus and System for Interacting with a Vehicle and a Device in a Vehicle
US9438193B2 (en) 2013-06-05 2016-09-06 Sonos, Inc. Satellite volume control
US9654073B2 (en) 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US9787273B2 (en) 2013-06-13 2017-10-10 Google Technology Holdings LLC Smart volume control of device audio output based on received audio input
US8953778B2 (en) 2013-06-17 2015-02-10 Avaya Inc. Real-time intelligent mute interactive features
US9324322B1 (en) 2013-06-18 2016-04-26 Amazon Technologies, Inc. Automatic volume attenuation for speech enabled devices
US9494683B1 (en) 2013-06-18 2016-11-15 Amazon Technologies, Inc. Audio-based gesture detection
US9311298B2 (en) 2013-06-21 2016-04-12 Microsoft Technology Licensing, Llc Building conversational understanding systems using a toolset
US9697831B2 (en) 2013-06-26 2017-07-04 Cirrus Logic, Inc. Speech recognition
US9640179B1 (en) 2013-06-27 2017-05-02 Amazon Technologies, Inc. Tailoring beamforming techniques to environments
US9747899B2 (en) 2013-06-27 2017-08-29 Amazon Technologies, Inc. Detecting self-generated wake expressions
WO2014210429A1 (en) 2013-06-28 2014-12-31 Harman International Industries, Inc. Wireless control of linked devices
US9298415B2 (en) 2013-07-09 2016-03-29 Sonos, Inc. Systems and methods to provide play/pause content
US20150019201A1 (en) 2013-07-09 2015-01-15 Stanley F. Schoenbach Real-time interpreting systems and methods
US9396727B2 (en) 2013-07-10 2016-07-19 GM Global Technology Operations LLC Systems and methods for spoken dialog service arbitration
US9293480B2 (en) 2013-07-10 2016-03-22 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device and display device including the semiconductor device
WO2015005927A1 (en) 2013-07-11 2015-01-15 Intel Corporation Device wake and speaker verification using the same audio input
WO2015009748A1 (en) 2013-07-15 2015-01-22 Dts, Inc. Spatial calibration of surround sound systems including listener position estimation
US9666187B1 (en) 2013-07-25 2017-05-30 Google Inc. Model for enabling service providers to address voice-activated commands
WO2015017303A1 (en) 2013-07-31 2015-02-05 Motorola Mobility Llc Method and apparatus for adjusting voice recognition processing based on noise characteristics
US10873997B2 (en) 2013-08-01 2020-12-22 Fong-Min Chang Voice controlled artificial intelligent smart illumination device
DE102013012811B4 (de) 2013-08-01 2024-02-22 Wolfgang Klippel Anordnung und Verfahren zur Identifikation und Korrektur der nichtlinearen Eigenschaften elektromagnetischer Wandler
US9190043B2 (en) 2013-08-27 2015-11-17 Bose Corporation Assisting conversation in noisy environments
TWI520127B (zh) 2013-08-28 2016-02-01 晨星半導體股份有限公司 應用於音訊裝置的控制器與相關的操作方法
KR20160048960A (ko) 2013-08-30 2016-05-04 후아웨이 테크놀러지 컴퍼니 리미티드 복수 단말의 멀티미디어 파일 협동 플레이 방법, 및 관련 장치 및 시스템
US10163435B2 (en) 2013-09-11 2018-12-25 Denso Corporation Voice output control device, voice output control method, and recording medium
US9516081B2 (en) 2013-09-20 2016-12-06 Amazon Technologies, Inc. Reduced latency electronic content system
US9668052B2 (en) 2013-09-25 2017-05-30 Google Technology Holdings LLC Audio routing system for routing audio data to and from a mobile device
US9443527B1 (en) 2013-09-27 2016-09-13 Amazon Technologies, Inc. Speech recognition capability generation and control
US9355555B2 (en) 2013-09-27 2016-05-31 Sonos, Inc. System and method for issuing commands in a media playback system
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
CN103546616A (zh) 2013-09-30 2014-01-29 深圳市同洲电子股份有限公司 一种调节音量的方法及装置
KR102114219B1 (ko) 2013-10-10 2020-05-25 삼성전자주식회사 오디오 시스템 및 오디오 출력 방법, 그리고 스피커 장치
US9245527B2 (en) 2013-10-11 2016-01-26 Apple Inc. Speech recognition wake-up of a handheld portable electronic device
US9633671B2 (en) 2013-10-18 2017-04-25 Apple Inc. Voice quality enhancement techniques, speech recognition techniques, and related systems
US9300268B2 (en) 2013-10-18 2016-03-29 Apple Inc. Content aware audio ducking
TWI642170B (zh) 2013-10-18 2018-11-21 半導體能源研究所股份有限公司 顯示裝置及電子裝置
US9818061B1 (en) 2013-10-22 2017-11-14 Lumin, LLC Collaboration of audio sensors for geo-location and continuous tracking of multiple users in a device-independent artificial intelligence (AI) environment
WO2015060867A1 (en) 2013-10-25 2015-04-30 Intel Corporation Techniques for preventing voice replay attacks
EP3796678A1 (en) 2013-11-05 2021-03-24 Oticon A/s A binaural hearing assistance system allowing the user to modify a location of a sound source
JP2015090570A (ja) 2013-11-06 2015-05-11 ソニー株式会社 情報処理装置および制御方法
US10311482B2 (en) 2013-11-11 2019-06-04 At&T Intellectual Property I, Lp Method and apparatus for adjusting a digital assistant persona
US8775191B1 (en) 2013-11-13 2014-07-08 Google Inc. Efficient utterance-specific endpointer triggering for always-on hotwording
JP6236303B2 (ja) 2013-11-26 2017-11-22 株式会社デンソーアイティーラボラトリ 制御装置、制御方法およびプログラム
US9698999B2 (en) 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device
US9704478B1 (en) 2013-12-02 2017-07-11 Amazon Technologies, Inc. Audio output masking for improved automatic speech recognition
CN104143326B (zh) 2013-12-03 2016-11-02 腾讯科技（深圳）有限公司 一种语音命令识别方法和装置
US8719039B1 (en) 2013-12-05 2014-05-06 Google Inc. Promoting voice actions to hotwords
US10720153B2 (en) 2013-12-13 2020-07-21 Harman International Industries, Incorporated Name-sensitive listening device
US10224056B1 (en) 2013-12-17 2019-03-05 Amazon Technologies, Inc. Contingent device actions during loss of network connectivity
US9721570B1 (en) 2013-12-17 2017-08-01 Amazon Technologies, Inc. Outcome-oriented dialogs on a speech recognition platform
US9378651B2 (en) 2013-12-17 2016-06-28 Google Inc. Audio book smart pause
GB2523984B (en) 2013-12-18 2017-07-26 Cirrus Logic Int Semiconductor Ltd Processing received speech data
US9099974B2 (en) 2013-12-20 2015-08-04 Vmware, Inc. Volume redirection
US20150179181A1 (en) 2013-12-20 2015-06-25 Microsoft Corporation Adapting audio based upon detected environmental accoustics
EP2890160B1 (en) 2013-12-24 2019-08-14 Nxp B.V. Loudspeaker controller
US9301077B2 (en) 2014-01-02 2016-03-29 Harman International Industries, Incorporated Context-based audio tuning
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
US9288597B2 (en) 2014-01-20 2016-03-15 Sony Corporation Distributed wireless speaker system with automatic configuration determination when new speakers are added
CN106415721B (zh) 2014-01-22 2019-08-16 苹果公司 音频数据传输的协调切换
US9356882B2 (en) 2014-02-04 2016-05-31 Printeron Inc. Streamlined system for the transmission of network resource data
US9443876B2 (en) 2014-02-05 2016-09-13 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic device including the semiconductor device, the display device, and the display module
US9652532B2 (en) 2014-02-06 2017-05-16 Sr Homedics, Llc Methods for operating audio speaker systems
US9929368B2 (en) 2014-02-06 2018-03-27 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, lighting device, and electronic appliance
TWI658597B (zh) 2014-02-07 2019-05-01 日商半導體能源研究所股份有限公司 半導體裝置
US9318112B2 (en) 2014-02-14 2016-04-19 Google Inc. Recognizing speech in the presence of additional audio
FR3018025B1 (fr) 2014-02-26 2016-03-18 Devialet Dispositif de commande d'un haut-parleur
FR3018024B1 (fr) 2014-02-26 2016-03-18 Devialet Dispositif de commande d'un haut-parleur
JP6289936B2 (ja) * 2014-02-26 2018-03-07 株式会社東芝 音源方向推定装置、音源方向推定方法およびプログラム
US9408008B2 (en) 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
US10015593B2 (en) 2014-03-03 2018-07-03 University Of Utah Digital signal processor for audio extensions and correction of nonlinear distortions in loudspeakers
US9489171B2 (en) 2014-03-04 2016-11-08 Microsoft Technology Licensing, Llc Voice-command suggestions based on user identity
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
US10599287B2 (en) 2014-03-11 2020-03-24 Sonos, Inc. Group volume control
US9640669B2 (en) 2014-03-13 2017-05-02 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic appliance including the semiconductor device, the display device, and the display module
US9654076B2 (en) 2014-03-25 2017-05-16 Apple Inc. Metadata for ducking control
US9648564B1 (en) 2014-03-26 2017-05-09 Amazon Technologies, Inc. Wake-up management for mobile devices
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
US9916839B1 (en) 2014-03-27 2018-03-13 Amazon Technologies, Inc. Shared audio functionality based on device grouping
US9547468B2 (en) 2014-03-31 2017-01-17 Microsoft Technology Licensing, Llc Client-side personal voice web navigation
US8874448B1 (en) 2014-04-01 2014-10-28 Google Inc. Attention-based dynamic audio level adjustment
CN104978965B (zh) 2014-04-07 2019-04-26 三星电子株式会社 电子装置及利用电子装置和服务器的语音识别执行方法
DE102014005381B3 (de) 2014-04-11 2014-12-11 Wolfgang Klippel Anordnung und Verfahren zur Identifikation und Kompensation nichtlinearer Partialschwingungen elektromechanischer Wandler
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US20150334471A1 (en) 2014-05-15 2015-11-19 Echostar Technologies L.L.C. Multiple simultaneous audio video data decoding
US10368183B2 (en) 2014-05-19 2019-07-30 Apple Inc. Directivity optimized sound reproduction
CN110855836B (zh) 2014-05-23 2022-05-31 三星电子株式会社 用于提供通知的方法和设备
US9860289B2 (en) 2014-05-23 2018-01-02 Radeeus, Inc. Multimedia digital content retrieval, matching, and syncing systems and methods of using the same
US9900723B1 (en) 2014-05-28 2018-02-20 Apple Inc. Multi-channel loudspeaker matching using variable directivity
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
TWI682563B (zh) 2014-05-30 2020-01-11 日商半導體能源研究所股份有限公司 發光元件，發光裝置，電子裝置以及照明裝置
US10318016B2 (en) 2014-06-03 2019-06-11 Harman International Industries, Incorporated Hands free device with directional interface
US9720642B2 (en) 2014-06-04 2017-08-01 Sonos, Inc. Prioritizing media content requests
US10624612B2 (en) 2014-06-05 2020-04-21 Chikayoshi Sumi Beamforming method, measurement and imaging instruments, and communication instruments
US9615170B2 (en) 2014-06-09 2017-04-04 Harman International Industries, Inc. Approach for partially preserving music in the presence of intelligible speech
CN104092936B (zh) * 2014-06-12 2017-01-04 小米科技有限责任公司 自动对焦方法及装置
US20150363061A1 (en) 2014-06-13 2015-12-17 Autonomic Controls, Inc. System and method for providing related digital content
US9767159B2 (en) 2014-06-13 2017-09-19 Google Inc. Ranking search results
US9589556B2 (en) 2014-06-19 2017-03-07 Yang Gao Energy adjustment of acoustic echo replica signal for speech enhancement
US9520139B2 (en) 2014-06-19 2016-12-13 Yang Gao Post tone suppression for speech enhancement
US9697828B1 (en) 2014-06-20 2017-07-04 Amazon Technologies, Inc. Keyword detection modeling using contextual and environmental information
US10152987B2 (en) 2014-06-23 2018-12-11 Google Llc Remote invocation of mobile device actions
US9632748B2 (en) 2014-06-24 2017-04-25 Google Inc. Device designation for audio input monitoring
US9335819B1 (en) 2014-06-26 2016-05-10 Audible, Inc. Automatic creation of sleep bookmarks in content items
US9368105B1 (en) 2014-06-26 2016-06-14 Amazon Technologies, Inc. Preventing false wake word detections with a voice-controlled device
US9691379B1 (en) 2014-06-26 2017-06-27 Amazon Technologies, Inc. Selecting from multiple content sources
US9639854B2 (en) 2014-06-26 2017-05-02 Nuance Communications, Inc. Voice-controlled information exchange platform, such as for providing information to supplement advertising
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9374634B2 (en) 2014-07-10 2016-06-21 Nxp B.V. System for controlling displacement of a loudspeaker
US10209947B2 (en) 2014-07-23 2019-02-19 Sonos, Inc. Device grouping
US9263042B1 (en) 2014-07-25 2016-02-16 Google Inc. Providing pre-computed hotword models
KR20160017253A (ko) 2014-08-01 2016-02-16 삼성전자주식회사 디스플레이 구동용 집적 회로 칩
US9874997B2 (en) 2014-08-08 2018-01-23 Sonos, Inc. Social playback queues
US9548066B2 (en) 2014-08-11 2017-01-17 Amazon Technologies, Inc. Voice application architecture
US9769552B2 (en) 2014-08-19 2017-09-19 Apple Inc. Method and apparatus for estimating talker distance
CN106797512B (zh) 2014-08-28 2019-10-25 美商楼氏电子有限公司 多源噪声抑制的方法、系统和非瞬时计算机可读存储介质
US9560050B2 (en) 2014-09-08 2017-01-31 At&T Intellectual Property I, L.P System and method to share a resource or a capability of a device
US9747011B2 (en) 2014-09-16 2017-08-29 Google Inc. Continuation of playback of media content by different output devices
US9548053B1 (en) 2014-09-19 2017-01-17 Amazon Technologies, Inc. Audible command filtering
US10645130B2 (en) 2014-09-24 2020-05-05 Sonos, Inc. Playback updates
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
GB2525051B (en) 2014-09-30 2016-04-13 Imagination Tech Ltd Detection of acoustic echo cancellation
US9641919B1 (en) 2014-09-30 2017-05-02 Amazon Technologies, Inc. Audio assemblies for electronic devices
US9681228B2 (en) 2014-09-30 2017-06-13 Apple Inc. Capacitive position sensing for transducers
WO2016054230A1 (en) 2014-10-01 2016-04-07 XBrain, Inc. Voice and connection platform
US10817672B2 (en) 2014-10-01 2020-10-27 Nuance Communications, Inc. Natural language understanding (NLU) processing based on user-specified interests
US9318107B1 (en) 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
KR102287943B1 (ko) 2014-10-14 2021-08-09 삼성전자주식회사 전자 기기, 상기 전자 기기의 음량 조절 방법 및 상기 전자 기기의 제어 방법
EP3010251B1 (en) 2014-10-15 2019-11-13 Nxp B.V. Audio system
US20160162469A1 (en) 2014-10-23 2016-06-09 Audience, Inc. Dynamic Local ASR Vocabulary
US9743127B2 (en) 2014-10-30 2017-08-22 Verizon Patent And Licensing Inc. Media service user interface systems and methods
US9530408B2 (en) 2014-10-31 2016-12-27 At&T Intellectual Property I, L.P. Acoustic environment recognizer for optimal speech processing
US9699550B2 (en) 2014-11-12 2017-07-04 Qualcomm Incorporated Reduced microphone power-up latency
US20160134982A1 (en) 2014-11-12 2016-05-12 Harman International Industries, Inc. System and method for estimating the displacement of a speaker cone
JP2016095383A (ja) 2014-11-14 2016-05-26 株式会社ＡＴＲ−Ｔｒｅｋ 音声認識クライアント装置及びサーバ型音声認識装置
US10116748B2 (en) 2014-11-20 2018-10-30 Microsoft Technology Licensing, Llc Vehicle-based multi-modal interface
WO2016082046A1 (en) 2014-11-28 2016-06-02 Audera Acoustics Inc. High displacement acoustic transducer systems
US10192549B2 (en) 2014-11-28 2019-01-29 Microsoft Technology Licensing, Llc Extending digital personal assistant action providers
US9812126B2 (en) 2014-11-28 2017-11-07 Microsoft Technology Licensing, Llc Device arbitration for listening devices
US10126406B2 (en) 2014-12-02 2018-11-13 Qualcomm Incorporated Method and apparatus for performing ultrasonic presence detection
US9775113B2 (en) 2014-12-11 2017-09-26 Mediatek Inc. Voice wakeup detecting device with digital microphone and associated method
US9779725B2 (en) 2014-12-11 2017-10-03 Mediatek Inc. Voice wakeup detecting device and method
CN107209549B (zh) 2014-12-11 2020-04-17 微软技术许可有限责任公司 能够实现可动作的消息传送的虚拟助理系统
CN104538030A (zh) 2014-12-11 2015-04-22 科大讯飞股份有限公司 一种可以通过语音控制家电的控制系统与方法
US9813812B2 (en) 2014-12-12 2017-11-07 Analog Devices Global Method of controlling diaphragm excursion of electrodynamic loudspeakers
US9552816B2 (en) 2014-12-19 2017-01-24 Amazon Technologies, Inc. Application focus in speech-based systems
CN104575504A (zh) 2014-12-24 2015-04-29 上海师范大学 采用声纹和语音识别进行个性化电视语音唤醒的方法
US9560441B1 (en) 2014-12-24 2017-01-31 Amazon Technologies, Inc. Determining speaker direction using a spherical microphone array
CN104635539A (zh) 2014-12-26 2015-05-20 东莞市掌商信息科技有限公司 一种智能硬件远程语音安全控制方法及其系统
US10572810B2 (en) 2015-01-07 2020-02-25 Microsoft Technology Licensing, Llc Managing user interaction for input understanding determinations
US9934406B2 (en) 2015-01-08 2018-04-03 Microsoft Technology Licensing, Llc Protecting private information in input understanding system
US9584915B2 (en) 2015-01-19 2017-02-28 Microsoft Technology Licensing, Llc Spatial audio with remote speakers
US20160210110A1 (en) 2015-01-21 2016-07-21 Ford Global Technologies, Llc Audio synchronization between vehicles and mobile devices
US9947313B2 (en) 2015-01-26 2018-04-17 William Drewes Method for substantial ongoing cumulative voice recognition error reduction
US9633661B1 (en) 2015-02-02 2017-04-25 Amazon Technologies, Inc. Speech-responsive portable speaker
GB201501791D0 (en) 2015-02-03 2015-03-18 Microsoft Technology Licensing Llc Non-linear echo path detection
US20160232451A1 (en) 2015-02-09 2016-08-11 Velocee Ltd. Systems and methods for managing audio content
US9521496B2 (en) 2015-02-12 2016-12-13 Harman International Industries, Inc. Media content playback system and method
US10121472B2 (en) 2015-02-13 2018-11-06 Knowles Electronics, Llc Audio buffer catch-up apparatus and method with two microphones
US20160239255A1 (en) 2015-02-16 2016-08-18 Harman International Industries, Inc. Mobile interface for loudspeaker optimization
US20160253050A1 (en) 2015-02-26 2016-09-01 Fingertips Lab, Inc. System and method for audio and tactile based browsing
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9697826B2 (en) 2015-03-27 2017-07-04 Google Inc. Processing multi-channel audio waveforms
US10762894B2 (en) 2015-03-27 2020-09-01 Google Llc Convolutional neural networks
US10192546B1 (en) 2015-03-30 2019-01-29 Amazon Technologies, Inc. Pre-wakeword speech processing
US10034109B2 (en) 2015-04-09 2018-07-24 Audera Acoustics Inc. Acoustic transducer systems with position sensing
US10198242B2 (en) 2015-04-14 2019-02-05 Motorola Solutions, Inc. Method and apparatus for a volume of a device
US10079012B2 (en) 2015-04-21 2018-09-18 Google Llc Customizing speech-recognition dictionaries in a smart-home environment
US10178474B2 (en) 2015-04-21 2019-01-08 Google Llc Sound signature database for initialization of noise reduction in recordings
US9472196B1 (en) 2015-04-22 2016-10-18 Google Inc. Developer voice actions system
KR102623039B1 (ko) 2015-05-15 2024-01-08 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 발광 장치, 전자 기기 및 조명 장치
US10070237B2 (en) 2015-05-21 2018-09-04 Analog Devices, Inc. Optical and capacitive sensing of electroacoustic transducers
TWI757234B (zh) 2015-05-21 2022-03-11 日商半導體能源研究所股份有限公司 發光元件、顯示裝置、電子裝置、及照明裝置
CN107534090B (zh) 2015-05-21 2019-10-18 株式会社半导体能源研究所 发光元件、显示装置、电子设备及照明装置
JP2016218852A (ja) 2015-05-22 2016-12-22 ソニー株式会社 情報処理装置および情報処理方法、並びにプログラム
US9837547B2 (en) 2015-05-22 2017-12-05 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device comprising oxide conductor and display device including the semiconductor device
EP3099047A1 (en) 2015-05-28 2016-11-30 Nxp B.V. Echo controller
US9706320B2 (en) 2015-05-29 2017-07-11 Sound United, LLC System and method for providing user location-based multi-zone media
US9734822B1 (en) 2015-06-01 2017-08-15 Amazon Technologies, Inc. Feedback based beamformed signal selection
US9864571B2 (en) 2015-06-04 2018-01-09 Sonos, Inc. Dynamic bonding of playback devices
US9672821B2 (en) 2015-06-05 2017-06-06 Apple Inc. Robust speech recognition in the presence of echo and noise using multiple signals for discrimination
US9736578B2 (en) 2015-06-07 2017-08-15 Apple Inc. Microphone-based orientation sensors and related techniques
KR102444075B1 (ko) 2015-06-09 2022-09-16 삼성전자주식회사 전자 장치, 주변 기기 및 그 제어 방법
US10248376B2 (en) 2015-06-11 2019-04-02 Sonos, Inc. Multiple groupings in a playback system
US20160373909A1 (en) 2015-06-17 2016-12-22 Hive Life, LLC Wireless audio, security communication and home automation
WO2016203350A1 (en) 2015-06-17 2016-12-22 Semiconductor Energy Laboratory Co., Ltd. Iridium complex, light-emitting element, display device, electronic device, and lighting device
JP6739907B2 (ja) 2015-06-18 2020-08-12 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 機器特定方法、機器特定装置及びプログラム
KR102317526B1 (ko) 2015-06-25 2021-10-26 엘지전자 주식회사 헤드셋 및 그 제어 방법
US9554210B1 (en) 2015-06-25 2017-01-24 Amazon Technologies, Inc. Multichannel acoustic echo cancellation with unique individual channel estimations
KR20170001173A (ko) 2015-06-25 2017-01-04 엘지전자 주식회사 와치 타입 이동 단말기 및 그의 동작 방법
US9472203B1 (en) 2015-06-29 2016-10-18 Amazon Technologies, Inc. Clock synchronization for multichannel system
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
CN107710444A (zh) 2015-07-08 2018-02-16 株式会社半导体能源研究所 发光元件、显示装置、电子设备以及照明装置
US9686625B2 (en) 2015-07-21 2017-06-20 Disney Enterprises, Inc. Systems and methods for delivery of personalized audio
WO2017013526A1 (en) 2015-07-21 2017-01-26 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, display device, electronic device, and lighting device
US9769563B2 (en) 2015-07-22 2017-09-19 Harman International Industries, Incorporated Audio enhancement via opportunistic use of microphones
US20170034263A1 (en) 2015-07-30 2017-02-02 Amp Me Inc. Synchronized Playback of Streamed Audio Content by Multiple Internet-Capable Portable Devices
KR102402512B1 (ko) 2015-08-04 2022-05-27 삼성전자주식회사 외부장치의 음량을 조정하는 전자장치 및 방법
CN105187907A (zh) 2015-08-05 2015-12-23 四川长虹电器股份有限公司 智能电视音量控制系统及控制方法
US9913056B2 (en) 2015-08-06 2018-03-06 Dolby Laboratories Licensing Corporation System and method to enhance speakers connected to devices with microphones
US10333904B2 (en) 2015-08-08 2019-06-25 Peter J. Tormey Voice access and control
US10270041B2 (en) 2015-08-28 2019-04-23 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
US20180249267A1 (en) 2015-08-31 2018-08-30 Apple Inc. Passive microphone array localizer
US10031719B2 (en) 2015-09-02 2018-07-24 Harman International Industries, Incorporated Audio system with multi-screen application
US10339917B2 (en) 2015-09-03 2019-07-02 Google Llc Enhanced speech endpointing
KR102417682B1 (ko) 2015-09-09 2022-07-07 삼성전자주식회사 음성 인식을 이용한 닉네임 관리 장치 및 방법
KR20170031392A (ko) 2015-09-11 2017-03-21 삼성전자주식회사 전자 장치, 음향 시스템 및 오디오 출력 방법
US10026399B2 (en) 2015-09-11 2018-07-17 Amazon Technologies, Inc. Arbitration between voice-enabled devices
CN105206281B (zh) 2015-09-14 2019-02-15 胡旻波 基于分布式麦克风阵列网络的语音增强方法
US10706873B2 (en) 2015-09-18 2020-07-07 Sri International Real-time speaker state analytics platform
CN105204357B (zh) 2015-09-18 2018-02-06 小米科技有限责任公司 智能家居设备的情景模式调整方法及装置
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
KR102446392B1 (ko) 2015-09-23 2022-09-23 삼성전자주식회사 음성 인식이 가능한 전자 장치 및 방법
US10229700B2 (en) 2015-09-24 2019-03-12 Google Llc Voice activity detection
US9936156B2 (en) 2015-09-24 2018-04-03 Samantha WESTERN Volume adjusting apparatus and method
US9996316B2 (en) 2015-09-28 2018-06-12 Amazon Technologies, Inc. Mediation of wakeword response for multiple devices
JP6536320B2 (ja) 2015-09-28 2019-07-03 富士通株式会社 音声信号処理装置、音声信号処理方法及びプログラム
EP3357252B1 (en) 2015-09-28 2023-09-06 Google LLC Time-synchronized, multizone media streaming
TW202316695A (zh) 2015-09-30 2023-04-16 日商半導體能源研究所股份有限公司 發光元件，顯示裝置，電子裝置，及照明裝置
US20170092278A1 (en) 2015-09-30 2017-03-30 Apple Inc. Speaker recognition
KR20170038681A (ko) 2015-09-30 2017-04-07 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 표시 장치, 전자 기기, 및 조명 장치
US9978366B2 (en) 2015-10-09 2018-05-22 Xappmedia, Inc. Event-based speech interactive media player
KR102429260B1 (ko) 2015-10-12 2022-08-05 삼성전자주식회사 음성 에이전트 기반의 제어 명령 처리 장치 및 방법과, 에이전트 장치
US9747926B2 (en) 2015-10-16 2017-08-29 Google Inc. Hotword recognition
US10453450B2 (en) 2015-10-20 2019-10-22 Bragi GmbH Wearable earpiece voice command control system and method
KR102444061B1 (ko) 2015-11-02 2022-09-16 삼성전자주식회사 음성 인식이 가능한 전자 장치 및 방법
US9691378B1 (en) 2015-11-05 2017-06-27 Amazon Technologies, Inc. Methods and devices for selectively ignoring captured audio data
US9653075B1 (en) 2015-11-06 2017-05-16 Google Inc. Voice commands across devices
US10863267B2 (en) 2015-11-10 2020-12-08 Savant Systems, Inc. Volume control for audio/video devices
US9990209B2 (en) 2015-11-12 2018-06-05 Microsoft Technology Licensing, Llc Digital assistance device for facilitating multi-stage setup
US10592949B2 (en) 2015-11-13 2020-03-17 [24]7.ai, Inc. Method and apparatus for linking customer interactions with customer messaging platforms
US10706852B2 (en) 2015-11-13 2020-07-07 Microsoft Technology Licensing, Llc Confidence features for automated speech recognition arbitration
US11929088B2 (en) 2015-11-20 2024-03-12 Synaptics Incorporated Input/output mode control for audio processing
DE112015007147T5 (de) 2015-11-25 2018-08-09 Mitsubishi Electric Corporation Sprachdialogvorrichtung und Sprachdialogverfahren
US9484030B1 (en) 2015-12-02 2016-11-01 Amazon Technologies, Inc. Audio triggered commands
US9747920B2 (en) 2015-12-17 2017-08-29 Amazon Technologies, Inc. Adaptive beamforming to create reference channels
US9826599B2 (en) 2015-12-28 2017-11-21 Amazon Technologies, Inc. Voice-controlled light switches
US10547942B2 (en) 2015-12-28 2020-01-28 Samsung Electronics Co., Ltd. Control of electrodynamic speaker driver using a low-order non-linear model
US10026401B1 (en) 2015-12-28 2018-07-17 Amazon Technologies, Inc. Naming devices via voice commands
US9820036B1 (en) 2015-12-30 2017-11-14 Amazon Technologies, Inc. Speech processing of reflected sound
US9813810B1 (en) 2016-01-05 2017-11-07 Google Inc. Multi-microphone neural network for sound recognition
US10049666B2 (en) 2016-01-06 2018-08-14 Google Llc Voice recognition system
US9743207B1 (en) 2016-01-18 2017-08-22 Sonos, Inc. Calibration using multiple recording devices
KR20170086814A (ko) 2016-01-19 2017-07-27 삼성전자주식회사 음성 인식 기능을 제공하는 전자 장치 및 그 동작 방법
KR102392113B1 (ko) 2016-01-20 2022-04-29 삼성전자주식회사 전자 장치 및 전자 장치의 음성 명령 처리 방법
US9749731B2 (en) 2016-01-21 2017-08-29 Bose Corporation Sidetone generation using multiple microphones
US9659555B1 (en) 2016-02-09 2017-05-23 Amazon Technologies, Inc. Multichannel acoustic echo cancellation
US9653060B1 (en) 2016-02-09 2017-05-16 Amazon Technologies, Inc. Hybrid reference signal for acoustic echo cancellation
EP3414759B1 (en) 2016-02-10 2020-07-01 Cerence Operating Company Techniques for spatially selective wake-up word recognition and related systems and methods
US9858927B2 (en) 2016-02-12 2018-01-02 Amazon Technologies, Inc Processing spoken commands to control distributed audio outputs
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US9826306B2 (en) 2016-02-22 2017-11-21 Sonos, Inc. Default playback device designation
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US10509626B2 (en) 2016-02-22 2019-12-17 Sonos, Inc Handling of loss of pairing between networked devices
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US9779735B2 (en) 2016-02-24 2017-10-03 Google Inc. Methods and systems for detecting and processing speech signals
WO2017147936A1 (zh) 2016-03-04 2017-09-08 茹旷 智能家居助手
US9769420B1 (en) 2016-03-18 2017-09-19 Thomas Lawrence Moses Portable wireless remote monitoring and control systems
US10373612B2 (en) 2016-03-21 2019-08-06 Amazon Technologies, Inc. Anchored speech detection and speech recognition
US9805714B2 (en) 2016-03-22 2017-10-31 Asustek Computer Inc. Directional keyword verification method applicable to electronic device and electronic device using the same
US10365887B1 (en) 2016-03-25 2019-07-30 Amazon Technologies, Inc. Generating commands based on location and wakeword
US10149049B2 (en) 2016-05-13 2018-12-04 Bose Corporation Processing speech from distributed microphones
US20170330566A1 (en) 2016-05-13 2017-11-16 Bose Corporation Distributed Volume Control for Speech Recognition
US10187440B2 (en) 2016-05-27 2019-01-22 Apple Inc. Personalization of media streams
US10063965B2 (en) 2016-06-01 2018-08-28 Google Llc Sound source estimation using neural networks
US10474419B2 (en) 2016-06-03 2019-11-12 Crestron Electronics, Inc. Audio digital signal processor utilizing a hybrid network architecture
AU2017100581B4 (en) 2016-06-08 2018-02-01 Apple Inc. Intelligent automated assistant for media exploration
US10235124B2 (en) 2016-06-08 2019-03-19 Google Llc Audio announcement prioritization system
US9754605B1 (en) 2016-06-09 2017-09-05 Amazon Technologies, Inc. Step-size control for multi-channel acoustic echo canceller
AU2017100486C4 (en) 2016-06-11 2019-09-05 Apple Inc. Intelligent device arbitration and control
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10212029B2 (en) 2016-06-15 2019-02-19 Microsoft Technology Licensing, Llc Service provisioning in cloud computing systems
ITUA20164622A1 (it) 2016-06-23 2017-12-23 St Microelectronics Srl Procedimento di beamforming basato su matrici di microfoni e relativo apparato
US9728188B1 (en) 2016-06-28 2017-08-08 Amazon Technologies, Inc. Methods and devices for ignoring similar audio being received by a system
EP3270377B1 (en) 2016-07-12 2020-02-19 Dolby Laboratories Licensing Corporation Assessment and adjustment of audio installation
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US9860670B1 (en) 2016-07-15 2018-01-02 Sonos, Inc. Spectral correction using spatial calibration
US10621992B2 (en) 2016-07-22 2020-04-14 Lenovo (Singapore) Pte. Ltd. Activating voice assistant based on at least one of user proximity and context
CN106028223A (zh) 2016-07-26 2016-10-12 广东欧珀移动通信有限公司 一种智能音箱的控制方法、装置及智能音箱
US10431211B2 (en) 2016-07-29 2019-10-01 Qualcomm Incorporated Directional processing of far-field audio
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10459684B2 (en) 2016-08-05 2019-10-29 Sonos, Inc. Calibration of a playback device based on an estimated frequency response
US10026403B2 (en) 2016-08-12 2018-07-17 Paypal, Inc. Location based voice association system
US20180053504A1 (en) 2016-08-19 2018-02-22 Otis Elevator Company Intention recognition for triggering voice recognition system
US9967382B2 (en) 2016-08-19 2018-05-08 Amazon Technologies, Inc. Enabling voice control of telephone device
WO2018039045A1 (en) 2016-08-24 2018-03-01 Knowles Electronics, Llc Methods and systems for keyword detection using keyword repetitions
US9972320B2 (en) 2016-08-24 2018-05-15 Google Llc Hotword detection on multiple devices
US10461953B2 (en) 2016-08-29 2019-10-29 Lutron Technology Company Llc Load control system having audio control devices
US10685656B2 (en) 2016-08-31 2020-06-16 Bose Corporation Accessing multiple virtual personal assistants (VPA) from a single device
US10074369B2 (en) 2016-09-01 2018-09-11 Amazon Technologies, Inc. Voice-based communications
US10580404B2 (en) 2016-09-01 2020-03-03 Amazon Technologies, Inc. Indicator for voice-based communications
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
EP3297298B1 (en) 2016-09-19 2020-05-06 A-Volute Method for reproducing spatially distributed sounds
US9972318B1 (en) 2016-09-21 2018-05-15 Amazon Technologies, Inc. Interpreting voice commands
JP6520878B2 (ja) 2016-09-21 2019-05-29 トヨタ自動車株式会社 音声取得システムおよび音声取得方法
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US10409548B2 (en) 2016-09-27 2019-09-10 Grabango Co. System and method for differentially locating and modifying audio sources
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
US10283138B2 (en) 2016-10-03 2019-05-07 Google Llc Noise mitigation for a voice interface device
WO2018067403A1 (en) 2016-10-03 2018-04-12 Google Inc. Multi computational agent performance of tasks
KR20220074984A (ko) 2016-10-03 2022-06-03 구글 엘엘씨 디바이스 토폴로지에 기초한 음성 명령 프로세싱
US10712997B2 (en) 2016-10-17 2020-07-14 Sonos, Inc. Room association based on name
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US20180122372A1 (en) 2016-10-31 2018-05-03 Soundhound, Inc. Distinguishable open sounds
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
KR102241970B1 (ko) 2016-11-07 2021-04-20 구글 엘엘씨 기록된 미디어 핫워드 트리거 억제
US10154496B2 (en) 2016-11-10 2018-12-11 Futurewei Technologies, Inc. System and method for beamformed reference signals in three dimensional multiple input multiple output communications systems
CN106708403A (zh) 2016-11-30 2017-05-24 努比亚技术有限公司 输入滑动操作时同步播放提示音的方法及装置
US10079015B1 (en) 2016-12-06 2018-09-18 Amazon Technologies, Inc. Multi-layer keyword detection
US10186265B1 (en) 2016-12-06 2019-01-22 Amazon Technologies, Inc. Multi-layer keyword detection to avoid detection of keywords in output audio
US10241748B2 (en) 2016-12-13 2019-03-26 EVA Automation, Inc. Schedule-based coordination of audio sources
US11184764B2 (en) 2016-12-14 2021-11-23 Amzetta Technologies, Llc Methods and systems of establishing communication between devices
CN106531165A (zh) 2016-12-15 2017-03-22 北京塞宾科技有限公司 一种便携式智能家居语音控制系统及控制方法
US10068573B1 (en) 2016-12-21 2018-09-04 Amazon Technologies, Inc. Approaches for voice-activated audio commands
US10276161B2 (en) 2016-12-27 2019-04-30 Google Llc Contextual hotwords
US10290302B2 (en) 2016-12-30 2019-05-14 Google Llc Compact home assistant with combined acoustic waveguide and heat sink
US10672387B2 (en) 2017-01-11 2020-06-02 Google Llc Systems and methods for recognizing user speech
US10306254B2 (en) 2017-01-17 2019-05-28 Seiko Epson Corporation Encoding free view point data in movie data container
US11164570B2 (en) 2017-01-17 2021-11-02 Ford Global Technologies, Llc Voice assistant tracking and activation
KR20180084392A (ko) 2017-01-17 2018-07-25 삼성전자주식회사 전자 장치 및 그의 동작 방법
KR102556840B1 (ko) 2017-01-20 2023-07-18 삼성전자주식회사 전자 장치 및 그의 제어 방법
US20180218747A1 (en) 2017-01-28 2018-08-02 Bose Corporation Audio Device Filter Modification
KR20180090586A (ko) 2017-02-03 2018-08-13 삼성전자주식회사 알림을 제공하는 방법 및 그 전자 장치
WO2018148315A1 (en) 2017-02-07 2018-08-16 Lutron Electronics Co., Inc. Audio-based load control system
US10467509B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Computationally-efficient human-identifying smart assistant computer
US10264358B2 (en) 2017-02-15 2019-04-16 Amazon Technologies, Inc. Selection of master device for synchronized audio
US10431217B2 (en) 2017-02-15 2019-10-01 Amazon Technologies, Inc. Audio playback device that dynamically switches between receiving audio data from a soft access point and receiving audio data from a local access point
US10839795B2 (en) 2017-02-15 2020-11-17 Amazon Technologies, Inc. Implicit target selection for multiple audio playback devices in an environment
US20180262793A1 (en) 2017-03-09 2018-09-13 Google Inc. Reverse Casting from a First Screen Device to a Second Screen Device
US10074371B1 (en) 2017-03-14 2018-09-11 Amazon Technologies, Inc. Voice control of remote device by disabling wakeword detection
US10499139B2 (en) 2017-03-20 2019-12-03 Bose Corporation Audio signal processing for noise reduction
US10621980B2 (en) 2017-03-21 2020-04-14 Harman International Industries, Inc. Execution of voice commands in a multi-device system
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US11188808B2 (en) 2017-04-11 2021-11-30 Lenovo (Singapore) Pte. Ltd. Indicating a responding virtual assistant from a plurality of virtual assistants
KR102068182B1 (ko) 2017-04-21 2020-01-20 엘지전자 주식회사 음성 인식 장치, 및 음성 인식 시스템
KR102298947B1 (ko) 2017-04-28 2021-09-08 삼성전자주식회사 음성 데이터 처리 방법 및 이를 지원하는 전자 장치
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10013995B1 (en) 2017-05-10 2018-07-03 Cirrus Logic, Inc. Combined reference signal for acoustic echo cancellation
US10628484B2 (en) 2017-05-17 2020-04-21 Board Of Trustees Of The University Of Illinois Vibrational devices as sound sensors
US10522146B1 (en) 2019-07-09 2019-12-31 Instreamatic, Inc. Systems and methods for recognizing and performing voice commands during advertisement
US10983753B2 (en) 2017-06-09 2021-04-20 International Business Machines Corporation Cognitive and interactive sensor based smart home solution
US10984329B2 (en) 2017-06-14 2021-04-20 Ademco Inc. Voice activated virtual assistant with a fused response
US20190013019A1 (en) 2017-07-10 2019-01-10 Intel Corporation Speaker command and key phrase management for muli -virtual assistant systems
US10687353B2 (en) 2017-07-10 2020-06-16 Qualcomm Incorporated Management of conflicting scheduling commands in wireless networks
US10310082B2 (en) 2017-07-27 2019-06-04 Quantenna Communications, Inc. Acoustic spatial diagnostics for smart home management
US11205421B2 (en) 2017-07-28 2021-12-21 Cerence Operating Company Selection system and method
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US11798544B2 (en) 2017-08-07 2023-10-24 Polycom, Llc Replying to a spoken command
US11062702B2 (en) 2017-08-28 2021-07-13 Roku, Inc. Media system with multiple digital assistants
US10546583B2 (en) 2017-08-30 2020-01-28 Amazon Technologies, Inc. Context-based device arbitration
US10366699B1 (en) 2017-08-31 2019-07-30 Amazon Technologies, Inc. Multi-path calculations for device energy levels
US10482895B2 (en) 2017-09-01 2019-11-19 Cirrus Logic, Inc. Acoustic echo cancellation (AEC) rate adaptation
US20190082255A1 (en) 2017-09-08 2019-03-14 Olympus Corporation Information acquiring apparatus, information acquiring method, and computer readable recording medium
JP6571144B2 (ja) 2017-09-08 2019-09-04 シャープ株式会社 監視システム、監視機器、サーバ、および監視方法
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10083006B1 (en) 2017-09-12 2018-09-25 Google Llc Intercom-style communication using multiple computing devices
US11314214B2 (en) 2017-09-15 2022-04-26 Kohler Co. Geographic analysis of water conditions
US9973849B1 (en) 2017-09-20 2018-05-15 Amazon Technologies, Inc. Signal quality beam selection
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10897680B2 (en) 2017-10-04 2021-01-19 Google Llc Orientation-based device interface
US11233782B2 (en) 2017-10-04 2022-01-25 Resilience Magnum IP, LLC Single node network connectivity for structure automation functionality
US10403266B2 (en) 2017-10-18 2019-09-03 Intel Corporation Detecting keywords in audio using a spiking neural network
JP2019086903A (ja) 2017-11-02 2019-06-06 東芝映像ソリューション株式会社 音声対話端末、および音声対話端末制御方法
US20190163153A1 (en) 2017-11-30 2019-05-30 International Business Machines Corporation Enforcing dynamic volume thresholds of an entertainment device
US10510340B1 (en) 2017-12-05 2019-12-17 Amazon Technologies, Inc. Dynamic wakeword detection
CN110678922A (zh) 2017-12-06 2020-01-10 谷歌有限责任公司 闪避和擦除来自附近设备的音频
US20190172452A1 (en) 2017-12-06 2019-06-06 GM Global Technology Operations LLC External information rendering
CN107919123B (zh) 2017-12-07 2022-06-03 北京小米移动软件有限公司 多语音助手控制方法、装置及计算机可读存储介质
US11182122B2 (en) 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US20190179611A1 (en) 2017-12-11 2019-06-13 Sonos, Inc. Systems and Methods of Receiving Voice Input
US10425247B2 (en) 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
US10051600B1 (en) 2017-12-12 2018-08-14 Amazon Technologies, Inc. Selective notification delivery based on user presence detections
US10374816B1 (en) 2017-12-13 2019-08-06 Amazon Technologies, Inc. Network conference management and arbitration via voice-capturing devices
WO2019128550A1 (en) 2017-12-31 2019-07-04 Midea Group Co., Ltd. Method and system for controlling home assistant devices
US9972343B1 (en) 2018-01-08 2018-05-15 Republic Wireless, Inc. Multi-step validation of wakeup phrase processing
US20190237067A1 (en) 2018-01-31 2019-08-01 Toyota Motor Engineering & Manufacturing North America, Inc. Multi-channel voice recognition for a vehicle environment
US10157042B1 (en) 2018-02-06 2018-12-18 Amazon Technologies, Inc. Audio output control
US10425780B1 (en) 2018-02-22 2019-09-24 Amazon Technologies, Inc. Outputting notifications using device groups
US10438605B1 (en) 2018-03-19 2019-10-08 Bose Corporation Echo control in binaural adaptive noise cancellation systems in headsets
US10440440B1 (en) 2018-03-23 2019-10-08 Rovi Guides, Inc. Systems and methods for prompting a user to view an important event in a media asset presented on a first device when the user is viewing another media asset presented on a second device
US10446169B1 (en) 2018-03-26 2019-10-15 Motorola Mobility Llc Pre-selectable and dynamic configurable multistage echo control system for large range level of acoustic echo
US11151991B2 (en) 2018-03-30 2021-10-19 Verizon Media Inc. Electronic message transmission
US20190311710A1 (en) 2018-04-06 2019-10-10 Flex Ltd. Device and system for accessing multiple virtual assistant services
US10679629B2 (en) 2018-04-09 2020-06-09 Amazon Technologies, Inc. Device arbitration by multiple speech processing systems
US10928917B2 (en) 2018-04-12 2021-02-23 International Business Machines Corporation Multiple user interaction with audio devices using speech and gestures
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US10433058B1 (en) 2018-06-14 2019-10-01 Sonos, Inc. Content rules engines for audio playback devices
US10762896B1 (en) 2018-06-25 2020-09-01 Amazon Technologies, Inc. Wakeword detection
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US11144596B2 (en) 2018-07-24 2021-10-12 Harman International Industries, Incorporated Retroactive information searching enabled by neural sensing
US10622009B1 (en) 2018-09-10 2020-04-14 Amazon Technologies, Inc. Methods for detecting double-talk
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US10971158B1 (en) 2018-10-05 2021-04-06 Facebook, Inc. Designating assistants in multi-assistant environment based on identified wake word received from a user
US10346122B1 (en) 2018-10-18 2019-07-09 Brent Foster Morgan Systems and methods for a supplemental display screen
US10388272B1 (en) 2018-12-04 2019-08-20 Sorenson Ip Holdings, Llc Training speech recognition systems using word sequences
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11198446B2 (en) 2019-01-04 2021-12-14 Faraday & Future Inc. On-board vehicle query system
US10943598B2 (en) 2019-03-18 2021-03-09 Rovi Guides, Inc. Method and apparatus for determining periods of excessive noise for receiving smart speaker voice commands
DK3726856T3 (da) 2019-04-17 2023-01-09 Oticon As Høreanordning omfattende en nøgleordsdetektor og en egen stemme-detektor
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
CN111341306B (zh) 2020-02-14 2022-06-17 东南大学 基于语音特征复用的关键词唤醒cnn的存储和计算压缩方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130034241A1 (en) * 2011-06-11 2013-02-07 Clearone Communications, Inc. Methods and apparatuses for multiple configurations of beamforming microphone arrays
US20150271593A1 (en) * 2014-03-18 2015-09-24 Cisco Technology, Inc. Techniques to Mitigate the Effect of Blocked Sound at Microphone Arrays in a Telepresence Device

Also Published As

Publication number Publication date
US10313812B2 (en) 2019-06-04
JP6986071B2 (ja) 2021-12-22
US20230164503A1 (en) 2023-05-25
EP3520436B1 (en) 2020-12-23
US20180098167A1 (en) 2018-04-05
US20210219082A1 (en) 2021-07-15
US9743204B1 (en) 2017-08-22
EP3520436A1 (en) 2019-08-07
US20190281399A1 (en) 2019-09-12
US10075793B2 (en) 2018-09-11
KR102158514B1 (ko) 2020-09-23
US10873819B2 (en) 2020-12-22
US10117037B2 (en) 2018-10-30
JP2019537309A (ja) 2019-12-19
CN109997370B (zh) 2021-03-02
US11516610B2 (en) 2022-11-29
US20190052985A1 (en) 2019-02-14
US20180227688A1 (en) 2018-08-09
WO2018064362A1 (en) 2018-04-05
CN109997370A (zh) 2019-07-09

Similar Documents

Publication Publication Date Title
US11516610B2 (en) Orientation-based playback device microphone selection
US11889276B2 (en) Calibration of audio playback devices
US10880644B1 (en) Three-dimensional beam forming with a microphone array
US20240004607A1 (en) Calibration of a Playback Device Based on an Estimated Frequency Response
US11769519B2 (en) Device impairment detection

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant