CN107205202B - 用于产生音频的系统、方法和设备 - Google Patents
用于产生音频的系统、方法和设备 Download PDFInfo
- Publication number
- CN107205202B CN107205202B CN201710081429.1A CN201710081429A CN107205202B CN 107205202 B CN107205202 B CN 107205202B CN 201710081429 A CN201710081429 A CN 201710081429A CN 107205202 B CN107205202 B CN 107205202B
- Authority
- CN
- China
- Prior art keywords
- speaker
- sound
- map
- room
- control signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 24
- 230000000694 effects Effects 0.000 claims abstract description 33
- 238000013507 mapping Methods 0.000 claims abstract description 19
- 230000004044 response Effects 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 5
- 230000001052 transient effect Effects 0.000 claims description 3
- 230000033001 locomotion Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- 230000001413 cellular effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 229910003460 diamond Inorganic materials 0.000 description 5
- 239000010432 diamond Substances 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000012360 testing method Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 101710158075 Bucky ball Proteins 0.000 description 2
- XMWRBQBLMFGWIX-UHFFFAOYSA-N C60 fullerene Chemical compound C12=C3C(C4=C56)=C7C8=C5C5=C9C%10=C6C6=C4C1=C1C4=C6C6=C%10C%10=C9C9=C%11C5=C8C5=C8C7=C3C3=C7C2=C1C1=C2C4=C6C4=C%10C6=C9C9=C%11C5=C5C8=C3C3=C7C1=C1C2=C4C6=C2C9=C5C3=C12 XMWRBQBLMFGWIX-UHFFFAOYSA-N 0.000 description 2
- 238000004566 IR spectroscopy Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000001931 thermography Methods 0.000 description 2
- 239000004593 Epoxy Substances 0.000 description 1
- 208000032041 Hearing impaired Diseases 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000002500 effect on skin Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000010304 firing Methods 0.000 description 1
- 235000020280 flat white Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 208000029257 vision disease Diseases 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R9/00—Transducers of moving-coil, moving-strip, or moving-wire type
- H04R9/06—Loudspeakers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
- G01S15/06—Systems determining the position data of a target
- G01S15/08—Systems for measuring distance only
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
- G01S15/06—Systems determining the position data of a target
- G01S15/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/89—Sonar systems specially adapted for specific applications for mapping or imaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/323—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R17/00—Piezoelectric transducers; Electrostrictive transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R9/00—Transducers of moving-coil, moving-strip, or moving-wire type
- H04R9/02—Details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/003—Mems transducers or their use
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2400/00—Loudspeakers
- H04R2400/11—Aspects regarding the frame of loudspeaker transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本发明涉及带有超声波房间测绘的超声波扬声器组件。利用超声波扬声器提供音频空间效果。为了更好地再现音效,使用超声波来绘制其中布置扬声器的房间的地图,并利用所述地图建立从扬声器发出的超声波的方向。
Description
技术领域
本申请一般地涉及用于产生音频的超声波扬声器组件。
背景技术
通常利用相控阵原理,提供好像发声视频对象在正在显示所述视频的空间中似的模拟所述对象的移动的音频空间效果。如这里所理解的,这种系统不可利用本发明的原理,尽可能准确并精确地模拟音频空间效果或者尽可能地紧凑。
发明内容
一种系统,包括配置成沿着相应的声轴发出声音的至少一个超声波扬声器、至少一个麦克风和至少一个计算机存储器,所述计算机存储器不是瞬时信号,并且包括可由至少一个处理器执行、以利用所述至少一个超声波扬声器和至少一个麦克风来生成房间的地图的指令。所述指令可执行以接收控制信号,并响应于所述控制信号,至少部分地利用所述房间的地图来致动扬声器。
装置可包括处理器。响应于所述控制信号,利用房间的地图致动的扬声器可以是用来生成所述地图的超声波扬声器,或者它可以是另一个扬声器。
在示例实施例中,所述控制信号可指示包括仰角分量和方位角分量的需求的声轴。在一些实现方式中,所述控制信号可以从计算机游戏控制台接收,所述计算机游戏控制台输出用于在非超声波扬声器上播放的主音频通道。在示例中,所述指令可以是可执行的,以响应于所述控制信号,利用所述地图把声音指向反射位置。
在非限制性实施例中,所述控制信号表示接收的音频通道中的至少一个音效数据。可至少部分地根据向计算机游戏输入设备的输入来建立所述音效数据。
在另一个方面,一种方法,包括按第i个定向的方位角和仰角来定向至少一个超声波(US)扬声器,使所述US扬声器在时间“i”处发出测绘声音,以及利用至少一个麦克风检测测绘声音的返回信号。所述方法还包括确定返回信号检测时间和时间“i”之间的时间差Δt,并利用下式把时间差Δt转换成第i个距离:
第i个距离=1/2Δt*c,其中c=声速。
此外,所述方法包括把表面的位置建立为与和第i个定向相关联的第i个距离相等的距离。至少部分地基于所述表面的位置,并响应于用于需求的音效的控制信号,对于至少一个US扬声器建立定向,在所述定向处所述至少一个US扬声器将发出需求的音频。
在另一个方面,一种设备,包括至少一个计算机存储器,所述计算机存储器不是瞬时信号,并且反而包括可由至少一个处理器执行以利用至少一个超声波(US)扬声器和至少一个麦克风来生成房间的地图的指令。这是至少部分地通过按第i个定向的方位角和仰角定向所述至少一个US扬声器,并使所述US扬声器在传输时间发出测绘声音而实现的。在返回信号时间,利用所述至少一个麦克风检测测绘声音的返回信号,以使得利用返回信号时间和传输时间能够确定第i个距离。房间的表面的位置被建立为与和第i个定向相关联的第i个距离相等的距离。
附图说明
参考附图,可更好地理解本申请在其结构和操作两个方面的细节,在附图中,相同的附图标记指相同的部分,并且在附图中:
图1是包括按照本发明原理的示例系统的示例系统的方框图;
图2是可使用图1的组件的另一个系统的方框图;
图3是安装在万向节组件上的示例超声波扬声器系统的示意图;
图4和图5是伴随图3中的系统的示例逻辑的流程图;
图6是用于使声束指向特定观察者的示例备选逻辑的流程图;
图7是用于输入供图6的逻辑采用的模板的示例屏幕截图;
图8示出其中超声波扬声器被布置在不需要移动的球形支承件上的备选扬声器组件;
图9和图10是伴随图8中的系统的示例逻辑的流程图;
图11是用于超声测绘房间的示例逻辑的流程图。
具体实施方式
本公开一般地涉及包括消费电子(CE)设备网络的各个方面的计算机生态系统。这里的系统可包括通过网络连接的服务器和客户端组件,以使得在客户端和服务器组件之间可以交换数据。客户端组件可包括一个或多个计算设备,包括便携式电视机(例如,智能TV、具有因特网功能的TV)、诸如膝上型计算机和平板计算机之类的便携式计算机,和其他移动设备,包括智能电话和下面讨论的另外的示例。这些客户端设备可以利用各种操作环境来操作。例如,一些客户端计算机可以采用来自 Microsoft的操作系统、或者Unix操作系统、或者由Apple Computer 或Google生产的操作系统作为示例。这些操作环境可用于执行一个或多个浏览程序,诸如由Microsoft或Google或Mozilla制造的浏览器,或者能够访问由下面讨论的因特网服务器托管的web应用的其他浏览器程序。
服务器和/或网关可包括执行指令的一个或多个处理器,所述指令把服务器配置成通过诸如因特网之类的网络接收和发送数据。或者,客户端和服务器可通过本地内联网或虚拟专用网络而连接。服务器或控制器可以通过诸如Sony Playstation(注册商标)之类的游戏控制台、个人计算机等例示。
在客户端和服务器之间可通过网络交换信息。为此并且为了安全性,服务器和/或客户端可包括防火墙、负载平衡器、暂时储存器和代理、以及用于可靠性和安全性的其他网络基础设施。一个或多个服务器可构成实现向网络成员提供诸如在线社交网站之类的安全社区的方法的装置。
如这里使用的指令指的是用于在系统中处理信息的计算机实现的步骤。指令可以以软件、固件或硬件实现,并且包括由系统的组件采取的任意类型的程序化步骤。
处理器可以是能够借助各种线路(诸如地址线、数据线和控制线) 以及寄存器和移位寄存器执行逻辑的任何常规的通用单芯片或多芯片处理器。
这里通过流程图和用户界面的方式描述的软件模块可包括各种子例程、步骤等。在不限制本公开的情况下,规定为要由特定模块执行的逻辑可被重新分发给其他软件模块,和/或在单个模块中组合在一起和/或在可共享库中被使得可用。
这里描述的本发明的原理可被实现为硬件、软件、固件或者它们的组合;因此,就例示组件、方框、模块、电路和步骤的功能而论,阐述了所述例示组件、方框、模块、电路和步骤。
除上面已经提及的之外,下面描述的逻辑块、模块和电路可利用通用处理器、数字信号处理器(DSP)、现场可编程门阵列(FPGA),或者设计以进行这里描述的功能的其他可编程逻辑器件(诸如专用集成电路 (ASIC)、离散门或晶体管逻辑、离散硬件组件)或者它们的任意组合实现或进行。处理器可以通过控制器或状态机或计算设备的组合来实现。
当以软件实现时,下面描述的功能和方法可用适当的语言(诸如(但不限于)C#或C++)编写,并且可被存储在计算机可读存储介质(诸如随机存取存储器(RAM)、只读存储器(ROM)、电可擦可编程只读存储器 (EEPROM)、光盘只读存储器(CD-ROM)、或诸如数字通用盘(DVD)之类的其他光盘储存器、磁盘储存器或者包括可拆卸拇指驱动器的其他磁存储设备等)上,或者通过所述计算机可读存储介质传送。连接可建立计算机可读介质。作为示例,这些连接可包括硬连线线缆,包括光纤和同轴线,以及数字用户线路(DSL)和双铰线。
包含在一个实施例中的组件可以按照任何适当的组合在其他实施例中使用。例如,这里描述的和/或在附图中描述的各种组件中的任意组件可被组合、互换或者从其他实施例中被排除。
“具有A、B和C至少之一的系统”(同样地,“具有A、B或C至少之一的系统”和“具有A、B、C至少之一的系统”)包括只具有A、只具有B、只具有C、同时具有A和B、同时具有A和C、同时具有B和C和/ 或同时具有A、B和C等的系统。
现在具体参考图1,示出了示例生态系统10,生态系统10可包括下面提及并且下面按照本发明的原理进一步描述的示例设备中的一个或多个。包含在系统10中的示例设备中的第一个示例设备是消费电子(CE)设备,所述CE设备被配置成示例主显示设备,并且在所示的实施例中是音视频显示设备(AVDD)12,诸如(但不限于)带有TV调谐器(等同地,控制TV的机顶盒)的具有因特网功能的TV。然而,AVDD 12或者可以是家用电器或家庭用品,例如计算机化的具有因特网功能的冰箱、洗衣机或烘干机。AVDD 12或者也可以是计算机化的具有因特网功能的(“智能”)电话机、平板计算机、笔记本计算机、可穿戴计算机化设备(例如,诸如计算机化的具有因特网功能的手表、计算机化的具有因特网功能的手镯)、其他计算机化的具有因特网功能的设备、计算机化的具有因特网功能的音乐播放器、计算机化的具有因特网功能的耳机、计算机化的具有因特网功能的可植入设备(诸如可植入皮肤设备)、游戏控制台等。无论如何,应理解AVDD 12被配置成采取本发明的原理(例如,与其他CE设备通信以采取本发明的原理,执行在这里描述的逻辑,并进行在这里描述的任何其他功能和/或操作)。
因而,为了采取这种原理,可以通过图1中所示的一些或所有组件来建立AVDD 12。例如,AVDD 12可包括一个或多个显示器14,所述显示器14可以通过高清晰度或超高清晰度“4K”或更高的平面屏幕实现,并且可以是具有触摸功能的,用于经由显示器上的触摸接收用户输入信号。 AVDD 12可包括用于按照本发明的原理输出音频的一个或多个扬声器16,和用于例如把可听命令输入AVDD 12以控制AVDD 12的至少一个附加输入设备18(例如,诸如音频接收器/麦克风)。示例AVDD 12还可包括在一个或多个处理器24的控制下,用于通过至少一个网络22(诸如因特网、 WAN、LAN等)的通信的一个或多个网络接口20。从而,接口20可以是(但不限于)Wi-Fi收发器,它是无线计算机网络接口的示例,诸如(但不限于) 网格网络收发器。要理解处理器24控制AVDD 12以采取本发明的原理,包括这里描述的AVDD 12的其他元件诸如例如控制显示器14在其上呈现图像,以及从其接收输入。此外,注意网络接口20例如可以是有线或无线调制解调器或路由器,或者其他适当的接口(诸如例如无线电话收发器或者如上所述的Wi-Fi收发器)等。
除了前述内容之外,AVDD 12还可包括一个或多个输入端口26,诸如例如高清晰度多媒体接口(HDMI)端口或USB端口,以(例如,利用有线连接)物理连接到另一个CE设备和/或耳机端口,以把耳机连接到AVDD 12,用于通过耳机把来自AVDD 12的音频呈现给用户。例如,输入端口 26可经由导线或者无线地连接到音视频内容的有线或卫星来源26a。从而,来源26a可以是例如分离或集成的机顶盒,或者卫星接收器。或者,来源26a可以是包含对于下面进一步描述的通道分配来说,可能被用户视为喜爱之物的内容的游戏控制台或磁盘播放器。
AVDD 12还可包括诸如基于磁盘的或固态储存器之类的一个或多个计算机存储器28,所述一个或多个计算机存储器28不是瞬时信号,在一些情况下,在AVDD的机箱中具体体现为独立的设备,或者具体体现为用于重放AV节目的在AVDD的机箱内部或外部的个人视频记录设备(PVR)或视频光盘播放器,或者具体体现为可拆卸存储介质。此外在一些实施例中,AVDD 12可包括位置或地点接收器,诸如(但不限于)配置成例如从至少一个卫星或蜂窝塔接收地理位置信息、并把所述信息提供给处理器24 和/或与处理器24结合地确定AVDD12被布置在的高度的蜂窝电话接收器、GPS接收器和/或高度计30。然而,要理解按照本发明的原理,可以使用除蜂窝电话接收器、GPS接收器和/或高度计之外的另一个合适的位置接收器来例如确定AVDD 12在例如所有3个维度的位置。
继续AVDD 12的描述,在一些实施例中,AVDD 12可包括一个或多个摄像头32,所述摄像头32例如可以是热成像摄像头、诸如网络摄像头之类的数字摄像头、和/或集成到AVDD12中并且可由处理器24控制以按照本发明的原理收集照片/图像和/或视频的摄像头。蓝牙收发器34和其他的近场通信(NFC)元件36也可包含在AVDD 12上,用于分别利用蓝牙和/或NFC技术与其他设备通信。示例NFC元件可以是射频标识(RFID)元件。
更进一步地,AVDD 12可包括向处理器24提供输入的一个或多个辅助传感器37(例如,诸如加速计、陀螺仪、记转器的运动传感器、或者磁性传感器、红外(IR)传感器、光学传感器、速度和/或韵律传感器、手势传感器(例如,用于感测手势命令)等)。AVDD 12可包括空中TV广播端口 38,用于接收向处理器24提供输入的OTH TV广播。除了前述内容之外,注意AVDD 12还可包括红外(IR)发射器和/或IR接收器和/或IR收发器 42,诸如IR数据组织(IRDA)设备。可以设置电池(未示出)用于向AVDD 12 供电。
仍然参考图1,除了AVDD 12之外,系统10可包括一种或多种其他 CE设备类型。当系统10是家庭网络时,组件之间的通信可以按照数字生活网络联盟(DLNA)协议。
在一个示例中,第一CE设备44可用来经由通过下面描述的服务器发送的命令来控制显示器,而第二CE设备46可包括和第一CE设备44 类似的组件,并且从而将不再详细讨论。在所示的示例中,仅仅示出了两个CE设备44、46,应理解可以使用更少或更多的设备。
在所示的示例中,为了例示本发明的原理,所有3个设备12、44、 46都被假定为是例如家中的娱乐网络的成员,或者至少彼此接近地存在于诸如住宅之类的场所中。然而,就本发明的原理来说,并不限于通过虚线48例示的特定场所,除非另外明确要求。
示例非限制性第一CE设备44可以通过上述设备中的任意一个(例如便携式无线膝上型计算机或笔记本计算机或游戏控制器)而建立,并且因而可以具有下述组件中的一个或多个组件。第二CE设备46可以通过(但不限于)诸如蓝光播放器之类的视频光盘播放器、游戏控制台等建立。第一CE设备44可以是用于例如向AVDD 12发出AV播放和暂停命令的遥控器(RC),或者它可以是更复杂的设备,诸如平板计算机、经由有线或无线链路与通过第二CE设备46实现的游戏控制台通信并控制在 AVDD 12上的视频游戏呈现的游戏控制器、个人计算机、无线电话机等。
因而,第一CE设备44可包括一个或多个显示器50,所述显示器50 可以是具有触摸功能的,用于经由显示器上的触摸接收用户输入信号。第一CE设备44可包括用于按照本发明的原理输出音频的一个或多个扬声器52,和用于例如把可听命令输入第一CE设备44以控制设备44的至少一个附加输入设备54(诸如例如音频接收器/麦克风)。示例第一CE 设备44还可包括用于在一个或多个CE设备处理器58的控制下,通过网络22通信的一个或多个网络接口56。从而,接口56可以是(但不限于)Wi-Fi收发器,它是无线计算机网络接口的示例,包括网格网络接口。要理解处理器58控制第一CE设备44以采取本发明的原理,包括这里描述的第一CE设备44的其他元件诸如例如控制显示器50在其上呈现图像和从其接收输入。此外,注意网络接口56例如可以是有线或无线调制解调器或路由器,或者诸如例如无线电话收发器或者如上所述的Wi-Fi收发器之类的其他适当的接口等。
除了前述内容之外,第一CE设备44还可包括一个或多个输入端口 60(诸如例如HDMI端口或USB端口),以(例如,利用有线连接)物理地连接到另一个CE设备和/或耳机端口,以把耳机连接到第一CE设备44,用于通过耳机把来自第一CE设备44的音频呈现给用户。第一CE设备44 还可包括诸如基于磁盘的或固态储存器之类的一个或多个有形的计算机可读存储介质62。此外在一些实施例中,第一CE设备44可包括位置或地点接收器,诸如(但不限于)配置成例如利用三角测量法从至少一个卫星和/或蜂窝塔接收地理位置信息,并把所述信息提供给CE设备处理器 58和/或与CE设备处理器58结合地确定第一CE设备44被布置在的高度的蜂窝电话和/或GPS接收器和/或高度计64。然而,要理解按照本发明的原理,可以使用除蜂窝电话和/或GPS接收器和/或高度计之外的另一个合适的位置接收器来例如确定第一CE设备44在例如所有3个维度的位置。
继续第一CE设备44的描述,在一些实施例中,第一CE设备44可包括一个或多个摄像头66,所述摄像头66例如可以是热成像摄像头、诸如网络摄像头之类的数字摄像头、和/或集成到第一CE设备44中并且可由CE设备处理器58控制以按照本发明的原理收集照片/图像和/或视频的摄像头。蓝牙收发器68和其他的近场通信(NFC)元件70也可包含在第一CE设备44上,用于分别利用蓝牙和/或NFC技术与其他设备通信。示例NFC元件可以是射频标识(RFID)元件。
更进一步地,第一CE设备44可包括向CE设备处理器58提供输入的一个或多个辅助传感器72(例如,诸如加速计、陀螺仪、记转器之类的运动传感器、或者磁性传感器、红外(IR)传感器、光学传感器、速度和/ 或韵律传感器、手势传感器(例如,用于感测手势命令)等)。第一CE设备44仍可包括其他的传感器,诸如例如一个或多个气候传感器74(例如,气压计、湿度传感器、风传感器、光传感器、温度传感器等)和/或向CE 设备处理器58提供输入的一个或多个生物特征传感器76。除了前述内容之外,注意在一些实施例中,第一CE设备44还可包括红外(IR)发射器和/或IR接收器和/或IR收发器42,诸如IR数据组织(IRDA)设备。可以设置电池(未示出)用于向第一CE设备44供电。CE设备44可通过任意上述通信模式和相关组件与AVDD 12通信。
第二CE设备46可包括针对CE设备44所示的一些或所有组件。任何一个或者两个CE设备都可由一个或多个电池供电。
现在就上述至少一个服务器80来说,它包括至少一个服务器处理器 82、至少一个有形的计算机可读存储介质84(诸如基于磁盘的或固态储存器)和至少一个网络接口86,所述网络接口86在服务器处理器82的控制下允许通过网络22与图1的其他设备的通信,并且实际上可按照本发明的原理便利服务器和客户端设备之间的通信。注意,网络接口86例如可以是有线或无线调制解调器或路由器、Wi-Fi收发器或者诸如例如无线电话收发器的其他适当的接口。
因而,在一些实施例中,服务器80可以是因特网服务器,并且可包括并进行“云”功能,以使得在示例实施例中,系统10的设备可经由服务器80访问“云”环境。或者,服务器80可以通过在和图1中所示的其他设备相同的房间中或者在附近的游戏控制台或其他计算机实现。
现在参考图2,可包含图1中的AVDD 12的一些或所有组件的AVDD 200 连接到至少一个网关,用于从所述网关接收内容,例如诸如4K或8K内容之类的UHD内容。在所示的示例中,AVDD 200连接到第一和第二卫星网关202、204,第一和第二卫星网关202、204中的每个可被配置成用于从相应的卫星TV提供商的相应的卫星系统206、208接收卫星TV信号的卫星TV机顶盒。
另外或者代替卫星网关,AVDD 200可从一个或多个有线TV机顶盒型网关210、212接收内容,有线TV机顶盒型网关210、212中的每个从相应的线缆头端214、216接收内容。
再次地,代替机顶盒型网关,AVDD 200可从基于云的网关220接收内容。基于云的网关220可驻留于在AVDD 200本地的网络接口设备(例如,AVDD 200的调制解调器)中,或者它可驻留在向AVDD 200发送源于因特网的内容的远程因特网服务器中。总之,AVDD 200可通过基于云的网关220从因特网接收诸如UHD内容之类的多媒体内容。网关是计算机化的,并且从而可包括图1中所示的CE设备任意之一的适当组件。
在一些实施例中,利用例如本申请的受让人的远程查看用户界面 (RVU)技术,可以只设置单个机顶盒型网关。
第三设备可例如经由以太网或通用串行总线(USB)或WiFi或其他有线或无线协议,连接到家庭网络(所述家庭网络可以是网格型网络)中的 AVDD 200,以按照这里的原理从AVDD 200接收内容。在所示的非限制性示例中,第二TV 222和视频游戏控制台224一样连接到AVDD 200,以从 AVDD 200接收内容。另外的设备可以连接到一个或多个第三设备,以扩展所述网络。第三设备可包括图1中所示的任意CE设备的适当组件。
在图3的示例系统中,控制信号可以来自于实现CE设备44的一些或所有组件的游戏控制台,或者来自于诸如这里讨论的摄像头之一之类的摄像头,并且除了描述的机械部件之外,万向节组件可包括第二CE设备46的一个或多个组件。游戏控制台可在AVDD上输出视频。系统的两个或更多个组件可被合并到单个单元中。
更具体地,图3中的系统300包括沿着声轴304发出声音的超声波扬声器302(也称为“参数发射器”)。可以只使用万向节上的仅单个扬声器,或者如在下面的备选实施例中所公开的,可以使用布置在球形组件中的多个US扬声器。一个或多个扬声器可安装在万向节组件上。声束通常被限制在较窄的圆锥体中,所述圆锥体绕轴304定义锥角306,锥角 306通常为几度,例如最高可达30度。从而,扬声器302是通过把音频信号调制到一个或多个超声波载波频率来产生窄声束的指向声源。超声波扬声器的高度指向性使目标听众可以清楚地听到声音,而在相同区域中但在声束之外的另一个听众几乎听不到声音。
如上面所提及的,在示例中,用于移动扬声器302的控制信号可由在视频显示设备310上输出相关视频的一个或多个控制信号源308(诸如例如在家庭娱乐系统中的视频播放器、摄像头、游戏控制台、个人计算机)生成。通过这种方式,仅利用单个扬声器作为声源,就能够高度准确地实现诸如交通工具(飞机、直升机、汽车)穿过空间之类的音效。
在示例中,诸如游戏控制器之类的控制信号源308可在例如正在呈现游戏的视频显示设备(诸如TV或PC或相关联的家庭音响系统)的(一个或多个)非超声波主扬声器308A或310A上输出主音频。游戏中可包含分离的音效音频通道,并且该第二音效音频通道连同为移动万向节组件而发送的控制信号或者作为所述控制信号的一部分被提供给US扬声器300,用于在指向US扬声器300上播放所述音效通道,同时在(一个或多个)扬声器308A/310A上同时播放游戏的主音频。
控制信号源308可从诸如计算机游戏RC之类的一个或多个遥控器 (RC)309接收用户输入。RC 309和/或为每个游戏玩家提供的用于播放主 (非US)音频的音响耳机308c可具有附着于它的定位标记309A(诸如超宽带(UWB)标记),通过所述标记能够确定RC和/或耳机的位置。这样,由于游戏软件知道每个玩家具有哪个耳机/RC,因此它能够知道该玩家的位置,以使US扬声器对准,用于播放预定给该玩家的US音效。
代替UWB,可以使用能够与三角测量法一起使用以确定RC的位置的其他感测技术,例如准确的蓝牙或者WiFi或者甚至分离的GPS接收器。当如下进一步所述,使用成像来确定用户/RC的位置和/或房间尺寸时,控制信号源308可包括诸如摄像头(例如,CCD)或前视红外(FLIR)成像器之类的定位器308B。
用户位置可在初始自动校准处理期间被确定。这种处理的另一个示例如下所述。可以使用游戏玩家的头戴式耳机中的麦克风,或者替代地包含在头戴式耳机的听筒中的麦克风或者听筒本身可以用作麦克风。通过来回移动US束直到佩戴头戴式耳机的听众例如利用预定手势指示哪只耳朵得到窄US束为止,系统能够准确地校准每只耳朵的位置。
另外或者替代地,万向节组件可以耦接到向一个或多个处理器312 发送信号的摄像头或FLIR成像器311,所述一个或多个处理器312从诸如微机电系统(MEMS)麦克风之类的一个或多个麦克风313接收与接收的声音有关的信息,并访问万向节组件中的一个或多个计算机存储器314。控制信号(如果需要的话,连同音效音频通道一起)也由处理器(通常通过网络接口)接收。万向节组件可包括方位角控制电机316,方位角控制电机316由处理器312控制,以如图所示按方位角维度318转动上面安装了扬声器302的支承组件317。
如果需要,那么不仅声束304的方位角可被控制,而且声束相对于水平面的仰角也可被控制。在所示的示例中,支承组件317包括相对的侧面支架319,并且仰角控制电机320可耦接到侧面支架319以转动耦接到扬声器302的轮轴322,以在如324处所指示地按仰角上下倾斜扬声器。在非限制性示例中,万向节组件可包括耦接到垂直支承杆328的水平支承臂326。
万向节组件和/或其各个部分可以是可从Hobby King获得的无刷万向节组件。
关于第一个示例转至图4,除了在方框400处接收的主音频通道之外,计算机游戏设计者还可指定音效通道,以指定在音效通道中携带并在方框402处接收的音效的位置(方位角,以及仰角(如果需要的话))。该通道通常包含在游戏软件(或者音视频电影等)中。当关于音效的控制信号来自计算机游戏软件时,在方框404处可从RC 309接收变更游戏期间由音效表示的对象的运动(位置、定向)的用户输入。在方框406处,游戏软件生成并输出定义所述音效随着时间在该环境内的位置(运动)的向量(x-y-z)。在方框408处,该向量被发送给万向节组件,以使万向节组件的(一个或多个)超声波扬声器300重放音效通道音频,并使用该向量移动扬声器302(并且从而,移动发出的音效的声轴304)。
图5例示了万向节组件如何处理控制信号。在方框500处,接收音频通道及(一个或多个)指向向量。转到方框502,万向节被移动以按方位角和/或仰角移动扬声器302,以使声轴304以需求的向量为中心。在方框504处,在扬声器上播放需求的音频,所述音频被限制在锥角306 内。
在图6的方框600处,例如,如上面所提及的,诸如图1中所示的摄像头之类的摄像头可用于对扬声器302所位于的空间成像,图6表示可由万向节组件的处理器采用的逻辑。尽管图1中的摄像头被示为耦接到音视频显示设备,不过替代地,它可以是设置在充当控制信号发生器 308的游戏控制台上的定位器308B或者万向节组件本身上的成像器311。总之,在判定菱形框602处,利用在来自例如定位器308B或成像器311 的可见图像上操作的面部识别软件,通过例如对照存储的模板图像匹配人物的图像,或者当使用FLIR时通过判定是否已接收到与预定模板匹配的IR签名,判定预定人物是否在所述空间中。如果预定人物被成像,那么在方框604处,可移动万向节组件以把声轴304对准识别出的人物。
为了知道预定人物的成像面部在何处,可以采用几种途径之一。第一种途径是利用音频或视频提示,指示所述人物在听到音频时作出手势,诸如拇指向上或者把RC保持在预定位置,并且随后移动万向节组件,以环绕房间扫描声轴直到摄像头拍摄到作出所述手势的人物为止。另一种途径是把摄像头轴线的定向预先编入万向节组件中,以使得知道中心摄像头轴线的万向节组件能够确定相对于对面部成像处的轴线的任何偏移量,并使扬声器定向匹配该偏移量。更进一步地,摄像头311本身可以与扬声器302的声轴304关系固定地安装在万向节组件上,以使摄像头轴线和声轴始终匹配。来自摄像头的信号可被用于使摄像头轴线(并且从而声轴)以预定人物的成像面部为中心。
图7表示可用于输入在图6中的判定菱形框602处使用的模板的示例用户界面(UI)。在游戏控制器耦接到的诸如视频显示器之类的显示器上可以呈现提示700,用于人物输入应使声轴对准的人物的照片。例如,视力和/或听力残疾的人物可被指定为使扬声器302对准的人物。
可向用户赋予输入图库中的照片的选项702,或者使摄像头对目前在摄像头前面的人物成像的选项704。可以使用用于输入图6的测试模板的其他示例手段。例如,可通过直接用户输入通知系统把扬声器302的声轴304对准何处。
总之,可以理解本发明的原理可被用来向具有视力残疾的人物可能坐在的特定位置输送视频描述音频服务。
超声波扬声器的另一个特性是如果对准诸如墙壁之类的反射性表面,那么声音好像来自于反射的位置。这种特性可以用作向万向节组件的输入,以利用离开房间边界的适当的入射角来控制声音的方向,以使反射的声音针对用户。可以使用测距技术来测绘空间的边界。能够确定房间中的对象(诸如窗帘、家具等)有助于系统的准确性。用来测绘或以其他方式分析效果扬声器存在于的空间的添加的摄像头可被用来按照通过考虑到环境来改进音效的准确性的方式,更改控制信号。
更具体地,可以通过上面的任意摄像头对房间成像,并实施图像识别以确定墙壁和天花板在什么地方。图像识别还可指示表面是否是良反射体,例如,平的白色表面通常是反射很好的墙壁,而折叠的表面可以指示相对非反射性的窗帘。可以提供并利用图像识别技术更改默认的房间配置(并且如果需要,针对(一个或多个)听众假定的默认位置)。
替代地,并且如下参照图11进一步所述,通过移动万向节组件、在各种万向节组件定向中的每种定向处发出啁啾声并对啁啾声的接收计时,可以使用来自US扬声器300的指向声音,以(1)了解在该方向上到反射性表面的距离,和(2)基于返回啁啾声的振幅,了解所述表面是良反射体还是不良反射体。此外,白噪声可以作为伪随机(PN)序列而生成并通过US扬声器发出,随后测量反射以对于沿其发出“测试”白噪声的每个方向确定US波的传递函数。此外,可通过一系列的UI提示用户输入房间尺寸和表面类型。
此外,可以使用在通过引用包含在本文中的USPP 2015/0256954中描述的房间尺寸测绘技术中的一种或多种技术。
或者,为了更高的准确度,可以采用结构化光来3D地测绘房间。检查房间的另一种方式是使用光学指示器(已知散度),并且利用摄像头,它能够准确地测量房间尺寸。通过光点尺寸及变形,可以估计在表面上的入射角。此外,表面的反射率是关于所述表面是否可能是声音的反射性表面的附加提示。
总之,一旦知道房间尺寸和表面类型,根据控制信号知道模拟音效来自和/或将被输送到的位置的万向节组件的处理器可通过三角测量法,确定使US扬声器300对准的反射位置,以使得在房间中的预定位置接收到来自反射位置的反射的声音。按照这种方式,可不通过万向节组件把 US扬声器300直接对准预定玩家,而相反可对准反射点,以向预定玩家赋予声音来自于反射点而不是US扬声器的方向的感觉。
图7例示了另一种应用,其中当使音频定向时,一个或多个万向节组件上的多个超声波扬声器同时但是以相应的不同语言的音轨(诸如英语和法语)提供相同的音频。可以提供为其面部图像建立输入的模板的人物选择语言的提示706。可以从语言的列表708中选择语言,并使之与人物的模板图像相关联,以使得在随后的操作期间,当在图6中的判定菱形框602处识别出预定面部时,系统知道应使哪种语言指向每个用户。注意,尽管万向节安装的超声波扬声器排除对于相控阵技术的需要,不过这种技术可以与本发明的原理结合。
图8示出备选的扬声器组件800,其中多个超声波扬声器802安装在扬声器支架804上,扬声器支架804可支承在支柱式支承件806上。每个扬声器802沿着相应的声轴808发出声音,在球形坐标系中,声轴808 具有仰角分量和方位角分量。如果需要,支架804的最高部分和/或最低部分不需要支承任何扬声器,即,如果需要,不必在支架804上设置笔直指向上方或指向下方的扬声器。如果未预想几乎垂直的声音投射,如果需要,仰角(elevational)“死区”可被扩展,以使得例如不需要设置其声轴具有在垂直的“N”度内的仰角的扬声器。
总之,支架可被配置成按所示的球状布置保持扬声器802,以使得如果每个声轴808被延伸到支架804中,那么近似与支架804的中心相交。在所示的示例中,支架804被配置为带有面板810的巴克球(Bucky Ball),面板810可以是平的,并且可大体在面板的中心支承相应的扬声器802,如图所示。可大体沿着由巴克球定义的径向线来定向各个扬声器802。
为了要与下面描述的图11有关地公开的用途,例如通过把麦克风安装在巴克球面板上,诸如微机电系统(MEMS)麦克风之类的一个或多个麦克风812可包含在图8的系统中。
扬声器802可被接收在它们相应的面板801中的相应的孔洞中,以把扬声器802支承在支架804上。扬声器可用环氧树脂粘合到支架上,或者以其他方式黏合到支架上。预想其他安装手段,包括利用诸如螺丝之类的紧固件把扬声器附着到支架上,或者把扬声器磁耦合到支架上等。来自图3中所示的万向节实施例的包括成像器311、处理器312和存储器314的相关组件可被支承在支架804之上或之内。从而,除了下面参考图 9和图10的启动带有最接近匹配需求的轴线的声轴808的扬声器802来播放需求的音频,而不是移动万向节以使声轴与控制信号中的需求的方向对准之外,图4-6的逻辑可以通过图8中的组件进行。注意,当存在需求的音频的多个通道时,各个通道可在扬声器之中的相应的一个扬声器上,与另一个扬声器上的另一个通道同时播放。这样,可以同时播放多种音频音效,每个音效通道是在与播放另外的(一个或多个)音效通道的方向不同的方向上播放的。
在图8的实施例中,支架804不需要在支柱806上可移动。相反,实质上建立需求的轴线的上述控制信号可指示选择激活或致动哪个扬声器802以沿着其相应的声轴808发出声音。即,选择带有最接近匹配需求的声轴的声轴808的扬声器802,以输出需求的音效。每次只需要启动一个且仅一个扬声器802,不过当例如同时生成需求的音效通道的多个需求的声轴时,如果需要,那么每次可以启动多于一个扬声器802。
要理解的是来自图1-7的描述的所有其他相关原理适用于图8的备选实施例。
更具体地并且现在转向图9和图10,在方框900处接收音效通道,以指定在音效通道中携带并在方框902处接收的音效的位置(方位角,以及仰角(如果需要的话))。该通道通常包含在游戏软件(或者音视频电影等)中。当关于音效的控制信号来自于计算机游戏软件时,在方框904处可从RC 309接收变更游戏期间由音效表示的对象的运动(位置、定向)的用户输入。在方框906处,游戏软件生成并输出定义所述音效随着时间在该环境内的位置(运动)的向量(x-y-z)。在方框908处,该向量被发送给(一个或多个)扬声器球处理器,以使组件的(一个或多个)超声波扬声器重放音效通道音频,同时进行播放的扬声器是发出在方框906处由(一个或多个)向量需求的声音的扬声器。
图10例示扬声器球组件如何处理控制信号。在方框1000处,接收音频通道及(一个或多个)指向向量。转到方框1002,选择沿满足需求的向量的方向发出声音的(一个或多个)扬声器。在方框1004处,在选择的扬声器上播放需求的音频。
除了在方框604处响应于预定人物被成像,选择沿着满足需求的向量的轴线播放音频的扬声器,这样,其声轴指向识别出的人物的扬声器之外,图8的扬声器组件也可采用上面描述的图6的逻辑。
图11例示用于利用例如图3和图8的MEMS麦克风313、812测绘其中可布置上述US扬声器组件任意之一的房间的逻辑。开始于方框1100,按第i个定向的方位角和仰角定向US扬声器中的至少一个US扬声器。记录该扬声器的定向。转到方框1102,控制该扬声器在时间“i”发出测绘声音或啁啾声。记录时间“i”。如果需要,那么在各个定向上的多个扬声器可在时间“i”在相应的不同的频率下发出相应的测试啁啾声,返回的反射的频率差用来相互区分扬声器啁啾声。不过,为了清楚起见,下面的公开集中于一个扬声器的信号的处理。
转到方框1104,诸如上述麦克风(例如,图3和图8的MEMS麦克风 312、812)之一之类的麦克风(所述麦克风实质上可以与发射扬声器位于一处或者它甚至可由US扬声器本身建立)接收表示测试啁啾声从所述测试啁啾声撞击的表面的反射的返回信号。假定所述表面是其中布置所述系统的房间的墙壁,不过如下进一步所述,逻辑可考虑到所述表面是除房间的墙壁外的某物(例如,是房间中的家具)的可能性。来自麦克风的信号被发送给上述处理器中的例如记录接收到返回或回声的时间的一个适当的处理器。确定反射检测的时间和啁啾声传输的时间“i”之间的差值Δt,并在方框1106处,利用例如以下算法把所述差值Δt转换成第 i个距离:
第i个距离=1/2Δt*c,其中c=声速。
在方框1108处,存储第i个距离,并使之与发射扬声器的定向(声轴的方位角和仰角)相关联。移动至判定菱形框1110,判定是否要进行任何进一步的测量。在示例中,进行100次测绘测量(即,“i”单调地从1 增大到100)。可以使用更多或更少的测量。如果要进行更多的测量,那么对于下一个“i”,处理移动到方框1112,其中按不同的仰角和/或方位角定向测试发射扬声器的声轴,并且随后处理循环到方框1100。
当已经进行了所有的测量时,处理退出判定菱形框1110,到方框1114 以构造房间的地图。为此,墙壁被假定为位于沿着相应的第i个定向与发射扬声器和/或麦克风(所述麦克风可与扬声器位于一处)的位置相距相应的距离“i”处。假定墙壁构成规则的围墙,以致基于诸如在两个较长且相等的距离之间记录的较短距离之类的任何不连续点不是墙壁、而是由诸如居间的家具之类的人造物品或假返回引起的假设,可从地图中除去这些不连续点。
一旦已知房间尺寸,如上所述定向US扬声器的处理器就根据控制信号知道模拟音效来自和/或将被输送到的位置,并通过三角测量法确定使 US扬声器对准的反射位置,以使得在房间中的预定位置处接收到来自所述反射位置的反射的声音。按照这种方式,可不把US扬声器直接对准预定玩家,而是可改为对准反射点,以向预定玩家赋予声音来自于反射点而不是US扬声器的方向的感觉。
以上方法可被实现为由包括适当配置的专用集成电路(ASIC)或现场可编程门阵列(FPGA)模块的处理器执行的软件指令或者本领域技术人员会意识到的任何其他便利方式。当被采用时,软件指令可被包含在诸如 CD ROM或者闪存驱动器或者作为非瞬时信号的计算机存储器的上述非限制性示例任意之一之类的设备中。替代地,软件代码指令可以诸如无线电信号或光信号之类的瞬时布置具体体现,或者可经由通过因特网的下载具体体现。
应意识到尽管已经参考一些示例实施例描述了本发明的原理,不过这些示例实施例不是限制性的,并且可以使用各种备选方案来实现本文中要求保护的主题。
Claims (18)
1.一种用于产生音频的系统,包括:
至少一个超声波扬声器,配置成沿着相应的声轴发出声音;
至少一个麦克风;以及
至少一个计算机存储器,所述计算机存储器不是瞬时信号并且包含指令,所述指令可由至少一个处理器执行,以便:
利用所述至少一个超声波扬声器和所述至少一个麦克风,生成房间的地图;
接收控制信号;以及
响应于所述控制信号,至少部分地利用所述房间的地图来致动扬声器,
其中所述控制信号指示包括仰角分量和方位角分量的声束的需求的声轴,以将所述声束对准根据所述房间的地图确定的反射面,从而经由所述反射面将所述声束指向用户的位置。
2.按照权利要求1所述的系统,包括处理器。
3.按照权利要求1所述的系统,其中,所述控制信号是从计算机游戏控制台接收的,所述计算机游戏控制台输出用于在非超声波扬声器上播放的主音频通道。
4.按照权利要求1所述的系统,其中,所述指令可执行以响应于所述控制信号,利用所述地图把声音指向反射位置。
5.按照权利要求1所述的系统,其中,所述控制信号表示接收的音频通道中的至少一个音效数据。
6.按照权利要求5所述的系统,其中,至少部分地根据向计算机游戏输入设备的输入,建立所述音效数据。
7.一种用于产生音频的方法,包括:
按第i个定向的方位角和仰角,定向至少一个超声波扬声器;
使所述超声波扬声器在时间“i”发出测绘声音;
利用至少一个麦克风检测测绘声音的返回信号;
确定返回信号检测时间和时间“i”之间的时间差Δt;
利用下式,把时间差Δt转换成第i个距离:
第i个距离=1/2Δt*c,其中c=声速;
把表面的位置建立为与和第i个定向相关联的第i个距离相等的距离;以及
至少部分地基于所述表面的位置,并响应于用于需求的音效的控制信号,建立至少一个超声波扬声器的定向,在所述定向处所述至少一个超声波扬声器将发出需求的音频,
其中建立至少一个超声波扬声器的定向包括响应于指示包括仰角分量和方位角分量的声束的需求的声轴的所述控制信号建立所述至少一个超声波扬声器的定向,以将所述声束对准根据所述测绘确定的所述表面的位置,从而经由从所述表面的反射将所述声束指向用户的位置。
8.按照权利要求7所述的方法,包括利用多个超声波扬声器,在彼此不同的相应的频率下发出相应的测绘声音。
9.按照权利要求7所述的方法,其中,所述麦克风是微机电系统MEMS麦克风。
10.按照权利要求7所述的方法,其中,所述麦克风实质上与超声波扬声器位于一处。
11.按照权利要求7所述的方法,包括沿着相应的扬声器定向i=1~N,在时间i=1~N发出“N”个测绘声音。
12.按照权利要求11所述的方法,包括利用“N”个测绘声音的反射的检测,建立房间的电子地图。
13.按照权利要求12所述的方法,包括从地图上的包含物中消除“N”个测绘声音的反射检测中的构成地图中的不连续点的任意反射检测。
14.一种用于产生音频的设备,包括:
至少一个计算机存储器,所述计算机存储器不是瞬时信号并且包含指令,所述指令可由至少一个处理器执行,以便:
利用至少一个超声波扬声器和至少一个麦克风,至少部分地通过以下操作来生成房间的地图:
按第i个定向的方位角和仰角,定向所述至少一个超声波扬声器;
使所述超声波扬声器在传输时间发出测绘声音;
在返回信号时间处,利用所述至少一个麦克风检测测绘声音的返回信号;
利用返回信号时间和传输时间,确定第i个距离;以及
把房间的表面的位置建立为与和第i个定向相关联的第i个距离相等的距离,
接收控制信号;以及
响应于所述控制信号,至少部分地利用所述房间的地图来致动所述至少一个超声波扬声器中的扬声器,
其中所述控制信号指示包括仰角分量和方位角分量的声束的需求的声轴,以将所述声束对准根据所述房间的地图确定的反射面,从而经由所述反射面将所述声束指向用户的位置。
15.按照权利要求14所述的设备,其中,所述指令是可执行的,以便:
使多个超声波扬声器在彼此不同的相应的频率下发出相应的测绘声音。
16.按照权利要求14所述的设备,其中,所述麦克风是微机电系统MEMS麦克风。
17.按照权利要求14所述的设备,其中,所述指令是可执行的,以便:
使至少一个超声波扬声器沿着相应的扬声器定向i=1~N,在相应的时间i=1~N发出“N”个测绘声音。
18.按照权利要求17所述的设备,其中,所述指令是可执行的,以便:
利用“N”个测绘声音的反射检测,建立房间的地图。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/072,098 US9693169B1 (en) | 2016-03-16 | 2016-03-16 | Ultrasonic speaker assembly with ultrasonic room mapping |
US15/072,098 | 2016-03-16 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107205202A CN107205202A (zh) | 2017-09-26 |
CN107205202B true CN107205202B (zh) | 2020-03-20 |
Family
ID=58016565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710081429.1A Active CN107205202B (zh) | 2016-03-16 | 2017-02-15 | 用于产生音频的系统、方法和设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9693169B1 (zh) |
EP (1) | EP3220657A1 (zh) |
KR (1) | KR101813443B1 (zh) |
CN (1) | CN107205202B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9866986B2 (en) | 2014-01-24 | 2018-01-09 | Sony Corporation | Audio speaker system with virtual music performance |
US9924291B2 (en) | 2016-02-16 | 2018-03-20 | Sony Corporation | Distributed wireless speaker system |
US9826330B2 (en) | 2016-03-14 | 2017-11-21 | Sony Corporation | Gimbal-mounted linear ultrasonic speaker assembly |
US9794724B1 (en) * | 2016-07-20 | 2017-10-17 | Sony Corporation | Ultrasonic speaker assembly using variable carrier frequency to establish third dimension sound locating |
CN107659870B (zh) * | 2017-11-22 | 2023-08-22 | 青岛理工大学 | 数字式水声换能器单元、阵列、装置及控制方法 |
US10921446B2 (en) | 2018-04-06 | 2021-02-16 | Microsoft Technology Licensing, Llc | Collaborative mapping of a space using ultrasonic sonar |
US10616684B2 (en) | 2018-05-15 | 2020-04-07 | Sony Corporation | Environmental sensing for a unique portable speaker listening experience |
US10292000B1 (en) | 2018-07-02 | 2019-05-14 | Sony Corporation | Frequency sweep for a unique portable speaker listening experience |
EP3711284A4 (en) * | 2018-08-17 | 2020-12-16 | SZ DJI Technology Co., Ltd. | PHOTOGRAPHIC CONTROL PROCEDURE AND CONTROL |
US10567871B1 (en) | 2018-09-06 | 2020-02-18 | Sony Corporation | Automatically movable speaker to track listener or optimize sound performance |
US10277981B1 (en) * | 2018-10-02 | 2019-04-30 | Sonos, Inc. | Systems and methods of user localization |
US11599329B2 (en) | 2018-10-30 | 2023-03-07 | Sony Corporation | Capacitive environmental sensing for a unique portable speaker listening experience |
US11443737B2 (en) | 2020-01-14 | 2022-09-13 | Sony Corporation | Audio video translation into multiple languages for respective listeners |
CN111586526A (zh) * | 2020-05-26 | 2020-08-25 | 维沃移动通信有限公司 | 音频输出方法、音频输出装置及电子设备 |
CN111586553B (zh) | 2020-05-27 | 2022-06-03 | 京东方科技集团股份有限公司 | 显示装置及其工作方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1507701A (zh) * | 2001-05-07 | 2004-06-23 | 参量虚拟扬声器和环绕声系统 | |
WO2014087277A1 (en) * | 2012-12-06 | 2014-06-12 | Koninklijke Philips N.V. | Generating drive signals for audio transducers |
Family Cites Families (178)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4332979A (en) | 1978-12-19 | 1982-06-01 | Fischer Mark L | Electronic environmental acoustic simulator |
US7085387B1 (en) | 1996-11-20 | 2006-08-01 | Metcalf Randall B | Sound system and method for capturing and reproducing sounds originating from a plurality of sound sources |
US6008777A (en) | 1997-03-07 | 1999-12-28 | Intel Corporation | Wireless connectivity between a personal computer and a television |
US20020036617A1 (en) | 1998-08-21 | 2002-03-28 | Timothy R. Pryor | Novel man machine interfaces and applications |
US6128318A (en) | 1998-01-23 | 2000-10-03 | Philips Electronics North America Corporation | Method for synchronizing a cycle master node to a cycle slave node using synchronization information from an external network or sub-network which is supplied to the cycle slave node |
IL127790A (en) | 1998-04-21 | 2003-02-12 | Ibm | System and method for selecting, accessing and viewing portions of an information stream(s) using a television companion device |
TW463503B (en) | 1998-08-26 | 2001-11-11 | United Video Properties Inc | Television chat system |
US8266657B2 (en) | 2001-03-15 | 2012-09-11 | Sling Media Inc. | Method for effectively implementing a multi-room television system |
US6239348B1 (en) | 1999-09-10 | 2001-05-29 | Randall B. Metcalf | Sound system and method for creating a sound event based on a modeled sound field |
US6710770B2 (en) | 2000-02-11 | 2004-03-23 | Canesta, Inc. | Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device |
US20010037499A1 (en) | 2000-03-23 | 2001-11-01 | Turock David L. | Method and system for recording auxiliary audio or video signals, synchronizing the auxiliary signal with a television singnal, and transmitting the auxiliary signal over a telecommunications network |
US6329908B1 (en) | 2000-06-23 | 2001-12-11 | Armstrong World Industries, Inc. | Addressable speaker system |
US6611678B1 (en) | 2000-09-29 | 2003-08-26 | Ibm Corporation | Device and method for trainable radio scanning |
US20020054206A1 (en) | 2000-11-06 | 2002-05-09 | Allen Paul G. | Systems and devices for audio and video capture and communication during television broadcasts |
US7191023B2 (en) | 2001-01-08 | 2007-03-13 | Cybermusicmix.Com, Inc. | Method and apparatus for sound and music mixing on a network |
US6738318B1 (en) | 2001-03-05 | 2004-05-18 | Scott C. Harris | Audio reproduction system which adaptively assigns different sound parts to different reproduction parts |
US7095455B2 (en) | 2001-03-21 | 2006-08-22 | Harman International Industries, Inc. | Method for automatically adjusting the sound and visual parameters of a home theatre system |
US7483958B1 (en) | 2001-03-26 | 2009-01-27 | Microsoft Corporation | Methods and apparatuses for sharing media content, libraries and playlists |
US7007106B1 (en) | 2001-05-22 | 2006-02-28 | Rockwell Automation Technologies, Inc. | Protocol and method for multi-chassis configurable time synchronization |
BR0212099A (pt) | 2001-08-22 | 2006-05-23 | Nielsen Media Res Inc | sistema sensor de proximidade de televisão |
WO2003019125A1 (en) | 2001-08-31 | 2003-03-06 | Nanyang Techonological University | Steering of directional sound beams |
US7503059B1 (en) | 2001-12-28 | 2009-03-10 | Rothschild Trust Holdings, Llc | Method of enhancing media content and a media enhancement system |
US7496065B2 (en) | 2001-11-29 | 2009-02-24 | Telcordia Technologies, Inc. | Efficient piconet formation and maintenance in a Bluetooth wireless network |
US6940558B2 (en) | 2001-12-06 | 2005-09-06 | Koninklijke Philips Electronics N.V. | Streaming content associated with a portion of a TV screen to a companion device |
US6761470B2 (en) | 2002-02-08 | 2004-07-13 | Lowel-Light Manufacturing, Inc. | Controller panel and system for light and serially networked lighting system |
US7742609B2 (en) | 2002-04-08 | 2010-06-22 | Gibson Guitar Corp. | Live performance audio mixing system with simplified user interface |
US20030210337A1 (en) | 2002-05-09 | 2003-11-13 | Hall Wallace E. | Wireless digital still image transmitter and control between computer or camera and television |
US20040068752A1 (en) | 2002-10-02 | 2004-04-08 | Parker Leslie T. | Systems and methods for providing television signals to multiple televisions located at a customer premises |
US20040208325A1 (en) | 2003-04-15 | 2004-10-21 | Cheung Kwok Wai | Method and apparatus for wireless audio delivery |
US20040264704A1 (en) | 2003-06-13 | 2004-12-30 | Camille Huin | Graphical user interface for determining speaker spatialization parameters |
JP4127156B2 (ja) | 2003-08-08 | 2008-07-30 | ヤマハ株式会社 | オーディオ再生装置、ラインアレイスピーカユニットおよびオーディオ再生方法 |
JP2005080227A (ja) | 2003-09-03 | 2005-03-24 | Seiko Epson Corp | 音声情報提供方法及び指向型音声情報提供装置 |
US7492913B2 (en) | 2003-12-16 | 2009-02-17 | Intel Corporation | Location aware directed audio |
US7929708B2 (en) | 2004-01-12 | 2011-04-19 | Dts, Inc. | Audio spatial environment engine |
US20050177256A1 (en) | 2004-02-06 | 2005-08-11 | Peter Shintani | Addressable loudspeaker |
US20070183618A1 (en) | 2004-02-10 | 2007-08-09 | Masamitsu Ishii | Moving object equipped with ultra-directional speaker |
US7483538B2 (en) | 2004-03-02 | 2009-01-27 | Ksc Industries, Inc. | Wireless and wired speaker hub for a home theater system |
US7760891B2 (en) | 2004-03-16 | 2010-07-20 | Xerox Corporation | Focused hypersonic communication |
US7792311B1 (en) | 2004-05-15 | 2010-09-07 | Sonos, Inc., | Method and apparatus for automatically enabling subwoofer channel audio based on detection of subwoofer device |
US7853022B2 (en) | 2004-10-28 | 2010-12-14 | Thompson Jeffrey K | Audio spatial environment engine |
US20060106620A1 (en) | 2004-10-28 | 2006-05-18 | Thompson Jeffrey K | Audio spatial environment down-mixer |
CN102117617B (zh) | 2004-10-28 | 2013-01-30 | Dts(英属维尔京群岛)有限公司 | 音频空间环境引擎 |
US8369264B2 (en) | 2005-10-28 | 2013-02-05 | Skyhook Wireless, Inc. | Method and system for selecting and providing a relevant subset of Wi-Fi location information to a mobile client device so the client device may estimate its position with efficient utilization of resources |
WO2009002292A1 (en) | 2005-01-25 | 2008-12-31 | Lau Ronnie C | Multiple channel system |
US7703114B2 (en) | 2005-02-25 | 2010-04-20 | Microsoft Corporation | Television system targeted advertising |
US20060285697A1 (en) | 2005-06-17 | 2006-12-21 | Comfozone, Inc. | Open-air noise cancellation for diffraction control applications |
US7539889B2 (en) | 2005-12-30 | 2009-05-26 | Avega Systems Pty Ltd | Media data synchronization in a wireless network |
US8139029B2 (en) * | 2006-03-08 | 2012-03-20 | Navisense | Method and device for three-dimensional sensing |
US8358976B2 (en) | 2006-03-24 | 2013-01-22 | The Invention Science Fund I, Llc | Wireless device with an aggregate user interface for controlling other devices |
US8107639B2 (en) | 2006-06-29 | 2012-01-31 | 777388 Ontario Limited | System and method for a sound masking system for networked workstations or offices |
US8239559B2 (en) | 2006-07-15 | 2012-08-07 | Blackfire Research Corp. | Provisioning and streaming media to wireless speakers from fixed and mobile media sources and clients |
US9319741B2 (en) | 2006-09-07 | 2016-04-19 | Rateze Remote Mgmt Llc | Finding devices in an entertainment system |
WO2008040096A1 (en) | 2006-10-06 | 2008-04-10 | Ippv Pty Ltd | Distributed bass |
WO2008046144A1 (en) | 2006-10-17 | 2008-04-24 | Avega Systems Pty Ltd | Media distribution in a wireless network |
US8296808B2 (en) | 2006-10-23 | 2012-10-23 | Sony Corporation | Metadata from image recognition |
US8077263B2 (en) | 2006-10-23 | 2011-12-13 | Sony Corporation | Decoding multiple remote control code sets |
US7689613B2 (en) | 2006-10-23 | 2010-03-30 | Sony Corporation | OCR input to search engine |
US20080098433A1 (en) | 2006-10-23 | 2008-04-24 | Hardacker Robert L | User managed internet links from TV |
US8019088B2 (en) | 2007-01-23 | 2011-09-13 | Audyssey Laboratories, Inc. | Low-frequency range extension and protection system for loudspeakers |
KR101316750B1 (ko) | 2007-01-23 | 2013-10-08 | 삼성전자주식회사 | 수신된 위치 정보에 따라 오디오 파일을 재생하는 장치 및그 방법 |
US7822835B2 (en) | 2007-02-01 | 2010-10-26 | Microsoft Corporation | Logically centralized physically distributed IP network-connected devices configuration |
US8438589B2 (en) | 2007-03-28 | 2013-05-07 | Sony Corporation | Obtaining metadata program information during channel changes |
FR2915041A1 (fr) | 2007-04-13 | 2008-10-17 | Canon Kk | Procede d'attribution d'une pluralite de canaux audio a une pluralite de haut-parleurs, produit programme d'ordinateur, moyen de stockage et noeud gestionnaire correspondants. |
US20080259222A1 (en) | 2007-04-19 | 2008-10-23 | Sony Corporation | Providing Information Related to Video Content |
US20080279307A1 (en) | 2007-05-07 | 2008-11-13 | Decawave Limited | Very High Data Rate Communications System |
US20080279453A1 (en) | 2007-05-08 | 2008-11-13 | Candelore Brant L | OCR enabled hand-held device |
US20080304677A1 (en) | 2007-06-08 | 2008-12-11 | Sonitus Medical Inc. | System and method for noise cancellation with motion tracking capability |
US8286214B2 (en) | 2007-06-13 | 2012-10-09 | Tp Lab Inc. | Method and system to combine broadcast television and internet television |
CN101111096A (zh) * | 2007-07-12 | 2008-01-23 | 电子科技大学 | 组合式声频定向超声波扬声器系统 |
US20090037951A1 (en) | 2007-07-31 | 2009-02-05 | Sony Corporation | Identification of Streaming Content Playback Location Based on Tracking RC Commands |
US9996612B2 (en) | 2007-08-08 | 2018-06-12 | Sony Corporation | System and method for audio identification and metadata retrieval |
WO2009044357A2 (en) | 2007-10-05 | 2009-04-09 | Bang & Olufsen A/S | Low frequency management for multichannel sound reproduction systems |
US8509463B2 (en) | 2007-11-09 | 2013-08-13 | Creative Technology Ltd | Multi-mode sound reproduction system and a corresponding method thereof |
US20090150569A1 (en) | 2007-12-07 | 2009-06-11 | Avi Kumar | Synchronization system and method for mobile devices |
US8457328B2 (en) | 2008-04-22 | 2013-06-04 | Nokia Corporation | Method, apparatus and computer program product for utilizing spatial information for audio signal enhancement in a distributed network environment |
US20090298420A1 (en) | 2008-05-27 | 2009-12-03 | Sony Ericsson Mobile Communications Ab | Apparatus and methods for time synchronization of wireless audio data streams |
US9106950B2 (en) | 2008-06-13 | 2015-08-11 | Centurylink Intellectual Property Llc | System and method for distribution of a television signal |
US8199941B2 (en) | 2008-06-23 | 2012-06-12 | Summit Semiconductor Llc | Method of identifying speakers in a home theater system |
US8320674B2 (en) | 2008-09-03 | 2012-11-27 | Sony Corporation | Text localization for image and video OCR |
US8417481B2 (en) | 2008-09-11 | 2013-04-09 | Diane J. Cook | Systems and methods for adaptive smart environment automation |
US8243949B2 (en) | 2009-04-14 | 2012-08-14 | Plantronics, Inc. | Network addressible loudspeaker and audio play |
US8077873B2 (en) | 2009-05-14 | 2011-12-13 | Harman International Industries, Incorporated | System for active noise control with adaptive speaker selection |
US8131386B2 (en) | 2009-06-15 | 2012-03-06 | Elbex Video Ltd. | Method and apparatus for simplified interconnection and control of audio components of an home automation system |
JP5430242B2 (ja) | 2009-06-17 | 2014-02-26 | シャープ株式会社 | スピーカ位置検出システム及びスピーカ位置検出方法 |
US20110091055A1 (en) | 2009-10-19 | 2011-04-21 | Broadcom Corporation | Loudspeaker localization techniques |
US8553898B2 (en) | 2009-11-30 | 2013-10-08 | Emmet Raftery | Method and system for reducing acoustical reverberations in an at least partially enclosed space |
US8411208B2 (en) | 2009-12-29 | 2013-04-02 | VIZIO Inc. | Attached device control on television event |
WO2011090437A1 (en) | 2010-01-19 | 2011-07-28 | Nanyang Technological University | A system and method for processing an input signal to produce 3d audio effects |
GB2477155B (en) | 2010-01-25 | 2013-12-04 | Iml Ltd | Method and apparatus for supplementing low frequency sound in a distributed loudspeaker arrangement |
JP4902000B2 (ja) | 2010-02-26 | 2012-03-21 | シャープ株式会社 | コンテンツ再生装置、テレビジョン受像機、コンテンツ再生方法、コンテンツ再生プログラム、および記録媒体 |
US8437432B2 (en) | 2010-03-22 | 2013-05-07 | DecaWave, Ltd. | Receiver for use in an ultra-wideband communication system |
US8436758B2 (en) | 2010-03-22 | 2013-05-07 | Decawave Ltd. | Adaptive ternary A/D converter for use in an ultra-wideband communication system |
US9054790B2 (en) | 2010-03-22 | 2015-06-09 | Decawave Ltd. | Receiver for use in an ultra-wideband communication system |
US8760334B2 (en) | 2010-03-22 | 2014-06-24 | Decawave Ltd. | Receiver for use in an ultra-wideband communication system |
US8677224B2 (en) | 2010-04-21 | 2014-03-18 | Decawave Ltd. | Convolutional code for use in a communication system |
US9998580B2 (en) | 2010-04-26 | 2018-06-12 | Hu-Do Ltd. | Computing device operable to work in conjunction with a companion electronic device |
EP2564601A2 (en) | 2010-04-26 | 2013-03-06 | Cambridge Mechatronics Limited | Loudspeakers with position tracking of a listener |
US9282418B2 (en) | 2010-05-03 | 2016-03-08 | Kit S. Tam | Cognitive loudspeaker system |
WO2011145030A1 (en) * | 2010-05-20 | 2011-11-24 | Koninklijke Philips Electronics N.V. | Distance estimation using sound signals |
US8763060B2 (en) | 2010-07-11 | 2014-06-24 | Apple Inc. | System and method for delivering companion content |
US8768252B2 (en) | 2010-09-02 | 2014-07-01 | Apple Inc. | Un-tethered wireless audio system |
US8837529B2 (en) | 2010-09-22 | 2014-09-16 | Crestron Electronics Inc. | Digital audio distribution |
US8738323B2 (en) | 2010-09-30 | 2014-05-27 | Fitbit, Inc. | Methods and systems for metrics analysis and interactive rendering, including events having combined activity and location information |
US20120087503A1 (en) | 2010-10-07 | 2012-04-12 | Passif Semiconductor Corp. | Multi-channel audio over standard wireless protocol |
US20120120874A1 (en) | 2010-11-15 | 2012-05-17 | Decawave Limited | Wireless access point clock synchronization system |
US20120113224A1 (en) | 2010-11-09 | 2012-05-10 | Andy Nguyen | Determining Loudspeaker Layout Using Visual Markers |
US20130051572A1 (en) | 2010-12-08 | 2013-02-28 | Creative Technology Ltd | Method for optimizing reproduction of audio signals from an apparatus for audio reproduction |
US20120148075A1 (en) | 2010-12-08 | 2012-06-14 | Creative Technology Ltd | Method for optimizing reproduction of audio signals from an apparatus for audio reproduction |
US8898310B2 (en) | 2010-12-15 | 2014-11-25 | Microsoft Corporation | Enhanced content consumption |
US8793730B2 (en) | 2010-12-30 | 2014-07-29 | Yahoo! Inc. | Entertainment companion content application for interacting with television content |
US9148105B2 (en) | 2011-01-11 | 2015-09-29 | Lenovo (Singapore) Pte. Ltd. | Smart un-muting based on system event with smooth volume control |
US8989767B2 (en) | 2011-02-28 | 2015-03-24 | Blackberry Limited | Wireless communication system with NFC-controlled access and related methods |
US20120254929A1 (en) | 2011-04-04 | 2012-10-04 | Google Inc. | Content Extraction for Television Display |
US9179118B2 (en) | 2011-05-12 | 2015-11-03 | Intel Corporation | Techniques for synchronization of audio and video |
US8839303B2 (en) | 2011-05-13 | 2014-09-16 | Google Inc. | System and method for enhancing user search results by determining a television program currently being displayed in proximity to an electronic device |
WO2012164444A1 (en) | 2011-06-01 | 2012-12-06 | Koninklijke Philips Electronics N.V. | An audio system and method of operating therefor |
US9042556B2 (en) | 2011-07-19 | 2015-05-26 | Sonos, Inc | Shaping sound responsive to speaker orientation |
US20130042281A1 (en) | 2011-08-09 | 2013-02-14 | Greenwave Scientific, Inc. | Distribution of Over-the-Air Television Content to Remote Display Devices |
US8649773B2 (en) | 2011-08-23 | 2014-02-11 | Cisco Technology, Inc. | System and apparatus to support clipped video tone on televisions, personal computers, and handheld devices |
US20130055323A1 (en) | 2011-08-31 | 2013-02-28 | General Instrument Corporation | Method and system for connecting a companion device to a primary viewing device |
JP5163796B1 (ja) | 2011-09-22 | 2013-03-13 | パナソニック株式会社 | 音響再生装置 |
EP2605239A2 (en) | 2011-12-16 | 2013-06-19 | Sony Ericsson Mobile Communications AB | Method and arrangement for noise reduction |
US8811630B2 (en) | 2011-12-21 | 2014-08-19 | Sonos, Inc. | Systems, methods, and apparatus to filter audio |
CN103179475A (zh) | 2011-12-22 | 2013-06-26 | 深圳市三诺电子有限公司 | 无线音箱及其无线音箱系统 |
US8631327B2 (en) | 2012-01-25 | 2014-01-14 | Sony Corporation | Balancing loudspeakers for multiple display users |
US8776105B2 (en) | 2012-02-07 | 2014-07-08 | Tuner Broadcasting System, Inc. | Method and system for automatic content recognition protocols |
US10051406B2 (en) | 2012-02-15 | 2018-08-14 | Maxlinear, Inc. | Method and system for broadband near-field communication (BNC) utilizing full spectrum capture (FSC) supporting concurrent charging and communication |
US8781142B2 (en) | 2012-02-24 | 2014-07-15 | Sverrir Olafsson | Selective acoustic enhancement of ambient sound |
US9143402B2 (en) | 2012-02-24 | 2015-09-22 | Qualcomm Incorporated | Sensor based configuration and control of network devices |
US9578366B2 (en) | 2012-05-03 | 2017-02-21 | Google Technology Holdings LLC | Companion device services based on the generation and display of visual codes on a display device |
US9524098B2 (en) | 2012-05-08 | 2016-12-20 | Sonos, Inc. | Methods and systems for subwoofer calibration |
US8818276B2 (en) | 2012-05-16 | 2014-08-26 | Nokia Corporation | Method, apparatus, and computer program product for controlling network access to guest apparatus based on presence of hosting apparatus |
US9055337B2 (en) | 2012-05-17 | 2015-06-09 | Cable Television Laboratories, Inc. | Personalizing services using presence detection |
US10152723B2 (en) | 2012-05-23 | 2018-12-11 | Google Llc | Methods and systems for identifying new computers and providing matching services |
WO2013177663A1 (en) | 2012-06-01 | 2013-12-05 | Research In Motion Limited | Methods and devices for providing companion services to video |
US9170667B2 (en) | 2012-06-01 | 2015-10-27 | Microsoft Technology Licensing, Llc | Contextual user interface |
US9485556B1 (en) | 2012-06-27 | 2016-11-01 | Amazon Technologies, Inc. | Speaker array for sound imaging |
US9106192B2 (en) | 2012-06-28 | 2015-08-11 | Sonos, Inc. | System and method for device playback calibration |
US9031244B2 (en) | 2012-06-29 | 2015-05-12 | Sonos, Inc. | Smart audio settings |
US9195383B2 (en) | 2012-06-29 | 2015-11-24 | Spotify Ab | Systems and methods for multi-path control signals for media presentation devices |
US10569171B2 (en) | 2012-07-02 | 2020-02-25 | Disney Enterprises, Inc. | TV-to-game sync |
KR101908420B1 (ko) | 2012-07-06 | 2018-12-19 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어방법 |
US9854328B2 (en) | 2012-07-06 | 2017-12-26 | Arris Enterprises, Inc. | Augmentation of multimedia consumption |
US9256722B2 (en) | 2012-07-20 | 2016-02-09 | Google Inc. | Systems and methods of using a temporary private key between two devices |
US9622011B2 (en) | 2012-08-31 | 2017-04-11 | Dolby Laboratories Licensing Corporation | Virtual rendering of object-based audio |
EP2891335B1 (en) | 2012-08-31 | 2019-11-27 | Dolby Laboratories Licensing Corporation | Reflected and direct rendering of upmixed content to individually addressable drivers |
JP5985063B2 (ja) | 2012-08-31 | 2016-09-06 | ドルビー ラボラトリーズ ライセンシング コーポレイション | レンダラーと個々に指定可能なドライバのアレイとの間の通信のための双方向相互接続 |
ES2606678T3 (es) | 2012-08-31 | 2017-03-27 | Dolby Laboratories Licensing Corporation | Presentación de sonido reflejado para audio con base de objeto |
US9031262B2 (en) | 2012-09-04 | 2015-05-12 | Avid Technology, Inc. | Distributed, self-scaling, network-based architecture for sound reinforcement, mixing, and monitoring |
US9462384B2 (en) | 2012-09-05 | 2016-10-04 | Harman International Industries, Inc. | Nomadic device for controlling one or more portable speakers |
US9132342B2 (en) * | 2012-10-31 | 2015-09-15 | Sulon Technologies Inc. | Dynamic environment and location based augmented reality (AR) systems |
US9602916B2 (en) * | 2012-11-02 | 2017-03-21 | Sony Corporation | Signal processing device, signal processing method, measurement method, and measurement device |
IL223086A (en) | 2012-11-18 | 2017-09-28 | Noveto Systems Ltd | System and method for creating sonic fields |
WO2014103118A1 (ja) | 2012-12-28 | 2014-07-03 | ソニー株式会社 | 音響再生装置 |
KR20140099122A (ko) | 2013-02-01 | 2014-08-11 | 삼성전자주식회사 | 전자 장치, 위치 검출 장치, 스피커 자동 설정 시스템 및 방법 |
CN103152925A (zh) | 2013-02-01 | 2013-06-12 | 浙江生辉照明有限公司 | 一种多功能led装置及多功能无线会议系统 |
JP5488732B1 (ja) | 2013-03-05 | 2014-05-14 | パナソニック株式会社 | 音響再生装置 |
US9349282B2 (en) | 2013-03-15 | 2016-05-24 | Aliphcom | Proximity sensing device control architecture and data communication protocol |
US9307508B2 (en) | 2013-04-29 | 2016-04-05 | Google Technology Holdings LLC | Systems and methods for syncronizing multiple electronic devices |
US20140328485A1 (en) | 2013-05-06 | 2014-11-06 | Nvidia Corporation | Systems and methods for stereoisation and enhancement of live event audio |
US9877135B2 (en) | 2013-06-07 | 2018-01-23 | Nokia Technologies Oy | Method and apparatus for location based loudspeaker system configuration |
US20150078595A1 (en) | 2013-09-13 | 2015-03-19 | Sony Corporation | Audio accessibility |
US9368098B2 (en) | 2013-10-11 | 2016-06-14 | Turtle Beach Corporation | Parametric emitter system with noise cancelation |
US20150128194A1 (en) | 2013-11-05 | 2015-05-07 | Huawei Device Co., Ltd. | Method and mobile terminal for switching playback device |
US20150195649A1 (en) | 2013-12-08 | 2015-07-09 | Flyover Innovations, Llc | Method for proximity based audio device selection |
US20150201295A1 (en) | 2014-01-14 | 2015-07-16 | Chiu Yu Lau | Speaker with Lighting Arrangement |
US9560449B2 (en) | 2014-01-17 | 2017-01-31 | Sony Corporation | Distributed wireless speaker system |
US9866986B2 (en) | 2014-01-24 | 2018-01-09 | Sony Corporation | Audio speaker system with virtual music performance |
US9402145B2 (en) * | 2014-01-24 | 2016-07-26 | Sony Corporation | Wireless speaker system with distributed low (bass) frequency |
GB2537553B (en) | 2014-01-28 | 2018-09-12 | Imagination Tech Ltd | Proximity detection |
US9232335B2 (en) * | 2014-03-06 | 2016-01-05 | Sony Corporation | Networked speaker system with follow me |
US20150358768A1 (en) | 2014-06-10 | 2015-12-10 | Aliphcom | Intelligent device connection for wireless media in an ad hoc acoustic network |
US9226090B1 (en) | 2014-06-23 | 2015-12-29 | Glen A. Norris | Sound localization for an electronic call |
US20150373449A1 (en) | 2014-06-24 | 2015-12-24 | Matthew D. Jackson | Illuminated audio cable |
US20150382129A1 (en) | 2014-06-30 | 2015-12-31 | Microsoft Corporation | Driving parametric speakers as a function of tracked user location |
US9736614B2 (en) | 2015-03-23 | 2017-08-15 | Bose Corporation | Augmenting existing acoustic profiles |
US9928024B2 (en) | 2015-05-28 | 2018-03-27 | Bose Corporation | Audio data buffering |
US9985676B2 (en) | 2015-06-05 | 2018-05-29 | Braven, Lc | Multi-channel mixing console |
-
2016
- 2016-03-16 US US15/072,098 patent/US9693169B1/en active Active
-
2017
- 2017-02-08 KR KR1020170017589A patent/KR101813443B1/ko active IP Right Grant
- 2017-02-08 EP EP17155244.1A patent/EP3220657A1/en active Pending
- 2017-02-15 CN CN201710081429.1A patent/CN107205202B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1507701A (zh) * | 2001-05-07 | 2004-06-23 | 参量虚拟扬声器和环绕声系统 | |
WO2014087277A1 (en) * | 2012-12-06 | 2014-06-12 | Koninklijke Philips N.V. | Generating drive signals for audio transducers |
Also Published As
Publication number | Publication date |
---|---|
KR101813443B1 (ko) | 2018-01-30 |
CN107205202A (zh) | 2017-09-26 |
US9693169B1 (en) | 2017-06-27 |
KR20170107888A (ko) | 2017-09-26 |
EP3220657A1 (en) | 2017-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107205202B (zh) | 用于产生音频的系统、方法和设备 | |
US9693168B1 (en) | Ultrasonic speaker assembly for audio spatial effect | |
US9924291B2 (en) | Distributed wireless speaker system | |
US9699579B2 (en) | Networked speaker system with follow me | |
US10075791B2 (en) | Networked speaker system with LED-based wireless communication and room mapping | |
US9854362B1 (en) | Networked speaker system with LED-based wireless communication and object detection | |
US20170164099A1 (en) | Gimbal-mounted ultrasonic speaker for audio spatial effect | |
US9826332B2 (en) | Centralized wireless speaker system | |
CN112334969B (zh) | 多点slam捕获 | |
US9984690B1 (en) | Microphone gain using a time of flight (ToF) laser range finding system | |
US10567871B1 (en) | Automatically movable speaker to track listener or optimize sound performance | |
US9826330B2 (en) | Gimbal-mounted linear ultrasonic speaker assembly | |
US9924286B1 (en) | Networked speaker system with LED-based wireless communication and personal identifier | |
WO2020005545A1 (en) | Material base rendering | |
US9794724B1 (en) | Ultrasonic speaker assembly using variable carrier frequency to establish third dimension sound locating | |
US10616684B2 (en) | Environmental sensing for a unique portable speaker listening experience | |
US11889288B2 (en) | Using entertainment system remote commander for audio system calibration | |
US20230236318A1 (en) | PERFORMANCE OF A TIME OF FLIGHT (ToF) LASER RANGE FINDING SYSTEM USING ACOUSTIC-BASED DIRECTION OF ARRIVAL (DoA) | |
US11599329B2 (en) | Capacitive environmental sensing for a unique portable speaker listening experience | |
US11277706B2 (en) | Angular sensing for optimizing speaker listening experience | |
US10698109B2 (en) | Using direction of arrival with unique audio signature for object location detection | |
US20190020808A1 (en) | Remotely controllable camera on head-mount for the blind |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |