CN109582273A - 音频输出方法、电子设备以及音频输出装置 - Google Patents

音频输出方法、电子设备以及音频输出装置 Download PDF

Info

Publication number
CN109582273A
CN109582273A CN201811422826.1A CN201811422826A CN109582273A CN 109582273 A CN109582273 A CN 109582273A CN 201811422826 A CN201811422826 A CN 201811422826A CN 109582273 A CN109582273 A CN 109582273A
Authority
CN
China
Prior art keywords
audio
user
information
frequency information
output parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811422826.1A
Other languages
English (en)
Inventor
龚江涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201811422826.1A priority Critical patent/CN109582273A/zh
Publication of CN109582273A publication Critical patent/CN109582273A/zh
Priority to US16/691,343 priority patent/US11202163B2/en
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • H04S7/304For headphones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/07Use of position data from wide-area or local-area positioning systems in hearing devices, e.g. program or information selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Stereophonic System (AREA)

Abstract

本公开提供了一种音频输出方法,包括:获取用户所处的环境中的至少一个对象的属性信息以及位置信息;根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息;基于所述位置信息确定所述至少一个对象与用户的相对位置关系;基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知所述至少一个对象的方位信息。

Description

音频输出方法、电子设备以及音频输出装置
技术领域
本公开涉及一种音频输出方法、一种电子设备以及一种音频输出装置。
背景技术
随着电子技术的快速发展,各种各样的电子设备越来越多地应用于生活和工作等诸多场景,其中,电子设备具有多种的功能,例如音频输出功能。然而,随着用户对电子设备音频输出的要求越来越高,现有的电子设备的音频输出功能不能够满足用户的需求。因此,亟需提供一种优化的音频输出功能,以此提升用户的使用体验。
发明内容
本公开的一个方面提供了一种音频输出方法,包括:获取用户所处的环境中的至少一个对象的属性信息以及位置信息,根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息,基于所述位置信息确定所述至少一个对象与用户的相对位置关系,基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知所述至少一个对象的方位信息。
可选地,上述方法还包括:从所述至少一个对象中确定特定对象,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整与所述特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于所述相对位置关系调整与所述至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
可选地,上述从所述至少一个对象中确定特定对象,包括:根据所述用户的选择操作从至少一个对象中选择所述特定对象,或者基于所述至少一个对象与所述用户的相对位置关系确定满足预设条件的对象作为所述特定对象。
可选地,上述方法还包括:获取所述用户的身体部位与所述至少一个对象的相对位置,在所述用户的身体部位与所述至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与所述至少一个对象相匹配的音频信息的输出参数。
可选地,上述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,所述标签信息包括所述至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于所述对象标识确定所述至少一个对象的属性信息,以及根据所述对象标识和电子地图数据确定所述至少一个对象的位置信息。
可选地,上述方法还包括:记录所述至少一个对象的音频信息,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
可选地,上述至少一个对象包括:真实对象和/或虚拟对象。
本公开的另一个方面提供了一种电子设备,包括:处理器,以及存储器,存储器用于存储可执行指令,其中,当所述指令被所述处理器执行时,使得所述处理器执行:获取用户所处的环境中的至少一个对象的属性信息以及位置信息,根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息,基于所述位置信息确定所述至少一个对象与用户的相对位置关系,基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知相应的对象的方位信息。
可选地,上述处理器还用于执行:从所述至少一个对象中确定特定对象,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整与所述特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于所述相对位置关系调整与所述至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
可选地,上述从所述至少一个对象中确定特定对象,包括:根据所述用户的选择操作从至少一个对象中选择所述特定对象,或者基于所述至少一个对象与所述用户的相对位置关系确定满足预设条件的对象作为所述特定对象。
可选地,上述处理器还用于执行:获取所述用户的身体部位与所述至少一个对象的相对位置,在所述用户的身体部位与所述至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与所述至少一个对象相匹配的音频信息的输出参数。
可选地,上述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,所述标签信息包括所述至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于所述对象标识确定所述至少一个对象的属性信息,以及根据所述对象标识和电子地图数据确定所述至少一个对象的位置信息。
可选地,上述处理器还用于执行:记录所述至少一个对象的音频信息,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
可选地,上述至少一个对象包括:真实对象和/或虚拟对象。
本公开的另一个方面提供了一种音频输出装置,包括获取模块、第一确定模块、第二确定模块以及调整模块。其中,获取模块获取用户所处的环境中的至少一个对象的属性信息以及位置信息,第一确定模块根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息,第二确定模块基于所述位置信息确定所述至少一个对象与用户的相对位置关系,调整模块基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知相应的对象的方位信息。
可选地,上述装置还包括:第三确定模块,从所述至少一个对象中确定特定对象,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整与所述特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于所述相对位置关系调整与所述至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
可选地,上述从所述至少一个对象中确定特定对象,包括:根据所述用户的选择操作从至少一个对象中选择所述特定对象,或者基于所述至少一个对象与所述用户的相对位置关系确定满足预设条件的对象作为所述特定对象。
可选地,上述装置还包括:第二获取模块,获取所述用户的身体部位与所述至少一个对象的相对位置,在所述用户的身体部位与所述至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与所述至少一个对象相匹配的音频信息的输出参数。
可选地,上述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,所述标签信息包括所述至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于所述对象标识确定所述至少一个对象的属性信息,以及根据所述对象标识和电子地图数据确定所述至少一个对象的位置信息。
可选地,上述装置还包括:记录模块,记录所述至少一个对象的音频信息,所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
可选地,上述至少一个对象包括:真实对象和/或虚拟对象。
本公开的另一方面提供了一种非易失性可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的音频输出方法和电子设备的应用场景;
图2示意性示出了根据本公开实施例的音频输出方法的流程图;
图3示意性示出了根据本公开另一实施例的音频输出方法的流程图;
图4示意性示出了根据本公开再一实施例的音频输出方法的流程图;
图5示意性示出了根据本公开实施例的电子设备音频输出示意图;
图6示意性示出了根据本公开又一实施例的音频输出方法的流程图;
图7示意性示出了根据本公开实施例的电子设备的框图;
图8示意性示出了根据本公开实施例的音频输出装置的框图;以及
图9示意性示出了根据本公开实施例的用于输出音频的计算机系统的方框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种音频输出方法,该方法包括:获取用户所处的环境中的至少一个对象的属性信息以及位置信息,根据属性信息确定与至少一个对象相匹配的至少一个音频信息,基于位置信息确定至少一个对象与用户的相对位置关系,基于相对位置关系调整至少一个音频信息的输出参数,并根据输出参数输出至少一个音频信息,以使用户能够根据至少一个音频信息感知至少一个对象的方位信息。
可见,在本公开实施例的技术方案中,通过获取用户所处的环境中的对象的属性信息和位置信息,根据属性信息确定与对象相匹配的音频信息,并基于位置信息确定对象与用户的相对位置关系,基于相对位置关系调整音频信息的输出参数,并根据输出参数输出音频信息,以使用户能够根据音频信息感知对象的方位信息,实现智能化地根据对象的属性信息和位置信息调整对象相关的音频的输出,使得用户能够根据音频感知对象的方位,增强用户的现场体验感,满足用户对音频输出功能的需求。
图1示意性示出了根据本公开实施例的音频输出方法和电子设备的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,该应用场景100例如可以包括用户110以及多个对象121、122、123。
在本公开实施例中,用户110例如可以佩戴电子设备,该电子设备例如可以是具有播放音频功能的设备。其中,该电子设备例如具有自身的处理器,该处理器能够用于处理电子设备所获取的相关信息以及能够用于控制电子设备的音频输出功能等等。例如,该电子设备可以是头戴式设备,例如可以是头盔、智能耳机等具有音频输出功能的设备。其中,该电子设备例如集成了混合现实技术,即能够输出与真实环境和虚拟环境相关的音频信息。
本公开实施例中,多个对象例如可以是处于周围环境中的物体,例如为人类121、其他生物类122、123等等,其中,该多个对象可以是真实对象或者虚拟对象。
在本公开实施例中,用户110例如能够通过电子设备获取周围环境中的对象,并从电子设备的音频数据库中获取与多个对象相匹配的音频信息,通过确定用户110与多个对象的相对位置关系,基于用户110与多个对象的相对位置关系为用户播放多个对象相应的音频信息,以此实现用户能够根据音频信息感知多个对象的方位信息。
具体地,如图1中所示,用户110通过佩戴电子设备,该电子设备能够获取周围环境中的多个对象,例如人类121、鸟类122、青蛙123等等,并从音源数据库中获取人类的声音、鸟叫声、蛙叫声,并基于多个对象与用户110的相对位置关系渲染该对象相应的声音并输出,实现用户能够根据该声音感知多个对象的方位信息,增强用户的现场体验感,满足用户对音频输出功能的需求。
图2示意性示出了根据本公开实施例的音频输出方法的流程图。
如图2所示,该方法包括操作S210~S240。
在操作S210,获取用户所处的环境中的至少一个对象的属性信息以及位置信息。
根据本公开的实施例,用户例如能够佩戴具有播放音频功能的设备,该设备例如可以是具有混合现实功能的设备,即,该混合现实功能包括虚拟现实功能和增强现实功能,该设备可以是头戴式设备,例如可以是头盔、耳机等等。
在本公开实施例中,至少一个对象包括:真实对象和/或虚拟对象。
其中,真实对象可以是用户所处环境的生物或者物体,生物例如可以包括人、动物等等,物体例如可以是树木、河流、博物馆的展品、商店的商品等等。其中,虚拟对象例如可以是虚拟的人物、物体等等。
根据本公开实施例,对象的属性信息例如可以用于表征对象的身份,例如人的属性信息可以是男性、女性、年龄等等,动物的属性信息例如可以表征动物的品种,例如鸟类、犬类等等,河流的属性信息例如可以表示河流的湍急程度,博物馆的展品的属性信息可以是展品的名称,商店的商品的属性信息可以是商品的商品ID等等。
在本公开实施例中,对象位置信息可以是对象所处的具体位置,或者可以是对象与用户的相对位置等。
在本公开实施例中,可以通过以下任意一种方式获取对象的属性信息和位置信息。
(1)通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息。
根据本公开实施例,例如通过获取环境中的图像,通过图像识别技术识别图像中的对象,以及识别出对象的属性信息和位置信息,例如,当对象为人类时,例如通过图像识别出该对象的性别、年龄等等,以及识别出该对象在所处环境的位置信息。
(2)获取用户所处的环境中的至少一个对象的标签信息,标签信息包括至少一个对象的属性信息以及位置信息。
根据本公开实施例,例如在博物馆中,博物馆陈列诸多展品,每个展品都具有自身的标签信息,该标签信息可以包括展品的属性信息以及位置信息,该标签可以是电子标签,通过获取该电子标签能够获取展品的属性信息和位置信息。
(3)获取用户所处的环境中的至少一个对象的对象标识,基于对象标识确定至少一个对象的属性信息,以及根据对象标识和电子地图数据确定至少一个对象的位置信息。
根据本公开的实施例,对象标识例如可以是对象的ID,该对象标识能够表征对象的类型。例如,在商店中,每个商品都有自身的对象标识,该电子地图中包括商店的分布,以及商品的对象标识存储于电子地图中的对应位置,通过获取商品的对象标识,并结合电子地图数据,即可获取商品的类型以及位置信息。
在操作S220,根据属性信息确定与至少一个对象相匹配的至少一个音频信息。
根据本公开的实施例,不同的对象可以对应不同的音频信息,例如男士与女士的声音不同,中年男士与年轻的男士的声音不同,湍急程度不同的河流对应的声音不同。例如,当对象为中年男士时,对象的属性信息例如为男士、年龄阶段为中年,此时,例如可以从音频信息库中确定与该中年男士对应的声音信息。
在操作S230,基于位置信息确定至少一个对象与用户的相对位置关系。
根据本公开实施例,可以根据对象的位置信息确定该对象与用户的相对位置关系,具体地,根据用户的位置信息和对象的位置信息确定该相对位置关系。其中,用户的位置信息可以是用户的头部所处的地理位置,例如可以通过GPS、SLAM、加速度传感器、陀螺仪、加速度计等获取用户的头部信息,便于计算用户的双耳(例如用户可以将音频输出设备佩戴于双耳)与虚拟对象或真实对象的相对位置关系。
在操作S240,基于相对位置关系调整至少一个音频信息的输出参数,并根据输出参数输出至少一个音频信息,以使用户能够根据至少一个音频信息感知至少一个对象的方位信息。
根据本公开实施例,音频信息的输出参数例如可以包括音频的音量、音频的声道、音频的频率等等,根据相对位置关系调整音频信息的输出参数,使得参数调整后的音频信息具有渲染3D音频效果,即实时渲染用户双耳分别接收到的音频,使得用户听到的音频信息更加真实地反映用户与对象的位置关系,使得用户能够通过该调整输出参数后的音频信息感知对象的方位信息。
例如,在博物馆的场景下,多个对象包括多种展品,例如展品包括A铜器、B瓷器等,A铜器位于用户的左侧,B瓷器位于用户的右侧,通过调整关于A铜器、B瓷器展品语音介绍的音频输出参数,并将该调整后的音频信息输出至用户耳中,实现用户能够根据音频信息感知A铜器、B瓷器的具体方位信息。以此实现通过听觉的音频指代对象的名称描述,换言之,用户能够通过对象的音频知道对象的名称及方位。
可以理解,本公开实施例的方案更适合应用于一些不需要视觉增强的场景,例如无视觉场景(盲人用户使用、闭眼心理治疗),以及参观博物馆、商店、导航等等场景。
本公开实施例通过获取用户所处的环境中的对象的属性信息和位置信息,根据属性信息确定与对象相匹配的音频信息,并基于位置信息确定对象与用户的相对位置关系,基于相对位置关系调整音频信息的输出参数,并根据输出参数输出音频信息,以使用户能够根据音频信息感知对象的方位信息,实现智能化地根据对象的属性信息和位置信息调整对象相关的音频的输出,使得用户能够根据音频感知对象的方位,增强用户的现场体验感,满足用户对音频输出功能的需求。
图3示意性示出了根据本公开另一实施例的音频输出方法的流程图。
如图3所示,该方法包括操作S210~S230以及S310~S330。其中,操作S210~S230如上参考图2所描述的操作相同或类似,在此不再赘述。
在操作S310,从至少一个对象中确定特定对象。
根据本公开实施例,特定对象例如可以是多个对象中的一个或多个对象。
其中,确定特定对象例如可以通过根据用户的选择操作从至少一个对象中选择特定对象,或者基于至少一个对象与用户的相对位置关系确定满足预设条件的对象作为特定对象。
例如,用户的选择操作可以是语言控制操作或者点击操作。例如,在获取周围环境的图像后,图像中包括多个对象,在识别出多个对象的属性信息后,用户可以通过语言控制选择某一对象为特定对象,例如识别的多个对象为博物馆的多个展品,识别的展品包括A铜器、B瓷器,用户可以通过语音选择A铜器为特定对象。或者,在获取包括A铜器、B瓷器在内的图像后,用户可以通过点击图像中的A铜器,以此选择A铜器为特定对象。
或者,可以从多个对象中选择满足预设条件的对象为特定对象,预设条件例如可以是多个对象中与用户的相对位置关系满足预设条件的对象。例如,可以将多个对象中与用户距离满足一定距离值的对象为特定对象,该距离值可以是5米、10米等等。例如,在多个对象中与用户相距5米之内的对象作为特定对象。
在操作S320,基于相对位置关系调整与特定对象相匹配的音频信息的输出参数为第一输出参数。
根据本公开实施例,在确定出特定对象后,可以调整与该特定对象相应的音频信息的输出参数为第一输出参数。例如,当特定对象为A铜器时,该A铜器位于用户的左侧,与该A铜器对应的音频信息例如可以是关于A铜器的介绍信息,该第一输出参数可以是音频的模式、音量等。具体地,音频的模式例如可以是该音频信息输入到用户的左耳和右耳的时间不同,即,可以通过调整该音频信息的输入模式、音量(例如增大音量),实现3D渲染效果,使得用户能够根据该音频信息感知A铜器所在的方位。
在操作S330,基于相对位置关系调整与至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
根据本公开实施例,非特定对象为多个对象中除去特定对象之外的对象。例如,该非特定对象为距离用户较远的对象,或者为用户不感兴趣的对象,此时,将该非特定对象的音频输出参数调整为第二输出参数,例如将调整该非特定对象对应的音频的音量,降低用户对该非特定对象的感知能力,以避免该非特定对象的音频信息影响到特定对象的音频信息。
图4示意性示出了根据本公开再一实施例的音频输出方法的流程图;
如图4所示,该方法包括操作S210~S240以及S410~S420。其中,操作S210~S240如上参考图2所描述的操作相同或类似,在此不再赘述。
在操作S410,获取用户的身体部位与至少一个对象的相对位置。
根据本公开实施例,用户的身体部位例如可以是用户的头部,例如可以通过获取用户的头部地理位置以及根据对象的位置信息确定相对位置。其中,例如可以通过GPS、SLAM、加速度传感器、陀螺仪、加速度计等获取用户的头部信息,以此计算用户的头部与对象的相对位置。
在操作S420,在用户的身体部位与至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与至少一个对象相匹配的音频信息的输出参数。
根据本公开实施例,例如用户的头部与对象的第一相对位置为对象在用户头部的正方向位置,当用户头部转动或者对象位置变化后,第一相对位置变化至第二相对位置,例如第二相对位置为对象在用户头部的侧面位置,此时,调整对象的音频信息的输出参数,例如在第一相对位置时,音频数据的输出参数为A模式(音频信息同时输入至用户的左耳和右耳)、A音量(音量较大),在第二相对位置时,将输出参数调整为B模式(音频信息不同时输入至用户的左耳和右耳)、B音量(音量较小)。使得用户能够根据音频信息实时感知对象的方位信息。
图5示意性示出了根据本公开实施例的电子设备音频输出示意图。
如图5所示,例如用户510佩戴音频输出设备,该音频输出设备例如为耳机、头盔等等,该音频输出设备还可以包括传感器等等,用于获取用户510头部的位置信息,以此确定用户510头部与对象的相对位置关系。
其中,用户510周围包括多个对象,该多个对象例如包括对象520、对象530、对象540、对象550等等,每个对象可以具有相匹配的音频信息,当用户的头部正对着对象530时,对象530音频信息的音量例如可以较大,当用户头部转向对象540后,调小对象530的音频信息的音量,并增大对象540的音频信息的音量,实现用户对音频信息的跳跃式阅读,使得用户沉浸于环境中,提高用户的交互感。
图6示意性示出了根据本公开又一实施例的音频输出方法的流程图。
如图6所示,该方法包括操作S210~S230以及S610~S620。其中,操作S210~S230如上参考图2所描述的操作相同或类似,在此不再赘述。
在操作S610,记录至少一个对象的音频信息。
根据本公开实施例,通过记录对象的音频信息,并将该音频信息与对象的属性信息相关联地存储至音源素材库中,以实现在获取用户所处的环境中的对象的属性信息后,根据属性信息从音源素材库中获取所存储的对象的音频信息。
在操作S620,基于相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
在从音源素材库中获取到所记录的对象的音频信息后,基于对象与用户的相对位置关系调整该音频信息的输出参数。
图7示意性示出了根据本公开实施例的电子设备的框图。
本公开实施例的电子设备700包括处理器710以及存储器720,存储器720用于存储可执行指令,其中,当指令被处理器710执行时,使得处理器710执行:获取用户所处的环境中的至少一个对象的属性信息以及位置信息,根据属性信息确定与至少一个对象相匹配的至少一个音频信息,基于位置信息确定至少一个对象与用户的相对位置关系,基于相对位置关系调整至少一个音频信息的输出参数,并根据输出参数输出至少一个音频信息,以使用户能够根据至少一个音频信息感知相应的对象的方位信息。
根据本公开实施例,上述处理器710还用于执行:从至少一个对象中确定特定对象,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整与特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于相对位置关系调整与至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
根据本公开实施例,上述从至少一个对象中确定特定对象,包括:根据用户的选择操作从至少一个对象中选择特定对象,或者基于至少一个对象与用户的相对位置关系确定满足预设条件的对象作为特定对象。
根据本公开实施例,上述处理器710还用于执行:获取用户的身体部位与至少一个对象的相对位置,在用户的身体部位与至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与至少一个对象相匹配的音频信息的输出参数。
根据本公开实施例,上述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,标签信息包括至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于对象标识确定至少一个对象的属性信息,以及根据对象标识和电子地图数据确定至少一个对象的位置信息。
根据本公开实施例,上述处理器710还用于执行:记录至少一个对象的音频信息,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
根据本公开实施例,上述至少一个对象包括:真实对象和/或虚拟对象。
图8示意性示出了根据本公开实施例的音频输出装置的框图。
如图8所示,音频输出装置800包括获取模块810、第一确定模块820、第二确定模块830以及调整模块840。
获取模块810可以用于获取用户所处的环境中的至少一个对象的属性信息以及位置信息。
根据本公开实施例,获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,标签信息包括至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于对象标识确定至少一个对象的属性信息,以及根据对象标识和电子地图数据确定至少一个对象的位置信息。
根据本公开实施例,至少一个对象包括:真实对象和/或虚拟对象。
根据本公开实施例,获取模块810例如可以执行上文参考图2描述的操作S210,在此不再赘述。
第一确定模块820可以用于根据属性信息确定与至少一个对象相匹配的至少一个音频信息。根据本公开实施例,第一确定模块820例如可以执行上文参考图2描述的操作S220,在此不再赘述。
第二确定模块830可以用于用于基于位置信息确定至少一个对象与用户的相对位置关系。根据本公开实施例,第二确定模块830例如可以执行上文参考图2描述的操作S230,在此不再赘述。
调整模块840可以基于相对位置关系调整至少一个音频信息的输出参数,并根据输出参数输出至少一个音频信息,以使用户能够根据至少一个音频信息感知相应的对象的方位信息。根据本公开实施例,调整模块840例如可以执行上文参考图2描述的操作S240,在此不再赘述。
根据本公开实施例,上述装置还包括:第三确定模块,从至少一个对象中确定特定对象,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整与特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于相对位置关系调整与至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
根据本公开实施例,从至少一个对象中确定特定对象,包括:根据用户的选择操作从至少一个对象中选择特定对象,或者基于至少一个对象与用户的相对位置关系确定满足预设条件的对象作为特定对象。
根据本公开实施例,上述装置还包括:第二获取模块,获取用户的身体部位与至少一个对象的相对位置,在用户的身体部位与至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与至少一个对象相匹配的音频信息的输出参数。
根据本公开实施例,上述装置还包括:记录模块,记录至少一个对象的音频信息,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,获取模块810、第一确定模块820、第二确定模块830以及调整模块840中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,获取模块810、第一确定模块820、第二确定模块830以及调整模块840中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,获取模块810、第一确定模块820、第二确定模块830以及调整模块840中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图9示意性示出了根据本公开实施例的用于播放音频的计算机系统的方框图。图9示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图9所示,实现用于音频输出的计算机系统900包括处理器901、计算机可读存储介质902。该系统900可以执行根据本公开实施例的方法。
具体地,处理器901例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器901还可以包括用于缓存用途的板载存储器。处理器901可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质902,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质902可以包括计算机程序903,该计算机程序903可以包括代码/计算机可执行指令,其在由处理器901执行时使得处理器901执行根据本公开实施例的方法或其任何变形。
计算机程序903可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序903中的代码可以包括一个或多个程序模块,例如包括903A、模块903B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器901执行时,使得处理器901可以执行根据本公开实施例的方法或其任何变形。
根据本发明的实施例,获取模块810、第一确定模块820、第二确定模块830以及调整模块840中的至少一个可以实现为参考图9描述的计算机程序模块,其在被处理器901执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现:
一种音频输出方法,包括:获取用户所处的环境中的至少一个对象的属性信息以及位置信息,根据属性信息确定与至少一个对象相匹配的至少一个音频信息,基于位置信息确定至少一个对象与用户的相对位置关系,基于相对位置关系调整至少一个音频信息的输出参数,并根据输出参数输出至少一个音频信息,以使用户能够根据至少一个音频信息感知至少一个对象的方位信息。
根据本公开实施例,上述方法还包括:从至少一个对象中确定特定对象,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整与特定对象相匹配的音频信息的输出参数为第一输出参数,和/或基于相对位置关系调整与至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
根据本公开实施例,上述从至少一个对象中确定特定对象,包括:根据用户的选择操作从至少一个对象中选择特定对象,或者基于至少一个对象与用户的相对位置关系确定满足预设条件的对象作为特定对象。
根据本公开实施例,上述方法还包括:获取用户的身体部位与至少一个对象的相对位置,在用户的身体部位与至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与至少一个对象相匹配的音频信息的输出参数。
根据本公开实施例,上述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的标签信息,标签信息包括至少一个对象的属性信息以及位置信息,获取用户所处的环境中的至少一个对象的对象标识,基于对象标识确定至少一个对象的属性信息,以及根据对象标识和电子地图数据确定至少一个对象的位置信息。
根据本公开实施例,上述方法还包括:记录至少一个对象的音频信息,基于相对位置关系调整至少一个音频信息的输出参数,包括:基于相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
根据本公开实施例,上述至少一个对象包括:真实对象和/或虚拟对象。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。

Claims (10)

1.一种音频输出方法,包括:
获取用户所处的环境中的至少一个对象的属性信息以及位置信息;
根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息;
基于所述位置信息确定所述至少一个对象与用户的相对位置关系;
基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知所述至少一个对象的方位信息。
2.根据权利要求1所述的方法,其中:
所述方法还包括:从所述至少一个对象中确定特定对象;
所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:
基于所述相对位置关系调整与所述特定对象相匹配的音频信息的输出参数为第一输出参数;和/或
基于所述相对位置关系调整与所述至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
3.根据权利要求2所述的方法,其中,所述从所述至少一个对象中确定特定对象,包括:
根据所述用户的选择操作从至少一个对象中选择所述特定对象;或者
基于所述至少一个对象与所述用户的相对位置关系确定满足预设条件的对象作为所述特定对象。
4.根据权利要求1所述的方法,还包括:
获取所述用户的身体部位与所述至少一个对象的相对位置;
在所述用户的身体部位与所述至少一个对象的相对位置从第一相对位置改变至第二相对位置时,调整与所述至少一个对象相匹配的音频信息的输出参数。
5.根据权利要求1所述的方法,其中,所述获取用户所处的环境中的至少一个对象的属性信息以及位置信息,包括以下至少一种:
通过图像识别获取用户所处的环境中的至少一个对象的属性信息以及位置信息;
获取用户所处的环境中的至少一个对象的标签信息,所述标签信息包括所述至少一个对象的属性信息以及位置信息;
获取用户所处的环境中的至少一个对象的对象标识,基于所述对象标识确定所述至少一个对象的属性信息,以及根据所述对象标识和电子地图数据确定所述至少一个对象的位置信息。
6.根据权利要求1所述的方法,其中:
所述方法还包括:记录所述至少一个对象的音频信息;
所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:基于所述相对位置关系调整所记录的至少一个对象的音频信息的输出参数。
7.根据权利要求1所述的方法,其中,所述至少一个对象包括:真实对象和/或虚拟对象。
8.一种电子设备,包括:
处理器;以及
存储器,用于存储可执行指令,其中,当所述指令被所述处理器执行时,使得所述处理器执行:
获取用户所处的环境中的至少一个对象的属性信息以及位置信息;
根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息;
基于所述位置信息确定所述至少一个对象与用户的相对位置关系;
基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知相应的对象的方位信息。
9.根据权利要求8所述的电子设备,其中:
所述存储器还用于执行:从所述至少一个对象中确定特定对象;
所述基于所述相对位置关系调整所述至少一个音频信息的输出参数,包括:
基于所述相对位置关系调整与所述特定对象相匹配的音频信息的输出参数为第一输出参数;和/或
基于所述相对位置关系调整与所述至少一个对象中的非特定对象相匹配的音频信息的输出参数为第二输出参数。
10.一种音频输出装置,包括:
获取模块,获取用户所处的环境中的至少一个对象的属性信息以及位置信息;
第一确定模块,根据所述属性信息确定与所述至少一个对象相匹配的至少一个音频信息;
第二确定模块,基于所述位置信息确定所述至少一个对象与用户的相对位置关系;
调整模块,基于所述相对位置关系调整所述至少一个音频信息的输出参数,并根据所述输出参数输出所述至少一个音频信息,以使用户能够根据所述至少一个音频信息感知相应的对象的方位信息。
CN201811422826.1A 2018-11-26 2018-11-26 音频输出方法、电子设备以及音频输出装置 Pending CN109582273A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811422826.1A CN109582273A (zh) 2018-11-26 2018-11-26 音频输出方法、电子设备以及音频输出装置
US16/691,343 US11202163B2 (en) 2018-11-26 2019-11-21 Audio output method, electronic device, and audio output apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811422826.1A CN109582273A (zh) 2018-11-26 2018-11-26 音频输出方法、电子设备以及音频输出装置

Publications (1)

Publication Number Publication Date
CN109582273A true CN109582273A (zh) 2019-04-05

Family

ID=65924743

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811422826.1A Pending CN109582273A (zh) 2018-11-26 2018-11-26 音频输出方法、电子设备以及音频输出装置

Country Status (2)

Country Link
US (1) US11202163B2 (zh)
CN (1) CN109582273A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112068796A (zh) * 2020-09-15 2020-12-11 北京深睿博联科技有限责任公司 一种基于电子地图的提示方法及装置
CN112083908A (zh) * 2020-07-29 2020-12-15 联想(北京)有限公司 一种模拟物体相对移动方向的方法和音频输出装置
CN112148182A (zh) * 2019-06-28 2020-12-29 华为技术服务有限公司 一种交互控制方法、终端以及存储介质
CN112612445A (zh) * 2020-12-28 2021-04-06 维沃移动通信有限公司 音频播放方法和装置
CN113467603A (zh) * 2020-03-31 2021-10-01 北京字节跳动网络技术有限公司 音频处理方法、装置、可读介质及电子设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11656747B2 (en) * 2021-09-21 2023-05-23 Microsoft Technology Licensing, Llc Established perspective user interface and user experience for video meetings

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103838374A (zh) * 2014-02-28 2014-06-04 深圳市中兴移动通信有限公司 一种信息提示方法和信息提示装置
CN104065869A (zh) * 2013-03-18 2014-09-24 三星电子株式会社 在电子装置中与播放音频组合地显示图像的方法
CN105916096A (zh) * 2016-05-31 2016-08-31 努比亚技术有限公司 一种声音波形的处理方法、装置、移动终端及vr头戴设备
CN106528038A (zh) * 2016-10-25 2017-03-22 三星电子(中国)研发中心 一种虚拟现实场景下调节音频效果的方法、系统及装置
CN106909222A (zh) * 2017-02-27 2017-06-30 广州林邦信息科技有限公司 Vr显示方法及装置
CN107168518A (zh) * 2017-04-05 2017-09-15 北京小鸟看看科技有限公司 一种用于头戴显示器的同步方法、装置及头戴显示器
CN107193386A (zh) * 2017-06-29 2017-09-22 联想(北京)有限公司 音频信号处理方法及电子设备
CN107608519A (zh) * 2017-09-26 2018-01-19 深圳传音通讯有限公司 一种声音调整方法及虚拟现实设备
CN107632703A (zh) * 2017-09-01 2018-01-26 广州励丰文化科技股份有限公司 基于双目摄像头的混合现实音频控制方法及服务设备
CN107632700A (zh) * 2017-08-01 2018-01-26 中国农业大学 一种基于虚拟现实的农具展馆体验系统和方法
CN108492375A (zh) * 2018-02-07 2018-09-04 链家网(北京)科技有限公司 一种虚拟现实看房方法及系统
CN108574925A (zh) * 2017-03-14 2018-09-25 株式会社东芝 虚拟听觉环境中控制音频信号输出的方法和装置
CN108604122A (zh) * 2016-05-10 2018-09-28 谷歌有限责任公司 在虚拟现实环境中使用预测动作的方法和装置
CN108874471A (zh) * 2018-05-30 2018-11-23 链家网(北京)科技有限公司 一种房源的功能间附加元素添加方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10694311B2 (en) * 2018-03-15 2020-06-23 Microsoft Technology Licensing, Llc Synchronized spatial audio presentation

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104065869A (zh) * 2013-03-18 2014-09-24 三星电子株式会社 在电子装置中与播放音频组合地显示图像的方法
CN103838374A (zh) * 2014-02-28 2014-06-04 深圳市中兴移动通信有限公司 一种信息提示方法和信息提示装置
CN108604122A (zh) * 2016-05-10 2018-09-28 谷歌有限责任公司 在虚拟现实环境中使用预测动作的方法和装置
CN105916096A (zh) * 2016-05-31 2016-08-31 努比亚技术有限公司 一种声音波形的处理方法、装置、移动终端及vr头戴设备
CN106528038A (zh) * 2016-10-25 2017-03-22 三星电子(中国)研发中心 一种虚拟现实场景下调节音频效果的方法、系统及装置
CN106909222A (zh) * 2017-02-27 2017-06-30 广州林邦信息科技有限公司 Vr显示方法及装置
CN108574925A (zh) * 2017-03-14 2018-09-25 株式会社东芝 虚拟听觉环境中控制音频信号输出的方法和装置
CN107168518A (zh) * 2017-04-05 2017-09-15 北京小鸟看看科技有限公司 一种用于头戴显示器的同步方法、装置及头戴显示器
CN107193386A (zh) * 2017-06-29 2017-09-22 联想(北京)有限公司 音频信号处理方法及电子设备
CN107632700A (zh) * 2017-08-01 2018-01-26 中国农业大学 一种基于虚拟现实的农具展馆体验系统和方法
CN107632703A (zh) * 2017-09-01 2018-01-26 广州励丰文化科技股份有限公司 基于双目摄像头的混合现实音频控制方法及服务设备
CN107608519A (zh) * 2017-09-26 2018-01-19 深圳传音通讯有限公司 一种声音调整方法及虚拟现实设备
CN108492375A (zh) * 2018-02-07 2018-09-04 链家网(北京)科技有限公司 一种虚拟现实看房方法及系统
CN108874471A (zh) * 2018-05-30 2018-11-23 链家网(北京)科技有限公司 一种房源的功能间附加元素添加方法及系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112148182A (zh) * 2019-06-28 2020-12-29 华为技术服务有限公司 一种交互控制方法、终端以及存储介质
CN112148182B (zh) * 2019-06-28 2022-10-04 华为技术服务有限公司 一种交互控制方法、终端以及存储介质
CN113467603A (zh) * 2020-03-31 2021-10-01 北京字节跳动网络技术有限公司 音频处理方法、装置、可读介质及电子设备
EP4117313A4 (en) * 2020-03-31 2023-11-22 Beijing Bytedance Network Technology Co., Ltd. AUDIO PROCESSING METHOD AND APPARATUS, READABLE MEDIUM AND ELECTRONIC DEVICE
CN113467603B (zh) * 2020-03-31 2024-03-08 抖音视界有限公司 音频处理方法、装置、可读介质及电子设备
CN112083908A (zh) * 2020-07-29 2020-12-15 联想(北京)有限公司 一种模拟物体相对移动方向的方法和音频输出装置
CN112068796A (zh) * 2020-09-15 2020-12-11 北京深睿博联科技有限责任公司 一种基于电子地图的提示方法及装置
CN112612445A (zh) * 2020-12-28 2021-04-06 维沃移动通信有限公司 音频播放方法和装置

Also Published As

Publication number Publication date
US20200169825A1 (en) 2020-05-28
US11202163B2 (en) 2021-12-14

Similar Documents

Publication Publication Date Title
CN109582273A (zh) 音频输出方法、电子设备以及音频输出装置
CN107211216B (zh) 用于提供虚拟音频再现的方法和装置
US20180014102A1 (en) Variable Positioning of Distributed Body Sensors with Single or Dual Wireless Earpiece System and Method
CN112805750A (zh) 跨现实系统
CN115398484A (zh) 具有用于定位的地理定位信息优先级的交叉现实系统
CN114762008A (zh) 简化的虚拟内容编程的交叉现实系统
CN114586071A (zh) 支持多设备类型的交叉现实系统
CN114730546A (zh) 具有定位服务和基于位置的共享内容的交叉现实系统
EP2842529A1 (en) Audio rendering system categorising geospatial objects
CN107197415A (zh) 改进为电话呼叫提供双声道声音的电子设备的计算机性能
CN115151947A (zh) 具有基于wifi/gps的地图合并的交叉现实系统
CN104252229A (zh) 用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感兴趣的设备和方法
US11622222B2 (en) Location information through directional sound provided by mobile computing device
CN105210085A (zh) 使用最短连线特征的图像标记
US20220246135A1 (en) Information processing system, information processing method, and recording medium
CN117859077A (zh) 用于生成室内空间的三维地图的系统和方法
US11521515B2 (en) Stereophonic apparatus for blind and visually-impaired people
CN114693890A (zh) 一种增强现实交互方法及电子设备
WO2021177186A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
WO2023246563A1 (zh) 一种声音处理方法及电子设备
KR102605342B1 (ko) 오브젝트 인식 기반의 정보 제공 방법 및 장치와 이를 위한 매핑 장치
US11659347B2 (en) Information processing apparatus, information processing method, and acoustic system
WO2023069988A1 (en) Anchored messages for augmented reality
CN109120784A (zh) 音频播放方法以及电子设备
US20170374359A1 (en) Image providing system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190405

RJ01 Rejection of invention patent application after publication