CN117093176A - 声音场景模拟方法、装置、设备、存储介质及车辆 - Google Patents
声音场景模拟方法、装置、设备、存储介质及车辆 Download PDFInfo
- Publication number
- CN117093176A CN117093176A CN202210513927.XA CN202210513927A CN117093176A CN 117093176 A CN117093176 A CN 117093176A CN 202210513927 A CN202210513927 A CN 202210513927A CN 117093176 A CN117093176 A CN 117093176A
- Authority
- CN
- China
- Prior art keywords
- sound
- scene
- vehicle
- target
- sound effect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000004088 simulation Methods 0.000 title claims abstract description 36
- 230000000694 effects Effects 0.000 claims abstract description 123
- 230000004913 activation Effects 0.000 claims abstract description 41
- 230000008859 change Effects 0.000 claims description 19
- 230000003993 interaction Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 5
- 230000003111 delayed effect Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 8
- 235000019800 disodium phosphate Nutrition 0.000 description 8
- 230000008569 process Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- HMFHBZSHGGEWLO-IOVATXLUSA-N D-xylofuranose Chemical compound OC[C@H]1OC(O)[C@H](O)[C@H]1O HMFHBZSHGGEWLO-IOVATXLUSA-N 0.000 description 2
- 240000002853 Nelumbo nucifera Species 0.000 description 2
- 235000006508 Nelumbo nucifera Nutrition 0.000 description 2
- 235000006510 Nelumbo pentapetala Nutrition 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 241000283153 Cetacea Species 0.000 description 1
- 241000931705 Cicada Species 0.000 description 1
- 241001112132 Pitohui tenebrosus Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000000739 chaotic effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013136 deep learning model Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C7/00—Arrangements for writing information into, or reading information out from, a digital store
- G11C7/16—Storage of analogue signals in digital stores using an arrangement comprising analogue/digital [A/D] converters, digital memories and digital/analogue [D/A] converters
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Stereophonic System (AREA)
Abstract
本发明涉及车辆音频控制领域，具体涉及一种声音场景模拟方法、装置、设备、存储介质及车辆，方法包括：获取目标场景的激活事件；根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据，所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的声音效果。本发明中可以依据驾驶员的驾驶习惯，时间，位置，车辆行驶状态，导航信息等自动匹配场景，提升了驾驶乐趣。
Description
技术领域
本发明涉及车辆音频控制领域，具体涉及一种声音场景模拟方法、装置、设备、存储介质及车辆。
背景技术
随着人们生活品质的提升，对驾驶乐趣的追求也越来越高，目前除少数高端车型外，大多数车载主机的媒体音通道仅有立体声。如果仅仅通过特定方式(蓝牙或USB线,手机投屏，Carplay/Carlife等方式)将手机连接到车机，将手机APP播放的立体声传递到整车，形成的声效只能分辨出左右，无法分辨前后方位，不能形成明确的空间印象，无法感知到声源的具体方位，听音的效果差。
车载主机是目前车子上最主要的交互及控制设备之一，可获取车子的时间，位置，导航状态及车子运行状态，当前主机系统上可开发独立程序APP，可利用车载主机的界面做输入，内部程序处理数据后，将所需传递内容及命令通过整车信号发送至车载的各种设备。当前主机或功放都有DSP用于处理音频计算，可实时将不同的音频流传送至各扬声器输出通道。车载音频通常有多种音效的设置来调节各通道的输出，这些设置是由DSP设置各扬声器通道输出音频的大小、延时、频响等参数实现。
然而手机自带的功能仅能实现左右立体声的部分声效，采用手机连接车机播放音效时主要有以下缺陷：手机APP的虚拟声场效果，控制声音只有左右和大小的变化；手机APP的音效发到车子上，未经调教的声音，产生的是混乱撕裂的声场，往往头的位置稍有变化，听到的声音中心就会变化，声音中心要么模糊不清，要么是分裂的；手机APP的音效，无法对声音方位的进行调整；手机的APP音效，无法判断用户场景；手机APP的音源，音效单一。
发明内容
鉴于以上现有技术的缺点，本发明的目的在于提供一种声音场景模拟方法、装置、设备存储介质及车辆，以根据用户需求模拟不同的声音场景，提升驾驶乐趣。
为实现上述目的及其它相关目的，本发明提供一种声音场景模拟方法，包括：
获取目标场景的激活事件；
根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；
将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的声音效果。
在本发明的一可选实施例中，所述获取目标场景的激活事件包括：
获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息、位置信息和行驶状态信息中的一种或几种；
根据预设配置规则对所述车辆实时状态信息进行比对，获得对应的目标场景，所述预设配置规则包括场景与车辆状态信息之间的对应关系；
根据比对获得的目标场景生成对应的激活事件。
在本发明的一可选实施例中，所述获取目标场景的激活事件包括：
获取从人机交互模块输入的所述目标场景的激活事件。
在本发明的一可选实施例中，所述预设场景库中的声音场景数据采用如下方法预先获得：
响应人机交互模块输入的场景配置请求，从预设音效库中选取目标音效；
根据所述人机交互模块输入的场景配置请求，确定所述目标音效的声音中心位置；
根据所述声音中心位置，将所述目标音效拆分成通道数与扬声器数量一致的多个通道的音效数据，并对每个通道的音效数据分别进行调音处理，使各通道的音效数据分别被各扬声器播放时，其声音的真实中心位置位于所述声音中心位置；
将调音后的所述多个通道的音效数据与所述场景配置请求中包含的场景信息相关联后进行存储。
在本发明的一可选实施例中，所述音频数据包括一种或多种音效的音效数据，当所述音频数据包括多种音效的音效数据时，分别将每个通道内所有音效的音效数据混音后进行储存。
在本发明的一可选实施例中，当所述场景配置请求中，所述声音中心位置随时间产生变化时，对每个通道的音效数据分别进行延时处理，使各通道的音效数据分别被各扬声器播放时，其声音的中心能够随时间发生变化，且变化规律与所述场景配置请求中所述声音中心位置随时间变化的规律一致。
在本发明的一可选实施例中，所述根据所述人机交互模块输入的场景配置请求，确定所述目标音效的声音中心位置包括：
响应所述人机交互模块输入的场景配置请求，抛出可视化配置界面，所述可视化配置界面包括车辆空间特征、扬声器分布特征以及用于指示声音中心位置的光标；
响应用户对所述光标进行的操作，确定所述光标与所述车辆空间特征的相对位置关系；
根据所述光标与所述车辆空间特征的相对位置关系，确定所述目标音效的声音中心在真实车辆空间中的位置。
在本发明的一可选实施例中，所述响应用户对所述光标进行的操作，确定所述光标与所述车辆空间特征的相对位置包括：
当用户拖动所述光标时，记录所述光标的移动路径，根据所述光标的移动路径确定所述声音中心位置随时间变化的规律。
在本发明的一可选实施例中，当获取目标场景的激活事件后，有媒体音正在播放时，则将所述多个通道的音频数据分别与各通道的媒体音进行混音后发送至各扬声器进行播放。
为实现上述目的及其它相关目的，本发明还提供一种声音场景模拟装置，包括：
场景激活模块，用于获取目标场景的激活事件；
声音调用模块，用于根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据，所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；
声音输出模块，用于将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的音效。
在本发明的一可选实施例中，所述场景激活模块包括：
信息获取模块，用于获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息位置信息和行驶状态信息中的一种或几种；
判断模块，用于将所述车辆实时状态信息与预设配置规则进行比对，所述预设配置规则包括目标场景的类型以及不同类型的目标场景分别对应的车辆状态信息；当所述车辆实时状态信息与其中一种类型的目标场景对应的车辆状态信息一致时，生成该目标场景的激活事件。
为实现上述目的及其它相关目的，本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现所述方法的步骤。
为实现上述目的及其它相关目的，本发明还提供一种计算机可读存储介质，其上存储于计算机程序，所述计算机程序被处理器执行时实现所述方法的步骤。
为实现上述目的及其它相关目的，本发明还提供一种车辆，包括所述的声音场景模拟装置。
综上所述，本发明实现多通道的出声，通过多通道的协同控制增益及延时参数，实现声音远近，左右，前后的变化；经过本发明调音处理过的声场，根据设定的音效出声位置，调节了多通道扬声器输出声音的大小，形成了统一的声场，可以判断出特定声效出现在左右前后的方位，可以在车内实现精准定位各声源发声方位；本发明可以在操作界面上实现对声音左右前后调整，控制声源从不同的扬声器发出；当在APP内移动声效的位置时，车载主机会将图标在界面相对应的位置参数发送至APP端，APP将左右前后的扬声器输出增益依据参数调整；播放此声效时，对应方位的扬声器声音的大小随参数设置改变，实现了各种音源位置的改变；本发明中可以依据驾驶员的驾驶习惯，时间，位置，车辆行驶状态，导航信息等自动匹配场景，提升了驾驶乐趣；本发明可以实现音频的变化出声，比如设定某种声效在围绕车子中心转圈环绕，以及声效位置从左到右，从前到后的变化。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的声音场景模拟方法于一实施例中的流程图；
图2为本发明的激活事件获取方法于一实施例中的流程图；
图3为本发明的预设场景库构件方法于一实施例中的流程图；
图4为本发明的声音中心位置确定方法于一实施例中的流程图；
图5为本发明的声音场景模拟装置于一实施例中的功能模块结构框图；
图6为本发明的电子设备于一实施例中的结构框图；
图7为本发明的声音场景判断方法于一实施例中的流程图；
图8为本发明的单个音效处理方法于一实施例中的流程图；
图9为本发明的单个音效数据生成方法于一实施例中的流程图；
图10为本发明的声音场景模拟系统于一实施例中的结构图框；
图11为本发明的可视化配置界面于一实施例中的示意图；
图12为本发明的可视化配置界面于另一实施例中的示意图；
图13为本发明的可视化配置界面于又一实施例中的示意图；
图14为本发明的场景音与媒体音混音系统于一实施例中的结构框图；
图15为本发明的声音场景数据构建方法于一实施例中的流程图；
图16为本发明的场景音与媒体音混音系统于一实施例中的简化结构框图；
图17为本发明的单个音效的具体处理过程于一实施例中的流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其它优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。还应当理解，本发明实施例中使用的术语是为了描述特定的具体实施方案，而不是为了限制本发明的保护范围。下列实施例中未注明具体条件的试验方法，通常按照常规条件，或者按照各制造商所建议的条件。
请参阅图1至图17所示。须知，本说明书附图所绘示的结构、比例、大小等，均仅用以配合说明书所揭示的内容，以供熟悉此技术的人士了解与阅读，并非用以限定本发明可实施的限定条件，故不具技术上的实质意义，任何结构的修饰、比例关系的改变或大小的调整在不影响本发明所能产生的功效及所能达成的目的下，均应仍落在本发明所揭示的技术内容所能涵盖的范围内。同时，本说明书中所引用的如“上”、“下”、“左”、“右”、“中间”及“一”等的用语，亦仅为便于叙述的明了，而非用以限定本发明可实施的范围，其相对关系的改变或调整，在无实质变更技术内容下，当亦视为本发明可实施的范畴。
当实施例给出数值范围时，应理解，除非本发明另有说明，每个数值范围的两个端点以及两个端点之间任何一个数值均可选用。除非另外定义，本发明中使用的所有技术和科学术语与本技术领域的技术人员对现有技术的掌握及本发明的记载，还可以使用与本发明实施例中所述的方法、设备相似或等同的现有技术的任何方法、设备来实现本发明。
请参阅图1纸图17所示，本发明提供一种声音场景模拟方法，本发明的声音场景模拟方法可以从听觉上模拟出的自然环境音效，例如鸟叫，青蛙，风声，水声等效果，这些场景的音频流经过本发明所述方法的处理，能够模拟特定的生活中场景，使人感知到自身在森林河流、海洋、公园、卧室、夜空等场景，可以理解的是，本发明例如可以在车载终端上独立运行，或者在移动终端上运行，并通过车机互联系统将移动终端与车机互联，实现场景音效在扬声器上的播放。
声音场景模拟方法应用于一个或者多个电子设备中，所述电子设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程门阵列(Field－Programmable Gate Array，FPGA)、数字处理器(Digital SignalProcessor，DSP)、嵌入式设备等。
需要说明的是，本发明的声音场景模拟方法例如可以与车辆安全辅助驾驶功能联动，例如当安全辅助驾驶系统的感知元件识别到车辆处于复杂交通环境中时，可以适当降低或关闭虚拟声场的音量，避免虚拟声场干扰司机对车辆周围环境的感知，而当安全辅助驾驶系统的感知元件识别到车辆处于相对简单的交通环境中时，可以适当提高虚拟声场的音量，以提升驾驶乐趣。本发明的声音场景模拟方法不会影响司机的安全驾驶。当本发明应用于自动驾驶车辆时，则不用考虑车辆周围交通环境的影响。
请参阅图1、10所示，本发明的所述方法包括：
S1：获取目标场景的激活事件；可以理解的是，所述目标场景是指一种虚拟的自然场景，如森林、河流、海洋、公园等，每一种场景例如都可以包括多种音效的组合，例如在森林场景中，可以包括水流的音效和鸟鸣的音效，又例如在海洋场景中，可以包括海浪的音效、鲸鱼的音效、船舶的音效等，所述激活事件是能够触发所述目标场景生效的一种指令，这种指令可以手动输入，也可以由终端设备依据一些参数自动判断生成。
S2：根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据，所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；可以理解的是，所述预设场景库中预存了多种虚拟场景的音效数据，这些音效数据的来源可以是多样的，例如可以是用户通过本发明提供的场景配置功能自定义的虚拟场景音效，也可以是从外部设备导入的虚拟场景音效，每一种虚拟场景音效均为多通道的音频数据，这些音频数据分别被各扬声器播放，通过对音频数据进行不同的增益和延时处理，能够使用户在听觉上产生空间感，使用户拥有身临其境的感觉。
S3：将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的声音效果，可以理解的是，车辆的多个扬声器一般分布在车辆的不同位置，如前后车门、前仪表台两侧或车顶等位置，扬声器的数量能够在一定程度上提升声场的立体感，因此在成本条件允许的情况下，扬声器的数量可以适当增加。
请参阅图2所示，在一具体实施例中，所述步骤S1包括：
S11：获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息、位置信息和行驶状态信息中的一种或几种。
S12：根据预设配置规则对所述车辆实时状态信息进行比对，获得对应的目标场景，所述预设配置规则包括场景与车辆状态信息之间的对应关系；
S13：根据比对获得的目标场景生成对应的激活事件。
如图7所示，基于步骤S11、S12、S13，本发明可以依据驾驶员的驾驶习惯，时间，位置，车辆行驶状态，导航信息等信息自动匹配场景。如早晨上班开车时，播放早晨的鸟叫声营造最舒适又不打扰的氛围。晚上下班时，播放青蛙的声音。旅行时，根据地理位置不同，播放特定的沙漠/海洋/森林音效。长途驾驶时，后排播放瑜伽类冥想类的声效，前排播放稍提神的声效使驾驶员不至于睡着。可以理解的是，所述时间，位置，导航信息等可以从车机直接获取，实际应用过程中，可以根据用户预先配置的规则来判断车辆实时状态信息即驾驶场景，例如当周一至周五上午7:30-8:30，导航信息为从家到公司时，即可判断此用户正处于上班途中；除此之外，也可以通过深度学习模型自动判断车辆当前的驾驶场景。
可以理解的是，在本发明的另一实施例中，步骤S1也可以获取从人机交互模块手动输入的所述目标场景的激活事件。
请参阅图3、8、9、17所示，所述预设场景库中的声音场景数据采用如下方法获得：
S21：响应人机交互模块输入的场景配置请求，从预设音效库中选取目标音效；
S22：根据所述人机交互模块输入的场景配置请求，确定所述目标音效的声音中心位置；
S23：根据所述声音中心位置，将所述目标音效拆分成通道数与扬声器数量一致的多个通道的音效数据，并对每个通道的音效数据分别进行调音处理，使各通道的音效数据分别被各扬声器播放时，其声音的真实中心位置位于所述声音中心位置；
S24：将调音后的所述多个通道的音效数据与所述场景配置请求中包含的场景信息相关联后进行存储。
优选的，如图15所示，所述音频数据包括一种或多种音效的音效数据，当所述音频数据包括多种音效的音效数据时，分别将每个通道内所有音效的音效数据混音后进行储存。
进一步的，如图15、17所示，当所述场景配置请求中，所述声音中心位置随时间产生变化时，对每个通道的音效数据分别进行延时处理，使各通道的音效数据分别被各扬声器播放时，其声音的中心能够随时间发生变化，且变化规律与所述场景配置请求中所述声音中心位置随时间变化的规律一致。
请参阅图4、11-13所示，所述步骤S22包括：
S221：响应所述人机交互模块输入的场景配置请求，抛出可视化配置界面，所述可视化配置界面包括车辆空间特征1000、扬声器分布特征1001以及用于指示声音中心位置的光标1002；
S222：响应用户对所述光标1002进行的操作，确定所述光标1002与所述车辆空间特征1000的相对位置关系；
S223：根据所述光标1002与所述车辆空间特征1000的相对位置关系，确定所述目标音效的声音中心在真实车辆空间中的位置。
进一步的，如图12、13所示，所述响应用户对所述光标1002进行的操作，确定所述光标1002与所述车辆空间特征1000的相对位置包括：当用户拖动所述光标1002时，记录所述光标1002的移动路径1003，根据所述光标1002的移动路径1003确定所述声音中心位置随时间变化的规律。
请参阅图14、16所示，当获取目标场景的激活事件后，有媒体音正在播放时，则将所述多个通道的音频数据分别与各通道的媒体音进行混音后发送至各扬声器进行播放。
以下结合具体场景对本发明的技术方案做进一步说明，本发明的技术方案中包括车载主机，订制的APP程序及其操作界面，主机可发信息通过自身的DSP控制所有通道扬声器的出声，或通过功放的DSP控制所有通道的扬声器出声。本发明中的扬声器，至少包含了车内的左前/右前/左后/右后4组扬声器。
如图14所示，图中上部分为媒体音频播放的传输通道，媒体音源经DSP的处理，调整为多通道的音源，经功放放大后，多通道音源对应布置在车身不同位置的扬声器播放。下部分为虚拟声场对应的多音源通道，特效音源被APP处理后，生成不同扬声器通道的输出音频流，音频流存储在存储空间中。当此功能启用时，调用预存的音频流与媒体播放的音频流叠加混音处理后，经过功率放大器输出到各扬声器播放。当车载主机媒体的音频在正常播放/不播放时，都可调用预存的各通道的音频流。
图14中只展示了单个音效的方式；实际中APP可以设置选择几种场景，每个场景中可订制多种声效；如荷塘月色场景中，可定义有多组青蛙，蟋蟀，水流的声效；同时还可设定每种声效在车内的出声位置(前后左右方位)；如图11-13所示，每种声效的在界面中的位置由用户通过APP界面设置，此位置信息被APP采用不同的参数配置进行计算增益及延时参数。
如图15所示，在APP的算法中，将每种初始音源经过增益/延时处理匹配为合适的音场；再增加动画处理，可实现围绕车辆中心盘旋/从左到右/从前往后的声场位置变化效果；经过处理的音源生成了多个扬声器输出通道一段时间的音频流数据；多条音频数据流混音后合在一起生成一份声音场景的音频流数据；在APP的存储中心，存储了多份虚拟场景的音频流数据；主机通过驾驶员手动选择，或者车载主机根据车子信息判断自动选择，调用一份声音场景音频数据流输出。
本方案中的说明，仅包含了左前/右前/左后/右后扬声器的设置；在高端车型上，扬声器的布置中还会包含头顶扬声器的布置；在这些车型上，发声位置前后/左右的调整可以优化为前后/左右/上下位置的调整。
车机智能判断选择场景的逻辑，依据车辆信息自动判断场景，进入特定场景模式后，车机的DSP或功放DSP调用对应场景的音频流与当前播放的音频混音后，发送至全车的所有扬声器；在不影响当前正播放音频的情况下，增加虚拟场景效果；当设定好音效后，APP将场景中的多种音源经过算法处理为一组循环播放的声音数据；在启动音效时，这些数据与整车正在播放的声音一起混音叠加发出到功率放大器后，输出到整车的所有扬声器播放。
在对音效处理过程中，某种音效在APP中处理流程如下：某音效(比如黄鹂鸟叫声)，首先在路由处理流程中，被复制几份分配到对应的扬声器；针对不同类型的扬声器，如高音中音，低音等类型；输出的扬声器，在不同频段中声音输出增益不同，这里有个调音调整；针对不同位置的扬声器，其输出声音距离车辆中心点距离不同，对应有不同的延时调整；针对不同位置的扬声器，其输出声音大小有不同，对应的也有个基础增益的调整；各音效以上的处理，顺序可以不同，但同一台车，其处理的调音，增益和延时设置一致；根据用户设定的音效位置不同，对应增益设定调整(如后排调低，音效听感在前排；左边调低，音效听感在右边)；根据用户设定的动画效果(即光标1002运动轨迹)不同，对应增益延时生成一段随时间循环播放的效果；如：动画效果1：从左到右，初始时左边扬声器增益大，右边扬声器增益小。随时间左边慢慢变小，右边慢慢变大；时间长度与音效长度相关；动画效果2：从前往后，初始前排扬声器增益大，后排扬声器增益小；随时间前面逐渐变小，后面慢慢变大；时间长度与音效长度相关；动画效果3：围绕中心旋转；声音中心位置，随时间围绕中心旋转；位置信息分解为前后/左右的坐标，音效按照坐标产生变化；动态场景举例：小孩子唧唧叫的鞋子声，由远到近，从左边跑来又从右边跑走的声音；经过处理的音频流会存储于存储中心，作为某场景的一个声效；多个声效组成一个场景，如荷塘月色场景有青蛙叫，蝉叫，蛐蛐叫，轻风吹的声音组成；海洋场景由海浪声，轮船汽笛场景组成。
声音中心位置的调节原理如图11-13所示，假设图中横坐标为x，纵坐标为y，分别设置x的值为(-10，10)的左右范围，设置y的值为(-10，10)的前后范围；当声音中心在左前的位置时，其x y值分别为-10，-10；当声音中心在右前位置时，其位置为10，-10；LF RF LRRR分别为左前右前左后右后的指代；GbaseLF为LF扬声器的基础增益，即声音中心在车子中央位置的增益；GxyLF为LF(左前)在位置(x,y)时对应的增益(放大倍数).同理类似；fLF(x),fLF(y)分别为随x轴(左右方向位置)y轴(前后方向位置)的一组曲线变量，不同的值输出特定的比例系数；经过位置处理的增益为：
GxyLF(x,y)＝GbaseLF*fLF(x)*fLF(y)
GxyLR(x,y)＝GbaseLR*fLR(x)*fLR(y)
GxyRF(x,y)＝GbaseRF*fRF(x)*fRF(y)
GxyRR(x,y)＝GbaseRR*fRR(x)*fRR(y)
当声音中心随时间变化时，生成另一个增益GxytLF
GxytLF＝GbaseLF*f(x,y,t)
GxytRF＝GbaseLF*f(x,y,t)
GxytLR＝GbaseLF*f(x,y,t)
GxytRR＝GbaseLF*f(x,y,t)
f(x,y,t)是位置随时间t，变化的一组x,y参数；当x从-10到10变化，y不变时，产生声音从左移到右的声音；当x不变，y从-10到10，产生声音从前往后的变化；当随着时间，xy的值生成一组圆的坐标；这时产生的声音就是围绕车子中心转圈的动态效果。
本发明可以依据驾驶员的驾驶习惯，时间，位置，车辆状态等信息自动匹配场景；如早晨上班开车时，播放早晨的鸟叫声，营造最舒适又不打扰的氛围；晚上下班时，播放青蛙的声音；长途旅行，后排有人睡觉时，后排对应播放瑜伽类冥想类的声效，前排对应扬声器播放稍提神的声效使驾驶员不至于犯困。
用户可以上传自己所喜欢的声源，经过APP处理后，在整车的环境中，形成非常真实的效果；比如用户录一段小孩子踩着唧唧叫的鞋子的声音，通过APP可以处理为一段时间内有前后/左右/大小的变化，形成小孩子跑来跑去的效果。
当早晨上班时，驾驶员处于较不清醒状态，可能会讨厌大的媒体声，如收音机广播之类此时播放清晨鸟叫的声音，会使人心情平和；当夏天傍晚时，播放点蛐蛐叫青蛙叫的声音，增加夏日的感受；驾驶经过海边时，播放海鸥或轮船的音乐。
请参阅图5所示，在一实施例中，本发明还提供一种声音场景模拟装置，包括场景激活模块10、声音调用模块20、声音输出模块30；具体的，所述场景激活模块10用于获取目标场景的激活事件；所述声音调用模块20用于根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据，所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；所述声音输出模块30用于将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的音效。
进一步的，所述场景激活模块10包括信息获取模块11和判断模块12；所述信息获取模块11用于获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息、位置信息和行驶状态信息中的一种或几种；所述判断模块12用于将所述车辆实时状态信息与预设配置规则进行比对，所述预设配置规则包括目标场景的类型以及不同类型的目标场景分别对应的车辆状态信息；当所述车辆实时状态信息与其中一种类型的目标场景对应的车辆状态信息一致时，生成该目标场景的激活事件。还包括用于手动输入激活事件的手动激活模块13
本实施例的声音场景模拟装置是与上述声音场景模拟方法相对应的装置，声音场景模拟装置中的功能模块或者分别对应声音场景模拟方法中的相应步骤。本实施例的声音场景模拟装置可与声音场景模拟方法相互相配合实施。相应地，本实施例的声音场景模拟装置中提到的相关技术细节也可应用在上述声音场景模拟方法中。
需要说明的是，上述的各功能模块实际实现时可以全部或部分集成到一个物理实体上，也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现；也可以全部以硬件的形式实现；还可以部分模块通过处理元件调用软件的形式实现，部分模块通过硬件的形式实现。此外这些模块全部或部分可以集成在一起，也可以独立实现。这里所述的处理元件可以是一种集成电路，具有信号的处理能力。在实现过程中，上述方法的部分或全部步骤，或以上的各功能模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
请参阅图6所示，本发明还提供一种电子设备，包括存储器101、处理器100及存储在存储器101上并可在处理器100上运行的计算机程序，所述处理器100执行所述计算机程序时实现所述方法的步骤。
其中，存储器101至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、移动硬盘、多媒体卡、卡型存储器101(例如：SD或DX存储器101等)、磁性存储器101、磁盘、光盘等。存储器101在一些实施例中可以是电子设备的内部存储单元，例如该电子设备的移动硬盘。存储器101在另一些实施例中也可以是电子设备的外部存储设备，例如电子设备上配备的插接式移动硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(SecureDigital,SD)卡、闪存卡(Flash Card)等。进一步地，存储器101还可以既包括电子设备的内部存储单元也包括外部存储设备。
处理器100在一些实施例中可以由集成电路组成，例如可以由单个封装的集成电路所组成，也可以是由多个相同功能或不同功能封装的集成电路所组成，包括一个或者多个中央处理器100(Central Processing unit，CPU)、微处理器100、数字处理芯片、图形处理器100及各种控制芯片的组合等。处理器100是所述电子设备的控制核心(ControlUnit)，利用各种接口和线路连接整个电子设备的各个部件，通过运行或执行存储在所述存储器101内的程序或者模块，以及调用存储在所述存储器101内的数据，以执行电子设备的各种功能和处理数据。
本发明还提供一种车辆，包括所述的声音场景模拟装置。
综上所述，本发明实现多通道的出声，通过多通道的协同控制增益及延时参数，实现声音远近，左右，前后的变化；经过本发明调音处理过的声场，根据设定的音效出声位置，调节了多通道扬声器输出声音的大小，形成了统一的声场，可以判断出特定声效出现在左右前后的方位，可以在车内实现精准定位各声源发声方位；本发明可以在操作界面上实现对声音左右前后调整，控制声源从不同的扬声器发出；当在APP内移动声效的位置时，车载主机会将图标在界面相对应的位置参数发送至APP端，APP将左右前后的扬声器输出增益依据参数调整；播放此声效时，对应方位的扬声器声音的大小随参数设置改变，实现了各种音源位置的改变；本发明中可以依据驾驶员的驾驶习惯，时间，位置，车辆行驶状态，导航信息等自动匹配场景，提升了驾驶乐趣；本发明可以实现音频的变化出声，比如设定某种声效在围绕车子中心转圈环绕，以及声效位置从左到右，从前到后的变化。所以，本发明有效克服了现有技术中的一些实际问题从而有很高的利用价值和使用意义。
上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。
Claims (14)
1.一种声音场景模拟方法，其特征在于，包括：
获取目标场景的激活事件；
根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；
将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的声音效果。
2.根据权利要求1所述的声音场景模拟方法，其特征在于，所述获取目标场景的激活事件包括：
获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息、位置信息和行驶状态信息中的一种或几种；
根据预设配置规则对所述车辆实时状态信息进行比对，获得对应的目标场景，所述预设配置规则包括场景与车辆状态信息之间的对应关系；
根据比对获得的目标场景生成对应的激活事件。
3.根据权利要求1所述的声音场景模拟方法，其特征在于，所述获取目标场景的激活事件包括：
获取从人机交互模块输入的所述目标场景的激活事件。
4.根据权利要求1所述的声音场景模拟方法，其特征在于，所述预设场景库中的声音场景数据采用如下方法预先获得：
响应人机交互模块输入的场景配置请求，从预设音效库中选取目标音效；
根据所述人机交互模块输入的场景配置请求，确定所述目标音效的声音中心位置；
根据所述声音中心位置，将所述目标音效拆分成通道数与扬声器数量一致的多个通道的音效数据，并对每个通道的音效数据分别进行调音处理，使各通道的音效数据分别被各扬声器播放时，其声音的真实中心位置位于所述声音中心位置；
将调音后的所述多个通道的音效数据与所述场景配置请求中包含的场景信息相关联后进行存储。
5.根据权利要求4所述的声音场景模拟方法，其特征在于，所述音频数据包括一种或多种音效的音效数据，当所述音频数据包括多种音效的音效数据时，分别将每个通道内所有音效的音效数据混音后进行储存。
6.根据权利要求4所述的声音场景模拟方法，其特征在于，当所述场景配置请求中，所述声音中心位置随时间产生变化时，对每个通道的音效数据分别进行延时处理，使各通道的音效数据分别被各扬声器播放时，其声音的中心能够随时间发生变化，且变化规律与所述场景配置请求中所述声音中心位置随时间变化的规律一致。
7.根据权利要求4所述的声音场景模拟方法，其特征在于，所述根据所述人机交互模块输入的场景配置请求，确定所述目标音效的声音中心位置包括：
响应所述人机交互模块输入的场景配置请求，抛出可视化配置界面，所述可视化配置界面至少包括车辆空间特征以及用于指示声音中心位置的光标；
响应用户对所述光标进行的操作，确定所述光标与所述车辆空间特征的相对位置关系；
根据所述光标与所述车辆空间特征的相对位置关系，确定所述目标音效的声音中心在真实车辆空间中的位置。
8.根据权利要求7所述的声音场景模拟方法，其特征在于，所述响应用户对所述光标进行的操作，确定所述光标与所述车辆空间特征的相对位置包括：
当用户拖动所述光标时，记录所述光标的移动路径，根据所述光标的移动路径确定所述声音中心位置随时间变化的规律。
9.根据权利要求1所述的声音场景模拟方法，其特征在于，当获取目标场景的激活事件后，有媒体音正在播放时，则将所述多个通道的音频数据分别与各通道的媒体音进行混音后发送至各扬声器进行播放。
10.一种声音场景模拟装置，其特征在于，包括：
场景激活模块，用于获取目标场景的激活事件；
声音调用模块，用于根据所述目标场景的激活事件从预设场景库中获取与所述目标场景对应的声音场景数据，所述声音场景数据包括与车辆的多个扬声器一一对应的多个通道的音频数据；
声音输出模块，用于将各通道的所述音频数据分别发送至各自对应的扬声器进行播放，以模拟所述目标场景的音效。
11.根据权利要求10所述的声音场景模拟装置，其特征在于，所述场景激活模块包括：
信息获取模块，用于获取车辆实时状态信息，所述车辆实时状态信息至少包括时间信息位置信息和行驶状态信息中的一种或几种；
判断模块，用于根据预设配置规则对所述车辆实时状态信息进行比对，获得对应的目标场景，所述预设配置规则包括场景与车辆状态信息之间的对应关系；根据比对获得的目标场景生成对应的激活事件。。
12.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至9中任一项所述方法的步骤。
13.一种计算机可读存储介质，其上存储于计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至9中任一项所述方法的步骤。
14.一种车辆，其特征在于，包括权利要求10或11所述的声音场景模拟装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210513927.XA CN117093176A (zh) | 2022-05-12 | 2022-05-12 | 声音场景模拟方法、装置、设备、存储介质及车辆 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210513927.XA CN117093176A (zh) | 2022-05-12 | 2022-05-12 | 声音场景模拟方法、装置、设备、存储介质及车辆 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117093176A true CN117093176A (zh) | 2023-11-21 |
Family
ID=88782307
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210513927.XA Pending CN117093176A (zh) | 2022-05-12 | 2022-05-12 | 声音场景模拟方法、装置、设备、存储介质及车辆 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117093176A (zh) |
-
2022
- 2022-05-12 CN CN202210513927.XA patent/CN117093176A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7324005B2 (ja) | 車両ノイズマスキングのためのシステム及び方法 | |
| US9445169B2 (en) | Sound reproduction device including auditory scenario simulation | |
| CN109257682B (zh) | 拾音调节方法、控制终端及计算机可读存储介质 | |
| EP3687190B1 (en) | Mapping virtual sound sources to physical speakers in extended reality applications | |
| US20200186912A1 (en) | Audio headset device | |
| CN106910510A (zh) | 车载功放设备、车辆及其音频播放处理方法 | |
| CN108737930B (zh) | 车辆导航系统中的可听提示 | |
| KR102166703B1 (ko) | 차량용 독립 음장 형성 장치 및 차량용 독립 음장 형성 방법 | |
| JP2007010810A (ja) | 車室内音場制御装置 | |
| CN112937432A (zh) | 车辆发声装置的控制方法、装置、设备及存储介质 | |
| US20230104111A1 (en) | Determining a virtual listening environment | |
| CN114103850A (zh) | 一种实现汽车主动声增强的系统 | |
| CN114312558A (zh) | 一种用于在汽车上实现低速提示音avas和主动声增强ase的系统 | |
| CN110789478B (zh) | 车载音响参数辅助调节方法、装置以及音频处理器 | |
| CN111402879A (zh) | 车辆导航提示语音控制方法、装置、设备及介质 | |
| CN109104674B (zh) | 面向听音者的声场重建方法、音频设备、存储介质及装置 | |
| US20170289687A1 (en) | Headset enabling extraordinary hearing | |
| CN117093176A (zh) | 声音场景模拟方法、装置、设备、存储介质及车辆 | |
| CN115103292A (zh) | 虚拟场景中的音频处理方法、装置、电子设备及存储介质 | |
| US10536795B2 (en) | Vehicle audio system with reverberant content presentation | |
| CN114379468B (zh) | 车辆声音自适应调节方法、装置、设备及存储介质 | |
| JP3129623B2 (ja) | 覚醒維持装置 | |
| JP7474548B2 (ja) | オーディオデータの再生の制御 | |
| KR102650763B1 (ko) | 오디오 소스 지향성에 기초한 심리음향 강화 | |
| CN115061088A (zh) | 游戏中发声体位置的提示方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |