CN113220123A - 一种音效控制的方法、装置、电子设备及存储介质 - Google Patents
一种音效控制的方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113220123A CN113220123A CN202110505912.4A CN202110505912A CN113220123A CN 113220123 A CN113220123 A CN 113220123A CN 202110505912 A CN202110505912 A CN 202110505912A CN 113220123 A CN113220123 A CN 113220123A
- Authority
- CN
- China
- Prior art keywords
- sound effect
- current environment
- equipment
- environment type
- effect control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000694 effects Effects 0.000 title claims abstract description 204
- 238000000034 method Methods 0.000 title claims abstract description 93
- 230000003190 augmentative effect Effects 0.000 claims abstract description 8
- 230000008569 process Effects 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012549 training Methods 0.000 claims description 7
- 230000009471 action Effects 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 abstract description 13
- 230000000875 corresponding effect Effects 0.000 description 51
- 230000001276 controlling effect Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000002372 labelling Methods 0.000 description 3
- 238000011960 computer-aided design Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 230000002079 cooperative effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Remote Sensing (AREA)
- Computer Hardware Design (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开提供了一种音效控制的方法、装置、电子设备及存储介质，其中，该方法包括：获取增强现实AR设备采集的真实场景图像；根据真实场景图像，确定AR设备所处的当前环境类型；基于AR设备所处的当前环境类型，生成AR音效数据；根据AR音效数据，进行AR场景下的声音播放。本公开实施例由于播放的声音是结合当前环境类型所确定的，因而更为符合真实场景图像所呈现的视觉效果，从而达到了AR场景下视觉和听觉的统一，提升了AR应用的服务质量。
Description
技术领域
本公开涉及计算机应用技术领域，具体而言，涉及一种音效控制的方法、装置、电子设备及存储介质。
背景技术
增强现实(Augmented Reality，AR)技术作为一种根据实时计算的摄像机影像的位置及角度，在影像上叠加相应的图像、视频、三维(3-Dimensional，3D)模型以实现虚拟世界与现实世界融合的技术，从视觉上将用户体验提升到了一个新高度。
目前，用户处于沉浸式AR场景中可以感受到周围的真实场景，然而，听到的却是AR的背景音频。如果AR的背景音频与周围真实环境冲突，则用户会产生视觉和听觉的冲突感，降低体验。
发明内容
本公开实施例至少提供一种音效控制的方案，结合AR设备所处的当前环境进行音效控制，实现了视听统一，提升了AR应用的服务质量。
主要包括以下几个方面：
第一方面，本公开实施例提供了一种音效控制的方法，所述方法包括：
获取增强现实AR设备采集的真实场景图像；
根据所述真实场景图像，确定所述AR设备所处的当前环境类型；
基于所述AR设备所处的当前环境类型，生成AR音效数据；
根据所述AR音效数据，进行AR场景下的声音播放。
采用上述音效控制的方法，其首先可以根据AR设备采集的真实场景图像确定AR设备所处的当前环境类型，这里的环境类型例如可以是嘈杂环境等，这样，基于所处的当前环境类型，可以生成对应的AR音效数据，例如，对于嘈杂环境，可以生成更高音量的音效数据进而进行声音播放，上述音效控制的方法，由于播放的声音是结合当前环境类型所确定的，因而更为符合真实场景图像所呈现的视觉效果，从而达到了AR场景下视觉和听觉的统一，提升了AR应用的服务质量。
在一种可能的实施方式中，所述根据所述真实场景图像，确定所述AR设备所处的当前环境类型，包括：
根据所述真实场景图像，以及预先构建的三维场景地图，确定所述AR设备在所述三维场景地图中的位置信息；
基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型。
这里，首先确定AR设备在三维场景地图中的位置信息，这样，基于三维场景地图所预先标注的相关信息(例如POI)即可以确定AR设备在当前位置所处的当前环境类型，这主要是考虑到利用预先标注的信息可以确定与真实环境相关的信息，进而使得确定的环境类型更为符合AR体验的真实视觉效果。
在一种可能的实施方式中，所述基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型，包括：
基于所述AR设备在所述三维场景地图中的位置信息，从所述三维场景地图包括的各个兴趣点POI中查找与所述位置信息对应的目标POI；
基于所述目标POI的属性信息，确定所述AR设备所处的当前环境类型。
在一种可能的实施方式中，所述AR场景为AR导航场景，所述确定所述AR设备在所述三维场景地图中的位置信息之后，还包括：
基于所述AR设备在所述三维场景地图中的位置信息，以及AR设备与虚拟导航员之间的预设位置关系，确定虚拟导航员在所述三维场景地图中的位置信息；
根据所述虚拟导航员在所述三维场景地图中的位置信息，通过所述AR设备展示AR场景图像。
本公开实施例提供的音效控制的方法可以应用于AR导航场景，这样，基于AR设备与虚拟导航员之间的预设位置关系，以及AR设备的位置信息，即可以确定虚拟导航员的位置信息，进而可以呈现带有虚拟导航员的AR场景图像。
在一种可能的实施方式中，所述根据所述AR音效数据，进行AR场景下的声音播放，包括：
在通过所述AR设备展示AR场景图像的过程中，控制所述虚拟导航员按照预设的动画数据执行目标口型动作，并播报所述AR音效数据。
这里，基于AR场景图像的展示，可以使得播报的声音与口型动作相配合，整个AR场景更为逼真。
在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：
基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式；
按照所述音效控制方式，以及预设的音效数据，确定调整后的音效数据，将所述调整后的音效数据作为所述AR音效数据。
这里，首先可以确定与当前环境类型匹配的音效控制方式，然后基于音效控制方式进行音效数据的调整，调整后的音效数据更为符合真实环境，进一步提升视听统一的体验度。
在一种可能的实施方式中，所述音效控制方式包括：控制音量、进度音乐类型中的一种或多种。
在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：
将所述AR设备所处的当前环境类型输入训练好的音效控制模型中，得到与所述当前环境类型匹配的音效控制方式；
其中，所述音效控制模型由各个环境类型以及每个所述环境类型所匹配的预设音效控制方式训练得到。
这里，可以基于训练好的音效控制模块快速的确定与AR设备所处的当前环境类型匹配的音效控制方式。
在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：
获取所述AR设备对应的AR用户属性信息；
基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。
这里，可以结合AR用户属性信息来确定音效控制方式，进一步提升AR音效体验。
在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：
基于预设的不同的环境类型分别对应的音效数据，确定与所述AR设备所处的当前环境类型匹配的所述AR音效数据。
第二方面，本公开实施例还提供了一种音效控制的装置，所述装置包括：
获取模块，用于获取增强现实AR设备采集的真实场景图像；
确定模块，用于根据所述真实场景图像，确定所述AR设备所处的当前环境类型；
生成模块，用于基于所述AR设备所处的当前环境类型，生成AR音效数据；
控制模块，用于根据所述AR音效数据，进行AR场景下的声音播放。
第三方面，本公开实施例还提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，所述处理器用于执行所述存储器中存储的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面及其各种实施方式任一项所述的音效控制的方法的步骤。
第四方面，本公开实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被电子设备运行时，所述电子设备执行如第一方面及其各种实施方式任一项所述的音效控制的方法的步骤。
关于上述音效控制的装置、电子设备、及计算机可读存储介质的效果描述参见上述音效控制的方法的说明，这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例一所提供的一种音效控制的方法的流程图；
图2示出了本公开实施例一所提供的音效控制的方法中，确定当前环境类型具体方法的流程图；
图3示出了本公开实施例二所提供的一种音效控制的装置的示意图；
图4示出了本公开实施例三所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
经研究发现，目前，用户处于沉浸式AR场景中可以感受到周围的真实场景，然而，听到的却是AR的背景音频。如果AR的背景音频与周围真实环境冲突，则用户会产生视觉和听觉的冲突感，降低体验。
基于上述研究，本公开至少提供一种音效控制的方案，结合AR设备所处的当前环境进行音效控制，实现了视听统一，提升了AR应用的服务质量。
针对以上方案所存在的缺陷，均是发明人在经过实践并仔细研究后得出的结果，因此，上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案，都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种音效控制的方法进行详细介绍，本公开实施例所提供的音效控制的方法的执行主体一般为具有一定计算能力的电子设备，该电子设备例如包括：终端设备或服务器或其它处理设备，比如可以是与(Augmented Reality，AR)设备连接的服务器，AR设备比如可以包括AR眼镜、平板电脑、智能手机、智能穿戴式设备等具有显示功能和数据处理能力的设备，AR设备可以通过应用程序连接服务器。在一些可能的实现方式中，该音效控制的方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
下面以执行主体为服务器为例对本公开实施例提供的音效控制的方法加以说明。
实施例一
参见图1所示，为本公开实施例提供的音效控制的方法的流程图，方法包括步骤S101～S104，其中：
S101、获取增强现实AR设备采集的真实场景图像；
S102、根据真实场景图像，确定AR设备所处的当前环境类型；
S103、基于AR设备所处的当前环境类型，生成AR音效数据；
S104、根据AR音效数据，进行AR场景下的声音播放。
这里，为了便于理解本公开实施例提供的音效控制的方法，现首先对该音效控制的方法的应用场景进行详细说明。本公开实施例提供的音效控制方法可以应用于AR导航、AR游戏、或者其它需要配合音效进行AR场景展示的相关领域中。考虑到相关技术中，针对沉浸式AR场景可以是预先设置好AR背景音频，这样，一旦预设好的AR背景音频与周围真实环境相冲突，用户的视觉和听觉将产生极大的冲突感，例如，在周围真实环境是处于医院的情况下，预设好的背景音频是动感音乐，这将很大程度上降低AR场景下的用户体验。
正是为了解决上述问题，本公开实施例才提供了一种音效控制的方法，该方法结合AR设备所处的当前环境进行音效控制，实现了视听统一，提升了AR应用的服务质量。
本公开实施例中的真实场景图像可以是利用AR设备所拍摄的图像，该图像在AR设备所呈现的AR场景图像中可以是被直接叠加的。这样，基于获取的真实场景图像可以确定AR设备所处的当前环境类型。本公开实施例中，一方面可以基于预先训练好的环境识别模型来对真实场景图像进行环境识别，而后基于环境识别结果来确定AR设备所处的当前环境类型，这里的环境识别模型可以是基于真实场景图像样本及其环境类别的预先标注信息所训练得到的；另一方面，本公开实施例还可以结合真实场景图像以及预先构建的三维场景地图来确定AR设备所处的当前环境类型，这主要是考虑到针对三维场景地图可以预先进行逐个位置的兴趣点(Point of Interest，POI)标注，这样，一旦在确定AR设备的位置信息，即可以基于上述POI标注来确定AR设备所处的当前环境类型。例如，可以是在确定AR设备落入图书馆这一POI所处位置范围时，可以确定当前环境类型为安静型类型。
需要说明的是，本公开实施例中可以按照不同的划分方式来实现环境类型的划分。例如，可以划分为安静型环境和嘈杂型环境，还可以划分为室内环境和室外环境，还可以划分为对安全性要求较高的环境和一般安全性要求的环境，除此之外，还可以按照其它划分方式进行环境类型的划分，本公开实施例对此不做具体的限制。
在按照上述方式确定AR设备所处的当前环境类型的情况下，可以生成AR音效数据以根据该AR音效数据进行AR场景下的声音播放。
其中，上述AR音效数据可以包括有关播放的声音信息，还可以包括针对播放的声音所相关的属性信息，例如，播放的声音大小，播放的声音类型(男生声音或女士声音等)，还可以包括其它与播放效果相关的属性信息，本公开实施例对此不做具体的限制。
本公开实施例中，一方面可以直接基于当前环境类型来确定AR音效数据，另一方面还可以先基于当前环境类型确定音效控制方式，而后基于音效控制方法来确定AR音效数据。接下来通过如下两个方面分别进行描述。
第一方面：本公开实施例提供的音效控制的方法可以基于预设的不同的环境类型分别对应的音效数据，确定与AR设备所处的当前环境类型匹配的AR音效数据。
这里，可以预先设置好环境类型与音效数据之间的对应关系，这样，在确定AR设备所处的当前环境类型的情况下，即可以基于上述对应关系，确定对应的音效数据。
这里，仍以图书馆所对应的安静型环境作为当前环境类型为例，可以确定该当前环境类型所对应的音效数据为较低音量的声音播放。同理，在确定当前环境类型为嘈杂类环境的情况下，可以确定该当前环境类型所对应的音效数据为较高音量的声音播放，以确保在嘈杂的AR场景下，也能够清楚的听到AR音频，提升AR场景下的听觉体验。
第二方面：本公开实施例提供的音效控制的方法还可以按照如下步骤生成AR音效数据：
步骤一、基于AR设备所处的当前环境类型，确定与当前环境类型匹配的音效控制方式；
步骤二、按照音效控制方式，以及预设的音效数据，确定调整后的音效数据，将调整后的音效数据作为AR音效数据。
这里，首先可以先基于AR设备所处的当前环境类型确定与该当前环境类型匹配的音效控制方式，进而可以按照这一音效控制方式以及预设的音效数据来确定AR音效数据。
其中，上述有关当前环境类型所匹配的音效控制方式，可以是基于各环境类型与各音效控制方式之间的对应关系来确定。这里仍以图书馆所对应的安静型环境作为当前环境类型为例，在确定该当前环境类型为安静型的情况下，可以确定一个更小的音效播放音量，例如，在满格音量为10的情况下，可以调整音效数据的播放音量在5格以下。同理，为了确定在嘈杂环境下也能很好的进行AR场景体验，这里，可以确定一个更大的音效播放音量，例如，在满格音量为10的情况下，可以调整音效数据的播放音量在5格以上。
本公开实施例中提供的音效控制的方法中的音效控制方式不仅可以控制音效数据的播放音量，还可以对应变换不同的音乐类型，例如，在AR游戏场景中，可以基于不同的环境类型，确定不同的游戏背景音乐(Background music，BGM)的音乐类型，例如，可以是节奏比较快的音乐类型。
另外，本公开实施例中的音效控制方法还可以控制音效数据的播放进度，例如可以快进1倍播放，以满足不同的音效控制需求。
除此之外，本公开实施例还可以基于训练好的音效控制模型自动确定上述AR设备所处的当前环境类型匹配的音效控制方式。
这里的音效控制模型训练的可以是环境类型与音效控制方式之间的对应关系，也即，针对每个环境类型可以预先从多种预设音效控制方式中确定所匹配的预设音效控制方式，通过多轮模型训练可以训练得到音效控制模型的模型参数。这样，在确定AR设备所处的当前环境类型的情况下，将当前环境类型输入到训练好的音效控制模型中，即可得到当前环境类型匹配的音效控制方式。
本公开实施例中，还可以结合AR用户属性信息确定音效控制方式，具体可以通过如下步骤来实现：
步骤一、获取所述AR设备对应的AR用户属性信息；
步骤二、基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。
这里的AR用户属性信息对应的是持有AR设备的用户的相关属性信息，例如，可以是包括年龄、职业等在内的基本信息，还可以是包括AR体验得分等在内的个人信息，还可以是包括音乐喜好在内的个性化信息。
在确定AR用户属性信息的情况下，可以结合AR设备所处的当前环境类型确定对应的音效控制方式。对于同处在一个环境类型的两个AR用户而言，由于其属性信息不同，这里所确定的音效控制方式也可以不同，从而提升了音效控制方式的多样化，使得各种用户均可以享有良好的AR音效体验。
考虑到当前环境类型的确定过程对本公开实施例提供的音效控制的方法的关键作用，接下来可以具体阐述有关确定当前环境类型的过程。
如图2所示，可以按照如下步骤确定AR设备所处的当前环境类型：
S201、根据真实场景图像，以及预先构建的三维场景地图，确定AR设备在三维场景地图中的位置信息；
S202、基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型。
这里，首先可以确定AR设备在三维场景地图中的位置信息，然后基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型。
其中，本公开实施例中有关AR设备在三维场景地图中的位置信息可以是结合同步定位与地图构建(Simultaneous Localization and Mapping，SLAM)以及视觉定位来确定。这里，可以通过视觉定位获取到AR设备在重建的三维空间中的当前位置，然后通过SLAM实时更新相对当前位置所产生的位置偏移的距离以及对应的方位，这样，结合实时偏移量即可以实时更新AR设备在三维空间中的位置信息。
在具体应用中，一方面可以获取构建三维场景地图所采用的参照AR设备所经过的各个设备位置，以及在每个设备位置处拍摄真实场景图像所对应三维场景子地图匹配的多个地图位置点，这里的三维场景地图可以由各个设备位置所对应的三维场景子地图拼接而成，另一方面可以针对获取到的真实场景图像，确定与真实场景图像对应的三维场景子地图。这样，在从三维场景地图所包括的各个地图位置点中，查找到与获取的真实场景图像对应的三维场景子地图相匹配的地图位置点的情况下，即可以确定与查找到的地图位置点对应的设备位置，基于这一设备位置的信息，即可以确定AR设备在三维场景地图中的位置信息。
需要说明的是，考虑到不同AR设备在进行真实场景图像拍摄的过程中，其携带的拍摄装置的相关参数(如拍摄角度)可能并不相同，这里，可以利用参照AR设备所构建的三维场景地图来实现当前AR设备的位置信息的确定。
在具体应用中，可以首先选取一个目标对象，同一目标对象在参照AR设备所对应的设备位置所建立的三维场景地图以及当前AR设备所采集的三维场景子地图中的相关信息是一致的，然后再基于目标对象在参照AR设备所拍摄的真实场景图像以及当前AR设备所拍摄的真实场景图像中的坐标位置，确定参照AR设备所拍摄真实场景图像所在图像坐标系与AR设备所拍摄真实场景图像所在图像坐标系之间的转换关系，确定当前AR设备与参照AR设备之间的相对位姿，这样，在参照AR设备的位姿一定的情况下，即可以确定出当前AR设备的位姿信息。
本公开实施例提供的音效控制的方法中的三维场景地图还可以按照下列步骤来确定：
步骤一、获取多张真实场景图像样本；
步骤二、基于多张真实场景图像样本，构建表征目标场景的初始三维场景模型；
步骤三、将构建的初始三维场景模型上的标定特征点与目标场景对应的标定特征点进行对齐，生成三维场景地图。
本公开实施中，可以预先通过对一个目标场景，比如一个室内环境机型多角度拍摄，得到该目标场景对应的大量真实场景图像样本。这样，基于多张真实场景图像样本，可以生成目标场景对应的初始三维场景模型。
这里，首先可以从获取的每张真实场景图像样本中提取多个特征点，然后基于提取的多个特征点，以及预存的与目标场景匹配的三维样本图，生成初始三维场景模型；其中，三维样本图为预存储的表征目标场景形貌特征的三维图。
具体地，针对每张真实场景图像样本提取的特征点可以为能够表征该张真实场景图像样本关键信息的点，比如针对包含家电(如空调设备)的真实场景图像样本，这里的特征点可以表示空调设备轮廓信息的特征点。
这里预存的与目标场景的三维样本图可以包括提前设置好的能够表征该目标场景形貌特征、且带有尺寸标注的三维图，比如可以是表征该目标场景形貌特征的计算机辅助设计(Computer Aided Design，CAD)三维图。
针对该目标场景，当提取的特征点足够多时，特征点构成的特征点云，可以构成表征该目标场景的三维模型。这里将特征点云与带有尺度标注的且能够表征该目标场景形貌特征的三维图对齐后，即得到该目标场景对应的初始三维场景模型。
考虑到生成的初始三维模型可能会存在失真现象，因而可以通过目标场景中的标定特征点和初始三维场景模型上的标定特征点来完成对齐过程，从而可以得到准确度较高的三维场景模型。
本公开实施例中，首先可以在目标场景对应的初始三维场景模型中提取用于表征目标场景多个空间位置点的标定特征点，而后确定标定特征点在目标场景对应的真实二维地图中的真实坐标数据，并基于每个标定特征点对应的真实坐标数据，调整初始三维场景模型中各个特征点的坐标数据。
这里，可以选择一些表征物体边缘的特征点作为标定特征点，基于标定特征点对应的真实坐标数据以及该标定特征点在初始三维场景模型中的坐标数据，确定坐标数据调整量，然后基于该坐标数据调整量对初始三维模型中各个特征点的坐标数据进行修正，即可以得到准确度较高的三维场景地图。
构建完成表征目标场景的三维场景地图后，可以基于AR设备拍摄的真实场景图像和该三维场景地图对AR设备进行定位，确定AR设备的位置信息时，具体可以通过如下步骤：
步骤一、提取真实场景图像包含的特征点，以及提取预先构建三维场景地图时的每张真实场景图像样本的特征点；
步骤二、基于真实场景图像对应的特征点以及预先构建三维场景地图时的每张真实场景图像样本对应的特征点，确定与真实场景图像相似度最高的真实场景图像样本；
步骤三、基于真实场景图像样本对应的拍摄位姿数据，确定AR设备的位置信息。
本公开实施例中，可以按照如下步骤确定AR设备的位置信息：
步骤一、确定真实场景图像样本中的目标对象和真实场景图像中的目标对象之间的相对位姿数据；
步骤二、基于相对位姿数据和真实场景图像样本对应的拍摄位姿数据，确定AR设备的位置信息。
这里，与真实场景图像的相似度最高的真实场景图像样本中包含的目标对象与真实场景图像中包含的目标对象为相同的目标对象，比如真实场景图像中包含的目标对象为建筑物A，真实场景图像样本中包含的目标对象也为建筑物A，这样可以通过确定真实场景图像中的建筑物A和真实场景图像样本中的建筑物A之间的相对位姿数据，确定出用户设备在拍摄真实场景图像和拍摄真实场景图像样本时的相对拍摄位姿数据，进一步可以基于该相对拍摄位姿数据和真实场景图像样本对应的拍摄位姿数据，确定出AR设备的位置信息。
另外，考虑到真实场景图像并非实时采集的，一般情况下是按照设定时间间隔采集的，另外，基于真实场景图像和三维场景地图进行定位的方式功耗较大，因此在对AR设备进行定位，确定AR设备的位置信息的过程中，可以将基于真实场景图像的视觉定位和惯性测量单元(Inertial measurement unit，IMU)定位方式结合使用。
在具体应用中，可以按照视觉定位周期性地确定AR设备的位姿数据，中间过程通过IMU进行定位，比如，每隔10秒通过视觉方式进行定位，则从AR设备开始工作后的初始位姿数据、第10秒、第20秒、第30秒的位姿数据是基于视觉定位得到的，针对第1秒的位姿数据可以是基于初始位姿数据以及从初始时刻到第1秒过程中AR设备的IMU采集的数据预估得到的，同样，第2秒的位姿数据可以是基于第1秒的位姿数据和从第1秒到第2秒过程中AR设备的IMU采集的数据预估得到的，随着时间的积累，基于IMU定位方式得到的位姿数据不再准确时，可以通过视觉定位方式进行修正，得到准确度较高的位姿数据(包含AR设备的位置信息)。
本公开实施例在确定AR设备在三维场景地图中的位置信息的情况下，可以从三维场景地图包括的各个POI中查找与位置信息对应的目标POI，然后，即可以基于查找到的目标POI的属性信息，确定AR设备所处的当前环境类型。
也即，本公开实施例中，可以对预先构建的三维场景地图进行POI标注，一旦查找到与AR设备所处的位置信息对应的目标POI，即可以确定AR设备所处的当前环境类型。例如，在确定目标POI指向的是图书馆时，可以基于该图书馆对应的属性信息，确定AR设备所处的当前环境类型为安静型。
本公开实施例中，针对不同的应用场景，在AR设备中所展示出的AR场景图像也不同。考虑到AR导航场景中所对应的虚拟导航员在室内展览馆等场景下进行可视化导览的广泛应用，接下来可以以虚拟导航员所在AR导航场景的呈现过程进行具体说明，上述呈现AR导航场景的过程可以通过如下步骤实现：
步骤一、基于AR设备在三维场景地图中的位置信息，以及AR设备与虚拟导航员之间的预设位置关系，确定虚拟导航员在三维场景地图中的位置信息；
步骤二、根据虚拟导航员在三维场景地图中的位置信息，通过AR设备展示AR场景图像。
本公开实施例中，在确定AR设备在三维场景地图中的位置信息的情况下，可以确定虚拟导航员在三维场景地图中的位置信息。这主要是考虑到在构建虚拟导航员的过程中，往往需要参考AR设备所属用户的位置信息，也即，在确定AR设备与虚拟导航员之间预设的相对位置关系、以及AR设备的位置信息的情况下，可以确定虚拟导航员的位置信息。
在具体应用中，可以针对上述预设的相对位置关系进行设置，例如，可以将虚拟导航员设置在AR设备前方1米位置处，这样，虚拟导航员即可以进行导航引导，再如，还可以将虚拟导航员设置在AR设备后方1米位置处，也即，虚拟导航员可以进行跟随陪护，随时提供导航辅助工作，除此之外，本公开实施例还可以将AR设备所在位置设置为虚拟导航员的位置，也即，虚拟导航员可以作为用户在三维空间内匹配的虚拟人物，以提升AR沉浸体验度，进一步提升AR服务质量。
为了进一步提升AR导航场景的逼真性，本公开实施例提供的音效控制的方法在通过AR设备展示AR场景图像的过程中，可以控制虚拟导航员按照预设的动画数据执行目标口型动作，并播报AR音效数据。例如，可以设置间隔的张嘴与闭嘴配合动作来执行AR音效数据的播报。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思，本公开实施例中还提供了与音效控制的方法对应的音效控制的装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述音效控制的方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
实施例二
参照图3所示，为本公开实施例提供的一种音效控制的装置的示意图，装置包括：获取模块301、确定模块302、生成模块303和控制模块304；其中，
获取模块301，用于获取增强现实AR设备采集的真实场景图像；
确定模块302，用于根据真实场景图像，确定AR设备所处的当前环境类型；
生成模块303，用于基于AR设备所处的当前环境类型，生成AR音效数据；
控制模块304，用于根据AR音效数据，进行AR场景下的声音播放。
采用上述音效控制的装置，其首先可以根据AR设备采集的真实场景图像确定AR设备所处的当前环境类型，这里的环境类型例如可以是嘈杂环境等，这样，基于所处的当前环境类型，可以生成对应的AR音效数据，例如，对于嘈杂环境，可以生成更高音量的音效数据进而进行声音播放，上述音效控制的装置，由于播放的声音是结合当前环境类型所确定的，因而更为符合真实场景图像所呈现的视觉效果，从而达到了AR场景下视觉和听觉的统一，提升了AR应用的服务质量。
在一种可能的实施方式中，确定模块302，用于按照以下步骤根据真实场景图像，确定AR设备所处的当前环境类型：
根据真实场景图像，以及预先构建的三维场景地图，确定AR设备在三维场景地图中的位置信息；
基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型。
在一种可能的实施方式中，确定模块302，用于按照以下步骤基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型：
基于AR设备在三维场景地图中的位置信息，从三维场景地图包括的各个兴趣点POI中查找与位置信息对应的目标POI；
基于目标POI的属性信息，确定AR设备所处的当前环境类型。
在一种可能的实施方式中，AR场景为AR导航场景，上述装置还包括：
展示模块305，用于确定AR设备在三维场景地图中的位置信息之后，基于AR设备在三维场景地图中的位置信息，以及AR设备与虚拟导航员之间的预设位置关系，确定虚拟导航员在三维场景地图中的位置信息；根据虚拟导航员在三维场景地图中的位置信息，通过AR设备展示AR场景图像。
在一种可能的实施方式中，控制模块304，用于按照以下步骤根据AR音效数据，进行AR场景下的声音播放：
在通过AR设备展示AR场景图像的过程中，控制虚拟导航员按照预设的动画数据执行目标口型动作，并播报AR音效数据。
在一种可能的实施方式中，生成模块303，用于按照以下步骤基于AR设备所处的当前环境类型，生成AR音效数据：
基于AR设备所处的当前环境类型，确定与当前环境类型匹配的音效控制方式；
按照音效控制方式，以及预设的音效数据，确定调整后的音效数据，将调整后的音效数据作为AR音效数据。
在一种可能的实施方式中，音效控制方式包括：控制音量、进度、音乐类型中的一种或多种。
在一种可能的实施方式中，生成模块303，用于按照以下步骤基于AR设备所处的当前环境类型，确定与当前环境类型匹配的音效控制方式：
将AR设备所处的当前环境类型输入训练好的音效控制模型中，得到与当前环境类型匹配的音效控制方式；
其中，音效控制模型由各个环境类型以及每个环境类型所匹配的预设音效控制方式训练得到。
在一种可能的实施方式中，生成模块303，用于按照以下步骤基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式：
获取所述AR设备对应的AR用户属性信息；
基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。
在一种可能的实施方式中，生成模块303，用于按照以下步骤基于AR设备所处的当前环境类型，生成AR音效数据：
基于预设的不同的环境类型分别对应的音效数据，确定与AR设备所处的当前环境类型匹配的AR音效数据。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
实施例三
本公开实施例还提供了一种电子设备，如图4所示，为本公开实施例提供的电子设备结构示意图，包括：处理器401、存储器402、和总线403。存储器402存储有处理器401可执行的机器可读指令(比如，图3中的音效控制的装置中获取模块、确定模块、生成模块以及控制模块对应的执行指令等)，当电子设备运行时，处理器401与存储器402之间通过总线403通信，机器可读指令被处理器401执行时执行如下处理：
获取增强现实AR设备采集的真实场景图像；
根据真实场景图像，确定AR设备所处的当前环境类型；
基于AR设备所处的当前环境类型，生成AR音效数据；
根据AR音效数据，进行AR场景下的声音播放。
在一种可能的实施方式中，上述处理器401执行的指令中，根据真实场景图像，确定AR设备所处的当前环境类型，包括：
根据真实场景图像，以及预先构建的三维场景地图，确定AR设备在三维场景地图中的位置信息；
基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型。
在一种可能的实施方式中，上述处理器401执行的指令中，基于AR设备在三维场景地图中的位置信息，以及三维场景地图，确定AR设备所处的当前环境类型，包括：
基于AR设备在三维场景地图中的位置信息，从三维场景地图包括的各个兴趣点POI中查找与位置信息对应的目标POI；
基于目标POI的属性信息，确定AR设备所处的当前环境类型。
在一种可能的实施方式中，AR场景为AR导航场景，确定AR设备在三维场景地图中的位置信息之后，上述处理器401执行的指令还包括：
基于AR设备在三维场景地图中的位置信息，以及AR设备与虚拟导航员之间的预设位置关系，确定虚拟导航员在三维场景地图中的位置信息；
根据虚拟导航员在三维场景地图中的位置信息，通过AR设备展示AR场景图像。
在一种可能的实施方式中，上述处理器401执行的指令中，根据AR音效数据，进行AR场景下的声音播放，包括：
在通过AR设备展示AR场景图像的过程中，控制虚拟导航员按照预设的动画数据执行目标口型动作，并播报AR音效数据。
在一种可能的实施方式中，上述处理器401执行的指令中，基于AR设备所处的当前环境类型，生成AR音效数据，包括：
基于AR设备所处的当前环境类型，确定与当前环境类型匹配的音效控制方式；
按照音效控制方式，以及预设的音效数据，确定调整后的音效数据，将调整后的音效数据作为AR音效数据。
在一种可能的实施方式中，音效控制方式包括：控制音量、进度、音乐类型中的一种或多种。
在一种可能的实施方式中，上述处理器401执行的指令中，基于AR设备所处的当前环境类型，确定与当前环境类型匹配的音效控制方式，包括：
将AR设备所处的当前环境类型输入训练好的音效控制模型中，得到与当前环境类型匹配的音效控制方式；
其中，音效控制模型由各个环境类型以及每个环境类型所匹配的预设音效控制方式训练得到。
在一种可能的实施方式中，上述处理器401执行的指令中，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：
获取所述AR设备对应的AR用户属性信息；
基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。
在一种可能的实施方式中，上述处理器401执行的指令中，基于AR设备所处的当前环境类型，生成AR音效数据，包括：
基于预设的不同的环境类型分别对应的音效数据，确定与AR设备所处的当前环境类型匹配的AR音效数据。
上述指令的具体执行过程可以参考本公开实施例一中所述的音效控制的方法的步骤，此处不再赘述。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例一中所述的音效控制的方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例一所提供的音效控制的方法的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行上述方法实施例一中所述的音效控制的方法的步骤，具体可参见上述方法实施例，在此不再赘述。
本公开实施例还提供一种计算机程序，该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software DevelopmentKit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台电子设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。
Claims (13)
1.一种音效控制的方法，其特征在于，所述方法包括：
获取增强现实AR设备采集的真实场景图像；
根据所述真实场景图像，确定所述AR设备所处的当前环境类型；
基于所述AR设备所处的当前环境类型，生成AR音效数据；
根据所述AR音效数据，进行AR场景下的声音播放。
2.根据权利要求1所述的方法，其特征在于，所述根据所述真实场景图像，确定所述AR设备所处的当前环境类型，包括：
根据所述真实场景图像，以及预先构建的三维场景地图，确定所述AR设备在所述三维场景地图中的位置信息；
基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型。
3.根据权利要求2所述的方法，其特征在于，所述基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型，包括：
基于所述AR设备在所述三维场景地图中的位置信息，从所述三维场景地图包括的各个兴趣点POI中查找与所述位置信息对应的目标POI；
基于所述目标POI的属性信息，确定所述AR设备所处的当前环境类型。
4.根据权利要求2或3所述的方法，其特征在于，所述AR场景为AR导航场景，所述确定所述AR设备在所述三维场景地图中的位置信息之后，还包括：
基于所述AR设备在所述三维场景地图中的位置信息，以及所述AR设备与虚拟导航员之间的预设位置关系，确定所述虚拟导航员在所述三维场景地图中的位置信息；
根据所述虚拟导航员在所述三维场景地图中的位置信息，通过所述AR设备展示AR场景图像。
5.根据权利要求4所述的方法，其特征在于，所述根据所述AR音效数据，进行AR场景下的声音播放，包括：
在通过所述AR设备展示AR场景图像的过程中，控制所述虚拟导航员按照预设的动画数据执行目标口型动作，并播报所述AR音效数据。
6.根据权利要求1-5任一所述的方法，其特征在于，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：
基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式；
按照所述音效控制方式，以及预设的音效数据，确定调整后的音效数据，将所述调整后的音效数据作为所述AR音效数据。
7.根据权利要求6所述的方法，其特征在于，所述音效控制方式包括：控制音量、进度、音乐类型中的一种或多种。
8.根据权利要求6所述的方法，其特征在于，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：
将所述AR设备所处的当前环境类型输入训练好的音效控制模型中，得到与所述当前环境类型匹配的音效控制方式；
其中，所述音效控制模型由各个环境类型以及每个所述环境类型所匹配的预设音效控制方式训练得到。
9.根据权利要求6所述的方法，其特征在于，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：
获取所述AR设备对应的AR用户属性信息；
基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。
10.根据权利要求1-5任一所述的方法，其特征在于，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：
基于预设的不同的环境类型分别对应的音效数据，确定与所述AR设备所处的当前环境类型匹配的所述AR音效数据。
11.一种音效控制的装置，其特征在于，所述装置包括：
获取模块，用于获取增强现实AR设备采集的真实场景图像；
确定模块，用于根据所述真实场景图像，确定所述AR设备所处的当前环境类型；
生成模块，用于基于所述AR设备所处的当前环境类型，生成AR音效数据；
控制模块，用于根据所述AR音效数据，进行AR场景下的声音播放。
12.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，所述处理器用于执行所述存储器中存储的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1至10任一项所述的音效控制的方法。
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被电子设备运行时，所述电子设备执行如权利要求1至10任一项所述的音效控制的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110505912.4A CN113220123A (zh) | 2021-05-10 | 2021-05-10 | 一种音效控制的方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110505912.4A CN113220123A (zh) | 2021-05-10 | 2021-05-10 | 一种音效控制的方法、装置、电子设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113220123A true CN113220123A (zh) | 2021-08-06 |
Family
ID=77094311
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110505912.4A Pending CN113220123A (zh) | 2021-05-10 | 2021-05-10 | 一种音效控制的方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113220123A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114443886A (zh) * | 2022-04-06 | 2022-05-06 | 南昌航天广信科技有限责任公司 | 广播音箱的音效调节方法、系统、计算机及可读存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109284080A (zh) * | 2018-09-04 | 2019-01-29 | Oppo广东移动通信有限公司 | 音效调整方法、装置、电子设备以及存储介质 |
| CN109597481A (zh) * | 2018-11-16 | 2019-04-09 | Oppo广东移动通信有限公司 | Ar虚拟人物绘制方法、装置、移动终端及存储介质 |
| CN110738737A (zh) * | 2019-10-15 | 2020-01-31 | 北京市商汤科技开发有限公司 | 一种ar场景图像处理方法、装置、电子设备及存储介质 |
| CN112348969A (zh) * | 2020-11-06 | 2021-02-09 | 北京市商汤科技开发有限公司 | 增强现实场景下的展示方法、装置、电子设备及存储介质 |
| US20210118235A1 (en) * | 2019-10-15 | 2021-04-22 | Beijing Sensetime Technology Development Co., Ltd. | Method and apparatus for presenting augmented reality data, electronic device and storage medium |
-
2021
- 2021-05-10 CN CN202110505912.4A patent/CN113220123A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109284080A (zh) * | 2018-09-04 | 2019-01-29 | Oppo广东移动通信有限公司 | 音效调整方法、装置、电子设备以及存储介质 |
| CN109597481A (zh) * | 2018-11-16 | 2019-04-09 | Oppo广东移动通信有限公司 | Ar虚拟人物绘制方法、装置、移动终端及存储介质 |
| CN110738737A (zh) * | 2019-10-15 | 2020-01-31 | 北京市商汤科技开发有限公司 | 一种ar场景图像处理方法、装置、电子设备及存储介质 |
| US20210118235A1 (en) * | 2019-10-15 | 2021-04-22 | Beijing Sensetime Technology Development Co., Ltd. | Method and apparatus for presenting augmented reality data, electronic device and storage medium |
| CN112348969A (zh) * | 2020-11-06 | 2021-02-09 | 北京市商汤科技开发有限公司 | 增强现实场景下的展示方法、装置、电子设备及存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114443886A (zh) * | 2022-04-06 | 2022-05-06 | 南昌航天广信科技有限责任公司 | 广播音箱的音效调节方法、系统、计算机及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112348969B (zh) | 增强现实场景下的展示方法、装置、电子设备及存储介质 | |
| KR20210047278A (ko) | Ar 장면 이미지 처리 방법, 장치, 전자 기기 및 저장 매체 | |
| CN111640171B (zh) | 一种历史场景的讲解方法、装置、电子设备及存储介质 | |
| CN106484115B (zh) | 用于增强和虚拟现实的系统和方法 | |
| CN111694430A (zh) | 一种ar场景画面呈现方法、装置、电子设备和存储介质 | |
| CN109636919B (zh) | 一种基于全息技术的虚拟展馆构建方法、系统及存储介质 | |
| CN107689082B (zh) | 一种数据投影方法以及装置 | |
| JP2022505998A (ja) | 拡張現実データの提示方法、装置、電子機器及び記憶媒体 | |
| CN105279795A (zh) | 基于3d标记的增强现实系统 | |
| CN111679742A (zh) | 基于ar的交互控制方法、装置、电子设备及存储介质 | |
| CN109035415B (zh) | 虚拟模型的处理方法、装置、设备和计算机可读存储介质 | |
| JP7150894B2 (ja) | Ａｒシーン画像処理方法及び装置、電子機器並びに記憶媒体 | |
| CN114332374A (zh) | 一种虚拟显示方法、设备以及存储介质 | |
| JP2023504608A (ja) | 拡張現実場面における表示方法、装置、機器、媒体及びプログラム | |
| CN111651057A (zh) | 一种数据展示方法、装置、电子设备及存储介质 | |
| CN111667588A (zh) | 人物图像处理方法、装置、ar设备以及存储介质 | |
| CN113359986A (zh) | 增强现实数据展示方法、装置、电子设备及存储介质 | |
| CN112148125A (zh) | 一种ar交互状态控制的方法、装置、设备及存储介质 | |
| CN111651058A (zh) | 历史场景的控制展示方法、装置、电子设备及存储介质 | |
| JP2022507502A (ja) | 拡張現実（ａｒ）のインプリント方法とシステム | |
| CN111494945A (zh) | 虚拟对象处理方法及装置、存储介质、电子设备 | |
| CN113220123A (zh) | 一种音效控制的方法、装置、电子设备及存储介质 | |
| CN112950711A (zh) | 一种对象的控制方法、装置、电子设备及存储介质 | |
| CN113359983A (zh) | 增强现实数据呈现方法、装置、电子设备及存储介质 | |
| CN111599292A (zh) | 一种历史场景的呈现方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210806 |