CN110286773B - 基于增强现实的信息提供方法、装置、设备及存储介质 - Google Patents

基于增强现实的信息提供方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN110286773B
CN110286773B CN201910585850.5A CN201910585850A CN110286773B CN 110286773 B CN110286773 B CN 110286773B CN 201910585850 A CN201910585850 A CN 201910585850A CN 110286773 B CN110286773 B CN 110286773B
Authority
CN
China
Prior art keywords
scene
content
information
image
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910585850.5A
Other languages
English (en)
Other versions
CN110286773A (zh
Inventor
吴正山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201910585850.5A priority Critical patent/CN110286773B/zh
Publication of CN110286773A publication Critical patent/CN110286773A/zh
Application granted granted Critical
Publication of CN110286773B publication Critical patent/CN110286773B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例提供了一种基于增强现实的信息提供方法、装置、设备及存储介质，该方法包括：获取通过图像采集装置采集的现实场景的场景图像；根据场景图像，获取待展示的增强现实AR内容，以及AR内容在场景图像中的展示目标；将AR内容与展示目标融合，以将融合后的内容提供给用户；其中，AR内容是通过以下方式确定的：对场景图像进行识别，得到场景图像的场景信息；基于场景信息，确定与场景信息对应的AR内容。基于本申请实施例所提供的方案，能够为用户提供与用户所在场景相关联的信息，并基于AR技术将该信息展示给用户，有效提升了用户的沉浸感，能够更好的满足实际应用需求。

Description

基于增强现实的信息提供方法、装置、设备及存储介质
技术领域
本申请涉及计算机技术领域，具体而言，本申请涉及一种基于增强现实的信息提供方法、装置、设备及存储介质。
背景技术
随着社会及科学技术的快速发展，人们的生活需求也在不断提高，音乐、视频等多媒体素材已经逐渐成为人们生活中不可或缺的一部分，而对于商场、门店等企业商户而言，为了更好的满足消费者的需求，吸引更多的消费者，通常都会通过播放音乐、视频或者其他宣传内容等来吸引消费者。目前，无论是用户个人还是商家，通常都是通过移动终端、个人电脑、智能电视、音响设备等为消费者播放音乐、视频等素材，虽然这种方式能够在一定程度上满足需求，但是用户无法参与其中，与用户的互动感不足，不能够很好的满足用户需求。
发明内容
为了提升用户感知，更好的满足实际应用需求，本申请实施例提供了一种基于增强现实的信息提供方法、装置、设备及存储介质。本申请实施例所提供的具体技术方案如下：
第一方面，本申请实施例提供了一种基于增强现实的信息提供方法，该方法包括：
获取通过图像采集装置采集的现实场景的场景图像；
根据场景图像，获取待展示的增强现实(AR，Augmented Reality)内容，以及AR内容在场景图像中的展示目标；
将AR内容与展示目标融合，以将融合后的内容提供给用户；
其中，AR内容是通过以下方式确定的：
对场景图像进行识别，得到场景图像的场景信息；
基于场景信息，确定与场景信息对应的AR内容。
可选的，场景信息包括以下至少信息中的一项：
场景类型或场景图像中的对象。
可选的，若AR内容包括音乐素材，该方法还包括：
确定图像采集装置与现实场景中的展示目标的距离；
将融合后的内容提供给用户，包括：
通过音频播放装置播放音乐素材中的音乐，并根据距离的变化控制音乐的播放音量。
可选的，距离越大，播放音量越小。
可选的，距离与播放音量满足以下关系：
其中,volume_d表示播放音量，V0表示最大音量,D(Pcamera,Pmarker)表示距离，T表示距离阈值。
可选的，基于场景信息，确定与场景信息对应的AR内容，包括：
获取用户的操作指令，操作指令中携带有AR内容的指示信息；
根据场景信息和指示信息，确定AR内容。
可选的，展示目标是通过Marker-Based AR技术或Marker-Less AR技术确定的。
第二方面，本申请实施例提供了一种基于增强现实的信息提供装置，该装置包括：
场景图像获取模块，用于获取通过图像采集装置采集的现实场景的场景图像；
AR内容确定模块，用于根据场景图像，获取待展示的AR内容；
AR内容提供模块，用于获取AR内容在场景图像中的展示目标，将AR内容与展示目标融合，将融合后的内容提供给用户；
其中，AR内容是通过以下方式确定的：
对场景图像进行识别，得到场景图像的场景信息；
基于场景信息，确定与场景信息对应的AR内容。
可选的，场景信息包括以下至少信息中的一项：
场景类型或场景图像中的对象。
可选的，若AR内容包括音乐素材，AR内容提供模块还用于：
确定图像采集装置与现实场景中的展示目标的距离；
AR内容提供模块在将融合后的内容提供给用户时，具体用于：
通过音频播放装置播放音乐素材中的音乐，并根据距离的变化控制音乐的播放音量。
可选的，距离越大，播放音量越小。
可选的，距离与播放音量满足以下关系：
其中,volume_d表示播放音量，V0表示最大音量,D(Pcamera,Pmarker)表示距离，T表示距离阈值。
可选的，AR内容提供模块在基于场景信息，确定与场景信息对应的AR内容时，具体用于：
获取用户的操作指令，操作指令中携带有AR内容的指示信息；
根据场景信息和指示信息，确定AR内容。
第三方面，本申请实施例提供了一种AR设备，该AR设备包括图像采集装置、处理器、以及信息展示装置，图像采集装置与信息展示装置分别与处理器连接；其中：
图像采集装置，用于采集现实场景的场景图像；
处理器，用于执行计算机程序，计算机程序被处理器执行时实现本申请任一实施例中所示的方法，其中，处理器通过信息展示装置将融合后的内容提供给用户。
可选的，信息展示装置包括：
显示装置，用于显示融合后的内容。
可选的，信息展示装置包括：
音频播放装置，用于在AR内容包括音乐素材时，播放音乐素材中的音乐；
处理器，还用于确定图像采集装置与现实场景中的展示目标的距离，并根据距离的变化控制音乐的播放音量。
第四方面，本申请实施例提供了一种电子设备，该电子设备包括存储器和处理器；存储器，配置用于存储操作指令；处理器，用于调用操作指令，以执行本申请任一实施例中所示的方法。
第五方面，本申请实施例提供了一种计算机可读存储介质，该可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现本申请任一实施例中所示的方法。
本申请实施例提供的技术方案带来的有益效果是：
本申请实施例所提供的方案，通过对现实场景的场景图像进行识别，来确定出与场景信息相对应的AR内容，并提供给用户。由于该AR内容是基于场景分析确定出，因此，叠加在现实信息上以提供给用户的AR内容与实际的应用场景更加匹配，且通过AR技术将该内容展示给用户，使得提供该用户的内容与用户更加具有交互感，基于该方案，在将内容提供用户的同时，用户的沉浸感强，能够有效提升用户的感知，更好的满足了实际应用需求。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1示出了本申请实施例提供的一种基于增强现实的信息提供方法的流程示意图；
图2a示出了本申请一示例中的一种场景图像的示意图；
图2b示出了本申请一示例中对图2a中所示的场景进行增强现实处理后的显示示意图；
图3示出了本申请实施例提供的一种基于增强现实的信息提供装置的结构示意图；
图4示出了本申请一示例中提供的一种AR设备的结构示意图；
图5示出了本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
在一些实际的生活场景中，比如家庭、商场、门店等，往往是通过外设的方式进行播放音乐、视频或其他素材内容，以音乐为例，用户或商家可以通过音频播放设备或者使用我们常用的移动端或PC(Personal Computer，个人计算机)端的音乐播放器，进行音乐的在线播放或者下载后播放，商家或者门店等为了吸引消费者，可以通过录音或者制作音乐专辑等形式产生音乐文件，并引导用户去下载或播放，以吸引消费者。但是无论是用户个人，还是商场、门店等，现有这种为用户提供素材(如音乐、视频等)的方式，用户通常都是被动接收，用户参与度较低、互动感不强，用户体验较差。另外，对于商场、门店等公共场合展示给用户的素材内容，即使用户不感兴趣也只能被动接收，对用户产生不好的体验，还会不知不觉间对周围的环境造成了影响，比如噪声污染，打扰用户等缺点。
针对现有技术中存在的上述问题，本申请实施例提供了一种基于增强现实的信息提供方法、装置、设备及存储介质，基于该本申请实施例所提供的该方案，能够有效解决现有技术中所存在的至少一个问题。
首先对本申请实施例中所涉及的几个技术用语进行简要说明。
AR：即增强现实技术，是一种实时地计算摄影机影像的位置及角度并加上相应图像、音视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
Marker-Based AR技术：基于计算机视觉的AR(vision based AR)技术的一种，该技术需要一个目标即marker，基于不同坐标系的映射关系，将需要展示的虚拟信息依附在marker上展示。
Marker-Less AR技术：也是vision based AR技术的一种，不过它可以将任何满足条件(如具有足够特征点)的物体(如书的封面、相框、桌子等)作为平面基准，也就是匹配平面，再基于不同坐标系间的映射关系，将需要展示的虚拟信息在匹配平面上展示。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
图1示出了本申请实施例提供的一种基于增强现实的信息提供方法的流程示意图，如图1中所示，该方法主要可以包括以下步骤：
步骤S110：获取通过图像采集装置采集的现实场景的场景图像；
其中，图像采集装置可以是用户终端设备上自带的图像采集装置，如用户的智能手机上的摄像头，也可以是用户终端设备外接的图像采集装置，如通过智能手机上的通信接口连接的图像采集设备，还可以是与用户终端设备连接的其他具有图像采集功能的设备，如家中所安装的监控装置等。
现实场景，即用户实际所处的场景，如商场、门店、家、办公室等等。在实际应用中，作为一可选方式，用户可以通过打开其终端设备上的摄像头来采集场景的图像。
步骤S120：根据场景图像，获取待展示的AR内容，以及AR内容在场景图像中的展示目标；
步骤S130：将AR内容和展示目标融合，以将融合后的内容展示给用户。
其中，待展示的AR内容是通过以下方式确定的：
对场景图像进行识别，得到场景图像的场景信息；
基于场景信息，确定与场景信息对应的AR内容。
也就是说，本申请实施例中所需要显示的AR内容可以是基于图像识别的结果确定的，该内容是与当前的场景信息相关联的。对于不同的场景信息，可以对应于不同的AR素材。
需要说明的是，本申请实施例中，基于场景图像确定上述AR内容的动作，可以是由终端设备来完成，也可以是由与终端设备通信连接的设备(如服务器)来完成的，在由服务器(如云端服务器)执行时，终端设备可以将场景图像发送至服务器，由服务器对场景图像进行分析，确定出AR内容，并将确定出的AR内容发送至终端设备。
可选的，上述场景信息可以包括以下至少信息中的一项：
场景类型或场景图像中的对象。
其中，场景类型的具体划分方式本申请实施例不作限定，可以根据实际需求进行划分及配置。例如，作为一种可选的粗粒度的划分方式，场景类型可以划分为公共场合和非公共场合，如可以将用户的家划分为非公共场合，家之外的场景(如商场)划分为公共场合；再例如，还可以根据实际场景进行场景类型的细划分，如商家(如果可以识别出商家标识，还可以具体到哪一商家)、家庭、办公场景、运动场景等等。场景图像中的对象，即图像中所包含的对象，如人物、物体、标识(如商标logo)、二维码、条形码等等。
可以理解的是，上述AR内容，即需要套在现实世界上进行显示的信息，也就是需要与真实世界的信息融合后显示的虚拟的信息。其中，AR内容的具体类型以及具体内容是可以根据实际需求由系统配置的，在实际应用中，还可以为用户提供相应的功能设置选项，用户可以通过该设置选项，根据自己的需求配置与场景信息相对应的AR内容。AR内容可以包括但不限于文字、图片、音频、视频等信息中的一项或多项。
作为一可选方案，在实际应用中，可以预配置场景信息与AR内容的映射关系，在基于图像识别得到场景信息后，即可基于该映射关系确定出对应的AR内容，如上述映射关系可以是场景类型与AR内容的对应关系，也可以是对象与AR内容的对应关系，还可以是对象类型与AR内容的对应关系等等。当然，也可以基于图像识别得到的场景信息，实时生成或检索与场景信息相匹配的AR内容。
另外，根据场景图像确定AR内容在场景图像中的展示目标的具体实现可以采用现有技术实现，具体的，该展示目标可以是通过Marker-Based AR技术或Marker-Less AR技术确定的。在采用Marker-Based AR技术实现时，场景图像中包括目标物体marker，该marker即为展示目标，基于场景图像，可以确定出该marker，以及图像采集装置与该marker之间的空间关系，从而实现将AR内容依附在marker上展示的效果。在采用Marker-Less AR技术实现时，可以通过对场景图像进行分析，确定出匹配平面(也就是平面基准)，并得到该匹配平面与图像采集装置的空间关系，从而将AR内容在该匹配平面上展示。
其中，将AR内容与展示目标匹配，也就是将需要展示的虚拟信息与现实世界的真实信息叠加，从而通过信息展示装置(如显示屏等显示装置、多媒体播放装置等)展示给用户，实现AR效果。
本申请实施例所提供的基于增强现实的信息提供方法，通过对现实场景的场景图像进行识别，来确定出与场景信息相对应的AR内容，并提供给用户。由于该AR内容是基于场景分析确定出，因此，叠加在现实信息上提出给用户的AR内容与实际的应用场景更加匹配，且通过AR技术将该内容展示给用户，使得提供该用户的内容与用户更加具有交互感，用户的沉浸感强，能够有效提升用户的感知，更好的满足了用户的实际需求。
本申请的可选实施例中，若待展示的AR内容包括音乐素材，该方法还包括：确定图像采集装置与现实场景中的展示目标的距离；
上述步骤S130中，将融合后的内容提供给用户，包括：
通过音频播放装置播放音乐素材中的音乐，并根据距离的变化控制音乐的播放音量。
也就是说，在需要提供的用户的AR内容包括具有声音的素材时，在将内容提供给用户时，还可以基于图像采集装置与展示目标在现实场景中的位置的距离，对播放音量进行控制，以进一步提升用户的使用感知。
需要说明的是，本申请实施例中的音乐可以是通常所说的歌曲等音乐，也可以是根据需要自行录制、通过剪辑、或者其他方式得到的具有声音的素材。
本申请实施例中，音乐素材中除包括音乐之外，还可以包括其他相关信息，例如关联的音乐界面、模型等，如配置的播放音乐时所展示的界面、与音乐相匹配的文本信息的展示界面、演唱者模型等等。其中，音乐素材中信息可以是二维的，也可以是三维的，而音乐可以是歌曲，亦可以是根据实际需求录制或生成的具有声音的素材。
在实际应用中，上述距离可以有效的表征用户与展示目标在现实场景中的位置的距离，用户在移动时，该距离也就相应的发生了变化，基于该距离的变化对播放音量进行控制，使用户能够感知到其移动所带来的声音的变化，从而提升了用户的感知。
其中，基于场景图像，确定实际场景中展示目标与图像采集装置的距离的具体实现方式，以及在用户位置发生移动时，重新确定该展示目标与图像采集装置的方式，本申请实施例不作限定，采用现有技术实现即可。
作为一可选的方案，上述距离越大，播放音量越小。
在实际应用场景中，通常是用户与音乐播放装置的距离越小，则听到的声音相对越大，反之则越小，因此，在基于AR技术，将音乐依附在展示目标上播放时，可以基于图像采集装置与实际场景中该展示目标的距离，来控制音乐的播放音量，距离越大则播放音量越小，从而使的用户仿佛置身于真实场景中一样，提升用户的沉浸感。
作为一可选方式，上述距离与播放音量可以满足以下关系：
其中,volume_d表示播放音量，V0表示最大音量，D(Pcamera,Pmarker)表示实际场景中展示目标与图像采集装置的距离，T表示距离阈值。
也就是说，在图像采集装置与现实场景中的展示目标的距离不大于设定的距离阈值T时，播放音量为在距离超过距离阈值T时，则播放音量为0，即可以关闭或暂停音乐的播放。其中，最大音量V0是可以根据实际需求配置的，例如，该最大音量可以是音频播放装置(如音乐播放器)的最大播放音量。
另外，可以理解的上，上述距离与播放音量的关系只是本申请实施例所提供的一种可选方式，在实际应用中，可以根据实际需求配置不同的关系。
本申请的可选实施例中，基于场景信息，确定与场景信息对应的AR内容，可以包括：
获取用户的操作指令，操作指令中携带有AR内容的指示信息；
根据场景信息和指示信息，确定AR内容。
也就是说，在实际应用中，还可以基于用户的操作指令的指示，来确定与场景信息和指示信息关联的AR内容。
作为一示例，假设用户是在家中，通过其终端设备的摄像头拍摄了家中的一场景图像，通过图像识别确定出该场景图像对应的场景为家，则可以基于该场景信息确定出需要播放的音乐是适合在家里播放的内容，当然，该内容可以是根据系统配置确定出的，也可以是预先根据用户的设置配置的，该场景中，如果还接收到用户的操作指令，而该操作指令中携带了音乐类型的指示信息，则确定出的最终需要提供给该用户的内容，则可以是适合在家里播放的、且是用户指定类型的音乐。
为了更好的说明本申请实施例所提供的方案以及相应的有益效果，下面结合具体的示例对方案进行进一步的说明。
示例一
本示例中以应用场景为商场进行说明。本示例中的用户为商场的消费者，需要提供给消费者的AR内容为商家想要播放给用户的音乐素材。
在实际应用中，基于本申请实施例所提供的方案，商场的商家可以在其商场所展示的商家商标(logo)或者二维码等媒介(本示例中的marker)上绑定音乐素材，也就是预先建立场景信息(如logo或二维码)与待展示的AR内容(音乐素材)的映射关系。
在该应用场景中，消费者可以随时随地打开其终端设备上的摄像头(本示例中的图像采集装置)，通过摄像头拍摄上述包括商家logo或者二维码的场景图像，由终端设备或者对应的服务器(如云服务器)对场景图像进行识别，识别出场景图像中的商家logo或者二维码，基于商家logo或者该二维码以及上述映射关系，即可确定出待展示的音乐素材。对于上述场景图像，可以通过Marker-Based AR技术对图像进行分析，确定出marker的位置，以及摄像头和该marker之间的空间关系，进而可以通过启动终端设备上的音乐播放软件(该示例中的音频播放装置，可以是系统默认的，也可以是用户指定的)，将确定出的音乐素材在marker处播放。
进一步的，在播放音乐素材时，随着消费者位置的移动，还可以基于摄像头与现实场景中该marker之间的距离，控制音乐素材的播放音量，如消费者(摄像头)距离marker越近，播放音量越大，反之播放音量越小。
当然，在实际应用中，除音乐素材之外，商家还可以根据需求配置想要展示给用户的信息，如与商品有关的图像、视频、商家的介绍信息等等。基于AR技术，提供了新的信息展现形式，弥补传统播放模式的不足，凸显新颖性，可以满足不同的用户人群需要，提高了用户参与度，为满足宣传等需求提供更多可能。
基于本申请实施例提供的该方案，在商场中的消费者，可以根据自己的需求，在想要获知商家想要提供给消费者的信息，可以通过拍摄上述场景图像获取到。通过AR技术将信息提供给用户，在起到宣传作用的同时，可以大大提升信息与用户的交互感，且音量可随人与marker的距离进行动态调整，提升用户感知的真实性，与现有的通过音箱等设备，采用外设的方式进行信息播放的方式相比，用户可以根据自己的需求，选择是否获知信息，不会对不感兴趣的用户造成影响，在所提供的信息中含有音频内容时，用户还可以通过佩戴耳机的方式收听(尤其是在公共场合中)，不会打扰到周边的人，可以减少噪声污染。
示例二
该示例中对实际应用场景不作限定，可以是用户生活中的任一场景。
假设用户是走在路上，用户可以通过终端设备上的摄像头拍摄一张场景图像，并将图像传送给后台(如服务器)进行识别，服务器识别出用户所在的场景为大街上，可以基于预配置的场景类型与AR内容(本示例中仍以音乐素材为例)的映射关系，确定出与当前场景相匹配的音乐素材，另外，通过AR MarkerLess模块(用于实现Marker-Less AR技术的功能模块)对所拍摄的场景图像进行分析，最终可以得到匹配平面与摄像头的位置关系，并将音乐素材在匹配平面上进行展示。
作为一种可选的应用方案，在将音乐素材在匹配平面上展示时，该音乐素材除了需要播放的音乐以外，还可以包括其他的素材信息，如字符、图形等，另外，基于本申请所提供的方案，展示给用户的素材信息中，信可以有二维信息，也可以有多维信息，在将素材信息展示给用户时，信息的展示形式可以是多样的，如可以是二维的展示方式、也可以是多维(如三维、四维等)的展示方式，具体的，例如对于音乐，播放的音效可以是二维或三维，再例如对于所要显示给用户的信息，可以是二维的字符、图像等，也可以是三维的模型等。
示例三
图2a中示出了本示例中的一种场景图像的示意图，如图中所示，该场景图像中示出了一幅国画，可以将该图像传给云端服务器进行识别，识别出场景图像中包含一幅图像，确定出该图像对应的为音视频素材，图2b中所示出了该音视频素材的一帧图像；另外，通过AR Makerbase模块(用于实现Marker-based AR技术的功能模块)对图2a中所示的图像进行分析，确定出展示目标即marker为图2a中所示的国画，并确定出摄像头和该marker之间的空间关系，进而可以将从云服务器获取到的音视频素材贴合在该marker上进行跟踪播放，其中，图中所示的进度条为素材的播放进度条，如图中所示，该音视频素材的总时长为19秒(图中所示的00:19)，图2b中示出的是第13秒(图中所示的00:13)时的视频帧，此时音视频素材的音乐也播放至了第13秒。当然，在实际应用中，用户还可以控制音视频素材的播放进度。
可以理解的是，本示例中图2a和图2b中所示的也仅是说明性的示意图，是用于对内容展示方式进行的示意性说明，图中所展示出的内容以及图中可能不清楚的内容并不构成对本示例的限定，也并非示例中所关注的重点，因此，图中可能不清楚、存在灰度表示内容并不影响对本示例的说明。
示例四
本示例中的应用场景为用户的家中，用户可以通过其终端设备的摄像头或者其他图像采集装置，采集家中各处的图像(可以是二维图像、也可以是家中的全景图像，当然也可以是家中的视频)，并上传至服务器端存在，服务器端将接收到的图像与用户的标识关联存储。
在一实际应用场景中，用户可能会经常忘记将钥匙放置在家里的哪里，基于本申请实施例所提供的方案，该用户可以在回到家中放置钥匙时，拍摄一幅包含钥匙的图像，并发送至服务器端。用户在需要寻找钥匙时，可以通过终端设备的摄像头拍摄其当前视野内的家里的场景图像，将该场景图像发送至服务器端，并发出操作指令，如“钥匙放在哪里了”的操作指令，服务器接收到终端设备发送的该场景图像和上述操作指令后，基于用户的操作指令，通过对场景图像进行图像识别，可以识别出该场景图像中的对象(如家里的家居等)，基于包含钥匙的场景图像和所存储的该用户的家里的图像，可以确定出钥匙在用户家里的放置位置，根据用户家里的图像以及所识别出的用户当前视野中所看到的对象，可以为用户生成该对象至钥匙的放置位置的导航路线信息(该信息即为本示例中的AR内容)，基于AR技术，可以通过用户终端设备将该虚拟的导航路线信息与场景图像中上述对象叠加显示，以引导用户找到钥匙。
在实际应用中，由于在一个相对较小的环境中，如在上述家中的应用场景中，定位的准确性会较差，无法基于现有的定位方案实现目标的准确定位。而基于本申请实施例所提供的方案，可以结合图像识别以及AR技术，为用户生成导航引导信息，而无需依赖定位信息，能够更好的满足用户的实际需求。
基于与图1中所示的方法相同的原理，本申请实施例还提供了一种基于增强现实的信息提供装置，如图3中所示，该信息提供装置100包括场景图像获取模块110、AR内容确定模块120以及AR内容提供模块130。其中：
场景图像获取模块110，用于获取通过图像采集装置采集的现实场景的场景图像；
AR内容确定模块120，用于根据场景图像，获取待展示的AR内容；
AR内容提供模块130，用于获取AR内容在场景图像中的展示目标，将AR内容与展示目标融合，将融合后的内容提供给用户；
其中，AR内容是通过以下方式确定的：
对场景图像进行识别，得到场景图像的场景信息；
基于场景信息，确定与场景信息对应的AR内容。
本申请的可选实施例中，场景信息包括以下至少信息中的一项：
场景类型或场景图像中的对象。
本申请的可选实施例中，若AR内容包括音乐素材，AR内容提供模块还用于：
确定图像采集装置与现实场景中的展示目标的距离；
AR内容提供模块在将融合后的内容提供给用户时，具体用于：
通过音频播放装置播放音乐素材中的音乐，并根据距离的变化控制音乐的播放音量。
本申请的可选实施例中，上述距离越大，播放音量越小。
本申请的可选实施例中，距离与播放音量满足以下关系：
其中,volume_d表示播放音量，V0表示最大音量,D(Pcamera,Pmarker)表示距离，T表示距离阈值。
本申请的可选实施例中，AR内容提供模块在基于场景信息，确定与场景信息对应的AR内容时，具体用于：
获取用户的操作指令，操作指令中携带有AR内容的指示信息；
根据场景信息和指示信息，确定AR内容。
需要说明的是，由于本发明实施例所提供的装置为可以执行本发明实施例中的方法的装置，故而基于本发明实施例中所提供的方法，本领域所属技术人员能够了解本发明实施例的装置的具体实施方式以及其各种变化形式，所以在此对于该装置如何实现本发明实施例中的方法不再详细介绍。只要本领域所属技术人员实施本发明实施例中的方法所采用的装置，都属于本申请所欲保护的范围。
基于与本申请实施例所提供的方法相同的原理，本申请实施例还提供了一种AR设备，如图4中所示，该AR设备200可以包括图像采集装置210、处理器220、以及信息展示装置230，图像采集装置210与信息展示装置230分别与处理器220连接；其中：
图像采集装置210，用于采集现实场景的场景图像；
处理器220，用于执行计算机程序，其中，计算机程序被处理器执行时实现本申请任一实施例中所示的方法，处理器通过信息展示装置230将融合后的内容提供给用户。
可选的，信息展示装置230包括：
显示装置，用于显示融合后的内容。
可选的，信息展示装置230包括：
音频播放装置，用于在AR内容包括音乐素材时，播放音乐素材中的音乐；
处理器220，还用于确定图像采集装置与现实场景中的展示目标的距离，并根据距离的变化控制音乐的播放音量。
可以理解的是，对于本申请实施例所提供的AR设备，显示装置具体是用于显示融合后的内容中需要显示给用户内容，即融合后的现实信息和虚拟的需要显示的信息，如融合后的图像、融合后的图像和虚拟模型、视频中的帧图像等等。音频播放设备则用于播放音频内容，如上述音乐。
基于与图1中所示的方法以及图3中所示的装置相同的原理，本申请实施例还提供了一种电子设备，该电子设备包括存储器和处理器；其中，存储器，配置用于存储操作指令；处理器，用于调用操作指令，以执行本申请任一可选实施例中所示的方法。
本申请实施例还提供了一种计算机可读存储介质，该可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现本申请任一可选实施例中所示的方法。
作为一个示例，图5示出了本申请实施例适用的一种电子设备的结构示意图，如图5所示，该电子设备4000包括处理器4001和存储器4003。其中，处理器4001和存储器4003相连，如通过总线4002相连。可选地，电子设备4000还可以包括收发器4004，以用于该电子设备4000与其他电子设备的通信，进行数据的收发。需要说明的是，在实际应用中，收发器4004不限于一个，该电子设备4000的结构并不构成对本申请实施例的限定。
其中，处理器4001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器4001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线4002可包括一通路，在上述组件之间传送信息。总线4002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线4002可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器4003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
存储器4003用于存储执行本申请方案的应用程序代码，并由处理器4001来控制执行。处理器4001用于执行存储器4003中存储的应用程序代码，以实现前述任一方法实施例所示的内容。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (13)

1.一种基于增强现实的信息提供方法，其特征在于，包括：
获取通过图像采集装置采集的现实场景的场景图像；
对所述场景图像进行场景分析，得到所述场景图像的场景信息，所述场景信息包括场景类型、场景图像中的对象或者对象类型中的至少一项；
获取用户的操作指令，所述操作指令中携带有待展示的增强现实AR内容的指示信息；
基于所述场景信息和所述操作指令携带的指示信息，从场景类型、对象或对象类型中的至少一项与增强现实AR内容之间的映射关系中，确定与所述场景信息对应且符合所述指示信息的AR内容，并将所确定的AR内容作为待展示的AR内容；
对所述场景图像进行识别，得到所述AR内容在所述场景图像中的展示目标、以及所述图像采集装置与所述展示目标之间的空间关系；所述展示目标包括所述场景图像中的目标物体或匹配平面中的至少一项；
基于所述图像采集装置与所述展示目标之间的空间关系，将所述AR内容与所述展示目标融合，以将融合后的内容提供给用户；
其中，所述基于所述图像采集装置与所述展示目标之间的空间关系，将所述AR内容与所述展示目标融合，包括：
若所述AR内容包括音视频素材，基于所述图像采集装置与展示目标之间的空间关系，将所述音视频素材贴合在所述目标物体上播放所述音视频素材中的视频帧和音乐；
若所述AR内容包括导航路线信息，基于所述图像采集装置与展示目标之间的空间关系，将所述导航路线信息与从场景图像中识别出的指定环境的对象进行叠加，并在所述场景图像中显示叠加后的内容。
2.根据权利要求1所述的方法，其特征在于，若所述AR内容包括音乐素材，所述方法还包括：
确定所述图像采集装置与所述现实场景中的所述展示目标的距离；
所述将融合后的内容提供给用户，包括：
通过音频播放装置播放所述音乐素材中的音乐，并根据所述距离的变化控制所述音乐的播放音量。
3.根据权利要求2所述的方法，其特征在于，所述距离越大，所述播放音量越小。
4.根据权利要求3所述的方法，其特征在于，所述距离与所述播放音量满足以下关系：
其中,表示所述播放音量，/>表示最大音量,/>表示所述距离，表示距离阈值。
5.根据权利要求1所述的方法，其特征在于，若所述AR内容包括音乐素材，所述指示信息用于指示待播放的音乐素材的音乐类型；
所述根据所述场景信息和所述指示信息，从所述映射关系中确定所述AR内容，包括：
基于所述场景信息，从所述映射关系中确定与所述场景信息对应且符合所述指示信息所指示的音乐类型的音乐素材。
6.根据权利要求1所述的方法，其特征在于，所述现实场景的场景图像为指定环境的图像；所述指示信息用于指示从指定环境中找到待查找物；所述AR内容包括用于引导用户找到所述待查找物的导航路线信息；
所述根据所述场景信息和所述指示信息，从所述映射关系中确定所述AR内容，包括：
识别出所述场景图像中所包括的指定环境中的对象；
根据所识别出的对象和预先存储的指定环境图像，生成从所识别出的对象到所述待查找物的导航路线信息；
其中，所述指定环境图像包括预先对指定环境中放置所述待查找物的放置位置进行拍摄并存储的图像，以及，所述指定环境图像还包括预先对所述指定环境进行采集并存储的图像。
7.一种基于增强现实的信息提供装置，其特征在于，包括：
场景图像获取模块，用于获取通过图像采集装置采集的现实场景的场景图像；
AR内容确定模块，用于对所述场景图像进行场景分析，得到所述场景图像的场景信息，所述场景信息包括场景类型、场景图像中的对象或者对象类型中的至少一项；获取用户的操作指令，所述操作指令中携带有待展示的增强现实AR内容的指示信息；基于所述场景信息和所述操作指令携带的指示信息，从场景类型、对象或对象类型中的至少一项与增强现实AR内容之间的映射关系中，确定与所述场景信息对应且符合所述指示信息的AR内容，并将所确定的AR内容作为待展示的AR内容；
AR内容提供模块，用于对所述场景图像进行识别，得到所述AR内容在所述场景图像中的展示目标、以及所述图像采集装置与所述展示目标之间的空间关系；所述展示目标包括所述场景图像中的目标物体或匹配平面中的至少一项；基于所述图像采集装置与所述展示目标之间的空间关系，将所述AR内容与所述展示目标融合，将融合后的内容提供给用户；
其中，
所述基于所述图像采集装置与所述展示目标之间的空间关系，将所述AR内容与所述展示目标融合，包括：
若所述AR内容包括音视频素材，基于所述图像采集装置与展示目标之间的空间关系，将所述音视频素材贴合在所述目标物体上播放所述音视频素材中的视频帧和音乐；
若所述AR内容包括导航路线信息，基于所述图像采集装置与展示目标之间的空间关系，将所述导航路线信息与从场景图像中识别出的指定环境的对象进行叠加，并在所述场景图像中显示叠加后的内容。
8.根据权利要求7所述的装置，其特征在于，若所述AR内容包括音乐素材，所述AR内容提供模块还用于：
确定所述图像采集装置与所述现实场景中的所述展示目标的距离；
所述AR内容提供模块在将融合后的内容提供给用户时，具体用于：
通过音频播放装置播放所述音乐素材中的音乐，并根据所述距离的变化控制所述音乐的播放音量。
9.一种AR设备，其特征在于，所述AR设备包括图像采集装置、处理器、以及信息展示装置，所述图像采集装置与所述信息展示装置分别与所述处理器连接；其中：
所述图像采集装置，用于采集现实场景的场景图像；
所述处理器，用于执行计算机程序，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法，其中，所述处理器通过所述信息展示装置将融合后的内容提供给用户。
10.根据权利要求9所述的AR设备，其特征在于，所述信息展示装置包括：
显示装置，用于显示所述融合后的内容。
11.根据权利要求9或10所述的AR设备，其特征在于，所述信息展示装置包括：
音频播放装置，用于在所述AR内容包括音乐素材时，播放所述音乐素材中的音乐；
所述处理器，还用于确定所述图像采集装置与所述现实场景中的所述展示目标的距离，并根据所述距离的变化控制所述音乐的播放音量。
12.一种电子设备，其特征在于，所述电子设备包括存储器和处理器；
所述存储器，配置用于存储操作指令；
所述处理器，用于调用所述操作指令，以执行权利要求1至6中任一项所述的方法。
13.一种计算机可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法。
CN201910585850.5A 2019-07-01 2019-07-01 基于增强现实的信息提供方法、装置、设备及存储介质 Active CN110286773B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910585850.5A CN110286773B (zh) 2019-07-01 2019-07-01 基于增强现实的信息提供方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910585850.5A CN110286773B (zh) 2019-07-01 2019-07-01 基于增强现实的信息提供方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN110286773A CN110286773A (zh) 2019-09-27
CN110286773B true CN110286773B (zh) 2023-09-19

Family

ID=68021549

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910585850.5A Active CN110286773B (zh) 2019-07-01 2019-07-01 基于增强现实的信息提供方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN110286773B (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110716645A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、电子设备及存储介质
CN110740262A (zh) * 2019-10-31 2020-01-31 维沃移动通信有限公司 背景音乐的添加方法、装置及电子设备
CN110996119A (zh) * 2019-11-29 2020-04-10 北京新势界科技有限公司 一种智能化回忆信息的ar通信方法及装置
CN113452896B (zh) * 2020-03-26 2022-07-22 华为技术有限公司 一种图像显示方法和电子设备
CN111416971B (zh) * 2020-03-30 2022-11-15 咪咕视讯科技有限公司 一种控制方法、控制系统、电子设备及可读存储介质
CN111625091B (zh) * 2020-05-14 2021-07-20 佳都科技集团股份有限公司 基于ar眼镜的标签叠加方法及装置
CN111640190A (zh) * 2020-06-02 2020-09-08 浙江商汤科技开发有限公司 Ar效果的呈现方法、装置、电子设备及存储介质
CN111638792A (zh) * 2020-06-04 2020-09-08 浙江商汤科技开发有限公司 Ar效果的呈现方法、装置、计算机设备及存储介质
CN111640192A (zh) * 2020-06-05 2020-09-08 上海商汤智能科技有限公司 场景图像处理方法、装置、ar设备以及存储介质
CN111651047B (zh) * 2020-06-05 2023-09-19 浙江商汤科技开发有限公司 一种虚拟物体展示方法、装置、电子设备及存储介质
CN111638796A (zh) * 2020-06-05 2020-09-08 浙江商汤科技开发有限公司 虚拟对象的展示方法、装置、计算机设备及存储介质
CN111580679A (zh) * 2020-06-07 2020-08-25 浙江商汤科技开发有限公司 一种太空舱展示方法、装置、电子设备及存储介质
CN111638797A (zh) * 2020-06-07 2020-09-08 浙江商汤科技开发有限公司 一种展示控制方法及装置
CN111679741B (zh) * 2020-06-08 2023-11-28 浙江商汤科技开发有限公司 一种图像处理方法、装置、电子设备和存储介质
CN111665944B (zh) * 2020-06-09 2023-08-08 浙江商汤科技开发有限公司 一种太空舱特效的装饰方法、装置、电子设备及存储介质
CN111665947A (zh) * 2020-06-10 2020-09-15 浙江商汤科技开发有限公司 一种宝箱展示方法、装置、电子设备及存储介质
CN111899347A (zh) * 2020-07-14 2020-11-06 四川深瑞视科技有限公司 基于投影的增强现实空间展示系统及方法
CN112150318A (zh) * 2020-09-23 2020-12-29 北京市商汤科技开发有限公司 增强现实信息交互方法、装置、电子设备和存储介质
CN112215964A (zh) * 2020-09-28 2021-01-12 杭州灵伴科技有限公司 基于ar的场景导览方法和设备
CN112230765A (zh) * 2020-09-29 2021-01-15 杭州灵伴科技有限公司 Ar显示方法、ar显示设备和计算机可读存储介质
CN112328073B (zh) * 2020-10-27 2022-07-12 广东电网有限责任公司 基于增强现实设备的评标方法、装置、系统和计算机设备
CN114724274A (zh) * 2020-12-18 2022-07-08 博泰车联网科技(上海)股份有限公司 处理实时影像的方法及计算机存储介质
CN113359983A (zh) * 2021-06-03 2021-09-07 北京市商汤科技开发有限公司 增强现实数据呈现方法、装置、电子设备及存储介质
CN115942022A (zh) * 2021-08-27 2023-04-07 中移(苏州)软件技术有限公司 信息预览方法、相关设备及存储介质
CN114390214B (zh) * 2022-01-20 2023-10-31 脸萌有限公司 一种视频生成方法、装置、设备以及存储介质
CN114390215B (zh) * 2022-01-20 2023-10-24 脸萌有限公司 一种视频生成方法、装置、设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107678828A (zh) * 2017-10-26 2018-02-09 北京易讯理想科技有限公司 一种基于图像追踪技术实现的声音音量控制方法
CN107796395A (zh) * 2017-08-10 2018-03-13 平安科技（深圳）有限公司 一种用于室内目标位置的导航方法、装置及终端设备
CN108388637A (zh) * 2018-02-26 2018-08-10 腾讯科技（深圳）有限公司 一种用于提供增强现实服务的方法、装置以及相关设备
CN109660714A (zh) * 2018-10-31 2019-04-19 百度在线网络技术（北京）有限公司 基于ar的图像处理方法、装置、设备及存储介质
CN109871826A (zh) * 2019-03-14 2019-06-11 腾讯科技（深圳）有限公司 信息展示方法、装置、计算机可读存储介质和计算机设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107796395A (zh) * 2017-08-10 2018-03-13 平安科技（深圳）有限公司 一种用于室内目标位置的导航方法、装置及终端设备
CN107678828A (zh) * 2017-10-26 2018-02-09 北京易讯理想科技有限公司 一种基于图像追踪技术实现的声音音量控制方法
CN108388637A (zh) * 2018-02-26 2018-08-10 腾讯科技（深圳）有限公司 一种用于提供增强现实服务的方法、装置以及相关设备
CN109660714A (zh) * 2018-10-31 2019-04-19 百度在线网络技术（北京）有限公司 基于ar的图像处理方法、装置、设备及存储介质
CN109871826A (zh) * 2019-03-14 2019-06-11 腾讯科技（深圳）有限公司 信息展示方法、装置、计算机可读存储介质和计算机设备

Also Published As

Publication number Publication date
CN110286773A (zh) 2019-09-27

Similar Documents

Publication Publication Date Title
CN110286773B (zh) 基于增强现实的信息提供方法、装置、设备及存储介质
KR101887548B1 (ko) 증강현실 서비스를 위한 미디어 파일의 처리 방법 및 장치
Langlotz et al. Next-generation augmented reality browsers: rich, seamless, and adaptive
KR101867558B1 (ko) 뷰이미지의 적어도 하나의 피처에 주석을 달기 위한 컴퓨터화 방법 및 장치
KR20190108181A (ko) 구면 비디오 편집
US11676395B2 (en) Automated capture of image data for points of interest
CN110188719B (zh) 目标跟踪方法和装置
US20130278633A1 (en) Method and system for generating augmented reality scene
CN110019600B (zh) 一种地图处理方法、装置及存储介质
CN107633441A (zh) 追踪识别视频图像中的商品并展示商品信息的方法和装置
CN107084740B (zh) 一种导航方法和装置
US9141190B2 (en) Information processing apparatus and information processing system
US20140078174A1 (en) Augmented reality creation and consumption
US20170256283A1 (en) Information processing device and information processing method
CN117321640A (zh) 包括面部合成的交互式增强现实内容
US20220335661A1 (en) System and method for playback of augmented reality content triggered by image recognition
US11622072B2 (en) Systems and methods for suggesting video framing
CN117099134A (zh) 用于广告的增强现实内容中的面部合成
CN116324990A (zh) 消息收发系统内的视频中的广告断点
CN107995482A (zh) 视频文件的处理方法和装置
CN117083640A (zh) 使用对面部表情的选择在线上社区的内容中的面部合成
US20230283832A1 (en) Communication exchange system for remotely communicating instructions
CN116710881A (zh) 针对多视频片段捕获选择音频
CN116325765A (zh) 在消息收发系统内针对视频选择广告
CN115699716A (zh) 消息界面扩展系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant