CN112509152A - 一种基于ar技术的看车方法、系统、设备及可读介质 - Google Patents

一种基于ar技术的看车方法、系统、设备及可读介质 Download PDF

Info

Publication number
CN112509152A
CN112509152A CN202011503250.9A CN202011503250A CN112509152A CN 112509152 A CN112509152 A CN 112509152A CN 202011503250 A CN202011503250 A CN 202011503250A CN 112509152 A CN112509152 A CN 112509152A
Authority
CN
China
Prior art keywords
vehicle
data
target
preset
preset vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011503250.9A
Other languages
English (en)
Inventor
谢金平
高远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Shiwei Information Technology Co ltd
Original Assignee
Chongqing Shiwei Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Shiwei Information Technology Co ltd filed Critical Chongqing Shiwei Information Technology Co ltd
Priority to CN202011503250.9A priority Critical patent/CN112509152A/zh
Publication of CN112509152A publication Critical patent/CN112509152A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种基于AR技术的看车方法、系统、设备及可读介质，该方法包括：采集与各个预设车辆对应的预设车辆数据，对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序；将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；通过所述看车应用程序开启图像传感器，通过所述图像传感器采集目标车辆的目标图像；将目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，获得目标车辆数据包；通过所述人机互动操作系统完成所述目标车辆的增强现实的展示。如此，可以基于实车的轮廓识别来了解更多汽车产品内容，体验性较好。

Description

一种基于AR技术的看车方法、系统、设备及可读介质
技术领域
本发明涉及增强现实技术领域，尤其涉及一种基于AR技术的看车方法、系统、设备及可读介质。
背景技术
汽车交易行业是现阶段交易量比较大的行业，在进行汽车销售的环节中，买方需要对汽车进行实际观测，但是由于二维图片无法反应真实情况，现场看车会受到时间、距离等人为因素的阻挠，降低了选车的效率，因此模拟现实的3D看车方式越来越流行。
现有的3D看车技术中将汽车的数据建立模型，人们在手机/pad/PC软件上通过旋转车辆模型，了解车辆状况；或者，通过一种自选场景、自适应场景变化通过手机/pad/PC来看车，但这些看车方法均与实车脱离开，不能基于实车的轮廓识别来了解更多汽车产品内容，用户的在线体验被局限在了设置好的场景中，体验性较差。
发明内容
鉴于上述现有技术的不足，本申请的目的在于提供一种基于AR技术的看车方法、系统、设备及可读介质，旨在解决现有的看车方法均与实车脱离开，不能基于实车的轮廓识别来了解更多汽车产品内容，用户的在线体验被局限在了设置好的场景中，体验性较差。
本申请提供一种基于AR技术的看车方法，包括：
采集与各个预设车辆对应的预设车辆数据，对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；
将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
通过所述看车应用程序开启图像传感器，通过所述图像传感器采集目标车辆的目标图像；
对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
通过所述人机互动操作系统完成所述目标车辆的增强现实的展示。
可以理解的，通过处理模块对预设车辆数据进行3D建模和渲染，对预设车辆数据进行3D建模的软件可以是Max3D、Maya、C4D或者ZBrush，具体种类在此不做限定；对预设车辆数据进行3渲染包括对预设车辆的材质烘焙渲染，以及环境光照和预设车辆的反射强度参数进行设置，所述渲染可以通过Unity3D开发技术进行，具体在此不做限定。
在一些实施方式中，本申请通过所述看车应用程序开启图像传感器，通过所述图像传感器采集目标车辆的目标图像；对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配；即先对实体目标车辆进行目标图像采集，后续对目标图像进行目标轮廓数据提取，根据目标轮廓数据匹配数据库中的预设车辆数据，实现了以轮廓识别为基础的AR技术的看车，用户可以基于实体的目标车辆的轮廓识别来了解更多汽车产品内容，提高了用户的体验。
可选的，所述预设车辆数据还包括：预设车辆的建模尺寸数据、预设车辆的外观数据、预设车辆的内饰数据、预设车辆的美术素材数据；
所述预设车辆的建模尺寸数据为根据所述预设车辆的实际尺寸以及预比例的还原；
所述预设车辆的美术素材数据为所述预设车辆的可替换信息。
可以理解的，预设车辆数据存储在数据库中，数据库中包括多个预设车辆，诸如预设车辆A、预设车辆B、预设车辆C、预设车辆D、预设车辆E、预设车辆F......，以及与各个预设车辆一一对应的预设车辆数据，还包括一一对应的经过3D建模和渲染后的预设车辆数据包，如此，关联存储后以便目标车辆轮廓识别成功后直接调取符合匹配条件的预设车辆对应的各种数据，步骤简单降低消耗。
在一些实施方式中，处理模块和数据库可以设置在云端，云端匹配成功后直接调用云端的预设车辆数据包，降低了前端的消耗，利于前端实现小型化，方便携带，可用场景更加广泛。
可以理解的，前端可以是集成人机互动操作系统、采集模块、显示模块的终端设备，终端设备的例子可以包括：智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准语音层面3，Moving Picture Experts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准语音层面4，Moving Picture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等，在此不做限定。前端与云端可以通过以下方式进行数据网络传输：GPRS传输子单元、3G传输子单元、4G传输子单元、5G传输传输子单元。具体在此不做限定。
在一些实施方式中，人机互动操作系统包括图像呈现单元、手势追踪单元、触摸感应单元、和信息切换单元，如此，以便用户以各种形式进行交互信息的输入。
可选的，所述将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配包括：
根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
可以理解的，通过处理模块的匹配单元可以实现目标车辆的轮廓识别，可以基于卷积神经网络进行，通过大量的样本对卷积神经网络进行训练，以得到匹配准确率较高的目标卷积神经网络，以及在训练过程中得到轮廓特征模板，得到目标卷积神经网络的方式不做详述，如此，提高了匹配的准确率以及匹配处理的效率。
在一些实施方式中，根据轮廓特征模板选定所述目标轮廓数据的多个关键点，目标轮廓数据的多个关键点可以是车辆轮廓线条曲率变化较大处的关键点，诸如汽车的发动机盖的轮廓与挡风玻璃的轮廓的连接处可以采集至少一个关键点，对应得到关键点的坐标，如此以便获得各个关键点之间的关系，诸如关键点距离，如此，第一组关键点数据包括多个第一类关键点以及第一类关键点距离，第二组关键点数据包括多个第二类关键点以及第二类关键点距离，对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数可以采用欧式距离，具体方式在此不限。
可以理解的，预设值可以是用户根据实际轮廓识别精度需求具体设置，诸如可以是85％，具体选定方式和选定的值在此不做限定。诸如目标车辆未知，预设车辆的轮廓数据的多个关键点包括预设车辆A轮廓数据的多个关键点、预设车辆B轮廓数据的多个关键点、预设车辆C轮廓数据的多个关键点、预设车辆D轮廓数据的多个关键点、预设车辆E轮廓数据的多个关键点、预设车辆F轮廓数据的多个关键点......，目标车辆与预设车辆A匹配的相似度参数大于85％，与预设车辆B、预设车辆C、预设车辆D、预设车辆E、预设车辆F等匹配的相似度参数皆小于85％，则可以确定目标车辆与预设车辆A为同一类型，与预设车辆A匹配成功。亦或者，对匹配得到的多个相似度参数进行排序，选取匹配的相似度参数最大的对应的预设车辆为匹配结果。
可选的，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示包括：
控制所述图像传感器围绕所述目标车辆移动，形成移动角度数据；
所述人机互动操作系统根据所述移动角度数据控制显示模块显示所述目标车辆数据包的数据。
可以理解的，用户可以操作所述图像传感器围绕所述目标车辆移动，形成移动角度数据；所述人机互动操作系统根据所述移动角度数据控制显示模块显示所述目标车辆数据包的数据，如此根据用户围绕目标车辆移动，控制显示模块根据移动的角度自动显示目标车辆的多种信息，以便对实体的目标车辆进行自动跟踪，信息呈现形式可以是文字、图片、动画、语音、视频等多媒体形式，增加了用户体验。如此，基于人机互动操作系统实现用户与环境信息中的实体的目标车辆进行增强现实操作，查看目标车辆功能信息。
可选的，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示还包括：
所述人机互动操作系统根据控制指令选择目标场景；
控制所述显示模块动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。可以理解的，在目标车辆轮廓识别匹配成功后，用户还可以通过人机互动操作系统输入控制指令，人机互动操作系统根据控制指令选择目标场景，如此用户可以基于同一实体车型在不同环境中的展现、以及同一实体车型在不同环境或者同一环境下的不同配置的展现，诸如颜色变化，车内饰的变化，还可以看到实体的目标车辆在不同状态下的展示。
如此，用户可以模拟目标车辆在不同情境下的性能切换，诸如通过控制UI，实现车辆颜色更换，调整车辆位置、大小及角度、调整车身亮度，车门开关人机互动操作。
在一些实施方式中，本申请的各种展示方式可以进行不同的组合，具体不再一一举例，如此丰富的展示方式可以使用户全方位多层次的看车。
基于同样的发明构思，本申请还提供一种基于AR技术的看车系统，包括：
采集模块，用于采集与各个预设车辆对应的预设车辆数据；
处理模块，用于对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；以及，将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
所述采集模块还包括图像传感器，所述图像传感器用于根据所述看车应用程序开启，并采集目标车辆的目标图像；
所述处理模块包还包括匹配单元，所述匹配单元用于对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
显示模块，用于根据所述人机互动操作系统的操作指令完成所述目标车辆的增强现实的展示。
可选的，所述匹配单元用于根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
可选的，所述显示模块用于根据所述人机互动操作系统选择的目标场景，控制所述显示模块动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。
关于本申请的基于AR技术的看车系统的相关实施例以及有益效果参见本申请的基于AR技术的看车方法的相关表述，在此不再赘述。
本申请还提供一种设备，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行上述的一个或多个所述的方法。
本申请还提供一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得设备执行上述的一个或多个所述的方法。
附图说明
图1为本申请的一种基于AR技术的看车方法的流程图；
图2为本申请的一种基于AR技术的看车系统的结构框图。
附图标记说明：
采集模块10、图像传感器11、处理模块20、匹配单元21、显示模块30
具体实施方式
为了便于理解本申请，下面将参照相关附图1-2对本申请进行更全面的描述。附图中给出了本申请的较佳实施方式。但是，本申请可以以许多不同的形式来实现，并不限于本文所描述的实施方式。相反地，提供这些实施方式的目的是使对本申请的公开内容理解的更加透彻全面。
除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中在本申请的说明书中所使用的术语只是为了描述具体的实施方式的目的，不是旨在于限制本申请。
本申请的目的在于提供一种基于AR技术的看车方法、系统、设备及可读介质，旨在解决现有的看车方法均与实车脱离开，不能基于实车的轮廓识别来了解更多汽车产品内容，用户的在线体验被局限在了设置好的场景中，体验性较差。
请参阅图1，本申请提供一种基于AR技术的看车方法，包括：
请参阅图1，本申请提供一种基于AR技术的看车方法，包括：
S10：采集与各个预设车辆对应的预设车辆数据，对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；
S20：将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
S30：通过所述看车应用程序开启图像传感器11，通过所述图像传感器11采集目标车辆的目标图像；
S40：对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
S50：通过所述人机互动操作系统完成所述目标车辆的增强现实的展示。
请参阅图1-2.可以理解的，通过处理模块20对预设车辆数据进行3D建模和渲染，对预设车辆数据进行3D建模的软件可以是Max3D、Maya、C4D或者ZBrush，具体种类在此不做限定；对预设车辆数据进行3渲染包括对预设车辆的材质烘焙渲染，以及环境光照和预设车辆的反射强度参数进行设置，所述渲染可以通过Unity3D开发技术进行，具体在此不做限定。
在一些实施方式中，本申请通过所述看车应用程序开启图像传感器11，通过所述图像传感器11采集目标车辆的目标图像；对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配；即先对实体目标车辆进行目标图像采集，后续对目标图像进行目标轮廓数据提取，根据目标轮廓数据匹配数据库中的预设车辆数据，实现了以轮廓识别为基础的AR技术的看车，用户可以基于实体的目标车辆的轮廓识别来了解更多汽车产品内容，提高了用户的体验。
可选的，所述预设车辆数据还包括：预设车辆的建模尺寸数据、预设车辆的外观数据、预设车辆的内饰数据、预设车辆的美术素材数据；
所述预设车辆的建模尺寸数据为根据所述预设车辆的实际尺寸以及预比例的还原；
所述预设车辆的美术素材数据为所述预设车辆的可替换信息。
可以理解的，预设车辆数据存储在数据库中，数据库中包括多个预设车辆，诸如预设车辆A、预设车辆B、预设车辆C、预设车辆D、预设车辆E、预设车辆F......，以及与各个预设车辆一一对应的预设车辆数据，还包括一一对应的经过3D建模和渲染后的预设车辆数据包，如此，关联存储后以便目标车辆轮廓识别成功后直接调取符合匹配条件的预设车辆对应的各种数据，步骤简单降低消耗。
在一些实施方式中，处理模块20和数据库可以设置在云端，云端匹配成功后直接调用云端的预设车辆数据包，降低了前端的消耗，利于前端实现小型化，方便携带，可用场景更加广泛。
可以理解的，前端可以是集成人机互动操作系统、采集模块10、显示模块30的终端设备，终端设备的例子可以包括：智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准语音层面3，Moving Picture Experts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准语音层面4，Moving Picture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等，在此不做限定。前端与云端可以通过以下方式进行数据网络传输：GPRS传输子单元、3G传输子单元、4G传输子单元、5G传输传输子单元。具体在此不做限定。
在一些实施方式中，人机互动操作系统包括图像呈现单元、手势追踪单元、触摸感应单元、和信息切换单元，如此，以便用户以各种形式进行交互信息的输入。
可选的，所述将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配包括：
根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
可以理解的，通过处理模块20的匹配单元21可以实现目标车辆的轮廓识别，可以基于卷积神经网络进行，通过大量的样本对卷积神经网络进行训练，以得到匹配准确率较高的目标卷积神经网络，以及在训练过程中得到轮廓特征模板，得到目标卷积神经网络的方式不做详述，如此，提高了匹配的准确率以及匹配处理的效率。
在一些实施方式中，根据轮廓特征模板选定所述目标轮廓数据的多个关键点，目标轮廓数据的多个关键点可以是车辆轮廓线条曲率变化较大处的关键点，诸如汽车的发动机盖的轮廓与挡风玻璃的轮廓的连接处可以采集至少一个关键点，对应得到关键点的坐标，如此以便获得各个关键点之间的关系，诸如关键点距离，如此，第一组关键点数据包括多个第一类关键点以及第一类关键点距离，第二组关键点数据包括多个第二类关键点以及第二类关键点距离，对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数可以采用欧式距离，具体方式在此不限。
可以理解的，预设值可以是用户根据实际轮廓识别精度需求具体设置，诸如可以是85％，具体选定方式和选定的值在此不做限定。诸如目标车辆未知，预设车辆的轮廓数据的多个关键点包括预设车辆A轮廓数据的多个关键点、预设车辆B轮廓数据的多个关键点、预设车辆C轮廓数据的多个关键点、预设车辆D轮廓数据的多个关键点、预设车辆E轮廓数据的多个关键点、预设车辆F轮廓数据的多个关键点······，目标车辆与预设车辆A匹配的相似度参数大于85％，与预设车辆B、预设车辆C、预设车辆D、预设车辆E、预设车辆F等匹配的相似度参数皆小于85％，则可以确定目标车辆与预设车辆A为同一类型，与预设车辆A匹配成功。亦或者，对匹配得到的多个相似度参数进行排序，选取匹配的相似度参数最大的对应的预设车辆为匹配结果。
可选的，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示包括：
控制所述图像传感器11围绕所述目标车辆移动，形成移动角度数据；
所述人机互动操作系统根据所述移动角度数据控制显示模块30显示所述目标车辆数据包的数据。
可以理解的，用户可以操作所述图像传感器11围绕所述目标车辆移动，形成移动角度数据；所述人机互动操作系统根据所述移动角度数据控制显示模块30显示所述目标车辆数据包的数据，如此根据用户围绕目标车辆移动，控制显示模块30根据移动的角度自动显示目标车辆的多种信息，以便对实体的目标车辆进行自动跟踪，信息呈现形式可以是文字、图片、动画、语音、视频等多媒体形式，增加了用户体验。如此，基于人机互动操作系统实现用户与环境信息中的实体的目标车辆进行增强现实操作，查看目标车辆功能信息。
可选的，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示还包括：
所述人机互动操作系统根据控制指令选择目标场景；
控制所述显示模块30动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。可以理解的，在目标车辆轮廓识别匹配成功后，用户还可以通过人机互动操作系统输入控制指令，人机互动操作系统根据控制指令选择目标场景，如此用户可以基于同一实体车型在不同环境中的展现、以及同一实体车型在不同环境或者同一环境下的不同配置的展现，诸如颜色变化，车内饰的变化，还可以看到实体的目标车辆在不同状态下的展示。
如此，用户可以模拟目标车辆在不同情境下的性能切换，诸如通过控制UI，实现车辆颜色更换，调整车辆位置、大小及角度、调整车身亮度，车门开关人机互动操作。
在一些实施方式中，本申请的各种展示方式可以进行不同的组合，具体不再一一举例，如此丰富的展示方式可以使用户全方位多层次的看车。
基于同样的发明构思，本申请还提供一种基于AR技术的看车系统，包括：
采集模块10，用于采集与各个预设车辆对应的预设车辆数据；
处理模块20，用于对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；以及，将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
所述采集模块10还包括图像传感器11，所述图像传感器11用于根据所述看车应用程序开启，并采集目标车辆的目标图像；
所述处理模块20包还包括匹配单元21，所述匹配单元21用于对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
显示模块30，用于根据所述人机互动操作系统的操作指令完成所述目标车辆的增强现实的展示。
可选的，所述匹配单元21用于根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
可选的，所述显示模块30用于根据所述人机互动操作系统选择的目标场景，控制所述显示模块30动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。
关于本申请的基于AR技术的看车系统的相关实施例以及有益效果参见本申请的基于AR技术的看车方法的相关表述，在此不再赘述。
本申请还提供一种设备，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行上述的一个或多个所述的方法。
本申请还提供一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得设备执行上述的一个或多个所述的方法。
基于此，本申请希望提供一种能够解决上述技术问题的方案，其详细内容将在后续实施例中得以阐述。本申请实施例还提供了一种设备，该设备可以包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述设备执行图1所述的方法。在实际应用中，该设备可以作为终端设备，也可以作为服务器，终端设备的例子可以包括：智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准语音层面3，Moving Picture Experts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准语音层面4，Moving Picture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等，本申请实施例对于具体的设备不加以限制。
本申请实施例还提供了一种非易失性可读存储介质，该存储介质中存储有一个或多个模块(programs)，该一个或多个模块被应用在设备时，可以使得该设备执行本申请实施例的图1中方法所包含步骤的指(instructions)。
在本公开中使用的术语仅用于描述特定实施例，而不意欲限制本公开。如在本公开和所附权利要求中所使用的，单数形式“一个”，“一个”和“该”意欲也包括复数形式，除非上下文另外清楚地指出。还应当理解，当用于本说明书中时，术语“包含”和/或“包含”指定所述组分，步骤，操作和/或装置的存在，但不排除一种或多种其它组分，步骤，操作和/或装置的存在或添加。
不应当理解，在说明书中使用的“实施例”，“实施例”，“方面”等中公开的任意方面或设计都比其它方面或设计更令人满意或更有利。
另外，表达式“或”是指“包括”或“而不是”异或“。也就是说，除非另有说明或从上下文中清楚地推断，术语“X使用A或B”是指任何一种自然的内含置换。
此外，如在本发明的描述和所附权利要求中所使用的，单数形式“一个”，“一个”和“该”意欲也包括复数形式，除非上下文另外清楚地指出。
虽然本说明书中使用的术语选自相关技术领域中通常使用的术语，根据技术发展和/或由于改变，可以使用其它术语，因此，不应当理解，下面使用的术语限制了本发明的技术精神，并且应当理解，这些术语被例证以描述本发明的实施例。
而且，这里使用的一些术语可以由本申请人任意选择。在这种情况下，这些术语在下面详细定义。因此，这里使用的特定术语应当基于其独特的含义和本发明的整个上下文来理解。
同时，术语“第一”和“第二”在本文中仅用于描述各种组成元所述，但是组成元所述不受术语的限制。这些术语仅用于区分一个组成元所述与另一个组成元所述的目的。
另外，当诸如层，膜，区域或成分的元件被称作“在”另一元件上时，该元件可以直接在另一元件上，或者可以存在中间元件。
除非另有定义，本文所用的所有术语(包括技术和科学术语)具有与本领域普通技术人员通常理解的相同的含义。还应当理解，术语，例如在常用字典中定义的那些，应当被解释为具有与相关技术和本公开的上下文中它们的含义一致的含义，并且除非在此明确定义，否则将不以理想的或过度正式的意义来解释。
同时，在以下对本发明的描述中，当可能使本发明的主题变得不清楚时，将省略在此并入的已知功能和配置的详细描述。说明书中使用的术语是考虑到在本发明中使用的功能而定义的，并且可以根据客户，运营商和用户的意图或常规使用的方法而改变。因此，术语的定义应当基于本说明书的整个描述来理解。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。
在本公开中使用的术语仅用于描述特定实施例，而不意欲限制本公开。如在本公开和所附权利要求中所使用的，单数形式“一个”，“一个”和“该”意欲也包括复数形式，除非上下文另外清楚地指出。还应当理解，当用于本说明书中时，术语“包含”和/或“包含”指定所述组分，步骤，操作和/或装置的存在，但不排除一种或多种其它组分，步骤，操作和/或装置的存在或添加。
不应当理解，在说明书中使用的“实施例”，“实施例”，“方面”等中公开的任意方面或设计都比其它方面或设计更令人满意或更有利。
另外，表达式“或”是指“包括”或“而不是”异或“。也就是说，除非另有说明或从上下文中清楚地推断，术语“X使用A或B”是指任何一种自然的内含置换。
此外，如在本发明的描述和所附权利要求中所使用的，单数形式“一个”，“一个”和“该”意欲也包括复数形式，除非上下文另外清楚地指出。
虽然本说明书中使用的术语选自相关技术领域中通常使用的术语，根据技术发展和/或由于改变，可以使用其它术语，因此，不应当理解，下面使用的术语限制了本发明的技术精神，并且应当理解，这些术语被例证以描述本发明的实施例。
而且，这里使用的一些术语可以由本申请人任意选择。在这种情况下，这些术语在下面详细定义。因此，这里使用的特定术语应当基于其独特的含义和本发明的整个上下文来理解。
同时，术语“第一”和“第二”在本文中仅用于描述各种组成元素，但是组成元素不受术语的限制。这些术语仅用于区分一个组成元素与另一个组成元素的目的。
另外，当诸如层，膜，区域或成分的元件被称作“在”另一元件上时，该元件可以直接在另一元件上，或者可以存在中间元件。
除非另有定义，本文所用的所有术语(包括技术和科学术语)具有与本领域普通技术人员通常理解的相同的含义。还应当理解，术语，例如在常用字典中定义的那些，应当被解释为具有与相关技术和本公开的上下文中它们的含义一致的含义，并且除非在此明确定义，否则将不以理想的或过度正式的意义来解释。
同时，在以下对本发明的描述中，当可能使本发明的主题变得不清楚时，将省略在此并入的已知功能和配置的详细描述。说明书中使用的术语是考虑到在本发明中使用的功能而定义的，并且可以根据客户，运营商和用户的意图或常规使用的方法而改变。因此，术语的定义应当基于本说明书的整个描述来理解。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种基于AR技术的看车方法，其特征在于，包括：
采集与各个预设车辆对应的预设车辆数据，对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；
将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
通过所述看车应用程序开启图像传感器，通过所述图像传感器采集目标车辆的目标图像；
对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
通过所述人机互动操作系统完成所述目标车辆的增强现实的展示。
2.根据权利要求1所述的AR技术的看车方法，其特征在于，所述预设车辆数据还包括：预设车辆的建模尺寸数据、预设车辆的外观数据、预设车辆的内饰数据、预设车辆的美术素材数据；
所述预设车辆的建模尺寸数据为根据所述预设车辆的实际尺寸以及预比例的还原；
所述预设车辆的美术素材数据为所述预设车辆的可替换信息。
3.根据权利要求1所述的AR技术的看车方法，其特征在于，所述将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配包括：
根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
4.根据权利要求1所述的AR技术的看车方法，其特征在于，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示包括：
控制所述图像传感器围绕所述目标车辆移动，形成移动角度数据；
所述人机互动操作系统根据所述移动角度数据控制显示模块显示所述目标车辆数据包的数据。
5.根据权利要求4所述的AR技术的看车方法，其特征在于，所述通过所述人机互动操作系统完成所述目标车辆的增强现实的展示还包括：
所述人机互动操作系统根据控制指令选择目标场景；
控制所述显示模块动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。
6.一种基于AR技术的看车系统，其特征在于，包括：
采集模块，用于采集与各个预设车辆对应的预设车辆数据；
处理模块，用于对所述预设车辆数据进行3D建模和渲染，得到预设车辆数据包，将所述预设车辆数据包导入看车应用程序，所述预设车辆数据包至少包括：预设车辆的轮廓数据；以及，将轮廓识别的增强现实开发工具包集成到所述看车应用程序，建立所述看车应用程序的人机互动操作系统；
所述采集模块还包括图像传感器，所述图像传感器用于根据所述看车应用程序开启，并采集目标车辆的目标图像；
所述处理模块包还包括匹配单元，所述匹配单元用于对所述目标图像进行特征提取以获得所述目标车辆的目标轮廓数据，将所述目标轮廓数据与所述预设车辆的轮廓数据进行匹配，若匹配成功，对所述目标车辆图像和所述预设车辆的轮廓数据对应的所述预设车辆数据包进行关联，获得目标车辆数据包；
显示模块，用于根据所述人机互动操作系统的操作指令完成所述目标车辆的增强现实的展示。
7.根据权利要求6所述的基于AR技术的看车系统，其特征在于，所述匹配单元用于根据轮廓特征模板选定所述目标轮廓数据的多个关键点，得到第一组关键点数据；
根据轮廓特征模板选定所述预设车辆的轮廓数据的多个关键点，得到第二组关键点数据；
对所述第一组关键点数据和所述第二组关键点数据进行相似度计算得到相似度参数，若所述相似度参数大于预设值，则匹配成功。
8.根据权利要求6所述的基于AR技术的看车系统，其特征在于，所述显示模块用于根据所述人机互动操作系统选择的目标场景，控制所述显示模块动态显示所述目标场景下的所述目标车辆，至少包括以下之一：所述目标车辆的颜色变换、所述目标车辆的轮毂变换、所述目标车辆的灯点亮、所述目标车辆的自动驾驶演示、所述目标车辆的动力系统展示。
9.一种设备，其特征在于，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行如权利要求1-5中一个或多个所述的方法。
10.一个或多个机器可读介质，其特征在于，其上存储有指令，当由一个或多个处理器执行时，使得设备执行如权利要求1-5中一个或多个所述的方法。
CN202011503250.9A 2020-12-17 2020-12-17 一种基于ar技术的看车方法、系统、设备及可读介质 Pending CN112509152A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011503250.9A CN112509152A (zh) 2020-12-17 2020-12-17 一种基于ar技术的看车方法、系统、设备及可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011503250.9A CN112509152A (zh) 2020-12-17 2020-12-17 一种基于ar技术的看车方法、系统、设备及可读介质

Publications (1)

Publication Number Publication Date
CN112509152A true CN112509152A (zh) 2021-03-16

Family

ID=74922361

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011503250.9A Pending CN112509152A (zh) 2020-12-17 2020-12-17 一种基于ar技术的看车方法、系统、设备及可读介质

Country Status (1)

Country Link
CN (1) CN112509152A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114415828A (zh) * 2021-12-27 2022-04-29 北京五八信息技术有限公司 一种基于增强现实的远程查看车辆的方法和装置
CN117391822A (zh) * 2023-12-11 2024-01-12 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105095828A (zh) * 2014-04-23 2015-11-25 比亚迪股份有限公司 车辆信息提供系统和方法
CN105426899A (zh) * 2014-09-19 2016-03-23 腾讯科技（北京）有限公司 车辆识别方法、装置和客户端
CN106991590A (zh) * 2017-03-17 2017-07-28 北京杰出东方文化传媒有限公司 一种vr汽车销售系统
CN108010131A (zh) * 2017-12-14 2018-05-08 北京长城华冠汽车技术开发有限公司 一种基于图像全息处理的车辆操作说明成像方法及系统
CN109658520A (zh) * 2019-01-02 2019-04-19 三门峡速达交通节能科技股份有限公司 一种增强现实车辆展示方法
CN110148222A (zh) * 2019-05-27 2019-08-20 重庆爱车天下科技有限公司 一种基于ar技术的看车方法及系统
CN110245552A (zh) * 2019-04-29 2019-09-17 阿里巴巴集团控股有限公司 车损图像拍摄的交互处理方法、装置、设备及客户端
US10452915B1 (en) * 2018-08-08 2019-10-22 Capital One Services, Llc Systems and methods for depicting vehicle information in augmented reality
CN110717772A (zh) * 2018-07-12 2020-01-21 云奥信息科技(广州)有限公司 一种沉浸式互动平台和系统
CN111325833A (zh) * 2020-03-05 2020-06-23 中国建设银行股份有限公司 车辆展示方法及系统
CN111414225A (zh) * 2020-04-10 2020-07-14 北京城市网邻信息技术有限公司 三维模型远程展示方法、第一终端、电子设备及存储介质
CN111435421A (zh) * 2019-01-11 2020-07-21 北京邮电大学 一种面向交通目标的车辆重识别方法和装置

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105095828A (zh) * 2014-04-23 2015-11-25 比亚迪股份有限公司 车辆信息提供系统和方法
CN105426899A (zh) * 2014-09-19 2016-03-23 腾讯科技（北京）有限公司 车辆识别方法、装置和客户端
CN106991590A (zh) * 2017-03-17 2017-07-28 北京杰出东方文化传媒有限公司 一种vr汽车销售系统
CN108010131A (zh) * 2017-12-14 2018-05-08 北京长城华冠汽车技术开发有限公司 一种基于图像全息处理的车辆操作说明成像方法及系统
CN110717772A (zh) * 2018-07-12 2020-01-21 云奥信息科技(广州)有限公司 一种沉浸式互动平台和系统
US10452915B1 (en) * 2018-08-08 2019-10-22 Capital One Services, Llc Systems and methods for depicting vehicle information in augmented reality
CN109658520A (zh) * 2019-01-02 2019-04-19 三门峡速达交通节能科技股份有限公司 一种增强现实车辆展示方法
CN111435421A (zh) * 2019-01-11 2020-07-21 北京邮电大学 一种面向交通目标的车辆重识别方法和装置
CN110245552A (zh) * 2019-04-29 2019-09-17 阿里巴巴集团控股有限公司 车损图像拍摄的交互处理方法、装置、设备及客户端
CN110148222A (zh) * 2019-05-27 2019-08-20 重庆爱车天下科技有限公司 一种基于ar技术的看车方法及系统
CN111325833A (zh) * 2020-03-05 2020-06-23 中国建设银行股份有限公司 车辆展示方法及系统
CN111414225A (zh) * 2020-04-10 2020-07-14 北京城市网邻信息技术有限公司 三维模型远程展示方法、第一终端、电子设备及存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
冯莹莹，郭常山著: "《智能监控视频中运动目标跟踪方法研究》", 30 June 2018 *
杜慧江主编: "《计算机网络原理与实践》", 30 September 2015 *
欧冬秀编著: "《交通信息技术 第2版》", 31 March 2014 *
赵江洪，谭浩，谭征宇等著: "《汽车造型设计 理论、研究与应用》", 31 October 2010 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114415828A (zh) * 2021-12-27 2022-04-29 北京五八信息技术有限公司 一种基于增强现实的远程查看车辆的方法和装置
CN117391822A (zh) * 2023-12-11 2024-01-12 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统
CN117391822B (zh) * 2023-12-11 2024-03-15 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统

Similar Documents

Publication Publication Date Title
CN109085966B (zh) 一种基于云计算的三维展示系统及方法
CN112771472B (zh) 提供实时产品交互协助的系统和方法
CN110162164B (zh) 一种基于增强现实的学习互动方法、装置及存储介质
US20140210857A1 (en) Realization method and device for two-dimensional code augmented reality
CN111145135B (zh) 一种图像去扰处理方法、装置、设备及存储介质
CN112509152A (zh) 一种基于ar技术的看车方法、系统、设备及可读介质
CA2898668A1 (en) Realization method and device for two-dimensional code augmented reality
CN113766296A (zh) 直播画面的展示方法和装置
WO2023197780A1 (zh) 图像处理方法、装置、电子设备及存储介质
CN113709544A (zh) 视频的播放方法、装置、设备及计算机可读存储介质
CN116452745A (zh) 手部建模、手部模型处理方法、设备和介质
CN107817701A (zh) 设备控制方法、装置、计算机可读存储介质及终端
CN113038001A (zh) 显示方法、装置及电子设备
US10558850B2 (en) Body information analysis apparatus and method of simulating face shape by using same
CN112990043A (zh) 一种服务交互方法、装置、电子设备及存储介质
CN106446857A (zh) 全景区域的信息处理方法和装置
CN109448612B (zh) 产品展示装置
CN109683711B (zh) 产品展示方法及装置
CN113453027A (zh) 直播视频、虚拟上妆的图像处理方法、装置及电子设备
CN111078005A (zh) 一种虚拟伙伴创建方法及虚拟伙伴系统
CN111444746A (zh) 一种基于神经网络模型的信息标注方法
CN116301531B (zh) 基于虚拟数字人的化妆方法、装置及系统
CN108597368A (zh) 一种基于三维模型的展示装置及其方法
CN109426522A (zh) 移动设备的界面处理方法、装置、设备、介质和操作系统
WO2020151240A1 (zh) 一种ar汽车营销系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210316