CN106530410A - 一种基于增强现实技术的汽车组装演示系统 - Google Patents

一种基于增强现实技术的汽车组装演示系统 Download PDF

Info

Publication number
CN106530410A
CN106530410A CN201610962673.4A CN201610962673A CN106530410A CN 106530410 A CN106530410 A CN 106530410A CN 201610962673 A CN201610962673 A CN 201610962673A CN 106530410 A CN106530410 A CN 106530410A
Authority
CN
China
Prior art keywords
information
automobile
parts
extreme point
graphical information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610962673.4A
Other languages
English (en)
Other versions
CN106530410B (zh
Inventor
童培诚
段会锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Original Assignee
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd filed Critical DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority to CN201610962673.4A priority Critical patent/CN106530410B/zh
Publication of CN106530410A publication Critical patent/CN106530410A/zh
Application granted granted Critical
Publication of CN106530410B publication Critical patent/CN106530410B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2008—Assembling, disassembling

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种基于增强现实技术的汽车组装演示系统，包括：存储有汽车的多种零部件的图形信息、二维码信息和零部件的性能指标信息的数据存储单元；AR识别处理单元和与所述数据存储单元和AR识别处理单元数据通信的重建单元。本发明采用数据存储单元存储汽车每个零部件的图形信息、二维码信息和该部件各项性能指标信息，所述AR识别处理单元对该部件的图形信息进行识别在三维立体空间下进行部件的识别和虚拟环境下的显示，然后通过重建单元对该部件的性能进行安全性能的检测和汽车局部结构的组装，使用户得到更真实的汽车组装过程。

Description

一种基于增强现实技术的汽车组装演示系统
技术领域
本发明涉及计算机控制领域，尤其涉及一种基于增强现实技术的汽车组装演示系统。
背景技术
AR即增强现实是计算机领域中采用计算机技术生成的基于视觉、听觉和触觉等感觉的虚拟环境，通过各种传感器使用户沉浸在虚拟的逼真的环境中，从而实现与指定环境的自然交互。使用者不仅能够通过虚拟现实系统感受到客观屋里世界中所经历的“身临其境”的逼真性，而且能够突破空间、时间以及其他客观限制，感受到真实世界中无法体验到的体验。因此AR技术是目前科技社会发展的趋向和主流受到广大用户的关注。
在增强现实的环境中，使用者可以看到真实环境的同时还可以看到计算机产生的增强的信息，可以将显示器屏幕扩展到真实环境，使计算机窗口与图标叠映于现实对象中，然后由用户的眼睛或者是手指进行点击操作，让三维物体在用户的全景视野中根据当前任务或需要进行交互改变其形状或者外观，将虚拟场景叠加到真实场景中。因此它被广泛应用到军事、医学、制造、娱乐等多个领域。
目前汽车制造业得到飞速的发展，而汽车的质量和性能也同样得到广大用户的关注，社会现象中出现汽车在出厂使用一段时间后出现汽车性能下降或者汽车不符合国家安全标准，因此出现大量汽车被召回的现象，这给广大的用户带来很多安全困扰。因此我们对汽车出厂前需要严格的要求，因此汽车的组装过程非常重要，目前汽车的零部件组装都是在车间进行，工人想要学习汽车的组装都必须是观看视频图像，没有得到更真实的感受。
发明内容
根据现有技术存在的问题，本发明公开了一种基于增强现实技术的汽车组装演示系统，包括：存储有汽车的多种零部件的图形信息、二维码信息和零部件的性能指标信息的数据存储单元；
AR识别处理单元：采用虚拟现实技术对所述数据存储单元内的汽车的零部件的图形信息进行识别，将二维空间内的图形信息进行三维空间的转换使得在该单位内出现识别对象在该三维场景下的虚拟模型；
所述AR识别处理单元对图形信息进行识别时采用平滑滤波方法去除特征曲线中的噪声，找到图形信息中的局部极值点，根据图形中曲线幅度检测方法获取局部特征点，对上述方法进行循环最后获得该图形信息的整体图像。
与所述数据存储单元和AR识别处理单元数据通信的重建单元：在三维空间下所述重建单元调取对应零部件的性能指标信息和根据该信息建立虚拟环境下组装环境，对该汽车的零部件进行组装并对组装成的结构进行指标检查。
所述AR识别处理单元在三维空间下识别处理汽车零部件在二维空间下的数据信息时首先采集该零部件的特征点信息，获取该图形信息的高光谱图像信息采集到其高光谱图像像元的信号源包括地物目标D、背景部分U和干扰信号I,已知高光谱数据中的每种地物样本为Hm(i)，m为地物类号1≤m≤p，1≤i≤Nm，Nm为m类地物的学习样本数目；
根据高光谱样本分类的标签，按照以下公式进行待分类地物目标dm的计算：
根据分类的类别数目p，生成待分类目标端元的光谱签名矩阵D1＝[d1,d2,...dp]，其中di(1≤m≤p)为第i个类别的光谱签名,1/λ为提取的学习样本比例；
根据该零件对应的光谱签名信息来进行三维场景下的虚拟模型的建立。
所述AR识别处理单元在对汽车零部件的图形信息进行识别时：首先计算该图形信息的特征点的曲线信息，采用平滑滤波方法去除曲线中的噪声，找到曲线的局部极值点包括极大值和极小值，再多该极值点两侧的幅度曲线进行检测，对最小幅度和最大幅度进行比较，如果最小幅度比最大幅度的δ倍小，其中δ取小数，则记录此极值点，对得到的极值点进行筛选查看，如果初级极值点之间的距离小于设定的距离值，则对初级极值点进行筛选；如果初级极值点之间的距离大于设定的距离值，则按照以上公开的方法继续查找初级极值点，直到获取最后一个极值点为止。
由于采用了上述技术方案，本发明提供的基于增强现实技术的汽车零部件质检系统，采用数据存储单元存储汽车每个零部件的图形信息、二维码信息和该部件各项性能指标信息，所述AR识别处理单元对该部件的图形信息进行识别在三维立体空间下进行部件的识别和虚拟环境下的显示，然后通过重建单元对该部件的性能进行安全性能的检测和汽车局部结构的组装。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明系统的结构示意图。
具体实施方式
为使本发明的技术方案和优点更加清楚，下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚完整的描述：
如图1所示的一种基于增强现实技术的汽车组装演示系统，包括：存储有汽车的多种零部件的图形信息、二维码信息和零部件的性能指标信息的数据存储单元。在实际过程中用户可以将汽车的多个零部件信息进行分类存储，其中包括每个零部件的图形信息以及各项指标信息，例如该部件的出厂时间信息、功能信息、安装说明信息等等。
AR识别处理单元：采用虚拟现实技术对所述数据存储单元内的汽车的零部件的图形信息进行识别，将二维空间内的图形信息进行三维空间的转换使得在该单位内出现识别对象在该三维场景下的虚拟模型。AR识别处理单元中设置有摄像头采集单元来实时采集汽车零部件的图形信息或者是二维码信息，然后将二维空间的图形转成三维空间下虚拟的零部件图形，使用户在AR识别处理单元下可以观看到虚拟环境下的汽车零部件，并且可以调取该汽车零部件的真实性能信息。
与所述数据存储单元和AR识别处理单元数据通信的重建单元：在三维空间下所述重建单元调取对应零部件的性能指标信息和根据该信息建立虚拟环境下组装环境，对该汽车的零部件进行组装并对组装成的结构进行指标检查。在虚拟环境下重建单元对该零部件进行组装，组装成汽车的局部结构，这样用户可以随时观看到每个汽车部件是如何组装的。
进一步的，所述AR识别处理单元在三维空间下识别处理汽车零部件在二维空间下的数据信息时首先采集该零部件的特征点信息，获取该图形信息的高光谱图像信息采集到其高光谱图像像元的信号源包括地物目标D、背景部分U和干扰信号I,已知高光谱数据中的每种地物样本为Hm(i)，m为地物类号1≤m≤p，1≤i≤Nm，Nm为m类地物的学习样本数目；
根据高光谱样本分类的标签，按照以下公式进行待分类地物目标dm的计算：
根据分类的类别数目p，生成待分类目标端元的光谱签名矩阵D1＝[d1,d2,...dp]，其中di(1≤m≤p)为第i个类别的光谱签名,1/λ为提取的学习样本比例；
根据该零件对应的光谱签名信息来进行三维场景下的虚拟模型的建立。
进一步的，所述AR识别处理单元在对汽车零部件的图形信息进行识别时：首先计算该图形信息的特征点的曲线信息，采用平滑滤波方法去除曲线中的噪声，找到曲线的局部极值点包括极大值和极小值，再多该极值点两侧的幅度曲线进行检测，对最小幅度和最大幅度进行比较，如果最小幅度比最大幅度的δ倍小，其中δ取小数，则记录此极值点，对得到的极值点进行筛选查看，如果初级极值点之间的距离小于设定的距离值，则对初级极值点进行筛选；如果初级极值点之间的距离大于设定的距离值，则按照以上公开的方法继续查找初级极值点，直到获取最后一个极值点为止。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (3)

1.一种基于增强现实技术的汽车组装演示系统，其特征在于包括：存储有汽车的多种零部件的图形信息、二维码信息和零部件的性能指标信息的数据存储单元；
AR识别处理单元：采用虚拟现实技术对所述数据存储单元内的汽车的零部件的图形信息进行识别，将二维空间内的图形信息进行三维空间的转换使得在该单位内出现识别对象在该三维场景下的虚拟模型；
所述AR识别处理单元对图形信息进行识别时采用平滑滤波方法去除特征曲线中的噪声，找到图形信息中的局部极值点，根据图形中曲线幅度检测方法获取局部特征点，对上述方法进行循环最后获得该图形信息的整体图像；
与所述数据存储单元和AR识别处理单元数据通信的重建单元：在三维空间下所述重建单元调取对应零部件的性能指标信息和根据该信息建立虚拟环境下组装环境，对该汽车的零部件进行组装并对组装成的结构进行指标检查。
2.根据权利要求1所述的一种基于增强现实技术的汽车组装演示系统，其特征还在于：所述AR识别处理单元在三维空间下识别处理汽车零部件在二维空间下的数据信息时首先采集该零部件的特征点信息，获取该图形信息的高光谱图像信息采集到其高光谱图像像元的信号源包括地物目标D、背景部分U和干扰信号I,已知高光谱数据中的每种地物样本为Hm(i)，m为地物类号1≤m≤p，1≤i≤Nm，Nm为m类地物的学习样本数目；
根据高光谱样本分类的标签，按照以下公式进行待分类地物目标dm的计算：
d m = 1 N m / λ ( Σ i = 1 N m H m ( i ) )
根据分类的类别数目p，生成待分类目标端元的光谱签名矩阵D1＝[d1,d2,...dp]，其中di(1≤m≤p)为第i个类别的光谱签名,1/λ为提取的学习样本比例；
根据该零件对应的光谱签名信息来进行三维场景下的虚拟模型的建立。
3.根据权利要求1所述的一种基于增强现实技术的汽车组装演示系统，其特征还在于：所述AR识别处理单元在对汽车零部件的图形信息进行识别时：首先计算该图形信息的特征点的曲线信息，采用平滑滤波方法去除曲线中的噪声，找到曲线的局部极值点包括极大值和极小值，再多该极值点两侧的幅度曲线进行检测，对最小幅度和最大幅度进行比较，如果最小幅度比最大幅度的δ倍小，其中δ取小数，则记录此极值点，对得到的极值点进行筛选查看，如果初级极值点之间的距离小于设定的距离值，则对初级极值点进行筛选；如果初级极值点之间的距离大于设定的距离值，则按照以上公开的方法继续查找初级极值点，直到获取最后一个极值点为止。
CN201610962673.4A 2016-11-04 2016-11-04 一种基于增强现实技术的汽车组装演示系统 Active CN106530410B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610962673.4A CN106530410B (zh) 2016-11-04 2016-11-04 一种基于增强现实技术的汽车组装演示系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610962673.4A CN106530410B (zh) 2016-11-04 2016-11-04 一种基于增强现实技术的汽车组装演示系统

Publications (2)

Publication Number Publication Date
CN106530410A true CN106530410A (zh) 2017-03-22
CN106530410B CN106530410B (zh) 2019-03-12

Family

ID=58326180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610962673.4A Active CN106530410B (zh) 2016-11-04 2016-11-04 一种基于增强现实技术的汽车组装演示系统

Country Status (1)

Country Link
CN (1) CN106530410B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107909913A (zh) * 2017-12-28 2018-04-13 河南交通职业技术学院 一种基于汽车学徒制整车拆装数字信息化演示系统
CN109427102A (zh) * 2017-08-30 2019-03-05 深圳市掌网科技股份有限公司 基于增强现实的教程演示方法和装置
WO2020140524A1 (zh) * 2019-01-02 2020-07-09 珠海格力电器股份有限公司 芯片结构的增强现实显示方法、装置和可读存储介质
CN114518816A (zh) * 2020-11-16 2022-05-20 北京六十六号互动科技有限公司 拼接玩具拼接过程的演示方法、装置、终端及存储介质
CN116740318A (zh) * 2023-08-14 2023-09-12 深圳风向标教育资源股份有限公司 汽车部件的摆放方法、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1991644A (zh) * 2005-12-30 2007-07-04 上海电气集团股份有限公司 数控仪表车床三维立体装配演示系统的构建方法
CN101089859A (zh) * 2007-07-20 2007-12-19 哈尔滨工业大学 虚拟制造环境下焊接结构的有限元分析系统
JP2009155865A (ja) * 2007-12-26 2009-07-16 Hiroko Takahashi ドアチェーン
KR20110136028A (ko) * 2010-06-14 2011-12-21 주식회사 비즈모델라인 가상 점을 통해 객체를 인식하는 증강현실 장치
CN103778304A (zh) * 2014-02-25 2014-05-07 青岛理工大学 一种机动车驱动桥的设计方法
CN105488789A (zh) * 2015-11-24 2016-04-13 大连楼兰科技股份有限公司 汽车零部件分级定损方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1991644A (zh) * 2005-12-30 2007-07-04 上海电气集团股份有限公司 数控仪表车床三维立体装配演示系统的构建方法
CN101089859A (zh) * 2007-07-20 2007-12-19 哈尔滨工业大学 虚拟制造环境下焊接结构的有限元分析系统
JP2009155865A (ja) * 2007-12-26 2009-07-16 Hiroko Takahashi ドアチェーン
KR20110136028A (ko) * 2010-06-14 2011-12-21 주식회사 비즈모델라인 가상 점을 통해 객체를 인식하는 증강현실 장치
CN103778304A (zh) * 2014-02-25 2014-05-07 青岛理工大学 一种机动车驱动桥的设计方法
CN105488789A (zh) * 2015-11-24 2016-04-13 大连楼兰科技股份有限公司 汽车零部件分级定损方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109427102A (zh) * 2017-08-30 2019-03-05 深圳市掌网科技股份有限公司 基于增强现实的教程演示方法和装置
CN109427102B (zh) * 2017-08-30 2023-04-28 深圳市掌网科技股份有限公司 基于增强现实的教程演示方法和装置
CN107909913A (zh) * 2017-12-28 2018-04-13 河南交通职业技术学院 一种基于汽车学徒制整车拆装数字信息化演示系统
WO2020140524A1 (zh) * 2019-01-02 2020-07-09 珠海格力电器股份有限公司 芯片结构的增强现实显示方法、装置和可读存储介质
CN114518816A (zh) * 2020-11-16 2022-05-20 北京六十六号互动科技有限公司 拼接玩具拼接过程的演示方法、装置、终端及存储介质
CN116740318A (zh) * 2023-08-14 2023-09-12 深圳风向标教育资源股份有限公司 汽车部件的摆放方法、设备及存储介质
CN116740318B (zh) * 2023-08-14 2023-12-12 深圳风向标教育资源股份有限公司 汽车部件的摆放方法、设备及存储介质

Also Published As

Publication number Publication date
CN106530410B (zh) 2019-03-12

Similar Documents

Publication Publication Date Title
CN106504629A (zh) 一种基于增强现实技术的汽车组装演示记忆系统
CN106530410A (zh) 一种基于增强现实技术的汽车组装演示系统
Sarikaya et al. Scatterplots: Tasks, data, and designs
Mazza Introduction to information visualization
CN107132912B (zh) 一种gis与bim增强现实在建筑规划的互动演示方法及系统
CN107479706A (zh) 一种基于HoloLens的战场态势信息构建与交互实现方法
CN107578477B (zh) 一种三维模型部件的自动检测方法
CN111680678B (zh) 目标区域识别方法、装置、设备及可读存储介质
CN104537705A (zh) 基于增强现实的移动平台三维生物分子展示系统和方法
Joksimoski et al. Technological solutions for sign language recognition: a scoping review of research trends, challenges, and opportunities
CN106530403B (zh) 一种基于增强现实技术的汽车零部件质检系统
CN111209811A (zh) 一种实时检测眼球注意力位置的方法及系统
CN113256799A (zh) 一种三维人脸模型训练方法和装置
CN113345052A (zh) 基于相似显著性的分类数据多视图可视化着色方法及系统
CN112764530A (zh) 一种基于触控手柄和增强现实眼镜的弹药识别方法
CN112764531A (zh) 一种增强现实弹药识别方法
Zhang The Application of Computer Augmented Reality Technology in Ancient Murals
Rishi et al. A Survey on Advanced Text Recognition and Projection in Augmented Reality
Hummel On synthetic datasets for development of computer vision algorithms in airborne reconnaissance applications
Xu et al. Research on computer graphics and image design and visual communication design
CN117152012B (zh) 孤独症人群视觉降噪的智能视觉处理系统、方法及设备
Puggelli et al. ARTE–augmented readability tactile exploration: the tactile bas-relief of Piazza San Francesco painting
Zhao Art visual image transmission method based on cartesian genetic programming
Son Evaluation of Convolutional Neural Network performance using synthetic data fortraining
CN115761442A (zh) 一种面向ar的目标识别方法及移动端ar系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 116023 No. 11, B block, 32 Torch Road, Dalian high tech Industrial Park, Liaoning, China.

Applicant after: Fast creation technology (Dalian) Co., Ltd.

Address before: 116000 Pioneer Building B 1101, No. 32 Torch Road, Dalian High-tech Zone, Liaoning Province

Applicant before: Dalian Wensente Software Technology Co., Ltd.

GR01 Patent grant
GR01 Patent grant