CN112818446B - 一种智能车间数字孪生系统的构建方法 - Google Patents
一种智能车间数字孪生系统的构建方法 Download PDFInfo
- Publication number
- CN112818446B CN112818446B CN202110105112.3A CN202110105112A CN112818446B CN 112818446 B CN112818446 B CN 112818446B CN 202110105112 A CN202110105112 A CN 202110105112A CN 112818446 B CN112818446 B CN 112818446B
- Authority
- CN
- China
- Prior art keywords
- workshop
- data
- model
- digital twin
- physical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010276 construction Methods 0.000 title claims abstract description 43
- 230000003993 interaction Effects 0.000 claims abstract description 48
- 238000004519 manufacturing process Methods 0.000 claims abstract description 38
- 230000004927 fusion Effects 0.000 claims abstract description 17
- 230000010354 integration Effects 0.000 claims abstract description 16
- 238000013507 mapping Methods 0.000 claims abstract description 15
- 238000012800 visualization Methods 0.000 claims abstract description 11
- 238000007781 pre-processing Methods 0.000 claims abstract description 9
- 230000002457 bidirectional effect Effects 0.000 claims abstract description 8
- 238000012545 processing Methods 0.000 claims description 34
- 238000000034 method Methods 0.000 claims description 30
- 239000000463 material Substances 0.000 claims description 22
- 230000006399 behavior Effects 0.000 claims description 21
- 238000012544 monitoring process Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 9
- 238000009877 rendering Methods 0.000 claims description 9
- 238000007654 immersion Methods 0.000 abstract description 7
- 230000006870 function Effects 0.000 abstract description 4
- 230000000694 effects Effects 0.000 description 9
- 238000011161 development Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 238000004088 simulation Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000011160 research Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000002688 persistence Effects 0.000 description 3
- 238000013515 script Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000007500 overflow downdraw method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device
- G06K17/0029—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device the arrangement being specially adapted for wireless interrogation of grouped or bundled articles tagged with wireless record carriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2111/00—Details relating to CAD techniques
- G06F2111/18—Details relating to CAD techniques using virtual or augmented reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种智能车间数字孪生系统的构建方法，属于智能制造技术领域。包括：针对物理车间生产要素，构建车间全要素多层次的孪生模型，得到数字孪生车间模型；构建数据采集系统采集物理车间的多源异构数据，针对多源异构数据进行预处理与标准化后存入数据库；以数字孪生车间模型作为客户端，配合服务器实现数字孪生车间客户端与数据库的交互，使数字孪生车间客户端与物理车间实现双向映射；基于三维可视化系统集成，使物理车间和数字孪生车间模型进行深度融合交互，完成智能车间数字孪生系统的构建。从而实现实时状态显示、历史状态重现、远程控制、故障报警、状态预测等功能，解决了现有数字车间数据呈现单调、交互感与沉浸感差的问题。
Description
技术领域
本发明属于智能制造技术领域，涉及一种智能车间数字孪生系统的构建方法。
背景技术
随着云计算、物联网、大数据、移动互联、人工智能等新一代信息技术与制造的融合和落地应用，世界各国相继提出了各自国家层面的制造发展战略，发展智能制造新模式。在智能制造快速发展的背景下，数字孪生得到了迅猛的发展，数字孪生车间也成为智能制造的重要解决方式之一。
智能制造的核心问题是实现物理世界和信息世界的融合，数字孪生技术则是物理世界与信息世界融合的有效途径。作为由物理空间到数字孪生模型的映射，数字孪生车间模型的构建、虚实数据的融合与交互是实现数字孪生车间的重要基础。一方面，孪生模型的构建是重要的基础环节，选择合适的建模方法对于后续的研究十分关键。另一方面，由于车间内物理要素的状态时刻发生变化，为保证孪生模型与物理设备状态的一致性，物理车间与数字孪生车间必须深度融合，实现数据的实时双向交互。通过该种方式，孪生模型既能基于物理车间传递而来的数据信息进行实时变化与决策，以实控虚，也可通过数字孪生模型来模拟物理车间的状态和行为，反向控制相应的设备，即以虚控实。此外，加之以三维可视化交互设计，可为设备的实时监控、远程控制、故障预警、设备维护提供基础，增强用户交互感。
近年来，数字孪生的相关理论发展迅速，数字孪生车间虽有了一定的理论基础与支撑技术研究，但应用实例仍较少，且多为“数字模型”或“数字影子”，虚实融合的实现方法仍有待探索。此外，现有的车间显示与线控设备多以二维图表的形式呈现，数据呈现单调，交互感与沉浸感相对较差。因此，有必要对数字孪生车间的关键技术进行研究，探究车间数字孪生系统的实现方法，使其在智能制造及智能工厂领域得到更加广泛的应用。
发明内容
为了克服上述现有技术的缺点，本发明的目的在于提供一种智能车间数字孪生系统的构建方法，解决了数据呈现单调、交互感与沉浸感差的技术问题，更为有效地实现了虚实数据的双向映射。
为了达到上述目的，本发明采用以下技术方案予以实现：
本发明公开了一种智能车间数字孪生系统的构建方法，包括：
1)针对物理车间生产要素，构建车间全要素多层次的孪生模型，得到数字孪生车间模型；2)构建数据采集系统采集物理车间的多源异构数据，针对所得多源异构数据进行预处理与标准化后存入数据库；以步骤1)构建的数字孪生车间模型作为客户端，配合服务器实现数字孪生车间客户端与数据库的交互，使数字孪生车间客户端与物理车间实现双向映射；3)基于三维可视化系统集成，使物理车间和步骤1)构建的数字孪生车间模型进行深度融合交互，完成智能车间数字孪生系统的构建。
优选地，步骤1)中，车间的生产要素包括人员、设备、物料和环境；其中，人员的孪生模型包括：人员简化模型、RFID标签信息、人员位置信息及关键操作信息；其中，设备的孪生模型包括：参与生产加工过程的设备；其中，物料的孪生模型包括：生产物料及加工工件模型、RFID标签信息、标签块内的加工数据；其中，环境的孪生模型包括：物理车间内的其他静止物体、车间墙壁、环境灯光。
优选地，步骤1)中，多层次包括几何模型、物理模型、行为模型和规则模型，具体包括以下操作：①将物理车间生产要素的几何模型文件进行预处理，实现几何模型的构建；②基于步骤①构建的几何模型，通过模型材质及物理属性的添加、刚体属性设置和环境渲染，实现物理模型的构建；③基于步骤②构建的物理模型，针对物理车间生产要素中的运动部件进行模块化的拆分与组装，以父子关系建立主从运动部件的约束关系，实现行为模型的构建；④基于步骤③构建的行为模型，通过物理车间的设备关联规则、车间行为触发规则和车间演化规则，实现规则模型的构建。
进一步优选地，通过三维软件人工构建、厂商提供标准格式的模型文件、资源商店获取和三维点云重建模型的方式组合构建，得到几何模型文件。
优选地，步骤2)中，多源异构数据包括加工设备数据、辅助设备数据、外界传感器数据、调度排程数据及车间辅助数据。
优选地，步骤2)中，数据库采用内存数据库与关系数据库相结合。
进一步优选地，数字孪生车间客户端内所需数据可分为实时驱动数据、面板显示数据与历史加工数据；其中，实时驱动数据与面板显示数据存入内存数据库中，历史加工数据存入关系数据库中。
优选地，步骤2)中，数字孪生车间客户端与服务器进行异步数据交互，具体包括以下操作：对于数字孪生车间客户端发送的数据请求，服务器接收请求后查询数据库并返回数据；对于数字孪生车间客户端的指令下达，服务器接收到指令下达后连接物理车间，实现物理车间的远程控制。
优选地，步骤2)中，数字孪生车间客户端与服务器之间构建消息中间件。
优选地，步骤3)中，三维可视化系统集成包括：场景漫游、监控面板显示、人机交互和AR支持。
与现有技术相比，本发明具有以下有益效果：
本发明公开了一种智能车间数字孪生系统的构建方法，通过车间全要素多层次的孪生模型的建模，实现车间生产要素数字孪生体物理空间与虚拟空间的准确映射；通过数据采集系统、数据库协同，以服务器为核心，共同实现数字孪生车间客户端与物理车间实现双向映射，进行虚实数据融合与交互，实现虚拟产线与物理产线的实时映射与远程控制；通过集成三维可视化系统，使物理空间和虚拟空间深度融合交互，使所得数字孪生车间模型达到更真实的使用效果。此外，通过对数据进行采集、预处理与标准化，使结构化数据与非结构化数据实现统一表达，保证了数据传输与存储的一致性与高效性；因此，本发明在高效逼真的孪生模型基础上，实现虚实数据的实时交互与融合，使虚拟车间与物理车间保持高度一致，实现实时数据双向映射，此外，通过三维可视化交互系统的集成增强用户交互感与沉浸感，达到更佳的使用效果，解决了现有数字车间数据呈现单调、交互感与沉浸感差的技术问题，提供了有效地实现虚实数据的双向映射的方法。
进一步地，通过人员、设备、物料和环境(人机料环)的生产要素选择，能够实现物理车间的高度还原。
进一步地，通过从几何模型、物理模型、行为模型和规则模型的多层次进行孪生模型的构建，能够提高物理车间运行状态的还原真实度；其中，通过行为模型的构建，为后续数据驱动提供有效的模型保障；有利于实现车间内设备数字孪生模型物理空间与虚拟空间的准确映射。
进一步地，采用内存数据库与关系数据库结合的方式进行实时数据的高效读取和历史数据的持久化；通过多数据库的协同工作，优化实时数据的存取效率，提升计算机的性能，对于大量数据的交互与传输有较大益处。
进一步地，实时驱动数据与面板显示数据存入内存数据库中，通过高速的数据采集不断进行更新覆盖，有利于快速更新数字孪生车间客户端内的孪生模型与监控面板；历史加工数据存入关系数据库中，设置数据生命周期，通过采集时的时间戳进行时间标定，有利于数字孪生车间客户端历史加工状态的重现。
进一步地，通过数字孪生车间客户端与服务器之间构建消息中间件，防止高并发场景下出现错误，以实现解耦、异步、削峰的作用；通过消息中间件使各方数据之间进行有序的异步传输，防止高并发场景下出现错误，提升了系统的稳定性与可靠性。
进一步地，通过集成了场景漫游、界面显示、人机交互、AR支持多种三维可视化交互方式，使数字孪生车间客户端在不同的功能与应用场景下得到更好的使用效果。三维场景漫游可全方位多角度查看车间的实时状态，二维监控界面直观展示车间数据，人机交互模块支持远程控制，AR支持可通过头戴式设备及其他交互方式增强交互感与沉浸感，多方式结合使用对虚拟仿真模型进行更贴近真实的表达。
综上所述，本发明提供了完整的基于数字孪生车间的智能车间数字孪生系统的构建方法。现有技术中，多从数据融合或三维监控平台的角度探究数字孪生车间的构建，并未对数字孪生车间的完整构建方法展开研究。本发明从孪生模型的构建，虚实数据的交互至虚拟仿真的数字孪生车间客户端的可视化集成，提出了一套数字孪生车间完整可行的解决方案。
本发明通过对物理车间进行全要素、多层次的孪生模型构建，使数字孪生车间内人员、设备、环境、物料从几何、物理、行为、规则多个层面均高度还原物理车间，从外观渲染至内部运行规律均进行了高度仿真，实现物理车间与数字孪生车间最大程度的一致性，提高数字孪生车间的仿真程度。此外，本发明的虚实数据交互框架完善，优化了现有的数字孪生车间数据架构。
附图说明
图1为本发明的总体框架图；
图2为本发明的孪生模型构建流程图；
图3为本发明的数据交互架构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面结合附图对本发明做进一步详细描述：
参见图1所示，一种智能车间数字孪生系统的构建方法，包含车间全要素多层次的孪生模型构建、虚实数据融合与交互、三维可视化系统集成三部分。车间全要素多层次孪生模型的构建为整个智能车间数字孪生系统的基础，车间全要素多层次的孪生模型构建后进行虚实数据的融合与交互，使所构建的车间全要素多层次的孪生模型与物理车间双向映射；最后加之以三维可视化系统的集成，使孪生模型达到更真实的效果，以此完成智能车间数字孪生系统的构建。
下面结合具体实施例对本发明做进一步详细说明：
实施例：
(1)构建车间全要素多层次的孪生模型
1.1)通过对物理车间众多生产要素的分析与分解，可将物理车间生产要素分为人员、设备、物料、环境，分别进行车间全要素多层次的孪生模型的建模。
其中，人员的孪生模型包含人员简化模型、RFID(Radio FrequencyIdentification无线射频识别)标签信息、人员位置信息及关键操作信息；具体地，人员为车间操作人员；
设备包含车间参与生产加工过程的全部设备，如数控机床、工业机器人、自动导引运输车(AGV，Automated Guided Vehicle)、物料转运台和仓储平台等，从几何、物理、行为、规则多个层次，针对参与生产加工过程的设备进行孪生模型的构建，以高度还原物理车间内机器与设备的加工过程；
物料包含生产物料与加工工件，其孪生模型包含生产物料及加工工件模型、RFID标签信息、标签块内的加工数据；
环境包含车间内的其他静止物体、车间墙壁、环境灯光等，通过几何模型的渲染实现物理车间环境的高度还原。
1.2)对于上述物理车间生产要素，从几何、物理、行为、规则多个层次进行孪生模型的构建，真实还原物理车间的运行状态。
具体地，在本实施例中，如图2所示，可通过三维软件人工构建、厂商提供标准格式的模型文件、资源商店获取、三维点云重建模型等方式组合构建几何模型文件。
对于厂商提供、资源商店获取、三维点云重建方式获得的复杂几何模型文件，可进行轻量化处理，实现几何模型初步构建。所述轻量化可利用Pixyz studio软件进行孔洞剔除、镶嵌细分等操作实现。轻量化处理后得到车间生产要素的几何模型，使模型最大程度还原物理车间的同时优化计算机性能与资源。
几何模型初步构建完成后，对模型进行优化与渲染。将三维软件人工构建的几何模型，以及轻量化处理后模型导入3dsMax中进行数字孪生车间虚拟场景的搭建，并对模型进行修改、渲染与优化，得到几何模型。
具体地，所述修改为调整几何模型文件坐标系原点与方向，及模型之间的相对位置等；所述渲染与优化，即利用Photoshop制作二维贴图，在3dsMax中添加模型的材质与贴图，添加环境灯光与效果动画等。
在所得几何模型的基础上，将所得几何模型以.fbx格式导入Unity3d中，进行数字孪生车间的物理模型、行为模型、规则模型的构建。
通过模型材质及物理属性的添加、刚体属性设置和环境渲染等方式实现物理模型构建；物理模型的构建完成后，通过给物体附加脚本的方式进行行为模型与规则模型的构建。
具体地，对设备的各个运动部件进行模块化的拆分与组装，以父子关系建立主从运动部件的约束关系，例如机器人的各个运动关节、机床的各个轴的运动方向需要在Unity3D中进行定义，包括每个关节和每个轴的局部坐标系，坐标原点等，还需要对每个关节转角，速度，加速度等一系列矢量进行定义。通过上述工作，建立一套设备的模型行为约束构建方法，通过对机器人、机床进行运动学分析，实现行为模型的构建，为后续数据驱动做准备。如图1所示。
最后，通过程序定义物理车间的设备关联规则、车间行为触发规则和车间演化规则，实现规则模型的构建。
基于上述步骤1.1)和步骤1.2)，通过车间全要素多层次的孪生模型的建模(即多维模型的构建)，实现物理车间生产要素的数字孪生体物理空间与虚拟空间的准确映射，得到数字孪生车间模型。
因此，如图2所示，对物理车间的环境与要素进行总体分析，多种方式结合共同进行几何模型的初步构建，对复杂模型进行轻量化处理后进行三维虚拟场景搭建，通过模型的修改、渲染与优化使几何模型达到更加真实的效果。在几何模型完备的基础上，以Unity3D为基础附加物理模型、行为模型、规则模型，实现车间全要素多层次的孪生模型的构建。
(2)所述虚实数据交互与融合方法
如图3所示，在局域网下，通过数据采集系统、数据库(多数据库协同)、服务器、消息中间件及步骤(1)构建的数字孪生车间模型之间实时数据的高效数据传输，进行物理车间内多源异构数据的采集、预处理与标准化，通过数据的传输与交互使步骤(1)构建的数字孪生车间模型与物理车间双向映射，进行虚实数据融合与交互，实现数字孪生车间的虚实数据融合与交互，进而虚拟产线与物理产线的实时映射与远程控制。(实现多维模型的融合)其中，步骤(1)构建的数字孪生车间模型作为三维虚拟仿真的客户端。
对物理车间的多源异构数据进行采集，构建数据采集系统。所述多源异构数据包含加工设备数据、辅助设备数据、外界传感器数据、调度排程数据及车间辅助数据。
加工设备数据包含机床CNC数据、PLC数据，通过数控系统开放的协议或接口读取内部数据；辅助设备数据如机器人数据、AGV数据等，通过厂商提供的二次开发接口获取；调度排程数据包含物料、工件、人员数据，通过RFID二次开发接口可进行读取；外界传感器如温度传感器、切削力传感器等，其数据由数据采集卡等方式获取；车间辅助数据包含环境数据及其他数字化资料。
多源异构数据采集后，进行预处理与标准化后存入数据库。
所述多源异构数据的预处理，包含数据的解析、数据进制转换、野值剔除。数据的解析表示提取所需数据的数据项、数据值与时间戳；数据进制转换表示对涉及二进制、十六进制的数据进行转换；野值剔除表示对采集到的数据进行初步判断，剔除由于外界因素导致的异常数据，保证模型运动的准确性。
所述多源异构数据的标准化，为结构化数据与非结构化数据的统一表达。所述结构化数据，可用key-value键值对方式存贮；所述非结构化数据，如图片数据格式为JEPG，数控加工程序格式为NC等，可将非结构化数据转换为二进制数据，消除异构性后通过key-value键值对方式存贮。对于结构化数据与非结构化数据，通过Json格式进行统一表达，进行数据传输。
采用内存数据库与关系数据库结合的方式进行实时数据的高效读取和历史数据的持久化。本实施例中内存数据库采用Redis，关系数据库采用MySQL，二者结合使用进行数据的高速存取与持久化。
数字孪生车间客户端内所需数据可分为设备的实时驱动数据、面板显示数据与历史加工数据。设备的实时驱动数据与面板显示数据存入内存数据库中，通过高速的数据采集不断进行更新覆盖，用于快速更新数字孪生车间客户端内的孪生模型与监控面板；历史加工数据存入关系数据库中，设置数据生命周期，通过采集时的时间戳进行时间标定，用于数字孪生车间客户端历史加工状态的重现。
通过对采集到的历史加工数据进行分析处理，利用自编码器的方法提取信号特征，然后利用卷积神经网络对加工态势进行预测，可将预测结果通过二维图表的方式显示在数字孪生车间客户端的监控面板。
数字孪生车间的构建基于Unity3D实现，单个设备模型视为一个客户端，为设备附加C#脚本，通过脚本程序与服务器进行异步数据交互。
服务器为系统数据交互的核心。对于数字孪生车间客户端发送的实时数据与历史数据的数据请求(Query)，服务器接收请求后查询数据结果库并返回数据，数字孪生车间客户端接收到数据后对模型进行Update更新；对于数字孪生车间客户端下达的远程控制指令，服务器接收到用户指令后，连接底层物理车间中的设备，基于设备的二次开发接口或商业软件进行NC与PLC数据的写入(Write)，实现物理车间的设备的远程控制。
数字孪生车间客户端与服务器之间构建消息中间件，本实施例中选用RabbitMQ消息队列，将所有数据请求与指令通过消息队列的入队与出队进行异步传输，防止高并发场景下出现错误，以实现解耦、异步、削峰的作用。
数字孪生车间客户端与物理车间断开连接时，可在给定条件下进行仿真与分析。通过给定信息(给定信息例如物料数据及加工信息)进行仿真设置，编写Unity脚本驱动数字孪生车间运转，查看给定信息下数字孪生车间的运行状况，根据仿真结果进行真实物理车间的加工调整。
因此，如图3所示，通过OPC UA通讯协议(OPC Unified Architecture，OPC统一架构)、二次开发接口等方式对车间内的机床、机器人、AGV、RFID等设备进行数据的采集，构建数据采集系统，同时将数据存入实时数据库与关系数据库中。构建服务器与消息中间件，以服务器为核心进行数字孪生客户端与数据库之间的数据传输。同时，服务器通过通信接口、二次开发接口对车间底层设备进行远程控制与用户指令下达。
(3)三维可视化系统集成
步骤(1)构建的数字孪生车间的三维可视化系统集成，包含场景漫游、监控面板显示、人机交互、AR支持四部分。
具体地，在本实施例中，步骤(1)构建的数字孪生车间的三维可视化系统集成基于Unity3D实现。
如图3所示，所述场景漫游，通过Unity中的Input类检测鼠标与键盘输入，通过双击设备模型选择视图中心，通过脚本程序切换当前相机，同时操作控件使相机根据输入进行移动与缩放，实现第一人称视角的变换，使用户可自由观察物理车间内的任意位置，达到场景漫游效果；
所述监控面板展示，通过Unity的UGUI面板设计二维监控界面，以数据和图表的形式对设备运行状态、加工进程、物料及工件统计信息、报警信息及预测结果等进行展示，实现物理车间信息的全面数字化监控；
所述人机交互，通过点击数字孪生车间界面内按键、输入命令流等方式，向物理车间下达控制指令，从而实现数控机床NC程序运行的启停、PLC中I/O信号的变换、机器人；
所述AR支持，即数字孪生车间客户端支持AR设备的应用，通过AR眼镜进行物理车间场景漫游，实现设备状态的自主呈现，通过语音、手势等方式进行人机交互，实现设备状态查看与远程操作，增强沉浸感与交互感。
综上，通过数字孪生车间的构建与三维可视化系统的集成，实现实时状态显示、历史加工状态重现、产线模型运动仿真、车间监控、故障报警、远程控制、加工态势预测等功能的集成。
因此，本发明提供了一种智能车间数字孪生系统的构建方法，具体包含物理车间全要素多层次建模、虚实数据融合与交互，以及三维可视化交互系统集成。首先，综合运用多个软件，对物理车间全部生产要素，即人员、设备、物料、环境进行几何、物理、行为、规则多个层次的建模，使虚拟车间最大程度还原真实物理车间，得到数字孪生车间模型。其次，构建数据采集系统、数据库、数据库的服务器、消息中间件以及以得到的数字孪生车间模型作为三维虚拟仿真的客户端，进行多源异构数据的采集、预处理与标准化，并通过数据的高速传输与交互实现虚拟产线与物理产线的实时映射与远程控制。最后，通过场景漫游、监控面板显示、人机交互、AR支持这四种方式实现数字孪生车间的三维可视化系统集成，使物理空间和虚拟空间深度融合交互，从而实现实时状态显示、历史状态重现、远程控制、故障报警、状态预测等功能。
以上内容仅为说明本发明的技术思想，不能以此限定本发明的保护范围，凡是按照本发明提出的技术思想，在技术方案基础上所做的任何改动，均落入本发明权利要求书的保护范围之内。
Claims (9)
1.一种智能车间数字孪生系统的构建方法，其特征在于，包括：
1）针对物理车间生产要素，构建车间全要素多层次的孪生模型，得到数字孪生车间模型；
步骤1）中，多层次包括几何模型、物理模型、行为模型和规则模型，具体包括以下操作：
①将物理车间生产要素的几何模型文件进行预处理，实现几何模型的构建；
②基于步骤①构建的几何模型，通过模型材质及物理属性的添加、刚体属性设置和环境渲染，实现物理模型的构建；
③基于步骤②构建的物理模型，针对物理车间生产要素中的运动部件进行模块化的拆分与组装，以父子关系建立主从运动部件的约束关系，实现行为模型的构建；
④基于步骤③构建的行为模型，通过物理车间的设备关联规则、车间行为触发规则和车间演化规则，实现规则模型的构建；
2）构建数据采集系统采集物理车间的多源异构数据，针对所得多源异构数据进行预处理与标准化后存入数据库；以步骤1）构建的数字孪生车间模型作为客户端，配合服务器实现数字孪生车间客户端与数据库的交互，使数字孪生车间客户端与物理车间实现双向映射；
3）基于三维可视化系统集成，使物理车间和步骤1）构建的数字孪生车间模型进行深度融合交互，完成智能车间数字孪生系统的构建。
2.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤1）中，车间的生产要素包括人员、设备、物料和环境；
其中，人员的孪生模型包括：人员简化模型、RFID标签信息、人员位置信息及关键操作信息；
其中，设备的孪生模型包括：参与生产加工过程的设备；
其中，物料的孪生模型包括：生产物料及加工工件模型、RFID标签信息、标签块内的加工数据；
其中，环境的孪生模型包括：物理车间内的其他静止物体、车间墙壁、环境灯光。
3.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，通过三维软件人工构建、厂商提供标准格式的模型文件、资源商店获取和三维点云重建模型的方式组合构建，得到几何模型文件。
4.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤2）中，多源异构数据包括加工设备数据、辅助设备数据、外界传感器数据、调度排程数据及车间辅助数据。
5.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤2）中，数据库采用内存数据库与关系数据库相结合。
6.根据权利要求5所述的一种智能车间数字孪生系统的构建方法，其特征在于，数字孪生车间客户端内所需数据可分为实时驱动数据、面板显示数据与历史加工数据；
其中，实时驱动数据与面板显示数据存入内存数据库中，历史加工数据存入关系数据库中。
7.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤2）中，数字孪生车间客户端与服务器进行异步数据交互，具体包括以下操作：
对于数字孪生车间客户端发送的数据请求，服务器接收请求后查询数据库并返回数据；
对于数字孪生车间客户端的指令下达，服务器接收到指令下达后连接物理车间，实现物理车间的远程控制。
8.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤2）中，数字孪生车间客户端与服务器之间构建消息中间件。
9.根据权利要求1所述的一种智能车间数字孪生系统的构建方法，其特征在于，步骤3）中，三维可视化系统集成包括：场景漫游、监控面板显示、人机交互和AR支持。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110105112.3A CN112818446B (zh) | 2021-01-26 | 2021-01-26 | 一种智能车间数字孪生系统的构建方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110105112.3A CN112818446B (zh) | 2021-01-26 | 2021-01-26 | 一种智能车间数字孪生系统的构建方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112818446A CN112818446A (zh) | 2021-05-18 |
| CN112818446B true CN112818446B (zh) | 2024-04-02 |
Family
ID=75859320
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110105112.3A Active CN112818446B (zh) | 2021-01-26 | 2021-01-26 | 一种智能车间数字孪生系统的构建方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112818446B (zh) |
Families Citing this family (45)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113240798B (zh) * | 2021-05-19 | 2022-04-22 | 郑州轻工业大学 | 基于数字孪生和ar的物料完备性智能检测与配置方法 |
| CN113364625B (zh) * | 2021-06-08 | 2022-08-16 | 广东利元亨智能装备股份有限公司 | 一种数据传输方法、中间传输设备及存储介质 |
| CN113485156B (zh) * | 2021-06-17 | 2024-03-19 | 国家电网有限公司 | 一种变压器数字孪生云平台及其实现方法 |
| CN113538865A (zh) * | 2021-06-18 | 2021-10-22 | 意特利（上海）科技有限公司 | 基于数字孪生的五轴联动机床在线诊断预警系统及方法 |
| CN113359640A (zh) * | 2021-06-25 | 2021-09-07 | 上海大学 | 一种基于数字孪生和增强现实的产线预测性维护系统及方法 |
| CN113608887B (zh) * | 2021-07-07 | 2023-07-04 | 中国电子科技集团公司第三十研究所 | 一种数字孪生虚实网络信息实时交互方法 |
| CN113485265B (zh) * | 2021-07-07 | 2022-11-15 | 杭州西奥电梯有限公司 | 一种基于图表与工业智能制造设备数据的实时互联方法 |
| CN113792406B (zh) * | 2021-07-15 | 2024-01-05 | 意欧斯物流科技(上海)有限公司 | 一种基于数字孪生的agv小车仿真系统 |
| CN113821904A (zh) * | 2021-07-23 | 2021-12-21 | 西安理工大学 | 一种基于数字孪生的物流设备动态模型构建系统及方法 |
| CN113325816A (zh) * | 2021-08-03 | 2021-08-31 | 山东捷瑞数字科技股份有限公司 | 面向工业互联网的数字孪生体数据管理方法 |
| CN113658325B (zh) * | 2021-08-05 | 2022-11-11 | 郑州轻工业大学 | 数字孪生环境下的生产线不确定对象智能识别与预警方法 |
| CN113673104A (zh) * | 2021-08-20 | 2021-11-19 | 华东交通大学 | 基于数字孪生的制造业车间工艺规划系统 |
| CN113641764B (zh) * | 2021-08-31 | 2024-03-19 | 江苏中科云墨数字科技有限公司 | 一种基于数字孪生的数据同步实现方法 |
| CN113721521A (zh) * | 2021-08-31 | 2021-11-30 | 无锡谨研物联科技有限公司 | 一种用在机床数字孪生系统中的多传感器并发感知装置 |
| CN113741910B (zh) * | 2021-09-01 | 2024-09-13 | 上海商汤智能科技有限公司 | 场景交互方法及装置、电子设备和存储介质 |
| CN113837586A (zh) * | 2021-09-17 | 2021-12-24 | 许昌许继软件技术有限公司 | 一种数字孪生变电站的虚实同步运行方法及装置 |
| CN113867286A (zh) * | 2021-09-26 | 2021-12-31 | 中国核电工程有限公司 | 核工业生产线的三维可视化智能管控系统、生产系统 |
| CN113867295A (zh) * | 2021-10-11 | 2021-12-31 | 西安交通大学 | 一种基于数字孪生的制造车间agv动态调度方法、系统、设备及存储介质 |
| CN114049419A (zh) * | 2021-10-14 | 2022-02-15 | 北京中铁建建筑科技有限公司 | 一种基于数字孪生的钢筋加工车间的呈现方法 |
| CN113688443A (zh) * | 2021-10-25 | 2021-11-23 | 成都飞机工业（集团）有限责任公司 | 一种喷涂车间运行状态可视化系统的构建方法 |
| CN114035521A (zh) * | 2021-11-09 | 2022-02-11 | 中机寰宇(江苏)智能制造认证检测有限公司 | 一种基于数字孪生的汽车分段建造方法 |
| CN114237170B (zh) * | 2021-11-25 | 2023-06-30 | 西北工业大学 | 基于数字孪生技术的装配车间虚实融合运行与管控方法 |
| CN114202616B (zh) * | 2021-12-10 | 2024-06-04 | 国网冀北电力有限公司经济技术研究院 | 一种变电站数字孪生体的快速构建方法 |
| CN114200903A (zh) * | 2021-12-13 | 2022-03-18 | 中国联合网络通信集团有限公司 | 自动化工艺生产控制方法、设备及计算机可读存储介质 |
| CN114117619A (zh) * | 2021-12-15 | 2022-03-01 | 北京航空航天大学 | 一种数字孪生车间可组态可重构构建方法和系统 |
| CN114217569A (zh) * | 2022-02-23 | 2022-03-22 | 北京安帝科技有限公司 | 工控plc数据的监控方法、装置、电子设备及存储介质 |
| CN114678097B (zh) * | 2022-05-25 | 2022-08-30 | 武汉纺织大学 | 一种面向智慧服装的人工智能与数字孪生系统及方法 |
| CN115080545A (zh) * | 2022-06-30 | 2022-09-20 | 北京亚控科技发展有限公司 | 一种人员当前状态的孪生、订阅方法及装置 |
| CN115017139B (zh) * | 2022-06-30 | 2023-12-01 | 北京亚控科技发展有限公司 | 一种孪生、订阅人员的历史状态的方法及装置 |
| CN115114269A (zh) * | 2022-06-30 | 2022-09-27 | 北京亚控科技发展有限公司 | 模型构建及模型数据订阅方法、装置、电子设备和介质 |
| CN115080544B (zh) * | 2022-06-30 | 2024-05-03 | 北京亚控科技发展有限公司 | 一种孪生、订阅组织的历史状态的方法及装置 |
| CN115017138B (zh) * | 2022-06-30 | 2024-04-02 | 北京亚控科技发展有限公司 | 一种人员计划状态数字孪生方法、装置及设备 |
| CN116090221B (zh) * | 2022-07-11 | 2024-10-18 | 燕山大学 | 用于智能化原位清洗的数字孪生建模方法及其系统 |
| CN115423926B (zh) * | 2022-07-20 | 2023-11-17 | 华建数创(上海)科技有限公司 | 应用于数字孪生建筑的设备模型创建方法 |
| CN115310936B (zh) * | 2022-08-09 | 2024-02-20 | 盟立自动化科技(上海)有限公司 | 基于数字孪生的智慧物流工厂可视化与数据服务技术系统 |
| CN115351524B (zh) * | 2022-08-30 | 2023-09-19 | 北京航空航天大学 | 一种数字孪生多层级模型组装方法 |
| CN115457224B (zh) * | 2022-09-16 | 2023-07-14 | 武汉大海信息系统科技有限公司 | 一种三维地理空间数字孪生架构方法及系统 |
| CN115469594A (zh) * | 2022-09-27 | 2022-12-13 | 北京中佳瑞通科技有限公司 | 一种数字孪生监控系统 |
| CN115658215B (zh) * | 2022-12-14 | 2023-03-31 | 网思科技股份有限公司 | 数字孪生的可视化操作方法、系统和可读存储介质 |
| CN116032971B (zh) * | 2023-01-10 | 2024-03-22 | 吉林大学 | 一种面向数字孪生机加车间的全要素智能感知实现方法 |
| CN116700052A (zh) * | 2023-06-02 | 2023-09-05 | 北京龙软科技股份有限公司 | 一种煤矿数字孪生平台控制方法 |
| CN116843831B (zh) * | 2023-06-20 | 2024-03-15 | 成都信息工程大学 | 一种农产品仓储保鲜库孪生数据管理方法及系统 |
| CN116909238B (zh) * | 2023-08-29 | 2024-01-19 | 广东青藤环境科技有限公司 | 基于数字孪生的智慧水厂综合管理系统 |
| CN117270482A (zh) * | 2023-11-22 | 2023-12-22 | 博世汽车部件(苏州)有限公司 | 基于数字孪生的汽车工厂控制系统 |
| CN118337837A (zh) * | 2024-05-24 | 2024-07-12 | 深圳市磐锋精密技术有限公司 | 一种交互远程控制系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108427390A (zh) * | 2018-04-16 | 2018-08-21 | 长安大学 | 一种基于数字孪生的车间级智能制造系统及其配置方法 |
| WO2019076233A1 (zh) * | 2017-10-17 | 2019-04-25 | 广东工业大学 | 一种智能车间快速定制设计方法及系统 |
| WO2019076235A1 (zh) * | 2017-10-17 | 2019-04-25 | 广东工业大学 | 一种智能车间平行控制方法及系统 |
| CN111061232A (zh) * | 2019-12-09 | 2020-04-24 | 中国科学院沈阳自动化研究所 | 基于数字孪生的生产线设计与优化方法 |
| CN111210359A (zh) * | 2019-12-30 | 2020-05-29 | 中国矿业大学(北京) | 面向智能矿山场景的数字孪生演化机理及方法 |
| CN112162519A (zh) * | 2020-10-21 | 2021-01-01 | 桂林电子科技大学 | 一种复合型机床数字孪生监控系统 |
-
2021
- 2021-01-26 CN CN202110105112.3A patent/CN112818446B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019076233A1 (zh) * | 2017-10-17 | 2019-04-25 | 广东工业大学 | 一种智能车间快速定制设计方法及系统 |
| WO2019076235A1 (zh) * | 2017-10-17 | 2019-04-25 | 广东工业大学 | 一种智能车间平行控制方法及系统 |
| CN108427390A (zh) * | 2018-04-16 | 2018-08-21 | 长安大学 | 一种基于数字孪生的车间级智能制造系统及其配置方法 |
| CN111061232A (zh) * | 2019-12-09 | 2020-04-24 | 中国科学院沈阳自动化研究所 | 基于数字孪生的生产线设计与优化方法 |
| CN111210359A (zh) * | 2019-12-30 | 2020-05-29 | 中国矿业大学(北京) | 面向智能矿山场景的数字孪生演化机理及方法 |
| CN112162519A (zh) * | 2020-10-21 | 2021-01-01 | 桂林电子科技大学 | 一种复合型机床数字孪生监控系统 |
Non-Patent Citations (4)
| Title |
|---|
| 基于数字孪生的智能车间管控;刘义;刘晓冬;焦曼;叶春晖;周乐;;制造业自动化(07);全文 * |
| 数字孪生车间――一种未来车间运行新模式;陶飞;张萌;程江峰;戚庆林;;计算机集成制造系统(01);全文 * |
| 数字孪生车间信息物理融合理论与技术;陶飞;程颖;程江峰;张萌;徐文君;戚庆林;;计算机集成制造系统(08) * |
| 数字孪生车间信息物理融合理论与技术;陶飞等;《计算机集成制造系统》;第23卷(第8期);摘要和第1-4节 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112818446A (zh) | 2021-05-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112818446B (zh) | 一种智能车间数字孪生系统的构建方法 | |
| Fan et al. | A digital-twin visualized architecture for Flexible Manufacturing System | |
| CN109976296A (zh) | 一种基于虚拟传感器的车间生产过程可视化系统及构建方法 | |
| CN111208759A (zh) | 矿井无人化综采工作面数字孪生智能监控系统 | |
| Zhang et al. | Digital twin system design for dual-manipulator cooperation unit | |
| CN116414081A (zh) | 一种基于数字孪生的智慧车间实时监控方法 | |
| CN115439267A (zh) | 一种基于数字孪生的可视化实时监控方法 | |
| CN114035515A (zh) | 面向离散车间生产过程的数字孪生系统及其构建方法 | |
| Liu et al. | Machine tool digital twin: Modelling methodology and applications | |
| CN111966068A (zh) | 电机产线增强现实监控方法、装置、电子设备及存储介质 | |
| CN118378451B (zh) | 一种基于数字孪生的监控方法及装置 | |
| CN113868306A (zh) | 一种基于opc-ua规范的数据建模系统和方法 | |
| CN116415386A (zh) | 一种基于实时数据驱动的数字孪生产线可视化系统 | |
| Guo et al. | Exploration of human-computer interaction system for product design in virtual reality environment based on computer-aided technology | |
| CN117010202A (zh) | 一种面向智能制造系统的数字孪生可重构建模方法 | |
| Li et al. | Digital twin technology in intelligent manufacturing | |
| CN116414554A (zh) | 一种基于并行计算的车间数字孪生系统 | |
| Ye et al. | Research on the monitoring of the industrial robot motion based on digital twins | |
| CN115687494A (zh) | 一种制造系统的数字孪生监控系统 | |
| CN114089709A (zh) | 一种跨域多尺度的数字孪生体构建方法 | |
| CN114996867A (zh) | 基于语义的零部件快速装配方法 | |
| Liu et al. | Digital twin for a robot assembly line: Architecture and implementation. | |
| Zheng et al. | Design of Workshop Control System Based on Digital Twin | |
| CN116303856B (zh) | 一种工业地理信息系统 | |
| Lai et al. | A Review: Machine Tools Digital Twin Modeling And Application |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |