CN1297856C - 具有多层信息结构的特别用于技术和工业应用的文件处理系统和方法 - Google Patents
具有多层信息结构的特别用于技术和工业应用的文件处理系统和方法 Download PDFInfo
- Publication number
- CN1297856C CN1297856C CNB008068704A CN00806870A CN1297856C CN 1297856 C CN1297856 C CN 1297856C CN B008068704 A CNB008068704 A CN B008068704A CN 00806870 A CN00806870 A CN 00806870A CN 1297856 C CN1297856 C CN 1297856C
- Authority
- CN
- China
- Prior art keywords
- file data
- information
- data
- actual information
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000012545 processing Methods 0.000 title abstract description 4
- 238000003860 storage Methods 0.000 claims abstract description 10
- 238000004458 analytical method Methods 0.000 claims description 23
- 230000000007 visual effect Effects 0.000 claims description 23
- 239000011521 glass Substances 0.000 claims description 14
- 230000003190 augmentative effect Effects 0.000 abstract description 2
- 238000009434 installation Methods 0.000 abstract description 2
- 238000011156 evaluation Methods 0.000 abstract 1
- 238000011065 in-situ storage Methods 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 27
- 238000004519 manufacturing process Methods 0.000 description 13
- 238000012423 maintenance Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 10
- 238000011160 research Methods 0.000 description 8
- 238000010276 construction Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000005259 measurement Methods 0.000 description 3
- 238000012827 research and development Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 239000002828 fuel tank Substances 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 230000033772 system development Effects 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 238000012356 Product development Methods 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000002405 diagnostic procedure Methods 0.000 description 1
- 230000005662 electromechanics Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 125000001153 fluoro group Chemical group F* 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000009863 impact test Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000009418 renovation Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000003319 supportive effect Effects 0.000 description 1
- 108010063955 thrombin receptor peptide (42-47) Proteins 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
- 238000007794 visualization technique Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
- G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
- G05B23/0208—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterized by the configuration of the monitoring system
- G05B23/0216—Human interface functionality, e.g. monitoring system providing help to the user in the selection of tests or in its configuration
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
- G05B19/409—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by using manual data input [MDI] or by using control panel, e.g. controlling functions with the panel; characterised by control panel details or by setting parameters
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/32—Operator till task planning
- G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/35—Nc in input of data, input till input file format
- G05B2219/35487—Display and voice output incorporated in safety helmet of operator
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Processing Or Creating Images (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Input From Keyboards Or The Like (AREA)
Abstract
本发明涉及一种特别用于技术和工业应用的文件处理系统和方法，该系统包括存储单元(1)，用于在多个层面(E1...En)上存储文件数据(I1...In)；采集单元(2)，用于采集实际信息(R)；存取单元，用于存取文件数据(I1...In)；以及分析利用单元(A)，用于分析利用实际信息(R)并根据实际信息(R)选取已被存储的文件数据。由此，使得例如对于维护应用在现场，即例如自动化设备的现场，通过结合作为扩充现实的文件数据(I1...In)实现结构化地并有选择地存取文件数据。
Description
技术领域
本发明涉及一种特别用于技术和工业应用的文件处理系统和方法。
背景技术
这样一种系统和方法例如可结合所谓的扩充现实技术(Augmented-Reality-Techniken)来应用。其中涉及面向应用的需求分析和基于扩充现实的系统开发，用于支持在制造工艺和加工工艺中复杂技术产品和设备的研究开发、生产和维护的工作过程，以及用于如汽车的维护支持系统，或者用于特定工艺设备的维护。
根据英国专利GB 2 327 289已知一种工作支持装置，该装置通过显示器及时地将对于待执行工作的指示和这个工作的结果信息显示给流水线上的工人看。工作结果将通过测量手段或通过工人输入特定的部件号而获得，工作过程通过摄像机拍摄下来。
发明内容
本发明的目的是提供一种系统和方法，使得能够按照具体情况(situationsgerecht)快速地获取所存储的文件数据。
本发明的目的通过一种文件处理系统来实现，它包括存储单元，用于在多个层面上存储文件数据；采集单元，用于采集实际信息，其中，该采集单元具有至少一个用于采集图像信息的摄像机；存取单元，用于存取文件数据；以及分析利用单元，用于分析利用实际信息及所采集到的图像信息，并根据实际信息和图像信息选取已被存储的文件数据。
本发明的目的还通过一种文件处理方法来实现，其中，文件数据被存储在多个层面内，并且通过采集单元采集实际信息，其中，采集单元至少具有一个摄像机，用于采集图像信息，在该方法中以如下方式获取文件数据，即，分析利用实际信息和所采集的图像信息并根据实际信息和图像信息选取已存储的文件数据。
文件数据与某些数据有关，例如与设立设备或自动化系统时所产生和收集的数据有关，和/或与设备和自动化系统在运行时根据事先给定的准则进行修正并且与实际吻合的文件数据有关。这些文件数据可以存储在存储单元中，既可以在本地存储，就是说存储在各自的应用场合，也可以存储在任意其它地方，例如存储在每一个设备部件的各自制造厂家的现场。例如，借助于采集单元从一幅图像内容采集实际信息并通过分析利用单元进行利用，使得能够将实际对象归类到存储在文件数据中的对象数据。然后根据实际信息数据，例如以可被检测对象的形式特别自动地选取附加包含在文件数据中的目标数据，并例如在现场提供出来用于维护。通过这种方式使得能够按照具体情况快速地提取当时所需的数据。
由已存储的文件数据进行面向部件的支持，可以通过以下的方式可靠地实现，即文件数据是面向对象地予以存储。例如，一台设备的油箱可以作为实际对象被探测和识别，而其中与这个对象“油箱”相对应的文件数据，如制造年份、容积等被可视化(是可视的)。
按照具体情况快速地提取文件数据还可以通过以下方式进一步得到支持，即采集单元具有一个摄像装置；分析利用单元利用实际信息的方法是，由实际信息求出一种使用环境(Einsatzkontext)，特别是文件数据的一个对象；该系统还具有可视化单元，用于文件数据的可视化。
使用者控制的文件数据存取可以按以下方式实现，采集单元是由使用者控制的、特别是由语音控制的采集单元，和/或由控制数据所控制的采集单元构成。
对于大多应用场合来说，以已存储的文件数据为基础的扩充现实技术的最佳应用可以由这种方式实现，即采集单元和/或可视单元可以由数据眼镜来构成。
附图说明
下面借助附图所示实施例对本发明予以详细说明。
附图中：
图1为一种文件处理系统实施例的方框线路图，
图2为用于服务和维护的文件处理系统的应用实例，
图3为用于按照具体情况存取文件数据的应用实例。
具体实施方式
图1示出借助扩充现实技术获得支持的结构化文件处理系统的方框线路图。该系统包括用于存储文件数据I1...In的存储单元1。文件数据I1...In被存储在多个层面E1...Em上。存储单元1可以通过数据连接D与分析利用单元A相连接，其中分析利用单元A可以与输入单元2和可视单元相连接。在图1所示的实施例中，采集单元2用摄像机表示而可视单元B用显示器表示。但是按照另外一种实施形式，采集单元2和可视设备B也可以是带有集成视频摄像机的数据眼镜。采集单元2用于采集实际信息R，例如关于工业设备和/或自动化设备的各个组成单元的信息。
图1构成了一个利用扩充现实技术与存储在不同层面上的文件数据I1...In的文件处理系统的基本结构。应用说明如下所述：借助于采集单元2采集实际信息，例如以图像信息形式表示的设备。接着通过分析利用单元A利用这个实际信息R，以便检测出各个对象，就是说例如自动化系统的各个部件。这一点例如可以通过随着实际对象提供的附加信息形式来实现，例如二进制条型码标签，或者通过将照片信息与存储在分析利用单元A和/或文件数据1中的可比数据进行比较来实现。在获得与实际信息R相一致的所需对象之后，自动地和/或由使用者控制地调出存储在多个层面E1...Em上的文件数据，并通过可视单元B展示给使用者7。这些文件数据I1...In构成附加信息，该附加信息例如在修理、维护等情况下支持使用者7。这种支持包括按照具体情况快速地提取那些必需的数据。其中，文件数据I1...In可以或者就地存储在例如一个数据处理装置中，或者也可以存储在远处，在后面一种情况下信息数据I1...In的存取例如可以通过互联网连接来实现。
图2示出了用于服务和维护的文件处理系统的应用实例。该系统由一个扩充现实系统10所组成，该系统在下面也可以缩写为AR系统。AR系统包括一个用于存储信息数据的信息模块1b，一个AR基础系统8以及一个AR应用模块。AR系统可以通过网络5连接，例如通过互联网与其它的存储单元1a相连接。使用者7与AR系统10之间的通讯通过接口8a、8b实现。为此AR系统具有一个发射-接收装置，该装置能够或者直接借助接口8a，或者借助一个带有通向使用者7的接口8b且设置在使用者7范围之内的无线电发射-接收装置6，通过数据眼镜4在AR系统与使用者7之间实现双向数据通讯。使用者7例如可以是负责维护设备A1...An的服务技术人员。借助于数据眼镜4使得使用者7能够在设备A1...An之间自由移动。
图3所示系统的工作方式基本上对应于已经就图1所述的作用方式。使用者7观察例如设备的各个组成单元。借助于设置在数据眼镜4上的、当作采集单元使用的摄像机将实际信息传送到AR系统10。在那里对实际信息进行分析利用，并存取存储在第一存储单元1a或第二存储单元1b中的文件数据。文件数据通过设置在数据眼镜4上的一个可视装置展示给使用者7，并面向对象地且按照具体情况地提供给使用者7用。
图3示出了一种按照具体情况存取文件数据的应用实例。其中，在左侧的图片B1中展示出管道的图像，这些管道可以通过在图片B2中所示的数据眼镜4来观察。在数据眼镜4上设置例如视频摄像机形式的采集单元2。在左侧图片B1中标出两个点P1、P2，它们分别代表借助于数据眼镜4所观察到的两个图片局部。在观察第一点P1时，即观察第一点P1所属范围内的管道时，使用者7在数据眼镜4中可以看到附加信息。这些附加信息I11、I12由文件数据组成，其中包含与第一点P1有关的这一管道段的工作说明，以及与第二点P2有关的在第二步中要执行的安装说明。在这种情况下安装说明的内容包括，将点P2处的螺纹连接松开所需扭矩和转向通过可视设备E12通知给使用者7。此外在数据眼镜4上设置麦克风11，通过麦克风可以语音控制地支持使用者有针对性地选取文件数据。
下面给出本发明应用领域的背景信息：其中涉及面向应用的需求分析和基于扩充现实的系统开发，用于支持在制造工艺和加工工艺中复杂技术产品和设备的研究开发、生产和维护的工作过程，以及用于如汽车的维护支持系统，或者用于任意工程设备的维护。
扩充现实(Augmented Reality)，简称AR，是一种具有巨大潜能支持工业生产过程的全新的人机交互方式。在这一技术中，观察者的视野增加了计算机所产生的虚拟对象，使得产品信息或过程信息能够直观地被利用。除了非常简单的交互之外，便携式计算机的使用以非常灵活的方式拓展了AR的机动应用领域，尤其例如在将过程数据、测量数据或仿真数据与实际对象连接起来的各个方面。
德国工业状况的特征是，顾客对产品的个性和质量要求不断提高，以及产品形成过程的时间显著缩短。尤其是在复杂技术产品和设备的研究开发、生产和服务中，通过人机交互技术革新的解决方案，即在已有数据的基础上按照具体情况支持使用者的知识需求和信息需求，不仅可以实现提高效率和提高产量的目的，而且能够使工作有利于管理和促进学习。
扩充现实是一种可应用在大量技术革新性场合的技术：
·例如在“混合制造模型”附件的研究领域中，在混合虚拟环境的基础上可以明显地提高原先的研究进程。相对于浸入式、亦即浸没式“虚拟现实”(VR)解决方案来说，对于使用者的主要优点在于，触觉特性能够借助于真实的模型逼真地建立起来，而可视感觉方面，如显示变化，是可以虚拟操纵的。此外对于面向使用者的计算机辅助模型的有效性，如对于结构部件的验证或撞击试验，具有巨大的潜能。
·此外，在柔性制造领域中，具有资格的专业工人可以更加容易地调整机器，其方法是例如通过移动的AR组元可以在视野中直接再现混合虚拟应力状况。如果在现场可以直接将合同状况与该合同所要的产品信息连接起来，则一个适合专业工人的车间生产调度和生产控制将变得更加容易。这一点同样适合于装配，其中每个工作步骤在训练阶段就已经以混合-虚拟方式呈现给装配者。与此相关，例如通过将实际装配过程与包括最佳化方案在内的模拟结果进行比较，不仅可以改善工作计划的质量，而且可以在关键的起动阶段简化并加速装配过程。
·最后，在服务领域，传统的技术几乎不再能够满足需要，不再能支持复杂的诊断过程和故障排除过程并完成建立文档。但由于这些过程在许多领域本来就已经以数字化数据为基础进行规划，AR技术提供了这样的可能性，即，获取用于维护的信息源，并在例如数据眼镜中通过将其叠加在实际对象上以便给技术人员解释执行过程。通过位于远方的专家与位于现场的工人之间跨越全球距离的通信，AR技术辅助的“远程眼睛”能够实现以协同工作为基础协同解决问题。这种情况对于大多数中等规模的机器制造厂家而言尤为显得重要。因为这些厂家受全球化的迫使，其用户产品的地点遍布世界。但是，由于经济原因既不能在所有重要的市场中建立分公司，也不能使总部有经验的服务工人放弃掉对日益变得复杂的设备娴熟深入的知识。
扩充现实中人机交互的特殊性在于，与计算机之间的通信非常简单和直观，例如通过诸如语音处理或姿势识别等多模态交互技术进行补充完善。此外便携式计算机单元的应用能够实现完全新型的移动式使用方式，其中特定数据能够随时通过无线网络而获得。全新的可视化技术使得能够在实际对象上或在实际环境中添加例如测量数据或仿真数据的直接注释。与分布式应用相结合，多个使用者就能够在一种真实环境中借助于公共的数据库共同工作(分享扩充环境)，或在不同的环境中以AR技术辅助的方式进行协作。
扩充现实技术在最近几年才被深入地研究。因此不仅在国内而且在国际上都只有很少的应用，而且大多数是研究机构中科学试验原型的形式。
·美国：如同许多最新技术一样，扩充现实技术的应用潜能首先在北美拓展，例如在座舱结构或机电(mechatronisch)仪器的维护方面。飞机制造厂商波音公司已经首先在具有AR技术的装配领域进行现场实验。结果是，美国在这一高技术领域也处于关键位置，随之而来的是可能的技术领先。
·日本：在日本正在进行多种AR技术研究，例如混合-虚拟建筑规划，远程会议(Telepraesenz)或“网络购物”。其发展的萌芽是1997年建立的混合现实系统实验室，该实验室作为管理中心由经济界和科学界共同承担。预计日本的家用电器企业在未来的消费品领域中将起到特殊的推动作用。
·欧洲：欧洲目前在AR技术领域只有很少的研究小组。维也纳大学的一个研究小组从事于混合-现实可视化方面的研究。IGD小组在已接近尾声的ACTS计划的CICC项目中开发出用于建筑工业的第一个应用，并开发出用于培训汽车制造工人的科学试验原型。
在本发明中尤其是在特指的上下文关系中，应用场合可以理解为“生产机械和机床”(数控的、自动化技术的过程)以及“复杂技术组元/设备/系统(例如汽车、也可以是工业机器和设备)的诊断-/维护支持系统”。
目前，为了支持仪器/系统/设备的复杂性和多样性，维护工作者/专业人员(以下称为“员工”)必须掌握从系统结构/运转状态到维护等阶段的知识，需要面对许多内容丰富的文档。这些文档具体地说可能涉及手册、系统及功能说明、安装指南等等。每一种应用都会产生广泛的信息多样性；存取在实际工作环境中的重要说明经常是与高昂的费用相连的。
除了对信息存取没有合适的支持这一问题之外，目前也没有给出合适的文件结构，通过例如基于AR技术的智能系统支持有针对性地选取使用。这样的系统需要获取经过选择的信息细节，这些信息细节要按照具体情况提供给使用者。目前电子化提供的文件也主要以纸张形式出现。
本发明涉及通过上述意义的智能化支持系统给使用者提供文件的适当结构和初步准备。
目前文件已经制作成电子化可供使用的形式。通过适当的文件结构和合适的获取方式(例如超链接)还将改善DV技术的获取。
按照本发明，文件的信息内容被划分成不同的单元，其中的划分主要用于区分不同的数据，一种数据是以实际信息为基础的(即可观察到的信息，如对象图像)，而另一种数据则描述附加信息(如对象特性，与对象有关的使用说明，结构指南等等)。
通过文件的这种“多层面”结构使得所包含的信息能够有选择地供使用。
总之提供了这样一种系统，该系统在下述意义上支持文件的数据技术结构和使用：
·文件被组织在多个层面(或“平面”)中；例如可以设想一个或多个“静态面”(草图，图片，视频图象，...)，此外还可以设想一个或多个具有不同细节和分类信息内容的“动态画面”(附加信息)。
·为此将信息内容分类为与“本来能看到什么”有关的(在应用现场所给出的现实)和与“附加地能利用什么”(附加信息/信息细节)有关的信息。
·信息存取可实现面向对象，以便能够按照具体情况快速地获取所需的数据。
基于AR的具有自动环境识别技术的一个实施例已经投入使用：例如对于飞机机身中部的管道系统描述对应于工人在其应用现场所发现的给定现实。这种情况由支持系统例如通过摄像机探测/拍摄下来，并能用于查明使用环境(“工人观察哪个对象？”)。由此AR系统推断出附加信息，这个附加信息现在按照具体情况(即对应于被观察的对象)从多层面结构的文件中被提取出来。然后，这些附加信息(例如要执行的工作步骤)通过支持系统，以与实际图像适当重叠的方式，渐显地进入使用者的视野。
另一个实施例与以前传统的文件利用方式有关系：使用者自己已经辨别出应用场合并通知支持系统(例如通过条型码识别或传统的DV技术所支持的选择方式)。现在根据情况从多层面结构的文件库中使用静态呈现的照片和视频。使用者的支持系统再自动地从源于对应于现场对象的另外一个层面的多层面结构文件中选择出附加信息。之后，通过重叠将这些信息层(图片/视频以及附加信息)展现在使用者的视野中。
在图3的情况中例如可以采用下面的信息分类：
·实际的、可观察的信息，在这种情况下是在背景中示出的管道，它或者以静态图片或者以视频的形式进行建档，
·通过对文件的一个单独层面进行存取，提供可渐显地进入画面的操作指示数据，
·由此再分离出执行工作过程的详细信息或者有关被操作对象(“要安装的管道”)的技术数据。
在研究、生产和服务领域中的应用场合，则是基于透视数据眼镜并结合使用便携式计算机，为受到扩充现实支持的生产提供示例说明或作为扩充现实用于服务和维护。
总之，本发明涉及这样一种特别用于技术和工业应用的文件处理系统和方法，该系统包括存储单元1，用于在多个层面E1...En上存储文件数据I1...In；采集单元2，用于采集实际信息R；存取单元，用于存取文件数据I1...In，以及分析利用单元A，用于分析利用实际信息R并根据实际信息R选取已存储的文件数据。由此，使得能够在维护应用的现场，即例如自动化设备的现场，通过结合作为扩充现实的文件数据I1...In实现结构化地并有选择地存取文件数据。
Claims (10)
1.一种文件处理系统，它包括存储单元(1)，用于在多个层面(E1...En)上存储文件数据(I1...In)；采集单元(2)，用于采集实际信息(R)，其中，该采集单元具有至少一个用于采集图像信息的摄像机；存取单元，用于存取文件数据(I1...In)；以及分析利用单元(A)，用于分析利用实际信息(R)及所采集到的图像信息，并根据实际信息(R)和所述图像信息选取已被存储的文件数据。
2.如权利要求1所述的系统，其特征是，所述用于分析利用实际信息(R)的分析利用单元(A)被设置成，由实际信息求出文件数据的一个对象，并且该系统具有可视单元(B)，用于将对应于所求出的文件数据对象的文件数据可视化。
3.如权利要求1所述的系统，其特征是，所述用于分析利用实际信息(R)的分析利用单元(A)被设置成，由实际信息求出一个应用环境，并且该系统具有用于文件数据可视化的可视单元(B)。
4.如权利要求1至3中任一项所述的系统，其特征是，所述采集单元(2)由使用者控制。
5.如权利要求4所述的系统，其特征是，所述摄像机设置在数据眼镜(4)上。
6.一种文件处理方法，其中，文件数据(I1...In)被存储在多个层面(E1...En)内，并且通过采集单元(2)采集实际信息(R)，其中，采集单元至少具有一个摄像机，用于采集图像信息，在该方法中以如下方式获取文件数据(I1...In)，即，分析利用实际信息(R)和所采集的图像信息并根据实际信息(R)和图像信息选取已存储的文件数据(I1...In)。
7.如权利要求6所述的方法，其特征是，分析利用单元(A)按如下方式来分析利用实际信息(R)，即，可以由实际信息求出文件数据的一个对象，并且通过可视设备(B)使对应于所求出文件数据对象的文件数据可视化。
8.如权利要求6所述的方法，其特征是，由所述实际信息求出一个应用环境，并通过可视单元(B)使所求出的文件数据(I1...In)可视化。
9.如权利要求6至8中任一项所述的方法，其特征是，所述采集单元(2)由使用者控制。
10.如权利要求6所述的方法，其特征是，所述摄像机设置在数据眼镜(4)上。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE19913678 | 1999-03-25 | ||
| DE19913678.5 | 1999-03-25 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1349624A CN1349624A (zh) | 2002-05-15 |
| CN1297856C true CN1297856C (zh) | 2007-01-31 |
Family
ID=7902451
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNB008068704A Expired - Lifetime CN1297856C (zh) | 1999-03-25 | 2000-03-13 | 具有多层信息结构的特别用于技术和工业应用的文件处理系统和方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7814122B2 (zh) |
| EP (1) | EP1163557B1 (zh) |
| CN (1) | CN1297856C (zh) |
| AT (1) | ATE247841T1 (zh) |
| DE (1) | DE50003361D1 (zh) |
| ES (1) | ES2206224T3 (zh) |
| WO (1) | WO2000058799A1 (zh) |
Families Citing this family (43)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE10127396A1 (de) * | 2000-06-13 | 2001-12-20 | Volkswagen Ag | Verfahren zum Verwerten eines Altfahrzeugs |
| US20120154438A1 (en) * | 2000-11-06 | 2012-06-21 | Nant Holdings Ip, Llc | Interactivity Via Mobile Image Recognition |
| DE10103922A1 (de) * | 2001-01-30 | 2002-08-01 | Physoptics Opto Electronic Gmb | Interaktives Datensicht- und Bediensystem |
| US7043310B2 (en) | 2001-02-16 | 2006-05-09 | Siemens Aktiengesellschaft | Device and process for operation of automation components |
| US8210927B2 (en) * | 2001-08-03 | 2012-07-03 | Igt | Player tracking communication mechanisms in a gaming machine |
| EP1487616B1 (de) * | 2002-03-20 | 2010-06-30 | Volkswagen Aktiengesellschaft | Automatische prozesskontrolle |
| DE10244691A1 (de) * | 2002-09-24 | 2004-04-01 | Audi Ag | Verfahren zum Aufbau eines Technikträgers |
| US20040090449A1 (en) * | 2002-11-13 | 2004-05-13 | Ge Medical Systems Global Technology Company, L.L C. | Method and program for increassing field engineer performance and providing self-paced training |
| JP4244919B2 (ja) * | 2004-12-14 | 2009-03-25 | ソニー株式会社 | 情報処理装置および方法、プログラム、並びに情報処理システム |
| US8041650B2 (en) * | 2005-03-11 | 2011-10-18 | Howard Marcus | Method and system for directed documentation of construction projects |
| JP5124912B2 (ja) * | 2005-06-23 | 2013-01-23 | ソニー株式会社 | 電子広告システム及び電子広告方法 |
| DE102006014571A1 (de) * | 2006-03-29 | 2007-10-04 | Di Ke Opto-Electronics Co., Ltd | Verwendungsverfahren von Geräten für die Sichtprüfung |
| US7729786B2 (en) * | 2006-09-26 | 2010-06-01 | Rockwell Automation Technologies, Inc. | Natively retaining project documentation in a controller |
| KR100914848B1 (ko) * | 2007-12-15 | 2009-09-02 | 한국전자통신연구원 | 혼합현실 시스템 및 그 구현 방법 |
| EP2587792B1 (en) * | 2010-06-28 | 2017-08-30 | LG Electronics Inc. | Method and apparatus for providing the operation state of an external device |
| US9910866B2 (en) | 2010-06-30 | 2018-03-06 | Nokia Technologies Oy | Methods, apparatuses and computer program products for automatically generating suggested information layers in augmented reality |
| US9224322B2 (en) * | 2012-08-03 | 2015-12-29 | Apx Labs Inc. | Visually passing data through video |
| US9329678B2 (en) * | 2012-08-14 | 2016-05-03 | Microsoft Technology Licensing, Llc | Augmented reality overlay for control devices |
| DE102013200798B3 (de) | 2013-01-18 | 2014-08-07 | Trumpf Werkzeugmaschinen Gmbh + Co. Kg | Maschinensteuerung, Maschinensteuerungswartungssystem und Maschinensteuerungswartungsverfahren |
| US9740935B2 (en) | 2013-11-26 | 2017-08-22 | Honeywell International Inc. | Maintenance assistant system |
| KR102104136B1 (ko) * | 2013-12-18 | 2020-05-29 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 제어 장치를 위한 증강 현실 오버레이 |
| US9911351B2 (en) | 2014-02-27 | 2018-03-06 | Microsoft Technology Licensing, Llc | Tracking objects during processes |
| FR3022065B1 (fr) * | 2014-06-04 | 2017-10-13 | European Aeronautic Defence & Space Co Eads France | Procede de generation d'une maquette numerique enrichie |
| AT516306B1 (de) * | 2014-09-22 | 2017-02-15 | Avl List Gmbh | Verfahren zum Erstellen einer dreidimensionalen Dokumentation |
| DE102015201290A1 (de) | 2015-01-26 | 2016-07-28 | Prüftechnik Dieter Busch AG | Positionieren zweier Körper mittels eines Ausrichtsystems mit einer Datenbrille |
| DE102015207134A1 (de) * | 2015-04-20 | 2016-10-20 | Prüftechnik Dieter Busch AG | Verfahren zum Erfassen von Vibrationen einer Vorrichtung und Vibrationserfassungssystem |
| US10528021B2 (en) | 2015-10-30 | 2020-01-07 | Rockwell Automation Technologies, Inc. | Automated creation of industrial dashboards and widgets |
| US10313281B2 (en) | 2016-01-04 | 2019-06-04 | Rockwell Automation Technologies, Inc. | Delivery of automated notifications by an industrial asset |
| US9898654B2 (en) | 2016-03-29 | 2018-02-20 | International Business Machines Corporation | Translating procedural documentation into contextual visual and auditory guidance |
| US10318570B2 (en) | 2016-08-18 | 2019-06-11 | Rockwell Automation Technologies, Inc. | Multimodal search input for an industrial search platform |
| US10545492B2 (en) | 2016-09-26 | 2020-01-28 | Rockwell Automation Technologies, Inc. | Selective online and offline access to searchable industrial automation data |
| US10319128B2 (en) | 2016-09-26 | 2019-06-11 | Rockwell Automation Technologies, Inc. | Augmented reality presentation of an industrial environment |
| US10401839B2 (en) | 2016-09-26 | 2019-09-03 | Rockwell Automation Technologies, Inc. | Workflow tracking and identification using an industrial monitoring system |
| US10735691B2 (en) | 2016-11-08 | 2020-08-04 | Rockwell Automation Technologies, Inc. | Virtual reality and augmented reality for industrial automation |
| US10388075B2 (en) | 2016-11-08 | 2019-08-20 | Rockwell Automation Technologies, Inc. | Virtual reality and augmented reality for industrial automation |
| US10866631B2 (en) | 2016-11-09 | 2020-12-15 | Rockwell Automation Technologies, Inc. | Methods, systems, apparatuses, and techniques for employing augmented reality and virtual reality |
| DE102017107224A1 (de) * | 2017-04-04 | 2018-10-04 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | Verfahren und Vorrichtung zur Darstellung einer Bauteildokumentation |
| US10713485B2 (en) | 2017-06-30 | 2020-07-14 | International Business Machines Corporation | Object storage and retrieval based upon context |
| CN108429895A (zh) * | 2017-08-12 | 2018-08-21 | 中民筑友科技投资有限公司 | 一种构件监控视频的生成方法及装置 |
| KR102434402B1 (ko) * | 2017-09-19 | 2022-08-22 | 한국전자통신연구원 | 혼합현실 콘텐츠를 제공하는 장치 및 방법 |
| US10445944B2 (en) | 2017-11-13 | 2019-10-15 | Rockwell Automation Technologies, Inc. | Augmented reality safety automation zone system and method |
| TWI659279B (zh) * | 2018-02-02 | 2019-05-11 | 國立清華大學 | 基於擴充實境的加工規劃設備 |
| CN110955196A (zh) * | 2018-09-27 | 2020-04-03 | 北京国双科技有限公司 | 一种生产工艺指标数据的处理方法及系统 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05324039A (ja) * | 1992-05-26 | 1993-12-07 | Fanuc Ltd | 数値制御装置 |
| CN1128373A (zh) * | 1994-08-01 | 1996-08-07 | 国际商业机器公司 | 自行配置的计算机系统 |
| US5712649A (en) * | 1991-11-01 | 1998-01-27 | Sega Enterprises | Head-mounted image display |
| US5812394A (en) * | 1995-07-21 | 1998-09-22 | Control Systems International | Object-oriented computer program, system, and method for developing control schemes for facilities |
| DE19716327A1 (de) * | 1997-04-18 | 1998-10-29 | Branscheid Industrieelektronik | Anzeigevorrichtung |
| US5850352A (en) * | 1995-03-31 | 1998-12-15 | The Regents Of The University Of California | Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images |
| GB2327289A (en) * | 1997-07-15 | 1999-01-20 | Honda Motor Co Ltd | Job Aiding Apparatus for Assembly Line |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5754766A (en) * | 1991-04-17 | 1998-05-19 | Shaw; Venson M. | Integrated circuit system for direct document execution |
| US5644493A (en) * | 1991-08-30 | 1997-07-01 | Nsk Ltd. | Production information processing system |
| US5537526A (en) * | 1993-11-12 | 1996-07-16 | Taugent, Inc. | Method and apparatus for processing a display document utilizing a system level document framework |
| JP3069014B2 (ja) * | 1994-10-21 | 2000-07-24 | 株式会社東京精密 | 操作ガイダンス付き座標測定システム |
| WO1996029674A1 (en) * | 1995-03-20 | 1996-09-26 | Lau Technologies | Systems and methods for identifying images |
| US6046712A (en) * | 1996-07-23 | 2000-04-04 | Telxon Corporation | Head mounted communication system for providing interactive visual communications with a remote system |
| US6739873B1 (en) * | 1996-09-18 | 2004-05-25 | Bristlecone Corporation | Method and apparatus for training a shooter of a firearm |
| CA2307877C (en) * | 1997-10-30 | 2005-08-30 | The Microoptical Corporation | Eyeglass interface system |
-
2000
- 2000-03-13 DE DE50003361T patent/DE50003361D1/de not_active Expired - Lifetime
- 2000-03-13 EP EP00922431A patent/EP1163557B1/de not_active Expired - Lifetime
- 2000-03-13 AT AT00922431T patent/ATE247841T1/de not_active IP Right Cessation
- 2000-03-13 ES ES00922431T patent/ES2206224T3/es not_active Expired - Lifetime
- 2000-03-13 CN CNB008068704A patent/CN1297856C/zh not_active Expired - Lifetime
- 2000-03-13 WO PCT/DE2000/000782 patent/WO2000058799A1/de active IP Right Grant
-
2001
- 2001-09-25 US US09/963,010 patent/US7814122B2/en not_active Expired - Fee Related
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5712649A (en) * | 1991-11-01 | 1998-01-27 | Sega Enterprises | Head-mounted image display |
| JPH05324039A (ja) * | 1992-05-26 | 1993-12-07 | Fanuc Ltd | 数値制御装置 |
| CN1128373A (zh) * | 1994-08-01 | 1996-08-07 | 国际商业机器公司 | 自行配置的计算机系统 |
| US5850352A (en) * | 1995-03-31 | 1998-12-15 | The Regents Of The University Of California | Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images |
| US5812394A (en) * | 1995-07-21 | 1998-09-22 | Control Systems International | Object-oriented computer program, system, and method for developing control schemes for facilities |
| DE19716327A1 (de) * | 1997-04-18 | 1998-10-29 | Branscheid Industrieelektronik | Anzeigevorrichtung |
| GB2327289A (en) * | 1997-07-15 | 1999-01-20 | Honda Motor Co Ltd | Job Aiding Apparatus for Assembly Line |
Also Published As
| Publication number | Publication date |
|---|---|
| EP1163557A1 (de) | 2001-12-19 |
| EP1163557B1 (de) | 2003-08-20 |
| US7814122B2 (en) | 2010-10-12 |
| US20020049775A1 (en) | 2002-04-25 |
| DE50003361D1 (de) | 2003-09-25 |
| ES2206224T3 (es) | 2004-05-16 |
| ATE247841T1 (de) | 2003-09-15 |
| WO2000058799A1 (de) | 2000-10-05 |
| CN1349624A (zh) | 2002-05-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1297856C (zh) | 具有多层信息结构的特别用于技术和工业应用的文件处理系统和方法 | |
| EP1157316B1 (de) | System und verfahren zur situationsgerechten unterstützung der interaktion mit hilfe von augmented-reality-technologien | |
| US7103506B2 (en) | System and method for object-oriented marking and associating information with selected technological components | |
| García-Pereira et al. | A collaborative augmented reality annotation tool for the inspection of prefabricated buildings | |
| CN105139453A (zh) | 一种三维模型展示系统 | |
| CN111966068A (zh) | 电机产线增强现实监控方法、装置、电子设备及存储介质 | |
| CN109684495A (zh) | 一种装配式建筑的大样图审图方法、装置、设备及系统 | |
| KR100976829B1 (ko) | 선박의 설계 디자인 리뷰 방법 및 그 서비스 시스템 | |
| CN112567476A (zh) | 原子能发电厂的总体布置图的表示和利用装置 | |
| Molinero Sánchez et al. | BIM methodology in heritage management | |
| CN114116100A (zh) | 基于ar交互式电子手册的导弹武器保障维修系统及方法 | |
| Faatz | Architectural programming: providing essential knowledge of project participants needs in the pre-design phase | |
| DE102019211871B4 (de) | Verfahren und Anordnung zur Darstellung von technischen Objekten | |
| CN117575539B (zh) | 一种基于3dgis的项目施工管理方法、系统 | |
| Turk et al. | Towards a Parsimonious Information Management for Energy Retrofitting of Buildings | |
| Manghisi et al. | Exploiting Augmented Reality to Display Technical Information on Industry 4.0 P&ID | |
| CN117077040A (zh) | 基于机器学习的大型复杂装备故障诊断与预测系统 | |
| CN116665492A (zh) | 一种基于虚拟现实技术的发电机组装配指导系统和方法 | |
| CN117372206A (zh) | 一种元宇宙统一服务集成方法与系统 | |
| CN117873571A (zh) | 持续集成流水线的配置方法及其装置 | |
| CN115660414A (zh) | 一种安全风险动态警示装置、系统和方法 | |
| CN115306411A (zh) | 一种基于二维码的盾构诱导维修方法与系统 | |
| Diebolt | Direct Digital Input of Façade Survey Data Using Handheld Computing Devices REFERENCE: Diebolt, K., Banta, J., and Corbin, C.,“Direct Digital Input of Facade Survey Data Using Handheld Computing Devices" Building Façade Maintenance, Repair and Inspection ASTM STP 1444, JL Erdly and TA Schwartz, Eds., ASTM International, West Conshohocken | |
| CN117830034A (zh) | Bim的自动优化和显示方法、装置、计算机设备及存储介质 | |
| Khoury et al. | Standard Product Models and Project Databases for Context-Aware Information Access and Retrieval in Construction and Other Engineering Applications |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C06 | Publication | ||
| PB01 | Publication | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CX01 | Expiry of patent term | ||
| CX01 | Expiry of patent term |
Granted publication date: 20070131 |