CN109085981B - 利用可视化和记录的飞行器检测系统 - Google Patents
利用可视化和记录的飞行器检测系统 Download PDFInfo
- Publication number
- CN109085981B CN109085981B CN201810535554.XA CN201810535554A CN109085981B CN 109085981 B CN109085981 B CN 109085981B CN 201810535554 A CN201810535554 A CN 201810535554A CN 109085981 B CN109085981 B CN 109085981B
- Authority
- CN
- China
- Prior art keywords
- detection device
- annotation
- vehicle
- mobile detection
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 224
- 238000012800 visualization Methods 0.000 title abstract description 5
- 238000000034 method Methods 0.000 claims abstract description 86
- 238000004519 manufacturing process Methods 0.000 claims description 40
- 238000012423 maintenance Methods 0.000 claims description 27
- 238000004891 communication Methods 0.000 claims description 21
- 230000003190 augmentative effect Effects 0.000 claims description 11
- 239000004984 smart glass Substances 0.000 claims description 8
- 230000008439 repair process Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 description 50
- 238000010586 diagram Methods 0.000 description 27
- 238000012545 processing Methods 0.000 description 25
- 238000007726 management method Methods 0.000 description 11
- 230000002085 persistent effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 5
- 238000007689 inspection Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 210000002741 palatine tonsil Anatomy 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000009419 refurbishment Methods 0.000 description 3
- 239000011230 binding agent Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005553 drilling Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 239000002390 adhesive tape Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000013100 final test Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000003381 stabilizer Substances 0.000 description 1
- 230000008961 swelling Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
- G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
- G01N23/06—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
- G01N23/18—Investigating the presence of flaws defects or foreign matter
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06395—Quality analysis or management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D21/00—Measuring or testing not otherwise provided for
- G01D21/02—Measuring two or more variables by means not covered by a single other subclass
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M5/00—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
- G01M5/0033—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings by determining damage, crack or wear
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M5/00—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
- G01M5/0075—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings by means of external apparatus, e.g. test benches or portable test systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
- G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
- G01N23/04—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
- G01N29/22—Details, e.g. general constructional or apparatus details
- G01N29/225—Supports, positioning or alignment in moving situation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
- G01N29/44—Processing the detected response signal, e.g. electronic circuits specially adapted therefor
- G01N29/4409—Processing the detected response signal, e.g. electronic circuits specially adapted therefor by comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/20—Administration of product repair or maintenance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/04—Manufacturing
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B15/00—Measuring arrangements characterised by the use of electromagnetic waves or particle radiation, e.g. by the use of microwaves, X-rays, gamma rays or electrons
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
- G01N29/22—Details, e.g. general constructional or apparatus details
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Pathology (AREA)
- Analytical Chemistry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Immunology (AREA)
- Biochemistry (AREA)
- Chemical & Material Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Aviation & Aerospace Engineering (AREA)
- Operations Research (AREA)
- General Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Quality & Reliability (AREA)
- Educational Administration (AREA)
- Human Computer Interaction (AREA)
- Game Theory and Decision Science (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Manufacturing & Machinery (AREA)
- Primary Health Care (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了利用可视化和记录的飞行器检测系统。一种用于交通工具检测系统的方法、系统和装置,其包含移动式检测器件、显示系统、配置为在显示系统上显示的图形用户界面和控制器。控制器被配置为识别交通工具内的移动式检测器件的定位,并且接收用户输入,该用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组。控制器在与交通工具有关的位置处将注释与移动式检测器件的视场中的项目相关联地创建,并且在图形用户界面上显示用于移动式检测器件的注释,其中该注释被分配到与交通工具有关的位置。
Description
技术领域
本公开一般涉及飞行器,并且特别地,涉及用于利用可视化和记录检测飞行器的方法和系统。
背景技术
在为客户制造飞行器时,许多检测是在制造过程期间执行的。最后的检测是由人工操作员执行的。最后的检测是在将飞行器交付给客户之前执行的最后一步。该最后的检测目前在飞行器的检测期间采用物理标记和做注释。
物理标记可以包括在将飞行器交付给客户之前将胶带或其他标记应用于位置以识别需要修理的区域。附加地,注释可以被写在带胶背的纸片上,该胶背可以贴在提供所描述的不一致性或可能需要修理的飞行器中的位置。
目前,这些标记和物理注释登记在三环活页夹或笔记本中。物理注释的位置和标识符可以登记在三环活页夹中。
当前检测过程既费时又效率低。例如,胶带可能从标记为返工的项目上掉下来。注释可能被曲解。此外,对从飞行器中的位置被留下的胶带和注释可能处以处罚和罚款。例如,在飞行器中的头顶储藏箱中可能漏掉胶带。
因此,希望具有一种考虑到上面讨论的问题以及其他可能的问题中的至少一些的方法和装置。例如,希望具有一种克服有效执行飞行器中检测的技术问题的方法和装置。
发明内容
本公开的一个实施例提供了一种交通工具检测系统。交通工具检测系统包含移动式检测器件、用于移动式检测器件的显示系统、图形用户界面和控制器。图形用户界面被配置为在显示系统上显示。控制器被配置为与移动式检测器件一起操作。控制器被配置为识别交通工具内的移动式检测器件的定位。控制器接收用户输入,该用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组。控制器在与交通工具有关的位置处将注释与移动式检测器件的视场中的项目相关联地创建,其中注释被分配到与交通工具有关的位置。在用于移动式检测器件的显示系统上的图形用户界面上,控制器将注释与视场中的项目相关联地显示。
本公开的另一个实施例提供了一种飞行器检测系统。飞行器检测系统包含移动式检测器件、用于移动式检测器件的用户界面和控制器。控制器被配置为与移动式检测器件一起操作。控制器被配置为识别飞行器内的移动式检测器件的定位。控制器接收用户输入,该用户输入包含基于飞行器内的移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目有关的手势组。控制器将注释与移动式检测器件的视场中的项目组中的项目相关联地创建。控制器在用于移动式检测器件的显示系统上将注释与视场中的项目相关联地显示,使得能够沉浸在增强现实环境中。
本公开的又一个实施例提供一种用于检测交通工具的方法。该方法包含识别交通工具内的移动式检测器件的定位。该方法接收用户输入,该用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组。该方法在与交通工具有关的位置处将注释与移动式检测器件的视场中的项目组中的项目相关联地创建,其中将注释分配到该位置。该方法在用于移动式检测器件的显示系统上的图形用户界面上将注释与视场中的项目相关联地显示。
特征和功能可以在本公开的各个实施例中独立地实现,或者可以结合在其他的实施例中,其中进一步的细节可以参考下面的说明书和附图看出。
附图说明
在所附的权利要求中阐明了被认为具有说明性实施例性质的新颖特征。然而,说明性实施例以及其优选的使用模式、进一步的目标和特征,当与附图一起阅读时通过参考本公开的说明性实施例的以下详细描述将得到最佳的理解,其中:
图1是根据一个说明性实施例的检测环境的框图的图示;
图2是根据一个说明性实施例的注释的框图的图示;
图3是根据一个说明性实施例的用于创建注释的数据流的图示;
图4是根据一个说明性实施例在图形用户界面中显示的注释的图示;
图5是根据一个说明性实施例在图形用户界面中显示的注释的图示;
图6是根据一个说明性实施例在图形用户界面中显示的注释的图示;
图7是根据一个说明性实施例在图形用户界面中创建注释的图示;
图8是根据一个说明性实施例的用于检测交通工具的过程的流程图的图示;
图9是根据一个说明性实施例的用于显示注释的过程的流程图的图示;
图10是根据一个说明性实施例的用于识别基于人工操作员的角色可显示的注释的过程的流程图的图示;
图11是根据一个说明性实施例的用于识别基于的注释的状态可显示的注释的过程的流程图的图示;
图12是根据一个说明性实施例的数据处理系统的框图的图示;
图13是根据一个说明性实施例的飞行器制造和服务方法的框图的图示;
图14是其中可以实施一个说明性实施例的飞行器的框图的图示;以及
图15是根据一个说明性实施例的产品管理系统的框图的图示。
具体实施方式
说明性实施例认识并考虑一个或更多个不同的考虑因素。例如,说明性实施例认识到并考虑到目前使用的使用物理和纸质的注释来检测交通工具(诸如飞行器)的技术比所期望的花费更多的时间和精力。说明性实施例还认识到并考虑到目前使用的用于检测飞行器的技术采用没有实时度量的处理系统的不相交的集合和用于收集关于不一致性的信息的措施。
因此,说明性实施例提供了一种用于检测交通工具的方法和装置。在一个说明性示例中,过程为执行检测的人工操作员提供增强现实体验。该过程识别交通工具内的移动式检测器件的定位。接收用户输入,其中用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组。在与交通工具有关的位置处将注释与移动式检测器件的视场中的项目组中的项目相关联地创建,其中将注释分配到该位置。在用于移动式检测器件的显示系统上的图形用户界面上,注释与视场中的项目相关联地被显示。
现在参考附图,特别是参考图1,描绘了根据一个说明性实施例的检测环境的框图的图示。检测环境100包括检测系统102。如所描绘的,检测系统102被用于检测交通工具104。在该说明性示例中,交通工具104采用飞行器106的形式。飞行器106可以从商用飞机、军用喷气机、旋翼飞行器、直升机或某种其他合适类型的飞行器中的一个选择。
在该说明性示例中,检测系统102由一个或更多个人工操作员108操作,以执行交通工具104的检测。例如,在人工操作员108中的人工操作员110使用检测系统102中的移动式检测器件154组中的移动式检测器件112检测交通工具104。
如本文使用的,当参考项目使用时的“组”是指一个或更多个项目。例如,移动式检测器件154组是一个或更多个移动式检测器件154。
如所描绘的,移动式检测器件154组中的移动式检测器件112和其他移动式检测器件是可以由人工操作员108携带和使用的物理器件。移动式检测器件154组可以从移动电话、头戴式显示器、混合现实智能眼镜、平板计算机或某种其他合适类型的器件中的至少一个选择。
人工操作员110可以相对于交通工具104移动,以确定不一致性114是否存在。相对于交通工具104的移动可以是在交通工具104内移动或在交通工具104周围移动中的至少一个。
在该说明性示例中,不一致性114可以采取不同的形式。例如,不一致性114从划痕、污渍、污迹、缺失部分、缺陷部分、不正确部分或某种其他不希望的条件中的至少一个选择。
如本文使用的,当与项目列表使用时,短语“至少一个”是指可以使用所列项目中的一个或更多个的不同组合,以及可以需要列表中的每个项目中的仅一个。换句话说,“至少一个”是指可以从列表中使用项目和项目数量的任何组合,而不是需要列表中的所有项目。项目可能是特定的对象、事物或类别。
例如,但不限于,“项目A、项目B或项目C中的至少一个”可以包括项目A、项目A和项目B或者项目B。本示例也可以包括项目A、项目B和项目C或者项目B和项目C。当然,这些项目中的任何组合都可以存在。在一些说明性示例中,例如,但不限于,“至少一个”可以是两个项目A、一个项目B和十个项目C;四个项目B和七个项目C;或者其他合适的组合。
如所描绘的,在移动式检测器件112中存在显示系统116和照相机系统118。这两个系统可以集成为移动式检测器件112的部分,或者可以连接到移动式检测器件112或以其他方式与移动式检测器件112通信。显示系统116是硬件系统并且包含一个或更多个显示器件。照相机系统118是硬件系统,并且也包含一个或更多个照相机,该一个或更多个照相机可以被用于生成用于在显示系统116上显示的图像120。
图像120可以是个别的图片或视频的部分。在该说明性示例中,可以通过移动式检测器件112中的图形用户界面122在显示系统116上显示图像120。
如所描绘的,人工操作员108是可以通过由用于移动式检测器件112的输入系统126生成的用户输入124与图形用户界面122交互的人。输入系统126是物理硬件系统,并且可以从手势识别系统、有线手套、立体照相机、基于手势的控制器、鼠标、跟踪球、键盘、跟踪板或触摸屏平板、运动感测输入器件、网络手套、照相机、麦克风或某种其他合适类型的输入器件中的至少一个选择。
在该说明性示例中,控制器128位于检测系统102中的移动式检测器件112中。在另一个说明性示例中,控制器128可以位于远程计算机中。如所描绘的,控制器128被配置为在人工操作员110检测交通工具104时执行操作。例如,在控制器128的操作期间,控制器128与移动式检测器件112一起操作,以识别交通工具104内的移动式检测器件112的定位132。移动式检测器件112可以包括器件,诸如全球定位系统(GPS)接收机、加速度计、惯性导航系统或用于识别移动式检测器件112的定位132的某个其他合适的器件。
在该说明性示例中,定位132包含移动式检测器件112的三维坐标和方位。三维坐标可以是笛卡尔坐标、极坐标系统或某个其他的坐标系统,其描述移动式检测器件112位于相对于交通工具104的位置。移动式检测器件112的定位可以由控制器128使用交通工具104的交通工具地图144来识别。
定位132的识别可以以若干不同的方式来执行。例如,控制器128可以使用同步定位和地图构建(SLAM)过程来实时跟踪由人工操作员110操作的移动式检测器件112的定位132。换句话说,随着定位132改变,控制器128可以识别定位132的改变。可以使用用于交通工具104的交通工具坐标系统,或者使用同步定位和地图构建(SLAM)过程,在交通工具104内的移动式检测器件112的移动期间,可能在飞行中(on the fly)产生坐标系统。
控制器128被配置为接收用户输入124,该用户输入124包含基于移动式检测器件112的定位132,由人工操作员110做出的与移动式检测器件112的视场140中的项目138组中的项目136有关的手势134组。如所描绘的,视场140是移动式检测器件112能够基于移动式检测器件112的定位132来查看和显示的。在该说明性示例中,视场140是照相机系统118基于具有照相机系统118的移动式检测器件112的定位132能够生成图像的视场。
附加地,控制器128被配置为在与交通工具104有关的位置152处,将注释142与在移动式检测器件112的视场140中的项目138组中的项目136相关联地创建。项目136和项目138组可以采取不同的形式。例如,项目138可以从座椅、地毯、窗户、门、头顶储物箱、灯、风道、立体结构(monument)、轨道、蒙皮壁板、车轮、轮胎、发动机外壳、显示器件、泵或某种其他合适类型的项目中的至少一个选择。
在该说明性示例中,检测系统102中的不同注释是电子注释而不是物理注释。例如,注释142是电子注释。注释142被分配到位置152。换句话说,位置152可以位于该说明性示例中的交通工具104中或交通工具104上。位置152是交通工具104内或交通工具104上的位置,并使用三维坐标来描述。
在该说明性示例中,注释142通过在数据库、记录或数据结构中标记或以其他方式指示,或者用于项目136,与项目136相关联。位置152可以是项目136的位置或项目136附近的位置。
在该说明性示例中,注释142可以在交通工具104的生命周期期间在不同的时间期间生成。例如,注释142可以在交付给客户之前的最终检测、维护、交通工具的组装、交通工具的认证或者在交通工具104的生命周期期间的某些其他时间中的至少一个期间生成。
控制器128还被配置为在用于移动式检测器件112的显示系统116上的图形用户界面122上,将注释142与视场140中的项目136相关联地显示。当图形用户界面122内的注释142的显示引起对项目136的注意时,认为将注释142与项目136相关联地显示。例如,注释142可以显示在项目136的某个接近位置上或在某个接近位置中,使得人工操作员110将注释142解释为用于项目136。
此外,控制器128还可以在除注释142之外或者代替注释142显示注释146。在该说明性示例中,控制器128被配置为识别用于移动器件的当前定位的移动式检测器件112的视场140中的注释146集合,并在显示系统116上的图形用户界面122上显示注释146集合。如本文所使用的,“集合”是项目138中的零个或更多个。换句话说,该集合可以是一个空集合,其中没有项目138存在或可查看。控制器128可以识别应用于移动式检测器件112的人工操作员110的角色150的策略148上的注释146集合。例如,项目138可以存在,或者项目138的子集合可以基于人工操作员110的角色150存在于项目138的集合中。
在该说明性示例中,策略148是一个或更多个规则,该一个或更多个规则可以被用于识别由特定的人工操作员可以看到视场140中的项目138中的哪些项目。在该说明性示例中,人工操作员110的角色150是策略148的输入。角色150可以从检测员、审核员、数据采集器、客户、认证者或用于人工操作员的某种其他类型的角色中选择。
以这种方式,控制器128通过移动式检测器件112将可视化提供给人工操作员110。例如,在用于移动式检测器件112的显示系统116上的图形用户界面122上将注释142与视场140中的项目136相关联地显示形成了用于人工操作员110的混合现实环境或增强现实环境中的至少一个。
控制器128可以在软件、硬件、固件或其组合中实施。当使用软件时,由控制器128执行的操作可以在被配置为在硬件(诸如处理器单元)上运行的程序代码中实施。当使用固件时,由控制器128执行的操作可以在程序代码和数据中实施,并存储在持久存储器中以在处理器单元上运行。当采用硬件时,硬件可以包括操作以执行控制器128中的操作的电路。
在说明性示例中,硬件可以采取从电路系统、集成电路、专用集成电路(ASIC)、可编程逻辑器件或被配置为执行若干操作的某种其他合适类型的硬件中的至少一个选择的形式。利用可编程逻辑器件,该器件可以被配置为执行若干操作。该器件可以在稍后的时间被重新配置,或者可以永久地被配置以执行若干操作。可编程逻辑器件包括,例如,可编程逻辑阵列、可编程阵列逻辑、现场可编程逻辑阵列、现场可编程门阵列和其他合适的硬件器件。附加地,过程可以在与无机组件集成的有机组件中实施,并且可以完全由有机组件组成。例如,过程可以被实施为有机半导体中的电路。
在一个说明性示例中,存在一个或更多个技术解决方案,其克服了在飞行器中有效地执行检测的技术问题。结果,一个或更多个技术解决方案可以提供在混合现实或增强现实显示中以电子形式创建注释的技术效果,这与使用物理注释的当前技术相比,其不一致性更统一和更准确。
结果,移动式检测器件112作为专用计算机系统运行,其中,与采用物理注释的当前系统相比,移动式检测器件112中的控制器128允许更有效和更准确地执行交通工具104的检测。特别地,与目前不具有控制器128的可用的通用计算机系统相比,控制器128将移动式检测器件112转换成专用计算机系统。
接下来参考图2,描绘了根据一个说明性实施例的注释的框图的图示。注释200是图1中注释146的一个实施方式的示例。如所描绘的,注释200包括图形指示符202、细节204、交通工具坐标206和项目标识符208。
在该说明性示例中,当注释200显示在图形用户界面中时,显示图形指示符202。图形指示符202可以采取若干不同的形式。例如,图形指示符202可以包括图标、图像、窗口小部件、文本、动画、颜色或可以显示在图形用户界面中的某种其他类型的指示符中的至少一个,以与项目相关联地指向或显示。
如所描绘的,细节204包括不一致性的解释。细节204包括文本、语音、图像、视频或可以被用来解释不一致性的某个其他内容中的至少一个。解释可以包括不一致性的描述,诸如划痕、污渍、污迹、不起作用的部分、不正确的部分或某种其他类型的描述。解释还可以包括预期的纠正动作或其他信息。
在一个说明性示例中,细节204可以包括除文本之外的或者代替文本的语音注解。例如,当人工操作员是客户代表,在飞行器交付之前进行最后一次检查时,语音注解可以是客户代表的语音注解。这些语音注解可以减少可能执行的返工的差异。
如所描绘的,项目标识符208识别已生成注释200的项目。项目标识符208可以采取各种形式。例如,项目标识符208可以是部件号、序列号或某种其他类型的标识符。
此外,除了识别与项目标识符208相关联之外,图形标识符202还可以服务于其他功能。在一个说明性示例中,图形指示符202可以被用于指示注释200的状态。例如,图形指示符202可以指示从新的、正在进行的和已完成的组成的组中选择的状态。不同的状态可以通过颜色、动画、图标或某种其他类型的图形指示中的至少一个指示。
如所描绘的,交通工具坐标206识别图1的交通工具104内或其上的注释200的位置。交通工具坐标206可以是笛卡尔坐标、极坐标或基于用于交通工具的坐标系统的某个其他格式。例如,交通工具可以具有交通工具地图,交通工具坐标206使用用于交通工具地图的坐标系来描述交通工具内的位置。以这种方式,注释200被放置在相对于项目标识符208的位置中。
现在参考图3,描绘了根据一个说明性实施例的用于创建注释的数据流的图示。在该描绘的示例中,人工操作员300携带和操作移动式检测器件302以执行交通工具304的检测。人工操作员300是图1中的人工操作员108中的人工操作员,而移动式检测器件302是图1中的移动式检测器件154组中的移动式检测器件。
如所描绘的,控制器310识别交通工具304内的移动式检测器件302的定位324。换句话说,在用于交通工具304的交通工具坐标中示出定位324,使得由人工操作员300操作的移动式检测器件302与交通工具304中的项目320有关的位置被了解。
如所描绘的,人工操作员300做出由输入系统334检测的手势306组以生成用于创建注释314的用户输入308。手势306组可以采取各种形式。例如,手势306组可以是人工操作员300的手触摸项目312、覆盖项目312、在项目312上移动、或者在移动式检测器件302的视场316内的某个其他移动,如在用于移动式检测器件302的显示系统338上显示的图形用户界面336中所看到的。
手势306组通过运行在移动式检测器件302上的控制器310被接收为用户输入308。控制器310基于手势306组识别交通工具304中的项目312。换句话说,手势306组可以指定在移动式检测器件302中的照相机系统340的视场316内的项目312。项目312的识别可以使用交通工具地图318进行。在该说明性示例中,交通工具地图318包含项目320和定位322。基于移动式检测器件302的定位324和手势306组,用于交通工具304的项目320中的项目312被识别为创建注释314的部分。
如所描绘的,用于移动式检测器件302的控制器310生成注释314。注释服务器326位于计算机系统328中,并从控制器310接收注释314。
计算机系统328是物理硬件系统,并且包括一个或更多个数据处理系统。当存在一个以上的数据处理系统时,数据处理系统使用通信介质彼此通信。通信介质可以是网络。数据处理系统可以从计算机、服务器计算机、平板电脑或某个其他合适类型的数据处理系统中的至少一个选择。
如所描绘的,注释服务器326将注释314存储在带有注释332的存储系统330中。存储系统330可以采取各种形式。例如,存储系统330可以由硬盘驱动器、固态驱动器、磁带驱动器、光驱动器或某个其他类型的存储器件中的至少一个组成。存储系统330可以在单个地理位置中或分布在不同的地理位置中。
以这种方式,存储系统330可以将注释332存储在历史记录中,使得能够进行根本原因分析以减少未来的不一致性。控制器310可以显示用于交通工具组的随时间推移的用于位置组的注释332,使得能够查看位置中的一个或更多个不一致性的趋势。
图1中的检测环境100的图示以及图1和图2中的不同组件并不意味着暗示物理或体系结构局限于一个说明性实施例可以被实施的方式。除了所示的组件以外或代替所示的组件,还可以使用其他组件。某些组件可能是不必要的。此外,存在的框说明一些功能组件。当在一个说明性实施例中实施时,这些框中的一个或更多个可以被组合、分割或组合并分割为不同的框。
例如,在图1中,交通工具104可以采取除飞行器106以外的其他形式。例如,交通工具104可以从包含移动平台、水面舰船、坦克、人员载体、火车、航天器、潜艇、公共汽车、汽车和某种其他合适类型的交通工具的组中选择。
在另一个说明性示例中,控制器128可以分布在移动式检测器件112和图3中的计算机系统328之间。换句话说,控制器128中的一些过程可以在移动式检测器件112中实施,而其他过程可以在计算机系统328中实施。在一个替代性的示例中,注释服务器326可以响应于接收到由在图3中的人工操作员300生成的用户输入308来生成注释314。
作为另一个示例,语音命令或其他类型的输入可以与图1中的手势134组或图3中的手势306组结合使用。例如,当人工操作员的手向外指向并触摸项目时,用于选择项目的语音命令可以被用于将项目指定为要创建注释的项目。
在另一个说明性示例中,图1中的控制器128或图3中的控制器310可以显示用于交通工具组的随时间推移的用于位置组的注释,使得能够查看位置中的一个或更多个不一致性的趋势。
在另一个示例中,控制器128或控制器310可以显示用于图1中的项目138组或图3中的项目320组的度量组。此外,控制器128或控制器310可以促进与远程专家组的通信。此外,控制器128或控制器310可以显示用于项目组的度量组。度量组可以指示项目应该满足的标准或规范。
现在参考图4,描绘了根据一个说明性实施例的在图形用户界面中显示的注释的图示。在该说明性示例中,图形用户界面400是图1中的图形用户界面122和图3中的图形用户界面336的实施方式的示例。在该示例中,图形用户界面400从诸如一副智能眼镜的移动式检测器件显示。
在该说明性示例中,在图形用户界面400中示出了客舱402的增强现实视图。使用智能眼镜中的照相机系统生成的图像示出客舱402。附加地,在图形用户界面400中显示注释。特别地,图形用户界面400包括注释404、注释406、注释408和注释410。
这些注释与项目相关联地显示。例如,注释404与头顶箱430相关联地显示。注释406与窗口432相关联地显示。注释408与地毯434相关联地显示。注释410与灯436相关联地显示。这些注释增强了图形用户界面400中示出的物理项目的显示,从而为人工操作员提供增强现实。
这些注释中的每个都包括图形指示符和细节。例如,注释404包括图形指示符412和细节414。注释406包括图形指示符416和细节418。注释408包括图形指示符420和细节422。注释410包括图形指示符424和细节426。
现在参考图5,描绘了根据一个说明性实施例的在图形用户界面中显示的注释的图示。在该说明性示例中,图形用户界面500是图1中的图形用户界面122和图3中的图形用户界面336的实施方式的示例。在该示例中,图形用户界面500从诸如一副智能眼镜的移动式检测器件显示。
如所描绘的,图形用户界面500还提供客舱502的增强现实显示。在该说明性示例中,注释与客舱502中的项目结合显示。例如,注释504被显示用于头顶箱506,并且注释508被显示用于窗口510。注释512被显示用于地毯514。如所描绘的,注释516被显示用于座椅518,注释520被显示用于座椅522,并且注释524被显示用于座椅526。
在该示例中,注释504具有图形指示符530,注释508具有图形指示符532,注释512具有图形指示符534,注释516具有图形指示符536,注释520具有图形指示符538,并且注释524具有图形指示符540。如所描绘的,已选择图形指示符534,引起细节542被显示用于注释512。
附加地,图形用户界面500还显示关于注释的状态信息。段550指示用于已完成的工作的注释,段552指示用于正在进行的工作的注释,并且段554指示用于新的尚未开始工作的注释。此外,段中的每个被颜色编码以对应于用于图形指示符的颜色。
因此,除了看到用于注释的状态之外,还可以从图形指示符的颜色识别个体注释的状态。例如,注释504、注释508、注释512、注释516、注释520和注释524是其中尚未开始工作的新注释。
转到图6,描绘了根据一个说明性实施例的在图形用户界面中显示的注释的图示。在该说明性示例中,图形用户界面600是图1中的图形用户界面122和图3中的图形用户界面336的实施方式的示例。在该示例中,图形用户界面600从诸如一副智能眼镜的移动式检测器件显示。
如所描绘的,在图形用户界面600中看到客舱602的视图。在该说明性示例中,使用图形指示符显示注释,这些图形指示符覆盖在客舱602的视图上,如由人工操作员在图形用户界面600上所看到的。
在该说明性示例中,注释包括乘客座椅606上的注释604、乘客座椅610上的注释608、乘客座椅614上的注释612、乘客座椅620上的注释618、乘客座椅624上的注释622、乘客座椅628上的注释626、乘客座椅632上的注释630、乘客座椅636上的注释634、乘客座椅640上的注释638、乘客座椅644上的注释642、乘客座椅648上的注释646、乘客座椅652上的注释650、乘客座椅660上的注释658、乘客座椅664上的注释662以及乘客座椅668上的注释666。注释还包括窗口656上的注释654、窗口672上的注释670、窗口676上的注释674。在该示例中,注释678在墙680上。
现在参考图7,描述了根据一个说明性实施例的在图形用户界面中创建注释的图示。在该说明性示例中,图形用户界面700是图1中的图形用户界面122和图3中的图形用户界面336的实施方式的示例。在该示例中,图形用户界面700从诸如一副智能眼镜的移动式检测器件显示。
如所描绘的,在图形用户界面700中示出了客舱702的视图。在该说明性示例中,人工操作员704创建了注释706用于天花板708。如所描绘的,人工操作员704通过用手710指向天花板708做出手势。附加地,除了指向天花板708的手势之外,人工操作员704已经发出了命令,诸如“创建注释”。
响应于手势,图形指示符712被创建并且被显示用于指向天花板708的注释706。附加地,人工操作员704还可以在细节711中添加细节。这些细节可以是语音注释、文本、天花板708的图像,或其他合适的细节,以指示天花板708中不一致性的存在。
图4-图6中的图形用户界面的图示是图1中的框形式所示的图形用户界面122和图3中的框形式所示的图形用户界面336的一些实施方式的示例。这些图示仅意味着作为示例,并不意味着限制图形用户界面122和图形用户界面336可以在其他示例中实施的方式。例如,在这些图中可以使用除了所示的图标之外或代替所示的图标的动画或其他类型的图标。此外,可以在同一图形用户界面中使用不同类型的图形指示符。换句话说,在图形用户界面中显示的图形指示符可以在组成上是异构的。可以使用不同的图形指示符来指示不同类型的项目。例如,第一类型的图形指示符可以用来指示乘客座椅,第二类型的图形指示符可以用来指示窗口,以及第三类型的图形指示符可以用来指示装载物。
接下来转向图8,描绘了根据一个说明性实施例的用于检测交通工具的过程的流程图。图8中所示的过程可以在图1中的检测系统102中实施。如所描绘的,可以在图1中的控制器128或图3中的控制器310中实施不同的操作。这些操作可以被实施为由数据处理系统中的处理单元处理的程序代码。
该过程通过识别交通工具内的移动式检测器件的定位开始(操作800)。该过程接收用户输入,该用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组(操作802)。
该过程在与交通工具有关的位置处将注释与移动式检测器件的视场中的项目组中的项目相关联地创建,其中将注释分配到该位置(操作804)。该过程将注释存储在注释的历史记录被存储在其中的存储系统中(操作806)。
该过程在用于移动式检测器件的显示系统上的图形用户界面上将注释与视场中的项目相关联地显示(操作808)。此后该过程终止。
现在参考图9,描绘了根据一个说明性实施例的用于显示注释的过程的流程图。图9中所示的过程中的操作可以在图1中的控制器128或图3中的控制器310中作为程序代码、硬件或其某种组合来实施。
该过程通过识别移动式检测器件的定位开始(操作900)。该过程基于移动式检测器件的定位识别用于移动式检测器件的视场(操作902)。在该说明性示例中,视场是基于移动式检测器件能够在显示系统上显示的内容。
该过程识别移动式器件的视场中的项目组(操作904)。该过程识别用于项目组的注释集合(操作906)。如所描绘的,注释集合可以是空集,其中,不存在用于视场中的项目组的注释。
该过程在移动式检测器件的显示系统上显示注释集合(操作908)。此后该过程终止。当移动式检测器件的定位改变时,该过程可以重复任意次数。
现在参考图10,描绘了根据一个说明性实施例的用于识别基于人工操作员的角色可显示的注释的过程的流程图。图10中所示的过程中的操作可以在图1中的控制器128或图3中的控制器310中作为程序代码、硬件或其某种组合来实施。该流程图中的操作是可以实施图9中的操作906的一种方式的示例。
该过程通过识别人工操作员的角色开始(操作1000)。该过程识别用于在移动式检测器件的视场内的项目的任何注释(操作1002)。该过程选择未处理的注释用于处理(操作1004)。
该过程基于人工操作员的角色确定注释是否是由人工操作员可查看的(操作1006)。每个注释都可以具有哪些角色可以或不可以查看特定的注释的标识。可以使用诸如访问控制列表或其他类型的策略或机制的机制来进行确定。例如,图1中的策略148可以被用来确定哪些注释可以由人工操作员查看。
如果基于人工操作员的角色,注释是由人工操作员是可查看的,则将注释添加到用于显示的注释集合(操作1008)。然后,该过程确定是否存在附加的未处理注释用于处理(操作1010)。如果存在附加的未处理注释,则该过程返回到操作1004。否则,该过程以创建用于显示的注释集合终止。再次参考操作1006,如果注释是不可查看的,则处理继续到如上所述的操作1010。以这种方式,由移动式检测器件的人工操作员生成的注释和由其他人工操作员生成的注释可以查看用于交通工具的注释。
现在参考图11,描绘了根据一个说明性实施例的用于识别基于注释的状态可显示的注释的过程的流程图。图11中所示的过程中的操作可以在图1中的控制器128或图3中的控制器310中作为程序代码、硬件或其某种组合来实施。该流程图中的操作是可以实施图9中的操作906的一种方式的示例。
该过程通过识别移动式检测器件的视场中存在的任何注释开始(操作1100)。该过程选择未处理的注释用于处理(操作1102)。该过程识别所选择注释的状态(操作1104)。根据实施方式,注释可能具有不同类型的状态。例如,状态可能从新的、已完成的或正在进行的中的至少一个选择。
该过程基于所识别的状态向注释分配图形指示符(操作1106)。图形指示符被选择以指示注释的状态。例如,可以选择颜色、文本、图标、动画或图形来指示注释的状态。
做出关于是否存在另一个未处理的注释的确定(操作1108)。如果存在另一个未处理的注释,则过程返回到操作1102。否则,处理终止。
在不同描绘的实施例中的流程图和框图说明了在说明性实施例中的装置和方法的一些可能实施方式的体系结构、功能和操作。在这方面,流程图或框图中的每个框可以代表模块、段、函数或操作或步骤的一部分中的至少一个。例如,框中的一个或更多个可以被实施为程序代码、硬件或程序代码和硬件的组合。当在硬件中实施时,硬件可以例如采用集成电路的形式,该集成电路被制造或配置以执行流程图或框图中的一个或更多个操作。当实施为程序代码和硬件的组合时,实施方式可以采取固件的形式。流程图或框图中的每个框可以使用专用硬件系统来实施,该专用硬件系统执行专用硬件和由专用硬件运行的程序代码的不同操作或组合。
在说明性实施例的一些替代实施方式中,框中所注释的(一个或更多个)功能可以不按照图中所注释的顺序发生。例如,在某些情况下,根据所涉及的功能,可以基本上同时执行连续显示的两个框,或者有时可以按相反的顺序执行框。此外,除了图示的框之外,可以在流程图或框图中添加其他框。
现在转到图12,描绘了根据一个说明性实施例的数据处理系统的框图的图示。数据处理系统1200可被用于实施图1中的移动式检测器件112、图3中的移动式检测器件302以及图3中的计算机系统328中的一个或更多个计算机。在该说明性示例中,数据处理系统1200包括通信框架1202,其提供在处理器单元1204、存储器1206、持久存储1208、通信单元1210、输入/输出单元1212和显示器1214之间的通信。在该示例中,通信框架1202可以采取总线系统的形式。
处理器单元1204服务以执行用于可加载到存储器1206中的软件的指令。处理器单元1204可以是多个处理器、多处理器内核或某种其他类型的处理器,这取决于特定的实施方式。
存储器1206和持久存储1208是存储器件1216的示例。存储器件是能够存储信息的硬件的任何块,诸如,例如,但不限于,数据、函数形式的程序代码,或者临时性基础、永久性基础或者临时性基础和永久性基础二者上的其他合适的信息中的至少一种。在这些说明性示例中,存储器件1216也可以被称为计算机可读存储器件。在这些示例中,存储器1206可以是,例如,随机存取存储器或任何其他合适的易失性或非易失性存储器件。持久存储1208可以采取各种形式,取决于具体的实施方式。
例如,持久存储1208可以包含一个或更多个组件或器件。例如,持久存储1208可以是硬盘驱动器、固态硬盘驱动器、闪存、可重写光盘、可重写磁带或上述的某种组合。持久存储1208所使用的介质也可以是可移动的。例如,可移动硬盘驱动器可用于持久存储1208。
在这些说明性示例中,通信单元1210提供与其他数据处理系统或器件的通信。在这些说明性示例中,通信单元1210是网络接口卡。
输入/输出单元1212允许与可以连接到数据处理系统1200的其他器件的数据的输入和输出。例如,输入/输出单元1212可以通过键盘、鼠标或某个其他合适的输入器件中的至少一个提供用于用户输入的连接。此外,输入/输出单元1212可以将输出发送到打印机。显示器1214提供向用户显示信息的机制。
用于操作系统、应用程序或程序中的至少一个的指令可以位于存储器件1216中,存储器件1216通过通信框架1202与处理器单元1204通信。不同实施例的过程可以由处理器单元1204使用计算机实施的指令执行,计算机实施的指令可以位于存储器(诸如存储器1206)中。
这些指令被称为程序代码、计算机可用程序代码或计算机可读程序代码,这些代码可以由处理器单元1204中的处理器读取和执行。不同实施例中的程序代码可以体现在不同的物理或计算机可读存储介质上,诸如存储器1206或持久存储1208。
程序代码1218以函数形式位于可选择地可移动的计算机可读介质1220上,并且可以被加载到或转移到数据处理系统1200,用于由处理器单元1204执行。在这些说明性示例中,程序代码1218和计算机可读介质1220形成计算机程序产品1222。在一个示例中,计算机可读介质1220可以是计算机可读存储介质1224或计算机可读信号介质1226。
在这些说明性示例中,计算机可读存储介质1224是用于存储程序代码1218的物理或有形存储器件而不是传播或传输程序代码1218的介质。替代性地,使用计算机可读信号介质1226可以将程序代码1218转移到数据处理系统1200。例如,计算机可读信号介质1226可以是包含程序代码1218的传播数据信号。例如,计算机可读信号介质1226可以是电磁信号、光信号或任何其他合适类型的信号中的至少一个。这些信号可以在通信链路(诸如无线通信链路)、光纤电缆、同轴电缆、导线或任何其他合适类型的通信链路中的至少一个上传输。
所示的用于数据处理系统1200的不同组件并不意味着对不同实施例可以实施的方式提供体系结构的限制。不同的说明性实施例可以在数据处理系统中实施,该数据处理系统包括除了所示的用于数据处理系统1200的组件之外或替代所示的用于数据处理系统1200的组件的组件。图12中所示的其他组件可以从所示的说明性示例中变化。可以使用能够运行程序代码1218的任何硬件器件或系统来实施不同的实施例。
本公开的说明性实施例可以在如图13中所示的飞行器制造和服务方法1300和如图14中所示的飞行器1400的上下文中描述。首先转向图13,描绘了根据一个说明性实施例的飞行器制造和服务方法的框图的图示。在生产前期间,飞行器制造和服务方法1300可以包括图14中的飞行器1400的规格和设计1302以及材料购置1304。
在生产期间,发生图14中的飞行器1400的组件和部件制造1306和系统集成1308。此后,图14中的飞行器1400可以通过认证和交付1310,以便投入服务1312。在客户的服务1312中,图14中的飞行器1400被安排用于日常维护和服务1314,其可以包括修改、重新配置、翻新和其他维护或服务。
飞行器制造和服务方法1300的过程中的每个可以由系统集成商、第三方、运营商或其某种组合来执行或实行。在这些示例中,运营商可以是客户。出于本说明书的目的,系统集成商可以包括但不限于任何数量的飞行器制造商和主要系统分包商;第三方可以包括但不限于任何数量的供应商、分包商和供货商;以及运营商可以是航空公司、租赁公司、军事实体、服务机构等。
现在参考图14,描绘了其中可以实施说明性实施例的飞行器的框图的图示。在该示例中,飞行器1400由图13中的飞行器制造和服务方法1300产生,并且可以包括具有多个系统1404和内部1406的机身1402。系统1404的示例包括推进系统1408、电气系统1410、液压系统1412和环境系统1414中的一个或更多个。可以包括任意数量的其他系统。虽然示出了航空航天示例,但不同的说明性实施例可应用于其他行业,诸如汽车行业。
在图13中的飞行器制造和服务方法1300的阶段中的至少一个期间可以采用本文所呈现的装置和方法。例如,可以在系统集成1308或认证和交付1310期间实施一个或更多个说明性示例来执行飞行器1400的检测。
在一个说明性示例中,在图13中的组件和部件制造1306中产生的组件或部件可以以类似于飞行器1400在图13中的服务1312时产生的组件或部件的方式制作或制造。作为另一个示例,在生产阶段期间可以使用一个或更多个装置实施例、方法实施例或其组合,诸如图13中的组件和部件制造1306和系统集成1308。一个或更多个装置实施例、方法实施例或其组合可在飞行器1400在服务1312期间、在图13中的维护和服务1314期间,或在两者期间使用。
使用若干不同的说明性实施例可以大幅地加快飞行器1400的组装,降低飞行器1400的成本,或者既加快飞行器1400的组装又降低飞行器1400的成本。通过具有使需要返工的不一致性的项目可视化的能力,与目前使用的执行对飞行器1400中的项目的物理标记的系统相比,说明性示例提供了用于创建注释和识别用于那些注释的项目的更有效的系统。
现在转到图15,描绘了根据一个说明性实施例的产品管理系统的框图的图示。产品管理系统1500是物理硬件系统。在该说明性示例中,产品管理系统1500可以包括制造系统1502或维护系统1504中的至少一个。
制造系统1502被配置为制造诸如图14中的飞行器1400的产品。如所描绘的,制造系统1502包括制造设备1506。制造设备1506包括制作设备1508或组装设备1510中的至少一个。
制作设备1508是可以被用于制作用于形成飞行器1400的部件的组件的设备。例如,制作设备1508可以包括机器和工具。这些机器和工具可以是钻头、液压机、炉、模具、复合带铺设机、真空系统、车床或其它合适类型的设备中的至少一个。制作设备1508可用于制作金属部件、复合部件、半导体、电路、紧固件、肋、蒙皮壁板、翼梁、天线或其它合适类型的部件中的至少一个。
组装设备1510是用于组装部件以形成飞行器1400的设备。特别地,组装设备1510可用于组装组件和部件以形成飞行器1400。组装设备1510也可以包括机器和工具。这些机器和工具可以是机器人臂、爬行器、紧固器安装系统、基于轨道的钻具系统或机器人中的至少一个。组装设备1510可被用于组装部件诸如座椅、水平稳定器、机翼、发动机、发动机壳体、起落架系统和用于飞行器1400的其它部件。
在该说明性示例中,维护系统1504包括维护设备1512。维护设备1512可以包括在飞行器1400上执行维护所需的任何设备。维护设备1512可以包括用于对飞行器1400上的部件执行不同操作的工具。这些操作可包括拆卸部件、翻新部件、检测部件、返工部件、制造更换部件或用于对飞行器1400执行维护的其它操作中的至少一个。这些操作可用于日常维护、检测、升级、翻新或其他类型的维护操作。
在该说明性示例中,维护设备1512可以包括超声检测器件、X射线成像系统、视觉系统、钻具、爬行器和其他合适的器件。在一些情况下,维护设备1512可以包括制作设备1508、组装设备1510或两者,以产生和组装可能需要维护的部件。
产品管理系统1500还包括控制系统1514。控制系统1514是硬件系统,并且还可以包括软件或其它类型的组件。控制系统1514被配置为控制制造系统1502或维护系统1504中的至少一个的操作。具体地,控制系统1514可以控制制作设备1508、组装设备1510或维护设备1512中的至少一个的操作。
控制系统1514中的硬件可以使用可以包括计算机、电路、网络和其他类型的器件的硬件。控制可以采取对制造设备1506的直接控制的形式。例如,机器人、计算机控制的机器和其他设备可以由控制系统1514控制。在其他说明性示例中,控制系统1514可以管理在制造飞行器1400或对飞行器1400执行维护时由人工操作员1516执行的操作。例如,控制系统1514可以分配任务、提供指令、显示模型或执行其他操作来管理由人工操作员1516执行的操作。在这些说明性示例中,图3中的注释服务器可以在控制系统1514中实施,以管理图14中的飞行器1400的制造或维护中的至少一个。
在该说明性示例中,注释服务器326还可以操作以安排用于由控制器和移动式检测器件识别的不一致性的工作订单。在这些说明性示例中,注释可用于生成工作订单。在其他说明性示例中,注释可以以工作订单的形式生成,其可以在产品管理系统1500内被安排用于执行。
例如,注释服务器326还可以识别趋势,或者输出可以被用于控制制造设备1506或组装设备1510中的至少一个的操作的其他信息。例如,可以基于不一致性的识别来执行特定设备的选择或用于设备的安排和维护。
在不同的说明性示例中,人工操作员1516可以操作制造设备1506、维护设备1512或者控制系统1514中的至少一个或与其交互。这种交互可以被执行以制造飞行器1400。
当然,产品管理系统1500可以被配置为管理除了飞行器1400之外的其他产品。虽然已经在航空航天行业中关于制造描述了产品管理系统1500,但是产品管理系统1500可以被配置为管理用于其他行业的产品。例如,产品管理系统1500可以被配置为制造用于汽车行业以及任何其他合适的行业的产品。
因此,说明性示例提供了一个或更多个技术解决方案,其中与目前使用的技术相比,可以减少在识别不一致性到补救不一致性之间所需的时间量。存在一个或更多个技术解决方案,其中,电子注释的产生和电子注释的处理能够更快地处理,并且在解决交通工具(诸如飞行器)中的不一致性方面更一致。此外,一个或更多个技术解决方案提供了一种技术效果,其中与当前过程相比,可以更容易地从注释进行根本原因分析。
一个或更多个说明性示例可以提供一种技术解决方案,其中,与使用纸质注释的目前可用技术相比,在制造或维护中的至少一个期间的产品的管理可以更有效地执行。在一个或更多个说明性示例中,存在技术解决方案,其中,工作订单可以基于注释被生成、被安排或者被生成和被安排二者。
为了说明和描述的目的,已经给出了不同说明性实施例的描述,并且不同说明性实施例的描述不意在详尽无遗或局限于所公开的形式中的实施例。不同的说明性示例描述执行动作或操作的组件。在一个说明性实施例中,组件可以被配置为执行所描述的动作或操作。例如,该组件可以具有用于结构的配置或设计,该配置或设计提供给该组件执行在说明性示例中描述的由组件执行的动作或操作的能力。
许多修改和变化对本领域的普通技术人员来说是明显的。此外,与其他期望的实施例相比,不同的说明性实施例可以提供不同的特征。例如,其他说明性实施例可应用于除了检测交通工具之外或代替检测交通工具的其它应用。例如,一个说明性示例可以被应用于检测家庭。可以使用图1中的检测系统102来执行用于最终批准的客户检查。作为另一个例子,可以使用图1中的检测系统102来执行对移动平台、固定平台、陆基(land-based)结构、水基(aquatic-based)结构、空基(space-based)结构或其他类型平台的检测。这些平台可以包括,例如,建筑物、制造设施、大坝、空间站或其他类型的平台。
示例性实施例的另一个应用可以被应用于检测医疗预约的患者。例如,医生可以检查病人,并看到病人扁桃体肿胀。医生可以使用图1中的检测系统102以创建扁桃体的图像,并输入关于扁桃体的信息以在查看扁桃体时创建注释。然后,可以将该信息添加到用于患者的文件中。
此外,本公开包含根据以下实施例的实施例:
实施例1.一种交通工具检测系统,其包含:
移动式检测器件;
用于移动式检测器件的显示系统;
图形用户界面,其被配置为显示在显示系统上;
控制器,其被配置为与移动式检测器件一起操作,其中控制器被配置为识别交通工具内的移动式检测器件的定位;接收用户输入,该用户输入包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组;在与交通工具有关的位置处,将注释与移动式检测器件的视场中的项目相关联地创建,其中将注释分配到与交通工具有关的位置;以及在用于移动式检测器件的显示系统上的图形用户界面上,将注释与视场中的项目相关联地显示。
实施例2.根据实施例1所述的交通工具检测系统,进一步包含:
存储系统,其中注释的历史记录被存储在存储系统中。
实施例3.根据任何前述实施例所述的交通工具检测系统,其中控制器被配置为识别用于移动式检测器件的当前定位的移动式检测器件的视场中的注释集合,并在显示系统上的图形用户界面上显示注释集合。
实施例4.根据实施例3所述的交通工具检测系统,其中所识别的注释集合基于应用于移动式检测器件的人工操作员的角色的策略。
实施例5.根据任何前述实施例所述的交通工具检测系统,其中控制器位于移动式检测器件或与移动式检测器件通信的远程计算机中的至少一个中。
实施例6.根据任何前述实施例所述的交通工具检测系统,其中,在用于移动式检测器件的显示系统上的图形用户界面上将注释与视场中的项目相关联地显示形成混合现实环境或增强现实环境中的至少一个。
实施例7.根据任何前述实施例所述的交通工具检测系统,其中注释包含图形指示符和从文本、语音、图像或视频中的至少一个选择的细节。
实施例8.根据实施例7所述的交通工具检测系统,其中图形指示符指示从新的、正在进行的和已完成的组成的组中选择的状态。
实施例9.根据任何前述实施例所述的交通工具检测系统,其中控制器将用于交通工具的注释存储在历史记录中,使得能够进行根本原因分析以减少未来的不一致性。
实施例10.根据任何前述实施例所述的交通工具检测系统,其中控制器显示用于交通工具组的随时间推移的用于位置组的注释,使得能够查看位置组中的一个或更多个不一致性的趋势。
实施例11.根据任何前述实施例所述的交通工具检测系统,其中控制器显示用于项目组的度量组。
实施例12.根据任何前述实施例所述的交通工具检测系统,其中控制器促进与远程专家组的通信。
实施例13.根据任何前述实施例所述的交通工具检测系统,其中移动式检测器件选自移动电话、头戴式显示器、混合现实智能眼镜和平板计算机组成的组。
实施例14.根据任何前述实施例所述的交通工具检测系统,其中用户输入是使用手势识别系统、有线手套、立体照相机、基于手势的控制器、鼠标、跟踪球、键盘、跟踪垫、触摸屏平板、运动感测输入器件、网络手套,照相机或者麦克风中的至少一个生成的。
实施例15.根据任何前述实施例所述的交通工具检测系统,其中,在交付给客户之前的最后的检测、维护、交通工具的组装和交通工具的认证中的一个期间生成注释。
实施例16.一种飞行器检测系统,其包含:
移动式检测器件;
用于移动式检测器件的用户界面;以及
控制器,其被配置为与移动式检测器件一起操作,其中控制器被配置为识别飞行器内的移动式检测器件的定位;接收用户输入,该用户输入包含基于飞行器内的移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目有关的手势组;将注释与移动式检测器件的视场中的项目组中的项目相关联地创建;以及在用于移动式检测器件的显示系统上,将注释与视场中的项目相关联地显示,使得能够沉浸在增强现实环境中。
实施例17.根据实施例16所述的飞行器检测系统,其进一步包含:
存储系统,其中注释的历史记录被存储在存储系统中。
实施例18.根据实施例16-17中的任何一项所述的飞行器检测系统,其中控制器被配置为基于应用于移动式检测器件的人工操作员的角色的策略,识别用于移动式检测器件的当前定位的移动式检测器件的视场中的注释集合,以及在显示系统上的图形用户界面上显示注释集合。
实施例19.根据实施例16-18中的任何一项所述的飞行器检测系统,其中注释包含图形指示符和文本、语音、图像或视频中的至少一个。
实施例20.根据实施例16-19中的任何一项所述的飞行器检测系统,其中控制器促进与远程专家组的通信。
实施例21.根据实施例16-20中的任何一项所述的飞行器检测系统,其中,在交付给客户之前的最后的检测、维护、交通工具的组装和交通工具的验证中的一个的期间产生注释。
实施例22.一种用于检测交通工具的方法,该方法包含:
识别交通工具内的移动式检测器件的定位;
接收用户输入,其包含基于移动式检测器件的定位,由人工操作员做出的与移动式检测器件的视场中的项目组中的项目有关的手势组;
在与交通工具有关的位置处,将注释与移动式检测器件的视场中的项目组中的项目相关联地创建,其中将注释分配到该位置;以及
在用于移动式检测器件的显示系统上的图形用户界面上,将注释与视场中的项目相关联地显示。
实施例23.根据实施例22所述的方法,进一步包含:
将注释存储在存储系统中,其中注释的历史记录被存储在该存储系统中。
实施例24.根据实施例22-23中的任何一项所述的方法,进一步包含:
识别用于移动式检测器件的当前定位的移动式检测器件的视场中的注释集合;以及
在显示系统上的图形用户界面上显示注释集合。
实施例25.根据实施例22-24中的任何一项所述的方法,其中识别的注释集合是基于应用于移动式检测器件的人工操作员的角色的策略。
实施例26.根据实施例22-25中的任何一项所述的方法,其中在用于移动式检测器件的显示系统上的图形用户界面上将注释与项目相关联地显示形成混合现实环境或增强现实环境中的至少一个。
实施例27.根据实施例22-26中的任何一项所述的方法,其中注释包含图形指示符和文本、语音、图像或视频中的至少一个;并且图形指示符指示从由新的、正在进行的和已完成的组成的组中选择的状态。
选择和描述所选的(一个或更多个)实施例,以便最好地解释实施例的原理、实际应用并且使本领域中具有普通技能的其他人能够理解具有如适于设想的特定使用的各种修改的各种实施例的公开。
Claims (14)
1.一种用于检测交通工具(104)的方法,所述方法包含:
识别所述交通工具(104)内的移动式检测器件(112)的定位(132);
接收用户输入(124),所述用户输入(124)包含基于所述移动式检测器件(112)的所述定位(132),由人工操作员(110)做出的与所述移动式检测器件(112)的视场(140)中的项目组中的项目(136)有关的手势(134)组;
在与所述交通工具(104)有关的位置(152)处,创建与照相机系统(118)的视场(140)中的所述项目组中的所述项目(136)相关联的电子注释,所述照相机系统(118)包括一个或更多个照相机以用于生成图像(120),在所述图像(120)中将所述注释分配到所述位置(152);
在用于所述移动式检测器件(112)的显示系统(116)上在图形用户界面(122)上,显示由所述照相机系统(118)生成的所述图像(120)和与所述视场(140)中的所述项目(136)相关联的所述注释;以及
将所述注释发送到注释服务器(326),所述注释服务器(326)被实施在控制系统(1514)中,该控制系统被配置成控制被包括在制造系统(1502)中的制作设备(1508)或组装设备(1510)中的至少一个或者被包括在维护系统(1504)中的维护设备(1512)的操作。
2.一种交通工具检测系统,其包含:
移动式检测器件(112);
用于所述移动式检测器件(112)的显示系统(116);
图形用户界面(122),所述图形用户界面(122)被配置为显示在所述显示系统(116)上;以及
控制器(128),所述控制器(128)被配置为与所述移动式检测器件(112)一起操作,其中所述控制器(128)被配置为执行根据权利要求1所述的方法的步骤。
3.根据权利要求2所述的交通工具检测系统,其进一步包含:
存储系统,其中注释的历史记录被存储在所述存储系统中。
4.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述控制器(128)被配置为识别在用于所述移动式检测器件(112)的当前定位(132)的所述移动式检测器件(112)的所述视场(140)中的注释集合,并在所述显示系统(116)上在所述图形用户界面(122)上显示所述注释集合。
5.根据权利要求4所述的交通工具检测系统,其中识别的所述注释集合是基于应用于所述移动式检测器件(112)的所述人工操作员(110)的角色的策略(148)。
6.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述控制器(128)位于所述移动式检测器件(112)或与所述移动式检测器件(112)通信的远程计算机中的至少一个中。
7.根据权利要求2-3中任意一项所述的交通工具检测系统,其中,在用于所述移动式检测器件(112)的所述显示系统(116)上在所述图形用户界面(122)上将所述注释与所述视场(140)中的所述项目(136)相关联地显示形成混合现实环境或增强现实环境中的至少一个。
8.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述注释包含图形指示符(202)和从文本、语音、图像或视频中的至少一个选择的细节。
9.根据权利要求8所述的交通工具检测系统,其中所述图形指示符(202)指示从由新的、正在进行的和已完成的组成的组选择的状态。
10.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述控制器(128)显示用于交通工具组的随时间的推移的用于位置组的注释,使得能够查看所述位置组中的一个或更多个不一致性的趋势。
11.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述控制器(128)显示用于所述项目组的度量组,或者其中所述控制器(128)可选地促进与远程专家组的通信。
12.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述移动式检测器件(112)选自移动电话、头戴式显示器、混合现实智能眼镜和平板计算机组成的组。
13.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述用户输入(124)是使用手势识别系统、有线手套、立体照相机、基于手势的控制器、鼠标、跟踪球、键盘、跟踪板、触摸屏平板、运动感测输入器件、网络手套、照相机或麦克风中的至少一个生成的。
14.根据权利要求2-3中任意一项所述的交通工具检测系统,其中所述注释是在向客户交付之前的最后的检测、维修、所述交通工具(104)的组装和所述交通工具(104)的认证中的一个的期间生成的。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/622,756 | 2017-06-14 | ||
US15/622,756 US10107767B1 (en) | 2017-06-14 | 2017-06-14 | Aircraft inspection system with visualization and recording |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109085981A CN109085981A (zh) | 2018-12-25 |
CN109085981B true CN109085981B (zh) | 2023-10-31 |
Family
ID=62217729
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810535554.XA Active CN109085981B (zh) | 2017-06-14 | 2018-05-30 | 利用可视化和记录的飞行器检测系统 |
Country Status (6)
Country | Link |
---|---|
US (2) | US10107767B1 (zh) |
EP (1) | EP3416106A1 (zh) |
CN (1) | CN109085981B (zh) |
BR (1) | BR102018010752A2 (zh) |
CA (1) | CA3003015A1 (zh) |
RU (1) | RU2760755C2 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10620993B2 (en) * | 2017-02-27 | 2020-04-14 | International Business Machines Corporation | Automated generation of scheduling algorithms based on task relevance assessment |
US20190057180A1 (en) * | 2017-08-18 | 2019-02-21 | International Business Machines Corporation | System and method for design optimization using augmented reality |
JP7073850B2 (ja) * | 2018-03-29 | 2022-05-24 | 株式会社リコー | 入力装置および入力装置の入力方法 |
US11542039B2 (en) * | 2020-01-02 | 2023-01-03 | The Boeing Company | Aviation component inspection using image recognition |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102135799A (zh) * | 2010-03-12 | 2011-07-27 | 微软公司 | 与基于计算机的应用的交互 |
CN102822773A (zh) * | 2010-03-24 | 2012-12-12 | 惠普开发有限公司 | 用于显示设备的手势映射 |
CN103246692A (zh) * | 2012-02-07 | 2013-08-14 | 通用电气航空系统有限责任公司 | 用于维护和操作飞行器的系统和方法 |
CN103970824A (zh) * | 2013-01-28 | 2014-08-06 | 波音公司 | 复杂系统的三维表示的全景可视化 |
CN105009150A (zh) * | 2013-02-28 | 2015-10-28 | 波音公司 | 用于交通工具例如飞行器装配的对象可视化系统 |
CN105190239A (zh) * | 2013-02-26 | 2015-12-23 | 高通股份有限公司 | 用于使用移动装置的导航的方向性及x射线视图技术 |
CN105388857A (zh) * | 2014-08-25 | 2016-03-09 | 波音公司 | 序列号控制的可视化系统 |
CN105718185A (zh) * | 2014-08-02 | 2016-06-29 | 苹果公司 | 情境特定用户接口 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030222981A1 (en) * | 2002-06-04 | 2003-12-04 | Kisak Jeffrey James | Locomotive wireless video recorder and recording system |
US20090289955A1 (en) * | 2008-05-22 | 2009-11-26 | Yahoo! Inc. | Reality overlay device |
US7936285B2 (en) * | 2008-06-18 | 2011-05-03 | The Boeing Company | Multipurpose information transfer medium eyepiece |
US9191238B2 (en) * | 2008-07-23 | 2015-11-17 | Yahoo! Inc. | Virtual notes in a reality overlay |
US8275834B2 (en) | 2009-09-14 | 2012-09-25 | Applied Research Associates, Inc. | Multi-modal, geo-tempo communications systems |
US9285589B2 (en) | 2010-02-28 | 2016-03-15 | Microsoft Technology Licensing, Llc | AR glasses with event and sensor triggered control of AR eyepiece applications |
US9511291B2 (en) | 2010-11-15 | 2016-12-06 | Bally Gaming, Inc. | System and method for enhanced augmented reality tracking |
US9342928B2 (en) | 2011-06-29 | 2016-05-17 | Honeywell International Inc. | Systems and methods for presenting building information |
US20130070056A1 (en) | 2011-09-20 | 2013-03-21 | Nexus Environmental, LLC | Method and apparatus to monitor and control workflow |
EP2817785B1 (en) | 2012-02-23 | 2019-05-15 | Charles D. Huston | System and method for creating an environment and for sharing a location based experience in an environment |
US9704189B2 (en) * | 2012-09-05 | 2017-07-11 | Rakuten Kobo, Inc. | System and method for a graphical user interface having recommendations |
RU2517422C1 (ru) * | 2012-12-10 | 2014-05-27 | Открытое акционерное общество "Лётно-исследовательский институт имени М.М. Громова" | Экспертная система контроля работы бортового оборудования летательных аппаратов |
US20140240349A1 (en) * | 2013-02-22 | 2014-08-28 | Nokia Corporation | Method and apparatus for presenting task-related objects in an augmented reality display |
US9292180B2 (en) | 2013-02-28 | 2016-03-22 | The Boeing Company | Locator system for three-dimensional visualization |
US9612725B1 (en) | 2013-02-28 | 2017-04-04 | The Boeing Company | Nonconformance visualization system |
US20150193982A1 (en) * | 2014-01-03 | 2015-07-09 | Google Inc. | Augmented reality overlays using position and orientation to facilitate interactions between electronic devices |
WO2015102527A1 (en) | 2014-01-05 | 2015-07-09 | Yousefi Shahrouz | Real-time 3d gesture recognition and tracking system for mobile devices |
US9550419B2 (en) * | 2014-01-21 | 2017-01-24 | Honda Motor Co., Ltd. | System and method for providing an augmented reality vehicle interface |
-
2017
- 2017-06-14 US US15/622,756 patent/US10107767B1/en active Active
-
2018
- 2018-04-26 CA CA3003015A patent/CA3003015A1/en active Pending
- 2018-04-27 RU RU2018115965A patent/RU2760755C2/ru active
- 2018-05-03 EP EP18170605.2A patent/EP3416106A1/en not_active Withdrawn
- 2018-05-25 BR BR102018010752-6A patent/BR102018010752A2/pt unknown
- 2018-05-30 CN CN201810535554.XA patent/CN109085981B/zh active Active
- 2018-09-06 US US16/123,505 patent/US20190017945A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102135799A (zh) * | 2010-03-12 | 2011-07-27 | 微软公司 | 与基于计算机的应用的交互 |
CN102822773A (zh) * | 2010-03-24 | 2012-12-12 | 惠普开发有限公司 | 用于显示设备的手势映射 |
CN103246692A (zh) * | 2012-02-07 | 2013-08-14 | 通用电气航空系统有限责任公司 | 用于维护和操作飞行器的系统和方法 |
CN103970824A (zh) * | 2013-01-28 | 2014-08-06 | 波音公司 | 复杂系统的三维表示的全景可视化 |
CN105190239A (zh) * | 2013-02-26 | 2015-12-23 | 高通股份有限公司 | 用于使用移动装置的导航的方向性及x射线视图技术 |
CN105009150A (zh) * | 2013-02-28 | 2015-10-28 | 波音公司 | 用于交通工具例如飞行器装配的对象可视化系统 |
CN105718185A (zh) * | 2014-08-02 | 2016-06-29 | 苹果公司 | 情境特定用户接口 |
CN105388857A (zh) * | 2014-08-25 | 2016-03-09 | 波音公司 | 序列号控制的可视化系统 |
Non-Patent Citations (1)
Title |
---|
基于前向运动视频的计算机视觉检测技术研究及应用;王胜春;《中国博士论文集》;全文 * |
Also Published As
Publication number | Publication date |
---|---|
RU2018115965A (ru) | 2019-10-28 |
BR102018010752A2 (pt) | 2019-03-26 |
US10107767B1 (en) | 2018-10-23 |
CN109085981A (zh) | 2018-12-25 |
EP3416106A1 (en) | 2018-12-19 |
RU2018115965A3 (zh) | 2021-09-24 |
US20190017945A1 (en) | 2019-01-17 |
RU2760755C2 (ru) | 2021-11-30 |
CA3003015A1 (en) | 2018-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6480105B2 (ja) | 3次元視覚化のためのロケータシステム | |
CN109085981B (zh) | 利用可视化和记录的飞行器检测系统 | |
CN106547939B (zh) | 对象管理系统、飞机设计系统及管理对象的方法 | |
US8791823B2 (en) | Aircraft part control system | |
US10061481B2 (en) | Methods and devices for visually querying an aircraft based on an area of an image | |
CN107480791B (zh) | 用于乘客舱位布局图的三维飞机检查系统 | |
EP2998909A1 (en) | Interactive imaging system | |
CN104050602B (zh) | 组装状况可视化系统 | |
US9612725B1 (en) | Nonconformance visualization system | |
EP3637230B1 (en) | Augmented reality system for visualizing nonconformance data for an object | |
JP2015003718A (ja) | 同期表示を有する航空機の比較システム | |
US10831946B2 (en) | Multi-configuration massive model system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |