CN107850550A - 显示系统、显示装置、显示方法以及程序 - Google Patents

显示系统、显示装置、显示方法以及程序 Download PDF

Info

Publication number
CN107850550A
CN107850550A CN201680046493.XA CN201680046493A CN107850550A CN 107850550 A CN107850550 A CN 107850550A CN 201680046493 A CN201680046493 A CN 201680046493A CN 107850550 A CN107850550 A CN 107850550A
Authority
CN
China
Prior art keywords
display
image
images
unit
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680046493.XA
Other languages
English (en)
Other versions
CN107850550B (zh
Inventor
井上和佳
角藤阳郎
角藤阳一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NS Solutions Corp
Original Assignee
NS Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NS Solutions Corp filed Critical NS Solutions Corp
Publication of CN107850550A publication Critical patent/CN107850550A/zh
Application granted granted Critical
Publication of CN107850550B publication Critical patent/CN107850550B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/35—Nc in input of data, input till input file format
    • G05B2219/35482—Eyephone, head-mounted 2-D or 3-D display, also voice and other control
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39449—Pendant, pda displaying camera images overlayed with graphics, augmented reality
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Biochemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • Automation & Control Theory (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • General Factory Administration (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种显示系统，其具有可以在现实空间中重叠显示图像的显示装置和管理显示装置所显示的图像的管理装置，显示装置具有显示处理单元，其从存储单元中读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方，并将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中。

Description

显示系统、显示装置、显示方法以及程序
技术领域
本发明涉及显示系统、显示装置、显示方法以及程序。
背景技术
以往，在汽车制造工厂等实施多个检查工序，已知管理各检查工序的管理系统。在专利文献1中，公开了当执行过的检查工序的检查结果不满足预定的基准时，显示该意思的系统。另外，在检查工序中，还包括基于检查者的目视的检查。在目视检查中，检查者根据对每一个检查项目制定的判定基准来判定检查对象物的合格、不合格。
另一方面，在近年，已知利用增强现实(Augmented Reality，以下简称为AR)技术的作业辅助技术。作为作业辅助技术，在专利文献2中，公开了在作业者佩戴的穿戴型AR显示装置中，与现实空间的影像重叠来显示故障恢复作业所涉及的信息的技术。
现有技术文献
专利文献
专利文献1:日本特开2010-26757号公报
专利文献2:日本特开2011-248860号公报
发明内容
发明要解决的课题
然而，在作业者的目视检查中，存在有可能做出错误判定，将本应被判定为不合格的产品出货的问题。
本发明是鉴于这样的问题而完成的，其目的在于进行有助于提高基于检查者的目视的检查的检查精度的辅助。
用于解决课题的手段
因此，本发明是具有能够在现实空间中重叠显示图像的显示装置和管理由所述显示装置显示的图像的管理装置的显示系统，所述显示装置具有：第1接收单元，其从存储单元接收针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方；以及显示处理单元，其将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中。
发明效果
根据本发明，可以提高包含了基于检查者的目视的检查的检查工序中的检查精度。
附图说明
图1是表示AR显示系统的图。
图2是表示AR显示装置的图。
图3是表示管理装置的图。
图4是成品车检查的说明图。
图5是表示基于AR显示系统的检查辅助处理的流程图。
图6是表示参考图像DB的数据结构的一例的图。
图7是表示参考图像的显示例的图。
图8A是表示选择指示所涉及的图像的扩大显示例的图。
图8B是表示选择指示所涉及的图像的扩大显示例的图。
图9是表示参考图像的显示例的图。
具体实施方式
以下，根据附图对本发明的实施方式进行说明。
图1是表示作为显示系统的增强现实显示系统的图。以下，将增强现实显示系统称为AR(Augmented Reality)显示系统。AR显示系统具有AR显示装置100、管理装置110和PC120。
AR显示装置100是眼镜型装置。在本实施方式中，在汽车工厂中的成品车的最终检查中，设检查者佩戴AR显示装置100来进行检查对象物的目视检查。AR显示装置100还是透光型的显示装置，在相当于眼镜的镜片部分的位置，设置有透光型的显示部105。佩戴着AR显示装置100的检查者经由AR显示装置100的显示部105，在现实空间中可以看到存在于视线末端的物体。在显示部105中还显示任意的图像，因此佩戴着AR显示装置100的检查者可以识别在通过显示部105看到的现实空间中重叠了任意的图像的状态。如此，AR显示装置100是能够在现实空间中重叠显示图像的显示装置。此外，将合成了现实空间与任意的图像的空间称为增强现实空间。在与显示部105相邻的位置还设置了拍摄部107。拍摄部107将拍摄方向设置为AR显示装置100的佩戴者的视线方向和拍摄部107的拍摄方向一致。由此，拍摄部107可以拍摄佩戴AR显示装置100的检查者所看到的现实空间的图像。此外，作为其他的例子，拍摄部107可以被设置为拍摄方向与佩戴者的视线方向成一定的关系。
管理装置110管理AR显示装置100所显示的信息。PC120例如是检查者的上司等预先决定的用户所使用的信息处理装置。在这里，PC120是外部装置的一个例子。设AR显示装置100经由网络可以与管理装置110以及PC120进行通信。AR显示装置100与管理装置110之间的网络可以与AR显示装置100与PC120之间的网络相同，也可以不同。
图2是表示AR显示装置100的图。AR显示装置100具有CPU101、ROM102、RAM103、通信I/F104、显示部105、话筒106以及拍摄部107。CPU101读出存储在ROM102中的控制程序来执行各种处理。RAM103作为CPU101的主存储器、工作区域等临时存储区域来使用。此外，后述的AR显示装置100的功能、处理是通过CPU101读出保存在ROM102中的计算机程序并执行该程序而实现的。
通信I/F104经由网络进行与管理装置110以及PC120的通信处理。显示部105显示各种信息。话筒106输入佩戴着AR显示装置100的检查者的发话等的语音。此外，语音被发送至CPU101，并在CPU101中进行语音识别处理。CPU101根据语音识别的结果，可以接受用户的各种指示。拍摄部107进行现实空间的拍摄。此外，在本实施方式中，设AR显示装置100通过输入至话筒106的语音来接受来自用户的指示，但是用于接受来自用户的指示的用户界面并不限定于此。作为其他的例子，AR显示装置100可以接受与设置在AR显示装置100中的未图示的按钮的按下相对应的指示。另外，作为其他的例子，AR显示装置100可以根据通过拍摄部107所拍摄的视频，接受与针对用户的手势的手势识别结果相对应的指示。
图3是表示管理装置110的图。管理装置110具有CPU111、ROM112、RAM113、通信I/F114、显示部115、输入部116以及HDD117。CPU111、ROM112、RAM113以及通信I/F114分别与CPU101、ROM102、RAM103以及通信I/F104相同。显示部115显示各种信息。输入部116具有键盘、鼠标，并接受用户的各种操作。HDD117存储数据、各种程序等。后述的管理装置110的功能、处理，通过CPU111读出保存在ROM112或者HDD117中的程序并执行该程序来实现。此外，PC120的结构与管理装置110的结构相同。
图4是在汽车工厂中实施的成品车检查的说明图。在成品车检查中包括基于检查装置的检查和基于检查者的目视的检查，检查者A佩戴AR显示装置100，并进行基于目视的检查。成品车200被放置在带式输送机210上，搬运到检查者A的面前。放置在带式输送机210上搬运来的检查对象汽车的规格(车辆种类、型号、配置、颜色等)涉及多种，检查者A首先对汽车的规格进行确定。然后，检查者一边参照记载了每一个规格的检查项目的规格表等，一边根据规格来确定检查项目，并通过目视确认检查项目中所示的检查对象物，做出合格或者不合格的判定。以下，将设置在成品车200前面的车标201设为检查对象物，以车标201的形状的检查为例进行说明。
图5是表示基于AR显示系统的检查辅助处理的流程图。本处理是佩戴着AR显示装置100的检查者在进行检查时执行的处理。首先，在S100中，AR显示装置100的CPU101根据检查者的发话，确认是否接受了检查项目的选择指示。在这里，检查项目是指表示检查者将要进行检查的检查对象物以及其检查内容的信息。如果检查者发话“车标的形状检查”，则AR显示装置100的CPU101进行对于从话筒106输入的语音的语音识别，并根据语音识别结果接受检查项目“车标的形状”的选择指示。此外，如上所述，用于检查者输入选择指示的用户界面并不限定于话筒106。作为其他的例子，用户可以通过按钮的按下、手势等来进行选择指示的输入。此外，在以下的说明中，与在检查者输入各种指示时同样地，用于指示输入的用户界面并不限定于实施方式。在这里，S100的处理是接受处理的一个例子。
AR显示装置100的CPU101在接受了选择指示时(在S100中“是”)，将处理前进至S101。在S101中，AR显示装置100的CPU101经由通信I/F104对管理装置110发送包含选择指示所涉及的检查项目的图像获取请求(发送处理)。管理装置110的CPU111如果经由通信I/F114接收图像获取请求，则将处理前进至S102。在S102中，管理装置110的CPU111从参考图像DB中提取与在图像获取请求中所示的检查项目相关联地登记的参考图像。在这里，参考图像是指在检查中被参照的图像，是判定为合格或者不合格的检查对象物的图像。
图6是表示参考图像DB118的数据结构的一例的图。参考图像DB118例如保存在管理装置110的HDD117等存储部中。在参考图像DB118中相关联地保存检查项目与参考图像。如图6所示，参考图像包括合格图像以及不合格图像。在这里，合格图像是被判定为合格的检查对象物的图像。不合格图像是被判定为不合格的检查对象物的图像。如此，设参考图像DB118可以对参考图像是合格图像还是不合格图像进行识别地保存。此外，设合格图像以及不合格图像在AR显示系统的设计时等进行实际的处理之前由设计者等预先制作并登记在参考图像DB118中。
管理装置110的CPU111在参考图像DB118中提取与检查项目相关联的参考图像。此外，存在两种情况：与检查项目相关联地保存着合格图像以及不合格图像双方的情况；与检查项目相关联地仅保存某一方图像的情况。在前者的情况下，提取合格图像以及不合格图像的双方，在后者的情况下，仅提取合格图像以及不合格图像中的某一方的图像。
接着，在S103中，管理装置110的CPU111将提取出的参考图像与识别各参考图像是合格图像还是不合格图像的信息相关联，并经由通信I/F114发送至AR显示装置100。
AR显示装置100的CPU101如果在S103中接收参考图像，则将处理前进至S104。在这里，S103的处理是接收合格图像以及不合格图像中的至少一方的接收处理的一个例子。在S104中，AR显示装置100的CPU101从接收到的参考图像中提取1个合格图像和1个不合格图像，并将它们显示在显示部105中。图7是表示合格图像以及不合格图像的显示例的图。在显示部105的左侧以及右侧分别显示1个合格图像221以及1个不合格图像223。由此，检查者在经由显示部105观察作为存在于现实空间中的检查对象物的成品车200的车标201的同时，也可以观察显示在显示部105中的合格图像221以及不合格图像223。即，检查者可以识别对存在于现实空间中的检查对象物重叠了合格图像221以及不合格图像223的增强现实空间。
而且，在合格图像221附近显示“OK”字符作为表示是合格图像的信息222，在不合格图像223附近显示“NG”字符作为表示是不合格图像的信息224。此外，优选的是，表示是合格图像、不合格图像的信息是多国检查者可以容易掌握的信息。例如，可以是○和×等标记。
进一步，优选的是，AR显示装置100在预先决定的显示位置分别显示显示部105中的合格图像以及不合格图像。由此，检查者不用确认表示合格图像或者不合格图像的信息222、224，就可以根据显示位置来确定是合格图像还是不合格图像。设本实施方式所涉及的AR显示装置100在显示部105的左侧显示合格图像，在显示部105的右侧显示不合格图像。另外，当AR显示装置100的CPU101在S103中仅接收到合格图像以及不合格图像中的一方时，设在S104中仅显示接收到的图像(合格图像或者不合格图像)。
AR显示装置100的CPU101还与合格图像221相邻地显示“1/3”。在这里，分母“3”是在S103中接收到的合格图像的总数，分子“1”是显示中的合格图像221的识别编号。同样地，AR显示装置100的CPU101与不合格图像222相邻地显示“1/4”。
AR显示装置100的CPU101还可以根据来自检查者的指示，切换显示在显示部105中的图像。例如，如果检查者发话“变更合格图像”，则AR显示装置100的CPU101接受合格图像的显示切换指示。然后，AR显示装置100的CPU101显示接收到的其他的合格图像，代替显示中的合格图像。同样地，如果检查者发话“变更不合格图像”，则AR显示装置100的CPU101接受不合格图像的显示切换指示，显示接收到的其他的不合格图像，代替显示中的不合格图像。如此，AR显示装置100的CPU101在每一次接受显示切换指示时，通过切换显示图像，可以按顺序地显示接收到的合格图像以及不合格图像。在这里，S104的处理是显示从管理装置110接收到的图像的显示处理的一个例子。
此外，在显示部105中同时显示的图像的数量并不限定于实施方式。作为其他的例子，可以在显示部105的左侧以及右侧分别显示3个合格图像以及3个不合格图像，并在每一次接受显示切换指示时显示接下来的3个图像，代替显示中的3个图像。
此外，设AR显示装置100的CPU101在S103中，以参考图像的接收为契机，显示从管理装置110接收到的参考图像，但是并不限定于此。作为其他的例子，可以设AR显示装置100的CPU101在S103中，在接收参考图像并且从检查者接受参考图像的显示指示时，显示参考图像。
检查者这样在显示部105中显示合格图像以及不合格图像，并对显示中的图像与存在于现实空间中的检查对象物进行比较。然后，尤其在存在相似的图像时，检查者输入相似图像的选择指示。例如，检查者在考虑想要将检查对象物与显示中的合格图像进行比较时，发话“选择合格图像”。此时，AR显示装置100的CPU101针对从话筒106输入的该语音进行语音识别处理，并根据识别结果判断出接受了显示中的合格图像的选择指示。同样地，AR显示装置100的CPU101也可以接受显示中的不合格图像的选择指示。
相对于此，在S105中，在AR显示装置100的CPU101接受了选择指示时(在S105中“是”)，将处理前进至S106。当AR显示装置100的CPU101没有接受选择指示时(在S105中“否”)，将处理前进至S114。在这里，S105的处理是接受显示部105显示中的图像中的一个图像的选择指示的接受处理的一个例子。
在S106中，AR显示装置100的CPU101扩大显示选择指示所涉及的图像(合格图像或者不合格图像)，之后将处理前进至S107。
图8A是表示合格图像的扩大显示例的图。合格图像231显示在显示部105的左侧。另外，图8B是表示不合格图像的扩大显示例的图。不合格图像232显示在显示部105的右侧。AR显示装置100的CPU101还可以从检查者接受变倍指示，并根据变倍指示扩大、缩小合格图像231或者不合格图像232。由此，可以将合格图像231以及不合格图像232的显示尺寸例如调整为与检查者对实际空间的检查对象物201目视确认的尺寸相同的尺寸。而且，检查者通过移动视线，可以在检查对象物201的旁边显示合格图像231或者不合格图像232。AR显示装置100的CPU101还可以按照来自检查者的指示，变更合格图像231或者不合格图像232的显示位置。由此，与上述同样地，可以在检查对象物201的旁边显示合格图像231或者不合格图像232。如此，检查者不用移动视线就可以对实际的检查对象物与合格图像231或者不合格图像232进行比较，因此可以更加准确地进行合格不合格的判定。
然而，存在检查对象物与显示在显示部105中的任一合格图像以及不合格图像都不类似的情况等，即使检查者参考所显示的图像也很难做出合格不合格的判定的情况。在像这样的情况下，检查者例如发话“判定请求”。对此，AR显示装置100的CPU101针对输入至话筒106中的检查者的语音进行语音识别处理，并根据识别结果判断为接受了判定请求指示。
相对于此，在S107中，AR显示装置100的CPU101确认是否接受了判定请求指示。AR显示装置100的CPU101在接受了判定请求指示时(在S107中“是”)，将处理前进至S108。AR显示装置100的CPU101在没有接受判定请求指示时(在S107中“否”)，将处理前进至S116。在这里，S107的处理是接受判定请求指示的接受处理的一个例子。在S108中，AR显示装置100的CPU101进行拍摄控制处理。本处理与S106中的拍摄控制处理同样地，是拍摄图像并保存至存储部的处理。接着，在S109中，AR显示装置100的CPU101将在S108中所获得的拍摄图像与在S100中选择出的检查项目相关联地发送至PC120。此外，作为其他的例子，在S109中，AR显示装置100的CPU101可以发送在S106中获得的拍摄图像。在这种情况下，可以省略S108的处理。
PC120的CPU111如果在S109中接收拍摄图像和检查项目，则将处理前进至S110。在S110中，PC120的CPU111将接收到的拍摄图像与检查项目一起显示在显示部115。此时，作为PC120的使用者的检查者的上司等确认显示在显示部115中的拍摄图像，判定合格或者不合格，并经由输入部116输入判定结果。在这里，PC120是作为可以针对检查做出正确判断的人物而预先决定的人物所使用的装置即可。作为其他的例子，PC120也可以是检查工序中的判断基准的管理者、最终检查工序整体的管理者等所使用的装置。
针对PC120的处理，在S111中，PC120的CPU111接受判定结果的输入。接着，在S112中，PC120的CPU111经由通信I/F114向AR显示装置100发送判定结果。对此，AR显示装置100的CPU101如果在S112中接收判定结果，则将处理前进至S113。在S113中，AR显示装置100的CPU101在显示部105中显示判定结果。由此，检查者即使针对自身无法判断的检查对象物也可以迅速地获得正确的检查结果。此外，AR显示装置100的CPU101按照来自检查者的指示，适当地结束判定结果的显示。
接着，在S114中，AR显示装置100的CPU101向管理装置110发送在S108中获得的拍摄图像的图像登记指示，之后将处理前进至S116。在这里，设在图像登记指示中除了拍摄图像，还包括检查项目和在S112中接收到的判定结果。如果管理装置110的CPU111接收图像登记指示，则将处理前进至S115。在S115中，管理装置110的CPU111将图像登记指示所涉及的拍摄图像与图像登记指示所涉及的检查项目相关联，登记在参考图像DB118中。
此外，作为其他例子，当AR显示装置100的CPU101接收判定结果，并且从检查者接受了图像登记指示时，可以执行S114以及S115的处理，并进行图像的登记。
另外，AR显示装置100的CPU101在S116中，接受通过检查者输入的判定结果。接着，在S117中，AR显示装置100的CPU101向管理装置110发送判定结果。如果管理装置110接收判定结果，则在S118中，与检查项目相关联地记录判定结果。接着，在S118中，管理装置110将判定结果记录在HDD117等的存储部。
此外，AR显示装置100在S114中发送拍摄图像时，设将在S114中发送的拍摄图像的识别信息与判定结果一起发送。管理装置110当接收到识别信息和判定结果时，在参考图像DB118中，对根据识别信息识别出的拍摄图像进行确定。然后，管理装置110将判定结果、即表示是合格图像或者不合格图像的信息与确定出的拍摄图像相关联，记录在参考图像DB118中。
AR显示装置100的CPU101在S117的处理之后，在S119中根据用户的发话，确认是否接受了参考图像的显示结束指示。AR显示装置100的CPU101在没有接受显示结束指示时(在S119中“否”)，将处理前进至S104。此外，作为其他的例子，AR显示装置100的CPU101在没有接受显示结束指示时(在S119中“否”)，也可以将处理前进至S101。由此，可以参考更新的状态的参考图像DB118。另一方面，AR显示装置100的CPU101在接受了显示结束指示时(在S119中“是”)，结束处理。
如此，本实施方式所涉及的AR显示装置100与存在于现实空间中的检查对象物重叠来显示合格图像和不合格图像。因此，检查者在进行检查对象物的判定时，可以观察实际的合格品以及不合格品的图像，来进行检查对象物的合格不合格的判定。如此，在使用本实施方式所涉及的AR显示系统的检查工序中，可以使用图像(合格图像以及不合格图像)代替可能对合格与否的判定来说暧昧的文字，作为检查的判定基准。因此，检查者可以更加简单并且准确地进行检查对象物的判定(检查)。如此，本实施方式所涉及的AR显示系统可以进行有助于基于检查者的目视检查的检查精度的提高的辅助。
另外，以往在检查者对合格与否的判定犹豫时，存在通过主观判定来输入结果，没有进行适当的判定的情况。即使在那样的情况下，也并不一定更新检查的判定基准，当下次检查相同的检查对象时，有可能重复不适当的判定。相对于此，在使用本实施方式所涉及的AR显示系统的检查工序中，可以随时更新判定基准。因此，当下次检查相同的检查对象时，检查者可以根据客观的判定基准来进行判定，因此可以防止重复不适当的判定。另外，当更新检查的判定基准时，需要管理者等手动地改写记载在手册中的判定基准。进一步，当在多个国家的工厂进行相同的检查时，还需要翻译为各国的语言的翻译工作。相对于此，如上所述，在使用本实施方式所涉及的AR显示系统的检查工序中，使用参考图像作为判定基准，并自动积累新的参考图像，由此来更新判定基准。另外，针对所显示的合格图像以及不合格图像，也可以使用○和×等多国共通的标记、字符来显示用于区别两者的识别信息。因此，可以不用基于管理者等的手动工作进行的判定基准的更新，也不用进行更新时的翻译工作。
接着，针对本实施方式所涉及的AR显示系统的第1变更例进行说明。从双手变得自由的观点出发，优选的是，AR显示装置100是在本实施方式中所说明那样的眼镜型、头戴式显示器那样的头部穿戴型等穿戴型的装置。但是，AR显示装置100并不限定于穿戴型。例如，在检查时的视线移动较少的情况下，AR显示装置100可以被设置为例如在检查者的视线方向的位置且检查者与检查对象物之间的位置透过显示检查对象物。另外，作为其他的例子，AR显示装置100也可以是便携型。
另外，作为第2变更例，AR显示装置100并不限定于光学透过型的显示装置。作为其他的例子，也可以是视频透过型的显示装置。在这种情况下，AR显示装置100的CPU101在开始如图5所示的处理时，控制拍摄部107来拍摄检查对象物的图像，并在显示部105中显示作为拍摄图像的现实空间的影像。然后，在S104中，AR显示装置100的CPU101将合格图像以及不合格图像与显示部105中正在显示的现实空间的检查对象物的影像重叠来进行重叠显示。另外，在S106中，AR显示装置100的CPU101将重叠显示指示所涉及的图像与在显示部105中正在显示的现实空间的影像中的检查对象物的图像重叠显示，来代替现实空间的检查对象物。
针对第3变更例进行说明。本实施方式所涉及的AR显示装置100是显示2D图像的装置，但是也可以替换为显示3D图像。在这种情况下，AR显示装置100在与右眼以及左眼相对应的位置具有2个显示部，并在各显示部中显示实现3D图像那样的图像即可。
另外，作为第4变更例，AR显示装置100可以将与可执行的全部的检查项目相对应的参考图像预先存储在ROM102等存储部中。然后，AR显示装置100在如图5所示的S100中接受了检查项目的选择指示时，在S104中从存储在存储部中的参考图像中读出选择指示所涉及的参考图像(读出处理)，并显示所读出的参考图像。即，在这种情况下，不需要S101～S103的处理。AR显示装置100还可以定期地向管理装置110发送更新了的图像获取请求，并从管理装置110接收更新了的参考图像(增加的参考图像)，保存在存储部中。
此外，为了对上次发送的参考图像进行确定，例如，设AR显示装置100在每一次接收参考图像时记录接收日期和时间，并发送包含了上次的接收日期和时间的信息的更新了的图像获取请求。另外，作为其他的例子，管理装置110可以记录向AR显示装置100发送了更新了的参考图像的发送日期和时间。
此外，AR显示装置100接收变更了的参考图像的定时并没有特别的限定。作为其他的例子，设AR显示装置100可以在图5的S100中接受了选择指示的定时，接收更新了的参考图像。
另外，作为第5变更例，AR显示装置100可以自动地进行检查，而不是根据来自检查者的检查项目的选择指示的输入来进行检查(图5的S100)。例如，AR显示装置100在HDD117等中预先存储与规格表相对应的检查信息。在这里，检查信息是表示检查项目和各检查项目的检查顺序的信息。
然后，检查者在检查开始时输入检查开始的指示。与此相对应地，AR显示装置100通过对检查信息中示出的第1个检查项目进行确定，并向管理装置110发送包含第1个检查项目的图像获取请求，来接收第1个检查项目的参考图像，并显示该参考图像。之后，检查者在结束了第1个检查的时间点，输入检查结束的指示。AR显示装置100如果接受检查结束的指示，则参考检查信息并对检查对象进行下一个检查项目。然后，AR显示装置100通过向管理装置110发送包含第2个检查项目的图像获取请求，接收相对应的参考图像，并显示该参考图像。之后重复同样的处理即可。
另外，作为第6变更例，AR显示装置100在图5的S104中，在显示部105中显示参考图像时的参考图像的配置并不限定于实施方式。例如，AR显示装置100如图9所示，可以在显示部105的右侧显示多个不合格图像。另外，作为其他的例子，在S104中，如图8A、图8B所示，可以在显示部105中仅显示合格图像231或者不合格图像232。此外，这种情况下也与一边参照图7一边说明的相同，可以以分数形式显示总数和显示中的图像的识别编号。
另外，作为第7变更例，AR显示装置100在图5的S106中，可以不接受来自检查者的指示，而自动地进行选择指示所涉及的图像的尺寸调整以及显示位置的调整。具体而言，AR显示装置100的CPU101首先控制拍摄部107来获取拍摄图像。然后，CPU101针对拍摄图像进行图像识别，并提取检查对象物的图像(图像识别处理)，确定检查对象物的图像在拍摄图像中的位置和大小。AR显示装置100的CPU101还根据拍摄方向与视线方向的关系、检查对象物的拍摄图像中的位置以及大小，来决定选择指示所涉及的图像的显示位置以及显示尺寸。
在这里，设显示位置是与检查对象物相邻的位置。然后，AR显示装置100的CPU101在所决定的显示位置以所决定的显示尺寸来显示选择指示所涉及的图像。在这里，相邻的位置是指在显示部105内检查者所掌握的检查对象物的位置与所述显示位置之间的距离是预定的长度那样的位置，更优选的是，是检查对象物与图像不重合的位置。另外，相邻的位置还可以是在显示部105内根据检查者所掌握的检查对象物的尺寸而决定的位置。
另外，作为第8变更例，AR显示装置100作为合格图像以及不合格图像显示的图像并不限定为静止图像，也可以是视频。另外，作为其他的例子，AR显示装置100可以根据通过拍摄部107拍摄的视频生成动画，并将其显示为合格图像以及不合格图像。
另外，作为第9变更例，AR显示装置100除了从PC120接收到判定结果的拍摄图像，还将检查者希望登记到参考图像DB118中的拍摄图像作为参考图像，与判定结果相关联地登记到参考图像DB118中。
另外，作为第10变更例，AR显示装置100并不限定于检查者难以做出判定的案例，也可以对于全部的检查项目，在检查中或者检查结束时拍摄、记录检查对象物的图像。由此，在之后发生了质量缺陷等时，可以确定缺陷的原因。例如，设AR显示装置100在管理装置110中记录拍摄图像，作为与参考图像不同的、检查完成图像。AR显示装置100还可以将检查结果与检查完成图像相关联地记录。
另外，作为第11变更例，检查对象并不限定于汽车的车标，例如可以是木纹方向盘、后门与车身的缝隙(间隙)、注意标签(Caution label)、装饰物(ornament)等。另外，检查对象并不限定于成品车检查，也适用于汽车的组装工序、涂装工序中的完成检查等。另外，作为其他的例子，还适用于建筑物的检查、植物、设施、装置的检查等。
以上，根据上述各实施方式，可以进行有助于检查者的目视检查的检查精度的提高的辅助。
以上，针对本发明的优选实施方式进行了详细描述，但是本发明并不限定于所涉及的特定的实施方式，在请求专利保护的范围中所记载的本发明的主旨的范围内，可以进行各种各样的变形、变更。

Claims (18)

1.一种显示系统，具有能够在现实空间中重叠显示图像的显示装置和管理由所述显示装置显示的图像的管理装置，其特征在于，
所述显示装置具有：
读出单元，其从存储单元读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方；以及
显示处理单元，其将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中。
2.根据权利要求1所述的显示系统，其特征在于，
所述显示装置还具有：
接收单元，其从所述管理装置接收所述合格图像以及所述不合格图像中的至少一方；以及
保存单元，其将所述接收单元所接收到的所述合格图像以及不合格图像保存至所述存储单元。
3.根据权利要求1或2所述的显示系统，其特征在于，
所述显示装置还具有接受单元，其接受所述显示处理单元正在显示的图像中的一个图像的选择指示，还接受针对所述选择指示所涉及的图像的变倍指示，
所述显示处理单元对所述变倍指示所涉及的图像进行变倍显示。
4.根据权利要求1所述的显示系统，其特征在于，
所述显示装置还具有：
接受单元，其接受所述显示处理单元正在显示的图像中的一个图像的选择指示；
拍摄控制单元，其当接受了所述选择指示时，对存在于所述现实空间的所述检查对象物的拍摄进行控制；以及
图像识别单元，其通过针对通过所述拍摄控制单元的控制所获得的拍摄图像的图像识别处理，提取所述检查对象物的图像，
所述显示处理单元根据通过所述图像识别单元所获得的所述检查对象物的位置，在与所述现实空间的所述检查对象物相邻的位置显示所述选择指示所涉及的图像。
5.根据权利要求1所述的显示系统，其特征在于，
所述显示装置还具有：
接受单元，其接受所述现实空间的所述检查对象物的判定请求指示；
拍摄控制单元，其当接受了所述判定请求指示时，控制所述检查对象物的拍摄；
第1发送单元，其向外部装置发送通过所述拍摄控制单元的控制所获得的拍摄图像；以及
第2接收单元，其从所述外部装置接收针对所述拍摄图像的合格或者不合格的判定结果，
所述显示处理单元显示所述判定结果。
6.根据权利要求5所述的显示系统，其特征在于，
所述显示装置还具有第2发送单元，其将所述拍摄图像与所述判定结果一起发送至所述管理装置，
所述管理装置具有：
登记单元，其将所述拍摄图像与所述判定结果相关联地登记在存储单元中；以及
发送单元，其按照所述判定结果，将登记在所述存储单元中的所述拍摄图像作为所述合格图像或者所述不合格图像，发送至所述显示装置。
7.根据权利要求1所述的显示系统，其特征在于，
所述显示装置还具有：
接受单元，其接受检查项目的选择指示；
第2发送单元，其向所述管理装置发送与所述选择指示所涉及的检查项目相关联的图像的获取请求；以及
接收单元，其从所述管理装置接收与所述选择指示所涉及的所述检查项目相关联的所述图像。
8.根据权利要求1～7中任一项所述的显示系统，其特征在于，
所述显示装置是穿戴型装置。
9.根据权利要求1～7中任一项所述的显示系统，其特征在于，
所述显示装置是便携型装置。
10.一种显示系统，具有能够在现实空间的拍摄图像中重叠显示其他图像的显示装置和管理由所述显示装置显示的图像的管理装置，其特征在于，
所述显示装置具有：
拍摄控制单元，其控制所述现实空间的拍摄；
读出单元，其从存储单元读出针对检查对象物的合格图像以及不合格图像中的至少一方；以及
显示处理单元，其将所读出的图像与通过所述拍摄控制单元的控制所获得的拍摄图像重叠来显示在视频透过型显示单元中。
11.一种显示装置，能够在现实空间中重叠显示图像，其特征在于，
所述显示装置具有：
读出单元，其从存储单元读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方；以及
显示处理单元，其将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中。
12.一种显示装置，能够在现实空间的拍摄图像中重叠显示其他图像，其特征在于，
所述显示装置具有：
拍摄控制单元，其控制所述显示空间的拍摄；
读出单元，其从存储单元读出针对检查对象物的合格图像以及不合格图像中的至少一方；以及
显示处理单元，其将所读出的图像与通过所述拍摄控制单元的控制所获得的拍摄图像重叠来显示在视频透过型显示单元中。
13.一种由显示系统执行的显示方法，所述显示系统具有能够在现实空间中重叠显示图像的显示装置和管理由所述显示装置显示的图像的管理装置，其特征在于，
所述显示方法包括以下步骤：
所述显示装置从存储单元读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方的读出步骤；以及
所述显示装置将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中的显示处理步骤。
14.一种由显示系统执行的显示方法，所述显示系统具有能够在现实空间的拍摄图像中重叠显示其他图像的显示装置和管理由所述显示装置显示的图像的管理装置，其特征在于，
所述显示方法包括以下步骤：
所述显示装置控制所述现实空间的拍摄的拍摄控制步骤；
所述显示装置从存储单元读出针对检查对象物的合格图像以及不合格图像中的至少一方的读出步骤；以及
所述显示装置将所读出的图像与在所述拍摄控制步骤中获得的拍摄图像重叠来显示在视频透过型显示单元中的显示处理步骤。
15.一种能够在现实空间中重叠显示图像的显示装置所执行的显示方法，其特征在于，
所述显示方法包括以下步骤：
所述显示装置从存储单元读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方的读出步骤；以及
所述显示装置将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中的显示处理步骤。
16.一种能够在现实空间的拍摄图像中重叠显示其他图像的显示装置所执行的显示方法，其特征在于，
所述显示方法包括以下步骤：
控制所述现实空间的拍摄的拍摄控制步骤；
从存储单元读出针对检查对象物的合格图像以及不合格图像中的至少一方的读出步骤；以及
将所读出的图像与在所述拍摄控制步骤中获得的拍摄图像重叠来显示在视频透过型显示单元中的显示处理步骤。
17.一种程序，其特征在于，
用于使计算机作为以下单元来发挥功能：
从存储单元读出针对存在于现实空间中的检查对象物的合格图像以及不合格图像中的至少一方的读出单元；以及
将所读出的图像与穿过透光型显示单元的现实空间重叠来显示在所述显示单元中的显示处理单元。
18.一种程序，其特征在于，
用于使计算机作为以下单元来发挥功能：
控制现实空间的拍摄的拍摄控制单元；
从存储单元读出针对检查对象物的合格图像以及不合格图像中的至少一方的读出单元；以及
将所读出的图像与通过所述拍摄控制单元的控制所获得的拍摄图像重叠来显示在视频透过型显示单元中的显示处理单元。
CN201680046493.XA 2015-08-21 2016-06-27 显示系统、显示装置、显示方法以及存储介质 Active CN107850550B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015163825 2015-08-21
JP2015-163825 2015-08-21
PCT/JP2016/069055 WO2017033561A1 (ja) 2015-08-21 2016-06-27 表示システム、表示装置、表示方法及びプログラム

Publications (2)

Publication Number Publication Date
CN107850550A true CN107850550A (zh) 2018-03-27
CN107850550B CN107850550B (zh) 2020-11-03

Family

ID=58099780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680046493.XA Active CN107850550B (zh) 2015-08-21 2016-06-27 显示系统、显示装置、显示方法以及存储介质

Country Status (5)

Country Link
US (1) US10539509B2 (zh)
JP (2) JP6165362B1 (zh)
CN (1) CN107850550B (zh)
MY (2) MY201893A (zh)
WO (1) WO2017033561A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109584226A (zh) * 2018-11-26 2019-04-05 深圳龙图腾创新设计有限公司 一种质检系统以及方法
CN110871441A (zh) * 2018-08-31 2020-03-10 发那科株式会社 感测系统、作业系统、增强现实图像的显示方法、以及存储有程序的存储介质
CN113282778A (zh) * 2020-02-20 2021-08-20 青岛海尔工业智能研究院有限公司 一种品质异常记录方法、装置、ar设备、系统及介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180150070A1 (en) * 2016-11-29 2018-05-31 Caterpillar Inc. Portable inspection and control device
FR3073046B1 (fr) * 2017-10-27 2019-11-15 Pfeiffer Vacuum Module de detection de fuites et procede de controle de l'etancheite d'un objet a tester par gaz traceur
JP6729607B2 (ja) * 2018-01-11 2020-07-22 株式会社デンソー 設置位置情報提供装置及び設置位置情報提供方法
FR3080915B1 (fr) * 2018-05-02 2020-05-08 Pfeiffer Vacuum Module de detection de fuites et procede de controle de l etancheite d un objet a tester par gaz traceur
JP7054869B2 (ja) * 2018-09-26 2022-04-15 パナソニックＩｐマネジメント株式会社 内装材検査システム、及び、内装材検査方法
RU2739901C1 (ru) * 2019-07-23 2020-12-29 Публичное акционерное общество "Ракетно-космическая корпорация "Энергия" имени С.П. Королёва" Мобильное устройство визуализации контроля технологического процесса с применением технологии дополненной реальности
US11624713B2 (en) * 2019-12-04 2023-04-11 Ford Global Technologies, Llc Flexible inspection system
JP2021096185A (ja) * 2019-12-18 2021-06-24 日本信号株式会社 検査システム
JP7554623B2 (ja) 2020-09-29 2024-09-20 大和ハウス工業株式会社 支援システム
JP7509027B2 (ja) * 2020-12-22 2024-07-02 トヨタ自動車株式会社 車両検査方法および車両検査システム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000230806A (ja) * 1999-02-09 2000-08-22 Sony Corp 位置認識装置、位置認識方法及び仮想画像立体合成装置
JP2004184095A (ja) * 2002-11-29 2004-07-02 Mitsubishi Heavy Ind Ltd 検査支援装置
JP2007309729A (ja) * 2006-05-17 2007-11-29 Matsushita Electric Ind Co Ltd プレス加工品の外観検査方法とそれに用いる外観検査装置
JP2012007985A (ja) * 2010-06-24 2012-01-12 Nec Corp 確認業務支援システム、サーバ装置、ヘッドマウントディスプレイ装置、ウェアラブル端末、確認業務支援方法およびプログラム
CN104053984A (zh) * 2012-01-27 2014-09-17 欧姆龙株式会社 图像检查方法和图像检查装置
CN104246483A (zh) * 2012-02-17 2014-12-24 斯蒂芬·克雷布斯 用于印刷图像控制的设备和方法
CN103339661B (zh) * 2011-07-14 2015-12-09 株式会社Ntt都科摩 对象显示装置、对象显示方法和对象显示程序

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003338700A (ja) * 2002-05-21 2003-11-28 Hitachi Giken Co Ltd 工業製品のリペア支援装置
ES2237256B1 (es) * 2003-01-13 2006-02-01 Servicios Tecnologicos Para La Peritacion, S.L. Sistema de peritaje virtual.
JP4243500B2 (ja) 2003-03-12 2009-03-25 日本Ｃｍｏ株式会社 ディスプレイパネルの欠陥検査システム
JP4599980B2 (ja) 2003-10-15 2010-12-15 パナソニック株式会社 多層配線構造の不良解析方法および不良解析装置
US7502068B2 (en) * 2004-06-22 2009-03-10 International Business Machines Corporation Sensor for imaging inside equipment
JP2006337235A (ja) * 2005-06-03 2006-12-14 Toppan Printing Co Ltd 目視検査支援システムおよび目視検査支援装置
US8224020B2 (en) 2007-11-29 2012-07-17 Kabushiki Kaisha Toshiba Appearance inspection apparatus, appearance inspection system, and appearance inspection appearance
JP5537008B2 (ja) 2007-11-29 2014-07-02 株式会社東芝 外観検査装置
JP4888792B2 (ja) 2008-07-18 2012-02-29 Ｎｅｃアクセステクニカ株式会社 検査工程管理システム
JP4913913B2 (ja) 2010-04-28 2012-04-11 新日鉄ソリューションズ株式会社 情報処理システム、情報処理方法及びプログラム
US9977496B2 (en) * 2010-07-23 2018-05-22 Telepatheye Inc. Eye-wearable device user interface and augmented reality method
US9723251B2 (en) * 2013-04-23 2017-08-01 Jaacob I. SLOTKY Technique for image acquisition and management
JP2015001468A (ja) 2013-06-17 2015-01-05 株式会社松井製作所 成形品の検査装置
JP5824101B2 (ja) * 2014-04-14 2015-11-25 鹿島建設株式会社 電気機器の検査装置
KR102145542B1 (ko) * 2014-08-14 2020-08-18 삼성전자주식회사 촬영 장치, 복수의 촬영 장치를 이용하여 촬영하는 촬영 시스템 및 그 촬영 방법

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000230806A (ja) * 1999-02-09 2000-08-22 Sony Corp 位置認識装置、位置認識方法及び仮想画像立体合成装置
JP2004184095A (ja) * 2002-11-29 2004-07-02 Mitsubishi Heavy Ind Ltd 検査支援装置
JP2007309729A (ja) * 2006-05-17 2007-11-29 Matsushita Electric Ind Co Ltd プレス加工品の外観検査方法とそれに用いる外観検査装置
JP2012007985A (ja) * 2010-06-24 2012-01-12 Nec Corp 確認業務支援システム、サーバ装置、ヘッドマウントディスプレイ装置、ウェアラブル端末、確認業務支援方法およびプログラム
CN103339661B (zh) * 2011-07-14 2015-12-09 株式会社Ntt都科摩 对象显示装置、对象显示方法和对象显示程序
CN104053984A (zh) * 2012-01-27 2014-09-17 欧姆龙株式会社 图像检查方法和图像检查装置
CN104246483A (zh) * 2012-02-17 2014-12-24 斯蒂芬·克雷布斯 用于印刷图像控制的设备和方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110871441A (zh) * 2018-08-31 2020-03-10 发那科株式会社 感测系统、作业系统、增强现实图像的显示方法、以及存储有程序的存储介质
CN109584226A (zh) * 2018-11-26 2019-04-05 深圳龙图腾创新设计有限公司 一种质检系统以及方法
CN109584226B (zh) * 2018-11-26 2021-02-05 浙江瑞度新材料科技有限公司 一种质检系统以及方法
CN113282778A (zh) * 2020-02-20 2021-08-20 青岛海尔工业智能研究院有限公司 一种品质异常记录方法、装置、ar设备、系统及介质
WO2021164448A1 (zh) * 2020-02-20 2021-08-26 青岛海尔工业智能研究院有限公司 品质异常记录方法、装置、增强现实设备、系统及介质

Also Published As

Publication number Publication date
JP6165362B1 (ja) 2017-07-19
MY201893A (en) 2024-03-22
JP6279131B2 (ja) 2018-02-14
MY188596A (en) 2021-12-22
WO2017033561A1 (ja) 2017-03-02
CN107850550B (zh) 2020-11-03
JPWO2017033561A1 (ja) 2017-08-24
US20180238810A1 (en) 2018-08-23
US10539509B2 (en) 2020-01-21
JP2017182838A (ja) 2017-10-05

Similar Documents

Publication Publication Date Title
CN107850550A (zh) 显示系统、显示装置、显示方法以及程序
CA2573246C (en) System and method for detecting breast cancer using 3d imaging
US7346421B2 (en) Production of made to order clothing
US10424113B2 (en) Virtual mask alignment for fit analysis
US20190043385A1 (en) Information processing system, information processor, information processing method and program
JP6242768B2 (ja) 仮想試着装置、仮想試着方法、およびプログラム
EP3029511A1 (en) Multiple-reference based system and method for ordering eyeglasses
CN107004279A (zh) 自然用户界面相机校准
JP6338966B2 (ja) 仮想試着装置、仮想試着システム、仮想試着方法、およびプログラム
CN105989617A (zh) 虚拟试穿装置及虚拟试穿方法
KR20100084433A (ko) 패턴생성 장치 및 방법과 장갑 주문제작 장치 및 방법
KR20190052824A (ko) 증강현실을 이용한 가상 의류 피팅 미러 장치 시스템
KR101274098B1 (ko) 물리적 특징정보를 활용한 원본 인증 시스템 및 방법
JP2016038810A (ja) 仮想試着装置、仮想試着方法、およびプログラム
CN104750933A (zh) 一种基于互联网的眼镜试戴方法及系统
KR101643917B1 (ko) 실사 영상 기반의 스마트 피팅장치
CN107924585A (zh) 作业辅助装置、作业辅助方法以及程序
KR20140130767A (ko) 실사 영상 기반의 스마트 피팅장치를 이용한 소셜 서비스시스템
CN110456904A (zh) 一种无需标定的增强现实眼镜眼动交互方法及系统
JP2018106736A (ja) 仮想試着装置、仮想試着方法、およびプログラム
KR20190052831A (ko) 가상의류 피팅미러 장치를 이용한 의류 구매 시스템
KR20220100848A (ko) 증강현실 기반 가슴 정보 제공 방법 및 프로그램
EP1341427B1 (en) Production of made to order clothing
JP2018113060A (ja) 仮想試着装置、仮想試着システム、仮想試着方法、およびプログラム
KR101707025B1 (ko) 희생자 신원 확인 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Tokyo, Japan, Japan

Applicant after: Nippon Railway System Integration Co., Ltd.

Address before: Tokyo, Japan, Japan

Applicant before: Nippon Steel & Sumitomo Metal System Integration Co., Ltd.

GR01 Patent grant
GR01 Patent grant