KR20190076770A - 증강현실 기반 조립 가이드 시스템 - Google Patents

증강현실 기반 조립 가이드 시스템 Download PDF

Info

Publication number
KR20190076770A
KR20190076770A KR1020170178831A KR20170178831A KR20190076770A KR 20190076770 A KR20190076770 A KR 20190076770A KR 1020170178831 A KR1020170178831 A KR 1020170178831A KR 20170178831 A KR20170178831 A KR 20170178831A KR 20190076770 A KR20190076770 A KR 20190076770A
Authority
KR
South Korea
Prior art keywords
assembly guide
facility
augmented reality
smart glass
guide system
Prior art date
Application number
KR1020170178831A
Other languages
English (en)
Inventor
임홍석
이상호
이인배
Original Assignee
주식회사 이엠아이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 이엠아이티 filed Critical 주식회사 이엠아이티
Priority to KR1020170178831A priority Critical patent/KR20190076770A/ko
Publication of KR20190076770A publication Critical patent/KR20190076770A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/04—Manufacturing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06018—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
    • G06K19/06028—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Abstract

본 발명은 증강현실 기반 조립 가이드 시스템에 관한 것으로서, 보다 구체적으로는 증강현실 기반 조립 가이드 시스템으로서, 산업 공장 내 현장 설비 파트에 각각 부착되는 설비 인식 마커; 증강현실(AR) 어플리케이션이 탑재되어 실행되며, 상기 현장 설비 파트에 각각 부착되는 설비 인식 마커를 촬영하여 설비 인식 마커를 인식하고, 상기 현장 설비 파트의 실물 영상정보와 가상의 3D 파트 영상 정보를 정합 처리하여 상기 현장 설비 파트에 대한 조립 가이드 공정을 동적 모션으로 착용한 작업자에게 제공하는 스마트 글라스; 및 상기 스마트 글라스로부터 촬영된 설비 인식 마커에 해당하는 가상의 3D 파트 영상 정보의 데이터 조회 요청에 대응하여 검색 조회한 후, 해당하는 가상의 3D 파트 영상 정보를 상기 스마트 글라스로 제공하는 조립 가이드 관리 서버를 포함하는 것을 그 구성상의 특징으로 한다.
본 발명에서 제안하고 있는 증강현실 기반 조립 가이드 시스템에 따르면, 산업 공장 내 현장 설비 파트에 설비 인식 마커를 부착하고, 작업자가 착용하는 스마트 글라스의 카메라에 인식된 설비 파트의 실물 영상정보와 설비 파트의 조립 순서 가이드를 위한 가상의 3D 파트 영상 정보를 정합하여 설비 파트에 대한 조립 가이드 절차를 동적 모션 안내 기능으로 제공할 수 있도록 구성함으로써, 숙련자 또는 숙련되지 않은 작업자들도 자신의 공정 작업을 신속하고 정확하게 수행할 수 있게 되고, 그를 통한 설비 파트 공정 내 작업의 생산성 및 효율성이 더욱 향상되고, 원가 절감이 도모될 수 있도록 할 수 있다.
또한, 본 발명에 따르면, 기존의 산업 공장 내 각각의 현장 설비 파트의 작업자에게 스마트 글라스를 통한 설비 인식 마커의 인식을 통해 갱신된 작업지시서 정보를 제공할 수 있도록 함으로써, 산업 공장 내 각 현장 설비 파트의 전체 운영 관리에서 변경된 작업 공정의 신속한 전환 및 생산 관리가 가능하도록 할 수 있다.
뿐만 아니라, 본 발명은, 스마트 글라스를 통한 작업자들과 담당 관리자의 커뮤니케이션의 통신이 가능하도록 구성함으로써, 작업자들 및 담당 관리자와의 실시간 의사소통이 원활하게 이루어지고, 그에 따른 현재 생산 물류의 상황 정보 확인을 통한 제품의 공정별 생산현황 및 점검의 전체 상태관리가 가능하도록 할 수 있다.

Description

증강현실 기반 조립 가이드 시스템{A AUGMENTED REALITY BASED ASSEMBLY GUIDE SYSTEM}
본 발명은 증강현실 기반 조립 가이드 시스템에 관한 것으로서, 보다 구체적으로는 스마트 글라스의 카메라에 인식된 설비 파트의 실물 영상정보와 설비 파트의 조립 순서 가이드를 위한 가상의 3D 파트 영상 정보를 정합하여 설비 파트에 대한 조립 가이드 절차를 동적 모션 안내 기능으로 제공할 수 있도록 하는 증강현실 기반 조립 가이드 시스템에 관한 것이다.
일반적으로 산업 공장에는 특정 제품의 생산을 위한 각종 설비들이 배치되고, 각각의 설비에는 해당하는 담당 작업자가 배치되어 제품 생산에 필요한 공정에 따라 작업들을 순차로 수행하게 된다. 이때, 산업 공장 내 현장 설비 파트를 각각 담당하게 되는 작업자들은 자신이 맡은 조립 생산 공정의 숙련도에 따라 작업의 효율성 및 생산성이 크게 영향을 미치게 된다. 특히, 숙련되지 않은 작업자의 경우 자신이 담당하는 설비 파트에서의 공정 조립에 어려움을 겪을 수 있으며, 이는 전체 제품 생산의 생산성의 저하로 이어지게 되는 문제가 있었다. 또한, 숙련자의 경우라도 작업지시 내용이 변경된 경우 이를 바로 인식하지 못하는 문제가 있으며, 특히 변경되는 작업지시 내용이 매번 관리자를 통해 직접 지시됨에 따른 시간적 지연의 문제가 있었다.
특히, 작업자는 작업 공장의 소음 발생과 작업용 헬멧, 방진복 등 다양한 용품을 착용하고 있어, 작업자 간의 의사소통이 어려우며, 이는 생산성을 떨어뜨리는 주요 원인이 되고 있다. 이에 기존의 산업 공장에서는 각 현장 설비 파트에 디스플레이를 부착하고, 출력물을 상시로 출력하여 작업 공정의 상태를 관리하는 방식을 사용하였다. 그러나 산업 공장 내 각 현장 설비 파트의 복잡한 시스템으로 인해 유기적인 공정 관리에는 어려움이 따르는 문제가 있었다. 즉, 산업 공장에서의 점차 복잡한 시스템 증대로 인한 관리의 한계성과, 정보 공유를 위한 문서 작성에 많은 시간이 필요하게 되고, 실시간 공정 작업의 진척상황의 파악이 어려우며, 작업자들 및 관리자 간의 의사소통의 문제와, 추적 관리되지 않는 작업, 작업 공정의 변경 이력에 따른 관리의 한계성이 있었다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 산업 공장 내 현장 설비 파트에 설비 인식 마커를 부착하고, 작업자가 착용하는 스마트 글라스의 카메라에 인식된 설비 파트의 실물 영상정보와 설비 파트의 조립 순서 가이드를 위한 가상의 3D 파트 영상 정보를 정합하여 설비 파트에 대한 조립 가이드 절차를 동적 모션 안내 기능으로 제공할 수 있도록 구성함으로써, 숙련자 또는 숙련되지 않은 작업자들도 자신의 공정 작업을 신속하고 정확하게 수행할 수 있게 되고, 그를 통한 설비 파트 공정 내 작업의 생산성 및 효율성이 더욱 향상되고, 원가 절감이 도모될 수 있도록 하는, 증강현실 기반 조립 가이드 시스템을 제공하는 것을 그 목적으로 한다.
또한, 본 발명은, 기존의 산업 공장 내 각각의 현장 설비 파트의 작업자에게 스마트 글라스를 통한 설비 인식 마커의 인식을 통해 갱신된 작업지시서 정보를 제공할 수 있도록 함으로써, 산업 공장 내 각 현장 설비 파트의 전체 운영 관리에서 변경된 작업 공정의 신속한 전환 및 생산 관리가 가능하도록 하는, 증강현실 기반 조립 가이드 시스템을 제공하는 것을 또 다른 목적으로 한다.
뿐만 아니라, 본 발명은, 스마트 글라스를 통한 작업자들과 담당 관리자의 커뮤니케이션의 통신이 가능하도록 구성함으로써, 작업자들 및 담당 관리자와의 실시간 의사소통이 원활하게 이루어지고, 그에 따른 현재 생산 물류의 상황 정보 확인을 통한 제품의 공정별 생산현황 및 점검의 전체 상태관리가 가능하도록 하는, 증강현실 기반 조립 가이드 시스템을 제공하는 것을 또 다른 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 증강현실 기반 조립 가이드 시스템은,
증강현실 기반 조립 가이드 시스템으로서,
산업 공장 내 현장 설비 파트에 각각 부착되는 설비 인식 마커;
증강현실(AR) 어플리케이션이 탑재되어 실행되며, 상기 현장 설비 파트에 각각 부착되는 설비 인식 마커를 촬영하여 설비 인식 마커를 인식하고, 상기 현장 설비 파트의 실물 영상정보와 가상의 3D 파트 영상 정보를 정합 처리하여 상기 현장 설비 파트에 대한 조립 가이드 공정을 동적 모션으로 착용한 작업자에게 제공하는 스마트 글라스; 및
상기 스마트 글라스로부터 촬영된 설비 인식 마커에 해당하는 가상의 3D 파트 영상 정보의 데이터 조회 요청에 대응하여 검색 조회한 후, 해당하는 가상의 3D 파트 영상 정보를 상기 스마트 글라스로 제공하는 조립 가이드 관리 서버를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 설비 인식 마커는,
상기 스마트 글라스로 인식될 수 있는 QR 코드, 특정 AR 마크, 및 IoT 위치센서를 포함할 수 있다.
바람직하게는, 상기 스마트 글라스는,
산업 공장 내 현장 설비 파트의 담당 작업자가 착용하는 증강현실(AR) 기반의 안경으로 구성하되, 상기 조립 가이드 관리 서버와 무선으로 인터넷 접속되어 데이터 통신이 가능하고, 상기 설비 인식 마커를 인식하기 위한 카메라 기능과, 상기 현장 설비의 촬영되는 실물 영상을 전송하는 기능을 더 포함할 수 있다.
더욱 바람직하게는, 상기 스마트 글라스는,
상기 조립 가이드 관리 서버의 담당 관리자와 원격 의사소통이 가능한 오디오 교환의 통신 기능을 더 포함할 수 있다.
더욱 더 바람직하게는, 상기 스마트 글라스는,
상기 설비 인식 마커의 타겟 인식 후 타겟 영상의 특징점을 판독 비교하여 인식에 성공하면, 상기 설비 인식 마커가 부착된 현장 설비 파트의 타겟에 오버랩하여 디스플레이할 가상의 3D 파트 영상 정보를 증강현실 어플리케이션의 프로그램 내 등록된 데이터이면 바로 디스플레이 처리하고, 증강현실 어플리케이션의 프로그램 내 등록된 데이터가 아니면 상기 조립 가이드 관리 서버로 조회 요청하여 제공받을 수 있다.
바람직하게는, 상기 조립 가이드 관리 서버는,
상기 스마트 글라스와 무선으로 접속되어 데이터 통신이 가능한 클라우드 웹 서버; 및
상기 산업 공장 내 현장 설비 파트에 대응하는 가상의 3D 파트 영상 정보와, 업데이트된 작업지시서 정보를 저장 관리하는 데이터베이스를 포함하여 구성할 수 있다.
더욱 바람직하게는, 상기 가상의 3D 파트 영상 정보는,
상기 설비 인식 마커가 부착된 현장 설비 파트에서 사용할 현장 설비 및 치공구의 CAD 도면을 3D 모델링의 작업 처리를 수행하여 생성한 조립 가이드 콘텐츠이다.
더욱 더 바람직하게는, 상기 조립 가이드 관리 서버는,
상기 데이터베이스에 저장 관리되는 작업지시서 정보를 변경 이벤트 발생 시에 갱신하여 등록 관리하며, 상기 스마트 글라스를 착용한 작업자의 현재 상황 영상을 실시간으로 모니터링 관리하고, 작업자와 오디오 교환을 통한 원격 의사소통이 가능한 통신 기능을 더 수행할 수 있다.
본 발명에서 제안하고 있는 증강현실 기반 조립 가이드 시스템에 따르면, 산업 공장 내 현장 설비 파트에 설비 인식 마커를 부착하고, 작업자가 착용하는 스마트 글라스의 카메라에 인식된 설비 파트의 실물 영상정보와 설비 파트의 조립 순서 가이드를 위한 가상의 3D 파트 영상 정보를 정합하여 설비 파트에 대한 조립 가이드 절차를 동적 모션 안내 기능으로 제공할 수 있도록 구성함으로써, 숙련자 또는 숙련되지 않은 작업자들도 자신의 공정 작업을 신속하고 정확하게 수행할 수 있게 되고, 그를 통한 설비 파트 공정 내 작업의 생산성 및 효율성이 더욱 향상되고, 원가 절감이 도모될 수 있도록 할 수 있다.
또한, 본 발명에 따르면, 기존의 산업 공장 내 각각의 현장 설비 파트의 작업자에게 스마트 글라스를 통한 설비 인식 마커의 인식을 통해 갱신된 작업지시서 정보를 제공할 수 있도록 함으로써, 산업 공장 내 각 현장 설비 파트의 전체 운영 관리에서 변경된 작업 공정의 신속한 전환 및 생산 관리가 가능하도록 할 수 있다.
뿐만 아니라, 본 발명은, 스마트 글라스를 통한 작업자들과 담당 관리자의 커뮤니케이션의 통신이 가능하도록 구성함으로써, 작업자들 및 담당 관리자와의 실시간 의사소통이 원활하게 이루어지고, 그에 따른 현재 생산 물류의 상황 정보 확인을 통한 제품의 공정별 생산현황 및 점검의 전체 상태관리가 가능하도록 할 수 있다.
도 1은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 구성을 기능블록으로 도시한 도면.
도 2는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 조립 가이드 관리 서버의 구성을 도시한 도면.
도 3은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 구성도를 도시한 도면.
도 4는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 타겟 영상의 특징점 판독을 설명하기 위해 예시한 도면.
도 5는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 증강현실 설비 판독의 일례를 예시한 도면.
도 6은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 현장 데모 구현 일례를 도시한 도면.
이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 구성을 기능블록으로 도시한 도면이고, 도 2는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 조립 가이드 관리 서버의 구성을 도시한 도면이며, 도 3은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 구성도를 도시한 도면이고, 도 4는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 타겟 영상의 특징점 판독을 설명하기 위해 예시한 도면이며, 도 5는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 증강현실 설비 판독의 일례를 예시한 도면이고, 도 6은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 현장 데모 구현 일례를 도시한 도면이다. 도 1 내지 도 5에 각각 도시된 바와 같이, 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템(100)은, 설비 인식 마커(110), 스마트 글라스(120), 및 조립 가이드 관리 서버(130)를 포함하여 구성될 수 있다.
설비 인식 마커(110)는, 산업 공장 내 현장 설비 파트에 각각 부착되는 구성이다. 이러한 설비 인식 마커(110)는 후술하게 될 스마트 글라스(120)를 착용하는 작업자가 증강현실 기반으로 조립 공정의 가이드를 제공받거나, 또는 갱신된 작업지시서 정보를 제공받기 위한 현장 설비 파트의 인식을 위한 마크의 구성이다. 여기서, 설비 인식 마커(110)는 스마트 글라스(120)로 인식될 수 있는 QR 코드, 특정 AR 마크, 및 IoT 위치센서를 포함하여 구성될 수 있다. 또한, 설비 인식 마커(110)는 타게 이미지로 QR 코드, 특정 AR 마크, IoT 위치 센서 이외에도 특정 문양이나 문자를 포함하는 입체 도형(원기둥 or 육면체) 등 다양하게 구성될 수도 있다.
스마트 글라스(120)는, 증강현실(AR) 어플리케이션(121)이 탑재되어 실행되며, 현장 설비 파트에 각각 부착되는 설비 인식 마커(110)를 촬영하여 설비 인식 마커(110)를 인식하고, 현장 설비 파트의 실물 영상정보와 가상의 3D 파트 영상 정보를 정합 처리하여 현장 설비 파트에 대한 조립 가이드 공정을 동적 모션으로 착용한 작업자에게 제공하기 위한 구성이다. 이러한 스마트 글라스(120)는 산업 공장 내 현장 설비 파트의 담당 작업자가 착용하는 증강현실(AR) 기반의 안경으로 구성하되, 조립 가이드 관리 서버(130)와 무선으로 인터넷 접속되어 데이터 통신이 가능하고, 설비 인식 마커(110)를 인식하기 위한 카메라 기능과, 현장 설비의 촬영되는 실물 영상을 전송하는 기능을 더 포함할 수 있다.
또한, 스마트 글라스(120)는 조립 가이드 관리 서버(130)의 담당 관리자와 원격 의사소통이 가능한 오디오 교환의 통신 기능을 더 포함할 수 있다. 여기서, 스마트 글라스(120)는 설비 인식 마커(110)가 QR 코드, 특정 AR 마크인 경우에는 카메라 기능을 통해 촬영하여 설비 인식 마커(110)를 인식할 수 있으며, 설비 인식 마커(110)가 IoT 위치 센서인 경우에는 저전력 블루투스(BLE)를 통해 설비 인식 마커(110)를 인식할 수도 있다.
또한, 스마트 글라스(120)는 설비 인식 마커(110)의 타겟 인식 후 타겟 영상의 특징점을 판독 비교하여 인식에 성공하면, 설비 인식 마커(110)가 부착된 현장 설비 파트의 타겟에 오버랩하여 디스플레이할 가상의 3D 파트 영상 정보를 증강현실 어플리케이션(121)의 프로그램 내 등록된 데이터이면 바로 디스플레이 처리하고, 증강현실 어플리케이션(121)의 프로그램 내 등록된 데이터가 아니면 조립 가이드 관리 서버(130)로 조회 요청하여 제공받을 수 있다. 여기서, 설비 인식 마커(110)의 타겟 영상의 특징점 판독은 도 4에 도시된 바와 같이, 설비 인식 카머(110)의 타겟으로 등록된 이미지와 스마트 글라스(120)의 카메라로부터 입력된 이미지를 영상 처리를 통해 특징점을 비교하여 일치 여부를 확인할 수 있다. 이때, 조립 가이드 관리 서버(130)의 데이터베이스(132)에 미리 설정된 타겟 이미지의 특징점과 인식 가능 여부를 확인할 수도 있다. 즉, 특징점이 많을수록 타겟 인식율은 더욱 높아지게 된다.
조립 가이드 관리 서버(130)는, 스마트 글라스(120)로부터 촬영된 설비 인식 마커(110)에 해당하는 가상의 3D 파트 영상 정보의 데이터 조회 요청에 대응하여 검색 조회한 후, 해당하는 가상의 3D 파트 영상 정보를 상기 스마트 글라스(120)로 제공하는 서버의 구성이다. 이러한 조립 가이드 관리 서버(130)는 스마트 글라스(120)와 무선으로 접속되어 데이터 통신이 가능한 클라우드 웹 서버(131)와, 산업 공장 내 현장 설비 파트에 대응하는 가상의 3D 파트 영상 정보와, 업데이트된 작업지시서 정보를 저장 관리하는 데이터베이스(132)를 포함하여 구성할 수 있다. 여기서, 가상의 3D 파트 영상 정보는 설비 인식 마커(110)가 부착된 현장 설비 파트에서 사용할 현장 설비 및 치공구의 CAD 도면을 3D 모델링의 작업 처리를 수행하여 생성한 조립 가이드 콘텐츠로 구성될 수 있다.
또한, 조립 가이드 관리 서버(130)는 데이터베이스(132)에 저장 관리되는 작업지시서 정보를 변경 이벤트 발생 시에 갱신하여 등록 관리하며, 스마트 글라스(120)를 착용한 작업자의 현재 상황 영상을 실시간으로 모니터링 관리하고, 작업자와 오디오 교환을 통한 원격 의사소통이 가능한 통신 기능을 더 수행할 수 있다.
도 5는 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 증강현실 설비 판독의 일례를 나타내고 있다. 도 5는 변경된 작업지시 내용이 변경된 경우, 조립 가이드 관리 서버의 관리 담당자가 변경된 작업지시서 정보를 갱신하여 데이터베이스(132)에 업-로드하여 저장하고, 스마트 글라스(120)를 착용한 작업자는 현장 설비 파트에서의 매 작업 전 카메라로 설비 인식 마커(110)를 인식하여 갱신된 작업지시서 정보를 확인할 수 있게 된다.
도 6은 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템의 현장 데모 구현 일례를 도시한 도면이다. 도 6은 본 발명에 따른 증강현실 기반 조립 가이드 시스템을 적용한 특정 기업의 와이어 생산 공장의 1개 설비를 대상으로 공정 조립 가이드 및 생산 현황 모니터링 표시 기능에 대해 현장 데모를 수행하는 일례를 나타내고 있다. 즉, 와이어 생산의 최종 공정인 신선 설비의 표준작업 순서 또는 치공구인 다이스의 조립 순서 등을 대상으로 하는 구현 일례를 나타내고 있다.
상술한 바와 같이, 본 발명의 일실시예에 따른 증강현실 기반 조립 가이드 시스템은, 산업 공장 내 현장 설비 파트에 설비 인식 마커를 부착하고, 작업자가 착용하는 스마트 글라스의 카메라에 인식된 설비 파트의 실물 영상정보와 설비 파트의 조립 순서 가이드를 위한 가상의 3D 파트 영상 정보를 정합하여 설비 파트에 대한 조립 가이드 절차를 동적 모션 안내 기능으로 제공할 수 있도록 구성함으로써, 숙련자 또는 숙련되지 않은 작업자들도 자신의 공정 작업을 신속하고 정확하게 수행할 수 있게 되고, 그를 통한 설비 파트 공정 내 작업의 생산성 및 효율성이 더욱 향상되고, 원가 절감이 도모될 수 있도록 할 수 있으며, 또한, 기존의 산업 공장 내 각각의 현장 설비 파트의 작업자에게 스마트 글라스를 통한 설비 인식 마커의 인식을 통해 갱신된 작업지시서 정보를 제공할 수 있도록 함으로써, 산업 공장 내 각 현장 설비 파트의 전체 운영 관리에서 변경된 작업 공정의 신속한 전환 및 생산 관리가 가능하도록 할 수 있게 된다. 특히, 스마트 글라스를 통한 작업자들과 담당 관리자의 커뮤니케이션의 통신이 가능하도록 구성함으로써, 작업자들 및 담당 관리자와의 실시간 의사소통이 원활하게 이루어지고, 그에 따른 현재 생산 물류의 상황 정보 확인을 통한 제품의 공정별 생산현황 및 점검의 전체 상태관리가 가능하도록 할 수 있게 된다. 이러한 본 발명의 증강현실 기반 조립 가이드 시스템은 점차 고도화되고 자동화로 전환되고 있는 스마트 공장 시스템의 표준화 모델로 제시될 수 있다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
100: 본 발명의 일실시예에 따른 조립 가이드 시스템
110: 설비 인식 마커
120: 스마트 글라스
121: 증강현실(AR) 어플리케이션
130: 조립 가이드 관리 서버
131: 웹 서버
132: 데이터베이스(DB)

Claims (8)

  1. 증강현실 기반 조립 가이드 시스템(100)으로서,
    산업 공장 내 현장 설비 파트에 각각 부착되는 설비 인식 마커(110);
    증강현실(AR) 어플리케이션(121)이 탑재되어 실행되며, 상기 현장 설비 파트에 각각 부착되는 설비 인식 마커(110)를 촬영하여 설비 인식 마커(110)를 인식하고, 상기 현장 설비 파트의 실물 영상정보와 가상의 3D 파트 영상 정보를 정합 처리하여 상기 현장 설비 파트에 대한 조립 가이드 공정을 동적 모션으로 착용한 작업자에게 제공하는 스마트 글라스(120); 및
    상기 스마트 글라스(120)로부터 촬영된 설비 인식 마커(110)에 해당하는 가상의 3D 파트 영상 정보의 데이터 조회 요청에 대응하여 검색 조회한 후, 해당하는 가상의 3D 파트 영상 정보를 상기 스마트 글라스(120)로 제공하는 조립 가이드 관리 서버(130)를 포함하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  2. 제1항에 있어서, 상기 설비 인식 마커(110)는,
    상기 스마트 글라스(120)로 인식될 수 있는 QR 코드, 특정 AR 마크, 및 IoT 위치센서를 포함하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  3. 제1항에 있어서, 상기 스마트 글라스(120)는,
    산업 공장 내 현장 설비 파트의 담당 작업자가 착용하는 증강현실(AR) 기반의 안경으로 구성하되, 상기 조립 가이드 관리 서버(130)와 무선으로 인터넷 접속되어 데이터 통신이 가능하고, 상기 설비 인식 마커(110)를 인식하기 위한 카메라 기능과, 상기 현장 설비의 촬영되는 실물 영상을 전송하는 기능을 더 포함하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  4. 제3항에 있어서, 상기 스마트 글라스(120)는,
    상기 조립 가이드 관리 서버(130)의 담당 관리자와 원격 의사소통이 가능한 오디오 교환의 통신 기능을 더 포함하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  5. 제4항에 있어서, 상기 스마트 글라스(120)는,
    상기 설비 인식 마커(110)의 타겟 인식 후 타겟 영상의 특징점을 판독 비교하여 인식에 성공하면, 상기 설비 인식 마커(110)가 부착된 현장 설비 파트의 타겟에 오버랩하여 디스플레이할 가상의 3D 파트 영상 정보를 증강현실 어플리케이션(121)의 프로그램 내 등록된 데이터이면 바로 디스플레이 처리하고, 증강현실 어플리케이션(121)의 프로그램 내 등록된 데이터가 아니면 상기 조립 가이드 관리 서버(130)로 조회 요청하여 제공받는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서, 상기 조립 가이드 관리 서버(130)는,
    상기 스마트 글라스(120)와 무선으로 접속되어 데이터 통신이 가능한 클라우드 웹 서버(131); 및
    상기 산업 공장 내 현장 설비 파트에 대응하는 가상의 3D 파트 영상 정보와, 업데이트된 작업지시서 정보를 저장 관리하는 데이터베이스(132)를 포함하여 구성하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  7. 제6항에 있어서, 상기 가상의 3D 파트 영상 정보는,
    상기 설비 인식 마커(110)가 부착된 현장 설비 파트에서 사용할 현장 설비 및 치공구의 CAD 도면을 3D 모델링의 작업 처리를 수행하여 생성한 조립 가이드 콘텐츠인 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
  8. 제7항에 있어서, 상기 조립 가이드 관리 서버(130)는,
    상기 데이터베이스(132)에 저장 관리되는 작업지시서 정보를 변경 이벤트 발생 시에 갱신하여 등록 관리하며, 상기 스마트 글라스(120)를 착용한 작업자의 현재 상황 영상을 실시간으로 모니터링 관리하고, 작업자와 오디오 교환을 통한 원격 의사소통이 가능한 통신 기능을 더 수행하는 것을 특징으로 하는, 증강현실 기반 조립 가이드 시스템.
KR1020170178831A 2017-12-22 2017-12-22 증강현실 기반 조립 가이드 시스템 KR20190076770A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170178831A KR20190076770A (ko) 2017-12-22 2017-12-22 증강현실 기반 조립 가이드 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170178831A KR20190076770A (ko) 2017-12-22 2017-12-22 증강현실 기반 조립 가이드 시스템

Publications (1)

Publication Number Publication Date
KR20190076770A true KR20190076770A (ko) 2019-07-02

Family

ID=67258627

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170178831A KR20190076770A (ko) 2017-12-22 2017-12-22 증강현실 기반 조립 가이드 시스템

Country Status (1)

Country Link
KR (1) KR20190076770A (ko)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110580024A (zh) * 2019-09-17 2019-12-17 Oppo广东移动通信有限公司 基于增强现实的车间辅助作业实现方法、系统及存储介质
CN110825233A (zh) * 2019-11-11 2020-02-21 电子科技大学 一种基于ar引导的人机交互系统
CN111583419A (zh) * 2020-05-25 2020-08-25 重庆忽米网络科技有限公司 一种基于5g的现实增强辅助装配方法及系统
CN112256955A (zh) * 2020-09-17 2021-01-22 山东师范大学 智能推荐式眼镜及其使用方法
KR20210014873A (ko) * 2019-07-31 2021-02-10 주식회사 펀웨이브 버섯재배를 위한 스마트팜용 스마트 글라스
KR102245760B1 (ko) 2019-12-31 2021-04-29 주식회사 버넥트 테이블 탑 디바이스 및 이를 포함하는 테이블 탑 시스템
KR20210057432A (ko) * 2019-11-12 2021-05-21 한국전자기술연구원 헤드 마운트 디스플레이 및 제어 방법
KR20210065471A (ko) * 2019-11-27 2021-06-04 주식회사 창림 블록공정 관리용 증강현실 장치
KR20210075484A (ko) * 2019-12-13 2021-06-23 주식회사 칸정보기술 시설물 점검 방법 및 시설물 점검 방법을 수행하는 사용자 단말
KR20210085789A (ko) * 2019-12-31 2021-07-08 주식회사 버넥트 디지털 트윈을 이용한 증강현실 기반 현장 모니터링 시스템 및 방법
KR20210121796A (ko) * 2020-03-31 2021-10-08 엑스퍼트아이엔씨 주식회사 스마트글라스를 활용한 클라우드 기반형 원격 서비스 및 유지보수 지원 시스템
CN113673894A (zh) * 2021-08-27 2021-11-19 东华大学 一种基于数字孪生的多人协作ar装配方法和系统
KR102337908B1 (ko) * 2021-05-20 2021-12-09 주식회사 아진엑스텍 작업 보조 방법 및 장치
KR102358875B1 (ko) * 2021-07-14 2022-02-08 (주)투락 복수 마커를 통한 효율적인 ar 컨텐츠 제공 방법 및 장치
CN114091691A (zh) * 2020-07-31 2022-02-25 南京南瑞继保工程技术有限公司 一种基于增强现实技术的智能变电站运检系统
KR102397124B1 (ko) * 2021-08-13 2022-05-12 심태보 지오데식 돔의 원리를 이용한 인공 구조물과 이의 조립 가이드 시스템 및 방법
KR20220099284A (ko) * 2021-01-06 2022-07-13 주식회사 소프트그라운드 산업용 증강현실 콘텐츠 저작 시스템 및 이를 포함한 작업 가이드 플랫폼
KR20230045956A (ko) 2021-09-29 2023-04-05 코끼리 협동조합 스마트 공예 학습 시스템
CN116301390A (zh) * 2023-05-24 2023-06-23 中科航迈数控软件(深圳)有限公司 机床装配指导方法、装置、ar眼镜及存储介质

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210014873A (ko) * 2019-07-31 2021-02-10 주식회사 펀웨이브 버섯재배를 위한 스마트팜용 스마트 글라스
CN110580024A (zh) * 2019-09-17 2019-12-17 Oppo广东移动通信有限公司 基于增强现实的车间辅助作业实现方法、系统及存储介质
CN110825233A (zh) * 2019-11-11 2020-02-21 电子科技大学 一种基于ar引导的人机交互系统
KR20210057432A (ko) * 2019-11-12 2021-05-21 한국전자기술연구원 헤드 마운트 디스플레이 및 제어 방법
KR20210065471A (ko) * 2019-11-27 2021-06-04 주식회사 창림 블록공정 관리용 증강현실 장치
KR20210075484A (ko) * 2019-12-13 2021-06-23 주식회사 칸정보기술 시설물 점검 방법 및 시설물 점검 방법을 수행하는 사용자 단말
KR20210085789A (ko) * 2019-12-31 2021-07-08 주식회사 버넥트 디지털 트윈을 이용한 증강현실 기반 현장 모니터링 시스템 및 방법
KR102245760B1 (ko) 2019-12-31 2021-04-29 주식회사 버넥트 테이블 탑 디바이스 및 이를 포함하는 테이블 탑 시스템
KR20210121796A (ko) * 2020-03-31 2021-10-08 엑스퍼트아이엔씨 주식회사 스마트글라스를 활용한 클라우드 기반형 원격 서비스 및 유지보수 지원 시스템
CN111583419A (zh) * 2020-05-25 2020-08-25 重庆忽米网络科技有限公司 一种基于5g的现实增强辅助装配方法及系统
CN114091691A (zh) * 2020-07-31 2022-02-25 南京南瑞继保工程技术有限公司 一种基于增强现实技术的智能变电站运检系统
CN112256955B (zh) * 2020-09-17 2022-12-16 山东师范大学 智能推荐式眼镜及其使用方法
CN112256955A (zh) * 2020-09-17 2021-01-22 山东师范大学 智能推荐式眼镜及其使用方法
KR20220099284A (ko) * 2021-01-06 2022-07-13 주식회사 소프트그라운드 산업용 증강현실 콘텐츠 저작 시스템 및 이를 포함한 작업 가이드 플랫폼
KR102337908B1 (ko) * 2021-05-20 2021-12-09 주식회사 아진엑스텍 작업 보조 방법 및 장치
KR102358875B1 (ko) * 2021-07-14 2022-02-08 (주)투락 복수 마커를 통한 효율적인 ar 컨텐츠 제공 방법 및 장치
KR102397124B1 (ko) * 2021-08-13 2022-05-12 심태보 지오데식 돔의 원리를 이용한 인공 구조물과 이의 조립 가이드 시스템 및 방법
CN113673894A (zh) * 2021-08-27 2021-11-19 东华大学 一种基于数字孪生的多人协作ar装配方法和系统
CN113673894B (zh) * 2021-08-27 2024-02-02 东华大学 一种基于数字孪生的多人协作ar装配方法和系统
KR20230045956A (ko) 2021-09-29 2023-04-05 코끼리 협동조합 스마트 공예 학습 시스템
CN116301390A (zh) * 2023-05-24 2023-06-23 中科航迈数控软件(深圳)有限公司 机床装配指导方法、装置、ar眼镜及存储介质
CN116301390B (zh) * 2023-05-24 2023-09-15 中科航迈数控软件(深圳)有限公司 机床装配指导方法、装置、ar眼镜及存储介质

Similar Documents

Publication Publication Date Title
KR20190076770A (ko) 증강현실 기반 조립 가이드 시스템
US20210201593A1 (en) Systems and methods for presenting an augmented reality
US10838211B2 (en) Maintenance support device and maintenance support system for factory equipment
CN109978409B (zh) 一种多工程企业级智慧工地区块链管理方法
US10054934B2 (en) Systems and methods for virtually assessing an industrial automation system
CN110580024A (zh) 基于增强现实的车间辅助作业实现方法、系统及存储介质
JP2003514294A (ja) 対象に指向してマーキングし情報を選択された技術的構成要素に対応付けるシステム及び方法
KR102418994B1 (ko) 증강현실 기반 작업 공정 모니터링 및 작업 숙련도 평가방법
Aschenbrenner et al. Artab-using virtual and augmented reality methods for an improved situation awareness for telemaintenance
KR102374570B1 (ko) 설비 관리 시스템
KR102122974B1 (ko) 발전소 플랜트 제어방법 및 단말기
KR20200109271A (ko) 혼합 현실 기반 부품 정비를 지원하기 위한 시스템 및 그 방법
CN108776444B (zh) 适用于cps自动化控制系统的增强现实人机交互系统
CN111770450B (zh) 一种车间生产监控服务器、移动终端及应用
CN115049306A (zh) 一种全过程工程咨询管理系统
CN110751734A (zh) 一种适用于工作现场的混合现实助手系统
CN107644457B (zh) 一种应用于工业现场的监控方法
KR102331172B1 (ko) 스마트글라스를 활용한 클라우드 기반형 원격 서비스 및 유지보수 지원 시스템
KR20220010356A (ko) 증강현실 콘텐츠 기반 작업관리 시스템 및 방법
Liu et al. Research on real-time monitoring technology of equipment based on augmented reality
CN107391710B (zh) 机器操作监督系统及服务器
CN115937790A (zh) 一种安全生产监督管理系统
KR20210062156A (ko) 현장설비 정비 시스템
CN111660294B (zh) 一种液压重载机械臂增强现实操控系统
RU157928U1 (ru) Устройство для контроля и управления производственным процессом

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application