KR102462229B1 - 증강현실 기반 현장관리방법 및 서버 - Google Patents
증강현실 기반 현장관리방법 및 서버 Download PDFInfo
- Publication number
- KR102462229B1 KR102462229B1 KR1020220001451A KR20220001451A KR102462229B1 KR 102462229 B1 KR102462229 B1 KR 102462229B1 KR 1020220001451 A KR1020220001451 A KR 1020220001451A KR 20220001451 A KR20220001451 A KR 20220001451A KR 102462229 B1 KR102462229 B1 KR 102462229B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- punch
- augmented reality
- location
- virtual
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 72
- 238000010276 construction Methods 0.000 title claims abstract description 48
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000012360 testing method Methods 0.000 claims description 26
- 238000007726 management method Methods 0.000 claims description 24
- 238000009659 non-destructive testing Methods 0.000 claims description 18
- 238000003466 welding Methods 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 10
- 238000003908 quality control method Methods 0.000 claims description 9
- 238000012790 confirmation Methods 0.000 claims description 8
- 230000002265 prevention Effects 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 5
- 238000012800 visualization Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 2
- 230000003449 preventive effect Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000010438 heat treatment Methods 0.000 description 5
- 230000003416 augmentation Effects 0.000 description 4
- 238000007689 inspection Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000001066 destructive effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 235000012206 bottled water Nutrition 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003651 drinking water Substances 0.000 description 1
- ZZUFCTLCJUWOSV-UHFFFAOYSA-N furosemide Chemical compound C1=C(Cl)C(S(=O)(=O)N)=CC(C(O)=O)=C1NCC1=CC=CO1 ZZUFCTLCJUWOSV-UHFFFAOYSA-N 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 229910052757 nitrogen Inorganic materials 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 238000012552 review Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/08—Construction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q90/00—Systems or methods specially adapted for administrative, commercial, financial, managerial or supervisory purposes, not involving significant data processing
- G06Q90/20—Destination assistance within a business structure or complex
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
Abstract
본 발명의 바람직한 일 실시예로서, 증강현실 기반 현장관리방법은 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하여 오버레이하는 단계; 및 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 디스플레이하는 단계;를 포함한다.
Description
본 발명은 증강현실 기반 현장 관리를 수행하는 방법 및 시스템에 관한 것이다.
기존에는 공사 현장에서 문제가 발생하면 문제가 발생하였다고 알린 인력 외에는 문제가 발생한 위치를 찾는 것이 어려웠다. 또한 공사의 규모가 커질수록 문제가 발생한 다양한 지역을 모두 확인하고, 문제들을 모두 취합하여 입력하는 과정에 많은 시간과 오류가 발생하였다.
또한 설계 공종, 조달 공종, 공사 공종 등을 포함하는 공사 프로젝트는 수 년에 걸처 수행되고 빈번하게 작업 일정이 변경되는 특성이 있다. 이러한 프로젝트를 수행하고자 할 때 과거의 데이터를 이용하더라도 프로젝트 수행 초기에 주의하여야 할 예방지침항목들을 담당자들에게 일괄 제공함으로써, 담당자들은 예방지침항목을 적용할 시점을 놓치게 되는 문제가 있다.
본 발명의 바람직한 일 실시예에서는 공사 현장에서 문제를 발견한 사용자가 자신의 단말기를 이용하여 문제가 발생한 위치를 지정하면, 주변 사용자들도 자신의 단말기에서 가상현장 또는 지도를 통해 문제가 발생한 위치들을 실시간으로 확인할 수 있다. 또한, 문제가 발생한 위치로 인도를 받을 수 있다.
본 발명의 바람직한 일 실시예에서는 새로운 프로젝트를 시작하기 이전에 공사 현장에서 발생할 수 있는 문제점들을 가상현장에 미리 표시하여 알려줌으로써, 해당 위치에서 관련 작업을 하는 작업자들에게 사고를 미연에 방지하고자 한다.
본 발명의 바람직한 일 실시예로서, 공사 현장에서 실물과 증강된 데이터를 실시간으로 비교하여 불필요한 업무를 최소화하고자 한다.
본 발명의 바람직한 일 실시예로서, 증강현실 기반 현장관리방법은 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하여 오버레이하는 단계; 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 디스플레이하는 단계;및 상기 위치정보를 이용하여 경험자산데이터베이스에서 상기 촬영영상 내의 각 설비를 구성하는 아이템들 중 반복적으로 문제가 발생했던 아이템의 유무를 확인하고, 반복적으로 문제가 발생했던 아이템이 있는 경우 해당 아이템에서 발생하는 주요 품질문제에 대한 예방지침항목이 있음을 알려주는 아이콘을 상기 가상현장에 더 표시하는 단계;를 포함하고, 상기 아이콘을 활성화하면 상기 가상현장 화면에 상기 예방지침항목이 표시되어 공사가 진행되기 전에 확인할 수 있는 것을 특징으로 한다.
본 발명의 바람직한 일 실시예로서, 상기 가상현장은 스풀정보, 웰딩정보, NDE(비파괴시험) 및 PWHT(후열처리)정보 중 적어도 하나를 시각화하여 제공하는 제 1 모드가 지원되는 것을 특징으로 한다.
본 발명의 바람직한 일 실시예로서, 상기 가상현장은 펀치관리정보, 압력테스트 정보, 루프테스트 정보 중 적어도 하나를 시각화하여 제공하는 제 2 모드가 지원되는 것을 특징으로 한다.
본 발명의 바람직한 일 실시예로서, 상기 방법은 상기 플랜트 공사현장 내의 적어도 한 명의 사용자가 품질이 부적법한 아이템에 대해 펀치(Punch)를 발행하는 단계; 및 발행된 적어도 하나의 펀치 각각은 상기 3D모델도면 상의 좌표정보가 부여되어 상기 가상현장에 표시되는 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 증강현실 기반 현장관리방법은 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하여 오버레이하는 단계; 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 디스플레이하는 단계;및 상기 플랜트 공사현장 내의 적어도 한 명의 사용자가 품질이 부적법한 아이템에 대해 펀치(Punch)를 발행하고, 발행된 적어도 하나의 펀치의 위치정보를 이용하여 상기 가상현장에 표시되는 단계;를 포함하고, 상기 촬영영상은 실시간으로 촬영되는 영상을 포함하고, 사용자가 네비게이션 기능을 이용하는 경우 사용자와 사용자가 선택한 펀치 간의 거리가 기설정된 범위 이내인 경우 상기 사용자 단말기의 디스플레이에 상기 실시간으로 촬영되는 영상을 기초로 생성된 가상현장에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되며, 상기 사용자와 상기 사용자가 선택한 펀치 간의 거리가 기설정된 범위를 초과하는 경우 지도에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 증강현실제공서버는 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하며, 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 생성하는 매핑부; 및 상기 위치정보를 이용하여 경험자산데이터베이스에서 상기 촬영영상 내의 각 설비를 구성하는 아이템들 중 반복적으로 문제가 발생했던 아이템의 유무를 확인하고, 반복적으로 문제가 발생했던 아이템이 있는 경우 해당 아이템에서 발생하는 주요 품질문제에 대한 예방지침항목이 있음을 알려주는 아이콘을 상기 가상현장에 더 표시하는 품질관리부;를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 증강현실제공서버는 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하며, 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 생성하는 매핑부; 상기 플랜트 공사현장 내의 적어도 한 명의 사용자가 품질이 부적법한 아이템에 대해 펀치(Punch)를 발행하고, 발행된 적어도 하나의 펀치의 위치정보를 이용하여 상기 가상현장에 표시하는 증강현실제공부; 사용자와 사용자가 선택한 펀치 간의 거리가 기설정된 범위 이내인 경우 상기 사용자 단말기의 디스플레이에 상기 실시간으로 촬영되는 영상을 기초로 생성된 가상현장에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되고, 상기 사용자와 상기 사용자가 선택한 펀치 간의 거리가 기설정된 범위를 초과하는 경우 지도에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되는 네비게이션부;를 포함하는 것을 특징으로 한다.
본 발명의 바람직한 일 실시예로서, 증강현실 기반 현장관리 방법 및 시스템은 효율적으로 현장을 관리할 수 있으며, 펀치의 위치정보, 테스트 패키지 위치정보 등을 제공하여 위치파악에 소요되는 시간을 줄일 수 있는 효과가 있다. 또한 공사를 시작하기 이전에 문제가 발생할 수 있는 공정 내지 아이템을 사전에 파악하고 예방조치사항을 미리 파악할 수 있는 효과가 있다.
도 1 은 본 발명의 바람직한 일 실시예로서, 증강현실 기반 현장관리시스템의 구성도를 도시한다.
도 2 내지 4 는 본 발명의 바람직한 일 실시예로서, 네비게이션부의 기능을 도시한다.
도 5 내지 6은 본 발명의 바람직한 일 실시예로서, 가상현장에 반복발생될 수 있는 아이템들에 대한 예방조치항목을 표시하는 예를 도시한다.
도 7 내지 8은 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 지원하는 제 1 모드의 일 예를 도시한다.
도 9 는 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 지원하는 제 2 모드의 일 예를 도시한다.
도 10 및 11은 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 사용자 위치를 기반으로 증강을 제공하는 일 예를 도시한다.
도 2 내지 4 는 본 발명의 바람직한 일 실시예로서, 네비게이션부의 기능을 도시한다.
도 5 내지 6은 본 발명의 바람직한 일 실시예로서, 가상현장에 반복발생될 수 있는 아이템들에 대한 예방조치항목을 표시하는 예를 도시한다.
도 7 내지 8은 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 지원하는 제 1 모드의 일 예를 도시한다.
도 9 는 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 지원하는 제 2 모드의 일 예를 도시한다.
도 10 및 11은 본 발명의 바람직한 일 실시예로서, 증강현실제공부에서 사용자 위치를 기반으로 증강을 제공하는 일 예를 도시한다.
이하에서 도면을 참고하여 설명한다.
도 1 은 본 발명의 바람직한 일 실시예로서, 증강현실 기반 현장관리시스템의 구성도를 도시한다.
증강현실 기반 현장관리시스템(100)은 증강현실제공서버(110), 경험자산데이터베이스(130), 3D모델링데이터베이스(132), 적어도 하나의 단말기(140)가 통신망을 통해 상호 통신가능하도록 연결되어 구축된다. 통신망은 인터넷, 인트라넷, 이동통신망 등 다양한 유선 통신망과 무선 통신망을 포함한다. 보안 규정에 따라 유선 통신망의 사용은 선택적으로 설정할 수 있다.
본 발명의 바람직한 일 실시예로서, 증강현실은 3D모델링데이터베이스(132)로부터 수신한 3D모델링 데이터로 증강한 화면을 지칭한다. 그리고 가상현장은 실제 공사현장을 촬영한 촬영영상 위에 3D모델링 데이터가 오버레이되어 있는 화면을 지칭한다. 3D모델링 데이터는 3D모델 도면을 포함한다.
경험자산데이터베이스(130)는 플랜트 건설의 설계 공종, 조달 공종, 공사 공종등을 수행하며 경험자산을 기록해놓은 복수의 데이터베이스에서 아이템별 또는 액티비티별로 검색된 검색결과가 수집되어 저장되어 있다. 또한 경험자산데이터베이스(130)는 수집한 경험자산을 문제의 유형, 원인, 아이템별로 분류하고, 아이템별로 동일하거나 유사한 문제에 대한 예방액션(preventive action) 등의 정보를 저장하고 있다. 경험자산데이터베이스(130)는 또한 플랜트 건설의 공종별, 단계별 공사에 대한 예방품질관리 항목을 정형화하고, 반복적으로 발생되는 주요 품질문제에 대한 예방지침항목을 제공할 수 있다.
3D모델링데이터베이스(132)는 사용자가 공사현장의 특정 구역을 선택하는 경우 해당 영역의 3D모델링을 구현한다. 그리고, 3D모델링 화면 중 사용자가 선택한 영역에 대해 증강현실 화면을 제공한다. 예를 들어, 사용자가 공사 현장 내에서 특정 설비를 선택하거나 또는 특정 위치를 선택하는 경우, 해당 설비 또는 해당 위치에 대응하는 3D 모델링된 증강현실 화면을 제공할 수 있다. 본 발명의 바람직한 일 실시예로서, 사용자가 현장에서 QR코드 등의 마커를 촬영하면 단말기가 자동으로 해당위치를 인지하여 사용자 주변의 3D모델링데이터를 증강하여 실물과 도면을 중첩한 가상현장을 확인할 수 있다. 그리고, 증강현실 화면에서 사용자가 원하는 장비나 아이템을 촬영하는 경우, 사용자가 원하는 장비나 아이템의 위치에서 3D모습을 보여줄 수 있다.
적어도 하나의 단말기(140)는 플랜트 설비 관리용 어플리케이션이 설치되어 실행되며, 증강현실(Augmentation Reality)서비스를 지원한다. 적어도 하나의 단말기(140)는 유무선 통신이 가능하며, 어플리케이션이 저장될 수 있는 메모리와 증강현실 서비스를 지원할 수 있는 프로세서를 포함한다. 적어도 하나의 단말기(140)는 휴대폰, 스마트폰, 스마트와치, 테블릿, PC, 노트북 등의 기기를 포함한다.
적어도 하나의 단말기(140)는 증강현실제공서버(110)에서 제공하는 가상현장을 디스플레이에 표시할 수 있다.또한 적어도 하나의 단말기(140)는 공사를 수행할 영역에 대한 3D모델링 데이터를 증강현실제공서버(110)로부터 다운받아 메모리에 저장할 수 있다. 단말기(140)는 공사현장의 3D모델링 데이터를 메모리에 다운받아 저장함으로써, 통신이 원활하지 않은 경우에도 가상현장을 생성하는데 영향을 받지 않을 수 있다.
본 발명의 바람직한 일 실시예로서, 적어도 하나의 단말기(140)는 메뉴인터페이스를 통해 증강현실제공서버(100)와 인터랙션을 수행할 수 있다. 메뉴인터페이스(710, 712, 714, 716~720, 722, 930~935, 940, 942, 944)의 예는 도 7 및 9를 참고한다. 예를 들어, 적어도 하나의 단말기(140) 각각은 공사현장 내의 부적법한 아이템에 대해 펀치인터페이스(도 9, 930~935)를 이용하여 펀치(Punch)를 발행할 수 있으며, 증강현실제공서버(110)는 적어도 하나의 단말기(140) 각각에서 발행한 펀치를 수신하여 가상현장에 표시할 수 있다. 이 경우, 펀치 각각에는 3D모델도면 상의 좌표가 부여되고, 부여된 좌표값에 대응하여 가상현장(900)에 표시된다(901~904).
본 발명의 바람직한 일 실시예로서, 증강현실제공서버(110)는 저장부(112), 매핑부(114), 네비게이션부(116), 품질관리부(118) 및 증강현실제공부(120)를 포함한다.
저장부(112)는 공사현장의 3D모델링 데이터를 3D모델링데이터베이스(110)로부터 다운받아 저장할 수 있다. 또한 필요에 따라 사용자가 단말기(140)로 촬영중인 공사현장의 특정 영역의 촬영영상을 저장한다. 본 발명의 바람직한 일 실시예에서는 단말기(140)에서도 공사현장의 3D모델링 데이터를 3D모델링데이터베이스(132) 또는 증강현실제공서버(110)로부터 다운받아 단말기(140) 내부에 저장할 수 있다.
매핑부(114)는 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 각각의 설비의 좌표를 추출한다. 그리고, 추출된 좌표를 이용하여 3D모델링데이터베이스(132)에서 대응하는 3D모델링 데이터를 추출한 후 위치정보를 연계시켜 매핑을 수행한다. 매핑부(114)에서는 촬영영상과 3D모델도면을 오버레이하여 가상현장을 생성할 수 있다.
네비게이션부(116)는 단말기(120)를 보유한 사용자의 현재위치와 사용자가 찾고자 하는 타겟아이템의 위치를 동시에 지도에 표시할 수 있다. 네비게이션부(116)는 지도 또는 매핑부(114)에서 생성한 가상현장에 사용자의 현재위치와 사용자가 찾고자 하는 타겟아이템의 위치를 표시할 수 있다.
본 발명의 바람직한 일 실시예로서, 사용자가 네비게이션 기능을 이용하는 경우 사용자가 선택한 펀치의 위치와 사용자 현재 위치와의 거리가 기설정된 범위 이내인 경우, 사용자가 실시간으로 촬영하고 있는 영상을 기초로 생성한 가상현장 화면에 사용자의 현재 위치와 사용자가 선택한 펀치의 위치 및 사용자와 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시된다. 사용자는 이동하면서 가상화면에 표시되는 자신의 위치와 선택한 펀치간의 거리정보를 이용하여 선택한 펀치의 위치로 제대로 이동하고 있는지 파악할 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 사용자가 네비게이션 기능을 이용하는 경우 사용자가 선택한 펀치의 위치와 사용자 현재 위치와의 거리가 기설정된 범위를 벗어난 경우 지도에 사용자의 현재 위치와 사용자가 선택한 펀치의 위치 및 사용자의 움직임에 따라 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시하거나, 가상현장에 사용자가 선택한 펀치의 위치 방향을 실시간으로 업데이트한다.
네비게이션부(116)는 사용자의 위치 기준으로 타겟아이템의 위치에 대한 방향정보, 거리 정보 및 높이 정보를 더 제공할 수 있다. 또한, 네비게이션부(116)는 사용자가 검색하고자 하는 타겟아이템을 검색할 수 있는 검색인터페이스를 지원한다. 본 발명의 바람직한 일 실시예에서, 타겟인터페이스는 펀치를 포함한다.
네비게이션부(116)의 설명을 위해 도 2 내지 4를 참고한다.
도 2 는 본 발명의 바람직한 일 실시예로서, 네비게이션부에서 지도 상에 사용자의 현재위치(210),타겟아이템의 위치(220) 및 현재위치(210)와 타겟아이템의 위치(220)까지의 실제거리정보 91.49m (230)를 동시에 표시한 일 예를 나타낸다. 네비게이션부는 가상현장에 실제거리정보 91.49m (230)를 함께 제공함으로써 사용자가 증강현실 화면을 통해서도 실제로 이동해야할 거리에 대해 파악이 가능하다.
도 3 은 본 발명의 바람직한 일 실시예로서, 네비게이션부에서 타겟아이템까지의 거리(330), 높이(332), 지시방향(340)을 표시한 일 예를 도시한다.
도 4 는 본 발명의 바람직한 일 실시예로서, 네비게이션부는 타겟아이템을 검색할 수 있는 검색인터페이스(350, 360, 363)를 지원한다. 네비게이션부는 검색인터페이스를 통해 검색된 타겟아이템 리스트를 표시하고, 타겟아이템 리스트에 포함된 타겟아이템 각각까지의 경로를 제공한다. 사용자가 네비게이션 항목의 시작버튼(370)을 활성화하면, 네비게이션부는 사용자의 현재위치, 타겟아이템의 위치, 타겟아이템까지의 거리정보, 타겟아이템의 방향정보를 제공한다.
품질관리부(118)는 경험자산데이터베이스(130)에서 촬영영상에서 검출된 공사현장의 각 설비를 구성하는 아이템들 중 품질문제가 있는 아이템들에 대한 예방지침항목을 추출한다. 품질관리부(118)는 경험자산데이터베이스(130)에서 촬영영상에서 검출된 아이템들에 대한 정보를 검색하고, 그에 대응하는 예방지침항목을 추출할 수 있다.
그리고, 품질관리부(118)는 촬영영상 내에서 품질문제가 있는 아이템이 검출된 경우, 검출된 아이템의 좌표를 이용하여 해당 위치에 해당 위치에 태그를 표시한다. 태그는 가상현장에 표시되며, 사용자가 태그를 활성화하면 예방지침항목들이 표시된다. 도 5를 참고하면, 경험자산데이터베이스(130)에 품질문제가 기설정된 회수 이상 저장된 아이템이 촬영영상 내에서 확인되는 경우, 해당 아이템의 위치에 태그(510, 520)가 표시된다. 그리고, 사용자가 태그(510, 520)를 활성화하면, 도 6과 같이 예방지침항목(610)이 가상화면상에 표시된다.
증강현실제공부(120)는 단말기(140)의 디스플레이 각각에 가상현장을 제공한다. 가상현장(700)을 통해 현장에서 실물을 촬영한 촬영영상과 3D 모델을 증강한 3D모델도면이 비교하여 검토가 가능하다.
본 발명의 바람직한 일 실시예로서, 증강현실제공부(120)는 3D모델을 15mX15mX15m 큐빅으로 바둑판처럼 분할을 하고 마커 인식 시 사용자의 위치정보를 이용하여 사용자 주변의 큐빅 6개를 증강하여 기설정된 길이의 구가 사용자를 감싸듯이 3D모델링을 수행한다. 기설정된 길이는 30m일 수 있다. 도 10을 참고하면, 큐빅 6개(1010)는 사용자(1010a, 1010b)를 기준으로 위쪽으로 1개, 아래쪽으로 1개, 그리고 동일한 x-y평면에서 4개(1020)를 포함할 수 있다. 증강현실제공부(120)는 사용자가 이동하는 경우 사용자의 위치를 자동으로 인식하여 새로운 큐빅을 로딩함으로써 사용자 주변 30m를 지속적으로 3D 모델링하도록 증강하여 가상현장을 제공할 수 있다.
도 10 및 11을 참고하면, 사용자의 이동에 따라 3D모델링이 수행되는 일 예를 도시한다. 사용자가 증강현실제공부(120)를 통해 최초로 증강을 수행하는 경우 사용자의 위치(1010a, 1010b)를 기준으로 기설정된 개수의 큐빅을 증강시킨다. 예를 들어, 위쪽 1개, 아래쪽 1개, 동일 평면에서 4개의 큐빅을 증강시킨다. 본 발명의 바람직한 일 실시예로서, 사용자가 이용하는 휴대용 단말기의 처리용량에 한계를 고려하여, 기설정된 개수의 큐빅만을 증강시킴으로써 사용자가 휴대용 단말기에서도 자신이 있는 위치에서 증강된 3D모델링을 확인할 수 있도록 구현된다.
도 11에서 사용자가 A, B, C 및 D 의 위치로 순차적으로 이동하는 경우를 가정한다. 본 발명의 바람직한 일 실시예에서, 사용자가 A 위치에 있는 경우 동일평면 상에서 기설정된 개수의 큐빅(1110a, 1110b, 1110c, 1110d)과 위아래 2개의 큐빅이 증강된다. 사용자가 A 위치에서 B위치로 이동하는 경우, B 위치를 기준으로 기설정된 개수의 큐빅(1120)과 위아래 2개의 큐빅이 증강된다. 사용자가 B 위치에서 C위치로 이동하는 경우, C 위치를 기준으로 기설정된 개수의 큐빅(1120)과 위아래 2개의 큐빅이 증강된다. B위치를 기준으로 동일평면에서 이용하던 2개의 큐빅(1120a, 1120b)은 더이상 증강되지 않는다. 사용자가 C 위치에서 D위치로 윗쪽으로 이동하는 경우, D위치를 기준으로 기설정된 개수의 큐빅(1120)과 위아래 2개의 큐빅이 증강된다. 이런 식으로 증강현실제공부(120)는 사용자 주변을 3D 모델이 계속 감싸고 있는 것처럼 증강을 구현한다.
증강현실제공부(120)는 제 1 모드(122)와 제 2 모드(124)를 제공한다. 본 발명의 바람직한 일 실시예로서, 제 1 모드는 공사중인 경우에 확인이 필요한 가상화면들을 제공하고, 제 2 모드는 공사가 완료 단계에서 확인이 필요한 가상화면들을 제공한다. 다만 이는 본 발명의 일 실시예일뿐 다양하게 변형이 가능함을 유의하여야 한다.
제 1 모드(122)를 선택한 경우의 가상화면의 일 예는 도 7을, 제 2 모드(124)를 선택한 경우의 가상화면의 일 예는 도 9를 각각 참고한다. 사용자는 모드선택인터페이스(도 7, 710)를 이용하여 제 1 모드(122)와 제 2 모드(124)를 선택할 수 있다.
본 발명의 바람직한 일 실시예로서, 제 1 모드에서 가상현장(700)은 사용자의 선택에 따라 스풀(Spool)정보, 웰딩(Welding)정보, NDE(비파괴시험) 및 PWHT(후열처리)정보 중 적어도 하나를 시각화하여 제공한다. 제 1 모드의 스풀(Spool)정보, 웰딩(Welding)정보, NDE(비파괴시험) 및 PWHT(후열처리)정보는 외부데이터베이스에 기등록된 정보를 불러와 이용하는 것도 가능하다.
도 7 은 본 발명의 바람직한 일 실예로서, 스풀 정보를 제공하는 가상현장의 일 예를 도시한다. 스풀 정보(730)는 ISO 드로잉 이슈부터 필드설치까지 스풀의 제작현황이 색상별로 구분되어 가상현장에 시각적으로 표현된다. 가상현장화면에서 스풀 상태별로 선택 또는 선택해제가 가능하다. 스풀 상태의 예는 'No Spool No.', 'ISO DWG Not Issued', 'ISO DWG Issued', 'ISO DWG Hold', 'Shop Fabrication Order Issued', 'Shop Weld Completed', 'Paint Inspection Completed', 'Spool Received in Field', 'Spool Issued for Erection', 'Field Weld Completed', 및 'Hydro Test Completed' 등이 있다.
또한 원하는 상태의 스풀만 증강하는 것이 가능하다. 가상현장화면을 통해 도 8의 일 예와 같이 스풀 상세정보(810)의 조회가 가능하며, 선택된 스풀의 제작, 설치 등 상세현황과 완료일자 등의 정보를 파악할 수 있다. 가상현장화면은 선택된 스풀이 속한 최근ISO, 웰딩맵(Welding Map) 도면을 호출하는 기능이 제공된다.
웰딩 정보는 웰딩조인트(Welding Joint)(740)의 웰딩완료현황이 가상현장에 색상 구분을 통해 시각적으로 표현된다. 웰딩완료현황의 예로는 'Shop Weld Not Completed', 'Shop Weld Completed', 'Field Weld Not Completed' 내지'Field Weld Completed' 등이 있다. 가상현장화면에서 웰딩 조인트의 상태별로 선택 내지 선택 해제가 가능하며, 원하는 상태의 조인트만 증강할 수 있다. 또한 웰딩조인트의 상세정보를 조회하여 웰딩 실적의 상세 현황을 파악할 수 있다. 또한 샵(Shop)과 필드(Field)의 구분 표현도 이루어진다.
NDE(비파괴시험) 및 PWHT(후열처리)정보는 NDE 및 PWHT의 요청(Request), 합격(Accept) 및 불합격(Reject)현황이 각 조인트별 태그의 형태로 가상현장에 시각적으로 표현된다. 가상현장화면은 NDE 상태별로 태그 색상을 구분하여 표시가 가능하다. NDE 상태의 예로는 'Requested', 'Accepted','Reshoot' 내지 'Rejected'등이 있다. 그 외, 가상현장화면을 통해 NDE 요청 번호 및 일자, 실제 수행일자 등과 같은 NDE 수행정보를 확인할 수 있다.
본 발명의 바람직한 일 실시예로서, 제 2 모드에서 가상현장(900)은 사용자의 선택에 펀치관리정보, 압력테스트정보, 루프테스트정보 중 적어도 하나를 시각화하여 제공한다.
펀치관리정보는 가상화면에 포함된 3D모델의 좌표정보를 활용하여 정확한 위치에 등록된 펀치들을 위치별로 관리하도록 가상현장에 시각적으로 표현된다.
압력테스트는 배관 라인의 시공이 완료되면, 용접 건전성 및 누수 여부 등을 확인하기 위해 진행된다. 압력테스트정보는 가상현장에 테스트패키지 작성부터 이슈(Issue), 내부 펀치 이슈 및 클로즈(Issue and Close), 발주처 펀치 이슈 및 클로즈 등 각 단계별로 색상을 구분되어 증강된 후 색상별로 구분되어 시각적으로 표현된다.
루프테스트는 필드 인스트루먼트(Field Instrument)에서 정션박스(Junction Box), 컨트롤룸(Control Room)까지의 공사가 완료되면 필드 인스트러먼트에서 DCS(Distributed Control System)까지 신호가 제대로 오가는지 연결 및 계기 세팅여부를 확인하기 위해 진행된다. 루프테스트정보는 가상현장에 진행단계에 따라서 검사 완료, 검사미완료, 테스트완료 등의 정보를 루프폴더 태그 아이템별로 색상이 구분되어 증강된 후 시각적으로 표현된다.
본 발명의 바람직한 일 실시예로서, 가상현장 화면을 도 7 및 9를 참고하여 설명하면 다음과 같다.
본 발명의 바람직한 일 실시예로서, 가상현장(700)은 사용자단말기가 촬영한 촬영영상에 3D모델링 데이터가 오버레이되어 표시된다.
가상현장(700)은 제 1 모드에서는 모드선택인터페이스(710), 미니맵인터페이스(712), 캡처인터페이스(714), 네비게이션인터페이스(716), 속성정보인터페이스(717), NDE인터페이스(718), PWHT인터페이스(719), 위치에디팅인터페이스(720) 및 투명도인터페이스(722)가 제공된다.
모드선택인터페이스(710)는 제 1 모드와 제 2 모드를 전환할 수 있다. 또한, 제 1 모드에서 스풀정보, 웰딩(Welding)정보, NDE(비파괴시험) 및 PWHT(후열처리)정보 중 적어도 하나를 선택하도록 구현된다. 제 2 모드에서 펀치관리정보, 압력테스트정보, 루프테스트정보 중 적어도 하나를 선택하도록 구현된다.
미니맵인터페이스(712)는 사용자의 현재 위치와 타겟아이템 또는 펀치의 위치를 지도상에 동시에 표시하기 위해 이용될 수 있다.
캡처인터페이스(714)는 가상현장화면을 캡처하기 위해 이용된다.
네비게이션인터페이스(716)는 가상현장에 사용자의 현재위치에서 타겟아이템 위치까지의 거리, 높이, 방향 정보 등을 표시하도록 구현된다.
속성정보인터페이스(717)는 도 8의 일 예와 같이 기기, 설비, 아이템들의 상세 속성을 제공하도록 구현된다.
NDE인터페이스(718) 및 PWHT인터페이스(719)는 NDE 및 PWHT의 요청, 수락 및 거절을 선택하도록 구현된다.
위치에디팅인터페이스(720)는 사용자가 이동에 따라 가상화면에서 부정합이 발생하는 경우, 3D모델링데이터와 실물데이터의 위치오차를 에디팅하도록 구현된다.
투명도인터페이스(722)는 가상현장화면을 구성하는 3D모델링 데이터의 투명도를 조절한다. 투명도인터페이스(722)를 조절하여 촬영영상에 찍힌 기기와 3D모델링 데이터를 겹친형태로 확인할 수 있다.
본 발명의 바람직한 일 실시예로서, 가상현장(900)은 제 2 모드에서는 모드선택인터페이스, 미니맵인터페이스, 캡처인터페이스, 네비게이션인터페이스, 속성정보인터페이스, 위치에디팅인터페이스 및 투명도인터페이스가 제공된다. 각 기능은 제 1 모드와 실질적으로 동일하거나 유사하다. 제 2 모드에서는 펀치인터페이스(931~935), 시스템인터페이스(944), 압력테스트인터페이스(940), 루프테스트인터페이스(942)가 제공된다.
펀치인터페이스(930)는 'Punch'(931)를 누르면 'Category'(932), 'Type'(933), 'Issue'(934) 및 'Close'(935) 4개의 버튼이 표시된다. 'Category'(932)는 펀치의 종류를 선택하고, 'Type'(933)은 펀치의 유형을 선택하며, 'Issue'(934)는 펀치를 등록하고, 그리고 'Close'(935)는 펀치를 종료하기 위해 이용된다. 'Category'(932) 인터페이스를 통해 펀치의 종류를 선택할 수 있으며, 같은 종류의 펀치는 동일한 색상으로 표현할 수 있다. 'Issue'(934) 인터페이스를 통해 펀치의 작성이 완료되면, 펀치의 위치 좌표가 자동으로 저장되고, 등록이 완료된다. 펀치는 당일에 등록된 펀치는 백색으로 구별되게 표시할 수 있다. 'Close'(935) 인터페이스를 이용하여 펀치를 종료할 때 사용자 단말기로 촬영중인 현재의 현장 모습이 자동으로 저장될 수 있다.
도 9는 펀치인터페이스(930)를 이용하여 등록된 펀치 아이콘(901~907)이 표시되어 있다. 펀치 아이콘(901~907)을 클릭하면 펀치의 상세 내용이 가상화면에 표시된다. 펀치의 상세내용은 펀치 종류, 유형, 펀치의 현장 실물 캡쳐 사진 및 펀치의 3D 모델링 증강 사진을 포함한다.
압력테스트인터페이스(940)를 활성화하면 가상 화면에 압력 테스트 패키지별로 색상이 구분되어 워크 볼륨(Work Volume) 및 테스트 패키지 상태(Test Package Status)가 표시된다.
루프테스트인터페이스(942)를 활성화하면 가상 화면에 루프 테스트 패키지별로 색상이 구분되어 워크 볼륨(Work Volume) 및 테스트 패키지 상태(Test Package Status)가 표시된다.
시스템인터페이스(944)를 활성화하면 시스템에 매핑된 각 공종별 패키지를 시스템별로 증강하여 발주처 확인(Walkthrough)시 활용될 수 있다. 시스템의 예로는 소방 배관 시스템(Fire Water System), 식수 배관 시스템(Potable Water System), 질소운전계열 시스템(Nitrogen System) 등이 있다. 일 예로, 소방배관 시스템을 시스템인터페이스(944)을 통해 활성화 하면 공장 전체에 설치된 소방용수 배관, 스프링클러, 관련 펌프, 물 저장 탱크 등이 모두 표시되어 사용자가 확인할 수 있다.
서브-시스템별로 펀치 현황을 모니터링이 가능하다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
Claims (15)
- 매핑부에서 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하여 오버레이하는 단계;
증강현실제공부에서 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 디스플레이하는 단계;
품질관리부에서 상기 위치정보를 이용하여 경험자산데이터베이스에서 상기 촬영영상 내의 각 설비를 구성하는 아이템들 중 반복적으로 문제가 발생했던 아이템의 유무를 확인하고, 반복적으로 문제가 발생했던 아이템이 있는 경우 해당 아이템에서 발생하는 주요 품질문제에 대한 예방지침항목이 있음을 알려주는 태그를 상기 가상현장에 더 표시하며, 상기 태그를 활성화하면 상기 가상현장에 상기 예방지침항목이 표시되어 공사가 진행되기 전에 확인되는 단계;및
상기 증강현실제공부에서 공사중인 경우에 확인이 필요한 가상현장들을 제공하는 제 1 모드 및 공사가 완료 단계에서 확인이 필요한 가상현장들을 제공하는 제 2 모드를 제공하는 단계;를 포함하고, 상기 제 2 모드는 펀치인터페이스를 제공하는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 1 항에 있어서,
상기 증강현실제공부에서 상기 플랜트 공사현장 내의 적어도 한 명의 사용자가 품질이 부적법한 아이템에 대해 상기 펀치인터페이스를 이용하여 펀치(Punch)를 발행하는 단계;
발행된 적어도 하나의 펀치 각각은 상기 3D모델도면 상의 좌표정보가 부여되어 상기 가상현장에 표시되는 단계;를 더 포함하는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 2 항에 있어서,
상기 발행된 펀치가 상기 적어도 한 명의 사용자 단말기의 디스플레이에 표시된 가상현장에 표시되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 2 항에 있어서,
사용자의 현재 위치와 상기 발행된 펀치의 위치가 지도상에 동시에 표시되고, 상기 사용자의 현재 위치에서 상기 발행된 펀치까지의 실제거리정보가 상기 지도에 더 표시되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 1 항에 있어서,
상기 공사현장에서 사용자의 현재 위치와 상기 사용자가 찾고자 하는 타겟아이템의 위치를 동시에 지도에 표시하는 단계;를 더 포함하는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 5 항에 있어서,
상기 사용자의 현재 위치에서 상기 타겟아이템의 위치까지의 실제 거리정보가 상기 지도에 함께 표시되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 5 항에 있어서,
상기 타겟아이템의 위치는 펀치가 발행된 위치인 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 2 항에 있어서,
상기 촬영영상은 실시간으로 촬영되는 영상을 포함하고, 사용자가 네비게이션 기능을 이용하는 경우 사용자와 사용자가 선택한 펀치 간의 거리가 기설정된 범위 이내인 경우 사용자 단말기의 디스플레이에 상기 실시간으로 촬영되는 영상을 기초로 생성된 가상현장에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되며, 상기 사용자와 상기 사용자가 선택한 펀치 간의 거리가 기설정된 범위를 초과하는 경우 지도에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 1 항에 있어서, 상기 가상현장은
스풀정보, 웰딩정보, NDE(비파괴시험) 및 PWHT(후열처리)정보 중 적어도 하나를 시각화하여 제공하는 제 1 모드가 지원되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 1 항에 있어서, 상기 가상현장은
펀치관리정보, 압력테스트 정보, 루프테스트 정보 중 적어도 하나를 시각화하여 제공하는 제 2 모드가 지원되는 것을 특징으로 하는 증강현실 기반 현장관리방법. - 제 1 항에 있어서, 상기 각 설비의 3D모델도면의 투명도는 조절되도록 구현되어 상기 촬영영상과 겹친형태로 확인이 가능한 것을 특징으로 하는 증강현실 기반 현장관리방법.
- 삭제
- 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하여 오버레이하는 매핑부;
상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 디스플레이하는 증강현실제공부; 및
상기 위치정보를 이용하여 경험자산데이터베이스에서 상기 촬영영상 내의 각 설비를 구성하는 아이템들 중 반복적으로 문제가 발생했던 아이템의 유무를 확인하고, 반복적으로 문제가 발생했던 아이템이 있는 경우 해당 아이템에서 발생하는 주요 품질문제에 대한 예방지침항목이 있음을 알려주는 태그를 상기 가상현장에 더 표시하는 품질관리부;를 포함하고,
상기 태그를 활성화하면 상기 가상현장에 상기 예방지침항목이 표시되어 공사가 진행되기 전에 확인되며,
상기 증강현실제공부에서 공사중인 경우에 확인이 필요한 가상현장들을 제공하는 제 1 모드 및 공사가 완료 단계에서 확인이 필요한 가상현장들을 제공하는 제 2 모드를 제공하고, 상기 제 2 모드는 펀치인터페이스를 제공하는 것을 특징으로 하는 증강현실제공서버. - 플랜트 공사현장의 설비를 촬영한 촬영영상에서 각 설비의 위치정보를 파악하고, 파악된 위치정보를 이용하여 3D모델링데이터베이스에서 상기 각 설비의 3D모델도면을 추출하며, 상기 촬영영상 위에 상기 3D모델도면이 오버레이된 가상현장을 생성하는 매핑부;
상기 위치정보를 이용하여 경험자산데이터베이스에서 상기 촬영영상 내의 각 설비를 구성하는 아이템들 중 반복적으로 문제가 발생했던 아이템의 유무를 확인하고, 반복적으로 문제가 발생했던 아이템이 있는 경우 해당 아이템에서 발생하는 주요 품질문제에 대한 예방지침항목이 있음을 알려주는 태그를 상기 가상현장에 더 표시하는 품질관리부;및
상기 플랜트 공사현장 내의 적어도 한 명의 사용자가 품질이 부적법한 아이템에 대해 펀치(Punch)를 발행하고, 발행된 적어도 하나의 펀치의 위치정보를 이용하여 상기 가상현장에 표시하는 증강현실제공부;를 포함하고,
사용자와 사용자가 선택한 펀치 간의 거리가 기설정된 범위 이내인 경우 사용자 단말기의 디스플레이에 실시간으로 촬영되는 영상을 기초로 생성된 가상현장에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되고, 상기 사용자와 상기 사용자가 선택한 펀치 간의 거리가 기설정된 범위를 초과하는 경우 지도에 상기 사용자의 현재 위치와 상기 사용자가 선택한 펀치의 위치 및 상기 사용자와 상기 선택한 펀치 간의 거리가 실시간으로 업데이트되어 표시되는 네비게이션부;를 포함하고,
상기 증강현실제공부는 또한 공사중인 경우에 확인이 필요한 가상현장들을 제공하는 제 1 모드 및 공사가 완료 단계에서 확인이 필요한 가상현장들을 제공하는 제 2 모드를 제공하며, 상기 제 2 모드는 펀치인터페이스를 제공하는 것을 특징으로 하는 증강현실제공서버. - 제 1항 내지 제 11 항 중 어느 한 항에 기재된 증강현실 기반 현장관리방법을 실행하기 위한 프로그램을 기록한 것을 특징으로 하는 기록매체.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220001451A KR102462229B1 (ko) | 2022-01-05 | 2022-01-05 | 증강현실 기반 현장관리방법 및 서버 |
| PCT/KR2022/021515 WO2023132555A1 (en) | 2022-01-05 | 2022-12-28 | Augmented reality-based construction site management method and server |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220001451A KR102462229B1 (ko) | 2022-01-05 | 2022-01-05 | 증강현실 기반 현장관리방법 및 서버 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102462229B1 true KR102462229B1 (ko) | 2022-11-03 |
Family
ID=84040900
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220001451A KR102462229B1 (ko) | 2022-01-05 | 2022-01-05 | 증강현실 기반 현장관리방법 및 서버 |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR102462229B1 (ko) |
| WO (1) | WO2023132555A1 (ko) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023132555A1 (en) * | 2022-01-05 | 2023-07-13 | Samsung Engineering Co.,Ltd. | Augmented reality-based construction site management method and server |
| KR102598168B1 (ko) | 2023-09-19 | 2023-11-03 | 주식회사 이안 | 증강 현실 기반의 배관 용접 포인트 관리 방법 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120111145A (ko) * | 2011-03-31 | 2012-10-10 | 전자부품연구원 | 증강현실을 이용한 플랜트 관리 방법 및 시스템 |
| KR20150114106A (ko) * | 2014-03-31 | 2015-10-12 | (주)세이프텍리서치 | 증강현실기반 플랜트 현장운영자용 정보제공장치 및 이를 이용한 정보제공방법 |
| KR101762622B1 (ko) * | 2016-08-01 | 2017-08-04 | 주식회사 사이트팩 | 위치 기반으로 현장 사진을 도면에 기록하는 건설 정보 관리 방법 |
| KR101873289B1 (ko) * | 2017-08-10 | 2018-07-02 | 이규홍 | 해양 플랜트의 제작 공정 관리를 위한 3d 시뮬레이션 및 모니터링 시스템 및 방법 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101800109B1 (ko) * | 2016-02-16 | 2017-11-22 | 엔에이치엔엔터테인먼트 주식회사 | Iot 기기를 이용해서 증강 현실을 구현한 전장 온라인 게임 |
| KR102462229B1 (ko) * | 2022-01-05 | 2022-11-03 | 삼성엔지니어링 주식회사 | 증강현실 기반 현장관리방법 및 서버 |
-
2022
- 2022-01-05 KR KR1020220001451A patent/KR102462229B1/ko active IP Right Grant
- 2022-12-28 WO PCT/KR2022/021515 patent/WO2023132555A1/en active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120111145A (ko) * | 2011-03-31 | 2012-10-10 | 전자부품연구원 | 증강현실을 이용한 플랜트 관리 방법 및 시스템 |
| KR101199290B1 (ko) | 2011-03-31 | 2012-11-09 | 전자부품연구원 | 증강현실을 이용한 플랜트 관리 방법 및 시스템 |
| KR20150114106A (ko) * | 2014-03-31 | 2015-10-12 | (주)세이프텍리서치 | 증강현실기반 플랜트 현장운영자용 정보제공장치 및 이를 이용한 정보제공방법 |
| KR101762622B1 (ko) * | 2016-08-01 | 2017-08-04 | 주식회사 사이트팩 | 위치 기반으로 현장 사진을 도면에 기록하는 건설 정보 관리 방법 |
| KR101873289B1 (ko) * | 2017-08-10 | 2018-07-02 | 이규홍 | 해양 플랜트의 제작 공정 관리를 위한 3d 시뮬레이션 및 모니터링 시스템 및 방법 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023132555A1 (en) * | 2022-01-05 | 2023-07-13 | Samsung Engineering Co.,Ltd. | Augmented reality-based construction site management method and server |
| KR102598168B1 (ko) | 2023-09-19 | 2023-11-03 | 주식회사 이안 | 증강 현실 기반의 배관 용접 포인트 관리 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023132555A1 (en) | 2023-07-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102462229B1 (ko) | 증강현실 기반 현장관리방법 및 서버 | |
| JP7442278B2 (ja) | 工業用拡張現実アプリケーションのためのドリフト補正 | |
| US8225226B2 (en) | Virtual control panel | |
| WO2020061939A1 (zh) | 识别设备的方法、装置、系统、存储介质、处理器和终端 | |
| CN109690570B (zh) | 一种机房管理方法及动环系统 | |
| CN109559380A (zh) | 过程控制环境的3d映射 | |
| US20180068035A1 (en) | Modeling and designing system and method | |
| CN111222190B (zh) | 一种古建筑管理系统 | |
| CN106020138A (zh) | 针对工业数据的分层图呈现 | |
| CN113222184A (zh) | 基于增强现实ar的设备巡检系统及方法 | |
| US20190377330A1 (en) | Augmented Reality Systems, Methods And Devices | |
| JP6725063B2 (ja) | 設備管理システム | |
| KR102043278B1 (ko) | 플랜트 시공 지원 방법 및 시스템 | |
| Corneli et al. | Augmented reality and deep learning towards the management of secondary building assets | |
| EP2775408A1 (en) | Mobile device for identifying devices for technical maintenance | |
| KR20180082168A (ko) | 검측 업무용 솔루션 제공 방법 및 시스템 | |
| JP2020098568A (ja) | 情報管理装置、情報管理システム、情報管理方法および情報管理プログラム | |
| EP2283413B1 (en) | Work station in a process control system | |
| CN112929384A (zh) | 基于空间锚点的ar智慧点巡检系统 | |
| JP2021018710A (ja) | 現場連携システムおよび管理装置 | |
| US8786399B2 (en) | Computer implemented method to display technical data for monitoring an industrial installation | |
| CN109462739A (zh) | 发电厂设备运维方法及系统 | |
| CN112270757B (zh) | 一种基于空间曲线的管道三维状态监视方法及装置 | |
| CN114936260A (zh) | 一种林区自然资源大数据云平台及其查询方法 | |
| US20210390305A1 (en) | Method and apparatus for providing annotations in augmented reality |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| AMND | Amendment | ||
| X091 | Application refused [patent] | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |