KR101445973B1 - Recognition Method and System for Block Production Progress using Image Process - Google Patents

Recognition Method and System for Block Production Progress using Image Process Download PDF

Info

Publication number
KR101445973B1
KR101445973B1 KR1020130061555A KR20130061555A KR101445973B1 KR 101445973 B1 KR101445973 B1 KR 101445973B1 KR 1020130061555 A KR1020130061555 A KR 1020130061555A KR 20130061555 A KR20130061555 A KR 20130061555A KR 101445973 B1 KR101445973 B1 KR 101445973B1
Authority
KR
South Korea
Prior art keywords
block
shape
module
image
design model
Prior art date
Application number
KR1020130061555A
Other languages
Korean (ko)
Inventor
최우성
김은영
장석민
임래수
김호경
허주호
Original Assignee
에스티엑스조선해양 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스티엑스조선해양 주식회사 filed Critical 에스티엑스조선해양 주식회사
Priority to KR1020130061555A priority Critical patent/KR101445973B1/en
Application granted granted Critical
Publication of KR101445973B1 publication Critical patent/KR101445973B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures

Abstract

The present invention relates to a method for recognizing the advancement rate of a block production progress using an image processing technique, and a system thereof. More particularly, the present invention relates to a method and a system which collect an image of a block manufactured in various processes of a shipyard, and automatically recognize and manage a present alignment location and the advancement rate of to the entire production process.

Description

영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법 및 그 시스템{Recognition Method and System for Block Production Progress using Image Process}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a method of recognizing a progress of a block manufacturing process using a video processing technique,

본 발명은 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법 및 그 시스템에 관한 것으로, 보다 구체적으로는, 조선소의 다양한 공정에서 제작되는 블록의 이미지를 수집하여 현재 배치된 위치와 전체 제작 공정 대비 진척도를 자동으로 인식하여 관리하는 방법 및 그 시스템에 관한 것이다.The present invention relates to a method of recognizing a progress of a block making process using an image processing technique and a system thereof. More specifically, the present invention relates to a method of collecting images of blocks manufactured in various processes of a shipyard, And a system and method for automatically recognizing and managing the system.

조선소에서 건조하는 선박들이 대형화되고 동시에 여러 선박이 제작됨에 따라 넓은 지역에 산재해 있는 공정 스테이지 간의 유기적인 연계가 점점 중요해지게 되었고, 이에 대형 조선소들은 ERP나 APS와 같은 전산화된 기간 시스템을 두고 계획과 실적 간의 유기적인 연동을 시도하고 있다.
As vessels built in shipyards are becoming larger and more vessels are being built, the organic linkage between process stages spreading over a larger area becomes increasingly important, and large shipyards are planning and operating computerized systems such as ERP and APS. We are trying to organically link the results.

하지만, 상기 ERP나 APS와 같은 기간 시스템은 분명 장점이 있음에도 불구하고, 또 한편으로는 작업자에게 전산으로 매번 실적을 입력해야 하는 부담을 안겨주는 문제도 있다.
However, there is a problem that the periodic system such as the ERP or the APS certainly has an advantage, and on the other hand, it imposes a burden on the operator to enter the results every time by computer.

작업자가 매 작업 후에 ERP나 APS에 접속할 수 없는 환경이기도 하거니와 실적 입력과 작업을 병행하는 구조는 생산성에 역효과를 발생시키므로, 이를 해결하기 위해 대형 조선소들은 작업이 진행되는 과정에서 자동으로 생산 실적을 집계하는 시스템들을 생산 현장에 도입하고 있는 추세이다.
Since the worker can not access the ERP or APS after every work, the structure of concurrent performance input and work causes adverse effects on productivity. To solve this problem, large shipbuilders automatically collect production results Systems to the production site.

각 공정 스테이지에서 필요로 하는 정보를 얻기 위해 강재나 부재의 추적, 절단 실적, 블록의 조립 과정을 모니터링 하기 위한 방법들이 개발되었으며, RFID 태그나 레이저 센서 등을 부착하여 분석한 결과를 집계하거나 자동화 장비의 작업로그를 분석하여 실적으로 사용하는 방식이 그 예가 된다.
In order to obtain the information required at each process stage, methods for monitoring the tracking and cutting performance of the steel and members, and assembling process of the block have been developed. The results of analysis by attaching RFID tags or laser sensors, For example, by analyzing the activity log of the user and using it as the performance.

한편, 분산되어 있는 선후 공정 간의 원활한 작업 일정 조절을 위해 관리자는 1일 1회 이상 직접 현장의 공정 과정을 조사해 기록하고, 이를 토대로 계획(전체 제작 공정) 대비 진척도를 체크하여 적절한 조치를 세우거나 계획을 변경하게 된다. 도 1은 종래 현장의 공정 과정을 조사한 결과를 기록한 양식으로, 조립 블록의 정반 위치와 공정 진척도를 표시한 것이다. 하지만, 이러한 블록의 진척도 인식과 관련하여서는 다음과 같은 문제들이 있어 이를 해결할 필요가 있다.
On the other hand, in order to adjust the smooth work schedule between the dispersed post-processes, the manager checks and records the process of the site directly at least once a day, checks the progress against the plan (overall production process) . FIG. 1 is a view showing a result of examination of a process in a conventional field, and shows the position of a building block and the progress of the process. However, there are the following problems related to the recognition of the progress of such blocks.

1. 현장 점검에 과도한 시수 투입 문제1. Excessive time input to on-site inspection

현장 관리자는 선후 공정 간의 연계 블록 물량을 협의하기 위해, 작업 스테이지에서 제작되는 블록의 진척도를 파악하게 된다. 관리자는 현재 블록이 공장이나 지번 내 어디에 위치하는지, 그리고 블록의 작업 진척도가 얼마나 되는지를 생산 스케줄과 비교하게 되며, 지연되는 블록 작업에 적절한 대처를 하거나 외부 제작 물량의 입고가 늦어지는 경우 스케줄을 유기적으로 변경한다. 문제는 관리자의 작업 공간이 현장과 떨어져 있을 뿐더러 진척도 인식을 위해 현장에서 너무나 많은 시간을 소비한다는 점이다. 실 예로 현장 지시와 진척도 인식을 위해 1일 5시간 이상 소비하는 경우도 발생하고 있다.
The field manager will determine the progress of the blocks produced in the workstage in order to negotiate the amount of linked blocks between the subsequent processes. The manager compares the current block with the production schedule to determine where the current block is located in the factory or in the lot, and how much progress has been made in the block. If the dealing with delayed block work is dealt with appropriately, . The problem is that the manager's workspace is far from the scene and it takes too much time on site to recognize the progress. As a practical example, there is a case where the user spends more than five hours a day in order to recognize the progress of the site and to give instructions.

2. 관리자에 의존한 진척도 기준 문제2. Progression-based problems that depend on the administrator

시스템화 되지 않고 육안과 경험에 의존한 관리 방식을 통해서는 동일한 블록일지라도 관리자마다 진척도를 평가하는 기준이 다르기 때문에 스케줄 관리에 있어 혼란이 발생할 수 있다.
Through the management system which is not systemized and depending on the visual and experience, it is possible to cause confusion in the schedule management because the standard for evaluating the progress is different for each manager even in the same block.

3. 기록을 위한 중복 작업 발생 문제3. Duplicate job problems for recording

현장 점검에서 인식된 진척도를 도 1에서 보는 것과 같이 전산화 되지 않은 양식으로 기록하는 경우 관련 데이터를 수작업으로 분석해야 하며 오랜 기간 저장할 수도 없는 문제가 발생한다. 또한 관련 데이터를 조선소의 기간 시스템에 반영하여 공유하기 위해서는 도 1의 자료들을 전산화 하는 추가 작업이 필요한데 이는 매우 번거로운 작업일 뿐더러 많은 시수가 투입되어야 하는 문제가 있다.
Recording the progress achieved in the on-site inspections in a non-computerized form, as shown in FIG. 1, requires manual analysis of the relevant data and problems that can not be stored for long periods of time. In addition, in order to reflect and relate the relevant data to the shipyard's periodical system, additional work of computerizing the data of FIG. 1 is required, which is a very cumbersome task and requires a lot of time.

4. 4. RFIDRFID 태그 기술의 현장 적용 제약 문제 The problem of field application of tag technology

진척도 인식을 위하여 RFID 태그를 현장에 적용함에 있어서는 상당히 많은 제한요소가 존재한다. 즉, 부재 별로 RFID 태그를 적용하기 위해서는 그 수가 많아야 할 뿐더러, 각각의 RFID 태그마다 데이터를 입력하고 확인하여 부착하는 과정에서 관리자의 추가 시수가 발생한다.There are quite a few limitations in applying RFID tags to the field to recognize progress. That is, in order to apply the RFID tag to each member, the number of the RFID tags must be large. In addition, in the process of inputting, checking, and attaching data to each RFID tag, additional time of the administrator occurs.

1. 선박블록 현황파악용 모니터링 시스템(특허출원 제10-2011-0018586호)(도 10)1. Monitoring system for monitoring the status of ship block (Patent Application No. 10-2011-0018586) (FIG. 10) 2. 블록제작 실시간 모니터링 및 공정관리 시스템(특허출원 제10-2009-0084875호)(도 11)2. Block production real-time monitoring and process management system (Patent Application No. 10-2009-0084875) (Figure 11) 3. 이미지 영상을 이용한 용접 부재의 용접라인 위치 검출(특허출원 제10-2006-0103078호)(도 12)3. Detection of welding line position of welding member using image image (Patent Application No. 10-2006-0103078) (Fig. 12) 4. IGPS를 이용한 블록제작시스템 및 이를 사용한 블록제작방법(특허출원 제10-2010-0105407호)(도 13)4. Block making system using IGPS and block making method using the same (Patent Application No. 10-2010-0105407) (Fig. 13) 5. 블록 관리 시스템 및 그의 선박 블록 트랜스포터 작업 할당 방법(특허출원 제10-2010-0124097호)(도 14)5. Block management system and its ship block transporter job allocation method (Patent Application No. 10-2010-0124097) (Fig. 14) 6. 선박 블록 배치 장치 및 방법(특허출원 제10-2008-0124210호)(도 15)6. Ship block arranging device and method (Patent Application No. 10-2008-0124210) (Figure 15) 7. 선박 블록의 이동 및 적치 관리 방법(특허출원 제10-2008-0092752호)(도 16)7. Movement of ship block and method of managing the ship block (Patent Application No. 10-2008-0092752) (Figure 16) 8. 선박용 조립블록 관리방법(특허출원 제10-2003-0062107호)(도 17)8. MANUFACTURING METHOD FOR MANUFACTURING BLOCKS (Patent Application No. 10-2003-0062107) (FIG. 17)

본 발명은 상기와 같은 문제점을 해결하기 위해 제안된 것으로, 조선소의 다양한 공정에서 제작되는 블록의 이미지를 수집하여 현재 배치된 위치와 전체 제작 공정 대비 진척도를 자동으로 인식하여 관리하는 방법 및 그 시스템을 제공하는 것을 목적으로 한다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and it is an object of the present invention to provide a method and system for automatically collecting images of blocks manufactured in various processes of a shipyard, The purpose is to provide.

상기한 목적을 달성하기 위하여 본 발명은,According to an aspect of the present invention,

블록 검출 모듈이 카메라 렌즈를 통해 실시간으로 수집(촬영)된 전체 이미지에서 영상 처리 기술을 이용하여 블록으로 추정되는 영역, 즉 블록 이미지만을 검출해 내는 단계;Detecting only an area estimated as a block, that is, a block image, using the image processing technique in a whole image obtained in real time (photographed) through the camera lens by the block detection module;

형상 데이터 추출 및 재구성 모듈이 기간 시스템인 설계 CAD 시스템의 데이터베이스로부터 설계 모델의 형상 데이터를 추출하고 이를 3D 모델로 가시화하는 단계;Extracting shape data of a design model from a database of a design CAD system which is a period system and visualizing the shape data as a 3D model;

블록 검색 및 형상 매칭 모듈이 상기 블록 검출 모듈이 검출한 블록 이미지와 상기 형상 데이터 추출 및 재구성 모듈이 추출한 설계 모델의 형상을 비교하여 블록 이미지와 설계 모델의 형상이 일치할 때의 해당 블록을 자동으로 검색해 내고 상기 해당 블록의 현재 위치, 즉 시야 거리와 각도를 자동으로 찾아내는 단계;The block search and shape matching module compares the block image detected by the block detection module with the shape of the design model extracted by the shape data extracting and reconstructing module to automatically detect the block when the shape of the block image matches the shape of the design model And automatically finding a current position of the corresponding block, i.e., a viewing distance and an angle;

내부재 매칭 모듈이 블록 제작 공정이 진행되는 동안 순차적으로 수집되는 다수의 블록 이미지를 비교하고 차이가 생기는 영역을 영상 처리 기술을 통해 발췌하며 이를 통해 해당 블록에 투입된 내부재를 인식하는 단계; 및Comparing the plurality of block images sequentially collected during the block manufacturing process of the inner member matching module, extracting a difference area through an image processing technique, and recognizing an inner member inserted in the block; And

진척도 계산 모듈이 상기 내부재 매칭 모듈이 인식한 내부재 정보에 기반하여, 블록에 투입되어야 할 총 내부재 수 대비 현재까지 작업된 내부재 수를 비교 계산하여 수치화하고 이를 통하여 블록 제작의 진척도를 계산하는 단계;The progress calculation module compares the number of internal members that have been processed so far with respect to the total number of internal members to be inputted into the block based on the internal member information recognized by the internal member matching module, ;

를 포함하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법을 제공한다.
A process of recognizing the progress of the block production process using the image processing technology.

또한 본 발명은,Further, according to the present invention,

카메라 렌즈를 통해 실시간으로 수집(촬영)된 전체 이미지에서 영상 처리 기술을 이용하여 블록으로 추정되는 영역, 즉 블록 이미지만을 검출해 내는 블록 검출 모듈;A block detection module for detecting only an area estimated as a block by using an image processing technique, that is, a block image, from a whole image captured (captured) in real time through a camera lens;

기간 시스템인 설계 CAD 시스템의 데이터베이스로부터 설계 모델의 형상 데이터를 추출하고 이를 3D 모델로 가시화하는 형상 데이터 추출 및 재구성 모듈;A shape data extracting and reconstructing module for extracting shape data of a design model from a database of a design CAD system and visualizing the shape data as a 3D model;

상기 블록 검출 모듈이 검출한 블록 이미지와 상기 형상 데이터 추출 및 재구성 모듈이 추출한 설계 모델의 형상을 비교하여 블록 이미지와 설계 모델의 형상이 일치할 때의 해당 블록을 자동으로 검색해 내고 상기 해당 블록의 현재 위치, 즉 시야 거리와 각도를 자동으로 찾아내는 블록 검색 및 형상 매칭 모듈;A block image detected by the block detection module is compared with a shape of a design model extracted by the shape data extraction and reconstruction module to automatically search for a corresponding block when the shape of the block image coincides with the shape of the design model, A block search and shape matching module for automatically detecting a position, i.e., a view distance and an angle;

블록 제작 공정이 진행되는 동안 순차적으로 수집되는 다수의 블록 이미지를 비교하고 차이가 생기는 영역을 영상 처리 기술을 통해 발췌하며 이를 통해 해당 블록에 투입된 내부재를 인식해 내는 내부재 매칭 모듈; 및An inner member matching module for comparing a plurality of block images sequentially collected during a block manufacturing process, extracting a region where a difference occurs, through an image processing technique, and recognizing an inner member inserted in the block; And

상기 내부재 매칭 모듈이 인식한 내부재 정보에 기반하여, 블록에 투입되어야 할 총 내부재 수 대비 현재까지 작업된 내부재 수를 비교 계산하여 수치화하고 이를 통하여 블록 제작의 진척도를 계산하는 진척도 계산 모듈;A progress calculation module for calculating the progress of the block production based on the internal member information recognized by the internal member matching module by comparing and calculating the number of internal members that have been operated so far to the total number of internal members to be inputted into the block, ;

을 포함하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 시스템을 제공한다.The present invention provides a block production process progress degree recognition system using an image processing technique.

본 발명에 따르면, 조선소의 다양한 공정에서 제작되는 블록의 현재 배치된 위치와 전체 제작 공정 대비 진척도를 신속하게 자동으로 인식하여 관리할 수 있다.According to the present invention, it is possible to quickly and automatically recognize and manage the current position of a block manufactured in various processes of a shipyard and the progress of the entire manufacturing process.

도 1은 종래 현장의 공정 과정을 조사한 결과를 기록한 양식으로, 조립 블록의 정반 위치와 공정 진척도를 표시한 것이다.
도 2는 본 발명에 따른 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법이 구현되는 과정 및 그 시스템을 보여준다.
도 3은 본 발명의 실시 예에 따라 블록 검출 모듈이 전체 이미지 가운데 블록 영역만을 자동으로 추출해 낸 결과를 보여준다.
도 4는 본 발명의 실시 예에 따라 블록 검출 모듈이 영상 처리 기술을 적용함에 따라 수집된 이미지가 점차 변환되는 모습을 보여준다.
도 5 및 도 6은 본 발명의 실시 예에 따라 형상 데이터 추출 및 재구성 모듈의 기능이 구현되는 방식을 보여준다.
도 7은 본 발명의 실시 예에 따라 블록 검색 및 형상 매칭 모듈의 기능이 구현되는 순서도를 보여준다.
도 8은 본 발명의 실시 예에 따라 블록 검색 및 형상 매칭 모듈이 블록 이미지와 설계 CAD 시스템의 3D 모델 Viewer를 통해 가시화된 설계 모델의 각도와 크기를 유사 수준으로 매칭한 형태를 보여준다.
도 9는 본 발명의 실시 예에 따라 내부재 매칭 모듈의 기능이 구현되는 순서도를 보여준다.
도 10 내지 도 17은 선행기술문헌을 보여준다.FIG. 1 is a view showing a result of examination of a process in a conventional field, and shows the position of a building block and the progress of the process.
FIG. 2 shows a process and a system for implementing a block production process progress degree recognition method using an image processing technique according to the present invention.
FIG. 3 shows a result of a block detection module automatically extracting only a block area from the entire image according to an embodiment of the present invention.
FIG. 4 is a view showing a progressively transformed image as the block detection module applies image processing technology according to an embodiment of the present invention.
5 and 6 illustrate how the functions of the shape data extraction and reconstruction module are implemented in accordance with an embodiment of the present invention.
FIG. 7 shows a flowchart of the functions of the block search and shape matching module according to an embodiment of the present invention.
FIG. 8 shows a block search and shape matching module matching a block image and an angle and a size of a design model visualized through a 3D model viewer of a design CAD system at a similar level according to an embodiment of the present invention.
9 shows a flowchart in which the functions of the inner member matching module are implemented according to an embodiment of the present invention.
10 to 17 show prior art documents.

이하, 첨부된 도면들을 참조하여 본 발명에 대하여 상세히 설명한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
Hereinafter, the present invention will be described in detail with reference to the accompanying drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

본 발명은 조선소의 다양한 공정에서 제작되는 블록의 이미지를 수집하여 현재 배치된 위치와 전체 제작 공정 대비 진척도를 자동으로 인식하여 관리하는 방법 및 그 시스템을 제공한다. 본 발명은, 한 마디로 말하면, 카메라 렌즈를 통해 수집(촬영)된 블록의 이미지를 가공하여 설계 모델과 매칭하고 이를 기반으로 블록이 제작되는 과정을 이미지 기반으로 추적하여 진척도를 인식하는 기술이라 할 수 있다.
The present invention provides a method and system for collecting images of blocks manufactured in various processes of a shipyard and automatically recognizing and managing the current position and progress of the entire production process. In other words, the present invention refers to a technique of processing an image of a block captured (captured) through a camera lens, matching the design model, and tracking the process of producing a block based on the image based on the progress of the block .

본 발명의 적용대상은 주로 조선소에서 건조하는 블록이다. 그 이유는, 조선소에서 제작하는 블록의 경우 선주의 요구사항에 따라 매번 다른 제품을 생산해야 하고, 고정된 위치에서 장기간 작업이 지속되기 때문이다. 작업기간이 길수록, 작업영역이 넓을수록, 생산되는 제품의 수가 다양할수록, 배치계획이 미치는 영향력이 커지게 되어 그 활용도가 증가하게 된다. 반대로 라인생산 시스템의 경우는, 컨베이어 위에서 동일한 제품을 생산하므로 배치상태나 진척도에 대한 모니터링보다는 생산량이 주 관심사가 되므로 본 발명의 적용대상이 되기에 적합하지 못하다.
The application of the present invention is mainly a block drying in a shipyard. The reason for this is that blocks manufactured by the shipyard have to produce different products each time according to the shipowner's requirements and continue to work for a long time at fixed locations. The longer the work period, the wider the work area, and the greater the number of products produced, the greater the impact of the layout plan and its utilization. Conversely, in the case of the line production system, since the same product is produced on the conveyor, the production amount becomes a main concern rather than the monitoring of the batch status or the progress, and thus it is not suitable to be applied to the present invention.

도 2는 본 발명에 따른 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법이 구현되는 과정 및 그 시스템을 보여준다.
FIG. 2 shows a process and a system for implementing a block production process progress degree recognition method using an image processing technique according to the present invention.

본 발명은 블록 검출 모듈(1), 형상 데이터 추출 및 재구성 모듈(2), 블록 검색 및 형상 매칭 모듈(3), 내부재 매칭 모듈(4), 진척도 계산 모듈(5) 등 5가지의 모듈이 순차적으로 작용하는 과정을 통하여 구현된다(도 2). 이하, 각 모듈별 기능 및 순차적 작용과정에 대하여 상세히 설명한다.
The present invention includes five modules including a block detection module 1, a shape data extraction and reconstruction module 2, a block search and shape matching module 3, an inner member matching module 4 and a progress calculation module 5 And is implemented through a sequential process (FIG. 2). Hereinafter, the function and sequential operation process of each module will be described in detail.

블록 검출 모듈Block detection module

먼저, 블록 검출 모듈(1)이 카메라 렌즈를 통해 실시간으로 수집(촬영)된 전체 이미지에서 영상 처리 기술을 이용하여 블록으로 추정되는 영역, 즉 블록 이미지만을 검출해 낸다.
First, the block detection module 1 detects only an area estimated as a block, that is, a block image, by using an image processing technique in a whole image captured (captured) in real time via a camera lens.

카메라 렌즈를 통해 수집된 전체 이미지 내에는 블록 외에도 현장 배경이나 중장비, 공구 등 다양한 것들이 존재하며, 카메라 시야에 따라 중첩되어 간섭이 발생하기도 하므로, 영상 처리 기술을 이용하여 진척도 계산에 필요하지 않는 부분, 즉 블록 이외 다른 부분을 제거해 주어야 한다.
In addition to the block, there are various fields such as field background, heavy equipment, tools and so on. In addition, since the camera is overlapped according to the field of view, interference is generated. Therefore, In other words, other parts except the block should be removed.

일반적으로 블록의 모서리와 배경 간에는 색상의 차이가 두드러지게 나타나므로, 블록 검출 모듈(1)은 영상 처리 기술 중 일반적으로 사용되는 외곽선 추출 알고리즘을 적용하되, 공정 환경의 특이성을 고려하여 색상이나 명도 등의 조건 처리를 통해 블록의 모서리와 배경 간의 명확한 경계를 검출해 낸다(도 3, 도 4).
Generally, since the color difference between the edge of the block and the background is conspicuously displayed, the block detection module 1 applies the outline extraction algorithm generally used in the image processing technology. However, considering the specificity of the process environment, (Fig. 3, Fig. 4). In this way, the boundary between the corner and the background of the block is detected.

이와 관련하여, 도 3은 본 발명의 실시 예에 따라 블록 검출 모듈(1)이 전체 이미지 가운데 블록 영역(블록 이미지)만을 자동으로 추출해 낸 결과를 보여주며, 도 4는 본 발명의 실시 예에 따라 블록 검출 모듈(1)이 영상 처리 기술을 적용함에 따라 수집된 전체 이미지가 점차 변환되는 모습을 보여준다.
In this regard, FIG. 3 shows a result of the block detection module 1 automatically extracting only a block area (block image) among the entire images according to an embodiment of the present invention. FIG. As the block detection module 1 applies the image processing technology, the collected images are gradually transformed.

형상 데이터 추출 및 재구성 모듈Feature Data Extraction and Reconstruction Module

다음으로, 형상 데이터 추출 및 재구성 모듈(2)이 기간 시스템인 설계 CAD 시스템의 데이터베이스로부터 설계 모델의 형상 데이터를 추출하고 이를 3D 모델로 가시화한다. 이 경우, 블록은 평판과 곡판, 부재 등의 요소가 계층구조를 이루고 있는바, 이는 본 발명에서 블록 제작의 진척도를 인식하기 위한 중요한 데이터로 활용되므로, 형상 데이터 추출 및 재구성 모듈(2)은 설계 모델의 형상 데이터 외에 속성 데이터도 추출하여 연동한다.
Next, the shape data extraction and reconstruction module 2 extracts the shape data of the design model from the database of the design CAD system, which is a period system, and visualizes the shape data as a 3D model. In this case, since the block has a hierarchical structure such as a flat plate, a curved plate, and a member, this is utilized as important data for recognizing the progress of the block production in the present invention. Therefore, the shape data extraction and re- In addition to the shape data of the model, attribute data is also extracted and linked.

여기서, 설계 CAD 시스템은 본 발명의 대상 산업이 되는 조선소의 설계 CAD 시스템을 가리킨다. 이러한 설계 CAD 시스템은 여러 선종/선형의 설계 모델들을 자체 저장하고 있으며, 여러 사용자가 동시에 접근하여 작업을 진행할 수 있도록 자체의 데이터베이스를 구비하고 있다. 조선소에서 사용하는 대표적인 설계 CAD 시스템으로는 Tribon과 Aveva Marine, GS CAD 등이 있는데, 이러한 설계 CAD 시스템 별로 저장하는 방식이나 데이터 형태가 제각각이지만, 어떤 시스템이건 간에 블록 제작과 관련한 도면이나 부재 등의 데이터를 검색하는 기능을 갖추어야 한다.
Here, the design CAD system refers to the design CAD system of the shipyard as the target industry of the present invention. This design CAD system stores various model types of ship type and linear type, and has its own database so that users can simultaneously access and work on them. Tribon, Aveva Marine, and GS CAD are typical design CAD systems used in the shipyard. These CAD systems have different storage formats and data formats. However, any system, regardless of the system, .

한편, 본 발명에서 설계 모델이란 진척도를 계산하고자 하는 블록의 완성된 형상 및 속성 데이터를 구비한 객체를 의미하는바, 설계 모델은 후술하는 바와 같이 진척도 계산 모듈(5)이 블록 검출 모듈(1)에 의해 검출된 블록 이미지와 비교하여 블록 제작 공정의 진척도를 파악하기 위한 수단으로 활용된다.
In the present invention, the design model refers to an object having the completed shape and attribute data of a block for which the progress is to be calculated, and the design model is determined by the progress detection module 5, Is used as a means for grasping the progress of the block manufacturing process.

한편, 형상 데이터 추출 및 재구성 모듈(2)이 상술한 기능을 수행함에 있어서는 다음의 2가지 방식이 사용 가능하다.
On the other hand, when the shape data extraction and reconstruction module 2 performs the above-mentioned functions, the following two methods can be used.

첫 번째 방식은 도 5에서 보는 것과 같이 설계 CAD 시스템 내에서 제공하는 검색 모듈과 3D 모델 Viewer를 외부에서 연동할 수 있게 인터페이스를 구축하는 방식이다. 이 방식의 경우 매번 설계 CAD 시스템에 접근하여 연동해야 하므로 안정성이나 부하 측면에서 부담이 높으나, 형상 데이터 추출 및 재구성 모듈(2)의 기능을 구현하기 위하여 추가로 개발해야 할 범위가 상대적으로 작다는 장점이 있다.
As shown in FIG. 5, the first method is a method of constructing an interface so that a search module provided in the design CAD system and a 3D model viewer can be linked externally. In this method, since the design CAD system must be accessed and interworked every time, it is burdensome in terms of stability and load. However, the advantage that the range to be further developed is relatively small in order to implement the function of the shape data extraction and reconstruction module (2) .

두 번째 방식은 도 6에서 보는 것과 같이 설계 CAD 시스템 내에서 제공하는 추출 모듈과의 인터페이스를 통해 설계 모델의 형상 데이터를 구조화된 데이터베이스에 보관하고 필요할 때마다 불러서 사용하는 방식이다. 이 방식의 경우 설계 CAD 시스템 내에서 제공하는 3D 모델 Viewer를 활용하지 못하므로, 데이터베이스에 보관된 설계 모델의 형상 데이터를 조회하여 3D 모델로 가시화하기 위한 별도의 3D 모델 Viewer를 추가로 구현해야 하는 부담이 있다.
In the second method, as shown in FIG. 6, the shape data of the design model is stored in a structured database through an interface with the extraction module provided in the design CAD system, and the method is called up whenever necessary. In this case, since the 3D model viewer provided in the design CAD system can not be utilized, it is necessary to additionally implement a separate 3D model viewer for visualizing the shape data of the design model stored in the database, .

블록 검색 및 형상 Block search and shape 매칭matching 모듈 module

다음으로, 블록 검색 및 형상 매칭 모듈(3)이 블록 검출 모듈(1)이 검출한 블록 이미지와 형상 데이터 추출 및 재구성 모듈(2)이 추출한 설계 모델의 형상을 비교하여 블록 이미지와 설계 모델의 형상이 일치할 때의 해당 블록을 자동으로 검색해 내고 상기 해당 블록의 현재 위치, 즉 시야 거리와 각도를 자동으로 찾아낸다.
Next, the block search and shape matching module 3 compares the shape of the block model detected by the block detection module 1 with the shape of the design model extracted by the shape data extraction and reconstruction module 2, The matching block is automatically searched for and the current position of the corresponding block, i.e., the view distance and the angle, is automatically detected.

이러한 블록 검색 및 형상 매칭 모듈(3)의 기능은 특히 현재 작업 영역에 배치된 블록에 대한 아무런 정보가 없는 경우에 보다 유용한 효과를 발현한다. 일반적으로 블록을 제작하기 위해서는 주판을 배열하게 되는데, 현재 작업 영역에 배치된 블록에 대한 아무런 정보가 없는 경우 블록 검색 및 형상 매칭 모듈(3)은 주로 이러한 주판의 형상을 이용하여 블록을 검색하며, 인식된 블록의 시야 거리와 각도를 자동으로 찾아낸다.
The function of this block search and shape matching module 3 produces a more useful effect, especially when there is no information about the blocks currently placed in the work area. In general, the abacus is arranged to produce a block. If there is no information about the block currently arranged in the work area, the block search and shape matching module 3 mainly searches for the block using the shape of the abacus, Automatically detects the viewing distance and angle of the recognized block.

이 경우, 블록 이미지는 투영된 2D 이미지이므로, 블록 검색 및 형상 매칭 모듈(3)은 설계 모델의 시야 거리와 각도를 변화시켜 가면서 설계 모델과 블록 이미지가 일치하게 되는 순간의 해당 블록을 검색하고(즉, 현재 작업 영역에 배치된 블록이 무엇인지를 확인하고) 해당 블록의 형상을 설계 모델과 매칭하는 방식을 활용한다.
In this case, since the block image is a projected 2D image, the block search and shape matching module 3 searches the corresponding block at a moment when the design model and the block image coincide with each other while changing the viewing distance and angle of the design model That is, it checks what block is currently placed in the work area, and uses the method of matching the shape of the block with the design model.

도 7은 본 발명의 실시 예에 따라 블록 검색 및 형상 매칭 모듈(3)의 기능이 구현되는 순서도를 보여준다. 그리고 도 8은 본 발명의 실시 예에 따라 블록 검색 및 형상 매칭 모듈(3)이 블록 이미지와 설계 CAD 시스템의 3D 모델 Viewer를 통해 가시화된 설계 모델의 각도와 크기를 유사 수준으로 매칭한 형태를 보여준다.
FIG. 7 shows a flowchart in which the functions of the block search and shape matching module 3 are implemented according to an embodiment of the present invention. 8 shows a block matching and shape matching module 3 matching the angle and size of the block model and the design model visualized through the 3D model viewer of the design CAD system at a similar level according to the embodiment of the present invention .

이하, 블록 검색 및 형상 매칭 모듈(3)의 기능이 구현되는 과정에 대하여 설명한다.
Hereinafter, a process of implementing the functions of the block search and shape matching module 3 will be described.

먼저, 설계 CAD 시스템의 작업 스케줄 상에 관리되고 있는 블록 리스트를 조회하여 설계 모델의 형상을 3D 모델 Viewer를 통해 가시화하고 이를 블록 검출 모듈(1)에 의해 검출된 블록 이미지와 비교한다. 이 경우, 고려되는 인자는 블록의 배치 각도, 시야로부터의 거리, 형상의 유사 수준 등으로, 먼저 블록 이미지를 설계 모델과 비교하여 유사성을 수치화한다. 이후, 설계 모델을 X, Y, Z축으로 각도 변화시키거나 시야 거리를 변경하는 과정을 통해 특정 블록 이미지에 대한 최대 유사성을 경계선 관점으로 비교하고 만족하지 못할 경우 다른 블록 이미지를 가지고 동일한 작업을 반복하여 블록 이미지와 설계 모델이 일치하게 될 때의 해당 블록이 무엇인지를 검색한다. 다음으로, 블록 이미지와 설계 모델이 일치하게 될 때 해당 블록의 시야 거리와 각도를 자동으로 찾아낸다. 이로써, 본 발명에 따르면 블록 이미지를 이용하여 해당 블록이 현재 배치된 위치를 자동으로 인식 및 관리할 수 있다.
First, the block list managed on the job schedule of the design CAD system is inquired, and the shape of the design model is visualized through the 3D model viewer and compared with the block image detected by the block detection module (1). In this case, the factor to be considered is the block angle, the distance from the field of view, the similarity level of the shape, etc., and the similarity is first quantified by comparing the block image with the design model. Then, the maximum similarity of the specific block image is compared with the boundary line view by changing the angle of the design model in the X, Y, and Z axes or changing the view distance, and if not, repeating the same operation with another block image And searches for the corresponding block when the block image and the design model coincide with each other. Next, when the block image and the design model are matched, the view distance and the angle of the block are automatically detected. Thus, according to the present invention, it is possible to automatically recognize and manage a position where a corresponding block is currently arranged using a block image.

내부재My absence 매칭matching 모듈 module

다음으로, 내부재 매칭 모듈(4)이 블록 제작 공정이 진행되는 동안 순차적으로 수집되는 다수의 블록 이미지를 비교하고 차이가 생기는 영역을 영상 처리 기술을 통해 발췌하며 이를 통해 해당 블록에 투입된 내부재를 인식해 낸다. 이 경우, 발췌된 영역은 설계 모델의 초기 설정 시야에서 보이는 부재의 형상을 인식하는 데 활용하게 되며, 필요 시 설계 CAD 시스템의 위치 좌표도 활용할 수 있다. 도 9는 본 발명의 실시 예에 따라 내부재 매칭 모듈(4)의 기능이 구현되는 순서도를 보여준다.
Next, the inner member matching module 4 compares a plurality of block images sequentially collected during the block manufacturing process, extracts a difference area through an image processing technique, and extracts an inner member inserted in the corresponding block Recognize. In this case, the extracted area is used to recognize the shape of the member seen in the initial setting field of the design model, and the positional coordinates of the design CAD system can be utilized if necessary. Figure 9 shows a flowchart in which the functions of the inner member matching module 4 are implemented according to an embodiment of the present invention.

상기 기능을 수행함에 있어서 내부재 매칭 모듈(4)은 해당 설계 모델에 투입되는 내부재들 가운데 이미 선행 공정에서 작업된 요소들은 고려 대상에서 제외시켜 내부재 인식성을 높인다. 예를 들어 조립 공장의 정반에 주판만 배열된 경우, 주판을 제외한 모든 내부재들을 내부재 매칭의 대상으로 고려하고, 선행 의장에 투입된 블록은 선행 공정에서 인식된 론지나 거더 등의 내부재를 제외한 의장품을 후보군으로 고려한다.
In performing the above function, the inner member matching module 4 excludes the elements, which have already been processed in the preceding process among the inner members put into the corresponding design model, to increase the perceived member recognition. For example, in the case where only the abacus is arranged on the base of the assembly plant, all the members except the abacus are regarded as the object of the inner member matching, and the blocks inserted in the preceding chair are excluded from the inner members such as the lon, Consider the equipment as a candidate.

진척도 계산 모듈Progress calculation module

마지막으로, 진척도 계산 모듈(5)이 내부재 매칭 모듈(4)이 인식한 내부재 정보에 기반하여, 블록에 투입되어야 할 총 내부재 수 대비 현재까지 작업된 내부재 수를 비교 계산하여 수치화하고 이를 통하여 블록 제작의 진척도를 계산한다.
Finally, based on the inner member information recognized by the inner member matching module 4, the progress calculation module 5 compares and calculates the number of inner members that have been operated so far to the total number of inner members to be inserted into the block Through this, the progress of block production is calculated.

조선소에서는 초기 설계 시에 내부재 별로 작업되어야 할 스테이지에 대한 생산정보를 기입하기 때문에 영역별로 작업 진척도를 수치화할 수 있으며, 이를 통해 선/후행 공정의 연계 관리를 향상시킬 수 있다.
Since the shipyard will fill in the production information for the stages that should be performed for each member during the initial design, it is possible to quantify the progress of the work by each area, which can improve the linkage management of the pre / post process.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서 본 발명에 개시된 실시 예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.It will be apparent to those skilled in the art that various modifications, substitutions and substitutions are possible, without departing from the scope and spirit of the invention as disclosed in the accompanying claims. will be. Therefore, the embodiments disclosed in the present invention and the accompanying drawings are intended to illustrate and not to limit the technical spirit of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments and accompanying drawings. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas falling within the scope of the same shall be construed as falling within the scope of the present invention.

1 : 블록 검출 모듈
2 : 형상 데이터 추출 및 재구성 모듈
3 : 블록 검색 및 형상 매칭 모듈
4 : 내부재 매칭 모듈
5 : 진척도 계산 모듈1: Block detection module
2: Shape data extraction and reconstruction module
3: Block search and contour matching module
4: My absence matching module
5: progress calculation module

Claims (11)

블록 검출 모듈(1)이 카메라 렌즈를 통해 실시간으로 수집(촬영)된 전체 이미지에서 영상 처리 기술을 이용하여 블록으로 추정되는 영역, 즉 블록 이미지만을 검출해 내는 단계;
형상 데이터 추출 및 재구성 모듈(2)이 기간 시스템인 설계 CAD 시스템의 데이터베이스로부터 설계 모델의 형상 데이터를 추출하고 이를 3D 모델로 가시화하는 단계;
블록 검색 및 형상 매칭 모듈(3)이 상기 블록 검출 모듈(1)이 검출한 블록 이미지와 상기 형상 데이터 추출 및 재구성 모듈(2)이 추출한 설계 모델의 형상을 비교하여 블록 이미지와 설계 모델의 형상이 일치할 때의 해당 블록을 자동으로 검색해 내고 상기 해당 블록의 현재 위치, 즉 시야 거리와 각도를 자동으로 찾아내는 단계;
내부재 매칭 모듈(4)이 순차적으로 수집되는 다수의 블록 이미지를 비교하고 차이가 생기는 영역을 영상 처리 기술을 통해 발췌하며 이를 통해 해당 블록에 투입된 내부재를 인식하는 단계; 및
진척도 계산 모듈(5)이 상기 내부재 매칭 모듈(4)이 인식한 내부재 정보에 기반하여, 블록에 투입되어야 할 총 내부재 수 대비 현재까지 작업된 내부재 수를 비교 계산하여 수치화하고 이를 통하여 블록 제작의 진척도를 계산하는 단계;
를 포함하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.Detecting only an area estimated as a block, that is, a block image, using the image processing technique in the entire image obtained by the block detection module 1 in real time (photographed) through the camera lens;
Extracting shape data of a design model from a database of a design CAD system which is a period system, and visualizing the shape data as a 3D model;
The block search and shape matching module 3 compares the block image detected by the block detection module 1 with the shape of the design model extracted by the shape data extraction and reconstruction module 2 to determine the shape of the block image and the design model Automatically searching for a corresponding block at the time of matching, and automatically finding the current position of the corresponding block, i.e., the viewing distance and angle;
Comparing the plurality of block images sequentially collected by the inner member matching module (4), extracting a difference region through an image processing technique, and recognizing an inner member inserted in the corresponding block; And
Based on the inner member information recognized by the inner member matching module 4, the progress calculation module 5 compares and calculates the number of inner members that have been operated so far compared to the total number of inner members to be inserted into the block, Calculating a progress of the block production;
A process of recognizing the progress of a block production process using an image processing technique. 제 1 항에 있어서,
상기 블록 검출 모듈(1)은 영상 처리 기술 중 외곽선 추출 알고리즘을 적용하되, 공정 환경의 특이성을 고려하여 색상이나 명도의 처리를 통해 블록의 모서리와 배경 간의 명확한 경계를 검출해 내는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
Wherein the block detection module (1) detects a clear boundary between an edge of a block and a background through processing of color or brightness in consideration of the specificity of a process environment, by applying an outline extraction algorithm among image processing techniques. Progression Recognition Method of Block Manufacturing Process Using Image Processing Technology. 제 1 항에 있어서,
상기 형상 데이터 추출 및 재구성 모듈(2)은 설계 모델의 형상 데이터 외에 속성 데이터도 추출하여 연동하는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
Wherein the shape data extraction and reconstruction module (2) extracts attribute data in addition to the shape data of the design model and interlocks them. 제 1 항에 있어서,
상기 형상 데이터 추출 및 재구성 모듈(2)은 설계 CAD 시스템 내에서 제공하는 검색 모듈과 3D 모델 뷰어(Viewer)를 외부에서 연동할 수 있게 인터페이스를 구축하는 방식에 따라 구현되는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
The shape data extracting and reconstructing module 2 is implemented according to a method of constructing an interface for interfacing a search module provided in the design CAD system and a 3D model viewer (Viewer) externally. Progression Recognition Method of Block Making Process Using. 제 1 항에 있어서,
상기 형상 데이터 추출 및 재구성 모듈(2)은 설계 CAD 시스템 내에서 제공하는 추출 모듈과의 인터페이스를 통해 설계 모델의 형상 데이터를 구조화된 데이터베이스에 보관하고 필요할 때마다 불러서 사용하는 방식에 따라 구현되는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
The shape data extraction and reconfiguration module 2 is implemented in accordance with a method of storing shape data of a design model in a structured database through an interface with an extraction module provided in the design CAD system, A method of recognizing the progress of a block manufacturing process using an image processing technique. 제 1 항에 있어서,
상기 블록 검색 및 형상 매칭 모듈(3)은 현재 작업 영역에 배치된 블록에 대한 아무런 정보가 없는 경우 주판의 형상을 이용하여 블록을 검색해 내는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
Wherein the block search and shape matching module (3) searches the block using the shape of the abacus when there is no information about the blocks arranged in the current working area. Way. 제 6 항에 있어서,
상기 블록 검색 및 형상 매칭 모듈(3)은 설계 모델의 시야 거리와 각도를 변화시켜 가면서 설계 모델과 블록 이미지가 일치하게 되는 순간의 해당 블록을 검색하고 해당 블록의 형상을 설계 모델과 매칭하는 방식을 활용하는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 6,
The block search and shape matching module 3 searches a corresponding block at a moment when the design model and the block image coincide with each other while changing the viewing distance and angle of the design model and then matching the shape of the corresponding block with the design model Wherein the step of recognizing the progress of the block production process using the image processing technique is performed. 제 6 항에 있어서,
상기 블록 검색 및 형상 매칭 모듈(3)은, 설계 CAD 시스템의 작업 스케줄 상에 관리되고 있는 블록 리스트를 조회하여 설계 모델의 형상을 3D 모델 뷰어(Viewer)를 통해 가시화하고 이를 상기 블록 검출 모듈(1)에 의해 검출된 블록 이미지와 비교하되, 설계 모델을 X, Y, Z축으로 각도 변화시키거나 시야 거리를 변경하는 과정을 통해 특정 블록 이미지에 대한 최대 유사성을 경계선 관점으로 비교하고 만족하지 못할 경우 다른 블록 이미지를 가지고 동일한 작업을 반복하여 블록 이미지와 설계 모델이 일치하게 될 때의 해당 블록이 무엇인지를 검색하고, 다음으로 블록 이미지와 설계 모델이 일치하게 될 때 해당 블록의 시야 거리와 각도를 자동으로 찾아내는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 6,
The block search and shape matching module 3 visualizes the shape of a design model through a 3D model viewer by querying a block list managed on a job schedule of the design CAD system and transmits the visualized data to the block detection module 1 ), The maximum similarity of a specific block image is compared with a boundary view through a process of changing the angle of the design model on the X, Y, and Z axes or changing the view distance, The same operation is repeated with another block image to search for a corresponding block when the block image and the design model coincide with each other. Next, when the block image and the design model coincide with each other, Wherein the step of recognizing the progress of the block production process using the image processing technology is automatically performed. 제 8 항에 있어서,
상기 블록 검색 및 형상 매칭 모듈(3)은 블록의 배치 각도, 시야로부터의 거리, 형상의 유사 수준을 고려하여 블록 이미지를 설계 모델과 비교하고 유사성을 수치화하는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.9. The method of claim 8,
The block search and shape matching module 3 compares the block image with the design model in consideration of the block arrangement angle, the distance from the field of view, and the similarity level of the shape, and the similarity is digitized. Method of Recognizing Process of Block Making Process. 제 1 항에 있어서,
상기 내부재 매칭 모듈(4)은 해당 설계 모델에 투입되는 내부재들 가운데 이미 선행 공정에서 작업된 요소들은 고려 대상에서 제외시켜 내부재 인식성을 높이는 것을 특징으로 하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 방법.The method according to claim 1,
Wherein the inner member matching module (4) enhances the recognition of inner members by eliminating the elements already processed in the preceding process among the inner members inputted to the corresponding design model, Process progress recognition method. 카메라 렌즈를 통해 실시간으로 수집(촬영)된 전체 이미지에서 영상 처리 기술을 이용하여 블록으로 추정되는 영역, 즉 블록 이미지만을 검출해 내는 블록 검출 모듈(1);
기간 시스템인 설계 CAD 시스템의 데이터베이스로부터 설계 모델의 형상 데이터를 추출하고 이를 3D 모델로 가시화하는 형상 데이터 추출 및 재구성 모듈(2);
상기 블록 검출 모듈(1)이 검출한 블록 이미지와 상기 형상 데이터 추출 및 재구성 모듈(2)이 추출한 설계 모델의 형상을 비교하여 블록 이미지와 설계 모델의 형상이 일치할 때의 해당 블록을 자동으로 검색해 내고 상기 해당 블록의 현재 위치, 즉 시야 거리와 각도를 자동으로 찾아내는 블록 검색 및 형상 매칭 모듈(3);
순차적으로 수집되는 다수의 블록 이미지를 비교하고 차이가 생기는 영역을 영상 처리 기술을 통해 발췌하며 이를 통해 해당 블록에 투입된 내부재를 인식해 내는 내부재 매칭 모듈(4); 및
상기 내부재 매칭 모듈(4)이 인식한 내부재 정보에 기반하여, 블록에 투입되어야 할 총 내부재 수 대비 현재까지 작업된 내부재 수를 비교 계산하여 수치화하고 이를 통하여 블록 제작의 진척도를 계산하는 진척도 계산 모듈(5);
을 포함하는, 영상 처리 기술을 이용한 블록 제작 공정 진척도 인식 시스템.A block detection module 1 for detecting only an area estimated as a block, that is, a block image, by using an image processing technique in an entire image captured (photographed) in real time via a camera lens;
A shape data extraction and reconstruction module (2) for extracting shape data of a design model from a database of a design CAD system which is a period system and visualizing the shape data as a 3D model;
The block image detected by the block detection module 1 is compared with the shape of the design model extracted by the shape data extracting and reconstructing module 2 to automatically search the block when the block image matches the shape of the design model A block search and shape matching module 3 for automatically finding a current position of the corresponding block, that is, a view distance and an angle;
An inner member matching module 4 for comparing a plurality of block images sequentially collected and extracting an area where a difference occurs through an image processing technique and recognizing an inner member input to the block through the image processing technique; And
Based on the inner member information recognized by the inner member matching module 4, the number of inner members worked so far to the total number of inner members to be inputted into the block is compared and calculated to calculate the progress of block production A progress calculation module 5;
A block - production process progression recognition system using image processing technology.
KR1020130061555A 2013-05-30 2013-05-30 Recognition Method and System for Block Production Progress using Image Process KR101445973B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130061555A KR101445973B1 (en) 2013-05-30 2013-05-30 Recognition Method and System for Block Production Progress using Image Process

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130061555A KR101445973B1 (en) 2013-05-30 2013-05-30 Recognition Method and System for Block Production Progress using Image Process

Publications (1)

Publication Number Publication Date
KR101445973B1 true KR101445973B1 (en) 2014-10-02

Family

ID=51996146

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130061555A KR101445973B1 (en) 2013-05-30 2013-05-30 Recognition Method and System for Block Production Progress using Image Process

Country Status (1)

Country Link
KR (1) KR101445973B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101903084B1 (en) * 2016-11-30 2018-10-02 삼성중공업(주) Apparatus and method for providing scaffold installation information, recording medium
KR20220008184A (en) * 2020-07-13 2022-01-20 군산대학교산학협력단 Method for training a model to identify hull blocks based on a convolutional neural network
KR20220052798A (en) * 2020-10-21 2022-04-28 주식회사 팀솔루션 Method for generating image data for machine learning and apparatus thereof
KR20220075779A (en) * 2020-11-30 2022-06-08 주식회사 스카이시스 Block status management system and method of the same
KR102603129B1 (en) * 2022-12-29 2023-11-16 주식회사 애자일소다 Ai based shipbuilding process analysis system and method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0749910A (en) * 1993-08-04 1995-02-21 Jgc Corp Device and method for monitoring progress status of construction work
JP2004005237A (en) 2002-05-31 2004-01-08 Hitachi Plant Eng & Constr Co Ltd Work progress management support method and system
JP2009210403A (en) 2008-03-04 2009-09-17 Japan Atomic Energy Agency System for assisting management of installation dismantling work
KR20120062335A (en) * 2010-12-06 2012-06-14 한국전자통신연구원 Apparatus and method for managing a block of ship

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0749910A (en) * 1993-08-04 1995-02-21 Jgc Corp Device and method for monitoring progress status of construction work
JP2004005237A (en) 2002-05-31 2004-01-08 Hitachi Plant Eng & Constr Co Ltd Work progress management support method and system
JP2009210403A (en) 2008-03-04 2009-09-17 Japan Atomic Energy Agency System for assisting management of installation dismantling work
KR20120062335A (en) * 2010-12-06 2012-06-14 한국전자통신연구원 Apparatus and method for managing a block of ship

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101903084B1 (en) * 2016-11-30 2018-10-02 삼성중공업(주) Apparatus and method for providing scaffold installation information, recording medium
KR20220008184A (en) * 2020-07-13 2022-01-20 군산대학교산학협력단 Method for training a model to identify hull blocks based on a convolutional neural network
KR102522205B1 (en) * 2020-07-13 2023-04-13 군산대학교산학협력단 Method for training a model to identify hull blocks based on a convolutional neural network
KR20220052798A (en) * 2020-10-21 2022-04-28 주식회사 팀솔루션 Method for generating image data for machine learning and apparatus thereof
KR102520133B1 (en) 2020-10-21 2023-04-11 주식회사 팀솔루션 Method for generating image data for machine learning and apparatus thereof
KR20220075779A (en) * 2020-11-30 2022-06-08 주식회사 스카이시스 Block status management system and method of the same
KR102542869B1 (en) * 2020-11-30 2023-06-15 주식회사 스카이시스 Block status management system and method of the same
KR102603129B1 (en) * 2022-12-29 2023-11-16 주식회사 애자일소다 Ai based shipbuilding process analysis system and method thereof

Similar Documents

Publication Publication Date Title
JP6931402B2 (en) Display quality detection methods, devices, electronic devices and storage media
Wong et al. Digitisation in facilities management: A literature review and future research directions
KR101445973B1 (en) Recognition Method and System for Block Production Progress using Image Process
JP6405320B2 (en) Method and system for improved automated visual inspection of physical assets
US20230214983A1 (en) Methods of artificial intelligence-assisted infrastructure assessment using mixed reality systems
Golabchi et al. An integrated ergonomics framework for evaluation and design of construction operations
CN110880200A (en) Intelligent checking and accepting method for GIM model engineering based on three-dimensional reconstruction technology
JP2020520012A (en) Intelligent, automated review of industrial asset integrity data
Martinez et al. Intelligent vision-based online inspection system of screw-fastening operations in light-gauge steel frame manufacturing
Sioma 3D imaging methods in quality inspection systems
Sansoni et al. Optoranger: A 3D pattern matching method for bin picking applications
Horváth et al. Point cloud based robot cell calibration
Al-Sabbag et al. Enabling human–machine collaboration in infrastructure inspections through mixed reality
Shi et al. Circular grid pattern based surface strain measurement system for sheet metal forming
KR101476909B1 (en) Real-time Process Monitoring System using Block Image
Liu et al. A mixed perception-based human-robot collaborative maintenance approach driven by augmented reality and online deep reinforcement learning
Isaka et al. Next generation of global production management using sensing and analysis technology
Wan et al. Robust and accurate sub-pixel extraction method of laser stripes in complex circumstances
EP4352634A1 (en) Method and system for surface deformation detection
Roberts et al. Annotating 2D imagery with 3D kinematically configurable assets of construction equipment for training pose-informed activity analysis and safety monitoring algorithms
Lytle A framework for object recognition in construction using building information modeling and high frame rate 3D imaging
Zhang et al. Design and Research of Low-Cost and Self-Adaptive Terrestrial Laser Scanning for Indoor Measurement Based on Adaptive Indoor Measurement Scanning Strategy and Structural Characteristics Point Cloud Segmentation
Panahi et al. Automated Progress Monitoring in Modular Construction Factories Using Computer Vision and Building Information Modeling
US20200250893A1 (en) Augmented reality-based ply layups on a composite part layup tool
Jiang et al. Computer vision-based methods applied to construction processes: A literature review

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180227

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180903

Year of fee payment: 5