WO2016024698A1 - 파노라마 영상을 이용한 동작패턴 분석방법 - Google Patents

파노라마 영상을 이용한 동작패턴 분석방법 Download PDF

Info

Publication number
WO2016024698A1
WO2016024698A1 PCT/KR2015/004559 KR2015004559W WO2016024698A1 WO 2016024698 A1 WO2016024698 A1 WO 2016024698A1 KR 2015004559 W KR2015004559 W KR 2015004559W WO 2016024698 A1 WO2016024698 A1 WO 2016024698A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
worker
work
panoramic image
motion
Prior art date
Application number
PCT/KR2015/004559
Other languages
English (en)
French (fr)
Inventor
임황용
김성표
김현종
Original Assignee
주식회사 에스.제이테크
유창근
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스.제이테크, 유창근 filed Critical 주식회사 에스.제이테크
Publication of WO2016024698A1 publication Critical patent/WO2016024698A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection

Definitions

  • the present invention relates to a method of analyzing a motion pattern using a panoramic image, and more particularly, to photograph a work process of a worker at a work site from a worker's point of view, and to panoramicize and analyze the work process.
  • the present invention relates to a method of analyzing a motion pattern using a panoramic image to be separated.
  • the efficient manufacturing process is a competitive advantage in the market, and it is a factor that guarantees the profit of the company. Therefore, the design of the efficient manufacturing process should be considered as the top priority for improving the competitiveness.
  • a common method for designing an efficient manufacturing process known up to now is to use an image-based program applied with motion analysis techniques. It is to derive process improvement plans such as drawing and organizing standard work, arranging materials, parts, and workers, Quantitative process verification is performed through the input test bed.
  • Korean Patent Publication No. 10-1245231 discloses a motion analysis method using a video filed by the present applicant and a recording medium on which the program is recorded, and a conventional motion analysis method including the registered patent. Since the installation of the test bed is essential for initial operation photographing and process verification, there is a disadvantage in that it can be used only in a company with a relatively good money management.
  • the present invention has been made to solve the problems of the prior art as described above, the object of the present invention is to enable an efficient manufacturing process design without a quantitative process verification through the test bed with the actual equipment is invested for process improvement
  • the present invention provides a method of analyzing a motion pattern using a panoramic image, which can be used by small and medium-sized businesses that cannot be easily determined.
  • the present invention is able to analyze the detailed operation patterns by directly photographing the worker's work process from the operator's eyes to be separated by each operating element can be applied to the efficient manufacturing process design, as well as in the workplace
  • Another problem is to provide a method of analyzing a motion pattern using a panorama image that can be immediately corrected and feedbacked when a problem occurs.
  • the first camera for photographing the front of the worker is installed in front of the helmet used in the work shooting step, and the second and third cameras for photographing the left and right directions of the worker, respectively, on both left and right sides of the helmet. Characterized in that installed.
  • the work shooting step is characterized in that for displaying the image marker at the position where the operator starts the work on the work table to perform the work.
  • the hand movement analysis step is to obtain a repetition period of the hand movement through the two-dimensional transformation step of the hand movement trajectory identified through the panoramic image, and numerical analysis using the hand movement trajectory converted to the two-dimensional Characterized in that it comprises a repeat cycle operation step.
  • the image separation step it is characterized by including a margin at the beginning and end of each repetition period.
  • the operation element separation step may include setting a first threshold point for selecting a first image among the images separated by repetition periods, and setting first threshold points for separating the operation elements, based on a center point of the first image.
  • the operation element separation step may further include a finishing step of deleting an image section not included in the range between the start and end portions of the separated operation element after the nth threshold point separation step.
  • an efficient manufacturing process can be designed by a simple process without a quantitative process verification through a test bed into which the actual equipment is put, and thus has an excellent effect that can be utilized in small and medium-sized companies that do not easily decide the investment for process improvement.
  • FIG. 1 is a flowchart illustrating a method of analyzing an operation pattern using a panoramic image according to the present invention.
  • Figure 2 is a schematic diagram showing the preparation of the job shooting step of the present invention shown in FIG.
  • Figure 3 is a perspective view showing a helmet worn by the operator of the present invention shown in FIG.
  • FIG. 4 is a view showing an embodiment of a panoramic image converted in the image conversion step of the present invention shown in FIG.
  • FIG. 5 and 6 are views showing an embodiment of the iteration period calculation step of the hand motion analysis step of the present invention shown in FIG.
  • Figure 7 (a), (b) is a view showing a process of the operation element separation step of the present invention shown in FIG.
  • FIG. 1 is a flowchart illustrating a method of analyzing an operation pattern using a panoramic image according to the present invention
  • FIG. 2 is a view schematically illustrating a preparation process of a work shooting step of the present invention shown in FIG. 1
  • FIG. 3 is shown in FIG. 2.
  • 4 is a perspective view showing a helmet worn by a worker in the present invention
  • FIG. 4 is a view showing an embodiment of a panoramic image converted in an image conversion step of the present invention shown in FIG. 1
  • FIGS. 5 and 6 are views shown in FIG. 7 is a view showing an embodiment of the iteration period operation step of the hand motion analysis step of the invention
  • Figure 7 (a) is a view showing the process of the operation element separation step of the present invention shown in FIG.
  • the present invention relates to a motion pattern analysis method using a panoramic image to take a worker's work process at the work site from the operator's point of view, and panoramicize and analyze the work process to separate a series of work processes by motion elements.
  • the operation photographing step (S10), the image conversion step (S20), the hand motion analysis step (S30), including the image separation step (S40) and the operation element separation step (S50) Is done.
  • the work shooting step (S10) relates to the step of taking a worker's work process for analyzing the operation pattern, the helmet 10, such as a helmet to be worn by the worker for a more realistic work process shooting
  • the camera 12 is installed in the worker's eyes and is configured to photograph the working process.
  • the present invention is primarily intended to improve the competitiveness through efficient manufacturing process design in the field of manufacturing industry, more accurate analysis of the operation operation is most important, and therefore the camera 12 to the operator's helmet 10 By installing it, it is possible to more accurately photograph the working motion from the operator's eyes.
  • a total of three cameras 12 may be installed in the helmet 10.
  • the first camera 12a is installed in front of the helmet 10, and the second and the second sides of the helmet 10 are located at the left and right sides, respectively.
  • Three cameras (12b, 12c) is installed is configured to take pictures of all the direction of the worker's hand during the operation.
  • the work marker 20 on which the worker performs the work displays an image marker 30, the image marker 30 being displayed at a position where the worker starts work, which will be described later. It serves as a center point to be used for motion analysis in the analysis step (S30) and the image separation step (S40).
  • the image marker 30 is displayed in the shape of a quadrangle in order to easily grasp the change in the angle of the photographed image, and when the operator uses both hands together, Two image markers 30 may be used.
  • the camera 12 mounted on the helmet 10 is a CCD camera (Charge Coupled Device Camera) that is easy to store and transmit by converting the photographed image into an electrical signal or an IP camera that is easy to transfer the captured image, etc. This can be used.
  • CCD camera Charge Coupled Device Camera
  • the image conversion step (S20) serves to make it easier to analyze the hand movements of the operator by converting the image photographed in the operation photographing step (S10) to a panoramic image.
  • the first camera 12a Since the operator's motion cannot be analyzed only by the captured image, the image captured by the first, second, and third cameras 12a, 12b, and 12c installed in the helmet 10 is converted into a panoramic image. The overall hand movements will be analyzed.
  • the hand motion analysis step (S30) relates to the step of extracting and analyzing the hand movements of the operator from the panoramic image converted in the image conversion step (S20), the dimension conversion step (S31) and iterative period operation step (S32) )
  • the dimensional conversion step (S31) serves to simplify and analyze the worker's work process by making the hand movement trajectory of the worker identified through the panoramic image two-dimensional, FIG. 4. As shown, arbitrary points are extracted from the operator's hand trajectory identified through the panoramic image, and the distance, angle, and time between the random points are measured and displayed in two dimensions.
  • the trajectory of the worker's hand expressed in the panoramic image is a function of a change in tilt ⁇ over time t or a change in tilt ⁇ over distance l. It can be expressed as a two-dimensional function such as
  • the repetition period operation step (S32) relates to a step of obtaining a repetition period by converting the hand motion trajectory of the worker converted into two dimensions in the dimension conversion step (S31) through numerical analysis, and analyzes the hand motion trajectory of the worker. It is to obtain a cycle in which the hand movements of the worker is repeated through.
  • a cumulative distribution of gradient changes over time can be used in the trajectory of the worker's hand expressed in the panoramic image.
  • the repetition period can be obtained. Since there is no sin, cos function is used.
  • the change of the slope over time will also be repeated, so that the repetition period can be obtained when checking the change. If it is used, it will diverge due to the continuous change, so that the cumulative distribution can be repeated in a certain pattern without diverging through numerical analysis using sin and cos functions.
  • the numerical analysis for the repetition period operation as described above may be made through a numerical analysis program such as MATLAB, and as a result, the repetition period as shown in FIG. 5 may be confirmed through an output means such as a monitor.
  • the image separation step (S40) relates to the step of separating the panoramic image by the repetition period using an image editing program using the repetition period of the movement of the hand analyzed in the hand motion analysis step (S30). By separating the same image, it is possible to analyze the pattern of more detailed work operation.
  • the image separation step (S40) by including a free period at the beginning and end of the image separated by the repetition period to make sure that the entire image can be more clearly distinguished by the repetition period and at the same time to compare the analysis between the separated images It is desirable to make it easier.
  • the operation element separation step (S50) serves to analyze the entire work process of the operator by the operation element by separating the image separated by the repetition period by the operation element in the image separation step (S40) again,
  • the first threshold point setting step (S51), the first threshold point positioning step (S52), the first threshold point separation step (S53), the nth threshold point setting step (S54) and the nth threshold point separation step (S55) is made.
  • the first threshold point setting step (S51) is to select one of the image for each repetition period (hereinafter referred to as 'first image') in the image separation step (S40) to separate the operation element
  • 'first image' the image for each repetition period
  • the first step of setting the critical point, and the image divided by the repetition cycle is displayed on the touch screen, and the administrator skilled in the work process by touching the threshold portion that is separated by the operation element while checking the image to be displayed By the marking method, the first threshold points can be set.
  • the first critical point positioning step (S52) relates to the step of confirming the position of the first critical point through the operation by setting the spatial relationship between the first critical point set in the first threshold point setting step (S51), After setting virtual coordinates using the image marker 30 displayed on the image as a center point, the positions of the first critical points can be calculated by defining spatial relationships between the first critical points.
  • the image marker Since the spatial relationship between 1, 2, and 3 can be calculated based on (30), the first operation of the worker moving from the first critical point 1 to 2 and the second operation of the worker moving from the first critical point 2 to 3 It can be defined.
  • the step of separating the first critical point relates to the step of setting and separating the interval between the first critical points selected in the first image as one operation element, and using the image editing program to generate the first critical point.
  • the setting of the n th threshold point (S54) relates to selecting the n th image except for the first image among the images separated for each repetition period and setting the n th threshold points in the n th image.
  • the n th threshold points are set by referring to the spatial relationship between the first threshold points identified in the positioning step S52.
  • the first threshold point positioning step (S52) is performed.
  • the spatial relationship between the first critical points 1, 2, 3 computed through the virtual coordinates of the image marker 30 in the identified first image and the virtual coordinates of the image marker 30 as the origin, is determined by the coordinate transformation.
  • the nth threshold points represented by 1 ', 2', and 3 ', respectively, can be displayed on the nth image by converting them into a function of the tilt ⁇ mn of the image marker 30 identified in the image.
  • the n th threshold point separating step (S55) relates to the step of setting and separating the section between the n th threshold points set in the n th threshold point setting step (S54) as one operation element, the first threshold point described above.
  • the image is separated into the first 'operation' of the operator moving from the nth threshold point 1 'to 2' and the second 'operation of the operator moving from the nth threshold point 2' to 3 '.
  • the operation element separation step (S50) may be configured to further comprise a finishing step (S56), the finishing step (S56) is finished to the nth threshold point separation step (S55) to the overall work process photographed image
  • the present invention relates to a step of deleting an image section including an operation not included between a start part and an end part of a set operation element in a state where separation by repetition period and separation by operation element are completed.
  • the worker's work operation pattern can be confirmed by comparing the separated images, and accordingly, the start of the worker's motion elements is separated from the image separated by each action element. Since the operation not included between the part and the end, that is, unnecessary work operation can be identified, the design of an optimal manufacturing process is possible by deleting a section including unnecessary work operation.
  • the operation pattern analysis method using the panoramic image according to the present invention configured as described above, by analyzing the operation process of the operator directly from the operator's eyes by separating the operation pattern for each more accurate and detailed operation pattern analysis Not only can it be applied to efficient manufacturing process design, but also immediate modification and feedback is possible in case of problems in the work site, and efficient test process design is possible without quantitative process verification through test bed with actual equipment. Therefore, it has various advantages, such as it can be used in small and medium-sized companies that cannot easily decide on investment for process improvement.
  • the present invention relates to a method of analyzing a motion pattern using a panoramic image, and more particularly, to photograph a work process of a worker at a work site from a worker's point of view, and to panoramicize and analyze the work process.
  • the present invention relates to a method of analyzing a motion pattern using a panoramic image to be separated.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것으로, 보다 상세하게는 작업 현장에서의 작업자의 작업과정을 작업자의 시각에서 촬영하고, 이를 파노라마화 한 후 분석하여 일련의 작업과정을 동작요소별로 분리할 수 있도록 하는 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것이다. 본 발명은 작업자가 착용하는 헬멧에 설치된 카메라를 이용하여 작업자의 작업과정을 촬영하는 작업촬영단계와; 상기 작업촬영단계에서 촬영된 영상을 파노라마 영상으로 변환시키는 영상변환단계와; 변환된 영상에서 작업자의 손움직임을 추출하여 분석하는 손움직임 분석단계와; 상기 손움직임 분석단계에서 분석된 손움직임의 반복주기 단위로 영상을 분리하는 영상분리단계와; 반복주기 단위로 분리된 영상을 다시 동작요소별로 분리하는 동작요소 분리단계;를 포함하여 구성된 것을 특징으로 한다.

Description

파노라마 영상을 이용한 동작패턴 분석방법
본 발명은 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것으로, 보다 상세하게는 작업 현장에서의 작업자의 작업과정을 작업자의 시각에서 촬영하고, 이를 파노라마화 한 후 분석하여 일련의 작업과정을 동작요소별로 분리할 수 있도록 하는 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것이다.
최근 미국 의회조사국(CRS)에서 발표한 자료에 따르면 대한민국은 2012년도 기준으로 제조업 부가가치 생산액 부분에서 중국, 미국, 일본, 독일에 이어 세계 5위에 위치되어 있고, 제조업이 국가 전체 경제에서 차지하는 비율, 즉 제조업의 부가가치 비중은 중국에 이어 세계 2위를 차지하고 있다.
그리고, 제조업의 노동생산성 증가비율과 GDP 대비 제조업 투자비율에서는 독보적인 1위를 차지하고 있어 대한민국의 정부 및 기업에서 경제발전을 위해 가장 노력을 기울이고 있는 부분이 제조업임을 확인할 수 있다.
이러한 제조업의 경우 효율적인 제조공정이 시장에서의 경쟁력이며, 기업의 이익을 보장하는 요소이므로 효율적인 제조공정의 설계가 경쟁력 향상을 위해 최우선적으로 고려되어야 한다.
현재까지 알려진 효율적인 제조공정 설계를 위한 일반적인 방법은 동작분석기법이 적용된 영상기반 프로그램을 활용하는 것으로, 표준작업의 도출 및 편성, 자재, 부품, 작업자의 배치 등의 공정 개선안을 도출하고 이를 실제 설비가 투입된 테스트베드를 통해 정량적인 공정검증을 실시하는 것이다.
이와 같은 동작분석방법으로 대한민국 등록특허공보 제10-1245231호에는 본 출원인이 출원한 동영상을 이용한 동작분석방법 및 그 프로그램이 기록된 기록 매체가 게재되어 있는데, 상기 등록특허를 포함한 종래의 동작분석방법은 초기 동작촬영 및 공정검증을 위해 테스트베드의 설치가 필수적으로 수반되어야 하므로 자금 운영이 비교적 양호한 기업에서만 제한적으로 사용할 수 있다는 단점이 있다.
*전술한 바와 같이 GDP 대비 제조업 투자비율이 세계 1위에 위치하고는 있지만, 상당수의 중소기업은 자금운영 측면에서 공정개선을 위한 투자를 쉽게 결정하지 못하는 것이 현실이므로, 동작분석시스템을 통해 설계된 공정의 불확실성에 대한 리스크를 감수하면서 테스트 없이 바로 적용하거나, 공정개선을 위한 투자를 하지 못하게 되는 것이다.
즉, 기존의 동작분석방법 또는 동작분석시스템에 의한 제조공정의 설계는 실제 생산 설비를 설치하기 전까지 개선된 공정을 검증하는 것이 현실적으로 불가능하고, 공정검증 없이 생산설비를 설치할 경우 현장에서 문제점이 발견된다 하더라도 이를 수정하거나 동작분석시스템에 즉각적으로 피드백하는 것이 어렵다는 문제점이 있는 것이다.
본 발명은 상기와 같은 종래기술의 문제점들을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 실제 설비가 투입된 테스트베드를 통해 정량적인 공정검증 없이도 효율적인 제조공정 설계가 가능하도록 하여 공정개선을 위한 투자를 쉽게 결정하지 못하는 중소기업에서도 활용할 수 있도록 하는 파노라마 영상을 이용한 동작패턴 분석방법을 제공함에 있다.
또한, 본 발명은 작업자의 작업과정을 작업자의 시선에서 직접 촬영하여 동작요소별로 분리할 수 있도록 함으로써 보다 세부적인 동작패턴의 분석이 가능하여 효율적인 제조공정 설계에 적용할 수 있을 뿐만 아니라, 작업현장에서 문제점이 발생될 경우 즉각적인 수정 및 피드백이 가능한 파노라마 영상을 이용한 동작패턴 분석방법을 제공함에 다른 목적이 있다.
상기와 같은 목적들을 달성하기 위한 본 발명은,
작업자가 착용하는 헬멧에 설치된 카메라를 이용하여 작업자의 작업과정을 촬영하는 작업촬영단계와; 상기 작업촬영단계에서 촬영된 영상을 파노라마 영상으로 변환시키는 영상변환단계와; 변환된 영상에서 작업자의 손움직임을 추출하여 분석하는 손움직임 분석단계와; 상기 손움직임 분석단계에서 분석된 손움직임의 반복주기 단위로 영상을 분리하는 영상분리단계와; 반복주기 단위로 분리된 영상을 다시 동작요소별로 분리하는 동작요소 분리단계;를 포함하여 구성된 것을 특징으로 한다.
이때, 상기 작업촬영단계에서 사용되는 헬멧의 전방에는 작업자의 전면을 촬영하는 제1카메라가 설치되고, 헬멧의 좌,우 양측면에는 작업자의 좌,우 방향을 각각 촬영하는 제2 및 제3카메라가 설치된 것을 특징으로 한다.
또한, 상기 작업촬영단계에서는 작업자가 작업을 수행하는 작업대 상의 작업을 시작하는 위치에 이미지 마커를 표시하는 것을 특징으로 한다.
그리고, 상기 손움직임 분석단계는 파노라마 영상을 통해 확인되는 작업자의 손움직임 궤적을 2차원화하는 차원변환단계와, 2차원으로 변환된 손움직임 궤적을 이용한 수치해석을 통해 손움직임의 반복주기를 구하는 반복주기 연산단계를 포함하여 구성된 것을 특징으로 한다.
또한, 상기 영상분리단계에서는 반복주기별로 시작과 끝 부분에 여유구간을 포함시키는 것을 특징으로 한다.
그리고, 상기 동작요소 분리단계는 반복주기별로 분리된 영상 중 제1영상을 선정하여 동작요소를 분리하기 위한 제1임계점들을 설정하는 제1임계점 설정단계와, 상기 제1영상의 중심점을 기준으로 한 제1임계점들 사이의 공간적 관계를 연산하는 제1임계점 위치확인단계와, 상기 제1임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 제1임계점 분리단계와, 반복주기별로 분리된 영상 중 제n영상을 선정하여 제1임계점 위치확인단계에서 확인된 제1임계점의 위치를 기준으로 한 제n임계점을 설정하는 제n임계점 설정단계 및 상기 제n임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 제n임계점 분리단계를 포함하여 구성된 것을 특징으로 한다.
이때, 상기 동작요소 분리단계는 제n임계점 분리단계 이후에 분리된 동작요소의 시작부분과 끝부분 사이의 범위에 포함되지 않는 영상 구간을 삭제하는 마무리단계를 더 포함하는 것을 특징으로 한다.
본 발명에 따르면, 실제 설비가 투입된 테스트베드를 통해 정량적인 공정검증 없이도 단순한 과정에 의해 효율적인 제조공정 설계가 가능하도록 하여 공정개선을 위한 투자를 쉽게 결정하지 못하는 중소기업에서도 활용할 수 있는 뛰어난 효과를 갖는다.
또한, 본 발명에 따르면 작업자의 작업과정을 작업자의 시선에서 직접 촬영하여 동작요소별로 분리할 수 있도록 함으로써 보다 정확하고 세부적인 동작패턴의 분석이 가능하여 효율적인 제조공정 설계에 적용할 수 있을 뿐만 아니라, 작업현장에서 문제점이 발생될 경우 즉각적인 수정 및 피드백이 가능한 효과를 추가로 갖는다.
도 1은 본 발명에 따른 파노라마 영상을 이용한 동작패턴 분석방법을 나타낸 흐름도.
도 2는 도 1에 나타낸 본 발명 중 작업촬영단계의 준비과정을 개략적으로 나타낸 도면.
도 3은 도 2에 나타낸 본 발명 중 작업자가 착용하는 헬멧을 나타낸 사시도.
도 4는 도 1에 나타낸 본 발명 중 영상변환단계에서 변환된 파노라마 영상의 실시예를 나타낸 도면.
도 5 및 도 6은 도 1에 나타낸 본 발명 중 손움직임 분석단계의 반복주기 연산단계의 실시예를 나타낸 도면.
도 7의 (a),(b)는 도 1에 나타낸 본 발명 중 동작요소 분리단계의 과정을 나타낸 도면.
이하, 첨부된 도면을 참고로 하여 본 발명에 따른 파노라마 영상을 이용한 동작패턴 분석방법의 바람직한 실시예들을 상세히 설명하기로 한다.
도 1은 본 발명에 따른 파노라마 영상을 이용한 동작패턴 분석방법을 나타낸 흐름도이고, 도 2는 도 1에 나타낸 본 발명 중 작업촬영단계의 준비과정을 개략적으로 나타낸 도면이며, 도 3은 도 2에 나타낸 본 발명 중 작업자가 착용하는 헬멧을 나타낸 사시도이고, 도 4는 도 1에 나타낸 본 발명 중 영상변환단계에서 변환된 파노라마 영상의 실시예를 나타낸 도면이며, 도 5 및 도 6은 도 1에 나타낸 본 발명 중 손움직임 분석단계의 반복주기 연산단계의 실시예를 나타낸 도면이고, 도 7의 (a),(b)는 도 1에 나타낸 본 발명 중 동작요소 분리단계의 과정을 나타낸 도면이다.
본 발명은 작업 현장에서의 작업자의 작업과정을 작업자의 시각에서 촬영하고, 이를 파노라마화 한 후 분석하여 일련의 작업과정을 동작요소별로 분리할 수 있도록 하는 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것으로, 그 구성은 도 1에 나타낸 바와 같이, 작업촬영단계(S10), 영상변환단계(S20), 손움직임 분석단계(S30), 영상분리단계(S40) 및 동작요소 분리단계(S50)를 포함하여 이루어진다.
보다 상세히 설명하면, 상기 작업촬영단계(S10)는 동작패턴 분석을 위한 작업자의 작업과정을 촬영하는 단계에 관한 것으로, 보다 실재적인 작업과정의 촬영을 위해 작업자가 착용하는 안전모 등의 헬멧(10)에 카메라(12)를 설치하여 작업자의 시선에서 작업과정을 촬영할 수 있도록 구성되어 있다.
즉, 본 발명은 제조업 분야에서 효율적인 제조공정 설계를 통해 경쟁력을 향상시킬 수 있도록 한 것에 주목적이 있으므로 보다 정확한 작업 동작의 분석이 무엇보다도 중요하고, 그에 따라 작업자의 헬멧(10)에 카메라(12)를 설치함으로써 작업자의 시선에서 작업동작을 보다 정확히 촬영할 수 있도록 한 것이다.
이때, 도 3에 나타낸 바와 같이, 상기 헬멧(10)에는 총 3대의 카메라(12)가 설치될 수 있는데, 전방에 제1카메라(12a)가 설치되고, 좌, 우 양측으로 각각 제2 및 제3카메라(12b, 12c)가 설치되어 작업도중 작업자의 손이 이동하는 모든 방향을 촬영할 수 있도록 구성되어 있다.
또한, 작업자가 작업을 수행하는 작업대(20)에는 도 2에 나타낸 바와 같이, 이미지 마커(30)를 표시하는데, 상기 이미지 마커(30)는 작업자가 작업을 시작하는 위치에 표시되어 후술할 손움직임 분석단계(S30)와 영상분리단계(S40)에서의 동작 분석에 사용될 중심점의 역할을 하는 것이다.
이때, 상기 이미지 마커(30)는 촬영된 영상의 각도 변화를 용이하게 파악할 수 있도록 하기 위하여 사각형의 형상으로 표시되며, 작업자가 두 손을 함께 사용하는 경우, 두 손의 움직임을 각각 파악할 수 있도록 두 개의 이미지 마커(30)를 사용할 수도 있다.
한편, 상기 헬멧(10)에 장착되는 카메라(12)로는 촬영된 영상을 전기적인 신호로 변환하여 저장 및 전송이 용이한 CCD 카메라(Charge Coupled Device Camera) 또는 촬영영상의 전송이 용이한 IP카메라 등이 사용될 수 있다.
다음, 상기 영상변환단계(S20)는 작업촬영단계(S10)에서 촬영된 영상을 파노라마 영상으로 변환시킴으로써 작업자의 손 움직임을 보다 용이하게 분석할 수 있도록 하는 역할을 하는 것이다.
즉, 상기 작업촬영단계(S10)에서의 작업과정 촬영도중 작업자의 손 움직임이 헬멧(10)의 전면부에 설치된 제1카메라(12a)에 의한 촬영영상의 범위를 벗어난 경우, 제1카메라(12a)에 의한 촬영 영상만으로는 작업자의 동작 분석을 할 수 없게 되므로, 헬멧(10)에 설치된 제1,2,3카메라(12a,12b,12c)에 의해 촬영된 영상을 파노라마 영상으로 변환시킨 후 작업자의 전체적인 손동작을 분석하게 되는 것이다.
이때, 제1,2,3카메라(12a,12b,12c)에 의한 촬영영상을 파노라마 영상으로 변환시키는 것은 이미 개발되어 프로그램화되어 있어 PC 등을 통해 구현할 수 있고, 본 발명에서 권리로서 청구하고자 하는 바가 아니므로 이에 대한 상세한 설명은 생략하기로 한다.
다음, 상기 손움직임 분석단계(S30)는 영상변환단계(S20)에서 변환된 파노라마 영상으로부터 작업자의 손움직임을 추출하여 분석하는 단계에 관한 것으로, 차원변환단계(S31)와 반복주기 연산단계(S32)를 포함하여 이루어진다.
보다 상세히 설명하면, 상기 차원변환단계(S31)는 파노라마 영상을 통해 확인되는 작업자의 손움직임 궤적을 2차원화함으로써 작업자의 작업과정을 보다 단순화하여 분석할 수 있도록 하는 역할을 하는 것으로, 도 4에 나타낸 바와 같은, 파노라마 영상을 통해 확인되는 작업자의 손의 궤적에서 임의의 지점들을 추출하고, 임의의 지점들 사이의 거리, 각도, 시간을 측정하여 2차원으로 표시한다.
즉, 도 4에 나타낸 파노라마 영상에 표현된 작업자 손의 궤적에서 임의의 두 지점을 각각 H1, H2라 할 때, 파노라마 영상에 표현된 이미지 마커(30)를 원점으로 하는 가상의 좌표를 설정한 후, H1과 H2의 좌표 차이에 의한 기울기를 θ라 하고, H1으로부터 H2에 이르기까지 걸린 시간 즉, H1과 H2에서의 시간의 차이를 Δt라 하며, H1과 H2의 좌표에 의한 거리의 차를 Δℓ이라 정의할 수 있고, 이를 이용하면 파노라마 영상에 표현된 작업자 손의 궤적을 시간(t)에 따른 기울기(θ)의 변화에 대한 함수 또는 거리(ℓ)에 따른 기울기(θ)의 변화에 대한 함수와 같은 2차원 함수로 표현할 수 있게 되는 것이다.
다음, 상기 반복주기 연산단계(S32)는 차원변환단계(S31)에서 2차원으로 변환된 작업자의 손움직임 궤적을 수치해석을 통해 변환하여 반복주기를 구하는 단계에 관한 것으로, 작업자의 손움직임 궤적 분석을 통해 작업자의 손동작이 반복되는 주기를 구하는 것이다.
보다 상세히 설명하면, 반복주기를 구하기 위해서는 파노라마 영상에 표현된 작업자 손의 궤적에서 시간에 따른 기울기 변화의 누적분포를 이용할 수 있는데, 기울기 변화의 누적 분포를 그대로 표현할 경우 발산하게 되어 반복주기를 구할 수 없게 되므로 sin, cos함수를 이용하게 된다.
즉, 파노라마 영상을 통해 표현된 작업자 손의 궤적이 일정한 싸이클로 반복될 경우, 시간에 따른 기울기의 변화 또한 반복될 것이므로 이의 변화 확인할 경우 반복주기를 구할 수 있게 되는데, 시간에 따른 기울기 변화의 누적분포를 사용할 경우 지속되는 변화에 의해 발산할 것이므로 sin과 cos함수를 이용한 수치해석을 통해 누적분포가 발산하지 않고 일정한 패턴으로 반복될 수 있도록 연산하는 것이다.
이때, 상기와 같은 반복주기 연산을 위한 수치해석은 MATLAB 등의 수치해석프로그램을 통해 이루어질 수 있으며, 그 결과 도 5에 나타낸 바와 같은 반복주기를 모니터 등의 출력수단을 통해 확인할 수 있게 된다.
또한, 도 6은 상기 도 5에 나타낸 함수에서 기울기의 변화가 0인 지점을 기준으로 하여 임의의 두 지점 사이의 기울기의 변화가 +인 경우 +1로 표시하고, 임의의 두 지점 사이의 기울기의 변화가 -인 경우 -1로 표시하여 나타낸 것으로, 상기와 같이 표시할 경우 손움직임의 반복주기를 확인할 수 있음은 물론, 손움직임의 변화를 보다 용이하게 확인할 수 있게 된다.
다음, 상기 영상분리단계(S40)는 손움직임 분석단계(S30)에서 분석된 손의 움직임의 반복주기를 이용하여 파노라마 영상을 영상편집 프로그램을 이용하여 반복주기별로 분리하는 단계에 관한 것으로, 상기와 같은 영상의 분리를 통해 보다 세부적인 작업동작의 패턴 분석이 가능하게 된다.
이때, 상기 영상분리단계(S40)에서는 반복주기별로 분리되는 영상의 시작과 끝 부분에 여유 구간을 포함시킴으로써 전체 영상을 반복주기별로 보다 확실히 구분할 수 있도록 함과 동시에 분리된 영상들사이의 비교 분석을 보다 용이하게 할 수 있도록 하는 것이 바람직하다.
다음, 상기 동작요소 분리단계(S50)는 영상분리단계(S40)에서 반복주기별로 분리된 영상을 다시 동작요소별로 분리함으로써 작업자의 전체적인 작업과정을 동작요소별로 분석할 수 있도록 하는 역할을 하는 것으로, 제1임계점 설정단계(S51), 제1임계점 위치확인단계(S52), 제1임계점 분리단계(S53), 제n임계점 설정단계(S54) 및 제n임계점 분리단계(S55)를 포함하여 이루어진다.
보다 상세히 설명하면, 상기 제1임계점 설정단계(S51)는 영상분리단계(S40)에서 반복주기별 영상 중 하나의 영상(이하, '제1영상'이라고 한다)을 선정하여 동작요소를 분리하기 위한 제1임계점들을 설정하는 단계에 관한 것으로, 반복주기별로 분리된 영상을 터치스크린을 통해 시현하고, 작업과정에 능통한 관리자가 시현되는 영상을 확인하는 도중 동작요소별로 분리가 되는 임계점 부분을 터치하여 마킹하는 방식에 의해 제1임계점들을 설정할 수 있게 된다.
다음, 상기 제1임계점 위치확인단계(S52)는 제1임계점 설정단계(S51)에서 설정된 제1임계점들 사이의 공간적 관계를 설정하여 연산을 통해 제1임계점들의 위치를 확인하는 단계에 관한 것으로, 영상에 표시된 이미지 마커(30)를 중심점으로 하여 가상의 좌표를 설정한 후 제1임계점들 사이의 공간적 관계를 정의함으로써 제1임계점들의 위치를 연산할 수 있게 된다.
즉, 도 7의 (a)에 나타낸 바와 같이, 제1영상에서 선정된 제1임계점들을 각각 ①, ②, ③이라 하고, 중심점으로 사용할 이미지 마커(30)의 기울기를 θm이라 할 경우, 이미지 마커(30)를 기준으로 한 ①, ②, ③ 사이의 공간적 관계를 연산할 수 있으므로 제1임계점 ①에서 ②로 향하는 작업자의 제1동작과, 제1임계점 ②에서 ③으로 향하는 작업자의 제2동작을 정의할 수 있게 되는 것이다.
다음, 상기 제1임계점 분리단계(S53)는 제1영상에서 선정된 제1임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 단계에 관한 것으로, 영상편집 프로그램을 이용하여 제1임계점들 사이의 구간들을 각각 분리하면, 반복주기별로 분리되었던 영상을 다시 동작요소별로 분리할 수 있게 되어 작업자의 전체적인 작업과정을 최소단위로 세분화할 수 있게 된다.
다음, 상기 제n임계점 설정단계(S54)는 반복주기별로 분리된 영상 중 제1영상을 제외한 n번째 영상을 선정하여 n번째 영상에서의 제n임계점들을 설정하는 단계에 관한 것으로, 상기 제1임계점 위치확인단계(S52)에서 확인된 제1임계점들 사이의 공간적 관계를 참조하여 제n임계점들을 설정하게 된다.
보다 상세히 설명하면, 도 7의 (b)에 나타낸 바와 같이, n번째 영상, 즉 제n영상에서 확인되는 이미지 마커(30)의 기울기를 θmn이라 할 경우, 제1임계점 위치확인단계(S52)에서 확인된 제1영상에서의 이미지 마커(30) 기울기 θm과 이미지 마커(30)를 원점으로 한 가상의 좌표를 통해 연산된 제1임계점 ①, ②, ③ 사이의 공간적 관계를 좌표변환을 통해 제n영상에서 확인되는 이미지 마커(30)의 기울기 θmn에 대한 함수로 변환시킴으로써 각각 ①', ②', ③'로 표현되는 제n임계점들을 제n영상에 표시할 수 있게 되는 것이다.
다음, 상기 제n임계점 분리단계(S55)는 제n임계점 설정단계(S54)에서 설정된 제n임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 단계에 관한 것으로, 전술한 제1임계점 분리단계(S53)에서와 마찬가지로, 제n임계점 ①'에서 ②'로 향하는 작업자의 제1'동작과, 제n임계점 ②'에서 ③'로 향하는 작업자의 제2'동작으로 영상을 분리하게 된다.
따라서, 상기와 같은 과정을 통해 작업현장에서 이루어지는 작업자의 전체적인 동작 과정을 동작요소별로 분리할 수 있게 되고, 그에 따라 작업자의 동작요소별 작업패턴을 세부적으로 분석할 수 있게 되어 실제 설비가 투입된 테스트베드를 통해 정량적인 공정검증 없이도 효율적인 제조공정의 설계가 가능하게 된다.
한편, 상기 동작요소 분리단계(S50)는 마무리단계(S56)를 더 포함하여 구성될 수가 있는데, 상기 마무리단계(S56)는 제n임계점 분리단계(S55)까지 마무리되어 전체적인 작업과정 촬영 영상에 대한 반복주기별 분리 및 동작요소별 분리가 완료된 상태에서 설정된 동작요소의 시작부분과 끝부분 사이에 포함되지 않는 동작이 포함된 영상구간을 삭제하는 단계에 관한 것이다.
즉, 작업자의 전체적인 작업과정을 반복주기별 및 동작요소별로 분리한 경우 분리된 영상의 비교를 통해 작업자의 작업동작 패턴을 확인할 수 있고, 그에 따라 동작요소별로 분리된 영상에서 작업자의 동작요소 중 시작부분과 끝부분 사이에 포함되지 않은 동작, 즉 불필요한 작업동작을 확인할 수 있게 되므로 불필요한 작업동작이 포함된 구간을 삭제함으로써 최적의 제조공정의 설계가 가능하도록 하는 것이다.
전술한 바와 같이 구성된 본 발명에 따른 파노라마 영상을 이용한 동작패턴 분석방법에 의하면, 작업자의 작업과정을 작업자의 시선에서 직접 촬영하여 동작요소별로 분리할 수 있도록 함으로써 보다 정확하고 세부적인 동작패턴의 분석이 가능하여 효율적인 제조공정 설계에 적용할 수 있을 뿐만 아니라, 작업현장에서 문제점이 발생될 경우 즉각적인 수정 및 피드백이 가능하며, 실제 설비가 투입된 테스트베드를 통해 정량적인 공정검증 없이도 효율적인 제조공정 설계가 가능하도록 하여 공정개선을 위한 투자를 쉽게 결정하지 못하는 중소기업에서도 활용할 수 있는 등의 다양한 장점을 갖는 것이다.
전술한 실시예들은 본 발명의 가장 바람직한 예에 대하여 설명한 것이지만, 상기 실시예에만 한정되는 것은 아니며, 손움직임 분석단계에서의 분석을 위해 통상의 키보드나 마우스가 포함된 컴퓨터 또는 대체수단을 사용하고, 촬영된 동영상이나 분리된 파노라마 영상을 재생하는 수단으로 통상의 모니터를 사용하는 등 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변형이 가능하다는 것은 당업자에게 있어서 명백한 것이다.
본 발명은 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것으로, 보다 상세하게는 작업 현장에서의 작업자의 작업과정을 작업자의 시각에서 촬영하고, 이를 파노라마화 한 후 분석하여 일련의 작업과정을 동작요소별로 분리할 수 있도록 하는 파노라마 영상을 이용한 동작패턴 분석방법에 관한 것이다.

Claims (7)

  1. 작업자가 착용하는 헬멧(10)에 설치된 카메라(12)를 이용하여 작업자의 작업과정을 촬영하는 작업촬영단계(S10)와;
    상기 작업촬영단계(S10)에서 촬영된 영상을 파노라마 영상으로 변환시키는 영상변환단계(S20)와;
    변환된 영상에서 작업자의 손움직임을 추출하여 분석하는 손움직임 분석단계(S30)와;
    상기 손움직임 분석단계(S30)에서 분석된 손움직임의 반복주기 단위로 영상을 분리하는 영상분리단계(S40)와;
    반복주기 단위로 분리된 영상을 다시 동작요소별로 분리하는 동작요소 분리단계(S50);를 포함하여 구성된 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  2. 제 1항에 있어서,
    상기 작업촬영단계(S10)에서 사용되는 헬멧(10)의 전방에는 작업자의 전면을 촬영하는 제1카메라(12a)가 설치되고, 헬멧의 좌,우 양측면에는 작업자의 좌,우 방향을 각각 촬영하는 제2 및 제3카메라(12b,12c)가 설치된 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  3. 제 1항에 있어서,
    상기 작업촬영단계(S10)에서는 작업자가 작업을 수행하는 작업대(20) 상의 작업을 시작하는 위치에 이미지 마커(30)를 표시하는 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  4. 제 1항에 있어서,
    상기 손움직임 분석단계(S30)는 파노라마 영상을 통해 확인되는 작업자의 손움직임 궤적을 2차원화하는 차원변환단계(S31)와,
    2차원으로 변환된 손움직임 궤적을 이용한 수치해석을 통해 손움직임의 반복주기를 구하는 반복주기 연산단계(S32)를 포함하여 구성된 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  5. 제 1항에 있어서,
    상기 영상분리단계(S40)에서는 반복주기별로 시작과 끝 부분에 여유구간을 포함시키는 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  6. 제 1항에 있어서,
    상기 동작요소 분리단계(S50)는 반복주기별로 분리된 영상 중 제1영상을 선정하여 동작요소를 분리하기 위한 제1임계점들을 설정하는 제1임계점 설정단계(S51)와,
    상기 제1영상의 중심점을 기준으로 한 제1임계점들 사이의 공간적 관계를 연산하는 제1임계점 위치확인단계(S52)와,
    상기 제1임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 제1임계점 분리단계(S53)와,
    반복주기별로 분리된 영상 중 제n영상을 선정하여 제1임계점 위치확인단계에서 확인된 제1임계점의 위치를 기준으로 한 제n임계점을 설정하는 제n임계점 설정단계(S54) 및
    상기 제n임계점들 사이의 구간을 하나하나의 동작요소로 설정하여 분리하는 제n임계점 분리단계(S55)를 포함하여 구성된 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
  7. 제 6항에 있어서,
    상기 동작요소 분리단계(S50)는 제n임계점 분리단계(S55) 이후에 분리된 동작요소의 시작부분과 끝부분 사이의 범위에 포함되지 않는 영상 구간을 삭제하는 마무리단계(S56)를 더 포함하는 것을 특징으로 하는 파노라마 영상을 이용한 동작패턴 분석방법.
PCT/KR2015/004559 2014-08-11 2015-05-07 파노라마 영상을 이용한 동작패턴 분석방법 WO2016024698A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140103835A KR101610912B1 (ko) 2014-08-11 2014-08-11 파노라마 영상을 이용한 동작패턴 분석방법
KR10-2014-0103835 2014-08-11

Publications (1)

Publication Number Publication Date
WO2016024698A1 true WO2016024698A1 (ko) 2016-02-18

Family

ID=55304302

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/004559 WO2016024698A1 (ko) 2014-08-11 2015-05-07 파노라마 영상을 이용한 동작패턴 분석방법

Country Status (2)

Country Link
KR (1) KR101610912B1 (ko)
WO (1) WO2016024698A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106993138A (zh) * 2017-04-25 2017-07-28 努比亚技术有限公司 时间渐变图像拍摄装置及方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022225192A1 (ko) * 2021-04-22 2022-10-27 삼성전자 주식회사 커넥터의 연결을 확인하는 전자 장치와 이의 동작 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003308514A (ja) * 1997-09-01 2003-10-31 Canon Inc 情報処理方法及び情報処理装置
KR20070116410A (ko) * 2006-06-05 2007-12-10 엠텍비젼 주식회사 마커를 이용한 파노라마 촬영 방법 및 장치
KR101245231B1 (ko) * 2012-12-20 2013-03-25 주식회사 에스.제이테크 동영상을 이용한 동작분석방법 및 그 프로그램이 기록된 기록 매체
KR20130050670A (ko) * 2011-11-08 2013-05-16 재단법인대구경북과학기술원 카메라를 이용한 손동작 인식 방법 및 장치
US20140160250A1 (en) * 2012-12-06 2014-06-12 Sandisk Technologies Inc. Head mountable camera system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005172851A (ja) * 2003-12-05 2005-06-30 Sony Corp 画像表示装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003308514A (ja) * 1997-09-01 2003-10-31 Canon Inc 情報処理方法及び情報処理装置
KR20070116410A (ko) * 2006-06-05 2007-12-10 엠텍비젼 주식회사 마커를 이용한 파노라마 촬영 방법 및 장치
KR20130050670A (ko) * 2011-11-08 2013-05-16 재단법인대구경북과학기술원 카메라를 이용한 손동작 인식 방법 및 장치
US20140160250A1 (en) * 2012-12-06 2014-06-12 Sandisk Technologies Inc. Head mountable camera system
KR101245231B1 (ko) * 2012-12-20 2013-03-25 주식회사 에스.제이테크 동영상을 이용한 동작분석방법 및 그 프로그램이 기록된 기록 매체

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106993138A (zh) * 2017-04-25 2017-07-28 努比亚技术有限公司 时间渐变图像拍摄装置及方法

Also Published As

Publication number Publication date
KR20160019610A (ko) 2016-02-22
KR101610912B1 (ko) 2016-04-12

Similar Documents

Publication Publication Date Title
JP5525202B2 (ja) 動作分析装置、動作分析方法及び動作分析プログラム
JP6622503B2 (ja) カメラモデルパラメータ推定装置及びそのプログラム
JP5586765B2 (ja) カメラキャリブレーション結果検証装置および方法
CN103292695B (zh) 一种单目立体视觉测量方法
CN106426161A (zh) 在引导装配环境中将机器视觉坐标空间关联在一起的系统和方法
CN102589443B (zh) 一种基于图像识别的管片拼装质量的智能检测系统及其检测方法
JP5079547B2 (ja) カメラキャリブレーション装置およびカメラキャリブレーション方法
WO2016024698A1 (ko) 파노라마 영상을 이용한 동작패턴 분석방법
WO2020218734A1 (ko) 보철물 설계 시 언더컷 영역 표시방법 및 이를 수행하는 보철 캐드 장치
JP6758237B2 (ja) 情報処理装置、情報処理方法、及び、プログラム
Tushev et al. Photogrammetric system accuracy estimation by simulation modelling
JP4550081B2 (ja) 画像測定方法
WO2022260256A1 (ko) 안전 진단 대상 건축물에서의 균열선에 대한 연속 촬영 이미지를 이용한 균열선 길이 연산 방법 및 안전 진단 대상 건축물에서의 균열선에 대한 연속 촬영 이미지를 이용한 균열선 길이 연산 방법을 실행시키는 프로그램이 설치된 작업자 단말기
KR101637553B1 (ko) 파노라마 영상을 이용한 증강현실 교육 컨텐츠 제작방법
CN212569866U (zh) 钻孔岩芯相互关系数据的自动采集系统
CN108592789A (zh) 一种基于bim和机器视觉技术的钢结构工厂预拼装方法
WO2016144027A1 (ko) 레이저 빔을 이용한 물체의 치수 정보 획득 장치
JP4359939B2 (ja) 画像測定装置
CN113554747A (zh) 一种基于三维模型的无人机巡检数据的查看方法
JP6736204B2 (ja) 作業支援方法、作業支援プログラム及び作業支援装置
CN110345920A (zh) 一种基于北斗gnss和bim的现场和模型影像自动同步方法
WO2014171749A1 (ko) 스마트 디바이스를 이용한 시설물 정보 입력 장치 및 방법과 이를 실행하기 위한 프로그램이 기록된 기록매체
JP6646562B2 (ja) 画像測量方法、画像測量装置及び画像測量プログラム
Seppänen et al. Reality Capture (RECAP) project final report
CN110288595B (zh) 隧道超欠挖检测方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15832108

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15832108

Country of ref document: EP

Kind code of ref document: A1