KR20090013471A - 구조광을 이용한 토공량 산출 장치 및 방법 - Google Patents

구조광을 이용한 토공량 산출 장치 및 방법 Download PDF

Info

Publication number
KR20090013471A
KR20090013471A KR1020070077630A KR20070077630A KR20090013471A KR 20090013471 A KR20090013471 A KR 20090013471A KR 1020070077630 A KR1020070077630 A KR 1020070077630A KR 20070077630 A KR20070077630 A KR 20070077630A KR 20090013471 A KR20090013471 A KR 20090013471A
Authority
KR
South Korea
Prior art keywords
camera
structured light
work area
module
light
Prior art date
Application number
KR1020070077630A
Other languages
English (en)
Other versions
KR100916638B1 (ko
Inventor
김영석
한승우
권순욱
이준복
오세욱
안지성
유병인
Original Assignee
인하대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인하대학교 산학협력단 filed Critical 인하대학교 산학협력단
Priority to KR1020070077630A priority Critical patent/KR100916638B1/ko
Priority to US12/304,074 priority patent/US20100245542A1/en
Priority to PCT/KR2008/001678 priority patent/WO2009017295A1/en
Priority to JP2009525512A priority patent/JP2009541778A/ja
Publication of KR20090013471A publication Critical patent/KR20090013471A/ko
Application granted granted Critical
Publication of KR100916638B1 publication Critical patent/KR100916638B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/28Measuring arrangements characterised by the use of optical techniques for measuring areas

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Operation Control Of Excavators (AREA)
  • Component Parts Of Construction Machinery (AREA)

Abstract

본 발명은 구조광을 이용한 토공량 산출 장치 및 방법에 관한 것으로서, 더욱 상세하게는 굴삭기의 버켓으로 굴삭된 토공량을 3D 지반 형상 이미지를 통하여 산출할 수 있고, 작업이 완료된 지역에 대한 최종 토공량을 정확하게 산출할 수 있으며, 실시간 3 차원 지반 형상 이미지로 최적의 토공 작업 계획 시스템을 개발 및 활용할 수 있는 구조광을 이용한 토공량 산출 장치 및 방법을 제공하기 위한 것이다.
그 기술적 구성은 굴삭기 암의 각 절곡점에 구비되어 굴삭기 암의 위치 및 굴절각을 감지하여 출력하는 제어 센서부; 상기 제어 센서부의 출력으로 굴삭기 암의 일측 단부에 구비된 버켓의 작업 영역의 영상을 촬영하도록 제어 신호를 출력하고, 촬영된 영상을 3 차원 이미지로 변환하여 토공량을 산출하는 마이크로 컨트롤러; 상기 제어 신호로 상기 작업 영역을 조사하도록 광원이 온(On)되는 조명 모듈; 상기 제어 신호로 상기 작업 영역을 촬영하는 구조광 모듈; 을 포함한다.
굴삭기, 지반 형상, 이미지, 구조광, Structured Light, 토공량, 버켓

Description

구조광을 이용한 토공량 산출 장치 및 방법{Device for Computing the Excavated Soil Volume Using Structured Light Vision System and Method thereof}
도 1은 본 발명에 따른 구조광을 이용한 토공량 산출 장치를 개략적으로 도시한 블록구성도.
도 2는 본 발명에 따른 구조광을 이용한 토공량 산출 방법을 개략적으로 도시한 흐름도.
도 3은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 조명 모듈을 개략적으로 도시한 도.
도 4는 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 조명 모듈의 실시예를 개략적으로 도시한 도.
도 5는 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈을 개략적으로 도시한 도.
도 6은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈의 기하구조를 개략적으로 도시한 도.
도 7은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈 구동 주기를 개략적으로 도시한 도.
도 8은 본 발명에 따른 구조광을 이용한 토공량 산출 장치가 배치된 실시예를 도시한 도.
<도면의 주요 부분에 대한 도면 부호의 간단한 설명>
1: 구조광을 이용한 토공량 산출 장치
10: 제어 센서부 20: 마이크로 컨트롤러
30: 조명 모듈 40: 구조광 모듈
41: 카메라 43: 프로젝터
본 발명은 구조광을 이용한 토공량 산출 장치 및 방법에 관한 것으로, 특히 실시간으로 인식한 3 차원의 지반 형상 이미지를 비교하여 토공량을 산출할 수 있는 구조광을 이용한 토공량 산출 장치 및 방법에 관한 것이다.
일반적으로, 건설 공사의 토공 작업은 굴삭기를 이용하여 굴삭 작업을 계획하고, 측량 말뚝을 설치하여 굴삭 위치를 선정하며, 굴삭 작업을 수행하고 나서 측량 말뚝의 재설치가 요구되지 않는 경우에는 굴삭 작업을 진행하고, 계획된 레벨에 도달하면 굴삭 작업에 따른 토공량을 운반할 트럭 수를 체크하며, 이를 통하여 최 종적인 토공량을 산출할 수 있게 된다.
그리고, 토량 배분 및 운반 계획은 설계자의 경험적인 판단에 의하여 수립되어 장비 운전자가 토공 작업을 수행하며, 공사 현장에 투입된 측량 기사가 말뚝을 삽입하여 작업 범위를 지정하고, 이를 기준으로 장비 운전자가 굴삭 작업을 진행하는 방식으로서, 노동 인력에 전적으로 의존하였다.
또한, 토공 작업에 필요한 굴삭기, 그레이더(Grader) 등의 건설 장비의 부품의 기능, 크기, 성토력 등의 하드웨어적인 발전은 지속적으로 이루어지는 반면, 토공량 산출 등의 소프트웨어적인 발전에 있어서는 단순 연산을 직관적으로 임의로 사용하며, 토공량 산출의 경우에는 토사 운반 트럭의 수에 트럭의 용량을 단순 곱 연산하는 방법이 이용되고 있다.
예를 들어, 1 톤 트럭 6 대가 굴삭한 흙을 싣고 출발한 경우에는, 1 톤 * 6 = 6 톤의 토공량을 산출하는 방법이 이용된다.
그러나, 토사 운반 트럭에 실리는 토사량은 항상 일정하지 않고, 굴삭기 운전자의 작업 숙련도에 따라 토사량이 변할 수 있으며, 산출 방식에 있어 정확성 및 신뢰도가 저하되었고, 이에 따라 작업 효율성이 감소하는 등의 문제점이 있었다.
본 발명은 상기한 문제점을 해결하기 위하여 안출한 것으로, 굴삭기의 버켓으로 굴삭된 토공량을 실시간으로 인식하여 3D 지반 형상 이미지를 통해 산출할 수 있는 구조광을 이용한 토공량 산출 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명의 다른 목적은 작업이 완료된 지역에 대한 최종 토공량을 정확하게 산출할 수 있는 구조광을 이용한 토공량 산출 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명의 다른 목적은 실시간 3 차원 지반 형상 이미지로 최적의 토공 작업 계획 시스템을 개발 및 활용할 수 있는 구조광을 이용한 토공량 산출 장치 및 방법을 제공하는 것을 목적으로 한다.
상기한 바와 같은 목적을 달성하기 위하여 본 발명은 굴삭기 암의 각 절곡점에 구비되어 굴삭기 암의 위치 및 굴절각을 감지하여 출력하는 제어 센서부; 상기 제어 센서부의 출력으로 굴삭기 암의 일측 단부에 구비된 버켓의 작업 영역의 영상을 촬영하도록 제어 신호를 출력하고, 촬영된 영상을 3 차원 이미지로 변환하여 토공량을 산출하는 마이크로 컨트롤러; 상기 제어 신호로 상기 작업 영역을 조사하도록 광원이 온(On)되는 조명 모듈; 상기 제어 신호로 상기 작업 영역을 촬영하는 구조광 모듈; 을 포함한다.
그리고, 상기 조명 모듈은 작업 영역의 거리에 따라 광원의 집광도를 조절할 수 있는 초점 조절 장치; 를 더 구비하는 것을 특징으로 한다.
더불어, 상기 초점 조절 장치는 상기 조명 모듈의 광원의 집광을 조절할 수 있는 렌즈로 구비되는 것을 특징으로 한다.
여기서, 상기 렌즈는 광원의 집광을 조절할 수 있도록 이동가능한 것을 특징으로 한다.
이때, 상기 조명 모듈의 광원은 태양광 보다 광도가 높은 램프인 것을 특징으로 한다.
그리고, 상기 램프는 금속 할로겐 램프인 것을 특징으로 한다.
더불어, 상기 조명 모듈의 광원은 태양광 보다 광도가 높도록 다수개의 램프를 더 구비하는 것을 특징으로 한다.
또한, 상기 광원의 광도는 상기 램프 수에 선형적으로 비례하는 것을 특징으로 한다.
그리고, 상기 구조광 모듈은 상기 작업 영역의 촬영 주기 간에 상기 제어 센서부의 출력을 이용하여 작업 영역을 입력받아 상기 카메라를 좌우, 상하로 이동할 수 있는 카메라 구동장치; 를 더 포함하는 것을 특징으로 한다.
이때, 상기 카메라 구동장치는 좌우로 이동하는 작업 영역을 따라 카메라를 좌우로 이동시킬 수 있는 패닝(Panning) 기능과, 상하로 이동하는 작업 영역을 따라 카메라를 상하로 이동시킬 수 있는 틸팅(Tilting) 기능을 구비하는 것을 특징으로 한다.
여기서, 상기 카메라는 상기 작업 영역과 카메라 간의 거리에 따라 앞뒤로 조절될 수 있는 줌 카메라인 것을 특징으로 한다.
한편, 굴삭기 암의 각 절곡점에 구비된 제어 센서부에서 굴삭기 암의 상대 위치 및 굴절각을 마이크로 컨트롤러로 출력하는 제1 단계; 상기 상대 위치 및 굴 절각으로 굴삭기 버켓의 3차원 위치를 산출하여 버켓의 작업 영역을 촬영할 수 있도록 카메라 및 조명 모듈을 조정하는 제2 단계; 굴삭기의 굴삭이 진행되면 버켓의 작업 영역을 조사하도록 조명 모듈을 온(On)시켜 구조광 모듈로 작업 영역의 영상을 획득하는 제3 단계; 획득된 작업 영역의 영상 간의 지반 형상을 비교하여 토공량을 산출하는 제4 단계; 를 포함하여 이루어진다.
이하, 본 발명에 따른 실시예를 첨부된 예시도면을 참고로 하여 상세하게 설명한다.
도 1은 본 발명에 따른 구조광을 이용한 토공량 산출 장치를 개략적으로 도시한 블록구성도이고, 도 2는 본 발명에 따른 구조광을 이용한 토공량 산출 방법을 개략적으로 도시한 흐름도이다.
도면에서 도시하고 있는 바와 같이, 본 발명에 의한 구조광을 이용한 토공량 산출 장치(1)는 제어 센서부(10)와 마이크로 컨트롤러(20)와 조명 모듈(30)과 구조광 모듈(40)을 포함하여 이루어진다.
여기서, 상기 구조광을 이용한 토공량 산출 장치(1)는 굴삭기에 구비되어, 굴토된 토공량을 산출하도록 실시간 지반 형상을 촬영하고, 이를 3D 지반 형상 이미지로 변환시켜 이전 3D 지반 형상 이미지와 현재 3D 지반 형상 이미지의 비교 후, 토공량을 산출할 수 있도록 이루어진다.
그리고, 제어 센서부(10)는 굴삭기의 암(Arm)의 절점에 구비되고, 암의 이동 및 굴절각 등을 감지하고, 이에 따라 굴삭기 암(Arm)의 일측 단부에 구비된 버 켓(Bucket)의 위치를 파악할 수 있도록, 각 절점의 굴절각 및 위치를 실시간으로 감지하고, 굴삭기 암(Arm)의 각 절점 굴절각 및 위치 데이터를 상기 마이크로 컨트롤러(20)로 전송한다.
여기서, 제어 센서부(10)는 일정 주기를 가지고 상기 굴절각 및 위치 데이터를 감지하도록 이루어지는 것이 바람직한데, 예를 들어 마이크로 컨트롤러(20)에서 약 0.5초 단위의 펄스 또는 PWM 신호를 이용하여 주기적으로 데이터를 업데이트하도록 한다.
바람직하게는, 상기 업데이트된 굴절각 및 위치 데이터를 굴토 작업이 시작되지 않았으면 임시적으로 저장하고, 굴토 작업이 시작되는 경우에는 마이크로 컨트롤러(20)의 제어에 반영시켜 조명 모듈(30) 및 구조광 모듈(40)을 구동한다.
이때, 구조광 모듈(40) 및 조명 모듈(30)은 굴토 작업이 시작되는 경우에 굴토 작업이 발생하는 작업 영역을 촬영하고, 광원을 통하여 작업 영역으로 빛을 조사해야하므로, 상기 굴절각 및 위치 데이터를 통하여 산출된 버켓의 현재 위치 및 버켓이 작업하는 영역을 촬영하고, 광원으로 작업 영역에 빛을 조사하도록 제어되는 것이 바람직하다.
마이크로 컨트롤러(20)는 상기 제어 센서부(10)로부터 입력된 감지 데이터와 현재 데이터와 이전 데이터의 비교 및 3D 이미지를 저장할 수 있는 RAM 과, 제어 프로그램이 입력되는 ROM과, 제어 프로그램 및 데이터를 이용하여 각 구성 요소를 제어하고, 3D 이미지 분석을 통하여 토공량을 산출할 수 있는 CPU가 내장된 컨트롤 러를 포함하는 것이 바람직하다.
그리고, 마이크로 컨트롤러(20)는 상기 제어 센서부(10)로부터 입력된 굴삭기 암(Arm)의 각 절점의 위치 및 굴절각을 입력받고, 이전 데이터와 비교하여 현재 굴삭기 암(Arm) 단부에 위치된 버켓(Bucket)의 위치를 파악하고, 버켓이 굴토하고 있는 작업 영역의 이미지를 촬영하도록 조명 모듈(30)과 구조광 모듈(40)을 제어한다.
바람직하게는, 상기 마이크로 컨트롤러(20)는 상기 조명 모듈(30)과 구조광 모듈(40)과 제어 센서부(10)와의 데이터 송, 수신이 가능한 위치인 중심부에 위치하는 것이 바람직한데, 상기 위치는 굴삭기의 구조에 따라 변경될 수 있다.
조명 모듈(30)은 상기 마이크로 컨트롤러(20)에서 굴삭기 암(Arm)의 위치 및 굴절각을 통하여 산출한 버켓(Bucket)의 위치가 굴삭 작업을 하는 위치인 경우에는, 버켓이 작업하는 영역을 구조광 모듈(40)이 촬영할 수 있도록 상기 구조광 모듈(40)이 구동되기 전에 구동(Turn On)되도록 이루어진다.
여기서, 조명 모듈(30)은 상기 마이크로 컨트롤러(20)에서 굴삭기 암(Arm)의 위치 및 굴절각을 통하여 산출한 버켓(Bucket)의 위치 및 버켓이 작업하는 영역을 비추도록 이동 및 회전하는 것이 바람직하다.
그리고, 조명 모듈(30)과 버켓이 작업하는 영역의 거리가 광원이 도달할 수 있는 거리를 초과할 경우에는, 상기 조명 모듈(30)의 광원을 집중(Focusing)시킬 수 있는 광학계를 이용하는데, 상기 광학계를 이동함으로써 광원이 도달할 수 있는 거리를 조절할 수 있으며, 이를 이용하여 작업하는 영역의 거리가 달라짐에 따른 거리를 조절할 수 있다.
구조광 모듈(Structured Light Module, 40)은 카메라(41)와 프로젝터(43)를 포함하여 이루어지는데, 상기 카메라(41)와 프로젝터(43)는 상기 마이크로 컨트롤러(20)로 입력된 굴삭기 암(Arm)의 위치 및 굴절각을 통하여 산출된 작업 영역을 촬영하도록 이동된다.
여기서, 프로젝터(43)는 코드화된 패턴이 포함된 광을 촬영 객체인 작업 영역을 비추도록 이루어지고, 작업 영역 표면의 한 점에 대한 3차원 위치 정보는 프로젝터(43)의 광(光)과, 카메라(41)의 점의 일치에 의하여 이루어진다.
그래서, 다수의 선을 투영시켜 데이터 수집 속도를 증가시키도록 이루어지는데, 이를 위하여 코드화된 패턴이 이용되고, 이에 따라 대응점의 정확도를 증가시킬 수 있다.
또한, 상기 마이크로 컨트롤러(20)의 제어로 작업 영역을 비추도록 카메라(41)를 조정하는데, 좌우 조절(Panning), 상하 조절(Tilting), 앞뒤 조절(Zooming) 등을 굴삭 작업 전에 수행하여 정확한 작업 영역을 촬영할 수 있도록 구동된다.
이를 위하여, 카메라(41)를 좌우 조절, 상하 조절할 수 있는 카메라 구동장치를 더 포함하는 것이 바람직하고, 앞뒤 조절인 줌(Zoom) 기능을 가진 카메라(41)로 구비하는 것이 바람직하다.
따라서, 구조광 모듈(40)은 3D 이미지로 작업 영역을 촬영하고, 이를 마이크로 컨트롤러(20)로 전송하며, 마이크로 컨트롤러(20)는 이전 3D 이미지와 현재 3D 이미지를 비교하여 지반 형상에 따른 토공량이 어느 정도되는지를 산출할 수 있게 된다.
이하, 본 발명에 따른 구조광을 이용한 토공량 산출 방법을 설명한다.
우선, 제어 센서부(10)에서 굴삭기 암(Arm)의 상대적 위치와 굴절 각도를 마이크로 컨트롤러(20)로 전송한다(S10).
여기서, 상대적 위치와 굴절각도란 제어 센서부(10)는 일정 주기를 가지고 감지 데이터를 전송하기 때문에, 이전 감지 데이터와 현재 감지 데이터의 비교를 통하여 상대적인 굴삭기 암(Arm)의 위치와 굴절 각도를 의미한다.
또한, 마이크로 컨트롤러(20)는 굴삭기 암(Arm)의 상대적 위치 및 굴절 각도로 굴삭기 버켓의 3차원 위치를 산출한다(S20).
이때, 3차원 위치의 산출로 굴삭 작업이 진행되는 지의 여부를 확인하는데(S30), 3차원 위치를 통하여 굴삭 작업이 진행되는 버켓의 위치로 판명되는 경우에는 작업 영역을 촬영하기 위하여 조명 모듈(30)을 턴온(Turn On)시키고, 조명 모듈(30)로 충분히 밝아진 작업 영역에 구조광 모듈(40)로 작업 영역을 촬영한다(S51).
여기서, 작업 영역을 촬영하기 위하여, 굴삭 작업이 진행되기 전에 구조광 모듈(40)로 마이크로 컨트롤러(20)에서 감지 데이터를 전송하고, 이에 따라 구조광 모듈(40)이 작업 영역을 촬영할 있도록, 카메라 구동장치를 이용하여 카메라(41)를 좌우, 상하 조절(Panning, Tilting)하고, 줌 카메라를 이용하여 초점 조절(Zoom)을 완료시키며, 조명 모듈(30)을 턴온(Turn On)시켜서 광학계를 이용한 광원의 조사 거리 조절을 위한 광원의 집광도 조절을 완료시키는 것이 전제된다.
또한, 구조광 모듈(40)은 작업 영역을 촬영한 데이터를 마이크로 컨트롤러(20)로 전송하고(S53), 이는 마이크로 컨트롤러(20)에서 3D 지반 형상 이미지로 변환된다(S61).
그리고, 이전 3D 지반 형상 이미지와 현재 3D 지반 형상 이미지를 비교하는데(S63), 이전 이미지란 1 회의 굴삭 작업이 발생하기 전의 이미지를 의미하고, 현재 3D 이미지란 1 회의 굴삭 작업이 발생하고 난 후의 이미지를 의미하며, 즉 현재 촬영한 이미지가 3 번째 굴삭 작업의 이미지라면 이전 이미지는 2 번째 굴삭 작업의 이미지를 의미한다.
따라서, 1 회의 굴삭 작업에 따른 토공량을 산출할 수 있으며, 굴삭 작업이 종료될 때까지의 토공량을 산출하고, 이를 합산하면 작업한 전체 토공량 및 지반 형상을 알 수 있게된다.
그리고, 굴삭 작업이 종료되는 작업 완료 상황인 경우에는 상기 과정을 종료시킨다(S70).
이때, 상기 단계(S30)에서 굴삭 작업이 진행되지 않았으면, 계속적으로 제어 센서부(10)에서 데이터를 감지 및 업데이트 하는 단계(S10, S20)를 반복한다.
또한, 상기 단계(S70)에서 굴삭 작업이 종료되지 않았으면, 계속적으로 각 토공량을 산출할 수 있도록 상기 단계(S10)로 회귀하여 본 발명에 따른 구동 과정을 반복하도록 한다.
도 3은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 조명 모듈을 개략적으로 도시한 도이고, 도 4는 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 조명 모듈의 실시예를 개략적으로 도시한 도이다.
도면에서 도시하고 있는 바와 같이, 조명 모듈(30)은 굴삭기의 조정석 상부면에 위치하여 작업 영역을 비출 수 있도록 구비되는 것이 바람직하다.
그리고, 상기 조명 모듈(30)과 버켓 간의 거리(w) 또는 조명 모듈(30)과 작업 영역 간의 거리(w')를 조정할 수 있는 변수는 다음과 같다.
여기서, 구조광 모듈(40)의 프로젝터(43)에서 투사되는 광을 카메라(41)가 인식할 수 있을 정도가 되어야 하는데, 실외에서 작업하는 굴삭기의 경우에는 태양광보다 밝은 광원을 설치해야 한다.
따라서, 태양광보다 밝은 광원을 설치하기 위한 방법 중 하나는 금속 할로겐 조명을 사용하는 것인데, 예를 들면, 초기 광량은 평균 3000 [lm], 채도는 태양광의 약 두 배인 7000 [K], 전력원은 직류 350 [W] 를 이용하는 것이 바람직하다.
다른 방법은 금속 할로겐을 다수개 구비하거나 또는 태양광보다 밝은 조명을 구동시킬 수 있도록 조명을 다수개 구비하는 것인데, 밝기는 조명 개수에 선형적(Linear)으로 증가한다.
또 다른 방법은 조명 모듈(30)과 작업 영역 간 거리가 길 경우에, 이를 증가시키기 위하여 즉, 측정 거리를 증가시킬 수 있도록 조명을 집중시키는 광학계를 이용하는 것이다.
여기서, 조명의 밝기는 거리에 반비례하므로, 초점조절장치와 같은 렌즈를 이용하여 빛을 집중시키고, 렌즈를 이동시켜 빛이 비추는 영역 및 거리를 변경시킬 수 있다.
도 5는 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈을 개략적으로 도시한 도이고, 도 6은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈의 기하구조를 개략적으로 도시한 도이며, 도 7은 본 발명에 따른 구조광을 이용한 토공량 산출 장치의 구조광 모듈 구동 주기를 개략적으로 도시한 도이다.
도면에서 도시하고 있는 바와 같이, 구조광 모듈(40)은 카메라(41)와 프로젝터(43)를 포함하여 이루어진다.
여기서, 토공 작업 중 실시간으로 변화하는 지반 형상의 인식을 위해서는 구조광(Structured Light) 방식을 이용한다.
구조광(Structured Light) 방식이란, 프로젝터(43)를 통하여 일정한 규칙의 패턴이 포함된 광(光)을 3 차원으로 복원하려는 객체에 투영하고, 이를 카메라(41)로 촬영한 다음, 이 영상을 이용하여 대응 관계를 산출하고, 이에 따라 3 차원 이미지 영상을 획득하는 방식이다.
또한, 구조광 모듈(40)은 코드화된 패턴이 포함된 광을 투사하는 프로젝터(43)와, 이에 따른 이미지를 촬영하는 카메라(41)로 구성되고, 프로젝터(43)에서 투사된 선 l 은 표면의 특징을 반영하는 곡선 L 의 표면을 가로지른다.
그리고, 곡선 L 과 프로젝터(43)의 중심 P 는 빛 평면인 광면을 형성하고, 곡선 위의 한 점은 측정된 점으로 카메라(41) 면에 표현되는데, 촬영 객체 표면의 한 점에 대한 3 차원 위치 정보는 광 면과 카메라(41) 평면 상에 투영된 점들의 일치에 의하여 결정된다.
따라서, 완전한 3 차원 이미지를 얻기 위해서는 1 회에 다수의 선을 투사하는 것이 필수적인데, 이를 위해서는 프로젝터(43)로부터 투사된 광에 코드화된 패턴이 포함되는 것이 요구된다.
한편, 토공사의 굴삭 작업 시, 변화되는 실시간 지반 형상을 획득하기 위한 기술 구현의 전제 조건은 1 회의 굴삭 작업이 이루어지는 평균 15 초 이내에 신속한 3 차원 형상 구현이 이루어져야 한다는 것이다.
여기서, 구조광 모듈(40)을 통하여 영상을 얻고, 이를 분석하여 3 차원 지반 형상 이미지를 구현하는데, 지반 형상 이미지 구현에 약 5 초 미만이 소요되며, 1 회 굴삭 작업의 시간인 평균 10 - 15 초에 비하여 충분히 짧은 시간이며, 이를 통하여 실시간 변화 형상은 적용 가능하다.
그리고, 지반 형상 촬영 중, 작업 또는 이동으로 인한 진동이 발생하였을 경우에는 카메라(41)의 [ms] 단위의 셔터 스피드(Shutter Speed)를 이용하여 순간적 으로 촬영 및 영상을 획득하므로, 장비의 진동에 따른 부정확한 영상 획득에 영향을 받지 않는다.
더불어, 카메라(41)의 앞뒤 조절(Zooming) 및 초점 조절(Focusing)을 카메라(41)에 적용하고, 작업 영역인 지반 형상까지의 거리에 따라 적절하게 앞뒤로 조절하고, 굴삭되는 위치의 변경에 따른 카메라(41)의 위치 조절을 위하여, 좌우 조절(Pannig), 상하 조절(Tilting) 등을 적용한다.
본 발명의 실시예에서는 좌우 조절, 상하 조절 장치로는 1 초당 500mm 가 좌우, 상하로 이동되는 장치를 이용한다.
본 발명의 실시예에서는 카메라(41)의 셔터 스피드가 1/60 - 1/10000 [sec] 로 설정하여, 60 Hz - 10 KHz 의 진동에도 영향을 받지 않고 영상을 획득할 수 있도록 하는 것이 바람직하다.
이하, 본 발명의 실시예에 따른 작동 과정을 설명한다.
우선, 굴삭기로 작업 영역에 버켓으로 굴토되어 촬영이 끝난 후에는, 다시 버켓으로 굴토 작업이 이루어지기 전까지는 영상 획득이 필요없고, 이에 따라 굴삭된 흙이 트럭에 상차되는 작업까지 카메라(41)는 지속적으로 버켓의 목표 위치에 따라 작업 영역을 촬영하기 위하여, 제어 센서부(10)로부터 버켓의 작업 영역에 대한 데이터를 마이크로 컨트롤러(20)에서 수신받고, 이를 구조광 모듈(40)로 전달하여 정확하게 카메라(41)의 위치 조정이 가능토록 카메라 구동장치를 구동한다.
이에 따라, 카메라 구동장치는 카메라(41)가 좌우 조절(Panning), 상하 조절(Tilting)이 가능하도록 이루어진다.
그리고, 카메라(41)와, 촬영할 작업 영역 간의 거리가 일정 거리를 초과 또는 미만이어서 광원의 빛이 정확한 영역을 비추지 못할 경우에는, 빛을 집중시키는 렌즈와 같은 광학계를 이용하여 초점 조절(Focusing)이 가능하도록 한다.
더불어, 상기 카메라(41)를 줌 카메라로 구비하여 피사체를 순간적으로 줌(Zoom)시킬 수 있도록 하는데, 예를 들면 카메라 구동장치에서 피사체의 이동에 따라 좌우 조절, 상하 조절을 마치고 나면, 줌 기능을 구동시켜 더욱 정확한 영역을 촬영할 수 있도록 한다.
그리고, 흙을 운반 트럭에 상차시키는 동안에 상기 카메라 구동장치, 줌 카메라, 광학계를 이용한 초점 조절 등의 각 조절 과정을 완료하고, 굴삭이 진행되면 다시 지반 형상을 촬영한다.
즉, 굴삭이 진행되기 전에 굴삭이 진행될 부분을 따라, 조명 모듈(30)과 구조광 모듈(40)의 위치를 조절하고, 피사체의 초점까지 맞추고 나서 굴삭이 진행되면 그 작업 영역을 촬영할 수 있도록 준비하는 것이다.
여기서, 좌우 조절(Panning)이란 피사체가 화면상에서 좌에서 우로 이동할 때, 피사체를 카메라 파인더로 좌에서 우로 따라가며 촬영하는 것이고, 상하 조절(Tilting)은 좌우 조절과 동일하나 방향만 다른 것이며, 앞뒤 조절(Zooming)은 촬영하는 순간 렌즈가 앞, 뒤로 움직이는 줌을 구동시키는 것으로, 상기 모든 조절을 통하여 작업 영역을 정확하게 촬영할 수 있도록 이루어진다.
도 8은 본 발명에 따른 구조광을 이용한 토공량 산출 장치가 배치된 실시예를 도시한 도이다. 도면에서 도시하고 있는 바와 같이, 본 발명에 의한 구조광을 이용한 토공량 산출 장치(1)는 실외 작업의 경우, 태양광보다 밝은 광원이 이용되고, 특정 거리를 초과하는 측정 거리의 피사체에 대한 영상에 대한 신뢰도가 높아야 한다.
이를 위하여, 구조광 모듈(40)을 굴삭기의 조정석 상부면에 설치하고, 굴삭 작업에 따라 변화하는 지반 형상을 실시간으로 인식 및 획득하도록 하기 위하여, 제어 센서부(10)와 조명 모듈(30)과 마이크로 컨트롤러(20)를 포함하여 설치한다.
그리고, 구조광 모듈(40)의 줌 카메라를 이용하여 측정 거리의 한계를 극복하도록 하는 것이 바람직하고, 줌 시점 및 정도에 대한 정보를 얻기 위하여 정확한 굴삭 위치에 대한 시간 및 거리 등에 대한 정보를 제어 센서부(10)로부터 마이크로 컨트롤러(20)를 통하여 전송받는다.
여기서, 굴삭기의 각 절점에 제어 센서부(10)의 각 제어 센서를 부착하고, 굴삭기 암(Arm)의 실시간 위치 및 굴절 각도에 대한 정보를 얻고, 이를 토대로 실시간 측정값을 작업 영역 위치를 파악하도록 이용한다.
더불어, 태양광 보다 더 밝은 할로겐과 같은 조명이 요구되는데, 제어 센서부(10)에서 제공되는 정보를 토대로, 버켓의 작업 위치를 파악하고, 목표 작업 영역에 대하여 조명을 집중시키는(Focusing) 광학계를 이용한다.
그리고 나서, 실시간 3 차원 지반 형상 이미지 데이터의 비교를 통한 토공량 을 산출하는데, 굴삭기의 버켓이 지반의 흙을 퍼낼 때마다 굴삭기의 조정석 상부면에 설치된 구조광 모듈(40)이 변화하는 지반 형상을 매회 촬영하고, 촬영된 지반 형상을 이미지로 변환하며, 굴삭 작업이 진행되는 매 회에 획득된 3 차원 지반 형상 이미지의 비교를 통하여 변화된 지형의 레벨 및 부피를 계산하고, 굴삭된 토공량을 자동으로 산출할 수 있다.
이를 위하여, 굴삭기 암의 각 절곡점에 설치된 제어 센서로부터 각 절점의 굴절 각도 및 상대 위치 정보를 제공받아 최종적으로 버켓의 3 차원 위치를 계산하는데, 광원의 집광(Focusing), 카메라(41)의 좌우 조절(Panning), 상하 조절(Tilting), 앞뒤 조절(Zoom) 후 촬영한다.
그리고 나서, 3 차원 모델을 구성하고, 실시간 변화되는 지반 형상 이미지를 구현하는데, 지반 형상 이미지의 비교를 통하여 토공량을 산출한다.
본 발명은 토공 작업 수행 중, 변화되는 지반 형상을 실시간 3 차원 형상으로 모델링하고, 그 결과를 계획 설계도면 및 실시간으로 획득된 지반 형상 이미지와 비교 및 검토함으로써, 토공 작업량 및 진척도 등을 추론할 수 있으며, 이를 응용하여 토공 자동화 분야에서 활용할 수 있고, 건설 공사 분야에서도 응용될 수 있는 원천 기술이다.
그리고, 실시간 변화 형상과 계획 도면을 비교하여 작업 영역 및 작업 진도에 대한 정확한 정보를 제공할 수 있고, 이에 따라 작업 중 발생할 수 있는 오차를 최소화시켜 작업 용이성을 증가시키며, 다수의 굴삭 로봇을 소수의 작업자가 제어 할 수 있어 작업의 효율성을 극대화시키고, 쓰레기 매립지와 비무장 지대 등 위험 지역에서의 안전 사고를 미연에 방지할 수 있으며, 3 차원 공간 맵핑 기술로 적용될 수 있어 작업자의 안전을 확보하고, 생산성 증대에 기여할 수 있다.
다시 말하면, 건설 공사에서 굴삭기에 의한 굴삭 작업이 진행되는 작업 영역은 시공 상황에 따라 지속적으로 변화되는데, 비정형(Amorphous) 지반 형상인 작업 영역을 주기적으로 맵핑하여 계획 도면을 맵핑한 이미지와 비교 검토함으로써, 토공 작업량을 정확하게 추출할 수 있으며, 이를 토대로 굴삭기의 최적 토공 작업 계획을 수립할 수 있는 지능형 작업량 관리 시스템을 개발할 수 있다.
이상에서는 본 발명의 바람직한 실시 예를 예시적으로 설명하였으나, 본 발명의 범위는 이 같은 특정 실시 예에만 한정되지 않으며 해당 분야에서 통상의 지식을 가진 자라면 본 발명의 특허 청구 범위 내에 기재된 범주 내에서 적절하게 변경이 가능할 것이다.
이상에서 설명한 바와 같이 상기와 같은 구성을 갖는 본 발명은 건설 공사 현장의 굴삭기에 의한 굴삭 작업에 대한 정확한 측정이 가능하며, 최종 토공량을 3 차원 지반 형상 이미지로 정확하게 추출할 수 있고, 최적의 토공 작업 계획을 수립할 수 있으며, 토질 특성을 고려한 작업 지시 및 자율 주행을 통한 굴삭 로봇의 자동 제어, 비탈면 각도 및 운전 방향에 따른 주행 속도 제어가 가능해지고, 안전한 작업 환경을 조성할 수 있으며, 건설 산업 이미지를 상승시킬 수 있고, 측량 과정을 대체할 수 있어 시공 관리 업무의 효율성을 증가시킬 수 있는 등의 효과를 거둘 수 있다.

Claims (15)

  1. 굴삭기 암의 각 절곡점에 구비되어 굴삭기 암의 위치 및 굴절각을 감지하여 출력하는 제어 센서부;
    상기 제어 센서부의 출력으로 굴삭기 암의 일측 단부에 구비된 버켓의 작업 영역의 영상을 촬영하도록 제어 신호를 출력하고, 촬영된 영상을 3 차원 이미지로 변환하여 토공량을 산출하는 마이크로 컨트롤러;
    상기 제어 신호로 상기 작업 영역을 조사하도록 광원이 온(On)되는 조명 모듈;
    상기 제어 신호로 상기 작업 영역을 촬영하는 구조광 모듈;
    을 포함하는 구조광을 이용한 토공량 산출 장치.
  2. 청구항 1에 있어서,
    상기 조명 모듈은 작업 영역의 거리에 따라 광원의 집광도를 조절할 수 있는 초점 조절 장치;
    를 더 구비하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  3. 청구항 1에 있어서,
    상기 초점 조절 장치는 상기 조명 모듈의 광원의 집광을 조절할 수 있는 렌즈로 구비되는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  4. 청구항 3에 있어서,
    상기 렌즈는 광원의 집광을 조절할 수 있도록 이동가능한 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  5. 청구항 1에 있어서,
    상기 조명 모듈의 광원은 태양광 보다 광도가 높은 램프인 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  6. 청구항 5에 있어서,
    상기 램프는 금속 할로겐 램프인 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  7. 청구항 5에 있어서,
    상기 조명 모듈의 광원은 태양광 보다 광도가 높도록 다수개의 램프를 더 구비하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  8. 청구항 7에 있어서,
    상기 광원의 광도는 상기 램프 수에 선형적으로 비례하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  9. 청구항 1에 있어서,
    상기 구조광 모듈은
    상기 작업 영역의 촬영 주기 간에 상기 제어 센서부의 출력을 이용하여 작업 영역을 입력받아 상기 카메라를 좌우, 상하로 이동할 수 있는 카메라 구동장치;
    를 더 포함하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  10. 청구항 9에 있어서,
    상기 카메라 구동장치는 좌우로 이동하는 작업 영역을 따라 카메라를 좌우로 이동시킬 수 있는 패닝(Panning) 기능과, 상하로 이동하는 작업 영역을 따라 카메라를 상하로 이동시킬 수 있는 틸팅(Tilting) 기능을 구비하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  11. 청구항 1에 있어서,
    상기 카메라는 상기 작업 영역과 카메라 간의 거리에 따라 앞뒤로 조절될 수 있는 줌 카메라인 것을 특징으로 하는 구조광을 이용한 토공량 산출 장치.
  12. 굴삭기 암의 각 절곡점에 구비된 제어 센서부에서 굴삭기 암의 상대 위치 및 굴절각을 마이크로 컨트롤러로 출력하는 제1 단계;
    상기 상대 위치 및 굴절각으로 굴삭기 버켓의 3차원 위치를 산출하여 버켓의 작업 영역을 촬영할 수 있도록 카메라 및 조명 모듈을 조정하는 제2 단계;
    굴삭기의 굴삭이 진행되면 버켓의 작업 영역을 조사하도록 조명 모듈을 온(On)시켜 구조광 모듈로 작업 영역의 영상을 획득하는 제3 단계;
    획득된 작업 영역의 영상 간의 지반 형상을 비교하여 토공량을 산출하는 제4 단계;
    를 포함하여 이루어지는 구조광을 이용한 토공량 산출 방법.
  13. 청구항 12에 있어서,
    상기 제2 단계의 카메라는 작업 영역을 촬영할 수 있도록 좌우, 상하로 조절되는 것을 특징으로 하는 구조광을 이용한 토공량 산출 방법.
  14. 청구항 12에 있어서,
    상기 제2 단계의 카메라는 작업 영역과 카메라 간의 거리에 따라 줌(Zoom)되는 것을 특징으로 하는 구조광을 이용한 토공량 산출 방법.
  15. 청구항 12에 있어서,
    상기 제2 단계의 조명 모듈은 작업 영역에 광이 집중되도록 렌즈를 이동하는 것을 특징으로 하는 구조광을 이용한 토공량 산출 방법.
KR1020070077630A 2007-08-02 2007-08-02 구조광을 이용한 토공량 산출 장치 및 방법 KR100916638B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020070077630A KR100916638B1 (ko) 2007-08-02 2007-08-02 구조광을 이용한 토공량 산출 장치 및 방법
US12/304,074 US20100245542A1 (en) 2007-08-02 2008-03-26 Device for computing the excavated soil volume using structured light vision system and method thereof
PCT/KR2008/001678 WO2009017295A1 (en) 2007-08-02 2008-03-26 Device for computing the excavated soil volume using structured light vision system and method thereof
JP2009525512A JP2009541778A (ja) 2007-08-02 2008-03-26 構造光を使用した土工量算出装置及び方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070077630A KR100916638B1 (ko) 2007-08-02 2007-08-02 구조광을 이용한 토공량 산출 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20090013471A true KR20090013471A (ko) 2009-02-05
KR100916638B1 KR100916638B1 (ko) 2009-09-08

Family

ID=40304504

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070077630A KR100916638B1 (ko) 2007-08-02 2007-08-02 구조광을 이용한 토공량 산출 장치 및 방법

Country Status (4)

Country Link
US (1) US20100245542A1 (ko)
JP (1) JP2009541778A (ko)
KR (1) KR100916638B1 (ko)
WO (1) WO2009017295A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101144727B1 (ko) * 2009-05-12 2012-05-24 인하대학교 산학협력단 스테레오 비전 기술을 이용한 굴삭작업 지원 시스템
KR20200100599A (ko) * 2017-12-27 2020-08-26 스미토모 겐키 가부시키가이샤 쇼벨
CN112836268A (zh) * 2019-11-25 2021-05-25 深圳云天励飞技术有限公司 管道挖掘方法及相关产品
CN113026839A (zh) * 2015-08-24 2021-06-25 株式会社小松制作所 轮式装载机

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112015005665B1 (pt) * 2012-09-14 2021-05-11 3D Image Automation Pty Ltd aparelho e método de controle de coeficiente de volume 3d para uma retomadora
JP5529241B2 (ja) * 2012-11-20 2014-06-25 株式会社小松製作所 作業機械および作業機械の作業量計測方法
CN103255788A (zh) * 2013-04-09 2013-08-21 常熟建工建设集团有限公司苏州分公司 一种挖掘机
US20150015701A1 (en) * 2013-07-10 2015-01-15 Faro Technologies, Inc. Triangulation scanner having motorized elements
WO2015108505A1 (en) * 2014-01-14 2015-07-23 Volvo Construction Equipment Ab Light arm locking mechanism for construction machines
US20160029547A1 (en) * 2014-07-30 2016-02-04 Deere & Company Sensing the soil profile behind a soil-engaging implement
JP6318267B2 (ja) * 2014-12-12 2018-04-25 株式会社日立製作所 体積推定装置およびそれを用いた作業機械
WO2016159839A1 (en) 2015-03-30 2016-10-06 Volvo Construction Equipment Ab System and method for determining the material loading condition of a bucket of a material moving machine
WO2016170665A1 (ja) * 2015-04-24 2016-10-27 株式会社日立製作所 体積推定装置、それを備えた作業機械、および体積推定システム
EP3343171B1 (en) 2015-08-26 2024-01-17 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. Measurement device for a shovel
KR20170113604A (ko) * 2015-09-30 2017-10-12 가부시키가이샤 고마쓰 세이사쿠쇼 화상 데이터 생성 방법
US10106072B2 (en) * 2015-10-30 2018-10-23 Deere & Company Work vehicles including implement-responsive optical systems
DE102015118986A1 (de) * 2015-11-05 2017-05-11 Anix Gmbh Prüfgrubenmesssystem zur optischen Vermessung einer Prüfgrubenoberfläche, Verfahren zur optischen Vermessung einer Prüfgrubenoberfläche mit einem solchen Prüfgrubenmesssystem und Verwendung eines solchen Prüfgrubenmesssystems
EP3680400B1 (en) * 2015-12-28 2021-09-22 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. Shovel
JP6754594B2 (ja) * 2016-03-23 2020-09-16 株式会社小松製作所 モータグレーダ
US10190288B2 (en) * 2016-04-08 2019-01-29 Ace/Avant Concrete Construction Co., Inc. Excavation measurement with light curtain
CN109072582B (zh) * 2016-04-19 2022-02-08 沃尔沃建筑设备公司 用于材料的倾倒的控制单元
JP6867132B2 (ja) * 2016-09-30 2021-04-28 株式会社小松製作所 作業機械の検出処理装置及び作業機械の検出処理方法
JP6689763B2 (ja) * 2017-02-06 2020-04-28 住友建機株式会社 ショベル
US10733752B2 (en) * 2017-07-24 2020-08-04 Deere & Company Estimating a volume of contents in a container of a work vehicle
AR112950A1 (es) * 2017-08-18 2020-01-08 Cnh Ind America Llc Sistema y método para el ajuste automático de configuraciones de iluminación para el vehículo de trabajo
WO2019117166A1 (ja) 2017-12-11 2019-06-20 住友建機株式会社 ショベル
CN111108248B (zh) 2017-12-27 2023-10-13 住友建机株式会社 挖土机
JP7232437B2 (ja) * 2018-02-19 2023-03-03 国立大学法人 東京大学 作業車両の表示システム及び生成方法
KR102034281B1 (ko) 2018-07-24 2019-10-18 동국대학교 산학협력단 단일 카메라 기반 굴삭기 버켓 내 토사물 체적 산출 방법
US11332910B2 (en) 2018-07-26 2022-05-17 Built Robotics, Inc. Excavating earth from a dig site using an excavation vehicle
DE102019110098A1 (de) * 2018-07-27 2020-01-30 Claas Selbstfahrende Erntemaschinen Gmbh Anordnung aus einem Vorsatzgerät und einer selbstfahrenden Erntemaschine und selbstfahrende Erntemaschine für eine solche Anordnung
KR20210039390A (ko) * 2018-08-06 2021-04-09 클라크 이큅먼트 컴파니 차량에 대한 외부 대상 탐지
US11041291B2 (en) 2018-09-14 2021-06-22 Deere & Company Controlling a work machine based on sensed variables
US11591776B2 (en) * 2019-04-15 2023-02-28 Deere & Company Earth-moving machine sensing and control system
US11808007B2 (en) * 2019-04-15 2023-11-07 Deere & Company Earth-moving machine sensing and control system
US11299088B2 (en) 2019-05-17 2022-04-12 Deere & Company Adaptive work vehicle lighting system and method of adaptively illuminating a work area
KR20210001689A (ko) * 2019-06-28 2021-01-06 두산인프라코어 주식회사 유용토와 사토량 정보를 고려한 토량배분계획 수립 시스템
US10834798B1 (en) * 2019-07-26 2020-11-10 Cnh Industrial America Llc System and method for automatically adjusting an illumination pattern for a harvesting implement
JP6996012B1 (ja) * 2021-01-14 2022-01-17 オリエンタル白石株式会社 三次元形状推定システム
US11346086B1 (en) * 2021-06-25 2022-05-31 Built Robotics Inc. Machine learning for optimizing tool path planning in autonomous earth moving vehicles
US12082531B2 (en) 2022-01-26 2024-09-10 Deere & Company Systems and methods for predicting material dynamics

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3270451A (en) * 1963-10-21 1966-09-06 Eastman Kodak Co Method and apparatus for exhibiting a display
US4685070A (en) * 1984-08-03 1987-08-04 Texas Instruments Incorporated System and method for displaying, and interactively excavating and examining a three dimensional volume
US4729077A (en) * 1986-03-10 1988-03-01 Mycro Group Co. Variable beam width lighting device
US5083253A (en) * 1988-01-14 1992-01-21 Walter Hahnel Lighting unit
US4826391A (en) * 1988-02-23 1989-05-02 The University Of British Columbia Manipulator arm position sensing
JPH04106229A (ja) * 1990-08-27 1992-04-08 Hitachi Constr Mach Co Ltd 掘削機の掘削深さ検出装置
KR930018106A (ko) * 1992-02-29 1993-09-21 김연수 굴삭기의 작업환경감시장치
US5446980A (en) * 1994-03-23 1995-09-05 Caterpillar Inc. Automatic excavation control system and method
US5911020A (en) * 1995-01-17 1999-06-08 Remote Source Lighting International Inc. Bi-planar multiport illuminator optic design for light guides
JP3301904B2 (ja) * 1995-11-30 2002-07-15 株式会社奥村組 掘削ずり計測方法、及び掘削ずり計測装置
US5630661A (en) * 1996-02-06 1997-05-20 Fox; Donald P. Metal arc flashlight
JPH09267926A (ja) * 1996-03-29 1997-10-14 Kawasaki Steel Corp 連続式アンローダの掘削量検出方法
KR100250676B1 (ko) * 1998-04-06 2000-04-01 이용복 굴삭기의 굴삭깊이 측정장치
JP2000129722A (ja) * 1998-10-21 2000-05-09 Shin Caterpillar Mitsubishi Ltd 掘削機の照明装置
US6085583A (en) * 1999-05-24 2000-07-11 Carnegie Mellon University System and method for estimating volume of material swept into the bucket of a digging machine
US6677934B1 (en) * 1999-07-30 2004-01-13 L-3 Communications Infrared touch panel with improved sunlight rejection
CN1133782C (zh) * 1999-10-01 2004-01-07 日立建机株式会社 挖掘机械的目标挖掘面设定装置
US6519359B1 (en) * 1999-10-28 2003-02-11 General Electric Company Range camera controller for acquiring 3D models
TW465122B (en) * 1999-12-15 2001-11-21 Semiconductor Energy Lab Light-emitting device
US6377353B1 (en) * 2000-03-07 2002-04-23 Pheno Imaging, Inc. Three-dimensional measuring system for animals using structured light
US6437726B1 (en) * 2000-11-30 2002-08-20 Caterpillar Inc. Method and apparatus for determining the location of underground objects during a digging operation
US6735888B2 (en) * 2001-05-18 2004-05-18 Witten Technologies Inc. Virtual camera on the bucket of an excavator displaying 3D images of buried pipes
US7457698B2 (en) * 2001-08-31 2008-11-25 The Board Of Regents Of The University And Community College System On Behalf Of The University Of Nevada, Reno Coordinated joint motion control system
FR2832792B1 (fr) * 2001-11-29 2004-07-16 Giat Ind Sa Systeme d'obsersation et/ou de tir
US7051356B2 (en) * 2002-02-25 2006-05-23 Sentrus, Inc. Method and system for remote wireless video surveillance
US7399220B2 (en) * 2002-08-02 2008-07-15 Kriesel Marshall S Apparatus and methods for the volumetric and dimensional measurement of livestock
US6942363B1 (en) * 2002-11-06 2005-09-13 Cooper Technologies Company Metal halide accent fixture with adjustable reflector/beam spread
US20050074183A1 (en) * 2003-09-19 2005-04-07 Narlow Douglas A. Object recognition system including an adaptive light source
KR100641836B1 (ko) * 2003-10-31 2006-11-03 서강대학교산학협력단 구조광 패턴
US6845311B1 (en) * 2003-11-04 2005-01-18 Caterpillar Inc. Site profile based control system and method for controlling a work implement
US20050135915A1 (en) * 2003-12-05 2005-06-23 Charlie Hall Pipe-handling boom and method of use thereof
JP4332028B2 (ja) * 2003-12-25 2009-09-16 キャタピラージャパン株式会社 表示器制御システム
US7249873B2 (en) * 2004-09-07 2007-07-31 Lear Corporation Adjustable light beam device for aimable vehicle lamp assembly and method
EP1889171A4 (en) * 2005-04-07 2012-11-28 Visionsense Ltd METHOD FOR RECONSTRUCTING A THREE-DIMENSIONAL SURFACE OF AN OBJECT
AU2005227398B1 (en) * 2005-10-28 2006-04-27 Leica Geosystems Ag Method and apparatus for determining the loading of a bucket
CA2528791A1 (en) * 2005-12-01 2007-06-01 Peirong Jia Full-field three-dimensional measurement method
US7894872B2 (en) * 2005-12-26 2011-02-22 Depuy Orthopaedics, Inc Computer assisted orthopaedic surgery system with light source and associated method
US8624744B2 (en) * 2008-01-22 2014-01-07 Delaval Holding Ab Arrangement and method for determining positions of the teats of a milking animal
FR2929417B1 (fr) * 2008-03-27 2010-05-21 Univ Paris 13 Procede de determination d'une representation tridimensionnelle d'un objet a partir de points, programme d'ordinateur et systeme d'imagerie correspondant
US8757812B2 (en) * 2008-05-19 2014-06-24 University of Washington UW TechTransfer—Invention Licensing Scanning laser projection display devices and methods for projecting one or more images onto a surface with a light-scanning optical fiber
ATE550922T1 (de) * 2008-06-25 2012-04-15 Claas Agrosystems Gmbh & Co Kg Übertragungsvorrichtung und landwirtschaftliches fahrzeug
DK2359593T3 (en) * 2008-11-25 2018-09-03 Tetravue Inc High-resolution three-dimensional imaging systems and methods
DK200801722A (en) * 2008-12-05 2010-06-06 Unisensor As Optical sectioning of a sample and detection of particles in a sample
US8369566B2 (en) * 2009-05-01 2013-02-05 Texas Tech University System Remote contactless stereoscopic mass estimation system
US8982182B2 (en) * 2010-03-01 2015-03-17 Apple Inc. Non-uniform spatial resource allocation for depth mapping

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101144727B1 (ko) * 2009-05-12 2012-05-24 인하대학교 산학협력단 스테레오 비전 기술을 이용한 굴삭작업 지원 시스템
CN113026839A (zh) * 2015-08-24 2021-06-25 株式会社小松制作所 轮式装载机
KR20200100599A (ko) * 2017-12-27 2020-08-26 스미토모 겐키 가부시키가이샤 쇼벨
CN112836268A (zh) * 2019-11-25 2021-05-25 深圳云天励飞技术有限公司 管道挖掘方法及相关产品
CN112836268B (zh) * 2019-11-25 2024-06-07 深圳云天励飞技术有限公司 管道挖掘方法及相关产品

Also Published As

Publication number Publication date
JP2009541778A (ja) 2009-11-26
US20100245542A1 (en) 2010-09-30
WO2009017295A1 (en) 2009-02-05
KR100916638B1 (ko) 2009-09-08

Similar Documents

Publication Publication Date Title
KR100916638B1 (ko) 구조광을 이용한 토공량 산출 장치 및 방법
EP3392612B1 (en) Defect detection apparatus and program
US8412418B2 (en) Industrial machine
CN103808312B (zh) 机器人化激光指示器设备和方法
EP3211369B1 (en) Surveying instrument and program
US9776320B2 (en) Measurement and installation data indicating apparatus and measurement and installation data indicating method
AU2008249146B2 (en) Surveying system
CN101868967A (zh) 摄像装置、摄像方法以及摄像程序
JP5052463B2 (ja) 作業機械のステレオ画像処理装置
US20080291342A1 (en) Projection Type Video Display Apparatus
KR20070109592A (ko) 충전스테이션을 이용한 이동로봇의 위치 인식장치 및 그 방법
EP4160144B1 (en) Surveying system
CN105136134A (zh) 一种掘进机位姿检测调整方法及系统
CN103076002A (zh) 图像测量系统
KR100952482B1 (ko) 회전식 다중 배율 렌즈를 이용한 3차원 지반형상 이미지구현 시스템 및 이를 이용한 토공량 산출방법
EP1469281B1 (en) Electronic surveying apparatus
CN106199618A (zh) 一种电子设备和定位方法
KR20120072539A (ko) 계측 시스템 및 이를 이용한 계측방법
CN110769232B (zh) 超短焦投影仪的亮度检测方法、装置及系统
JP6722000B2 (ja) 測量支援装置
CN116718132B (zh) 一种路面三维测量方法及系统
CN114706420B (zh) 基于闪烁点光源和计算机视觉的多旋翼无人机精准降落方法
JPH07140225A (ja) 位置測定装置および該装置を用いた移動体制御装置
JPH0484710A (ja) 水中作業機の3次元座標無人測量方法
CN118301483A (zh) 应用于车载钢铁三维成像的图像采集方法和系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130527

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140612

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150626

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160602

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20170902

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180903

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20191017

Year of fee payment: 11