KR101710104B1 - 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법 - Google Patents

지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법 Download PDF

Info

Publication number
KR101710104B1
KR101710104B1 KR1020140158551A KR20140158551A KR101710104B1 KR 101710104 B1 KR101710104 B1 KR 101710104B1 KR 1020140158551 A KR1020140158551 A KR 1020140158551A KR 20140158551 A KR20140158551 A KR 20140158551A KR 101710104 B1 KR101710104 B1 KR 101710104B1
Authority
KR
South Korea
Prior art keywords
loading
cargo
unloading
unit
joining
Prior art date
Application number
KR1020140158551A
Other languages
English (en)
Other versions
KR20160057668A (ko
Inventor
김승모
정성용
권구포
Original Assignee
씨제이대한통운 (주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 씨제이대한통운 (주) filed Critical 씨제이대한통운 (주)
Priority to KR1020140158551A priority Critical patent/KR101710104B1/ko
Publication of KR20160057668A publication Critical patent/KR20160057668A/ko
Application granted granted Critical
Publication of KR101710104B1 publication Critical patent/KR101710104B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G61/00Use of pick-up or transfer devices or of manipulators for stacking or de-stacking articles not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/74Feeding, transfer, or discharging devices of particular kinds or types
    • B65G47/90Devices for picking-up and depositing articles or materials
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G67/00Loading or unloading vehicles
    • B65G67/02Loading or unloading land vehicles
    • B65G67/04Loading land vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G67/00Loading or unloading vehicles
    • B65G67/02Loading or unloading land vehicles
    • B65G67/24Unloading land vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66FHOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/063Automatically guided
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66FHOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075Constructional features or details
    • B66F9/20Means for actuating or controlling masts, platforms, or forks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2201/00Indexing codes relating to handling devices, e.g. conveyors, characterised by the type of product or load being conveyed or handled
    • B65G2201/02Articles

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Structural Engineering (AREA)
  • Civil Engineering (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Geology (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

본 발명은 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법에 관한 것으로 자율이동 제어부로 이동제어명령을 전달하고, 아암 제어부로 아암제어명령을 전달하는 이/적재 제어부가 구비된 화물 이/적재부를 포함하고, 상기 화물 이/적재부는, 정형화물을 로드 및 언로드하는 적재부가 구비된 정형화물 이/적재부와; 비정형화물을 로드 및 언로드하는 비정형화물 이/적재부를가 포함하며, 상기 정형화물 이/적재부와 비정형화물 이/적재부는 조인트에 의하여 착탈 가능하게 구비되되, 상기 조인트는, 상기 정형화물 이/적재부의 정형 이/적재 프레임 후방에 구비된 조인홈 및 상기 조인홈을 수직으로 관통하는 아우터 조인핀홀을 포함하는 요부형 조인부와, 상기 비정형화물 이/적재부의 비정형 이/적재 프레임 후방에 구비된 조인축 및 상기 조인축의 축방향에 대하여 직각방향을 갖는 인너 조인핀홀을 포함하는 철부형 조인부를 포함하며, 상기 정형화물 이/적재부와 상기 비정형화물 이/적재부는, 상기 조인축이 조인홈에 삽입된 상태에서 상기 아우터 조인핀홀과 인너 조인핀홀에 조인핀이 삽입됨으로써 결합되고, 상기 삽입된 조인핀을 제거하여 요부형 조인부와 철부형 조인부의 구속력이 해지됨으로써 분리되는 것됨을 특징으로 물류센터에서 정형화된 화물과 비정형화된 화물을 구분하여 이/적재가 가능하도록 하여 작업율을 높이는 가운데 유연성과 확장성을 더 얻을 수 있다.

Description

지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법{INTELLIGENT UNMANNED LOADING SYSTEMS AND LOADING METHOD USING}
본 발명은 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법에 관한 것으로서, 특히 물류센터에서 정형 화물 또는 비정형 화물 구분없이 피킹, 이송, 적재 및 상차 등 의 작업이 이루어질 수 있도록 한 것이다.
일반적으로 부피가 크고 중량이 무거운 화물을 지게차나 크레인으로 들어올려 차량에 적재 또는 하역을 하거나, 운반 및 보관시에 화물을 받쳐주기 위해서 팔레트가 널리 사용되고 있다.
팔레트의 이동에는 지게차가 주로 사용되고 있는데, 최근 물류의 양이 증가함에 따라 지게차 운전자들의 작업량이 증가하여 운잔자의 피로, 조작 실수 등에 의한 충돌, 낙하 등의 사고 위험이 높아지고 있다
이러한 문제를 해결하기 위하여 무인 이송장치가 제안되어 물류현장의 인력절감, 생산성 향상, 근로환경 개선을 통해 제품이나 서비스의 가격 경쟁력을 높이는 역할을 하게 된다. 이때, 팔레트의 위치와 자세를 정확히 알고 있다는 것을 전제로 무인 이송장치가 팔레트의 앞으로 이동하여 제자리 회전한 후, 적재물을 적재하였다.
그러나 팔레트가 정확한 위치에서 정확한 자세로 놓여있다는 전제가 필요하므로 팔레트의 위치나 자세가 조금이라도 달라지면 무인 이송장치는 이에 대한 적재가 불가능하다는 문제점이 있었다.
이러한 문제를 해결하고자 포크 캐리지 상단에 2차원 감지 범위를 가지는 레이저 스캐너를 설치하여 팔레트 홀을 스캔하는 방식이 제안되었으나, 팔레트 홀을 찾기 위해서 포크캐리지가 상하로 반복적으로 이동해야 하기 때문에 감지 시간이 길고, 시스템을 구축하는 비용이 높은 문제가 있다.
한편, 등록특허공보 10-1397342호(2014.05.13)호의 무인지게차의 팔레트 자율하역 장치 및 방법이 제안되었으나, 정형화된 화물만 하역이 가능할 뿐 비정형화된 화물을 하역이 불가능한 문제점이 있었다.
또한, 이로 인해 물류센터에서 정형 화물 또는 비정형 화물이 있을 경우 작업율이 낮아지고, 작업 시간이 더 소요되는 등 유연성과 확장성이 낮아지는 또 다른 문제점이 있었다.
본 발명은 정형화된 화물과 비정형화된 화물이 혼재되어 있는 물류센터에서 센터서버의 지시에 따라 화물 이/적재부가 자율이동부에 의하여 지시하는 장소로 이동한 후 정형화된 화물과 비정형화된 화물을 구분하여 이/적재가 가능하도록 함으로써, 화물의 이/적재 작업이 용이하게 이루어져 작업율을 높일 수 있도록 하고, 이를 통해 작업에 소요되는 시간을 줄일 수 있도록 하고, 아울러 작업의 유연성과 확장성을 얻을 수 있도록 한 것이다.
본 발명은 자율이동 제어부로 이동제어명령을 전달하고, 아암 제어부로 아암제어명령을 전달하는 이/적재 제어부가 구비된 화물 이/적재부를 포함하고, 상기 화물 이/적재부는, 정형화물을 로드 및 언로드하는 적재부가 구비된 정형화물 이/적재부와; 비정형화물을 로드 및 언로드하는 비정형화물 이/적재부를가 포함하며,상기 정형화물 이/적재부와 비정형화물 이/적재부는 조인트에 의하여 착탈 가능하게 구비되되, 상기 조인트는, 상기 정형화물 이/적재부의 정형 이/적재 프레임 후방에 구비된 조인홈 및 상기 조인홈을 수직으로 관통하는 아우터 조인핀홀을 포함하는 요부형 조인부와, 상기 비정형화물 이/적재부의 비정형 이/적재 프레임 후방에 구비된 조인축 및 상기 조인축의 축방향에 대하여 직각방향을 갖는 인너 조인핀홀을 포함하는 철부형 조인부를 포함하며, 상기 정형화물 이/적재부와 상기 비정형화물 이/적재부는, 상기 조인축이 조인홈에 삽입된 상태에서 상기 아우터 조인핀홀과 인너 조인핀홀에 조인핀이 삽입됨으로써 결합되고, 상기 삽입된 조인핀을 제거하여 요부형 조인부와 철부형 조인부의 구속력이 해지됨으로써 분리되는 것을 특징으로 한다.
삭제
또한, 상기 정형화물 이/적재부는 정형 이/적재 프레임과; 상기 정형 이/적재 프레임의 전방으로 리프트레일에 결합된 이/적재 가이더와; 상기 이/적재 가이더의 하부에 구비된 화물감지부와; 상기 정형 이/적재 프레임의 하부에 구비된 주변감지부와; 상기 정형 이/적재 프레임에 구비된 아암 구동부와; 상기 이/적재 가이더와 리프트레일 고정편에 구비된 로드셀과; 상기 리프트레일의 배면 상부와 하부에 각각 구비된 근접센서와; 상기 정형 이/적재 프레임의 후방에 구비된 적재부와; 상기 정형 이/적재 프레임의 후방에 구비된 전원부; 및 자율이동제어부가 포함됨을 특징으로 한다.
또한, 상기 비정형화물 이/적재부는 비정형 이/적재 프레임과; 상기 비정형 이/적재 프레임에 결합된 이/적재 아암 가이더와; 상기 이/적재 아암 가이더에 구비된 화물감지부와; 상기 비정형 이/적재 프레임에 구비된 주변감지부와; 상기 비정형 이/적재 프레임에 구비된 아암 구동부와; 상기 아암 가이더에 구비된 로드셀과; 상기 비정형 이/적재 프레임에 구비된 전원부; 및 자율이동제어부가 포함됨을 특징으로 한다.
또한, 상기 이/적재 제어부는 화물 이/적재부의 이동을 제어하는 자율이동 제어부와; 아암제어명령을 전달받아 아암 높이 또는 각도를 제어하는 아암 제어부와; 화물의 정보를 이/적재 제어부로 전달하는 화물감지부와; 주변의 정보를 이/적재 제어부로 전달하는 주변감지부를 포함하는 것을 특징으로 한다.
또한, 상기 자율이동 제어부는 이/적재 제어부로부터 화물정보와 주변정보를 전달받고, 반사되는 거리 또는 각도를 계산하여 이동영역의 지도를 생성하는 환경지도 작성부와; 생성된 환경지도를 기반으로 레이저 스캔을 통해 반사되는 시간에 따른 거리를 산출하고, 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는 위치인식부와; 화물 이/적재부의 이동위치를 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성하는 경로계획부와; 화물 이/적재부가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부의 정보를 바탕으로 거리정보를 획득하고, 애물로부터 이격되는 장애물 회피부가 포함됨을 특징으로 한다.
삭제
또한, 상기 위치인식부는 환경지도 내 현재 위치정보에 비컨으로부터 수신되는 신호 세기의 차이 정보를 이용하여 위치정보가 보정됨이 포함됨을 특징으로 한다.
또한, 상기 환경지도 내 지정된 위치까지 생성되는 이동경로는 방향성 있는 그래프에서 임의의 두 노드 간의 최단 거리의 경로를 찾는 딕스트라 알고리즘으로 생성되되, 시작 노드 s부터 현재 노드 u까지의 최간 거리 d(u)을 알고, 현재 노드 u에서 다음 노드 v까지의 거리 w(u,v)가 주어지면, 시작 노드 s부터 다음 노드 v까지의 거리는 d(u) + w(u,v)로 다른 노드를 거쳐서 다음 노드 v까지 가는 거리 d(v)가 d(u)+w(u,v) 보다 길다면 d(v) 값을 새로 계산한 d(u)+w(u,v)로 갱신하고, 반대로 d(v)가 더 짧다면 이번에 계산한 d(u)+w(u,v)값은 폐기되는 가운데 다음 노드 v로 갈 때 최단 거리가 되는 이전 노드 u를 저장하고, 저장된 노드들을 역추적하여 얻어진 최단 경로를 통해 이동위치를 현재의 기점으로 하여 지정된 위치까지 최단 이동경로가 채택됨을 특징으로 한다.
또한, 상기 화물 이/적재부는 무선통신 수신부를 더 구비하여 작업자가 가지고 있는 무선통신 송신부에서 추종신호가 발생되면 무선통신 수신부가 추종신호의 세기 또는 감지시간을 측정하여 거리를 추정하고, 자율이동 제어부가 제어되어 작업자를 감응하여 추종됨을 특징으로 한다.
한편, 본 발명은 센터서버로부터 화물 위치와 이/적재 순서에 따라 가용 가능한 화물 이/적재부의 이동을 이/적제 제어부로 지시하는 단계와; 상기 이/적재 제어부가 화물 이/적재부의 이동위치를 판단하고, 화물정보와 주변정보를 전달받아 화물 이/적재부의 이동 거리, 아암 높이 또는 각도를 계산하고, 자율이동제어부로 이동제어명령을 전달하여 화물 이/적재부가 이동하는 단계와; 상기 화물정보를 전달받고, 화물정보를 기반으로 아암제어부로 아암제어명령을 전달하여 아암 높이 또는 각도가 제어되어 화물을 로드 및 언로드하는 단계와; 상기 이/적재 제어부가 자율이동 제어부 및 아암제어부를 반복 제어하여 화물의 로드 및 언로드를 완료하는 단계를 포함하며, 상기 화물 이/적재부는, 정형 화물을 로드 및 언로드하는 적재부가 구비된 정형화물 이/적재부와, 비정형화물을 로드 및 언로드하는 적재부가 구비된 비정형화물 이/적재부를 포함하되, 상기 정형화물 이/적재부와 비정형화물 이/적재부는 조인트에 의하여 착탈 가능하게 구비되고, 상기 조인트는, 상기 정형화물 이/적재부의 정형 이/적재 프레임 후방에 구비된 조인홈 및 상기 조인홈을 수직으로 관통하는 아우터 조인핀홀을 포함하는 요부형 조인부와, 상기 비정형화물 이/적재부의 비정형 이/적재 프레임 후방에 구비된 조인축 및 상기 조인축의 축방향에 대하여 직각방향을 갖는 인너 조인핀홀을 포함하는 철부형 조인부를 포함하며, 상기 정형화물 이/적재부와 상기 비정형화물 이/적재부는, 상기 조인축이 조인홈에 삽입된 상태에서 상기 아우터 조인핀홀과 인너 조인핀홀에 조인핀이 삽입됨으로써 결합되고, 상기 삽입된 조인핀을 제거하여 요부형 조인부와 철부형 조인부의 구속력이 해지됨으로써 분리되는 것을 특징으로 한다.
또한, 상기 자율이동제어부는 이/적재 제어부로부터 화물정보와 주변정보를 전달받고, 반사되는 거리 또는 각도를 계산하여 이동영역의 지도를 생성하는 환경지도 작성단계와; 생성된 환경지도를 기반으로 반사되는 시간에 따른 거리를 산출하고, 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는 위치 인식단계와; 화물 이/적재부의 이동위치가 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성하는 경로계획단계; 및 화물 이/적재부가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부의 정보를 바탕으로 거리정보를 획득하고, 장애물로부터 이격되는 장애물 회피단계가 포함됨을 특징으로 한다.
삭제
또한, 상기 화물이 정형화물일 경우, 센터서버로부터 정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 정형화물 이/적재부의 이동을 이/적재 제어부로 지시하는 단계와; 지시받은 이/적재 제어부는 환경지도 작성단계, 위치 인식단계, 경로계획단계, 장애물 회피단계를 통해 얻어진 정보를 기반으로 정형화물이 있는 곳으로 이동하는 단계와; 이/적재 가이더에 구비된 화물감지부에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부로 전달되고, 정형 이/적재 프레임에 구비된 주변감지부에 의하여 감지된 주변영상이 이/적재 제어부로 전달되는 위치정보와 주변정보를 바탕으로 아암제어명령을 아암제어부로 전달하여 아암 구동부가 구동되는 단계와; 아암이 결합된 이/적재 가이더가 리프트레일을 따라 상,하로 리프트되는 단계를 통해 정형화물의 이/적재가 이루어지는 것이 포함됨을 특징으로 한다.
또한, 가용 가능한 정형화물 이/적재부의 이동은 센터서버로부터 쉬는 정형화물 이/적재부를 호출하는 단계와; 쉬는 정형화물 이/적재부가 자기의 상태를 알리는 단계와; 센터서버는 적재장소에 가까운 정형화물 이/적재부의 이동을 지시하는 단계가 포함됨을 특징으로 한다.
또한, 정형화물이 있는 곳으로 이동한 후 감지센서에 의하여 감지된 정형화물 유무가 이/적제 제어부에 의하여 센터서버로 전송되는 단계가 포함됨을 특징으로 한다.
또한, 상기 화물이 비정형화물일 경우, 센터서버로부터 비정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 비정형화물 이/적재부의 이동을 각각 이/적재 제어부로 지시하는 단계와; 지시받은 이/적재 제어부는 환경지도 작성단계, 위치 인식단계, 경로계획단계, 장애물 회피단계를 통해 얻어진 정보를 기반으로 비정형 화물이 있는 곳으로 각각 이동하는 단계와; 비정형 이/적재 프레임에 구비된 화물감지부에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부로 전달되고, 비정형 이/적재 프레임에 구비된 주변감지부의 주변영상이 이/적재 제어부로 전달되는 위치정보와 주변정보를 바탕으로 아암제어명령을 아암제어부로 전달하고, 아암 구동부에 의하여 아암이 구동되는 단계를 통해 비정형 화물의 이/적재가 이루어지는 것이 포함됨을 특징으로 한다.
또한, 가용 가능한 비형화물 이/적재부의 이동은 센터서버로부터 쉬는 비정형화물 이/적재부를 호출하는 단계와; 쉬는 비정형화물 이/적재부가 자기의 상태를 알리는 단계와; 센터서버는 적재장소에 가까운 비정형화물 이/적재부의 이동을 지시하는 단계가 포함됨을 특징으로 한다.
또한, 비정형화물이 있는 곳으로 이동한 후 감지센서에 의하여 감지된 비정형화물 유무가 이/적제 제어부에 의하여 센터서버로 전송되는 단계가 포함되고, 비정형화물이 있을 경우, 센터서버는 정형화물 이/적재부를 비정형화물 이/적재부가 있는 곳으로 이동을 지시하여 비정형화물이 적재 및 이송됨이 더 포함됨을 특징으로 한다.
또한, 비정형화물이 있는 곳으로 이동된 비정형화물 이/적재부에 센터서버로부터 다수개의 정형화물 이/적재부가 이동되어 비정형화물 이/적재가 이루어지는 것이 포함됨을 특징으로 한다.
또한, 비정형화물이 있는 곳으로 이동된 다수개의 비정형화물 이/적재부에 센터서버로부터 다수개의 정형화물 이/적재부가 이동되어 비정형화물 이/적재가 이루어지는 것이 포함됨을 특징으로 한다.
본 발명은 물류센터에서 센터서버의 지시에 따라 화물 이/적재부가 지시하는 장소로 이동한 후 정형화된 화물과 비정형화된 화물을 구분하여 이/적재가 가능하도록 한 효과를 얻을 수 있다.
또한, 이를 통해 피킹, 이송, 적재 및 상차 등 의 용이하게 이루어질 수 있는 효과를 더 얻을 수 있다.
또한, 이를 통해 정형화된 화물과 비정형화된 화물이 혼재되어 있는 물류센터에서 작업율을 더 높일 수 있는 효과를 얻을 수 있다.
그리고 이를 통해 작업에 소요되는 전체적인 시간을 줄이는 가운데 작업의 유연성과 확장성을 더 얻을 수 있다.
도1은 본 발명에 따른 지능형 무인 이/적재 시스템을 도시한 구성도.
도2는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부가 정형화물 이/적재부 및 비정형화물 이/적재부로 구비된 상태를 도시한 예시도.
도3은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 결합된 상태를 도시한 사시도.
도4는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 분리된 상태를 도시한 사시도.
도5는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부의 조인트부를 도시한 사시도.
도6은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 결합된 상태를 도시한 예시도.
도7은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 자율이동 제어부를 도시한 블록 구성도.
도8은 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재를 도시한 순서도.
도9는 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재에 있어 정형화물 이/적재를 도시한 순서도.
도10은 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재에 있어 비정형화물 이/적재를 도시한 순서도.
본 발명의 실시예를 첨부 도면을 참조하여 설명하면 다음과 같다.
도1은 본 발명에 따른 지능형 무인 이/적재 시스템을 도시한 구성도이고, 도2는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부가 정형화물 이/적재부 및 비정형화물 이/적재부로 구비된 상태를 도시한 예시도이고, 도3은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 결합된 상태를 도시한 사시도이다.
본 발명에 따른 지능형 무인 이/적재 시스템은 정형화된 화물과 비정형화된 화물이 혼재되어 있는 물류센터에서 화물 이/적재 순서에 따라 센터서버(100)의 지시에 따라 화물 이/적재부(200)가 지시하는 장소로 이동한 후 화물의 이/적재가 가능하도록 한 것으로 도1에 도시된 바와 같이, 센터서버(100)와 화물 이/적재부(200)가 포함되도록 구성되어 있다.
상기 센터서버(100)는 물류센터(C)내의 화물 위치와 수량이 저장되어 있고, 요구되는 즉, 화물의 이/적재 순서에 따라 화물 이/적재부(200)와 통신하여 가용 여부를 판단하고, 가용 가능한 화물 이/적재부(200)를 이/적재 위치로 이동을 지시한다. 이러한 상기 센터서버(100)는 화물의 종류와 위치 및 수량에 대한 업데이트가 실시간으로 이루어져 물류센터(C)내의 화물 이/적재 작업이 원활하게 이루어질 수 있다.
상기 화물 이/적재부(200)는 센터서버(100)의 지시에 따라 화물의 있는 곳으로 이동하여 화물의 이/적재 작업이 이루어지는 것으로 이/적재 제어부(210), 자율이동 제어부(220), 아암 제어부(230), 화물감지부(240) 및 주변감지부(250)가 포함되도록 구성되어 있다.
상기 화물 이/적재부(200)는 물류센터(C)에 보관된 정형화물 즉, 파렛트에 얹혀진 상태로 보관되는 화물을 로드 또는 언로드하고, 정형화물 즉, 파렛트가 필요 없이 박스형태를 갖도록 구비된 화물 또는 비정형화물을 적재하는 적재부(217a)가 구비된 정형화물 이/적재부(200a)와, 물류센터(C)에 보관된 비정형화물을 로드 도는 언로드하는 비정형화물 이/적재부(200b)를 포함한다.
상기 화물 이/적재부(200)는 물류센터(C)의 내부에서 적재부(217a)가 구비된 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 후술하는 조인트(400)에 의하여 결합된 상태 또는 분리된 상태로 화물 이/적재 작업이 이루어진다. 이때, 도2에 도시된 바와 같이, 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 결합된 상태에서는 센터서버(100)에서 요구되는 화물의 이/적재 작업 순서에 따라 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)는 각각 별도의 작업이 이루어진다. 즉, 정형화물 이/적재부(200a)를 이용하여 정형화물인 파렛트에 얹혀진 화물을 로드 또는 언로드가 이루어질 때 비정형화물 이/적재부(200b)는 작업을 멈춘 상태가 유지된다.
도4는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 분리된 상태를 도시한 사시도이다이고, 도6은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부가 결합된 상태를 도시한 예시도이다.
도시된 바와 같이, 정형화물 이/적재부(200a)는 정형 이/적재 프레임(210a)의 전방에 리프트레일(211a)이 구비되며, 상기 리프트레일(211a)을 따라 상하로 리프트되는 포크형 아암(212a)을 갖는 이/적재 가이더(213a)가 결합되어 있고, 상기 이/적재 가이더(213a)의 하부에 화물위치파악과 영상이 포함된 정보를 이/적재 제어부(210)로 전달하는 화물감지부(240)가 구비되며, 상기 정형 이/적재 프레임(210a)의 하부에 주변영상을 이/적재 제어부(210)로 전달하는 주변감지부(250)가 구비된다. 이때, 상기 화물감지부(240)는 비전센서를 이용하여 정형화물의 홀 위치를 파악하고, 홀위치와 영상이 포함된 정보가 전달되도록 하는 것이 바람직하며, 상기 주변감지부(250)는 적외선센서 또는 레이저 스캐너를 통해 주변정보가 수집되도록 하는 것으로 상기 정형 이/적재 프레임(210a)의 사방에 장착되도록 하는 것이 바람직하다.
상기 이/적재 제어부(210)로부터 전달된 아암제어명령에 따라 아암제어부(230)에 의하여 이/적재가이더(213a)의 구동을 제어하는 아암 구동부(214a)가 상기 리프트레일(211a) 사이의 정형 이/적재 프레임(210a)에 구비되며, 정형화물의 무게를 감지하여 이/적재 제어부(210)로 전달하는 로드셀(215a)이 상기 이/적재 가이더(213a)와 리프트레일 고정편(211a-1)에 구비된다. 이때, 상기 아암 구동부(214a)는 에어 실린더 또는 랙엔 피니언 등이 사용될 수 있다.
상기 이/적재 가이더(213a)의 상하부 위치를 감지하여 아암제어부(230)로 전달하는 근접센서(216a)가 상기 리프트레일(211a)의 배면 상부와 하부에 각각 구비되며, 안전펜스(217a-1)를 가지며, 화물의 적재량을 감지하는 무게센서(217a-2)가 구비되어 적재된 화물의 무게 정보를 이/적재 제어부(210)로 전달하는 적재부(217a)가 상기 정형 이/적재 프레임(210a)의 후방 상단부에 구비된다.
상기 정형 이/적재 프레임(210)의 후방에 전원공급부(218a)가 구비되며, 이/적재 제어부(210)의 이동제어명령을 전달받아 정형화물 이/적재부(200a)의 이동을 제어하는 자율이동제어부(220)가 상기 정형 이/적재 프레임(210)의 하부에 구비된다. 이때, 전원공급부(218a)는 전원량이 이/적재 제어부(210)로 전달되며, 전원량이 부족할 경우, 이/적재 제어부(210)의 지시에 따라 물류센터(C)내의 충전장소로 이동시켜 충전이 이루어질 수 있게 된다.
상기 비정형화물 이/적재부(200b)는 다관절(211b)의 하단이 회동 가능하게 구비되며, 다관절(211b)의 상단에 흡착형 아암(212b)이 결합된 이/적재 아암 가이더(213b)가 비정형 이/적재 프레임(210b)의 상부에 구비되며, 화물위치파악과 영상이 포함된 정보를 이/적재 제어부(210)로 전달하는 화물감지부(240)가 상기 이/적재 아암 가이더(213b)에 구비된다. 상기 화물감지부(240)는 비전센서를 이용하여 정형화물의 홀위치를 파악하고, 홀위치와 영상이 포함된 정보가 전달되도록 하는 것이 바람직하다.
주변연상을 이/적재 제어부(210)로 전달하는 주변감지부(250)가 상기 비정형 이/적재 프레임(210b)에 구비되며, 상기 이/적재 제어부(210)로부터 전달된 아암제어명령에 따라 아암제어부(230)에 의하여 이/적재 아암가이더(213b)의 구동이 제어되는 아암 구동부(214b)가 상기 비정형 이/적재 프레임(210b)에 구비된다.
상기 주변감지부(250)는 적외선센서 또는 레이저 스캐너를 통해 주변정보가 수집되도록 하는 것으로 상기 비정형 이/적재 프레임(210b)의 사방에 장착되도록 하는 것이 바람직하다.
비정형화물 무게를 감지하여 이/적재 제어부(210)로 전달하는 로드셀(215b)이 상기 아암(212b)에 구비되며, 상기 비정형 이/적재 프레임(210b)의 후방에 전원공급부(216b)가 구비되고, 상기 이/적재 제어부(210)의 이동제어명령을 전달받아 정형화물 이/적재부(200b)의 이동을 제어하는 자율이동제어부(220)가 상기 비정형 이/적재 프레임(210b)의 하부에 구비된다.
상기 전원공급부(216b)는 충전량이 이/적재 제어부(210)로 전달되며, 충전량이 부족할 경우, 이/적재 제어부(210)의 지시에 따라 물류센터(C)내의 충전장소로 이동시켜 충전이 이루어질 수 있게 된다.
한편, 상기 센터서버(100)에서 요구되는 화물의 이/적재 작업이 박스형태의 화물일 경우, 비정형화물 이/적재부(200b)의 작업이 이루어지며, 정형화물 이/적재부(200a)는 작업을 멈춘 상태에서 적재부(217a)에 화물을 적재하게 된다. 이 과정에서 적재부(217a)에 적재되는 화물은 무게센서(217a-1)에 의하여 감지된 무게정보가 이/적재부(200b)로 전달되어 과적 여부를 판단하게 되고, 안전휀스(217a-1)에 의하여 이동과정에서 적재부(217a)에 적재된 화물이 바닥으로 떨어지는 것을 방지한다.
상기 화물 이/적재부(200)의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 결합된 상태에서는 센터서버(100)에서 요구되는 화물의 이/적재 작업에 따라 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)의 이동순위가 바뀌게 된다. 즉, 파렛트형 화물일 경우, 정형화물 이/적재부(200a)가 구동되어 비정형화물 이/적재부(200b)를 끌고 가는 형태로 이동되고, 박스형 화물일 경우, 비정형화물 이/적재부(200b)가 정형화물 이/적재부(200a)를 끌고 가는 형태로 이동되어 각각의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)에 구비된 전원공급부(218a)(216b)의 전원 소비를 줄일 수 있게 된다.
상기 화물 이/적재부(200)의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 분리된 상태에서는 센터서버(100)에서 요구되는 화물의 이/적재 작업에 따라 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 각각 이동한다.
도5는 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 화물 이/적재부인 정형화물 이/적재부와 비정형화물 이/적재부의 조인트부를 도시한 사시도이다.
도시된 바와 같이, 상기 조인트(300)는 정형화물 이/적재부(200a)의 정형 이/적재 프레임(210a) 후방에 구비된 것으로 조인홈(411)을 갖는 요부형 조인부(410)와, 비정형화물 이/적재부(200b)의 비정형 이/적재 프레임(210b) 후방에 구비된 것으로 조인축(421)을 갖는 철부형 조인부(420)를 포함한다.
상기 요부형 조인부(410)는 조인홈(411)을 수직으로 관통하는 아우터 조인핀홀(412)이 구비되며, 상기 철부형 조인트부(420)의 조인축(421)에 축방향에 대하여 직각방향을 갖는 인너 조인핀홀(422)이 구비된다.
상기 조인축(421)이 조인홈(411)에 삽입된 상태에서 아우터 조인핀홀(412)과 인너 조인핀홀(422)에 조인핀(430)이 삽입되는 것으로 정형화물 이/적재부(200a)와 정형 이/적재 프레임(210a)의 결합되고, 상기 조인핀(430)을 뺄 경우, 요부형 조인부(410)와 철부형 조인부(420)의 구속력이 해지됨으로써, 정형화물 이/적재부(200a)와 정형 이/적재 프레임(210a)의 분리된다.
상기 이/적재 제어부(210)는 센터서버(100)의 지시에 따라 화물 이/적재부(200)의 이동위치를 판단하고, 화물감지부(240)와 주변감지부(250)로부터 화물정보와 주변정보를 전달받아 화물 이/적재부(200)의 이동 거리, 아암 높이 또는 각도를 계산한 후 이동제어명령을 자율이동 제어부(220)로 전달하고, 이어 아암제어명령을 아암 제어부(230)로 전달한다.
도7은 본 발명에 따른 지능형 무인 이/적재 시스템에 있어 자율이동 제어부를 도시한 블록 구성도이다.
도시된 바와 같이, 상기 자율이동 제어부(220)는 이/적재 제어부(210)로부터 이동제어명령을 전달받아 화물 이/적재부(200)의 이동이 주변과 간섭없이 신속하게 이루어질 수 있도록 한 것으로 환경지도 작성부(221), 위치인식부(222), 경로계획부(223) 및 장애물 회피부(224)를 포함한다.
상기 환경지도 작성부(221)는 이/적재 제어부(210)로부터 화물정보와 주변정보를 전달받고, 레이저 센서(221-1)를 이용하여 반사되는 거리 및 각도를 계산하여 이동영역의 지도를 생성하고, 상기 위치인식부(222)는 환경지도 작성부(221)에서 생성된 환경지도를 기반으로 레이저 스캔(222-1)을 통해 반사되는 시간에 따른 거리를 산출하고, 카메라(222-2)를 이용하여 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는다. 이때, 상기 위치인식부(222)는 환경지도 내 현재 위치정보에 비컨으로부터 수신되는 신호 세기의 차이 정보를 이용하여 위치정보가 보정되도록 한다.
상기 경로계획부(223)는 화물 이/적재부(200)의 이동위치를 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성하고, 상기 장애물 회피부(224)는 화물 이/적재부(200)가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부(224-1)의 정보를 바탕으로 거리정보를 획득하고, 인공전위계를 활용하여 장애물로부터 이격된다. 이때, 환경지도 내 지정된 위치까지 생성되는 이동경로는 딕스트라 알고리즘으로 생성되도록 하여 최적의 이동경로를 채택할 수 있게 된다. 이러한 딕스트라 알고리즘은 통상적으로 방향성 있는 그래프에서 임의의 두 노드 간의 최단 거리의 경로를 찾는 것으로 시작 노드 s 부터 현재 노드 u 까지의 최간 거리 d(u)을 알고 있고, 시작 노드 u 에서 다음 노드 v 까지의 거리 w(u,v)가 주어지면, 시작 노드 s 부터 다음 노드 v 까지의 거리는 d(u) + w(u,v)가 된다. 이때, 시작 노드 s 에서 다음 노드 v 까지 갈 때 꼭 현재 노드 u 를 거치라는 의무가 없어 다른 경로를 통해서도 시작 노드 s 에서 다음 노드 v에 도달할 수 있게 된다. 이렇게 다른 노드를 거쳐서 다음 노드 v 까지 가는 거리 d(v)가 d(u)+w(u,v) 보다 길다면 d(v) 값을 새로 계산한 d(u)+w(u,v)로 갱신하고, 반대로 d(v)가 더 짧다면 이번에 계산한 d(u)+w(u,v)값은 폐기된다. 여기서 u 는 현재 노드를, v는 u와 연결된 다른 노드를 가리키는 것으로 프리비어스(previous)는 v 노드로 갈 때 최단 거리가 되는 이전 노드 u를 저장하고, 프리비어스에 저장된 노드들을 역추적하면 최단 경로(shortest path)를 얻을 수 있게 된다. 따라서, 이동위치를 현재의 기점으로 하여 지정된 위치까지 최단 이동경로를 채택할 수 있게 된다.
상기 아암 제어부(230)는 이/적재 제어부(210)로부터 아암제어명령을 전달받아 아암 높이 및 각도를 제어하고, 상기 화물감지부(240)는 화물의 위치 파악과 영상이 포함된 정보를 이/적재 제어부(210)로 전달하고, 상기 주변감지부(250)는 주변 상황 파악과 영상이 포함된 정보가 이/적재 제어부(210)로 전달될 수 있게 화물 이/적재부(200)에 구비된다.
한편, 상기 화물 이/적재부(200)는 무선통신 수신부(260)가 각각 구비되어 작업자가 가지고 있는 무선통신 송신부(260')에서 추종신호가 발생되면 무선통신 수신부(260)가 추종신호의 세기 또는 감지시간을 측정하여 거리를 추정하고, 이/적재 제어부(210)를 경유하여 자율이동 제어부(220)가 이동제어되어 작업자를 감응하여 추종한다. 이때, 상기 화물 이/적재부(200)는 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 결합되거나 분리된 상태에서 각각 감응하여 추종하도록 하는 것이 바람직하다.
본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재 방법은 다음과 같다. 도8은 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재를 도시한 순서도이다.
도시된 바와 같이, 화물 이/적재부(200)의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 결합된 상태에서는 먼저, 센터서버(100)에서 이/적제 제어부(210)로 이동을 지시하는 단계(S100)로 센터서버(100)로부터 화물 위치와 수량 및 이/적재 순서에 따라 가용 가능한 화물 이/적재부(200)의 이동을 지시한다. 이때, 센터서버(100)는 가용 여부가 통신을 통하여 이루어진다. 즉, 센터서버(100)에서 통신을 이용하여 화물 이/적재 작업을 멈추고 있는 화물 이/적재부(200)를 호출신호가 송신되면 각각의 화물 이/적재의 이/적재 제어부(210)가 호출신호를 수신하여 가용 여부를 센터서버(100)로 송신하여 후속되는 작업이 이루어진다.
다음, 가용이 가능한 이/적재 재어부(201)가 화물 이/적재부(200)의 이동위치를 판단하고, 화물감지부(240)와 주변감지부(250)로부터 화물정보와 주변정보를 전달받아 화물 이/적재부(200)의 이동 거리 또는 아암 높이를 계산하고, 자율이동제어부(220)로 이동제어명령을 전달하여 화물 이/적재부(200)가 이동한다(S200).
이때, 자율이동 제어부(220)는 이/적재 제어부(210)로부터 화물정보와 주변정보를 전달받고, 레이저 센서(221-1)를 이용하여 반사되는 거리 또는 각도를 계산하여 이동영역의 지도를 생성하는 환경지도 작성단계(S210)를 통해 환경지도를 생성하고, 생성된 환경지도를 기반으로 레이저 스캔(222-1)을 통해 반사되는 시간에 따른 거리를 산출하고, 카메라(222-2)를 이용하여 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는다(위치 인식단계(S220)).
이어, 경로계획단계(S230)로 화물 이/적재부(200)의 이동위치가 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성한 후 화물 이/적재부(200)가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부(224-1)의 정보를 바탕으로 거리정보를 획득하고, 인공전위계를 활용하여 장애물로부터 이격되는 장애물 회피단계(S240)를 통해 안정되며 신속한 주행을 통한 이동이 이루어진다.
다음, 화물을 로드 또는 언로드하는 단계(S300)로 화물감지부(240)와 주변감지부(250)로부터 화물정보를 전달받고, 화물정보를 기반으로 아암제어부(230)로 아암제어명령을 전달하여 아암 높이가 제어되어 화물을 로드 또는 언로드된다.
다음, 이/적재 제어부(210)가 자율이동 제어부(220) 및 아암제어부(230)를 제어하여 화물의 로드 또는 언로드를 완료하는 단계(S400)로 마무리된다.
도9는 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재에 있어 정형화물 이/적재를 도시한 순서도이다.
도시된 바와 같이, 화물 이/적재부(200)의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 분리된 상태에서 화물의 이/적재 작업이 이루어지도록 하는 것으로 센터서버(100)에서 이/적제 제어부(210)로 이동을 지시하는 단계(S110)는 조인트(400)에 의하여 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 결합되었을 경우와 동일한다.
먼저, 아암제어부(230)에 의하여 로드 또는 언로드 되는 화물이 정형화물일 경우에는 센터서버(100)로부터 정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 정형화물 이/적재부(200a)의 이동을 이/적재 제어부(210)로 지시한다. 이때, 센터서버(100)로부터 쉬는 정형화물 이/적재부(200a)를 호출하는 단계(S111)와 쉬는 정형화물 이/적재부(200a)가 자기의 상태를 알리는 단계(S112)를 통해 가용 가능한 정형화물 이/적재부(200a)가 파악된 후 센터서버(100)는 적재장소에 가까운 정형화물 이/적재부(200a)의 이동을 지시하는 단계(S113)로 이루어진다. 이동과정에서 이/적재 제어부(210)는 환경지도 작성단계(S210), 위치 인식단계(S220), 경로 계획단계(S230), 장애물 회피단계(S240)를 통해 얻어진 정보를 기반으로 정형화물이 있는 곳으로 이동한다.
이후, 정형화물 이/적재부(200a)는 정형화물이 있는 곳으로 이동한 후 감지센서(240)에 의하여 감지된 정형화물 유무가 이/적제 제어부(210)에 의하여 센터서버(100)로 전송되는 단계(S121)를 경유한 후 아암제어명령을 아암제어부(230)로 전달하여 아암 구동부(214a)가 구동(S130) 된다. 이때, 이/적재 가이더(213a)에 구비된 화물감지부(240)에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부(210)로 전달되고, 정형 이/적재 프레임(210a)에 구비된 주변감지부(250)가 감지된 주변영상이 이/적재 제어부(210)로 전달되는 위치정보와 주변정보를 바탕으로 아암 구동부(214a)가 구동된다.
그리고 아암(212a)이 결합된 이/적재 가이더(213a)가 리프트레일(211a)을 따라 상,하로 리프트되는 가운데 정형화물의 이/적재 작업이 이루어진다(S140).
도10은 본 발명에 따른 지능형 무인 이/적재 시스템을 이용한 화물 이/적재에 있어 비정형화물 이/적재를 도시한 순서도이다.
도시된 바와 같이, 화물 이/적재부(200)의 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 조인트(400)에 의하여 분리된 상태에서 화물의 이/적재 작업이 이루어지도록 하는 것으로 센터서버(100)에서 이/적제 제어부(210)로 이동을 지시하는 단계(S110')는 조인트(400)에 의하여 정형화물 이/적재부(200a)와 비정형화물 이/적재부(200b)가 결합되었을 경우와 동일한다.
먼저, 이/적재 제어부(210)로 지시하는 단계(S110')로 센터서버(100)로부터 비정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 비정형화물 이/적재부(200b)의 이동을 각각 지시하고, 지시받은 이/적재 제어부(210)는 상기와 같은 환경지도 작성단계(S210), 위치 인식단계(S220), 경로계획단계(S230), 장애물 회피단계(S240)를 통해 얻어진 정보를 기반으로 비정형 화물이 있는 곳으로 각각 이동한다(S120'). 이때, 가용 가능한 비형화물 이/적재부(200b)의 이동은 센터서버(100)로부터 쉬는 비정형화물 이/적재부(200b)를 호출하는 단계(S111')와 쉬는 비정형화물 이/적재부(200b)가 자기의 상태를 알리는 단계(S112') 및 센터서버(100)는 적재장소에 가까운 비정형화물 이/적재부(200b)의 이동을 지시하는 단계(S113')를 통해 이루어진다.
다음, 비정형 이/적재 프레임(210b)에 구비된 화물감지부(240)에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부(210)를 통해 센터서버(100)로 전송(S121')된 후 비정형 이/적재 프레임(210b)에 구비된 주변감지부(250)의 주변영상이 이/적재 제어부(210)로 전달되는 위치정보와 주변정보를 바탕으로 아암제어명령을 아암제어부(210)로 전달하고, 아암 구동부(214b)에 의하여 아암(212b)이 구동되는 단계(S130')를 통해 비정형 화물의 이/적재가 이루어진다. 이때, 비정형화물이 있는 곳으로 이동한 후 감지센서(240)에 의하여 감지된 비정형화물 유무가 이/적제 제어부(210)에 의하여 센터서버(100)로 전송(S121')되고, 비정형화물이 있을 경우, 센터서버(100)는 정형화물 이/적재부(200a)를 비정형화물 이/적재부(200b)가 있는 곳으로 이동을 지시한다.
다음, 아암 구동부(214b)에 의하여 이/적재 아암 가이더(231b)의 아암(212b)이 비정형 화물을 흡착하여 로드하고, 이어 대기중인 정형 이/적재 프레임(210a)의 적재부(217a)에 언로드되는 작업이 이루어진다.
본 발명에서는 비정형 화물 또는 정형 화물에 각각 정형화물 이/적재부(200a) 또는 비정형화물 이/적재부(200b)가 이동되어 이/적재 작업이 이루어지도록 하였으나, 이러한 형태 이외에 비정형화물이 있는 곳으로 이동된 비정형화물 이/적재부에 센터서버(100)로부터 다수개의 정형화물 이/적재부(200a)가 이동되어 비정형화물 이/적재가 이루어지도록 하는 것이 바람직하다.
또한, 비정형화물이 있는 곳으로 이동된 다수개의 비정형화물 이/적재부(200b)에 센터서버(100)로부터 다수개의 정형화물 이/적재부(200a)가 이동되어 비정형화물의 이/적재가 이루어지도록 하는 것이 바람직하다.
100:센터서버
200:화물 이/적재부
210:이/적재 제어부
220:자율이동 제어부
230:아암 제어부
240:화물감지부
250:주변감지부

Claims (21)

  1. 자율이동 제어부로 이동제어명령을 전달하고, 아암 제어부로 아암제어명령을 전달하는 이/적재 제어부가 구비된 화물 이/적재부를 포함하고,
    상기 화물 이/적재부는,
    정형화물을 로드 및 언로드하는 적재부가 구비된 정형화물 이/적재부와;
    비정형화물을 로드 및 언로드하는 비정형화물 이/적재부를가 포함하며,
    상기 정형화물 이/적재부와 비정형화물 이/적재부는 조인트에 의하여 착탈 가능하게 구비되되,
    상기 조인트는,
    상기 정형화물 이/적재부의 정형 이/적재 프레임 후방에 구비된 조인홈 및 상기 조인홈을 수직으로 관통하는 아우터 조인핀홀을 포함하는 요부형 조인부와,
    상기 비정형화물 이/적재부의 비정형 이/적재 프레임 후방에 구비된 조인축 및 상기 조인축의 축방향에 대하여 직각방향을 갖는 인너 조인핀홀을 포함하는 철부형 조인부를 포함하며,
    상기 정형화물 이/적재부와 상기 비정형화물 이/적재부는,
    상기 조인축이 조인홈에 삽입된 상태에서 상기 아우터 조인핀홀과 인너 조인핀홀에 조인핀이 삽입됨으로써 결합되고, 상기 삽입된 조인핀을 제거하여 요부형 조인부와 철부형 조인부의 구속력이 해지됨으로써 분리되는 것을 특징으로 하는 지능형 무인 이/적재 시스템.
  2. 삭제
  3. 제1항에 있어서,
    상기 정형화물 이/적재부는
    정형 이/적재 프레임과;
    상기 정형 이/적재 프레임의 전방으로 리프트레일에 결합된 이/적재 가이더와;
    상기 이/적재 가이더의 하부에 구비된 화물감지부와;
    상기 정형 이/적재 프레임의 하부에 구비된 주변감지부와;
    상기 정형 이/적재 프레임에 구비된 아암 구동부와;
    상기 이/적재 가이더와 리프트레일 고정편에 구비된 로드셀과;
    상기 리프트레일의 배면 상부와 하부에 각각 구비된 근접센서와;
    상기 정형 이/적재 프레임의 후방에 구비된 적재부와;
    상기 정형 이/적재 프레임의 후방에 구비된 전원부; 및
    자율이동제어부가 포함됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  4. 제1항에 있어서,
    상기 비정형화물 이/적재부는
    비정형 이/적재 프레임과;
    상기 비정형 이/적재 프레임에 결합된 이/적재 아암 가이더와;
    상기 이/적재 아암 가이더에 구비된 화물감지부와;
    상기 비정형 이/적재 프레임에 구비된 주변감지부와;
    상기 비정형 이/적재 프레임에 구비된 아암 구동부와;
    상기 아암 가이더에 구비된 로드셀과;
    상기 비정형 이/적재 프레임에 구비된 전원부; 및
    자율이동제어부가 포함됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  5. 제1항에 있어서,
    상기 이/적재 제어부는
    화물 이/적재부의 이동을 제어하는 자율이동 제어부와;
    아암제어명령을 전달받아 아암 높이 또는 각도를 제어하는 아암 제어부와;
    화물의 정보를 이/적재 제어부로 전달하는 화물감지부와;
    주변의 정보를 이/적재 제어부로 전달하는 주변감지부를 포함하는 것을 특징으로 하는 지능형 무인 이/적재 시스템.
  6. 제5항에 있어서,
    상기 자율이동 제어부는
    이/적재 제어부로부터 화물정보와 주변정보를 전달받고, 반사되는 거리 또는 각도를 계산하여 이동영역의 지도를 생성하는 환경지도 작성부와;
    생성된 환경지도를 기반으로 레이저 스캔을 통해 반사되는 시간에 따른 거리를 산출하고, 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는 위치인식부와;
    화물 이/적재부의 이동위치를 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성하는 경로계획부와;
    화물 이/적재부가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부의 정보를 바탕으로 거리정보를 획득하고, 장애물로부터 이격되는 장애물 회피부가 포함됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  7. 삭제
  8. 제6항에 있어서,
    상기 위치인식부는
    환경지도 내 현재 위치정보에 비컨으로부터 수신되는 신호 세기의 차이 정보를 이용하여 위치정보가 보정됨이 포함됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  9. 제6항에 있어서,
    상기 환경지도 내 지정된 위치까지 생성되는 이동경로는 방향성 있는 그래프에서 임의의 두 노드 간의 최단 거리의 경로를 찾는 딕스트라 알고리즘으로 생성되되, 시작 노드 s부터 현재 노드 u까지의 최간 거리 d(u)을 알고, 현재 노드 u에서 다음 노드 v까지의 거리 w(u,v)가 주어지면, 시작 노드 s부터 다음 노드 v까지의 거리는 d(u) + w(u,v)로 다른 노드를 거쳐서 다음 노드 v까지 가는 거리 d(v)가 d(u)+w(u,v) 보다 길다면 d(v) 값을 새로 계산한 d(u)+w(u,v)로 갱신하고, 반대로 d(v)가 더 짧다면 이번에 계산한 d(u)+w(u,v)값은 폐기되는 가운데 다음 노드 v로 갈 때 최단 거리가 되는 이전 노드 u를 저장하고, 저장된 노드들을 역추적하여 얻어진 최단 경로를 통해 이동위치를 현재의 기점으로 하여 지정된 위치까지 최단 이동경로가 채택됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  10. 제1항에 있어서,
    상기 화물 이/적재부는
    무선통신 수신부를 더 구비하여 작업자가 가지고 있는 무선통신 송신부에서 추종신호가 발생되면 무선통신 수신부가 추종신호의 세기 또는 감지시간을 측정하여 거리를 추정하고, 자율이동 제어부가 제어되어 작업자를 감응하여 추종됨을 특징으로 하는 지능형 무인 이/적재 시스템.
  11. 센터서버로부터 화물 위치와 이/적재 순서에 따라 가용 가능한 화물 이/적재부의 이동을 이/적재 제어부로 지시하는 단계와;
    상기 이/적재 제어부가 화물 이/적재부의 이동위치를 판단하고, 화물정보와 주변정보를 전달받아 화물 이/적재부의 이동 거리, 아암 높이 또는 각도를 계산하고, 자율이동제어부로 이동제어명령을 전달하여 화물 이/적재부가 이동하는 단계와;
    상기 화물정보를 전달받고, 화물정보를 기반으로 아암제어부로 아암제어명령을 전달하여 아암 높이 또는 각도가 제어되어 화물을 로드 및 언로드하는 단계와;
    상기 이/적재 제어부가 자율이동 제어부 및 아암제어부를 반복 제어하여 화물의 로드 및 언로드를 완료하는 단계를 포함하며,
    상기 화물 이/적재부는,
    정형 화물을 로드 및 언로드하는 적재부가 구비된 정형화물 이/적재부와, 비정형화물을 로드 및 언로드하는 적재부가 구비된 비정형화물 이/적재부를 포함하되, 상기 정형화물 이/적재부와 비정형화물 이/적재부는 조인트에 의하여 착탈 가능하게 구비되고,
    상기 조인트는,
    상기 정형화물 이/적재부의 정형 이/적재 프레임 후방에 구비된 조인홈 및 상기 조인홈을 수직으로 관통하는 아우터 조인핀홀을 포함하는 요부형 조인부와, 상기 비정형화물 이/적재부의 비정형 이/적재 프레임 후방에 구비된 조인축 및 상기 조인축의 축방향에 대하여 직각방향을 갖는 인너 조인핀홀을 포함하는 철부형 조인부를 포함하며,
    상기 정형화물 이/적재부와 상기 비정형화물 이/적재부는,
    상기 조인축이 조인홈에 삽입된 상태에서 상기 아우터 조인핀홀과 인너 조인핀홀에 조인핀이 삽입됨으로써 결합되고, 상기 삽입된 조인핀을 제거하여 요부형 조인부와 철부형 조인부의 구속력이 해지됨으로써 분리되는 것을 특징으로 하는 지능형 무인 이/적재 방법.
  12. 제11항에 있어서,
    상기 자율이동제어부는 이/적재 제어부로부터 화물정보와 주변정보를 전달받고, 반사되는 거리 또는 각도를 계산하여 이동영역의 지도를 생성하는 환경지도 작성단계와;
    생성된 환경지도를 기반으로 반사되는 시간에 따른 거리를 산출하고, 천장패턴에 변화를 감지하여 환경지도 내 현재 위치정보를 얻는 위치 인식단계와;
    화물 이/적재부의 이동위치가 현재 위치를 기점으로 하고, 환경지도 내 지정된 위치까지 이동경로를 생성하는 경로계획단계; 및
    화물 이/적재부가 생성된 이동경로를 따라 이동하는 과정에서 동적 또는 정적 장애물이 나타나면 장애물 감지부의 정보를 바탕으로 거리정보를 획득하고, 장애물로부터 이격되는 장애물 회피단계가 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  13. 삭제
  14. 제12항에 있어서,
    상기 화물이 정형화물일 경우,
    센터서버로부터 정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 정형화물 이/적재부의 이동을 이/적재 제어부로 지시하는 단계와;
    지시받은 이/적재 제어부는 환경지도 작성단계, 위치 인식단계, 경로계획단계, 장애물 회피단계를 통해 얻어진 정보를 기반으로 정형화물이 있는 곳으로 이동하는 단계와;
    이/적재 가이더에 구비된 화물감지부에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부로 전달되고, 정형 이/적재 프레임에 구비된 주변감지부에 의하여 감지된 주변영상이 이/적재 제어부로 전달되는 위치정보와 주변정보를 바탕으로 아암제어명령을 아암제어부로 전달하여 아암 구동부가 구동되는 단계와;
    아암이 결합된 이/적재 가이더가 리프트레일을 따라 리프트되는 단계를 통해 정형화물의 이/적재가 이루어지는 것이 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.

  15. 제14항에 있어서,
    가용 가능한 정형화물 이/적재부의 이동은
    센터서버로부터 쉬는 정형화물 이/적재부를 호출하는 단계와;
    쉬는 정형화물 이/적재부가 자기의 상태를 알리는 단계와;
    센터서버는 적재장소에 가까운 정형화물 이/적재부의 이동을 지시하는 단계가 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  16. 제14항에 있어서,
    정형화물이 있는 곳으로 이동한 후 감지센서에 의하여 감지된 정형화물 유무가 이/적재 제어부에 의하여 센터서버로 전송되는 단계가 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  17. 제12항에 있어서,
    상기 화물이 비정형화물일 경우,
    센터서버로부터 비정형화물 위치와 수량 또는 이/적재 순서에 따라 가용 가능한 비정형화물 이/적재부의 이동을 각각 이/적재 제어부로 지시하는 단계와;
    지시받은 이/적재 제어부는 환경지도 작성단계, 위치 인식단계, 경로계획단계, 장애물 회피단계를 통해 얻어진 정보를 기반으로 비정형 화물이 있는 곳으로 각각 이동하는 단계와;
    비정형 이/적재 프레임에 구비된 화물감지부에 의하여 화물위치와 영상이 포함된 정보가 이/적재 제어부로 전달되고, 비정형 이/적재 프레임에 구비된 주변감지부의 주변영상이 이/적재 제어부로 전달되는 위치정보와 주변정보를 바탕으로 아암제어명령을 아암제어부로 전달하고, 아암 구동부에 의하여 아암이 구동되는 단계를 통해 비정형 화물의 이/적재가 이루어지는 것이 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  18. 제17항에 있어서,
    가용 가능한 비형화물 이/적재부의 이동은
    센터서버로부터 쉬는 비정형화물 이/적재부를 호출하는 단계와;
    쉬는 비정형화물 이/적재부가 자기의 상태를 알리는 단계와;
    센터서버는 적재장소에 가까운 비정형화물 이/적재부의 이동을 지시하는 단계가 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  19. 제17항에 있어서,
    비정형화물이 있는 곳으로 이동한 후 감지센서에 의하여 감지된 비정형화물 유무가 이/적재 제어부에 의하여 센터서버로 전송되는 단계가 포함되고,
    비정형화물이 있을 경우, 센터서버는 정형화물 이/적재부를 비정형화물 이/적재부가 있는 곳으로 이동을 지시하여 비정형화물이 적재 및 이송됨이 더 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  20. 제17항에 있어서,
    비정형화물이 있는 곳으로 이동된 비정형화물 이/적재부에 센터서버로부터 다수개의 정형화물 이/적재부가 이동되어 비정형화물 이/적재가 이루어지는 것이 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
  21. 제17항에 있어서,
    비정형화물이 있는 곳으로 이동된 다수개의 비정형화물 이/적재부에 센터서버로부터 다수개의 정형화물 이/적재부가 이동되어 비정형화물 이/적재가 이루어지는 것이 포함됨을 특징으로 하는 지능형 무인 이/적재 방법.
KR1020140158551A 2014-11-14 2014-11-14 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법 KR101710104B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140158551A KR101710104B1 (ko) 2014-11-14 2014-11-14 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140158551A KR101710104B1 (ko) 2014-11-14 2014-11-14 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법

Publications (2)

Publication Number Publication Date
KR20160057668A KR20160057668A (ko) 2016-05-24
KR101710104B1 true KR101710104B1 (ko) 2017-03-08

Family

ID=56113808

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140158551A KR101710104B1 (ko) 2014-11-14 2014-11-14 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법

Country Status (1)

Country Link
KR (1) KR101710104B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023059636A1 (en) * 2021-10-06 2023-04-13 Berkshire Grey Operating Company, Inc. Systems and methods for dynamic processing of objects provided in vehicles with cooperating programmable motion devices
US11866269B2 (en) 2021-10-06 2024-01-09 Berkshire Grey Operating Company, Inc. Dynamic processing of objects provided in elevated vehicles with evacuation systems and methods for receiving objects
US11884495B2 (en) 2016-12-09 2024-01-30 Berkshire Grey Operating Company, Inc. Systems and methods for processing objects provided in vehicles

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9880561B2 (en) 2016-06-09 2018-01-30 X Development Llc Sensor trajectory planning for a vehicle
CN106598073B (zh) * 2016-12-27 2019-06-28 武汉理工大学 基于四旋翼无人机的岸桥起重机结构检测系统
CN106672638A (zh) * 2017-03-21 2017-05-17 济南威瞰科技有限公司 一种智能装车系统
CN106950997A (zh) * 2017-05-11 2017-07-14 北京京东尚科信息技术有限公司 无人机自主卸货的方法及装置
CN107589747A (zh) * 2017-11-08 2018-01-16 湘潭大学 一种全驱智能引导移载装置
KR101884232B1 (ko) * 2018-07-02 2018-08-30 국무상 자율주행대차 및 대차승강시스템을 구비하는 물류시스템
US11691658B2 (en) * 2019-09-05 2023-07-04 John Bradford King Vehicle systems and methods
CN111301966B (zh) * 2020-03-05 2023-04-14 杭州明度智能科技有限公司 一种装载设备移动平台和自动装载系统
KR102422251B1 (ko) * 2020-11-19 2022-07-19 주식회사 탭스인터내셔널 의료폐기물 쓰레기통용 자율이송 카트
KR102425529B1 (ko) * 2020-12-08 2022-07-25 한남대학교 산학협력단 카메라를 이용한 자율주행 지게차
WO2023059828A1 (en) * 2021-10-06 2023-04-13 Berkshire Grey Operating Company, Inc. Systems and methods for dynamic processing of objects provided in vehicles with dual function end effector tools

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100840978B1 (ko) 2007-05-07 2008-06-24 연세대학교 산학협력단 이동통신 단말의 지하철 운행시각 안내 시스템 및 방법
JP2010089211A (ja) 2008-10-08 2010-04-22 Panasonic Corp 組立部品供給システム
JP2014006832A (ja) 2012-06-27 2014-01-16 Hitachi Ltd 搬送システム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130064580A (ko) * 2011-12-08 2013-06-18 정상권 운반 적재능력을 향상시킨 운반차

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100840978B1 (ko) 2007-05-07 2008-06-24 연세대학교 산학협력단 이동통신 단말의 지하철 운행시각 안내 시스템 및 방법
JP2010089211A (ja) 2008-10-08 2010-04-22 Panasonic Corp 組立部品供給システム
JP2014006832A (ja) 2012-06-27 2014-01-16 Hitachi Ltd 搬送システム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11884495B2 (en) 2016-12-09 2024-01-30 Berkshire Grey Operating Company, Inc. Systems and methods for processing objects provided in vehicles
WO2023059636A1 (en) * 2021-10-06 2023-04-13 Berkshire Grey Operating Company, Inc. Systems and methods for dynamic processing of objects provided in vehicles with cooperating programmable motion devices
US11866269B2 (en) 2021-10-06 2024-01-09 Berkshire Grey Operating Company, Inc. Dynamic processing of objects provided in elevated vehicles with evacuation systems and methods for receiving objects

Also Published As

Publication number Publication date
KR20160057668A (ko) 2016-05-24

Similar Documents

Publication Publication Date Title
KR101710104B1 (ko) 지능형 무인 이/적재 시스템 및 이를 이용한 이/적재 방법
US10061325B2 (en) Autonomous approach and object pickup
US10265856B2 (en) Reorienting a distance sensor using an adjustable leveler
US9828223B2 (en) Fork-lift truck and method for operating a fork-lift truck
WO2021047288A1 (zh) 自动导向叉车
JP6172293B2 (ja) トレーラやコンテナから製品を荷下し/荷解きするための自動トラック荷下し装置
CN109160451A (zh) 自主导航无人叉车、系统及控制方法
US9618932B2 (en) Palletizing mobile drive units
JP7163782B2 (ja) 自律走行台車
KR102315225B1 (ko) 파렛트 자동인식 무인운반차 및 파렛트 자동인식 도킹시스템
US11460845B2 (en) Logistics facility management system
JP2023546553A (ja) 太陽電池パネルハンドリングシステム
CN114641447A (zh) 移动式自动引导车辆托盘堆叠器和卸堆器系统及其方法
EP3705971A1 (en) Virtual coupling
JP7142450B2 (ja) 建設現場における資機材搬送システム
CN112757286A (zh) 自主移动车辆
EP3647896A1 (en) Virtual coupling
US20220203551A1 (en) Luggage transport system, luggage transport method, and storage medium
CN213201075U (zh) 搬运机器人
WO2024047724A1 (ja) フォークリフト、および自動倉庫システム
JP2019169019A (ja) 走行装置の走行制御システム
KR102569114B1 (ko) 팔레트 이송 시스템
US20240308827A1 (en) Load Handling Sensors for a Material Handling Vehicle
WO2023032124A1 (ja) 無人搬送車および牽引搬送方法
JP7548126B2 (ja) 移載システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191204

Year of fee payment: 4