KR101883083B1 - 트레일러 로딩 평가와 트레이닝 - Google Patents

트레일러 로딩 평가와 트레이닝 Download PDF

Info

Publication number
KR101883083B1
KR101883083B1 KR1020167001288A KR20167001288A KR101883083B1 KR 101883083 B1 KR101883083 B1 KR 101883083B1 KR 1020167001288 A KR1020167001288 A KR 1020167001288A KR 20167001288 A KR20167001288 A KR 20167001288A KR 101883083 B1 KR101883083 B1 KR 101883083B1
Authority
KR
South Korea
Prior art keywords
loading
packages
processor
operable
container
Prior art date
Application number
KR1020167001288A
Other languages
English (en)
Other versions
KR20160019962A (ko
Inventor
마이클 이. 그로블
카티크 락시미나라야난
케빈 제이. 오코넬
큐네트 엠. 타스키란
제이 제이. 윌리엄스
Original Assignee
심볼 테크놀로지스, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 심볼 테크놀로지스, 엘엘씨 filed Critical 심볼 테크놀로지스, 엘엘씨
Publication of KR20160019962A publication Critical patent/KR20160019962A/ko
Application granted granted Critical
Publication of KR101883083B1 publication Critical patent/KR101883083B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q50/28
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Operations Research (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Technology (AREA)
  • Image Analysis (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)

Abstract

트레일러 로딩 평가를 위한 기술은 모니터를 이용하여 트레일러의 로딩을 촬영하는 것을 포함한다. 다음 단계는 모니터로부터의 이미지 정보를 이용하여 트레일러의 로딩 동안 패키지 적재 품질과 관련된 로딩 사건들을 검출하는 단계를 포함한다. 다음 단계는 검출된 로딩 사건들을 북마킹하는 단계를 포함한다. 다음 단계는 로딩 사건들을 스코어링하는 단계를 포함한다. 다음 단계는 로딩 사건들의 시각적 표현을 그래픽 사용자 인터페이스 상에 디스플레이하는 단계를 포함한다. 모니터는 로딩된 패키지들의 적층된 벽까지의 거리를 측정하도록 작동 가능한 적외선 3차원적 깊이 카메라, 그리고 로딩 사건들을 검출하기 위해 광 이미지를 제공하도록 작동 가능한 비디오 카메라일 수 있다.

Description

트레일러 로딩 평가와 트레이닝{TRAILER LOADING ASSESSMENT AND TRAINING}
교통 및 물류 고객들을 위한 결정적인 양태는 그들의 분산 설비에 트레일러들의 개별적 패키지들의 효율적인 로딩이다. 로딩은 빨리, 안전하게 그리고 가능한 트레일러 공간을 거의 낭비하지 않고 행해지는 것이 바람직하다. 요즈음, 로딩 절차들은 일반적으로, 어떤 순서/방향으로 트레일러를 채울 것인지 그리고 수송 중에 이동하거나 넘어지지 않도록 패키지들을 정확하게 중량 분산시켜 배열함으로써 손상을 최소화하도록 구조적으로 견고하게 되어 있는 패키지들의 스택들을 쌓는 방법에 대한 가이드라인들을 포함한다.
여러 이유들로 인해 작업 중에 이러한 가이드라인 준수를 달성하거나 모니터링하기가 현재는 어렵다. 첫째로, 로더 경험 부족으로 인한 문제가 있다. 운송 회사들은 로더 위치들에 대한 큰 회전율을 참조한다. 작업은 까다로운 환경에서의 저임금 중노동이다. 그것은 또한 일년에 몇 달 동안만 매우 많은 로더들을 필요로 하는 계절 작업이다. 둘째로, 부적절한 트레이닝으로 인한 문제가 있다. 까다로운 환경은 또한 트레이닝을 위한 시간을 얼마 안 남기게 한다. 대부분의 트레이닝은 감독자들이 지도와 피드백을 가능한 제공하는 "현장(on-the-job)" 타입의 트레이닝이다. 셋째로, 로딩의 속도로 인한 문제가 있다. 로더들은 빨리 일해야 하는데; 그들은 시간당 수 백개의 패키지들을 로딩해야 하고 작업을 끝내야 하기 때문이다. 안전성과 품질 절차들은 그러한 바쁜 상황에서는 잊혀질 수 있다. 네번째로, 매뉴얼 로더 모니터링으로 인한 문제가 있다. 감독자들은 수많은 상이한 도어들에 대한 책임이 있고 로딩 활동의 품질과 상태를 체크하기 위해 정기적으로 그들을 방문할 필요가 있다. 이것은 시간의 대부분을 로더들을 모니터링하지 않은 채로 남겨두게 한다.
절차 위반들은 그러므로 일상적이고, 아직 크게 밝혀지지 않았으므로 손상된 패키지들, 비능률적 패킹 트레일러들, 및 작업장 부상들의 결과가 될 수 있다.
따라서, 로딩 절차 위반들을 줄이기 위해서는 더 효과적으로 로딩 절차 준수를 평가하기 위한 기술과 트레이닝 자료를 생성할 필요가 있다.
하기의 상세한 설명과 함께, 개별 도면들에 걸쳐서 유사한 참조 번호들이 동일하거나 기능적으로 유사한 요소들을 지칭하는 첨부 도면들이 명세서에 포함되고 명세서의 일부를 형성하며, 청구항 발명을 포함하는 개념들의 실시 형태들을 더 예시하고, 이러한 실시 형태들의 다양한 원리들 및 장점들을 설명하는 역할을 한다.
도 1은 본 발명의 일부 실시 형태들에 따른, 트레일러의 로딩 동안의 시스템의 간략화된 사시도이다.
도 2는 도 1의 간략화된 후면도이다.
도 3은 본 발명의 다른 실시 형태에 따라, 로더들이 트레일러를 로딩하는 것처럼 로더를 보여주는 도 2의 또 다른 후면도이다.
도 4는 본 발명의 일부 실시 형태들에 따른, 방법의 간략화된 흐름도이다.
숙련된 기술자들은, 도면들에서의 요소들이, 간결성 및 명료성을 위해 도시되고, 반드시 축척대로 그려진 것은 아니라는 점을 이해할 것이다. 예를 들어, 도면들에서 요소들 중 일부의 치수들은, 본 발명의 실시 형태들의 이해를 향상시키는데 도움을 주기 위해 다른 요소들에 비해 과장될 수 있다.
장치 및 방법 컴포넌트들은, 도면들에서 적절한 경우 종래의 심볼들로 표현되어 있고, 도면들은 본원의 기재의 이익을 갖는 통상의 기술자에게 명백할 상세들로 개시내용을 모호하게 하지 않기 위해서, 본 발명의 실시 형태들의 이해와 관련된 특정 상세들만을 도시한다.
로딩 절차 위반들을 줄이기 위해서 더 효과적으로 로딩 절차 준수를 평가하기 위한 기술과 트레이닝 자료를 생성하는 것을 제공하는 장치와 방법이 기술된다. 특히, 본 발명은 로딩 동작을 캡처하여 분석하기 위해 이미징 및 깊이 센서들을 이용할 수 있다. 센서 데이터는 패키지들의 갭들과 구조적 형성들을 검출하기 위해 분석된다. 그것은 또한 로더 위치들과 오리엔테이션들을 검출하는데 사용된다. 시스템은 로딩 동작을 스코어링하고 벽 스코어들의 랭킹과 통계량들을 유지한다. 스코어 이력은 시프트 요약들(베스트와 워스트 로드들 또는 벽들)과 같은 검토 자료와 트레이닝 목적들을 위한 로드들의 시간 경과 표현들을 생성하는데 사용된다.
도 1은 본 발명의 일부 실시 형태에 따른 시스템의 간략화된 사시도이다. 본 발명은 트레일러의 로딩을 촬영하기 위한 모니터(102)를 포함한다. 모니터는, 본 분야에 알려진 것처럼, RGB 카메라와 같은, 비디오 카메라 장치와, 스테레오, 구조화된 광 또는 타임-오브-플라이트 깊이 카메라(structured light or time-of-flight depth camera), 이미지에서 포인트들(즉, 화소들)까지의 거리를 결정하는 것이 가능한 그와 유사한 것과 같은, 임의의 종류의 3차원 카메라를 포함할 수 있다. 특히, 모니터는 트레일러가 로딩된 것처럼 벽에 스택된 패키지들의 "벽들"(108)의 빌딩을 시각화할 수 있다.
모니터(102)는 서버 또는 프로세서(104)에 결합되고, 트레일러 로딩에 관한 영상 정보를 프로세서로 이송하도록 작동 가능하다. 모니터는 유선(도시됨) 또는 무선(도시 안됨) 통신, 예를 들어 무선 로컬 영역 네트워크를 이용하는 프로세서로 영상 정보를 이송할 수 있다. 프로세서(104)는 또한 단말기의 사용자 인터페이스(114)를 통해 정보를 전달하거나 사람이 어떻게 트레일러를 로딩하고 있는지에 관해 단말기를 사용하는 로더에게 명령어들을 제공할 목적으로 네트워크 내의 모바일 또는 고정-위치 단말기(106)와의 무선(도시됨) 또는 유선(도시 안됨) 통신을 제공할 수 있다. 사용자 인터페이스는 착용 장치에 청취 가능 경보 또는 고유 진동 패턴을 제공할 수 있거나, 사용자 인터페이스는 그래픽 디스플레이 또는 텍스트 장치일 수 있다. 무선 또는 유선 통신을 설치할 필요가 있는 프로토콜들 그리고 메시징은 본 분야에 알려져 있고, 간략화를 위해 여기에서 기술되지 않을 것이다.
프로세서(104)는 모니터(102)로부터 이미지 정보를 이용하여 실시간으로 트레일러 로딩을 모니터링할 수 있다. 프로세서는 적절하고 부적절한 트레일러 로딩의 사건들을 결정하기 위해 이러한 이미지 정보를 처리하고 이러한 사건들의 시각적 표현을 디스플레이하기 위해 단말기(106)의 그래픽 사용자 인터페이스(114)로 이러한 정보를 보낼 수 있다. 시각적 표현은 모바일 장치, 리더보드 또는 대시보드, 서비스 키오스크, 컴퓨터 또는 로더에 의해 착용될 수 있는 장치를 포함할 수 있는 단말기에 제공될 수 있다.
다양한 엔티티들이 본 발명의 실시 형태들의 발명 개념들을 지원하도록 적응된다. 도면은 작동할 네트워크에 필요한 모든 장비들을 도시한 것이 아니라 단지 본 명세서에서 특히 실시 형태들의 설명과 관련된 컴포넌트들 및 논리적 엔티티들만을 도시한 것임을 본 분야의 숙련자들은 알 것이다. 예를 들어, 서버들, 이미징 장치들과 통신 단말기들은 별도의 프로세서들, 통신 인터페이스들, 송수신기들, 메모리들, 디스플레이들, 광학 디바이스들, 등을 모두 포함할 수 있다. 일반적으로, 프로세서들, 통신 장치들, 디스플레이들, 및 광학 디바이스들 등의 컴포넌트들은 널리 공지되어 있다. 예를 들어, 프로세싱 유닛들은 마이크로프로세서들, 마이크로컨트롤러들, 디지털 신호 프로세서들, 메모리 캐시, 주문형 반도체(ASIC)들, 및/또는 논리 회로 등의, 이들로만 제한되지 않는 기본 컴포넌트들을 포함하는 것으로 공지되어 있다. 이러한 컴포넌트들은 전형적으로, 고레벨 설계 언어 또는 디스크립션들(descriptions)을 이용하여 표현된, 컴퓨터 명령어를 이용하여 표현된, 또는 메시징 논리 흐름도를 이용하여 표현된 알고리즘들 및/또는 프로토콜들을 구현하도록 적응된다.
따라서, 알고리즘, 논리 흐름, 및/또는 메시징/시그널링 흐름이 주어지면, 본 분야의 숙련자는 주어진 로직을 수행하는 프로세서를 구현하기 위해 이용 가능한 많은 설계 및 개발 기술들을 알 것이다. 따라서, 도시된 엔티티들은, 본 명세서의 설명에 따라, 본 발명의 각종 실시 형태들을 구현하도록 적응된 공지된 시스템을 나타낸다. 더욱이, 본 분야의 숙련자들은 본 발명의 양태들이 다양한 물리적인 컴포넌트들 전반에 걸쳐서 구현될 수 있고 단일 플랫폼 구현에 전혀 한정되지 않음을 인식하고 있을 것이다. 예를 들어, 본 발명의 이미지 프로세싱 및 제어 양태들은 위에 열거한 기기들 중 어떤 것에도 구현될 수 있고 또는 그러한 컴포넌트들 전반에 분배될 수도 있다. 본 발명의 동작 요건들이 펌웨어 또는 하드웨어와 관련하여 소프트웨어로 구현될 수 있다 것이 본 발명에서 예상된다.
본 발명은 패키지들의 상태의 모델을 유지한다. 이것은 패키지가 로딩되기 전에 스캐닝된 유일한 패키지 ID와 길이, 폭과 높이(또는 등가의 볼륨), 및 중량과 같은 패키지들의 속성들과의 사이의 상관 관계를 설명한 패키지 모델을 유지하는 것을 포함한다. 분류 중에 그리고 로딩 이전에, 각각의 패키지는 시스템이 패키지 모델을 업데이트할 시에, 패키지 치수와 중량을 스캐닝하는 디멘져닝 스캔(dimensioning scan)을 통하여 통과된다.
로딩 절차의 한가지 주요 양태는 패키지들의 정확한 적재와 로딩 절차 사건들의 검출이다. 도 2는 모니터에 의해 촬영된 패키지 벽(108)의 예를 보여준다. 수많은 로딩 절차 오차들이 보여진다. 이러한 벽(108)은 모니터의 사시도로부터 보여진 것처럼 도 1의 후면도로부터 도시된다. "T" 형성(206)은 바람직한 구조적 형성, 즉 에지들이 벽돌 벽에서와 같이, 적절히 오프셋되고 패키지들이 적절히 지지 받는 박스들의 연접(juncture)을 강조한다. 이러한 화살표는 "양호"라고 주석이 달릴 수 있다. 윤곽이 드러나는 다각형들(202)은 갭들, 즉 패키지들이 타이트하게 패킹되지 않은 공간들을 보여준다. 이러한 화살표는 "공극/갭"이라는 주석이 달릴 수 있다. 라인들(204)은 구조적 품질 문제들인 어떠한 지지도 받지 못하는 패키지들의 바닥부들을 강조한다. 이러한 화살표는 "지지 받지 못함"이라는 주석이 달릴 수 있다. 패키지 상단들의 라인들(200)은 같은 레벨에 있지 않은, 즉 다시 구조적 품질 문제인 패키지들을 강조한다. 이러한 화살표는 "무레벨"이라는 주석이 달릴 수 있다. 대조적으로, 도 3은 갭들, 오버행들 및 경사진 패키지들이 적다는 점에서 잘 구조화된 벽의 예를 보여준다(그러나, "T" 형성들의 관점에서 현저하게 양호한 것은 아니라는 것에 주목한다).
본 발명이 패키지 로딩 구조에 주목하고 있지만, 패키지가 로딩되고 있는 동안 또한 부적절한 절차 사건들이 있을 수 있다. 예를 들어, 도 3은 또 다른 중요한 절차 위반, 즉 박스들을 리프팅하는 동안 부정확한 자세를 보여준다. 그것은 또한 트레일러의 중앙과 이동 계단들의 아래로 움직이는 롤러들(302)을 보여준다. 이들 둘 다는 잠재적인 안전성 위험 요소들이다. 그러므로 안전성 위반들은 일반적으로, 부적절한 리프팅 자세를 포함하여, 롤러들(302) 위에 서 있고, 계단들(300) 위에서 부정확한 밸런스를 가지고 있는, 부정확한 로더의 포즈들로 구성된다. 본 발명은, 여기에서 점증적으로 로딩 사건들로서 언급되는, 패키지 구조적 문제들뿐만 아니라 로더에 의한 절차 위반들도 검출하기 위해서 깊이 이미지들, 적외선 이미지들, 포인트 클라우드 그리고 RBG 이미지들의 조합을 사용한다. 프로세서는 모니터로부터의 이미지 정보를 이용하여 트레일러의 로딩 동안 패키지 적재 품질과 관련된 이러한 로딩 사건들을 검출할 수 있다. 여기에서 규정된 것처럼, 포인트 클라우드는 3차원 좌표들을 가지고 있는 이미지의 각 "화소"를 규정한다. 예를 들어, 카메라 이미지로부터의 RGB 값은 각 화소에 대한 x,y,z 위치를 가지고 있다. "포인트 클라우드"는 트레일러의 3차원적 환경의 레크리에이션을 허용하는, 모니터에 의해 검출된 x,y,z 위치 "화소들"의 콜렉션이다.
프로세서는 이후 검토 및 트레이닝 자료의 생성을 위해 이러한 로딩 사건들을 북마킹하며, 여기서 다양한 로딩 사건들은 미래 참조를 위해 저장되고 인덱스된다. 유용하게 로딩 사건들은 또한 로딩 진행과 관련하여 인덱스된다. 이러한 인덱스 자료는 다음을 포함한다: 로딩 사건들의 검출할 때 촬영된 시간, 트레일러가 로딩되는 섹션(예를 들어, 벨리, 노즈, 테일), 패키지 벽의 패키지들의 속성들(치수들, 중량), 마지막 완료된 벽의 깊이, 트레일러의 충만도, 마지막 스캔된 패키지에 대한 속성들(치수들, 중량), 및 스캔 정보 또는 이미지 프로세싱을 통해 식별된 로더들.
프로세서는 또한 로딩 사건들을 스코어링한다. 패키지 적재 품질과 관련된 로딩 사건들은 침범된 패키지들의 바람직하고 그리고 바람직하지 않은 구조적 형성들을 포함한다. 트레일러 로딩에서의 협의문의 자연 단위는 바닥에서부터 천장까지 적재된 패키지들의 "벽", 즉, 단일 깊이 층이다. 수많은 벽 품질 스코어들은 다음을 포함하여, 계산된다: "T" 형성들의 (바람직한) 수, 갭들의 수, 총 갭 면적, 오버행들의 수, 전체 오버행 면적, 무레벨 패키지들의 수, 패키지들의 전체 무레벨 면적, 로더 포즈 위반들의 수, 및 로더 포즈 위반들 동안 패키지의 중량(각각의 자세 위반은 마지막 스캔된 패키지의 중량에 비례하여 스케일링된다). 이러한 사건들에 있어서, 양호한 "T" 형성들의 수는 스코어에서 빼고, 남아있는 사건들은 스코어에 더한다. 그리고 나서, 벽 당 스코어들은 트레일러 당 또는 트레일러-섹션 값들 당, 또는 로더 당으로 집계될 수 있다. 다른 실시 형태는 규정된 시간 간격들에 걸쳐 이러한 스코어들을 계산하거나 집계하게 된다.
로더의 안전성 또는 큰 갭 면적들과 같은 일부의 경우에, 감독자는 아웃-오브-제한 조건을 나타내는 과도한 스코어를 경고하는 것이 바람직할 수 있다. 아웃-오브-제한 조건들은 계산된 스코어들을 위해 구성되고 경보들은 스코어가 소정 규칙을 위반하거나, 한계를 초과할 때 프로세서에 의해 사용자 인터페이스에 생성된다. 경보들은 실제 로딩 사건들의 주석들을 포함할 수 있는 도 2와 도 3의 이미지들과 같이, 스코어들에 대한 참조와 검토 목적들을 위한 이미지들을 포함한다.
상기 단계들로부터, 시스템은 깊이 이미지들, IR 이미지들, 포인트 클라우드들, 및 RBG 이미지들의 리포지토리를 수집했고, 로딩 사건들과 스코어들의 관점에서 이들을 위한 메타데이터를 생성했다. 이러한 정보는 그리고 나서 로더들을 위한 검토와 트레이닝 자료를 생성하는데 사용될 수 있다. 특히, 시스템은 검토를 목적으로 메타데이터를 브라우징하고 질의하기 위해 로딩 사건들의 시각적 표현을 디스플레이하도록 작동 가능한 그래픽 사용자 인터페이스를 제공한다. 메타데이터는 또한 예를 들어, 어느 트레일러 섹션들이 다른 것보다 더 많은 사건들을 가지고 있는지 또는 어느 로더들의 집합이 다른 것보다 더 많은 사건들을 가지고 있는지 식별하는 근본 원인 분석(root cause analysis)을 허용한다. 결과들은 시설 전체 검토 또는 동기 부여 목적들을 위해 리더보드에 디스플레이될 수 있다. 그것은 또한 감독자들이 피드백과 개선 목적들을 위해 로딩 활동의 베스트 및 워스트 예들을 강조하는 시프트 보고서들을 작성하게 한다.
마지막으로, 로딩을 촬영한 이미지들은 특정한 로딩 사건들을 식별하는 텍스트로 프로세서에 의해 주석이 달릴 수 있고, 바람직한 로딩 활동들을 위한 로딩 프로세스의 대화형 시간 경과 비디오를 생성하는데 사용될 수 있다. 이미지들은 시각적으로 주석이 달릴 수 있고, 또한 북마크 메타데이터로부터 특정한 패키지, 벽 또는 로더 정보를 포함할 수 있다. 이러한 이미지들과 클립들은 추가적 트레이닝 자료에 대한 링크들과 함께, 즉각적 검토를 위해 로더의 착용 가능 단말기에 디스플레이될 수 있다.
도 4는 본 발명에 따른, 트레일러 로딩 평가와 트레이닝을 위한 방법의 흐름도를 설명한다. 이 방법은 모니터를 이용하는 트레일러의 영상 로딩의 제1 단계(400)를 포함한다. 모니터는 트레일러 내의 적재된 패키지들의 벽까지의 거리를 제공하도록 작동 가능한 3차원적 깊이/볼륨 카메라일 수 있다. 모니터는 또한 광 이미지를 제공하도록 작동 가능한 비디오 카메라를 포함한다. 이러한 이미지들은 어떻게 패키지들을 적재하는지 그리고 패키지들을 적재할 때 로더의 행동이 어떤지에 관한 로딩 사건들을 검출(402)하는데 사용된다.
다음 단계(404)는 깊이와 패키지 스캔 정보를 이용하는 로딩 진행의 관점에서 이러한 로딩 사건들을 북마킹하는 것을 포함한다.
다음 단계(406)는, 벽 단위(on a wall-by-wall basis), 트레일러 섹션으로의 상향 이동(roll up), 또는 트레일러 레벨에 대한 이러한 로딩 사건들의 스코어링을 포함한다.
다음 단계(408)는 로딩 사건들을 전달하거나 디스플레이하는 것을 포함하고, 스코어가 규칙을 위반하는 경우 감독자에게 경고하는 것을 포함할 수 있다.
다음 단계(410)는 최소한 북마킹과 이미징을 기반으로 검토 및 트레이닝 자료를 생성하는 것을 포함한다. 이것은 좋고 나쁜 예들, 그리고 주석이 달린 시간-경과 이력들을 보여줄 수 있다.
유용하게, 본 발명은 로딩 프로세스의 질적 측정들을 검출하고, 검토 및 트레이닝 목적들을 위한 측정들을 요약한다. 측정들은 갭들, 충분한 지지체, 및 수평화를 포함하여 패키지 벽들의 구조적 품질들을 포함하고, 또한 위치와 리프팅 포즈를 포함하여 로더의 안전성을 포함한다.
전술한 명세서에서, 특정 실시 형태들이 설명되었다. 그러나, 관련 기술분야의 통상의 기술자는, 이하의 특허청구범위에 설명된 바와 같은 발명의 범위로부터 벗어나지 않고 다양한 수정들 및 변경들이 이루어질 수 있다는 점을 인식할 것이다. 따라서, 명세서 및 도면들은 제한적 의미라기보다는 예시적인 것으로 간주되어야 하며, 모든 이러한 수정들은 본 교시들의 범위 내에 포함되는 것으로 의도된다.
발생할 또는 더욱 표명될 이러한 이익들, 이점들, 문제점들에 대한 해결책들 및 임의의 이익, 이점 또는 해결책을 초래할 수 있는 임의의 요소(들)이 임의의 또는 모든 청구항들의 중대한, 요구되는 또는 본질적인 특징들 또는 요소들로서 해석되어서는 안 된다. 본 발명은 본 출원의 계류 중 행해지는 임의의 보정들을 포함하는 첨부된 청구범위 및 허여되는 이러한 청구범위들의 모든 등가물들에 의해서만 정의된다.
또한 이 문서에서, 제1 및 제2, 최상부 및 최하부 등과 같은 관계 용어들은 임의의 실제 이러한 관계 또는 이러한 엔티티들 또는 액션들 간의 순서를 반드시 요구하거나 암시하지 않고 하나의 엔티티 또는 액션을 또다른 엔티티 또는 액션과 구별하기 위해서만 사용될 수 있다. 용어 "구비하다", "구비하는", "갖다", "갖는", "포함하다", "포함하는", "함유하다", "함유하는" 또는 임의의 다른 변형은 배타적이지 않은 포함을 커버하는 것으로 의도되어, 요소의 리스트를 구비하거나, 갖거나, 포함하거나, 함유하는 프로세스, 방법, 물품 또는 장치는 그 요소만을 갖는 것이 아니라 이러한 프로세스, 방법, 물품 또는 장치에 명확히 열거되지 않거나 내재되지 않은 다른 요소를 포함할 수 있다. "~을 포함하는(comprises ...a, has ...a, includes ...a, contains ...a)"으로 시작되는 요소들은, 추가의 제약 없으면, 요소를 포함하는 프로세스, 방법, 물건, 또는 장치에서의 추가적인 동일한 요소들의 존재를 배제하는 것이 아니다. 용어 "어떤 하나(a, an)"는 여기서 다른 방법으로 명백하게 기술되지 않았다면 하나 이상으로서 정의된다. 용어 "실질적으로(substantially)", "본질적으로(essentially)", "대략(approximately)", "약(about)", 또는 이들의 다른 형태는 본 분야의 숙련자에 의해 이해되는 그러한 것과 가깝게 정의되고, 하나의 제한하지 않는 실시 형태에서, 이 용어는 10% 범위 내에 있는 것, 다른 실시 형태에서 5% 범위 내에 있는 것, 또 다른 실시 형태에서 1% 범위 내에 있는 것, 또 다른 실시 형태에서 0.5% 범위 내에 있는 것으로 정의된다. 여기서 이용되는 용어 "결합된(coupled)"은, 반드시 직접적이고 기계적이 아니지만, 연결된 것으로서 정의된다. 특정 방법으로 "구성된(configured)" 디바이스 또는 구조는 적어도 그러한 방법으로 구성되지만, 리스팅되지 않은 방법으로도 구성될 수 있다.
본원에 기술된 특정 비-프로세서 회로, 방법 및/또는 장치의 일부, 대부분, 또는 모든 기능들과 관련하여, 일부 실시 형태들은 마이크로프로세서들, 디지털 시그널 프로세서들, 맞춤 프로세서들 및 FPGA들(field programmable gate arrays) 및 구현할 하나 이상의 프로세서를 제어하는 (소프트웨어와 펌웨어 모두를 포함하는) 단독으로 저장된 프로그램 명령어와 같은 하나 이상의 특수화된 또는 일반적인(generic) 프로세서들(또는 "프로세싱 디바이스들")을 포함할 수 있다. 대안적으로, 일부 또는 전부의 기능들은, 저장된 프로그램 명령어들을 갖지 않는 상태 머신에 의해, 또는 각각의 기능 또는 기능들 중 몇몇의 일부 조합들이 커스텀 로직으로서 구현되는, 하나 이상의 ASIC들(Application Specific Integrated Circuits)에서, 구현될 수 있다. 물론, 이러한 2가지 접근방식들의 조합이 사용될 수 있다.
또한, 실시 형태는 본원에서 기술되고 청구된 바와 같은 방법을 수행하도록 컴퓨터(예를 들어, 프로세서를 포함함)를 프로그래밍하기 위해 컴퓨터 판독 가능한 코드가 저장된 컴퓨터-판독 가능한 저장 매체로서 구현될 수 있다. 이러한 컴퓨터-판독 가능한 저장 매체들의 예들은, 하드 디스크, CD-ROM, 광 저장 디바이스, 자기 저장 디바이스, ROM(판독 전용 메모리), PROM(프로그래밍 가능한 판독 전용 메모리), EPROM(소거 가능한 프로그래밍 가능한 판독 전용 메모리), EEPROM(전기적 소거 가능한 프로그래밍 가능한 판독 전용 메모리) 및 플래시 메모리를 포함하지만, 이에 제한되지는 않는다. 또한, 숙련된 기술자는, 예를 들어, 가용 시간, 현재 기술 및 경제적 고려사항들에 의해 동기화되는 아마도 상당한 노력 및 많은 설계 선택 사항들에도 불구하고, 본 명세서에 개시되는 개념들 및 원리들에 의해 안내될 때, 최소의 실험으로 이러한 소프트웨어 명령어들과 프로그램들 및 IC들을 용이하게 만들어 낼 수 있을 것이라는 점이 예상된다.
개시 내용의 요약은 독자가 기술적 개시내용의 속성을 신속히 식별하게 하도록 제공된다. 그것이 청구항들의 범위 또는 의미를 해석하거나 제한하는데 이용되지는 않을 것이라는 이해가 수반된다. 추가로, 전술한 상세한 설명에서, 다양한 특징들이 개시 내용을 개요화할 목적으로 다양한 실시 형태들과 함께 그룹화된다는 점을 알 수 있다. 이러한 개시 방법은 청구되는 실시 형태들이 각각의 청구항에 명확히 기재된 것보다 많은 특징을 요구한다는 의도를 반영하는 것으로서 해석되지 않아야 한다. 오히려, 아래의 청구항들이 반영하는 바와 같이, 본 발명의 내용은 단일의 개시된 실시 형태의 모든 특징들보다 적은 특징 내에 존재한다. 그러므로, 다음의 청구항들은 상세한 설명 내에 통합되어 있고, 각 청구항은 개별적으로 청구된 주제로서 그 자신의 지위를 유지한다.

Claims (19)

  1. 트레일러 로딩 평가를 위한 시스템으로서,
    컨테이너의 로딩을 표현하는 이미지 정보를 캡처하도록 작동 가능한 카메라 - 상기 카메라는 상기 컨테이너의 내부에 패키지들의 벽들을 모니터링하기 위하여 상기 컨테이너의 내부를 모니터링하는 위치에 탑재되고, 상기 패키지들의 벽들은 서로의 위에 스택되는 패키지들을 포함함 -;
    메모리; 및
    프로세서를 포함하고, 상기 프로세서는,
    상기 이미지 정보에서, 상기 패키지들의 벽들의 갭들의 제1 수를 검출하고;
    상기 이미지 정보에서, 상기 패키지들의 벽들의 "T" 형성들의 제2 수를 검출하고;
    상기 제1 수와 제2 수를 조합함으로써 시간 기간에 대한 로딩 스코어를 생성하고 - 상기 검출된 "T" 형성들은 상기 로딩 스코어를 향상시키고, 상기 제1 수와 상기 제2 수를 조합하는 것은 상기 제1 수로부터 상기 제2 수를 빼는 것을 포함함 -;
    상기 로딩 스코어가 기준을 만족하면, 상기 컨테이너의 로딩의 표현을 전달하도록 작동 가능한 사용자 인터페이스에 상기 시간 기간에 대응하는 데이터를 제공하도록 작동 가능한, 시스템.
  2. 제1항에 있어서, 상기 카메라는,
    상기 컨테이너의 로딩 동안 광 이미지를 제공하도록 작동 가능한 비디오 카메라; 및
    로딩된 패키지들의 벽까지의 거리를 제공하도록 작동 가능한 3차원 센서를 포함하는, 시스템.
  3. 삭제
  4. 제1항에 있어서, 상기 프로세서는 상기 이미지 정보를 이용하여 상기 컨테이너의 로딩 동안 로더 안전성 사건들을 검출하도록 작동 가능한, 시스템.
  5. 삭제
  6. 제1항에 있어서, 상기 프로세서는 이미징과 북마킹 정보로부터 검토 자료를 생성하도록 작동 가능한, 시스템.
  7. 제1항에 있어서, 상기 로딩 스코어는 패키지들의 각각의 벽에 대하여 생성되는, 시스템.
  8. 삭제
  9. 제7항에 있어서, 상기 프로세서는 컨테이너 당 로딩 스코어들을 집계하도록 작동 가능한, 시스템.
  10. 제7항에 있어서, 상기 프로세서는 로더 당 로딩 스코어들을 집계하도록 작동 가능한, 시스템.
  11. 제1항에 있어서, 상기 프로세서는 로딩 사건들을 식별하는 텍스트로 상기 사용자 인터페이스에 디스플레이된 상기 로딩 사건들의 이미지들에 주석을 달도록 작동 가능한, 시스템.
  12. 제1항에 있어서, 상기 프로세서는 로딩 진행과 관련하여 로딩 사건들을 인덱싱함으로써 상기 로딩 사건들을 북마킹하도록 작동 가능한, 시스템.
  13. 삭제
  14. 트레일러 로딩 평가를 위한 방법으로서,
    컨테이너의 내부에서 패키지들의 벽들의 빌딩을 모니터링하기 위하여 상기 컨테이너의 내부를 모니터링하는 위치에 탑재된 카메라를 통해 상기 컨테이너의 로딩을 표현하는 이미지 정보를 캡처하는 단계 - 상기 패키지들의 벽들은 서로의 위에 스택되는 패키지들을 포함함 -;
    프로세서에 의해, 상기 이미지 정보에서, 상기 패키지들의 벽들의 갭들의 제1 수를 검출하는 단계;
    상기 프로세서에 의해, 상기 이미지 정보에서, 상기 패키지들의 벽들의 "T" 형성들의 제2 수를 검출하는 단계;
    상기 프로세서에 의해, 상기 제1 수와 상기 제2 수를 조합함으로써 시간 기간에 대한 로딩 스코어를 생성하는 단계 - 상기 검출된 "T" 형성들은 상기 로딩 스코어를 향상시키고, 상기 제1 수와 상기 제2 수를 조합하는 것은 상기 제1 수로부터 상기 제2 수를 빼는 것을 포함함 -; 및
    상기 스코어가 기준을 만족하면, 상기 프로세서에 의해, 사용자 인터페이스에 상기 시간 기간에 대응하는 데이터를 제공하는 단계를 포함하는, 방법.
  15. 제14항에 있어서, 상기 카메라는,
    광 이미지를 제공하도록 작동 가능한 비디오 카메라; 및
    로딩된 패키지들의 벽까지의 거리를 제공하도록 작동 가능한 3차원 센서를 포함하는, 방법.
  16. 삭제
  17. 제14항에 있어서, 상기 이미지 정보를 이용하여 상기 컨테이너의 로딩 동안 로더 안전성 사건들을 검출하는 단계를 더 포함하는, 방법.
  18. 삭제
  19. 제14항에 있어서, 상기 이미지 정보와 북마킹 정보로부터 검토 자료를 생성하는 단계를 더 포함하는, 방법.
KR1020167001288A 2013-06-17 2014-06-10 트레일러 로딩 평가와 트레이닝 KR101883083B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/919,069 US20140372183A1 (en) 2013-06-17 2013-06-17 Trailer loading assessment and training
US13/919,069 2013-06-17
PCT/US2014/041678 WO2014204710A2 (en) 2013-06-17 2014-06-10 Trailer loading assessment and training

Publications (2)

Publication Number Publication Date
KR20160019962A KR20160019962A (ko) 2016-02-22
KR101883083B1 true KR101883083B1 (ko) 2018-07-27

Family

ID=51023206

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167001288A KR101883083B1 (ko) 2013-06-17 2014-06-10 트레일러 로딩 평가와 트레이닝

Country Status (6)

Country Link
US (1) US20140372183A1 (ko)
EP (1) EP3011510A4 (ko)
KR (1) KR101883083B1 (ko)
CN (1) CN105659264A (ko)
MX (1) MX356001B (ko)
WO (1) WO2014204710A2 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10248862B2 (en) * 2014-07-23 2019-04-02 Ebay Inc. Use of camera metadata for recommendations
US10740576B2 (en) 2015-02-18 2020-08-11 Fedex Corporate Services, Inc. Systems, apparatus, non-transient computer readable media, and methods for automatically managing and monitoring a load operation related to a logistics container using a scanning sensor node
CA2970545C (en) 2015-02-18 2023-09-26 Fedex Corporate Services, Inc. Managing logistics information related to a logistics container using a container interface display apparatus
US10713610B2 (en) 2015-12-22 2020-07-14 Symbol Technologies, Llc Methods and systems for occlusion detection and data correction for container-fullness estimation
US9940730B2 (en) 2015-11-18 2018-04-10 Symbol Technologies, Llc Methods and systems for automatic fullness estimation of containers
GB2550021B (en) 2016-03-10 2018-10-17 Walmart Apollo Llc Sensor systems and methods for monitoring unloading of cargo
DE102016010881A1 (de) 2016-09-12 2018-03-15 Fahrzeugwerk Bernard Krone GmbH & Co. KG Fahrzeugaufbau
DE102017215613A1 (de) * 2017-09-05 2019-03-07 Trumpf Werkzeugmaschinen Gmbh & Co. Kg Produktionsanlage und Produktionssteuerungsverfahren zur Steuerung einer Produktionsanlage
US10841559B2 (en) * 2017-12-22 2020-11-17 Symbol Technologies, Llc Systems and methods for detecting if package walls are beyond 3D depth camera range in commercial trailer loading
US11003804B2 (en) * 2017-12-22 2021-05-11 Symbol Technologies, Llc Container loading/unloading time estimation
US10628772B2 (en) * 2017-12-22 2020-04-21 Symbol Technologies, Llc Computing package wall density in commercial trailer loading
US10692236B2 (en) 2017-12-22 2020-06-23 Symbol Technologies, Llc Container use estimation
US10643337B2 (en) * 2017-12-22 2020-05-05 Symbol Technologies, Llc Systems and methods for segmenting and tracking package walls in commercial trailer loading
US10521674B2 (en) * 2017-12-22 2019-12-31 Symbol Technologies, Llc Trailer door monitoring and reporting
FR3078428B1 (fr) 2018-02-28 2021-05-28 Fm Logistic Corp Procede de suivi volumetrique de palettes chargees d’articles empiles dans un conteneur et systeme de detection pour sa mise en œuvre
US11198340B2 (en) * 2018-05-01 2021-12-14 Continental Automotive Systems, Inc. Coupler and tow-bar detection for automated trailer hitching via cloud points
US10783656B2 (en) 2018-05-18 2020-09-22 Zebra Technologies Corporation System and method of determining a location for placement of a package
DE102018006765B4 (de) * 2018-08-27 2021-02-25 Daimler Ag Verfahren und system(e) für das management von frachtfahrzeugen
US11430104B2 (en) * 2020-02-19 2022-08-30 Zebra Technologies Corporation Three-dimensional (3D) imaging systems and methods for detecting and dimensioning a vehicle storage area
US11443449B2 (en) * 2020-02-26 2022-09-13 Zebra Technologies Corporation Three-dimensional (3D) imaging systems and methods for virtual grading of package walls in commercial trailer loading
US12037200B2 (en) * 2021-08-09 2024-07-16 Goodrich Corporation Latch state detection systems and methods
US20240005263A1 (en) * 2022-06-29 2024-01-04 United Parcel Service Of America, Inc. Machine vision system for advancement of trailer loading/unloading visibility

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040125217A1 (en) * 2002-12-31 2004-07-01 Jesson Joseph E. Sensing cargo using an imaging device
US20100161170A1 (en) * 2008-12-19 2010-06-24 United Parcel Service Of America, Inc. Trailer utilization systems, methods, computer programs embodied on computer-readable media, and apparatuses

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3200755B2 (ja) * 1993-07-05 2001-08-20 株式会社共和電業 鉄道貸車における積載状態検出装置
US20080303897A1 (en) * 2000-12-22 2008-12-11 Terahop Networks, Inc. Visually capturing and monitoring contents and events of cargo container
US7421112B2 (en) * 2004-03-12 2008-09-02 General Electric Company Cargo sensing system
US8130285B2 (en) * 2005-04-05 2012-03-06 3Vr Security, Inc. Automated searching for probable matches in a video surveillance system
US7468660B2 (en) * 2005-10-04 2008-12-23 Delphi Technologies, Inc. Cargo sensing apparatus for a cargo container
US20070297560A1 (en) * 2006-03-03 2007-12-27 Telesecurity Sciences, Inc. Method and system for electronic unpacking of baggage and cargo
US7940955B2 (en) * 2006-07-26 2011-05-10 Delphi Technologies, Inc. Vision-based method of determining cargo status by boundary detection
US20080042865A1 (en) * 2006-08-09 2008-02-21 Dock Watch, Llc Loading dock monitoring device and method
US20100213313A1 (en) * 2006-11-06 2010-08-26 Goodrich Corporation Integrated aircraft cargo loading and cargo video monitoring system
US7667596B2 (en) * 2007-02-16 2010-02-23 Panasonic Corporation Method and system for scoring surveillance system footage
US20090059004A1 (en) * 2007-08-31 2009-03-05 Speed Trac Technologies, Inc. System and Method for Monitoring the Handling of a Shipment of Freight
US8091782B2 (en) * 2007-11-08 2012-01-10 International Business Machines Corporation Using cameras to monitor actual inventory
US20150170256A1 (en) * 2008-06-05 2015-06-18 Aisle411, Inc. Systems and Methods for Presenting Information Associated With a Three-Dimensional Location on a Two-Dimensional Display
US8405721B2 (en) * 2008-10-21 2013-03-26 Motion Metrics International Corp. Method, system and apparatus for monitoring loading of a payload into a load carrying container
US8346056B2 (en) * 2010-10-14 2013-01-01 Honeywell International Inc. Graphical bookmarking of video data with user inputs in video surveillance
US9779546B2 (en) * 2012-05-04 2017-10-03 Intermec Ip Corp. Volume dimensioning systems and methods
US10158842B2 (en) * 2012-06-20 2018-12-18 Honeywell International Inc. Cargo sensing detection system using spatial data

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040125217A1 (en) * 2002-12-31 2004-07-01 Jesson Joseph E. Sensing cargo using an imaging device
US20100161170A1 (en) * 2008-12-19 2010-06-24 United Parcel Service Of America, Inc. Trailer utilization systems, methods, computer programs embodied on computer-readable media, and apparatuses

Also Published As

Publication number Publication date
EP3011510A2 (en) 2016-04-27
MX2015017007A (es) 2016-08-08
KR20160019962A (ko) 2016-02-22
WO2014204710A2 (en) 2014-12-24
WO2014204710A3 (en) 2015-04-30
EP3011510A4 (en) 2016-12-21
US20140372183A1 (en) 2014-12-18
MX356001B (es) 2018-05-08
CN105659264A (zh) 2016-06-08

Similar Documents

Publication Publication Date Title
KR101883083B1 (ko) 트레일러 로딩 평가와 트레이닝
US11786058B2 (en) Image display device, image display system, image display method, and program
CN109784323B (zh) 图像识别的方法、装置、电子设备和计算机存储介质
Park et al. Hardhat-wearing detection for enhancing on-site safety of construction workers
US10163149B1 (en) Providing item pick and place information to a user
JP2017171448A (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
JP2018131331A (ja) 物品管理装置及び物品管理方法
JP2019119545A (ja) 情報処理装置、制御装置、情報処理方法、および情報処理プログラム
PL241456B1 (pl) Systemy i sposoby segmentowania i śledzenia ścian paczek w ładowaniu komercyjnej przyczepy
JP6558020B2 (ja) 検品処理装置、検品処理方法及びプログラム
US20220101296A1 (en) Article deduction apparatus, article deduction method, and program
JP2017057028A (ja) 配置支援プログラム、配置支援方法、配置支援装置、及び配置支援システム
EP3434623B1 (en) Projection indicator, cargo assortment system, and projection indicating method
JP2017171444A (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
JP2015038743A5 (ko)
CN109816298B (zh) 物流管理方法及系统
KR20210033695A (ko) 재고 파악 방법 및 시스템
US10269059B2 (en) Computerized exchange network
US12002008B2 (en) Methods and apparatus for machine learning system for edge computer vision and active reality
JP7130945B2 (ja) 在庫検出プログラム、在庫検出方法及び在庫検出装置
CN111291834B (zh) 一种快速生成货架数字陈列图的方法
CN112967334A (zh) 用于对物料进行盘点的方法、系统、电子设备和存储介质
CN112580411A (zh) 一种货架缺货告警方法、装置、货架、系统及电子设备
JP2021076711A (ja) スクラップ画像撮影システム、スクラップ画像撮影方法、撮影支援装置、及びプログラム
US20220318748A1 (en) Multilayered method and apparatus to facilitate the accurate calculation of freight density, area, and classification and provide recommendations to optimize shipping efficiency

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant