KR20140043374A - 작업 기계의 주위 감시 장치 - Google Patents

작업 기계의 주위 감시 장치 Download PDF

Info

Publication number
KR20140043374A
KR20140043374A KR1020137032343A KR20137032343A KR20140043374A KR 20140043374 A KR20140043374 A KR 20140043374A KR 1020137032343 A KR1020137032343 A KR 1020137032343A KR 20137032343 A KR20137032343 A KR 20137032343A KR 20140043374 A KR20140043374 A KR 20140043374A
Authority
KR
South Korea
Prior art keywords
vehicle
image
monitor
camera
rear part
Prior art date
Application number
KR1020137032343A
Other languages
English (en)
Inventor
히데후미 이시모토
Original Assignee
히다치 겡키 가부시키 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 히다치 겡키 가부시키 가이샤 filed Critical 히다치 겡키 가부시키 가이샤
Publication of KR20140043374A publication Critical patent/KR20140043374A/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/08Superstructures; Supports for superstructures
    • E02F9/0841Articulated frame, i.e. having at least one pivot point between two travelling gear units
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/24Safety devices, e.g. for preventing overload
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Civil Engineering (AREA)
  • Mining & Mineral Resources (AREA)
  • Structural Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계에 부감 화상을 취득하여, 모니터에 차량의 화상과 함께 표시할 때에, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적이 되는 표시 화상으로 한다.
차량 전부(1)와 차량 후부(2)에 설치한 카메라(11a∼11e)에서 얻은 카메라 화상을 모니터(12)에 표시함에 있어서, 운전실(8)이 설치되어 있는 차량 후부(2)를 고정 캐릭터상(2C)으로 하고, 이 고정 캐릭터상(2C)에 대해 굴곡하는 차량 전부(1)를 가동 캐릭터상(1C)으로 하며, 이와 같이 하여 표시되는 차량 화상 VC의 주위에 카메라 화상을 상방 시점이 되도록 좌표 변환한 개별 부감 화상을 합성한 합성 부감 화상을 표시하도록 이루고, 차량 전부(1)와 차량 후부(2)가 연결 축(10)을 중심으로 하여 굴곡했을 때에는, 차량 전부(1)에 설치한 카메라(11a, 11b)로부터 얻은 개별 부감 화상(11A, 11B)의 표시 범위를 변화시킨다.

Description

작업 기계의 주위 감시 장치{DEVICE FOR MONITORING AREA AROUND WORKING MACHINE}
본 발명은, 관절부에 의해 굴곡하는 아티큘레이트 차량(articulated vehicle)으로 이루어지는 작업 기계에 있어서, 기계에 의한 작업의 안전 확보 등을 위해 설치되는 작업 기계의 주위 감시 장치에 관한 것이다.
일반적으로, 자주식(自走式) 작업 기계에 있어서의 작업의 안전을 확보하고, 또 작업 기계의 조작성의 향상을 도모하기 위해, 차량의 주위 감시 장치를 설치한 것은, 종래부터 알려져 있다. 종래 기술에 의한 주위 감시 장치는, 차체에 카메라를 장착함과 함께, 운전실에 있어서, 오퍼레이터가 착좌하는 운전석의 전방 위치에 모니터를 설치함으로써 구성된다. 카메라로 촬영한 화상은 동화상 상태의 영상으로서 모니터에 표시되고, 이 모니터의 화상으로부터 차량의 주위에 작업자 등이 들어가 있는지의 여부, 또 주위에 구축물이나 수목 등이 존재하는지의 여부를 확인할 수 있다.
그런데, 단순한 카메라 화상에서는 거리감을 정확하게 파악하는 것이 곤란한 경우가 있다. 또 경우에 따라서는, 방향성을 파악하는 것이 곤란해지는 경우도 있다. 모니터 상에서는, 작업 기계의 근방에 작업자 등이 들어가 있거나, 구축물 등의 장해물이 작업 기계의 근방에 존재하고 있거나 하고 있는 경우, 즉 작업 기계의 근방 위치에 인적 물적 장해가 존재하는 경우에 있어서, 작업 기계의 일부가 이들과 접촉할 우려가 있는지의 여부, 회피 동작을 취해야 하는지, 회피 동작으로서 어느 정도의 움직임이 필요한지, 또한 회피는 불가능하여, 작업 기계의 작동을 정지시켜야 하는지 등은, 모니터를 육안으로 보는 것만으로는 정확하게 판단할 수 없는 경우가 있다. 즉, 모니터에 표시되는 카메라 화상으로부터는 작업 기계와 인적 물적 장해의 정확한 거리나 방향성을 인식할 수 없는 경우가 있다.
그런데, 카메라를 어떤 높이로부터 비스듬히 하(下)방향으로 시야를 돌려 촬영하고, 이 카메라 화상을 화상 변환 처리하면, 가상 시점으로부터의 화상으로 변환할 수 있다. 가상 시점 화상으로서, 시점을 상방 위치로 한 상방 시점 화상은 부감(俯瞰) 상태의 화상이 된다. 이 부감 화상을 모니터에 표시하면, 인적 물적 장해까지의 거리나 그 방향을 정확하게 파악할 수 있다. 작업 기계에 있어서, 부감 화상을 표시함으로써 주위의 감시를 행하는 장치가, 예를 들면 특허문헌 1에 개시되어 있다. 이 특허문헌 1에서는, 작업 기계로서의 유압 셔블의 후방과, 좌측방의 소정의 위치에 카메라를 장착하고, 이들 카메라의 광축을 비스듬히 하방을 향해, 후방 및 측방에 넓은 시야를 가진 화상을 취득하여 상방 시점이 되도록 시점 변환한 부감 화상을 모니터에 표시함으로써, 주변 감시 화면을 취득하도록 하고 있다.
이와 같이 부감 화상을 모니터에 표시하면, 작업 기계로부터 인적 물적 장해까지의 거리 및 방향을 정확하게 파악할 수 있게 된다. 따라서, 작업 기계를 작동시킬 때에, 이 모니터의 영상에 의해서 주위의 안전을 확인할 수 있다.
국제 공개 WO2006/106685호 팸플릿
자주식 작업 기계로서, 아티큘레이트 차량으로 이루어지는 자주식 작업 기계가 있다. 예를 들면, 아티큘레이트 휠 로더나 아티큘레이트 덤프 트럭 등은, 차량의 전부(前部)와 후부(後部)의 사이가 굴곡 가능한 관절을 가지는 것이다. 즉, 아티큘레이트 휠 로더에는, 차량 전부에 로더 버킷 및 그 구동 기구가 설치되고, 차량 후부에 운전실 등이 설치되어 있다. 또, 아티큘레이트 덤프 트럭의 경우에는, 차량 전부가 운전실이 되고, 차량 후부에 짐받이가 설치되어 있다.
이상과 같은 아티큘레이트 작업 기계에 있어서는, 특허문헌 1에 나타내어져 있는 유압 셔블과는 달리, 차량 전부와 차량 후부의 사이가 굴곡하기 때문에, 아티큘레이트 작업 기계에 부감 화상을 취득하여, 모니터에 표시하는 경우에는, 카메라를 어떻게 배치하는지, 또 카메라에서 취득한 부감 화상을 어떻게 하여 표시하는지 등에 대해, 해결해야 하는 과제가 존재한다.
본 발명은 이상의 점을 감안하여 이루어진 것으로서, 그 목적으로 하는 바는, 차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계의 화상과 함께 이 차량의 각 부에 설치한 카메라 화상으로부터의 부감 화상을 모니터에 표시할 때에, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적이 되는 표시 화상으로 한다.
상술한 목적을 달성하기 위해, 본 발명은, 차량 전부와 차량 후부를 연결 축에 의해 좌우로 굴곡 가능하게 연결한 아티큘레이트 작업 기계에 설치되는 작업 기계의 주위 감시 장치에 있어서, 상기 차량 전부에 설치한 1 또는 복수의 카메라와, 상기 차량 후부에 설치되어, 차량의 후방 위치를 시야로 하는 카메라를 포함하는 1 또는 복수의 카메라와, 상기 작업 기계의 주위 감시 화상을 표시하기 위한 모니터와, 상기 연결 축을 중심으로 한 상기 차량 전부와 상기 차량 후부 사이의 굴곡 각도에 의거하여, 상기 각 카메라의 위치를 산출하는 카메라 위치 산출부와, 상기 각 카메라에서 취득한 카메라 화상을 상방 시점이 되도록 시점 변환하여, 각각 부감 화상으로 하는 화상 변환 수단과, 상기 각 카메라에 의해 촬영한 각 개별 부감 화상을, 상기 카메라 위치 산출부에 의해 산출된 각각의 위치 관계가 되도록 합성한 합성 부감 화상을 생성하여, 상기 모니터에 이 합성 부감 화상을 표시하기 위한 화상 합성 수단과, 상기 합성 부감 화상을, 상기 차량 전부 또는 상기 차량 후부 중 어느 한 쪽을 고정한 고정측 캐릭터상(像)으로 하고, 다른 쪽을 상기 굴곡 각도에 의거하여 상기 고정측 캐릭터상에 대해 상대 회전 운동하는 가동측 캐릭터상으로 한 차량 화상과 함께 상기 모니터에 표시하는 표시 화상 생성 수단을 구비한 것을 특징으로 하는 것이다.
아티큘레이트 작업 기계의 대표적인 것으로서는, 휠 로더나 덤프 트럭이 있지만, 이들 이외이더라도, 차량 전부와 차량 후부가 굴곡 가능하게 연결되어 있고, 차량 전부 또는 차량 후부 중 어느 한 쪽에 운전석이 설치되며, 다른 쪽에는 작업 수단을 장착한 것에 적용 가능하다.
작업 기계의 주위를 감시한다고 하는 경우, 차량의 후방의 감시는 필수적인 것으로서, 좌우 양측부도 감시 영역에 포함시키게 된다. 차량 전부에 운전석이 있는 경우, 오퍼레이터에게 있어서 전방 시야가 얻어지기 때문에, 반드시 차량의 전방을 시야로 하는 카메라를 설치할 필요는 없다. 다만, 차량 후부에 운전석이 있는 경우에는, 전방 카메라가 있는 편이 바람직한 경우도 있다.
모니터로의 표시 태양으로서는, 작업 기계의 차량을 평면 상태에서 영상화하여, 모니터의 화면 중앙에 위치시키고, 후방 및 좌우의 양측, 또한 필요에 따라 전방의 화상을 차량 화상의 주위에 합성하여 표시한다. 여기서, 차량 화상으로서는, 차량 그 자체를 실사(實寫)한 화상이더라도 되지만, 차량을 심벌화한 캐릭터 화상으로 하는 편이, 보기 쉽다는 점에서 바람직하다. 차량 전부와 차량 후부는, 서로 좌우로 굴곡하는 것이기 때문에, 어느 한 쪽을 고정측 캐릭터상으로 하고, 다른 쪽을 이 고정측 캐릭터상에 대해 굴곡하는 가동측 캐릭터상으로 한다. 어느 쪽을 고정측 캐릭터상으로 하는지에 대해서는, 주위 감시의 관점에서 결정된다. 일반적으로는, 운전석이 설치되어 있는 측을 고정측 캐릭터상으로 하는 것이 바람직하다. 특히 차량 후부에 운전석이 위치하고 있는 경우에는, 차량 후부를 고정측 캐릭터상으로 하고, 차량 전부를 가동측 캐릭터상으로 하는 것이 바람직하다. 또, 차량 전부에 운전석이 있는 경우에는, 원칙적으로 차량 전부를 고정측 캐릭터상으로 하는 것이 바람직하지만, 예를 들면 아티큘레이트 덤프 트럭의 경우에 있어서는, 차량을 후진시킬 때에는, 오히려 차량 후부를 고정측 캐릭터상으로 하는 것이 바람직한 경우도 있다. 따라서, 운전 작동 모드를 검출하여, 전진 시에는 차량 전부를 고정측 캐릭터상으로서 표시하고, 후진 시에는 차량 후부를 고정측 캐릭터상으로 할 수도 있다.
모니터에 표시되어 있는 차량 화상에는, 사람이나 구축물 등의 인적 물적 장해가 위치하고 있으면 위험한 영역을 설정하여, 오퍼레이터에게 주의를 촉구하도록 하면, 주위 감시를 위해 유리하다. 이를 위해, 차량 차체상(像)의 주위에 주의 범위 가이드 라인을 합쳐서 표시할 수 있다. 이 경우, 차량 전부와 차량 후부가 굴곡하기 때문에, 이 주의 범위 가이드 라인도 가동측 캐릭터상의 굴곡 각도에 따라 변화시키도록 한다.
차량 전부와 차량 후부가 굴곡 가능하게 되어 있으므로, 그 사이가 최대 굴곡 각도가 되었을 때여도, 모니터에 표시되어 있는 합성 부감 화상에 결락부가 생기지 않도록 해야 한다. 이를 위해서는, 복수 설치되어 있는 각 카메라의 시야 범위는, 적어도 서로 이웃하는 2개의 카메라의 시야가 일부 중첩되도록 설정한다. 그리고, 카메라의 시야가 중첩된 부위는 어느 한 쪽의 화상이 표시되고, 다른 쪽의 화상 중, 중첩되는 부위의 화상은 표시되지 않도록 설정한다.
차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계에 있어서, 각 장소에 설치한 카메라의 화상으로부터 부감 화상을 생성하여, 모니터에 표시함에 있어서, 굴곡하는 관계에 있는 차량 전부와 차량 후부를, 실제의 굴곡 자세를 차체상 표시하고, 이 차체상 표시에 각 카메라에 의거하는 부감 화상을 카메라의 위치에 따르도록 합성한 합성 부감 화상을 합성하여 표시함으로써, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적인 감시 화상을 모니터에 표시할 수 있다.
도 1은 아티큘레이트 작업 기계의 일례로서의 아티큘레이트 휠 로더의 정면도이다.
도 2는 도 1의 평면도이다.
도 3은 카메라 화상으로부터 부감 화상으로의 변환을 위한 원리를 나타내는 설명도이다.
도 4는 카메라 화상과 이 카메라 화상으로부터 변환한 부감 화상을 나타내는 설명도이다.
도 5는 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 6은 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 휠 로더의 평면도이다.
도 7은 도 6의 굴곡 상태로 한 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 8은 굴곡 상태로 한 아티큘레이트 휠 로더에 설정되는 좌표계를 나타내는 설명도이다.
도 9는 비굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 10은 굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 11은 모니터에 차량 화상과 합성 부감 화상을 표시하기 위한 제어 장치의 구성을 나타내는 블록도이다.
도 12는 아티큘레이트 작업 기계의 다른 일례로서의 아티큘레이트 덤프 트럭의 정면도이다.
도 13은 도 12의 평면도이다.
도 14는 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 덤프 트럭의 평면도이다.
도 15는 도 14의 굴곡 상태로서, 아티큘레이트 덤프 트럭의 후진 시에 있어서의 모니터의 표시를 나타내는 설명도이다.
이하에, 도면에 의거하여 본 발명의 실시형태에 대해 설명한다. 먼저, 도 1 내지 도 3에 아티큘레이트 작업 기계의 일례로서의 아티큘레이트 휠 로더의 구성을 나타낸다.
도 1 및 도 2에 있어서, 1은 차량 전부, 2는 차량 후부로서, 차량 전부(1)는 차륜(1a)을 가지고, 그 전부에 작업 수단으로서의 로더 버킷(3)이 장착되어 있으며, 이 로더 버킷(3)은 아암(arm)(4)의 선단에 연결 핀(5)를 개재하여 연결되어 있고, 버킷 실린더(6)에 의해 연결 핀(5)를 중심으로 하여 상하 방향으로 회전 운동 가능하게 되어 있다. 또, 아암(4)에는 아암 실린더(7)가 연결되어 있고, 이 아암 실린더(7)를 작동시키면, 로더 버킷(3)이 상하 이동하게 된다. 차량 후부(2)는 차륜(2a)을 가지는 것이고, 이 차량 후부(2)에는 내부에 운전석과 각종의 조작 수단을 설치한 운전실(8)이 설치되어 있으며, 운전실(8)의 후부 위치에는 엔진이나 유압 펌프 등의 기계류가 수납되어 있는 구조물(9)이 설치되어 있다.
이들 차량 전부(1)와 차량 후부(2)의 사이는 연결 축(10)에 의해 연결되어 있고, 이 연결 축(10)을 중심으로 하여, 차량 전부(1)와 차량 후부(2)는 수평 방향으로 상대 회전 운동 가능하게 되어 있다. 그리고, 운전실(8) 내에는 조작 수단으로서의 스티어링 휠(steering wheel)(도시 생략)이 설치되어 있고, 이 스티어링 휠을 조작함으로써, 또한 그 조작량에 따라, 연결 축(10)을 중심으로 하여 차량 전부(1)와 차량 후부(2)의 사이가 굴곡하게 된다.
아티큘레이트 휠 로더에는, 주위를 감시하기 위해, 복수의 카메라가 설치되어 있다. 도 2에 복수의 카메라의 배치 레이아웃의 일례를 나타낸다. 도시한 것에 있어서는, 차량 전부(1)의 후방의 위치로서, 좌우 양측부에 전부 좌측 카메라(11a)와 전부 우측 카메라(11b)가 설치되어 있다. 또 차량 후부(2)에는, 후방 카메라(11c)와, 후부 좌측 카메라(11d) 및 후부 우측 카메라(11e)가 설치되어 있다. 이들 각 카메라(11a∼11e)는, 각각 차체에 장착되어 있고, 그 시야 방향은 비스듬히 하방으로 되어 있다. 그리고, 카메라(11a∼11e)에 의해 촬영한 카메라 화상으로부터, 각 카메라(11a∼11e)의 화각(angle of view) 범위의 부감 화상으로 변환되게 된다.
즉, 도 3에 나타낸 바와 같이, 소정의 높이 위치에 카메라(11)를 배치하여, 각도 α를 가지고 비스듬히 하방으로 대물 렌즈의 광축 CA를 향한 상태에서 촬영하면, 카메라 화상 P가 얻어진다. 이 각도 θ를 가진 카메라 화상 P로부터, 동(同) 도면에 가상 선으로 나타낸 바와 같이, 가상 시점 VF로부터 카메라 화상 P에 대해 광축 VA가 수직으로 되도록 좌표 변환한 화상을 작성한다. 이것에 의해, 각도 α를 가진 비스듬히 상방으로부터의 카메라 화상을 부감 화상으로 변환할 수 있다. 예를 들면, 도 4의 (a)에 나타낸 카메라 화상(변형 보정 등의 화상 보정을 행한 후의 화상)을 좌표 변환하면, 도 4의 (b)에 나타낸 바와 같은 부감 화상이 얻어지게 된다.
이와 같이 하여 변환된 부감 화상은, 아티큘레이트 휠 로더의 차체상 화상과 함께, 운전실(8) 내에 설치한 모니터(12)에 표시된다. 이 모니터(12)의 표시의 일 태양을 도 5에 나타낸다. 도면 중에 있어서, 1C는 차량 전부(1)의 차체상을 캐릭터화한 전부의 캐릭터상이고, 2C는 차량 후부(2)의 차체상을 캐릭터화한 후부의 캐릭터상이며, 이들에 의해서 차량 화상 VC가 구성된다. 그리고 11A∼11E는, 각각 카메라(11a∼11e)에서 취득한 카메라 화상을 좌표 변환하여 얻어진 개별 부감 화상이며, 이들을 합성한 합성 부감 화상으로서, 차량 화상과 함께 모니터(12)에 표시된다. 또한, 도면 중에 있어서 L은 차량 화상 VC의 주위에 설정되는 주의 범위 가이드 라인이며, 이 주의 범위 가이드 라인 L은, 내부에 사람이나 구축물 등으로 이루어지는 인적 물적 장해가 위치하고 있으면, 위험하다고 하여 설정된 영역의 경계부이다.
그런데, 아티큘레이트 휠 로더에 있어서는, 차량 전부(1)와 차량 후부(2)의 사이는 연결 축(10)으로 연결되어 있고(도 1 참조), 도 6에 나타낸 바와 같이, 차량 전부(1)와 차량 후부(2)의 사이가 연결 축(10)을 중심으로 하여 좌우로 굴곡 가능하게 되어 있다. 따라서, 차량의 주행 시나 작업 시에 있어서, 아티큘레이트 휠 로더가 굴곡 자세를 취하고 있으면, 모니터(12)의 차량 화상 표시도 이것에 맞추어, 도 7에 나타낸 굴곡 상태로 한다.
여기서, 아티큘레이트 휠 로더에 있어서는, 운전실(8)은 차량 후부(2) 측에 위치하고 있으므로, 모니터(12) 상에서는, 차량 후부(2)를 소정 위치에 고정한 고정측 캐릭터상(2C)으로 하고, 차량 전부(1)를 이 고정측 캐릭터상(2C)에 대해 굴곡하는 가동측 캐릭터상(1C)으로서 표시된다. 그리고, 개별 부감 화상(11A∼11E) 중, 차량 후부(2)에 장착한 카메라(11c, 11d, 11e)에 의거하는 개별 부감 화상(11C∼11E)이 고정적으로 표시되고, 차량 전부(1)에 장착한 카메라(11a, 11b)에 의거하는 개별 부감 화상(11A, 11B)을 굴곡 각도에 따라 변화시키도록 하여 표시한다.
이를 위해서는, 도 8에 나타낸 바와 같이, 차량 후부(2)와 차량 전부(1) 사이의 연결 축(10)을 중심으로 한 좌표계 Σ로 하고, 또 차량 전부(1) 및 차량 후부(2)의 좌표계도 Σf, Σg로 하여 각각 모니터의 화면 상에 설정한다. 여기서, 차량 후부(2)는 고정측 캐릭터상(2C)으로서 표시되므로, 차량 후부(2)의 좌표축 Σg는 고정된다. 각도 θ분만큼 스티어링 조작이 행해지면, 차량 전부(1)와 차량 후부(2) 사이의 각도가 변화한다. 즉, 좌표계 Σ과 좌표계 Σf가 스티어링 각도 θ만큼 회전하게 된다. 따라서, 모니터(12)에 차량 화상 VC를 표시함에 있어서, 이들 차량 전부(1)와 차량 후부(2)를 표시할 때의 치수와, 스티어링 각도 θ에 의거하여, 도 7에 나타내어져 있는 굴곡 상태의 차량 화상 VC가 생성되어, 합성 부감 화상과 함께 모니터(12)에 표시된다.
카메라(11a∼11e)를 탑재한 차량 전부(1)와 차량 후부(2)로 이루어지는 아티큘레이트 휠 로더가 모니터(12)에 표시될 때에는, 각 개별 부감 화상(11A∼11E)이 반드시 부분적으로 중첩하도록, 카메라(11a∼11e)의 위치와 화각이 설정되어 있다. 이것은, 도 9에 나타낸 비굴곡 상태이더라도, 또 도 10에 나타낸 굴곡 상태로 했을 때의 최대 굴곡 상태이더라도, 동일하게 한다. 따라서, 도 9 및 도 10에는, 이들 각 개별 부감 화상(11A∼11E)의 실제의 시야 범위가 FA∼FE로 된다. 그리고, 합성 부감 화상을 작성하기 위해서는, 화상 신호의 처리에 있어서, 개별 부감 화상의 중첩하는 부위에 대해서는, 어느 한 쪽의 화상을 우선하고, 다른 쪽의 화상은 부분적으로 비표시 상태로 한다.
차량 후부(2)는 모니터(12) 상에서는 고정측 캐릭터상(2C)이 되고, 차량 전부(1)에서는 가동측 캐릭터상(1C)이 되어 있다. 따라서, 본 실시형태에서는, 모니터(12) 상에서의 표시 에어리어는, 고정측 캐릭터상(2C) 측인 개별 부감 화상(11C∼11E)의 각 표시 에어리어는 고정적인 것으로 이루고, 가동측 캐릭터상(1C)의 개별 부감 화상(11A, 11B)의 각 표시 에어리어는 변화하도록 설정하고 있다. 이를 위해, 도 9의 비굴곡 상태로부터 도 10의 굴곡 상태를 향해 스티어링을 행하였다고 하면, 합성 부감 화상으로서는, 도 5에 나타낸 상태로부터, 도 7에 나타낸 바와 같이, 좌측의 개별 부감 화상(11A)의 표시 에어리어는 감소하고, 우측의 개별 부감 화상(11B)은 표시 에어리어가 증대하게 된다. 그 결과, 굴곡의 여하를 불문하고, 아티큘레이트 휠 로더의 주위는, 오퍼레이터가 시인 가능한 전방 시야를 제외한 전체에 감시 화상이 표시된다.
이상과 같이, 모니터(12)에 차량 화상 VC와 합성 부감 화상을 합성하도록 하여 표시시키기 위해, 도 11에 나타낸 회로 구성의 제어 장치(20)가 설치된다. 이 제어 장치(20)에는, 카메라(11a∼11e)에서 취득한 카메라 화상 신호가 받아들여지도록 되어 있고, 이들 카메라 화상 신호는, 화상 보정 수단(21)에 의해 변형 보정 등이 필요한 화상 보정을 행하도록 되어 있다. 그리고, 화상 보정 수단(21)에는 화상 변환 수단(22)이 접속되어 있고, 각 카메라 화상 신호는, 이 화상 변환 수단(22)에 의해서, 광축이 수직으로 되도록 좌표 변환한 부감 화상 신호로 변환된다.
이와 같이 하여 개별 부감 화상(11A∼11E)이 생성되지만, 이들 개별 부감 화상(11A∼11E)은, 화상 합성 수단(23)에 의해서, 각각의 표시 에어리어에 표시되도록 신호 처리가 행하여진다. 아티큘레이트 휠 로더는 차량 전부(1)와 차량 후부(2)는 굴곡 가능한 것이기 때문에, 각 카메라(11a∼11e)의 위치와 아티큘레이트 휠 로더의 자세 상태에 의거하여, 각 개별 부감 화상(11A∼11E)의 표시 에어리어가 할당된다. 이를 위해, 제어 장치(20)에는 카메라 위치 산출 수단(24)이 설치되어 있다. 또 제어 장치(20)에는, 아티큘레이트 휠 로더의 차체 정보 전달 수단(25)을 개재하여 스티어링 각도 θ에 관한 정보가 입력되어, 이 카메라 위치 산출 수단(24)에 이 정보가 받아들여지고, 또 카메라 위치 기억 수단(26)으로부터의 비굴곡 상태 시에 있어서의 각 카메라(11a∼11e)의 위치에 관한 정보가 얻어지도록 되어 있으며, 이들 각 카메라(11a∼11e)의 원점 위치와 차량 전부(1)와 차량 후부(2) 사이의 굴곡 각도에 의거하여, 모니터(12)에 표시할 때에 있어서, 각 개별 부감 화상(11A∼11E)에 할당되는 표시 에어리어가 결정되게 되고, 이것에 의해 합성 부감 화상이 생성되게 된다.
또, 모니터(12) 상에 있어서, 차량 전부(1)의 전부 캐릭터 화상(1C)과 차량 후부(2)의 후부 캐릭터 화상(2C)의 상대 위치 관계는, 굴곡 변화하기 때문에, 차량 화상 VC를 모니터(12)에 표시할 때에는, 차체 정보 전달 수단(25)으로부터의 스티어링 각도에 관한 정보에 의거하여 얻어진 차량 전부(1)와 차량 후부(2)의 굴곡 각도가 차량 화상 생성 수단(27)에 받아들여져서, 차량 화상 VC가 생성된다. 그리고, 상술한 합성 부감 화상과 차량 화상 VC가 표시 화상 생성 수단(28)에 입력되고, 이 표시 화상 생성 수단(28)으로부터 송신되는 화상 신호에 의거하여 모니터(12)에 주변 감시 화상이 표시되게 된다.
이상과 같이, 아티큘레이트 휠 로더에 있어서, 차량 후부(2)의 운전실(8) 내에서 오퍼레이터가 기계의 조작을 행할 때, 특히 주행 시에 모니터(12)를 시인(視認)함으로써, 주위에 사람이나 장해물 등과 같은 인적 물적 장해가 존재하는지의 여부를 확인할 수 있다. 차량 화상 VC의 주위에 합성 부감 화상이 나타내어지고, 또한 이 합성 부감 화상에 주의 범위 가이드 라인 L이 표시되어 있기 때문에, 모니터(12)의 시인에 의해 인적 물적 장해의 방향이나, 인적 물적 장해까지의 거리를 정확하게 파악할 수 있게 되어, 작업의 안전 확보나 작업의 효율 향상 등이 도모된다.
여기서, 휠 로더는 아티큘레이트의 것이고, 차량 전부(1)와 차량 후부(2)는 굴곡 가능하게 연결되어 있기 때문에, 모니터(12)에 있어서의 표시도 이 굴곡 상태를 반영시킬 필요가 있다. 오퍼레이터는 차량 후부(2)의 운전실(8) 내에 위치하고 있고, 작업 기구는 차량 전부(1)에 구비하고 있기 때문에, 차량 전부(1) 및 작업 기구를 구성하는 로더 버킷(3)은 운전실(8)의 내부에서 육안으로 볼 수 있으므로, 모니터(12)를 각별히 보지 않아도, 차량의 전진 및 작업 기구를 구동함으로써 실행되는 작업에 대해서는, 안전하고 효율적으로 행할 수 있다.
한편, 아티큘레이트 휠 로더를 굴곡 조작할 때나, 후진시킬 때에는, 또한 작업자 등이 차량에 접근하는 방향으로 이동하고 있거나 하면, 후방 및 측방의 안전 확인을 행할 필요가 있다. 이 때에는, 오퍼레이터가 조작을 행하고 있는 운전실(8)이 설치되어 있는 차량 후부(2)를 고정측 캐릭터상(2C)으로 하고 있으므로, 차량의 후진 시에 있어서의 후방의 안전 확인 및 굴곡 조작 시에 있어서의 주위의 안전 확인을 원활하게 행할 수 있고, 오퍼레이터가 상황을 정확하게 파악할 수 있어, 모니터(12)를 눈으로 보는 데에 있어서 위화감이 생기는 바와 같은 경우는 없다.
다음으로, 아티큘레이트 작업 기계의 다른 예로서, 아티큘레이트 덤프 트럭의 정면도를 도 12에, 또 평면도를 도 13에 나타낸다. 또한, 도 14는 굴곡 상태의 평면도이다.
이들 도면으로부터 명백한 바와 같이, 차량 전부(30)는 운전실(31)을 포함하는 것이고, 차량 후부(32)에는 짐받이(33)가 설치되어 있다. 이 짐받이(33)는 유압 실린더(34)에 의해 후방을 향해 경동(傾動) 가능하게 되어 있다. 차량 전부(30)에는 1세트의 차륜(35)이 설치되고, 차량 후부(32)에는 2세트의 차륜(36)이 설치되어 있다. 차량 전부(30)와, 차량 후부(32)를 구성하는 프레임(37)의 사이는 연결 축(38)에 의해 연결되어 있고, 도 13에 나타낸 비굴곡 상태와, 도 14에 나타낸 굴곡 상태로 변위 가능하게 되어 있다.
차량 전부(30)의 연결 축(38)에 의한 차량 후부(32)로의 연결부의 근방 위치에 있어서의 좌우 양측부에는, 카메라(39a, 39b)가 부착되어 있다. 또, 차량 후부(32)에 대해서는, 프레임(37)의 후부 위치와, 전후의 차륜(36, 36) 사이의 좌우 양측 위치에, 각각 카메라(39c, 39d, 39e)가 설치되어 있다. 그리고, 이들 각 카메라(39a∼39e)에 의해 촬영한 카메라 화상은, 상술한 제 1 실시형태와 동일하게, 상방 시점이 되도록 좌표 변환하여, 개별 부감 화상(39A∼39E)으로 변환된다. 그리고, 이들 개별 부감 화상(39A∼39E)을 합성한 합성 부감 화상이, 도 15에 나타낸 바와 같이, 아티큘레이트 덤프 트럭의 차체상 화상과 함께 모니터(40)에 표시되게 된다. 또한 도 15에는, 아티큘레이트 덤프 트럭의 굴곡 상태가 나타내어져 있다.
모니터(40)에 있어서는, 서로 굴곡하는 차량 전부(30)와 차량 후부(32) 중 어느 쪽을 고정측 캐릭터상으로 하고, 어느 쪽을 가동측 캐릭터상으로 하는지에 대해서는, 운전실(31)을 기준으로 하는 경우에는, 차량 전부(30)를 고정측 캐릭터상으로 하고, 차량 후부(32)를 가동측 캐릭터상으로 한다. 다만, 차량 후부(32)는 차량 전부(30)보다 긴 것이고, 또한 운전실(31)로부터는 후방 시야는 실질적으로 얻어지지 않기 때문에, 후진 시에는 차량 후부(32)를 고정측 캐릭터상으로서 모니터(40)에 표시하도록 구성할 수도 있다. 도 15에 있어서는, 차량 후부(32)를 고정측 캐릭터상(32C), 차량 전부(30)를 가동측 캐릭터상(30C)으로서 나타내고 있다.
아티큘레이트 덤프 트럭이 후진할 때에는, 굴곡 상태이든, 비굴곡 상태이든, 차량 후부(32)의 후방 위치를 향해 이동하게 되므로, 이 차량 후부(32)의 후방 위치를 고정적으로 표시함으로써, 후방 시야 내에 있어서, 사람이나 장해물 등과 같은 인적 물적 장해가 존재하는지의 여부의 확인을 정확하게 행할 수 있게 된다. 다만, 아티큘레이트 덤프 트럭의 전진 시에는, 운전실(31)이 설치되어 있는 차량 전부(30)가 고정측 캐릭터상으로서 표시하는 것이 바람직하다. 따라서, 아티큘레이트 덤프 트럭의 전진 시와 후진 시의 사이에서, 즉 운전 작동 모드에 따라, 고정측 캐릭터상을 바꾸도록 해도 된다. 도 11에 나타낸 바와 같이, 차량 화상 생성 수단(27) 및 카메라 위치 산출 수단(24)에는, 차체 정보 전달 수단(25)이 접속되어 있고, 이 차체 정보 전달 수단(25)으로부터는 스티어링 각도에 관한 정보뿐만 아니라, 각종의 정보도 취득할 수 있도록 되어 있으므로, 차량이 전진하고 있는지, 후진하고 있는지에 대한 정보를 차체 정보 전달 수단(25)으로부터 취득하고, 이 신호에 의거하여 모니터(40)의 표시 태양을 변화시킬 수 있다.
1, 30: 차량 전부 2, 32: 차량 후부
3: 로더 버킷 8: 운전실
10, 38: 연결 축 11a∼11e, 39a∼39e: 카메라
12, 40: 모니터 20: 제어 장치
21: 화상 보정 수단 22: 화상 변환 수단
23: 화상 합성 수단 24: 카메라 위치 산출 수단
25: 차체 정보 전달 수단 27: 차량 화상 생성 수단
28: 표시 화상 생성 수단 33: 짐받이
1C, 2C, 30C, 32C: 캐릭터 화상
11A∼11E, 39A∼39E: 개별 부감 화상

Claims (5)

  1. 차량 전부와 차량 후부를 연결 축에 의해 좌우로 굴곡 가능하게 연결한 아티큘레이트 작업 기계에 설치되는 작업 기계의 주위 감시 장치에 있어서,
    상기 차량 전부에 설치한 1 또는 복수의 카메라와,
    상기 차량 후부에 설치되어, 차량의 후방 위치를 시야로 하는 카메라를 포함하는 1 또는 복수의 카메라와,
    상기 작업 기계의 주위 감시 화상을 표시하기 위한 모니터와,
    상기 연결 축을 중심으로 한 상기 차량 전부와 상기 차량 후부 사이의 굴곡 각도에 의거하여, 상기 각 카메라의 위치를 산출하는 카메라 위치 산출부와,
    상기 각 카메라에서 취득한 카메라 화상을 상방 시점이 되도록 시점 변환하여, 각각 부감 화상으로 하는 화상 변환 수단과,
    상기 각 카메라에 의해 촬영한 각 개별 부감 화상을, 상기 카메라 위치 산출부에 의해 산출된 각각의 위치 관계가 되도록 합성한 합성 부감 화상을 생성하여, 상기 모니터에 이 합성 부감 화상을 표시하기 위한 화상 합성 수단과,
    상기 합성 부감 화상을, 상기 차량 전부 또는 상기 차량 후부 중 어느 한 쪽을 고정한 고정측 캐릭터상으로 하고, 다른 쪽을 상기 굴곡 각도에 의거하여 상기 고정측 캐릭터상에 대해 상대 회전 운동하는 가동측 캐릭터상으로 한 차량 화상과 함께 상기 모니터에 표시하는 표시 화상 생성 수단
    을 구비한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
  2. 제 1 항에 있어서,
    상기 차량 전부와 상기 차량 후부 중, 상기 운전석이 설치되어 있는 쪽을 상기 고정측 캐릭터상으로서 상기 모니터 화면에 표시시키는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
  3. 제 1 항에 있어서,
    상기 작업 기계는 상기 운전석이 상기 차량 전부에 설치되며, 이 작업 기계의 전진 시에는, 상기 고정측 캐릭터상은 상기 차량 전부로 하고, 상기 작업 기계의 후진 시에는, 상기 고정측 캐릭터상은 상기 차량 후부로 하도록, 운전 작동 모드에 의해 표시를 변화시키도록 한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
    상기 모니터에는, 차량 화상의 주위에 주의 범위 가이드 라인을 표시하도록 하고, 상기 굴곡 각도가 변화되었을 때에, 이 주의 범위 가이드 라인을 굴곡 각도에 상응하는 각도분만큼 변화시키는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
  5. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
    상기 차량 전부 및 상기 차량 후부에 설치한 각 카메라는, 각각의 시야가 상기 굴곡 각도의 전체 범위에 걸쳐 적어도 2개의 카메라의 시야가 부분적으로 중첩되는 위치에 배치하는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
KR1020137032343A 2011-05-13 2012-04-13 작업 기계의 주위 감시 장치 KR20140043374A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2011-107815 2011-05-13
JP2011107815 2011-05-13
PCT/JP2012/060104 WO2012157379A1 (ja) 2011-05-13 2012-04-13 作業機械の周囲監視装置

Publications (1)

Publication Number Publication Date
KR20140043374A true KR20140043374A (ko) 2014-04-09

Family

ID=47176719

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137032343A KR20140043374A (ko) 2011-05-13 2012-04-13 작업 기계의 주위 감시 장치

Country Status (7)

Country Link
US (1) US20140088824A1 (ko)
EP (1) EP2712969A4 (ko)
JP (1) JP5779244B2 (ko)
KR (1) KR20140043374A (ko)
CN (1) CN103547747A (ko)
AU (1) AU2012257053A1 (ko)
WO (1) WO2012157379A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170113001A (ko) * 2016-03-28 2017-10-12 가부시키가이샤 고마쓰 세이사쿠쇼 평가 장치 및 평가 방법
KR20210151297A (ko) * 2020-06-04 2021-12-14 (주)에이치브레인 Fpga 기반 뉴로머신과 svm을 이용한 굴삭기 안전시스템

Families Citing this family (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2447672B (en) 2007-03-21 2011-12-14 Ford Global Tech Llc Vehicle manoeuvring aids
EP2570556B1 (en) * 2010-06-18 2021-04-28 Hitachi Construction Machinery Co., Ltd. Device for monitoring area around work machine
US9506774B2 (en) 2011-04-19 2016-11-29 Ford Global Technologies, Llc Method of inputting a path for a vehicle and trailer
US9969428B2 (en) 2011-04-19 2018-05-15 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
US9723274B2 (en) 2011-04-19 2017-08-01 Ford Global Technologies, Llc System and method for adjusting an image capture setting
US9500497B2 (en) 2011-04-19 2016-11-22 Ford Global Technologies, Llc System and method of inputting an intended backing path
US9513103B2 (en) 2011-04-19 2016-12-06 Ford Global Technologies, Llc Hitch angle sensor assembly
US9926008B2 (en) 2011-04-19 2018-03-27 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
US9374562B2 (en) 2011-04-19 2016-06-21 Ford Global Technologies, Llc System and method for calculating a horizontal camera to target distance
US9683848B2 (en) 2011-04-19 2017-06-20 Ford Global Technologies, Llc System for determining hitch angle
US9854209B2 (en) * 2011-04-19 2017-12-26 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US10196088B2 (en) 2011-04-19 2019-02-05 Ford Global Technologies, Llc Target monitoring system and method
US9434414B2 (en) 2011-04-19 2016-09-06 Ford Global Technologies, Llc System and method for determining a hitch angle offset
US9555832B2 (en) 2011-04-19 2017-01-31 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US9373044B2 (en) 2011-07-25 2016-06-21 Ford Global Technologies, Llc Trailer lane departure warning system
US8768583B2 (en) * 2012-03-29 2014-07-01 Harnischfeger Technologies, Inc. Collision detection and mitigation systems and methods for a shovel
US9592851B2 (en) 2013-02-04 2017-03-14 Ford Global Technologies, Llc Control modes for a trailer backup assist system
US9511799B2 (en) 2013-02-04 2016-12-06 Ford Global Technologies, Llc Object avoidance for a trailer backup assist system
JP6095592B2 (ja) * 2014-02-17 2017-03-15 日立建機株式会社 油圧ショベルの監視画像表示装置
US9517668B2 (en) 2014-07-28 2016-12-13 Ford Global Technologies, Llc Hitch angle warning system and method
US9963004B2 (en) 2014-07-28 2018-05-08 Ford Global Technologies, Llc Trailer sway warning system and method
US9437055B2 (en) * 2014-08-13 2016-09-06 Bendix Commercial Vehicle Systems Llc Cabin and trailer body movement determination with camera at the back of the cabin
US10161746B2 (en) 2014-08-18 2018-12-25 Trimble Navigation Limited Systems and methods for cargo management
WO2016028816A1 (en) 2014-08-18 2016-02-25 Trimble Navigation Limited System and method for modifying onboard event detection and/or image capture strategy using external source data
US9714037B2 (en) 2014-08-18 2017-07-25 Trimble Navigation Limited Detection of driver behaviors using in-vehicle systems and methods
EP3020868B1 (en) * 2014-11-14 2020-11-04 Caterpillar Inc. Machine of a kind comprising a body and an implement movable relative to the body with a system for assisting a user of the machine
US9522677B2 (en) 2014-12-05 2016-12-20 Ford Global Technologies, Llc Mitigation of input device failure and mode management
US9533683B2 (en) 2014-12-05 2017-01-03 Ford Global Technologies, Llc Sensor failure mitigation system and mode management
US9607242B2 (en) 2015-01-16 2017-03-28 Ford Global Technologies, Llc Target monitoring system with lens cleaning device
US9667875B2 (en) 2015-01-21 2017-05-30 Caterpillar Inc. Vision system and method of monitoring surroundings of machine
US9522699B2 (en) 2015-02-05 2016-12-20 Ford Global Technologies, Llc Trailer backup assist system with adaptive steering angle limits
US9616923B2 (en) 2015-03-03 2017-04-11 Ford Global Technologies, Llc Topographical integration for trailer backup assist system
DE102015002692A1 (de) * 2015-03-04 2016-09-08 Dynapac Gmbh Straßenbaumaschine und Verfahren zum Betreiben einer selbstfahrenden Straßenbaumaschine
US9804022B2 (en) 2015-03-24 2017-10-31 Ford Global Technologies, Llc System and method for hitch angle detection
WO2016174754A1 (ja) 2015-04-28 2016-11-03 株式会社小松製作所 作業機械の周辺監視装置及び作業機械の周辺監視方法
US10204159B2 (en) 2015-08-21 2019-02-12 Trimble Navigation Limited On-demand system and method for retrieving video from a commercial vehicle
JP6734916B2 (ja) * 2015-09-02 2020-08-05 ボルボトラックコーポレーション 連結式の車両結合体を後退させる装置及び方法
US9896130B2 (en) 2015-09-11 2018-02-20 Ford Global Technologies, Llc Guidance system for a vehicle reversing a trailer along an intended backing path
US10384607B2 (en) 2015-10-19 2019-08-20 Ford Global Technologies, Llc Trailer backup assist system with hitch angle offset estimation
US10611407B2 (en) 2015-10-19 2020-04-07 Ford Global Technologies, Llc Speed control for motor vehicles
JP2017081238A (ja) * 2015-10-23 2017-05-18 株式会社小松製作所 表示システムおよび作業車両
US9836060B2 (en) 2015-10-28 2017-12-05 Ford Global Technologies, Llc Trailer backup assist system with target management
US10017115B2 (en) 2015-11-11 2018-07-10 Ford Global Technologies, Llc Trailer monitoring system and method
US9796228B2 (en) 2015-12-17 2017-10-24 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system
US10155478B2 (en) 2015-12-17 2018-12-18 Ford Global Technologies, Llc Centerline method for trailer hitch angle detection
US9798953B2 (en) 2015-12-17 2017-10-24 Ford Global Technologies, Llc Template matching solution for locating trailer hitch point
US9610975B1 (en) 2015-12-17 2017-04-04 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system
US9934572B2 (en) 2015-12-17 2018-04-03 Ford Global Technologies, Llc Drawbar scan solution for locating trailer hitch point
US9827818B2 (en) 2015-12-17 2017-11-28 Ford Global Technologies, Llc Multi-stage solution for trailer hitch angle initialization
US10011228B2 (en) 2015-12-17 2018-07-03 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system using multiple imaging devices
WO2017122294A1 (ja) * 2016-01-13 2017-07-20 株式会社ソシオネクスト 周囲監視装置、画像処理方法、及び画像処理プログラム
US10005492B2 (en) 2016-02-18 2018-06-26 Ford Global Technologies, Llc Trailer length and hitch angle bias estimation
WO2017077723A1 (ja) 2016-03-29 2017-05-11 株式会社小松製作所 作業車両
US10112646B2 (en) 2016-05-05 2018-10-30 Ford Global Technologies, Llc Turn recovery human machine interface for trailer backup assist
US10106193B2 (en) 2016-07-01 2018-10-23 Ford Global Technologies, Llc Enhanced yaw rate trailer angle detection initialization
US10046800B2 (en) 2016-08-10 2018-08-14 Ford Global Technologies, Llc Trailer wheel targetless trailer angle detection
JP6886258B2 (ja) * 2016-08-31 2021-06-16 株式会社小松製作所 ホイールローダおよびホイールローダの制御方法
JP2018050119A (ja) * 2016-09-20 2018-03-29 国立大学法人 東京大学 作業車両の表示システム
US10222804B2 (en) 2016-10-21 2019-03-05 Ford Global Technologies, Llc Inertial reference for TBA speed limiting
US10594934B2 (en) * 2016-11-17 2020-03-17 Bendix Commercial Vehicle Systems Llc Vehicle display
DE102016223389A1 (de) * 2016-11-25 2018-05-30 Conti Temic Microelectronic Gmbh Bildverarbeitungssystem und bildverarbeitungsverfahren
WO2018105527A1 (ja) * 2016-12-06 2018-06-14 住友建機株式会社 建設機械
JP6662762B2 (ja) * 2016-12-19 2020-03-11 株式会社クボタ 作業車
US20180201132A1 (en) * 2017-01-13 2018-07-19 Deere & Company Mobile machine-user protocol system and method
WO2017131243A1 (ja) 2017-02-09 2017-08-03 株式会社小松製作所 作業車両の周辺監視システム、作業車両、及び作業車両の周辺監視方法
JP6346375B1 (ja) * 2017-02-09 2018-06-20 株式会社小松製作所 作業車両及び表示装置
JP6819462B2 (ja) * 2017-05-30 2021-01-27 コベルコ建機株式会社 作業機械
JP6822427B2 (ja) * 2017-06-09 2021-01-27 株式会社デンソー 地図変化点検出装置
US10710585B2 (en) 2017-09-01 2020-07-14 Ford Global Technologies, Llc Trailer backup assist system with predictive hitch angle functionality
JP7103796B2 (ja) * 2018-01-31 2022-07-20 株式会社小松製作所 作業機械
US10883256B2 (en) * 2018-05-25 2021-01-05 Deere & Company Object responsive control system for a work machine
JP7220027B2 (ja) * 2018-06-14 2023-02-09 フォルシアクラリオン・エレクトロニクス株式会社 運転支援装置
JP7197315B2 (ja) * 2018-09-14 2022-12-27 株式会社小松製作所 ホイールローダの表示システムおよびその制御方法
US11077795B2 (en) 2018-11-26 2021-08-03 Ford Global Technologies, Llc Trailer angle detection using end-to-end learning
US11592813B2 (en) * 2018-12-17 2023-02-28 Robert Bosch Gmbh Method and controller for the situational transmission of surroundings information of a vehicle
JP7160701B2 (ja) * 2019-01-23 2022-10-25 株式会社小松製作所 作業機械のシステム及び方法
US10829046B2 (en) 2019-03-06 2020-11-10 Ford Global Technologies, Llc Trailer angle detection using end-to-end learning
JP7280089B2 (ja) * 2019-03-29 2023-05-23 日立建機株式会社 ホイールローダ
JP2020173524A (ja) * 2019-04-09 2020-10-22 清水建設株式会社 監視システム
US10949685B2 (en) 2019-07-22 2021-03-16 Caterpillar Inc. Excluding a component of a work machine from a video frame based on motion information
JP7055158B2 (ja) * 2020-02-13 2022-04-15 株式会社クボタ 作業車
JP7437195B2 (ja) 2020-03-13 2024-02-22 株式会社小松製作所 モータグレーダおよび表示制御方法
JP7428052B2 (ja) * 2020-03-31 2024-02-06 コベルコ建機株式会社 作業機械の周囲検知装置
US11575810B2 (en) * 2020-09-09 2023-02-07 Deere & Company Auto-positioning camera for drawn implements
US11653587B2 (en) * 2020-09-17 2023-05-23 Deere & Company System and method for presenting the surroundings of an agricultural implement
KR20220102804A (ko) * 2021-01-14 2022-07-21 현대두산인프라코어(주) 건설기계의 제어 시스템 및 방법
JP2023102618A (ja) * 2022-01-12 2023-07-25 株式会社小松製作所 作業機械、作業機械を制御するための方法、及びシステム
JP2023144981A (ja) * 2022-03-28 2023-10-11 キヤノン株式会社 画像処理装置、画像処理方法、及びコンピュータプログラム
KR20240056273A (ko) * 2022-10-21 2024-04-30 에이치디현대인프라코어 주식회사 건설기계의 제어 시스템 및 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10035223A1 (de) * 2000-07-20 2002-01-31 Daimler Chrysler Ag Vorrichtung und Verfahren zur Überwachung der Umgebung eines Objekts
JP2003235036A (ja) * 2002-02-07 2003-08-22 Nissan Motor Co Ltd 車両用画像表示装置
JP4332027B2 (ja) * 2003-12-25 2009-09-16 キャタピラージャパン株式会社 表示器制御システム
JP2006256544A (ja) * 2005-03-18 2006-09-28 Aisin Seiki Co Ltd 後退運転支援装置
JP5054294B2 (ja) * 2005-08-05 2012-10-24 株式会社小松製作所 作業用車両に搭載される表示装置、及び同表示装置の表示方法
DE102006037600B4 (de) * 2006-08-10 2010-03-04 Daimler Ag Verfahren zur auflösungsabhängigen Darstellung der Umgebung eines Kraftfahrzeugs
JP4996928B2 (ja) * 2007-01-05 2012-08-08 日立建機株式会社 作業機械の周囲監視装置
JP4847913B2 (ja) * 2007-03-30 2011-12-28 日立建機株式会社 作業機械周辺監視装置
JP2009060499A (ja) * 2007-09-03 2009-03-19 Sanyo Electric Co Ltd 運転支援システム及び連結車両
JP2009107602A (ja) * 2007-11-01 2009-05-21 Komatsu Ltd アーティキュレート式建設機械
KR101078341B1 (ko) * 2009-02-12 2011-11-01 볼보 컨스트럭션 이큅먼트 에이비 후방 감시수단이 구비된 건설장비
CN103080990B (zh) * 2011-06-07 2015-04-01 株式会社小松制作所 作业车辆的周边监视装置
JP5124671B2 (ja) * 2011-06-07 2013-01-23 株式会社小松製作所 作業車両の周辺監視装置
JP5124672B2 (ja) * 2011-06-07 2013-01-23 株式会社小松製作所 作業車両の周辺監視装置
JP5781978B2 (ja) * 2012-05-22 2015-09-24 株式会社小松製作所 ダンプトラック
US9446713B2 (en) * 2012-09-26 2016-09-20 Magna Electronics Inc. Trailer angle detection system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170113001A (ko) * 2016-03-28 2017-10-12 가부시키가이샤 고마쓰 세이사쿠쇼 평가 장치 및 평가 방법
KR20210151297A (ko) * 2020-06-04 2021-12-14 (주)에이치브레인 Fpga 기반 뉴로머신과 svm을 이용한 굴삭기 안전시스템

Also Published As

Publication number Publication date
JPWO2012157379A1 (ja) 2014-07-31
EP2712969A1 (en) 2014-04-02
CN103547747A (zh) 2014-01-29
WO2012157379A1 (ja) 2012-11-22
AU2012257053A1 (en) 2013-11-21
US20140088824A1 (en) 2014-03-27
JP5779244B2 (ja) 2015-09-16
EP2712969A4 (en) 2015-04-29

Similar Documents

Publication Publication Date Title
KR20140043374A (ko) 작업 기계의 주위 감시 장치
JP6427597B2 (ja) 作業機械の周辺監視装置及び作業機械の周辺監視方法
JP5269026B2 (ja) 作業機械の周囲監視装置
EP2717570A1 (en) Device for monitoring area around working machine
JP6727971B2 (ja) 作業車
CN107079089B (zh) 作业机械的周边监视装置
JP6167042B2 (ja) 自走式産業機械の周囲監視装置
EP2003018A2 (en) Camera system and mechanical apparatus
JP5775283B2 (ja) 作業機械のモニタ装置
US20140354813A1 (en) Surroundings Monitoring Device for Work Machine
JP6071786B2 (ja) 作業機械の周囲監視装置
WO2013172172A1 (ja) 自走式産業機械の表示装置
EP3512194B1 (en) Bird's-eye view image system, bird's-eye view image display method and program
CN113152552A (zh) 工程机械的控制系统及方法
CN112112202B (zh) 操纵辅助系统、操纵辅助方法以及建筑机械
US20240052602A1 (en) Work machine surroundings monitoring system, work machine, and work machine surroundings monitoring method
WO2022195988A1 (ja) 遠隔操作支援サーバおよび遠隔操作支援システム
JP7145137B2 (ja) 作業機械の制御装置
KR20240056273A (ko) 건설기계의 제어 시스템 및 방법
JP6188858B2 (ja) 作業機械の周囲監視装置
KR20240056262A (ko) 건설기계의 제어 시스템 및 방법
CN115695717A (zh) 工程机械的控制系统及方法
KR20230159892A (ko) 표시 제어 장치, 표시 제어 방법 및 작업 기계

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid