KR20140043374A - 작업 기계의 주위 감시 장치 - Google Patents
작업 기계의 주위 감시 장치 Download PDFInfo
- Publication number
- KR20140043374A KR20140043374A KR1020137032343A KR20137032343A KR20140043374A KR 20140043374 A KR20140043374 A KR 20140043374A KR 1020137032343 A KR1020137032343 A KR 1020137032343A KR 20137032343 A KR20137032343 A KR 20137032343A KR 20140043374 A KR20140043374 A KR 20140043374A
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- image
- monitor
- camera
- rear part
- Prior art date
Links
- 238000012544 monitoring process Methods 0.000 title claims description 12
- 238000006243 chemical reaction Methods 0.000 claims abstract description 9
- 238000005452 bending Methods 0.000 claims description 24
- 239000002131 composite material Substances 0.000 claims description 7
- 238000012806 monitoring device Methods 0.000 claims description 6
- 230000002093 peripheral effect Effects 0.000 claims description 6
- 238000000034 method Methods 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 claims description 3
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 238000003702 image correction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 208000037063 Thinness Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 206010048828 underweight Diseases 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/08—Superstructures; Supports for superstructures
- E02F9/0841—Articulated frame, i.e. having at least one pivot point between two travelling gear units
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/24—Safety devices, e.g. for preventing overload
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/261—Surveying the work-site to be treated
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Civil Engineering (AREA)
- Mining & Mineral Resources (AREA)
- Structural Engineering (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Closed-Circuit Television Systems (AREA)
- Component Parts Of Construction Machinery (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계에 부감 화상을 취득하여, 모니터에 차량의 화상과 함께 표시할 때에, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적이 되는 표시 화상으로 한다.
차량 전부(1)와 차량 후부(2)에 설치한 카메라(11a∼11e)에서 얻은 카메라 화상을 모니터(12)에 표시함에 있어서, 운전실(8)이 설치되어 있는 차량 후부(2)를 고정 캐릭터상(2C)으로 하고, 이 고정 캐릭터상(2C)에 대해 굴곡하는 차량 전부(1)를 가동 캐릭터상(1C)으로 하며, 이와 같이 하여 표시되는 차량 화상 VC의 주위에 카메라 화상을 상방 시점이 되도록 좌표 변환한 개별 부감 화상을 합성한 합성 부감 화상을 표시하도록 이루고, 차량 전부(1)와 차량 후부(2)가 연결 축(10)을 중심으로 하여 굴곡했을 때에는, 차량 전부(1)에 설치한 카메라(11a, 11b)로부터 얻은 개별 부감 화상(11A, 11B)의 표시 범위를 변화시킨다.
차량 전부(1)와 차량 후부(2)에 설치한 카메라(11a∼11e)에서 얻은 카메라 화상을 모니터(12)에 표시함에 있어서, 운전실(8)이 설치되어 있는 차량 후부(2)를 고정 캐릭터상(2C)으로 하고, 이 고정 캐릭터상(2C)에 대해 굴곡하는 차량 전부(1)를 가동 캐릭터상(1C)으로 하며, 이와 같이 하여 표시되는 차량 화상 VC의 주위에 카메라 화상을 상방 시점이 되도록 좌표 변환한 개별 부감 화상을 합성한 합성 부감 화상을 표시하도록 이루고, 차량 전부(1)와 차량 후부(2)가 연결 축(10)을 중심으로 하여 굴곡했을 때에는, 차량 전부(1)에 설치한 카메라(11a, 11b)로부터 얻은 개별 부감 화상(11A, 11B)의 표시 범위를 변화시킨다.
Description
본 발명은, 관절부에 의해 굴곡하는 아티큘레이트 차량(articulated vehicle)으로 이루어지는 작업 기계에 있어서, 기계에 의한 작업의 안전 확보 등을 위해 설치되는 작업 기계의 주위 감시 장치에 관한 것이다.
일반적으로, 자주식(自走式) 작업 기계에 있어서의 작업의 안전을 확보하고, 또 작업 기계의 조작성의 향상을 도모하기 위해, 차량의 주위 감시 장치를 설치한 것은, 종래부터 알려져 있다. 종래 기술에 의한 주위 감시 장치는, 차체에 카메라를 장착함과 함께, 운전실에 있어서, 오퍼레이터가 착좌하는 운전석의 전방 위치에 모니터를 설치함으로써 구성된다. 카메라로 촬영한 화상은 동화상 상태의 영상으로서 모니터에 표시되고, 이 모니터의 화상으로부터 차량의 주위에 작업자 등이 들어가 있는지의 여부, 또 주위에 구축물이나 수목 등이 존재하는지의 여부를 확인할 수 있다.
그런데, 단순한 카메라 화상에서는 거리감을 정확하게 파악하는 것이 곤란한 경우가 있다. 또 경우에 따라서는, 방향성을 파악하는 것이 곤란해지는 경우도 있다. 모니터 상에서는, 작업 기계의 근방에 작업자 등이 들어가 있거나, 구축물 등의 장해물이 작업 기계의 근방에 존재하고 있거나 하고 있는 경우, 즉 작업 기계의 근방 위치에 인적 물적 장해가 존재하는 경우에 있어서, 작업 기계의 일부가 이들과 접촉할 우려가 있는지의 여부, 회피 동작을 취해야 하는지, 회피 동작으로서 어느 정도의 움직임이 필요한지, 또한 회피는 불가능하여, 작업 기계의 작동을 정지시켜야 하는지 등은, 모니터를 육안으로 보는 것만으로는 정확하게 판단할 수 없는 경우가 있다. 즉, 모니터에 표시되는 카메라 화상으로부터는 작업 기계와 인적 물적 장해의 정확한 거리나 방향성을 인식할 수 없는 경우가 있다.
그런데, 카메라를 어떤 높이로부터 비스듬히 하(下)방향으로 시야를 돌려 촬영하고, 이 카메라 화상을 화상 변환 처리하면, 가상 시점으로부터의 화상으로 변환할 수 있다. 가상 시점 화상으로서, 시점을 상방 위치로 한 상방 시점 화상은 부감(俯瞰) 상태의 화상이 된다. 이 부감 화상을 모니터에 표시하면, 인적 물적 장해까지의 거리나 그 방향을 정확하게 파악할 수 있다. 작업 기계에 있어서, 부감 화상을 표시함으로써 주위의 감시를 행하는 장치가, 예를 들면 특허문헌 1에 개시되어 있다. 이 특허문헌 1에서는, 작업 기계로서의 유압 셔블의 후방과, 좌측방의 소정의 위치에 카메라를 장착하고, 이들 카메라의 광축을 비스듬히 하방을 향해, 후방 및 측방에 넓은 시야를 가진 화상을 취득하여 상방 시점이 되도록 시점 변환한 부감 화상을 모니터에 표시함으로써, 주변 감시 화면을 취득하도록 하고 있다.
이와 같이 부감 화상을 모니터에 표시하면, 작업 기계로부터 인적 물적 장해까지의 거리 및 방향을 정확하게 파악할 수 있게 된다. 따라서, 작업 기계를 작동시킬 때에, 이 모니터의 영상에 의해서 주위의 안전을 확인할 수 있다.
자주식 작업 기계로서, 아티큘레이트 차량으로 이루어지는 자주식 작업 기계가 있다. 예를 들면, 아티큘레이트 휠 로더나 아티큘레이트 덤프 트럭 등은, 차량의 전부(前部)와 후부(後部)의 사이가 굴곡 가능한 관절을 가지는 것이다. 즉, 아티큘레이트 휠 로더에는, 차량 전부에 로더 버킷 및 그 구동 기구가 설치되고, 차량 후부에 운전실 등이 설치되어 있다. 또, 아티큘레이트 덤프 트럭의 경우에는, 차량 전부가 운전실이 되고, 차량 후부에 짐받이가 설치되어 있다.
이상과 같은 아티큘레이트 작업 기계에 있어서는, 특허문헌 1에 나타내어져 있는 유압 셔블과는 달리, 차량 전부와 차량 후부의 사이가 굴곡하기 때문에, 아티큘레이트 작업 기계에 부감 화상을 취득하여, 모니터에 표시하는 경우에는, 카메라를 어떻게 배치하는지, 또 카메라에서 취득한 부감 화상을 어떻게 하여 표시하는지 등에 대해, 해결해야 하는 과제가 존재한다.
본 발명은 이상의 점을 감안하여 이루어진 것으로서, 그 목적으로 하는 바는, 차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계의 화상과 함께 이 차량의 각 부에 설치한 카메라 화상으로부터의 부감 화상을 모니터에 표시할 때에, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적이 되는 표시 화상으로 한다.
상술한 목적을 달성하기 위해, 본 발명은, 차량 전부와 차량 후부를 연결 축에 의해 좌우로 굴곡 가능하게 연결한 아티큘레이트 작업 기계에 설치되는 작업 기계의 주위 감시 장치에 있어서, 상기 차량 전부에 설치한 1 또는 복수의 카메라와, 상기 차량 후부에 설치되어, 차량의 후방 위치를 시야로 하는 카메라를 포함하는 1 또는 복수의 카메라와, 상기 작업 기계의 주위 감시 화상을 표시하기 위한 모니터와, 상기 연결 축을 중심으로 한 상기 차량 전부와 상기 차량 후부 사이의 굴곡 각도에 의거하여, 상기 각 카메라의 위치를 산출하는 카메라 위치 산출부와, 상기 각 카메라에서 취득한 카메라 화상을 상방 시점이 되도록 시점 변환하여, 각각 부감 화상으로 하는 화상 변환 수단과, 상기 각 카메라에 의해 촬영한 각 개별 부감 화상을, 상기 카메라 위치 산출부에 의해 산출된 각각의 위치 관계가 되도록 합성한 합성 부감 화상을 생성하여, 상기 모니터에 이 합성 부감 화상을 표시하기 위한 화상 합성 수단과, 상기 합성 부감 화상을, 상기 차량 전부 또는 상기 차량 후부 중 어느 한 쪽을 고정한 고정측 캐릭터상(像)으로 하고, 다른 쪽을 상기 굴곡 각도에 의거하여 상기 고정측 캐릭터상에 대해 상대 회전 운동하는 가동측 캐릭터상으로 한 차량 화상과 함께 상기 모니터에 표시하는 표시 화상 생성 수단을 구비한 것을 특징으로 하는 것이다.
아티큘레이트 작업 기계의 대표적인 것으로서는, 휠 로더나 덤프 트럭이 있지만, 이들 이외이더라도, 차량 전부와 차량 후부가 굴곡 가능하게 연결되어 있고, 차량 전부 또는 차량 후부 중 어느 한 쪽에 운전석이 설치되며, 다른 쪽에는 작업 수단을 장착한 것에 적용 가능하다.
작업 기계의 주위를 감시한다고 하는 경우, 차량의 후방의 감시는 필수적인 것으로서, 좌우 양측부도 감시 영역에 포함시키게 된다. 차량 전부에 운전석이 있는 경우, 오퍼레이터에게 있어서 전방 시야가 얻어지기 때문에, 반드시 차량의 전방을 시야로 하는 카메라를 설치할 필요는 없다. 다만, 차량 후부에 운전석이 있는 경우에는, 전방 카메라가 있는 편이 바람직한 경우도 있다.
모니터로의 표시 태양으로서는, 작업 기계의 차량을 평면 상태에서 영상화하여, 모니터의 화면 중앙에 위치시키고, 후방 및 좌우의 양측, 또한 필요에 따라 전방의 화상을 차량 화상의 주위에 합성하여 표시한다. 여기서, 차량 화상으로서는, 차량 그 자체를 실사(實寫)한 화상이더라도 되지만, 차량을 심벌화한 캐릭터 화상으로 하는 편이, 보기 쉽다는 점에서 바람직하다. 차량 전부와 차량 후부는, 서로 좌우로 굴곡하는 것이기 때문에, 어느 한 쪽을 고정측 캐릭터상으로 하고, 다른 쪽을 이 고정측 캐릭터상에 대해 굴곡하는 가동측 캐릭터상으로 한다. 어느 쪽을 고정측 캐릭터상으로 하는지에 대해서는, 주위 감시의 관점에서 결정된다. 일반적으로는, 운전석이 설치되어 있는 측을 고정측 캐릭터상으로 하는 것이 바람직하다. 특히 차량 후부에 운전석이 위치하고 있는 경우에는, 차량 후부를 고정측 캐릭터상으로 하고, 차량 전부를 가동측 캐릭터상으로 하는 것이 바람직하다. 또, 차량 전부에 운전석이 있는 경우에는, 원칙적으로 차량 전부를 고정측 캐릭터상으로 하는 것이 바람직하지만, 예를 들면 아티큘레이트 덤프 트럭의 경우에 있어서는, 차량을 후진시킬 때에는, 오히려 차량 후부를 고정측 캐릭터상으로 하는 것이 바람직한 경우도 있다. 따라서, 운전 작동 모드를 검출하여, 전진 시에는 차량 전부를 고정측 캐릭터상으로서 표시하고, 후진 시에는 차량 후부를 고정측 캐릭터상으로 할 수도 있다.
모니터에 표시되어 있는 차량 화상에는, 사람이나 구축물 등의 인적 물적 장해가 위치하고 있으면 위험한 영역을 설정하여, 오퍼레이터에게 주의를 촉구하도록 하면, 주위 감시를 위해 유리하다. 이를 위해, 차량 차체상(像)의 주위에 주의 범위 가이드 라인을 합쳐서 표시할 수 있다. 이 경우, 차량 전부와 차량 후부가 굴곡하기 때문에, 이 주의 범위 가이드 라인도 가동측 캐릭터상의 굴곡 각도에 따라 변화시키도록 한다.
차량 전부와 차량 후부가 굴곡 가능하게 되어 있으므로, 그 사이가 최대 굴곡 각도가 되었을 때여도, 모니터에 표시되어 있는 합성 부감 화상에 결락부가 생기지 않도록 해야 한다. 이를 위해서는, 복수 설치되어 있는 각 카메라의 시야 범위는, 적어도 서로 이웃하는 2개의 카메라의 시야가 일부 중첩되도록 설정한다. 그리고, 카메라의 시야가 중첩된 부위는 어느 한 쪽의 화상이 표시되고, 다른 쪽의 화상 중, 중첩되는 부위의 화상은 표시되지 않도록 설정한다.
차량의 전부와 후부의 사이가 굴곡 가능한 아티큘레이트 작업 기계에 있어서, 각 장소에 설치한 카메라의 화상으로부터 부감 화상을 생성하여, 모니터에 표시함에 있어서, 굴곡하는 관계에 있는 차량 전부와 차량 후부를, 실제의 굴곡 자세를 차체상 표시하고, 이 차체상 표시에 각 카메라에 의거하는 부감 화상을 카메라의 위치에 따르도록 합성한 합성 부감 화상을 합성하여 표시함으로써, 오퍼레이터에게 있어서 작업 기계의 주위를 감시하는데에 최적인 감시 화상을 모니터에 표시할 수 있다.
도 1은 아티큘레이트 작업 기계의 일례로서의 아티큘레이트 휠 로더의 정면도이다.
도 2는 도 1의 평면도이다.
도 3은 카메라 화상으로부터 부감 화상으로의 변환을 위한 원리를 나타내는 설명도이다.
도 4는 카메라 화상과 이 카메라 화상으로부터 변환한 부감 화상을 나타내는 설명도이다.
도 5는 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 6은 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 휠 로더의 평면도이다.
도 7은 도 6의 굴곡 상태로 한 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 8은 굴곡 상태로 한 아티큘레이트 휠 로더에 설정되는 좌표계를 나타내는 설명도이다.
도 9는 비굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 10은 굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 11은 모니터에 차량 화상과 합성 부감 화상을 표시하기 위한 제어 장치의 구성을 나타내는 블록도이다.
도 12는 아티큘레이트 작업 기계의 다른 일례로서의 아티큘레이트 덤프 트럭의 정면도이다.
도 13은 도 12의 평면도이다.
도 14는 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 덤프 트럭의 평면도이다.
도 15는 도 14의 굴곡 상태로서, 아티큘레이트 덤프 트럭의 후진 시에 있어서의 모니터의 표시를 나타내는 설명도이다.
도 2는 도 1의 평면도이다.
도 3은 카메라 화상으로부터 부감 화상으로의 변환을 위한 원리를 나타내는 설명도이다.
도 4는 카메라 화상과 이 카메라 화상으로부터 변환한 부감 화상을 나타내는 설명도이다.
도 5는 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 6은 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 휠 로더의 평면도이다.
도 7은 도 6의 굴곡 상태로 한 아티큘레이트 휠 로더의 모니터에 표시되는 화상을 나타내는 설명도이다.
도 8은 굴곡 상태로 한 아티큘레이트 휠 로더에 설정되는 좌표계를 나타내는 설명도이다.
도 9는 비굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 10은 굴곡 상태로 한 아티큘레이트 휠 로더의 각 개별 부감 화상을 합성하기 전의 시야 범위를 나타내는 설명도이다.
도 11은 모니터에 차량 화상과 합성 부감 화상을 표시하기 위한 제어 장치의 구성을 나타내는 블록도이다.
도 12는 아티큘레이트 작업 기계의 다른 일례로서의 아티큘레이트 덤프 트럭의 정면도이다.
도 13은 도 12의 평면도이다.
도 14는 차량 전부와 차량 후부를 굴곡시킨 상태를 나타내는 아티큘레이트 덤프 트럭의 평면도이다.
도 15는 도 14의 굴곡 상태로서, 아티큘레이트 덤프 트럭의 후진 시에 있어서의 모니터의 표시를 나타내는 설명도이다.
이하에, 도면에 의거하여 본 발명의 실시형태에 대해 설명한다. 먼저, 도 1 내지 도 3에 아티큘레이트 작업 기계의 일례로서의 아티큘레이트 휠 로더의 구성을 나타낸다.
도 1 및 도 2에 있어서, 1은 차량 전부, 2는 차량 후부로서, 차량 전부(1)는 차륜(1a)을 가지고, 그 전부에 작업 수단으로서의 로더 버킷(3)이 장착되어 있으며, 이 로더 버킷(3)은 아암(arm)(4)의 선단에 연결 핀(5)를 개재하여 연결되어 있고, 버킷 실린더(6)에 의해 연결 핀(5)를 중심으로 하여 상하 방향으로 회전 운동 가능하게 되어 있다. 또, 아암(4)에는 아암 실린더(7)가 연결되어 있고, 이 아암 실린더(7)를 작동시키면, 로더 버킷(3)이 상하 이동하게 된다. 차량 후부(2)는 차륜(2a)을 가지는 것이고, 이 차량 후부(2)에는 내부에 운전석과 각종의 조작 수단을 설치한 운전실(8)이 설치되어 있으며, 운전실(8)의 후부 위치에는 엔진이나 유압 펌프 등의 기계류가 수납되어 있는 구조물(9)이 설치되어 있다.
이들 차량 전부(1)와 차량 후부(2)의 사이는 연결 축(10)에 의해 연결되어 있고, 이 연결 축(10)을 중심으로 하여, 차량 전부(1)와 차량 후부(2)는 수평 방향으로 상대 회전 운동 가능하게 되어 있다. 그리고, 운전실(8) 내에는 조작 수단으로서의 스티어링 휠(steering wheel)(도시 생략)이 설치되어 있고, 이 스티어링 휠을 조작함으로써, 또한 그 조작량에 따라, 연결 축(10)을 중심으로 하여 차량 전부(1)와 차량 후부(2)의 사이가 굴곡하게 된다.
아티큘레이트 휠 로더에는, 주위를 감시하기 위해, 복수의 카메라가 설치되어 있다. 도 2에 복수의 카메라의 배치 레이아웃의 일례를 나타낸다. 도시한 것에 있어서는, 차량 전부(1)의 후방의 위치로서, 좌우 양측부에 전부 좌측 카메라(11a)와 전부 우측 카메라(11b)가 설치되어 있다. 또 차량 후부(2)에는, 후방 카메라(11c)와, 후부 좌측 카메라(11d) 및 후부 우측 카메라(11e)가 설치되어 있다. 이들 각 카메라(11a∼11e)는, 각각 차체에 장착되어 있고, 그 시야 방향은 비스듬히 하방으로 되어 있다. 그리고, 카메라(11a∼11e)에 의해 촬영한 카메라 화상으로부터, 각 카메라(11a∼11e)의 화각(angle of view) 범위의 부감 화상으로 변환되게 된다.
즉, 도 3에 나타낸 바와 같이, 소정의 높이 위치에 카메라(11)를 배치하여, 각도 α를 가지고 비스듬히 하방으로 대물 렌즈의 광축 CA를 향한 상태에서 촬영하면, 카메라 화상 P가 얻어진다. 이 각도 θ를 가진 카메라 화상 P로부터, 동(同) 도면에 가상 선으로 나타낸 바와 같이, 가상 시점 VF로부터 카메라 화상 P에 대해 광축 VA가 수직으로 되도록 좌표 변환한 화상을 작성한다. 이것에 의해, 각도 α를 가진 비스듬히 상방으로부터의 카메라 화상을 부감 화상으로 변환할 수 있다. 예를 들면, 도 4의 (a)에 나타낸 카메라 화상(변형 보정 등의 화상 보정을 행한 후의 화상)을 좌표 변환하면, 도 4의 (b)에 나타낸 바와 같은 부감 화상이 얻어지게 된다.
이와 같이 하여 변환된 부감 화상은, 아티큘레이트 휠 로더의 차체상 화상과 함께, 운전실(8) 내에 설치한 모니터(12)에 표시된다. 이 모니터(12)의 표시의 일 태양을 도 5에 나타낸다. 도면 중에 있어서, 1C는 차량 전부(1)의 차체상을 캐릭터화한 전부의 캐릭터상이고, 2C는 차량 후부(2)의 차체상을 캐릭터화한 후부의 캐릭터상이며, 이들에 의해서 차량 화상 VC가 구성된다. 그리고 11A∼11E는, 각각 카메라(11a∼11e)에서 취득한 카메라 화상을 좌표 변환하여 얻어진 개별 부감 화상이며, 이들을 합성한 합성 부감 화상으로서, 차량 화상과 함께 모니터(12)에 표시된다. 또한, 도면 중에 있어서 L은 차량 화상 VC의 주위에 설정되는 주의 범위 가이드 라인이며, 이 주의 범위 가이드 라인 L은, 내부에 사람이나 구축물 등으로 이루어지는 인적 물적 장해가 위치하고 있으면, 위험하다고 하여 설정된 영역의 경계부이다.
그런데, 아티큘레이트 휠 로더에 있어서는, 차량 전부(1)와 차량 후부(2)의 사이는 연결 축(10)으로 연결되어 있고(도 1 참조), 도 6에 나타낸 바와 같이, 차량 전부(1)와 차량 후부(2)의 사이가 연결 축(10)을 중심으로 하여 좌우로 굴곡 가능하게 되어 있다. 따라서, 차량의 주행 시나 작업 시에 있어서, 아티큘레이트 휠 로더가 굴곡 자세를 취하고 있으면, 모니터(12)의 차량 화상 표시도 이것에 맞추어, 도 7에 나타낸 굴곡 상태로 한다.
여기서, 아티큘레이트 휠 로더에 있어서는, 운전실(8)은 차량 후부(2) 측에 위치하고 있으므로, 모니터(12) 상에서는, 차량 후부(2)를 소정 위치에 고정한 고정측 캐릭터상(2C)으로 하고, 차량 전부(1)를 이 고정측 캐릭터상(2C)에 대해 굴곡하는 가동측 캐릭터상(1C)으로서 표시된다. 그리고, 개별 부감 화상(11A∼11E) 중, 차량 후부(2)에 장착한 카메라(11c, 11d, 11e)에 의거하는 개별 부감 화상(11C∼11E)이 고정적으로 표시되고, 차량 전부(1)에 장착한 카메라(11a, 11b)에 의거하는 개별 부감 화상(11A, 11B)을 굴곡 각도에 따라 변화시키도록 하여 표시한다.
이를 위해서는, 도 8에 나타낸 바와 같이, 차량 후부(2)와 차량 전부(1) 사이의 연결 축(10)을 중심으로 한 좌표계 Σ로 하고, 또 차량 전부(1) 및 차량 후부(2)의 좌표계도 Σf, Σg로 하여 각각 모니터의 화면 상에 설정한다. 여기서, 차량 후부(2)는 고정측 캐릭터상(2C)으로서 표시되므로, 차량 후부(2)의 좌표축 Σg는 고정된다. 각도 θ분만큼 스티어링 조작이 행해지면, 차량 전부(1)와 차량 후부(2) 사이의 각도가 변화한다. 즉, 좌표계 Σ과 좌표계 Σf가 스티어링 각도 θ만큼 회전하게 된다. 따라서, 모니터(12)에 차량 화상 VC를 표시함에 있어서, 이들 차량 전부(1)와 차량 후부(2)를 표시할 때의 치수와, 스티어링 각도 θ에 의거하여, 도 7에 나타내어져 있는 굴곡 상태의 차량 화상 VC가 생성되어, 합성 부감 화상과 함께 모니터(12)에 표시된다.
카메라(11a∼11e)를 탑재한 차량 전부(1)와 차량 후부(2)로 이루어지는 아티큘레이트 휠 로더가 모니터(12)에 표시될 때에는, 각 개별 부감 화상(11A∼11E)이 반드시 부분적으로 중첩하도록, 카메라(11a∼11e)의 위치와 화각이 설정되어 있다. 이것은, 도 9에 나타낸 비굴곡 상태이더라도, 또 도 10에 나타낸 굴곡 상태로 했을 때의 최대 굴곡 상태이더라도, 동일하게 한다. 따라서, 도 9 및 도 10에는, 이들 각 개별 부감 화상(11A∼11E)의 실제의 시야 범위가 FA∼FE로 된다. 그리고, 합성 부감 화상을 작성하기 위해서는, 화상 신호의 처리에 있어서, 개별 부감 화상의 중첩하는 부위에 대해서는, 어느 한 쪽의 화상을 우선하고, 다른 쪽의 화상은 부분적으로 비표시 상태로 한다.
차량 후부(2)는 모니터(12) 상에서는 고정측 캐릭터상(2C)이 되고, 차량 전부(1)에서는 가동측 캐릭터상(1C)이 되어 있다. 따라서, 본 실시형태에서는, 모니터(12) 상에서의 표시 에어리어는, 고정측 캐릭터상(2C) 측인 개별 부감 화상(11C∼11E)의 각 표시 에어리어는 고정적인 것으로 이루고, 가동측 캐릭터상(1C)의 개별 부감 화상(11A, 11B)의 각 표시 에어리어는 변화하도록 설정하고 있다. 이를 위해, 도 9의 비굴곡 상태로부터 도 10의 굴곡 상태를 향해 스티어링을 행하였다고 하면, 합성 부감 화상으로서는, 도 5에 나타낸 상태로부터, 도 7에 나타낸 바와 같이, 좌측의 개별 부감 화상(11A)의 표시 에어리어는 감소하고, 우측의 개별 부감 화상(11B)은 표시 에어리어가 증대하게 된다. 그 결과, 굴곡의 여하를 불문하고, 아티큘레이트 휠 로더의 주위는, 오퍼레이터가 시인 가능한 전방 시야를 제외한 전체에 감시 화상이 표시된다.
이상과 같이, 모니터(12)에 차량 화상 VC와 합성 부감 화상을 합성하도록 하여 표시시키기 위해, 도 11에 나타낸 회로 구성의 제어 장치(20)가 설치된다. 이 제어 장치(20)에는, 카메라(11a∼11e)에서 취득한 카메라 화상 신호가 받아들여지도록 되어 있고, 이들 카메라 화상 신호는, 화상 보정 수단(21)에 의해 변형 보정 등이 필요한 화상 보정을 행하도록 되어 있다. 그리고, 화상 보정 수단(21)에는 화상 변환 수단(22)이 접속되어 있고, 각 카메라 화상 신호는, 이 화상 변환 수단(22)에 의해서, 광축이 수직으로 되도록 좌표 변환한 부감 화상 신호로 변환된다.
이와 같이 하여 개별 부감 화상(11A∼11E)이 생성되지만, 이들 개별 부감 화상(11A∼11E)은, 화상 합성 수단(23)에 의해서, 각각의 표시 에어리어에 표시되도록 신호 처리가 행하여진다. 아티큘레이트 휠 로더는 차량 전부(1)와 차량 후부(2)는 굴곡 가능한 것이기 때문에, 각 카메라(11a∼11e)의 위치와 아티큘레이트 휠 로더의 자세 상태에 의거하여, 각 개별 부감 화상(11A∼11E)의 표시 에어리어가 할당된다. 이를 위해, 제어 장치(20)에는 카메라 위치 산출 수단(24)이 설치되어 있다. 또 제어 장치(20)에는, 아티큘레이트 휠 로더의 차체 정보 전달 수단(25)을 개재하여 스티어링 각도 θ에 관한 정보가 입력되어, 이 카메라 위치 산출 수단(24)에 이 정보가 받아들여지고, 또 카메라 위치 기억 수단(26)으로부터의 비굴곡 상태 시에 있어서의 각 카메라(11a∼11e)의 위치에 관한 정보가 얻어지도록 되어 있으며, 이들 각 카메라(11a∼11e)의 원점 위치와 차량 전부(1)와 차량 후부(2) 사이의 굴곡 각도에 의거하여, 모니터(12)에 표시할 때에 있어서, 각 개별 부감 화상(11A∼11E)에 할당되는 표시 에어리어가 결정되게 되고, 이것에 의해 합성 부감 화상이 생성되게 된다.
또, 모니터(12) 상에 있어서, 차량 전부(1)의 전부 캐릭터 화상(1C)과 차량 후부(2)의 후부 캐릭터 화상(2C)의 상대 위치 관계는, 굴곡 변화하기 때문에, 차량 화상 VC를 모니터(12)에 표시할 때에는, 차체 정보 전달 수단(25)으로부터의 스티어링 각도에 관한 정보에 의거하여 얻어진 차량 전부(1)와 차량 후부(2)의 굴곡 각도가 차량 화상 생성 수단(27)에 받아들여져서, 차량 화상 VC가 생성된다. 그리고, 상술한 합성 부감 화상과 차량 화상 VC가 표시 화상 생성 수단(28)에 입력되고, 이 표시 화상 생성 수단(28)으로부터 송신되는 화상 신호에 의거하여 모니터(12)에 주변 감시 화상이 표시되게 된다.
이상과 같이, 아티큘레이트 휠 로더에 있어서, 차량 후부(2)의 운전실(8) 내에서 오퍼레이터가 기계의 조작을 행할 때, 특히 주행 시에 모니터(12)를 시인(視認)함으로써, 주위에 사람이나 장해물 등과 같은 인적 물적 장해가 존재하는지의 여부를 확인할 수 있다. 차량 화상 VC의 주위에 합성 부감 화상이 나타내어지고, 또한 이 합성 부감 화상에 주의 범위 가이드 라인 L이 표시되어 있기 때문에, 모니터(12)의 시인에 의해 인적 물적 장해의 방향이나, 인적 물적 장해까지의 거리를 정확하게 파악할 수 있게 되어, 작업의 안전 확보나 작업의 효율 향상 등이 도모된다.
여기서, 휠 로더는 아티큘레이트의 것이고, 차량 전부(1)와 차량 후부(2)는 굴곡 가능하게 연결되어 있기 때문에, 모니터(12)에 있어서의 표시도 이 굴곡 상태를 반영시킬 필요가 있다. 오퍼레이터는 차량 후부(2)의 운전실(8) 내에 위치하고 있고, 작업 기구는 차량 전부(1)에 구비하고 있기 때문에, 차량 전부(1) 및 작업 기구를 구성하는 로더 버킷(3)은 운전실(8)의 내부에서 육안으로 볼 수 있으므로, 모니터(12)를 각별히 보지 않아도, 차량의 전진 및 작업 기구를 구동함으로써 실행되는 작업에 대해서는, 안전하고 효율적으로 행할 수 있다.
한편, 아티큘레이트 휠 로더를 굴곡 조작할 때나, 후진시킬 때에는, 또한 작업자 등이 차량에 접근하는 방향으로 이동하고 있거나 하면, 후방 및 측방의 안전 확인을 행할 필요가 있다. 이 때에는, 오퍼레이터가 조작을 행하고 있는 운전실(8)이 설치되어 있는 차량 후부(2)를 고정측 캐릭터상(2C)으로 하고 있으므로, 차량의 후진 시에 있어서의 후방의 안전 확인 및 굴곡 조작 시에 있어서의 주위의 안전 확인을 원활하게 행할 수 있고, 오퍼레이터가 상황을 정확하게 파악할 수 있어, 모니터(12)를 눈으로 보는 데에 있어서 위화감이 생기는 바와 같은 경우는 없다.
다음으로, 아티큘레이트 작업 기계의 다른 예로서, 아티큘레이트 덤프 트럭의 정면도를 도 12에, 또 평면도를 도 13에 나타낸다. 또한, 도 14는 굴곡 상태의 평면도이다.
이들 도면으로부터 명백한 바와 같이, 차량 전부(30)는 운전실(31)을 포함하는 것이고, 차량 후부(32)에는 짐받이(33)가 설치되어 있다. 이 짐받이(33)는 유압 실린더(34)에 의해 후방을 향해 경동(傾動) 가능하게 되어 있다. 차량 전부(30)에는 1세트의 차륜(35)이 설치되고, 차량 후부(32)에는 2세트의 차륜(36)이 설치되어 있다. 차량 전부(30)와, 차량 후부(32)를 구성하는 프레임(37)의 사이는 연결 축(38)에 의해 연결되어 있고, 도 13에 나타낸 비굴곡 상태와, 도 14에 나타낸 굴곡 상태로 변위 가능하게 되어 있다.
차량 전부(30)의 연결 축(38)에 의한 차량 후부(32)로의 연결부의 근방 위치에 있어서의 좌우 양측부에는, 카메라(39a, 39b)가 부착되어 있다. 또, 차량 후부(32)에 대해서는, 프레임(37)의 후부 위치와, 전후의 차륜(36, 36) 사이의 좌우 양측 위치에, 각각 카메라(39c, 39d, 39e)가 설치되어 있다. 그리고, 이들 각 카메라(39a∼39e)에 의해 촬영한 카메라 화상은, 상술한 제 1 실시형태와 동일하게, 상방 시점이 되도록 좌표 변환하여, 개별 부감 화상(39A∼39E)으로 변환된다. 그리고, 이들 개별 부감 화상(39A∼39E)을 합성한 합성 부감 화상이, 도 15에 나타낸 바와 같이, 아티큘레이트 덤프 트럭의 차체상 화상과 함께 모니터(40)에 표시되게 된다. 또한 도 15에는, 아티큘레이트 덤프 트럭의 굴곡 상태가 나타내어져 있다.
모니터(40)에 있어서는, 서로 굴곡하는 차량 전부(30)와 차량 후부(32) 중 어느 쪽을 고정측 캐릭터상으로 하고, 어느 쪽을 가동측 캐릭터상으로 하는지에 대해서는, 운전실(31)을 기준으로 하는 경우에는, 차량 전부(30)를 고정측 캐릭터상으로 하고, 차량 후부(32)를 가동측 캐릭터상으로 한다. 다만, 차량 후부(32)는 차량 전부(30)보다 긴 것이고, 또한 운전실(31)로부터는 후방 시야는 실질적으로 얻어지지 않기 때문에, 후진 시에는 차량 후부(32)를 고정측 캐릭터상으로서 모니터(40)에 표시하도록 구성할 수도 있다. 도 15에 있어서는, 차량 후부(32)를 고정측 캐릭터상(32C), 차량 전부(30)를 가동측 캐릭터상(30C)으로서 나타내고 있다.
아티큘레이트 덤프 트럭이 후진할 때에는, 굴곡 상태이든, 비굴곡 상태이든, 차량 후부(32)의 후방 위치를 향해 이동하게 되므로, 이 차량 후부(32)의 후방 위치를 고정적으로 표시함으로써, 후방 시야 내에 있어서, 사람이나 장해물 등과 같은 인적 물적 장해가 존재하는지의 여부의 확인을 정확하게 행할 수 있게 된다. 다만, 아티큘레이트 덤프 트럭의 전진 시에는, 운전실(31)이 설치되어 있는 차량 전부(30)가 고정측 캐릭터상으로서 표시하는 것이 바람직하다. 따라서, 아티큘레이트 덤프 트럭의 전진 시와 후진 시의 사이에서, 즉 운전 작동 모드에 따라, 고정측 캐릭터상을 바꾸도록 해도 된다. 도 11에 나타낸 바와 같이, 차량 화상 생성 수단(27) 및 카메라 위치 산출 수단(24)에는, 차체 정보 전달 수단(25)이 접속되어 있고, 이 차체 정보 전달 수단(25)으로부터는 스티어링 각도에 관한 정보뿐만 아니라, 각종의 정보도 취득할 수 있도록 되어 있으므로, 차량이 전진하고 있는지, 후진하고 있는지에 대한 정보를 차체 정보 전달 수단(25)으로부터 취득하고, 이 신호에 의거하여 모니터(40)의 표시 태양을 변화시킬 수 있다.
1, 30: 차량 전부 2, 32: 차량 후부
3: 로더 버킷 8: 운전실
10, 38: 연결 축 11a∼11e, 39a∼39e: 카메라
12, 40: 모니터 20: 제어 장치
21: 화상 보정 수단 22: 화상 변환 수단
23: 화상 합성 수단 24: 카메라 위치 산출 수단
25: 차체 정보 전달 수단 27: 차량 화상 생성 수단
28: 표시 화상 생성 수단 33: 짐받이
1C, 2C, 30C, 32C: 캐릭터 화상
11A∼11E, 39A∼39E: 개별 부감 화상
3: 로더 버킷 8: 운전실
10, 38: 연결 축 11a∼11e, 39a∼39e: 카메라
12, 40: 모니터 20: 제어 장치
21: 화상 보정 수단 22: 화상 변환 수단
23: 화상 합성 수단 24: 카메라 위치 산출 수단
25: 차체 정보 전달 수단 27: 차량 화상 생성 수단
28: 표시 화상 생성 수단 33: 짐받이
1C, 2C, 30C, 32C: 캐릭터 화상
11A∼11E, 39A∼39E: 개별 부감 화상
Claims (5)
- 차량 전부와 차량 후부를 연결 축에 의해 좌우로 굴곡 가능하게 연결한 아티큘레이트 작업 기계에 설치되는 작업 기계의 주위 감시 장치에 있어서,
상기 차량 전부에 설치한 1 또는 복수의 카메라와,
상기 차량 후부에 설치되어, 차량의 후방 위치를 시야로 하는 카메라를 포함하는 1 또는 복수의 카메라와,
상기 작업 기계의 주위 감시 화상을 표시하기 위한 모니터와,
상기 연결 축을 중심으로 한 상기 차량 전부와 상기 차량 후부 사이의 굴곡 각도에 의거하여, 상기 각 카메라의 위치를 산출하는 카메라 위치 산출부와,
상기 각 카메라에서 취득한 카메라 화상을 상방 시점이 되도록 시점 변환하여, 각각 부감 화상으로 하는 화상 변환 수단과,
상기 각 카메라에 의해 촬영한 각 개별 부감 화상을, 상기 카메라 위치 산출부에 의해 산출된 각각의 위치 관계가 되도록 합성한 합성 부감 화상을 생성하여, 상기 모니터에 이 합성 부감 화상을 표시하기 위한 화상 합성 수단과,
상기 합성 부감 화상을, 상기 차량 전부 또는 상기 차량 후부 중 어느 한 쪽을 고정한 고정측 캐릭터상으로 하고, 다른 쪽을 상기 굴곡 각도에 의거하여 상기 고정측 캐릭터상에 대해 상대 회전 운동하는 가동측 캐릭터상으로 한 차량 화상과 함께 상기 모니터에 표시하는 표시 화상 생성 수단
을 구비한 것을 특징으로 하는 작업 기계의 주위 감시 장치. - 제 1 항에 있어서,
상기 차량 전부와 상기 차량 후부 중, 상기 운전석이 설치되어 있는 쪽을 상기 고정측 캐릭터상으로서 상기 모니터 화면에 표시시키는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치. - 제 1 항에 있어서,
상기 작업 기계는 상기 운전석이 상기 차량 전부에 설치되며, 이 작업 기계의 전진 시에는, 상기 고정측 캐릭터상은 상기 차량 전부로 하고, 상기 작업 기계의 후진 시에는, 상기 고정측 캐릭터상은 상기 차량 후부로 하도록, 운전 작동 모드에 의해 표시를 변화시키도록 한 것을 특징으로 하는 작업 기계의 주위 감시 장치. - 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
상기 모니터에는, 차량 화상의 주위에 주의 범위 가이드 라인을 표시하도록 하고, 상기 굴곡 각도가 변화되었을 때에, 이 주의 범위 가이드 라인을 굴곡 각도에 상응하는 각도분만큼 변화시키는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치. - 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
상기 차량 전부 및 상기 차량 후부에 설치한 각 카메라는, 각각의 시야가 상기 굴곡 각도의 전체 범위에 걸쳐 적어도 2개의 카메라의 시야가 부분적으로 중첩되는 위치에 배치하는 구성으로 한 것을 특징으로 하는 작업 기계의 주위 감시 장치.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPJP-P-2011-107815 | 2011-05-13 | ||
JP2011107815 | 2011-05-13 | ||
PCT/JP2012/060104 WO2012157379A1 (ja) | 2011-05-13 | 2012-04-13 | 作業機械の周囲監視装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20140043374A true KR20140043374A (ko) | 2014-04-09 |
Family
ID=47176719
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020137032343A KR20140043374A (ko) | 2011-05-13 | 2012-04-13 | 작업 기계의 주위 감시 장치 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20140088824A1 (ko) |
EP (1) | EP2712969A4 (ko) |
JP (1) | JP5779244B2 (ko) |
KR (1) | KR20140043374A (ko) |
CN (1) | CN103547747A (ko) |
AU (1) | AU2012257053A1 (ko) |
WO (1) | WO2012157379A1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170113001A (ko) * | 2016-03-28 | 2017-10-12 | 가부시키가이샤 고마쓰 세이사쿠쇼 | 평가 장치 및 평가 방법 |
KR20210151297A (ko) * | 2020-06-04 | 2021-12-14 | (주)에이치브레인 | Fpga 기반 뉴로머신과 svm을 이용한 굴삭기 안전시스템 |
Families Citing this family (89)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2447672B (en) | 2007-03-21 | 2011-12-14 | Ford Global Tech Llc | Vehicle manoeuvring aids |
EP2570556B1 (en) * | 2010-06-18 | 2021-04-28 | Hitachi Construction Machinery Co., Ltd. | Device for monitoring area around work machine |
US9506774B2 (en) | 2011-04-19 | 2016-11-29 | Ford Global Technologies, Llc | Method of inputting a path for a vehicle and trailer |
US9969428B2 (en) | 2011-04-19 | 2018-05-15 | Ford Global Technologies, Llc | Trailer backup assist system with waypoint selection |
US9723274B2 (en) | 2011-04-19 | 2017-08-01 | Ford Global Technologies, Llc | System and method for adjusting an image capture setting |
US9500497B2 (en) | 2011-04-19 | 2016-11-22 | Ford Global Technologies, Llc | System and method of inputting an intended backing path |
US9513103B2 (en) | 2011-04-19 | 2016-12-06 | Ford Global Technologies, Llc | Hitch angle sensor assembly |
US9926008B2 (en) | 2011-04-19 | 2018-03-27 | Ford Global Technologies, Llc | Trailer backup assist system with waypoint selection |
US9374562B2 (en) | 2011-04-19 | 2016-06-21 | Ford Global Technologies, Llc | System and method for calculating a horizontal camera to target distance |
US9683848B2 (en) | 2011-04-19 | 2017-06-20 | Ford Global Technologies, Llc | System for determining hitch angle |
US9854209B2 (en) * | 2011-04-19 | 2017-12-26 | Ford Global Technologies, Llc | Display system utilizing vehicle and trailer dynamics |
US10196088B2 (en) | 2011-04-19 | 2019-02-05 | Ford Global Technologies, Llc | Target monitoring system and method |
US9434414B2 (en) | 2011-04-19 | 2016-09-06 | Ford Global Technologies, Llc | System and method for determining a hitch angle offset |
US9555832B2 (en) | 2011-04-19 | 2017-01-31 | Ford Global Technologies, Llc | Display system utilizing vehicle and trailer dynamics |
US9373044B2 (en) | 2011-07-25 | 2016-06-21 | Ford Global Technologies, Llc | Trailer lane departure warning system |
US8768583B2 (en) * | 2012-03-29 | 2014-07-01 | Harnischfeger Technologies, Inc. | Collision detection and mitigation systems and methods for a shovel |
US9592851B2 (en) | 2013-02-04 | 2017-03-14 | Ford Global Technologies, Llc | Control modes for a trailer backup assist system |
US9511799B2 (en) | 2013-02-04 | 2016-12-06 | Ford Global Technologies, Llc | Object avoidance for a trailer backup assist system |
JP6095592B2 (ja) * | 2014-02-17 | 2017-03-15 | 日立建機株式会社 | 油圧ショベルの監視画像表示装置 |
US9517668B2 (en) | 2014-07-28 | 2016-12-13 | Ford Global Technologies, Llc | Hitch angle warning system and method |
US9963004B2 (en) | 2014-07-28 | 2018-05-08 | Ford Global Technologies, Llc | Trailer sway warning system and method |
US9437055B2 (en) * | 2014-08-13 | 2016-09-06 | Bendix Commercial Vehicle Systems Llc | Cabin and trailer body movement determination with camera at the back of the cabin |
US10161746B2 (en) | 2014-08-18 | 2018-12-25 | Trimble Navigation Limited | Systems and methods for cargo management |
WO2016028816A1 (en) | 2014-08-18 | 2016-02-25 | Trimble Navigation Limited | System and method for modifying onboard event detection and/or image capture strategy using external source data |
US9714037B2 (en) | 2014-08-18 | 2017-07-25 | Trimble Navigation Limited | Detection of driver behaviors using in-vehicle systems and methods |
EP3020868B1 (en) * | 2014-11-14 | 2020-11-04 | Caterpillar Inc. | Machine of a kind comprising a body and an implement movable relative to the body with a system for assisting a user of the machine |
US9522677B2 (en) | 2014-12-05 | 2016-12-20 | Ford Global Technologies, Llc | Mitigation of input device failure and mode management |
US9533683B2 (en) | 2014-12-05 | 2017-01-03 | Ford Global Technologies, Llc | Sensor failure mitigation system and mode management |
US9607242B2 (en) | 2015-01-16 | 2017-03-28 | Ford Global Technologies, Llc | Target monitoring system with lens cleaning device |
US9667875B2 (en) | 2015-01-21 | 2017-05-30 | Caterpillar Inc. | Vision system and method of monitoring surroundings of machine |
US9522699B2 (en) | 2015-02-05 | 2016-12-20 | Ford Global Technologies, Llc | Trailer backup assist system with adaptive steering angle limits |
US9616923B2 (en) | 2015-03-03 | 2017-04-11 | Ford Global Technologies, Llc | Topographical integration for trailer backup assist system |
DE102015002692A1 (de) * | 2015-03-04 | 2016-09-08 | Dynapac Gmbh | Straßenbaumaschine und Verfahren zum Betreiben einer selbstfahrenden Straßenbaumaschine |
US9804022B2 (en) | 2015-03-24 | 2017-10-31 | Ford Global Technologies, Llc | System and method for hitch angle detection |
WO2016174754A1 (ja) | 2015-04-28 | 2016-11-03 | 株式会社小松製作所 | 作業機械の周辺監視装置及び作業機械の周辺監視方法 |
US10204159B2 (en) | 2015-08-21 | 2019-02-12 | Trimble Navigation Limited | On-demand system and method for retrieving video from a commercial vehicle |
JP6734916B2 (ja) * | 2015-09-02 | 2020-08-05 | ボルボトラックコーポレーション | 連結式の車両結合体を後退させる装置及び方法 |
US9896130B2 (en) | 2015-09-11 | 2018-02-20 | Ford Global Technologies, Llc | Guidance system for a vehicle reversing a trailer along an intended backing path |
US10384607B2 (en) | 2015-10-19 | 2019-08-20 | Ford Global Technologies, Llc | Trailer backup assist system with hitch angle offset estimation |
US10611407B2 (en) | 2015-10-19 | 2020-04-07 | Ford Global Technologies, Llc | Speed control for motor vehicles |
JP2017081238A (ja) * | 2015-10-23 | 2017-05-18 | 株式会社小松製作所 | 表示システムおよび作業車両 |
US9836060B2 (en) | 2015-10-28 | 2017-12-05 | Ford Global Technologies, Llc | Trailer backup assist system with target management |
US10017115B2 (en) | 2015-11-11 | 2018-07-10 | Ford Global Technologies, Llc | Trailer monitoring system and method |
US9796228B2 (en) | 2015-12-17 | 2017-10-24 | Ford Global Technologies, Llc | Hitch angle detection for trailer backup assist system |
US10155478B2 (en) | 2015-12-17 | 2018-12-18 | Ford Global Technologies, Llc | Centerline method for trailer hitch angle detection |
US9798953B2 (en) | 2015-12-17 | 2017-10-24 | Ford Global Technologies, Llc | Template matching solution for locating trailer hitch point |
US9610975B1 (en) | 2015-12-17 | 2017-04-04 | Ford Global Technologies, Llc | Hitch angle detection for trailer backup assist system |
US9934572B2 (en) | 2015-12-17 | 2018-04-03 | Ford Global Technologies, Llc | Drawbar scan solution for locating trailer hitch point |
US9827818B2 (en) | 2015-12-17 | 2017-11-28 | Ford Global Technologies, Llc | Multi-stage solution for trailer hitch angle initialization |
US10011228B2 (en) | 2015-12-17 | 2018-07-03 | Ford Global Technologies, Llc | Hitch angle detection for trailer backup assist system using multiple imaging devices |
WO2017122294A1 (ja) * | 2016-01-13 | 2017-07-20 | 株式会社ソシオネクスト | 周囲監視装置、画像処理方法、及び画像処理プログラム |
US10005492B2 (en) | 2016-02-18 | 2018-06-26 | Ford Global Technologies, Llc | Trailer length and hitch angle bias estimation |
WO2017077723A1 (ja) | 2016-03-29 | 2017-05-11 | 株式会社小松製作所 | 作業車両 |
US10112646B2 (en) | 2016-05-05 | 2018-10-30 | Ford Global Technologies, Llc | Turn recovery human machine interface for trailer backup assist |
US10106193B2 (en) | 2016-07-01 | 2018-10-23 | Ford Global Technologies, Llc | Enhanced yaw rate trailer angle detection initialization |
US10046800B2 (en) | 2016-08-10 | 2018-08-14 | Ford Global Technologies, Llc | Trailer wheel targetless trailer angle detection |
JP6886258B2 (ja) * | 2016-08-31 | 2021-06-16 | 株式会社小松製作所 | ホイールローダおよびホイールローダの制御方法 |
JP2018050119A (ja) * | 2016-09-20 | 2018-03-29 | 国立大学法人 東京大学 | 作業車両の表示システム |
US10222804B2 (en) | 2016-10-21 | 2019-03-05 | Ford Global Technologies, Llc | Inertial reference for TBA speed limiting |
US10594934B2 (en) * | 2016-11-17 | 2020-03-17 | Bendix Commercial Vehicle Systems Llc | Vehicle display |
DE102016223389A1 (de) * | 2016-11-25 | 2018-05-30 | Conti Temic Microelectronic Gmbh | Bildverarbeitungssystem und bildverarbeitungsverfahren |
WO2018105527A1 (ja) * | 2016-12-06 | 2018-06-14 | 住友建機株式会社 | 建設機械 |
JP6662762B2 (ja) * | 2016-12-19 | 2020-03-11 | 株式会社クボタ | 作業車 |
US20180201132A1 (en) * | 2017-01-13 | 2018-07-19 | Deere & Company | Mobile machine-user protocol system and method |
WO2017131243A1 (ja) | 2017-02-09 | 2017-08-03 | 株式会社小松製作所 | 作業車両の周辺監視システム、作業車両、及び作業車両の周辺監視方法 |
JP6346375B1 (ja) * | 2017-02-09 | 2018-06-20 | 株式会社小松製作所 | 作業車両及び表示装置 |
JP6819462B2 (ja) * | 2017-05-30 | 2021-01-27 | コベルコ建機株式会社 | 作業機械 |
JP6822427B2 (ja) * | 2017-06-09 | 2021-01-27 | 株式会社デンソー | 地図変化点検出装置 |
US10710585B2 (en) | 2017-09-01 | 2020-07-14 | Ford Global Technologies, Llc | Trailer backup assist system with predictive hitch angle functionality |
JP7103796B2 (ja) * | 2018-01-31 | 2022-07-20 | 株式会社小松製作所 | 作業機械 |
US10883256B2 (en) * | 2018-05-25 | 2021-01-05 | Deere & Company | Object responsive control system for a work machine |
JP7220027B2 (ja) * | 2018-06-14 | 2023-02-09 | フォルシアクラリオン・エレクトロニクス株式会社 | 運転支援装置 |
JP7197315B2 (ja) * | 2018-09-14 | 2022-12-27 | 株式会社小松製作所 | ホイールローダの表示システムおよびその制御方法 |
US11077795B2 (en) | 2018-11-26 | 2021-08-03 | Ford Global Technologies, Llc | Trailer angle detection using end-to-end learning |
US11592813B2 (en) * | 2018-12-17 | 2023-02-28 | Robert Bosch Gmbh | Method and controller for the situational transmission of surroundings information of a vehicle |
JP7160701B2 (ja) * | 2019-01-23 | 2022-10-25 | 株式会社小松製作所 | 作業機械のシステム及び方法 |
US10829046B2 (en) | 2019-03-06 | 2020-11-10 | Ford Global Technologies, Llc | Trailer angle detection using end-to-end learning |
JP7280089B2 (ja) * | 2019-03-29 | 2023-05-23 | 日立建機株式会社 | ホイールローダ |
JP2020173524A (ja) * | 2019-04-09 | 2020-10-22 | 清水建設株式会社 | 監視システム |
US10949685B2 (en) | 2019-07-22 | 2021-03-16 | Caterpillar Inc. | Excluding a component of a work machine from a video frame based on motion information |
JP7055158B2 (ja) * | 2020-02-13 | 2022-04-15 | 株式会社クボタ | 作業車 |
JP7437195B2 (ja) | 2020-03-13 | 2024-02-22 | 株式会社小松製作所 | モータグレーダおよび表示制御方法 |
JP7428052B2 (ja) * | 2020-03-31 | 2024-02-06 | コベルコ建機株式会社 | 作業機械の周囲検知装置 |
US11575810B2 (en) * | 2020-09-09 | 2023-02-07 | Deere & Company | Auto-positioning camera for drawn implements |
US11653587B2 (en) * | 2020-09-17 | 2023-05-23 | Deere & Company | System and method for presenting the surroundings of an agricultural implement |
KR20220102804A (ko) * | 2021-01-14 | 2022-07-21 | 현대두산인프라코어(주) | 건설기계의 제어 시스템 및 방법 |
JP2023102618A (ja) * | 2022-01-12 | 2023-07-25 | 株式会社小松製作所 | 作業機械、作業機械を制御するための方法、及びシステム |
JP2023144981A (ja) * | 2022-03-28 | 2023-10-11 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びコンピュータプログラム |
KR20240056273A (ko) * | 2022-10-21 | 2024-04-30 | 에이치디현대인프라코어 주식회사 | 건설기계의 제어 시스템 및 방법 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10035223A1 (de) * | 2000-07-20 | 2002-01-31 | Daimler Chrysler Ag | Vorrichtung und Verfahren zur Überwachung der Umgebung eines Objekts |
JP2003235036A (ja) * | 2002-02-07 | 2003-08-22 | Nissan Motor Co Ltd | 車両用画像表示装置 |
JP4332027B2 (ja) * | 2003-12-25 | 2009-09-16 | キャタピラージャパン株式会社 | 表示器制御システム |
JP2006256544A (ja) * | 2005-03-18 | 2006-09-28 | Aisin Seiki Co Ltd | 後退運転支援装置 |
JP5054294B2 (ja) * | 2005-08-05 | 2012-10-24 | 株式会社小松製作所 | 作業用車両に搭載される表示装置、及び同表示装置の表示方法 |
DE102006037600B4 (de) * | 2006-08-10 | 2010-03-04 | Daimler Ag | Verfahren zur auflösungsabhängigen Darstellung der Umgebung eines Kraftfahrzeugs |
JP4996928B2 (ja) * | 2007-01-05 | 2012-08-08 | 日立建機株式会社 | 作業機械の周囲監視装置 |
JP4847913B2 (ja) * | 2007-03-30 | 2011-12-28 | 日立建機株式会社 | 作業機械周辺監視装置 |
JP2009060499A (ja) * | 2007-09-03 | 2009-03-19 | Sanyo Electric Co Ltd | 運転支援システム及び連結車両 |
JP2009107602A (ja) * | 2007-11-01 | 2009-05-21 | Komatsu Ltd | アーティキュレート式建設機械 |
KR101078341B1 (ko) * | 2009-02-12 | 2011-11-01 | 볼보 컨스트럭션 이큅먼트 에이비 | 후방 감시수단이 구비된 건설장비 |
CN103080990B (zh) * | 2011-06-07 | 2015-04-01 | 株式会社小松制作所 | 作业车辆的周边监视装置 |
JP5124671B2 (ja) * | 2011-06-07 | 2013-01-23 | 株式会社小松製作所 | 作業車両の周辺監視装置 |
JP5124672B2 (ja) * | 2011-06-07 | 2013-01-23 | 株式会社小松製作所 | 作業車両の周辺監視装置 |
JP5781978B2 (ja) * | 2012-05-22 | 2015-09-24 | 株式会社小松製作所 | ダンプトラック |
US9446713B2 (en) * | 2012-09-26 | 2016-09-20 | Magna Electronics Inc. | Trailer angle detection system |
-
2012
- 2012-04-13 WO PCT/JP2012/060104 patent/WO2012157379A1/ja active Application Filing
- 2012-04-13 JP JP2013515049A patent/JP5779244B2/ja not_active Expired - Fee Related
- 2012-04-13 AU AU2012257053A patent/AU2012257053A1/en not_active Abandoned
- 2012-04-13 CN CN201280022215.2A patent/CN103547747A/zh active Pending
- 2012-04-13 KR KR1020137032343A patent/KR20140043374A/ko not_active Application Discontinuation
- 2012-04-13 US US14/116,884 patent/US20140088824A1/en not_active Abandoned
- 2012-04-13 EP EP20120785367 patent/EP2712969A4/en not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170113001A (ko) * | 2016-03-28 | 2017-10-12 | 가부시키가이샤 고마쓰 세이사쿠쇼 | 평가 장치 및 평가 방법 |
KR20210151297A (ko) * | 2020-06-04 | 2021-12-14 | (주)에이치브레인 | Fpga 기반 뉴로머신과 svm을 이용한 굴삭기 안전시스템 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2012157379A1 (ja) | 2014-07-31 |
EP2712969A1 (en) | 2014-04-02 |
CN103547747A (zh) | 2014-01-29 |
WO2012157379A1 (ja) | 2012-11-22 |
AU2012257053A1 (en) | 2013-11-21 |
US20140088824A1 (en) | 2014-03-27 |
JP5779244B2 (ja) | 2015-09-16 |
EP2712969A4 (en) | 2015-04-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20140043374A (ko) | 작업 기계의 주위 감시 장치 | |
JP6427597B2 (ja) | 作業機械の周辺監視装置及び作業機械の周辺監視方法 | |
JP5269026B2 (ja) | 作業機械の周囲監視装置 | |
EP2717570A1 (en) | Device for monitoring area around working machine | |
JP6727971B2 (ja) | 作業車 | |
CN107079089B (zh) | 作业机械的周边监视装置 | |
JP6167042B2 (ja) | 自走式産業機械の周囲監視装置 | |
EP2003018A2 (en) | Camera system and mechanical apparatus | |
JP5775283B2 (ja) | 作業機械のモニタ装置 | |
US20140354813A1 (en) | Surroundings Monitoring Device for Work Machine | |
JP6071786B2 (ja) | 作業機械の周囲監視装置 | |
WO2013172172A1 (ja) | 自走式産業機械の表示装置 | |
EP3512194B1 (en) | Bird's-eye view image system, bird's-eye view image display method and program | |
CN113152552A (zh) | 工程机械的控制系统及方法 | |
CN112112202B (zh) | 操纵辅助系统、操纵辅助方法以及建筑机械 | |
US20240052602A1 (en) | Work machine surroundings monitoring system, work machine, and work machine surroundings monitoring method | |
WO2022195988A1 (ja) | 遠隔操作支援サーバおよび遠隔操作支援システム | |
JP7145137B2 (ja) | 作業機械の制御装置 | |
KR20240056273A (ko) | 건설기계의 제어 시스템 및 방법 | |
JP6188858B2 (ja) | 作業機械の周囲監視装置 | |
KR20240056262A (ko) | 건설기계의 제어 시스템 및 방법 | |
CN115695717A (zh) | 工程机械的控制系统及方法 | |
KR20230159892A (ko) | 표시 제어 장치, 표시 제어 방법 및 작업 기계 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |