WO2012169362A1 - 作業車両の周辺監視装置 - Google Patents

作業車両の周辺監視装置 Download PDF

Info

Publication number
WO2012169362A1
WO2012169362A1 PCT/JP2012/063255 JP2012063255W WO2012169362A1 WO 2012169362 A1 WO2012169362 A1 WO 2012169362A1 JP 2012063255 W JP2012063255 W JP 2012063255W WO 2012169362 A1 WO2012169362 A1 WO 2012169362A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
vehicle body
vehicle
work vehicle
outer edge
Prior art date
Application number
PCT/JP2012/063255
Other languages
English (en)
French (fr)
Inventor
光田　慎治
原田　茂
富和 田貫
栄伸 増谷
幸宏 中西
栗原　毅
大 坪根
正臣 町田
Original Assignee
株式会社小松製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社小松製作所 filed Critical 株式会社小松製作所
Priority to CA2808260A priority Critical patent/CA2808260C/en
Priority to CN201280002726.8A priority patent/CN103079891B/zh
Priority to AU2012268486A priority patent/AU2012268486A1/en
Priority to US13/818,323 priority patent/US20130155240A1/en
Publication of WO2012169362A1 publication Critical patent/WO2012169362A1/ja
Priority to US15/392,458 priority patent/US9956915B2/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/002—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles specially adapted for covering the peripheral part of the vehicle, e.g. for viewing tyres, bumpers or the like
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B60R2300/605—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint the adjustment being automatic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/261—Surveying the work-site to be treated

Definitions

  • the present invention relates to a surrounding area monitoring apparatus, and more particularly to a surrounding area monitoring apparatus that displays a camera image around a work vehicle on a display device.
  • a dump truck used to transport crushed stone in a mine or the like is known as a super large work vehicle.
  • This type of dump truck has a remarkably wide vehicle width and a long front-rear length compared to a general truck or other vehicle, so it is difficult for the driver to grasp the surrounding situation with a side mirror etc. .
  • Non-Patent Document 1 proposes a periphery monitoring device that causes a display device to display bird's-eye images in front of the vehicle and left and right, and camera images in the rear of the vehicle for the purpose of making the driver easily grasp the surrounding conditions. ing.
  • the periphery monitoring device of Non-Patent Document 1 includes three cameras for capturing the front of the vehicle and left and right, and a rear camera for capturing the rear of the vehicle.
  • the rear camera is disposed under the vehicle body having a vessel, and the camera image shows the ground behind the vehicle body.
  • Non-Patent Document 1 since the vehicle body exists above the rear camera, it is not easy to grasp the positional relationship between the vehicle body and an object around the vehicle body (for example, a person, a car, a building, etc.) . That is, it is difficult to determine in the camera image whether a person is in the space under the vehicle body or how close the vehicle body is to a building.
  • an object around the vehicle body for example, a person, a car, a building, etc.
  • the present invention has been made in view of the above-described circumstances, and an object thereof is to provide a periphery monitoring device capable of easily determining the positional relationship between a vehicle body and an object around the vehicle body on a camera image. (Means to solve the problem)
  • the periphery monitoring device for a work vehicle is a periphery monitoring device for displaying an image of the periphery of the work vehicle on a display device, which is disposed below the vehicle body of the work vehicle and acquires camera images around the work vehicle And a display control unit that causes a display device to display a camera, a camera image acquired by the camera, and a vehicle body outer edge line indicating the outer edge of the vehicle body vertically projected on the ground on the camera image.
  • the driver can reference the positional relationship between the vehicle body located above the camera and an object around the vehicle body (for example, a person, a car, a building, etc.) Can be easily grasped. Therefore, for example, it can be easily determined on the camera image whether a person is in the space under the vehicle body or how close the vehicle body is to the building. As a result, the driver can easily grasp the situation around the work vehicle.
  • an object around the vehicle body for example, a person, a car, a building, etc.
  • the work vehicle peripheral monitoring apparatus relates to the first invention, and the display control unit sets a warning line indicating a position at a predetermined distance from the vehicle body outer edge line on the ground of the camera image outside the vehicle body outer edge line. Display.
  • a work vehicle periphery monitoring apparatus according to the first or second aspect, wherein the vehicle body includes a frame and a vessel disposed on the frame. Includes the back end.
  • the work vehicle peripheral monitoring apparatus since the rear end of the vessel can be directly confirmed on the camera image, the positional relationship between the vessel and the object around the vessel can be made clearer to the driver. It can be made to grasp.
  • the work vehicle surroundings monitoring apparatus is a surroundings monitoring apparatus that displays an image of the surroundings of the work vehicle on the display device, and is mounted on the vehicle body of the work vehicle and acquires camera images around the work vehicle Displaying a plurality of cameras, a bird's-eye view around the work vehicle based on a plurality of camera images acquired by the plurality of cameras, and a specific camera image of the plurality of camera images side by side And a display control unit configured to display a vehicle body outer edge line indicating the outer edge of the vehicle body vertically projected on the ground on the camera image. (Effect of the invention)
  • a periphery monitoring device capable of easily determining the positional relationship between a vehicle body and an object around the vehicle body on a camera image.
  • front, rear, left, right is a term based on the operator seated in the driver's seat
  • vehicle width direction is synonymous with “left-right direction”.
  • FIG. 1 is a perspective view showing an entire configuration of a dump truck 1 provided with a periphery monitoring device according to an embodiment of the present invention.
  • the dump truck 1 is a self-propelled ultra large work vehicle used for mining work and the like.
  • the dump truck 1 mainly includes a body frame 2, a cab 3, a vessel 4, two front wheels 5, two rear wheels 6, and a base 7.
  • the dump truck 1 also includes a periphery monitoring device 10 that displays an image of the surroundings of the vehicle on a monitor. The configuration of the periphery monitoring device 10 will be described later.
  • the vehicle body frame 2 supports a power mechanism such as a diesel engine and a transmission (not shown) and other accessories. Further, front wheels 5 (only the right front wheel is shown in FIG. 1) are supported at the front left and right of the vehicle body frame 2, and rear wheels 6 (only the right rear wheel are shown in FIG. 1) are supported at the left and right rear.
  • the vehicle body frame 2 has a lower deck 2A on the side closer to the ground, and an upper deck 2B above the lower deck 2A. Two movable ladders 2C are provided between the lower deck 2A and the ground, and a diagonal ladder 2D is provided between the lower deck 2A and the upper deck 2B. On the upper deck 2B, rail-like handrails are fixed to the front left and right, the side, and a part of the rear.
  • the cab 3 is disposed on the upper deck 2B so as to be biased leftward from the center in the vehicle width direction.
  • a driver's seat a shift lever, a controller, a monitor, a steering wheel, an accelerator pedal, a brake pedal and the like are provided.
  • the controller, the monitor and the shift lever form part of the periphery monitoring device 10.
  • the vessel 4 is a container for loading heavy materials such as crushed stone.
  • the rear bottom of the vessel 4 is pivotably connected to the rear end of the vehicle body frame 2 via a pivot pin (not shown).
  • the vessel 4 is lifted up by the actuator, such as a hydraulic cylinder (not shown), so that the front portion thereof rotates upward to discharge the load, and the front portion is positioned above the cab as shown in FIG. Attitude can be taken.
  • the base 7 is disposed on the upper deck 2B.
  • the base 7 is a power feeding device for installing a pantograph that receives power from an overhead wire for a trolley.
  • the vehicle body frame 2 and the vessel 4 constitute the “vehicle body” of the dump truck 1.
  • FIG. 2 is a block diagram showing the configuration of the periphery monitoring device 10 provided in the dump truck 1.
  • the periphery monitoring device 10 has six cameras 11 to 16, six frame memories 11A to 16A, an operator switch 20, a monitor 30, and a display control unit 40.
  • FIG. 3 is a plan view of the dump truck 1 showing the mounting positions of the six cameras 11 to 16 and the two-dimensional imaging range.
  • FIG. 4 is a perspective view of the dump truck 1 showing a three-dimensional imaging range by six cameras 11-16.
  • FIG. 5 is a perspective view showing an attached state of the sixth camera 16.
  • Six cameras 11 to 16 are mounted on the outer periphery of the dump truck 1 and acquire images around the dump truck 1.
  • the first camera 11 is disposed at the upper end portion of the oblique rudder 2D, and is fixed toward the front of the vehicle.
  • the first imaging range 11R of the first camera 11 is in front of the vehicle.
  • the second camera 12 is disposed at the right end of the front side surface of the upper deck 2B, and is fixed toward the front right of the vehicle.
  • the second imaging range 12R of the second camera 12 is the front right of the vehicle.
  • the third camera 13 is disposed at a symmetrical position with the second camera 12, that is, at the left end of the front side surface of the upper deck 2B, and is fixed toward the front left of the vehicle.
  • the third imaging range 13R of the third camera 13 is obliquely left forward.
  • the fourth camera 14 is disposed at the front end of the right side surface of the upper deck 2B, and is fixed toward the vehicle diagonally rearward to the right.
  • the fourth imaging range 14R of the fourth camera 14 is obliquely backward right.
  • the fifth camera 15 is disposed at a position symmetrical with the fourth camera, that is, at the front end of the left side surface of the upper deck 2B, and is fixed obliquely toward the rear left of the vehicle.
  • the fifth shooting range 15R of the fifth camera 15 is diagonally left backward.
  • the sixth camera 16 is disposed so as to dive below the vessel 4 and is fixed toward the rear of the vehicle. Specifically, the sixth camera 16 is fixed to a bracket 9 a attached to the cross bar 9 above the rear axle 8.
  • the sixth camera 16 is fixed to be obliquely rearward and downward, and an imaging range 16R of the rear camera 16 is below the vessel 4 and the rear of the vehicle.
  • the imaging range 16R of the sixth camera 16 includes the vehicle body itself (the rear end of the vessel 4) unlike the imaging range images of other cameras (see FIG. 6).
  • Images of almost the entire periphery of the dump truck 1 are acquired by the six cameras 11 to 16 described above.
  • Each of the six cameras 11 to 16 transmits camera image data indicating a camera image photographed by the own device to each of the frame memories 11A to 16A.
  • the six frame memories 11A to 16A are connected to the six cameras 11 to 16.
  • the six cameras 11 to 16 temporarily store camera image data received from the six cameras 11 to 16.
  • the six frame memories 11A to 16A transmit the stored camera image data to the display control unit 40.
  • the operator switch 20 is an operating tool for specifying a camera image to be displayed on the monitor 30 among the camera images of the six cameras 11 to 16.
  • the driver can display a desired camera image on the monitor 30 by operating the operator switch 20.
  • the operator switch 20 notifies the display control unit 40 which camera image has been selected.
  • FIGS. 6 and 7 are schematic views showing the configuration of the monitor 30.
  • FIG. The monitor 30 is disposed in front of the driver's seat in the cab 3. As shown in FIGS. 6 and 7, the monitor 30 has a display area 30a for displaying a camera image.
  • FIG. 6 shows that the camera image 16G of the sixth camera 16 and the overhead image F are displayed in the display area 30a.
  • FIG. 7 shows a state in which the camera image 15G of the fifth camera 15 and the overhead image F are displayed in the display area 30a.
  • a plurality of camera images may be displayed in the display area 30a, or only the overhead image F may be displayed.
  • Such display on the monitor 30 may be switched automatically according to the traveling state of the dump truck 1. For example, it is possible to display the camera image of the first camera 11 and the overhead image F at the time of forward movement and stop, and to display only the camera image 16G of the sixth camera 16 at reverse time. Further, at the time of reverse movement, the camera image 16G and the overhead image F may be displayed, or the camera image 16G and another camera image may be displayed.
  • the display control unit 40 selects camera image data corresponding to the selected camera image based on the notification from the operator switch 20. Further, the display control unit 40 coordinate-transforms the camera image data of the six cameras 11 to 16 to project a plurality of images on a predetermined projection plane and to display a bird's eye image F surrounding the entire periphery of the dump truck 1. The bird's eye view image data shown is generated. The display control unit 40 combines the camera image data and the overhead image data to generate 2-screen data corresponding to a 2-screen image in which the selected camera image and the overhead image F are arranged.
  • the display control unit 40 generates car body outer edge line data corresponding to the car body outer edge line BL indicating the outer edge of the car body (including the car body frame 2 and the vessel 4) vertically projected on the ground in the selected camera image. .
  • the display control unit 40 generates vehicle body outer edge line data according to the distortion of the camera image of the target camera according to the procedure described below.
  • the display control unit 40 defines three matrices Ra, Rb, and Rc indicating the orientation of the target camera based on the following equations (1) to (3).
  • the display control unit 40 sets one point on the outer edge of the vehicle body vertically projected on the ground based on the following equation (4)
  • (tx, ty, tz) are coordinates of the target camera in the physical coordinate system.
  • the display control unit 40 determines three-dimensional coordinates (x of the camera coordinate system based on the following equations (5) to (11).
  • y, z) are converted to two-dimensional coordinates (u, v) on the display area 30 a of the monitor 30.
  • the display control unit 40 acquires two-dimensional coordinates (u, v) on the display area 30a of one point on the outer edge of the vehicle body vertically projected on the ground.
  • the display control unit 40 similarly generates vehicle outer edge line data corresponding to the vehicle outer edge line BL of a desired shape (such as a broken line or a chain line) by acquiring two-dimensional coordinates for a plurality of points on the outer edge of the vehicle body.
  • the display control unit 40 similarly uses the above equations (1) to (11) to indicate warnings corresponding to first to third warning lines L1 to L3 indicating positions of a predetermined distance outside from the vehicle body outer edge line BL. Generate line data.
  • the first warning line L1 is the outer 3 m of the vehicle outer edge line BL
  • the second warning line L2 is the outer 5 m of the vehicle outer edge line BL
  • the third warning line L3 is the vehicle outer edge line BL. It is an outer 7m line.
  • the display control unit 40 generates display image data by superimposing the generated two-screen data, the generated vehicle body outer edge line data, and the generated warning line data.
  • the display control unit 40 transmits the generated display image data to the monitor 30.
  • the monitor 30 is provided with a vehicle body outer edge line BL indicating the outer edge of the vehicle body projected vertically onto the ground, and 3, 5 and 7 m lines outside the vehicle body from the vehicle body outer edge line BL.
  • the first to third warning lines L1 to L3 shown are displayed together with the camera images 15G and 16G.
  • the display control unit 40 causes the monitor 30 to display the camera image and the vehicle body outer edge line BL indicating the outer edge of the vehicle body (including the vessel 4) vertically projected on the ground on the camera image. Equipped with
  • the driver can easily grasp the positional relationship between the vehicle body located above the camera and an object around the vehicle body (for example, a person, a car, a building, etc.) based on the vehicle body outer edge line. Therefore, for example, it can be easily determined on the camera image whether a person is in the space under the vehicle body or how close the vehicle body is to the building. As a result, the driver can easily grasp the situation around the dump truck 1.
  • an object around the vehicle body for example, a person, a car, a building, etc.
  • the display control unit 40 causes the monitor 30 to display the first to third warning lines L1 to L3 indicating the position of a predetermined distance from the vehicle body outer edge line BL.
  • the imaging range 16R of the sixth camera 16 includes the ground in the lower part of the screen as shown in FIG. 6, and the vessel 4 constituting a part of the vehicle body in the upper part of the screen facing the ground.
  • the rear end lower surface side is included. Therefore, since the rear end portion of the vessel 4 can be directly confirmed on the camera image 16G, the driver can more clearly understand the positional relationship between the vessel and an object around the vessel.
  • the display control unit 40 causes the monitor 30 to display the first to third warning lines L1 to L3.
  • the display control unit 40 may not display any of the first to third warning lines L1 to L3, or may display four or more warning lines.
  • the display control unit 40 indicates the vehicle body outer edge line BL and the first to third warning lines L1 to L3 with broken lines, but the present invention is not limited to this.
  • the display control unit 40 may indicate the vehicle body outer edge line BL and the first to third warning lines L1 to L3 with a solid line or a chain line. Further, the display control unit 40 may indicate the vehicle body outer edge line BL and the first to third warning lines L1 to L3 in different colors.
  • the dump truck 1 is provided with six cameras 11 to 16. However, the present invention is not limited to this.
  • the dump truck 1 may include one to five cameras, or seven or more cameras.

Abstract

　周辺監視装置（１０）は、カメラ画像と、カメラ画像上の地面に垂直投影される車体の外縁を示す車体外縁線（ＢＬ）と、をモニタ（３０）に表示させる表示制御部（４０）を備える。

Description

作業車両の周辺監視装置
　本発明は、周辺監視装置、特に、作業車両の周囲のカメラ画像を表示装置に表示する周辺監視装置に関する。
　超大型の作業車両として、鉱山等で砕石を運搬するために用いられるダンプトラックが知られている。この種のダンプトラックは、一般的なトラック等の車両に比較して著しく車幅が広く、また前後長が長いために、サイドミラー等によって周囲の状況を運転者が把握することは困難である。
　そこで、非特許文献１では、周辺の状況を運転者に簡便に把握させることを目的として、車両前方及び左右の俯瞰画像と車両後方のカメラ画像とを表示装置に表示させる周辺監視装置が提案されている。具体的に、非特許文献１の周辺監視装置は、車両前方及び左右を撮影する３つのカメラと、車両後方を撮影する後方カメラとを備えている。後方カメラはベッセルを有する車体下に配置されており、カメラ画像には車体後方の地面が写されている。
日立建機プレスリリース、"「オーバービューモニターシステム」をクラリオンと共同開発"、［online］、2011年1月24日、［2011年6月1日検索］、インターネット〈URL：http://www.hitachi-kenki.co.jp/news/press/PR20110121113934973.html〉
　（発明が解決しようとする課題）
　しかしながら、非特許文献１のカメラ画像では、後方カメラより上方に車体が存在するので、車体と車体周辺の物体（例えば、人、車、建物など）との位置関係を把握することは容易ではない。すなわち、車体下の空間に人が入っているか、或いは、車体が建物にどの程度近づいているかなどをカメラ画像において判断することは困難である。
　本発明は、上述の状況に鑑みてなされたものであり、車体と車体周辺の物体との位置関係をカメラ画像上で容易に判断可能な周辺監視装置を提供することを目的とする。
　（課題を解決するための手段）
　第１発明に係る作業車両の周辺監視装置は、作業車両の周囲の画像を表示装置に表示する周辺監視装置であって、作業車両の車体下方に配置され、作業車両の周囲のカメラ画像を取得するカメラと、カメラによって取得されるカメラ画像と、カメラ画像上の地面に垂直投影される車体の外縁を示す車体外縁線と、を表示装置に表示させる表示制御部と、を備える。
　第１発明に係る作業車両の周辺監視装置によれば、運転者は、カメラ上方に位置する車体と車体周辺の物体（例えば、人、車、建物など）との位置関係を車体外縁線を基準として容易に把握することができる。そのため、例えば、車体下の空間に人が入っているか、或いは、車体が建物にどの程度近づいているかなどをカメラ画像上で容易に判断することができる。その結果、作業車両周辺の状況を運転者に簡便に把握させることができる。
　第２発明に係る作業車両の周辺監視装置は、第１発明に係り、表示制御部は、カメラ画像の地面上において車体外縁線から所定距離の位置を示す警告線を、車体外縁線の外側に表示させる。
　第２発明に係る作業車両の周辺監視装置によれば、車体周辺の物体が車体からどの程度離れているかを車体外縁線とともに段階的に示すことができるので、車体と車体周辺の物体との位置関係をより容易に運転者に把握させることができる。
　第３発明に係る作業車両の周辺監視装置は、第１又は第２発明に係り、車体は、フレームと、フレーム上に配置されるベッセルと、を有し、カメラの撮像範囲には、ベッセルの後端部を含んでいる。
　第３発明に係る作業車両の周辺監視装置によれば、ベッセルの後端部をカメラ画像上において直接確認することができるので、ベッセルとベッセル周辺の物体との位置関係をより明確に運転者に把握させることができる。
　第４発明に係る作業車両の周辺監視装置は、作業車両の周囲の画像を表示装置に表示する周辺監視装置であって、作業車両の車体に装着され、作業車両の周囲のカメラ画像をそれぞれ取得する複数のカメラと、複数のカメラによって取得される複数のカメラ画像に基づく作業車両の周囲の俯瞰画像と、複数のカメラ画像のうち特定のカメラ画像と、を並べて表示するとともに、カメラ画像上の地面に垂直投影される車体の外縁を示す車体外縁線をカメラ画像上に表示させる表示制御部と、を備える。
　（発明の効果）
　本発明によれば、車体と車体周辺の物体との位置関係をカメラ画像上で容易に判断可能な周辺監視装置を提供することができる。
ダンプトラックの全体構成を示す斜視図 周辺監視装置の構成を示すブロック図 ６台のカメラの装着位置と２次元撮影範囲とを示すダンプトラックの平面図 ６台のカメラによる３次元撮像範囲を示すダンプトラックの斜視図 第６カメラの取付け状態を示す斜視図 モニタの構成を示す模式図 モニタの構成を示す模式図
　以下、本発明の実施形態について、図面を参照しながら説明する。なお、以下の説明において、「前、後、左、右」とは、運転席に着座したオペレータを基準とする用語であり、「車幅方向」は、「左右方向」と同義である。
　［ダンプトラックの全体構成］
　図１は、本発明の一実施形態による周辺監視装置を備えたダンプトラック１の全体構成を示す斜視図である。ダンプトラック１は、鉱山作業などに用いられる自走式の超大型作業車両である。
　ダンプトラック１は主に、車体フレーム２と、キャブ３と、ベッセル４と、２つの前輪５と、２つの後輪６と、ベース７と、を備える。また、このダンプトラック１は、車両の周囲の画像をモニタに表示させる周辺監視装置１０を備える。周辺監視装置１０の構成については後述する。
　車体フレーム２は、図示しないディーゼルエンジンやトランスミッション等の動力機構やその他の補機類を支持している。また、車体フレーム２の前部左右に前輪５（図１では右前輪のみ図示）が支持され、後部左右に後輪６（図１では右後輪のみ図示）が支持されている。車体フレーム２は、地面に近い側にロアデッキ２Ａを有し、ロアデッキ２Ａの上方にアッパデッキ２Ｂを有している。ロアデッキ２Ａと地面との間には可動式ラダー２Ｃが２つ設けられ、ロアデッキ２Ａとアッパデッキ２Ｂとの間には斜めラダー２Ｄが設けられている。アッパデッキ２Ｂ上には、前部の左右、側部、及び後部の一部に柵状の手すりが固定されている。
　キャブ３は、アッパデッキ２Ｂ上において、車幅方向の中央から左側に偏倚して配置されている。このキャブ３内には、運転席、シフトレバー、コントローラ、モニタ、ハンドル、アクセルペダル、ブレーキペダル等が設けられている。後述するように、コントローラ、モニタおよびシフトレバーは周辺監視装置１０の一部を構成する。
　ベッセル４は、砕石等の重量物を積載するための容器である。ベッセル４の後側の底部は、回動ピン（図示せず）を介して、車体フレーム２の後端部に回動可能に連結されている。これにより、ベッセル４は、図示しない油圧シリンダ等のアクチュエータによって、前部が上方に回動して積載物を排出する起立姿勢と、図１に示すように前部がキャブの上部に位置する積載姿勢と、を取り得る。
　ベース７は、アッパデッキ２Ｂ上に配置される。ベース７は、トロリー用の架線から電力を受電するパンタグラフを設置するための給電装置である。
　なお、本実施形態において、車体フレーム２およびベッセル４は、ダンプトラック１の「車体」を構成している。
　［周辺監視装置の構成］
　図２は、ダンプトラック１が備える周辺監視装置１０の構成を示すブロック図である。
　周辺監視装置１０は、６台のカメラ１１～１６と、６つのフレームメモリ１１Ａ～１６Ａと、オペレータスイッチ２０と、モニタ３０と、表示制御部４０と、を有する。
　　＜カメラ＞
　図３は、６台のカメラ１１～１６の装着位置と２次元撮影範囲とを示すダンプトラック１の平面図である。図４は、６台のカメラ１１～１６による３次元撮像範囲を示すダンプトラック１の斜視図である。図５は、第６カメラ１６の取付け状態を示す斜視図である。６台のカメラ１１～１６は、ダンプトラック１の外周に装着され、ダンプトラック１の周囲の画像を取得する。
　第１カメラ１１は、斜めラダー２Ｄの上端部に配置され、車両前方に向かって固定されている。第１カメラ１１の第１撮影範囲１１Ｒは車両前方である。
　第２カメラ１２は、アッパデッキ２Ｂの前側面右端部に配置され、車両右斜め前方に向かって固定されている。第２カメラ１２の第２撮影範囲１２Ｒは車両右斜め前方である。
　第３カメラ１３は、第２カメラ１２と左右対称位置、すなわちアッパデッキ２Ｂの前側面左端部に配置され、車両左斜め前方に向かって固定されている。第３カメラ１３の第３撮影範囲１３Ｒは左斜め前方である。
　第４カメラ１４は、アッパデッキ２Ｂの右側面前端部に配置され、車両右斜め後方に向かって固定されている。第４カメラ１４の第４撮影範囲１４Ｒは右斜め後方である。
　第５カメラ１５は、第４カメラと左右対称位置、すなわちアッパデッキ２Ｂの左側面前端部に配置され、車両左斜め後方に向かって固定されている。第５カメラ１５の第５撮影範囲１５Ｒは左斜め後方である。
　第６カメラ１６は、図５に示すように、ベッセル４の下方に潜り込むように配置されており、車両後方に向かって固定されている。具体的に、第６カメラ１６は、リヤアクスル８の上方において、クロスバー９に取り付けられたブラケット９ａに固定されている。第６カメラ１６は後方斜め下向きに固定されており、後方カメラ１６の撮像範囲１６Ｒはベッセル４下方と車両後方である。ここで、本実施形態において、第６カメラ１６の撮像範囲１６Ｒには、他のカメラの撮像範囲画像とは異なり、車体自体（ベッセル４の後端部）を含んでいる（図６参照）。
　以上の６台のカメラ１１～１６によってダンプトラック１のほぼ全周囲の画像が取得される。６台のカメラ１１～１６のそれぞれは、自装置が撮影したカメラ画像を示すカメラ画像データを、フレームメモリ１１Ａ～１６Ａのそれぞれに送信する。
　　＜フレームメモリ＞
　６つのフレームメモリ１１Ａ～１６Ａは、６台のカメラ１１～１６に接続されている。６台のカメラ１１～１６は、６台のカメラ１１～１６から受信するカメラ画像データを一旦記憶する。６つのフレームメモリ１１Ａ～１６Ａは、記憶したカメラ画像データを表示制御部４０に送信する。
　　＜オペレータスイッチ＞
　オペレータスイッチ２０は、６台のカメラ１１～１６それぞれのカメラ画像のうちモニタ３０に表示すべきカメラ画像を指定するための操作具である。運転者は、オペレータスイッチ２０を操作することによって、所望のカメラ画像をモニタ３０に表示させることができる。オペレータスイッチ２０は、いずれのカメラ画像が選択されたかを表示制御部４０に通知する。
　　＜モニタ＞
　図６及び図７は、モニタ３０の構成を示す模式図である。
　モニタ３０は、キャブ３内において運転席の前方に配置される。モニタ３０は、図６及び図７に示すように、カメラ画像を表示する表示領域３０ａを有する。なお、図６は、第６カメラ１６のカメラ画像１６Ｇと俯瞰画像Ｆとが表示領域３０ａに表示された様子を示している。図７は、第５カメラ１５のカメラ画像１５Ｇと俯瞰画像Ｆとが表示領域３０ａに表示された様子を示している。
　なお、表示領域３０ａには、複数のカメラ画像が表示されてもよいし、俯瞰画像Ｆだけが表示されてもよい。このようなモニタ３０の表示は、ダンプトラック１の走行状態に応じて自動的に切り換えることとしてもよい。例えば、前進時及び停止時には第１カメラ１１のカメラ画像と俯瞰画像Ｆとを表示し、後進時には第６カメラ１６のカメラ画像１６Ｇのみを表示することができる。さらに、後進時には、カメラ画像１６Ｇと俯瞰画像Ｆとを表示してもよいし、カメラ画像１６Ｇと他のカメラ画像とを表示してもよい。
　　＜表示制御部＞
　表示制御部４０は、オペレータスイッチ２０からの通知に基づいて、選択されたカメラ画像に対応するカメラ画像データを選択する。また、表示制御部４０は、６台のカメラ１１～１６のカメラ画像データを座標変換することによって、複数の画像が所定の投影面上に投影されダンプトラック１の全周囲を囲む俯瞰画像Ｆを示す俯瞰画像データを生成する。表示制御部４０は、カメラ画像データと俯瞰画像データとを合成することによって、選択されたカメラ画像と俯瞰画像Ｆとが並んだ２画面画像に対応する２画面データを生成する。
　また、表示制御部４０は、選択されたカメラ画像において地面に垂直投影される車体（車体フレーム２およびベッセル４を含む。）の外縁を示す車体外縁線ＢＬに対応する車体外縁線データを生成する。表示制御部４０は、次に説明する手順に従って、対象カメラのカメラ画像の歪みに応じた車体外縁線データを生成する。
　まず、表示制御部４０は、次式（１）～（３）に基づいて、対象カメラの向きを示す３つの行列Ｒａ、Ｒｂ、Ｒｃを定義する。
Figure JPOXMLDOC01-appb-M000001
 　　　　　　但し、
　　　　　　ca=cos(roll),sa=sin(roll)
　　　　　　cb=cos(pitch),sb=sin(pitch)
　　　　　　cc=cos(yaw),sc=sin(yaw)
　　　rollは、前後方向に平行な軸周りにおける対象カメラの振れ角
　　　pitchは、車幅方向に平行な軸周りにおける対象カメラの振れ角
　　　yawは、鉛直方向に平行な軸周りにおける対象カメラの振れ角
　　　pitch,roll,yawは、表示制御部４０が内蔵するメモリに格納されている
　次に、表示制御部４０は、次式（４）に基づいて、地面に垂直投影された車体の外縁上の１点の物理座標系での３次元座標（ Xr, Yr, Zr ）を鉛直方向-前後方向-車幅方向のオイラー角として、対象カメラの向きおよび位置を基準とするカメラ座標系での３次元座標（ x , y , z ）に変換する。
Figure JPOXMLDOC01-appb-M000002
 　　　　　　但し、（ tx, ty, tz ）は、対象カメラの物理座標系における座標
　次に、表示制御部４０は、次式（５）～（１１）に基づいて、カメラ座標系における３次元座標（ x , y , z ）を、モニタ３０の表示領域３０ａ上における２次元座標（u , v）に変換する。
Figure JPOXMLDOC01-appb-M000003
 　　　　　　但し、
　　　k1,k2.k3は、半径方向歪係数
　　　p1,p2は、せん断方向歪係数
　　　ｆx、fyは、カメラ焦点距離
　　　cx、cyは、カメラの焦点方向をZ軸,撮像面方向をX軸,Y軸とするカメラ座標系
　このように、表示制御部４０は、地面に垂直投影された車体の外縁上の１点の表示領域３０ａ上における２次元座標（ u , v ）を取得する。表示制御部４０は、車体の外縁上の複数点について同様に２次元座標を取得することによって、所望の形状（破線や鎖線など）の車体外縁線ＢＬに対応する車体外縁線データを生成する。
　また、表示制御部４０は、上記式（１）～（１１）を同様に用いて、車体外縁線ＢＬから外側に所定距離の位置を示す第１～第３警告線Ｌ１～Ｌ３に対応する警告線データを生成する。本実施形態において、第１警告線Ｌ１は車体外縁線ＢＬの外側３ｍラインであり、第２警告線Ｌ２は車体外縁線ＢＬの外側５ｍラインであり、第３警告線Ｌ３は車体外縁線ＢＬの外側７ｍラインである。
　表示制御部４０は、生成した２画面データと、生成した車体外縁線データと、生成した警告線データとを重畳させることによって、表示用画像データを生成する。表示制御部４０は、生成した表示用画像データをモニタ３０に送信する。これによって、モニタ３０には、図６及び図７に示すように、地面に垂直投影される車体の外縁を示す車体外縁線ＢＬと、車体外縁線ＢＬより車体の外側３，５，７ｍラインを示す第１～第３警告線Ｌ１～Ｌ３とが、カメラ画像１５Ｇ，１６Ｇとともに表示される。
　［作用及び効果］
　（１）周辺監視装置１０は、カメラ画像と、カメラ画像上の地面に垂直投影される車体（ベッセル４を含む）の外縁を示す車体外縁線ＢＬと、をモニタ３０に表示させる表示制御部４０を備える。
　従って、運転者は、カメラ上方に位置する車体と車体周辺の物体（例えば、人、車、建物など）との位置関係を、車体外縁線を基準として容易に把握することができる。そのため、例えば、車体下の空間に人が入っているか、或いは、車体が建物にどの程度近づいているかなどをカメラ画像上で容易に判断することができる。その結果、ダンプトラック１周辺の状況を運転者に簡便に把握させることができる。
　（２）表示制御部４０は、車体外縁線ＢＬから所定距離の位置を示す第１～第３警告線Ｌ１～Ｌ３をモニタ３０に表示させる。
　従って、車体周辺の物体が車体からどの程度離れているかを車体外縁線ＢＬを基準として段階的に示すことができるので、車体と車体周辺の物体との位置関係をより容易に運転者に把握させることができる。
　（３）第６カメラ１６の撮像範囲１６Ｒには、図６に示すように、画面下方には地面が含まれており、地面に対向する画面上方には車体の一部を構成するベッセル４の後端部下面側が含まれている。
　従って、ベッセル４の後端部をカメラ画像１６G上において直接確認することができるので、ベッセルとベッセル周辺の物体との位置関係をより明確に運転者に把握させることができる。
　［他の実施形態］
　本発明は以上のような実施形態に限定されるものではなく、本発明の範囲を逸脱することなく種々の変形又は修正が可能である。
　（Ａ）上記実施形態において、表示制御部４０は、第１～第３警告線Ｌ１～Ｌ３をモニタ３０に表示させることとしたが、これに限られるものではない。表示制御部４０は、第１～第３警告線Ｌ１～Ｌ３のいずれかを表示させなくてもよいし、また、４本以上の警告線を表示させてもよい。
　（Ｂ）上記実施形態において、表示制御部４０は、車体外縁線ＢＬおよび第１～第３警告線Ｌ１～Ｌ３を破線で示すこととしたが、これに限られるものではない。表示制御部４０は、車体外縁線ＢＬおよび第１～第３警告線Ｌ１～Ｌ３を実線や鎖線などで示してもよい。また、表示制御部４０は、車体外縁線ＢＬおよび第１～第３警告線Ｌ１～Ｌ３をそれぞれ異なる色で示してもよい。
　（Ｃ）上記実施形態では、図６及び図７を用いて、車体外縁線ＢＬが、第６カメラ１６のカメラ画像１６Ｇ又は第５カメラ１５のカメラ画像１５Ｇと共に表示されるケースについて説明したが、これに限られるものではない。運転者が第１～第４カメラ１１～１４のいずれかを指定した場合、車体外縁線ＢＬは、第１～第４カメラのカメラ画像と共に表示されることになる。
　（Ｄ）上記実施形態において、ダンプトラック１は、ベース７を備えることとしたが備えていなくてもよい。
　（Ｅ）上記実施形態において、ダンプトラック１は、６台のカメラ１１～１６を備えることとしたが、これに限られるものではない。ダンプトラック１は、１台～５台のカメラを備えていてもよいし、７台以上のカメラを備えていてもよい。
１　ダンプトラック
２　車体フレーム
３　キャブ
４　ベッセル
１０　周辺監視装置
１１～１６　カメラ
１１Ａ～１６Ａ　フレームメモリ
２０　オペレータスイッチ
３０　モニタ
３０ａ　表示領域
４０　表示用制御部
ＢＬ　車体外縁線
Ｌ１　第１警告線
Ｌ２　第２警告線
Ｌ３　第３警告線

Claims (4)

  1. 　作業車両の周囲の画像を表示装置に表示する周辺監視装置であって、
    　前記作業車両の車体下方に配置され、前記作業車両の周囲のカメラ画像を取得するカメラと、
    　前記カメラによって取得される前記カメラ画像と、前記カメラ画像上の地面に垂直投影される前記車体の外縁を示す車体外縁線と、を前記表示装置に表示させる表示制御部と、
    を備える作業車両の周辺監視装置。
  2. 　前記表示制御部は、前記カメラ画像の地面上において前記車体外縁線から所定距離の位置を示す警告線を、前記車体外縁線の外側に表示させる、
    請求項１に記載の作業車両の周辺監視装置。
  3. 　前記車体は、フレームと、フレーム上に配置されるベッセルと、を有し、
    　前記カメラの撮像範囲には、前記ベッセルの後端部を含んでいる、
    請求項１又は２に記載の作業車両の周辺監視装置。
  4. 　作業車両の周囲の画像を表示装置に表示する周辺監視装置であって、
    　前記作業車両の車体に装着され、前記作業車両の周囲のカメラ画像をそれぞれ取得する複数のカメラと、
    　前記複数のカメラによって取得される複数のカメラ画像に基づく前記作業車両の周囲の俯瞰画像と、前記複数のカメラ画像のうち特定のカメラ画像と、を並べて表示するとともに、前記カメラ画像上の地面に垂直投影される前記車体の外縁を示す車体外縁線を前記カメラ画像上に表示させる表示制御部と、
    を備える作業車両の周辺監視装置。
PCT/JP2012/063255 2011-06-07 2012-05-24 作業車両の周辺監視装置 WO2012169362A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CA2808260A CA2808260C (en) 2011-06-07 2012-05-24 Work vehicle periphery monitoring apparatus
CN201280002726.8A CN103079891B (zh) 2011-06-07 2012-05-24 作业车辆的周边监视装置
AU2012268486A AU2012268486A1 (en) 2011-06-07 2012-05-24 Work vehicle vicinity monitoring device
US13/818,323 US20130155240A1 (en) 2011-06-07 2012-05-24 Work vehicle periphery monitoring apparatus
US15/392,458 US9956915B2 (en) 2011-06-07 2016-12-28 Dump truck periphery monitoring apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-127478 2011-06-07
JP2011127478A JP5597596B2 (ja) 2011-06-07 2011-06-07 作業車両の周辺監視装置

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US13/818,323 A-371-Of-International US20130155240A1 (en) 2011-06-07 2012-05-24 Work vehicle periphery monitoring apparatus
US15/392,458 Division US9956915B2 (en) 2011-06-07 2016-12-28 Dump truck periphery monitoring apparatus

Publications (1)

Publication Number Publication Date
WO2012169362A1 true WO2012169362A1 (ja) 2012-12-13

Family

ID=47295930

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/063255 WO2012169362A1 (ja) 2011-06-07 2012-05-24 作業車両の周辺監視装置

Country Status (6)

Country Link
US (2) US20130155240A1 (ja)
JP (1) JP5597596B2 (ja)
CN (1) CN103079891B (ja)
AU (1) AU2012268486A1 (ja)
CA (1) CA2808260C (ja)
WO (1) WO2012169362A1 (ja)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102102133B1 (ko) * 2011-12-26 2020-04-20 스미도모쥬기가이고교 가부시키가이샤 쇼벨의 화상표시장치
JP5456123B1 (ja) * 2012-09-20 2014-03-26 株式会社小松製作所 作業車両用周辺監視システム及び作業車両
JP6339337B2 (ja) * 2013-09-24 2018-06-06 日立建機株式会社 車両周囲移動物体検知システム
CN105339061B (zh) * 2014-04-25 2017-05-10 株式会社小松制作所 周边监视系统、作业车辆以及周边监视方法
KR101566784B1 (ko) * 2014-04-25 2015-11-13 주식회사 영신 산업용 및 건설용 중장비 접근감시 및 작동제어 시스템
KR101610116B1 (ko) * 2014-10-15 2016-04-08 현대자동차 주식회사 차로 이탈 경고 시스템 및 그 제어 방법
KR101998300B1 (ko) * 2014-11-05 2019-07-10 현대건설기계 주식회사 작업환경 모니터링 장치 및 작업환경 모니터링 장치에서 수행되는 작업환경 모니터링 방법
JP6340068B2 (ja) * 2015-02-23 2018-06-06 株式会社小松製作所 油圧ショベル
JP6589468B2 (ja) * 2015-09-01 2019-10-16 株式会社タダノ 移動式クレーンの周囲表示装置
CN106772383B (zh) * 2016-12-31 2019-03-22 智车优行科技（北京）有限公司 车辆周围物体的检测呈现方法、装置和系统、车辆
US10668854B2 (en) * 2017-02-09 2020-06-02 Komatsu Ltd. Work vehicle and display device
US10583832B2 (en) * 2017-05-02 2020-03-10 Cnh Industrial America Llc Obstacle detection system for a work vehicle
TWI668146B (zh) * 2018-03-30 2019-08-11 帷享科技股份有限公司 Vehicle side safety distance display system
CN110667474B (zh) * 2018-07-02 2021-02-26 北京四维图新科技股份有限公司 通用障碍物检测方法、装置与自动驾驶系统
JP7166108B2 (ja) * 2018-08-31 2022-11-07 株式会社小松製作所 画像処理システム、表示装置、画像処理方法、学習済みモデルの生成方法、および学習用データセット
EP3620332B1 (en) * 2018-09-05 2021-03-10 Volvo Car Corporation Driver assistance system and method for vehicle flank safety
KR20200042549A (ko) * 2018-10-15 2020-04-24 현대자동차주식회사 차량 및 그 제어방법
JP7365122B2 (ja) * 2019-02-01 2023-10-19 株式会社小松製作所 画像処理システムおよび画像処理方法
WO2021115609A1 (en) 2019-12-12 2021-06-17 Ejzenberg Geoffrey A situational awareness system of a cyber-physical hybrid electric autonomous or semi-autonomous off-highway dump truck for surface mining industry
JP7409074B2 (ja) * 2019-12-25 2024-01-09 コベルコ建機株式会社 作業支援サーバ、撮像装置の選択方法
JP2021134482A (ja) * 2020-02-21 2021-09-13 株式会社小松製作所 作業機械及び作業機械の遠隔操作システム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006106685A1 (ja) * 2005-03-31 2006-10-12 Hitachi Construction Machinery Co., Ltd. 作業機械の周囲監視装置
JP2006341641A (ja) * 2005-06-07 2006-12-21 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2007085091A (ja) * 2005-09-22 2007-04-05 Hitachi Constr Mach Co Ltd 作業現場の安全管理装置及びこれに適用される作業機械
JP2009121053A (ja) * 2007-11-12 2009-06-04 Clarion Co Ltd 建設・土木作業車両の作業安全監視システム
JP2010093605A (ja) * 2008-10-09 2010-04-22 Sanyo Electric Co Ltd 操縦支援装置
JP2011011620A (ja) * 2009-07-01 2011-01-20 Caterpillar Sarl 作業機械の車両周囲確認装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3291884B2 (ja) * 1994-01-26 2002-06-17 いすゞ自動車株式会社 車両後方監視装置
JPH11255018A (ja) * 1998-03-11 1999-09-21 Komatsu Ltd 車両用後方監視カメラの洗浄装置
JP4447186B2 (ja) * 2001-06-15 2010-04-07 株式会社小松製作所 建設機械
JP2005020502A (ja) 2003-06-27 2005-01-20 Nippon Seiki Co Ltd 車両用監視装置
US8157837B2 (en) 2006-03-13 2012-04-17 Pneumrx, Inc. Minimally invasive lung volume reduction device and method
JP4996928B2 (ja) 2007-01-05 2012-08-08 日立建機株式会社 作業機械の周囲監視装置
JP4973564B2 (ja) 2008-03-27 2012-07-11 三菱自動車工業株式会社 車両周辺表示装置
JP5410327B2 (ja) * 2010-02-18 2014-02-05 株式会社小松製作所 建設機械の後方視界表示システムおよび方法
JP5386762B2 (ja) * 2010-03-04 2014-01-15 株式会社小松製作所 運搬車両の後方視界表示システム
JP5604146B2 (ja) * 2010-03-25 2014-10-08 富士通テン株式会社 車載照明装置、画像処理装置、画像表示システム及び照明方法
JP5605617B2 (ja) * 2010-05-26 2014-10-15 アイシン精機株式会社 駐車支援装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006106685A1 (ja) * 2005-03-31 2006-10-12 Hitachi Construction Machinery Co., Ltd. 作業機械の周囲監視装置
JP2006341641A (ja) * 2005-06-07 2006-12-21 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2007085091A (ja) * 2005-09-22 2007-04-05 Hitachi Constr Mach Co Ltd 作業現場の安全管理装置及びこれに適用される作業機械
JP2009121053A (ja) * 2007-11-12 2009-06-04 Clarion Co Ltd 建設・土木作業車両の作業安全監視システム
JP2010093605A (ja) * 2008-10-09 2010-04-22 Sanyo Electric Co Ltd 操縦支援装置
JP2011011620A (ja) * 2009-07-01 2011-01-20 Caterpillar Sarl 作業機械の車両周囲確認装置

Also Published As

Publication number Publication date
US20130155240A1 (en) 2013-06-20
JP5597596B2 (ja) 2014-10-01
CN103079891A (zh) 2013-05-01
US9956915B2 (en) 2018-05-01
CA2808260A1 (en) 2012-12-13
AU2012268486A1 (en) 2013-02-28
CA2808260C (en) 2015-07-14
JP2012254660A (ja) 2012-12-27
US20170120823A1 (en) 2017-05-04
CN103079891B (zh) 2015-12-02

Similar Documents

Publication Publication Date Title
WO2012169362A1 (ja) 作業車両の周辺監視装置
JP5722127B2 (ja) 作業車両の周辺監視装置
JP5779244B2 (ja) 作業機械の周囲監視装置
JP5575703B2 (ja) ダンプトラックの積載量表示装置
JP5124671B2 (ja) 作業車両の周辺監視装置
JP5643272B2 (ja) 作業車両用周辺監視システム及び作業車両
JP5546427B2 (ja) 作業機械の周囲監視装置
US8982212B2 (en) Surrounding area monitoring device for work vehicle
WO2016013490A1 (ja) 旋回式作業機の周囲表示装置
WO2012169352A1 (ja) 作業車両の周辺監視装置
JP5629740B2 (ja) 作業車両用周辺監視システム及び作業車両
WO2014045465A1 (ja) 作業車両用周辺監視システム及び作業車両
WO2015008751A1 (ja) 作業機械の周囲監視装置
JP2013253402A (ja) 作業機械の周囲監視装置
JP5938292B2 (ja) 運搬車両の監視装置
WO2017014325A1 (ja) ブルドーザ
JP2014222877A (ja) 作業車両の周辺監視装置
JP6988206B2 (ja) クレーン車
JP5990237B2 (ja) ダンプトラック用周辺監視システム及びダンプトラック
JP5823553B2 (ja) 作業車両用周辺監視システム及び作業車両
JP2019014585A (ja) クレーン車

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280002726.8

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12796962

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2808260

Country of ref document: CA

WWE Wipo information: entry into national phase

Ref document number: 13818323

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2012268486

Country of ref document: AU

Date of ref document: 20120524

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12796962

Country of ref document: EP

Kind code of ref document: A1