JP5779244B2 - 作業機械の周囲監視装置 - Google Patents

作業機械の周囲監視装置 Download PDF

Info

Publication number
JP5779244B2
JP5779244B2 JP2013515049A JP2013515049A JP5779244B2 JP 5779244 B2 JP5779244 B2 JP 5779244B2 JP 2013515049 A JP2013515049 A JP 2013515049A JP 2013515049 A JP2013515049 A JP 2013515049A JP 5779244 B2 JP5779244 B2 JP 5779244B2
Authority
JP
Japan
Prior art keywords
vehicle
image
work machine
camera
monitor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013515049A
Other languages
English (en)
Other versions
JPWO2012157379A1 (ja
Inventor
石本 英史
英史 石本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Construction Machinery Co Ltd
Original Assignee
Hitachi Construction Machinery Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Construction Machinery Co Ltd filed Critical Hitachi Construction Machinery Co Ltd
Priority to JP2013515049A priority Critical patent/JP5779244B2/ja
Publication of JPWO2012157379A1 publication Critical patent/JPWO2012157379A1/ja
Application granted granted Critical
Publication of JP5779244B2 publication Critical patent/JP5779244B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/08Superstructures; Supports for superstructures
    • E02F9/0841Articulated frame, i.e. having at least one pivot point between two travelling gear units
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/24Safety devices, e.g. for preventing overload
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Civil Engineering (AREA)
  • Mining & Mineral Resources (AREA)
  • Structural Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Description

本発明は、関節部により屈曲するアーティキュレート車両からなる作業機械において、機械による作業の安全確保等のために設けられる作業機械の周囲監視装置に関するものである。
一般に、自走式作業機械における作業の安全を確保し、また作業機械の操作性の向上を図るために、車両の周囲監視装置を設けたものは、従来から知られている。従来技術による周囲監視装置は、車体にカメラを装着すると共に、運転室において、オペレータが着座する運転席の前方位置にモニタを設置することにより構成される。カメラで撮影した画像は動画状態の映像としてモニタに表示され、このモニタの画像から車両の周囲に作業者等が立ち入っているか否か、また周囲に構築物や樹木等が存在するか否かを確認することができる。
ところで、単なるカメラ画像では距離感を正確に把握するのが困難な場合がある。また、場合によっては、方向性を把握するのが困難となることもある。モニタ上では、作業機械の近傍に作業者等が立ち入っていたり、構築物等の障害物が作業機械の近傍に存在していたりしている場合、つまり作業機械の近傍位置に人的物的障害が存在する場合において、作業機械の一部がこれらと接触するおそれがあるのか否か、回避動作を取らなければならないのか、回避動作としてどの程度の動きが必要なのか、さらに回避は不可能であり、作業機械の作動を停止させなければならないのか等は、モニタを目視するだけでは正確に判断できない場合がある。つまり、モニタに表示されるカメラ画像からは作業機械と人的物的障害との正確な距離や方向性が認識できないことがある。
ところで、カメラをある高さから斜め下方向に視野を向けて撮影し、このカメラ画像を画像変換処理すると、仮想視点からの画像に変換することができる。仮想視点画像として、視点を上方位置とした上方視点画像は俯瞰状態の画像となる。この俯瞰画像をモニタに表示すると、人的物的障害までの距離やその方向を正確に把握することができる。作業機械において、俯瞰画像を表示することにより周囲の監視を行う装置が、例えば特許文献1に開示されている。この特許文献1では、作業機械としての油圧ショベルの後方と、左側方との所定の位置にカメラを装着して、これらのカメラの光軸を斜め下方に向け、後方及び側方に広い視野を持った画像を取得して上方視点となるように視点変換した俯瞰画像をモニタに表示することによって、周辺監視画面を取得するようにしている。
このように俯瞰画像をモニタに表示すると、作業機械から人的物的障害までの距離及び方向を正確に把握できることになる。従って、作業機械を作動させる際に、このモニタの映像によって周囲の安全を確認することができる。
国際公開WO2006/106685号パンフレット
自走式作業機械として、アーティキュレート車両からなる自走式作業機械がある。例えば、アーティキュレートホイールローダやアーティキュレートダンプトラック等は、車両の前部と後部との間が屈曲可能な関節を有するものである。即ち、アーティキュレートホイールローダでは、車両前部にローダバケット及びその駆動機構が設けられ、車両後部に運転室等が設置されている。また、アーティキュレートダンプトラックの場合には、車両前部が運転室となり、車両後部に荷台が設けられている。
以上のようなアーティキュレート作業機械にあっては、特許文献1に示されている油圧ショベルとは異なり、車両前部と車両後部との間が屈曲することから、アーティキュレート作業機械に俯瞰画像を取得して、モニタに表示する場合には、カメラをどのように配置するか、またカメラで取得した俯瞰画像をどのようにして表示するのか等について、解決しなければならない課題が存在する。
本発明は以上の点に鑑みてなされたものであって、その目的とするところは、車両の前部と後部との間が屈曲可能なアーティキュレート作業機械の画像と共にこの車両の各部に設けたカメラ画像からの俯瞰画像をモニタに表示する際に、オペレータにとって作業機械の周囲を監視するのに最適となる表示画像とする。
前述した目的を達成するために、本発明は、車両前部と車両後部とを連結軸により左右に屈曲可能に連結したアーティキュレート作業機械に設けられる作業機械の周囲監視装置において、前記車両前部に設置した1または複数のカメラと、前記車両後部に設置され、車両の後方位置を視野とするカメラを含む1または複数のカメラと、前記作業機械の周囲監視画像を表示するためのモニタと、前記連結軸を中心とした前記車両前部と前記車両後部との間の屈曲角度に基づいて、前記各カメラの位置を算出するカメラ位置算出部と、前記各カメラで取得したカメラ画像を上方視点となるように視点変換して、それぞれ俯瞰画像とする画像変換手段と、前記各カメラにより撮影した各個別俯瞰画像を、前記カメラ位置算出部により算出されたそれぞれの位置関係となるように合成した合成俯瞰画像を生成して、前記モニタにこの合成俯瞰画像を表示するための画像合成手段と、前記合成俯瞰画像を、前記車両前部または前記車両後部のいずれか一方を固定した固定側キャラクタ像とし、他方を前記屈曲角度に基づいて前記固定側キャラクタ像に対して相対回動する可動側キャラクタ像とした車両画像と共に前記モニタに表示する表示画像生成手段とを備え、前記作業機械の運転席は前記車両前部に設けられ、この作業機械の前進時には、前記固定側キャラクタ像は前記車両前部とし、前記作業機械の後進時には、前記固定側キャラクタ像は前記車両後部とするように、運転作動モードにより表示を変化させるようにしたことを特徴とするものである。
アーティキュレート作業機械の代表的なものとしては、ホイールローダやダンプトラックがあるが、これら以外であっても、車両前部と車両後部とが屈曲可能に連結されており、車両前部または車両後部のいずれか一方に運転席が設置され、他方には作業手段を装着したものに適用可能である。
作業機械の周囲を監視するという場合、車両の後方の監視は必須のものとして、左右両側部も監視領域に含めることになる。車両前部に運転席がある場合、オペレータにとって前方視野が得られることから、必ずしも車両の前方を視野とするカメラを設置する必要はない。ただし、車両後部に運転席がある場合には、前方カメラがあった方が良いこともある。
モニタへの表示態様としては、作業機械の車両を平面状態で画像化して、モニタの画面中央に位置させ、後方及び左右の両側、さらに必要に応じて前方の画像を車両画像の周囲に合成して表示する。ここで、車両画像としては、車両そのものを実写した画像であっても良いが、車両をシンボル化したキャラクタ画像とする方が、見易さという点で望ましい。車両前部と車両後部とは、相互に左右に屈曲するものであることから、いずれか一方を固定側キャラクタ像とし、他方をこの固定側キャラクタ像に対して屈曲する可動側キャラクタ像とする。いずれを固定側キャラクタ像とするかについては、周囲監視の観点から決定される。一般的には、運転席が設けられている側を固定側キャラクタ像とすることが望ましい。特に車両後部に運転席が位置している場合には、車両後部を固定側キャラクタ像として、車両前部を可動側キャラクタ像とするのが望ましい。また、車両前部に運転席がある場合には、原則として車両前部を固定側キャラクタ像とするのが望ましいが、例えばアーティキュレートダンプトラックの場合にあっては、車両を後進させる際には、むしろ車両後部を固定側キャラクタ像とするのが望ましいこともある。従って、運転作動モードを検出して、前進時には車両前部を固定側キャラクタ像として表示し、後進時には車両後部を固定側キャラクタ像とすることもできる。
モニタに表示されている車両画像には、人や構築物等の人的物的障害が位置していると危険である領域を設定して、オペレータに注意を促すようにすると、周囲監視のために有利である。このために、車両車体像の周囲に注意範囲ガイドラインを併せて表示することができる。この場合、車両前部と車両後部とが屈曲することから、この注意範囲ガイドラインも可動側キャラクタ像の屈曲角度に応じて変化させるようにする。
車両前部と車両後部とが屈曲可能となっているので、その間が最大屈曲角度となったときでも、モニタに表示されている合成俯瞰画像に欠落部が生じないようにしなければならない。このためには、複数設けられている各カメラの視野範囲は、少なくとも相隣合う2個のカメラの視野が一部重なり合うように設定する。そして、カメラの視野の重なり合った部位はいずれか一方の画像が表示され、他方の画像のうち、重なり合う部位の画像は表示されないように設定する。
車両の前部と後部との間が屈曲可能なアーティキュレート作業機械において、各所に設けたカメラの画像から俯瞰画像を生成して、モニタに表示するに当って、屈曲する関係にある車両前部と車両後部とを、実際の屈曲姿勢を車体像表示して、この車体像表示に各カメラに基づく俯瞰画像をカメラの位置に応じるように合成した合成俯瞰画像を合成して表示することによって、オペレータにとって作業機械の周囲を監視するのに最適な監視画像をモニタに表示することができる。
アーティキュレート作業機械の一例としてのアーティキュレートホイールローダの正面図である。 図1の平面図である。 カメラ画像から俯瞰画像への変換のための原理を示す説明図である。 カメラ画像とこのカメラ画像から変換した俯瞰画像を示す説明図である。 アーティキュレートホイールローダのモニタに表示される画像を示す説明図である。 車両前部と車両後部とを屈曲させた状態を示すアーティキュレートホイールローダの平面図である。 図6の屈曲状態にしたアーティキュレートホイールローダのモニタに表示される画像を示す説明図である。 屈曲状態にしたアーティキュレートホイールローダに設定される座標系を示す説明図である。 非屈曲状態にしたアーティキュレートホイールローダの各個別俯瞰画像を合成する前の視野範囲を示す説明図である。 屈曲状態にしたアーティキュレートホイールローダの各個別俯瞰画像を合成する前の視野範囲を示す説明図である。 モニタに車両画像と合成俯瞰画像を表示するための制御装置の構成を示すブロック図である。 アーティキュレート作業機械の他の一例としてのアーティキュレートダンプトラックの正面図である。 図12の平面図である。 車両前部と車両後部とを屈曲させた状態を示すアーティキュレートダンプトラックの平面図である。 図14の屈曲状態であって、アーティキュレートダンプトラックの後進時におけるモニタの表示を示す説明図である。
以下、図面に基づいて本発明の実施の形態について説明する。まず、図1乃至図3にアーティキュレート作業機械の一例としてのアーティキュレートホイールローダの構成を示す。
図1及び図2において、1は車両前部、2は車両後部であって、車両前部1は車輪1aを有し、その前部に作業手段としてのローダバケット3が装着されており、このローダバケット3はアーム4の先端に連結ピン5を介して連結されており、バケットシリンダにより連結ピン5を中心として上下方向に回動可能となっている。また、アーム4にはアームシリンダが連結されており、このアームシリンダを作動させると、ローダバケット3が上下動することになる。車両後部2は車輪2aを有するものであり、この車両後部2には内部に運転席と各種の操作手段とを設けた運転室8が設置されており、運転室8の後部位置にはエンジンや油圧ポンプ等の機械類が収納されている建屋9が設けられている。
これら車両前部1と車両後部2との間は連結軸10により連結されており、この連結軸10を中心として、車両前部1と車両後部2とは水平方向に相対回動可能となっている。そして、運転室8内には操作手段としてのステアリングホイール(図示せず)が設けられており、このステアリングホイールを操作することによって、しかもその操作量に応じて、連結軸10を中心として車両前部1と車両後部2との間が屈曲することになる。
アーティキュレートホイールローダには、周囲を監視するために、複数のカメラが設置されている。図2に複数のカメラの配置レイアウトの一例を示す。図示したものにあっては、車両前部1の後方の位置であって、左右両側部に前部左側カメラ11aと前部右側カメラ11bとが設けられている。また、車両後部2には、後方カメラ11cと、後部左側カメラ11d及び後部右側カメラ11eが設けられている。これら各カメラ11a〜11eは、それぞれ車体に装着されており、その視野方向は斜め下方となっている。そして、カメラ11a〜11eにより撮影したカメラ画像から、各カメラ11a〜11eの画角範囲の俯瞰画像に変換されることになる。
即ち、図3に示したように、所定の高さ位置にカメラ11を配置して、角度αをもって斜め下方に対物レンズの光軸CAを向けた状態で撮影すると、カメラ画像Pが得られる。この角度θを持ったカメラ画像Pから、同図に仮想線で示したように、仮想視点VFからカメラ画像Pに対して光軸VAが垂直になるように座標変換した画像を作成する。これによって、角度αをもった斜め上方からのカメラ画像を俯瞰画像に変換することができる。例えば、図4(a)に示したカメラ画像(歪み補正等の画像補正を行った後の画像)を座標変換すると、図4(b)に示したような俯瞰画像が得られることになる。
このようにして変換された俯瞰画像は、アーティキュレートホイールローダの車体像画像と共に、運転室8内に設けたモニタ12に表示される。このモニタ12の表示の一態様を図5に示す。図中において、1Cは車両前部1の車体像をキャラクタ化した前部のキャラクタ像であり、2Cは車両後部2の車体像をキャラクタ化した後部のキャラクタ像であって、これらによって車両画像VCが構成される。そして、11A〜11Eは、それぞれカメラ11a〜11eで取得したカメラ画像を座標変換して得られた個別俯瞰画像であって、これらを合成した合成俯瞰画像として、車両画像と共にモニタ12に表示される。さらに、図中においてLは車両画像VCの周囲に設定される注意範囲ガイドラインであって、この注意範囲ガイドラインLは、内部に人や構築物等からなる人的物的障害が位置していると、危険であるとして設定された領域の境界部である。
ところで、アーティキュレートホイールローダにあっては、車両前部1と車両後部2との間は連結軸10で連結されており(図1参照)、図6に示したように、車両前部1と車両後部2との間が連結軸10を中心として左右に屈曲可能となっている。従って、車両の走行時や作業時において、アーティキュレートホイールローダが屈曲姿勢を取っていると、モニタ12の車両画像表示もこれに合わせて、図7に示した屈曲状態とする。
ここで、アーティキュレートホイールローダにあっては、運転室8は車両後部2側に位置しているので、モニタ12上では、車両後部2を所定位置に固定した固定側キャラクタ像2Cとし、車両前部1をこの固定側キャラクタ像2Cに対して屈曲する可動側キャラクタ像1Cとして表示される。そして、個別俯瞰画像11A〜11Eのうち、車両後部2に装着したカメラ11c,11d及び11eに基づく個別俯瞰画像11C〜11Eが固定的に表示され、車両前部1に装着したカメラ11a,11bに基づく個別俯瞰画像11A,11Bを屈曲角度に応じて変化させるようにして表示する。
このためには、図8に示したように、車両後部2と車両前部1との間の連結軸10を中心とした座標系Σとし、また車両前部1及び車両後部2の座標系もΣf,Σgとしてそれぞれモニタの画面上に設定する。ここで、車両後部2は固定側キャラクタ像2Cとして表示されるので、車両後部2の座標軸Σgは固定される。角度θ分だけステアリング操作が行われると、車両前部1と車両後部2との間の角度が変化する。つまり、座標系Σと座標系Σfとがステアリング角度θだけ回転することになる。従って、モニタ12に車両画像VCを表示するに当って、これら車両前部1と車両後部2とを表示する際の寸法と、ステアリング角度θとに基づいて、図7に示されている屈曲状態の車両画像VCが生成されて、合成俯瞰画像と共にモニタ12に表示される。
カメラ11a〜11eを搭載した車両前部1と車両後部2とからなるアーティキュレートホイールローダがモニタ12に表示される際には、各個別俯瞰画像11A〜11Eが必ず部分的に重畳するように、カメラ11a〜11eの位置と画角とが設定されている。このことは、図9に示した非屈曲状態であっても、また図10に示した屈曲状態としたときの最大屈曲状態であっても、同様とする。従って、図9及び図10には、これら各個別俯瞰画像11A〜11Eの実際の視野範囲をFA〜FEとなる。そして、合成俯瞰画像を作成するには、画像信号の処理に当って、個別俯瞰画像の重畳する部位については、いずれかの画像を優先し、他方の画像は部分的に非表示状態とする。
車両後部2はモニタ12上では固定側キャラクタ像2Cとなり、車両前部1では可動側キャラクタ像1Cとなっている。従って、本実施の形態では、モニタ12上での表示エリアは、固定側キャラクタ像2C側である個別俯瞰画像11C〜11Eの各表示エリアは固定的なものとなし、可動側キャラクタ像1Cの個別俯瞰画像11A,11Bの各表示エリアは変化するように設定している。このために、図9の非屈曲状態から図10の屈曲状態に向けてステアリングを行ったとすると、合成俯瞰画像としては、図5に示した状態から、図7に示したように、左側の個別俯瞰画像11Aの表示エリアは減少し、右側の個別俯瞰画像11Bは表示エリアが増大するようになる。その結果、屈曲の如何を問わず、アーティキュレートホイールローダの周囲は、オペレータが視認可能な前方視野を除いた全体に監視画像が表示される。
以上のように、モニタ12に車両画像VCと合成俯瞰画像とを合成するようにして表示させるために、図11に示した回路構成の制御装置20が設けられる。この制御装置20には、カメラ11a〜11eで取得したカメラ画像信号が取り込まれるようになっており、これらのカメラ画像信号は、画像補正手段21により歪補正等の必要な画像補正を行うようになっている。そして、画像補正手段21には画像変換手段22が接続されており、各カメラ画像信号は、この画像変換手段22によって、光軸が垂直になるように座標変換した俯瞰画像信号に変換される。
このようにして個別俯瞰画像11A〜11Eが生成されるが、これら個別俯瞰画像11A〜11Eは、画像合成手段23によって、それぞれの表示エリアに表示されるように信号処理が行われる。アーティキュレートホイールローダは車両前部1と車両後部2とは屈曲可能なものであるから、各カメラ11a〜11eの位置とアーティキュレートホイールローダの姿勢状態に基づいて、各個別俯瞰画像11A〜11Eの表示エリアが割り当てられる。このために、制御装置20にはカメラ位置算出手段24が設けられている。また、制御装置20には、アーティキュレートホイールローダの車体情報伝達手段25を介してステアリング角度θに関する情報が入力されて、このカメラ位置算出手段24にこの情報が取り込まれて、またカメラ位置記憶手段26からの非屈曲状態時における各カメラ11a〜11eの位置に関する情報が得られるようになっており、これら各カメラ11a〜11eの原点位置と車両前部1と車両後部2との間の屈曲角度とに基づいて、モニタ12に表示する際において、各個別俯瞰画像11A〜11Eに割り当てられる表示エリアが決定されることになり、これによって合成俯瞰画像が生成されることになる。
また、モニタ12上において、車両前部1の前部キャラクタ画像1Cと車両後部2の後部キャラクタ画像2Cとの相対位置関係は、屈曲変化することから、車両画像VCをモニタ12に表示する際には、車体情報伝達手段25からのステアリング角度に関する情報に基づいて得られた車両前部1と車両後部2との屈曲角度が車両画像生成手段27に取り込まれて、車両画像VCが生成される。そして、前述した合成俯瞰画像と車両画像VCとが表示画像生成手段28に入力されて、この表示画像生成手段28から送信される画像信号に基づいてモニタ12に周辺監視画像が表示されることになる。
以上のように、アーティキュレートホイールローダにおいて、車両後部2の運転室8内でオペレータが機械の操作を行う際、特に走行時にモニタ12を視認することによって、周囲に人や障害物等といった人的物的障害が存在するか否かを確認することができる。車両画像VCの周囲に合成俯瞰画像が示され、しかもこの合成俯瞰画像に注意範囲ガイドラインLが表示されていることから、モニタ12の視認により人的物的障害の方向や、人的物的障害までの距離を正確に把握できることになり、作業の安全確保や作業の効率向上等が図られる。
ここで、ホイールローダはアーティキュレートのものであり、車両前部1と車両後部2とは屈曲可能に連結されているから、モニタ12における表示もこの屈曲状態を反映させる必要がある。オペレータは車両後部2の運転室8内に位置しており、作業機構は車両前部1に備えていることから、車両前部1及び作業機構を構成するローダバケット3は運転室8の内部から目視できるので、モニタ12を格別見なくても、車両の前進及び作業機構を駆動することにより実行される作業については、安全で効率良く行うことができる。
一方、アーティキュレートホイールローダを屈曲操作する際や、後進させる際には、さらに作業者等が車両に近付く方向に移動していたりすると、後方及び側方の安全確認を行う必要がある。このときには、オペレータが操作を行っている運転室8が設けられている車両後部2を固定側キャラクタ像2C としているので、車両の後進時における後方の安全確認及び屈曲操作時における周囲の安全確認を円滑に行うことができ、オペレータが状況を的確に把握することができ、モニタ12を目視する上で違和感が生じるようなことはない。
次に、アーティキュレート作業機械の他の例として、アーティキュレートダンプトラックの正面図を図12に、また平面図を図13に示す。さらに、図14は屈曲状態の平面図である。
これらの図から明らかなように、車両前部30は運転室31を含むものであり、車両後部32には荷台33が設けられている。この荷台33は油圧シリンダ34により後方に向けて傾動可能となっている。車両前部30には1組の車輪35が設けられ、車両後部32には2組の車輪36が設けられている。車両前部30と、車両後部32を構成するフレーム37との間は連結軸38により連結されており、図13に示した非屈曲状態と、図14に示した屈曲状態とに変位可能となっている。
車両前部30の連結軸38による車両後部32への連結部の近傍位置における左右両側部には、カメラ39a,39bが取り付けられている。また、車両後部32については、フレーム37の後部位置と、前後の車輪36,36間の左右両側位置とに、それぞれカメラ39c,39d,39eが設けられている。そして、これら各カメラ39a〜39eにより撮影したカメラ画像は、前述した第1の実施の形態と同様、上方視点となるように座標変換して、個別俯瞰画像39A〜39Eに変換される。そして、これらの個別俯瞰画像39A〜39Eを合成した合成俯瞰画像が、図15に示したように、アーティキュレートダンプトラックの車体像画像と共にモニタ40に表示されることになる。なお、図15には、アーティキュレートダンプトラックの屈曲状態が示されている。
モニタ40においては、相互に屈曲する車両前部30と車両後部32とのいずれを固定側キャラクタ像とし、いずれを可動側キャラクタ像とするかについては、運転室31を基準とする場合には、車両前部30を固定側キャラクタ像とし、車両後部32を可動側キャラクタ像とする。ただし、車両後部32は車両前部30より長尺のものであり、しかも運転室31からは後方視野は実質的に得られないことから、後進時には車両後部32を固定側キャラクタ像としてモニタ40に表示するように構成することもできる。図15においては、車両後部32を固定側キャラクタ像32C、車両前部30を可動側キャラクタ像30Cとして示している。
アーティキュレートダンプトラックが後進する際には、屈曲状態であれ、非屈曲状態であれ、車両後部32の後方位置に向けて移動することになるので、この車両後部32の後方位置を固定的に表示することによって、後方視野内において、人や障害物等といった人的物的障害が存在するか否かの確認を正確に行えるようになる。ただし、アーティキュレートダンプトラックの前進時には、運転室31が設けられている車両前部30が固定側キャラクタ像として表示するのが望ましい。従って、アーティキュレートダンプトラックの前進時と後進時との間で、つまり運転作動モードに応じて、固定側キャラクタ像を変えるようにしても良い。図11に示したように、車両画像生成手段27及びカメラ位置算出手段24には、車体情報伝達手段25が接続されており、この車体情報伝達手段25からはステアリング角度に関する情報だけでなく、各種の情報も取得できるようになっているので、車両が前進しているか、後進しているかについての情報を車体情報伝達手段25から取得して、この信号に基づいてモニタ40の表示態様を変化させることができる。
1,30 車両前部
2、32 車両後部
3 ローダバケット
8 運転室
10,38 連結軸
11a〜11e,39a〜39e カメラ
12,40 モニタ
20 制御装置
21 画像補正手段
22 画像変換手段
23 画像合成手段
24 カメラ位置算出手段
25 車体情報伝達手段
27 車両画像生成手段
28 表示画像生成手段
33 荷台
1C,2C,30C,32C キャラクタ画像
11A〜11E,39A〜39E 個別俯瞰画像

Claims (3)

  1. 車両前部と車両後部とを連結軸により左右に屈曲可能に連結したアーティキュレート作業機械に設けられる作業機械の周囲監視装置において、
    前記車両前部に設置した1または複数のカメラと、
    前記車両後部に設置され、車両の後方位置を視野とするカメラを含む1または複数のカメラと、
    前記作業機械の周囲監視画像を表示するためのモニタと、
    前記連結軸を中心とした前記車両前部と前記車両後部との間の屈曲角度に基づいて、前記各カメラの位置を算出するカメラ位置算出部と、
    前記各カメラで取得したカメラ画像を上方視点となるように視点変換して、それぞれ俯瞰画像とする画像変換手段と、
    前記各カメラにより撮影した各個別俯瞰画像を、前記カメラ位置算出部により算出されたそれぞれの位置関係となるように合成した合成俯瞰画像を生成して、前記モニタにこの合成俯瞰画像を表示するための画像合成手段と、
    前記合成俯瞰画像を、前記車両前部または前記車両後部のいずれか一方を固定した固定側キャラクタ像とし、他方を前記屈曲角度に基づいて前記固定側キャラクタ像に対して相対回動する可動側キャラクタ像とした車両画像と共に前記モニタに表示する表示画像生成手段とを備え、
    前記作業機械の運転席は前記車両前部に設けられ、この作業機械の前進時には、前記固定側キャラクタ像は前記車両前部とし、前記作業機械の後進時には、前記固定側キャラクタ像は前記車両後部とするように、運転作動モードにより表示を変化させるようにしたこと
    を特徴とする作業機械の周囲監視装置。
  2. 前記モニタには、車両画像の周囲に注意範囲ガイドラインを表示するようになし、前記屈曲角度が変化したときに、この注意範囲ガイドラインを屈曲角度に相応する角度分だけ変化させる構成としたことを特徴とする請求項1に記載の作業機械の周囲監視装置。
  3. 前記車両前部及び前記車両後部に設けた各カメラは、それぞれの視野が前記屈曲角度の全範囲にわたって少なくとも2個のカメラの視野が部分的に重なり合う位置に配置する構成としたことを特徴とする請求項1記載の作業機械の周囲監視装置。
JP2013515049A 2011-05-13 2012-04-13 作業機械の周囲監視装置 Expired - Fee Related JP5779244B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013515049A JP5779244B2 (ja) 2011-05-13 2012-04-13 作業機械の周囲監視装置

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011107815 2011-05-13
JP2011107815 2011-05-13
JP2013515049A JP5779244B2 (ja) 2011-05-13 2012-04-13 作業機械の周囲監視装置
PCT/JP2012/060104 WO2012157379A1 (ja) 2011-05-13 2012-04-13 作業機械の周囲監視装置

Publications (2)

Publication Number Publication Date
JPWO2012157379A1 JPWO2012157379A1 (ja) 2014-07-31
JP5779244B2 true JP5779244B2 (ja) 2015-09-16

Family

ID=47176719

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013515049A Expired - Fee Related JP5779244B2 (ja) 2011-05-13 2012-04-13 作業機械の周囲監視装置

Country Status (7)

Country Link
US (1) US20140088824A1 (ja)
EP (1) EP2712969A4 (ja)
JP (1) JP5779244B2 (ja)
KR (1) KR20140043374A (ja)
CN (1) CN103547747A (ja)
AU (1) AU2012257053A1 (ja)
WO (1) WO2012157379A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10668854B2 (en) 2017-02-09 2020-06-02 Komatsu Ltd. Work vehicle and display device
WO2024085732A1 (ko) * 2022-10-21 2024-04-25 현대두산인프라코어 주식회사 건설기계의 제어 시스템 및 방법

Families Citing this family (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2447672B (en) 2007-03-21 2011-12-14 Ford Global Tech Llc Vehicle manoeuvring aids
WO2011158955A1 (ja) * 2010-06-18 2011-12-22 日立建機株式会社 作業機械の周囲監視装置
US9969428B2 (en) 2011-04-19 2018-05-15 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
US9854209B2 (en) * 2011-04-19 2017-12-26 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US9434414B2 (en) 2011-04-19 2016-09-06 Ford Global Technologies, Llc System and method for determining a hitch angle offset
US9683848B2 (en) 2011-04-19 2017-06-20 Ford Global Technologies, Llc System for determining hitch angle
US10196088B2 (en) 2011-04-19 2019-02-05 Ford Global Technologies, Llc Target monitoring system and method
US9500497B2 (en) 2011-04-19 2016-11-22 Ford Global Technologies, Llc System and method of inputting an intended backing path
US9723274B2 (en) 2011-04-19 2017-08-01 Ford Global Technologies, Llc System and method for adjusting an image capture setting
US9506774B2 (en) 2011-04-19 2016-11-29 Ford Global Technologies, Llc Method of inputting a path for a vehicle and trailer
US9555832B2 (en) 2011-04-19 2017-01-31 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US9374562B2 (en) 2011-04-19 2016-06-21 Ford Global Technologies, Llc System and method for calculating a horizontal camera to target distance
US9926008B2 (en) 2011-04-19 2018-03-27 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
US9513103B2 (en) 2011-04-19 2016-12-06 Ford Global Technologies, Llc Hitch angle sensor assembly
US9373044B2 (en) 2011-07-25 2016-06-21 Ford Global Technologies, Llc Trailer lane departure warning system
US9598836B2 (en) * 2012-03-29 2017-03-21 Harnischfeger Technologies, Inc. Overhead view system for a shovel
US9592851B2 (en) 2013-02-04 2017-03-14 Ford Global Technologies, Llc Control modes for a trailer backup assist system
US9511799B2 (en) 2013-02-04 2016-12-06 Ford Global Technologies, Llc Object avoidance for a trailer backup assist system
JP6095592B2 (ja) 2014-02-17 2017-03-15 日立建機株式会社 油圧ショベルの監視画像表示装置
US9963004B2 (en) 2014-07-28 2018-05-08 Ford Global Technologies, Llc Trailer sway warning system and method
US9517668B2 (en) 2014-07-28 2016-12-13 Ford Global Technologies, Llc Hitch angle warning system and method
US9437055B2 (en) * 2014-08-13 2016-09-06 Bendix Commercial Vehicle Systems Llc Cabin and trailer body movement determination with camera at the back of the cabin
US10686976B2 (en) 2014-08-18 2020-06-16 Trimble Inc. System and method for modifying onboard event detection and/or image capture strategy using external source data
US10161746B2 (en) 2014-08-18 2018-12-25 Trimble Navigation Limited Systems and methods for cargo management
US9714037B2 (en) 2014-08-18 2017-07-25 Trimble Navigation Limited Detection of driver behaviors using in-vehicle systems and methods
EP3020868B1 (en) * 2014-11-14 2020-11-04 Caterpillar Inc. Machine of a kind comprising a body and an implement movable relative to the body with a system for assisting a user of the machine
US9533683B2 (en) 2014-12-05 2017-01-03 Ford Global Technologies, Llc Sensor failure mitigation system and mode management
US9522677B2 (en) 2014-12-05 2016-12-20 Ford Global Technologies, Llc Mitigation of input device failure and mode management
US9607242B2 (en) 2015-01-16 2017-03-28 Ford Global Technologies, Llc Target monitoring system with lens cleaning device
US9667875B2 (en) 2015-01-21 2017-05-30 Caterpillar Inc. Vision system and method of monitoring surroundings of machine
US9522699B2 (en) 2015-02-05 2016-12-20 Ford Global Technologies, Llc Trailer backup assist system with adaptive steering angle limits
US9616923B2 (en) 2015-03-03 2017-04-11 Ford Global Technologies, Llc Topographical integration for trailer backup assist system
DE102015002692A1 (de) * 2015-03-04 2016-09-08 Dynapac Gmbh Straßenbaumaschine und Verfahren zum Betreiben einer selbstfahrenden Straßenbaumaschine
US9804022B2 (en) 2015-03-24 2017-10-31 Ford Global Technologies, Llc System and method for hitch angle detection
WO2016174754A1 (ja) 2015-04-28 2016-11-03 株式会社小松製作所 作業機械の周辺監視装置及び作業機械の周辺監視方法
US10204159B2 (en) 2015-08-21 2019-02-12 Trimble Navigation Limited On-demand system and method for retrieving video from a commercial vehicle
WO2017036526A1 (en) * 2015-09-02 2017-03-09 Volvo Truck Corporation A device and a method for reversing an articulated vehicle combination
US9896130B2 (en) 2015-09-11 2018-02-20 Ford Global Technologies, Llc Guidance system for a vehicle reversing a trailer along an intended backing path
US10611407B2 (en) 2015-10-19 2020-04-07 Ford Global Technologies, Llc Speed control for motor vehicles
US10384607B2 (en) 2015-10-19 2019-08-20 Ford Global Technologies, Llc Trailer backup assist system with hitch angle offset estimation
JP2017081238A (ja) * 2015-10-23 2017-05-18 株式会社小松製作所 表示システムおよび作業車両
US9836060B2 (en) 2015-10-28 2017-12-05 Ford Global Technologies, Llc Trailer backup assist system with target management
US10017115B2 (en) 2015-11-11 2018-07-10 Ford Global Technologies, Llc Trailer monitoring system and method
US9796228B2 (en) 2015-12-17 2017-10-24 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system
US9934572B2 (en) 2015-12-17 2018-04-03 Ford Global Technologies, Llc Drawbar scan solution for locating trailer hitch point
US9610975B1 (en) 2015-12-17 2017-04-04 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system
US9827818B2 (en) 2015-12-17 2017-11-28 Ford Global Technologies, Llc Multi-stage solution for trailer hitch angle initialization
US10155478B2 (en) 2015-12-17 2018-12-18 Ford Global Technologies, Llc Centerline method for trailer hitch angle detection
US9798953B2 (en) 2015-12-17 2017-10-24 Ford Global Technologies, Llc Template matching solution for locating trailer hitch point
US10011228B2 (en) 2015-12-17 2018-07-03 Ford Global Technologies, Llc Hitch angle detection for trailer backup assist system using multiple imaging devices
WO2017122294A1 (ja) * 2016-01-13 2017-07-20 株式会社ソシオネクスト 周囲監視装置、画像処理方法、及び画像処理プログラム
US10005492B2 (en) 2016-02-18 2018-06-26 Ford Global Technologies, Llc Trailer length and hitch angle bias estimation
JP6002873B1 (ja) * 2016-03-28 2016-10-05 株式会社小松製作所 評価装置及び評価方法
US10590629B2 (en) * 2016-03-29 2020-03-17 Komatsu Ltd. Working vehicle
US10112646B2 (en) 2016-05-05 2018-10-30 Ford Global Technologies, Llc Turn recovery human machine interface for trailer backup assist
US10106193B2 (en) 2016-07-01 2018-10-23 Ford Global Technologies, Llc Enhanced yaw rate trailer angle detection initialization
US10046800B2 (en) 2016-08-10 2018-08-14 Ford Global Technologies, Llc Trailer wheel targetless trailer angle detection
JP6886258B2 (ja) * 2016-08-31 2021-06-16 株式会社小松製作所 ホイールローダおよびホイールローダの制御方法
JP2018050119A (ja) * 2016-09-20 2018-03-29 国立大学法人 東京大学 作業車両の表示システム
US10222804B2 (en) 2016-10-21 2019-03-05 Ford Global Technologies, Llc Inertial reference for TBA speed limiting
US10594934B2 (en) * 2016-11-17 2020-03-17 Bendix Commercial Vehicle Systems Llc Vehicle display
DE102016223389A1 (de) * 2016-11-25 2018-05-30 Conti Temic Microelectronic Gmbh Bildverarbeitungssystem und bildverarbeitungsverfahren
EP3553234A4 (en) * 2016-12-06 2020-03-18 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. CONSTRUCTION MACHINE
JP6662762B2 (ja) * 2016-12-19 2020-03-11 株式会社クボタ 作業車
US20180201132A1 (en) * 2017-01-13 2018-07-19 Deere & Company Mobile machine-user protocol system and method
EP3226553B1 (en) * 2017-02-09 2018-12-12 Komatsu Ltd. Work vehicle periphery monitoring system, work vehicle, and work vehicle periphery monitoring method
JP6819462B2 (ja) * 2017-05-30 2021-01-27 コベルコ建機株式会社 作業機械
JP6822427B2 (ja) * 2017-06-09 2021-01-27 株式会社デンソー 地図変化点検出装置
US10710585B2 (en) 2017-09-01 2020-07-14 Ford Global Technologies, Llc Trailer backup assist system with predictive hitch angle functionality
JP7103796B2 (ja) 2018-01-31 2022-07-20 株式会社小松製作所 作業機械
US10883256B2 (en) * 2018-05-25 2021-01-05 Deere & Company Object responsive control system for a work machine
JP7220027B2 (ja) * 2018-06-14 2023-02-09 フォルシアクラリオン・エレクトロニクス株式会社 運転支援装置
JP7197315B2 (ja) * 2018-09-14 2022-12-27 株式会社小松製作所 ホイールローダの表示システムおよびその制御方法
US11077795B2 (en) 2018-11-26 2021-08-03 Ford Global Technologies, Llc Trailer angle detection using end-to-end learning
US11592813B2 (en) * 2018-12-17 2023-02-28 Robert Bosch Gmbh Method and controller for the situational transmission of surroundings information of a vehicle
JP7160701B2 (ja) * 2019-01-23 2022-10-25 株式会社小松製作所 作業機械のシステム及び方法
US10829046B2 (en) 2019-03-06 2020-11-10 Ford Global Technologies, Llc Trailer angle detection using end-to-end learning
JP7280089B2 (ja) * 2019-03-29 2023-05-23 日立建機株式会社 ホイールローダ
JP2020173524A (ja) * 2019-04-09 2020-10-22 清水建設株式会社 監視システム
US10949685B2 (en) 2019-07-22 2021-03-16 Caterpillar Inc. Excluding a component of a work machine from a video frame based on motion information
JP7055158B2 (ja) * 2020-02-13 2022-04-15 株式会社クボタ 作業車
JP7437195B2 (ja) 2020-03-13 2024-02-22 株式会社小松製作所 モータグレーダおよび表示制御方法
JP7428052B2 (ja) * 2020-03-31 2024-02-06 コベルコ建機株式会社 作業機械の周囲検知装置
KR102362953B1 (ko) * 2020-06-04 2022-02-16 (주)에이치브레인 Fpga 기반 뉴로머신과 svm을 이용한 굴삭기 안전시스템
US11575810B2 (en) * 2020-09-09 2023-02-07 Deere & Company Auto-positioning camera for drawn implements
US11653587B2 (en) * 2020-09-17 2023-05-23 Deere & Company System and method for presenting the surroundings of an agricultural implement
KR20220102804A (ko) * 2021-01-14 2022-07-21 현대두산인프라코어(주) 건설기계의 제어 시스템 및 방법
JP2023102618A (ja) * 2022-01-12 2023-07-25 株式会社小松製作所 作業機械、作業機械を制御するための方法、及びシステム
JP2023144981A (ja) * 2022-03-28 2023-10-11 キヤノン株式会社 画像処理装置、画像処理方法、及びコンピュータプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003235036A (ja) * 2002-02-07 2003-08-22 Nissan Motor Co Ltd 車両用画像表示装置
WO2009031400A1 (ja) * 2007-09-03 2009-03-12 Sanyo Electric Co., Ltd. 運転支援システム及び連結車両
JP2009107602A (ja) * 2007-11-01 2009-05-21 Komatsu Ltd アーティキュレート式建設機械

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10035223A1 (de) * 2000-07-20 2002-01-31 Daimler Chrysler Ag Vorrichtung und Verfahren zur Überwachung der Umgebung eines Objekts
JP4332027B2 (ja) * 2003-12-25 2009-09-16 キャタピラージャパン株式会社 表示器制御システム
JP2006256544A (ja) * 2005-03-18 2006-09-28 Aisin Seiki Co Ltd 後退運転支援装置
JP5054294B2 (ja) * 2005-08-05 2012-10-24 株式会社小松製作所 作業用車両に搭載される表示装置、及び同表示装置の表示方法
DE102006037600B4 (de) * 2006-08-10 2010-03-04 Daimler Ag Verfahren zur auflösungsabhängigen Darstellung der Umgebung eines Kraftfahrzeugs
JP4996928B2 (ja) * 2007-01-05 2012-08-08 日立建機株式会社 作業機械の周囲監視装置
JP4847913B2 (ja) * 2007-03-30 2011-12-28 日立建機株式会社 作業機械周辺監視装置
KR101078341B1 (ko) * 2009-02-12 2011-11-01 볼보 컨스트럭션 이큅먼트 에이비 후방 감시수단이 구비된 건설장비
JP5124671B2 (ja) * 2011-06-07 2013-01-23 株式会社小松製作所 作業車両の周辺監視装置
JP5124672B2 (ja) * 2011-06-07 2013-01-23 株式会社小松製作所 作業車両の周辺監視装置
CN103080990B (zh) * 2011-06-07 2015-04-01 株式会社小松制作所 作业车辆的周边监视装置
JP5781978B2 (ja) * 2012-05-22 2015-09-24 株式会社小松製作所 ダンプトラック
US9446713B2 (en) * 2012-09-26 2016-09-20 Magna Electronics Inc. Trailer angle detection system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003235036A (ja) * 2002-02-07 2003-08-22 Nissan Motor Co Ltd 車両用画像表示装置
WO2009031400A1 (ja) * 2007-09-03 2009-03-12 Sanyo Electric Co., Ltd. 運転支援システム及び連結車両
JP2009107602A (ja) * 2007-11-01 2009-05-21 Komatsu Ltd アーティキュレート式建設機械

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10668854B2 (en) 2017-02-09 2020-06-02 Komatsu Ltd. Work vehicle and display device
WO2024085732A1 (ko) * 2022-10-21 2024-04-25 현대두산인프라코어 주식회사 건설기계의 제어 시스템 및 방법

Also Published As

Publication number Publication date
KR20140043374A (ko) 2014-04-09
JPWO2012157379A1 (ja) 2014-07-31
EP2712969A4 (en) 2015-04-29
WO2012157379A1 (ja) 2012-11-22
AU2012257053A1 (en) 2013-11-21
US20140088824A1 (en) 2014-03-27
EP2712969A1 (en) 2014-04-02
CN103547747A (zh) 2014-01-29

Similar Documents

Publication Publication Date Title
JP5779244B2 (ja) 作業機械の周囲監視装置
JP6427597B2 (ja) 作業機械の周辺監視装置及び作業機械の周辺監視方法
JP5269026B2 (ja) 作業機械の周囲監視装置
US9956915B2 (en) Dump truck periphery monitoring apparatus
WO2012164712A1 (ja) 作業機械の周囲監視装置
JP6071786B2 (ja) 作業機械の周囲監視装置
JP5546427B2 (ja) 作業機械の周囲監視装置
JP5775283B2 (ja) 作業機械のモニタ装置
WO2016013490A1 (ja) 旋回式作業機の周囲表示装置
WO2013038874A1 (ja) 作業機の周囲監視装置
WO2014045456A1 (ja) 作業車両用周辺監視システム及び作業車両
JP2008312004A (ja) カメラシステム及び機械装置
JP2013253402A (ja) 作業機械の周囲監視装置
JP2012252675A (ja) ダンプトラック
JP2014161087A (ja) 作業車両用周辺監視システム及び作業車両
WO2019210931A1 (en) System and method for selectively displaying image data in a working machine
JP6012680B2 (ja) ダンプトラック
US20240052602A1 (en) Work machine surroundings monitoring system, work machine, and work machine surroundings monitoring method
JP2015226146A (ja) 3次元モニタ装置
WO2020080294A1 (ja) 油圧ショベル
JP6188858B2 (ja) 作業機械の周囲監視装置
WO2022195988A1 (ja) 遠隔操作支援サーバおよび遠隔操作支援システム
JP7145137B2 (ja) 作業機械の制御装置
KR20240056262A (ko) 건설기계의 제어 시스템 및 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150528

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150707

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150710

R150 Certificate of patent or registration of utility model

Ref document number: 5779244

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees