JP6802008B2 - 建設機械 - Google Patents

建設機械 Download PDF

Info

Publication number
JP6802008B2
JP6802008B2 JP2016164312A JP2016164312A JP6802008B2 JP 6802008 B2 JP6802008 B2 JP 6802008B2 JP 2016164312 A JP2016164312 A JP 2016164312A JP 2016164312 A JP2016164312 A JP 2016164312A JP 6802008 B2 JP6802008 B2 JP 6802008B2
Authority
JP
Japan
Prior art keywords
image
eye view
view image
plane
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016164312A
Other languages
English (en)
Other versions
JP2018033015A (ja
Inventor
徹 今野
徹 今野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Caterpillar SARL
Original Assignee
Caterpillar SARL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Caterpillar SARL filed Critical Caterpillar SARL
Priority to JP2016164312A priority Critical patent/JP6802008B2/ja
Priority to US15/673,627 priority patent/US10186017B2/en
Priority to DE102017119422.3A priority patent/DE102017119422A1/de
Publication of JP2018033015A publication Critical patent/JP2018033015A/ja
Application granted granted Critical
Publication of JP6802008B2 publication Critical patent/JP6802008B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • G06T3/053
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/30Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom
    • E02F3/32Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom working downwardly and towards the machine, e.g. with backhoes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle

Description

本発明は、機体の周囲を撮影する複数の監視カメラと、各監視カメラによって撮影されたカメラ画像を表示するモニタとを備える建設機械に関する。
建設機械の代表例である油圧ショベルは、下部走行体及び下部走行体に搭載された上部旋回体から構成される機体と、上部旋回体に装着された作業腕装置とを備える。運転員が搭乗するキャブは、上部旋回体の左前部分に配置されることが一般的であるので、運転員は、機体の前方及び機体の左側方については比較的広い範囲を視認することができる一方、機体の後方及び機体の右側方についてはほとんど視認することができない。このため、近年の油圧ショベルには、機体の後方を撮影する後方監視カメラを機体の後部に備えると共に、機体の右側方を撮影する右側方監視カメラを機体の右側部に備え、各監視カメラによって撮影されたカメラ画像がキャブ内のモニタに表示されるものが存在する。これによって運転員は、機体の後方及び機体の右側方に障害物や他の作業員等が存在するか否か等の安全確認をモニタを通じて行うことができる。また、カメラ画像のモニタ表示については、各カメラ画像がそのままモニタに並べて表示されるもののほか、各カメラ画像を合成することにより機体の上方から機体周囲を俯瞰した合成俯瞰画像がモニタに表示されるものが存在する(たとえば特許文献1参照。)。
特開2012−74929号公報
機体周囲の画像(特に機体周囲の合成俯瞰画像)がモニタに表示される建設機械では、障害物や他の作業員等をモニタのカメラ画像から運転員が確実に認識できるようにすることが課題となっている。この課題を解決するためには、従来よりも大型のモニタを用いてカメラ画像をモニタに大きく表示することが考えられる。しかし、キャブ内のモニタは運転席の前方に配置されるので、モニタを大型化すると運転員の前方視認性が悪化する懸念があり、モニタの大型化には限界がある。
他方、特許文献1には、合成俯瞰画像のうち任意の領域のみが拡大されてモニタに表示される技術が開示されている。しかし、特許文献1に開示された技術では、合成俯瞰画像のうち任意の領域以外の領域に障害物や他の作業員等が存在するか否かを、任意の領域のみが拡大された拡大表示からでは運転員は認識することはできない。また、特許文献1に開示された技術では、拡大表示又は拡大表示の解除のために運転員が手動でモニタを操作することを要するので、拡大表示又は拡大表示の解除のたびに運転員は操作レバーから手を離さなければならず、したがって作業性に劣る。
上記事実に鑑みてなされた本発明の課題は、モニタを大型化することなく、機体の周囲に障害物や他の作業員等が存在するか否かを運転員が確実に認識することができる建設機械を提供することである。
上記課題を解決するために本発明が提供するのは以下の建設機械である。すなわち、機体の周囲を撮影する複数の監視カメラと、前記複数の監視カメラのそれぞれによって撮影された複数のカメラ画像を合成して合成俯瞰画像を生成し、そしてまた1以上の区画ラインによって前記合成俯瞰画像を複数の領域に区画して、前記複数の領域のうち所定領域のサイズを拡大すると共に前記複数の領域のうち前記所定領域以外の領域のサイズを前記所定領域の拡大に応じて変更することにより前記合成俯瞰画像と同サイズの変換画像を生成する画像処理手段と、前記合成俯瞰画像と前記変換画像とを選択的に表示するモニタとを備え、前記合成俯瞰画像の中央部には前記機体の平面図形が配置され、前記区画ラインは、前記平面図形の前後方向片側端部を通って左右方向に延びる第1区画ラインと、前記平面図形の左右方向片側端部を通って前後方向に延びる第2区画ラインとから構成され、前記所定領域は前記平面図形を含む領域である建設機械である。
記機体の左前部分にはキャブが配置され、前記第1区画ラインは前記平面図形の前側端部を通り、前記第2区画ラインは前記平面図形の左側端部を通るのが好適である。
本発明が提供する建設機械では、所定領域が拡大された変換画像がモニタに表示されることによって、モニタを大型化することなく、変換画像において拡大された所定領域に相当する実際の作業領域に障害物や他の作業員等が存在するか否かを運転員が確実に認識することができる。また本発明の建設機械では、サイズが変更されているものの所定領域以外の領域も変換画像に含まれているので、変換画像において所定領域以外の領域に相当する実際の作業領域についても障害物や他の作業員等が存在するか否かを運転員が認識することができる。
本発明に従って構成された油圧ショベルの側面図。 図1に示す油圧ショベルの平面図(作業腕装置を省略してある。)。 図1に示すキャブの内部の斜視図。 図1に示す油圧ショベルの電気的構成の一部を示すブロック図。 (a)合成俯瞰画像を示す模式図、(b)変換画像を示す模式図。
以下、本発明に従って構成された建設機械の実施形態について、代表的な建設機械である油圧ショベルを例に挙げ、図面を参照しつつ説明する。
図1において全体を符号2で示す油圧ショベルは、下部走行体4及び下部走行体4に旋回自在に搭載された上部旋回体6から構成される機体8と、上部旋回体6に回動自在に装着された作業腕装置10とを備える。作業腕装置10は、ブーム12、アーム14及び作業具16を含む。ブーム12の基端は上部旋回体6の前部に、アーム14の基端はブーム12の先端に、作業具16はアーム14の先端にそれぞれ回動自在に連結されている。作業腕装置10はさらに、ブーム12を回動させるブームシリンダ18と、アーム14を回動させるアームシリンダ20と、作業具16を回動させる作業具シリンダ22とを含む。
図1及び図2を参照して説明する。上部旋回体6は、上部旋回体6の左前部分に配置されたキャブ24と、キャブ24の後方に配置された機器収容室26と、機器収容室26の後方に配置されたカウンタウエイト28とを含む。また、上部旋回体6には機体8の周囲を撮影する複数の監視カメラが装着されている。図示の実施形態では図2に示すとおり、機体8の周囲を撮影する複数の監視カメラは、キャブ24の右前下端に装着された前方監視カメラ30と、カウンタウエイト28の左右方向中央における後上端に装着された後方監視カメラ32と、上部旋回体6の前後方向中央における右端に装着された右側方監視カメラ34と、上部旋回体6の前後方向中央における左端に装着された左側方監視カメラ36とから構成されている。機体8の前方を撮影する前方監視カメラ30が撮影する範囲は図2に符号Fで示す領域であり、機体8の後方を撮影する後方監視カメラ32が撮影する範囲は図2に符号B示す領域であり、機体8の右側方を撮影する右側方監視カメラ34が撮影する範囲は図2に符号Rで示す領域であり、機体8の左側方を撮影する左側方監視カメラ36が撮影する範囲は図2に符号Lで示す領域である。各領域F,B,R,Lは上部旋回体6の周縁及び図2に示す点線で区画される領域であるが、各監視カメラ30,32,34,36が撮影する範囲(各領域F,B,R,L)は互いに重複してもよい。なお、本明細書における前後方向及び左右方向は、図1及び図2に示すキャブ24内に搭乗した運転員から見た前後方向及び左右方向である。
図3に示すとおり、キャブ24内には運転員用の座席38が設置されている。座席38の左右両側には、前後方向及び左右方向からなる十字方向を含む360°全方向に揺動自在な一対のジョイスティック40が配置されている。座席38の前方には、前後方向に揺動自在な一対の走行レバー42が配置されている。座席38の右前方には、各種画像を表示するモニタ44が配置されている。モニタ44の画面46には、各監視カメラ30,32,34,36によって撮影されたカメラ画像に後述する画像処理手段50が画像処理を施した処理画像(後述する合成俯瞰画像52及び変換画像60)と、燃料残量、作動油温度及びエンジン冷却水温度等の機械情報画像と、油圧ショベル2の保守点検の際に点検員が使用する保守点検用の操作画像とが選択的に表示される。画面46の下方には、画面46に表示される画像を操作するための複数個のスイッチ48が配置されている。
本発明に従って構成された油圧ショベル2は、各監視カメラ30,32,34,36によって撮影された各カメラ画像に画像処理を施す画像処理手段50を備えるのが重要である。図4に示すとおり、コンピュータから構成され得る画像処理手段50は、各監視カメラ30,32,34,36に電気的に接続され、各監視カメラ30,32,34,36によって撮影された各カメラ画像の画像情報が各監視カメラ30,32,34,36から画像処理手段50に入力される。また、画像処理手段50はキャブ24内のモニタ44にも電気的に接続され、各監視カメラ30,32,34,36によって撮影された各カメラ画像に画像処理を施した画像情報が画像処理手段50からモニタ44に出力される。
画像処理手段50が実行する画像処理のステップを説明すると、まず画像処理手段50は、各監視カメラ30,32,34,36によって撮影された各カメラ画像を合成することにより、図5に示すとおり、機体8の上方から機体8の周囲を俯瞰した合成俯瞰画像52を生成する。画像処理手段50にはあらかじめ機体8の平面図形54が記憶されており、合成俯瞰画像52の中央部には機体8の平面図形54が配置される。
次いで画像処理手段50は、1以上の区画ラインによって合成俯瞰画像52を複数の領域に区画する。区画ラインは、平面図形54の前後方向片側端部を通って左右方向に延びる第1区画ラインと、平面図形54の左右方向片側端部を通って前後方向に延びる第2区画ラインとから構成されているのが好ましい。図示の実施形態では図5(a)に示すとおり、第1区画ライン56は平面図形54の前側端部を通って左右方向に延びており、第2区画ライン58は平面図形54の左側端部を通って前後方向に延びている。そして合成俯瞰画像52は、第1区画ライン56及び第2区画ライン58によって、第1領域Aと、第2領域Bと、第3領域Cと、第4領域Dとに区画されている。図5を参照することによって理解されるとおり、第4領域Dは、平面図形54を含むと共に、運転員の死角となる機体8の後方及び機体8の右側方を含む。
次いで画像処理手段50は、複数の領域のうち所定領域のサイズを拡大すると共に、複数の領域のうち所定領域以外の領域のサイズを所定領域の拡大に応じて変更することにより合成俯瞰画像52と同サイズの変換画像を生成する。図示の実施形態では、画像処理手段50は、第4領域Dのサイズを拡大すると共に、第4領域D以外の領域のサイズ(すなわち、第1領域Aのサイズ、第2領域Bのサイズ及び第3領域Cのサイズ)を第4領域Dの拡大に応じて変更することにより、合成俯瞰画像52と同サイズの変換画像60を生成する。詳述すると、合成俯瞰画像52の第4領域Dは、前後方向のサイズ及び左右方向のサイズが共に拡大され、変換画像60の第4領域D’に変更されている。他方、合成俯瞰画像52の第1領域Aは、第4領域Dの拡大に応じて前後方向のサイズ及び左右方向のサイズが共に縮小され、変換画像60の第1領域A’に変更されている。また、合成俯瞰画像52の第2領域Bは、第4領域Dの拡大に応じて前後方向のサイズが縮小されると共に左右方向のサイズが拡大され、変換画像60の第2領域B’に変更されている。また、合成俯瞰画像52の第3領域Cは、第4領域Dの拡大に応じて前後方向のサイズが拡大されると共に左右方向のサイズが縮小され、変換画像60の第3領域C’に変更されている。
上述のとおり、本発明に従って構成された油圧ショベル2では、画像処理手段50が、各監視カメラ30,32,34,36によって撮影されたカメラ画像に画像処理を施して、合成俯瞰画像52及び変換画像60を生成する。合成俯瞰画像52と変換画像60とは、たとえばモニタ44のスイッチ48が操作されることにより、選択的にモニタ44の画面46に表示される。合成俯瞰画像52又は変換画像60が画面46に表示される際は、平面図形54の上部旋回体の向きは常に一定であり、すなわち、平面図形54のキャブは常に画面46の上側に位置し、平面図形54のカウンタウエイトは常に画面46の下側に位置する。また、実際の下部走行体4に対して実際の上部旋回体6が旋回されると、画面46に表示された合成俯瞰画像52又は変換画像60において、平面図形54の上部旋回体に対して平面図形54の下部走行体が回転される。
図示の実施形態では、合成俯瞰画像52の第4領域DをD’に拡大した変換画像60がモニタ44の画面46に表示されることによって、モニタ44を大型化することなく、変換画像60において拡大された第4領域D’に相当する実際の作業領域(すなわち、運転員の死角となる機体8の後方及び機体8の右側方)に障害物や他の作業員等が存在するか否かを運転員が確実に認識することができる。また図示の実施形態では、サイズが変更されているものの、第4領域D’以外の領域(第1領域A’、第2領域B’及び第3領域C’)も変換画像60に含まれているので、変換画像60において第4領域D’以外の領域に相当する実際の作業領域についても障害物や他の作業員等が存在するか否かを運転員が認識することができる。このように、機体8の周囲を俯瞰した合成俯瞰画像52と同一の領域を変換画像60が含むので、運転員は変換画像60によって運転員の死角となる領域の安全確認だけでなく機体8の周囲の安全確認も行うことができる。したがって図示の実施形態では、油圧ショベル2による作業中に合成俯瞰画像と拡大画像の表示を運転員が切り換える必要がなく、運転員はジョイスティック40や走行レバー42から手を離さずに機体8の周囲の安全確認を行うことができるので、作業性の向上が図られる。また図示の実施形態では、合成俯瞰画像52と変換画像60とを作業現場の状況や運転員の好みに応じて切り換えることが可能である。
2:油圧ショベル(建設機械)
8:機体
24:キャブ
30:前方監視カメラ
32:後方監視カメラ
34:右側方監視カメラ
36:左側方監視カメラ
44:モニタ
50:画像処理手段
52:合成俯瞰画像
54:平面図形
56:第1区画ライン
58:第2区画ライン
60:変換画像
A:合成俯瞰画像の第1領域
B:合成俯瞰画像の第2領域
C:合成俯瞰画像の第3領域
D:合成俯瞰画像の第4領域
A’:変換画像の第1領域
B’:変換画像の第2領域
C’:変換画像の第3領域
D’:変換画像の第4領域

Claims (2)

  1. 機体の周囲を撮影する複数の監視カメラと、
    前記複数の監視カメラのそれぞれによって撮影された複数のカメラ画像を合成して合成俯瞰画像を生成し、そしてまた1以上の区画ラインによって前記合成俯瞰画像を複数の領域に区画して、前記複数の領域のうち所定領域のサイズを拡大すると共に前記複数の領域のうち前記所定領域以外の領域のサイズを前記所定領域の拡大に応じて変更することにより前記合成俯瞰画像と同サイズの変換画像を生成する画像処理手段と、
    前記合成俯瞰画像と前記変換画像とを選択的に表示するモニタとを備え
    前記合成俯瞰画像の中央部には前記機体の平面図形が配置され、
    前記区画ラインは、前記平面図形の前後方向片側端部を通って左右方向に延びる第1区画ラインと、前記平面図形の左右方向片側端部を通って前後方向に延びる第2区画ラインとから構成され、
    前記所定領域は前記平面図形を含む領域である建設機械。
  2. 前記機体の左前部分にはキャブが配置され、前記第1区画ラインは前記平面図形の前側端部を通り、前記第2区画ラインは前記平面図形の左側端部を通る、請求項1記載の建設機械。
JP2016164312A 2016-08-25 2016-08-25 建設機械 Active JP6802008B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016164312A JP6802008B2 (ja) 2016-08-25 2016-08-25 建設機械
US15/673,627 US10186017B2 (en) 2016-08-25 2017-08-10 Construction machinery
DE102017119422.3A DE102017119422A1 (de) 2016-08-25 2017-08-24 Baumaschinen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016164312A JP6802008B2 (ja) 2016-08-25 2016-08-25 建設機械

Publications (2)

Publication Number Publication Date
JP2018033015A JP2018033015A (ja) 2018-03-01
JP6802008B2 true JP6802008B2 (ja) 2020-12-16

Family

ID=61166597

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016164312A Active JP6802008B2 (ja) 2016-08-25 2016-08-25 建設機械

Country Status (3)

Country Link
US (1) US10186017B2 (ja)
JP (1) JP6802008B2 (ja)
DE (1) DE102017119422A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6662762B2 (ja) * 2016-12-19 2020-03-11 株式会社クボタ 作業車
WO2018155302A1 (ja) * 2017-02-21 2018-08-30 住友建機株式会社 ショベル
KR20220002938A (ko) * 2019-04-26 2022-01-07 스미토모 겐키 가부시키가이샤 쇼벨

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1408693A1 (en) * 1998-04-07 2004-04-14 Matsushita Electric Industrial Co., Ltd. On-vehicle image display apparatus, image transmission system, image transmission apparatus, and image capture apparatus
JP3960092B2 (ja) * 2001-07-12 2007-08-15 日産自動車株式会社 車両用画像処理装置
JP4639753B2 (ja) * 2004-10-25 2011-02-23 日産自動車株式会社 運転支援装置
JP4883977B2 (ja) * 2005-10-05 2012-02-22 アルパイン株式会社 車両用画像表示装置
JP2011205513A (ja) * 2010-03-26 2011-10-13 Aisin Seiki Co Ltd 車両周辺監視装置
JP5269026B2 (ja) 2010-09-29 2013-08-21 日立建機株式会社 作業機械の周囲監視装置
JP5813944B2 (ja) * 2010-12-06 2015-11-17 富士通テン株式会社 画像表示システム、画像処理装置及び画像表示方法
CN103563358A (zh) * 2011-06-02 2014-02-05 日立建机株式会社 作业机械的周围监视装置
JP5814187B2 (ja) * 2012-06-07 2015-11-17 日立建機株式会社 自走式産業機械の表示装置
KR20140025941A (ko) * 2012-08-23 2014-03-05 삼성전자주식회사 이미지를 병합 및 공유할 수 있는 전자 장치 및 방법
CN104641626B (zh) * 2012-09-19 2018-02-27 富士胶片株式会社 摄像装置及对焦确认显示方法
JP6165085B2 (ja) * 2014-03-07 2017-07-19 日立建機株式会社 作業機械の周辺監視装置
WO2015159407A1 (ja) * 2014-04-17 2015-10-22 三菱電機株式会社 車載表示装置

Also Published As

Publication number Publication date
US20180061007A1 (en) 2018-03-01
JP2018033015A (ja) 2018-03-01
DE102017119422A1 (de) 2018-03-01
US10186017B2 (en) 2019-01-22

Similar Documents

Publication Publication Date Title
JP6204884B2 (ja) 旋回式作業機の周囲表示装置
US10650251B2 (en) Monitoring image display device of industrial machine
JP5775283B2 (ja) 作業機械のモニタ装置
JP5269026B2 (ja) 作業機械の周囲監視装置
JP5597596B2 (ja) 作業車両の周辺監視装置
WO2013038874A1 (ja) 作業機の周囲監視装置
JP2013253402A (ja) 作業機械の周囲監視装置
EP2717570A1 (en) Device for monitoring area around working machine
JP2015021246A (ja) 作業機械の周囲監視装置
JP4740890B2 (ja) 建設機械および建設機械の後進移動ガイダンス方法
JP6802008B2 (ja) 建設機械
JP5066198B2 (ja) 作業機械のモニタ装置
JPWO2012157438A1 (ja) 油圧ショベルの後方視野表示装置
JP6577034B2 (ja) 作業機械の表示システム、および作業機械の表示方法
WO2013183691A1 (ja) 作業機械の運転支援装置
JP7021502B2 (ja) 建設機械の視覚拡張システム
WO2020080294A1 (ja) 油圧ショベル
JP6188858B2 (ja) 作業機械の周囲監視装置
JP2010070929A (ja) 後方確認用モニタ装置
JP7467294B2 (ja) 建設機械
JP2008008122A (ja) 建設機械のモニタ
JP2014222877A (ja) 作業車両の周辺監視装置
JP2022048022A (ja) 建設機械
JP2021183448A (ja) 建設車両用映像表示システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190607

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200825

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201007

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201126

R150 Certificate of patent or registration of utility model

Ref document number: 6802008

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250