JPWO2017022042A1 - 作業機械の表示システム、および作業機械の表示方法 - Google Patents

Abstract

本発明は、作業機械に設けられた作業機械の周辺監視装置であって、前記作業機械の周囲状況を取得する複数のカメラＣ１〜Ｃ４と、時間変化画像６３を生成するとともに複数のカメラＣ１〜Ｃ４が撮像した画像に対して所定処理を行った画像を映像信号Ｓ１として出力する周辺監視制御部４０と、周辺監視制御部４０から出力された映像信号Ｓ１をもとに時間変化画像６３と前記所定処理を行った画像とを表示する表示部１６と、時間変化画像６３が所定時間変化しない場合、周辺監視制御部４０の所定処理に異常が発生したとしてその旨をエラー報知するモニタ制御部４３と、を備えこれにより、簡易な構成で周辺監視制御部４０の所定処理の異常を迅速に把握することができる。

Description

本発明は、簡易な構成で画像処理部を含む周辺監視制御部（表示制御部）の所定処理の異常を迅速に把握することができる作業機械の表示システム、および作業機械の表示方法に関する。

油圧ショベルなどの作業機械の分野では、車体の周辺に存在する障害物をオペレータが視認できるように、車体後方や車体側方に複数台のカメラを設置し、カメラが撮像した画像を単カメラ画像として作業機械の運転室内のモニタに映し出しているものがある。また、車体の周囲を同時に監視できるように、各カメラの画像を上方視点に変換した上で各カメラの画像を合成することにより俯瞰画像を生成してモニタに表示するものがある。

特許文献１には、選択された単カメラ画像を取得したカメラの配設位置を示すアイコンを画像上に表示するものが記載されている。これによって、どのカメラによって取得された単カメラ画像かを容易に認識することができる。

国際公開第２０１３／１０５５９７号

ところで、俯瞰画像を生成するといった画像処理は、負荷の大きい作業となるため、一般にモニタ等の表示部に機械ゲージ情報（エンジン水温や燃料の残量など）を表示させるためのモニタ制御部による処理では困難を伴う。そのため、モニタとは別体の汎用画像処理アクセラレータをもつ画像処理コントローラ（周辺監視制御部）によって処理される。そのような場合、画像処理コントローラによって生成された俯瞰画像を、映像信号としてモニタの表示部に出力し、表示部に俯瞰画像を表示させるようにしている。

ここで、画像処理コントローラに何らかの不具合が発生した場合、作業機械が動いているなどカメラが撮像する景色は変化しているにもかかわらず、画像処理コントローラが同一の俯瞰画像を表示部に送信し続ける可能性がある。この場合、複数のカメラが撮像している適正な画像を表示部に表示できていないにもかかわらず、オペレータにとっては俯瞰画像が表示されている以上、オペレータは画像処理コントローラに不具合が発生したと気づくことができない。

本発明は、上記に鑑みてなされたものであって、簡易な構成で画像処理部を含む周辺監視制御部（表示制御部）の所定処理の異常を迅速に把握することができる作業機械の表示システム、および作業機械の表示方法を提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明にかかる作業機械の表示システムは、作業機械の周囲状況を取得する１つもしくは複数のカメラと、時間変化画像を生成するとともに前記１つもしくは複数のカメラが撮像した画像に対して所定処理を行った画像を映像信号として出力する表示制御部と、前記表示制御部から出力された映像信号をもとに前記時間変化画像と前記所定処理を行った画像とを表示するモニタと、前記時間変化画像が所定時間変化しない場合、前記表示制御部に異常が発生したと判断する異常判断部と、を備えたことを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部と前記異常判断部とは、別のコントローラにそれぞれ設けられることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部が所定処理を行った画像とは、単カメラ画像及び／または俯瞰画像であることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記異常判断部は、前記表示制御部に異常が発生したと判断した場合、報知することを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記報知は、前記表示制御部に異常が発生した旨を知らせるメッセージ、又はアイコンを前記モニタに表示することであることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部が生成する時間変化画像は、単カメラ画像位置アイコン外枠に設けられることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部が生成する時間変化画像は、単カメラ画像または俯瞰画像の表示領域またはその周辺領域に設けられることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部が生成する時間変化画像は、前記表示制御部が生成する合成映像表示領域のいずれかの領域に設けられることを特徴とする。

また、本発明にかかる作業機械の表示システムは、上記の発明において、前記表示制御部が所定処理を行った画像が複数ある場合、前記時間変化画像は、前記複数の画像それぞれに設けられ、前記異常判断部は画像単位で異常を判断することを特徴とする。

また、本発明にかかる作業機械の表示方法は、作業機械の周囲状況を取得する１つもしくは複数のカメラと、所定の情報を表示するモニタと、を備え、時間変化画像を生成するとともに前記１つもしくは複数のカメラが撮像した画像に対して所定処理を行った画像を映像信号として出力する表示制御ステップと、前記表示制御ステップから出力された映像信号をもとに前記時間変化画像と前記所定処理を行った画像とを表示するステップと、前記時間変化画像が所定時間変化しない場合、異常が発生したと判断する異常判断ステップと、を備えたことを特徴とする。

本発明によれば、表示制御部としての周辺監視制御部が、時間変化画像を生成するとともに複数のカメラが撮像した画像に対して所定処理を行った画像を映像信号として出力し、表示部が、前記周辺監視制御部から出力された映像信号をもとに前記時間変化画像と前記所定処理を行った画像とを表示し、異常判断部としてのモニタ制御部が、前記時間変化画像が所定時間変化しない場合、前記周辺監視制御部の所定処理に異常が発生したと判断・報知するようにしているので、簡易な構成でオペレータが周辺監視制御部の所定処理の異常を迅速に把握することができる。

図１は、本発明の実施の形態である作業機械の周辺監視装置が搭載される油圧ショベルの全体構成を示す斜視図である。 図２は、運転室の内部配置を示す図である。 図３は、カメラの配置を示す平面図である。 図４は、油圧ショベルの制御系全体および周辺監視制御部の詳細な構成を示すブロック図である。 図５は、俯瞰画像生成部による俯瞰画像の生成処理を説明する説明図である。 図６は、時間変化画像の一例を示す図である。 図７は、モニタの表示部に標準画面が表示された状態を示す図である。 図８は、モニタ制御部による周辺監視制御部の異常処理手順を示すフローチャートである。

以下、添付図面を参照して本発明を実施するための形態について説明する。

［油圧ショベルの全体構成］
まず、図１は、本発明の実施の形態である作業機械の周辺監視装置が搭載される油圧ショベルの全体構成を示す斜視図である。この油圧ショベル１は、作業機械の一例として示した油圧ショベルである。油圧ショベル１は、自走可能な下部走行体２と、下部走行体２上に旋回自在に設置された上部旋回体３と、上部旋回体３の前部中央に屈曲起伏自在に動作する作業機４とを備える。

作業機４は、ブーム４ａ、アーム４ｂ、バケット４ｃ、ブームシリンダ４ｄ，アームシリンダ４ｅ、及びバケットシリンダ４ｆを有する。

上部旋回体３の前部左側部分には、運転室６が設置される。上部旋回体３の後部には、パワーコンテナ７が搭載される。パワーコンテナ７内には、エンジン、油圧ポンプ、ラジエータ、オイルクーラなどが収容されている。上部旋回体３の後端部には、カウンタウェイト８が装着される。

［運転室］
図２は、運転室６の内部配置を示す図である。図２に示すように、操作レバー１１，１２は、例えば運転室６内のオペレータシート１０の左右に配置される。操作レバー１１は上部旋回体３の旋回動作とアーム４ｂの動作に対応しており、操作レバー１２はブーム４ａの動作とバケット４ｃの動作に対応している。尚、操作レバー１１，１２の操作とどの作業機が動作するかの組み合わせは、本実施形態のものには限られない。

走行レバー１３および走行レバー１４は、操作に応じて下部走行体２の左側および右側の履帯の前進後進を行うことができる。

また、運転室６の右前には、モニタ１５が配置される。モニタ１５は、表示部１６と操作部１７とを有する。表示部１６は、液晶ディスプレイなどの表示装置であり、エンジンや油圧ポンプなどの状態を含む各種情報、例えば、エンジン水温、油温、燃料の残量等の機械情報、機器の異常などを示す警告情報、メニュー画面やメンテナンス画面などを表示することができる。

また、モニタ１５には、後述するカメラで撮影された画像（単カメラ画像）や、複数のカメラ画像を上方視点に変換した上で合成することにより生成される画像（俯瞰画像）を表示することができる。

操作部１７は、表示部１６の表示内容に対応して複数の機能を持たせたファンクションスイッチや、作業モード、走行モード、エアコンなどの各種設定を行うためのスイッチを含む。なお、モニタ１５は、表示部１６と操作部１７とを一体化したタッチパネルで構成してもよい。また、操作部１７を表示部１６と別体とし、操作部１７を運転室内の他の場所に設けてもよい。

［カメラの構成］
カメラＣ１〜Ｃ４は、上部旋回体３に取り付けられる。図３に示すように、カメラＣ１は、上部旋回体３の後方に取り付けられて上部旋回体３の後方を撮像する。また、カメラＣ２は、上部旋回体３の右側方に取り付けられて上部旋回体３の右後方を撮像する。また、カメラＣ３は、上部旋回体３の右側方に取り付けられて上部旋回体３の右前方を撮像する。また、カメラＣ４は、上部旋回体３の左側方に取り付けられて上部旋回体３の左側方を撮像する。なお、例えば、各カメラＣ１〜Ｃ４は、左右方向および高さ方向において所定角度の視野範囲を有する。カメラとしてＣＣＤ（Charge-Coupled Device）カメラを用いることができる。また、各カメラＣ１〜Ｃ４は、ワイドダイナミックレンジ（Wide Dynamic Range）機能を有してもよい。

［制御系の全体構成］
図４は、油圧ショベル１の制御系全体の構成を示すブロック図である。図４に示すように、周辺監視制御部４０（表示制御部）、通信制御部４２、モニタ制御部４３（異常判断部）、エンジン制御部４４、ポンプ制御部４５等が、車内ネットワークの一つであるＣＡＮ４１に接続される。

モニタ制御部４３は、モニタ１５に接続され、モニタ１５の表示制御部として機能する。モニタ制御部４３は、ＣＡＮ４１を介して各種センサから送信された情報や、モニタ１５に設けられたスイッチを介して入力された情報といった作業機械の各種情報の入出力制御を行う。そして、モニタ１５は、エンジン水温、油温、燃料の残量等の機械情報、機器の異常などを示す警告情報、メニュー画面やメンテナンス画面などを表示する制御を行うことができる。

周辺監視制御部４０は、複数のカメラＣ１〜Ｃ４からなるカメラ群Ｃ、及び、モニタ１５と接続しており、後述するように、複数のカメラの内のいずれかの単カメラ画像と俯瞰画像を合成した画像をモニタに出力する。

周辺監視制御部４０は、画像処理部５１、及び、表示制御部５３を有する。さらに画像処理部５１は、俯瞰画像生成部５４、単カメラ画像生成部５８、時間変化画像生成部５５、及び、画像合成部５６を有する。

俯瞰画像生成部５４は、各カメラＣ１〜Ｃ４から得られた画像をもとに俯瞰画像６１を生成する。図５に示すように、俯瞰画像生成部５４は、各カメラＣ１〜Ｃ４から得られた画像Ｐ１〜Ｐ４を上方視点画像に変換する。すなわち、俯瞰画像生成部５４は、油圧ショベル１の上方に位置する所定の仮想視点から見た画像に変換する。

具体的に、俯瞰画像生成部５４は、油圧ショベル１の上方の仮想視点から地表面レベルに対応する所定の仮想投影面に投影する画像変換を行う。その後、俯瞰画像生成部５４は、俯瞰画像を表示するフレームの各領域Ｅ１〜Ｅ４に対応する変換画像Ｐ１１〜Ｐ１４を切り出し、各変換画像Ｐ１１〜Ｐ１４をフレーム内で合成する。俯瞰画像生成部５４が生成する俯瞰画像６１には、油圧ショベルとの位置関係が明確になるよう油圧ショベル１を上方視した画像Ｐが予め貼り付けられている。

この俯瞰画像６１の情報は、画像合成部５６に入力される。なお、領域Ｅ０は、運転室６から視認できるため、俯瞰画像は生成されない。また、本実施の形態では、４つのカメラＣ１〜Ｃ４を用いているが、カメラの数はいくつでもよく、例えば３つのカメラＣ１，Ｃ２，Ｃ４を用いてもよい。この場合、カメラＣ２は、カメラＣ４と同様に右側方を撮像する。

単カメラ画像生成部５８は、各カメラＣ１〜Ｃ４が撮像した画像の内いずれかのカメラの単カメラ画像６２を、画像合成部５６に出力する。具体的には、オペレータによって単カメラ画像６２を切り替える操作が操作部１７によってなされた場合、その信号がモニタ制御部４３およびＣＡＮ４１を介して単カメラ画像生成部５８に伝送され、単カメラ画像生成部５８は指令を受けた該当するカメラの単カメラ画像６２を画像合成部５６に出力する。

時間変化画像生成部５５は、時間的に変化する時間変化画像６３を生成する。例えば、図６に示す時間変化画像６３における単カメラ画像位置アイコン７０は、モニタ１５の表示部１６に表示される単カメラ画像６２が、油圧ショベルに対してどの方向（後方、右後方、右前方、左後方）を撮影するカメラの画像であるかを示すためのアイコンであり、例えば図７における表示部１６の単カメラ画像６２の近傍に単カメラ画像位置アイコン７０を設けることによって、オペレータは表示部１６に表示されている単カメラ画像６２がどの方向の単カメラ画像であるかが容易に判別できる。

単カメラ画像位置アイコン７０における中央部にある矩形が油圧ショベルの平面図を表しており、単カメラ画像位置アイコン７０の上側を前方側として表示されている単カメラ画像の方向に該当する領域が色つきで表示される。例えば、図６および図７の場合、中央部の矩形の下側の領域、すなわち油圧ショベルの後方を撮影する後方カメラの単カメラ画像が表示されていることを示している。

単カメラ画像位置アイコン７０の外枠７１は、時間の経過とともに所定の色を付して点滅する。例えば、点灯時は外枠７１部分が黄緑色に表示され、消灯時は外枠７１部分が黒色に表示される、すなわち時間経過によって黄緑色と黒色が交互に切り替わるようになっている。

ここで、周辺監視制御部４０に何らかの不具合が発生した場合には、周辺監視制御部４０が同一の画像をモニタに出力し続ける可能性があり、その場合には上記外枠７１は、黄緑色で表示された状態から変化しないか、もしくは黒色の状態から変化しないことになる。そのため、オペレータは外枠７１部分が点滅しているか否かを確認することによって、周辺監視制御部４０が正常な画像処理を実行していることを認識することができる。

この単カメラ画像位置アイコン７０と外枠７１を合わせたものが時間変化画像６３として、時間変化画像生成部５５によって生成される。なお、一部領域７２は外枠７１の角部に設けられた領域であり、外枠７１の他の領域と同様に、時間経過によって、例えば黄緑色と黒色とが交互に切り替わる。

後述するが、この一部領域７２における輝度やＲＧＢ値等の映像信号の値が変化しているか否かを検出することにより、時間変化画像６３が、時間経過に応じて変動しているか否かを判断している。時間変化画像生成部５５によって生成された時間変化画像６３は、画像合成部５６に入力される。

画像合成部５６には、上述した俯瞰画像６１と、各カメラＣ１〜Ｃ４が撮像した単カメラ画像６２と、時間変化画像６３が入力される。画像合成部５６は、ＣＡＮ４１を介してモニタ制御部４３から指示される制御信号をもとに、上述した俯瞰画像６１、単カメラ画像６２、時間変化画像６３を合成した画像を生成する。これら３つを合成した画像は、表示制御部５３を介して表示部１６に映像信号Ｓ１として出力される。

もし画像合成部５６が、モニタ制御部４３から俯瞰画像６１、単カメラ画像６２、時間変化画像６３の合成画像の出力指示を受け取らない場合（例えば、メニュー画面が選択されている場合など）には、画像合成部５６は当該合成画像をモニタに出力しない。

［モニタの標準画面］
図７は、モニタ１５の表示部１６に標準画面の一例が表示された状態を示す図である。標準画面は、キースイッチオン後、一定時間経過した状態で表示される初期画面であり、作業機械の各種情報、例えば、エンジン水温、油温、燃料の残量等の機械情報、機器の異常などを示す警告情報、メニュー画面やメンテナンス画面、俯瞰画像、単カメラ画像などが表示される。

図７に示すように、表示部１６の左には、俯瞰画像６１が表示され、右には、単カメラ画像６２が表示される。図７の単カメラ画像６２は、上部旋回体３の後方に設けられたカメラＣ１による後方を撮像した画像である。俯瞰画像６１及び単カメラ画像６２には、旋回中心からの距離や方向の目安を示す目安線Ｄが表示されている。単カメラ画像６２の右上には、時間変化画像６３が表示される。

俯瞰画像６１、単カメラ画像６２および時間変化画像６３は、周辺監視制御部４０側で生成された画像であり、これら３つの画像が表示される領域を合成映像表示領域６０と定義する。なお、図７では俯瞰画像６１が左側に、単カメラ画像６２が右側に表示されているが、両者の表示位置が反対であってもよい。

合成映像表示領域６０の下部には、左から、エンジンの冷却水の水温を示すエンジン水温ゲージＧ１、油圧回路内の作動油の油温を示す作動油温ゲージＧ２、および燃料の残量のレベルを示す燃料レベルゲージＧ３が表示される。また、作動油温ゲージＧ２は非表示であってもよい。

なお、ファンクションスイッチＦ１〜Ｆ６は、各スイッチの直上で表示部１６が表示するアイコンに対応した信号を入力するためのスイッチである。図７では、ファンクションスイッチＦ３の上部には、単カメラ画像６２を全画面表示に切り替えるアイコンＩ１が表示されている。また、ファンクションスイッチＦ４の上部には、単カメラ画像６２のカメラを切り替える（例えばカメラＣ１の画像からカメラＣ２の画像への切り替え）アイコンＩ２が表示されている。ファンクションスイッチＦ６の上部には、メニュー画面へ切り替えるアイコンＩ３が表示されている。メニュー画面とは、作業機械の各種設定や状況を確認する際に用いる画面である。

なお、ファンクションスイッチに対応するアイコンＩ１〜Ｉ３を表示せず、対応するスイッチを別の操作部などに設けてもよい。アイコンＩ４は、サービスメータの値を表示する。また、アイコンＩ５は、作業モードの設定状態を表示する。

［周辺監視制御部の異常検出処理］
図８は、モニタ制御部４３による周辺監視制御部４０の異常処理手順を示すフローチャートである。モニタ制御部４３が、本発明における「異常判断部」として機能する。図８に示すように、まずモニタ制御部４３は、モニタ制御部４３が、周辺監視制御部４０に対して、俯瞰画像６１、単カメラ画像６２及び時間変化画像６３の合成画像を要求しているか否かを判断する（ステップＳ１０１）。

モニタ制御部４３が合成画像を要求している状態である場合（ステップＳ１０１，Ｙｅｓ）には、モニタ制御部４３は、周辺監視制御部４０からモニタ１５に出力された合成映像表示領域６０の合成画像中の時間変化画像６３が所定時間変化していないか否かを判断する（ステップＳ１０２）。ここで、時間変化画像６３の画像が所定時間変化していないか否かは、例えば図７における時間変化画像６３を拡大した、図６の外枠７１の一部領域７２における映像信号の時間変化、例えば、輝度やＲＧＢ値などの時間変化から判断してもよい。「所定時間」をどの程度の時間にするかは、例えば外枠７１部分の点滅速度に応じる等適宜設定すればよい。

時間変化画像６３の画像が所定時間変化していない場合（ステップＳ１０２，Ｙｅｓ）には、周辺監視制御部４０内の画像処理が異常である旨のエラー発報を行い（ステップＳ１０３）、エラーが発生していることをオペレータなどに何らかの形で報知する。なお、エラー発報の例として、例えばモニタ１５の表示部１６にメッセージやアイコン表示をしてもよいし、モニタ以外の場所にランプなどにより表示してもよい。また、音声によるブザー発報であってもよい。

一方、モニタ制御部４３が周辺監視制御部４０に合成画像を要求していない場合（ステップＳ１０１，Ｎｏ）または時間変化画像６３の画像が所定時間変化している場合（ステップＳ１０２，Ｎｏ）には、ステップＳ１０１にリターンし、上述した処理を繰り返す。

なお、ステップＳ１０１を設ける理由は、もしモニタ制御部４３が周辺監視コントローラ４０に上記合成画像を生成するよう指示を出していない場合、すなわち図７における標準画面とは異なる、例えばメニュー画面が表示されている場合、標準画面において時間変化画像６３が表示される領域には時間経過に応じて変化する画像が表示されず、同じ画像が表示され続けることになるため、モニタ制御部４３は、周辺監視制御部４０に異常が発生していないにもかかわらず、異常ありと判断してしまうためである。

なお、上述した実施の形態では、単カメラ画像位置アイコン７０の外枠７１を時間変化画像６３として、その外枠７０の一部領域７２における輝度やＲＧＢ値、その他映像信号の時間変化の有無によって周辺監視制御部４０の画像処理に異常があったか否かを検出していた。しかし、これに限らず、俯瞰画像６１や単カメラ画像６２内の一部領域やそれら画像の周辺など、周辺監視制御部４０が生成する合成映像表示領域６０内であればいずれの領域に時間変化画像を生成するようにしてもよい。この場合、生成する時間変化画像は、視認できるような大きさであればよい。

本実施形態である、時間変化画像６３の外枠７１を点滅させる場合には、視認できる程度であることが好ましい。オペレータが外枠７１部分の点滅を視認することによって、周辺監視制御部４０が正常な画像処理を実行していることを認識することができるためである。

なお、本発明は、オペレータが頻繁に外枠７１部分が点滅しているか否かを確認することなく、周辺監視制御部４０の画像処理に異常があったか否かを認識することができるため、オペレータの確認負荷を軽減できるという効果がある。

前記実施形態では、標準画面に俯瞰画像６１と単カメラ画像６２を同時に表示させる構成としていたが、本発明はこれに限られず、俯瞰画像のみや単カメラ画像のみを表示させる構成としてもよい。もしくは、標準画面には俯瞰画像６１と単カメラ画像６２を表示させず、画面切替によって表示させる形態であってもよい。

そして、本発明における「１つもしくは複数のカメラが撮像した画像に対して所定処理を行った画像」とは、俯瞰画像、単カメラ画像、及びその両者を含んだ画像としてもよく、合成映像表示領域６０に表示される画像であってもよい。

また、周辺監視制御部４０（表示制御部）と、モニタ制御部４３（異常判断部）は、１つのコントローラ（装置）に設けられる構成であってもよいし、それぞれ別のコントローラ（装置）に設けられる構成であってもよい。

さらに、本実施形態では、時間変化画像６３を１つしか設けなかったが、複数の画像を一画面で表示する場合には、それぞれの画像に対応する時間変化画像を用意し、それぞれの画像について異常が発生していないか検知するようにしてもよい。

なお、上記実施形態では油圧ショベルを用いて説明したが、作業機械であれば、ダンプトラック、ブルドーザー、ホイールローダー等の作業機械に本発明を適用してもよい。

また、上記実施形態では作業機械の運転室６にモニタ１５を設けた構成で説明したが、その他の場所、例えば作業機械の遠隔操作を行うための遠隔操作室や、建設現場内にある複数の作業機械を全体的に管理・統制する管制室に表示部を設けた構成であってもよい。モニタ１５が携帯端末として構成され（例えば取り外し可能であってもよい）、オペレータが携帯端末における表示部に表示された俯瞰画像を見られる構成であってもよい。

ここで、遠隔操作室や管制室においてモニタ１５に俯瞰画像を表示する場合や携帯端末にモニタ１５を設ける場合には、作業機械と、操作室・管制室・携帯端末等のそれぞれに何らかの通信手段を設け、俯瞰画像等の情報の送受信を行う構成であってもよい。

１ 油圧ショベル
２ 下部走行体
３ 上部旋回体
４ 作業機
４ａ ブーム
４ｂ アーム
４ｃ バケット
４ｄ ブームシリンダ
４ｅ アームシリンダ
４ｆ バケットシリンダ
６ 運転室
７ パワーコンテナ
８ カウンタウェイト
１０ オペレータシート
１１，１２ 操作レバー
１３，１４ 走行レバー
１５ モニタ
１６ 表示部
１７ 操作部
４０ 周辺監視制御部（表示制御部）
４２ 通信制御部
４３ モニタ制御部（異常判断部）
４４ エンジン制御部
４５ ポンプ制御部
５１ 画像処理部
５３ 表示制御部
５４ 俯瞰画像生成部
５５ 時間変化画像生成部
５６ 画像合成部
５８ 単カメラ画像生成部
６０ 合成映像表示領域
６１ 俯瞰画像
６２ 単カメラ画像
６３ 時間変化画像
７０ 単カメラ画像位置アイコン
７１ 外枠
７２ 一部領域
Ｃ カメラ群
Ｃ１〜Ｃ４ カメラ
Ｄ 目安線
Ｇ１ エンジン水温ゲージ
Ｇ２ 作動油温ゲージ
Ｇ３ 燃料レベルゲージ
Ｉ１〜Ｉ５ アイコン
Ｓ１ 映像信号

Claims (10)

1. 作業機械の周囲状況を取得する１つもしくは複数のカメラと、
   時間変化画像を生成するとともに前記１つもしくは複数のカメラが撮像した画像に対して所定処理を行った画像を映像信号として出力する表示制御部と、
   前記表示制御部から出力された映像信号をもとに前記時間変化画像と前記所定処理を行った画像とを表示するモニタと、
   前記時間変化画像が所定時間変化しない場合、前記表示制御部に異常が発生したと判断する異常判断部と、
   を備えたことを特徴とする作業機械の表示システム。
2. 前記表示制御部と前記異常判断部とは、別のコントローラにそれぞれ設けられることを特徴とする請求項１に記載の作業機械の表示システム。
3. 前記表示制御部が所定処理を行った画像とは、単カメラ画像及び／または俯瞰画像であることを特徴とする請求項１または２に記載された作業機械の表示システム。
4. 前記異常判断部は、前記表示制御部に異常が発生したと判断した場合、報知することを特徴とする請求項１〜３のいずれか一つに記載された作業機械の表示システム。
5. 前記報知は、前記表示制御部に異常が発生した旨を知らせるメッセージ、又はアイコンを前記モニタに表示することであることを特徴とする請求項４に記載された作業機械の表示システム。
6. 前記表示制御部が生成する時間変化画像は、単カメラ画像位置アイコン外枠に設けられることを特徴とする請求項１〜５のいずれか一つに記載された作業機械の表示システム。
7. 前記表示制御部が生成する時間変化画像は、単カメラ画像または俯瞰画像の表示領域またはその周辺領域に設けられることを特徴とする請求項１〜５のいずれか一つに記載された作業機械の表示システム。
8. 前記表示制御部が生成する時間変化画像は、前記表示制御部が生成する合成映像表示領域のいずれかの領域に設けられることを特徴とする請求項１〜５のいずれか一つに記載された作業機械の表示システム。
9. 前記表示制御部が所定処理を行った画像が複数ある場合、前記時間変化画像は、前記複数の画像それぞれに設けられ、前記異常判断部は画像単位で異常を判断することを特徴とする請求項１〜８のいずれか一つに記載の作業機械の表示システム。
10. 作業機械の周囲状況を取得する１つもしくは複数のカメラと、
    所定の情報を表示するモニタと、を備え、
    時間変化画像を生成するとともに前記１つもしくは複数のカメラが撮像した画像に対して所定処理を行った画像を映像信号として出力する表示制御ステップと、
    前記表示制御ステップから出力された映像信号をもとに前記時間変化画像と前記所定処理を行った画像とを表示するステップと、
    前記時間変化画像が所定時間変化しない場合、異常が発生したと判断する異常判断ステップと、
    を備えたことを特徴とする作業機械の表示方法。

Images