JP6896525B2 - Asphalt finisher - Google Patents

Asphalt finisher Download PDF

Info

Publication number
JP6896525B2
JP6896525B2 JP2017126503A JP2017126503A JP6896525B2 JP 6896525 B2 JP6896525 B2 JP 6896525B2 JP 2017126503 A JP2017126503 A JP 2017126503A JP 2017126503 A JP2017126503 A JP 2017126503A JP 6896525 B2 JP6896525 B2 JP 6896525B2
Authority
JP
Japan
Prior art keywords
image
driver
tractor
hopper
viewpoint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017126503A
Other languages
Japanese (ja)
Other versions
JP2019007307A (en
Inventor
馬場 信行
信行 馬場
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo SHI Construction Machinery Co Ltd
Original Assignee
Sumitomo SHI Construction Machinery Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo SHI Construction Machinery Co Ltd filed Critical Sumitomo SHI Construction Machinery Co Ltd
Priority to JP2017126503A priority Critical patent/JP6896525B2/en
Publication of JP2019007307A publication Critical patent/JP2019007307A/en
Application granted granted Critical
Publication of JP6896525B2 publication Critical patent/JP6896525B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本開示は、アスファルトフィニッシャに関する。 This disclosure relates to an asphalt finisher.

従来、カメラが撮像したホッパ内の舗装材の画像を表示するディスプレイを備えたアスファルトフィニッシャが知られている(特許文献1参照。)。このカメラは、トラクタの前方にあるホッパの内部を撮像するためにトラクタの前部に取り付けられている。ディスプレイに表示される画像は、トラクタ側からホッパの内部を見下ろす画像であり、カメラが撮像した入力画像の一部を切り出すことによって生成されている。 Conventionally, an asphalt finisher provided with a display for displaying an image of a pavement material in a hopper captured by a camera is known (see Patent Document 1). The camera is mounted on the front of the tractor to capture the interior of the hopper in front of the tractor. The image displayed on the display is an image looking down on the inside of the hopper from the tractor side, and is generated by cutting out a part of the input image captured by the camera.

特許6029941号公報Japanese Patent No. 6029941

しかしながら、ディスプレイに表示された画像を見た運転者は、ホッパ内の舗装材の状態を直感的に認識できないおそれがある。運転席に着座する運転者の視点とカメラの視点とが異なるためである。 However, the driver who sees the image displayed on the display may not be able to intuitively recognize the state of the pavement material in the hopper. This is because the viewpoint of the driver sitting in the driver's seat and the viewpoint of the camera are different.

上述に鑑み、トラクタの前方の様子をより直感的に運転者に認識させることが可能なアスファルトフィニッシャの提供が望まれる。 In view of the above, it is desired to provide an asphalt finisher that allows the driver to more intuitively recognize the state in front of the tractor.

本発明の実施例に係るアスファルトフィニッシャは、ボンネットを含むトラクタと、前記トラクタの前側に設置されて舗装材を受け入れるホッパと、前記ホッパ内の舗装材を前記トラクタの後側へ給送するコンベアと、前記コンベアにより給送された前記舗装材を前記トラクタの後側で敷き拡げるスクリュと、前記スクリュにより敷き拡げられた前記舗装材を前記スクリュの後側で敷き均すスクリードと、運転席視点で死角となる前記ホッパの内側の画像を撮像する第1撮像装置と、前記第1撮像装置が撮像した画像を視点変換して生成される前記運転席視点の画像を少なくとも前記ボンネットの中央部を透過した状態で表示する表示装置と、を備える。
The asphalt finisher according to the embodiment of the present invention includes a tractor including a bonnet, a hopper installed on the front side of the tractor to receive the pavement material, and a conveyor for feeding the pavement material in the hopper to the rear side of the tractor. From the driver's seat perspective, a screw that spreads the pavement material fed by the conveyor on the rear side of the tractor, and a screed that spreads the pavement material spread by the screw on the rear side of the screw. A first imaging device that captures an image of the inside of the hopper, which is a blind spot, and an image of the driver's seat viewpoint generated by converting the viewpoint of the image captured by the first imaging device are transmitted at least through the central portion of the bonnet. It is provided with a display device for displaying in the state of being pavement.

上述の手段により、トラクタの前方の様子をより直感的に運転者に認識させることが可能なアスファルトフィニッシャが提供される。 The above-mentioned means provides an asphalt finisher that allows the driver to more intuitively recognize the situation in front of the tractor.

本発明の実施例に係るアスファルトフィニッシャの側面図である。It is a side view of the asphalt finisher which concerns on embodiment of this invention. 図1のアスファルトフィニッシャの上面図である。It is a top view of the asphalt finisher of FIG. トラクタを非表示としたアスファルトフィニッシャの斜視図である。It is a perspective view of the asphalt finisher in which the tractor is hidden. 図1のアスファルトフィニッシャに搭載される表示システムの構成例を示すブロック図である。It is a block diagram which shows the configuration example of the display system mounted on the asphalt finisher of FIG. 図4の表示システムが生成する出力画像の一例を示す図である。It is a figure which shows an example of the output image generated by the display system of FIG. 図4の表示システムが生成する投影画像の一例を示す図である。It is a figure which shows an example of the projection image generated by the display system of FIG.

図1は、本発明の実施例に係る道路機械の一例であるアスファルトフィニッシャ100の側面図である。図2はアスファルトフィニッシャ100の上面図である。アスファルトフィニッシャ100は、主に、トラクタ1、ホッパ2及びスクリード3で構成されている。以下では、トラクタ1から見たホッパ2の方向(+X方向)を前方とし、トラクタ1から見たスクリード3の方向(−X方向)を後方とする。 FIG. 1 is a side view of an asphalt finisher 100, which is an example of a road machine according to an embodiment of the present invention. FIG. 2 is a top view of the asphalt finisher 100. The asphalt finisher 100 is mainly composed of a tractor 1, a hopper 2, and a screed 3. In the following, the direction of the hopper 2 as seen from the tractor 1 (+ X direction) is the front, and the direction of the screed 3 as seen from the tractor 1 (−X direction) is the rear.

トラクタ1は、アスファルトフィニッシャ100を走行させるための車両である。本実施例では、トラクタ1は、後輪走行用油圧モータを用いて後輪5を回転させ、且つ、前輪走行用油圧モータを用いて前輪6を回転させてアスファルトフィニッシャ100を移動させる。後輪走行用油圧モータ及び前輪走行用油圧モータは油圧ポンプから作動油の供給を受けて回転する。後輪5及び前輪6はクローラで置き換えられてもよい。 The tractor 1 is a vehicle for running the asphalt finisher 100. In this embodiment, the tractor 1 uses the rear wheel traveling hydraulic motor to rotate the rear wheels 5, and the front wheel traveling hydraulic motor to rotate the front wheels 6 to move the asphalt finisher 100. The rear wheel running hydraulic motor and the front wheel running hydraulic motor rotate by receiving the supply of hydraulic oil from the hydraulic pump. The rear wheels 5 and the front wheels 6 may be replaced by crawlers.

コントローラ50は、アスファルトフィニッシャ100を制御する制御装置である。本実施例では、コントローラ50は、CPU、メモリ等を含むマイクロコンピュータで構成され、トラクタ1に搭載されている。コントローラ50の各種機能は、不揮発性記憶媒体等に格納されたプログラムをCPUが実行することで実現される。 The controller 50 is a control device that controls the asphalt finisher 100. In this embodiment, the controller 50 is composed of a microcomputer including a CPU, a memory, and the like, and is mounted on the tractor 1. Various functions of the controller 50 are realized by the CPU executing a program stored in a non-volatile storage medium or the like.

ホッパ2は、舗装材を受け入れるための機構であり、主に、ホッパウイング20及びホッパシリンダ24を含む。本実施例では、ホッパ2は、トラクタ1の前側に設置されている。ホッパウイング20は、左ホッパシリンダ24LによってY軸方向(車幅方向)に開閉可能な左ホッパウイング20Lと、右ホッパシリンダ24RによってY軸方向(車幅方向)に開閉可能な右ホッパウイング20Rとを含む。アスファルトフィニッシャ100は、通常、ホッパウイング20を全開状態にしてダンプトラックの荷台から舗装材(例えばアスファルト混合物である。)を受け入れる。図2はホッパウイング20が全開状態であることを示す。ホッパ2内の舗装材が減少するとホッパウイング20が閉じられ、ホッパ2の内壁付近にあった舗装材がホッパ2の中央部分に集められる。ホッパ2の中央部分にあるコンベアCVがトラクタ1の後側に舗装材を継続的に給送できるようにするためである。すなわち、コンベアCV上に舗装材が溜まった状態を維持できるようにするためである。その後、トラクタ1の後側に給送された舗装材は、スクリュSCによってトラクタ1の後側且つスクリード3の前側で車幅方向に敷き拡げられる。本実施例では、スクリュSCは、エクステンションスクリュが左右に連結された状態にある。図1及び図2は、スクリュSCによって路盤RB上に敷き拡げられた舗装材PVをドットパターンで示している。 The hopper 2 is a mechanism for receiving a pavement material, and mainly includes a hopper wing 20 and a hopper cylinder 24. In this embodiment, the hopper 2 is installed on the front side of the tractor 1. The hopper wing 20 includes a left hopper wing 20L that can be opened and closed in the Y-axis direction (vehicle width direction) by the left hopper cylinder 24L, and a right hopper wing 20R that can be opened and closed in the Y-axis direction (vehicle width direction) by the right hopper cylinder 24R. including. The asphalt finisher 100 typically receives the pavement material (eg, an asphalt mixture) from the dump truck bed with the hopper wing 20 fully open. FIG. 2 shows that the hopper wing 20 is in the fully open state. When the amount of pavement material in the hopper 2 decreases, the hopper wing 20 is closed, and the pavement material near the inner wall of the hopper 2 is collected in the central portion of the hopper 2. This is so that the convair CV in the central portion of the hopper 2 can continuously feed the pavement material to the rear side of the tractor 1. That is, it is possible to maintain the state in which the pavement material is accumulated on the conveyor CV. After that, the pavement material fed to the rear side of the tractor 1 is spread in the vehicle width direction on the rear side of the tractor 1 and the front side of the screed 3 by the screw SC. In this embodiment, the screw SC is in a state where the extension screws are connected to the left and right. 1 and 2 show the pavement material PV spread on the roadbed RB by the screw SC in a dot pattern.

スクリード3は、舗装材PVを敷き均すための機構である。本実施例では、スクリード3は、前側スクリード30及び後側スクリード31を含む。スクリード3は、トラクタ1によって牽引される浮動スクリードであり、レベリングアーム3Aを介してトラクタ1に連結されている。スクリード3によって敷き均され且つ締め固められた舗装材PVは、既設舗装体APに隣接する新設舗装体NPを形成する。 The screed 3 is a mechanism for spreading the pavement material PV. In this embodiment, the screed 3 includes a front screed 30 and a rear screed 31. The screed 3 is a floating screed towed by the tractor 1 and is connected to the tractor 1 via a leveling arm 3A. The pavement material PV spread and compacted by the screed 3 forms a new pavement body NP adjacent to the existing pavement body AP.

撮像装置51は、画像を取得する装置である。本実施例では、撮像装置51は、単眼カメラであり、無線又は有線でコントローラ50に接続されている。コントローラ50は、例えば、撮像装置51が撮像した画像に視点変換処理を施すことで、運転席1Sに着座する運転者の視点(以下、「運転席視点」とする。)の画像を生成できる。撮像装置51は、ステレオカメラであってもよく、距離画像カメラであってもよい。本実施例では、撮像装置51は、前カメラ51F、左カメラ51L、右カメラ51R、及び、コンベアカメラ51Cを含む。 The image pickup device 51 is a device for acquiring an image. In this embodiment, the image pickup apparatus 51 is a monocular camera and is connected to the controller 50 wirelessly or by wire. The controller 50 can generate an image of the viewpoint of the driver seated in the driver's seat 1S (hereinafter, referred to as “driver's seat viewpoint”) by subjecting the image captured by the image pickup device 51 to a viewpoint conversion process. The image pickup device 51 may be a stereo camera or a distance image camera. In this embodiment, the image pickup apparatus 51 includes a front camera 51F, a left camera 51L, a right camera 51R, and a conveyor camera 51C.

前カメラ51Fは、運転席視点で死角となるホッパ2の内側の画像を撮像する。本実施例では、前カメラ51Fの光軸と運転席1Sに着座する運転者の(ホッパ2内の一点を視るときの)視軸とが異なるように、トラクタ1に取り付けられている。具体的には、前カメラ51Fの光軸の俯角と運転者の視軸の俯角とが異なるように、トラクタ1の前部であるボンネット1Bに取り付けられている。但し、前カメラ51Fは、その光軸の俯角と運転者の視軸の俯角とが同じになるように取り付けられていてもよく、その光軸と運転者の視軸とが一致するように取り付けられていてもよい。図1及び図2の灰色領域Z1は、前カメラ51Fの撮像範囲を示す。前カメラ51Fの撮像範囲は、ホッパ2の前方の空間を含んでいてもよい。前カメラ51Fは、ホッパ2の内側を撮影するようにホッパ2の後縁部に取り付けられていてもよく、ホッパ2の内部に取り付けられていてもよい。 The front camera 51F captures an image of the inside of the hopper 2, which is a blind spot from the viewpoint of the driver's seat. In this embodiment, the tractor 1 is attached so that the optical axis of the front camera 51F and the visual axis of the driver seated in the driver's seat 1S (when looking at one point in the hopper 2) are different. Specifically, it is attached to the bonnet 1B, which is the front part of the tractor 1, so that the depression angle of the optical axis of the front camera 51F and the depression angle of the driver's visual axis are different. However, the front camera 51F may be mounted so that the depression angle of the optical axis and the depression angle of the driver's visual axis are the same, and the front camera 51F is mounted so that the optical axis and the driver's visual axis coincide with each other. It may be. The gray areas Z1 in FIGS. 1 and 2 indicate the imaging range of the front camera 51F. The imaging range of the front camera 51F may include the space in front of the hopper 2. The front camera 51F may be attached to the trailing edge of the hopper 2 so as to photograph the inside of the hopper 2, or may be attached to the inside of the hopper 2.

左カメラ51Lは、運転席視点で死角となる左ホッパウイング20Lの車幅方向外側の画像を撮像する。本実施例では、左ホッパウイング20Lの車幅方向外側の死角の画像を撮像できるよう、トラクタ1の左側部から+Y方向(左方)に延びる棒部材BLの先端に取り付けられている。具体的には、左カメラ51Lは、全開状態の左ホッパウイング20Lの左端よりも車幅方向外側(左側)に突出するように取り付けられている。図1及び図2の灰色領域Z2は、左カメラ51Lの撮像範囲を示す。 The left camera 51L captures an image of the outside of the left hopper wing 20L, which is a blind spot from the driver's seat viewpoint, in the vehicle width direction. In this embodiment, the left hopper wing 20L is attached to the tip of a rod member BL extending in the + Y direction (left) from the left side portion of the tractor 1 so that an image of a blind spot on the outside in the vehicle width direction can be captured. Specifically, the left camera 51L is attached so as to project outward (left side) in the vehicle width direction from the left end of the left hopper wing 20L in the fully opened state. The gray areas Z2 in FIGS. 1 and 2 indicate the imaging range of the left camera 51L.

右カメラ51Rは、運転席視点で死角となる右ホッパウイング20Rの車幅方向外側の画像を撮像する。本実施例では、右ホッパウイング20Rの車幅方向外側の死角の画像を撮像できるよう、トラクタ1の右側部から−Y方向(右方)に延びる棒部材BRの先端に取り付けられている。具体的には、右カメラ51Rは、全開状態の右ホッパウイング20Rの右端よりも車幅方向外側(右側)に突出するように取り付けられている。図2の灰色領域Z3は、右カメラ51Rの撮像範囲を示す。 The right camera 51R captures an image of the outside of the right hopper wing 20R, which is a blind spot from the driver's seat viewpoint, in the vehicle width direction. In this embodiment, the right hopper wing 20R is attached to the tip of a rod member BR extending in the −Y direction (right side) from the right side portion of the tractor 1 so that an image of a blind spot on the outside in the vehicle width direction can be captured. Specifically, the right camera 51R is attached so as to project outward (right side) in the vehicle width direction from the right end of the right hopper wing 20R in the fully opened state. The gray area Z3 in FIG. 2 shows the imaging range of the right camera 51R.

棒部材BL、BRは、望ましくは、伸縮可能に構成されている。取り外し可能に構成されていてもよい。アスファルトフィニッシャ100をトレーラ等で輸送する場合に対処するためである。 The rod members BL and BR are preferably configured to be stretchable. It may be configured to be removable. This is to deal with the case where the asphalt finisher 100 is transported by a trailer or the like.

アスファルトフィニッシャ100がキャノピーを備えている場合、左カメラ51Lはキャノピーの天板の左縁部に取り付けられていてもよい。右カメラ51Rについても同様である。この場合、前カメラ51Fがキャノピーの天板の前縁部に取り付けられていてもよい。 When the asphalt finisher 100 is provided with a canopy, the left camera 51L may be attached to the left edge of the top plate of the canopy. The same applies to the right camera 51R. In this case, the front camera 51F may be attached to the front edge of the top plate of the canopy.

コンベアカメラ51Cは、トラクタ1の内部にあるコンベアCVの画像を撮像する。本実施例では、コンベアCVのうち、トラクタ1の内部にある部分の画像を撮像できるよう、コンベアCVの上で且つトラクタ1の内部でトラクタ1に取り付けられている。 The conveyor camera 51C captures an image of the conveyor CV inside the tractor 1. In this embodiment, the conveyor CV is attached to the tractor 1 on the conveyor CV and inside the tractor 1 so that an image of a portion inside the tractor 1 can be captured.

図3は、トラクタ1の図示を省略した状態にあるアスファルトフィニッシャ100の斜視図であり、コンベアカメラ51Cの取り付け位置を示している。コンベアカメラ51Cは、コンベアCVのうち、トラクタ1の内部にあるコンベア部分CV1を撮像する。図3の灰色領域Z4は、コンベアカメラ51Cの撮像範囲を示す。コンベアカメラ51Cには、暗所での撮像が可能なように照明装置LSが取り付けられている。前カメラ51F、左カメラ51L、及び、右カメラ51Rにも同様に照明装置が取り付けられていてもよい。 FIG. 3 is a perspective view of the asphalt finisher 100 in a state where the tractor 1 is not shown, and shows the mounting position of the conveyor camera 51C. The conveyor camera 51C takes an image of the conveyor portion CV1 inside the tractor 1 among the conveyor CVs. The gray area Z4 in FIG. 3 shows the imaging range of the conveyor camera 51C. A lighting device LS is attached to the conveyor camera 51C so that an image can be taken in a dark place. Lighting devices may be similarly attached to the front camera 51F, the left camera 51L, and the right camera 51R.

表示装置52は、各種画像を表示する装置である。本実施例では、表示装置52は、液晶ディスプレイであり、無線又は有線でコントローラ50に接続されている。表示装置52は、運転席1Sに着座する運転者の(ホッパ2内の一点を視るときの)視軸と交差するように配置されている。但し、表示装置52は、運転席1Sに着座する運転者の視軸と交差しないように配置されていてもよい。コントローラ50は、例えば、撮像装置51が撮像した画像に視点変換処理を施して生成した出力画像を表示装置52に表示する。表示装置52は、ヘッドアップディスプレイであってもよく、プロジェクタであってもよい。 The display device 52 is a device that displays various images. In this embodiment, the display device 52 is a liquid crystal display and is connected to the controller 50 wirelessly or by wire. The display device 52 is arranged so as to intersect the visual axis (when looking at one point in the hopper 2) of the driver seated in the driver's seat 1S. However, the display device 52 may be arranged so as not to intersect the visual axis of the driver seated in the driver's seat 1S. The controller 50 displays, for example, an output image generated by performing a viewpoint conversion process on the image captured by the image pickup device 51 on the display device 52. The display device 52 may be a head-up display or a projector.

次に、図4を参照し、アスファルトフィニッシャ100に搭載される表示システムGSについて説明する。図4は、表示システムGSの構成例を示すブロック図である。表示システムGSは、主に、コントローラ50、撮像装置51、表示装置52、情報取得装置53、記憶装置54等で構成されている。表示システムGSは、例えば、撮像装置51が撮像した入力画像に基づいて出力画像を生成しその出力画像を表示装置52に表示する。 Next, the display system GS mounted on the asphalt finisher 100 will be described with reference to FIG. FIG. 4 is a block diagram showing a configuration example of the display system GS. The display system GS is mainly composed of a controller 50, an image pickup device 51, a display device 52, an information acquisition device 53, a storage device 54, and the like. The display system GS generates, for example, an output image based on the input image captured by the image pickup device 51, and displays the output image on the display device 52.

情報取得装置53は、情報を取得し、取得した情報をコントローラ50に対して出力する。情報取得装置53は、例えば、ホッパ開閉スイッチ、ホッパシリンダストロークセンサ、コンベア速度ダイヤル、コンベア速度センサ、コンベアスイッチ等の少なくとも1つを含む。ホッパシリンダストロークセンサは、ホッパシリンダ24のストローク量を検出する。コンベア速度センサは、コンベアCVが舗装材を給送する速度を検出する。コンベアスイッチは、コンベアCVをオン・オフするために操作者が利用可能なスイッチである。 The information acquisition device 53 acquires information and outputs the acquired information to the controller 50. The information acquisition device 53 includes, for example, at least one such as a hopper open / close switch, a hopper cylinder stroke sensor, a conveyor speed dial, a conveyor speed sensor, and a conveyor switch. The hopper cylinder stroke sensor detects the stroke amount of the hopper cylinder 24. The conveyor speed sensor detects the speed at which the conveyor CV feeds the pavement material. The conveyor switch is a switch that can be used by the operator to turn the conveyor CV on and off.

記憶装置54は、各種情報を記憶するための装置である。本実施例では、記憶装置54は、入力画像・出力画像対応マップ54aを参照可能に記憶する不揮発性記憶装置である。 The storage device 54 is a device for storing various types of information. In this embodiment, the storage device 54 is a non-volatile storage device that stores the input image / output image correspondence map 54a in a referenceable manner.

入力画像・出力画像対応マップ54aは、入力画像平面上の座標と出力画像平面上の座標との対応関係を記憶している。その対応関係は、所望の視点変換を実現できるよう、撮像装置51の光学中心、焦点距離、CCDサイズ、光軸方向ベクトル、カメラ水平方向ベクトル、射影方式等の各種パラメータに基づいて予め設定されている。その対応関係は、入力画像が見掛け上の歪曲やアオリを含む場合には、その見掛け上の歪曲やアオリが出力画像に現れないように設定されていてもよい。 The input image / output image correspondence map 54a stores the correspondence between the coordinates on the input image plane and the coordinates on the output image plane. The correspondence is preset based on various parameters such as the optical center of the imaging device 51, the focal length, the CCD size, the optical axis direction vector, the camera horizontal direction vector, and the projection method so that the desired viewpoint conversion can be realized. There is. When the input image contains an apparent distortion or tilt, the correspondence may be set so that the apparent distortion or tilt does not appear in the output image.

コントローラ50は、機能要素として視点変換部50a及びモデル作成部50bを含む。視点変換部50a及びモデル作成部50bは、ソフトウェア、ハードウェア又はファームウェアで構成される。 The controller 50 includes a viewpoint conversion unit 50a and a model creation unit 50b as functional elements. The viewpoint conversion unit 50a and the model creation unit 50b are composed of software, hardware, or firmware.

視点変換部50aは、出力画像を生成する機能要素である。本実施例では、記憶装置54に記憶された入力画像・出力画像対応マップ54aを参照し、撮像装置51が撮像した入力画像が位置する入力画像平面上の座標と、運転席視点の出力画像が位置する出力画像平面上の座標とを対応付ける。具体的には、視点変換部50aは、入力画像における各画素の値(例えば、輝度値、色相値、彩度値等である。)を出力画像における各画素の値に対応付けて出力画像を生成する。 The viewpoint conversion unit 50a is a functional element that generates an output image. In this embodiment, the coordinates on the input image plane where the input image captured by the image pickup device 51 is located and the output image from the driver's seat viewpoint are obtained with reference to the input image / output image correspondence map 54a stored in the storage device 54. Corresponds to the coordinates on the output image plane where it is located. Specifically, the viewpoint conversion unit 50a associates the value of each pixel in the input image (for example, a luminance value, a hue value, a saturation value, etc.) with the value of each pixel in the output image to generate the output image. Generate.

モデル作成部50bは、出力画像上に重畳表示される三次元コンピュータグラフィックスのモデル(以下、「3Dモデル」とする。)を作成する機能要素である。本実施例では、モデル作成部50bは、視点変換部50aによって生成された、ホッパ2の内側の視点変換画像に適合するように、トラクタ1の3Dモデルを作成する。トラクタ1のボンネット1B、ホッパウイング20、ステアリング1H、コントロールパネル1P等の3Dモデルを作成してもよい。 The model creation unit 50b is a functional element that creates a model of three-dimensional computer graphics (hereinafter, referred to as "3D model") superimposed and displayed on the output image. In this embodiment, the model creation unit 50b creates a 3D model of the tractor 1 so as to match the viewpoint conversion image inside the hopper 2 generated by the viewpoint conversion unit 50a. A 3D model such as the bonnet 1B of the tractor 1, the hopper wing 20, the steering 1H, and the control panel 1P may be created.

本実施例では、コントローラ50は、視点変換部50aにより、入力画像・出力画像対応マップ54aを参照する。そして、出力画像平面上の各座標に対応する入力画像平面上の座標が有する値(例えば、輝度値、色相値、彩度値等である。)を取得し、その取得した値を、対応する出力画像平面上の各座標の値として採用する。 In this embodiment, the controller 50 refers to the input image / output image correspondence map 54a by the viewpoint conversion unit 50a. Then, the values (for example, luminance value, hue value, saturation value, etc.) possessed by the coordinates on the input image plane corresponding to each coordinate on the output image plane are acquired, and the acquired values correspond to the acquired values. It is adopted as the value of each coordinate on the output image plane.

その後、コントローラ50は、出力画像平面上の全ての座標の値を入力画像平面上の座標の値に関連付けたか否かを判定する。未だ全ての座標の値を関連付けていないと判定した場合には、上述の処理を繰り返す。 After that, the controller 50 determines whether or not all the coordinate values on the output image plane are associated with the coordinate values on the input image plane. If it is determined that the values of all the coordinates are not yet associated, the above process is repeated.

一方、全ての座標の値を関連付けたと判定した場合には、コントローラ50は、モデル作成部50bにより、トラクタ1、ホッパウイング20等の3Dモデルを出力画像上に重畳表示する。本実施例では、3Dモデルを重畳させる出力画像上の位置は予め登録されているが、動的に導き出されてもよい。また、コントローラ50は、3Dモデルを表示した後で、入力画像平面上の座標と出力画像平面上の座標との対応付けを行ってもよい。 On the other hand, when it is determined that the values of all the coordinates are associated with each other, the controller 50 superimposes and displays the 3D models such as the tractor 1 and the hopper wing 20 on the output image by the model creation unit 50b. In this embodiment, the position on the output image on which the 3D model is superimposed is registered in advance, but it may be dynamically derived. Further, the controller 50 may associate the coordinates on the input image plane with the coordinates on the output image plane after displaying the 3D model.

次に、図5を参照し、アスファルトフィニッシャ100に搭載された4台の撮像装置51(前カメラ51F、左カメラ51L、右カメラ51R、及び、コンベアカメラ51C)のそれぞれが撮像した入力画像を用いて生成される出力画像について説明する。図5は、出力画像の一例を示す図である。具体的には、図5(A)は、表示装置52に表示された出力画像の一例を示す。図5(B)は、図5(A)の出力画像を生成するために用いられる入力画像の区分を示す。 Next, with reference to FIG. 5, input images captured by each of the four image pickup devices 51 (front camera 51F, left camera 51L, right camera 51R, and conveyor camera 51C) mounted on the asphalt finisher 100 are used. The output image generated by the above will be described. FIG. 5 is a diagram showing an example of an output image. Specifically, FIG. 5A shows an example of an output image displayed on the display device 52. FIG. 5B shows the classification of the input image used to generate the output image of FIG. 5A.

図5(A)の出力画像は、ホッパ2及びコンベアCVの上にある舗装材PVを運転席1Sから見たときの状態を仮想的に表す画像である。図5(A)の出力画像は、主に、視点変換部50aによって生成される画像G1〜G4と、モデル作成部50bによって作成される3DモデルCG1〜CG8とを含む。 The output image of FIG. 5A is an image that virtually represents the state when the pavement material PV on the hopper 2 and the conveyor CV is viewed from the driver's seat 1S. The output image of FIG. 5A mainly includes images G1 to G4 generated by the viewpoint conversion unit 50a and 3D models CG1 to CG8 created by the model creation unit 50b.

3DモデルCG1〜CG5は、ワイヤーフレームモデルで表現されている。サーフェスモデル又はソリッドモデルで表現されていてもよい。サーフェスモデル又はソリッドモデルの場合には半透明で表示される。3DモデルCG6〜CG8は、サーフェスモデルで表現されている。ワイヤーフレームモデル又はソリッドモデルで表現されていてもよい。3DモデルCG1〜CG8は、他の表現方法で表現されていてもよい。 The 3D models CG1 to CG5 are represented by wireframe models. It may be represented by a surface model or a solid model. In the case of a surface model or a solid model, it is displayed semi-transparently. The 3D models CG6 to CG8 are represented by surface models. It may be represented by a wireframe model or a solid model. The 3D models CG1 to CG8 may be expressed by other expression methods.

3DモデルCG1は、トラクタ1の本体の3Dモデルであり、ボンネット1Bの3Dモデルを含む。3DモデルCG2は、左ホッパウイング20Lの3Dモデルである。3DモデルCG3は、コントロールパネル1Pの3Dモデルである。3DモデルCG4は、ステアリング1Hの3Dモデルである。3DモデルCG5は、右ホッパウイング20Rの3Dモデルである。3DモデルCG6は、ガイドレール1Gの3Dモデルである。3DモデルCG7は、左後輪5Lの3Dモデルである。3DモデルCG8は、右後輪5Rの3Dモデルである。 The 3D model CG1 is a 3D model of the main body of the tractor 1 and includes a 3D model of the bonnet 1B. The 3D model CG2 is a 3D model of the left hopper wing 20L. The 3D model CG3 is a 3D model of the control panel 1P. The 3D model CG4 is a 3D model of steering 1H. The 3D model CG5 is a 3D model of the right hopper wing 20R. The 3D model CG6 is a 3D model of the guide rail 1G. The 3D model CG7 is a 3D model with a left rear wheel of 5L. The 3D model CG8 is a 3D model of the right rear wheel 5R.

画像G1は、アスファルトフィニッシャ100の左前方に存在する作業者の画像である。画像G2は、ホッパ2の内側の画像であり、ホッパ2内の舗装材PVの画像を含む。画像G3は、アスファルトフィニッシャ100の右前方に存在するマンホール蓋の画像である。画像G4は、コンベア部分CV1の画像であり、コンベア部分CV1上の舗装材PVの画像を含む。 Image G1 is an image of an operator present on the left front side of the asphalt finisher 100. The image G2 is an image of the inside of the hopper 2 and includes an image of the pavement material PV in the hopper 2. Image G3 is an image of a manhole cover existing on the right front side of the asphalt finisher 100. Image G4 is an image of the conveyor portion CV1 and includes an image of the pavement material PV on the conveyor portion CV1.

図5(B)は、図5(A)に対応する画像であり、3DモデルCG1〜CG8の表示を省略し、画像G1〜G4のみを表示している。 5 (B) is an image corresponding to FIG. 5 (A), and the display of the 3D models CG1 to CG8 is omitted, and only the images G1 to G4 are displayed.

図5(B)に示すように、作業者の画像G1は、左画像R1に含まれている。左画像R1は、左カメラ51Lが撮像した入力画像に基づいて生成される画像である。本実施例では、左画像R1は、左ホッパウイング20Lの車幅方向外側(左側)の画像を含む。コントローラ50は、左カメラ51Lが撮像した入力画像の一部を切り出して視点変換部50aによる視点変換処理を施すことで左画像R1を生成する。左画像R1は、出力画像の左側上部に配置される。 As shown in FIG. 5B, the worker image G1 is included in the left image R1. The left image R1 is an image generated based on the input image captured by the left camera 51L. In this embodiment, the left image R1 includes an image of the left hopper wing 20L on the outside (left side) in the vehicle width direction. The controller 50 generates the left image R1 by cutting out a part of the input image captured by the left camera 51L and performing the viewpoint conversion process by the viewpoint conversion unit 50a. The left image R1 is arranged at the upper left side of the output image.

また、ホッパ2の内側の画像G2は、中央上部画像R2に含まれている。中央上部画像R2は、前カメラ51Fが撮像した入力画像に基づいて生成される画像である。本実施例では、中央上部画像R2は、トラクタ1側からホッパ2の内側を見下ろしたときの様子を表す画像を含む。コントローラ50は、前カメラ51Fが撮像した入力画像の一部を切り出して視点変換処理を施すことで中央上部画像R2を生成する。中央上部画像R2は、出力画像の中央上部に配置される。 Further, the image G2 inside the hopper 2 is included in the central upper image R2. The upper center image R2 is an image generated based on the input image captured by the front camera 51F. In this embodiment, the central upper image R2 includes an image showing a state when the inside of the hopper 2 is looked down from the tractor 1 side. The controller 50 generates the central upper image R2 by cutting out a part of the input image captured by the front camera 51F and performing the viewpoint conversion process. The upper center image R2 is arranged in the upper center of the output image.

また、路面情報としてのマンホール蓋の画像G3は、右画像R3に含まれている。右画像R3は、右カメラ51Rが撮像した入力画像に基づいて生成される画像である。本実施例では、右画像R3は、右ホッパウイング20Rの車幅方向外側(右側)の画像を含む。コントローラ50は、右カメラ51Rが撮像した入力画像の一部を切り出して視点変換部50aによる視点変換処理を施すことで右画像R3を生成する。右画像R3は、出力画像の右側上部に配置される。 Further, the image G3 of the manhole cover as road surface information is included in the right image R3. The right image R3 is an image generated based on the input image captured by the right camera 51R. In this embodiment, the right image R3 includes an image of the right hopper wing 20R on the outside (right side) in the vehicle width direction. The controller 50 generates the right image R3 by cutting out a part of the input image captured by the right camera 51R and performing the viewpoint conversion process by the viewpoint conversion unit 50a. The right image R3 is arranged on the upper right side of the output image.

また、コンベア部分CV1の画像G4は、中央下部画像R4に含まれている。中央下部画像R4は、コンベアカメラ51Cが撮像した入力画像に基づいて生成される画像である。本実施例では、中央下部画像R4は、コンベア部分CV1の上面を上から見たときの様子を表す画像を含む。コントローラ50は、コンベアカメラ51Cが撮像した入力画像の一部を切り出して視点変換処理を施すことで中央下部画像R4を生成する。中央下部画像R4は、出力画像の中央下部に配置される。 Further, the image G4 of the conveyor portion CV1 is included in the lower center image R4. The lower center image R4 is an image generated based on the input image captured by the conveyor camera 51C. In this embodiment, the lower center image R4 includes an image showing a state when the upper surface of the conveyor portion CV1 is viewed from above. The controller 50 generates the lower center image R4 by cutting out a part of the input image captured by the conveyor camera 51C and performing the viewpoint conversion process. The lower center image R4 is arranged at the lower center of the output image.

本実施例では、中央下部画像R4は、第1部分R4a、第2部分R4b、及び、第3部分R4cを含む。第1部分R4aは、現時点においてコンベアカメラ51Cが撮像した入力画像に基づいて生成される画像である。第2部分R4bは、現時点より前の第1時点においてコンベアカメラ51Cが撮像した入力画像に基づいて生成される画像である。第3部分R4cは、第1時点より前の第2時点においてコンベアカメラ51Cが撮像した入力画像に基づいて生成される画像である。中央下部画像R4は、現時点でコンベアカメラ51Cが撮像した画像のみに基づいて生成されてもよく、2つ又は4つ以上の時点でコンベアカメラ51Cが撮像した2つ又は4つ以上の画像に基づいて生成されてもよい。コントローラ50は、情報取得装置53としてのコンベア速度センサの出力に基づいて中央下部画像R4の生成方法を変更してもよい。 In this embodiment, the lower center image R4 includes a first portion R4a, a second portion R4b, and a third portion R4c. The first portion R4a is an image generated based on the input image captured by the conveyor camera 51C at the present time. The second portion R4b is an image generated based on the input image captured by the conveyor camera 51C at the first time point before the present time. The third portion R4c is an image generated based on the input image captured by the conveyor camera 51C at the second time point before the first time point. The lower center image R4 may be generated based only on the image captured by the conveyor camera 51C at the present time, or based on two or four or more images captured by the conveyor camera 51C at two or four or more time points. May be generated. The controller 50 may change the method of generating the lower center image R4 based on the output of the conveyor speed sensor as the information acquisition device 53.

本実施例では、4つのカメラのそれぞれの入力画像に関する入力画像平面上の座標と出力画像平面上の座標との対応関係は、視点変換処理による効果を予め取り込んだ状態で、入力画像・出力画像対応マップ54aに記憶されている。そのため、コントローラ50は、入力画像・出力画像対応マップ54aを参照するだけで複数の入力画像平面上の座標を出力画像平面上の座標に対応付けることができる。その結果、コントローラ50は、比較的低い演算負荷で出力画像を生成し且つ表示できる。 In this embodiment, the correspondence between the coordinates on the input image plane and the coordinates on the output image plane for each of the input images of the four cameras is the input image / output image in a state where the effect of the viewpoint conversion process is taken in advance. It is stored in the correspondence map 54a. Therefore, the controller 50 can associate the coordinates on the plurality of input image planes with the coordinates on the output image plane only by referring to the input image / output image correspondence map 54a. As a result, the controller 50 can generate and display an output image with a relatively low calculation load.

また、コントローラ50は、トラクタ1の本体の3DモデルCG1の左部分と、左ホッパウイング20Lの3DモデルCG2とを左画像R1上に重畳表示する。そのため、運転席視点の出力画像を見た運転者は、あたかも透明又は半透明であるかのようなトラクタ1及び左ホッパウイング20Lを通して作業者の画像G1を視認できる。その結果、運転者は、作業者がアスファルトフィニッシャ100の左前方に存在することを直感的に把握できる。 Further, the controller 50 superimposes and displays the left portion of the 3D model CG1 of the main body of the tractor 1 and the 3D model CG2 of the left hopper wing 20L on the left image R1. Therefore, the driver who sees the output image from the driver's seat viewpoint can visually recognize the image G1 of the operator through the tractor 1 and the left hopper wing 20L as if they are transparent or translucent. As a result, the driver can intuitively grasp that the operator is in front of the left front of the asphalt finisher 100.

また、コントローラ50は、トラクタ1の本体の3DモデルCG1の中央部分を中央上部画像R2上に重畳表示する。そのため、運転席視点の出力画像を見た運転者は、あたかも透明又は半透明であるかのようなトラクタ1を通してホッパ2の内側の画像G2を視認できる。その結果、運転者は、ホッパ2の内側がどのようになっているかを直感的に把握できる。例えば、ホッパ2の内側に舗装材PVがどの程度入っているかを直感的に把握できる。 Further, the controller 50 superimposes and displays the central portion of the 3D model CG1 of the main body of the tractor 1 on the upper center image R2. Therefore, the driver who sees the output image from the driver's seat viewpoint can visually recognize the image G2 inside the hopper 2 through the tractor 1 as if it were transparent or translucent. As a result, the driver can intuitively grasp what the inside of the hopper 2 looks like. For example, it is possible to intuitively grasp how much the pavement material PV is contained inside the hopper 2.

また、コントローラ50は、トラクタ1の本体の3DモデルCG1の右部分と、右ホッパウイング20Rの3DモデルCG5とを右画像R3上に重畳表示する。そのため、運転席視点の出力画像を見た運転者は、あたかも透明又は半透明であるかのようなトラクタ1及び右ホッパウイング20Rを通してマンホール蓋の画像G3を視認できる。その結果、運転者は、マンホール蓋がアスファルトフィニッシャ100の右前方に存在することを直感的に把握して後輪5のタイヤ、前輪6のタイヤ等が乗り上げないようにアスファルトフィニッシャ100を操作できる。 Further, the controller 50 superimposes and displays the right portion of the 3D model CG1 of the main body of the tractor 1 and the 3D model CG5 of the right hopper wing 20R on the right image R3. Therefore, the driver who sees the output image from the driver's seat viewpoint can visually recognize the image G3 of the manhole cover through the tractor 1 and the right hopper wing 20R as if they are transparent or translucent. As a result, the driver can intuitively grasp that the manhole cover is located in front of the asphalt finisher 100 and operate the asphalt finisher 100 so that the tires of the rear wheels 5 and the tires of the front wheels 6 do not ride on the asphalt finisher 100.

また、コントローラ50は、トラクタ1の本体の3DモデルCG1の中央部分を中央下部画像R4上に重畳表示する。そのため、運転席視点の出力画像を見た運転者は、あたかも透明又は半透明であるかのようなトラクタ1を通してコンベア部分CV1の画像G4を視認できる。その結果、運転者は、コンベア部分CV1の上がどのようになっているかを直感的に把握できる。例えば、コンベア部分CV1の上に舗装材PVがどの程度載っているかを直感的に把握できる。 Further, the controller 50 superimposes and displays the central portion of the 3D model CG1 of the main body of the tractor 1 on the lower center image R4. Therefore, the driver who sees the output image from the driver's seat viewpoint can visually recognize the image G4 of the conveyor portion CV1 through the tractor 1 as if it were transparent or translucent. As a result, the driver can intuitively grasp what is on the conveyor portion CV1. For example, it is possible to intuitively grasp how much the pavement material PV is placed on the conveyor portion CV1.

また、上述の実施例では、左画像R1、中央上部画像R2、右画像R3、及び、中央下部画像R4のそれぞれは、対応する1つのカメラが撮像した入力画像に基づいて生成されている。しかしながら、本発明はこの構成に限定されるものではない。例えば、左画像R1、中央上部画像R2、右画像R3、及び、中央下部画像R4のそれぞれは、2つ以上のカメラが撮像した入力画像に基づいて生成されてもよい。 Further, in the above-described embodiment, each of the left image R1, the upper center image R2, the right image R3, and the lower center image R4 is generated based on the input image captured by one corresponding camera. However, the present invention is not limited to this configuration. For example, each of the left image R1, the upper center image R2, the right image R3, and the lower center image R4 may be generated based on input images captured by two or more cameras.

上述のように、アスファルトフィニッシャ100は、運転席視点で死角となるホッパ2の内側の画像を撮像する第1撮像装置としての前カメラ51Fと、前カメラ51Fが撮像した画像を視点変換して生成される運転席視点の出力画像(例えば中央上部画像R2を含む出力画像)を表示する表示装置52とを備える。そのため、トラクタ1の前方の様子をより直感的に運転者に認識させることができる。 As described above, the asphalt finisher 100 is generated by converting the viewpoint of the front camera 51F as the first imaging device that captures the image of the inside of the hopper 2 which is the blind spot from the driver's seat viewpoint and the image captured by the front camera 51F. It is provided with a display device 52 that displays an output image of the driver's seat viewpoint (for example, an output image including the upper center image R2). Therefore, the driver can more intuitively recognize the state in front of the tractor 1.

表示装置52は、望ましくは、トラクタ1の3DモデルCG1と共に、運転席視点の出力画像(例えば、左画像R1、中央上部画像R2及び右画像R3を含む出力画像)を表示する。そのため、運転者は、出力画像を見ることで、ホッパ2に関する死角を視認できる。その結果、アスファルトフィニッシャ100は、視認性、安全性、操作性及び作業性を向上させることができる。具体的には、アスファルトフィニッシャ100は、ホッパ2内の舗装材PVの残量、路面情報としての舗装予定の路面における地物(例えば、マンホールである。)の位置等を運転者に直感的に認識させることができる。また、ホッパ2の周辺で作業する作業者の位置を運転者に直感的に認識させることができる。そのため、運転者は、出力画像を見て地物や作業者の位置を確認した上で、ホッパウイング20の開閉、コンベアCVのオン・オフ等の各種操作を実行できる。 The display device 52 preferably displays an output image of the driver's seat viewpoint (for example, an output image including the left image R1, the upper center image R2, and the right image R3) together with the 3D model CG1 of the tractor 1. Therefore, the driver can visually recognize the blind spot regarding the hopper 2 by looking at the output image. As a result, the asphalt finisher 100 can improve visibility, safety, operability and workability. Specifically, the asphalt finisher 100 intuitively gives the driver the remaining amount of the pavement material PV in the hopper 2, the position of a feature (for example, a manhole) on the road surface to be paved as road surface information, and the like. Can be recognized. In addition, the driver can intuitively recognize the position of the worker working around the hopper 2. Therefore, the driver can perform various operations such as opening / closing the hopper wing 20 and turning on / off the convair CV after confirming the positions of the features and the operator by looking at the output image.

表示装置52は、例えば、トラクタ1のボンネット1Bの3Dモデルと共に、ホッパ2内の舗装材PVの画像を含む運転席視点の出力画像(例えば中央上部画像R2を含む出力画像)を表示してもよい。この場合、ホッパ2の内側にある舗装材PVの様子をより直感的に運転者に認識させることができる。 The display device 52 may display, for example, an output image of the driver's seat viewpoint including an image of the pavement material PV in the hopper 2 (for example, an output image including the upper center image R2) together with the 3D model of the bonnet 1B of the tractor 1. Good. In this case, the driver can more intuitively recognize the state of the pavement material PV inside the hopper 2.

表示装置52は、例えば、左ホッパウイング20Lの3Dモデルと共に、第2撮像装置としての左カメラ51Lが撮像した画像を視点変換して生成される運転席視点の出力画像(例えば左画像R1を含む出力画像)を表示してもよい。この場合、運転席視点で死角となる左ホッパウイング20Lの車幅方向外側(左側)の様子をより直感的に運転者に認識させることができる。同様に、表示装置52は、例えば、右ホッパウイング20Rの3Dモデルと共に、第2撮像装置としての右カメラ51Rが撮像した画像を視点変換して生成される運転席視点の出力画像(例えば右画像R3を含む出力画像)を表示してもよい。この場合、運転席視点で死角となる右ホッパウイング20Rの車幅方向外側(右側)の様子をより直感的に運転者に認識させることができる。 The display device 52 includes, for example, a 3D model of the left hopper wing 20L and an output image of the driver's seat viewpoint (for example, the left image R1) generated by converting the image captured by the left camera 51L as the second imaging device into a viewpoint. The output image) may be displayed. In this case, the driver can more intuitively recognize the state of the left hopper wing 20L outside (left side) in the vehicle width direction, which is a blind spot from the driver's seat viewpoint. Similarly, the display device 52, for example, together with the 3D model of the right hopper wing 20R, outputs an output image of the driver's seat viewpoint (for example, the right image) generated by converting the viewpoint of the image captured by the right camera 51R as the second imaging device. An output image including R3) may be displayed. In this case, the driver can more intuitively recognize the state of the right hopper wing 20R outside (right side) in the vehicle width direction, which is a blind spot from the driver's seat viewpoint.

表示装置52は、例えば、コンベアCVの上にあるトラクタ1の3Dモデルと共に、第3撮像装置としてのコンベアカメラ51Cが撮像した画像を視点変換して生成される運転席視点の出力画像(例えば中央下部画像R4を含む出力画像)を表示してもよい。この場合、コンベア部分CV1の上にある舗装材PVの様子をより直感的に運転者に認識させることができる。 The display device 52, for example, is an output image of the driver's seat viewpoint (for example, the center) generated by converting the viewpoint of the image captured by the conveyor camera 51C as the third image pickup device together with the 3D model of the tractor 1 on the conveyor CV. The output image including the lower image R4) may be displayed. In this case, the driver can more intuitively recognize the state of the pavement material PV on the conveyor portion CV1.

次に、図6を参照し、表示装置52としてプロジェクタが採用された場合について説明する。図6は、プロジェクタがトラクタ1の表面に表示(投影)する運転席視点の出力画像(投影画像)の一例を示す図である。具体的には、図6(A)は、運転席1Sに着座する運転者が視認可能な投影画像PGが投影される前のトラクタ1の表面を示す。図6(B)は、投影画像PGの一例を示す。図6(C)は、投影画像PGが投影された後のトラクタ1の表面を示す。図6の例では、プロジェクタは、運転席1Sの後方で、ガイドレール1Gから鉛直上方に延びる取り付け用ステーの上端に取り付けられている。アスファルトフィニッシャ100がキャノピーを備えている場合、プロジェクタはキャノピーの天井部に取り付けられていてもよい。 Next, a case where a projector is adopted as the display device 52 will be described with reference to FIG. FIG. 6 is a diagram showing an example of an output image (projected image) of the driver's seat viewpoint displayed (projected) on the surface of the tractor 1 by the projector. Specifically, FIG. 6A shows the surface of the tractor 1 before the projected image PG visible to the driver seated in the driver's seat 1S is projected. FIG. 6B shows an example of the projected image PG. FIG. 6C shows the surface of the tractor 1 after the projected image PG is projected. In the example of FIG. 6, the projector is attached to the upper end of the attachment stay extending vertically upward from the guide rail 1G behind the driver's seat 1S. If the asphalt finisher 100 is equipped with a canopy, the projector may be mounted on the ceiling of the canopy.

この例では、投影画像PGは、図6(B)に示すように、ホッパ2の3DモデルCG10、コンベアCVの3DモデルCG11、ドットパターンで表される画像R10、及び、斜線パターンで表される画像R11を含む。 In this example, as shown in FIG. 6B, the projected image PG is represented by a 3D model CG10 of the hopper 2, a 3D model CG11 of the conveyor CV, an image R10 represented by a dot pattern, and a diagonal line pattern. Includes image R11.

画像R10は、前カメラ51Fが撮像した入力画像に基づいて生成される画像である。この例では、画像R10は、トラクタ1側からホッパ2の内側を見下ろしたときの様子を表す画像を含む。コントローラ50は、前カメラ51Fが撮像した入力画像の一部を切り出して視点変換処理を施すことで画像R10を生成する。この例では、画像R10は、ホッパ2内の舗装材PVの画像を含んでいる。 The image R10 is an image generated based on the input image captured by the front camera 51F. In this example, the image R10 includes an image showing a state when the inside of the hopper 2 is looked down from the tractor 1 side. The controller 50 generates the image R10 by cutting out a part of the input image captured by the front camera 51F and performing the viewpoint conversion process. In this example, image R10 includes an image of the pavement PV in the hopper 2.

画像R11は、コンベアカメラ51Cが撮像した入力画像に基づいて生成される画像である。この例では、画像R11は、コンベア部分CV1の上面を上から見たときの様子を表す画像を含む。コントローラ50は、コンベアカメラ51Cが撮像した入力画像の一部を切り出して視点変換処理を施すことで画像R11を生成する。この例では、画像R11は、コンベアCVで後方に給送される舗装材PVの画像を含んでいる。 The image R11 is an image generated based on the input image captured by the conveyor camera 51C. In this example, the image R11 includes an image showing a state when the upper surface of the conveyor portion CV1 is viewed from above. The controller 50 generates the image R11 by cutting out a part of the input image captured by the conveyor camera 51C and performing the viewpoint conversion process. In this example, image R11 includes an image of the pavement PV fed rearward by the conveyor CV.

この例では、左カメラ51L及び右カメラ51Rのそれぞれが撮像した入力画像は、出力画像の生成には利用されていない。しかしながら、プロジェクタは、例えば、左カメラ51Lが撮像した入力画像に基づいて生成される運転席視点の画像を、左ホッパウイング20Lの3Dモデルのところに投影してもよい。左ホッパウイング20Lの車幅方向外側(左側)の様子をより直感的に運転者に認識させるためである。右カメラ51Rが撮像した入力画像に基づいて生成される画像についても同様である。 In this example, the input images captured by each of the left camera 51L and the right camera 51R are not used for generating the output image. However, the projector may, for example, project an image of the driver's seat viewpoint generated based on the input image captured by the left camera 51L onto the 3D model of the left hopper wing 20L. This is to allow the driver to more intuitively recognize the state of the left hopper wing 20L on the outside (left side) in the vehicle width direction. The same applies to the image generated based on the input image captured by the right camera 51R.

この構成により、アスファルトフィニッシャ100は、表示装置52としての液晶ディスプレイに図5の出力画像を表示させる場合と同様の効果を実現できる。 With this configuration, the asphalt finisher 100 can realize the same effect as when the output image of FIG. 5 is displayed on the liquid crystal display as the display device 52.

以上、本発明の好ましい実施例が説明された。しかしながら、本発明は、上述した実施例に限定されることはない。上述した実施例は、本発明の範囲を逸脱することなしに、種々の変形、置換等が適用され得る。また、上述の実施例を参照して説明された特徴のそれぞれは、技術的に矛盾しない限り、適宜に組み合わされてもよい。 The preferred embodiments of the present invention have been described above. However, the present invention is not limited to the above-mentioned examples. Various modifications, substitutions, etc. can be applied to the above-described examples without departing from the scope of the present invention. In addition, each of the features described with reference to the above-described embodiments may be appropriately combined as long as there is no technical contradiction.

例えば、アスファルトフィニッシャ100は、グースアスファルト合材を用いるグースアスファルトフィニッシャであってもよい。 For example, the asphalt finisher 100 may be a goose asphalt finisher using a goose asphalt mixture.

1・・・トラクタ 1B・・・ボンネット 1G・・・ガイドレール 1H・・・ステアリング 1S・・・運転席 2・・・ホッパ 3・・・スクリード 3A・・・レベリングアーム 5・・・後輪 6・・・前輪 20・・・ホッパウイング 20L・・・左ホッパウイング 20R・・・右ホッパウイング 24・・・ホッパシリンダ 24L・・・左ホッパシリンダ 24R・・・右ホッパシリンダ 30・・・前側スクリード 31・・・後側スクリード 50・・・コントローラ 50a・・・視点変換部 50b・・・モデル作成部 51・・・撮像装置 51C・・・コンベアカメラ 51F・・・前カメラ 51L・・・左カメラ 51R・・・右カメラ 52・・・表示装置 53・・・情報取得装置 54・・・記憶装置 54a・・・入力画像・出力画像対応マップ 100・・・アスファルトフィニッシャ AP・・・既設舗装体 BL、BR・・・棒部材 CG1〜CG8・・・3Dモデル CV・・・コンベア G1〜G4・・・画像 LS・・・照明装置 NP・・・新設舗装体 PV・・・舗装材 R1・・・左画像 R2・・・中央上部画像 R3・・・右画像 R4・・・中央下部画像 R4a・・・第1部分 R4b・・・第2部分 R4c・・・第3部分 RB・・・路盤 SC・・・スクリュ 1 ... tractor 1B ... bonnet 1G ... guide rail 1H ... steering 1S ... driver's seat 2 ... hopper 3 ... screed 3A ... leveling arm 5 ... rear wheel 6・ ・ ・ Front wheel 20 ・ ・ ・ Hopper wing 20L ・ ・ ・ Left hopper wing 20R ・ ・ ・ Right hopper wing 24 ・ ・ ・ Hopper cylinder 24L ・ ・ ・ Left hopper cylinder 24R ・ ・ ・ Right hopper cylinder 30 ・ ・ ・ Front side screed 31 ... Rear screed 50 ... Controller 50a ... Viewpoint conversion unit 50b ... Model creation unit 51 ... Imaging device 51C ... Conveyor camera 51F ... Front camera 51L ... Left camera 51R ・ ・ ・ Right camera 52 ・ ・ ・ Display device 53 ・ ・ ・ Information acquisition device 54 ・ ・ ・ Storage device 54a ・ ・ ・ Input image / output image correspondence map 100 ・ ・ ・ Asphalt finisher AP ・ ・ ・ Existing pavement BL , BR ・ ・ ・ Bar members CG1 ・ CG8 ・ ・ ・ 3D model CV ・ ・ ・ Conveyor G1 ・ G4 ・ ・ ・ Image LS ・ ・ ・ Lighting device NP ・ ・ ・ New pavement PV ・ ・ ・ Pavement material R1 ・ ・ ・Left image R2 ... Upper center image R3 ... Right image R4 ... Lower center image R4a ... 1st part R4b ... 2nd part R4c ... 3rd part RB ... Roadbed SC ...・ ・ Screw

Claims (7)

ボンネットを含むトラクタと、
前記トラクタの前側に設置されて舗装材を受け入れるホッパと、
前記ホッパ内の舗装材を前記トラクタの後側へ給送するコンベアと、
前記コンベアにより給送された前記舗装材を前記トラクタの後側で敷き拡げるスクリュと、
前記スクリュにより敷き拡げられた前記舗装材を前記スクリュの後側で敷き均すスクリードと、
運転席視点で死角となる前記ホッパの内側の画像を撮像する第1撮像装置と、
前記第1撮像装置が撮像した画像を視点変換して生成される前記運転席視点の画像を少なくとも前記ボンネットの中央部を透過した状態で表示する表示装置と、を備える、
アスファルトフィニッシャ。
With a tractor including the bonnet,
A hopper installed on the front side of the tractor to receive pavement material,
A conveyor that feeds the pavement material in the hopper to the rear side of the tractor,
A screw that spreads the pavement material fed by the conveyor behind the tractor, and
A screed that spreads the pavement material spread by the screw on the rear side of the screw, and
A first imaging device that captures an image of the inside of the hopper, which is a blind spot from the driver's seat viewpoint,
A display device including a display device that displays an image of the driver's seat viewpoint generated by converting the viewpoint of the image captured by the first imaging device in a state of being transmitted through at least the central portion of the bonnet.
Asphalt finisher.
前記表示装置は、前記トラクタの三次元コンピュータグラフィックスと共に、前記運転席視点の画像を表示する、
請求項1に記載のアスファルトフィニッシャ。
The display device displays an image of the driver's seat viewpoint together with the three-dimensional computer graphics of the tractor.
The asphalt finisher according to claim 1.
前記表示装置は、前記トラクタ上に前記運転席視点の画像を投影する、
請求項1又は2に記載のアスファルトフィニッシャ。
The display device projects an image of the driver's seat viewpoint onto the tractor.
The asphalt finisher according to claim 1 or 2.
前記表示装置は、前記トラクタの前記ボンネットの三次元コンピュータグラフィックスと共に、前記ホッパ内の前記舗装材の画像を含む前記運転席視点の画像を表示する、
請求項1乃至3の何れか一項に記載のアスファルトフィニッシャ。
The display device, together with three-dimensional computer graphics of the bonnet of the tractor, to display an image of the driver's seat viewpoints including image of the paving material in the hopper,
The asphalt finisher according to any one of claims 1 to 3.
前記運転席視点で死角となるホッパウイングの車幅方向外側の画像を撮像する第2撮像装置を備え、
前記表示装置は、前記ホッパウイングの三次元コンピュータグラフィックスと共に、前記第2撮像装置が撮像した画像を視点変換して生成される前記運転席視点の画像を表示する、
請求項1乃至4の何れか一項に記載のアスファルトフィニッシャ。
A second imaging device for capturing an image of the outside of the hopper wing in the vehicle width direction, which is a blind spot from the driver's seat viewpoint, is provided.
The display device displays the image of the driver's seat viewpoint generated by converting the viewpoint of the image captured by the second imaging device together with the three-dimensional computer graphics of the hopper wing.
The asphalt finisher according to any one of claims 1 to 4.
前記表示装置は、前記第2撮像装置が撮像した路面情報の画像を視点変換して生成される前記運転席視点の画像を表示する、
請求項5に記載のアスファルトフィニッシャ。
The display device displays an image of the driver's seat viewpoint generated by converting the viewpoint of the image of the road surface information captured by the second imaging device.
The asphalt finisher according to claim 5.
前記コンベアのうちの前記トラクタの内部にある部分の画像を撮像する第3撮像装置を備え、
前記表示装置は、前記コンベアの上にある前記トラクタの三次元コンピュータグラフィックスと共に、前記第3撮像装置が撮像した画像を視点変換して生成される前記運転席視点の画像を表示する、
請求項1乃至6の何れか一項に記載のアスファルトフィニッシャ。
A third image pickup device for capturing an image of a portion of the conveyor inside the tractor is provided.
The display device displays an image of the driver's seat viewpoint generated by converting the image captured by the third imaging device into a viewpoint together with the three-dimensional computer graphics of the tractor on the conveyor.
The asphalt finisher according to any one of claims 1 to 6.
JP2017126503A 2017-06-28 2017-06-28 Asphalt finisher Active JP6896525B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017126503A JP6896525B2 (en) 2017-06-28 2017-06-28 Asphalt finisher

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017126503A JP6896525B2 (en) 2017-06-28 2017-06-28 Asphalt finisher

Publications (2)

Publication Number Publication Date
JP2019007307A JP2019007307A (en) 2019-01-17
JP6896525B2 true JP6896525B2 (en) 2021-06-30

Family

ID=65026809

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017126503A Active JP6896525B2 (en) 2017-06-28 2017-06-28 Asphalt finisher

Country Status (1)

Country Link
JP (1) JP6896525B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021193351A1 (en) * 2020-03-26 2021-09-30
JP7341938B2 (en) 2020-03-27 2023-09-11 住友建機株式会社 asphalt finisher
CN111809481B (en) * 2020-07-21 2022-04-19 三一汽车制造有限公司 Paver material conveying vehicle guiding system, paver and paver material conveying vehicle guiding method
JP2023154943A (en) 2022-04-08 2023-10-20 住友建機株式会社 Road machine

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4583883B2 (en) * 2004-11-08 2010-11-17 パナソニック株式会社 Ambient condition display device for vehicles
JP2008042235A (en) * 2006-08-01 2008-02-21 Honda Motor Co Ltd Display device for vehicle
JP4705611B2 (en) * 2007-07-10 2011-06-22 住友建機株式会社 Driver assistance device for paving machines
US9204108B2 (en) * 2009-12-07 2015-12-01 Clarion Co., Ltd. Vehicle periphery monitoring system
JP6029941B2 (en) * 2012-11-08 2016-11-24 住友重機械工業株式会社 Image generator for paving machines
JP6073182B2 (en) * 2013-04-26 2017-02-01 住友重機械工業株式会社 Image generator for paving machine and operation support system for paving machine
US20160024726A1 (en) * 2015-10-05 2016-01-28 Caterpillar Paving Products Inc. Paving machine

Also Published As

Publication number Publication date
JP2019007307A (en) 2019-01-17

Similar Documents

Publication Publication Date Title
JP6896525B2 (en) Asphalt finisher
CN111032958B (en) Road machine
JP6014664B2 (en) Display device for self-propelled industrial machine
DE102017117243B4 (en) ENVIRONMENT MONITORING DEVICE
JP5938292B2 (en) Transportation vehicle monitoring device
JP6603750B2 (en) Visual system
JP5814187B2 (en) Display device for self-propelled industrial machine
WO2013088995A1 (en) Peripheral image display device and peripheral image display method for construction machinery
EP2918726B1 (en) Paving machine with an image generation device
WO2014073282A1 (en) Image generation device for paving machine and operation assistance system for paving device
EP3260329B1 (en) Mirror replacement system for a vehicle
JP7445591B2 (en) road machinery
JP6073182B2 (en) Image generator for paving machine and operation support system for paving machine
CN206968545U (en) A kind of loader-digger panorama real-time video transmission device
JP7297761B2 (en) Management equipment for asphalt finishers and road machinery
JP5917371B2 (en) Image generator for paving machine and operation support system for paving machine
DE102022103251B4 (en) Surrounding Image Display Device
JP7178334B2 (en) excavator and excavator display

Legal Events

Date Code Title Description
A625 Written request for application examination (by other person)

Free format text: JAPANESE INTERMEDIATE CODE: A625

Effective date: 20200313

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210309

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210510

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210608

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210609

R150 Certificate of patent or registration of utility model

Ref document number: 6896525

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150