CN104884713B - 建设机械的显示系统及其控制方法 - Google Patents

建设机械的显示系统及其控制方法 Download PDF

Info

Publication number
CN104884713B
CN104884713B CN201380068124.7A CN201380068124A CN104884713B CN 104884713 B CN104884713 B CN 104884713B CN 201380068124 A CN201380068124 A CN 201380068124A CN 104884713 B CN104884713 B CN 104884713B
Authority
CN
China
Prior art keywords
information
display
equipment
real image
construction implement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380068124.7A
Other languages
English (en)
Other versions
CN104884713A (zh
Inventor
坪根大
栗原隆
深野亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Komatsu Ltd
Original Assignee
Komatsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Komatsu Ltd filed Critical Komatsu Ltd
Publication of CN104884713A publication Critical patent/CN104884713A/zh
Application granted granted Critical
Publication of CN104884713B publication Critical patent/CN104884713B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/16—Cabins, platforms, or the like, for drivers
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/261—Surveying the work-site to be treated
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/264—Sensors and their calibration for indicating the position of the work tool
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种建设机械的显示系统及其控制方法，显示系统(28)具备检测工作装置相对于主体部的位置信息的行程传感器(16～18)、实像显示部(40)、组合器(42)以及显示控制器(39)。显示控制器(39)基于工作装置的位置信息，控制作业辅助信息的沿组合器(42)的表面的显示位置以及向驾驶室的前方的深度显示位置。将操作人员所认知的作业辅助信息的投影像显示于工作装置的周围。

Description

建设机械的显示系统及其控制方法
技术领域
本发明涉及一种建设机械的显示系统及其控制方法。
背景技术
在液压挖掘机等建设机械中，已知有将发动机的冷却水的水温等各种信息显示于驾驶室内的监视器装置的技术(例如参照专利文献1)。
而且，已知有在驾驶室的监视器装置中显示用于表示作业对象的设计面、铲斗的齿尖的位置的图像(例如，参照专利文献2)。
现有技术文献
专利文献
专利文献1：日本特开2012－136985号公报
专利文献2：日本特开2012－172431号公报
发明内容
发明所要解决的技术方案
所述监视器设于将驾驶室的前窗与侧窗分隔的纵框的下部，以避免阻碍操作人员的前方视野(参照专利文献1的图2)。由于操作人员一边观察工作装置一边进行操作，因此为了确认所述监视器装置的信息，需要较大地错开视点来确认监视器装置。
因此，存在操作作业中的视点的移动变大、作业效率不会提高这一问题。
本发明的目的在于提供一种能够使操作作业中的视点的移动较少、从而能够提高作业效率的建设机械的显示系统以及其控制方法。
第一发明的建设机械的显示系统是一种建设机械的显示系统，其特征在于，所述建设机械具有工作装置和主体部，该主体部供所述工作装置安装，并且具有驾驶室，该建设机械的显示系统具备：工作装置位置检测部，其检测所述工作装置相对于所述主体部的位置信息；实像显示部，其将作业辅助信息作为实像而显示；组合器(コンバイナ)，其将由所述实像显示部显示的所述实像向驾驶室内反射而将所述作业辅助信息作为虚像而显示，并将所述虚像与驾驶室的前方景色重叠地显示；显示控制部，其控制所述实像显示部；所述显示控制部基于工作装置的位置信息，控制所述作业辅助信息的沿组合器表面的显示位置以及向所述驾驶室的前方的深度显示位置，将所述驾驶室的操作人员所认知的所述作业辅助信息的投影像显示于所述工作装置的周围。
第二发明的建设机械的显示系统的特征在于，在第一发明的基础上，具备：位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；存储部，其存储作业对象的目标地形信息；所述作业辅助信息是基于所述工作装置的位置信息、所述主体部的三维位置信息以及所述目标地形信息而作成的所述工作装置的操作信息。
第三发明的建设机械的显示系统的特征在于，在第一发明或者第二发明的基础上，具备：位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；存储部，其存储作业对象的目标地形信息；所述显示控制部与作业对象的地形位置配合地利用所述实像显示部显示用于表示施工后的完成形态的施工设计面信息，所述施工设计面信息基于所述主体部的三维位置信息和所述目标地形信息而作成。
第四发明的建设机械的显示系统的特征在于，在第一发明至第三发明的任一者的基础上，具备：位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；存储部，其存储作业对象的目标地形信息以及所述工作装置的轨迹信息；所述显示控制部与作业对象的地形位置配合地利用所述实像显示部显示用于表示施工后的完成形态的施工设计面信息，所述施工设计面信息基于所述主体部的三维位置信息、所述目标地形信息、以及基于所述工作装置的轨迹信息的作业进度信息而作成。
第五发明的建设机械的显示系统的特征在于，在第一发明至第四发明的任一者的基础上，所述建设机械的显示系统具备配置于所述实像显示部与组合器之间的透镜光学系统，所述透镜光学系统具备多个透镜，并且至少一部分的透镜被设为能够沿光轴方向移动，所述显示控制部将所述透镜光学系统的至少一部分的透镜沿光轴方向移动而控制所述作业辅助信息的深度显示位置。
第六发明的建设机械的显示系统的特征在于，在第一发明至第四发明的任一者的基础上，所述实像显示部被设为能够改变与所述组合器之间的距离，所述显示控制部变更所述实像显示部与所述组合器的距离而控制所述作业辅助信息的深度显示位置。
第七发明的建设机械的显示系统的控制方法是一种建设机械的显示系统的控制方法，其特征在于，在具有工作装置和供所述工作装置安装并且具有驾驶室的主体部的建设机械中，具备：实像显示部，其将作业辅助信息作为实像而显示；组合器，其将由所述实像显示部显示的所述实像向驾驶室内反射而将所述作业辅助信息作为虚像而显示，并将所述虚像与驾驶室的前方景色重叠地显示；所述建设机械的显示系统的控制方法具备以下步骤：检测所述工作装置相对于所述主体部的位置信息；基于所述工作装置的位置信息控制所述作业辅助信息的沿组合器表面的显示位置以及向所述驾驶室的前方的深度显示位置，将所述驾驶室的操作人员所认知的所述作业辅助信息的投影像显示于所述工作装置的周围。
根据第一发明，由于显示系统具备实像显示部以及组合器，所以能够将作业辅助信息与驾驶室的前方景色重叠地显示。因此，在操作人员目视确认工作装置以及作业辅助信息的情况下，能够减少视点的移动。因此，能够减少操作作业中的视点的移动，从而能够提高作业效率。
在此基础上，显示控制部基于工作装置的位置信息控制所述作业辅助信息的沿组合器表面的显示位置以及向所述驾驶室的前方的深度显示位置。因此，能够将所述驾驶室的操作人员所认知的所述作业辅助信息的投影像显示于所述工作装置的周围，能够将操作人员的视线的移动与焦点调节抑制为最小限度。因此，也能够减少操作人员识别工作装置以及作业辅助信息的情况下的负载。
根据第二发明，作为所述作业辅助信息，基于所述工作装置的位置信息、所述主体部的三维位置信息以及所述目标地形信息而作成工作装置的操作信息。因此，作为操作信息，能够显示工作装置的移动方向、移动量，操作人员能够容易地操作工作装置。
根据第三发明，与作业对象的地形位置配合地显示基于主体部的三维位置信息和目标地形信息作成的施工设计面信息。因此，操作人员只要与显示的施工设计面信息配合地操作工作装置即可，能够容易地操作工作装置。
根据第四发明，与作业对象的地形位置配合地显示基于主体部的三维位置信息、目标地形信息以及基于工作装置的轨迹信息的作业进度信息而作成的施工设计面信息。因此，操作人员只要与显示的施工设计面信息配合地操作工作装置即可，能够容易地操作工作装置。另外，能够确认施工后的完成形态，并能够容易地确认是否正如目标地形信息那样正确地进行施工。
根据第五发明，在所述实像显示部与组合器之间配置透镜光学系统，其具备多个透镜，并且至少一部分的透镜能够沿光轴方向移动，所述显示控制部将所述透镜光学系统的至少一部分的透镜沿光轴方向移动。因此，能够容易且迅速地控制作业辅助信息的深度显示位置。
根据第六发明，所述显示控制部变更所述实像显示部与所述组合器之间的距离而控制所述作业辅助信息的深度显示位置。因此，能够不再需要一部分的透镜能够移动的透镜光学系统。
根据第七发明，能够起到与第一发明相同的作用以及效果。
附图说明
图1是本发明的一实施方式的建设机械的立体图。
图2A是示意性地表示建设机械的结构的侧视图。
图2B是示意性地表示建设机械的结构的后视图。
图2C是示意性地表示建设机械的结构的俯视图。
图3是表示建设机械所具备的控制系统的结构的框图。
图4是建设机械的驾驶室的立体图。
图5是建设机械的驾驶室的侧视图。
图6是表示显示于建设机械的显示装置的引导画面的图。
图7是表示显示于建设机械的显示装置的引导画面的图。
图8是示意性地表示建设机械的铲斗位置的图。
图9是表示引导画面的显示控制方法的流程图。
图10是表示警告信息显示处理的流程图。
图11是表示施工设计面信息显示处理的流程图。
图12是说明铲斗的轨迹信息的计算方法的图。
图13是表示操作辅助信息显示处理的流程图。
具体实施方式
以下，基于附图说明本发明的实施方式。
【1.液压挖掘机的整体结构】
以下，参照附图对本发明的建设机械的显示系统的一实施方式的液压挖掘机的显示系统进行说明。
图1是搭载有显示系统的液压挖掘机100的立体图。液压挖掘机100具有车身1与工作装置2。车身1相当于本发明的主体部。车身1具有旋转体3、驾驶室4以及行驶装置5。旋转体3以能够旋转的方式安装于行驶装置5。旋转体3收纳有未图示的发动机、液压泵等装置。驾驶室4载置于旋转体3的前部。在驾驶室4内配置有后述的显示装置38以及操作装置25(参照图3)。行驶装置5具有左右的履带5a、5b，通过履带5a、5b旋转，从而液压挖掘机100行驶。
工作装置2安装于车身1的前部，具有大臂6、小臂7、铲斗8、大臂缸10、小臂缸11、以及铲斗缸12。
大臂6的基端部经由大臂销13以能够摆动的方式安装于车身1的前部。即，大臂销13相当于大臂6相对于旋转体3的摆动中心。
小臂7的基端部经由小臂销14以能够摆动的方式安装于大臂6的前端部。即，小臂销14相当于小臂7相对于大臂6的摆动中心。
在小臂7的顶端部，经由铲斗销15以能够摆动的方式安装有铲斗8。即，铲斗销15相当于铲斗8相对于小臂7的摆动中心。
图2是示意性地表示液压挖掘机100的结构的图。图2A是液压挖掘机100的侧视图，图2B是液压挖掘机100的后视图。图2C是液压挖掘机100的俯视图。如图2A所示，大臂6的长度、即、从大臂销13至小臂销14的长度是L1。小臂7的长度、即、从小臂销14至铲斗销15的长度是L2。铲斗8的长度、即、从铲斗销15至铲斗8的齿尖P的长度是L3。
图1所示的大臂缸10、小臂缸11以及铲斗缸12分别是通过液压驱动的液压缸。大臂缸10的基端部经由大臂缸脚销10a以能够摆动的方式安装于旋转体3。另外，大臂缸10的顶端部经由大臂缸顶部销10b以能够摆动的方式安装于大臂6。大臂缸10通过液压而伸缩，从而驱动大臂6。
小臂缸11的基端部经由小臂缸脚销11a以能够摆动的方式安装于大臂6。另外，小臂缸11的顶端部经由小臂缸顶部销11b以能够摆动的方式安装于小臂7。小臂缸11通过液压而伸缩，从而驱动小臂7。
铲斗缸12的基端部经由铲斗缸脚销12a以能够摆动的方式安装于小臂7。另外，铲斗缸12的顶端部经由铲斗缸顶部销12b以能够摆动的方式安装于第一连杆部件47的一端以及第二连杆部件48的一端。第一连杆部件47的另一端经由第一连杆销47a以能够摆动的方式安装于小臂7的顶端部。第二连杆部件48的另一端经由第二连杆销48a以能够摆动的方式安装于铲斗8。铲斗缸12通过液压而伸缩，从而驱动铲斗8。
在大臂缸10、小臂缸11、铲斗缸12等液压缸与未图示的液压泵之间配置有比例控制阀37(参照图3)。比例控制阀37通过后述的工作装置控制器26而被控制，从而控制供给到液压缸10～12的工作油的流量。由此，控制了液压缸10～12的动作。
如图2A所示，在大臂6、小臂7以及铲斗8分别设有第一～第三行程传感器16～18。
第一行程传感器16检测大臂缸10的行程长度。后述的显示控制器39(参照图3)从第一行程传感器16所检测出的大臂缸10的行程长度计算出后述的大臂6相对于车身坐标系的zm轴的摆动角α。
第二行程传感器17检测小臂缸11的行程长度。显示控制器39从第二行程传感器17所检测的小臂缸11的行程长度计算出小臂7相对于大臂6的摆动角β。
第三行程传感器18检测铲斗缸12的行程长度。显示控制器39从第三行程传感器18所检测的铲斗缸12的行程长度计算出铲斗8相对于小臂7的摆动角γ。
如后述那样，能够利用第一～第三行程传感器16～18检测出工作装置2的铲斗8的齿尖P相对于车身1的位置信息。因此，第一～第三行程传感器16～18相当于本发明的工作装置位置检测部。
如图2A所示，在车身1中具备位置检测部19。位置检测部19检测液压挖掘机100的当前位置。位置检测部19具有RTK－GNSS(Real Time Kinematic-Global NavigationSatellite Systems，GNSS称作全球导航卫星系统。)用的两个天线21、22、三维位置传感器23以及倾斜角传感器24。
天线21、22沿后述的车身坐标系xm－ym－zm的ym轴隔开一定距离地配置。与利用天线21、22接收的GNSS电波相应的信号被输入到三维位置传感器23。三维位置传感器23检测天线21、22的全球坐标系中的设置位置。
此外，全球坐标系是通过GNSS计测的坐标系，并且是以固定于地球的原点为基准的坐标系。与此相对，后述的车身坐标系是以固定于车身1(具体而言是旋转体3)的原点为基准的坐标系。两个天线21、22是用于检测出车身1的当前位置以及车身1(具体而言是旋转体3)的朝向的天线。位置检测部19通过两个天线21、22的位置检测出后述的车身坐标系的xm轴的全球坐标系中的方向角(方位角)。
如图3所示，在车身1中具备倾斜角传感器24。倾斜角传感器24如图2B所示那样检测车身1重力方向(铅直线)的车身1的宽度方向(左右方向)的倾斜角θ1(以下，称作“侧倾角θ1”)。另外，倾斜角传感器24如图2A所示那样检测相对于重力方向的车身1的前后方向的倾斜角θ2(以下，称作“间距角θ2”)。而且，倾斜角传感器24检测旋转体3的旋转角度、换句话说是绕车身坐标系的铅直轴(zm轴)的倾斜角(以下，称作“横摆角θ3”)。
此外，在本实施方式中，车身1的宽度方向的意思是铲斗8的宽度方向，并与车宽度方向一致。但是，在工作装置2具备倾斜铲斗的情况下，铲斗8的宽度方向与车宽度方向可能不一致。
位置检测部19由于具备天线21、22、三维位置传感器23以及倾斜角传感器24，因此检测出具有车身1的全球坐标上的当前位置、朝向、倾斜角度的主体部的三维位置信息。车身1的全球坐标上的当前位置由纬度、经度、海拔的数据表示。全球坐标上的车身1的朝向由方位角表示。倾斜角度由所述侧倾角θ1、间距角θ2、横摆角θ3表示。
图3是表示液压挖掘机100所具备的控制系统的结构的框图。液压挖掘机100具备操作装置25、工作装置控制器26、工作装置控制装置27以及显示系统28。
操作装置25具有操作工作装置2及旋转体3的操作部件31L、31R、检测操作部件31L、31R的操作的操作检测部32、行驶操作部件33、行驶操作检测部34。操作部件31L、31R是操作人员用于操作工作装置2以及旋转体3的部件，例如是操作杆。
操作部件31R进行工作装置2的大臂6与铲斗8的操作，操作部件31R的前后方向的操作与大臂的上下动作对应，左右方向的操作与铲斗的挖掘、释放的动作对应。
操作部件31L进行旋转体3与小臂7的操作，操作部件31L的前后方向的操作与小臂的挖掘、释放的动作对应，左右方向的操作与旋转体3的左右方向的旋转动作对应。
操作检测部32具备检测操作部件31L的操作的操作检测部32L、以及检测操作部件31R的操作的操作检测部32R。操作检测部32L、32R例如使用设于操作部件31L、31R的未图示的检测检测角的电位计等。与操作部件31L、31R的操作内容相对应，操作检测部32L、32R将倾倒角作为电信号而检测，并作为检测信号向工作装置控制器26输送。也可以在操作部件31L、31R中与操作信号相应地产生先导流量，在操作检测部32L、32R中检测出先导压并作为检测信号。
行驶操作部件33是操作人员用于操作液压挖掘机100的行驶的部件，例如是操作杆。行驶操作检测部34与行驶操作部件33的操作内容相应地产生先导流量。与先导压相应地确定供给到行驶马达的流量，并驱动行驶装置5。
工作装置控制器26具有RAM、ROM等存储部35、CPU等运算部36。工作装置控制器26主要进行工作装置2的动作以及旋转体3的旋转控制。工作装置控制器26与操作部件31L、31R的操作相应地生成用于使工作装置2以及旋转体3动作的控制信号，并输出到工作装置控制装置27。
工作装置控制装置27具有比例控制阀37，并基于来自工作装置控制器26的控制信号控制比例控制阀37。与来自工作装置控制器26的控制信号相应的流量的工作油从比例控制阀37流出，并供给到液压缸10～12、未图示的旋转马达。与从比例控制阀37供给的工作油相应地驱动液压缸10～12、旋转马达。由此，工作装置2动作，旋转体3旋转。
[2.显示系统的结构]
显示系统28是用于将警告信息、操作向导、施工设计面信息、车身信息等各种信息向操作人员提供的系统。显示系统28具有显示装置38、显示控制器39、所述各种传感器16、17、18、23、24以及后述的监视装置60。
如图4、5所示，显示装置38具有实像显示部40、透镜光学系统41、以及组合器42。实像显示部40由液晶显示器、有机EL显示器、投影仪以及显示屏等能够显示实像的显示装置构成。此外，也可以使用透射式显示屏从配置于显示屏的背面侧的投影仪投射并显示影像。
透镜光学系统41配置于实像显示部40与组合器42之间，具备多个透镜。透镜光学系统41的透镜的一部分构成为能够沿光轴方向移动。透镜的驱动机构能够使用在照相机的变焦透镜等中使用的驱动机构。
组合器42由设于在驾驶室4的前面的框4AF内上下设置有两个的前窗4A部分的、将一部分的光反射并使剩余的光透过的半透镜构成。该组合器42将显示于实像显示部40的影像向驾驶室4内的操作人员侧反射并且将来自驾驶室4的外部的光向驾驶室4内透过。
因此，从操作人员的视点来看，能够将显示于所述实像显示部40的实像作为能够从组合器42透过而目视确认的、重叠显示于驾驶室4的前方景色的虚像70而被获取。因此，显示装置38作为在操作人员的视场中直接放映出影像的所谓的平视显示器而其作用。
此外，通过使组合器42具有透镜效果，能够放大操作人员目视确认的虚像70、变更虚像70的显示位置。在本实施方式中，为了使组合器42具有透镜效果，作为组合器42使用了凹面半透镜。
而且，在本实施方式中，通过显示控制器39的控制，将透镜光学系统41的至少一部分的透镜沿光轴方向移动，能够变更操作人员目视确认的虚像70的深度显示位置(从操作人员的视点位置至显示于驾驶室的前方的虚像70的距离)。即，在配置有透镜光学系统41的情况下，采用利用该光学系统放大地窥视处于其深处的实像显示部40的形态。而且，通过使所述透镜光学系统41内部的一部分的透镜沿光轴方向移动，从而获得与实像显示部40的深度(从组合器42至实像显示部40的距离)变化的情况相同的效果，其结果是，虚像70的深度显示位置也变更。在图5中，在虚线所示的虚像70和实线所示的虚像70处变更了深度显示位置。
而且，由于虚像70的大小取决于透镜光学系统41的射出窗的大小，因此即使虚像70的深度显示位置改变，也能够将操作人员的视场角上的虚像70的大小保持为一定。
此外，在变更所述虚像70的深度显示位置时，也可以采用如下结构：不配置透镜光学系统41，而是使用线性促动器等使所述实像显示部40构成为能够向靠近组合器42的方向以及远离组合器42的方向移动，并变更实像显示部40以及组合器42的距离。
显示控制器39执行显示系统28的各种功能。显示控制器39和工作装置控制器26能够通过无线或有线的通信手段相互通信。
显示控制器39具有RAM、ROM等存储部43、CPU等运算部44。
在存储部43存储有三维的目标地形信息。目标地形信息是关于作为作业对象的地面的施工后的地形(设计地形)的形状以及位置的信息，通过三角形、四边形等多边形来表现。
运算部44基于存储于存储部43的目标地形信息、由位置检测部19检测的车身1的三维位置信息、利用作为工作装置位置检测部的第一～第三行程传感器16～18检测出的铲斗8的齿尖的位置信息，执行用于作成作业辅助信息的各种运算。显示控制器39在实像显示部40显示针对操作人员的作业辅助信息。因此，显示控制器39相当于本发明的显示控制部。
[3.引导画面]
以下，详细说明显示于显示装置38的引导画面。如图6所示，引导画面将操作辅助信息82作为作业辅助信息而显示，而且显示车身信息83、施工设计面信息84。另外，在显示警告信息(提醒信息)81情况下，如图7所示，也显示警告信息81作为作业辅助信息。
警告信息81被从连接于显示控制器39的监视装置60输出。监视装置60具备检测出液压挖掘机100的各种状态的传感器等，在检测数据存在异常的情况下将警告信息81向显示控制器39输出。例如，监视装置60具备检测液压泵的排出压的传感器、检测发动机的冷却水的水温的传感器、污染传感器等。另外，监视装置60也具备检测人等障碍物接近液压挖掘机100的周围的接近传感器等。
监视装置60基于这些传感器的数据作成用于向操作人员传递警告的警告信息81，并向显示控制器39输出。在显示控制器39从监视装置60接收警告信息81时，立即显示于实像显示部40。即，警告信息81被最优先地显示。
图7的警告信息81是在液压挖掘机100的左方向检测出人等障碍物的情况下的警告信息的例子。
操作辅助信息82是支援工作装置2的操作的向导信息。例如，显示控制器39的运算部44如后述那样参照由位置检测部19检测的车身1的三维位置信息、由第一～第三行程传感器16～18检测的工作装置2中的铲斗8的齿尖的位置信息、以及存储于存储部43的目标地形信息，从而计算出工作装置2的移动方向以及移动量。显示控制器39根据工作装置2的移动方向以及移动量作成操作辅助信息82，并显示于实像显示部40。
例如，图6的操作辅助信息82是在图8所示的液压挖掘机100中、铲斗8处于铲斗8A的位置的情况下显示的信息。在图6的操作辅助信息82中示出了由于铲斗8配置于距目标地形4m的上方而需要向下方移动4m的情况。图7的操作辅助信息82是在铲斗8处于铲斗8B的位置的情况下显示的信息。在图7的操作辅助信息82中示出了铲斗8的剩余的移动量。
此外，操作辅助信息82既可以是用表示铲斗8的移动方向的箭头和表示移动距离的数字显示的类型，也可以是用表示移动目标位置(高度等级)的三角标记与表示当前的铲斗8的位置的条状显示的类型。在图6、7中一并标注这两个显示类型，但通常仅显示任一者即可。
车身信息83是燃油量表的数据、当前时刻、当前的油耗下的剩余运转时间等信息。操作人员能够设定有无车身信息83的显示、所显示的数据的种类等，该设定信息存储于存储部43。显示控制器39在设定为具有显示车身信息83的情况下，显示指定的数据。此外，车身信息83的显示位置不与铲斗8的齿尖位置连动而被固定。
施工设计面信息84使用所述目标地形信息和铲斗8的齿尖的轨迹信息而被作成。即，显示控制器39在施工前基于所述目标地形信息、由位置检测部19检测的三维位置信息，将目标地形信息作为施工设计面信息84显示于实像显示部40。因此，从操作人员的视点来看，可以在能够通过组合器42目视确认的作业对象的地面重叠看到所述目标地形信息。
另外，在施工中途、施工后，显示控制器39除了所述目标地形信息之外还重叠铲斗8的齿尖的轨迹信息而作成施工设计面信息84，也显示完成形态的信息。
显示于实像显示部40的引导画面经由透镜光学系统41被组合器42反射，并被操作人员目视确认。因此，操作人员能够在能够透过组合器42看到的前窗4A的前方景色、换句话说是作业现场的景象上重叠看到所述引导画面。
显示控制器39将警告信息81、操作辅助信息82与工作装置2的铲斗8的位置一并显示。因此，警告信息81以及操作辅助信息82伴随着铲斗8的移动，沿着组合器42的表面的显示位置以及深度显示位置变化。
显示控制器39将车身信息83固定于实像显示部40的确定的位置而显示。但是，也可以与警告信息81、操作辅助信息82相同地将车身信息83与铲斗8的位置一并显示。
显示控制器39将施工设计面信息84与作为作业对象的地面一并显示。
[4.引导画面的显示控制方法]
接下来，基于图9的流程图说明所述引导画面的显示控制方法。在液压挖掘机100的施工作业中，显示控制器39以一定时间间隔、例如0.1秒的间隔重复执行图9所示的引导画面的显示控制，并以例如1秒左右的间隔变更显示。
(警告信息的显示)
在开始引导画面的显示控制时，显示控制器39的运算部44判断是否从监视装置60输出警告信息81(是否具有警告信息81)(步骤S1)。在具有警告信息81的情况下，运算部44显示警告信息81(步骤S2)。通过在显示控制的起初进行警告信息81的显示处理，能够最优先地显示警告信息81，并且能够迅速地向操作人员传递警告信息。后述详细说明警告信息的显示处理。此外，在显示处理其他信息时，在从监视装置60输出警告信息81的情况下，中断而执行警告信息81的显示处理(步骤S2)即可。
(施工设计面信息的显示)
在步骤S2的警告信息81的显示处理之后、或者由于不具有警告信息81而在步骤S1中判断为否的情况下，运算部44判断施工设计面信息84是否存储于存储部43(步骤S3)。由于根据施工现场的不同，有时不存在施工设计面信息84，因此判断其有无。
在具有施工设计面信息84的情况下，运算部44进行施工设计面信息84的显示处理(步骤S4)。
(操作辅助信息的显示)
在步骤S4的施工设计面信息84的显示处理之后、或者由于不具有施工设计面信息84而在步骤S3中判断为否的情况下，运算部44判定有无操作辅助信息82的显示设定(步骤S5)。
在具有操作辅助信息82的显示设定的情况下，运算部44进行操作辅助信息82的显示处理(步骤S6)。
此外，后述详细说明步骤S2、S4、S6的各显示处理。
(车身信息的显示)
在步骤S5中判断为否的情况下、或者在步骤S6的显示处理之后，运算部44判定是否成为显示车身信息83的设定(步骤S7)。
然后，在判断为具有车身信息83的显示设定的情况下，运算部44进行车身信息83的显示处理(步骤S8)。在该情况下，运算部44控制实像显示部40，如图6、7所示，将燃油量表的数据、当前时刻等车身信息显示于已确定的显示位置。
如上述那样，在施工作业持续期间，运算部44以规定时间间隔重复从所述步骤S1至步骤S8的处理，因此返回步骤S1，继续进行显示处理。
[4－1.警告信息显示处理S2]
接下来，基于图10的流程图对步骤S2的警告信息81的显示处理进行说明。此外，在警告信息显示处理S2中，由于利用液压挖掘机100的车身坐标系计算齿尖位置，因此首先对车身坐标系进行说明。
(车身坐标系的说明)
在液压挖掘机100中，如图2所示，参照所述倾斜角传感器24的检测值，以大臂销13的轴与工作装置2的动作平面的交点为原点设定车身坐标系xm－ym－zm。这里，工作装置2的动作平面成为xm－zm。另外，车身坐标系也能够使用各天线21、22的位置数据而设定。此外，在以下的说明中，大臂销13的位置的意思是大臂销13的车宽度方向的中点的位置。
天线21、22与车身坐标系的原点的位置关系、即、天线21、22与大臂销13的车宽度方向的中点的位置关系被预先设定。具体而言，如图2B以及图2C所示，利用大臂销13与天线21之间的车身坐标系的xm轴向的距离Lbbx、大臂销13与天线21之间的车身坐标系的ym轴向的距离Lbby、大臂销13与天线21之间的车身坐标系的zm轴向的距离Lbbz，确定车身坐标系的原点与天线21的位置关系。
另外，利用大臂销13与天线22之间的车身坐标系的xm轴向的距离Lbdx、大臂销13与天线22之间的车身坐标系的ym轴向的距离Lbdy、大臂销13与天线22之间的车身坐标系的zm轴向的距离Lbdz，确定车身坐标系的原点与天线22的位置关系。
(车身坐标系上的齿尖位置计算S11)
运算部44计算车身坐标系上的铲斗8的齿尖位置(步骤S11)。运算部44根据第一～第三行程传感器16～18的检测结果计算上述大臂6、小臂7、铲斗8的当前的摆动角α、β、γ。
运算部44使用大臂6、小臂7、铲斗8的摆动角α、β、γ和大臂6、小臂7、铲斗8的长度L1、L2、L3，利用以下的数学式1的式子运算出车身坐标系中的铲斗8的齿尖的坐标(x，y，z)。
【数学式1】
x＝L1sinα+L2sin(α+β)+L3sin(α+β+γ)
y＝0
Z＝L1cosα+L2cos(α+β)+L3cos(α+β+γ)
(警告信息的生成S12)
接下来，运算部44生成从监视装置60输出的警告信息81的显示内容(S12)。例如，在监视装置60的接近传感器检测出在左方向具有障碍物、并输出该检测信息时，运算部44生成左方向的箭头和感叹号作为警告信息81的显示内容(显示图像)。此外，警告信息81的显示内容(显示图像)与警告信息的种类相应地设定。即，在需要引起操作人员的注意的情况下生成感叹号。在需要指示应注意所述障碍物的检测的方向的情况下生成该方向的箭头。另外，在警告液压泵的排出压、发动机冷却水的水温的异常的情况下，生成表示这些警告对象的图标、文字等图像。
(警告信息的显示位置计算S13)
接下来，运算部44与铲斗8的齿尖的当前位置配合地计算警告信息81的显示位置(步骤S13)。组合器42的显示面中的警告信息81的显示位置是不与铲斗8、操作辅助信息82重叠的位置，并且被设定为接近铲斗8的位置。另外，与警告信息81的内容配合地调整显示位置。因此，如图7所示，警告左方向的障碍物的警告信息81显示于铲斗8的左斜上方位置等。如果是警告右方向的障碍物的警告信息，则显示于铲斗8的右斜上方位置等。
另外，与铲斗8的齿尖距组合器42的距离、换句话说是距操作人员的视点的距离配合地设定作为虚像而显示的警告信息81的相当于从操作人员观察时成为深度方向的坐标(x)的深度显示位置。
(警告信息的显示S14)
接下来，运算部44控制透镜光学系统41以及实像显示部40，在步骤S13中计算的显示位置显示警告信息81(步骤S14)。通过以上的S11～S14的处理，结束警告信息显示处理S2。
[4－2.施工设计面信息显示处理S4]
接下来，基于图11的流程图对步骤S4的施工设计面信息84的显示处理进行说明。
(全球坐标系的车身的三维位置信息计算S21)
在显示施工设计面信息84的情况下，运算部44计算全球坐标系上的车身1的三维位置信息(步骤S21)。
具体地说，运算部44使用三维位置传感器23以及倾斜角传感器24的检测值，计算全球坐标系上的车身1的三维位置信息(纬度、经度、高度、方位角、侧倾角、间距角、横摆角)(步骤S21)。
即，三维位置传感器23检测天线21、22的全球坐标上的位置(纬度、经度、高度)。运算部44根据上述车身坐标系的原点与各天线21、22的位置关系、以及三维位置传感器23所检测的全球坐标系中的天线21、22的坐标，运算车身坐标系的原点位置的全球坐标(A，B，C)。
而且，由于天线21、22沿车身坐标系的ym轴配置，所以运算部44从全球坐标系中的天线21、22的坐标运算车身1(旋转体3)的朝向(方位角)。
(车身坐标系上的齿尖位置计算S22)
接下来，运算部44计算车身坐标系上的铲斗8的齿尖的位置(步骤S22)。由于该车身坐标系上的铲斗8的齿尖位置的具体计算方法与所述警告信息81的显示处理中的步骤S11相同，因此省略说明。
(全球坐标系上的齿尖位置计算S23)
接下来，运算部44计算全球坐标系上的铲斗8的齿尖位置(步骤S23)。运算部44利用以下的数学式2的式子，将从数学式1求出的车身坐标系中的铲斗8的齿尖的坐标(x，y，z)转换成全球坐标系中的坐标(X，Y，Z)。
【数学式2】
其中，ω、κ由以下的数学式3表示。
【数学式3】
κ＝-θ3
这里，如所述那样，θ1是侧倾角。θ2是间距角。θ3是横摆角。
(齿尖的轨迹信息存储S24)
接下来，运算部44将在步骤S23中计算的齿尖位置存储于存储部43，从而存储齿尖的轨迹信息(步骤S24)。
此时，为了计算、显示施工后的完成形态，需要将铲斗8的齿尖作为由铲斗8的齿尖的两端形成的线而获取，并计算其轨迹。因此，如图12所示，在车身1与施工面200不平行时，除了铲斗8的齿尖之中距地形最近的点与地形之间的距离d1之外，使用全球坐标系中的车身1的倾斜角度与施工面200的倾斜角度的信息取得铲斗8的齿尖的线201移动时的轨迹信息。
(针对目标地形的作业进度信息计算S25)
接下来，运算部44基于存储于存储部43的铲斗8的齿尖的轨迹信息和存储于存储部43的目标地形信息，计算针对目标地形的作业进度信息(步骤S25)。
(施工设计面信息生成&显示位置计算S26)
接下来，运算部44基于所述目标地形信息以及作业进度信息生成施工设计面信息84的显示内容(步骤S26)。另外，基于车身1的三维位置信息，计算出显示施工设计面信息84的位置(步骤S26)。
(施工设计面信息显示S27)
运算部44控制透镜光学系统41以及实像显示部40，在步骤S26中计算出的显示位置显示施工设计面信息84(步骤S27)。
因此，操作人员能够在作业对象的地面重叠目视确认施工设计面信息84。例如，如果是施工作业前，由于施工设计面信息84显示作业目标的地形，因此操作人员能够容易地掌握接下来应进行作业的目标面。
另外，如果是作业中，由于施工设计面信息84也包含作业进度信息，所以操作人员能够以不变更视点以及焦点为前提容易地掌握能够实际目视确认的铲斗8的齿尖位置和挖掘等作业的目标面的位置关系，并且也能够容易地确认是否已能够如目标那样进行施工。
此外，在同时显示施工设计面信息84、警告信息81、操作辅助信息82的情况下，显示控制器39优先使警告信息81、操作辅助信息82的深度显示位置作为铲斗8的位置来控制透镜光学系统41。即，在警告信息81、操作辅助信息82的深度显示位置和施工设计面信息84的深度显示位置不同的情况下，透镜光学系统41为了设定警告信息81、操作辅助信息82的深度显示位置而被控制。
另外，也可以分别设置显示作为与铲斗8的齿尖位置配合地变更显示位置的作业辅助信息的警告信息81、操作辅助信息82的实像显示部40及透镜光学系统41、以及显示作为不与铲斗8的齿尖位置配合地变更显示位置的信息的车身信息83、施工设计面信息84的实像显示部40以及透镜光学系统41。
[4－3.操作辅助信息显示处理S6]
接下来，基于图13的流程图对使用了步骤S6的施工设计面信息84的操作辅助信息82的显示处理进行说明。
在显示操作辅助信息82的情况下，运算部44也计算全球坐标系上的车身1的三维位置信息(步骤S31)。接下来，运算部44计算车身坐标系上的齿尖的位置(步骤S32)。接下来，运算部44计算全球坐标上的齿尖位置(步骤S33)。由于这些步骤S31～S33的具体的计算方法与所述施工设计面信息84的显示处理中的步骤S21～S23相同，因此省略说明。此外，在接着步骤S4的施工设计面信息84的显示处理而进行步骤S6的操作辅助信息82的显示处理的情况下，也可以省略步骤S31～S33，并使用在步骤S21～S23中计算的数据。
接下来，运算部44基于如所述那样运算的铲斗8的齿尖的全球坐标的当前位置和存储于存储部43的目标地形信息，计算到达目标地点所需的齿尖的移动量信息(步骤S34)。
接下来，运算部44基于在步骤S34中计算的移动量信息生成操作辅助信息82的显示内容，与铲斗8的齿尖的当前位置配合地计算显示位置(步骤S35)。组合器42的显示面中的操作辅助信息82的显示位置是不与铲斗8、警告信息81重叠的位置，并且被设定为接近铲斗8的位置。因此，在图6、7中，显示于铲斗8的侧方位置。另外，作为虚像显示的操作辅助信息82的相当于从操作人员观察成为深度方向的坐标(x)的深度显示位置被与铲斗8的齿尖的位置配合地设定。
接下来，运算部44控制透镜光学系统41以及实像显示部40，在步骤S35中计算的显示位置显示操作辅助信息82(步骤S36)。
根据这种本实施方式，将显示装置38具备实像显示部40、透镜光学系统41、组合器42而构成，因此能够将作业辅助信息与驾驶室4的前方景色重叠而显示。因此，操作人员在目视确认工作装置2的铲斗8以及作为作业辅助信息的警告信息81、操作辅助信息82的情况下，能够减少视点以及焦点的移动，能够提高作业效率。
显示控制器39基于铲斗8的位置信息控制警告信息81、操作辅助信息82的沿组合器42的表面的显示位置以及深度显示位置。因此，能够将操作人员所认知的警告信息81、操作辅助信息82的投影像显示于铲斗8的周围，能够将操作人员的视线的移动与焦点调节抑制为最小限度。因此，也能够减少操作人员识别铲斗8以及作业辅助信息的情况下的负载。
组合器42能够与前窗4A的大小配合地设定，因此与以往的监视器装置相比，能够增大各种信息的显示区域。因此，能够将以往如果不切换监视器装置的画面就不能显示的多个信息无接缝地显示于组合器42的区域内。而且，在提供信息化的各种作业辅助信息的情况下，无需增加驾驶室4内的监视器装置，能够确保驾驶室4内的空间，并且能够维持操作人员的作业性、视野性。
[实施方式的变形]
此外，本发明并不限定于上述实施方式，能够实现本发明的目的的范围内的变形、改良等也包含于本发明中。
在上述实施方式中，利用第一～第三行程传感器16～18检测大臂6、小臂7、铲斗8的倾斜角，但倾斜角的检测部件并不限定于这些。例如也可以具备检测大臂6、小臂7、铲斗8的倾斜角的角度传感器。
在上述实施方式中具有铲斗8，但是铲斗8并不局限于此，也可以是倾斜铲斗。倾斜铲斗是如下铲斗：其具备铲斗倾斜缸，通过使铲斗左右倾斜，即使液压挖掘机位于倾斜地，也能够以自由的形态将斜面、平地成形、平整，也能够进行低板的碾压作业。
另外，工作装置2并不限定于具有铲斗8。例如，作为工作装置2，也可以安装有液压断路器等除铲斗8以外的配件。
而且，作为建设机械，并不限定于液压挖掘机100，也可以是推土机、轮式装载机、机动平路机等具有工作装置的各种建设机械。
显示于实像显示部40的引导画面的内容并不限定于上述内容，只要与配件的种类、建设机械的种类等相应地设定即可。另外，显示控制器39的功能的一部分或全部也可以通过配置于建设机械的外部的基地局计算机的执行而传送。
作为操作辅助信息82，并不限定于直至目标地点的移动量信息。例如，在挖掘后向上方移动铲斗8的情况下，也可以将铲斗8向上方的移动量作为操作辅助信息82而显示。操作辅助信息82的内容与工作装置的种类、操作人员的操作相应地设定即可。
作为建设机械，也可以不具备检测天线21、22等全球坐标系上的当前位置的机构。在该情况下，只要基于车身坐标系上的信息作成并显示警告信息81等即可。
另外，与工作装置2的位置配合地显示的作业辅助信息的深度显示位置并不限定于移动透镜光学系统41的透镜、移动实像显示部40的情况。例如，也可以处理作业辅助信息的显示图像而调整操作人员所认知的投影像的深度显示位置。
【工业上的可利用性】
本发明除了能够使用于液压挖掘机之外，也能够使用于轮式装载机、推土机、机动平路机等操作人员能够目视确认工作装置的各种建设机械。
附图标记的说明
1…车身，3…旋转体，4…驾驶室，4A…前窗，5…行驶装置，6…大臂，7…小臂，8…铲斗，16…第一行程传感器，17…第二行程传感器，18…第三行程传感器，19…位置检测部，21、22…天线，23…三维位置传感器，24…倾斜角传感器，25…操作装置，26…工作装置控制器，27…工作装置控制装置，28…显示系统，38…显示装置，39…显示控制器，40…实像显示部，41…透镜光学系统，42…组合器，43…存储部，44…运算部，60…监视装置，70…虚像，81…警告信息，82…操作辅助信息，83…车身信息，84…施工设计面信息，100…液压挖掘机。

Claims (7)

1.一种建设机械的显示系统，其特征在于，所述建设机械具有工作装置和主体部，该主体部供所述工作装置安装，并且具有驾驶室，
该建设机械的显示系统具备：
工作装置位置检测部，其检测所述工作装置相对于所述主体部的位置信息；
实像显示部，其将包含表示所述工作装置的移动方向的操作信息的作业辅助信息作为实像而显示；
组合器，其将由所述实像显示部显示的所述实像向驾驶室内反射而将所述作业辅助信息作为虚像而显示，并将所述虚像与驾驶室的前方景色重叠地显示；
显示控制部，其控制所述实像显示部；
所述显示控制部基于工作装置的位置信息，控制所述作业辅助信息的沿组合器表面的显示位置以及向所述驾驶室的前方的深度显示位置，将所述驾驶室的操作人员所认知的所述作业辅助信息的投影像显示于所述工作装置的周围。
2.根据权利要求1所述的建设机械的显示系统，其特征在于，具备：
位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；
存储部，其存储作业对象的目标地形信息；
所述操作信息基于所述工作装置的位置信息、所述主体部的三维位置信息以及所述目标地形信息而作成。
3.根据权利要求1或2所述的建设机械的显示系统，其特征在于，具备：
位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；
存储部，其存储作业对象的目标地形信息；
所述显示控制部与作业对象的地形位置配合地利用所述实像显示部显示用于表示施工后的完成形态的施工设计面信息，
所述施工设计面信息基于所述主体部的三维位置信息和所述目标地形信息而作成。
4.根据权利要求1或2所述的建设机械的显示系统，其特征在于，具备：
位置检测部，其检测具有所述主体部的当前位置、朝向、倾斜角度的三维位置信息；
存储部，其存储作业对象的目标地形信息以及所述工作装置的轨迹信息；
所述显示控制部与作业对象的地形位置配合地利用所述实像显示部显示用于表示施工后的完成形态的施工设计面信息，
所述施工设计面信息基于所述主体部的三维位置信息、所述目标地形信息、以及基于所述工作装置的轨迹信息的作业进度信息而作成。
5.根据权利要求1或2所述的建设机械的显示系统，其特征在于，
所述建设机械的显示系统具备配置于所述实像显示部与组合器之间的透镜光学系统，
所述透镜光学系统具备多个透镜，并且至少一部分的透镜被设为能够沿光轴方向移动，
所述显示控制部将所述透镜光学系统的至少一部分的透镜沿光轴方向移动而控制所述作业辅助信息的深度显示位置。
6.根据权利要求1或2所述的建设机械的显示系统，其特征在于，
所述实像显示部被设为能够改变与所述组合器之间的距离，
所述显示控制部变更所述实像显示部与所述组合器的距离而控制所述作业辅助信息的深度显示位置。
7.一种建设机械的显示系统的控制方法，其特征在于，
在具有工作装置和供所述工作装置安装并且具有驾驶室的主体部的建设机械中，具备：实像显示部，其将包含表示所述工作装置的移动方向的操作信息的作业辅助信息作为实像而显示；组合器，其将由所述实像显示部显示的所述实像向驾驶室内反射而将所述作业辅助信息作为虚像而显示，并将所述虚像与驾驶室的前方景色重叠地显示；
所述建设机械的显示系统的控制方法具备以下步骤：
检测所述工作装置相对于所述主体部的位置信息；
基于所述工作装置的位置信息控制所述作业辅助信息的沿组合器表面的显示位置以及向所述驾驶室的前方的深度显示位置，将所述驾驶室的操作人员所认知的所述作业辅助信息的投影像显示于所述工作装置的周围。
CN201380068124.7A 2012-12-28 2013-10-28 建设机械的显示系统及其控制方法 Active CN104884713B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012287599A JP6258582B2 (ja) 2012-12-28 2012-12-28 建設機械の表示システムおよびその制御方法
JP2012-287599 2012-12-28
PCT/JP2013/079133 WO2014103498A1 (ja) 2012-12-28 2013-10-28 建設機械の表示システムおよびその制御方法

Publications (2)

Publication Number Publication Date
CN104884713A CN104884713A (zh) 2015-09-02
CN104884713B true CN104884713B (zh) 2017-08-25

Family

ID=51020597

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380068124.7A Active CN104884713B (zh) 2012-12-28 2013-10-28 建设机械的显示系统及其控制方法

Country Status (6)

Country Link
US (1) US9616748B2 (zh)
JP (1) JP6258582B2 (zh)
KR (1) KR101815268B1 (zh)
CN (1) CN104884713B (zh)
DE (1) DE112013006256T5 (zh)
WO (1) WO2014103498A1 (zh)

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112014000063B4 (de) * 2014-05-15 2020-09-17 Komatsu Ltd. Anzeigesystem für eine Baggermaschine, Baggermaschine und Anzeigeverfahren für eine Baggermaschine
JP2015224875A (ja) * 2014-05-26 2015-12-14 Ｋｙｂ株式会社 作業機の作動状態検出システム及び作業機
EP3020868B1 (en) * 2014-11-14 2020-11-04 Caterpillar Inc. Machine of a kind comprising a body and an implement movable relative to the body with a system for assisting a user of the machine
JP6392097B2 (ja) * 2014-11-27 2018-09-19 住友建機株式会社 ショベルの支援装置及びショベルの支援方法
KR102476122B1 (ko) 2015-03-27 2022-12-08 스미토모 겐키 가부시키가이샤 쇼벨
JP6309481B2 (ja) * 2015-03-31 2018-04-11 三井造船株式会社 クレーンの運転支援方法及びクレーンの運転支援装置
JP6316770B2 (ja) * 2015-04-15 2018-04-25 日立建機株式会社 建設機械
CN106149796A (zh) * 2015-04-23 2016-11-23 中交疏浚技术装备国家工程研究中心有限公司 耙吸挖泥船疏浚状态抬头显示系统
JP2016205088A (ja) * 2015-04-28 2016-12-08 日立建機株式会社 建設機械
KR102506369B1 (ko) * 2015-07-03 2023-03-06 현대두산인프라코어 주식회사 건설기계의 가이던스용 웨어러블 디바이스 및 이를 이용한 작업정보 표시 방법
US10794047B2 (en) 2015-07-15 2020-10-06 Komatsu Ltd. Display system and construction machine
JP6614838B2 (ja) * 2015-07-22 2019-12-04 日立建機株式会社 油圧ショベル
JP6672313B2 (ja) * 2015-08-10 2020-03-25 住友建機株式会社 ショベル
JP6480830B2 (ja) * 2015-08-24 2019-03-13 株式会社小松製作所 ホイールローダの制御システム、その制御方法およびホイールローダの制御方法
JP6915007B2 (ja) * 2015-08-24 2021-08-04 株式会社小松製作所 ホイールローダ
JP2017043885A (ja) * 2015-08-24 2017-03-02 株式会社小松製作所 ホイールローダ
CN107850786A (zh) * 2015-09-10 2018-03-27 富士胶片株式会社 投影型显示装置及投影控制方法
CN107921870A (zh) 2015-09-10 2018-04-17 富士胶片株式会社 投影型显示装置及投影控制方法
JP6965160B2 (ja) 2015-09-15 2021-11-10 住友建機株式会社 ショベル
WO2017047695A1 (ja) * 2015-09-16 2017-03-23 住友重機械工業株式会社 ショベル
WO2017047131A1 (ja) * 2015-09-17 2017-03-23 富士フイルム株式会社 投写型表示装置及び投写制御方法
CN108027515A (zh) * 2015-09-25 2018-05-11 富士胶片株式会社 投影型显示装置及投影控制方法
JP6559529B2 (ja) * 2015-10-06 2019-08-14 日立建機株式会社 建設機械
JP6707344B2 (ja) * 2015-12-25 2020-06-10 株式会社小松製作所 作業車両および作業車両の制御方法
JP6666142B2 (ja) * 2015-12-25 2020-03-13 株式会社小松製作所 作業車両および作業車両の制御方法
JP6590691B2 (ja) * 2015-12-25 2019-10-16 株式会社小松製作所 作業車両および表示制御方法
JP6626710B2 (ja) * 2015-12-25 2019-12-25 株式会社小松製作所 作業車両および作業車両の制御方法
JP6620011B2 (ja) * 2015-12-25 2019-12-11 株式会社小松製作所 作業車両および表示制御方法
KR102573390B1 (ko) * 2016-02-09 2023-08-30 스미토모 겐키 가부시키가이샤 쇼벨
JP6813268B2 (ja) * 2016-02-16 2021-01-13 株式会社小松製作所 作業車両
CN106029994B (zh) * 2016-03-29 2020-04-03 株式会社小松制作所 校正系统、作业机械和校正方法
EP3438915A4 (en) 2016-03-31 2019-09-25 Sumitomo Heavy Industries, Ltd. WORK MANAGEMENT SYSTEM FOR CONSTRUCTION MACHINE, AND CONSTRUCTION MACHINE
WO2017176143A1 (en) * 2016-04-04 2017-10-12 Limited Liability Company "Topcon Positioning Systems" Method and apparatus for augmented reality display on vehicle windscreen
FI20165452A (fi) 2016-05-31 2017-12-01 Novatron Oy Käyttöliittymä ja maanrakennuskone
JP7156775B2 (ja) * 2016-07-26 2022-10-19 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
JP6826832B2 (ja) 2016-07-26 2021-02-10 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
JP6934287B2 (ja) 2016-07-26 2021-09-15 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
JP6826833B2 (ja) * 2016-07-26 2021-02-10 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
JP6871695B2 (ja) 2016-08-05 2021-05-12 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
JP7122802B2 (ja) 2016-08-05 2022-08-22 株式会社小松製作所 作業車両の制御システム、制御方法、及び作業車両
DE102016011354A1 (de) * 2016-09-20 2018-03-22 Liebherr-Werk Biberach Gmbh Steuerstand für einen Kran, Bagger und dergleichen
WO2018062374A1 (ja) * 2016-09-30 2018-04-05 住友建機株式会社 ショベル
JP6867132B2 (ja) * 2016-09-30 2021-04-28 株式会社小松製作所 作業機械の検出処理装置及び作業機械の検出処理方法
WO2018110045A1 (ja) * 2016-12-14 2018-06-21 富士フイルム株式会社 投写型表示装置、投写型表示装置の制御方法及び制御プログラム
WO2018116577A1 (ja) * 2016-12-19 2018-06-28 富士フイルム株式会社 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム
WO2018116601A1 (ja) * 2016-12-21 2018-06-28 富士フイルム株式会社 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム
WO2018131267A1 (ja) * 2017-01-10 2018-07-19 富士フイルム株式会社 投写型表示装置、投写型表示装置の作動方法、投写型表示装置の作動プログラム
JP6718399B2 (ja) * 2017-02-21 2020-07-08 日立建機株式会社 作業機械
AU2018227862B9 (en) * 2017-03-03 2022-11-24 Caterpillar Trimble Control Technologies Llc Augmented reality display for material moving machines
KR102550948B1 (ko) * 2017-03-31 2023-07-03 스미토모 겐키 가부시키가이샤 쇼벨, 쇼벨의 표시장치 및 쇼벨에 있어서의 화상의 표시방법
SE541180C2 (en) * 2017-04-03 2019-04-23 Cargotec Patenter Ab Driver assistance system for a vehicle provided with a crane using 3D representations
US11874659B2 (en) 2017-06-09 2024-01-16 Volvo Construction Equipment Ab Information system for a working machine
CN110709564A (zh) * 2017-06-13 2020-01-17 沃尔沃建筑设备公司 设有图像投影设备的工程机械
ES2773051T3 (es) * 2017-06-16 2020-07-09 Abb Schweiz Ag Flujo de video modificado para soportar el control remoto de una grúa de contenedores
AU2018299288B2 (en) * 2017-07-14 2021-07-22 Komatsu Ltd. Display control device, display control method, program, and display system
DE102017116822A1 (de) * 2017-07-25 2019-01-31 Liebherr-Hydraulikbagger Gmbh Arbeitsmaschine mit Anzeigeeinrichtung
KR102159066B1 (ko) * 2017-09-07 2020-09-23 히다찌 겐끼 가부시키가이샤 건설 기계
JP7155516B2 (ja) 2017-12-20 2022-10-19 コベルコ建機株式会社 建設機械
JP6918716B2 (ja) * 2018-01-31 2021-08-11 ヤンマーパワーテクノロジー株式会社 建設機械
WO2019230366A1 (ja) * 2018-05-30 2019-12-05 京セラ株式会社 表示システム
US11761173B2 (en) * 2018-06-26 2023-09-19 Caterpillar Inc. Systems and methods for building a pad
EP3594166B1 (de) * 2018-07-13 2024-01-24 EPSILON Kran GmbH. Kransteuerung mit visualisierungsvorrichtung
WO2020069747A1 (en) * 2018-10-04 2020-04-09 Volvo Construction Equipment Ab A working machine comprising an illumination system
CN109736374A (zh) 2019-01-25 2019-05-10 北京百度网讯科技有限公司 用于控制设备的方法和装置
JP7159903B2 (ja) * 2019-02-19 2022-10-25 コベルコ建機株式会社 目標位置推測装置
JPWO2020175645A1 (ja) 2019-02-28 2021-12-23 住友重機械工業株式会社 表示装置、ショベル、情報処理装置
JPWO2021010489A1 (zh) * 2019-07-17 2021-01-21
IT201900018836A1 (it) * 2019-10-15 2021-04-15 Manitou Italia Srl Sistema di presentazione delle informazioni perfezionato.
JP7452981B2 (ja) * 2019-11-05 2024-03-19 株式会社小松製作所 表示制御システム、作業機械、および表示制御方法
EP3872260B1 (de) * 2020-02-27 2024-04-17 Joseph Vögele AG Strassenfertiger mit einem projektor
JP7388954B2 (ja) * 2020-03-11 2023-11-29 株式会社小松製作所 操作ガイド装置
JP7333551B2 (ja) * 2020-09-29 2023-08-25 株式会社小松製作所 作業機械の画像表示システム
JP7128497B2 (ja) * 2020-09-29 2022-08-31 株式会社小松製作所 作業機械の画像表示システム
US20220136214A1 (en) * 2020-11-05 2022-05-05 Trimble Inc. High-accuracy augmented reality display for construction machines
JP7424960B2 (ja) 2020-11-17 2024-01-30 株式会社小松製作所 情報取得システムおよび情報取得方法
US20230287659A1 (en) * 2022-03-14 2023-09-14 Volvo Construction Equipment Ab Display system for construction machine
CN115467387A (zh) * 2022-05-24 2022-12-13 中联重科土方机械有限公司 用于工程机械的辅助控制系统、方法及工程机械

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101297229A (zh) * 2005-10-26 2008-10-29 日本板硝子株式会社 车载空间图像显示装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01312129A (ja) * 1988-06-13 1989-12-15 Komatsu Ltd 腕式作業機のモニタ装置
JPH06115381A (ja) * 1992-10-08 1994-04-26 Y N S:Kk ヘッドアップディスプレイにおける虚像のコントロール方法及び虚像のコントロール装置
JPH06156119A (ja) * 1992-11-18 1994-06-03 Kansei Corp 建設機械用ヘッドアップディスプレイ装置
JPH0687043U (ja) * 1993-05-28 1994-12-20 旭硝子株式会社 車両用表示装置
US5721679A (en) * 1995-12-18 1998-02-24 Ag-Chem Equipment Co., Inc. Heads-up display apparatus for computer-controlled agricultural product application equipment
JPH11119687A (ja) * 1997-10-17 1999-04-30 Shimadzu Corp オペレータ用情報提示装置
US6919865B2 (en) * 2000-10-12 2005-07-19 Komatsu Ltd. Display device for work machine
US20060103590A1 (en) * 2004-10-21 2006-05-18 Avner Divon Augmented display system and methods
US7319561B2 (en) 2004-12-27 2008-01-15 Nippon Sheet Glass Company, Limited Stereoimage formation apparatus and stereoimage display unit
JP2007094394A (ja) * 2005-08-31 2007-04-12 Nidec Sankyo Corp ヘッドアップディスプレイ用光学系
US8817238B2 (en) * 2007-10-26 2014-08-26 Deere & Company Three dimensional feature location from an excavator
US20090177337A1 (en) * 2008-01-07 2009-07-09 Caterpillar Inc. Tool simulation system for remotely located machine
JP5113586B2 (ja) * 2008-03-28 2013-01-09 株式会社小松製作所 作業車両
JP2010018141A (ja) * 2008-07-10 2010-01-28 Caterpillar Japan Ltd 建設機械におけるディスプレイ装置
US9440591B2 (en) * 2009-05-13 2016-09-13 Deere & Company Enhanced visibility system
JP4948643B1 (ja) 2010-12-24 2012-06-06 株式会社小松製作所 ガイダンス出力装置、ガイダンス出力方法、及びガイダンス出力装置を備えた建設機械
JP5059954B2 (ja) * 2011-02-22 2012-10-31 株式会社小松製作所 掘削機械の表示システム及びその制御方法。
JP5555190B2 (ja) 2011-02-22 2014-07-23 株式会社小松製作所 油圧ショベルの表示システム及びその制御方法
US8918246B2 (en) * 2012-12-27 2014-12-23 Caterpillar Inc. Augmented reality implement control

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101297229A (zh) * 2005-10-26 2008-10-29 日本板硝子株式会社 车载空间图像显示装置

Also Published As

Publication number Publication date
US9616748B2 (en) 2017-04-11
WO2014103498A1 (ja) 2014-07-03
JP2014129676A (ja) 2014-07-10
JP6258582B2 (ja) 2018-01-10
KR20150082601A (ko) 2015-07-15
CN104884713A (zh) 2015-09-02
DE112013006256T5 (de) 2015-10-01
US20160193920A1 (en) 2016-07-07
KR101815268B1 (ko) 2018-01-04

Similar Documents

Publication Publication Date Title
CN104884713B (zh) 建设机械的显示系统及其控制方法
US20200299924A1 (en) Shovel and system of managing shovel
US11926994B2 (en) Excavator, display device for excavator, and terminal apparatus
US8918246B2 (en) Augmented reality implement control
WO2017047826A1 (ja) 作業機械の表示システム及び作業機械
US9556593B2 (en) Display system of excavating machine and excavating machine
AU2017318911B2 (en) Image display system of work machine, remote operation system of work machine, work machine, and method for displaying image of work machine
JP6454383B2 (ja) 建設機械の表示システムおよびその制御方法
JP2008144379A (ja) 遠隔操縦作業機の画像処理システム
WO2018179596A1 (ja) 建設機械
JP6947101B2 (ja) 遠隔操作システム及び主操作装置
JP2010018141A (ja) 建設機械におけるディスプレイ装置
JP6823036B2 (ja) 建設機械の表示システムおよびその制御方法
US20240018750A1 (en) Display device for shovel, shovel, and assist device for shovel
JP2017115489A (ja) 作業車両および作業車両の制御方法
JP2017115488A (ja) 作業車両および作業車両の制御方法
JP7168697B2 (ja) 建設機械の表示システムおよびその制御方法
WO2023002796A1 (ja) 掘削機械の稼働範囲設定システムおよびその制御方法
US11549238B2 (en) System and method for work machine
US20210388580A1 (en) System and method for work machine
US20210395980A1 (en) System and method for work machine
JP2024051364A (ja) 作業機械の遠隔情報取得システム、及び遠隔情報取得システム
JP2021130932A (ja) 遠隔操作装置、遠隔操作支援サーバ、遠隔操作支援システムおよび遠隔操作支援方法

Legal Events

Date Code Title Description
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant