KR101856890B1 - 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법 - Google Patents

작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법 Download PDF

Info

Publication number
KR101856890B1
KR101856890B1 KR1020167018580A KR20167018580A KR101856890B1 KR 101856890 B1 KR101856890 B1 KR 101856890B1 KR 1020167018580 A KR1020167018580 A KR 1020167018580A KR 20167018580 A KR20167018580 A KR 20167018580A KR 101856890 B1 KR101856890 B1 KR 101856890B1
Authority
KR
South Korea
Prior art keywords
monitor
screen
work machine
information
display
Prior art date
Application number
KR1020167018580A
Other languages
English (en)
Other versions
KR20170015854A (ko
Inventor
요스케 오쿠무라
다케히로 시바타
Original Assignee
가부시키가이샤 고마쓰 세이사쿠쇼
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가부시키가이샤 고마쓰 세이사쿠쇼 filed Critical 가부시키가이샤 고마쓰 세이사쿠쇼
Publication of KR20170015854A publication Critical patent/KR20170015854A/ko
Application granted granted Critical
Publication of KR101856890B1 publication Critical patent/KR101856890B1/ko

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2200/00Type of vehicle
    • B60Y2200/40Special vehicles
    • B60Y2200/41Construction vehicles, e.g. graders, excavators
    • B60Y2200/412Excavators
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/30Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom
    • E02F3/32Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom working downwardly and towards the machine, e.g. with backhoes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Instrument Panels (AREA)

Abstract

본 발명은, 작업 기계의 주위 상황을 취득하는 복수의 카메라 (C1 ∼ C4) 와, 복수의 카메라 (C1 ∼ C4) 가 촬상한 화상에 대해 화상 처리를 실시한 주변 감시 화상 혹은 주변 감시 제어부 (40) 의 조정 처리에 대한 소정의 조정 처리 화면 (90) 을 생성하고, 각각 영상 신호 (S1) 로서 출력하는 주변 감시 제어부 (40) 와, 주변 감시 제어부 (40) 로부터 출력된 영상 신호 (S1) 를 기초로 상기 주변 감시 화상 혹은 소정의 조정 처리 화면 (90) 을 표시 화면 상에 표시하는 표시부 (16) 와, 표준 화면을 생성하여 표시부 (16) 에 그 표준 화면을 표시함과 함께, 조작부 (17) 로부터 소정의 조정 처리 화면 (90) 의 출력 지시를 받은 경우, 주변 감시 제어부 (40) 에, 소정의 조정 처리 화면 (90) 의 출력 지시를 실시하는 모니터 제어부 (43) 와, 소정의 조정 처리 화면 (90) 이 표시부 (16) 에 표시된 상태로부터 상기 표준 화면으로 천이시키는 EXIT 아이콘을 구비한다.

Description

작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법{DISPLAY SYSTEM FOR WORK MACHINE, DISPLAY DEVICE FOR WORK MACHINE, AND DISPLAY METHOD FOR WORK MACHINE}
본 발명은, 간이한 구성으로 각종 조정 처리를 실시하기 위한 화상을 생성하는 경우에, 그 조정 처리 화상을 생성하는 제어부의 처리 이상이 발생하여 조정 입력을 실시할 수 없는 상태라 하더라도, 당해 제어부와는 다른 제어부에서 생성하는 화면으로 신속하게 천이할 수 있는 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법에 관한 것이다.
유압 셔블 등의 작업 기계의 분야에서는, 차체의 주변에 존재하는 장애물을 오퍼레이터가 시인할 수 있도록, 차체 후방이나 차체 측방에 복수 대의 카메라를 설치하고, 카메라가 촬상한 화상을 단일 카메라 화상으로서 작업 기계의 운전실 내의 모니터에 비추고 있는 것이 있다. 또한, 특허문헌 1 과 같이, 차체의 주위를 동시에 감시할 수 있도록, 각 카메라의 화상을 상방 시점으로 변환한 후에 각 카메라의 화상을 합성함으로써 부감 화상을 생성하여 모니터에 표시하는 것이 있다.
또, 모니터 등의 표시 장치에는, 표시되는 화상 등을 캘리브레이션 (조정 처리) 하기 위한 기능이 준비되어 있는 것도 있다. 예를 들어, 특허문헌 2 에는, 터치 패널의 캘리브레이션에 관한 문헌으로, 잘못된 기준 포인트를 설정한 경우나, 터치 패널의 저항값이 크게 변화하여 표시 화면의 위치와 터치 패널 입력 위치가 크게 어긋나 조작 버튼의 터치를 검출할 수 없게 된 경우에서도, 터치 패널을 구비한 전자 기기로의 전원 투입, 또는 리셋 조작으로부터 일정 시간 내의 소정 횟수의 터치 패널로의 터치를 검출한 경우, 캘리브레이션 모드를 실시할 수 있는 것이 기재되어 있다.
일본 공개특허공보 2013-253402호 일본 공개특허공보 2011-65301호
그런데, 부감 화상을 생성하는 것과 같은 화상 처리는, 부하가 큰 작업이 되기 때문에, 일반적으로 모니터 등의 표시부에 기계 게이지 정보 (엔진 수온이나 연료의 잔량 등) 를 표시시키기 위한 모니터 제어부에 의한 처리로는 곤란이 따른다. 그 때문에, 모니터와는 별체의 범용 화상 처리 액셀러레이터를 갖는 화상 처리 컨트롤러 (주변 감시 제어부) 에 의해 처리된다.
또, 정확한 상방 시점 화상 (부감 화상) 을 생성하기 위해서는, 미리 작업 기계에 설치되는 복수 대의 카메라의 설치 위치나 방향 등을 화상 처리 컨트롤러에 입력함과 함께, 표시부에 표시되는 화상이 올바른 상방 시점 화상으로 되어 있는지 확인하면서 각종 캘리브레이션을 실시해 둘 필요가 있다. 캘리브레이션을 실시하기 위해 전용의 화면 (조정 처리 화면) 이 준비되고, 당해 화면에 있어서 현재의 부감 화상이 표시된 상태에서 각종 캘리브레이션을 실시한다. 그 때문에, 캘리브레이션을 실시하기 위한 조정 처리 화면은, 화상 처리 컨트롤러측에서 생성해야 한다.
그러나, 캘리브레이션 작업 중에, 화상 처리 컨트롤러에 어떠한 문제가 발생한 경우, 조정 처리 화면이 표시된 채로 입력을 받아들이지 않게 되어 버릴 가능성이 있다. 이 경우, 오퍼레이터는 일단 조정 처리 화면으로부터 연료 잔량이나 엔진 수온 등이 표시되는 표준 화면으로 천이하려고 시도하지만, 조정 처리 화면 자체가 입력을 받아들이지 않을 경우, 표준 화면으로 천이할 수 없다. 그 때문에, 화상 처리 컨트롤러에 문제가 발생한 경우에, 부감 화상을 생성할 수 없을 뿐만 아니라, 작업 기계를 동작하는 것조차 할 수 없게 되어 버릴 가능성이 있다.
본 발명은, 상기를 감안하여 이루어진 것으로서, 간이한 구성으로, 캘리브레이션 등을 실시하는 조정 처리 화면을 주변 감시 제어부측에서 생성하는 경우에 주변 감시 제어부측의 처리 이상이 발생하여 조정 작업을 실시할 수 없는 상태라 하더라도 신속하게 모니터측이 생성하는 화면으로 천이할 수 있는 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법을 제공하는 것을 목적으로 한다.
상기 서술한 과제를 해결하여 목적을 달성하기 위해, 본 발명에 관련된 작업 기계의 표시 시스템은, 표시부를 구비한 모니터와, 상기 모니터에 접속되고, 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 제어부와, 상기 모니터에 접속되고, 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 제어부와, 복귀 스위치를 구비하고, 상기 모니터는, 상기 제 1 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시함과 함께, 상기 제 2 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 것이고, 상기 복귀 스위치는, 상기 표시부에 표시된 상기 작업 기계의 특수 정보의 표시 화면으로부터, 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 작업 기계의 주위 상황을 취득하는 복수의 카메라를 갖고, 상기 제 2 모니터 제어부는, 상기 복수의 카메라에 접속되고, 상기 복수의 카메라의 단일 카메라 화상, 상기 복수의 카메라가 촬상한 화상에 기초하여 생성되는 부감 화상, 및 부감 화상의 조정 처리를 실시하는 조정 처리 화면을 생성하는 주변 감시 제어부이며, 상기 작업 기계의 상기 특수 정보는, 상기 조정 처리 화면을 포함하고, 상기 주변 감시 제어부는, 상기 조정 처리 화면을 생성하여 상기 모니터에 신호 출력하고, 상기 복귀 스위치는, 상기 모니터의 표시부가 상기 조정 처리 화면을 표시하는 상태로부터 상기 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 복귀 스위치는, 상기 모니터에 표시되거나, 혹은 상기 모니터에 형성된 스위치인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 복귀 스위치는, 모니터와는 별체로 형성된 스위치인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 조정 처리 화면은, 상기 부감 화상, 및/또는 단일 카메라 화상을 포함하는 화면인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 작업 기계의 각종 정보란, 기계 정보, 경고 정보, 메뉴 화면, 및/또는 메인터넌스 화면인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 시스템은, 상기의 발명에 있어서, 상기 작업 기계의 특수 정보란, 단일 카메라 화상, 부감 화상, 조정 처리 화면, 작업 기계 주위의 장애물에 관한 정보, 작업 현장 전체의 지형 정보, 작업 기계의 조작을 보조ㆍ가이던스하기 위한 작업 기계 주변의 지형 정보, 및/또는 원격 조작에 사용하는 작업 기계 주위의 화상 정보인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 장치는, 표시부를 구비한 모니터와, 상기 모니터에 접속되고, 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 제어부와, 상기 모니터에 접속되고, 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 제어부와, 복귀 스위치를 구비하고, 상기 모니터는, 상기 제 1 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시함과 함께, 상기 제 2 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 것이고, 상기 복귀 스위치는, 상기 표시부에 표시된 상기 작업 기계의 특수 정보의 표시 화면으로부터, 상기 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 한다.
또, 본 발명에 관련된 작업 기계의 표시 방법은, 표시부를 구비한 모니터와, 복귀 스위치를 구비하고, 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 스텝과, 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 스텝과, 상기 제 1 모니터 스텝으로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시하는 제 1 표시 스텝과, 상기 제 2 모니터 스텝으로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 제 2 표시 스텝과, 제 2 표시 스텝에 의해 상기 표시부에 상기 작업 기계의 특수 정보가 표시된 상태로부터, 상기 복귀 스위치의 조작에 의해, 제 1 표시 스텝에 의한 상기 작업 기계의 각종 정보가 상기 표시부에 표시되는 것을 특징으로 한다.
본 발명에 의하면, 제 2 모니터 제어부가 생성한 작업 기계의 특수 정보의 표시 화면으로부터 제 1 모니터 제어부가 생성한 화면으로 천이시키기 위한 복귀 스위치를 형성하고 있기 때문에, 간이한 구성으로, 작업 기계의 특수 정보의 표시 화면, 예를 들어 캘리브레이션 등을 실시하는 조정 처리 화면을 생성하는 제 2 모니터 제어부측, 예를 들어 주변 감시 제어부측에 어떠한 문제가 발생하여 조정 처리를 실시할 수 없는 상태라 하더라도, 신속하게 모니터측이 생성하는 화면, 예를 들어 표준 화면으로 천이할 수 있고, 예를 들어 엔진 수온이나 연료 잔량 등의 기본 정보를 확실하게 확인할 수 있다.
도 1 은, 본 발명의 실시형태인 작업 기계의 주변 감시 장치가 탑재되는 유압 셔블의 전체 구성을 나타내는 사시도이다.
도 2 는, 운전실의 내부 배치를 나타내는 도면이다.
도 3 은, 카메라의 배치를 나타내는 평면도이다.
도 4 는, 유압 셔블의 제어계 전체 및 주변 감시 제어부의 상세한 구성을 나타내는 블록도이다.
도 5 는, 부감 화상 생성부에 의한 부감 화상의 생성 처리를 설명하는 설명도이다.
도 6 은, 모니터의 표시부에 표준 화면이 표시된 상태를 나타내는 도면이다.
도 7 은, 표준 화면과 조정 처리 화면 사이의 화면 천이를 설명하는 도면이다.
도 8 은, 조정 처리 화면인 메인 설정 선택 화면의 일례를 나타내는 도면이다.
도 9 는, 조정 처리 화면인 카메라 설정 메뉴 화면의 일례를 나타내는 도면이다.
이하, 첨부 도면을 참조하여 본 발명을 실시하기 위한 형태에 대하여 설명한다.
[유압 셔블의 전체 구성]
먼저, 도 1 은, 본 발명의 실시형태인 작업 기계의 주변 감시 장치가 탑재되는 유압 셔블의 전체 구성을 나타내는 사시도이다. 이 유압 셔블 (1) 은, 작업 기계의 일례로서 나타낸 유압 셔블이다. 유압 셔블 (1) 은, 자주 (自走) 가능한 하부 주행체 (2) 와, 하부 주행체 (2) 상에 자유롭게 선회할 수 있게 설치된 상부 선회체 (3) 와, 상부 선회체 (3) 의 전부 (前部) 중앙에 자유롭게 굴곡 기복할 수 있게 동작하는 작업기 (4) 를 구비한다.
작업기 (4) 는 붐 (4a), 아암 (4b), 버킷 (4c), 붐 실린더 (4d), 아암 실린더 (4e) 및 버킷 실린더 (4f) 를 갖는다.
상부 선회체 (3) 의 전부 좌측 부분에는, 운전실 (6) 이 설치된다. 상부 선회체 (3) 의 후부 (後部) 에는, 파워 컨테이너 (7) 가 탑재된다. 파워 컨테이너 (7) 내에는, 엔진, 유압 펌프, 라디에이터, 오일 쿨러 등이 수용되어 있다. 상부 선회체 (3) 의 후단부에는, 카운터 웨이트 (8) 가 장착된다.
[운전실]
도 2 는, 운전실 (6) 의 내부 배치를 나타내는 도면이다. 도 2 에 나타내는 바와 같이, 조작 레버 (11, 12) 는, 예를 들어 운전실 (6) 내의 오퍼레이터 시트 (10) 의 좌우에 배치된다. 조작 레버 (11) 는 상부 선회체 (3) 의 선회 동작과 아암 (4b) 의 동작에 대응하고 있으며, 조작 레버 (12) 는 붐 (4a) 의 동작과 버킷 (4c) 의 동작에 대응하고 있다. 또한, 조작 레버 (11, 12) 의 조작과 어느 작업기가 동작할지의 조합은, 본 실시형태의 것에 한정되지는 않는다.
주행 레버 (13) 및 주행 레버 (14) 는, 조작에 따라 하부 주행체 (2) 의 좌측 및 우측의 크롤러의 전진 후진을 실시할 수 있다.
또, 운전실 (6) 의 우측 앞쪽에는, 모니터 (15) 가 배치된다. 모니터 (15) 는, 표시부 (16) 와 조작부 (17) 를 갖는다. 표시부 (16) 는, 액정 디스플레이 등의 표시 장치로, 작업 기계의 각종 정보, 예를 들어, 엔진 수온, 유온, 연료의 잔량 등의 기계 정보, 기기의 이상 등을 나타내는 경고 정보, 메뉴 화면이나 메인터넌스 화면 등을 표시할 수 있다.
또, 모니터 (15) 에는, 후술하는 카메라에 의해 촬영된 화상 (단일 카메라 화상) 이나, 복수의 카메라 화상을 상방 시점으로 변환한 후에 합성함으로써 생성되는 화상 (부감 화상) 을 표시할 수 있다.
조작부 (17) 는, 표시부 (16) 의 표시 내용에 대응하여 복수의 기능을 갖게 한 펑션 스위치나, 작업 모드, 주행 모드, 에어컨 등의 각종 설정을 실시하기 위한 스위치를 포함한다. 또한, 모니터 (15) 는, 표시부 (16) 와 조작부 (17) 를 일체화한 터치 패널로 구성해도 된다. 또, 조작부 (17) 를 표시부 (16) 와 별체로 하여, 조작부 (17) 를 운전실 내의 다른 장소에 설치해도 된다.
[카메라의 구성]
카메라 (C1 ∼ C4) 는, 상부 선회체 (3) 에 장착된다. 도 3 에 나타내는 바와 같이, 카메라 (C1) 는, 상부 선회체 (3) 의 후방에 장착되어 상부 선회체 (3) 의 후방을 촬상한다. 또, 카메라 (C2) 는, 상부 선회체 (3) 의 우측방에 장착되어 상부 선회체 (3) 의 우후방을 촬상한다. 또, 카메라 (C3) 는, 상부 선회체 (3) 의 우측방에 장착되어 상부 선회체 (3) 의 우전방을 촬상한다. 또, 카메라 (C4) 는, 상부 선회체 (3) 의 좌측방에 장착되어 상부 선회체 (3) 의 좌측방을 촬상한다. 또한, 예를 들어, 각 카메라 (C1 ∼ C4) 는, 좌우 방향 및 높이 방향에 있어서 소정 각도의 시야 범위를 갖는다. 카메라로서 CCD (Charge-Coupled Device) 카메라를 사용할 수 있다. 또, 각 카메라 (C1 ∼ C4) 는, 와이드 다이나믹 레인지 (Wide Dynamic Range) 기능을 가져도 된다.
[제어계의 전체 구성]
도 4 는, 유압 셔블 (1) 의 제어계 전체의 구성을 나타내는 블록도이다. 도 4 에 나타내는 바와 같이, 주변 감시 제어부 (40) (제 2 모니터 제어부), 통신 제어부 (42), 모니터 제어부 (43) (제 1 모니터 제어부), 엔진 제어부 (44), 펌프 제어부 (45) 등이, 차내 네트워크의 하나인 CAN (41) 에 접속된다.
모니터 제어부 (43) (제 1 모니터 제어부) 는, 모니터 (15) 에 접속되어, 모니터 (15) 의 표시 제어부로서 기능한다. 모니터 제어부 (43) 는, CAN (41) 을 통해 각종 센서로부터 송신된 정보나, 모니터 (15) 에 형성된 스위치를 통해 입력된 정보와 같은 작업 기계의 각종 정보의 입출력 제어를 실시한다. 그리고, 모니터 (15) 에 엔진 수온, 유온, 연료의 잔량 등의 기계 정보, 기기의 이상 등을 나타내는 경고 정보, 메뉴 화면이나 메인터넌스 화면 등을 표시하는 제어를 실시할 수 있다.
모니터 제어부 (43) 는, 표준 화면 생성부 (46), 조정 처리 화면 생성 지시부 (47) 및 아이콘 생성부 (48) 를 갖는다. 표준 화면 생성부 (46) 는, 모니터 (15) 의 표시부 (16) 에 표시되는 표준 화면을 생성한다. 일례로서, 도 6 에 있어서의 모니터 (15) 의 표시부 (16) 에 표시된 화면이 표준 화면 (83) 이다. 도시되어 있는 바와 같이, 엔진 수온 게이지 (G1) 나 연료 잔량 게이지 (G3) 등의 각종 정보나, 부감 화상 (61) 과 단일 카메라 화상 (62) 과 같은 특수 정보가 한 화면에 표시되어 있다.
조정 처리 화면 생성 지시부 (47) 는, 오퍼레이터의 조작에 의해 모니터 (15) 의 조작부 (17) 로부터 조정 처리 화면의 생성 지시를 받은 경우, 주변 감시 제어부 (40) 에, CAN (41) 을 통해 조정 처리 화면의 생성 지시를 출력한다. 그리고, 당해 생성 지시를 받은 주변 감시 제어부 (40) 내의 조정 처리 화면 생성부 (55) 가 조정 처리 화면을 생성한다. 조정 처리 화면은, 올바른 부감 화상을 생성하기 위해 미리 복수 대의 카메라의 설치 위치나 방향 등을 주변 감시 제어부 (40) 에 입력함과 함께, 표시되는 화상이 올바른 부감 화상이 되도록 각종 캘리브레이션을 실시하기 위한 전용 화면이다. 일례로서, 도 8 에 있어서 도시된 화면이 조정 처리 화면이다. 화면 우측에 도시된 조정 처리용 항목과, 화면 좌측에 도시된 부감 화상이 한 화면에 표시되어 있다.
또, 모니터 제어부 (43) 내의 아이콘 생성부 (48) 는, 조정 처리 화면이 표시부 (16) 에 표시되는 경우에, 모니터 제어부 (43) 가 아이콘을, 주변 감시 제어부 (40) 가 생성하는 조정 처리 화면의 영역 밖, 구체적으로는 예를 들어 화면 하방의 영역에 생성한다. 아이콘의 일례로서, 도 8 에 있어서 화면 하방 (아이콘 영역) 에 도시된 아이콘 (IB, I6 ∼ I9) 이 아이콘 생성부 (48) 에 의해 생성된 아이콘이다.
도 8 에 있어서의 화면 하부에 표시되어 있는 아이콘 (I6 ∼ I9) 에 대응하는 펑션 스위치 (F3 ∼ F6) 를 누르면, 조정 처리 화면에 있어서, 각종 메뉴의 선택ㆍ결정을 할 수 있다. 그 때, 펑션 스위치를 갖는 조작부 (17) 가 조작됨으로써, 그 신호를 모니터 제어부 (43), CAN (41) 을 통해 주변 감시 제어부 (40) 내의 조정 처리 화면 생성부 (55) 에 출력한다. 그리고, 조정 처리 화면 생성부 (55) 는, 받은 신호에 따른 새로운 조정 처리 화면을 생성하여, 영상 신호 (S1) 로서 모니터에 출력한다.
한편, 후술하는 「EXIT」라고 쓰인 아이콘 (IB) 에 대응하는 펑션 스위치 (F1) 가 눌리면, 펑션 스위치를 갖는 조작부 (17) 가 모니터 제어부 (43) 에 신호를 출력한다. 그리고, 모니터 제어부 (43) 는, 내부의 표준 화면 생성부 (46) 가 받은 신호에 따른 표준 화면을 생성하여, 모니터 (15) 에 출력한다. 그렇게 함으로써, 조정 처리 작업 중에 있어서, 주변 감시 제어부 (40) 의 문제 등으로 인해 주변 감시 제어부 (40) 가 조작부 (17) 로부터의 신호를 받아들이지 않는 상태가 된 경우라 하더라도, 모니터 제어부 (43) 가 생성하는 화면, 예를 들어 표준 화면으로 신속하게 되돌아갈 수 있다.
주변 감시 제어부 (40) (제 2 모니터 제어부) 는, 복수의 카메라 (C1 ∼ C4) 로 이루어지는 카메라군 (C) 및 모니터 (15) 와 접속하고 있으며, 후술하는 바와 같이, 복수의 카메라 중 어느 단일 카메라 화상과 부감 화상을 합성한 화상을 모니터에 출력한다.
또, 주변 감시 제어부 (40) 는, 화상 처리부 (51) 및 표시 제어부 (53) 를 갖는다. 또한, 화상 처리부 (51) 는, 부감 화상 생성부 (54), 단일 카메라 화상 생성부 (58), 조정 처리 화면 생성부 (55) 및 화상 합성부 (56) 를 갖는다.
부감 화상 생성부 (54) 는, 각 카메라 (C1 ∼ C4) 로부터 얻어진 화상을 기초로 부감 화상 (61) 을 생성한다. 도 5 에 나타내는 바와 같이, 부감 화상 생성부 (54) 는, 각 카메라 (C1 ∼ C4) 로부터 얻어진 화상 (P1 ∼ P4) 을 상방 시점 화상으로 변환한다. 즉, 부감 화상 생성부 (54) 는, 유압 셔블 (1) 의 상방에 위치하는 소정의 가상 시점에서 본 화상으로 변환한다.
구체적으로, 부감 화상 생성부 (54) 는, 유압 셔블 (1) 의 상방의 가상 시점으로부터 지표면 레벨에 대응하는 소정의 가상 투영면에 투영하는 화상 변환을 실시한다. 그 후, 부감 화상 생성부 (54) 는, 부감 화상을 표시하는 프레임의 각 영역 (E1 ∼ E4) 에 대응하는 변환 화상 (P11 ∼ P14) 을 잘라내고, 각 변환 화상 (P11 ∼ P14) 을 프레임 내에서 합성한다. 부감 화상 생성부 (54) 가 생성하는 부감 화상에는, 유압 셔블 (1) 과의 위치 관계가 명확해지도록 유압 셔블 (1) 을 상방에서 본 화상 (P) 이 미리 첩부 (貼付) 되어 있다.
이 부감 화상 (61) 의 정보는, 화상 합성부 (56) 에 입력된다. 또한, 영역 (E0) 은, 운전실 (6) 로부터 시인할 수 있기 때문에, 부감 화상은 생성되지 않는다. 또, 본 실시형태에서는, 4 개의 카메라 (C1 ∼ C4) 를 사용하고 있지만, 카메라의 수는 몇 개여도 되어, 예를 들어 3 개의 카메라 (C1, C2, C4) 를 사용해도 된다. 이 경우, 카메라 (C2) 는, 카메라 (C4) 와 마찬가지로 우측방을 촬상한다.
단일 카메라 화상 생성부 (58) 는, 모니터 제어부 (43) 의 표준 화면 생성부 (46) 로부터의 요구에 따라, 각 카메라 (C1 ∼ C4) 가 촬상한 화상 중 어느 카메라의 단일 카메라 화상 (62) 을 화상 합성부 (56) 에 출력한다. 구체적으로는, 오퍼레이터에 의해 단일 카메라 화상 (62) 을 전환하는 조작이 조작부 (17) 에 의해 이루어진 경우, 그 신호가 모니터 제어부 (43) 및 CAN (41) 을 통해 단일 카메라 화상 생성부 (58) 에 전송되고, 단일 카메라 화상 생성부 (58) 는 지령을 받은 해당하는 카메라의 단일 카메라 화상 (62) 을 화상 합성부 (56) 에 출력한다.
조정 처리 화면 생성부 (55) 는, 조정 처리 화면 생성 지시부 (47) 로부터의 생성 지시에 의해, 지시받은 조정 처리 화면 (90) 을 생성하여, 화상 합성부 (56) 에 출력한다.
화상 합성부 (56) 는, 모니터 제어부 (43) 의 표준 화면 생성부 (46) 로부터 요구가 있으면, 도 6 에 있어서의 표준 화면 (83) 에 표시된 부감 화상 (61) 과 단일 카메라 화상 (62) 과 같이, 부감 화상 생성부 (54) 로부터 출력된 부감 화상 (61) 과, 단일 카메라 화상 생성부 (58) 로부터 출력된 단일 카메라 화상 (62) 을 합성하고, 합성된 화상은, 표시 제어부 (53) 를 통해 표시부 (16) 에 영상 신호 (S1) 로서 출력된다.
또, 화상 합성부 (56) 는, 모니터 제어부 (43) 의 조정 처리 화면 생성 지시부 (47) 로부터 요구가 있으면, 도 8 에 있어서의 화면과 같이, 조정 처리 화면 (90) 의 한 화면인 주변 감시 조정 화면 01 (91) 에 부감 화상 (61) 을 합성시킨 화면을 생성하고, 합성된 화상은, 표시 제어부 (53) 를 통해 표시부 (16) 에 영상 신호 (S1) 로서 출력된다. 또한, 본 발명에서는, 주변 감시 제어부 (40) 에서 생성하는 부감 화상 (61), 단일 카메라 화상 (62) 및 조정 처리 화면 (90) 을 특수 정보로서 정의하고 있다.
[모니터의 표준 화면]
도 6 은, 모니터 (15) 의 표시부 (16) 에 표준 화면 (83) 의 일례가 표시된 상태를 나타내는 도면이다. 표준 화면 (83) 은, 키 스위치 온 후, 일정 시간 경과한 상태에서 표시되는 초기 화면이다. 일반적인 표준 화면에는, 작업 기계의 각종 정보, 예를 들어, 엔진 수온, 유온, 연료의 잔량 등의 기계 정보, 기기의 이상 등을 나타내는 경고 정보, 메뉴 화면이나 메인터넌스 화면 등을 표시한다.
도 6 의 표준 화면 (83) 의 일례에서는, 상기 작업 기계의 각종 정보에 더하여, 특수 정보로서 표시부 (16) 의 중앙 왼쪽에는 부감 화상 (61) 이 표시되고, 중앙 오른쪽에는 단일 카메라 화상 (62) 이 표시된다. 도 6 의 단일 카메라 화상 (62) 은, 상부 선회체 (3) 의 후방에 형성된 카메라 (C1) 에 의한 후방을 촬상한 화상이다. 부감 화상 (61) 및 단일 카메라 화상 (62) 에는, 선회 중심으로부터의 거리나 방향의 기준을 나타내는 기준선 (D) 이 표시되어 있다.
단일 카메라 화상 (62) 의 우상측에는, 단일 카메라 화상 위치 아이콘 (63) 이 표시된다. 단일 카메라 화상 위치 아이콘 (63) 은, 표시부 (16) 에 표시되어 있는 단일 카메라 화상 (62) 이 어느 위치를 촬영하는 카메라의 화상인지를 나타내고 있다. 도 6 에서는, 단일 카메라 화상 (62) 이 카메라 (C1) 에 의해 촬상된 화상인 것을 나타내고 있다. 또한, 도 6 에서는 부감 화상 (61) 이 좌측에, 단일 카메라 화상 (62) 이 우측에 표시되어 있지만, 양자의 표시 위치가 반대여도 된다.
표시부 (16) 의 하부에는, 왼쪽에서부터 엔진의 냉각수의 수온을 나타내는 엔진 수온 게이지 (G1), 유압 회로 내의 작동유의 유온을 나타내는 작동 유온 게이지 (G2), 및 연료의 잔량의 레벨을 나타내는 연료 잔량 게이지 (G3) 가 표시된다. 또, 작동 유온 게이지 (G2) 는 표시되지 않아도 된다.
또한, 펑션 스위치 (F1 ∼ F6) 는, 각 스위치 바로 윗쪽에서 표시부 (16) 가 표시하는 아이콘에 대응한 신호를 입력하기 위한 스위치이다. 도 6 에서는, 펑션 스위치 (F3) 의 상부에는, 단일 카메라 화상 (62) 을 전체 화면 표시로 전환하는 아이콘 (I1) 이 표시되어 있다. 또, 펑션 스위치 (F4) 의 상부에는, 단일 카메라 화상 (62) 의 카메라를 전환하는 (예를 들어, 카메라 (C1) 의 화상으로부터 카메라 (C2) 의 화상으로의 전환) 아이콘 (I2) 이 표시되어 있다. 펑션 스위치 (F6) 의 상부에는, 메뉴 화면으로 전환하는 아이콘 (I3) 이 표시되어 있다. 메뉴 화면이란, 작업 기계의 각종 설정이나 상황을 확인할 때에 사용하는 화면이다.
또한, 펑션 스위치에 대응하는 아이콘 (I1 ∼ I3) 을 표시하지 않고, 대응하는 스위치를 다른 조작부 등에 형성해도 된다. 아이콘 (I4) 은, 서비스 미터의 값을 표시한다. 또, 아이콘 (I5) 은, 작업 모드의 설정 상태를 표시한다.
[표준 화면과 조정 처리 화면 사이의 화면 천이]
도 7 은, 표준 화면 (83) 과 조정 처리 화면 (90) 의 사이의 화면 천이를 설명하는 도면이다. 초기 화면으로서, 도 6 에 도시된 표준 화면 (83) 이 표시된다. 이 표준 화면 (83) 으로부터 주변 감시 제어부 (40) 의 캘리브레이션을 실시하기 위한 조정 처리 화면 (90) 으로 천이하는 경우, 표준 화면 (83) 에 있어서 펑션 스위치 (F6) 를 눌러 상기 서술한 메뉴 화면으로 천이한다.
메뉴 화면에는 복수의 각종 설정 항목이 나열되어 있지만, 그 중에서 「서비스 선택」메뉴를 선택ㆍ결정함으로써 도시되지 않은 서비스 선택 화면 (84) 으로 천이한다. 마찬가지로, 서비스 선택 화면 (84) 에 있어서도 복수의 항목이 나열되어 있지만, 그 중에서 도시되지 않은 「조정 선택」메뉴를 선택ㆍ결정하여, 조정 선택 화면 (85) 으로 천이한다. 또한, 조정 선택 화면 (85) 에 있어서도 그 중에서 「메인 설정 선택」메뉴를 선택ㆍ결정하여, 메인 설정 선택 화면 (91) 으로 천이한다.
그 결과, 부감 화상의 조정 처리를 실시하기 위한 조정 처리 화면 (90) 으로서의 주변 감시 조정 화면 01 (91) 이 표시된다. 조정 처리 화면 (90) 은, 계층 구조로 되어 있어, 어느 항목을 「결정」할 때마다 1 개 아래의 계층으로 천이하고, 「1 계층 되돌아감」버튼을 누르면, 1 개 위의 계층으로 천이한다.
도 7 에 도시된 표준 화면 (83), 서비스 선택 화면 (84), 조정 선택 화면 (85) 은, 모니터 제어부 (43) 에 있어서의 표준 화면 생성부 (46) 가 생성하는 화면이다. 또, 주변 감시 조정 화면 01 (91) 이나 카메라 설정 메뉴 화면 (102) 과 같은 조정 처리 화면 (90) 은, 모니터 제어부 (43) 에 있어서의 조정 처리 화면 생성 지시부 (47) 로부터의 지시에 기초하여 주변 감시 제어부 (40) 에 있어서의 조정 처리 화면 생성부 (55) 가 생성하는 화면이다.
그 때문에, 예를 들어, 표준 화면 (83) 으로부터 서비스 선택 화면 (84) 으로 천이하는 경우에는, 모니터 (15) 가 갖는 조작부 (17) 에 있어서 「서비스 선택」의 항목이 「선택ㆍ결정」됨으로써, 그 신호가 모니터 제어부 (43) 에 출력되고, 모니터 제어부 (43) 에 있어서의 표준 화면 생성부 (46) 가 서비스 선택 화면 (84) 을 생성하여, 표시부 (16) 에 출력하여 표시된다, 고 하는 신호의 입출력이 행해지고 있다.
한편, 주변 감시 조정 화면 01 (91) 으로부터 주변 감시 조정 화면 02 (92) 로 천이하는 경우에는, 모니터 (15) 가 갖는 조작부 (17) 에 있어서 「1 개 아래의 항목을 선택」스위치가 눌림으로써, 그 신호가 모니터 제어부 (43) 를 통해 주변 감시 제어부 (40) 에 출력되고, 주변 감시 제어부에 있어서의 조정 처리 화면 생성부 (55) 가 주변 감시 조정 화면 02 (92) 를 생성하여, 영상 신호 (S1) 로서 표시부 (16) 에 출력하여 표시된다, 고 하는 신호의 입출력이 행해지고 있다.
도 8 은, 주변 감시 조정 화면 01 (91) 을 나타내고 있으며, 이 화면의 좌측에 부감 화상 (61) 이 표시되고, 우측에 선택 항목이 표시된다. 이 상태에서는, 가장 위의 색이 칠해져 있는 항목인 「01 메인 설정」이 선택되어 있게 된다. 도 8 에 있어서의 화면 상중부의 영역은 주변 감시 제어부 (40) 에 있어서 생성되는 조정 처리 화면 영역이고, 화면 하부의 아이콘이 나열되어 있는 영역은 모니터 제어부 (43) 에 있어서의 아이콘 생성부 (48) 가 생성하는 아이콘 영역이다.
펑션 스위치 (F3) 에 대응하는 아이콘 (I6) 은 「1 개 아래의 항목을 선택」을, 펑션 스위치 (F4) 에 대응하는 아이콘 (I7) 은 「1 개 위의 항목을 선택」을, 펑션 스위치 (F5) 에 대응하는 아이콘 (I8) 은 「1 계층 되돌아감」을, 펑션 스위치 (F6) 에 대응하는 아이콘 (I9) 은 「결정」을 의미하고 있다. 또, 도 8 의 화면 좌하방에 위치하는 「EXIT」라고 쓰여진 아이콘은, EXIT 아이콘 (IB) (복귀 스위치) 이다.
도 7 에도 있는 바와 같이, 주변 감시 조정 화면 01 (91) 등의 조정 처리 화면 (90) 에는, 모두 EXIT 아이콘 (IB) 이 표시되도록 되어 있다. 그리고, EXIT 아이콘 (IB) 에 대응하는 펑션 스위치 (F1) (복귀 스위치) 가 눌리면, 어느 화면으로부터라 하더라도, 모니터 제어부 (43) 가 생성하는 화면인 표준 화면 (83) 으로 천이한다.
그 경우, 펑션 스위치 (F1) 를 갖는 조작부 (17) 로부터 신호가 모니터 제어부 (43) 에 출력되고, 그 신호를 받은 모니터 제어부 (43) 는, 표준 화면 생성부 (46) 에 의해 표준 화면 (83) 을 생성하여, 표시부 (16) 에 출력한다고 하는 신호의 입출력이 행해진다.
도 8 의 주변 감시 조정 화면 01 (91) 의 상태로부터 펑션 스위치 (F3) (1 개 아래의 항목을 선택) 를 누름으로써, 1 개 하부의 항목인 「02 카메라 설정」이 선택된 상태인 주변 감시 조정 화면 02 (92) 로 천이한다 (도시되어 있지 않음).
여기에서, 「02 카메라 설정」이 선택된 상태 (주변 감시 조정 화면 02 (92)) 에서, 펑션 스위치 (F6) (결정) 를 누르면, 도 9 에 나타내는 카메라 설정 메뉴 화면 (102) 으로 천이한다.
여기에서 주변 감시 제어부 (40) 가 정상적으로 가동하고 있는 상태라면, 예를 들어 카메라 설정 메뉴 화면 (102) 이 표시되어 있는 상태에서 「1 계층 되돌아감」스위치 (펑션 스위치 (F5)) 를 누르면, 그 신호가 주변 감시 제어부 (40) 에 보내지고, 주변 감시 제어부 (40) 에서 주변 감시 조정 화면 02 (92) 를 생성하여, 표시부 (16) 에 출력한다고 하는 동작이 이루어진다.
한편, 여기에서 주변 감시 제어부 (40) 에 어떠한 문제가 발생하여 신호를 받아들이지 않게 된 경우, 조작부 (17) 로부터의 「1 계층 되돌아감」이라는 신호를 받아들이지 못하여, 주변 감시 조정 화면 02 (92) 으로 천이하지 않고 카메라 설정 메뉴 화면 (102) 이 표시된 상태인 채가 되어 버린다. 그와 같은 경우, 마찬가지로 「결정」스위치 (펑션 스위치 (F6)) 나 「1 개 아래의 항목을 선택」스위치 (펑션 스위치 (F3)) 를 눌렀다고 해도 화면을 천이할 수 없다.
그러나, 그와 같은 경우라 하더라도, 모니터 제어부 (43) 가 생성하는 화면으로 천이시키기 위한 신호를 출력하기 위한 복귀 스위치를 누르면, 신호를 받아들이지 않게 된 주변 감시 제어부 (40) 를 통하지 않고, 스위치를 조작한 신호가 모니터 제어부 (43) 에 보내지고, 모니터 제어부 (43) 에 있어서 표준 화면 (83) 을 생성하여 표시부 (16) 에 표시하는, 즉, 바로 표준 화면 (83) 으로 되돌아갈 수 있다.
따라서, 부감 화상의 캘리브레이션을 한창 실시하고 있을 때에 주변 감시 제어부측에 어떠한 문제가 발생하여 조정 처리를 실시할 수 없는 상태라 하더라도, 신속하게 모니터 제어부 (43) 가 생성하는 화면, 예를 들어 표준 화면으로 천이할 수 있어, 오퍼레이터가 엔진 수온이나 연료 잔량 등의 기본 정보를 확실하게 확인할 수 있다.
상기 실시형태에서는, 복귀 스위치를 누른 경우에 표준 화면으로 되돌아갈 수 있는 구성으로 하였지만, 이 실시형태에 한정되지 않고, 예를 들어 터치 패널 디스플레이를 사용하여 화면 상에 표시되는 EXIT 아이콘을 탭하는 것만이어도 되고, 복귀 스위치를 조작부 (17) 내에 전용의 스위치로서 형성해도 된다. 또, 모니터 이외의 장소에 별체의 복귀 스위치를 형성하도록 해도 된다.
상기 실시형태에서는, 복귀 스위치를 누른 경우에 표준 화면 (83) 으로 되돌아가는 구성으로 하였지만, 모니터 제어부 (43) 가 생성하는 화면이라면 어느 화면으로 되돌아가는 구성으로 해도 상관없다.
상기 실시형태에서는, 단일 카메라 화상이나 부감 화상, 조정 처리 화면 등을 생성하는 주변 감시 제어부를 사용한 예로 설명하였지만, 그 이외의 제어부로, 고도의 정보 처리를 실시하거나 하여 외부 제어부 자신에서 생성한 작업 기계의 특수 정보 (예를 들어, 작업 기계 주위의 장애물에 관한 정보나, 작업 현장 전체의 지형 정보, 작업 기계의 조작을 보조ㆍ가이던스하기 위한 작업 기계 주변의 지형 정보, 원격 조작에 사용하는 작업 기계 주위의 화상 정보 등) 를 표시하기 위한 화상을 모니터에 출력하여, 모니터에 당해 특수 정보를 표시시키는 제어부라면 어떠한 것을 사용해도 상관없다. 또한, 단일 카메라 화상이나 부감 화상, 조정 처리 화면 등도 작업 기계의 특수 정보에 포함되어 있다.
또, 상기 실시형태에서는, 주변 감시 제어부 (40) 와 모니터 제어부 (43) 가 CAN (41) 에 의해 접속되는 구성이었지만, 그 형태에 한정되지 않고, 예를 들어 동일 기판 내나 동일 칩 내에 각각 형성되는 구성이어도 된다.
상기 실시형태에서는, 표준 화면에 부감 화상 (61) 과 단일 카메라 화상 (62) 을 동시에 표시시키는 구성으로 하고 있었지만, 본 발명은 이것에 한정되지 않고, 부감 화상만이나 단일 카메라 화상만을 표시, 혹은 모두 표준 화면에 표시하지 않는 구성으로 해도 된다. 또, 조정 처리 화면에 부감 화상 (61) 을 표시시키는 구성으로 하고 있었지만, 부감 화상을 표시시키지 않는 구성이어도 된다.
또한, 상기 실시형태에서는 유압 셔블을 사용하여 설명하였지만, 작업 기계라면, 덤프 트럭, 불도저, 휠 로더 등의 작업 기계에 본 발명을 적용해도 된다.
또, 상기 실시형태에서는 작업 기계의 운전실 (6) 에 모니터 (15) 를 형성한 구성으로 설명하였지만, 그 밖의 장소, 예를 들어 작업 기계의 원격 조작을 실시하기 위한 원격 조작실이나, 건설 현장 내에 있는 복수의 작업 기계를 전체적으로 관리ㆍ통제하는 관제실에 표시부를 형성한 구성이어도 된다. 모니터 (15) 가 휴대 단말로서 구성되어 (예를 들어, 분리 가능해도 된다), 오퍼레이터가 휴대 단말에 있어서의 표시부에 표시된 부감 화상을 볼 수 있는 구성이어도 된다.
원격 조작실이나 관제실에 표시부를 형성한 경우, 복귀 스위치는, 마찬가지로 원격 조작실 내나 관제실 내에 형성하는 것이 바람직하다. 또, 모니터가 휴대 단말로서 구성되는 경우에는, 복귀 스위치를 휴대 단말에 형성해도 되고, 휴대 단말과는 다른 장치에 형성해도 된다.
여기에서, 원격 조작실이나 관제실에 있어서 표시부에 부감 화상을 표시하는 경우나 휴대 단말에 표시부를 형성하는 경우에는, 작업 기계와, 조작실ㆍ관제실ㆍ휴대 단말 등의 각각에 어떠한 통신 수단을 형성하여, 부감 화상 등의 정보의 송수신을 실시하는 구성이어도 된다.
1 : 유압 셔블
2 : 하부 주행체
3 : 상부 선회체
4 : 작업기
4a : 붐
4b : 아암
4c : 버킷
4d : 붐 실린더
4e : 아암 실린더
4f : 버킷 실린더
6 : 운전실
7 : 파워 컨테이너
8 : 카운터 웨이트
10 : 오퍼레이터 시트
11, 12 : 조작 레버
13, 14 : 주행 레버
15 : 모니터
16 : 표시부
17 : 조작부
40 : 주변 감시 제어부 (제 2 모니터 제어부)
42 : 통신 제어부
43 : 모니터 제어부 (제 1 모니터 제어부)
44 : 엔진 제어부
45 : 펌프 제어부
46 : 표준 화면 생성부
47 : 조정 처리 화면 생성 지시부
48 : 아이콘 생성부
51 : 화상 처리부
53 : 표시 제어부
54 : 부감 화상 생성부
55 : 조정 처리 화면 생성부
56 : 화상 합성부
58 : 단일 카메라 화상 생성부
61 : 부감 화상
62 : 단일 카메라 화상
63 : 단일 카메라 화상 위치 아이콘
83 : 표준 화면
84 : 서비스 선택 화면
85 : 조정 선택 화면
90 : 조정 처리 화면
91 : 주변 감시 조정 화면 01
92 : 주변 감시 조정 화면 02
102 : 카메라 설정 메뉴 화면
211 : 후방 카메라 설정 화면
C : 카메라군
C1 ∼ C4 : 카메라
D : 기준선
F1 ∼ F6 : 펑션 스위치
G1 : 엔진 수온 게이지
G2 : 작동 유온 게이지
G3 : 연료 잔량 게이지
I1 ∼ I9, IB : 아이콘
S1 : 영상 신호

Claims (9)

  1. 표시부를 구비한 모니터와,
    조작부와,
    상기 모니터에 접속되고, 상기 조작부로부터의 신호에 기초하여 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 제어부와,
    상기 모니터에 접속되고, 상기 조작부로부터의 신호에 기초하여 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 제어부와,
    복귀 스위치를 구비하고,
    상기 모니터는, 상기 제 1 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시함과 함께, 상기 제 2 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 것이고,
    상기 복귀 스위치는, 상기 모니터의 표시 화면이 상기 작업 기계의 특수 정보인 상태에 있어서 상기 제 2 모니터 제어부가 신호를 받아들이지 않게 된 경우에, 상기 표시부에 표시된 상기 작업 기계의 특수 정보의 표시 화면으로부터, 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 하는 작업 기계의 표시 시스템.
  2. 제 1 항에 있어서,
    상기 작업 기계의 주위 상황을 취득하는 복수의 카메라를 갖고,
    상기 제 2 모니터 제어부는, 상기 복수의 카메라에 접속되고, 상기 복수의 카메라의 단일 카메라 화상, 상기 복수의 카메라가 촬상한 화상에 기초하여 생성되는 부감 화상, 및 부감 화상의 조정 처리를 실시하는 조정 처리 화면을 생성하는 주변 감시 제어부이며,
    상기 작업 기계의 상기 특수 정보는, 상기 조정 처리 화면을 포함하고,
    상기 주변 감시 제어부는, 상기 조정 처리 화면을 생성하여 상기 모니터에 신호 출력하고,
    상기 복귀 스위치는, 상기 모니터의 표시부가 상기 조정 처리 화면을 표시하는 상태로부터 상기 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 하는 작업 기계의 표시 시스템.
  3. 제 1 항에 있어서,
    상기 복귀 스위치는, 상기 모니터에 표시되거나, 혹은 상기 모니터에 형성된 스위치인 것을 특징으로 하는 작업 기계의 표시 시스템.
  4. 제 1 항에 있어서,
    상기 복귀 스위치는, 모니터와는 별체로 형성된 스위치인 것을 특징으로 하는 작업 기계의 표시 시스템.
  5. 제 2 항에 있어서,
    상기 조정 처리 화면은, 상기 부감 화상, 및/또는 단일 카메라 화상을 포함하는 화면인 것을 특징으로 하는 작업 기계의 표시 시스템.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기 작업 기계의 각종 정보란, 기계 정보, 경고 정보, 메뉴 화면, 및/또는 메인터넌스 화면인 것을 특징으로 하는 작업 기계의 표시 시스템.
  7. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기 작업 기계의 특수 정보란, 단일 카메라 화상, 부감 화상, 조정 처리 화면, 작업 기계 주위의 장애물에 관한 정보, 작업 현장 전체의 지형 정보, 작업 기계의 조작을 보조ㆍ가이던스하기 위한 작업 기계 주변의 지형 정보, 및/또는 원격 조작에 사용하는 작업 기계 주위의 화상 정보인 것을 특징으로 하는 작업 기계의 표시 시스템.
  8. 표시부를 구비한 모니터와,
    조작부와,
    상기 모니터에 접속되고, 상기 조작부로부터의 신호에 기초하여 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 제어부와,
    상기 모니터에 접속되고, 상기 조작부로부터의 신호에 기초하여 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 제어부와,
    복귀 스위치를 구비하고,
    상기 모니터는, 상기 제 1 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시함과 함께, 상기 제 2 모니터 제어부로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 것이고,
    상기 복귀 스위치는, 상기 모니터의 표시 화면이 상기 작업 기계의 특수 정보인 상태에 있어서 상기 제 2 모니터 제어부가 신호를 받아들이지 않게 된 경우에, 상기 표시부에 표시된 상기 작업 기계의 특수 정보의 표시 화면으로부터, 상기 작업 기계의 각종 정보의 표시 화면으로 천이시키기 위한 스위치인 것을 특징으로 하는 작업 기계의 표시 장치.
  9. 표시부를 구비한 모니터와,
    조작부와,
    복귀 스위치를 구비하고,
    상기 조작부로부터의 신호에 기초하여 작업 기계의 각종 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 1 모니터 스텝과,
    상기 조작부로부터의 신호에 기초하여 작업 기계의 특수 정보를 표시시키기 위한 화면을 생성하며, 상기 모니터에 신호 출력하는 제 2 모니터 스텝과,
    상기 제 1 모니터 스텝으로부터 출력된 신호에 기초하여 상기 작업 기계의 각종 정보를 상기 표시부에 표시하는 제 1 표시 스텝과,
    상기 제 2 모니터 스텝으로부터 출력된 신호에 기초하여 상기 작업 기계의 특수 정보를 상기 표시부에 표시하는 제 2 표시 스텝과,
    상기 모니터의 표시 화면이 상기 작업 기계의 특수 정보인 상태에 있어서 상기 제 2 모니터 스텝에서 신호를 받아들이지 않게 된 경우에, 제 2 표시 스텝에 의해 상기 표시부에 상기 작업 기계의 특수 정보가 표시된 상태로부터, 상기 복귀 스위치의 조작에 의해, 제 1 표시 스텝에 의한 상기 작업 기계의 각종 정보가 상기 표시부에 표시되는 것을 특징으로 하는 작업 기계의 표시 방법.
KR1020167018580A 2015-07-31 2015-07-31 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법 KR101856890B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/071885 WO2016013686A1 (ja) 2015-07-31 2015-07-31 作業機械の表示システム、作業機械の表示装置、および作業機械の表示方法

Publications (2)

Publication Number Publication Date
KR20170015854A KR20170015854A (ko) 2017-02-09
KR101856890B1 true KR101856890B1 (ko) 2018-05-10

Family

ID=55163206

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167018580A KR101856890B1 (ko) 2015-07-31 2015-07-31 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법

Country Status (6)

Country Link
US (1) US10337174B2 (ko)
JP (1) JP5956693B2 (ko)
KR (1) KR101856890B1 (ko)
CN (1) CN105934945B (ko)
DE (1) DE112015000292B4 (ko)
WO (1) WO2016013686A1 (ko)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015088048A1 (ja) * 2014-12-26 2015-06-18 株式会社小松製作所 作業機械の状態情報表示装置、作業機械の警告表示方法、及び作業機械の警告表示プログラム
JP6665412B2 (ja) * 2015-03-23 2020-03-13 株式会社タダノ 作業機械の調整装置
JPWO2016157462A1 (ja) * 2015-03-31 2018-01-25 株式会社小松製作所 作業機械の周辺監視装置
CN108026714A (zh) * 2015-11-30 2018-05-11 住友重机械工业株式会社 施工机械用周边监视系统
JP6732578B2 (ja) * 2016-07-14 2020-07-29 株式会社加藤製作所 建設機械
JP7092688B2 (ja) * 2017-02-17 2022-06-28 住友重機械工業株式会社 作業機械用周辺監視システム
KR102669902B1 (ko) 2017-02-20 2024-05-28 에이치디현대인프라코어 주식회사 건설 장비의 화면 표시 시스템 및 화면 표시 방법
CN107171143B (zh) * 2017-06-15 2023-04-18 安徽交欣科技股份有限公司 一种公交车监视器连接结构
DE112017000082T5 (de) * 2017-06-28 2018-04-19 Komatsu Ltd. Anzeigevorrichtung und Anzeigesystem einer Arbeitsmaschine
EP3670764A4 (en) * 2017-08-14 2020-08-26 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. SHOVEL AND SUPPORT DEVICE WORKING WITH THE SHOVEL
JP6960802B2 (ja) * 2017-08-24 2021-11-05 日立建機株式会社 作業機械の周囲監視装置
JP7127313B2 (ja) * 2018-03-19 2022-08-30 コベルコ建機株式会社 建設機械
JP7000957B2 (ja) 2018-03-29 2022-01-19 コベルコ建機株式会社 作業機械操縦装置
WO2019189399A1 (ja) * 2018-03-30 2019-10-03 住友建機株式会社 ショベル
CA3106884A1 (en) 2018-07-19 2020-01-23 Clark Equipment Company Display position for cab with overhead door
JP7158216B2 (ja) * 2018-09-03 2022-10-21 株式会社小松製作所 作業機械のための表示システム
US10882468B1 (en) * 2019-10-29 2021-01-05 Deere & Company Work vehicle composite panoramic vision systems
WO2022210173A1 (ja) * 2021-03-29 2022-10-06 住友建機株式会社 ショベルの表示装置、ショベル
DE102021109330A1 (de) * 2021-04-14 2022-10-20 Deere & Company Verfahren zur Wahrnehmung einer erweiterten Realität für ein landwirtschaftliches Nutzfahrzeug
DE102021112052A1 (de) * 2021-05-07 2022-11-10 abaut GmbH System zur Überwachung der von wenigstens einer Maschine ausgeführten Prozesse und der Prozessumgebung

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010180636A (ja) 2009-02-06 2010-08-19 Hitachi Constr Mach Co Ltd 建設機械の故障情報表示装置
WO2012169352A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3008024A (en) * 1959-01-12 1961-11-07 Illinois Tool Works Toggle switch mechanism
JP4093915B2 (ja) * 2003-05-23 2008-06-04 住友建機製造株式会社 建設機械のモニタ装置
JP2005163370A (ja) 2003-12-02 2005-06-23 Hitachi Constr Mach Co Ltd 建設機械の画像表示装置
JP4332027B2 (ja) 2003-12-25 2009-09-16 キャタピラージャパン株式会社 表示器制御システム
JP4888831B2 (ja) * 2006-12-11 2012-02-29 株式会社デンソー 車両周辺監視装置
JP2011065301A (ja) 2009-09-16 2011-03-31 Fujitsu General Ltd タッチパネルを備えた電子機器
JP5367665B2 (ja) * 2010-09-17 2013-12-11 日立建機株式会社 作業機械の表示システム
JP5341044B2 (ja) * 2010-09-29 2013-11-13 日立建機株式会社 作業機械の表示システム
JP2013253402A (ja) 2012-06-06 2013-12-19 Hitachi Constr Mach Co Ltd 作業機械の周囲監視装置
JP6106430B2 (ja) 2012-12-27 2017-03-29 日立建機株式会社 作業機械の車体周囲表示装置
JP6200689B2 (ja) 2013-05-17 2017-09-20 京セラ株式会社 較正処理装置、カメラ較正装置、およびカメラ較正方法
JP6182044B2 (ja) 2013-10-10 2017-08-16 株式会社フジタ 建設機械に搭載される俯瞰画像表示装置におけるカメラのキャリブレーション方法及びその結果を用いた俯瞰画像表示装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010180636A (ja) 2009-02-06 2010-08-19 Hitachi Constr Mach Co Ltd 建設機械の故障情報表示装置
WO2012169352A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置

Also Published As

Publication number Publication date
JP5956693B2 (ja) 2016-07-27
DE112015000292T5 (de) 2016-11-17
KR20170015854A (ko) 2017-02-09
US20170030054A1 (en) 2017-02-02
WO2016013686A1 (ja) 2016-01-28
US10337174B2 (en) 2019-07-02
CN105934945A (zh) 2016-09-07
JPWO2016013686A1 (ja) 2017-04-27
CN105934945B (zh) 2019-07-05
DE112015000292B4 (de) 2021-02-11

Similar Documents

Publication Publication Date Title
KR101856890B1 (ko) 작업 기계의 표시 시스템, 작업 기계의 표시 장치, 및 작업 기계의 표시 방법
JP6568228B2 (ja) 作業機械の表示装置及び表示システム
JP6427597B2 (ja) 作業機械の周辺監視装置及び作業機械の周辺監視方法
CN107406035B (zh) 工程作业机械
US20140111648A1 (en) Device For Monitoring Area Around Working Machine
US20130182066A1 (en) Device for surveying surround of working machine
KR102027395B1 (ko) 작업 기계의 표시 시스템, 및 작업 기계의 표시 방법
EP3754120B1 (en) Remote control system and main control device
WO2017047654A1 (ja) ショベル
JP6243806B2 (ja) 作業車両の周囲監視装置および周囲監視装置用プログラム
WO2020095830A1 (ja) 建設機械の遠隔操作装置
JPWO2018159742A1 (ja) ショベル
JP2008114814A (ja) 建設機械のビデオカメラ切替装置
JP7092714B2 (ja) 作業機械の制御装置及び作業機械の制御方法
KR20110077063A (ko) 건설기계의 카메라모드 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant