KR20210100911A - Displaying system and displaying method for construction machinery - Google Patents
Displaying system and displaying method for construction machinery Download PDFInfo
- Publication number
- KR20210100911A KR20210100911A KR1020200014870A KR20200014870A KR20210100911A KR 20210100911 A KR20210100911 A KR 20210100911A KR 1020200014870 A KR1020200014870 A KR 1020200014870A KR 20200014870 A KR20200014870 A KR 20200014870A KR 20210100911 A KR20210100911 A KR 20210100911A
- Authority
- KR
- South Korea
- Prior art keywords
- construction machine
- screen display
- unmanned aerial
- aerial vehicle
- information
- Prior art date
Links
- 238000010276 construction Methods 0.000 title claims abstract description 115
- 238000000034 method Methods 0.000 title claims description 19
- 230000033001 locomotion Effects 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 18
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical group C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C39/00—Aircraft not otherwise provided for
- B64C39/02—Aircraft not otherwise provided for characterised by special use
- B64C39/024—Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D47/00—Equipment not otherwise provided for
- B64D47/08—Arrangements of cameras
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/24—Safety devices, e.g. for preventing overload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- B64C2201/127—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2101/00—UAVs specially adapted for particular uses or applications
- B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
Landscapes
- Engineering & Computer Science (AREA)
- Mining & Mineral Resources (AREA)
- Civil Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Structural Engineering (AREA)
- Aviation & Aerospace Engineering (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
본 발명은 건설기계의 화면 표시 시스템 및 건설기계의 화면 표시 방법에 관한 것이다. 보다 상세하게는, 건설기계의 사각 지대를 운전석의 모니터에 표시하기 위한 화면 표시 시스템 및 이를 이용한 건설기계의 화면 표시 방법에 관한 것이다.The present invention relates to a screen display system for a construction machine and a screen display method for a construction machine. More particularly, it relates to a screen display system for displaying a blind spot of a construction machine on a monitor of a driver's seat, and a screen display method for a construction machine using the same.
굴삭기와 같은 건설기계에 카메라를 설치하여 카메라에서 촬영한 영상을 운전석의 모니터에 표시할 수 있다. 작업자는 모니터에 표시된 영상을 보면서 안전 사고가 발생되지 않도록 건설기계의 작업을 수행할 수 있다. 그러나, 상기 운전실 내의 작업자가 볼 수 없는 사각 지대가 존재할 수 있다. 이러한 사각 지대를 정확하게 촬영하기 위한 기술들이 요구된다.By installing a camera on a construction machine such as an excavator, the image captured by the camera can be displayed on the monitor in the driver's seat. The worker can perform the work of the construction machine to prevent a safety accident from occurring while watching the image displayed on the monitor. However, there may be blind spots that cannot be seen by the operator in the cab. Techniques for accurately photographing such a blind spot are required.
본 발명의 일 과제는 건설기계의 사각 지대를 정확하게 표시할 수 있는 건설기계의 화면 표시 시스템을 제공하는 데 있다.An object of the present invention is to provide a screen display system for a construction machine that can accurately display a blind spot of the construction machine.
본 발명의 다른 과제는 상술한 화면 표시 시스템을 이용한 건설기계의 사각 지대 표시 방법을 제공하는 데 있다.Another object of the present invention is to provide a method for displaying a blind spot of a construction machine using the above-described screen display system.
상기 본 발명의 일 과제를 달성하기 위한 예시적인 실시예들에 따른 건설기계의 화면 표시 시스템은 건설기계의 동작 정보에 대응하여 상기 건설기계로부터의 지정된 상대 위치로 이동하고 영상을 촬영하여 영상 정보를 전송하는 무인 비행체 및 상기 전송된 영상 정보에 기초하여 상기 건설기계의 어라운드 뷰 모니터(Around View Monitor, AVM) 영상을 제공하는 화면 표시 장치를 포함할 수 있다. The screen display system of the construction machine according to the exemplary embodiments for achieving the object of the present invention moves to a designated relative position from the construction machine in response to the operation information of the construction machine, and captures the image to display the image information. It may include a screen display device for providing an Around View Monitor (AVM) image of the construction machine based on the transmitted unmanned aerial vehicle and the transmitted image information.
예시적인 실시예들에 있어서, 상기 건설기계의 동작 정보는 주행 동작 정보 및 선회 동작 정보를 포함할 수 있다.In example embodiments, the operation information of the construction machine may include driving operation information and turning operation information.
예시적인 실시예들에 있어서, 상기 무인 비행체는 상기 주행 동작 정보 및 상기 선회 동작 정보에 따라 지정된 위치로 이동하여 상기 건설기계의 사각 지대를 촬영할 수 있다.In example embodiments, the unmanned aerial vehicle may move to a designated location according to the driving motion information and the turning motion information to photograph a blind spot of the construction machine.
예시적인 실시예들에 있어서, 상기 무인 비행체는 상기 주행 동작 정보를 수신할 때, 상기 건설기계의 주행 방향에 선행하여 상기 건설기계와 지정된 거리만큼을 유지하도록 비행할 수 있다.In example embodiments, when receiving the driving operation information, the unmanned aerial vehicle may fly in advance of the driving direction of the construction machine to maintain a specified distance with the construction machine.
예시적인 실시예들에 있어서, 상기 무인 비행체는 상기 선회 동작 정보를 수신할 때, 상기 건설기계의 선회 방향에 선행하여 상기 건설기계와 지정된 거리만큼을 유지하도록 비행할 수 있다.In exemplary embodiments, when receiving the turning operation information, the unmanned aerial vehicle may fly in advance of the turning direction of the construction machine to maintain a specified distance with the construction machine.
예시적인 실시예들에 있어서, 상기 화면 표시 장치는, 상기 건설기계의 동작들을 검출하기 위한 동작 검출부, 상기 검출된 동작에 기초하여 상기 동작 정보를 산출하고 상기 전송된 영상 정보에 기초하여 상기 어라운드 뷰 모니터 영상 데이터를 생성하는 표시 제어부, 상기 산출된 동작 정보를 상기 무인 비행체에 송신하고 상기 무인 비행체로부터 전송된 영상 정보를 수신하는 통신부, 및 상기 생성된 영상 데이터에 상응하는 영상을 표시하는 표시부를 포함할 수 있다.In example embodiments, the screen display device includes a motion detector for detecting motions of the construction machine, calculating the motion information based on the detected motion, and calculating the motion information based on the transmitted image information. A display control unit for generating monitor image data, a communication unit for transmitting the calculated operation information to the unmanned aerial vehicle and receiving image information transmitted from the unmanned aerial vehicle, and a display unit for displaying an image corresponding to the generated image data can do.
예시적인 실시예들에 있어서, 상기 표시 제어부는 상기 생성된 영상 데이터에 기초하여 경보 제어 신호를 생성하고, 상기 화면 표시 장치는 상기 생성된 경보 제어 신호에 따라 경보를 출력하는 경보 출력부를 더 포함할 수 있다.In example embodiments, the display control unit may generate an alarm control signal based on the generated image data, and the screen display device may further include an alarm output unit configured to output an alarm according to the generated alarm control signal. can
예시적인 실시예들에 있어서, 상기 화면 표시 장치는 상기 건설기계의 위치 정보를 획득하기 위한 GPS 신호를 수신하는 GPS 수신부를 더 포함할 수 있다.In example embodiments, the screen display device may further include a GPS receiver for receiving a GPS signal for obtaining the location information of the construction machine.
예시적인 실시예들에 있어서, 상기 동작 검출부는 관성 센서(Inertial Measurement Unit, IMU)를 포함할 수 있다.In example embodiments, the motion detection unit may include an inertial measurement unit (IMU).
예시적인 실시예들에 있어서, 상기 무인 비행체는, 상기 동작 정보에 기초하여 비행 제어 신호 및 촬영 제어 신호를 생성하는 비행체 제어부, 상기 비행 제어 신호에 따라 추력을 발생시키는 추진부, 상기 촬영 제어 신호에 따라 영상을 촬영하는 카메라부, 및 상기 촬영한 영상 정보를 상기 화면 표시 장치에 송신하고 상기 화면 표시 장치로부터 전송된 동작 정보를 수신하는 통신부를 포함할 수 있다.In exemplary embodiments, the unmanned aerial vehicle includes an aircraft control unit that generates a flight control signal and a photographing control signal based on the operation information, a propulsion unit that generates thrust according to the flight control signal, and the photographing control signal. It may include a camera unit that captures an image in response, and a communication unit that transmits the captured image information to the screen display device and receives operation information transmitted from the screen display device.
상기 본 발명의 다른 과제를 달성하기 위한 예시적인 실시예들에 따른 건설기계의 화면 표시 방법에 있어서, 건설기계의 동작 정보를 획득한다. 상기 검출된 동작 정보에 대응하여 상기 건설기계로부터의 지정된 상대 위치로 무인 비행체를 이동시킨다. 상기 무인 비행체의 카메라로 영상을 촬영한다. 상기 촬영된 영상 정보에 기초하여 상기 건설기계의 어라운드 뷰 모니터 영상을 표시한다.In the method for displaying a screen of a construction machine according to exemplary embodiments for achieving another object of the present invention, operation information of the construction machine is acquired. In response to the detected motion information, the unmanned aerial vehicle is moved to a designated relative position from the construction machine. An image is taken with the camera of the unmanned aerial vehicle. An around-view monitor image of the construction machine is displayed based on the captured image information.
예시적인 실시예들에 있어서, 상기 건설기계의 동작 정보를 획득하는 것은 관성 센서(IMU)를 이용하여 상기 건설기계의 주행 동작 정보 및 선회 동작 정보를 획득하는 것을 포함할 수 있다.In example embodiments, obtaining the operation information of the construction machine may include obtaining driving operation information and turning operation information of the construction machine using an inertial sensor (IMU).
예시적인 실시예들에 있어서, 상기 무인 비행체를 이동시키는 것은 상기 주행 동작 정보에 따라 상기 주행 방향에 선행하여 상기 건설기계와 지정된 거리만큼을 유지시키는 것을 포함할 수 있다.In exemplary embodiments, moving the unmanned aerial vehicle may include maintaining a predetermined distance with the construction machine in advance of the driving direction according to the driving operation information.
예시적인 실시예들에 있어서, 상기 무인 비행체를 이동시키는 것은 상기 선회 동작 정보에 따라 상기 선회 방향에 선행하여 상기 건설기계와 지정된 거리만큼을 유지시키는 것을 포함할 수 있다.In exemplary embodiments, moving the unmanned aerial vehicle may include maintaining a predetermined distance with the construction machine in advance of the turning direction according to the turning operation information.
예시적인 실시예들에 있어서, 상기 방법은, 상기 획득한 동작 정보를 상기 무인 비행체에 송신하는 것, 그리고 상기 촬영한 영상 정보를 상기 건설기계의 화면 표시 장치에 송신하는 것을 더 포함할 수 있다.In example embodiments, the method may further include transmitting the obtained motion information to the unmanned aerial vehicle, and transmitting the captured image information to the screen display device of the construction machine.
예시적인 실시예들에 있어서, 상기 방법은, 상기 영상 정보에 기초하여 장애물 유무를 판단하는 것, 그리고 상기 장애물이 있는 경우, 경보를 출력하는 것을 더 포함할 수 있다.In example embodiments, the method may further include determining whether there is an obstacle based on the image information, and outputting an alert when there is an obstacle.
예시적인 실시예들에 따르면, 건설기계의 동작 정보를 TMS(Tele-Management System) 등을 통한 무선 통신에 의해 드론에 전송하고, 상기 드론은 선회/주행 및 방향 정보에 따라 지정된 위치로 이동하여 해당 위치의 영상 정보를 TMS를 통해 건설기계의 화면 표시 장치에 전송할 수 있다. 상기 화면 표시 장치는 상기 드론으로부터 전송받은 영상 정보를 통해 진행 방향/선회 방향에 위치한 장애물 및 이동 물체를 표시하고 필요한 경우 경보 신호를 출력할 수 있다.According to exemplary embodiments, the operation information of the construction machine is transmitted to the drone by wireless communication through a TMS (Tele-Management System), etc., and the drone moves to a designated location according to turning/driving and direction information and corresponding The image information of the location can be transmitted to the screen display device of the construction machine through TMS. The screen display device may display obstacles and moving objects located in the traveling direction/turning direction through the image information transmitted from the drone, and output an alarm signal if necessary.
다만, 본 발명의 효과는 상기 언급한 효과에 한정되는 것이 아니며, 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위에서 다양하게 확장될 수 있을 것이다.However, the effects of the present invention are not limited to the above-mentioned effects, and may be variously expanded without departing from the spirit and scope of the present invention.
도 1은 예시적인 실시예들에 따른 건설기계의 화면 표시를 위한 드론을 나타내는 도면이다.
도 2는 도 1의 건설기계의 화면 표시 시스템을 나타내는 블록도이다.
도 3a 및 도 3b는 도 1의 건설기계 화면 표시를 위한 드론의 비행 위치를 나타내는 도면들이다.
도 4는 예시적인 실시예들에 따른 건설기계의 화면 표시 방법을 나타내는 순서도이다.1 is a diagram illustrating a drone for displaying a screen of a construction machine according to exemplary embodiments.
FIG. 2 is a block diagram illustrating a screen display system of the construction machine of FIG. 1 .
3A and 3B are views illustrating a flight position of a drone for displaying the screen of the construction machine of FIG. 1 .
4 is a flowchart illustrating a method of displaying a screen of a construction machine according to exemplary embodiments.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하고자 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
본 발명의 각 도면에 있어서, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하여 도시한 것이다.In each drawing of the present invention, the dimensions of the structures are enlarged than the actual size for clarity of the present invention.
본 발명에서, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.In the present invention, terms such as first, second, etc. may be used to describe various elements, but the elements should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.
본 발명에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present invention are only used to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In the present application, terms such as “comprise” or “have” are intended to designate that a feature, number, step, operation, component, part, or combination thereof described in the specification exists, but one or more other features It should be understood that this does not preclude the existence or addition of numbers, steps, operations, components, parts, or combinations thereof.
본문에 개시되어 있는 본 발명의 실시예들에 대해서, 특정한 구조적 내지 기능적 설명들은 단지 본 발명의 실시예를 설명하기 위한 목적으로 예시된 것으로, 본 발명의 실시예들은 다양한 형태로 실시될 수 있으며 본문에 설명된 실시예들에 한정되는 것으로 해석되어서는 안 된다.With respect to the embodiments of the present invention disclosed in the text, specific structural or functional descriptions are only exemplified for the purpose of describing the embodiments of the present invention, and the embodiments of the present invention may be embodied in various forms. It should not be construed as being limited to the embodiments described in
즉, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.That is, since the present invention can have various changes and can have various forms, specific embodiments are illustrated in the drawings and described in detail in the text. However, this is not intended to limit the present invention to the specific disclosed form, it should be understood to include all modifications, equivalents and substitutes included in the spirit and scope of the present invention.
도 1은 예시적인 실시예들에 따른 건설기계의 화면 표시를 위한 드론을 나타내는 도면이다. 도 2는 도 1의 건설기계의 화면 표시 시스템을 나타내는 블록도이다. 도 3a 및 도 3b는 도 1의 건설기계 화면 표시를 위한 드론의 비행 위치를 나타내는 도면들이다.1 is a diagram illustrating a drone for displaying a screen of a construction machine according to exemplary embodiments. FIG. 2 is a block diagram illustrating a screen display system of the construction machine of FIG. 1 . 3A and 3B are views illustrating a flight position of a drone for displaying the screen of the construction machine of FIG. 1 .
도 1 내지 도 3b를 참조하면, 건설기계의 화면 표시 시스템은 건설기계(10)의 화면 표시 장치(100) 및 드론과 같은 무인 비행체(200)를 포함할 수 있다.1 to 3B , the screen display system of the construction machine may include the
예시적인 실시예들에 있어서, 상기 건설기계는 굴삭기, 휠 로더, 지게차 등을 포함할 수 있다. 이하에서는 상기 건설기계가 굴삭기인 경우에 대하여 설명하기로 한다. 다만, 이로 인하여 예시적인 실시예들에 따른 제어 시스템이 굴삭기의 사각 지대를 표시하기 위한 것으로 한정되는 것은 아니며, 휠 로더, 지게차 등에도 이와 실질적으로 동일하게 적용될 수 있음을 이해할 수 있을 것이다.In example embodiments, the construction machine may include an excavator, a wheel loader, a forklift, and the like. Hereinafter, a case in which the construction machine is an excavator will be described. However, due to this, it will be understood that the control system according to the exemplary embodiments is not limited to displaying the blind spot of the excavator, and can be applied substantially the same to a wheel loader, a forklift, and the like.
상기 건설기계는 하부 주행체, 상기 하부 주행체 상에 선회 가능하도록 탑재되는 상부 선회체, 및 상기 상부 선회체에 설치된 운전실과 프론트 작업 장치를 포함할 수 있다. 상기 프론트 작업 장치는 붐, 암 및 버켓을 포함할 수 있다. 상기 운전실 내의 작업자가 볼 수 없는 사각 지대가 존재할 수 있다. 예를 들면, 상기 붐의 회전에 따라 붐에 의해 가려지는 영역, 카운터웨이트 후방 지대 등이 사각 지대에 해당할 수 있다.The construction machine may include a lower traveling body, an upper revolving body mounted to be pivotable on the lower traveling body, and a cab and a front working device installed in the upper revolving body. The front working device may include a boom, an arm and a bucket. There may be a blind spot that cannot be seen by the operator in the cab. For example, the area covered by the boom according to the rotation of the boom, the counterweight rear zone, etc. may correspond to the blind zone.
예시적인 실시예들에 있어서, 무인 비행체(200)는 건설기계의 동작 정보에 대응하여 건설기계(10)로부터의 지정된 상대 위치로 이동하고 영상을 촬영하여 영상 정보를 전송할 수 있다. 화면 표시 장치(100)는 상기 전송된 영상 정보에 기초하여 건설기계의 어라운드 뷰 모니터(Around View Monitor, AVM) 영상을 제공할 수 있다.In exemplary embodiments, the unmanned
도 2에 도시된 바와 같이, 건설기계의 화면 표시 장치(100)는 GPS 수신부(110), 센싱부(120), 표시 제어부(130), 표시부(140), 경보 출력부(150) 및 통신부(160)를 포함할 수 있다. 또한, 화면 표시 장치(100)는 건설기계의 전방위에 대한 이미지들을 획득하기 위한 카메라 유닛을 더 포함할 수 있다.2, the
GPS 수신부(110)는 GPS 위성에서 보내는 신호를 수신하고 건설기계(10)의 현재 위치를 산출하여 건설기계(10)의 위치 정보를 생성할 수 있다.The
센싱부(120)는 건설기계(10)의 동작들을 검출하기 위한 동작 검출부일 수 있다. 예를 들면, 센싱부(120)는 관성 센서(Inertial Measurement Unit, IMU)를 포함하여 건설기계(10)의 동작 정보를 제공할 수 있다. 상기 건설기계의 동작 정보는 주행 동작 정보 및 선회 동작 정보를 포함할 수 있다. 센싱부(120)는 운전석의 회전을 검출하기 위한 회전 검출 센서, 상기 붐의 회전 방향 및 회전 각도를 검출하기 위한 회전 각도 센서 등을 포함할 수 있다.The
표시 제어부(130)는 상기 검출된 동작에 기초하여 상기 동작 정보를 산출하고 상기 전송된 영상 정보에 기초하여 상기 어라운드 뷰 모니터 영상 데이터를 생성할 수 있다. 표시 제어부(130)는 상기 전송된 영상 정보 및 상기 카메라 유닛에서 촬영된 이미지들을 합성하여 상기 어라운드 뷰 모니터 영상 데이터를 생성할 수 있다. 표시부(140)는 상기 생성된 영상 데이터에 상응하는 영상을 표시하는 모니터를 포함할 수 있다.The
또한, 표시 제어부(130)는 건설기계(10)와 무인 비행체(200) 간의 거리를 측정할 수 있다. 예를 들어, 표시 제어부(130)는 건설 기계(10)의 위치 정보 및 무인 비행체(200)의 위치 정보를 수신하며, 이에 기초하여 건설기계(10)와 무인 비행체(200) 간의 거리를 도출할 수 있다.In addition, the
또한, 표시 제어부(130)는 상기 생성된 영상 데이터에 기초하여 경보 제어 신호를 생성하고, 경보 출력부(150)는 상기 생성된 경보 제어 신호에 따라 경보를 출력할 수 있다. 경보 출력부(150)는 상기 건설기계의 경적, 경광등, 전조등, 버저, 모니터 상의 경고 신호 출력부, 스피커 등을 포함할 수 있다.Also, the
통신부(160)는 무인 비행체(200)를 원격으로 관리하기 위해 무인 비행체(200)와 무선 통신을 수행할 수 있다. 통신부(160)는 상기 산출된 동작 정보를 무인 비행체(200)에 송신하고 무인 비행체(200)로부터 전송된 영상 정보를 수신할 수 있다. 예를 들면, 통신부(160)는 TMS(Tele-Management System) 모듈을 포함할 수 있다. RF 통신, WIFI, LTE, WIBRO 등의 통신 수단이 적용될 수 있지만, 이에 한정되지는 않을 수 있다.The
무인 비행체(200)는 GPS 수신부(210), 센싱부(220), 드론 제어부(230), 추진부(240), 카메라부(250) 및 통신부(260)를 포함할 수 있다. 또한, 화면 표시 장치(100)는 건설기계의 전방위에 대한 이미지들을 획득하기 위한 카메라 유닛을 더 포함할 수 있다.The unmanned
GPS 수신부(210)는 GPS 위성에서 보내는 신호를 수신하고 무인 비행체(200)의 현재 위치를 산출하여 무인 비행체(200)의 위치 정보를 생성할 수 있다.The
센싱부(220)는 무인 비행체(200)의 상하 반전을 감지하기 위한 자이로 센서, 무인 비행체(200)의 고도를 검출하기 위한 압력 센서 등을 포함할 수 있다.The
드론 제어부(230)는 비행체 제어부로서 상기 동작 정보에 기초하여 비행 제어 신호 및 촬영 제어 신호를 생성할 수 있다. 추진부(240)는 상기 비행 제어 신호에 따라 추력을 발생시킬 수 있다. 카메라부(250)는 상기 촬영 제어 신호에 따라 영상을 촬영할 수 있다.The
통신부(260)는 상기 촬영한 영상 정보를 화면 표시 장치(100)에 송신하고 화면 표시 장치(100)로부터 전송된 동작 정보를 수신할 수 있다.The
예시적인 실시예들에 있어서, 무인 비행체(200)는 상기 주행 동작 정보 및 상기 선회 동작 정보에 따라 지정된 위치로 이동하여 건설기계(10)의 사각 지대를 촬영할 수 있다.In exemplary embodiments, the unmanned
도 3a에 도시된 바와 같이, 무인 비행체(200)가 상기 주행 동작 정보를 수신할 때, 건설기계(10)의 주행 방향에 선행하여 건설기계(10)와 지정된 거리만큼을 유지하도록 비행하면서 건설기계(10)의 사각 지대를 촬영할 수 있다. 즉, 굴삭기(10)가 주행할 때 무인 비행체(200)는 굴삭기(10)의 주행 방향으로 선행하여 이동하며 트랙 및 카운터웨이트의 사각지대를 촬영할 수 있다.As shown in FIG. 3A , when the unmanned
도 3b에 도시된 바와 같이, 무인 비행체(200)가 상기 주행 동작 정보를 수신할 때, 건설기계(10)의 주행 방향에 선행하여 건설기계(10)와 지정된 거리만큼을 유지하도록 비행하면서 건설기계(10)의 사각 지대를 촬영할 수 있다. 즉, 굴삭기(10)가 선회할 때 무인 비행체(200)는 카운터웨이트 뒷편에서 선회 방향으로 이동하며 사각 지대를 촬영할 수 있다.As shown in FIG. 3B , when the unmanned
상술한 바와 같이, 관성 센서(IMU 센서)를 통해 건설기계(10)가 선회 중인지 주행 중인지 여부를 판단하고 건설기계(10)의 동작 정보를 TMS(Tele-Management System) 등을 통한 무선 통신에 의해 드론(200)에 전송하고, 드론(200)은 선회/주행 및 방향 정보에 따라 지정된 위치로 이동하여 해당 위치의 영상 정보를 TMS를 통해 건설기계(10)의 화면 표시 장치(100)에 전송할 수 있다. 화면 표시 장치(100)는 드론(200)으로부터 전송받은 영상 정보를 통해 진행 방향/선회 방향에 위치한 장애물 및 이동 물체를 표시하고 필요한 경우 경보 신호를 출력할 수 있다.As described above, it is determined whether the
이하에서는, 도 1의 건설기계의 화면 표시 시스템을 이용하여 건설기계의 사각 지대를 표시하는 방법에 대하여 설명하기로 한다.Hereinafter, a method of displaying a blind spot of a construction machine using the screen display system of the construction machine of FIG. 1 will be described.
도 4는 예시적인 실시예들에 따른 건설기계의 화면 표시 방법을 나타내는 순서도이다.4 is a flowchart illustrating a method of displaying a screen of a construction machine according to exemplary embodiments.
도 1 내지 도 4를 참조하면, 건설기계(10)의 동작 정보를 획득하고(S100), 건설기계(10)로부터 지정된 상대 위치로 무인 비행체(200)를 이동시킬 수 있다(S110).1 to 4 , operation information of the
예시적인 실시예들에 있어서, 영상 표시 장치(100)의 동작 검출부(120)는 건설기계(10)의 동작을 검출하고 건설기계(10)의 동작 정보를 제공할 수 있다. 상기 건설기계의 동작 정보는 주행 동작 정보 및 선회 동작 정보를 포함할 수 있다. 영상 표시 장치(100)는 통신부(160)를 통해 상기 동작 정보를 무인 비행체(200)에 송신할 수 있다.In example embodiments, the
무인 비행체(200)는 상기 동작 정보에 기초하여 건설기계(10)로부터의 지정된 상대 위치로 이동할 수 있다. 무인 비행체(200)의 드론 제어부(230)는 상기 동작 정보에 기초하여 비행 제어 신호를 생성하고, 추진부(240)는 상기 비행 제어 신호에 따라 추력을 발생시킬 수 있다. The unmanned
예를 들면, 무인 비행체(200)가 상기 주행 동작 정보를 수신할 때, 건설기계(10)의 주행 방향에 선행하여 건설기계(10)와 지정된 거리만큼을 유지하도록 비행할 수 있다. 무인 비행체(200)가 상기 주행 동작 정보를 수신할 때, 건설기계(10)의 주행 방향에 선행하여 건설기계(10)와 지정된 거리만큼을 유지하도록 비행할 수 있다.For example, when the unmanned
이어서, 무인 비행체(200)가 영상을 촬영하고(S120), 촬영된 영상 정보에 기초하여 어라운드 뷰 모니터(Around View Monitor, AVM) 영상을 표시할 수 있다(S130).Subsequently, the unmanned
예시적인 실시예들에 있어서, 무인 비행체(200)의 드론 제어부(230)는 상기 동작 정보에 기초하여 촬영 제어 신호를 생성하고, 카메라부(250)는 상기 촬영 제어 신호에 따라 영상을 촬영할 수 있다. 무인 비행체(200)는 통신부(260)를 통해 상기 영상 정보를 화면 표시 장치(100)에 송신할 수 있다.In example embodiments, the
화면 표시 장치(100)의 표시 제어부(130)는 상기 전송된 영상 정보 및 카메라 유닛에서 촬영된 이미지들을 합성하여 상기 어라운드 뷰 모니터 영상 데이터를 생성할 수 있다. 표시부(140)는 상기 생성된 영상 데이터에 상응하는 영상을 표시하는 모니터를 포함할 수 있다.The
예시적인 실시예들에 있어서, 상기 생성된 영상 데이터에 기초하여 경보 신호를 출력할 수 있다. 예를 들면, 경보 출력부(150)는 상기 건설기계의 경적, 경광등, 전조등, 버저, 모니터 상의 경고 신호 출력부, 스피커 등을 이용하여 경보 신호를 출력할 수 있다.In example embodiments, an alarm signal may be output based on the generated image data. For example, the
이상에서는 본 발명의 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to the embodiments of the present invention, those skilled in the art can variously modify and change the present invention within the scope without departing from the spirit and scope of the present invention described in the claims below. You will understand that you can.
10: 건설기계
100: 화면 표시 장치
110, 210: GPS 수신부
120, 220: 센싱부
130: 표시 제어부
140: 표시부
150: 경보 출력부
160, 260: 통신부
200: 무인 비행체
230: 드론 제어부
240: 추진부
250: 카메라부10: construction equipment 100: screen display device
110, 210:
130: display control unit 140: display unit
150:
200: unmanned aerial vehicle 230: drone control unit
240: propulsion unit 250: camera unit
Claims (16)
상기 전송된 영상 정보에 기초하여 상기 건설기계의 어라운드 뷰 모니터(Around View Monitor, AVM) 영상을 제공하는 화면 표시 장치를 포함하는 건설기계의 화면 표시 시스템.an unmanned aerial vehicle that moves to a designated relative position from the construction machine in response to the operation information of the construction machine and transmits the image information by photographing an image; and
and a screen display device for providing an Around View Monitor (AVM) image of the construction machine based on the transmitted image information.
상기 건설기계의 동작들을 검출하기 위한 동작 검출부;
상기 검출된 동작에 기초하여 상기 동작 정보를 산출하고 상기 전송된 영상 정보에 기초하여 상기 어라운드 뷰 모니터 영상 데이터를 생성하는 표시 제어부;
상기 산출된 동작 정보를 상기 무인 비행체에 송신하고 상기 무인 비행체로부터 전송된 영상 정보를 수신하는 통신부; 및
상기 생성된 영상 데이터에 상응하는 영상을 표시하는 표시부를 포함하는 건설기계의 화면 표시 시스템.According to claim 1, wherein the screen display device
a motion detection unit for detecting operations of the construction machine;
a display control unit calculating the motion information based on the detected motion and generating the around-view monitor image data based on the transmitted image information;
a communication unit transmitting the calculated motion information to the unmanned aerial vehicle and receiving image information transmitted from the unmanned aerial vehicle; and
A screen display system for a construction machine comprising a display unit for displaying an image corresponding to the generated image data.
상기 화면 표시 장치는 상기 생성된 경보 제어 신호에 따라 경보를 출력하는 경보 출력부를 더 포함하는 건설기계의 화면 표시 시스템.The method of claim 6, wherein the display control unit generates an alarm control signal based on the generated image data,
The screen display device further comprises an alarm output unit for outputting an alarm according to the generated alarm control signal.
상기 동작 정보에 기초하여 비행 제어 신호 및 촬영 제어 신호를 생성하는 비행체 제어부;
상기 비행 제어 신호에 따라 추력을 발생시키는 추진부;
상기 촬영 제어 신호에 따라 영상을 촬영하는 카메라부; 및
상기 촬영한 영상 정보를 상기 화면 표시 장치에 송신하고 상기 화면 표시 장치로부터 전송된 동작 정보를 수신하는 통신부를 포함하는 건설기계의 화면 표시 시스템.According to claim 1, wherein the unmanned aerial vehicle
an aircraft controller for generating a flight control signal and a shooting control signal based on the motion information;
a propulsion unit for generating thrust according to the flight control signal;
a camera unit for capturing an image according to the capturing control signal; and
and a communication unit configured to transmit the captured image information to the screen display device and receive operation information transmitted from the screen display device.
상기 검출된 동작 정보에 대응하여 상기 건설기계로부터의 지정된 상대 위치로 무인 비행체를 이동시키고;
상기 무인 비행체의 카메라로 영상을 촬영하고; 그리고
상기 촬영된 영상 정보에 기초하여 상기 건설기계의 어라운드 뷰 모니터 영상을 표시하는 건설기계의 화면 표시 방법.acquiring operation information of the construction machine;
moving the unmanned aerial vehicle to a designated relative position from the construction machine in response to the detected motion information;
taking an image with the camera of the unmanned aerial vehicle; and
A screen display method of a construction machine for displaying an around-view monitor image of the construction machine based on the captured image information.
상기 획득한 동작 정보를 상기 무인 비행체에 송신하고; 그리고
상기 촬영한 영상 정보를 상기 건설기계의 화면 표시 장치에 송신하는 것을 더 포함하는 건설기계의 화면 표시 방법.12. The method of claim 11,
transmitting the obtained motion information to the unmanned aerial vehicle; and
The screen display method of the construction machine further comprising transmitting the captured image information to the screen display device of the construction machine.
상기 영상 정보에 기초하여 장애물 유무를 판단하고; 그리고
상기 장애물이 있는 경우, 경보를 출력하는 것을 더 포함하는 건설기계의 화면 표시 방법.12. The method of claim 11,
determining whether there is an obstacle based on the image information; and
When there is the obstacle, the screen display method of the construction machine further comprising outputting an alarm.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200014870A KR20210100911A (en) | 2020-02-07 | 2020-02-07 | Displaying system and displaying method for construction machinery |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200014870A KR20210100911A (en) | 2020-02-07 | 2020-02-07 | Displaying system and displaying method for construction machinery |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20210100911A true KR20210100911A (en) | 2021-08-18 |
Family
ID=77464757
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200014870A KR20210100911A (en) | 2020-02-07 | 2020-02-07 | Displaying system and displaying method for construction machinery |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20210100911A (en) |
-
2020
- 2020-02-07 KR KR1020200014870A patent/KR20210100911A/en unknown
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11634890B2 (en) | Image display system for work machine | |
EP3450636B1 (en) | Construction machine | |
KR101815269B1 (en) | Position measuring system and position measuring method | |
EP3164769B1 (en) | Machine safety dome | |
KR0183299B1 (en) | Navigation apparatus notifying surrounding situation of vehicle and control method thereof | |
CN110494613B (en) | Machine tool | |
JP6512657B2 (en) | Mobile device environment presentation system | |
US20170175363A1 (en) | Method for providing images of a work tool for a machine | |
US20190281264A1 (en) | Projection display device, method for controlling projection display device, and program for controlling projection display device | |
JP7076501B2 (en) | Work vehicle | |
JP2020027325A (en) | Ship or vehicle navigation system | |
JP2016219864A (en) | Surrounding monitoring device of work vehicle | |
JP6831949B2 (en) | Display control system, display control device and display control method | |
JP6893746B2 (en) | Remote control device for heavy machinery | |
JP6614607B2 (en) | Remote control system and method | |
AU2010355231B2 (en) | Method and control unit for controlling a display of a proximity warning system | |
KR20210100911A (en) | Displaying system and displaying method for construction machinery | |
EP3992744A1 (en) | Work vehicle monitoring system | |
US20210174554A1 (en) | Display control device, display control system, and display control method | |
US20220316188A1 (en) | Display system, remote operation system, and display method | |
JP6821864B2 (en) | Display control system, display control device and display control method | |
KR20210100912A (en) | Displaying system and displaying method for construction machinery | |
JP6083261B2 (en) | Information processing center and in-vehicle equipment | |
WO2023228883A1 (en) | Display system for work machine, remote operation system for work machine, work machine, and display method for work machine | |
JP2023177374A (en) | Aerial wire map creation device and operation support system |