KR20210086860A - Inspection and management support system and method thereof using real-time special space scan and 3d space modeling - Google Patents

Inspection and management support system and method thereof using real-time special space scan and 3d space modeling Download PDF

Info

Publication number
KR20210086860A
KR20210086860A KR1020190179036A KR20190179036A KR20210086860A KR 20210086860 A KR20210086860 A KR 20210086860A KR 1020190179036 A KR1020190179036 A KR 1020190179036A KR 20190179036 A KR20190179036 A KR 20190179036A KR 20210086860 A KR20210086860 A KR 20210086860A
Authority
KR
South Korea
Prior art keywords
real
inspection
support system
smart device
management support
Prior art date
Application number
KR1020190179036A
Other languages
Korean (ko)
Inventor
노진송
Original Assignee
(주)익스트리플
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)익스트리플 filed Critical (주)익스트리플
Priority to KR1020190179036A priority Critical patent/KR20210086860A/en
Publication of KR20210086860A publication Critical patent/KR20210086860A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/04—Manufacturing
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/103—Workflow collaboration or project management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/30—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50—Business processes related to the communications industry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Geometry (AREA)
  • Manufacturing & Machinery (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

Disclosed is a 3D health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function. In accordance with an embodiment, a 3D HSE inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function comprises: a data input unit for receiving at least one of a surrounding image and audio information obtained from a smart device; a data transmission unit for transmitting the received data to a preset expert terminal; and a display unit for displaying the data received from the expert terminal in the image acquired from the smart device. The present invention can reflect a changing surrounding environment more quickly and accurately.

Description

스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템 및 그 방법{INSPECTION AND MANAGEMENT SUPPORT SYSTEM AND METHOD THEREOF USING REAL-TIME SPECIAL SPACE SCAN AND 3D SPACE MODELING}A three-dimensional health and safety environment (HSE) inspection and management support system and method through real-time spatial scan and 3D space modeling using special mapping function }

본 발명은 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템 및 그 방법에 관한 것으로 특히, 원격지의 작업자와 상기 작업자로부터 원거리에 있는 전문가와의 협업을 통해 선박의 건조과정의 점검 및 관리작업을 수행하도록 지원하는 시스템 및 그 방법에 관한 것이다.The present invention relates to a three-dimensional health and safety environment (HSE) inspection and management support system and method through real-time spatial scan and 3D space modeling using a special mapping function. It relates to a system and method that support the inspection and management of the ship's construction process through collaboration of

서로 멀리 떨어져 있는 원격지의 작업자와 상기 작업자와 원거리에 있는 전문가 간의 의사소통 및 협업을 실현하기 위한 방법으로 다양한 시도들이 이루어지고 있다.Various attempts have been made as a method for realizing communication and collaboration between a remote worker who is far away from each other and the worker and a remote expert.

이러한 원격협업은 크게 비디오 영상 및 공간 기반의 원격협업으로 구분이 되며, 구현 형태에 따라 영상 기반 증강현실 원격협업, 영상 기반 혼합현실 원격협업, 가상현실 공간 기반 원격협업, 혼합현실 공간 기반 원격협업, 가상현실 to 혼합현실 공간 기반 원격협업으로 분류될 수 있다.Such remote collaboration is largely divided into video image and space-based remote collaboration, and depending on the implementation type, video-based augmented reality remote collaboration, image-based mixed reality remote collaboration, virtual reality space-based remote collaboration, mixed reality space-based remote collaboration, It can be classified into virtual reality to mixed reality space-based remote collaboration.

그러나 종래 기술들의 경우 착용형 디스플레이 기반 원격 협업 장치 및 방법 (한국공개특허 제10-2014-0108428호) 등과 같이 특정 공간(실내 또는 미리 설정된 공간)에 한정되는 경우가 많으며, 비교적 넓은 실내 및 산업현장과 같은 열악한 환경에서의 원격협업은 불가능한 문제점이 있었다.However, in the case of the prior art, it is often limited to a specific space (indoor or preset space), such as a wearable display-based remote collaboration device and method (Korean Patent Application Laid-Open No. 10-2014-0108428), and relatively large indoor and industrial sites. Remote collaboration in such a poor environment was impossible.

따라서, 공간의 제약이 없고 열악한 현장 환경에서도 효과적으로 원격협업이 가능한 원격협업 시스템 및 그 방법에 대한 연구의 필요성이 있다.Therefore, there is a need for a study on a remote collaboration system and method for effective remote collaboration even in a poor field environment without space restrictions.

본 발명은 스마트 디바이스(웨어러블 글라스, 스마트폰, 태블릿PC 등)를 통해 주변 영상을 획득하고 주변 환경 정보를 신속하게 업데이트함으로써, 변화하는 주변 환경 상황을 보다 빠르고 정확하게 반영할 수 있는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템을 제공하는 데 그 목적이 있다.The present invention utilizes a special mapping function that can more quickly and accurately reflect changing surrounding environment conditions by acquiring surrounding images and rapidly updating surrounding environment information through smart devices (wearable glasses, smart phones, tablet PCs, etc.) The purpose is to provide a 3D health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling.

본 발명은 원격지에 위치하는 전문가와의 원격협업을 지원함으로써, 보다 정확하고 광범위한 지역에서의 원격협업을 수행할 수 있는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템을 제공하는 데 그 목적이 있다.The present invention supports remote collaboration with experts located in remote locations, so that a 3D health and safety environment through real-time spatial scan and 3D spatial modeling using a special mapping function that can perform remote collaboration in a more accurate and wide area (HSE) The purpose is to provide an inspection management support system.

본 발명이 해결하고자 하는 과제들은 이상에서 언급한 과제로 제한되지 않으며, 여기에 언급되지 않은 본 발명이 해결하려는 또 다른 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The problems to be solved by the present invention are not limited to the problems mentioned above, and other problems to be solved by the present invention not mentioned here are to those of ordinary skill in the art from the description below to can be clearly understood.

본 발명의 일실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템은 스마트 디바이스로부터 획득한 주변 영상 및 음성 정보 중 적어도 어느 하나를 입력받는 데이터입력부, 입력받은 데이터를 기설정된 전문가 단말기에 전송하는 데이터전송부 및 스마트 디바이스로부터 획득된 영상 내에 전문가 단말기로부터 수신된 데이터를 디스플레이하는 디스플레이부를 포함한다.A three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention is at least one of surrounding image and audio information acquired from a smart device. It includes a data input unit for receiving the input, a data transmission unit for transmitting the received data to a preset expert terminal, and a display unit for displaying the data received from the expert terminal in the image obtained from the smart device.

본 발명의 일측면에 따르면, 데이터전송부는 데이터입력부로부터 입력된 영상을 전송하되, 스마트 디바이스의 위치 및 사용자 정보 중 적어도 어느 하나를 포함하여 전송하고, 기설정된 전문가 단말기와 5G 통신망을 통해 연결되며 스마트 디바이스로부터 획득된 영상을 실시간으로 공유하는 영상공유모드를 포함하는 것을 특징으로 한다.According to one aspect of the present invention, the data transmission unit transmits the image input from the data input unit, including at least any one of the location and user information of the smart device, and is connected to a preset expert terminal and a 5G communication network through a smart It is characterized in that it includes an image sharing mode for sharing the image acquired from the device in real time.

본 발명의 일측면에 따르면, 디스플레이부는 전문가 단말기로부터 수신된 음성, 주석, 그림 및 메시지 중 적어도 어느 하나의 안내사항을 스마트 디바이스 상에 디스플레이하는 것을 특징으로 한다.According to one aspect of the present invention, the display unit is characterized in that the display unit displays on the smart device at least one guide information of voice, annotation, picture and message received from the expert terminal.

본 발명은 스마트 디바이스(웨어러블 글라스, 스마트폰, 태블릿PC 등)를 통해 주변 영상을 획득하고 주변 환경 정보를 신속하게 업데이트함으로써, 변화하는 주변 환경 상황을 보다 빠르고 정확하게 반영할 수 있는 효과가 있다The present invention has the effect of being able to more quickly and accurately reflect the changing surrounding environment by acquiring the surrounding image and rapidly updating the surrounding environment information through a smart device (wearable glass, smart phone, tablet PC, etc.)

본 발명은 원격지에 위치하는 전문가와의 원격협업을 지원함으로써, 보다 정확하고 광범위한 지역에서의 원격협업을 수행할 수 있는 효과가 있다.The present invention has the effect of performing remote collaboration in a more accurate and wide area by supporting remote collaboration with an expert located in a remote location.

도 1은 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템을 나타내는 블록도이다.
도 2는 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 처리 단계를 설명하기 위한 도면이다.
도 3은 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 영상공유모드를 설명하기 위한 도면이다.
도 4는 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 디스플레이부를 설명하기 위한 도면이다.1 is a block diagram illustrating a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention.
2 is a view for explaining the processing steps of a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention.
3 is a view for explaining an image sharing mode of a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention.
4 is a view for explaining a display unit of a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention.

이하, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명의　실시례들을 상세하게 설명한다. 다만, 본 발명이 실시례들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.Hereinafter, embodiments of the present invention will be described in detail with reference to the contents described in the accompanying drawings. However, the present invention is not limited or limited by the examples. Like reference numerals in each figure indicate like elements.

도 1은 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템을 나타내는 블록도이고, 도 2는 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 처리 단계를 설명하기 위한 도면이고, 도 3은 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 영상공유모드를 설명하기 위한 도면이고, 도 4는 본 발명의 실시례에 따른 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템의 디스플레이부를 설명하기 위한 도면이다.1 is a block diagram illustrating a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention, and FIG. 2 is an implementation of the present invention It is a view for explaining the processing steps of a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function according to an example, and FIG. 3 is a diagram according to an embodiment of the present invention It is a diagram for explaining the image sharing mode of a three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using a special mapping function, and FIG. 4 is a special mapping according to an embodiment of the present invention. It is a drawing to explain the display unit of the 3D health and safety environment (HSE) inspection and management support system through real-time spatial scan and 3D spatial modeling using functions.

도 1을 참고하면, 원격협업 시스템(100)은 스마트 디바이스로부터 획득한 주변 영상 및 음성 정보 중 적어도 어느 하나를 입력받는 데이터입력부(110), 상기 입력받은 데이터를 기설정된 전문가 단말기에 전송하는 데이터전송부(120) 및 상기 스마트 디바이스로부터 획득된 영상 내에 상기 전문가 단말기로부터 수신된 데이터를 디스플레이하는 디스플레이부(130)을 포함할 수 있다.Referring to FIG. 1 , the remote collaboration system 100 includes a data input unit 110 that receives at least one of peripheral image and audio information acquired from a smart device, and transmits the received data to a preset expert terminal. It may include a unit 120 and a display unit 130 for displaying the data received from the expert terminal in the image obtained from the smart device.

보다 상세하게는, 도 2에 도시된 바와 같이, 작업현장에 문제가 발생한 경우, 작업자는 원격협업 시스템(100)에 원격지원을 요청할 수 있고, 상기 스마트 디바이스에 의해 획득된 영상 또는 음성 정보 중 적어도 어느 하나를 포함하는 주변환경데이터를 입력 받을 수 있다. More specifically, as shown in FIG. 2 , when a problem occurs at the work site, the operator may request remote support from the remote collaboration system 100 , and at least one of the video or audio information obtained by the smart device Surrounding environment data including any one may be input.

일례로, 상기 사용자의 제스처를 통해 문제가 발생한 지점 또는 장치 중 적어도 어느 하나를 표시할 수 있다.For example, through the user's gesture, at least one of a point or a device where a problem occurs may be displayed.

상기 주변환경데이터는 5G 통신망을 통해 상기 기설정된 전문가 단말기로 전송되되, 상기 스마트 디바이스의 위치 및 상기 작업자 정보 중 적어도 어느 하나를 포함하여 전송될 수 있다.The surrounding environment data is transmitted to the preset expert terminal through a 5G communication network, and may be transmitted including at least one of the location of the smart device and the operator information.

또한, 도 3을 참고하면, 상기 데이터전송부(120)는 상기 기설정된 전문가 단말기와 5G 통신망을 통해 연결되어 상기 스마트 디바이스로부터 획득된 영상을 실시간으로 공유하는 영상공유모드를 포함할 수 있다.Also, referring to FIG. 3 , the data transmission unit 120 may include an image sharing mode that is connected to the preset expert terminal through a 5G communication network and shares the image acquired from the smart device in real time.

예를 들어, 상기 작업자가 임의의 장치에 대한 조작 방법이 능숙하지 않은 경우, 상기 원격협업 시스템(100)을 통해 상기 작업자 시점의 영상을 상기 스마트 디바이스를 통해 획득하고, 상기 획득된 영상을 상기 전문가 단말기에 전송하여 상기 작업자와 상기 전문가가 동일한 시점을 실시간으로 공유할 수 있다. 상기 작업자는 상기 전문가로부터 조작 방법을 음성 또는 메시지로 전달받되, 상기 메시지의 경우 AR 팝업 형태로 디스플레이 될 수 있다.For example, if the operator is not proficient in a manipulation method for any device, the image of the operator's point of view is obtained through the smart device through the remote collaboration system 100, and the obtained image is used by the expert By transmitting to the terminal, the operator and the expert can share the same time point in real time. The operator receives the operation method by voice or message from the expert, and the message may be displayed in the form of an AR pop-up.

도 4를 참고하면, 상기 디스플레이부(130)는, 상기 전문가 단말기로부터 수신된 음성, 주석, 그림 및 메시지 중 적어도 어느 하나의 안내사항을 상기 스마트 디바이스 상에 디스플레이할 수 있다.Referring to FIG. 4 , the display unit 130 may display on the smart device information on at least one of voice, annotation, picture, and message received from the expert terminal.

예를 들어, 상기 전문가는 상기 전문가 단말기에 전송된 영상 데이터를 열람하여 작업현장의 안전점검을 원격으로 실시할 수 있으며, 상기 작업현장에 안전펜스가 설치되지 않은 구역이 존재할 경우, 상기 영상 데이터 내에 상기 안전펜스가 설치되어야 하는 위치에 안전펜스 이미지 및 '안전펜스 설치요망' 텍스트 메시지를 추가하여 상기 스마트 디바이스에 전송할 수 있다.For example, the expert can remotely conduct a safety check of a work site by reading the image data transmitted to the expert terminal, and when there is an area where a safety fence is not installed at the work site, within the image data A safety fence image and a 'safety fence installation request' text message may be added to a location where the safety fence should be installed and transmitted to the smart device.

상기 작업현장의 작업자는 상기 전문가 단말기로부터 수신된 데이터를 상기 스마트 디바이스를 통해 디스플레이 할 수 있다.The worker at the job site may display the data received from the expert terminal through the smart device.

상기와 같은 본 발명의 효과에 따르면, 스마트 디바이스(웨어러블 글라스, 스마트폰, 태블릿PC 등)를 통해 주변 영상을 획득하고 주변 환경 정보를 신속하게 업데이트함으로써, 변화하는 주변 환경 상황을 보다 빠르고 정확하게 반영할 수 있는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템이 제공될 수 있다.According to the effect of the present invention as described above, by acquiring the surrounding image through a smart device (wearable glass, smart phone, tablet PC, etc.) and rapidly updating the surrounding environment information, it is possible to more quickly and accurately reflect the changing surrounding environment. A three-dimensional health and safety environment (HSE) inspection and management support system can be provided through real-time spatial scanning and 3D spatial modeling using a special mapping function that can be used.

또한, 원격지에 위치하는 전문가와의 원격협업을 지원함으로써, 보다 정확하고 광범위한 지역에서의 원격협업을 수행할 수 있는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템이 제공될 수 있다.In addition, by supporting remote collaboration with experts located in remote locations, a 3D health and safety environment (3D health and safety environment ( HSE) Inspection management support system may be provided.

또한, 본 발명의 일실시례에 따른, 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 방법은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.In addition, the 3D health and safety environment (HSE) inspection and management support method through real-time spatial scan and 3D spatial modeling using a special mapping function according to an embodiment of the present invention is a program for performing operations implemented by various computers It may be recorded on a computer-readable medium containing instructions. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.

이상과 같이 본 발명의 일실시례는 비록 한정된 실시례와 도면에 의해 설명되었으나, 본 발명의 일실시례는 상기 설명된 실시례에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.　 따라서, 본 발명의 일실시례는 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.As described above, although one embodiment of the present invention has been described with reference to limited examples and drawings, one embodiment of the present invention is not limited to the above-described embodiment, which is common knowledge in the field to which the present invention pertains. Various modifications and variations are possible from such a base material. Accordingly, one embodiment of the present invention should be understood only by the claims described below, and all equivalents or equivalent modifications thereof will fall within the scope of the spirit of the present invention.

100 : 원격협업 시스템
110 : 데이터입력부
120 : 데이터전송부
130 : 디스플레이부100: remote collaboration system
110: data input unit
120: data transmission unit
130: display unit

Claims (3)

스마트 디바이스로부터 획득한 주변 영상 및 음성 정보 중 적어도 어느 하나를 입력받는 데이터입력부;
상기 입력받은 데이터를 기설정된 전문가 단말기에 전송하는 데이터전송부; 및
상기 스마트 디바이스로부터 획득된 영상 내에 상기 전문가 단말기로부터 수신된 데이터를 디스플레이하는 디스플레이부;
를 포함하는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템.
a data input unit for receiving at least one of the surrounding image and audio information obtained from the smart device;
a data transmission unit for transmitting the received data to a preset expert terminal; and
a display unit for displaying the data received from the expert terminal in the image obtained from the smart device;
A three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scanning and 3D spatial modeling using a special mapping function including
 제1항에 있어서,
상기 데이터전송부는,
상기 데이터입력부로부터 입력된 영상을 전송하되, 상기 스마트 디바이스의 위치 및 사용자 정보 중 적어도 어느 하나를 포함하여 전송하고, 상기 기설정된 전문가 단말기와 5G 통신망을 통해 연결되며 상기 스마트 디바이스로부터 획득된 영상을 실시간으로 공유하는 영상공유모드를 포함하는 것을 특징으로 하는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템.
According to claim 1,
The data transmission unit,
The image input from the data input unit is transmitted, including at least one of the location and user information of the smart device, and the image obtained from the smart device is transmitted in real time while connected to the preset expert terminal through a 5G communication network. A three-dimensional health and safety environment (HSE) inspection and management support system through real-time spatial scanning and 3D spatial modeling using a special mapping function, characterized in that it includes an image sharing mode to share with
 제1항에 있어서,
상기 디스플레이부는,
상기 전문가 단말기로부터 수신된 음성, 주석, 그림 및 메시지 중 적어도 어느 하나의 안내사항을 상기 스마트 디바이스 상에 디스플레이하는 것을 특징으로 하는 스페셜 매핑 기능을 활용한 실시간 공간 스캔 및 3D공간 모델링을 통한 3차원 보건안전환경(HSE) 점검관리 지원 시스템.
According to claim 1,
The display unit,
3D health through real-time spatial scan and 3D spatial modeling using a special mapping function, characterized in that at least one guide among voice, annotation, picture and message received from the expert terminal is displayed on the smart device Safe environment (HSE) inspection management support system.
KR1020190179036A 2019-12-31 2019-12-31 Inspection and management support system and method thereof using real-time special space scan and 3d space modeling KR20210086860A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190179036A KR20210086860A (en) 2019-12-31 2019-12-31 Inspection and management support system and method thereof using real-time special space scan and 3d space modeling

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190179036A KR20210086860A (en) 2019-12-31 2019-12-31 Inspection and management support system and method thereof using real-time special space scan and 3d space modeling

Publications (1)

Publication Number Publication Date
KR20210086860A true KR20210086860A (en) 2021-07-09

Family

ID=76865007

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190179036A KR20210086860A (en) 2019-12-31 2019-12-31 Inspection and management support system and method thereof using real-time special space scan and 3d space modeling

Country Status (1)

Country Link
KR (1) KR20210086860A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102571217B1 (en) * 2022-11-16 2023-08-29 주식회사 위니드소프트 Incident analysis system using metaverse in which incident site status information is recorded

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102571217B1 (en) * 2022-11-16 2023-08-29 주식회사 위니드소프트 Incident analysis system using metaverse in which incident site status information is recorded
WO2024106736A1 (en) * 2022-11-16 2024-05-23 주식회사 위니드소프트 Incident analysis system using metaverse having incident site state information recorded therein

Similar Documents

Publication Publication Date Title
CN109522070B (en) Display processing method and system
US20220319139A1 (en) Multi-endpoint mixed-reality meetings
US9781176B2 (en) Managing permissions in collaborative workspaces using visual representations of clients
USRE46386E1 (en) Updating a user session in a mach-derived computer system environment
JP6896688B2 (en) Position calculation device, position calculation program, position calculation method, and content addition system
US10789033B2 (en) System and method for providing widget
CN105573690A (en) Interactive electronic whiteboard display method and display device
CN111338721A (en) Online interaction method, system, electronic device and storage medium
JP6743080B2 (en) Display control system and display control method
CN111290722A (en) Screen sharing method, device and system, electronic equipment and storage medium
KR20210086860A (en) Inspection and management support system and method thereof using real-time special space scan and 3d space modeling
CN107102792B (en) Image processing apparatus, control method thereof, and computer-readable storage medium
US10591986B2 (en) Remote work supporting system, remote work supporting method, and program
JP2014171121A (en) Projection system, projection apparatus, projection method, and projection program
CN106775690B (en) Recording method and device based on gdi/gdi + window coverage
CA2900169A1 (en) Wireless access point for facilitating bidirectional, application-layer communication among computing devices
CN107315970B (en) Sensitive data interaction method and device
CN111835804A (en) Method, device and system for data transmission between internal network and external network
CN110619615A (en) Method and apparatus for processing image
CN115599206A (en) Display control method, display control device, head-mounted display equipment and medium
CN114090817A (en) Dynamic construction method and device of face feature database and storage medium
CN110941389A (en) Method and device for triggering AR information points by focus
CN113780706A (en) On-site operation and maintenance operation method and device based on visual enhancement
CN101017660A (en) A method for displaying the object on the multiple display devices under the window operation environment
KR102525305B1 (en) Method, server and system for providing integrated information management service for ship maintenance

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application