KR101504612B1 - Emergency evacuation information system using augmented reality and information system thereof - Google Patents

Emergency evacuation information system using augmented reality and information system thereof Download PDF

Info

Publication number
KR101504612B1
KR101504612B1 KR20140123832A KR20140123832A KR101504612B1 KR 101504612 B1 KR101504612 B1 KR 101504612B1 KR 20140123832 A KR20140123832 A KR 20140123832A KR 20140123832 A KR20140123832 A KR 20140123832A KR 101504612 B1 KR101504612 B1 KR 101504612B1
Authority
KR
South Korea
Prior art keywords
information
mobile device
emergency evacuation
ship
tag
Prior art date
Application number
KR20140123832A
Other languages
Korean (ko)
Inventor
박재철
문기식
박용준
Original Assignee
주식회사초록물고기아트텍
박재철
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사초록물고기아트텍, 박재철 filed Critical 주식회사초록물고기아트텍
Priority to KR20140123832A priority Critical patent/KR101504612B1/en
Priority to PCT/KR2015/002560 priority patent/WO2016043393A1/en
Application granted granted Critical
Publication of KR101504612B1 publication Critical patent/KR101504612B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
    • G08B7/066Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources guiding along a path, e.g. evacuation path lighting strip
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Abstract

The present invention is to provide a system and a method, for providing emergency evacuation information using augmented reality, which allow a user to receive emergency evacuation information by understanding the accurate location of the user in a vessel with the identical isles and multiple floors by recognizing NFC tags attached to various locations within the vessel using an image photographing function of a mobile device. An emergency evacuation information system using augmented reality according to the present invention comprises: a user mobile device (100) for transmitting state information about location, direction and angle of the mobile device to a secure server (200) if a tag is recognized through analysis of the image photographed in a camera or is recognized while communicating with a tag through NFC communications, and for displaying the emergency evacuation information provided from the secure server (200) by combining the same with the photographed actual image; and the secure server (200) for checking emergency evacuation information of a vessel corresponding to the tag provided from the mobile device, processing the emergency evacuation information into which is suitable with the state information of the mobile device and providing the information to the mobile device.

Description

증강현실을 이용한 비상대피 안내시스템 및 안내방법{Emergency evacuation information system using augmented reality and information system thereof}[0001] The present invention relates to an emergency evacuation guidance system using augmented reality,

본 발명은 특징이 없는 동일한 복도로 구성되고 여러 층으로 구성된 선박에서 모바일기기의 영상촬영 기능을 이용하여 선박 내 각 위치에 부착된 NFC 태그를 마커로 인식하고 사용자의 정확한 위치를 파악하여 비상대피정보를 제공받을 수 있는 증강현실을 이용한 비상대피 안내시스템 및 안내방법에 관한 것이다.In the present invention, an NFC tag attached to each position in a ship is recognized as a marker and an accurate position of a user is identified using a video shooting function of a mobile device in a multi- To an emergency evacuation guidance system and guidance method using an augmented reality.

일반적으로 1990년대 초반부터 가상현실에 대한 연구가 활발하게 추진되어 왔고 최근에는 GPS를 이용하여 증강현실을 구현한 사용자 편의를 위한 기술 개발이 진행되고 있다. Generally, researches on virtual reality have been actively promoted since the early 1990s, and in recent years, technology for user convenience that implements augmented reality using GPS has been developed.

증강현실은 물리적인 실세계와 컴퓨터가 생성한 가상세계를 실시간으로 융합하여 사용자의 감각으로는 얻을 수 없는 정보를 사용자에게 제공하는 기술 분야로 다양한 분야에서 연구가 진행되고 있는데, 최근에는 실내외 공간에서 사용자의 위치와 방향 등 주변 환경을 인식하여 사용자에게 서비스를 제공하는 시스템들이 소개되고 있다. 하지만 위치추적과 모바일 증강현실에 널리 사용되는 GPS 기술은 송신자와 수신자 사이에 장애물이 없어야 하는 가시선을 요구하기 때문에 대형선박과 같은 실내에서는 사용하기 어려우며 동일한 객실과 창문 등으로 정합성의 문제가 발생하고, 여러 층으로 구성된 선박에서 사용자의 정확한 위치 파악이 어렵다는 단점을 가지고 있다. Augmented reality is a technology field that provides users with information that can not be obtained by the user's sense by real-time fusion of physical real world and computer-generated virtual world in real time. And a system for providing services to the user by recognizing the surrounding environment such as the location and direction of the user. However, since GPS technology widely used in location augmentation and mobile augmented reality requires a line of sight between the sender and the receiver, it is difficult to use in a room such as a large ship, and there is a problem of consistency in the same room and window, It has a disadvantage that it is difficult to grasp the precise position of the user in a multi-story ship.

제안하는 발명은 증강현실의 위치정보 인식을 위하여 일반적으로 사용하는 GPS 외에 NFC 태그의 위치 정보를 이용하며 대형선박과 같이 비슷한 통로와 객실로 이루어진 구조와 여러 층으로 이루어져 있는 공간에서 입력영상의 특징을 분석하여 좌표계를 생성하고 가상물체와 영상간의 자연스러운 정합을 할 수 있는 방법이다.The proposed invention utilizes NFC tag location information in addition to general GPS for location information recognition of augmented reality. In the space composed of similar passages and rooms like a large ship, and in a space composed of several layers, It is a method to create a coordinate system by analyzing and to make a natural match between a virtual object and an image.

본 발명이 해결하고자 하는 과제는 특징이 없는 동일한 복도로 구성되고 여러 층으로 구성된 선박에서 모바일기기의 영상촬영 기능을 이용하여 선박 내 각 위치에 부착된 NFC 태그를 인식하거나 NFC 통신으로 태그를 인식하여 사용자의 정확한 위치에 알맞는 비상대피정보를 제공받을 수 있는 증강현실을 이용한 비상대피 안내시스템 및 안내방법을 제공하는 데 그 목적이 있다.A problem to be solved by the present invention is to recognize an NFC tag attached to each position in a ship using a video photographing function of a mobile device in a multi-story ship composed of the same corridor with no features, And an emergency evacuation guidance system and a guidance method using an augmented reality which can receive emergency evacuation information suitable for a precise position of a user.

본 발명의 다른 해결과제는 모바일기기에 장착된 가속도 센서, 자이로 센서, GPS 센서 및 방향 센서 등을 이용하여 선박의 침몰 시에 사용자의 실제상황과의 정합도를 높이면서 이용 가능한 비상대피정보만을 안내받을 수 있는 증강현실을 이용한 비상대피 안내시스템 및 안내방법을 제공하는 데 그 목적이 있다.Another object of the present invention is to provide an emergency evacuation system, which can detect available emergency evacuation information while enhancing the matching with a user's actual situation at the time of sinking a ship by using an acceleration sensor, a gyro sensor, a GPS sensor, The present invention provides an emergency evacuation guidance system and a guidance method using an augmented reality.

본 발명에 따른 증강현실을 이용한 비상대피 안내시스템은, 모바일기기로 촬영된 영상을 분석하여 태그의 위치가 인식되거나 또는 NFC 통신으로 태그를 인식되면 모바일기기의 위치, 방향, 각도에 대한 상태정보를 태그위치와 함께 안전서버(200)로 전송하고, 안전서버(200)로부터 제공받은 비상대피정보를 촬영된 실제영상에 결합시켜 표시하는 사용자 모바일기기(100)와; 모바일기기로부터 제공받은 태그위치에 대응되는 선박의 비상대피정보를 확인하고, 모바일기기의 상태정보에 대응되도록 비상대피정보로 가공하여 모바일기기로 제공하는 안전서버(200)를 포함하는 것을 특징으로 한다.The emergency evacuation guidance system using the augmented reality according to the present invention analyzes state of the position, direction and angle of the mobile device when the position of the tag is recognized or the tag is recognized by NFC communication by analyzing the image captured by the mobile device A user mobile device 100 for transmitting the emergency evacuation information transmitted from the safety server 200 to the safety server 200 together with the tag location, and displaying the combined information on the photographed actual image; And a safety server 200 for confirming the emergency evacuation information of the ship corresponding to the tag position provided from the mobile device and processing the emergency evacuation information so as to correspond to the state information of the mobile device and providing the information to the mobile device .

바람직하게, 모바일기기는, 장착된 카메라에서 촬영된 영상을 표출시키는 카메라뷰 실행부(110)와; 선박에 장착된 태그를 확인하는 것으로 카메라에서 촬영된 영상을 분석하여 태그를 인식하거나 또는 NFC 통신으로 태그와 통신하면서 태그를 인식하는 선박태그 인식부(120)와; 모바일기기의 위치, 방향, 각도에 대한 상태정보를 확인하는 모바일기기 상태정보 센싱부(130)와; 선박태그 인식부(120)에서 인식된 태그위치정보와 모바일기기 상태정보 센싱부(130)에서 확인된 모바일기기의 상태정보를 실시간으로 안전서버(200)에 전송하는 모바일기기정보 제공부(140)와; 안전서버(200)로부터 제공받은 비상대피정보를 카메라뷰 실행부(110)를 통해서 촬영된 실제영상에 결합시켜 화면에 증강시켜 표시하는 비상대피정보 증강부(150)를 포함하는 것을 특징으로 한다.Preferably, the mobile device includes: a camera view execution unit 110 for displaying an image photographed by a mounted camera; A ship tag recognizing unit 120 recognizing a tag mounted on the ship by analyzing the image taken by the camera or recognizing the tag while communicating with the tag through NFC communication; A mobile device status information sensing unit 130 for confirming status information on the position, direction, and angle of the mobile device; The mobile device information providing unit 140 for transmitting the tag position information recognized by the ship tag recognizing unit 120 and the status information of the mobile device confirmed by the mobile device status information sensing unit 130 to the safety server 200 in real time, Wow; And an emergency evacuation information enhancing unit 150 combining the emergency evacuation information provided from the safety server 200 with the actual image photographed through the camera view executing unit 110 and enhancing the displayed image on the screen.

바람직하게, 모바일기기 상태정보 센싱부(130)는 모바일기기에 설치된 가속도 센서, 자이로 센서, GPS 센서 및 방향 센서로부터 상태정보를 확인하는 것을 특징으로 한다.Preferably, the mobile device status information sensing unit 130 confirms status information from an acceleration sensor, a gyro sensor, a GPS sensor, and a direction sensor installed in the mobile device.

바람직하게, 안전서버(200)는, 접속된 모바일기기의 통신 상태를 확인하는 통신부(210)와; 선박에 설치된 태그에 대응되는 위치에 태그의 식별정보와 동일한 식별자를 갖는 선박의 비상대피정보를 저장하고 관리하는 비상대피정보 저장부(220)와; 접속된 모바일기기로부터 실시간으로 모바일기기에서 인식한 태그정보와 모바일기기 상태정보를 실시간으로 제공받는 모바일기기정보 수신부(230)와; 모바일기기정보 수신부(230)로부터 제공받은 태그정보를 분석하여 대응되는 선박의 비상대피정보를 확인하는 비상대피정보 확인부(240)와; 모바일기기정보 수신부(230)로부터 제공받은 모바일기기의 상태정보에 대응되도록 최적의 비상대피정보로 가공하는 비상대피정보 가공부(250)와; 비상대피정보 가공부(250)에서 가공된 최적의 비상대피정보를 실시간으로 모바일기기로 제공하는 비상대피정보 전송부(260)를 포함하는 것을 특징으로 한다.Preferably, the security server 200 includes: a communication unit 210 for confirming a communication state of the connected mobile device; An emergency evacuation information storage unit 220 for storing and managing emergency evacuation information of a ship having an identifier identical to the identification information of the tag at a position corresponding to a tag installed on the ship; A mobile device information receiving unit 230 receiving tag information and mobile device status information recognized by the mobile device in real time from the connected mobile device in real time; An emergency evacuation information verifying unit 240 for analyzing the tag information provided from the mobile device information receiving unit 230 and confirming the emergency evacuation information of the corresponding ship; An emergency evacuation information processing unit 250 that processes the emergency evacuation information into optimal emergency evacuation information corresponding to the state information of the mobile device provided from the mobile device information receiving unit 230; And an emergency evacuation information transmission unit 260 for providing the optimal emergency evacuation information processed in the emergency evacuation information processing unit 250 to the mobile device in real time.

바람직하게, 비상대피정보는 선박대피유도 화살표, 비상용 물품, 대피시간, 대피방법을 포함하며 문자, 음성 등으로 작성되는 것을 특징으로 한다. Preferably, the emergency evacuation information is composed of a ship evacuation direction arrow, an emergency article, a evacuation time, and a evacuation method, and is made of a character, voice, or the like.

바람직하게, 안전서버(200)는, 비상대피정보를 제공하는 선박에 대한 정보를 저장하여 관리하는 선박정보 관리부(270)와, 선박의 위치, 속도, 운항경로를 확인하는 선박운항 확인부(280)와, 선박운항 확인부(280)에서 확인된 선박의 정보의 속도, 운항경로가 기준 이상이면 접속된 모바일기기에 선박위험에 대하여 경보하는 선박위험 안내부(290)를 더 포함하고, 모바일기기는, 안전서버로 선박의 운항정보를 요청하고, 안전서버로부터 제공받은 운항정보를 표시하는 선박운항정보 확인부(160)를 더 포함하는 것을 특징으로 한다. The safety server 200 preferably includes a ship information management unit 270 for storing and managing information on the ship providing the emergency evacuation information and a ship navigation confirmation unit 280 for confirming the position, And a ship risk information unit (290) for alerting the connected mobile device to ship risk if the speed of the information of the ship identified by the ship operation confirmation unit (280) and the navigation path is more than the reference, And a ship operation information confirmation unit 160 for requesting the operation information of the ship to the safety server and displaying the operation information provided from the safety server.

바람직하게, 선박운항 확인부(280)는 선박의 운항정보를 선박의 장착된 GPS 등으로 제공받아 위치, 속도 및 경로를 확인하는 것을 특징으로 한다.Preferably, the ship operation confirmation unit 280 receives the operation information of the ship by a GPS installed on the ship, and confirms the position, the speed, and the route.

또한, 본 발명에 따른 증강현실을 이용한 비상대피 안내방법은, 모바일기기의 카메라로 실제 환경을 촬영하면 촬영된 영상에서 NFC 태그위치를 인식하거나 또는 NFC 통신으로 태그를 인식하는 단계와; 모바일기기는 인식된 태그를 모바일기기의 위치, 방향, 각도에 대한 상태정보와 함께 안전서버(200)로 전송하면서 비상대피정보를 요청하는 단계와; 안전서버(200)는 모바일기기로부터 제공받은 태그를 확인하고, 태그에 대응하여 등록된 비상대피정보를 선정하는 단계와; 안전서버(200)는 전송받은 태그에 대응되는 비상대피정보가 확인되면 모바일기기로부터 제공받은 모바일기기의 상태정보에 일치되도록 비상대피정보를 수정하는 단계와; 안전서버(200)는 모바일기기의 위치에 따라서 맞춤형으로 가공된 비상대피정보를 모바일기기로 전송하는 단계와; 안전서버(200)로부터 비상대피정보가 수신되면 모바일기기는 카메라에서 촬영된 실제영상에 안전서버(200)로부터 제공받은 비상대피정보를 증강시켜 표시하는 단계를 포함하는 것을 특징으로 한다. In addition, the emergency evacuation guidance method using the augmented reality according to the present invention comprises the steps of recognizing an NFC tag position in a photographed image or recognizing a tag by NFC communication when photographing a real environment using a camera of a mobile device; The mobile device requests the emergency evacuation information while transmitting the recognized tag to the safety server 200 together with the state information on the position, direction, and angle of the mobile device; The security server 200 confirms the tag provided from the mobile device and selects the registered emergency evacuation information corresponding to the tag. The security server 200 corrects the emergency evacuation information so that the emergency evacuation information corresponding to the transmitted tag is confirmed to match the state information of the mobile device provided from the mobile device; The security server 200 may transmit the emergency evacuation information tailored according to the location of the mobile device to the mobile device; When the emergency evacuation information is received from the security server 200, the mobile device enhances and displays the emergency evacuation information provided from the safety server 200 to the actual image photographed by the camera.

이상과 같이 본 발명에 의하면, 선박 곳곳에 부착된 NFC 태그를 마커로 하여 3차원 공간에 비상대피 경로 안내를 하고 모바일기기의 센서를 통하여 더욱 정확한 영상정합을 할 수 있는 방법으로 가상의 객체가 증강되도록 하여 승객의 현재 위치와 이동 경로를 스마트폰으로 안내함으로써 보다 쉽고 안전하게 비상구를 찾을 수 있는 효과가 있다.As described above, according to the present invention, an emergency evacuation route guidance is provided in a three-dimensional space using an NFC tag attached to various parts of a ship, and a more accurate image matching can be performed through a sensor of a mobile device. So that the present location and the route of the passenger are guided to the smartphone, thereby making it easier and safer to find the exit.

또한, 본 발명에서 이용하는 비상대피 경로 안내 시스템은 선박에 긴급 상황이 발생하여 어두운 상황에서도 사용자의 모바일기기에 증강현실의 안내선이 나타나 원활한 비상대피가 이루어질 수 있으며, 승객들에게 증강현실을 활용한 3D 입체영상을 제공하여 비상대피 훈련에 대한 관심을 이끌어내고 능동적이며 자기주도적인 해상안전 교육을 할 수 있다는 장점이 있다.Also, in the emergency evacuation route guidance system used in the present invention, a guide line of the augmented reality is displayed on the user's mobile device even in a dark situation due to an emergency situation on the ship, so that an emergency evacuation can be smoothly performed. It provides an advantage of providing active and self-directed maritime safety education by providing interest in emergency evacuation drills by providing stereoscopic images.

특히, 본 발명에서는 모바일기기의 센서를 통하여 배가 한 쪽으로 기울었을 경우, 배의 경사도를 측정하여 상황에 맞춘 구체적인 비상대피 요령을 안내할 수 있는 장점이 있다.Particularly, in the present invention, when the ship is tilted to one side through the sensor of the mobile device, it is possible to measure the inclination of the ship and to guide specific emergency evacuation instructions tailored to the situation.

도 1은 본 발명에 따른 증강현실을 이용한 선박의 비상대피경로 안내 시스템 및 안내방법의 개략도.
도 2는 본 발명에 따른 모바일기기의 구성도.
도 3은 본 발명에 따른 안전서버의 구성도.
도 4는 본 발명에 따른 증강현실을 이용한 비상대피 안내방법의 작동과정에 대한 순서도.
1 is a schematic view of a ship evacuation route guiding system and guiding method using an augmented reality according to the present invention.
2 is a block diagram of a mobile device according to the present invention;
3 is a configuration diagram of a security server according to the present invention;
4 is a flowchart illustrating an operation procedure of an emergency evacuation guidance method using an augmented reality according to the present invention.

이하 첨부된 도면을 참조하여 본 발명에 따른 증강현실을 이용한 선박의 비상대피경로 안내 시스템 및 안내방법을 자세히 설명한다.DETAILED DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, an emergency evacuation route guiding system and a guiding method using augmented reality according to the present invention will be described in detail with reference to the accompanying drawings.

도 1을 참조하여 본 발명에 따른 증강현실을 이용한 선박의 비상대피경로 안내 시스템 및 안내방법의 기본개념을 설명한다.1, a basic concept of an emergency evacuation route guidance system and a guidance method using augmented reality according to the present invention will be described with reference to FIG.

먼저, 모바일기기(100)에는 가속도 센서, 자이로 센서 및 방향 센서 등이 내장되어 위치정보를 확인하며, 카메라로 선박을 촬영하면 촬영된 영상을 분석하여 태그가 인식되거나 또는 NFC 통신으로 태그와 통신하면서 태그가 인식되면 태그정보를 모바일기기의 상태정보와 함께 안전서버(200)로 전송한다. 안전서버(200)는 모바일기기(100)로부터 제공받은 태그에 대응되는 선박의 비상대피정보를 확인하고, 모바일기기(100)의 상태정보에 대응되도록 최적의 비상대피정보로 가공하여 모바일기기(100)로 제공한다. 이에 따라 모바일기기(100)는 안전서버(200)로 제공받은 비상대피정보를 촬영된 실제영상에 결합시켜 화면에 표출 되어 현실감 있게 비상대피정보를 확인할 수 있게 된다. First, an acceleration sensor, a gyro sensor, and a direction sensor are incorporated in the mobile device 100 to check position information. When a ship is photographed with a camera, the captured image is analyzed to identify the tag or communicate with the tag through NFC communication When the tag is recognized, the tag information is transmitted to the security server 200 together with the status information of the mobile device. The safety server 200 confirms the emergency evacuation information of the ship corresponding to the tag provided from the mobile device 100 and processes the information into the optimal emergency evacuation information so as to correspond to the state information of the mobile device 100, ). Accordingly, the mobile device 100 can combine the emergency evacuation information provided to the safety server 200 with the photographed actual image and display it on the screen, so that the emergency evacuation information can be recognized realistically.

도 2를 참조하여 모바일기기에 대하여 자세히 살펴보면, 모바일기기(100)는 카메라뷰 실행부(110), 선박태그 인식부(120), 모바일기기 상태정보 센싱부(130), 모바일기기정보 제공부(140), 비상대피정보 증강부(150), 선박운항정보 확인부(160)를 포함한다.2, the mobile device 100 includes a camera view execution unit 110, a ship tag recognition unit 120, a mobile device status information sensing unit 130, a mobile device information providing unit 140, an emergency evacuation information enhancement unit 150, and a ship operation information confirmation unit 160.

카메라뷰 실행부(110)는 증강현실을 통해서 비상대피정보를 제공받고자 하는 경우에 모바일기기(100)에 장착된 카메라에서 촬영된 영상을 표출시킨다.The camera view execution unit 110 exposes the image photographed by the camera mounted on the mobile device 100 when it is desired to receive the emergency evacuation information through the augmented reality.

선박태그 인식부(120)는 선박에 장착된 태그를 확인하는 것으로 카메라에서 촬영된 영상을 분석하여 태그를 인식하거나 또는 NFC 통신으로 태그와 통신하면서 태그를 인식한다. 이러한 선박태그 인식부(120)에 확인된 태그의 고유ID를 분석하여 선박에서 사용자가 위치하는 장소를 정확하게 확인할 수 있게 된다.The ship tag recognizing unit 120 recognizes the tag mounted on the ship by analyzing the image captured by the camera or recognizes the tag while communicating with the tag by NFC communication. The unique ID of the tag identified in the ship tag recognizing unit 120 is analyzed to accurately confirm the location of the user on the ship.

모바일기기 상태정보 센싱부(130)는 모바일기기(100)에 설치된 가속도 센서, 자이로 센서, GPS 센서 및 방향 센서로부터 모바일기기의 위치, 방향, 각도에 대한 상태정보를 확인한다. 모바일기기 상태정보 센싱부(130)는 가속도 센서로 모바일기기의 기울어진 상태를 확인할 수 있게 되고, 자이로 센서로 모바일기기의 회전여부를 확인할 수 있으며, 방향 센서로 모바일기기가 위치하는 방향을 확인할 수 있으며, GPS 센서로 모바일기기의 위치를 확인할 수 있다. 이러한 모바일기기 상태정보 센싱부(130)는 애플리케이션이 실행되면 모바일기기를 선박의 바닥에 밀착시키라는 메시지를 텍스트 또는 음성으로 안내해주며 안내 후 일정시간동안 모바일기기의 각도를 측정하여 상태정보를 확인하게 된다. 이에 따라 선박이 침몰하면서 기울어지더라도 모바일기기를 바닥에 놓으면 현재의 기울어진 상태 등을 정확하게 확인할 수 있게 된다.The mobile device status information sensing unit 130 confirms status information on the position, direction, and angle of the mobile device from the acceleration sensor, the gyro sensor, the GPS sensor, and the direction sensor installed in the mobile device 100. The mobile device status information sensing unit 130 can check the tilted state of the mobile device with the acceleration sensor, check whether the mobile device is rotated by the gyro sensor, and confirm the direction in which the mobile device is positioned with the direction sensor And the location of the mobile device can be confirmed by the GPS sensor. When the application is executed, the mobile device status information sensing unit 130 guides the mobile device to the bottom of the vessel by text or voice, and measures the angle of the mobile device for a predetermined period of time after the guide to check the status information do. Accordingly, even if the ship is tilted while sinking, if the mobile device is placed on the floor, the present tilted state can be accurately confirmed.

모바일기기정보 제공부(140)는 선박태그 인식부(120)에서 인식된 태그정보와 모바일기기 상태정보 센싱부(130)에서 확인된 모바일기기의 상태정보를 실시간으로 안전서버(200)에 전송한다. The mobile device information providing unit 140 transmits the tag information recognized by the ship tag recognizing unit 120 and the status information of the mobile device confirmed by the mobile device status information sensing unit 130 to the security server 200 in real time .

비상대피정보 증강부(150)는 안전서버(200)로부터 제공받은 비상대피정보를 카메라뷰 실행부(110)를 통해서 촬영된 실제영상에 결합시켜 화면에 증강시켜 표시한다. 이때, 모바일기기의 표출부는 비상대피정보를 모바일기기(100)가 움직이더라도 정확하게 확인할 수 있도록 실제위치와 일치되도록 표시하는 것이 바람직하다.The emergency evacuation information enhancing unit 150 combines the emergency evacuation information provided from the safety server 200 with the actual image photographed through the camera view executing unit 110, and displays the image on the screen. At this time, the display unit of the mobile device preferably displays the emergency evacuation information so as to match the actual position so that the mobile device 100 can accurately confirm the emergency evacuation information.

선박운항정보 확인부(160)는 안전서버로 선박의 운항정보를 요청하고, 안전서버로부터 제공받은 운항정보를 표시한다. 이때, 선박운항정보 확인부(160)는 사용자로부터 선박의 이름을 입력받아 안전서버로 제공하거나 또는 카메라에서 촬영된 영상을 분석하여 인식된 태그위치 또는 NFC 통신으로 인식된 태그를 제공할 수도 있다.
The ship operation information confirmation unit 160 requests the operation information of the ship to the safety server and displays the operation information provided from the safety server. At this time, the ship operation information confirmation unit 160 may receive the name of the ship from the user and provide it to the safety server, or may analyze the image taken by the camera to provide the recognized tag position or the tag recognized by the NFC communication.

도 3을 참조하여 안전서버를 자세히 살펴보면 안전서버(200)는 통신부(210), 비상대피정보 저장부(220), 모바일기기정보 수신부(230), 비상대피정보 확인부(240), 비상대피정보 가공부(250), 비상대피정보 전송부(260)를 포함하며, 추가적으로 선박정보 관리부(270), 선박운항 확인부(280), 선박위험 안내부(290)을 포함할 수 있다.3, the safety server 200 includes a communication unit 210, an emergency evacuation information storage unit 220, a mobile device information receiving unit 230, an emergency evacuation information confirmation unit 240, And an emergency evacuation information transmission unit 260. The system may further include a vessel information management unit 270, a vessel operation confirmation unit 280, and a vessel risk information unit 290. [

통신부(210)는 접속된 모바일기기(100)의 통신 상태를 확인한다. 통신부(210)는 접속된 모바일기기(100)로부터 각종 정보가 제공되지 않는 상태에서 기준시간이 경과하면 자동으로 접속을 차단하는 것이 바람직하다.The communication unit 210 confirms the communication state of the connected mobile device 100. It is preferable that the communication unit 210 automatically disconnects when the reference time elapses in a state where various information is not provided from the connected mobile device 100. [

비상대피정보 저장부(220)는 등록된 선박의 비상대피정보를 저장하고 관리한다. 이러한 비상대피정보는 등록된 선박대피유도 화살표, 비상용 물품, 대피시간, 대피방법 등을 포함하며 문자, 음성 등으로 작성되고, 선박에 설치된 태그에 대응되는 위치에 태그의 식별정보와 동일한 식별자가 포함된다. 또한, 비상대피정보는 선박의 구조가 변경되거나 또는 비상용 물품 등이 변경되는 경우에 업데이트된다. The emergency evacuation information storage unit 220 stores and manages the emergency evacuation information of the registered ship. This emergency evacuation information includes an identifier identical to the identification information of the tag at a position corresponding to a tag installed on the ship, including a registered ship evacuation arrow, emergency goods, evacuation time, evacuation method, etc., do. In addition, the emergency evacuation information is updated when the structure of the ship is changed or an emergency goods or the like is changed.

모바일기기정보 수신부(230)는 접속된 모바일기기(100)로부터 실시간으로 모바일기기에서 인식한 태그정보와 모바일기기 상태정보를 실시간으로 제공받는다.The mobile device information receiving unit 230 receives the tag information and the mobile device status information recognized by the mobile device in real time from the connected mobile device 100 in real time.

비상대피정보 확인부(240)는 모바일기기정보 수신부(230)로부터 제공받은 태그정보를 분석하여 대응되는 선박의 비상대피정보를 확인한다. 즉, 비상대피정보 확인부(240)는 모바일기기(100)로부터 수신받은 태그정보를 분석하여 대응되는 식별정보를 같은 비상대피정보를 확인할 수 있다. 이러한 비상대피정보 확인부(240)에 의해서 모바일기기의 현재 위치에서 비상구까지 최단시간 대피 경로 및 시간을 도출할 수 있게 된다.The emergency evacuation information verifying unit 240 analyzes the tag information provided from the mobile device information receiving unit 230 and confirms the emergency evacuation information of the corresponding ship. That is, the emergency evacuation information confirmation unit 240 can analyze the tag information received from the mobile device 100 and confirm the same emergency evacuation information as the corresponding identification information. This emergency evacuation information verifying unit 240 can derive the shortest evacuation route and time from the current position of the mobile device to the emergency exit.

비상대피정보 가공부(250)는 모바일기기정보 수신부(230)로부터 제공받은 모바일기기(100)의 상태정보에 대응되도록 최적의 비상대피정보로 가공한다. 즉, 비상대피정보 가공부(250)는 태그정보로부터 선박의 종류 및 선박 내에서의 위치를 확인할 수 있고, 모바일기기 상태정보로부터 모바일기기의 위치, 방향, 각도 등을 확인할 수 있어 모바일기기의 상태에 적합하게 맞춤형으로 현재 위치에서 비상구까지 최단시간 대피 경로 및 시간을 도출하여 비상대피정보를 확인할 수 있게 된다. 예를 들면, 선박이 침몰하는 경우에 기울어지면 기존에 침몰방향으로 이동하는 것이 기본 비상대피정보라고 하더라도 반대방향으로 이동할 수 있는 수정된 안내정보를 제공할 수 있게 된다.The emergency evacuation information processing unit 250 processes the emergency evacuation information into the optimal emergency evacuation information so as to correspond to the state information of the mobile device 100 provided from the mobile device information receiving unit 230. [ That is, the emergency evacuation information processing unit 250 can identify the type of the ship and the position in the ship from the tag information, and can confirm the position, direction, and angle of the mobile device from the mobile device status information, The emergency evacuation route and time can be derived from the current position to the emergency exit so that the emergency evacuation information can be confirmed. For example, when the ship is sunk, it is possible to provide modified guidance information that can move in the opposite direction even if it is the basic emergency evacuation information that the boat is moved in the sinking direction.

비상대피정보 전송부(260)는 비상대피정보 가공부(250)에서 가공된 최적의 비상대피정보를 실시간으로 모바일기기(100)로 제공한다. The emergency evacuation information transmission unit 260 provides the mobile terminal 100 with the optimal emergency evacuation information processed in the emergency evacuation information processing unit 250 in real time.

선박정보 관리부(270)는 비상대피정보를 제공하는 선박에 대한 정보를 저장하여 관리한다. 선박정보 관리부(270)는 운항경로에 대한 정보도 함께 등록받아 저장하는 것이 바람직하다. The ship information management unit 270 stores and manages information on the ship providing the emergency evacuation information. It is preferable that the ship information management unit 270 also registers and stores information on the navigation route.

선박운항 확인부(280)는 등록된 선박이 운항하는 경우에 선박의 위치, 속도, 운항경로를 확인한다. 이러한 선박의 운항정보는 선박의 장착된 GPS 등으로 제공받아 위치, 속도 및 경로를 확인할 수 있다. 이러한 선박운항 확인부(280)에 의해서 운항중인 선박인 경우에만 비상대피정보를 제공하는 것이 바람직하다. 선박운항 확인부(280)는 등록된 선박이 운항경로를 따라 이동하면 운항되는 것으로 확인하거나 또는 선박업체로부터 운항정보를 제공받아 확인할 수 있다. The ship navigation confirmation unit 280 confirms the position, speed, and navigation route of the ship when the registered ship is operated. The navigation information of these ships can be provided by the GPS equipped with the ship, so that the position, speed and route can be confirmed. It is preferable to provide the emergency evacuation information only in the case of a ship being operated by the ship navigation confirmation unit 280. [ The ship navigation confirmation unit 280 can confirm that the registered ship is operated when the ship moves along the navigation route, or can receive the navigation information from the ship company.

선박위험 안내부(290)는 선박운항 확인부(280)에서 확인된 선박의 정보의 속도, 운항경로가 기준이상이면 접속된 모바일기기(100)에 선박위험에 대하여 경보한다. 예를 들면, 선박의 속도가 기준속도 이상이거나 또는 기준속도 이하면 선박에 이상이 있는 것으로 확인하거나 또는 선박이 운항경로에서 기준이상으로 벗어난 경우에는 선박에 이상이 있는 것으로 확인할 수 있다. 이러한 선박위험 안내부(290)는 평상시에는 접속된 모바일에 선박정보를 제공하며 이상 시에는 알람, 진동 등으로 표시하게 된다.
The ship risk guide unit 290 alerts the connected mobile device 100 of the ship risk if the speed of the information of the ship identified by the ship operation confirmation unit 280 is higher than the reference travel path. For example, if the speed of the ship is above the reference speed or below the reference speed, it can be confirmed that there is an abnormality on the ship, or if the ship is out of the reference route more than the reference, the ship is found to be abnormal. The ship risk information unit 290 normally provides the ship information to the connected mobile, and displays an alarm, a vibration, or the like when it is abnormal.

도 4의 순서도를 참조하여 본 발명에 따른 증강현실을 이용한 비상대피 안내방법의 작동과정에 대하여 자세히 살펴본다.The operation process of the emergency evacuation guidance method using the augmented reality according to the present invention will be described in detail with reference to the flowchart of Fig.

먼저, 모바일기기(100)는 애플리케이션이 실행된 후 카메라로 실제 환경을 촬영하면(단계 S101), 촬영된 영상에서 태그위치를 인식하거나 또는 NFC 통신으로 태그를 인식한다(단계 S102). 그리고 모바일(100)에 설치된 가속도 센서, 자이로 센서, GPS 센서 및 방향 센서로부터 모바일의 위치, 방향, 각도에 대한 상태정보를 확인한다(단계 S103). First, the mobile device 100 recognizes the tag position in the photographed image or recognizes the tag by the NFC communication (step S102). Then, state information on the position, direction, and angle of the mobile is obtained from the acceleration sensor, the gyro sensor, the GPS sensor, and the direction sensor installed in the mobile 100 (step S103).

그 후, 모바일(100)은 인식된 태그를 안전서버(200)로 전송하면서 비상대피정보를 요청하다(단계 S104). Thereafter, the mobile 100 requests emergency evacuation information while transmitting the recognized tag to the security server 200 (step S104).

안전서버(200)는 모바일기기(100)로부터 제공받은 태그에 대한 정보를 확인하고, 태그에 대응하여 등록된 비상대피정보를 선정한다(단계 S105). 이때, 태그에 대응되는 비상대피정보가 존재하지 않는 경우에는 식별불가표시를 모바일기기(100)로 제공한다.The security server 200 confirms the information on the tag provided from the mobile device 100 and selects the registered emergency evacuation information corresponding to the tag (step S105). At this time, if there is no emergency evacuation information corresponding to the tag, the mobile device 100 provides an unidentifiable indication.

그리고 안전서버(200)는 전송받은 태그에 대응되는 비상대피정보가 확인되면 모바일기기(100)로부터 제공받은 모바일기기의 상태정보를 분석하여 모바일기기의 위치, 방향, 각도 등을 확인하고, 선정된 비상대피정보를 수정한다(단계 S106). 이에 따라 안전서버(200)는 제공받은 모바일기기의 상태정보에 의해서 모바일기기 사용자의 위치가 어떤 방위로 경사진 곳인지를 확인하여 대비가 어려운 경로를 제외한 최적의 대피 가능한 경로를 확인할 수 있게 된다. 예를 들면 우측방향으로 침몰하는 경우에 좌측방향으로 대피경로가 설정되도록 수정하게 된다.When the emergency evacuation information corresponding to the received tag is confirmed, the safety server 200 analyzes the state information of the mobile device provided from the mobile device 100 to check the position, direction, and angle of the mobile device, The emergency evacuation information is corrected (step S106). Accordingly, the safety server 200 can determine the route to which the mobile device user is tilted based on the provided state information of the mobile device, thereby determining an optimum route that can be evacuated, except for a path that is hard to contrast. For example, when sinking in the right direction, the evacuation route is set to be set in the left direction.

그리고 안전서버(200)는 모바일기기(100)의 상태에 따라 맞춤형으로 가공된 비상대피정보를 모바일기기(100)로 전송한다(단계 S107). Then, the security server 200 transmits emergency evacuation information customized according to the state of the mobile device 100 to the mobile device 100 (step S107).

안전서버(200)로부터 비상대피정보가 수신되면 모바일기기(100)는 카메라에서 촬영된 실제영상에 안전서버(200)로부터 제공받은 비상대피정보를 증강시켜 표시하게 된다(단계 S108). When the emergency evacuation information is received from the security server 200, the mobile device 100 enhances and displays the emergency evacuation information provided from the security server 200 to the actual image photographed by the camera (step S108).

한편, 안전서버(200)는 모바일기기에서 선박의 운항정보를 요청하면 선박의 속도, 운항경로에 대한 정보를 제공하고, 선박의 정보의 속도, 운항경로가 기준이상이면 접속된 모바일기기에 선박위험에 대하여 경보한다.On the other hand, when the security server 200 requests the navigation information of the ship from the mobile device, the safety server 200 provides the information about the speed and the navigation route of the ship, and if the speed of the information of the ship, Lt; / RTI >

한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.While the present invention has been described in connection with what is presently considered to be the most practical and preferred embodiment, it is to be understood that the invention is not limited to the disclosed embodiments, but is capable of various modifications within the scope of the invention. Therefore, the scope of the present invention should not be limited by the described embodiments, but should be determined by the scope of the appended claims and equivalents thereof.

100 : 모바일기기 110 : 카메라뷰 실행부
120 : 선박태그 인식부 130 : 모바일기기 상태정보 센싱부
140 : 모바일기기정보 제공부 150 : 비상대피정보 증강부
160 : 선박운항정보 확인부 200 : 안전서버
210 : 통신부 220 : 비상대피정보 저장부
230 : 모바일기기정보 수신부 240 : 비상대피정보 확인부
250 : 비상대피정보 가공부 260 : 비상대피정보 전송부
270 : 선박정보 관리부 280 : 선박운항 확인부
290 : 선박위험 안내부
100: mobile device 110: camera view execution part
120: ship tag recognizing unit 130: mobile device state information sensing unit
140: Providing mobile device information 150: Emergency evacuation information enhancement unit
160: Ship Flight Information Verification Unit 200: Safety Server
210: communication unit 220: emergency evacuation information storage unit
230: Mobile device information receiving unit 240: Emergency evacuation information confirmation unit
250: Emergency evacuation information processor 260: Emergency evacuation information transmitter
270: Ship information management unit 280: Ship navigation confirmation unit
290: Ship risk information section

Claims (9)

모바일기기로 촬영된 영상을 분석하여 태그의 위치가 인식되거나 또는 NFC 통신으로 태그를 인식되면 모바일기기의 위치, 방향, 각도에 대한 상태정보를 태그와 함께 안전서버(200)로 전송하고, 안전서버(200)로부터 제공받은 비상대피정보를 촬영된 실제영상에 결합시켜 표시하는 사용자 모바일기기(100)와;
모바일기기로부터 제공받은 태그에 대응되는 선박의 비상대피정보를 확인하고, 모바일기기의 상태정보에 대응되도록 비상대피정보로 가공하여 모바일기기로 제공하는 안전서버(200)를 포함하되,
안전서버(200)는,
접속된 모바일기기의 통신 상태를 확인하는 통신부(210)와;
선박에 설치된 태그에 대응되는 위치에 태그의 식별정보와 동일한 식별자를 갖는 선박의 비상대피정보를 저장하고 관리하는 비상대피정보 저장부(220)와;
접속된 모바일기기로부터 실시간으로 모바일기기에서 인식한 태그정보와 모바일기기 상태정보를 실시간으로 제공받는 모바일기기정보 수신부(230)와;
모바일기기정보 수신부(230)로부터 제공받은 태그정보를 분석하여 대응되는 선박의 비상대피정보를 확인하는 비상대피정보 확인부(240)와;
모바일기기정보 수신부(230)로부터 제공받은 모바일기기의 상태정보에 대응되도록 최적의 비상대피정보로 가공하는 비상대피정보 가공부(250)와;
비상대피정보 가공부(250)에서 가공된 최적의 비상대피정보를 실시간으로 모바일기기로 제공하는 비상대피정보 전송부(260)를 포함하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.
When the position of the tag is recognized or the tag is recognized by NFC communication by analyzing the image photographed by the mobile device, the status information on the position, orientation, and angle of the mobile device is transmitted to the security server 200 together with the tag, A user mobile device 100 for displaying the emergency evacuation information provided from the mobile terminal 200 in association with the photographed real image;
And a security server (200) for confirming emergency evacuation information of a ship corresponding to a tag provided from a mobile device, processing the emergency evacuation information so as to correspond to state information of the mobile device, and providing the information to a mobile device,
The security server 200,
A communication unit 210 for confirming a communication state of the connected mobile device;
An emergency evacuation information storage unit 220 for storing and managing emergency evacuation information of a ship having an identifier identical to the identification information of the tag at a position corresponding to a tag installed on the ship;
A mobile device information receiving unit 230 receiving tag information and mobile device status information recognized by the mobile device in real time from the connected mobile device in real time;
An emergency evacuation information verifying unit 240 for analyzing the tag information provided from the mobile device information receiving unit 230 and confirming the emergency evacuation information of the corresponding ship;
An emergency evacuation information processing unit 250 that processes the emergency evacuation information into optimal emergency evacuation information corresponding to the state information of the mobile device provided from the mobile device information receiving unit 230;
And an emergency evacuation information transmission unit (260) for providing the mobile terminal with the optimal emergency evacuation information processed in the emergency evacuation information processing unit (250).
청구항 1에 있어서, 모바일기기는,
장착된 카메라에서 촬영된 영상을 표출시키는 카메라뷰 실행부(110)와;
선박에 장착된 태그를 확인하는 것으로 카메라에서 촬영된 영상을 분석하여 태그를 인식하거나 또는 NFC 통신으로 태그와 통신하면서 태그를 인식하는 선박태그 인식부(120)와;
모바일기기의 위치, 방향, 각도에 대한 상태정보를 확인하는 모바일기기 상태정보 센싱부(130)와;
선박태그 인식부(120)에서 인식된 태그정보와 모바일기기 상태정보 센싱부(130)에서 확인된 모바일기기의 상태정보를 실시간으로 안전서버(200)에 전송하는 모바일기기정보 제공부(140)와;
안전서버(200)로부터 제공받은 비상대피정보를 카메라뷰 실행부(110)를 통해서 촬영된 실제영상에 결합시켜 화면에 증강시켜 표시하는 비상대피정보 증강부(150)를 포함하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.
The mobile device according to claim 1,
A camera view execution unit (110) for displaying an image photographed by a mounted camera;
A ship tag recognizing unit 120 recognizing a tag mounted on the ship by analyzing the image taken by the camera or recognizing the tag while communicating with the tag through NFC communication;
A mobile device status information sensing unit 130 for confirming status information on the position, direction, and angle of the mobile device;
A mobile device information providing unit 140 for transmitting the tag information recognized by the ship tag recognizing unit 120 and the status information of the mobile device confirmed by the mobile device status information sensing unit 130 to the safety server 200 in real time ;
And an emergency evacuation information enhancing unit (150) for combining the emergency evacuation information provided from the safety server (200) with the actual image photographed through the camera view executing unit (110) and displaying the enhanced image on the screen Emergency evacuation guidance system using reality.
청구항 1 또는 청구항 2에 있어서, 모바일기기의 상태정보는 모바일기기에 설치된 가속도 센서, 자이로 센서, GPS 센서 및 방향 센서로부터 확인하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.The emergency evacuation guidance system using an augmented reality according to claim 1 or 2, wherein state information of the mobile device is confirmed from an acceleration sensor, a gyro sensor, a GPS sensor, and a direction sensor installed in the mobile device. 삭제delete 청구항 1에 있어서, 비상대피정보는 등록된 선박대피유도 화살표, 비상용 물품, 대피시간, 대피방법을 포함하며 문자, 음성 등으로 작성되는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.The emergency evacuation guidance system according to claim 1, wherein the emergency evacuation information is composed of a registered vessel evacuation arrow, an emergency article, a evacuation time, and a evacuation method, and is composed of a character, voice, or the like. 청구항 1에 있어서, 안전서버(200)는, 비상대피정보를 제공하는 선박에 대한 정보를 저장하여 관리하는 선박정보 관리부(270)와, 선박의 위치, 속도, 운항경로를 확인하는 선박운항 확인부(280)와, 선박운항 확인부(280)에서 확인된 선박의 정보의 속도, 운항경로가 기준이상이면 접속된 모바일기기에 선박위험에 대하여 경보하는 선박위험 안내부(290)를 더 포함하고,
모바일기기는, 안전서버로 선박의 운항정보를 요청하고, 안전서버로부터 제공받은 운항정보를 표시하는 선박운항정보 확인부(160)를 더 포함하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.
The security server (200) according to claim 1, wherein the safety server (200) comprises: a ship information management unit (270) for storing and managing information on the ship providing the emergency evacuation information; and a ship operation confirmation unit And a ship risk informing unit (290) for alerting the connected mobile device to ship risk if the speed of the information of the ship identified by the ship operation confirming unit (280)
The mobile device further includes a ship operation information confirmation unit (160) for requesting the operation information of the ship to the safety server and displaying the operation information provided from the safety server.
청구항 6에 있어서, 선박운항 확인부(280)는 선박의 운항정보를 선박의 장착된 GPS 등으로 제공받아 위치, 속도 및 경로를 확인하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내시스템.The emergency evacuation guidance system using an augmented reality according to claim 6, wherein the vessel operation confirmation unit (280) receives the navigation information of the vessel using a GPS or the like mounted on the vessel, and confirms the position, velocity and route. 모바일기기는 카메라로 실제 환경을 촬영하면 촬영된 영상에서 NFC 태그를 인식하거나 또는 NFC 통신으로 태그를 인식하는 단계;
모바일기기는 인식된 태그를 모바일기기의 위치, 방향, 각도에 대한 상태정보와 함께 안전서버(200)로 전송하면서 비상대피정보를 요청하는 단계;
안전서버(200)는 모바일기기로부터 제공받은 태그를 확인하고, 태그에 대응하여 등록된 비상대피정보를 선정하는 단계;
안전서버(200)는 전송받은 태그에 대응되는 비상대피정보가 확인되면 모바일기기로부터 제공받은 모바일기기의 상태정보에 일치되도록 비상대피정보를 수정하는 단계;
안전서버(200)는 모바일기기의 위치에 따라서 맞춤형으로 가공된 비상대피정보를 모바일기기로 전송하는 단계;
안전서버(200)로부터 비상대피정보가 수신되면 모바일기기는 카메라에서 촬영된 실제영상에 안전서버(200)로부터 제공받은 비상대피정보를 증강시켜 표시하는 단계; 및
안전서버(200)는 모바일기기에서 선박의 운항정보를 요청하면 선박의 속도, 운항경로에 대한 정보를 제공하고, 선박의 정보의 속도, 운항경로가 기준이상이면 접속된 모바일기기에 선박위험에 대하여 경보하는 단계를 포함하는 것을 특징으로 하는 증강현실을 이용한 비상대피 안내방법.
Recognizing an NFC tag in a photographed image or recognizing a tag in an NFC communication when photographing a real environment using a camera;
The mobile device requests the emergency evacuation information while transmitting the recognized tag to the safety server 200 together with the state information on the position, direction, and angle of the mobile device;
The security server 200 identifies the tag provided from the mobile device and selects the registered emergency evacuation information corresponding to the tag;
The security server 200 corrects the emergency evacuation information so as to match the state information of the mobile device provided from the mobile device when the emergency evacuation information corresponding to the transmitted tag is confirmed;
The security server 200 transmits emergency evacuation information tailored according to the location of the mobile device to the mobile device.
When the emergency evacuation information is received from the safety server 200, the mobile device enhances and displays the emergency evacuation information provided from the security server 200 on the actual image photographed by the camera; And
The safety server 200 provides information on the speed of the ship and the navigation route when the navigation device 200 requests the navigation information of the ship from the mobile device. If the speed and the navigation route of the ship are higher than the reference speed, And an alarming step of notifying the emergency evacuation route.
삭제delete
KR20140123832A 2014-09-17 2014-09-17 Emergency evacuation information system using augmented reality and information system thereof KR101504612B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR20140123832A KR101504612B1 (en) 2014-09-17 2014-09-17 Emergency evacuation information system using augmented reality and information system thereof
PCT/KR2015/002560 WO2016043393A1 (en) 2014-09-17 2015-03-17 Emergency evacuation guidance system and guidance method using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20140123832A KR101504612B1 (en) 2014-09-17 2014-09-17 Emergency evacuation information system using augmented reality and information system thereof

Publications (1)

Publication Number Publication Date
KR101504612B1 true KR101504612B1 (en) 2015-03-20

Family

ID=53028167

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20140123832A KR101504612B1 (en) 2014-09-17 2014-09-17 Emergency evacuation information system using augmented reality and information system thereof

Country Status (2)

Country Link
KR (1) KR101504612B1 (en)
WO (1) WO2016043393A1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101714988B1 (en) * 2016-09-06 2017-03-10 네트웍오앤에스 주식회사 Auto quality measurement and safety solution providing device using ble beacon and method thereof
KR20180019860A (en) * 2016-08-17 2018-02-27 순천향대학교 산학협력단 Navigation supplying apparatus and method based on street view for mobile
KR101895569B1 (en) * 2017-06-23 2018-09-05 동아대학교 산학협력단 Smart evacuation guide system and method using virtual reality and context awareness algorithm
KR20190100483A (en) 2018-02-05 2019-08-29 동의대학교 산학협력단 Emergency evacuation guidance method using augmented reality
KR20200134651A (en) * 2019-05-23 2020-12-02 동명대학교산학협력단 System and method for alarming indoor fire prevention
WO2021086005A1 (en) * 2019-10-29 2021-05-06 삼성전자 주식회사 Electronic device, and method for providing evacuation information according to occurrence of disaster by using same

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130085653A (en) * 2012-01-20 2013-07-30 엘지전자 주식회사 Method for providing route guide using augmented reality and mobile terminal using this method
KR101354772B1 (en) 2008-10-24 2014-01-23 현대중공업 주식회사 Intelligent evacuation guidance system and method using power line communication
KR20140012258A (en) * 2012-07-19 2014-02-03 주식회사 케이티 Near field communication tag and appartus for guiding emergency pathway using thereof
KR101406061B1 (en) 2013-08-26 2014-06-11 (주)한우리 System for River Management

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100055253A (en) * 2008-11-17 2010-05-26 엘지전자 주식회사 Navigation apparatus and method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101354772B1 (en) 2008-10-24 2014-01-23 현대중공업 주식회사 Intelligent evacuation guidance system and method using power line communication
KR20130085653A (en) * 2012-01-20 2013-07-30 엘지전자 주식회사 Method for providing route guide using augmented reality and mobile terminal using this method
KR20140012258A (en) * 2012-07-19 2014-02-03 주식회사 케이티 Near field communication tag and appartus for guiding emergency pathway using thereof
KR101406061B1 (en) 2013-08-26 2014-06-11 (주)한우리 System for River Management

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180019860A (en) * 2016-08-17 2018-02-27 순천향대학교 산학협력단 Navigation supplying apparatus and method based on street view for mobile
KR101714988B1 (en) * 2016-09-06 2017-03-10 네트웍오앤에스 주식회사 Auto quality measurement and safety solution providing device using ble beacon and method thereof
KR101895569B1 (en) * 2017-06-23 2018-09-05 동아대학교 산학협력단 Smart evacuation guide system and method using virtual reality and context awareness algorithm
WO2018236016A1 (en) * 2017-06-23 2018-12-27 이동규 Smart evacuation guidance system and method which use augmented reality and context awareness algorithm
KR20190100483A (en) 2018-02-05 2019-08-29 동의대학교 산학협력단 Emergency evacuation guidance method using augmented reality
KR20200134651A (en) * 2019-05-23 2020-12-02 동명대학교산학협력단 System and method for alarming indoor fire prevention
KR102245887B1 (en) * 2019-05-23 2021-04-28 동명대학교 산학협력단 System and method for alarming indoor fire prevention
WO2021086005A1 (en) * 2019-10-29 2021-05-06 삼성전자 주식회사 Electronic device, and method for providing evacuation information according to occurrence of disaster by using same

Also Published As

Publication number Publication date
WO2016043393A1 (en) 2016-03-24

Similar Documents

Publication Publication Date Title
KR101504612B1 (en) Emergency evacuation information system using augmented reality and information system thereof
US11151799B2 (en) System and method for monitoring field based augmented reality using digital twin
CN107782314B (en) Code scanning-based augmented reality technology indoor positioning navigation method
US20160343163A1 (en) Augmented reality device, system, and method for safety
US9495783B1 (en) Augmented reality vision system for tracking and geolocating objects of interest
JP5255595B2 (en) Terminal location specifying system and terminal location specifying method
US20130116922A1 (en) Emergency guiding system, server and portable device using augmented reality
US20160345137A1 (en) Indoor navigation systems and methods
US20160019721A1 (en) System and Method for Augmented Reality Display of Hoisting and Rigging Information
CN104660995A (en) Disaster relief visual system
KR101671981B1 (en) Method and system for providing a position of co-operated firemen by using a wireless communication, method for displaying a position of co-operated firefighter, and fire hat for performing the method
KR20140089184A (en) Head mounted display and method for controlling the same
US20150113426A1 (en) Crisis information delivery device, crisis information delivery system, method, and program
CN115659452B (en) Intelligent patrol method, intelligent patrol system and computer readable storage medium
EP3062297A1 (en) Emergency guidance system and method
KR20200065316A (en) System and method for replying disaster situation using smart drone
JP2015184894A (en) Information storage processing device, terminal device, control method, program, and storage medium
GB2535723A (en) Emergency guidance system and method
EP3132284B1 (en) A target determining method and system
US20230384114A1 (en) Personal protective equipment for navigation and map generation within a visually obscured environment
KR20190100483A (en) Emergency evacuation guidance method using augmented reality
KR20170034461A (en) Automatic navigation and communication possible drones operating system
US20200242797A1 (en) Augmented reality location and display using a user-aligned fiducial marker
EP4165373A1 (en) Personal protective equipment for navigation and map generation within a visually obscured environment
KR102132945B1 (en) UAV landing induction method

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20180209

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee