KR102530830B1

KR102530830B1 - Rtsp를 이용한 영상과 데이터 동기화 시스템 및 동기화 방법

Info

Publication number: KR102530830B1
Application number: KR1020220132498A
Authority: KR
Inventors: 윤선희
Original assignee: 주식회사 인포웍스
Priority date: 2022-10-14
Filing date: 2022-10-14
Publication date: 2023-05-10

Abstract

본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템은, 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 제1 시간 측정 모듈, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 수신되는 시점인 제2 시간을 측정하는 제2 시간 측정 모듈, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 지연시간 산출 모듈 및 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 시간 매칭 모듈을 포함할 수 있다.

Description

RTSP를 이용한 영상과 데이터 동기화 시스템 및 동기화 방법{IMAGE AND DATA SYNCHRONIZATION METHOD USING RTSP AND SYNCHRONIZATION SYSTEM}

본 발명은 RTSP를 이용하여 에지 디바이스(Edge Device)로부터 송신된 영상 및 데이터를 수신하는 서버에서 동기화하는 시스템 및 이를 이용한 동기화 방법에 대한 것이다.

RTSP(Real Time Streaming Protocol, 실시간 스트리밍 프로토콜)는 카메라로 촬영된 영상을 네트워크를 통해 서버로 전송하는 영상 전송 전용 프로토콜 기술을 말하며, 최근 다양한 분야에서 사용되고 있다. RTSP는 영상을 전송하는데 최적화 되어 있는 프로토콜이므로 영상을 분석한 데이터나 영상 외에 각종 센서를 통해 획득된 데이터 등과 같은 영상 외의 데이터와는 같이 전송될 수 없고, 데이터에 대해서는 별도로 전송을 해야한다.
이러한 상황에서 에지 디바이스(Edge Device)로부터 영상과 데이터가 동시에 전송될 경우, 영상 전송은 데이터 전송에 비해 패킷의 크기가 크기 때문에 데이터의 도착 시점보다 늦게 서버에 도착하게 된다. 또한, 네트워크 상황에 따라 영상 및 데이터가 서버에 도착하는 시점이 시시각각 달라지게 된다.
그 결과, 에지 디바이스(Edge Device)에서 동시에 캡쳐된 영상과 데이터 일지라도 서버에 도착하는 시점이 달라지게 되고, 서버에 도착한 시점이 같은 영상과 데이터는 에지 디바이스(Edge Device)로부터 캡쳐된 시점이 서로 다른 영상과 데이터이게 된다.
따라서, 본 발명을 통해 에지 디바이스(Edge Device)로부터 획득된 영상과 영상 외의 데이터를 동기화하는 기술을 제시함으로써, 동기화된 정보가 다양한 분야에서 빅데이터로 활용될 있도록 한다.

삭제

본 발명은 상술한 문제점을 해결하기 위한 것으로, RTSP를 이용하여 에지 디바이스(Edge Device)로부터 송신된 영상 및 데이터를 수신하는 서버에서 동기화하는 시스템 및 이를 이용한 동기화 방법을 제공하고자 한다.

본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템은, 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 제1 시간 측정 모듈, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 수신되는 시점인 제2 시간을 측정하는 제2 시간 측정 모듈, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 지연시간 산출 모듈 및 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 시간 매칭 모듈을 포함할 수 있다.
또한, 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는 상기 사용자 서버에서 상기 에지 디바이스(Edge Device)로 영상 재생 요청을 보내는 명령어인 재생 명령어(Play 명령어)를 구비하고, 상기 영상 재생 요청은 상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장을 시작하고, 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)를 사용자 서버로 전달하는 요청일 수 있다.
또한, 상기 제1 시간은 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 영상이 저장되는 시점인 제1-1 시간 및 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 센싱 데이터(Sensing data)가 저장되는 시점인 제1-2 시간을 구비하고, 상기 제1-1 시간은 상기 제1-2 시간과 동일한 시점일 수 있다.
또한, 상기 제2 시간은 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버에 수신되는 시점인 제2-1 시간 및 상기 에지 디바이스(Edge Device)에 저장된 상기 센싱 데이터(Sensing data)가 상기 사용자 서버에 수신되는 시점인 제2-2 시간을 구비하고, 상기 제2-1 시간은 상기 제2-2 시간보다 더 늦게 상기 사용자 서버에 수신되는 시간일 수 있다.
또한, 상기 지연시간 산출 모듈은 상기 제1-1 시간과 상기 제2-1 시간의 차이 값을 통해 상기 지연시간을 산출할 수 있다.
또한, 상기 시간 매칭 모듈은 상기 제2-1 시간과 상기 제2-2 시간을 비교할 때 상기 지연시간 만큼의 차이 값인 경우, 상기 영상과 상기 센싱 데이터(Sensing data)가 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)을 기준으로 상기 에지 디바이스(Edge Device)에서 동일 시간대에 저장된 것으로 추정하여 매칭할 수 있다.
또한, 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는 상기 사용자 서버에서 상기 에지 디바이스(Edge Device)에 영상 정지 요청을 보내는 명령어인 정지 명령어(Stop 명령어)를 더 구비하고, 상기 영상 정지 요청은 상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장 및 전송을 중지하도록 하는 요청일 수 있다.
또한, 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템은 미리 정해진 방법에 의해 상기 지연시간의 재산출 주기를 설정하는 주기 설정 모듈을 더 포함할 수 있다.
또한, 상기 미리 정해진 방법은 주기적으로 상기 에지 디바이스(Edge Device)에 정지 명령어(Stop 명령어)를 전송하여 상기 지연시간을 초기화한 다음, 다시 재생 명령어(Play 명령어)를 전송하여 지연시간이 재산출되도록 하는 방법일 수 있다.
본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 방법은, RTSP를 이용한 영상과 데이터 동기화 시스템을 통해 영상과 데이터를 동기화하는 방법에 있어서, 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 단계인 제1 시간 측정 단계, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 전달되는 시점인 제2 시간을 측정하는 단계인 제2 시간 측정 단계, 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 단계인 지연시간 산출 단계 및 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 단계인 시간 매칭 단계를 포함할 수 있다.

삭제

본 발명에 따른 RTSP를 이용한 영상, 데이터 동기화 시스템 및 동기화 방법 은 RTSP, 영상 패킷 크기 및 네트워크 상황에 구애받지 않고 영상과 데이터를 서버에서 동기화할 수 있고, 동기화된 정보는 다양한 분야에서의 빅데이터로 활용될 수 있다.
다만, 본 발명의 효과가 상술한 효과들로 제한되는 것은 아니며, 언급되지 아니한 효과들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.

삭제

도 1은 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템의 구성도
도 2는 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템의 흐름도
도 3은 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 방법의 순서도

이하에서는 도면을 참조하여 본 발명의 구체적인 실시예를 상세하게 설명한다. 다만, 본 발명의 사상은 제시되는 실시예에 제한되지 아니하고, 본 발명의 사상을 이해하는 당업자는 동일한 사상의 범위 내에서 다른 구성요소를 추가, 변경, 삭제 등을 통하여, 퇴보적인 다른 발명이나 본 발명 사상의 범위 내에 포함되는 다른 실시예를 용이하게 제안할 수 있을 것이나, 이 또한 본원 발명 사상 범위 내에 포함된다고 할 것이다.
또한, 각 실시예의 도면에 나타나는 동일한 사상의 범위 내의 기능이 동일한 구성요소는 동일한 참조부호를 사용하여 설명한다.
도 1은 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템의 구성도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템(10)은, 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 제1 시간 측정 모듈(100), 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 전달되는 시점인 제2 시간을 측정하는 제2 시간 측정 모듈(200), 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 지연시간 산출 모듈(300) 및 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 시간 매칭 모듈(400)을 포함할 수 있다.
또한, 미리 정해진 방법에 의해 상기 지연시간의 재산출 주기를 설정하는 주기 설정 모듈(500)을 더 포함할 수 있다.
여기서, 본 발명에서 언급하는 에지 디바이스(Edge Device)는 지능형 에지 컴퓨팅(Intelligent Edge Computing) 기술에 사용되는 기기를 일컫는다. 지능형 에지 컴퓨팅(Intelligent Edge Computing) 기술은 에지 장치(Edge Equipment)에서 인공지능 기술을 활용하여 실시간으로 데이터 분석과 처리 및 자원 관리 기능을 제공하는데, 여기서 에지 장치(Edge Equipment)는 에지 컴퓨팅을 제공하는 기기로 에지 노드(Edge Node, 또는 에지 서버)와 에지 디바이스(에지 디바이스(Edge Device))로 구분한다. 에지 노드(Edge Node)는 데이터 발생 지점 부근에 위치하여 부분적으로 서버의 역할을 수행하는 네트워크 장비로 게이트웨이(gateway), 라우터(router), 마이크로 데이터 센터(micro data center) 등이 있고, 에지 디바이스(에지 디바이스(Edge Device))는 데이터를 발생하는 기기로, 데이터를 생성 또는 수집하는 사물 인터넷(IoT) 센서부터 비디오/감시 카메라, 인터넷에 연결된 가전 기기, 스마트폰과 같은 스마트 기기 등을 포함한다. 지능형 에지 컴퓨팅(Intelligent Edge Computing)은 에지 디바이스에서 발생한 데이터를 에지 디바이스 또는 에지 노드에서 인공지능 기술을 활용하여 실시간 분석과 처리 뿐 아니라 상황 인지, 추론, 예측, 대응 및 제어 등의 기능을 제공한다.
또한, 본 발명에서 언급하는 RTSP는 Real-Time Streaming Protocol(실시간 스트리밍 프로토콜)의 약어로 실시간으로 음성이나 동영상을 접속하고 제어하기 위한 통신 규약을 말한다. 실제 데이터 전송을 위해서는 실시간 전송 프로토콜 RTP(Real-time Transport Protocol)와 실시간 전송 제어 프로토콜 RTCP(Real-time Transport Control Protocol) 등과 함께 사용되나 독자적인 전송 방식과도 연동 가능하다.
또한, 본 발명에서 언급하는 센싱 데이터(Sensing data)는 에지 디바이스(Edge Device)에서 발생되는 데이터로 상기 영상과 관련된 데이터일 수 있다.
구체적으로, 상기 센싱 데이터(Sensing data)는 상기 에지 디바이스(Edge Device) 내의 각종 센서로부터 수집된 데이터일 수 있다.
일례로, 상기 센싱 데이터(Sensing data)는 상기 영상과 관련된 온도, 강우, 진동, 공기오염도, 조도, 습도 등을 포함하는 데이터일 수 있다.
이로 인해, 상기 센싱 데이터(Sensing data)는 상기 영상과 취합되어 다양한 분야에서 빅 데이터를 구성할 수 있다.
일례로, 상기 영상이 급경사지 현장에서 촬영된 영상일 경우, 상기 센싱 데이터(Sensing data)는 상기 급경사지 현장의 변위, 경사, 간극수압, 체적함수비, 하중, 지하수위, 강우 및 온도를 포함하는 데이터를 계측하는 계측센서로부터 수집되는 데이터일 수 있고, 상기 센싱 데이터(Sensing data)와 상기 영상은 급경사지 재난 관리 분야의 빅데이터로 활용될 수 있다.
또한, 본 발명에서 언급하는 사용자 서버는 서버 환경을 수행하기 위한 다른 구성들이 포함될 수도 있고, 사용자 서버는 임의의 형태의 장치는 모두 포함할 수 있다.
일례로, 서버는 디지털 기기로서, 랩탑 컴퓨터, 노트북 컴퓨터, 데스크톱 컴퓨터, 웹 패드, 이동 전화기와 같이 프로세서를 탑재하고 메모리를 구비한 정보 처리 및 연산 능력을 갖춘 디지털 기기일 수 있다.
일례로, 서버는 웹 서버일 수 있다. 다만, 이에 한정하지 않고, 서버의 종류는 통상의 기술자에게 자명한 수준에서 다양하게 변경 가능하다.
상기 제1 시간 측정 모듈(100)은 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정할 수 있다.
또한, 상기 제1 시간 측정 모듈(100)은 측정된 상기 제1 시간의 정보를 후술될 상기 지연시간 산출 모듈(300)에 전달할 수 있다.
일례로, 상기 제1 시간은 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 영상이 저장되는 시점인 제1-1 시간 및 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 센싱 데이터(Sensing data)가 저장되는 시점인 제1-2 시간을 구비할 수 있다.
일례로, 상기 제1-1 시간은 상기 제1-2 시간과 동일한 시점일 수 있다.
일례로, 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는 상기 사용자 서버에서 상기 에지 디바이스(Edge Device)로 영상 재생 요청을 보내는 명령어인 재생 명령어(Play 명령어)를 구비할 수 있다.
구체적으로, 상기 영상 재생 요청은 상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장을 시작하고, 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)를 사용자 서버로 전달하는 요청일 수 있다.
또한, 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는 상기 사용자 서버에서 상기 에지 디바이스(Edge Device)에 영상 정지 요청을 보내는 명령어인 정지 명령어(Stop 명령어)를 더 구비할 수 있다.
일례로, 상기 영상 정지 요청은 상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장 및 전송을 중지하도록 하는 요청일 수 있다.
이로 인해, 후술될 주기 설정 모듈(500)은 상기 정지 명령어(Stop 명령어) 및 상기 재생 명령어(Play 명령어)을 통해 상기 지연시간의 재산출 주기를 설정할 수 있다.
상기 제2 시간 측정 모듈(200)은 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 전달되는 시점인 제2 시간을 측정할 수 있다.
또한, 상기 제2 시간 측정 모듈(200)은 측정된 상기 제2 시간의 정보를 후술될 상기 지연시간 산출 모듈(300) 및 상기 시간 매칭 모듈(400)에 전달할 수 있다.
일례로, 상기 제2 시간은 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버에 수신되는 시점인 제2-1 시간 및 상기 에지 디바이스(Edge Device)에 저장된 상기 센싱 데이터(Sensing data)가 상기 사용자 서버에 수신되는 시점인 제2-2 시간을 구비할 수 있다.
또한, 상기 제2-1 시간은 상기 제2-2 시간보다 더 늦게 상기 사용자 서버에 수신되는 시간일 수 있다.
일례로, 상기 에지 디바이스(Edge Device)로부터 상기 영상과 상기 센싱 데이터(Sensing data)가 동시에 전송될 경우, 상기 영상의 전송은 상기 센싱 데이터(Sensing data)의 전송에 비해 패킷의 크기 때문에 상기 센싱 데이터(Sensing data)의 도착 시점보다 늦게 사용자 서버에 도착하게 되고, 상기 제2-1 시간은 상기 제2-2 시간보다 더 늦게 상기 사용자 서버에 수신될 수 있다.
상기 지연시간 산출 모듈(300)은 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출할 수 있다.
또한, 상기 지연시간 산출 모듈(300)은 상기 제1 시간 측정 모듈(100) 및 상기 제2 시간 측정 모듈(200)로부터 상기 지연시간을 산출하기 위한 시간 정보를 수신할 수 있다.
또한, 상기 지연시간 산출 모듈(300)은 산출된 상기 지연시간의 정보를 후술될 상기 시간 매칭 모듈(400)에 전달할 수 있다.
일례로, 상기 지연시간 산출 모듈(300)은 상기 제1-1 시간과 상기 제2-1 시간의 차이 값을 통해 상기 지연시간을 산출할 수 있다.
일례로, 상기 제1-1 시간이 1초이고, 상기 제2-1 시간이 4초로 측정될 경우, 상기 지연시간은 3초일 수 있다.
상기 시간 매칭 모듈(400)은 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭할 수 있다.
또한, 시간 매칭 모듈(400)은 상기 지연시간 산출 모듈(300) 및 상기 제2 시간 측정 모듈(200)로부터 동일 시간대의 상기 영상과 상기 센싱 데이터(Sensing data)를 매칭하기 위한 시간 정보를 수신할 수 있다.
일례로, 상기 시간 매칭 모듈(400)은 상기 제2-1 시간과 상기 제2-2 시간을 비교할 때 상기 지연시간 만큼의 차이 값인 경우, 상기 영상과 상기 센싱 데이터(Sensing data)가 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)을 기준으로 상기 에지 디바이스(Edge Device)에서 동일 시간대에 저장된 것으로 추정하여 매칭할 수 있다.
일례로, 상기 지연시간이 3초일 경우, 상기 시간 매칭 모듈(400)은 상기 제2-1 시간과 상기 제2-2 시간을 비교하여 3초의 차이가 발생되는 상기 영상과 상기 센싱 데이터(Sensing data)을 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어) 기준으로 상기 에지 디바이스(Edge Device)에서 동일 시간대에 저장된 것으로 추정하여 서로 매칭할 수 있다.
상기 주기 설정 모듈(500)은 미리 정해진 방법에 의해 상기 지연시간의 재산출 주기를 설정할 수 있다.
일례로, 상기 미리 정해진 방법은 주기적으로 상기 에지 디바이스(Edge Device)에 정지 명령어(Stop 명령어)를 전송하여 상기 지연시간을 초기화한 다음, 다시 재생 명령어(Play 명령어)를 전송하여 지연시간이 재산출되도록 하는 방법일 수 있다.
이로 인해, 상기 주기 설정 모듈(500)은 산출된 지연시간 및 실제로 발생되는 지연시간 간에 발생되는 오차에 있어 상기 지연시간 재산출 주기를 설정하여 주기적으로 지연시간을 산출함으로써 상기 오차에 강건할 수 있다.
도 2는 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 시스템의 흐름도이다.
도 2를 참조하면, 본 발명의 RTSP를 이용한 영상과 데이터 동기화 시스템(10)은 상술된 모듈들을 통해서 영상과 센싱 데이터(Sensing data)를 동일 시간대로 동기화할 수 있다.
RTSP는 영상 전송 전용 프로토콜이기 때문에 영상을 분석한 데이터나 영상 외에 각종 센서를 통해 획득된 데이터 등과 같은 영상 외의 데이터(센싱 데이터(Sensing data))와는 같이 전송될 수 없다.
이로 인해, RTSP를 이용하여 영상 및 센싱 데이터(Sensing data)를 전송할 경우, 전송 시 발생되는 변수들에 대해서 독립적으로 영향을 받기 때문에 전송된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 도착하는 시점은 달라지게 된다.
본 발명은 위와 같은 문제점을 해결하고자, RTSP를 이용한 영상과 데이터 동기화 시스템(10)을 통해 영상과 센싱 데이터(Sensing data)를 동일 시간대로 동기화할 수 있다.
구체적으로, 상기 제1 시간 측정 모듈(100)을 통해 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 영상이 저장되는 시점인 제1-1 시간 및 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 센싱 데이터(Sensing data)가 저장되는 시점인 제1-2 시간을 측정한다.
다음으로, 상기 제2 시간 측정 모듈(200)을 통해 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버에 수신되는 시점인 제2-1 시간 및 및 상기 에지 디바이스(Edge Device)에 저장된 상기 센싱 데이터(Sensing data)가 상기 사용자 서버에 수신되는 시점인 제2-2 시간을 측정한다.
다음으로, 상기 지연시간 산출 모듈(300)을 통해 상기 제1-1 시간과 상기 제2-1 시간의 차이 값을 통해 상기 지연시간을 산출하고, 상기 시간 매칭 모듈(400)을 통해 상기 제2-1 시간과 상기 제2-2 시간을 비교하여 상기 지연시간 만큼의 차이 값인 경우, 상기 영상과 상기 센싱 데이터(Sensing data)가 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)을 기준으로 상기 에지 디바이스(Edge Device)에서 동일 시간대에 저장된 것으로 추정하여 매칭한다.
이때, 상기 주기 설정 모듈(500)을 통해 산출된 지연시간 및 실제로 발생되는 지연시간 간에 발생되는 오차에 있어 상기 재산출 주기를 설정하여 주기적으로 지연시간을 산출함으로써 상기 오차에 강건할 수 있고, 영상과 센싱 데이터(Sensing data)의 동시간대 동기화의 정확도가 향상될 수 있다.
이로 인해, 동기화된 정보는 다양한 분야에서 빅데이터로 활용될 수 있다.
이하, 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 방법에 자세한 설명은 상술한 내용과 중복되는 한도에서 생략될 수 있다.
또한, 후술될 상기 RTSP를 이용한 영상과 데이터 동기화 방법은 상기 RTSP를 이용한 영상과 데이터 동기화 시스템(10)에 의해 가장 적합하게 구현될 수 있다.
도 3은 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 방법의 순서도이다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 RTSP를 이용한 영상과 데이터 동기화 방법은, RTSP를 이용한 영상과 데이터 동기화 시스템(10)을 통해 영상과 데이터를 동기화하는 방법에 있어서, 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 단계인 제1 시간 측정 단계(S100), 상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 전달되는 시점인 제2 시간을 측정하는 단계인 제2 시간 측정 단계(S200), 상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 단계인 지연시간 산출 단계(S300) 및 상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 단계인 시간 매칭 단계(S400)를 포함할 수 있다.
또한, 미리 정해진 방법에 의해 상기 지연시간의 재산출 주기를 설정하는 단계인 주기 설정 단계를 더 포함할 수 있다.
또한, 상기 미리 정해진 방법은 주기적으로 상기 에지 디바이스(Edge Device)에 정지 명령어(Stop 명령어)를 전송하여 상기 지연시간을 초기화한 다음, 다시 재생 명령어(Play 명령어)를 전송하여 지연시간이 재산출되도록 하는 방법일 수 있다.
첨부된 도면은 본 발명의 기술적 사상을 보다 명확하게 표현하기 위해, 본 발명의 기술적 사상과 관련성이 없거나 떨어지는 구성에 대해서는 간략하게 표현하거나 생략하였다.
상기에서는 본 발명에 따른 실시예를 기준으로 본 발명의 구성과 특징을 설명하였으나 본 발명은 이에 한정되지 않으며, 본 발명의 사상과 범위 내에서 다양하게 변경 또는 변형할 수 있음은 본 발명이 속하는 기술분야의 당업자에게 명백한 것이며, 따라서 이와 같은 변경 또는 변형은 첨부된 특허청구범위에 속함을 밝혀둔다.

삭제

100 : 제1 시간 측정 모듈 200 : 제2 시간 측정 모듈
300 : 지연시간 산출 모듈 400 : 시간 매칭 모듈
500 : 주기 설정 모듈

Claims

실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 제1 시간 측정 모듈;
상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 수신되는 시점인 제2 시간을 측정하는 제2 시간 측정 모듈;
상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 지연시간 산출 모듈; 및
상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 시간 매칭 모듈;을 포함하고,
상기 제1 시간은,
상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 영상이 저장되는 시점인 제1-1 시간 및 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 상기 에지 디바이스(Edge Device)에서 센싱 데이터(Sensing data)가 저장되는 시점인 제1-2 시간을 구비하고, 상기 제1-1 시간은 상기 제1-2 시간과 동일한 시점이고,
상기 제2 시간은,
상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버에 수신되는 시점인 제2-1 시간 및 상기 에지 디바이스(Edge Device)에 저장된 상기 센싱 데이터(Sensing data)가 상기 사용자 서버에 수신되는 시점인 제2-2 시간을 구비하고, 상기 제2-1 시간은 상기 제2-2 시간보다 더 늦게 상기 사용자 서버에 수신되는 시간이고,
상기 지연시간 산출 모듈은,
상기 제1-1 시간과 상기 제2-1 시간의 차이 값을 통해 상기 지연시간을 산출하고,
상기 시간 매칭 모듈은,
상기 제2-1 시간과 상기 제2-2 시간을 비교할 때 상기 지연시간 만큼의 차이 값인 경우, 상기 영상과 상기 센싱 데이터(Sensing data)가 상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)을 기준으로 상기 에지 디바이스(Edge Device)에서 동일 시간대에 저장된 것으로 추정하여 매칭하는,
RTSP를 이용한 영상과 데이터 동기화 시스템.
제1항에 있어서,
상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는,
상기 사용자 서버에서 상기 에지 디바이스(Edge Device)로 영상 재생 요청을 보내는 명령어인 재생 명령어(Play 명령어)를 구비하고,
상기 영상 재생 요청은,
상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장을 시작하고, 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)를 사용자 서버로 전달하는 요청인,
RTSP를 이용한 영상과 데이터 동기화 시스템.
삭제
삭제
삭제
삭제
제2항에 있어서,
상기 실시간스트리밍 프로토콜 명령어(RTSP 명령어)는,
상기 사용자 서버에서 상기 에지 디바이스(Edge Device)에 영상 정지 요청을 보내는 명령어인 정지 명령어(Stop 명령어)를 더 구비하고,
상기 영상 정지 요청은,
상기 에지 디바이스(Edge Device)가 영상 및 센싱 데이터(Sensing data)의 저장 및 전송을 중지하도록 하는 요청인,
RTSP를 이용한 영상과 데이터 동기화 시스템.
제7항에 있어서,
미리 정해진 방법에 의해 상기 지연시간의 재산출 주기를 설정하는 주기 설정 모듈;을 더 포함하는,
RTSP를 이용한 영상과 데이터 동기화 시스템.
제8항에 있어서,
상기 미리 정해진 방법은,
주기적으로 상기 에지 디바이스(Edge Device)에 정지 명령어(Stop 명령어)를 전송하여 상기 지연시간을 초기화한 다음, 다시 재생 명령어(Play 명령어)를 전송하여 지연시간이 재산출되도록 하는 방법인,
RTSP를 이용한 영상과 데이터 동기화 시스템.
제1항의 RTSP를 이용한 영상과 데이터 동기화 시스템을 통해 영상과 데이터를 동기화하는 방법에 있어서,
실시간스트리밍 프로토콜 명령어(RTSP 명령어)에 의해 에지 디바이스(Edge Device)에서 영상 및 센싱 데이터(Sensing data)가 저장되는 시점인 제1 시간을 측정하는 단계인 제1 시간 측정 단계;
상기 에지 디바이스(Edge Device)에 저장된 상기 영상 및 상기 센싱 데이터(Sensing data)가 사용자 서버에 전달되는 시점인 제2 시간을 측정하는 단계인 제2 시간 측정 단계;
상기 에지 디바이스(Edge Device)에 저장된 상기 영상이 상기 사용자 서버로 전달될 때 소요되는 시간인 지연시간을 산출하는 단계인 지연시간 산출 단계; 및
상기 지연시간을 이용하여 상기 영상과 상기 센싱 데이터(Sensing data)의 저장 시점이 일치하는 것 끼리 매칭하는 단계인 시간 매칭 단계;를 포함하는,
RTSP를 이용한 영상과 데이터 동기화 방법.