KR20210085609A - video surveillance system by use of core VMS and edge VMS in mobile edge computing - Google Patents

video surveillance system by use of core VMS and edge VMS in mobile edge computing Download PDF

Info

Publication number
KR20210085609A
KR20210085609A KR1020190178845A KR20190178845A KR20210085609A KR 20210085609 A KR20210085609 A KR 20210085609A KR 1020190178845 A KR1020190178845 A KR 1020190178845A KR 20190178845 A KR20190178845 A KR 20190178845A KR 20210085609 A KR20210085609 A KR 20210085609A
Authority
KR
South Korea
Prior art keywords
vms
edge
core
mobile
mobile device
Prior art date
Application number
KR1020190178845A
Other languages
Korean (ko)
Other versions
KR102300124B1 (en
Inventor
김형헌
이성진
허영주
Original Assignee
이노뎁 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이노뎁 주식회사 filed Critical 이노뎁 주식회사
Priority to KR1020190178845A priority Critical patent/KR102300124B1/en
Publication of KR20210085609A publication Critical patent/KR20210085609A/en
Application granted granted Critical
Publication of KR102300124B1 publication Critical patent/KR102300124B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2223Secondary servers, e.g. proxy server, cable television Head-end being a public access point, e.g. for downloading to or uploading from clients
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1002
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

The present invention relates generally to a video surveillance system based on mobile edge computing (MEC) that quickly processes real-time video data generated from mobile devices such as CCTV cameras, drones, smart terminals, and vehicle black boxes and provides a surveillance service using the information obtained therefrom. In particular, the present invention relates to a video surveillance system based on mobile edge computing that adopts a dual resource operation method in which computing resources are layered into edge and core, allows an edge VMS to perform real-time processing of metadata that requires immediate response through management of large-capacity data, image analysis, and situational awareness, allows a core VMS to store and manage various metadata collected from multiple edges and perform context analysis and data visualization, and making decisions based thereon, thereby achieving utilization of distributed local resources and improvement of operational efficiency. According to the present invention, by adopting dual resource operation in which the computing resources of a video surveillance system are layered into an edge and a core, there are advantages in that large-capacity remote data generated in real time from a mobile device can be utilized for surveillance purpose and the management efficiency of the video surveillance system can be improved. The video surveillance system includes a mobile edge computing (MEC) cloud system and a core cloud system.

Description

코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템 {video surveillance system by use of core VMS and edge VMS in mobile edge computing}{video surveillance system by use of core VMS and edge VMS in mobile edge computing}

본 발명은 일반적으로 CCTV 카메라, 드론, 스마트 단말, 차량용 블랙박스 등의 모바일 디바이스에서 생성되는 실시간 영상 데이터를 신속하게 처리하고 이로부터 얻어지는 정보를 이용하여 관제 서비스를 제공하는 모바일 엣지 컴퓨팅(MEC) 기반의 영상 관제 시스템에 관한 것이다.The present invention is based on mobile edge computing (MEC), which generally processes real-time image data generated from mobile devices such as CCTV cameras, drones, smart terminals, and vehicle black boxes and provides a control service using the information obtained therefrom. of the video control system.

특히, 본 발명은 컴퓨팅 자원을 엣지와 코어로 계층화한 이원화된 자원 운영 방식을 채택하여 엣지 VMS(Edge VMS)에서는 대용량 데이터의 관리와 영상 분석, 그리고 상황 인지를 통해 즉각적 대응이 필요한 메타데이터의 실시간 처리룰 수행하고 코어 VMS(Core VMS)에서는 여러 엣지에서 수집되는 다양한 메타데이터를 저장 관리하고 컨텍스트 분석 및 데이터 시각화, 그리고 이에 기초한 의사 결정을 수행하도록 구성함으로써 분산 로컬 자원의 활용 및 운영 효율 개선을 달성한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템에 관한 것이다.In particular, the present invention adopts a dual resource operation method in which computing resources are layered into edges and cores, so that in Edge VMS, it is real-time of metadata that requires immediate response through management of large amounts of data, image analysis, and situational awareness. By executing processing rules and configuring to store and manage various metadata collected from multiple edges, context analysis, data visualization, and decision making based on this, the core VMS achieves utilization of distributed local resources and improvement of operational efficiency It is related to a video control system based on a mobile edge computing.

최근들어 정보통신기술(ICT) 분야에서는 엣지 컴퓨팅(Edge Computing)에 대한 관심이 높다. 엣지 컴퓨팅은 시스템의 말단 영역, 즉 엣지(Edge)에 연산처리 성능을 부여하는 개념인데, 이 '엣지'는 기기(device)일 수도 있고 기계(machine)일 수도 있으며 사물(Thing)일 수도 있다. 엣지 컴퓨팅 기술을 이용하면 인터넷 연결 없이도 복잡한 판단을 자체적으로 수행할 수 있기 때문에 실시간 대응이 필요한 분야, 예컨대 자율주행, 스마트 팩토리, 가상현실(VR) 등에서 관심이 많다. 이때, 데이터를 생성하는 디바이스가 모바일(mobile) 속성을 가지게 되면 '모바일 엣지 컴퓨팅(Mobile Edge Computing, MEC)'이라고 부른다. Recently, in the field of information and communication technology (ICT), interest in edge computing is high. Edge computing is a concept that gives computational processing performance to the edge region of the system, that is, the edge. This 'edge' may be a device, a machine, or a thing. Because edge computing technology can make complex decisions on its own without an internet connection, there is a lot of interest in fields that require real-time responses, such as autonomous driving, smart factories, and virtual reality (VR). In this case, when a device that generates data has a mobile property, it is called 'mobile edge computing (MEC)'.

최근들어 모바일 속성을 갖는 각종 디바이스들, 예컨대 이동형 CCTV 카메라, 드론(Drone), 스마트 단말(스마트폰), 차량용 블랙박스 등이 각자 나름대로의 필요에 의해 다수 보급되어 있으며 이들로부터 대량의 데이터가 생성되고 있다. 이들이 생성하는 영상 데이터(영상 스트림)에는 유용한 정보가 포함되어 있으므로, 이들 데이터를 신속하게 처리하여 이로부터 유용한 정보를 얻어 그에 맞게 즉각적으로 대응한다면 관제 목적에 유용할 것이다. 예를 들어, 영상 데이터를 분석하여 긴급 상황이나 범죄 상황, 혹은 재난 상황을 신속하게 판단하고 112, 119 등의 현장 출동이 즉각 이루어질 수 있도록 하고자 한다. Recently, various devices with mobile properties, such as mobile CCTV cameras, drones, smart terminals (smartphones), vehicle black boxes, etc., have been disseminated for their own needs, and a large amount of data is generated from them. have. Since the video data (video stream) they generate contains useful information, it will be useful for control purposes if the data is processed quickly to obtain useful information from it and respond immediately accordingly. For example, by analyzing video data, it is intended to quickly determine an emergency situation, a crime situation, or a disaster situation, so that 112, 119, etc. can be dispatched to the scene immediately.

특히, 5G를 비롯하여 모바일 네트워크가 고도화되면서 모바일 엣지에서 생성되는 데이터를 활용하는 다양한 서비스 모델에 대한 논의가 예상된다. 예를 들면, 드론관제, 시민 참여형 영상제보, 이동형 CCTV 관제, 자율주행 차량의 데이터를 활용하는 서비스 모델을 들 수 있다. 모바일 엣지 컴퓨팅을 이용하여 영상 관제 시스템을 구축하려면 다수의 모바일 디바이스에서 각자 실시간 생성되는 대규모의 실시간 영상 데이터를 신속하고 효과적으로 처리할 수 있어야 하고, 이들 정보를 효과적으로 활용할 수 있는 플랫폼 기술이 요구된다.In particular, as mobile networks become more advanced, including 5G, discussions are expected on various service models that utilize data generated at the mobile edge. For example, drone control, citizen participation-type video reporting, mobile CCTV control, and service models that utilize data from autonomous vehicles are available. In order to build a video control system using mobile edge computing, it is necessary to quickly and effectively process large-scale real-time video data generated in real time from multiple mobile devices, and a platform technology that can effectively utilize this information is required.

본 발명의 목적은 일반적으로 CCTV 카메라, 드론, 스마트 단말, 차량용 블랙박스 등의 모바일 디바이스에서 생성되는 실시간 영상 데이터를 신속하게 처리하고 이로부터 얻어지는 정보를 이용하여 관제 서비스를 제공하는 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템을 제공하는 것이다.An object of the present invention is to rapidly process real-time image data generated from mobile devices, such as CCTV cameras, drones, smart terminals, and vehicle black boxes, in general, and provide a control service using the information obtained therefrom. To provide a video control system.

특히, 본 발명의 목적은 컴퓨팅 자원을 엣지와 코어로 계층화한 이원화된 자원 운영 방식을 채택하여 엣지 VMS에서는 대용량 데이터의 관리와 영상 분석, 그리고 상황 인지를 통해 즉각적 대응이 필요한 메타데이터의 실시간 처리룰 수행하고 코어 VMS에서는 여러 엣지에서 수집되는 다양한 메타데이터를 저장 관리하고 컨텍스트 분석 및 데이터 시각화, 그리고 이에 기초한 의사 결정을 수행하도록 구성함으로써 분산 로컬 자원의 활용 및 운영 효율 개선을 달성한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템을 제공하는 것이다.In particular, it is an object of the present invention to adopt a dualized resource operation method in which computing resources are layered into edge and core, so that in the edge VMS, real-time processing rules for metadata that require immediate response through management of large amounts of data, image analysis, and situational awareness In the core VMS, it is a mobile edge computing based mobile edge computing that achieves utilization of distributed local resources and improvement of operational efficiency by storing and managing various metadata collected from multiple edges, performing context analysis and data visualization, and making decisions based on them. To provide a video control system.

한편, 본 발명의 해결 과제는 이들 사항에 제한되지 않으며 본 명세서의 기재로부터 다른 해결 과제가 이해될 수 있다.On the other hand, the problem to be solved of the present invention is not limited to these matters and other problems to be solved can be understood from the description of the present specification.

상기의 목적을 달성하기 위하여 본 발명은 지리적으로 자신의 담당 영역에 존재하는 일군의 모바일 디바이스(10)에서 생성되는 실시간 영상 데이터를 네트워크로 제공받아 분석 처리하고, 실시간 영상 데이터 및 그 분석 결과에 따른 메타데이터를 코어 클라우드 시스템(200)으로 전달하며, 영상 분석 결과에 의해 미리 설정된 긴급 상황이라고 판단되는 경우에는 현장에서 조치가 취해질 수 있도록 분석 정보를 처리하도록 구성되는 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템(100); 지리적으로 분산 형성된 다수의 MEC 클라우드 시스템(100)으로부터 실시간 영상 데이터 및 메타데이터를 제공받아 수집 관리하고, 그 수집된 메타데이터에 기초하여 컨텍스트 분석 및 데이터 시각화, 의사 결정 중 적어도 하나이상을 수행하는 코어 클라우드 시스템(200);를 포함하여 구성되는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템을 제공한다.In order to achieve the above object, the present invention receives and analyzes real-time image data generated by a group of mobile devices 10 geographically located in its own area through a network, and analyzes and processes the real-time image data according to the analysis result. A mobile edge computing (MEC) cloud system configured to deliver metadata to the core cloud system 200 and process the analysis information so that actions can be taken on the spot when it is determined that it is a preset emergency by the image analysis result 100); A core that receives and manages real-time image data and metadata from a plurality of geographically dispersed MEC cloud systems 100, and performs at least one of context analysis, data visualization, and decision-making based on the collected metadata It provides a mobile edge computing-based video control system having a core VMS and an edge VMS configured to include; the cloud system 200 .

본 발명에서 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템(100)은, 해당 MEC 클라우드에 속하는 일군의 모바일 디바이스(10)로부터 실시간 영상 데이터를 제공받아 대용량 영상 저장, 영상 분석을 통한 메타데이터 생성, 상황인지 및 대응을 수행하고, 해당 MEC 클라우드에서 생성된 실시간 영상 데이터를 동일 MEC 클라우드에 속하는 엣지 영상처리 시스템(120) 및 코어 클라우드 시스템(200)으로 릴레이 분배 전달하는 엣지 VMS 시스템(110);를 구비한다.In the present invention, the mobile edge computing (MEC) cloud system 100 receives real-time image data from a group of mobile devices 10 belonging to the corresponding MEC cloud, stores large-capacity images, generates metadata through image analysis, recognizes the situation and and an edge VMS system 110 that performs a response and relays and distributes real-time image data generated in the corresponding MEC cloud to the edge image processing system 120 and the core cloud system 200 belonging to the same MEC cloud.

또한, 본 발명에서 코어 클라우드 시스템(200)은, 다수의 엣지 VMS 시스템(110)으로부터 코어 클라우드 시스템(200)으로 전달 수집되는 실시간 영상 데이터 및 메타데이터를 레코딩 저장하고 메타데이터에 기초하여 컨텍스트 분석, 데이터 시각화, 의사 결정 등을 수행하며, 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 세션 연결 관리를 위한 디바이스 프로비저닝을 수행하는 코어 VMS 시스템(210);을 구비한다.In addition, in the present invention, the core cloud system 200 records and stores real-time image data and metadata that are transmitted and collected from a plurality of edge VMS systems 110 to the core cloud system 200, and context analysis based on the metadata, and a core VMS system 210 that performs data visualization, decision-making, and the like, and performs device provisioning for session connection management between the mobile device 10 and the edge VMS system 110 .

또한, 본 발명에서 코어 VMS 시스템(210)은, 모바일 디바이스(10)에 대한 상호 인증을 수행하고, 모바일 디바이스(10)의 지리적 이동 특성에 대응하여 다수의 MEC 클라우드 시스템(100) 중에서 모바일 디바이스(10)에 대해 미리 설정된 평가 기준에 따른 최적의 MEC 클라우드 시스템(100)을 탐색하고, 그 탐색된 MEC 클라우드 시스템(100)에 대응하는 엣지 VMS 시스템(110)과의 세션 연결 관리를 수행하는 프로비전 서비스부(211);를 구비할 수 있다.In addition, in the present invention, the core VMS system 210 performs mutual authentication for the mobile device 10, and in response to the geographical movement characteristics of the mobile device 10, a mobile device ( 10), a provision that searches for the optimal MEC cloud system 100 according to the evaluation criteria set in advance, and performs session connection management with the edge VMS system 110 corresponding to the discovered MEC cloud system 100 A service unit 211; may be provided.

또한, 본 발명에서 프로비전 서비스부(211)는 그 등록 확인된 특정의 모바일 디바이스(10)의 연결 관리를 위하여 코어 클라우드 시스템(200)의 관리자 클라이언트 처리부(231)로부터 프로비전 데이터베이스의 업데이트 요청을 받으면 해당 모바일 디바이스(10)의 정보를 데이터베이스에 입력한 후에 해당 모바일 디바이스(10)의 연결 인증을 위한 액세스 토큰을 제공하여 상호인증을 수행하고, 관리자 클라이언트 처리부(231)는 프로비전 서비스부(211)로부터 제공받은 액세스 토큰 및 자신이 해당 모바일 디바이스(10)에 발급한 사용자 계정 정보를 해당 모바일 디바이스(10)에 제공하도록 구성될 수 있다.In addition, in the present invention, the provisioning service unit 211 receives a request for updating the provisioning database from the manager client processing unit 231 of the core cloud system 200 for connection management of the specific mobile device 10 whose registration is confirmed. Upon receiving, after inputting information of the corresponding mobile device 10 into the database, an access token for connection authentication of the corresponding mobile device 10 is provided to perform mutual authentication, and the manager client processing unit 231 provides the provisioning service unit 211 ) may be configured to provide an access token provided from the user and user account information issued to the corresponding mobile device 10 to the corresponding mobile device 10 .

또한, 본 발명에서 코어 VMS 시스템(210)은 모바일 디바이스(10)로부터 위 상호인증에서 제공받은 액세스 토큰을 제시하면서 연결 요구를 제공받으면, 코어 VMS 시스템(210)의 프로비전 서비스부(211)는 해당 액세스 토큰이 유효한 것인지 여부를 확인하도록 구성될 수 있다.In addition, in the present invention, when the core VMS system 210 receives a connection request while presenting the access token provided in the above mutual authentication from the mobile device 10, the provisioning service unit 211 of the core VMS system 210 is It may be configured to check whether the corresponding access token is valid.

또한, 본 발명에서 프로비전 서비스부(211)는 모바일 디바이스(10)와 엣지 VMS 시스템(110) 사이에 대해 최단거리 우선, 연결 구간의 최단 홉을 탐색하는 최단 경로 우선, 고속 네트워크를 탐색하는 네트워크 대역폭 우선 중 어느 하나의 평가 기준에 따라 프로비전 경로를 탐색하도록 구성될 수 있다.In addition, in the present invention, the provisioning service unit 211 searches for the shortest distance first, the shortest route search for the shortest hop of the connection section between the mobile device 10 and the edge VMS system 110, and the network for searching the high-speed network It may be configured to search the provisioning path according to any one of the evaluation criteria of bandwidth preference.

또한, 본 발명에서 엣지 VMS 시스템(110)은 프로비전 경로에 따라 모바일 디바이스(10)로부터 실시간 동영상 데이터를 제공받고, 실시간 동영상 데이터를 코어 VMS 시스템(210)으로 릴레이 전송하며, 동일 MEC 클라우드 시스템(100)의 엣지 영상처리 시스템(120)으로부터 데이터 요구를 받으면 엣지 분배 서비스부(112)를 통해 실시간 영상 데이터를 엣지 영상처리 시스템(120)으로 분배하도록 구성될 수 있다.In addition, in the present invention, the edge VMS system 110 receives real-time video data from the mobile device 10 according to the provision path, and relays the real-time video data to the core VMS system 210, and the same MEC cloud system ( When a data request is received from the edge image processing system 120 of 100 , it may be configured to distribute real-time image data to the edge image processing system 120 through the edge distribution service unit 112 .

본 발명에 따르면 영상 관제 시스템의 컴퓨팅 자원을 엣지와 코어로 계층화한 이원화된 자원 운영을 채택함으로써 모바일 디바이스에서 실시간으로 생성되는 대용량의 원격지 데이터를 관제 목적에 활용할 수 있고 영상 관제 시스템의 관리 효율을 향상할 수 있는 장점이 있다. According to the present invention, by adopting dualized resource operation in which the computing resources of the video control system are layered into edge and core, large-capacity remote data generated in real-time from mobile devices can be utilized for control purposes, and management efficiency of the video control system is improved. There are advantages to doing.

또한, 본 발명에 따르면 분산 환경에서 수집 데이터의 저장, 분배, 활용 관리를 계층화하고 엣지 VMS에서 일차적인 데이터 분석 및 대응을 담당하도록 구성함으로써 종래의 맹목적인 데이터 수집 및 저장으로 인한 서버 및 스토리지 자원의 낭비 문제를 개선할 수 있는 장점이 있다.In addition, according to the present invention, by tiering the storage, distribution, and utilization management of collected data in a distributed environment, and configuring the edge VMS to take charge of primary data analysis and response, the waste of server and storage resources due to the conventional blind data collection and storage There are advantages to improving the problem.

또한, 본 발명에 따르면 엣지 VMS의 컴퓨팅 자원을 통해 실시간 데이터 스트림의 유실을 방지할 수 있는 장점이 있다.In addition, according to the present invention, there is an advantage in that the loss of the real-time data stream can be prevented through the computing resources of the edge VMS.

또한, 본 발명에 따르면 사용자로부터의 다양한 형태의 관제 서비스 요구에 대응하여 요구 각각의 속성에 따라 엣지 대응 방식 또는 코어 활용 방식으로 개별 서비스를 제공할 수 있는 장점이 있다.In addition, according to the present invention, there is an advantage that individual services can be provided in an edge response method or a core utilization method according to the properties of each request in response to various types of control service requests from users.

또한, 본 발명에 따르면 엣지 VMS와 코어 VMS로 계층화된 아키텍처를 채택함에 따라 지리적으로 멀리 떨어진 장소에서 수집되거나 5G 등과 같은 초고속 모바일 네트워크를 통하여 수집되는 대용량 실시간 영상 데이터에 대한 영상 처리 효율을 개선할 수 있는 장점이 있다.In addition, according to the present invention, by adopting a layered architecture with an edge VMS and a core VMS, it is possible to improve image processing efficiency for large-capacity real-time image data collected from geographically distant places or collected through high-speed mobile networks such as 5G. there are advantages to

[도 1]은 본 발명에 따른 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템의 전체 구성을 개념적으로 나타내는 도면.
[도 2]는 본 발명에 따른 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템의 기능적 구성을 개념적으로 나타내는 도면.
[도 3]은 본 발명에 따른 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템의 인터페이스 다이어그램을 나타내는 도면.
[도 4]는 본 발명의 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템에서 모바일 디바이스의 상호인증 절차를 나타내는 도면.
[도 5]는 본 발명의 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템에서 데이터 전송 경로 설정 절차를 나타내는 도면.
1 is a diagram conceptually showing the overall configuration of a video control system based on mobile edge computing according to the present invention.
2 is a diagram conceptually showing the functional configuration of a video control system based on mobile edge computing according to the present invention.
[Figure 3] is a diagram showing an interface diagram of a video control system based on mobile edge computing according to the present invention.
[Figure 4] is a diagram showing a mutual authentication procedure of a mobile device in the video control system based on the mobile edge computing of the present invention.
[Figure 5] is a diagram showing a data transmission path setting procedure in the video control system based on the mobile edge computing of the present invention.

이하에서는 도면을 참조하여 본 발명을 상세하게 설명한다.Hereinafter, the present invention will be described in detail with reference to the drawings.

[도 1]은 본 발명에 따른 모바일 엣지 컴퓨팅(MEC) 기반의 영상 관제 시스템의 전체 구성을 개념적으로 나타내는 도면이다. [FIG. 1] is a diagram conceptually showing the overall configuration of a mobile edge computing (MEC)-based video control system according to the present invention.

[도 1]을 참조하면, 본 발명의 영상 관제 시스템은 전체적으로 엣지 VMS 시스템(110)과 코어 VMS 시스템(210)으로 이루어진다. 이를 통해, 시스템 전체의 컴퓨팅 자원(computing resource)을 엣지(Edge)와 코어(Core)로 계층화하여 이원화된 자원 운영을 수행하고, 이기종의 대용량 도시데이터(예: Video, IoT, Control 등)를 분산 처리하며, 데이터의 성격(실시간성, 지속성, 무결성, 즉각성 등)에 따라 자원을 계층화함으로써 서비스 가용성을 높인다.Referring to FIG. 1 , the video control system of the present invention is composed of an edge VMS system 110 and a core VMS system 210 as a whole. Through this, the system-wide computing resource is layered into edge and core to perform dual resource operation, and heterogeneous large-capacity city data (e.g., Video, IoT, Control, etc.) is distributed. It processes and increases service availability by tiering resources according to the nature of data (real-time, persistence, integrity, immediacy, etc.).

엣지 VMS 시스템(Edge Video Management Solution System)(110)은 해당 엣지에서 생성되는 대용량 영상데이터를 처리 및 관리를 수행하는데, 특히 해당 엣지 영역에서의 영상 분석 결과에 따라 즉각적 대응의 실시간 처리를 수행한다. 예를 들어, 영상분석을 통해 긴급 이벤트(예: 화재, 침입, 폭발, 교통사고 등)를 탐지하고 이들 긴급 이벤트에 대한 메타데이터를 생성하며 이들 긴급 이벤트에 대응하는 조치(예: 관제센터 알람)를 취할 수 있다. 엣지 VMS 시스템(110)은 자신이 담당하는 엣지 영역에서 생성된 정보를 코어 VMS 시스템(210)으로 전달한다.The edge VMS system (Edge Video Management Solution System) 110 processes and manages large-capacity image data generated at the edge, in particular, performs real-time processing of an immediate response according to the image analysis result in the corresponding edge area. For example, video analysis to detect emergency events (e.g. fire, intrusion, explosion, traffic accident, etc.), create metadata for these emergency events, and take actions to respond to these emergency events (e.g. control center alarm) can take The edge VMS system 110 transmits information generated in the edge area it is responsible for to the core VMS system 210 .

코어 VMS 시스템(Core Video Management Solution System)(210)은 다수의 에지 VMS 시스템(110)으로부터 수집된 정보(데이터)를 이용하여 관제사 또는 상위 관리자로 제공하고 중앙관리를 수행한다.The core VMS system (Core Video Management Solution System) 210 uses information (data) collected from a plurality of edge VMS systems 110 to provide it to a controller or a higher-level administrator and perform central management.

이와 같은 엣지 VMS와 코어 VMS로 이루어진 영상 관제 플랫폼을 통해 모바일 엣지 디바이스의 특성을 보장하고 원할한 데이터 전송을 지원할 수 있다. 예를 들어, 모바일 엣지 디바이스에서 생성되는 대용량 다채널의 영상데이터을 효과적으로 처리할 수 있도록 하고, 모바일 엣지 디바이스의 위치 및 속성에 따라 고속 통신, 세션 유지, 연결 경로 설정 등을 달성한다.Through this video control platform composed of edge VMS and core VMS, it is possible to guarantee the characteristics of mobile edge devices and support smooth data transmission. For example, it enables effective processing of large-capacity multi-channel image data generated by mobile edge devices, and achieves high-speed communication, session maintenance, and connection path setting according to the location and properties of the mobile edge device.

본 발명에서 엣지 VMS 시스템(110)은 각자 자신이 담당하는 엣지 영역에 대하여 모바일 디바이스(10)와의 직접적인 연결을 통해 실시간 대용량 데이터를 신속하게 연결 및 수집한다. 그리고 나서, 엣지 VMS 시스템(110)은 모바일 엣지 디바이스(10)에 대하여 데이터 릴레이(data relay), 즉 코어 VMS 시스템(210)으로의 연결을 제공한다. 또한, 엣지 VMS 시스템(110)은 엣지 분배(edge redistribution), 즉 해당 엣지 영역에서 발생된 영상을 분석하고 그에 따라 다른 시스템(예: 써드파티 장치, 외부 시스템)으로 영상 분배를 수행한다.In the present invention, the edge VMS system 110 quickly connects and collects real-time large-capacity data through direct connection with the mobile device 10 for the edge region each of them is responsible for. Then, the edge VMS system 110 provides a data relay for the mobile edge device 10 , that is, a connection to the core VMS system 210 . In addition, the edge VMS system 110 performs edge redistribution, that is, analyzes an image generated in the corresponding edge area, and distributes the image to other systems (eg, a third-party device, an external system) according to the analysis.

본 발명에서 코어 VMS 시스템(210)은 모바일 디바이스(10)에 대하여 각자가 연결할 엣지 VMS 시스템(110)의 정보를 제공하고 모바일 디바이스(10)의 등록 및 네트워크 상태 등을 통합 모니터링한다. 또한, 코어 VMS 시스템(210)은 엣지 VMS 시스템(110)에서 수신되는 데이터(영상 데이터, 메타데이터 등)를 저장하고, 디바이스 프로비저닝(provisioning) 서비스를 제공한다. In the present invention, the core VMS system 210 provides information on the edge VMS system 110 to be connected to the mobile device 10 and monitors the registration and network status of the mobile device 10 in an integrated manner. In addition, the core VMS system 210 stores data (image data, metadata, etc.) received from the edge VMS system 110 and provides a device provisioning service.

본 발명에서는 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 신속한 연결을 위하여 가장 효율적인 경로(즉, 프로비전 경로)를 탐색 및 유지 관리하는데, 프로비저닝 서비스는 모바일 엣지 디바이스의 연결 관리 기능에 해당한다. 프로비저닝 서비스를 통해 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간에 최단거리 우선(shortest distance), 고속 네트워크 우선(네트워크 대역폭 우선)(bandwidth priority), 연결 구간의 최단 홉(Hop) 우선(최단 경로 우선)(shortest path)의 기준 중 어느 하나에 따라 가장 우수한 연결 경로로 판단되는 경로(프로비전 경로)를 탐색 및 선택한다.In the present invention, the most efficient path (ie, provisioning path) is searched for and maintained for a quick connection between the mobile device 10 and the edge VMS system 110, and the provisioning service corresponds to the connection management function of the mobile edge device. . Shortest distance between the mobile device 10 and the edge VMS system 110 through the provisioning service, high-speed network priority (network bandwidth priority), shortest hop priority (shortest path) of the connection section First, a path (provision path) determined to be the best connection path according to any one of the criteria of (shortest path) is searched and selected.

이처럼 모바일 엣지 컴퓨팅(MEC) 아키텍처, 즉 MEC 계층과 코어(Core) 계층으로 구분된 구조를 활용하는데, 이를 통해, 지리적으로 떨어져 있거나 5G 등과 같은 초고속 모바일 네트워크를 통해 수집되는 고정형 또는 이동형 디바이스(10)의 영상 처리의 효율을 높일 수 있다. 또한, 모바일 엣지 컴퓨팅(MEC) 아키텍처를 활용함으로써 클라우드 기반으로 영상관제 서비스를 제공하는 것이 가능해져 영상관제의 지리적 한계를 극복할 수 있다.As such, it utilizes a mobile edge computing (MEC) architecture, that is, a structure divided into an MEC layer and a core layer, through which fixed or mobile devices that are geographically separated or collected through high-speed mobile networks such as 5G (10) can increase the efficiency of image processing. In addition, by utilizing the mobile edge computing (MEC) architecture, it is possible to provide cloud-based video control services, thereby overcoming the geographical limitations of video control.

[도 1]에서 관리자 단말(20)은 본 발명에 따른 영상 관제 시스템을 전체적으로 관리하는 업체 혹은 관리자가 사용하는 단말장치이고, 사용자 단말(30)은 본 발명에 따른 영상 관제 시스템이 제공하는 서비스의 이용자, 예컨대 관제요원이나 해당 건물의 거주자가 사용하는 단말이다.In [FIG. 1], the manager terminal 20 is a terminal device used by a company or manager that manages the video control system according to the present invention as a whole, and the user terminal 30 is a service provided by the video control system according to the present invention. It is a terminal used by a user, such as a controller or a resident of the building.

[도 2]는 본 발명에 따른 모바일 엣지 컴퓨팅(MEC) 기반의 영상 관제 시스템의 기능적 구성을 개념적으로 나타내는 도면이고, [도 3]은 본 발명에 따른 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템에서 구성요소들 간의 인터페이스 다이어그램을 나타내는 도면이다.[Fig. 2] is a diagram conceptually showing the functional configuration of a mobile edge computing (MEC)-based video control system according to the present invention, and [Fig. 3] is a view showing the components in the mobile edge computing-based video control system according to the present invention. It is a diagram showing an interface diagram between the two.

본 발명에 따른 MEC 기반의 영상 관제 시스템은 지리적으로 산재되어 존재하는 복수의 모바일 디바이스(10)에서 생성되는 대규모의 실시간 영상 데이터를 활용하여 영상 관제 서비스를 효과적으로 제공하기 위한 시스템이다. The MEC-based video control system according to the present invention is a system for effectively providing video control services by utilizing large-scale real-time video data generated from a plurality of mobile devices 10 that are geographically dispersed.

본 발명에 따른 MEC 기반의 영상 관제 시스템은 MEC 클라우드 시스템(100)과 코어 클라우드 시스템(200)으로 계층화된 아키텍쳐를 통하여 원격지 데이터의 활용 및 관리 효율을 향상시킬 수 있다. 종래기술에서는 중앙 서버와 통신 지연 시간으로 인해 원격지 데이터를 활용하기가 곤란하였으나, 본 발명에서는 해당 영역을 커버하는 MEC 클라우드 시스템(100)에서 영상 분석 및 긴급 대응을 수행하므로 통신 지연 시간으로 인한 문제점이 발생하지 않는다. 또한, 본 발명에서는 데이터 발생 영역에서 바로 실시간 데이터를 분석 처리하므로 통신 지연 시간이나 로드 폭주의 문제가 완화되며 그에 따라 실시간 데이터 스트림의 유실을 방지할 수 있다. The MEC-based video control system according to the present invention can improve the utilization and management efficiency of remote data through a layered architecture with the MEC cloud system 100 and the core cloud system 200 . In the prior art, it was difficult to utilize remote data due to the communication delay time with the central server, but in the present invention, since image analysis and emergency response are performed in the MEC cloud system 100 that covers the corresponding area, the problem due to the communication delay time is reduced. doesn't happen In addition, in the present invention, since real-time data is analyzed and processed directly in the data generation area, the problem of communication delay time or load congestion is alleviated, and thus, loss of the real-time data stream can be prevented.

또한, 본 발명에 따르면 다양한 사용자 요구(엣지 대응, 코어 활용 등)에 따른 개별 서비스 제공이 가능해진다. 영상 관제 서비스를 로컬 서비스(실시간 현장 대응)와 관리자 서비스(데이터 중앙관리, 재분배)로 계층화함으로써 다양한 성격의 서비스 제공이 가능하다.In addition, according to the present invention, it is possible to provide individual services according to various user needs (edge response, core utilization, etc.). By layering the video control service into local service (real-time on-site response) and manager service (data central management, redistribution), it is possible to provide various types of services.

또한, 본 발명에 따르면 수집 데이터의 저장, 분배, 활용 관리를 계층화함으로써 종래기술에서의 맹목적인 데이터 수집 및 저장으로 인한 컴퓨팅 자원 및 스토리지 자원의 낭비 문제를 개선할 수 있다. 즉, 엣지 VMS 시스템(110)은 대용량 영상 저장, 영상분석, 상황인지 및 대응을 수행하고, 코어 VMS 시스템(210)은 저용량 메타데이터 관리, 컨텍스트(context) 분석 및 데이터 시각화, 의사 결정 등을 수행하도록 이원화 구성함으로써 종래기술의 문제점을 개선할 수 있다. In addition, according to the present invention, it is possible to improve the waste of computing resources and storage resources due to the blind data collection and storage in the prior art by layering the storage, distribution, and utilization management of the collected data. That is, the edge VMS system 110 performs large-capacity image storage, image analysis, context recognition and response, and the core VMS system 210 performs low-volume metadata management, context analysis and data visualization, decision making, etc. It is possible to improve the problems of the prior art by configuring it to be binary.

또한, 본 발명에 따르면 MEC 클라우드 시스템(100)을 통하여 분산 환경의 로컬 자원 활용 및 운영 효율을 높일 수 있다.In addition, according to the present invention, it is possible to increase the local resource utilization and operation efficiency of the distributed environment through the MEC cloud system 100 .

[도 2]를 참조하면, 먼저 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템(100)은 자신의 담당 영역에 존재하는 일군의 모바일 디바이스(10)로부터 실시간 영상 데이터를 제공받아 분석 처리하는 시스템으로서, 엣지 VMS 시스템(110)과 엣지 영상처리 시스템(120)을 포함하여 구성된다.Referring to FIG. 2 , first, the mobile edge computing (MEC) cloud system 100 is a system that receives and analyzes real-time image data from a group of mobile devices 10 existing in its area of responsibility, and analyzes and processes the edge VMS. It is configured to include the system 110 and the edge image processing system 120 .

엣지 VMS 시스템(110)은 해당 MEC 클라우드에 속하는 일군의 모바일 디바이스(10)로부터 실시간 영상 데이터를 제공받아 관리하는 시스템으로서 엣지 릴레이 서비스부(111)와 엣지 분배 서비스부(112)를 구비한다. 엣지 VMS 시스템(110)은 해당 MEC 클라우드에서 생성된 실시간 영상 데이터를 수신하면 이를 해당 MEC 클라우드(100)에 속하는 엣지 영상처리 시스템(120) 및 코어 클라우드(200)의 코어 VMS 시스템(210)으로 릴레이 전달한다.The edge VMS system 110 is a system that receives and manages real-time image data from a group of mobile devices 10 belonging to the corresponding MEC cloud, and includes an edge relay service unit 111 and an edge distribution service unit 112 . When the edge VMS system 110 receives real-time image data generated in the corresponding MEC cloud, it relays it to the edge image processing system 120 belonging to the corresponding MEC cloud 100 and the core VMS system 210 of the core cloud 200 . transmit

엣지 영상처리 시스템(120)은 엣지 VMS 시스템(110)으로부터 실시간 영상 데이터를 릴레이 전달받아 이를 분석하고 그 분석 결과 긴급 상황이라고 판단되는 경우에는 현장에서 바로 조치가 취해질 수 있도록 정보를 처리하는 시스템으로서 엣지 영상분석 장치(121)와 엣지 SOP 시스템(122)을 구비한다. 본 명세서에서 SOP는 재난현장 표준작전 절차(Standard Operating Procedure, SOP)를 의미하는 용어이다. 한편, 본 발명에서 엣지 영상처리 시스템(120)의 전부 혹은 일부는 써드파티(3rd party) 장치로 구성될 수 있다.The edge image processing system 120 receives real-time image data relayed from the edge VMS system 110 and analyzes it. As a result of the analysis, the edge image processing system 120 is a system that processes information so that actions can be taken immediately on the spot. An image analysis device 121 and an edge SOP system 122 are provided. In this specification, SOP is a term meaning a disaster site standard operating procedure (SOP). Meanwhile, in the present invention, all or part of the edge image processing system 120 may be configured as a third party device.

코어 클라우드 시스템(200)은 다수의 MEC 클라우드 시스템(100)으로부터 실시간 영상 데이터 및 분석 데이터를 제공받고 이들을 종합적으로 관리하는 시스템으로서 코어 VMS 시스템(210), 코어 영상처리 시스템(220), 코어 VMS 클라이언트 시스템(230)을 포함하여 구성된다. 전술하였던 MEC 클라우드 시스템(100)은 일반적으로 좁은 지역적 범위, 예컨대 5~10개 블록 구역 정도를 커버하도록 구성되는 반면, 코어 클라우드 시스템(200)은 상대적으로 대단히 넓은 지역적 범위, 예컨대 서울특별시 전체를 커버하도록 구성될 수 있다.The core cloud system 200 receives real-time image data and analysis data from a plurality of MEC cloud systems 100 and comprehensively manages them. The core VMS system 210 , the core image processing system 220 , and the core VMS client and a system 230 . The above-described MEC cloud system 100 is generally configured to cover a narrow regional range, for example, about 5 to 10 block areas, whereas the core cloud system 200 covers a relatively very wide regional range, for example, the entire Seoul Metropolitan City. can be configured to

코어 VMS 시스템(210)은 엣지 VMS 시스템(110)에서 수신되는 데이터(영상 데이터, 메타데이터 등)를 저장하고 저용량 메타데이터 관리, 컨텍스트(context) 분석 및 데이터 시각화, 의사 결정 등을 수행하며, 특히 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 연결 관리를 위한 디바이스 프로비저닝 서비스를 제공한다. 이를 위해, 코어 VMS 시스템(210)은 프로비전 서비스부(211), 코어 VMS 데이터베이스부(212), 코어 마스터 서비스부(213), 코어 레코딩 서비스부(214), 코어 분배 서비스부(215), 외부연동 서비스부(216)를 구비한다.The core VMS system 210 stores data (image data, metadata, etc.) received from the edge VMS system 110 and performs low-capacity metadata management, context analysis and data visualization, decision making, etc. A device provisioning service is provided for connection management between the mobile device 10 and the edge VMS system 110 . To this end, the core VMS system 210 includes a provisioning service unit 211 , a core VMS database unit 212 , a core master service unit 213 , a core recording service unit 214 , a core distribution service unit 215 , An external interlocking service unit 216 is provided.

프로비전 서비스부(211)는 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 연결 관리를 위한 디바이스 프로비저닝 서비스를 제공하는 구성요소로서, 아래에서 자세하게 후술한다.The provisioning service unit 211 is a component that provides a device provisioning service for connection management between the mobile device 10 and the edge VMS system 110 and will be described in detail below.

코어 VMS 데이터베이스부(212)는 엣지 VMS 시스템(110)로부터 수신되는 각종의 메타데이터 및 코어 VMS 시스템(210)에서 생성되는 컨텍스트 분석 결과 및 의사 결정 데이터를 저장하는 구성요소이다.The core VMS database unit 212 is a component that stores various types of metadata received from the edge VMS system 110 and context analysis results and decision data generated by the core VMS system 210 .

코어 마스터 서비스부(213)는 코어 VMS 시스템(210)에서 이루어지는 전반적인 동작을 제어하는 구성요소이다.The core master service unit 213 is a component that controls the overall operation performed in the core VMS system 210 .

코어 레코딩 서비스부(214)는 MEC 클라우드 시스템들(100)으로부터 전달되는 실시간 동영상 데이터를 레코딩 저장하는 구성요소이다.The core recording service unit 214 is a component for recording and storing real-time video data transmitted from the MEC cloud systems 100 .

코어 분배 서비스부(215)는 다수의 MEC 클라우드 시스템(100)의 엣지 릴레이 서비스부(111) 및 엣지 분배 서비스부(112)와 연동하는 구성요소로부터 이들 MEC 클라우드 시스템(100)으로부터 실시간 동영상 데이터를 제공받아 코어 클라우드 시스템(200)의 다른 구성요소들, 즉 코어 영상처리 시스템(220)과 코어 VMS 클라이언트 시스템(230)으로 분배 전달한다.The core distribution service unit 215 receives real-time video data from the MEC cloud system 100 from components that work with the edge relay service unit 111 and the edge distribution service unit 112 of the multiple MEC cloud systems 100 . It is provided and distributed and delivered to other components of the core cloud system 200 , that is, the core image processing system 220 and the core VMS client system 230 .

외부연동 서비스부(216)는 코어 클라우드 시스템(200)의 코어 영상처리 시스템(220)과 코어 VMS 클라이언트 시스템(230)과 기능적으로 연동하여 협조 동작하기 인터페이스를 제공하는 구성요소이다.The external interworking service unit 216 is a component that provides an interface for cooperative operation by functionally interworking with the core image processing system 220 and the core VMS client system 230 of the core cloud system 200 .

코어 영상처리 시스템(220)은 다수의 MEC 클라우드 시스템(100)으로부터 수집된 실시간 영상 데이터 및 분석 데이터(메타데이터 등), 그리고 코어 VMS 시스템(210)에서 생성되는 컨텍스트 분석 결과 및 의사 결정 데이터의 전부 혹은 일부를 코어 VMS 시스템(210)의 코어 분배 서비스부(215)로부터 분배 전송받으며, 이를 분석하고 그 분석 결과에 대응하여 적절한 조치가 취해질 수 있도록 정보를 처리하는 시스템이다. 이를 위해, 코어 영상처리 시스템(220)은 코어 영상분석 장치(221), 코어 영상저장 장치(222), 지리정보 시스템(223), 접근제어 시스템(224), 코어 SOP 시스템(225), 긴급경보 시스템(226)를 구비하는데, 코어 영상처리 시스템(220)의 전부 혹은 일부는 써드파티 장치로 구성될 수 있다.The core image processing system 220 includes all of the real-time image data and analysis data (metadata, etc.) collected from the plurality of MEC cloud systems 100 , and the context analysis result and decision data generated by the core VMS system 210 . Alternatively, it is a system that receives and receives a portion of the distribution from the core distribution service unit 215 of the core VMS system 210, analyzes it, and processes information so that appropriate actions can be taken in response to the analysis result. To this end, the core image processing system 220 includes a core image analysis device 221 , a core image storage device 222 , a geographic information system 223 , an access control system 224 , a core SOP system 225 , and an emergency alert. A system 226 is provided, wherein all or part of the core image processing system 220 may be configured as a third-party device.

코어 VMS 클라이언트 시스템(230)은 관리자 단말(20) 및 사용자 단말(30)과의 인터페이스를 제공하는 시스템으로서 이를 위해 관리자 클라이언트 처리부(231)와 사용자 클라이언트 처리부(232)를 구비한다.The core VMS client system 230 is a system that provides an interface with the manager terminal 20 and the user terminal 30 and includes a manager client processing unit 231 and a user client processing unit 232 for this purpose.

이하에서는 코어 VMS 시스템(210)의 프로비전 서비스부(211)가 제공하는 디바이스 프로비저닝 서비스에 대해 상세하게 기술한다.Hereinafter, the device provisioning service provided by the provisioning service unit 211 of the core VMS system 210 will be described in detail.

모바일 디바이스(10)는 그 위치를 지속적으로 변화시킴에 따라 네트워크 접속 형태가 언제든지 변경될 수 있다. 특히, 5G 기반의 모바일 네트워크 인프라가 확보되면서 다양한 이동형 디바이스(10), 예컨대 이동형 CCTV, 스마트폰, 드론, 자율주행 차량에서 각자 자기 주변의 영상을 촬영하고 이를 활용하는 관제 서비스가 가능할 것으로 생각된다. 이들 모바일 디바이스(10)는 무선랜 접속과 이동통신망 접속 사이에서 왔다갔다 할 수 있으며, 무선랜 접속의 경우에도 언제든지 위치 이동에 따라 무선랜 액세스포인트(AP)가 변경될 수 있고, 이동통신망 접속의 경우에도 언제든지 위치 이동에 따라 기지국이 변경될 수 있다. As the mobile device 10 continuously changes its location, the network connection type may be changed at any time. In particular, as 5G-based mobile network infrastructure is secured, various mobile devices 10, such as mobile CCTVs, smartphones, drones, and autonomous vehicles, each shoot images around themselves and control services using them are thought to be possible. These mobile devices 10 can switch between a wireless LAN connection and a mobile communication network connection, and even in the case of a wireless LAN connection, the wireless LAN access point (AP) can be changed according to a location movement at any time, and the Even in this case, the base station may be changed according to position movement at any time.

이와 같이 네트워크 접속 형태가 변경됨에 따라 모바일 디바이스(10)에 대한 식별체계(예: IP 주소체계)도 함께 변경된다. 또한, 모바일 디바이스(10)는 지리적으로 이동함에 따라 액세스포인트(AP) 간의 핸드오버(handover)도 빈번하게 발생한다. 이처럼 모바일 디바이스(10)는 그 속성상 네트워크 연결이 불확정적일 수밖에 없는데, 모바일 디바이스(10)가 연결되는 모바일 네트워크 액세스포인트(AP) 또는 이동통신 기지국과 네트워크 연결을 유지하기 위해서 지속적으로 모바일 디바이스(10)의 네트워크 연결 상태를 확인하고, 그에 대응하여 지속적이고 안정적인 데이터 송수신을 위하여 세션 유지를 달성하는 것이 중요하다. 디바이스 이동성 보장을 위해 모바일 디바이스(10)가 모바일 네트워크(제 1 네트워크)에 접속하면 이와는 상이한 네트워크(제 2 네트워크)에 있는 서버 시스템(100, 200)과의 상호식별 및 연결설정 기술이 필요하다. As such, as the network connection type is changed, the identification system (eg, IP address system) for the mobile device 10 is also changed. In addition, as the mobile device 10 moves geographically, handovers between access points (APs) frequently occur. As such, the mobile device 10 has no choice but to have an indeterminate network connection due to its properties. In order to continuously maintain a network connection with a mobile network access point (AP) or a mobile communication base station to which the mobile device 10 is connected, the mobile device 10 It is important to check the network connection status of ) and to achieve session maintenance for continuous and stable data transmission and reception in response. When the mobile device 10 accesses the mobile network (first network) to ensure device mobility, mutual identification and connection establishment technology with the server systems 100 and 200 in a different network (second network) are required.

본 발명에서는 모바일 디바이스(10)에 대해 연결 관리를 수행하는 것을 프로비저닝 서비스라고 부른다. 개념적으로는 모바일 디바이스(10)와 MEC 클라우드 시스템(100) 및 코어 클라우드 시스템(200) 간의 최적경로 분석, 네트워크 연결 상태 확인, 네트워크 연결 유지 등을 의미한다. 지리적 이동성 갖는 모바일 디바이스(10)에서 생성되는 실시간 영상 데이터를 신속하게 플랫폼(100, 200)으로 전송하기 위하여 모바일 디바이스(10)와 플랫폼(100, 200) 간에 상호인증 과정과 데이터 전송 경로 설정 과정을 코어 클라우드 시스템(200)에 구비된 코어 VMS 시스템(210)의 프로비전 서비스부(211)가 수행한다. In the present invention, performing connection management for the mobile device 10 is called a provisioning service. Conceptually, it means analyzing an optimal path between the mobile device 10 and the MEC cloud system 100 and the core cloud system 200 , checking a network connection state, maintaining a network connection, and the like. In order to quickly transmit real-time image data generated by the mobile device 10 having geographic mobility to the platforms 100 and 200, a mutual authentication process and a data transmission path setting process between the mobile device 10 and the platforms 100 and 200 are performed. The provision service unit 211 of the core VMS system 210 provided in the core cloud system 200 performs.

코어 VMS 시스템(210)의 프로비전 서비스부(211)는 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 신속한 연결을 위하여 특정 판단 기준에 따라 가장 효율적이라고 평가되는 경로(프로비전 경로)를 유지한다. 예를 들어, 모바일 디바이스(10)와 엣지 VMS 시스템(110) 간의 최단거리 우선, 고속 네트워크 우선(네트워크 대역폭 기준), 연결 구간의 최단 홉(Hop) 우선 중에서 가장 우수하다고 평가되는 연결 경로를 선택하도록 서비스를 제공한다.The provisioning service unit 211 of the core VMS system 210 maintains a path (provision path) that is evaluated to be the most efficient according to a specific criterion for a quick connection between the mobile device 10 and the edge VMS system 110 . do. For example, to select a connection path evaluated as the best among the shortest distance priority between the mobile device 10 and the edge VMS system 110, high speed network priority (based on network bandwidth), and shortest hop priority of the connection section. provide services.

프로비저닝 서비스의 동작 구조에 대해 살펴보면, 모바일 디바이스들(10)이 본 발명에 따른 영상 관제 시스템과 연동하기 위해 플랫폼(100, 200)과 상호인증 및 세션 연결을 수행하는데, 이 때에 프로비전을 적용한다. Looking at the operation structure of the provisioning service, the mobile devices 10 perform mutual authentication and session connection with the platforms 100 and 200 in order to interwork with the video control system according to the present invention, and provision is applied at this time. .

이를 위해, 프로비전 서비스부(211)는 영상 관제 시스템에 연동할 모바일 디바이스들(10)을 사전에 등록하고 연결 인증용의 액세스 토큰(Access Token)을 배포한다. 모바일 디바이스들(10)은 액세스 토큰을 통해 연결 인증과 함께 경로설정 정보, 즉 엣지 VMS 시스템(110)으로의 경로 정보를 확인한다. To this end, the provisioning service unit 211 pre-registers the mobile devices 10 to be linked to the video control system and distributes an access token for connection authentication. The mobile devices 10 check route setting information, that is, route information to the edge VMS system 110 together with connection authentication through the access token.

이때, 모바일 디바이스들(10)은 엣지 VMS 시스템(110)에 접속하여 각종 데이터(예: 실시간 영상 데이터, 디바이스 식별정보 등)를 전송하는데, 엣지 VMS 시스템(110)의 엣지 릴레이 서비스부(111)와 엣지 분배 서비스부(112)는 이들 데이터를 해당 MEC 클라우드 시스템(100)의 엣지 영상처리 시스템(120) 및 코어 클라우드 시스템(200)의 코어 VMS 시스템(210)으로 전송한다.At this time, the mobile devices 10 connect to the edge VMS system 110 and transmit various data (eg, real-time image data, device identification information, etc.), and the edge relay service unit 111 of the edge VMS system 110 . and the edge distribution service unit 112 transmits these data to the edge image processing system 120 of the corresponding MEC cloud system 100 and the core VMS system 210 of the core cloud system 200 .

본 발명에서 프로비저닝 서비스(provisioning service)는 다수의 모바일 디바이스들(10)과 클라우드(100, 200)의 리소스를 관리하는 기능이다. 이와 관련하여, 영상 관제 시스템에 이미 등록되어 있는 모바일 디바이스(10)의 이동으로 인하여 새로운 연결 설정이 필요하거나, 혹은 신규의 모바일 디바이스(10)에 대해 연결 설정을 진행하는 데 있어 프로비저닝 서비스가 제공된다. 이들 모바일 디바이스(10)의 연결 관리를 위해 사전에 전체 시스템의 자원 현황(서버 자원, 네트워크 자원, 스토리지 자원 운영 현황 등)을 모니터링하고 최단경로, 최대 대역폭, 최소 경로 등에 따라 연결 경로를 설정함으로써 세션 효율성을 유지한다. 이를 통해, 관제 서비스의 성능을 안정적으로 제공할 수 있는 연결 관리를 수행하고, 네트워크 연결 설정을 통한 경로 최적화, 자원 할당(load balancing)을 달성한다.In the present invention, a provisioning service is a function of managing resources of a plurality of mobile devices 10 and the clouds 100 and 200 . In this regard, a new connection setting is required due to the movement of the mobile device 10 that is already registered in the video control system, or a provisioning service is provided when setting up a connection for the new mobile device 10 . . For connection management of these mobile devices 10, by monitoring the resource status (server resource, network resource, storage resource operation status, etc.) of the entire system in advance and setting the connection path according to the shortest path, the maximum bandwidth, the minimum path, etc. Maintain efficiency. Through this, connection management that can stably provide the performance of the control service is performed, and route optimization and resource allocation (load balancing) are achieved through network connection setting.

[도 4]는 본 발명의 모바일 엣지 컴퓨팅(MEC) 기반의 영상 관제 시스템에서 모바일 디바이스(10)에 대한 상호인증 절차를 나타내는 도면이고, [도 5]는 본 발명의 모바일 엣지 컴퓨팅(MEC) 기반의 영상 관제 시스템에서 데이터 전송 경로 설정 절차, 즉 모바일 디바이스(10)와 클라우드 시스템(100, 200) 간의 세션 연결 및 데이터 스트리밍 처리 절차를 나타내는 도면이다.[Fig. 4] is a diagram showing a mutual authentication procedure for the mobile device 10 in the mobile edge computing (MEC)-based video control system of the present invention, and [Fig. 5] is a mobile edge computing (MEC) based image control system of the present invention. It is a diagram illustrating a data transmission path setting procedure, that is, a session connection and data streaming processing procedure between the mobile device 10 and the cloud systems 100 and 200 in the video control system of .

먼저, [도 4]를 참조하여, 특정의 모바일 디바이스(10)에 대한 상호인증 절차에 대해 살펴본다. First, with reference to [FIG. 4], a mutual authentication procedure for a specific mobile device 10 will be described.

관리자 클라이언트 처리부(231)는 관리자 단말(20)로부터의 디바이스 등록 요구에 대응하여 코어 VMS 시스템(210)으로 특정 모바일 디바이스(10)에 대한 디바이스 등록(Registration of Devices)을 요청한다. 코어 VMS 시스템(210)은 디바이스 등록 요청을 받으면 해당 모바일 디바이스(10)에 대한 디바이스 등록 절차를 내부적으로 진행하고, 등록 완료 확인(Confirmation of Registration)을 관리자 클라이언트 처리부(231)로 응답 제공한다. 이와 같은 디바이스 등록은 자동 등록, 수동 등록, 일괄 등록 등의 형태로 이루어질 수 있다.The manager client processing unit 231 requests device registration for a specific mobile device 10 from the core VMS system 210 in response to a device registration request from the manager terminal 20 . When the core VMS system 210 receives a device registration request, it internally performs a device registration procedure for the corresponding mobile device 10 , and provides a response to the confirmation of registration to the manager client processing unit 231 . Such device registration may be performed in the form of automatic registration, manual registration, batch registration, or the like.

이어서, 그 등록 확인된 모바일 디바이스(10)의 연결 관리를 위하여 관리자 클라이언트 처리부(231)는 코어 VMS 시스템(210)으로 프로비전 데이터베이스의 업데이트(Update Provision Database)를 요청한다. 이에 대응하여, 코어 VMS 시스템(210)의 프로비전 서비스부(211)는 해당 모바일 디바이스(10)의 정보를 데이터베이스에 입력한 후에 해당 모바일 디바이스(10)의 연결 인증을 위한 액세스 토큰(Access Token for Authentication)을 제공한다. 그리고, 관리자 클라이언트 처리부(231)는 코어 VMS 시스템(210)으로부터 제공받은 액세스 토큰 및 자신이 해당 모바일 디바이스(10)에 발급한 사용자 계정 정보(Access Token and Account Information)를 모바일 디바이스(10)에 제공한다. Next, for connection management of the registered mobile device 10 , the manager client processing unit 231 requests the core VMS system 210 to update the provision database (Update Provision Database). Correspondingly, the provisioning service unit 211 of the core VMS system 210 enters the information of the corresponding mobile device 10 into the database and then an access token for connection authentication of the corresponding mobile device 10 (Access Token for). authentication) is provided. In addition, the manager client processing unit 231 provides the access token provided from the core VMS system 210 and the user account information (Access Token and Account Information) issued to the mobile device 10 to the mobile device 10 . do.

이상과 같은 모바일 디바이스(10)에 대한 상호인증 절차에서 관리자 클라이언트 처리부(231)의 동작은 외관 상으로는 관리자가 조작하는 관리자 단말(20)에서 수행하는 것처럼 보일 수 있다. 실제로도 관리자 단말(20)과 관리자 클라이언트 처리부(231)는 일체로 구현될 수도 있다.In the mutual authentication procedure for the mobile device 10 as described above, the operation of the manager client processing unit 231 may seem to be performed by the manager terminal 20 operated by the manager. In fact, the manager terminal 20 and the manager client processing unit 231 may be integrally implemented.

다음으로, [도 5]를 참조하여, 특정의 모바일 디바이스(10)와 본 발명에 따른 영상 관제 시스템의 클라우드 시스템(100, 200) 간에 이루어지는 세션 연결 및 데이터 스트리밍 처리 절차에 대해 살펴본다.Next, with reference to [Fig. 5], a session connection and data streaming processing procedure between a specific mobile device 10 and the cloud systems 100 and 200 of the video control system according to the present invention will be described.

본 발명에서 모바일 디바이스(10), 예컨대 이동형 CCTV나 드론은 자신의 카메라를 통해 주변 상황을 촬영하여 영상 데이터를 생성한 후에 영상 관제 시스템으로 그 영상 데이터를 제공한다. 이를 위해, 모바일 디바이스(10)와 클라우드 시스템(100, 200) 간에 세션 연결이 이루어져야 한다.In the present invention, the mobile device 10, for example, a mobile CCTV or drone, generates image data by capturing the surrounding situation through its own camera, and then provides the image data to the image control system. To this end, a session connection must be established between the mobile device 10 and the cloud systems 100 and 200 .

이를 위해, 모바일 디바이스(10)는 앞서의 상호인증 과정에서 제공받은 액세스 토큰을 제시하면서 코어 VMS 시스템(210)으로 연결 요구(Connection Request with Access Token)를 전송한다. 코어 VMS 시스템(210)의 프로비전 서비스부(211)는 해당 액세스 토큰이 유효한 것인지 여부를 확인하는데, 이 과정에서 공개키 암호화 시스템(PKI) 기술이 양호하게 활용될 수 있다. To this end, the mobile device 10 transmits a Connection Request with Access Token to the core VMS system 210 while presenting the access token provided in the above mutual authentication process. The provisioning service unit 211 of the core VMS system 210 checks whether the corresponding access token is valid. In this process, a public key encryption system (PKI) technology may be favorably utilized.

그리고 나서, 코어 VMS 시스템(210)의 프로비전 서비스부(211)는 모바일 디바이스(10)와 엣지 VMS 시스템(110) 사이에 대해 특정 판단 기준, 예컨대 최단거리 우선(shortest distance), 최단 경로 우선(shortest path), 고속 네트워크 우선(네트워크 대역폭 우선(bandwidth priority) 등에 따라 가장 효율적이라고 평가되는 경로를 탐색한다. 즉, 코어 클라우드 시스템(200)과 연동하는 다수의 MEC 클라우드 시스템(100) 중에서 위 평가 기준에 따라 최적의 경로에 해당하는 MEC 클라우드 시스템(100)을 선별하고 그에 해당하는 엣지 VMS 시스템(110)과 모바일 디바이스(10) 간에 연결 경로를 설정한다.Then, the provisioning service unit 211 of the core VMS system 210 determines a specific criterion between the mobile device 10 and the edge VMS system 110, for example, the shortest distance first, the shortest path first ( shortest path), high-speed network priority (network bandwidth priority), etc., the most efficient path is searched for. That is, the above evaluation criteria among a plurality of MEC cloud systems 100 interworking with the core cloud system 200 Accordingly, the MEC cloud system 100 corresponding to the optimal path is selected and a connection path is established between the corresponding edge VMS system 110 and the mobile device 10 .

본 명세서에서는 이 과정을 통해 탐색하여 획득된 경로를 프로비전 경로라고 부른다. 이어서, 프로비전 서비스부(211)는 그 획득된 프로비전 경로를 해당 모바일 디바이스(10)의 사용자 계정에 설정하고, 해당 모바일 디바이스(10) 및 그 프로비전 경로에 대응하는 해당 엣지 VMS 시스템(110)에 대해 상호 연결을 개시하도록 시그널링을 제공한다(Initiating Connection). 이를 통해 모바일 디바이스(10)는 특정 MEC 클라우드 시스템(100)에 속하게 된다.In the present specification, a path obtained by searching through this process is referred to as a provisioning path. Subsequently, the provisioning service unit 211 sets the obtained provisioning path to the user account of the corresponding mobile device 10 , and the corresponding edge VMS system 110 corresponding to the corresponding mobile device 10 and the provisioning path. ) to provide signaling to initiate an interconnection (Initiating Connection). Through this, the mobile device 10 belongs to a specific MEC cloud system 100 .

그리고 나서, 모바일 디바이스(10)는 실시간 동영상 데이터를 그 프로비전 경로에 따라 엣지 VMS 시스템(110)으로 전달하고(Data Send), 엣지 VMS 시스템(110)은 이 실시간 동영상 데이터를 코어 VMS 시스템(210)으로 릴레이 전송(Data Send)한다. 이러한 동작이 지역적으로 산재된 다수의 모바일 디바이스(10) 및 다수의 MEC 클라우드 시스템(100)에서 수행되며, 그에 따라 코어 클라우드 시스템(200)에서는 대단히 넓은 지역에 대한 실시간 동영상 데이터가 수집된다. 코어 VMS 시스템(210)의 코어 레코딩 서비스부(214)는 이렇게 수집된 실시간 동영상 데이터를 스토리지 장치에 저장한다(Video Data Recording).Then, the mobile device 10 transmits the real-time video data to the edge VMS system 110 according to the provision path (Data Send), and the edge VMS system 110 transmits the real-time video data to the core VMS system 210 . ) to relay transmission (Data Send). This operation is performed in a plurality of regionally dispersed mobile devices 10 and a plurality of MEC cloud systems 100 , and accordingly, real-time video data for a very wide area is collected in the core cloud system 200 . The core recording service unit 214 of the core VMS system 210 stores the collected real-time video data in the storage device (Video Data Recording).

MEC 클라우드 시스템(100)의 엣지 영상처리 시스템(120)은 자신의 필요에 따라 엣지 VMS 시스템(110)으로 데이터를 요구하고(Data Request), 엣지 VMS 시스템(110)의 엣지 분배 서비스부(112)는 모바일 디바이스(10)가 제공하였던 실시간 영상 데이터를 엣지 영상처리 시스템(120)으로 분배한다(Data Distribution). 엣지 영상처리 시스템(120)은 실시간 영상 데이터를 분석하고 그 분석 결과에 따라 현장에서 바로 조치가 취해질 수 있도록 정보를 처리한다.The edge image processing system 120 of the MEC cloud system 100 requests data from the edge VMS system 110 according to its own needs (Data Request), and the edge distribution service unit 112 of the edge VMS system 110 . distributes the real-time image data provided by the mobile device 10 to the edge image processing system 120 (Data Distribution). The edge image processing system 120 analyzes real-time image data and processes the information so that an action can be taken immediately on the spot according to the analysis result.

코어 클라우드 시스템(200)의 코어 영상처리 시스템(220)은 자신의 필요에 따라 코어 VMS 시스템(210)으로 데이터를 요구하고(Data Request), 코어 영상처리 시스템(220)의 코어 분배 서비스부(215)는 다수의 MEC 클라우드 시스템(100)으로부터 제공받아 수집한 실시간 영상 데이터 및 각종 분석 데이터(메타데이터)를 코어 영상처리 시스템(220)으로 분배한다(Data Distribution). 코어 영상처리 시스템(220)은 이 분배된 정보를 분석하고 그 분석 결과에 대응하여 적절한 조치가 취해질 수 있도록 정보를 처리한다.The core image processing system 220 of the core cloud system 200 requests data from the core VMS system 210 according to its own needs (Data Request), and the core distribution service unit 215 of the core image processing system 220 . ) distributes the collected real-time image data and various analysis data (metadata) from the multiple MEC cloud systems 100 to the core image processing system 220 (Data Distribution). The core image processing system 220 analyzes the distributed information and processes the information so that an appropriate action can be taken in response to the analysis result.

한편, 본 발명은 컴퓨터가 읽을 수 있는 비휘발성 기록매체에 컴퓨터가 읽을 수 있는 코드의 형태로 구현되는 것이 가능하다. 이러한 비휘발성 기록매체로는 다양한 형태의 스토리지 장치가 존재하는데 예컨대 하드디스크, SSD, CD-ROM, NAS, 자기테이프, 웹디스크, 클라우드 디스크 등이 있고 네트워크로 연결된 다수의 스토리지 장치에 코드가 분산 저장되고 실행되는 형태도 구현될 수 있다. 또한, 본 발명은 하드웨어와 결합되어 특정의 절차를 실행시키기 위하여 매체에 저장된 컴퓨터프로그램의 형태로 구현될 수도 있다.Meanwhile, the present invention can be implemented in the form of computer-readable codes on a computer-readable non-volatile recording medium. Various types of storage devices exist as such non-volatile recording media. For example, hard disks, SSDs, CD-ROMs, NAS, magnetic tapes, web disks, cloud disks, etc. A form in which it can be implemented and executed can also be implemented. In addition, the present invention may be implemented in the form of a computer program stored in a medium to execute a specific procedure in combination with hardware.

10 : 모바일 디바이스
20 : 관리자 단말
30 : 사용자 단말
100 : 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템
110 : 엣지 VMS 시스템
111 : 엣지 릴레이 서비스부 112 : 엣지 분배 서비스부
120 : 엣지 영상처리 시스템
121 : 엣지 영상분석 장치 122 : 엣지 SOP 시스템
200 : 코어 클라우드 시스템
210 : 코어 VMS 시스템
211 : 프로비전 서비스부 212 : 코어 VMS 데이터베이스부
213 : 코어 마스터 서비스부 214 : 코어 레코딩 서비스부
215 : 코어 분배 서비스부 216 : 외부연동 서비스부
220 : 코어 영상처리 시스템
221 : 코어 영상분석 장치 222 : 코어 영상저장 장치
223 : 지리정보 시스템 224 : 접근제어 시스템
225 : 코어 SOP 시스템 226 : 긴급경보 시스템
230 : 코어 VMS 클라이언트 시스템
231 : 관리자 클라이언트 처리부 232 : 사용자 클라이언트 처리부
10: mobile device
20: administrator terminal
30: user terminal
100: Mobile Edge Computing (MEC) Cloud System
110: Edge VMS system
111: edge relay service unit 112: edge distribution service unit
120: edge image processing system
121: edge image analysis device 122: edge SOP system
200: core cloud system
210: core VMS system
211: provision service unit 212: core VMS database unit
213: core master service unit 214: core recording service unit
215: core distribution service unit 216: external interworking service unit
220: core image processing system
221: core image analysis device 222: core image storage device
223: geographic information system 224: access control system
225: core SOP system 226: emergency alarm system
230: core VMS client system
231: administrator client processing unit 232: user client processing unit

Claims (6)

지리적으로 자신의 담당 영역에 존재하는 일군의 모바일 디바이스(10)에서 생성되는 실시간 영상 데이터를 네트워크로 제공받아 분석 처리하고, 상기 실시간 영상 데이터 및 그 분석 결과에 따른 메타데이터를 코어 클라우드 시스템(200)으로 전달하며, 상기 영상 분석 결과에 의해 미리 설정된 긴급 상황이라고 판단되는 경우에는 현장에서 조치가 취해질 수 있도록 분석 정보를 처리하도록 구성되는 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템(100);
지리적으로 분산 형성된 다수의 MEC 클라우드 시스템(100)으로부터 실시간 영상 데이터 및 메타데이터를 제공받아 수집 관리하고, 그 수집된 메타데이터에 기초하여 컨텍스트 분석 및 데이터 시각화, 의사 결정 중 적어도 하나이상을 수행하는 코어 클라우드 시스템(200);
를 포함하여 구성되는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템으로서,
상기 모바일 엣지 컴퓨팅(MEC) 클라우드 시스템(100)은, 해당 MEC 클라우드에 속하는 일군의 모바일 디바이스(10)로부터 실시간 영상 데이터를 제공받아 대용량 영상 저장, 영상 분석을 통한 메타데이터 생성, 상황인지 및 대응을 수행하고, 해당 MEC 클라우드에서 생성된 실시간 영상 데이터를 동일 MEC 클라우드에 속하는 엣지 영상처리 시스템(120) 및 상기 코어 클라우드 시스템(200)으로 릴레이 분배 전달하는 엣지 VMS 시스템(110);를 구비하고,
상기 코어 클라우드 시스템(200)은, 다수의 상기 엣지 VMS 시스템(110)으로부터 상기 코어 클라우드 시스템(200)으로 전달 수집되는 상기 실시간 영상 데이터 및 메타데이터를 레코딩 저장하고 상기 메타데이터에 기초하여 컨텍스트 분석, 데이터 시각화, 의사 결정 등을 수행하며, 상기 모바일 디바이스(10)와 상기 엣지 VMS 시스템(110) 간의 세션 연결 관리를 위한 디바이스 프로비저닝을 수행하는 코어 VMS 시스템(210);
을 구비하는 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
The real-time image data generated by a group of mobile devices 10 that are geographically present in the region in charge are provided to the network and analyzed and processed, and the real-time image data and metadata according to the analysis result are stored in the core cloud system 200 . a mobile edge computing (MEC) cloud system 100 configured to process the analysis information so that an action can be taken on the spot when it is determined as an emergency situation preset by the image analysis result;
A core that receives and manages real-time image data and metadata from a plurality of geographically dispersed MEC cloud systems 100, and performs at least one of context analysis, data visualization, and decision-making based on the collected metadata cloud system 200;
As a mobile edge computing-based video control system having a core VMS and an edge VMS configured to include,
The mobile edge computing (MEC) cloud system 100 receives real-time image data from a group of mobile devices 10 belonging to the corresponding MEC cloud, stores large-capacity images, generates metadata through image analysis, and performs situational awareness and response. and an edge VMS system 110 that relays and distributes real-time image data generated in the corresponding MEC cloud to the edge image processing system 120 and the core cloud system 200 belonging to the same MEC cloud;
The core cloud system 200 records and stores the real-time image data and metadata that are transmitted and collected from the plurality of edge VMS systems 110 to the core cloud system 200, and analyzes the context based on the metadata; a core VMS system 210 that performs data visualization and decision-making, and performs device provisioning for session connection management between the mobile device 10 and the edge VMS system 110;
A mobile edge computing-based video control system having a core VMS and an edge VMS, characterized in that it comprises a.
청구항 1에 있어서,
상기 코어 VMS 시스템(210)은, 상기 모바일 디바이스(10)에 대한 상호 인증을 수행하고, 모바일 디바이스(10)의 지리적 이동 특성에 대응하여 다수의 MEC 클라우드 시스템(100) 중에서 상기 모바일 디바이스(10)에 대해 미리 설정된 평가 기준에 따른 최적의 MEC 클라우드 시스템(100)을 탐색하고, 상기 탐색된 MEC 클라우드 시스템(100)에 대응하는 엣지 VMS 시스템(110)과의 세션 연결 관리를 수행하는 프로비전 서비스부(211);
를 구비하는 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
The method according to claim 1,
The core VMS system 210 performs mutual authentication with respect to the mobile device 10 and the mobile device 10 among a plurality of MEC cloud systems 100 in response to the geographical mobility characteristics of the mobile device 10 . A provision service unit that searches for the optimal MEC cloud system 100 according to the evaluation criteria set in advance for , and performs session connection management with the edge VMS system 110 corresponding to the discovered MEC cloud system 100 . (211);
A mobile edge computing-based video control system having a core VMS and an edge VMS, characterized in that it comprises a.
청구항 2에 있어서,
상기 프로비전 서비스부(211)는 그 등록 확인된 특정의 모바일 디바이스(10)의 연결 관리를 위하여 상기 코어 클라우드 시스템(200)의 관리자 클라이언트 처리부(231)로부터 프로비전 데이터베이스의 업데이트 요청을 받으면 해당 모바일 디바이스(10)의 정보를 데이터베이스에 입력한 후에 해당 모바일 디바이스(10)의 연결 인증을 위한 액세스 토큰을 제공하여 상호인증을 수행하고,
상기 관리자 클라이언트 처리부(231)는 상기 프로비전 서비스부(211)로부터 제공받은 상기 액세스 토큰 및 자신이 해당 모바일 디바이스(10)에 발급한 사용자 계정 정보를 해당 모바일 디바이스(10)에 제공하도록 구성된 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
3. The method according to claim 2,
The provision service unit 211 receives a request to update the provision database from the manager client processing unit 231 of the core cloud system 200 for connection management of the specific mobile device 10 whose registration has been confirmed. After inputting the information of the device 10 into the database, mutual authentication is performed by providing an access token for connection authentication of the corresponding mobile device 10,
The manager client processing unit 231 is configured to provide the access token provided from the provisioning service unit 211 and user account information issued to the corresponding mobile device 10 to the corresponding mobile device 10 A video control system based on mobile edge computing with core VMS and edge VMS.
청구항 3에 있어서,
상기 코어 VMS 시스템(210)은 상기 모바일 디바이스(10)로부터 상기 상호인증에서 제공받은 상기 액세스 토큰을 제시하면서 연결 요구를 제공받으면, 상기 코어 VMS 시스템(210)의 프로비전 서비스부(211)는 해당 액세스 토큰이 유효한 것인지 여부를 확인하도록 구성되는 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
4. The method according to claim 3,
When the core VMS system 210 receives a connection request while presenting the access token provided in the mutual authentication from the mobile device 10, the provisioning service unit 211 of the core VMS system 210 performs the corresponding A video control system based on mobile edge computing having a core VMS and an edge VMS, characterized in that configured to check whether the access token is valid.
청구항 4에 있어서,
상기 프로비전 서비스부(211)는 상기 모바일 디바이스(10)와 상기 엣지 VMS 시스템(110) 사이에 대해 최단거리 우선, 연결 구간의 최단 홉을 탐색하는 최단 경로 우선, 고속 네트워크를 탐색하는 네트워크 대역폭 우선 중 어느 하나의 평가 기준에 따라 프로비전 경로를 탐색하도록 구성되는 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
5. The method according to claim 4,
The provisioning service unit 211 provides a shortest distance priority between the mobile device 10 and the edge VMS system 110, a shortest path priority for searching a shortest hop of a connection section, and a network bandwidth priority for searching a high-speed network. A mobile edge computing-based video control system having a core VMS and an edge VMS, characterized in that configured to search a provisioning path according to any one of the evaluation criteria.
청구항 5에 있어서,
상기 엣지 VMS 시스템(110)은 상기 프로비전 경로에 따라 상기 모바일 디바이스(10)로부터 실시간 동영상 데이터를 제공받고, 상기 실시간 동영상 데이터를 상기 코어 VMS 시스템(210)으로 릴레이 전송하며, 동일 MEC 클라우드 시스템(100)의 엣지 영상처리 시스템(120)으로부터 데이터 요구를 받으면 엣지 분배 서비스부(112)를 통해 상기 실시간 영상 데이터를 상기 엣지 영상처리 시스템(120)으로 분배하도록 구성되는 것을 특징으로 하는 코어 VMS와 엣지 VMS를 구비한 모바일 엣지 컴퓨팅 기반의 영상 관제 시스템.
6. The method of claim 5,
The edge VMS system 110 receives real-time video data from the mobile device 10 according to the provision path, relays the real-time video data to the core VMS system 210, and transmits the same MEC cloud system ( The core VMS and edge, characterized in that when receiving a data request from the edge image processing system 120 of 100), the real-time image data is distributed to the edge image processing system 120 through the edge distribution service unit 112 Video control system based on mobile edge computing equipped with VMS.
KR1020190178845A 2019-12-31 2019-12-31 video surveillance system by use of core VMS and edge VMS in mobile edge computing KR102300124B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190178845A KR102300124B1 (en) 2019-12-31 2019-12-31 video surveillance system by use of core VMS and edge VMS in mobile edge computing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190178845A KR102300124B1 (en) 2019-12-31 2019-12-31 video surveillance system by use of core VMS and edge VMS in mobile edge computing

Publications (2)

Publication Number Publication Date
KR20210085609A true KR20210085609A (en) 2021-07-08
KR102300124B1 KR102300124B1 (en) 2021-09-08

Family

ID=76893750

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190178845A KR102300124B1 (en) 2019-12-31 2019-12-31 video surveillance system by use of core VMS and edge VMS in mobile edge computing

Country Status (1)

Country Link
KR (1) KR102300124B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113727069A (en) * 2021-08-27 2021-11-30 江苏艾什顿科技有限公司 Broadcasting and TV 5G network video transmission system and method for railway vehicle
KR102405726B1 (en) 2021-09-08 2022-06-07 에이엠스퀘어 주식회사 Neuron model based control device for optimization of cloud data transmission information amount and control method thereof
CN117614992A (en) * 2023-12-21 2024-02-27 天津建设发展集团股份公司 Edge decision method and system for engineering remote monitoring

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004166181A (en) * 2002-09-17 2004-06-10 Ntt Docomo Inc Mobile communication system, server apparatus and data transmission method
KR20090041920A (en) * 2007-10-25 2009-04-29 한국전자통신연구원 Network-based mobility management method in mobile communication system
KR20090116215A (en) * 2008-05-06 2009-11-11 (주) 티앤엑스시스템즈 Intelligent video management system
KR101626723B1 (en) * 2015-08-27 2016-06-13 목포대학교산학협력단 Service gateway using internet of things and operating method of the same
KR20190056957A (en) * 2017-11-17 2019-05-27 한국전자통신연구원 COMPUTING SYSTEM AND METHOD FOR INTELLIGENT IoE INFORMATION FRAMEWORK
KR20190078454A (en) * 2017-12-26 2019-07-04 경희대학교 산학협력단 An Autonomous System and Method based on Distributed Cloud Environment

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004166181A (en) * 2002-09-17 2004-06-10 Ntt Docomo Inc Mobile communication system, server apparatus and data transmission method
KR20090041920A (en) * 2007-10-25 2009-04-29 한국전자통신연구원 Network-based mobility management method in mobile communication system
KR20090116215A (en) * 2008-05-06 2009-11-11 (주) 티앤엑스시스템즈 Intelligent video management system
KR101626723B1 (en) * 2015-08-27 2016-06-13 목포대학교산학협력단 Service gateway using internet of things and operating method of the same
KR20190056957A (en) * 2017-11-17 2019-05-27 한국전자통신연구원 COMPUTING SYSTEM AND METHOD FOR INTELLIGENT IoE INFORMATION FRAMEWORK
KR20190078454A (en) * 2017-12-26 2019-07-04 경희대학교 산학협력단 An Autonomous System and Method based on Distributed Cloud Environment

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113727069A (en) * 2021-08-27 2021-11-30 江苏艾什顿科技有限公司 Broadcasting and TV 5G network video transmission system and method for railway vehicle
CN113727069B (en) * 2021-08-27 2024-02-06 江苏艾什顿科技有限公司 Rail vehicle broadcast television 5G network video transmission system and method
KR102405726B1 (en) 2021-09-08 2022-06-07 에이엠스퀘어 주식회사 Neuron model based control device for optimization of cloud data transmission information amount and control method thereof
CN117614992A (en) * 2023-12-21 2024-02-27 天津建设发展集团股份公司 Edge decision method and system for engineering remote monitoring

Also Published As

Publication number Publication date
KR102300124B1 (en) 2021-09-08

Similar Documents

Publication Publication Date Title
US11974201B2 (en) Vehicle-road collaboration apparatus and method, electronic device, and storage medium
KR102300124B1 (en) video surveillance system by use of core VMS and edge VMS in mobile edge computing
US20200007409A1 (en) INTELLIGENT INTERNET OF EVERYTHING (IoE) EDGE COMPUTIING SYSTEM FOR HIGH RELIABLE INTERNET OF THINGS (IoT) SERVICE
Ding et al. Opportunities for applications using 5G networks: Requirements, challenges, and outlook
Stojmenovic Fog computing: A cloud to the ground support for smart things and machine-to-machine networks
EP3360352B1 (en) Video management defined embedded voice communication groups
WO2019144746A1 (en) Service management method and related devices
CN113301077B (en) Cloud computing service deployment and distribution method, system, equipment and storage medium
Amento et al. FocusStack: Orchestrating edge clouds using location-based focus of attention
US11614974B2 (en) Enabling a fog service layer with application to smart transport systems
US11330511B2 (en) Method and system for multi-access edge computing (MEC) selection and load balancing
JP2018055662A (en) Central system based on cloud type intelligent traffic control system
Ja’afreh et al. Toward integrating software defined networks with the Internet of Things: a review
US11855864B2 (en) Method and apparatus for collecting network traffic in wireless communication system
Dautov et al. Stream processing on clustered edge devices
Shukla et al. Software-defined network and cloud-edge collaboration for smart and connected vehicles
CN113300865B (en) Management and control method, network system, equipment and storage medium
da Silva Barbosa et al. A platform for cloudification of network and applications in the Internet of Vehicles
CN111131750A (en) Scheduling method, device and system
Panek et al. Application relocation in an edge-enabled 5G system: Use cases, architecture, and challenges
Dang et al. Integrated service discovery and placement in information-centric vehicular network slices
CN109714437B (en) Emergency communication network system
Slamnik-Kriještorac et al. Unraveling Edge-based in-vehicle infotainment using the Smart Highway testbed
CN107181929A (en) Method and apparatus for video monitoring
Chekired et al. Distributed SDN-based C4ISR communications: A delay-tolerant network for trusted tactical cloudlets

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant