KR101299552B1 - Method and apparatus for transmitting video data filmed during movement and remote monitoring system - Google Patents

Method and apparatus for transmitting video data filmed during movement and remote monitoring system Download PDF

Info

Publication number
KR101299552B1
KR101299552B1 KR1020100101933A KR20100101933A KR101299552B1 KR 101299552 B1 KR101299552 B1 KR 101299552B1 KR 1020100101933 A KR1020100101933 A KR 1020100101933A KR 20100101933 A KR20100101933 A KR 20100101933A KR 101299552 B1 KR101299552 B1 KR 101299552B1
Authority
KR
South Korea
Prior art keywords
video
image
mobile
encoder
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020100101933A
Other languages
Korean (ko)
Other versions
KR20120040482A (en
Inventor
김현숙
이성춘
정진수
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020100101933A priority Critical patent/KR101299552B1/en
Publication of KR20120040482A publication Critical patent/KR20120040482A/en
Application granted granted Critical
Publication of KR101299552B1 publication Critical patent/KR101299552B1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/003Address allocation methods and details
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/50Address allocation
    • H04L61/5007Internet protocol [IP] addresses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 이동 중에 촬영된 영상 데이터를 송출하는 방법과 장치 및 원격 감시 시스템에 관한 것으로서, 본 발명에 따른 모바일 영상 송출 장치는, 각 영상 인코더의 식별정보와 대응하여 동적 사설 IP를 저장하는 저장부; 독립된 카메라를 통하여 주변 영상을 촬영하여 인코딩하는 하나 이상의 영상 인코더; 및 공인 IP를 기반으로 이동통신망과 통신하며, 각각의 영상 인코더에 동적 사설 IP를 할당하여 상기 저장부에 기록하고 상기 할당한 동적 사설 IP를 기반으로 영상 인코더와 통신하여 특정 영상 인코더로부터 영상 데이터가 수집되면, 상기 특정 영상 인코더의 동적 사설 IP와 대응하는 영상 인코더 식별정보를 상기 저장부에서 추출하고, 상기 공인 IP를 이용하여 상기 수집된 영상 데이터에 상기 추출한 영상 인코더 식별정보를 부가하여 상기 관리센터로 전송하는 모바일 통신 제어부;를 포함한다.The present invention relates to a method and apparatus for transmitting image data captured while moving and a remote monitoring system. The mobile image transmitting apparatus according to the present invention includes a storage unit for storing a dynamic private IP corresponding to identification information of each image encoder. ; One or more image encoders for capturing and encoding surrounding images through an independent camera; And communicate with a mobile communication network based on a public IP, allocate a dynamic private IP to each video encoder, record the data in the storage unit, and communicate with the video encoder based on the assigned dynamic private IP to obtain video data from a specific video encoder. If collected, the video encoder identification information corresponding to the dynamic private IP of the specific video encoder is extracted from the storage unit, and the extracted video encoder identification information is added to the collected video data using the public IP to provide the management center. Mobile communication control unit for transmitting to.

Description

이동 중에 촬영된 영상 데이터를 송출하는 방법과 장치 및 원격 감시 시스템{METHOD AND APPARATUS FOR TRANSMITTING VIDEO DATA FILMED DURING MOVEMENT AND REMOTE MONITORING SYSTEM}METHOD AND APPARATUS FOR TRANSMITTING VIDEO DATA FILMED DURING MOVEMENT AND REMOTE MONITORING SYSTEM}

본 발명은 이동 중에 촬영한 영상 데이터를 원격지의 관리센터 또는 범용 컴퓨터로 송출하는 방법과 장치 및 원격 감시 시스템에 관한 것이다. The present invention relates to a method and apparatus for transmitting image data taken while moving to a remote control center or a general purpose computer, and a remote monitoring system.

오늘날 보안과 범죄를 예방하기 위하여 사용자들은 CCTV(closed-circuit television) 시스템을 주요 지역에 설치하여, 불의의 사고로부터 인체와 재산을 보호한다. 이러한 CCTV 시스템의 원리를 살펴보면, 복수의 CCTV 카메라는 동축케이블 또는 광케이블로 중앙 시스템에 연결되고, 중앙 시스템은 각각의 CCTV 카메라로부터 전달받은 영상화면을 대형 모니터에 출력하여, 관리자에게 현장의 실시간 화면을 제공한다. In order to prevent security and crime today, users install closed-circuit television (CCTV) systems in key areas to protect their bodies and property from accidents. Looking at the principle of such a CCTV system, a plurality of CCTV cameras are connected to the central system by a coaxial cable or an optical cable, the central system outputs the video screen received from each CCTV camera on a large monitor, giving the administrator a real-time screen of the site to provide.

그런데 종래의 CCTV 시스템은 초기 구축비용이 많이 발생하여 한시적으로 개최되는 행사에는 적용하기 힘든 문제점이 있다. 예를 들어, 절도, 소매치기, 성추행 등의 범죄가 많이 발생하는 월드컵 거리 응원행사, 신년 타종 행사에는 비용 문제로 인하여 CCTV 시스템이 해당 행사 지역에 구축되기 어렵고, 이에 따라 대규모의 경찰관들이 해당 행사 지역에 파견되기도 한다. However, the conventional CCTV system has a problem that is difficult to apply to events held for a limited time due to the high initial construction cost. For example, in the case of World Cup street cheering events and crimes such as theft, pickpocketing, and sexual harassment, and New Year's events, the CCTV system is difficult to build due to cost problems. Some may be dispatched.

아울러, 종래의 CCTV 시스템은 특정 장소에 고정되어 설치되기 때문에, 이동하면서 진행되고 있는 특정 사건 또는 현장에 적용하기에는 한계가 있다. 예를 들어, 불법 집회에서 참여한 사용자들이 이동할 경우, 종래의 CCTV 시스템은 해당 집회 현장을 이동하면서 촬영할 수 없는 문제점이 있다.In addition, since the conventional CCTV system is fixedly installed at a specific place, there is a limit to apply it to a specific event or a site that is in progress while moving. For example, when users who participate in illegal assembly move, the conventional CCTV system has a problem that can not be taken while moving the assembly site.

본 발명은 이러한 종래의 문제점을 해결하기 위하여 제안된 것으로, 구축비용이 저렴하고 이동하면서도 현장 상황을 촬영하여 송출하는 방법과 장치 및 원격 감시 시스템을 제공하는데 그 목적이 있다.SUMMARY OF THE INVENTION The present invention has been proposed to solve such a conventional problem, and an object thereof is to provide a method, an apparatus, and a remote monitoring system for photographing and transmitting a field situation while the construction cost is low and mobile.

본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.Other objects and advantages of the present invention can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. It will also be readily apparent that the objects and advantages of the invention may be realized and attained by means of the instrumentalities and combinations particularly pointed out in the appended claims.

상기 목적을 달성하기 위한 본 발명의 제 1 측면에 따른 이동 중에 촬영된 영상 데이터를 원격지의 관리센터로 전송하는 모바일 영상 송출 장치는, 각 영상 인코더의 식별정보와 대응하여 동적 사설 IP를 저장하는 저장부; 독립된 카메라를 통하여 주변 영상을 촬영하여 인코딩하는 하나 이상의 영상 인코더; 및 공인 IP를 기반으로 이동통신망과 통신하며, 각각의 영상 인코더에 동적 사설 IP를 할당하여 상기 저장부에 기록하고 상기 할당한 동적 사설 IP를 기반으로 영상 인코더와 통신하여 특정 영상 인코더로부터 영상 데이터가 수집되면, 상기 특정 영상 인코더의 동적 사설 IP와 대응하는 영상 인코더 식별정보를 상기 저장부에서 추출하고, 상기 공인 IP를 이용하여 상기 수집된 영상 데이터에 상기 추출한 영상 인코더 식별정보를 부가하여 상기 관리센터로 전송하는 모바일 통신 제어부;를 포함하는 것을 특징으로 한다.In order to achieve the above object, a mobile video transmission apparatus for transmitting video data photographed during a movement to a remote management center according to a first aspect of the present invention stores a dynamic private IP corresponding to identification information of each video encoder. part; One or more image encoders for capturing and encoding surrounding images through an independent camera; And communicate with a mobile communication network based on a public IP, allocate a dynamic private IP to each video encoder, record the data in the storage unit, and communicate with the video encoder based on the assigned dynamic private IP to obtain video data from a specific video encoder. If collected, the video encoder identification information corresponding to the dynamic private IP of the specific video encoder is extracted from the storage unit, and the extracted video encoder identification information is added to the collected video data using the public IP to provide the management center. It characterized in that it comprises a; mobile communication control unit for transmitting to.

상기 목적을 달성하기 위한 본 발명의 제 2 측면에 따른 이동통신망에서 통용하는 공인 IP를 가지며 상기 공인 IP를 기반으로 상기 이동통신망과 통신하는 모바일 영상 송출 장치에서 영상 데이터를 원격지의 관리센터로 전송하는 방법은, 각각의 카메라와 연결된 적어도 하나 이상의 영상 인코더에 동적 사설 IP를 각각 할당하는 동적 사설 IP 할당 단계; 할당된 동적 사설 IP와 영상 인코더 식별정보가 기록된 매핑 테이블을 생성하는 매핑 테이블 생성 단계; 특정 영상 인코더로부터 인코딩된 영상 데이터를 수신하여 상기 영상 데이터의 소스 어드레스에 기록된 동적 사설 IP와 대응되는 영상 인코더 식별정보를 상기 매핑 테이블에서 확인하는 식별정보 확인 단계; 및 상기 인코딩된 영상 데이터에 상기 영상 인코더의 식별정보를 부가하여 상기 관리센터로 전송하는 전송 단계;를 포함하는 것을 특징으로 한다.To transmit the video data to a remote management center in a mobile video transmission device having a public IP commonly used in the mobile communication network according to the second aspect of the present invention for communicating with the mobile communication network based on the public IP to achieve the above object The method comprises: assigning a dynamic private IP to each of at least one video encoder associated with each camera; A mapping table generating step of generating a mapping table in which allocated dynamic private IP and image encoder identification information are recorded; An identification information confirming step of receiving encoded image data from a specific image encoder and confirming image encoder identification information corresponding to a dynamic private IP recorded at a source address of the image data in the mapping table; And transmitting the identification information of the video encoder to the encoded image data and transmitting the identification information to the management center.

상기 목적을 달성하기 위한 본 발명의 제 3 측면에 따른 원격지에서 촬영된 주변 영상 화면을 실시간으로 모니터링하는 원격 감시 시스템은, 공인 IP를 통해 이동통신망과 통신하며, 카메라와 연결된 하나 이상의 영상 인코더를 구비하여 각각의 영상 인코더에 대해 동적 사설 IP를 할당하여 동적 사설 IP를 기반으로 통신한 특정 영상 인코더로부터 영상 데이터를 수신하면 상기 영상 데이터의 소스 IP를 근거로 상기 영상 데이터를 인코딩한 영상 인코더의 식별정보를 확인하고, 이 영상 인코더 식별정보를 상기 영상 데이터에 부가하여 상기 이동통신망으로 전송하는 모바일 영상 송출 장치; 및 상기 모바일 영상 송출 장치로부터 전송된 영상 데이터를 수신하여 디코딩하고, 상기 영상 데이터에 부가된 영상 인코더 식별정보를 근거로 분할된 복수의 화면에 상기 디코딩된 영상 데이터를 지정하여 출력하는 관리센터;를 포함하는 것을 특징으로 한다.In order to achieve the above object, a remote monitoring system for real-time monitoring of a surrounding image screen captured at a remote location according to a third aspect of the present invention communicates with a mobile communication network through a public IP and includes one or more image encoders connected to a camera. Receiving video data from a specific video encoder communicating based on the dynamic private IP by allocating a dynamic private IP to each video encoder, the identification information of the video encoder encoding the video data based on the source IP of the video data. A mobile video transmission device for transmitting the video encoder identification information to the video data and transmitting the video encoder identification information to the mobile communication network; And a management center that receives and decodes the image data transmitted from the mobile image transmitting apparatus and designates and outputs the decoded image data on a plurality of screens divided based on the image encoder identification information added to the image data. It is characterized by including.

본 발명은 케이블 연결이 필요없는 모바일 영상 송출 장치를 제공함으로써, 한시적으로 개최되는 집회, 행사 등에 적은 비용으로 감시 시스템을 구축시킬 수 있으며, 더불어 집회, 행사 등이 종료된 경우 상기 감시 시스템의 해제하는 시간과 비용도 절약시키는 장점이 있다.The present invention provides a mobile video transmission device that does not require a cable connection, it is possible to build a monitoring system for a limited time, such as a rally, an event held for a limited time, and to release the monitoring system when the rally, event, etc. are finished It also saves time and money.

또한, 본 발명은 이동하면서 촬영한 주변 영상을 이동통신망을 통해 원격지의 관리센터 또는 클라이언트 단말로 전송하여, 모니터링 대상자들의 움직임과 현장 상황을 지속적으로 확인할 수 있는 장점이 있다.In addition, the present invention has the advantage of transmitting the surrounding image taken while moving to a remote control center or a client terminal through a mobile communication network, it is possible to continuously check the movement and the situation of the monitoring targets.

본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 발명을 실시하기 위한 구체적인 내용과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.
도 1은 본 발명의 일 실시예에 따른, 원격 감시 시스템의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른, 모바일 영상 송출 장치의 구성을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른, 모바일 통신 제어부가 영상 인코더의 IP를 할당하는 방법을 설명하는 절차도이다.
도 4는 본 발명의 일 실시예에 따른, 모바일 영상 송출 장치가 변경된 IP 정보를 관리센터로 보고하는 방법을 설명하는 절차도이다.
도 5는 본 발명의 일 실시예에 따른, 클라이언트 단말이 모바일 영상 송출 장치에 접속하여 영상 데이터를 수신하는 방법을 설명하는 절차도이다.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are incorporated in and constitute a part of the specification, illustrate exemplary embodiments of the invention and, together with the description, serve to explain the principles of the invention. And shall not be construed as limited to such matters.
1 is a diagram showing the configuration of a remote monitoring system according to an embodiment of the present invention.
2 is a diagram illustrating a configuration of a mobile video transmitting apparatus according to an embodiment of the present invention.
3 is a flowchart illustrating a method of allocating an IP of an image encoder by a mobile communication controller according to an embodiment of the present invention.
4 is a flowchart illustrating a method for reporting changed IP information to a management center by a mobile video transmission apparatus according to an embodiment of the present invention.
5 is a flowchart illustrating a method in which a client terminal accesses a mobile video transmitting apparatus and receives image data according to an embodiment of the present invention.

상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
The foregoing and other objects, features and advantages of the present invention will become more apparent from the following detailed description of the present invention when taken in conjunction with the accompanying drawings, in which: There will be. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른, 원격 감시 시스템의 구성을 나타내는 도면이다. 1 is a diagram showing the configuration of a remote monitoring system according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 원격 감시 시스템은 모바일 영상 송출 장치(200), DDNS(Dynamic Domain Name Server)(300) 및 관리센터(100)를 포함한다. 상기 모바일 영상 송출 장치(200), DDNS(300), 관리센터(100) 및 클라이언트 단말(400)은 이동통신망(500)을 통하여 서로 통신한다. 상기 이동통신망(500)은 WCDMA망, CDMA망 등으로서 바람직하게는 Wibro망이다.As shown in FIG. 1, the remote monitoring system includes a mobile video transmission device 200, a dynamic domain name server (DDNS) 300, and a management center 100. The mobile video transmission device 200, the DDNS 300, the management center 100, and the client terminal 400 communicate with each other through the mobile communication network 500. The mobile communication network 500 is a WCDMA network, a CDMA network, or the like, preferably a Wibro network.

모바일 영상 송출 장치(200)는 하나 이상의 영상 인코더(215-N)와 카메라(213-N)를 구비하고, 각각의 카메라(213-N)를 통해 다양한 각도 또는 여러 장소에서 촬영된 영상 데이터를 이동통신망(500)을 통해 관리센터(100)로 전송한다. 특히, 모바일 영상 송출 장치(200)는 하나 이상의 영상 인코더(215-N)를 구비하고, 상기 영상 인코더(215-N)로 동적 사설 IP를 할당하여, 할당된 동적 사설 IP를 기반으로 복수의 영상 인코더(215-N)와 통신한다. 또한, 모바일 영상 송출 장치(200)는 이동통신망(500)에서 통용되는 공인 IP를 이용하여 관리센터(100) 또는 클라이언트 단말(400)과 통신한다. 이러한 모바일 영상 송출 장치(200)는 차량 등과 같은 기동성이 뛰어난 장치에 설치된다.The mobile image transmission device 200 includes one or more image encoders 215 -N and a camera 213 -N, and moves image data captured at various angles or locations through each camera 213 -N. It transmits to the management center 100 through the communication network (500). In particular, the mobile video transmission device 200 includes one or more video encoders 215 -N, and allocates a dynamic private IP to the video encoder 215 -N, thereby providing a plurality of images based on the assigned dynamic private IP. Communicate with the encoder 215 -N. In addition, the mobile video transmission device 200 communicates with the management center 100 or the client terminal 400 by using a public IP commonly used in the mobile communication network (500). The mobile image transmission device 200 is installed in a device having excellent maneuverability such as a vehicle.

DDNS(300)는 모바일 영상 송출 장치(200)의 식별정보, 도메인 네임 및 공인 IP를 매핑하여 저장한다. 특히, DDNS(300)는 특정 모바일 영상 송출 장치(200)의 도메인 메인을 전송한 클라이언트 단말(400)로 해당 모바일 영상 송출 장치(200)의 공인 IP를 전달한다.The DDNS 300 maps and stores identification information, domain name, and public IP of the mobile video transmission device 200. In particular, the DDNS 300 transmits the public IP of the mobile video transmission apparatus 200 to the client terminal 400 which has transmitted the domain main of the specific mobile video transmission apparatus 200.

관리센터(100)는 하나 이상의 모바일 영상 송출 장치(200)로부터 영상 데이터를 수신하여, 이를 토대로 각각의 모바일 영상 송출 장치(200)가 위치한 현장의 범죄사항, 절도, 비상상태 등을 모니터링하는 기능을 수행한다. 바람직하게, 관리센터(100)는 각각의 모바일 영상 송출 장치(200)로부터 수신한 영상 데이터를 저장하고 더불어 해당 영상을 디코딩하여 대형 모니터에 출력한다. 또한, 관리센터(100)는 각각의 모바일 영상 송출 장치(200)의 출력수단으로 지정된 복수의 대형 모니터를 구비한다. 특히, 관리센터(100)는 영상 데이터를 전송한 모바일 영상 송출 장치(200)의 공인 IP를 확인하고, 이 공인 IP를 토대로 복수의 모니터 중에서 해당 모바일 영상 송출 장치(200)의 모니터를 확인하여 디코딩된 영상 데이터를 상기 확인된 모니터로 출력한다. 아울러, 관리센터(100)는 수신한 영상 데이터에서 인코더 식별정보를 추출하고, 이 인코더 식별정보에 근거하여 수신한 영상 데이터가 모바일 영상 송출 장치(200)에 구비된 복수의 영상 인코더(215-N) 중에서 어느 인코더에서 촬영된 것인지를 인식한다. 게다가, 관리센터(100)는 각각의 모바일 영상 송출 장치(200)에 대한 공인 IP와 도메인 네임을 저장한다.The management center 100 receives image data from one or more mobile image transmission apparatuses 200, and monitors crimes, thefts, and emergency conditions at sites where the respective mobile image transmission apparatuses 200 are located. To perform. Preferably, the management center 100 stores the image data received from each mobile image transmission device 200 and decodes the image and outputs the image to a large monitor. In addition, the management center 100 includes a plurality of large monitors designated as output means of the respective mobile image transmitting apparatuses 200. In particular, the management center 100 checks the public IP of the mobile video transmission apparatus 200 that has transmitted the image data, and checks and decodes the monitor of the mobile video transmission apparatus 200 among the plurality of monitors based on the public IP. Image data is output to the checked monitor. In addition, the management center 100 extracts encoder identification information from the received image data, and based on the encoder identification information, the received image data is provided in the mobile image transmitting apparatus 200. ), Which encoder is photographed. In addition, the management center 100 stores the public IP and domain name for each mobile video transmission device 200.

클라이언트 단말(400)은 범용 컴퓨터 또는 이동통신단말로서, 모바일 영상 송출 장치(200)로 접속하여, 상기 모바일 영상 송출 장치(200)에서 촬영되는 영상 데이터를 수신한다. 특히, 클라이언트 단말(400)은 인코더 식별정보를 모바일 영상 송출 장치(200)로 전송함으로써, 모바일 영상 송출 장치(200)에 구비된 복수의 영상 인코더(215-N) 중에서 어느 한 영상 인코더(215-N)에서 촬영되고 있는 영상 데이터만을 선정하여 수신할 수 있다.The client terminal 400 is a general-purpose computer or a mobile communication terminal connected to the mobile image transmitting apparatus 200 to receive image data captured by the mobile image transmitting apparatus 200. In particular, the client terminal 400 transmits the encoder identification information to the mobile video transmission device 200, thereby enabling any one of the plurality of video encoders 215 -N included in the mobile video transmission device 200. Only image data captured in N) can be selected and received.

이하, 도 2 내지 도 5를 참조한 설명을 통해 본 발명에 따른, 이동 중에 촬영된 영상 데이터를 송출하는 방법과 장치 및 감시 시스템에 대해 보다 자세하게 설명한다. Hereinafter, a method, an apparatus, and a monitoring system for transmitting image data photographed while moving according to the present invention will be described in more detail with reference to FIGS. 2 to 5.

도 2는 본 발명의 일 실시예에 따른, 모바일 영상 송출 장치의 구성을 나타내는 도면이다.2 is a diagram illustrating a configuration of a mobile video transmitting apparatus according to an embodiment of the present invention.

도 2에 도시된 바와 같이, 본 발명의 바람직한 실시예에 따른 모바일 영상 송출 장치(200)는 복수의 모바일 촬영 세트(210-N), 저장부(230) 및 모바일 통신 제어부(250)를 포함한다.As shown in FIG. 2, the mobile image transmission device 200 according to the preferred embodiment of the present invention includes a plurality of mobile photographing sets 210 -N, a storage unit 230, and a mobile communication control unit 250. .

각각의 모바일 촬영 세트(210-N)는 모바일 영상 송출 장치(200)가 위치한 주변 영상을 촬영하기 위한 촬영 기본 세트로서, 메모리(211-N), 카메라(213-N) 및 영상 인코더(215-N)를 포함한다. Each mobile photographing set 210 -N is a photographing basic set for photographing a surrounding image in which the mobile image transmitting apparatus 200 is located. The memory photographing set 210 -N includes a memory 211 -N, a camera 213 -N, and an image encoder 215-. N).

메모리(211-N)는 카메라(213-N)에 의해 촬영된 영상을 저장하는 기능을 수행한다.The memory 211 -N performs a function of storing an image photographed by the camera 213 -N.

카메라(213-N)는 영상 인코더(215-N)와 전기적으로 연결되며, 주변 영상을 촬영하여 영상신호를 생성하고 상기 영상신호를 영상 인코더(215-N)로 전달한다. The camera 213 -N is electrically connected to the image encoder 215 -N. The camera 213 -N is electrically connected to the image encoder 215 -N to generate an image signal by capturing the surrounding image and to transmit the image signal to the image encoder 215 -N.

영상 인코더(215-N)는 모바일 통신 제어부(250)와 근거리 무선통신을 수행하는 근거리 무선통신 모뎀을 탑재하여, 카메라(213-N)로부터 전달받은 영상신호를 사전에 정해진 규격으로 인코딩하여 메모리(211-N)에 저장하고, 더불어 모바일 통신 제어부(250)로 전달하는 기능을 수행한다. 선택적으로, 영상 인코더(215-N)는 상기 모바일 통신 제어부(250)와 유선 케이블로 연결되어 유선통신을 수행할 수도 있다. 또한, 상기 영상 인코더(215-N)는 모바일 통신 제어부(250)와 통신하기 위하여 모바일 통신 제어부(250)로부터 동적 사설 IP를 할당받고, 상기 동적 사설 IP를 기반으로 모바일 통신 제어부(250)와 통신한다. 즉, 영상 인코더(215-N)는 초기 연결되거나 파워온(Power On)되는 경우, 모바일 통신 제어부(250)에 의해 동적 사설 IP를 할당받아 그 동적 사설 IP를 자신의 IP로 설정하고, 이렇게 설정된 동적 사설 IP를 기반으로 모바일 통신 제어부(250)와 통신한다.The video encoder 215 -N includes a short range wireless communication modem that performs short range wireless communication with the mobile communication control unit 250, and encodes a video signal received from the camera 213 -N according to a predetermined standard to store a memory ( 211-N), and transmits the same to the mobile communication control unit 250. Optionally, the image encoder 215 -N may be connected to the mobile communication controller 250 by a wired cable to perform wired communication. In addition, the video encoder 215 -N receives a dynamic private IP from the mobile communication controller 250 to communicate with the mobile communication controller 250, and communicates with the mobile communication controller 250 based on the dynamic private IP. do. That is, when the video encoder 215 -N is initially connected or powered on, the video encoder 215 -N is allocated a dynamic private IP by the mobile communication controller 250, and sets the dynamic private IP as its own IP. Communicate with the mobile communication controller 250 based on the dynamic private IP.

상기 메모리(211-N), 카메라(213-N) 및 영상 인코더(215-N)는 일체형으로 통합될 수도 있다.The memory 211 -N, the camera 213 -N, and the image encoder 215 -N may be integrally integrated.

저장부(230)는 영상 인코더(215-N)로 할당하기 위한 동적 사설 IP 풀을 저장하고, 더불어 영상 인코더(215-N)의 동적 사설 IP와 영상 인코더(215-N)의 식별정보를 저장한다.The storage unit 230 stores a dynamic private IP pool for allocating to the video encoder 215 -N, and also stores the dynamic private IP of the video encoder 215 -N and identification information of the video encoder 215 -N. do.

모바일 통신 제어부(250)는 각각의 영상 인코더(215-N)와 근거리 무선통신을 통해 영상 데이터를 수신하여, 이 영상 데이터를 이동통신망(500)으로 전송하는 기능을 수행한다. 또한, 모바일 통신 제어부(250)는 이동통신망(500)로부터 공인 IP를 할당받아, 이 공인 IP를 자신의 IP로 설정하고, 상기 공인 IP를 기반으로 이동통신망(500)과 통신한다. 아울러, 모바일 통신 제어부(250)는 자신의 IP가 변경된 경우, 이 변경된 공인 IP를 DDNS(300)로 보고한다. 한편, 모바일 영상 송출 장치(200)에는 스마트 카드(예컨대, USIM 카드)가 장착 가능한 카드 연결부(도면에 도시되지 않음)가 포함되고, 상기 카드 연결부에 스마트 카드가 장착된 경우, 모바일 통신 제어부(250)는 상기 스마트 카드에서 가입자 인증정보를 추출하여 이동통신망(500)으로 전송함으로써 가입자 인증을 요청하고, 인증 성공한 경우 상기 이동통신망(500)으로부터 공인 IP를 할당받는다.The mobile communication controller 250 receives image data through short-range wireless communication with each image encoder 215 -N, and transmits the image data to the mobile communication network 500. In addition, the mobile communication control unit 250 receives a public IP from the mobile communication network 500, sets the public IP as its own IP, and communicates with the mobile communication network 500 based on the public IP. In addition, when its IP is changed, the mobile communication controller 250 reports the changed public IP to the DDNS 300. Meanwhile, the mobile video transmission device 200 includes a card connection unit (not shown) to which a smart card (for example, a USIM card) can be mounted, and when the smart card is mounted to the card connection unit, the mobile communication control unit 250 ) Requests subscriber authentication by extracting subscriber authentication information from the smart card and transmitting it to the mobile communication network 500, and if the authentication is successful, receives a public IP from the mobile communication network 500.

또한, 모바일 통신 제어부(250)는 각각의 영상 인코더(215-N)로 동적 사설 IP를 할당하는 IP 할당 모듈(250a)을 포함한다. In addition, the mobile communication control unit 250 includes an IP allocation module 250a that allocates a dynamic private IP to each video encoder 215 -N.

상기 IP 할당 모듈(250a)은 영상 인코더(215-N)로부터 IP 할당을 요청받으면, 저장부(230)의 IP 풀에서 미할당된 동적 사설 IP를 추출하고, 이 추출된 IP와 할당 요청한 영상 인코더(215-N)의 식별정보를 저장부(230)에 저장한다. 아울러, IP 할당 모듈(250a)은 상기 추출한 동적 사설 IP를 해당 영상 인코더(215-N)로 전송하여, 이 영상 인코더(215-N)의 IP를 설정한다.When the IP allocation module 250a receives an IP allocation request from the image encoder 215 -N, the IP allocation module 250a extracts an unassigned dynamic private IP from the IP pool of the storage 230, and extracts the extracted IP and the image requesting allocation encoder. The identification information of 215-N is stored in the storage unit 230. In addition, the IP allocation module 250a transmits the extracted dynamic private IP to the corresponding video encoder 215 -N to set the IP of the video encoder 215 -N.

도 3은 본 발명의 일 실시예에 따른, 모바일 통신 제어부가 영상 인코더의 IP를 할당하는 방법을 설명하는 절차도이다.3 is a flowchart illustrating a method of allocating an IP of an image encoder by a mobile communication controller according to an embodiment of the present invention.

도 3을 참조한 설명에서 영상 인코더#1(215-1)이 모바일 통신 제어부(250)로 IP 할당을 요청하는 것으로 가정한다.In the description with reference to FIG. 3, it is assumed that the image encoder # 1 215-1 requests an IP allocation to the mobile communication controller 250.

도 3을 참조하면, 파워온되거나 최초로 모바일 통신 제어부(250)로 접속을 시도하는 영상 인코더#1(215-1)은 모바일 통신 제어부(250)로 IP 할당 요청 메시지를 전송한다(S301). 이때, 영상 인코더#1(215-1)은 자신의 식별정보를 상기 IP 할당 요청 메시지에 기록한다. Referring to FIG. 3, the video encoder # 1 215-1 that is powered on or attempts to access the mobile communication controller 250 for the first time transmits an IP allocation request message to the mobile communication controller 250 (S301). At this time, the video encoder # 1 215-1 records its identification information in the IP allocation request message.

그러면, 모바일 통신 제어부(250)는 IP 할당 모듈(250a)을 활성화하고, 활성화된 IP 할당 모듈(250a)은 저장부(230)의 IP 풀에서 할당되지 않은 동적 사설 IP를 추출한다(S303). 이어서, IP 할당 모듈(250a)은 IP 할당 요청 메시지에 기록된 영상 인코더#1(215-1)의 식별정보를 확인하고, 상기 영상 인코더#1(215-1)의 식별정보와 추출한 동적 사설 IP를 매핑하여 저장부(230)에 저장한다. 그리고 IP 할당 모듈(250a)은 상기 추출한 동적 사설 IP를 근거리 무선 통신 규약을 통해 영상 인코더#1(215-1)로 전송한다(S305).Then, the mobile communication controller 250 activates the IP allocation module 250a, and the activated IP allocation module 250a extracts the unassigned dynamic private IP from the IP pool of the storage 230 (S303). Subsequently, the IP allocation module 250a checks the identification information of the image encoder # 1 215-1 recorded in the IP allocation request message, and identifies the identification information of the image encoder # 1 215-1 and the extracted dynamic private IP. Map to store in the storage 230. The IP allocation module 250a transmits the extracted dynamic private IP to the video encoder # 1 215-1 through short range wireless communication protocol (S305).

다음으로, 영상 인코더#1(215-1)은 모바일 통신 제어부(250)로부터 수신한 동적 사설 IP를 자신의 IP로 설정한다(S307). 이어서, 영상 인코더#1(215-1)은 카메라#1(213-1)로부터 영상신호가 수신되면, 상기 영상신호를 소정의 규격으로 인코딩하여 메모리#1(211-1)에 저장하고, 자신의 IP(즉, 동적 사설 IP)가 소스 IP로 설정하여 상기 인코딩된 영상 데이터를 모바일 통신 제어부(250)로 전달한다(S309, S311). Next, the video encoder # 1 215-1 sets the dynamic private IP received from the mobile communication controller 250 as its own IP (S307). Subsequently, when an image signal is received from the camera # 1 213-1, the image encoder # 1 215-1 encodes the image signal into a predetermined standard and stores the image signal in the memory # 1 211-1. The IP (that is, the dynamic private IP) is set as the source IP and the encoded video data is transmitted to the mobile communication controller 250 (S309 and S311).

그러면, 모바일 통신 제어부(250)는 수신한 영상 데이터의 소스 IP를 확인하고, 상기 소스 IP와 대응하는 영상 인코더 식별정보(즉, 영상 인코더#1의 식별정보)를 저장부(230)에서 확인한다. 이어서, 모바일 통신 제어부(250)는 상기 영상 데이터에 영상 인코더#1(215-1)의 식별정보를 부가하고 소스 IP를 자신의 IP(즉, 공인 IP)로 설정한 후, 상기 영상 데이터를 관리센터(100)로 전송한다(S313). Then, the mobile communication controller 250 checks the source IP of the received image data, and checks the storage encoder 230 for image encoder identification information (ie, identification information of the image encoder # 1) corresponding to the source IP. . Subsequently, the mobile communication controller 250 adds identification information of the image encoder # 1 215-1 to the image data, sets a source IP as its own IP (that is, a public IP), and then manages the image data. Transmission to the center 100 (S313).

다음으로, 관리센터(100)는 수신한 영상 데이터를 디코딩하고, 상기 영상 데이터의 소스 IP(즉, 모바일 영상 송출 장치의 공인 IP)를 확인한다. 이어서, 관리센터(100)는 상기 소스 IP에 근거하여 복수의 모바일 영상 송출 장치(200) 중에서 영상 데이터를 송신한 모바일 영상 송출 장치(200)를 인식하고, 이 모바일 영상 송출 장치(200)의 디스플레이 수단으로 지정된 모니터로 디코딩한 영상 데이터를 출력한다(S315).Next, the management center 100 decodes the received image data and checks the source IP of the image data (that is, the official IP of the mobile image transmitting apparatus). Subsequently, the management center 100 recognizes the mobile video transmitting apparatus 200 that has transmitted image data among the plurality of mobile video transmitting apparatuses 200 based on the source IP, and displays the mobile video transmitting apparatus 200. The decoded video data is output to the monitor designated by the means (S315).

바람직하게, 관리센터(100)는 상기 모니터의 화면을 모바일 영상 송출 장치(200)의 카메라(213-N)의 개수와 대응되게 분할하고, 이 분할된 화면에 각각의 영상 인코더(215-N)에서 촬영한 영상화면을 출력한다. 부연하면, 관리센터(100)는 수신한 영상 데이터에서 인코더 식별정보를 추출하고, 이 인코더 식별정보에 근거하여 수신한 영상 데이터가 모바일 영상 송출 장치(200)에 구비된 복수의 영상 인코더(215-N) 중에서 어느 영상 인코더(215-N)에서 촬영된 것인지를 인식하고, 이렇게 인식된 영상 인코더(215-N)의 분할 화면에 상기 디코딩한 영상 데이터를 출력한다. 예를 들어, 모바일 영상 송출 장치(200)에 4개의 영상 인코더 장치(215-N)가 구비된 경우, 관리센터(100)는 상기 모바일 영상 송출 장치(200)의 디스플레이 수단으로 지정된 대형 모니터 화면을 4등분하여, 영상인코더#1(215-1)의 식별정보가 기록된 영상 데이터를 제1분할화면에 출력하고, 영상인코더#2(215-2)의 식별정보가 기록된 영상 데이터를 제2분할화면에 출력한다.Preferably, the management center 100 divides the screen of the monitor so as to correspond to the number of cameras 213 -N of the mobile image transmitting apparatus 200, and each image encoder 215 -N is divided into the divided screens. Outputs the image screen shot in. In other words, the management center 100 extracts the encoder identification information from the received image data, and the received image data is provided in the mobile image transmitting apparatus 200 based on the encoder identification information. The image encoder 215-N from among N) is recognized, and the decoded image data is output to the split screen of the recognized image encoder 215-N. For example, when four video encoder devices 215 -N are provided in the mobile video transmitting apparatus 200, the management center 100 may display a large monitor screen designated as a display means of the mobile video transmitting apparatus 200. The video data in which the identification information of the video encoder # 1 215-1 is recorded is output to the first divided screen, and the video data in which the identification information of the video encoder # 2 215-2 is recorded is output to the second screen. Output to split screen.

한편, 모바일 영상 송출 장치(200)는 이동 중에 촬영한 영상을 지속적으로 관리센터(100)로 전송하기 위하여, 위치 이동에 따라 자신의 IP가 변경된 경우 상기 변경된 공인 IP를 관리센터(100)로 보고한다.On the other hand, the mobile image transmission device 200 reports the changed official IP to the management center 100 when its IP is changed in accordance with the position movement in order to continuously transmit the image taken while moving to the management center 100. do.

도 4는 본 발명의 일 실시예에 따른, 모바일 영상 송출 장치에서 변경된 IP 정보를 관리센터로 보고하는 방법을 설명하는 절차도이다.4 is a flowchart illustrating a method of reporting changed IP information to a management center in a mobile video transmitting apparatus according to an embodiment of the present invention.

도 4를 참조하면, 모바일 영상 송출 장치(200)가 제1지역에서 제2지역으로 이동한 경우, 모바일 통신 제어부(250)는 이동통신망(500)에 구축된 IP할당 서버(도면에 도시되지 않음)로부터 새로운 공인 IP를 할당받는다(S401). 부연하면, 이동통신망(500)은 지역별로 공인 IP 풀을 관리하고, 상기 지역별 공인 IP 풀을 토대로 이동통신단말 또는 모바일 영상 송출 장치(200)의 공인 IP를 할당하는 프로세스를 진행한다. 즉, 모바일 영상 송출 장치(200)가 주변 영상을 이동하면서 촬영하고 있는 도중에, 새로운 공인 IP 할당이 필요한 특정 지역에 진입하게 되면, 모바일 영상 송출 장치(200)의 모바일 통신 제어부(250)는 이동통신망(500)으로부터 해당 지역에서 사용되는 새로운 공인 IP를 할당받는다.Referring to FIG. 4, when the mobile video transmission device 200 moves from the first region to the second region, the mobile communication controller 250 may be an IP allocation server built in the mobile communication network 500 (not shown in the drawing). A new public IP is assigned from (S401). In detail, the mobile communication network 500 manages a public IP pool for each region, and performs a process of assigning a public IP of a mobile communication terminal or a mobile video transmission device 200 based on the public IP pool for each region. That is, when the mobile video transmission device 200 enters a specific area requiring new public IP allocation while the mobile video transmission device 200 is recording while moving the surrounding video, the mobile communication control unit 250 of the mobile video transmission device 200 may use the mobile communication network. 500 is assigned a new public IP used in the area.

이렇게 새로운 공인 IP를 할당받은 모바일 통신 제어부(250)는 변경된 공인 IP를 DDNS(300)로 통보한다(S403). 이때, 모바일 통신 제어부(250)는 모바일 영상 송출 장치(200)의 식별정보도 DDNS(300)로 전송한다. 그러면, DDNS(300)는 모바일 영상 송출 장치(200)의 식별정보에 대응되는 도메인 네임과 공인 IP를 확인하고, 상기 확인된 공인 IP를 통보받은 공인 IP로 업데이트한다(S405). 이어서, DDNS(300)는 업데이트된 공인 IP와 상기 모바일 영상 송출 장치(200)의 도메인 네임이 기록된 IP 변경 알림 메시지를 관리센터(100)로 전송한다(S407). The mobile communication control unit 250, which is assigned the new public IP, notifies the DDNS 300 of the changed public IP (S403). At this time, the mobile communication control unit 250 also transmits the identification information of the mobile image transmission device 200 to the DDNS (300). Then, the DDNS 300 checks the domain name and the public IP corresponding to the identification information of the mobile video transmission device 200, and updates the verified public IP to the public IP notified (S405). Subsequently, the DDNS 300 transmits an IP change notification message in which the updated public IP and the domain name of the mobile video transmission device 200 are recorded to the management center 100 (S407).

그러면, 관리센터(100)는 상기 IP 변경 알림 메시지에서 도메인 네임을 추출하고, 상기 추출된 도메인 네임과 매핑된 공인 IP를 상기 IP 변경 알림 메시지에 기록된 공인 IP로 업데이트한다. 그리고 관리센터(100)는 상기 업데이트된 모바일 영상 송출 장치(200)의 공인 IP에 근거하여, 상기 모바일 영상 송출 장치(200)의 영상 데이터를 확인하고 이 영상 데이터를 지정된 대형 모니터에 출력함으로써, 관리자가 상기 모바일 영상 송출 장치(200)의 주변상황을 지속적으로 모니터링하게 한다(S409).Then, the management center 100 extracts the domain name from the IP change notification message, and updates the public IP mapped to the extracted domain name to the public IP recorded in the IP change notification message. The management center 100 checks the image data of the mobile image transmitting apparatus 200 and outputs the image data to a designated large monitor based on the official IP of the updated mobile image transmitting apparatus 200. To continuously monitor the surroundings of the mobile image transmission device 200 (S409).

이러한 절차를 통하여, 모바일 영상 송출 장치(200)는 이동중에 변경된 공인 IP를 DDNS(300)을 통해 관리센터(100)로 통보하고, 관리센터(100)는 모바일 영상 송출 장치(200)의 공인 IP를 변경을 인식한다. 이에 따라, 관리센터(100)는 모바일 영상 송출 장치(200)의 공인 IP가 변경되더라도, 모바일 영상 송출 장치(200)로부터 수신된 영상 데이터를 인식하여 지정된 대형 모니터를 정확하게 출력한다.Through this procedure, the mobile video transmission device 200 notifies the management center 100 through the DDNS 300 of the changed public IP, while the management center 100 is the public IP of the mobile video transmission device 200. Recognize the change. Accordingly, the management center 100 recognizes the image data received from the mobile image transmitting apparatus 200 and accurately outputs the designated large monitor even when the public IP of the mobile image transmitting apparatus 200 is changed.

한편, 사용자는 클라이언트 단말(400)을 이용하여 모바일 영상 송출 장치(200)에 접속함으로써, 모바일 영상 송출 장치(200)의 주변 영상을 원격에서 확인할 수 있다.Meanwhile, the user may remotely check the surrounding image of the mobile image transmitting apparatus 200 by accessing the mobile image transmitting apparatus 200 using the client terminal 400.

도 5는 본 발명의 일 실시예에 따른, 클라이언트 단말이 모바일 영상 송출 장치에 접속하여 영상 데이터를 수신하는 방법을 설명하는 절차도이다.5 is a flowchart illustrating a method in which a client terminal accesses a mobile video transmitting apparatus and receives image data according to an embodiment of the present invention.

도 5를 참조하면, 클라이언트 단말(400)은 사용자의 조작에 따라 모니터링 애플리케이션을 구동하고 이 모니터링 애플리케이션 상에 모바일 영상 송출 장치(200)의 도메인 네임을 입력받아 모바일 영상 송출 장치(200)로 접속을 시도한다. 상기 모니터링 애플리케이션은 모바일 영상 송출 장치(200)를 접속하여 영상 데이터를 수신하기 위한 애플리케이션으로서, 클라이언트 단말(400)에 탑재된다.Referring to FIG. 5, the client terminal 400 drives a monitoring application according to a user's operation, receives a domain name of the mobile video transmitting device 200 on the monitoring application, and accesses the mobile video transmitting device 200. Try. The monitoring application is an application for receiving image data by connecting the mobile image transmitting apparatus 200 and is mounted on the client terminal 400.

모바일 영상 송출 장치(200)로 접속을 시도하는 클라이언트 단말(400)은 먼저 상기 도메인 네임에 대응하는 공인 IP를 DDNS(300)로 질의한다(S501). 그러면, DDNS(300)는 상기 도메인 네임에 대응되는 모바일 영상 송출 장치(200)의 공인 IP를 확인하고, 이 공인 IP를 클라이언트 단말(400)로 전송한다(S503). 다음으로, 클라이언트 단말(400)은 상기 수신한 공인 IP가 목적지 주소로 설정된 영상 데이터 요청 메시지를 모바일 영상 송출 장치(200)로 전송한다(S505). The client terminal 400 attempting to access the mobile video transmission device 200 first queries the DDNS 300 for a public IP corresponding to the domain name (S501). Then, the DDNS 300 checks the public IP of the mobile video transmission device 200 corresponding to the domain name, and transmits the public IP to the client terminal 400 (S503). Next, the client terminal 400 transmits a video data request message in which the received public IP is set as a destination address to the mobile video transmission device 200 (S505).

그러면, 모바일 영상 송출 장치(200)의 모바일 통신 제어부(250)는 영상 데이터를 전송하기 전에, 영상 인코더(215-N)의 식별정보를 요청하는 메시지를 상기 클라이언트 단말(400)로 전송한다(S507). 부연하면, 모바일 통신 제어부(250)는 클라이언트 단말(400)이 관리센터(100)에 구비된 모니터 화면보다 작기 때문에, 각각의 인코더(215-N)로부터 수집된 모든 영상 데이터를 전송하지 않고, 특정 영상 인코더(215-N)에 의해 수집된 영상 데이터만을 클라이언트 단말(400)로 전송하기 위하여, 상기 클라이언트 단말(400)로 영상 인코더(215-N)의 식별정보를 요청하는 메시지를 전송한다. 바람직하게, 모바일 영상 송출 장치(200)는 영상 인코더 식별정보 목록을 클라이언트 단말(400)로 전송하여, 상기 영상 인코더 식별정보 목록 중에서 어느 하나의 선택을 요구한다.Then, the mobile communication control unit 250 of the mobile image transmission device 200 transmits a message requesting identification information of the image encoder 215 -N to the client terminal 400 before transmitting image data (S507). ). In other words, since the mobile terminal 250 is smaller than the monitor screen provided in the management center 100, the mobile communication controller 250 does not transmit all the image data collected from each encoder 215 -N. In order to transmit only the image data collected by the image encoder 215 -N to the client terminal 400, a message for requesting identification information of the image encoder 215 -N is transmitted to the client terminal 400. Preferably, the mobile video transmission device 200 transmits the video encoder identification information list to the client terminal 400 to request the selection of any one of the video encoder identification information list.

그러면, 클라이언트 단말(400)은 상기 영상 인코더 식별정보 목록에 포함된 식별정보 중에서 어느 하나를 선택하고, 상기 선택된 영상 인코더 식별정보를 모바일 영상 송출 장치(200)로 전송한다(S509). 다음으로, 모바일 영상 송출 장치(200)는 상기 수신한 영상 인코더 식별정보에 대응하는 동적 사설 IP를 저장부(230)에서 확인하고, 이 동적 사설 IP를 가지는 영상 인코더(215-N)로부터 수집되는 영상 데이터를 클라이언트 단말(400)로 전송한다(S511, S513). 즉, 모바일 영상 송출 장치(200)는 각각의 영상 인코더(215-N)로부터 수집되는 모든 영상 데이터를 클라이언트 단말(400)로 전송하지 않고, 클라이언트 단말(400)이 지정한 영상 인코더(215-N)로부터 수집되는 영상 데이터만을 상기 클라이언트 단말(400)로 전송한다.Then, the client terminal 400 selects any one of the identification information included in the video encoder identification information list, and transmits the selected video encoder identification information to the mobile video transmission device 200 (S509). Next, the mobile video transmission device 200 checks the dynamic private IP corresponding to the received video encoder identification information in the storage unit 230 and collects the video from the video encoder 215-N having the dynamic private IP. The image data is transmitted to the client terminal 400 (S511 and S513). That is, the mobile video transmitting device 200 does not transmit all video data collected from each video encoder 215 -N to the client terminal 400, but the video encoder 215 -N designated by the client terminal 400. Only the image data collected from the client terminal 400 is transmitted.

도 5의 방법을 통해, 특정 사용자는 모바일 영상 송출 장치(200)의 주변 영상을 원격지에서도 확인할 수 있으며, 수신한 영상 화면에 따라 적절한 조치를 취할 수 있다. 예를 들어, 모바일 영상 송출 장치(200)의 설치를 지시한 관리책임자가 관리센터(100) 이외에 다른 장소에 위치한 경우, 이동통신단말을 이용하여 모바일 영상 송출 장치(200)로 접속하여 영상 데이터를 수신함으로써, 해당 지역의 상황을 실시간으로 확인할 수 있다. Through the method of FIG. 5, a specific user can check the surrounding image of the mobile image transmitting apparatus 200 at a remote location and take appropriate measures according to the received image screen. For example, when the manager instructing the installation of the mobile video transmitting apparatus 200 is located at a place other than the management center 100, the mobile terminal is connected to the mobile video transmitting apparatus 200 to access the image data. By receiving, you can check the status of the area in real time.

상술한 바와 같이, 본 발명은 각각의 카메라(213-N)를 통해 주변 영상을 촬영하는 복수의 인코더(215-N)와 모바일 통신 제어부(250)을 통합하여 구현함으로써, 다양한 각도에서 촬영되는 영상을 이동통신망(500)을 통해 관리센터(100)로 실시간으로 제공하는 장점이 있다. 또한, 본 발명은 모바일 영상 송출 장치(200)의 공인 IP가 변경되면 상기 변경된 공인 IP를 DDNS(300)와 관리센터(100)로 보고함으로써, 각각의 모바일 영상 송출 장치(200)에서 인코딩된 영상 데이터를 관리센터(100)에서 계속적으로 구분하여 모니터에 출력하게 하는 이점이 있다. 아울러, 본 발명은 케이블 연결이 필요없는 모바일 영상 송출 장치(200)를 제공함으로써, 한시적으로 개최되는 집회, 행사 등에 적은 비용으로 감시 시스템을 구축시킬 수 있고, 더불어 집회, 행사 등이 종료된 경우 상기 감시 시스템의 해제하는 시간과 비용도 절약시키는 장점이 있다.As described above, the present invention is implemented by integrating a plurality of encoders (215-N) and the mobile communication control unit 250 for capturing the surrounding image through the respective cameras (213-N), the image photographed from various angles It has the advantage of providing in real time to the management center 100 through the mobile communication network (500). In addition, according to the present invention, when the public IP of the mobile video transmission apparatus 200 is changed, the changed public IP is reported to the DDNS 300 and the management center 100, and the video encoded by each mobile video transmission apparatus 200 is provided. There is an advantage that the data is continuously divided in the management center 100 and output to the monitor. In addition, the present invention provides a mobile video transmission device 200 does not require a cable connection, it is possible to build a monitoring system at a low cost, such as meetings, events held for a limited time, and when the meetings, events, etc. are terminated It also has the advantage of saving time and cost of disabling the monitoring system.

본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 안 된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.While the specification contains many features, such features should not be construed as limiting the scope of the invention or the scope of the claims. In addition, the features described in the individual embodiments herein may be combined and implemented in a single embodiment. Conversely, various features described in the singular < Desc / Clms Page number 5 > embodiments herein may be implemented in various embodiments individually or in combination as appropriate.

도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로, 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 안 된다. 특정 환경에서 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. 상술한 프로그램 구성요소 및 시스템은 일반적으로 단일 소프트웨어 제품 또는 멀티플 소프트웨어 제품에 패키지로 구현될 수 있다.Although the operations have been described in a particular order in the figures, it should be understood that such operations are performed in a particular order as shown, or that all described operations are performed to obtain a sequence of sequential orders, or a desired result . In certain circumstances, multitasking and parallel processing may be advantageous. It should also be understood that the division of various system components in the above embodiments does not require such distinction in all embodiments. The above-described program components and systems can generally be implemented as a single software product or as a package in multiple software products.

상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(시디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.The method of the present invention as described above can be implemented by a program and stored in a computer-readable recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto optical disk, etc.). Such a process can be easily carried out by those skilled in the art and will not be described in detail.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. The present invention is not limited to the drawings.

100 : 관리센터 200 : 모바일 영상 송출 장치
211 : 메모리 213 : 카메라
215 : 영상 인코더 230 : 저장부
250 : 모바일 통신 제어부 300 : DDNS
400 : 클라이언트 단말
100: management center 200: mobile video transmission device
211: memory 213: camera
215: video encoder 230: storage unit
250: mobile communication control unit 300: DDNS
400: client terminal

Claims (10)

이동 중에 촬영된 영상 데이터를 원격지의 관리센터로 전송하는 모바일 영상 송출 장치로서,
각 영상 인코더의 식별정보와 대응하여 동적 사설 IP를 저장하는 저장부;
독립된 카메라를 통하여 주변 영상을 촬영하여 인코딩하는 하나 이상의 영상 인코더; 및
공인 IP를 기반으로 이동통신망과 통신하며, 각각의 영상 인코더에 동적 사설 IP를 할당하여 상기 저장부에 기록하고 상기 할당한 동적 사설 IP를 기반으로 다수의 영상 인코더와 통신하되 다수의 영상 인코더 중에서 어느 한 영상 인코더로부터 영상 데이터가 수집되면, 이 영상 데이터의 소스 어드레스에 기록된 영상 인코더의 동적 사설 IP와 대응하는 영상 인코더 식별정보를 상기 저장부에서 추출하고, 상기 공인 IP를 이용하여 상기 수집된 영상 데이터에 상기 추출한 영상 인코더 식별정보를 부가하여 상기 관리센터로 전송하는 모바일 통신 제어부;를 포함하는 모바일 영상 송출 장치.
A mobile video transmission device for transmitting video data taken while moving to a remote management center,
A storage unit which stores a dynamic private IP in correspondence with identification information of each video encoder;
One or more image encoders for capturing and encoding surrounding images through an independent camera; And
Communicate with a mobile communication network based on public IP, allocate a dynamic private IP to each video encoder, record it in the storage unit, and communicate with a plurality of video encoders based on the assigned dynamic private IP. When the image data is collected from one image encoder, the storage unit extracts image encoder identification information corresponding to the dynamic private IP of the image encoder recorded at the source address of the image data, and uses the public IP to collect the collected image. And a mobile communication control unit for adding the extracted image encoder identification information to data and transmitting the same to the management center.
제 1 항에 있어서,
상기 모바일 통신 제어부는,
특정 지역으로 위치를 변경함에 따라 새로운 공인 IP를 상기 이동통신망으로부터 부여받고, 상기 부여받은 공인 IP를 상기 관리센터로 보고하는 것을 특징으로 하는 모바일 영상 송출 장치.
The method of claim 1,
The mobile communication control unit,
The mobile video transmission device, characterized in that the new public IP is given from the mobile communication network and the given public IP is reported to the management center as the location is changed to a specific region.
제 1 항 또는 제 2 항에 있어서,
상기 모바일 통신 제어부는,
영상 데이터 모니터링을 요청한 클라이언트 단말로 영상 인코더 식별정보를 요청하고 수신하여, 이 영상 인코더 식별정보에 대응하는 동적 사설 IP를 상기 저장부에서 확인하고, 상기 확인된 동적 사설 IP를 가지는 영상 인코더로부터 수집된 영상 데이터를 상기 클라이언트 단말로 전송하는 것을 특징으로 하는 모바일 영상 송출 장치.
3. The method according to claim 1 or 2,
The mobile communication control unit,
Requesting and receiving video encoder identification information from a client terminal requesting video data monitoring, confirming a dynamic private IP corresponding to the video encoder identification information in the storage unit, and collecting from the video encoder having the identified dynamic private IP. Mobile video transmission device, characterized in that for transmitting the video data to the client terminal.
제 1 항 또는 제 2 항에 있어서,
상기 모바일 통신 제어부는,
동적 사설 IP를 기반으로 영상 인코더와 근거리 무선 통신을 수행하는 것을 특징으로 하는 모바일 영상 송출 장치.
3. The method according to claim 1 or 2,
The mobile communication control unit,
A mobile video transmitting device, which performs short-range wireless communication with an video encoder based on a dynamic private IP.
이동통신망에서 통용하는 공인 IP를 가지며 상기 공인 IP를 기반으로 상기 이동통신망과 통신하는 모바일 영상 송출 장치에서 영상 데이터를 원격지의 관리센터로 전송하는 방법으로서,
각각의 카메라와 연결된 적어도 하나 이상의 영상 인코더에 동적 사설 IP를 각각 할당하는 동적 사설 IP 할당 단계;
할당된 동적 사설 IP와 영상 인코더 식별정보가 기록된 매핑 테이블을 생성하는 매핑 테이블 생성 단계;
영상 인코더로부터 인코딩된 영상 데이터를 수신하여 상기 영상 데이터의 소스 어드레스에 기록된 동적 사설 IP와 대응되는 영상 인코더 식별정보를 상기 매핑 테이블에서 확인하는 식별정보 확인 단계; 및
상기 인코딩된 영상 데이터에 상기 영상 인코더의 식별정보를 부가하여 상기 관리센터로 전송하는 전송 단계;를 포함하는 모바일 영상 송출 장치에서의 영상 송출 방법.
A method of transmitting video data to a remote management center in a mobile video transmitting device having a public IP commonly used in a mobile communication network and communicating with the mobile communication network based on the public IP,
A dynamic private IP allocation step of allocating a dynamic private IP to at least one video encoder connected to each camera;
A mapping table generating step of generating a mapping table in which allocated dynamic private IP and image encoder identification information are recorded;
An identification information confirming step of receiving encoded image data from an image encoder and confirming image encoder identification information corresponding to the dynamic private IP recorded at the source address of the image data in the mapping table; And
And transmitting the identification information of the image encoder to the management center by transmitting the identification information of the image encoder to the encoded image data.
제 5 항에 있어서,
제1지역에서 제2지역으로 위치를 변경함에 따라 새로운 공인 IP를 이동통신망으로부터 부여받는 단계; 및
상기 부여받은 공인 IP를 상기 관리센터로 보고하는 단계;를 더 포함하는 것을 특징으로 하는 모바일 영상 송출 장치에서의 영상 송출 방법.
The method of claim 5, wherein
Receiving a new public IP from the mobile communication network as the location is changed from the first region to the second region; And
And reporting the received public IP to the management center.
제 5 항 또는 제 6 항에 있어서,
영상 모니터링을 요청한 클라이언트 단말로 영상 인코더 식별정보를 요청하고 수신하는 단계;
상기 수신된 영상 인코더 식별정보에 대응하는 동적 사설 IP를 상기 매핑 테이블에서 확인하는 단계; 및
상기 확인된 동적 사설 IP를 가지는 영상 인코더로부터 수집되는 영상 데이터를 상기 클라이언트 단말로 전송하는 단계;를 더 포함하는 것을 특징으로 하는 모바일 영상 송출 장치에서의 영상 송출 방법.
The method according to claim 5 or 6,
Requesting and receiving image encoder identification information from a client terminal requesting image monitoring;
Identifying a dynamic private IP corresponding to the received video encoder identification information in the mapping table; And
And transmitting the image data collected from the image encoder having the identified dynamic private IP to the client terminal.
원격지에서 촬영된 주변 영상 화면을 실시간으로 모니터링하는 원격 감시 시스템으로서,
공인 IP를 통해 이동통신망과 통신하며, 카메라와 연결된 하나 이상의 영상 인코더를 구비하여 각각의 영상 인코더에 대해 동적 사설 IP를 할당하여 동적 사설 IP를 기반으로 통신한 다수의 영상 인코더 중에서 어느 한 영상 인코더로부터 영상 데이터를 수신하면 상기 영상 데이터의 소스 IP를 근거로 상기 영상 데이터를 인코딩한 영상 인코더의 식별정보를 확인하고, 이 영상 인코더 식별정보를 상기 영상 데이터에 부가하여 상기 이동통신망으로 전송하는 모바일 영상 송출 장치; 및
상기 모바일 영상 송출 장치로부터 전송된 영상 데이터를 수신하여 디코딩하고, 상기 영상 데이터에 부가된 영상 인코더 식별정보를 근거로 분할된 복수의 화면에 상기 디코딩된 영상 데이터를 지정하여 출력하는 관리센터;를 포함하는 원격 감시 시스템.
As a remote monitoring system that monitors the surrounding video screen shot in remote area in real time,
It communicates with the mobile communication network through public IP, and has one or more video encoders connected to the camera, and allocates a dynamic private IP to each video encoder to communicate with the video based on the dynamic private IP. Upon receiving the video data, the mobile terminal transmits the mobile video transmission system to identify the identification information of the video encoder encoding the video data based on the source IP of the video data. Device; And
And a management center that receives and decodes the image data transmitted from the mobile image transmitting apparatus and designates and outputs the decoded image data on a plurality of screens divided based on the image encoder identification information added to the image data. Remote surveillance system.
제 8 항에 있어서,
상기 모바일 영상 송출 장치의 도메인 네임과 공인 IP를 저장하는 도메인 네임 서버;를 더 포함하고,
상기 모바일 영상 송출 장치는, 특정 지역으로 위치가 변경됨에 따라 상기 이동통신망으로부터 새로운 공인 IP를 부여받아 변경된 공인 IP를 상기 도메인 네임 서버로 통보하고,
상기 도메인 네임 서버는, 상기 모바일 송출 장치의 IP를 상기 보고받은 공인 IP로 업데이트하고, 상기 관리센터로 상기 업데이트한 공인 IP를 보고하는 것을 특징으로 하는 원격 감시 시스템.
The method of claim 8,
And a domain name server storing a domain name and a public IP of the mobile video transmission device.
The mobile video transmission device receives a new public IP from the mobile communication network as a location is changed to a specific region, and notifies the domain name server of the changed public IP,
The domain name server, the remote monitoring system, characterized in that for updating the IP of the mobile transmission device to the reported public IP, and reports the updated public IP to the management center.
제 8 항 또는 제 9 항에 있어서,
상기 도메인 네임 서버는, IP 주소를 질의한 클라이언트 단말로 상기 모바일 영상 송출 장치의 공인 IP를 제공하고,
상기 모바일 영상 송출 장치는, 상기 제공된 공인 IP를 통해 접속한 클라이언트 단말로 영상 인코더 식별정보를 요청하고 수신하여, 상기 영상 인코더 식별정보에 대응하는 동적 사설 IP를 확인하고, 이 동적 사설 IP를 가지는 영상 인코더로부터 수집되는 영상 데이터를 상기 클라이언트 단말로 전송하는 것을 특징으로 하는 원격 감시 시스템.
10. The method according to claim 8 or 9,
The domain name server provides a public IP of the mobile video transmission device to a client terminal that queries an IP address.
The mobile video transmission device requests and receives video encoder identification information from a client terminal connected through the provided public IP, identifies a dynamic private IP corresponding to the video encoder identification information, and has an image having the dynamic private IP. Remote monitoring system, characterized in that for transmitting the video data collected from the encoder to the client terminal.
KR1020100101933A 2010-10-19 2010-10-19 Method and apparatus for transmitting video data filmed during movement and remote monitoring system Active KR101299552B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100101933A KR101299552B1 (en) 2010-10-19 2010-10-19 Method and apparatus for transmitting video data filmed during movement and remote monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100101933A KR101299552B1 (en) 2010-10-19 2010-10-19 Method and apparatus for transmitting video data filmed during movement and remote monitoring system

Publications (2)

Publication Number Publication Date
KR20120040482A KR20120040482A (en) 2012-04-27
KR101299552B1 true KR101299552B1 (en) 2013-08-23

Family

ID=46140368

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100101933A Active KR101299552B1 (en) 2010-10-19 2010-10-19 Method and apparatus for transmitting video data filmed during movement and remote monitoring system

Country Status (1)

Country Link
KR (1) KR101299552B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101375240B1 (en) * 2013-01-18 2014-03-17 주식회사 나다텔 Video serveillance system and operating method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003061078A (en) * 2001-08-17 2003-02-28 Brains Corp Supervisory system for specified area
JP2006287292A (en) * 2005-03-31 2006-10-19 Yokogawa Electric Corp Network camera system
JP2007195093A (en) * 2006-01-23 2007-08-02 Megachips System Solutions Inc Network camera and communications apparatus, and communication system
JP2010057165A (en) * 2008-07-28 2010-03-11 Digix Inc Network camera system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003061078A (en) * 2001-08-17 2003-02-28 Brains Corp Supervisory system for specified area
JP2006287292A (en) * 2005-03-31 2006-10-19 Yokogawa Electric Corp Network camera system
JP2007195093A (en) * 2006-01-23 2007-08-02 Megachips System Solutions Inc Network camera and communications apparatus, and communication system
JP2010057165A (en) * 2008-07-28 2010-03-11 Digix Inc Network camera system

Also Published As

Publication number Publication date
KR20120040482A (en) 2012-04-27

Similar Documents

Publication Publication Date Title
CA2864890C (en) Systems and methods for providing emergency resources
US9084103B2 (en) Analytic and tracking systems and methods using over-the-air identifiers of mobile devices
US10667277B2 (en) Systems and methods for integrated security access control for video and audio streaming
US20140198216A1 (en) Imaging service using outdoor lighting networks
US20160094810A1 (en) System and method for providing neighborhood services through networked cameras
KR101961258B1 (en) Multi-channel network camera monitoring system and constructing method thereof
CN103473579A (en) Indoor zone location method
CN103472803A (en) Indoor zone location system
CN107360404A (en) Mobile video monitor system
KR100791415B1 (en) Data transmission system of monitoring device using web camera
CN210515326U (en) Scenic spot ticket inspection system based on face AI recognition
KR102596485B1 (en) Apparatus and method for registering camera
KR101666531B1 (en) Patrol and vehicles management system
CN112218036A (en) Monitoring system and method
KR101299552B1 (en) Method and apparatus for transmitting video data filmed during movement and remote monitoring system
CN103974032A (en) Monitoring and management system of security equipment
JP6612724B2 (en) Video surveillance system and surveillance video display method
US20030098913A1 (en) Digital swift video controller system
KR20100013469A (en) Real-time image offer system and real-time image offer method
HUP0200104A2 (en) Arrangement and usage method for telemonitoring with cameras
KR20190127101A (en) Security service system and method based on cloud
KR101650164B1 (en) Cctv video-sharing system and provide methods using thereof
KR101383583B1 (en) Remote supervisory method for scene of accident, management method for remote supervisory system and remote supervisory realization method for application operated on mobile terminal
CN203467751U (en) Multifunctional police cap allowing police to record images and sounds of surrounding environment
CN114339168A (en) Regional security monitoring method and device, electronic equipment and storage medium

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

FPAY Annual fee payment

Payment date: 20160804

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

FPAY Annual fee payment

Payment date: 20170803

Year of fee payment: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

FPAY Annual fee payment

Payment date: 20180801

Year of fee payment: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

FPAY Annual fee payment

Payment date: 20190731

Year of fee payment: 7

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 9

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 10

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 11

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 12

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 13

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 13