KR20190083906A - System and method for transmitting a plurality of video image - Google Patents

System and method for transmitting a plurality of video image Download PDF

Info

Publication number
KR20190083906A
KR20190083906A KR1020180001907A KR20180001907A KR20190083906A KR 20190083906 A KR20190083906 A KR 20190083906A KR 1020180001907 A KR1020180001907 A KR 1020180001907A KR 20180001907 A KR20180001907 A KR 20180001907A KR 20190083906 A KR20190083906 A KR 20190083906A
Authority
KR
South Korea
Prior art keywords
image
camera
photographed
cameras
integrated
Prior art date
Application number
KR1020180001907A
Other languages
Korean (ko)
Other versions
KR102025157B1 (en
Inventor
김범준
구자령
홍세진
문지현
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020180001907A priority Critical patent/KR102025157B1/en
Publication of KR20190083906A publication Critical patent/KR20190083906A/en
Application granted granted Critical
Publication of KR102025157B1 publication Critical patent/KR102025157B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Abstract

The present invention relates to a system for transmitting a plurality of photographed images, which is capable of simultaneously watching various positions in a stadium when watching a sports game, and a control method thereof. To achieve this, according to the present invention, the method for controlling the system for transmitting a plurality of photographed images comprises the following steps: receiving a photographed image signal from each of a plurality of cameras; using each photographed image signal received from the cameras to play an image for each camera; synchronizing the photographed image signals of each camera based on at least one of analysis in accordance with an algorithm predetermined to the image for each camera played in the previous step and manager′s selection; multiplexing each synchronized photographed image signal to generate one integrated image signal; and transmitting the integrated image signal generated in the previous step to a reception terminal.

Description

복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법{SYSTEM AND METHOD FOR TRANSMITTING A PLURALITY OF VIDEO IMAGE}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system and method for transmitting a plurality of photographed images,

본 발명은 영상 전송을 위한 시스템 및 그 제어방법에 관한 것으로, 보다 상세하게는 복수의 카메라에 의해 촬영되는 영상들을 전송하기 위한 시스템 및 그 제어방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a system for transmitting images and a control method thereof, and more particularly, to a system and a control method thereof for transmitting images photographed by a plurality of cameras.

최근 아날로그 방송에 국한되지 않고 다양한 방식의 방송 콘텐츠 서비스가 이루어지고 있다.Recently, various types of broadcasting contents services are being implemented not only in analog broadcasting.

그런데 종래에는 방송국에서 하나의 카메라에 의해 촬영된 영상만을 송출함에 따라 시청자는 다양한 각도 또는 다양한 위치에서 촬영된 영상을 동시에 시청할 수 없는 문제점이 있었다.However, conventionally, there is a problem that viewers can not simultaneously view images photographed at various angles or various positions by broadcasting only images captured by one camera in a broadcasting station.

특히 다중의 플레이어가 참여하는 스포츠의 경우 다양한 위치에 있는 플레이어의 모습을 확인 및 시청하고자 하는 시청자들의 요구가 있음에도 불구하고 종래에는 이러한 서비스가 제공되지 못하고 있는 실정이다.Particularly, in the case of a sport in which a plurality of players participate, there is a need for viewers who want to view and view the players at various locations.

예를 들어 야구 경기의 경우, 시청자들 중에는 투수가 투구하는 모습과 1루나 3루 주자의 모습을 동시에 확인하고픈 사람들이 있는데, 종래에는 특정 카메라의 각도가 투수와 주자를 동시에 촬영하는 위치에 있는 경우 또는 투수와 주자를 동시에 촬영하는 화각인 경우에 한하여 투수와 주자를 동시에 보여줄 수 있는데, 이 경우에는 카메라 각도 또는 화각이 상술한 조건을 만족하는 상황이어서 투수의 얼굴이나 주자의 얼굴을 크게 클로즈업하여 보여줄 수 없는 문제가 있어서, 여전히 시청자들의 니즈를 충족시키기에는 부족하다.For example, in the case of a baseball game, there are some viewers who would like to see a pitcher pitching and a first or third base runner at the same time. In the past, when the angle of a particular camera is in a position to shoot a pitcher and a runner at the same time In this case, the camera angle or angle of view satisfies the conditions described above, so that the pitcher's face or the runner's face can be shown close-up There is no problem, and it is still not enough to meet the needs of viewers.

물론 방송국 자체에서 복수의 카메라로 촬영한 영상을 하나의 영상으로 편집하여 전송할 수는 있지만, 이 경우 시청 단말기 상에서 편집 영상에 포함된 일부 영상을 확대하거나 하는 등 별도로 제어할 수 없는 문제가 있다.Of course, the broadcasting station itself can edit and transmit an image captured by a plurality of cameras into a single image, but in this case, there is a problem that it is not possible to separately control some images included in the edited image on the viewing terminal.

즉, 텔레비전 화면을 구분하여 여러 개의 방송 채널을 각각 구분된 영역에 표시되도록 하는 PIP 기술은 이용되고 있지만, 상술한 바와 같이 하나의 채널 내에서 별도로 구분된 다양한 종류의 영상이 동시에 표시되도록 하는 서비스가 제공되고 있지 못하므로, 이에 대한 개선이 필요한 상황이다.That is, although a PIP technique for dividing a television screen and displaying a plurality of broadcast channels in divided areas is used, as described above, a service for simultaneously displaying various kinds of images separately classified in one channel This is a situation that needs to be improved.

등록특허 제10-0974638호Patent No. 10-0974638

본 발명은 상기한 종래의 문제점을 해결하기 위해 안출된 것으로서, 그 목적은 스포츠 경기를 시청하는 경우 경기장 내의 다양한 위치를 동시에 시청할 수 있도록 하는 시스템 및 그 제어방법을 제공하는 것이다. SUMMARY OF THE INVENTION It is an object of the present invention to provide a system and a control method thereof for simultaneously viewing various locations in an arena when a sports game is watched.

상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 영상 수신부와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 재생 처리부와; 상기 재생 처리부에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 동기화 처리부와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 통합 영상 생성부와; 상기 통합 영상 생성부에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 전송부를 포함하여 구성된다.According to an aspect of the present invention, there is provided a system for capturing an image, the system comprising: an image receiver for receiving an image signal from a plurality of cameras; A playback processor for playing back an image for each camera using each shot image signal received from the plurality of cameras; A synchronization processing unit for synchronizing the photographed video signals of the respective cameras based on at least one of analysis according to a predetermined algorithm and manager selection for each camera to be reproduced by the reproduction processing unit; An integrated image generation unit for multiplexing the synchronized photographed image signals to generate an integrated image signal; And a transmitting unit for transmitting the integrated video signal generated by the integrated video generating unit to the receiving terminal.

또, 상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템의 제어방법은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와; 상기 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와; 상기 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하여 이루어진다.According to another aspect of the present invention, there is provided a method of controlling an image pickup system, the method comprising: receiving image pickup signals from a plurality of cameras; Causing each of the plurality of cameras to reproduce an image of each camera using each of the captured image signals received from the plurality of cameras; Synchronizing the photographed image signals of the respective cameras based on at least one of analysis according to a predetermined algorithm and manager selection for each camera image reproduced in the step; Generating a single integrated image signal by multiplexing the synchronized photographed image signals; And transmitting the integrated video signal generated in the step to a receiving terminal.

이상 설명한 바와 같이 본 발명에 따르면, 스포츠 경기 방송 시청자는 하나의 방송 채널에서 다양한 위치의 선수들, 또는 다양한 위치의 경기 상황을 동시에 시청할 수 있다.As described above, according to the present invention, a viewer of a sports game broadcast can simultaneously watch the players at various positions or the various situations of a game in one broadcasting channel.

특히, 서로 다른 피사체를 촬영한 복수 개의 카메라 영상을 하나의 방송 채널(콘텐츠 수신 채널)을 통해 전송하므로, 서로 다른 채널을 통해 전송하는 경우와 비교할 때 시청 단말이 복수 개의 카메라 영상을 수신하여 재생하데까지 걸리는 시간을 단축시킬 수 있다.In particular, since a plurality of camera images of different subjects are transmitted through one broadcast channel (content reception channel), compared with the case of transmitting through a different channel, the viewing terminal receives and reproduces a plurality of camera images Can be shortened.

예를 들어 서로 다른 통신 채널을 통해 각각의 카메라 영상을 전송하는 경우 각 카메라 영상이 각각 패킷으로 나뉜 후 서로 다른 경로를 통해 전송되므로 시청자 단말기까지 모든 카메라 영상이 도달하는데 상당한 시간 지연이 발생할 수 있으나, 본 발명과 같이 동일한 통신 채널을 통해 복수의 카메라 영상 패킷을 전송하는 경우 이러한 시간 지연 문제를 상당히 해소할 수 있다.For example, when each camera image is transmitted through different communication channels, since each camera image is divided into packets and then transmitted through different paths, a considerable time delay may occur to reach all the camera images to the viewer terminal, In the case where a plurality of camera video packets are transmitted through the same communication channel as in the present invention, this time delay problem can be solved considerably.

특히, 촬영 영상 전송 시스템은 동기화된 정보가 포함된 통합 영상 신호를 전송하므로, 이를 이용하는 시청자 단말기에서는 동시에 표시되는 영상들간에 시간 동기화가 이루어지도록 할 수 있어, 각 영상들간의 시간 차이로 인한 시청자들의 불편을 최소화시킬 수 있다.In particular, since the photographed image transmission system transmits the integrated video signal including the synchronized information, the viewer terminal using the system can synchronize the images displayed at the same time, The inconvenience can be minimized.

또한, 촬영 영상 전송 시스템은 복수 개의 카메라로부터 수신되는 촬영 영상들에 대해 동기화를 수행하기 위해 각 촬영 영상에 포함된 현재 시각 이미지를 이용하므로 별도의 동기화를 위한 통신 프로토콜을 변경시키거나 과도하게 비싼 동기화용 장치가 필요 없을 뿐만 아니라, 정교한 동기화 처리가 가능하다.In addition, since the photographed image transmission system uses the current time image included in each photographed image to synchronize the photographed images received from the plurality of cameras, it is necessary to change the communication protocol for the separate synchronization, In addition to eliminating the need for a dedicated device, sophisticated synchronization processing is possible.

도 1은 본 발명의 일 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 개략 구성도이고,
도 2는 도 1의 촬영 영상 전송 시스템의 기능 블록도이고,
도 3은 본 발명의 제1 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이고,
도 4는 도 3에서 촬영 영상 전송 시스템이 각 카메라별 영상이 재생되는 상태를 나타낸 도면이고,
도 5는 본 발명의 제2 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이다.1 is a schematic configuration diagram of an entire communication system including a photographed image transmission system according to an embodiment of the present invention,
FIG. 2 is a functional block diagram of the photographed image transmission system of FIG. 1,
3 is a control flowchart of the entire communication system including the photographed image transmission system according to the first embodiment of the present invention,
FIG. 4 is a diagram illustrating a state in which an image for each camera is reproduced by the photographed image transmission system in FIG. 3,
5 is a control flowchart of the entire communication system including the photographed image transmission system according to the second embodiment of the present invention.

이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

이하 본 발명에 따른 각 실시예는 본 발명의 이해를 돕기 위한 하나의 예에 불과하고, 본 발명이 이러한 실시예에 한정되는 것은 아니다. 특히 본 발명은 각 실시예에 포함되는 개별 구성, 개별 기능, 또는 개별 단계 중 적어도 어느 하나 이상의 조합으로 구성될 수 있다.Hereinafter, embodiments of the present invention will be described in order to facilitate understanding of the present invention, and the present invention is not limited to these embodiments. In particular, the present invention can be configured by combining at least any one of individual components, individual functions, or individual steps included in each embodiment.

특히, 편의상 청구 범위의 일부 청구항에는 '(a)'와 같은 알파벳을 포함시켰으나, 이러한 알파벳이 각 단계의 순서를 규정하는 것은 아니다.In particular, some claims of the claims for convenience include alphabets such as '(a)', but these alphabets do not define the order of each step.

또한 이하 본 발명에 따른 각 실시예에서 언급하는 각 신호는 한 번의 연결 등에 의해 전송되는 하나의 신호를 의미할 수도 있지만, 후술하는 특정 기능 수행을 목적으로 전송되는 일련의 신호 그룹을 의미할 수도 있다. 즉, 각 실시예에서는 소정의 시간 간격을 두고 전송되거나 상대 장치로부터의 응답 신호를 수신한 이후에 전송되는 복수 개의 신호들이 편의상 하나의 신호명으로 표현될 수 있는 것이다.Hereinafter, each signal referred to in the embodiments of the present invention may refer to one signal transmitted by one connection or the like, but may also mean a series of signals transmitted for the purpose of performing a specific function . That is, in each embodiment, a plurality of signals transmitted after a predetermined time interval or after receiving a response signal from the counterpart device can be represented by a single signal name for convenience.

본 발명의 일 실시예에 따른 복수의 촬영 영상을 시청자 단말기(400)로 전송하는 촬영 영상 전송 시스템(100)을 포함하는 전체 통신 시스템의 개략 구성은 도 1에 도시된 바와 같다.The overall configuration of the entire communication system including the photographed image transmission system 100 for transmitting a plurality of photographed images to the viewer terminal 400 according to an embodiment of the present invention is as shown in FIG.

동 도면에서 각각의 카메라(210,220,230)는 영상을 촬영하여 전송하는 것으로서, 본 실시예에서는 동일한 장소(예를 들어 스포츠 경기장)에 설치되어 촬영을 하는 카메라(210,220,230)일 수 있다.In this figure, each of the cameras 210, 220, and 230 captures and transmits an image. In the present embodiment, the cameras 210, 220, and 230 may be installed in the same place (for example, a sports arena)

본 실시예에서는 각 카메라(210,220,230)가 야구 경기의 중계를 위해 야구 경기장의 곳곳에 설치된 것을 일 예로 한다.In this embodiment, the cameras 210, 220 and 230 are installed in various places of the baseball stadium for relaying a baseball game.

이러한 각 카메라(210,220,230)는 촬영 영상 신호를 촬영 영상 전송 시스템(100)에 전송하는데, 이처럼 각 카메라(210,220,230)가 전송하는 촬영 영상 신호는 아날로그 신호 또는 디지털 신호일 수 있고, 이러한 촬영 영상 신호에는 당연히 비디오 신호와 사운드 신호가 포함될 수 있다.Each of the cameras 210, 220 and 230 transmits a photographed image signal to the photographed image transmission system 100. The photographed image signal transmitted by each of the cameras 210, 220 and 230 may be an analog signal or a digital signal, A signal and a sound signal may be included.

현재 시각 표시기(310,320,330)는 현재 시각을 나타내는 것으로서, 예를 들어 LED(Light Emitting Diode), LCD(Liquid Crystal Display)와 같은 디지털 시계에 해당하거나 또는 아날로그 시계에 해당할 수 있는데, 후술하는 바와 같이 각 카메라(210,220,230)의 촬영 영상을 동기화하기 위해 필요한 것이므로, 정밀한 초 이하의 단위까지 표시가 가능한 디지털 시계로 구성됨이 바람직하다.The current time indicators 310, 320 and 330 indicate the current time, and may correspond to a digital clock such as an LED (Light Emitting Diode) or an LCD (Liquid Crystal Display), or may correspond to an analog clock. It is preferable to constitute a digital clock capable of displaying up to precise seconds or less since it is necessary for synchronizing the photographed images of the cameras 210, 220 and 230.

즉, 각 카메라(210,220,230)는 예를 들어 야구 경기를 촬영함에 있어서 그 각 카메라(210,220,230) 근처에 놓인 현재 시각 표시기(310,320,330)를 함께 촬영하여 전송함으로써, 후술하는 바와 같이 관리자의 선택을 통해 또는 이미지 자동 분석을 통해 각 카메라(210,220,230)의 촬영 영상 신호가 동기화되도록 할 수 있는데, 이에 대한 보다 구체적인 설명은 후술토록 한다.That is, each of the cameras 210, 220, and 230, for example, photographs a baseball game and simultaneously captures and transmits the current time indicators 310, 320, and 330 located near the cameras 210, 220, and 230, The captured image signals of the cameras 210, 220, and 230 may be synchronized through automatic analysis, and a more detailed description thereof will be provided later.

한편, 시청자 단말기(400)는 촬영 영상 전송 시스템(100)으로부터 영상 콘텐츠를 수신하여 표시하는 것으로서, 도 1에 도시된 바와 같이 셋탑박스(410)와 텔레비전(420)으로 이루어진 것일 수도 있고, 또는 스마트폰과 같은 휴대용 무선 통신 단말기에 해당할 수도 있다.1, the viewer terminal 400 may include a set-top box 410 and a television 420, or may be a smart (smart) Or a portable wireless communication terminal such as a cellular phone.

이처럼 시청자 단말기(400)는 촬영 영상 전송 시스템(100)이 전송하는 영상 콘텐츠 즉, 후술하는 통합 영상 신호를 수신하여 재생 및 표시하는 기능을 포함하는 모든 종류의 단말기에 해당할 수 있다.As described above, the viewer terminal 400 may correspond to all kinds of terminals including a function of receiving, reproducing, and displaying image contents transmitted by the photographed image transmission system 100, that is, an integrated image signal, which will be described later.

촬영 영상 전송 시스템(100)은 앞서 설명한 각각의 카메라(210,220,230)로부터 촬영 영상 신호를 수신하여 그 각각의 촬영 영상 신호에 대한 동기화 처리를 수행한 후에 통합하여 시청자 단말기(400)로 전송하는 기능을 수행한다.The photographed image transmission system 100 receives a photographed image signal from each of the cameras 210, 220, and 230 described above, performs a synchronization process on each photographed image signal, and then collectively transmits the photographed image signal to the viewer terminal 400 do.

이러한 촬영 영상 전송 시스템(100)의 구체적인 기능 블록의 일 예는 도 2에 도시된 바와 같다.An example of a concrete functional block of the photographed image transmission system 100 is shown in FIG.

동 도면에 도시된 바와 같이 촬영 영상 전송 시스템(100)은 영상 수신부(110), 재생 처리부(120), 동기화 처리부(130), 통합 영상 생성부(140), 전송부(150)를 포함하여 구성될 수 있다.As shown in the figure, the captured image transmission system 100 includes an image receiving unit 110, a playback processing unit 120, a synchronization processing unit 130, an integrated image generating unit 140, and a transmitting unit 150, .

영상 수신부(110)는 복수의 카메라(210,220,230)로부터 각각의 촬영 영상 신호를 수신하는 기능을 수행한다.The image receiving unit 110 receives the photographed image signals from the plurality of cameras 210, 220, and 230.

즉, 도 1을 참조하면 영상 수신부(110)는 1번 카메라(210), 2번 카메라(220), 3번 카메라(230)로부터 각각 촬영 영상 신호를 수신하는 것이다.1, the image receiving unit 110 receives photographed image signals from the first camera 210, the second camera 220, and the third camera 230, respectively.

재생 처리부(120)는 복수의 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별(210,220,230) 영상이 재생되도록 하는 기능을 수행한다.The reproduction processing unit 120 performs a function of reproducing images of the respective cameras 210, 220 and 230 using the photographed image signals received from the plurality of cameras 210, 220 and 230.

예를 들어 재생 처리부(120)는 각 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호를 관리자가 조작하는 별도의 디스플레이 장치(미 도시함, 이하 '관리자 단말기'라 함)로 전송하여 표시되도록 할 수도 있다.For example, the playback processing unit 120 may transmit the photographed video signals received from the cameras 210, 220, and 230 to a separate display device (not shown, hereinafter referred to as an 'administrator terminal' It is possible.

이때 재생 처리부(120)는 관리자 단말기에서 지원하는 해상도나 인코딩 포맷 등을 고려하여 각 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호에 대해 트랜스코딩을 수행한 후 관리자 단말기로 전송할 수도 있다.At this time, the reproduction processing unit 120 may perform transcoding on each of the photographed video signals received from the cameras 210, 220 and 230 in consideration of resolution and encoding format supported by the administrator terminal, and then transmit the transcoded video signals to the administrator terminal.

이때 관리자 단말기에는 각 카메라(210,220,230)에 의해 촬영된 영상이 카메라별(210,220,230)로 동시에 표시될 수 있다.At this time, images photographed by the cameras 210, 220, and 230 can be simultaneously displayed on the administrator terminals 210, 220, and 230, respectively.

물론 관리자 단말기가 별도로 구성되지 않고 본 발명에 따른 촬영 영상 전송 시스템 내에 디스플레이부(미 도시함)가 구비된 경우 재생 처리부(120)는 해당 디스플레이부에 각 카메라별(210,220,230) 영상이 재생/표시되도록 할 수도 있음은 물론이다.If an administrator terminal is not separately configured and a display unit (not shown) is provided in the photographed image transmission system according to the present invention, the playback processor 120 controls the display unit to reproduce / display an image of each camera 210, 220, Of course.

동기화 처리부(130)는 재생 처리부(120)에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 기능을 수행한다.The synchronization processing unit 130 performs a function of synchronizing the photographed video signals of the respective cameras based on at least one of analysis according to a preset algorithm for each camera reproduced by the reproduction processing unit 120 and manager selection do.

예를 들어 동기화 처리부(130)는 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동이 이루어지도록 하거나, 마찬가지로 재생 중인 각 카메라별 영상이 특정 영상 프레임에서 일시 정지 되도록 재생 처리부(120)를 제어할 수 있는데, 이러한 관리자의 각 카메라별 영상에 대한 조작이 완료되는 시점에 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다.For example, the synchronization processing unit 130 may perform forward / backward movement by a predetermined frame interval according to the selection of the administrator for each camera-related image being reproduced, or similarly, So that the photographed image signals of the respective cameras can be synchronized with each other at the time when the operation of each camera for each camera is completed.

일 예로, 상술한 바와 같이 카메라(210,220,230)에 의해 촬영되는 영상에는 현재 시각 표시기(310,320,330)가 함께 촬영되므로, 관리자가 각 카메라별 영상을 시청하면서 각 영상에 포함되어 있는 현재 시각 표시기(310,320,330)의 현재 시각이 서로 일치하는 위치에서 각 카메라별 영상을 일시 정지를 한 후 완료 버튼을 누르는 경우, 동기화 처리부(130)는 그 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다.For example, since the current time indicators 310, 320, and 330 are captured together with the images captured by the cameras 210, 220, and 230 as described above, when the administrator views the images of the respective cameras and notifies the current time indicators 310, If the completion button is pushed after pausing the images of the respective cameras at the positions where the current times coincide with each other, the synchronization processing unit 130 outputs the photographed video signals of the respective cameras to the Can be synchronized.

즉, 동기화 처리부(130)는 관리자가 재생/일시 정지/전후 이동 등 각 영상에 대한 조작을 완료한 시점에 재생되고 있던 또는 일시 정지된 각 카메라별 영상 프레임을 기준 영상 프레임으로 선정하고, 그 선정된 각 카메라별 기준 영상 프레임을 기초로 각 카메라(210,220,230)의 촬영 영상 신호를 서로 동기화시킬 수 있는 것이다.That is, the synchronization processing unit 130 selects, as a reference image frame, a video frame for each camera that has been reproduced or paused at the time when the administrator completes the operation for each image, such as playback / pause / 220, and 230 based on the reference image frames of the respective cameras.

이를 위해 동기화 처리부(130)는 관리자의 조작 또는 선택 등을 감지할 수 있어야 하는데, 관리자 단말기가 외부에 구비된 경우에는 관리자 단말기로부터 통신 라인을 통해 수신되는 입력 신호를 기초로 관리자의 조작 또는 선택을 감지하면 되고, 별도의 입력부(미 도시함)가 구비된 경우라면 해당 입력부를 통해 관리자의 조작 또는 선택을 감지하면 된다.For this, the synchronization processing unit 130 should be able to detect an operation or selection of an administrator. When the administrator terminal is provided externally, the synchronization processing unit 130 performs an operation or selection of an administrator based on an input signal received from a manager terminal through a communication line If a separate input unit (not shown) is provided, an operation or selection of an administrator may be sensed through the corresponding input unit.

각 카메라(210,220,230)의 촬영 영상 신호를 동기화시키는 한 방법으로, 동기화 처리부(130)는 각 카메라별 기준 영상 프레임에 동일한 시간 정보(즉, 동기화용 시간 정보)를 매칭시킨 각각의 동기화 영상 신호를 생성할 수 있다. 동기화용 시간 정보는 시청자 단말기(400)에서 동 시점에 촬영된 영상들을 동시에 재생할 수 있도록 하는 것으로서, 이에 대한 보다 상세한 설명은 후술토록 한다.As a method of synchronizing the photographed video signals of the cameras 210, 220 and 230, the synchronization processing unit 130 generates respective synchronous video signals that match the same time information (i.e., time information for synchronization) can do. The synchronization time information allows the viewer terminal 400 to simultaneously reproduce images photographed at the same time point, and a more detailed description thereof will be provided later.

여기서 동기화 영상 신호는 아날로그 신호일 수도 있지만, 디지털 신호로 처리되는 경우에는 예를 들어 MPEG 트랜스포트 스트림(즉, MPEG transport stream, 줄여서 TS) 포맷으로 이루어진 것(이하 'TS 파일'이라 함)일 수 있다. MPEG 트랜스포트 스트림은 헤더와 페이로드를 포함하는 패킷을 그 기본 데이터 단위로 하는 것으로서, 그 구조 자체는 공지된 기술에 해당하므로 보다 상세한 설명은 생략한다.Here, the synchronized video signal may be an analog signal, but in the case of being processed as a digital signal, it may be a MPEG transport stream (hereinafter, referred to as TS file) . The MPEG transport stream uses a packet including a header and a payload as its basic data unit. Since the structure itself corresponds to a known technique, a detailed description will be omitted.

이 경우 동기화 처리부(130)는 각 촬영 영상 신호에 대응되는 TS 파일을 생성함과 아울러 그 TS 파일 내(바람직하게는 TS 파일의 프레임별 패킷마다)에 시간 정보 즉, 상술한 동기화용 시간 정보를 포함시킬 수 있다.In this case, the synchronization processing unit 130 generates a TS file corresponding to each photographed video signal, and also outputs time information, that is, the above-mentioned synchronization time information, in the TS file (preferably, per packet of each frame of the TS file) Can be included.

즉, 이처럼 특정 동기화용 시간 정보를 각 촬영 영상 신호에 대응되는 TS 파일의 특정 프레임별 패킷에 포함시키는 과정이 본 실시예에 언급하는 동기화 처리에 해당할 수 있다.That is, the process of including the specific synchronization time information in the packets of the specific frame of the TS file corresponding to each shot video signal may correspond to the synchronization process described in this embodiment.

보다 구체적인 예를 든다면, 관리자가 각 카메라(210,220,230)의 촬영 영상 재생 화면을 보던 중 1번 카메라(210)에서 수신되는 촬영 영상 신호의 프레임 중 네 번째 영상 프레임에서 일시 정지를 하고, 2번 카메라(220)에서 수신되는 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임에서 일시 정지를 하여 완료한 경우, 동기화 처리부(130)는 그 1번 카메라(210)의 촬영 영상 신호의 프레임 중 네 번째 영상 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임을 포함하는 TS 패킷에 각각 '1'이라는 동기화 시간 정보를 포함시킬 수 있다.More specifically, when the administrator watches the photographed image reproduction screen of each of the cameras 210, 220 and 230, the manager pauses at the fourth image frame among the frames of the photographed image signal received by the first camera 210, When the synchronization processing unit 130 completes the pause in the sixth image frame among the frames of the photographed image signal received by the first camera 210, 1 " may be included in the TS packet including the sixth TS packet including the sixth TS packet and the sixth image frame of the captured image signal of the second camera 220, respectively.

다른 예로써, 관리자가 1번 카메라(210)에서 수신되는 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임에서 일시 정지를 하고, 2번 카메라(220)에서 수신되는 촬영 영상 신호의 프레임 중 여덟 번째 프레임에서 일시 정지를 하여 완료한 경우, 동기화 처리부(130)는 그 1번 카메라(210)의 여섯 번째 영상 프레임과 2번 카메라(220)의 여덟 번째 영상 프레임을 각각 기준 영상 프레임으로 선정하고, 그 선정된 기준 영상 프레임을 기초로 동기화 처리를 수행할 수 있는데, 구체적으로 1번 카메라(210)의 여섯 번째 영상 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 여덟 번째 영상 프레임을 포함하는 TS 패킷에 각각 '1'이라는 동일한 동기화 시간 정보를 포함시킬 수 있는 것이다.As another example, when the administrator pauses at the sixth image frame of the frame of the photographed image signal received at the first camera 210 and at the eighth frame out of the frames of the photographed image signal received at the second camera 220 The synchronization processing unit 130 selects the sixth video frame of the first camera 210 and the eighth video frame of the second camera 220 as reference video frames, The TS packet including the sixth image frame of the first camera 210 and the eighth image frame of the second camera 220 can be synchronized on the basis of the reference image frame, It is possible to include the same synchronization time information as " 1 ", respectively.

이렇게 특정 시간 정보와 각 카메라(210,220,230)의 기준 영상 프레임이 매칭된 경우, 동기화 처리부(130)는 그 이후의 영상프레임에 대해서는 증가된 동기화 시간 정보를 순서대로 매칭시킬 수 있다.When the specific time information is matched with the reference image frame of each of the cameras 210, 220, and 230, the synchronization processing unit 130 may sequentially match the increased synchronization time information with respect to the subsequent image frames.

예를 들어 바로 앞 예에서와 같이 1번 카메라(210)의 촬영 영상 신호의 프레임 중 여섯 번째 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 여덟 번째 프레임을 포함하는 TS 패킷에 '1'이라는 동기화 시간 정보를 포함된 경우, 그 이후의 촬영 영상 신호의 프레임, 즉, 1번 카메라(210)의 촬영 영상 신호의 프레임 중 일곱 번째 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 아홉 번째 프레임을 포함하는 TS 패킷에는 '2'라는 동기화 시간 정보를 포함시키게 되는 것이고, 이러한 과정은 지속적으로 반복될 수 있다.For example, as in the previous example, the TS packet including the sixth frame of the frame of the captured image signal of the first camera 210 and the eighth frame of the frame of the captured image signal of the second camera 220 If the TS packet includes the synchronization time information of " 1 ", the TS packet including the frame of the subsequent photographed video signal, i.e., the seventh frame of the frame of the photographed video signal of the first camera 210, The TS packet including the ninth frame of the frame of the photographed image signal of the camera 220 includes the synchronization time information '2', and this process can be continuously repeated.

지금까지는 영상프레임 각 카메라(210,220,230)에서 촬영된 영상의 비교를 관리자가 수동으로 수행하는 것을 일 예로 하였으나, 이러한 영상프레임들간의 동시점 비교가 자동으로 이루어질 수도 있음은 물론이다.Although an example in which the administrator manually compares the images photographed by the cameras 210, 220, and 230 has been described as an example, it is needless to say that the same point-in-time comparison between image frames may be automatically performed.

즉, 동기화 처리부(130)는 재생 처리부(120)에 자체적으로 재생(예를 들어 외부로 표시됨이 없이 내부 메모리 상에서 디코딩되는 것을 포함함)이 이루어지는 경우, 그 재생 중인 각 카메라별 영상으로부터 현재 시각 이미지를 추출하고, 그 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다. 즉, 동기화 처리부(130)는 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성할 수 있는 것이다.In other words, when the reproduction processing unit 120 itself reproduces (including, for example, being decoded on the internal memory without being displayed externally), the synchronization processing unit 130 extracts the current time image And extracts the extracted current image and analyzes the extracted current image to synchronize the photographed image signals of the respective cameras based on the image frames of the respective cameras corresponding to the same current time. That is, the synchronization processing unit 130 can generate a synchronized video signal for each camera, which matches the same time information to the respective video frames corresponding to the same current time.

여기서 현재 시각 이미지는 앞서 설명한 바와 같이 각 카메라(210,220,230)가 촬영시 함께 촬영한 현재 시각 표시기(310,320,330)의 이미지에 해당한다.Here, the current time image corresponds to the images of the current time indicators 310, 320, and 330 taken by the cameras 210, 220, and 230, respectively, as described above.

즉, 동기화 처리부(130)는 각 카메라 영상에서 현재 시각 표시기에 대응되는 현재 시각 이미지를 추출하고, 그 추출한 현재 시각 이미지를 분석하여 각 카메라의 영상프레임별 현재 시각을 판단한 후, 동일한 현재 시각에 대응되는 각 카메라의 영상프레임을 기준 영상 프레임으로 선정할 수도 있는 것이다. 물론 현재 시각 이미지가 반드시 현재 시각 표시기 촬영 이미지에 국한되는 것은 아니다.That is, the synchronization processing unit 130 extracts the current time image corresponding to the current time indicator from each camera image, analyzes the extracted current time image, determines the current time for each image frame of each camera, May be selected as a reference image frame. Of course, the current visual image is not necessarily limited to the current visual indicator image.

현재 시각 이미지를 추출함에 있어서 동기화 처리부(130)는 기 설정된 영역을 기준으로 삼을 수 있다.In extracting the current time image, the synchronization processing unit 130 may use a preset area as a reference.

즉, 동기화 처리부(130)는 재생 처리부(120)에 의해 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기준으로 현재 시각 이미지를 추출할 수 있다.That is, the synchronization processing unit 130 can extract the current time image based on the predetermined region in each image frame of each camera-related image being reproduced by the reproduction processing unit 120. [

예를 들어 각 카메라(210, 220,230)가 촬영을 함에 있어서 그 대응되는 현재 시각 표시기(310,320,330)가 촬영 영역 중 좌측 하단의 특정 영역에서 찍히도록 촬영한다고 가정하면, 동기화 처리부(130)는 각 카메라(210,220,230)의 재생 영상 프레임들의 좌측 하단의 특정 영역을 기준으로 현재 시각 이미지로 추출한 후, 그 추출한 현재 시각 이미지를 분석하여 각 카메라(210,220,230)의 영상프레임별 현재 시각을 판단할 수 있는 것이다.For example, suppose that each camera 210, 220, 230 takes a photograph so that the corresponding current time indicator 310, 320, 330 is photographed so as to be photographed in a specific area on the lower left of the photographing area, 210,220, and 230, and then analyzes the extracted current time image to determine the current time of each of the cameras 210, 220, and 230 according to image frames.

또는 각 현재 시각 표시기(310,320,330)가 동일한 형상을 갖는 경우, 동기화 처리부(130)는 기 등록되어 있는 현재 시각 표시기(310,320,330) 형상 정보를 이용하여 각 영상프레임으로부터 현재 시각 이미지를 추출할 수도 있다.Alternatively, when each of the current time indicators 310, 320, and 330 have the same shape, the synchronization processing unit 130 may extract the current time image from each image frame using the currently registered shape information of the current time indicator 310, 320, and 330.

또한, 동기화 처리부(130)는 동기화 영상 신호를 생성함에 있어서 이러한 현재 시각 이미지를 미리 제거할 수도 있다.In addition, the synchronization processing unit 130 may remove the current visual image in advance in generating the synchronized image signal.

즉, 동기화 처리부(130)는 각 카메라별 영상 프레임에서 현재 시각 표시기(310,320,330)에 대응되는 현재 시각 이미지를 제거한 후 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성할 수 있다.That is, the synchronization processing unit 130 may generate a synchronized image signal for each camera, after removing the current time image corresponding to the current time indicator 310, 320, and 330 in the image frame for each camera, and then matching the same time information.

즉, 동기화 처리부(130)는 복수의 카메라(210,220,230)로부터 수신되는 각각의 촬영 영상 신호의 영상프레임에 현재 시각 이미지(현재 시각 표시기(310,320,330)에 대응되는 이미지)가 포함되어 있는 경우, 그 각각의 영상프레임에 포함된 현재 시각 이미지를 제거한 후 그 현재 시각 이미지가 제거된 촬영 영상 신호와 상술한 동기화용 시간 정보를 모두 포함하는 동기화 영상 신호를 카메라(210,220,230)별로 생성할 수 있는 것이다.That is, when the current time image (an image corresponding to the current time indicator 310, 320, or 330) is included in the image frame of each photographed image signal received from the plurality of cameras 210, 220, and 230, A synchronized image signal including both the photographed image signal from which the current time image is removed and the time information for synchronization described above may be generated for each of the cameras 210, 220 and 230 after removing the current time image included in the image frame.

이에 따라 현재 시각 이미지는 동기화용 시간 정보를 결정하는 데만 이용되고, 시청자 단말기(400)에서 해당 영상을 시청할 때는 출력되지 않게 된다.Accordingly, the current time image is used only for determining the time information for synchronization, and is not output when the viewer terminal 400 views the corresponding image.

동기화 처리부(130)는 현재 시각 이미지를 제거함에 있어서 보다 광범위한 영역을 함께 제거할 수도 있다.The synchronization processing unit 130 may remove the wider area in removing the current time image.

예를 들어 각 현재 시각 이미지가 각 영상프레임의 좌측 하단에 배치되어 있는 경우 영상프레임의 특정 크기의 하단이 모두 제거되도록 할 수도 있는 것이고, 이 경우 이미지 제거 프로세스가 간단하여 현재 시각 이미지 제거를 위한 시스템 처리 로드를 최소화할 수 있다.For example, if each current visual image is located at the bottom left of each image frame, the bottom of a specific size of the image frame may be removed. In this case, the image removal process is simple, The processing load can be minimized.

이처럼 각 영상 프레임에서 현재 시각 이미지를 제거하기 위해서는 영상 디코딩/트랜스코딩은 물론이고 영상 크롭(자르기) 기능 등이 필요할 수 있는데, 이러한 기능들 그 자체는 공지된 기술에 불과하므로 보다 상세한 설명을 생략한다.In this way, in order to remove the current visual image from each image frame, an image decoding / transcoding as well as an image cropping function may be required. Since these functions are merely known technologies, a detailed description thereof will be omitted .

한편, 통합 영상 생성부(140)는 동기화 처리부(130)에 의해 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 기능을 수행한다.Meanwhile, the integrated image generation unit 140 multiplexes the photographed image signals synchronized by the synchronization processing unit 130 to generate a single integrated image signal.

여기서 통합 영상 신호는 아날로그 신호일 수도 있지만, 본 실시예에서는 디지털 처리가 이루어지는 영상 데이터인 것을 일 예로 한다.Here, the integrated video signal may be an analog signal, but in the present embodiment, the integrated video signal is image data that is digitally processed.

예를 들어 동기화 처리부(130)가 각 동기화용 시간 정보와 각각의 촬영 영상 신호('영상 프레임'에 해당할 수 있음)를 매칭시킨 각각의 동기화 영상 신호를 생성한 경우, 통합 영상 생성부(140)는 그 각각의 동기화 영상 신호를 다중화시켜 하나의 통합 영상 신호로 생성하는 것이다.For example, when the synchronization processing unit 130 generates the respective synchronization video signals that match the synchronization time information and each shot video signal (which may correspond to 'video frame'), the integrated video generator 140 ) Multiplexes the respective synchronization video signals to generate one integrated video signal.

이때 특정 통합 영상 신호 패킷에는 반드시 동일한 동기화용 시간 정보에 대응되는 동기화 영상 신호 패킷들만 포함될 수 있는 것은 아니고, 각기 다른 동기화용 시간 정보에 대응되는 동기화 영상 신호 패킷들이 포함될 수도 있다.At this time, the specific integrated video signal packet may not necessarily include only the synchronization video signal packets corresponding to the same synchronization time information, but may also include synchronization video signal packets corresponding to different synchronization time information.

이 경우 시청자 단말기(400)는 그 수신된 통합 영상 신호 패킷들을 각 카메라별 동기화 영상 신호 패킷들로 구분한 후, 동일한 동기화용 시간 정보를 포함하는 패킷들을 동시에 재생하면 되고, 그 결과 시청자 단말기(400) 사용자는 하나의 방송 채널을 통해 수신한 복수 개의 촬영 영상 중 시간 동기화된 영상들을 동시에 시청할 수 있게 되는 것이다.In this case, the viewer terminal 400 divides the received integrated video signal packets into the synchronous video signal packets for each camera, and then simultaneously reproduces the packets including the same synchronization time information. As a result, the viewer terminal 400 ) The user can simultaneously view time-synchronized images among a plurality of shot images received through one broadcast channel.

즉, 서버단에서 동일한 동기화용 시간 정보를 포함하는 패킷들로 그루핑하는 경우에는 그 처리 과정에 따른 딜레이가 발생할 수 있지만, 본 실시예와 같이 서버단(즉, 촬영 영상 전송 시스템(100))에서는 각 패킷별로 동기화용 시간 정보를 포함시키기만 하고, 실제 동 시점에 촬영된 영상들을 동시에 표시하는 것은 시청자 단말기(400)에서 이루어지도록 함으로써 불필요한 지연을 방지할 수 있게 된다.That is, when grouping the packets into packets including the same synchronization time information at the server end, a delay may occur according to the processing. However, in the server end (i.e., the captured image transmission system 100) It is possible to prevent the unnecessary delay by merely including the synchronization time information for each packet and displaying the images photographed at the same time in the viewer terminal 400 at the same time.

여기서 통합 영상 생성부(140)에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호에 해당할 수 있다.Here, one integrated video signal generated by the integrated video generator 140 may correspond to a video signal that can be viewed on one viewing channel.

즉, 앞서 언급한 바와 같이 동기화 영상 신호가 일종의 TS 포맷의 파일이라 한다면, 통합 영상 신호는 이러한 각각의 TS 파일들의 조합으로 이루어진 통합 파일이라 할 수 있는데, 이러한 통합 TS 파일은 하나의 방송 채널을 통해 스트리밍 방식으로 전송될 수 있는 것이다.That is, if the synchronized video signal is a file of a TS format, the integrated video signal can be regarded as an integrated file composed of a combination of the respective TS files. It can be transmitted in a streaming manner.

여기서 '파일'이라는 것이 반드시 영상의 시작부터 마지막까지 모두 포함하는 것을 의미하는 것은 아니고, 각 카메라(210,220,230)로부터 수신되는 촬영 영상 신호에 의해 실시간 생성되는 구간별 파일일 수 있다.Here, the term 'file' does not necessarily mean that all the images are included from the beginning to the end of the image, but may be a section-based file generated in real time by the photographed image signal received from each of the cameras 210, 220 and 230.

전송부(150)는 통합 영상 생성부(140)에 의해 생성된 통합 영상 신호를 수신 단말기로 전송하는 기능을 수행한다.The transmitting unit 150 transmits the integrated video signal generated by the integrated video generating unit 140 to the receiving terminal.

예를 들어 전송부(150)는 시청자 단말기(400)와 상호 통신이 가능한 통신 채널을 연결한 후 통합 영상 신호를 전송할 수도 있고, 또는 시청자 단말기(400)와 상호 통신 채널을 연결하지 않고 종래의 일 방향 방송국과 같이 무선 전파로 송출하는 방식으로 통합 영상 신호를 전송할 수도 있다.For example, the transmitter 150 may transmit an integrated video signal after connecting a communication channel capable of communicating with the viewer terminal 400, or may transmit the integrated video signal to the viewer terminal 400, It is also possible to transmit the integrated video signal in such a manner that it is transmitted by a radio wave like a directional broadcasting station.

이처럼 통합 영상 생성부(140)에 의해 생성된 후 전송부(150)에 의해 시청자 단말기(400)에 전송되는 통합 TS 파일 헤더와 페이로드를 포함하는 패킷 단위로 연이어서 전송되는데, 이때 세션 연결을 위한 최초의 헤더 내에 특정 정보를 포함시켜 시청자 단말기(400)로 하여금 복수의 TS 파일을 전송하는 스트림임을 알려 줄 수 있다.After being generated by the integrated image generator 140 and transmitted by the transmitter 150 in units of packets including the integrated TS file header and the payload transmitted to the viewer terminal 400, The viewer terminal 400 may notify the viewer terminal 400 that the stream is a stream for transmitting a plurality of TS files.

예를 들어 세션 연결을 위한 헤더에 PID(패킷 아이디)가 0인 경우 시청자 단말기(400)는 그 다음의 페이로드에 몇 개의 TS 파일(즉, 몇 개의 프로그램)을 전송하는지를 지정한 값이 포함되어 있음을 알 수 있다.For example, when the PID (Packet ID) is 0 in the header for session connection, the viewer terminal 400 includes a value specifying how many TS files (i.e., how many programs) are to be transmitted to the next payload .

예를 들어 세션 연결을 위한 최초의 통합 TS 파일 스트림의 헤더 및 페이로드를 통해 3 개의 프로그램이 해당 통합 TS 파일에 포함되어 있다고 지정되는 경우, 촬영 영상 전송 시스템(100)은 그 이후의 패킷(헤더+페이로드)에 3 개의 각각의 TS 파일(프로그램)을 순차적으로 이어서 보내게 되고, 이러한 과정은 반복될 수 있다.For example, when it is specified through the header and payload of the first integrated TS file stream for session connection that three programs are included in the integrated TS file, the captured image transmission system 100 transmits the subsequent packets + Payload), and then this process can be repeated.

즉, 촬영 영상 전송 시스템(100)은 1번 카메라(210)에 대응되는 1번 TS 패킷, 2번 카메라(220)에 대응되는 2번 TS 패킷, 3번 카메라(330)에 대응되는 3번 TS 패킷 이후에 다시 1번 TS 패킷, 2번 TS 패킷, 3번 TS 패킷과 같은 방식으로 전송할 수 있다.That is, the photographed image transmission system 100 includes a first TS packet corresponding to the first camera 210, a second TS packet corresponding to the second camera 220, a third TS corresponding to the third camera 330, After the packet, it can be transmitted in the same manner as TS packet 1, TS packet 2, TS packet 3 again.

첨언하면 상술한 통합 영상 생성부(140)가 통합 TS 파일을 생성한다는 것은 이처럼 몇 개의 TS 파일을 포함시켰는지에 대한 정보를 세선용 패킷(헤더 및 페이로드)에 포함시키는 과정과, 그 이후 각각의 개별 TS 파일을 순차적으로 이어서 붙이는 과정을 포함할 수 있다.In addition, the above-mentioned integrated image generation unit 140 generates an integrated TS file by including information on how many TS files are included in the tender packets (header and payload), and thereafter And sequentially attaching the individual TS files of the TS file.

이하에서는 도 3을 참조하여 본 발명의 제1 실시예에 따른 촬영 영상 전송 시스템(100)을 포함하는 전체적인 제어 흐름을 설명한다.Hereinafter, an overall control flow including the captured image transmission system 100 according to the first embodiment of the present invention will be described with reference to FIG.

우선, 각 카메라(210,220,230)는 영상을 촬영하고(단계 S1), 그에 대응되는 촬영 영상 신호를 촬영 영상 전송 시스템(100)에 전송한다(단계 S3).First, each of the cameras 210, 220, and 230 captures an image (step S1), and transmits the captured image signal corresponding thereto to the captured image transmission system 100 (step S3).

이에 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신되는 촬영 영상 신호를 기초로 각 영상이 재생되도록 한다(단계 S5).Accordingly, the photographed image transmission system 100 causes each image to be reproduced based on the photographed image signal received from each of the cameras 210, 220, and 230 (step S5).

이렇게 각 카메라(210,220,230)에 대응되는 각 영상이 소정의 디스플레이 장치(미 도시함)에 동시에 재생 표시된 상태가 도 4에 도시되었다.4 shows a state in which each image corresponding to each of the cameras 210, 220, and 230 is reproduced and displayed simultaneously on a predetermined display device (not shown).

동 도면을 살펴보면 제1 카메라(210)에 대응되는 재생 영상(501) 및 제어 버튼(511), 제2 카메라(220)에 대응되는 재생 영상(502) 및 제어 버튼(512), 제3 카메라(230)에 대응되는 재생 영상(503) 및 제어 버튼(513)이 도시되어 있다.Referring to the drawing, a reproduced image 501 and a control button 511 corresponding to the first camera 210, a reproduced image 502 and a control button 512 corresponding to the second camera 220, a third camera A playback image 503 and a control button 513 corresponding to the playback images 503 and 230 are shown.

이후, 관리자는 각 제어 버튼(511,512,513)을 이용하여 각 카메라(210,220,230)의 영상을 재생, 일시 중지, 기 설정된 프레임 또는 시간 간격만큼 전/후 이동이 이루어지도록 할 수 있는데, 이러한 관리자의 조작 완료 선택이 감지된 경우(단계 S7) 촬영 영상 전송 시스템(100)은 그 선택된 영상프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킨다(단계 S9).Thereafter, the administrator can use the control buttons 511, 515, and 513 to reproduce, pause, and move the images of the cameras 210, 220, and 230 forward / backward by predetermined frames or time intervals. (Step S7), the photographed image transmission system 100 synchronizes the photographed image signals of the respective cameras based on the selected image frame (step S9).

예를 들어 촬영 영상 전송 시스템(100)은 관리자에 의해 일시 정지 선택된 각 카메라별 특정 영상프레임에 동일한 동기화용 시간 정보를 매칭시켜서 각 카메라의 프레임별 동기화 영상 신호를 생성하는 것이다.For example, the photographed image transmission system 100 generates synchronization image signals for respective frames of each camera by matching the same synchronization time information to specific image frames for each camera selected by the administrator.

즉, 동기화 처리는 관리자에 의해 일시 정지 선택된 영상프레임 각 카메라의 영상 프레임에 각각 동일한 동기화용 시간 정보를 매칭시키는 것을 의미할 수 있다.That is, the synchronization processing may mean that the synchronization time information is matched with the image frame of each camera of the image frame paused by the administrator.

이러한 단계 S9의 동기화 처리 과정(즉, 특정 영상 프레임에 동기화용 시간 정보를 매칭시키는 과정)은 기 설정된 시간 마다, 예를 들어 주기적인 시간 간격마다 반복 처리될 수도 있다.The synchronization process in step S9 (i.e., the process of matching time information for synchronization with a specific image frame) may be repeated at predetermined time intervals, for example, at regular time intervals.

즉, 촬영 영상 전송 시스템(100)은 각 카메라로부터 촬영 영상 신호가 수신되는 최초에만 시간 동기화 처리 과정을 수행하는 것이 아니라, 주기적으로 반복하여 시간 동기화 처리 과정을 수행할 수 있는 것이다.That is, the photographed image transmission system 100 can perform the time synchronization processing process by periodically repeating not only the first time synchronization processing process at the time of receiving the photographed image signal from each camera.

이어서 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신된 촬영 영상 신호를 이용하여 전송을 위한 별도 포맷의 파일(일 예로 TS 파일)을 생성하는데, 상술한 바와 같이 동기화용 시간 정보를 매칭시킨 경우에는 각 TS 파일에 그 매칭된 동기화용 시간 정보가 포함될 수 있다(단계 S11).Subsequently, the photographed image transmission system 100 generates a file (for example, a TS file) in a separate format for transmission using the photographed image signal received from each of the cameras 210, 220, and 230. As described above, The matching TS time information may be included in each TS file (step S11).

이후, 촬영 영상 전송 시스템(100)은 각각의 TS 파일을 다중화 처리한 통합 TS 파일을 생성한다(단계 S13).Thereafter, the photographed image transmission system 100 generates an integrated TS file obtained by multiplexing each TS file (step S13).

여기서 TS 파일은 물론이고 통합 TS 파일은 실시간으로 생성되는 콘텐츠 스트림에 해당할 수 있다.Here, the integrated TS file as well as the TS file may correspond to a content stream generated in real time.

이어서 촬영 영상 전송 시스템(100)은 생성한 통합 TS 파일을 한 개의 방송 채널을 통해 시청자 단말기(400)에 전송할 수 있다(단계 S15).Subsequently, the captured image transmission system 100 can transmit the generated integrated TS file to the viewer terminal 400 through one broadcast channel (step S15).

예를 들어 시청자 단말기(400)가 방송 채널 번호 5번을 선택하여 야구 중계 경기를 시청하고자 하는 경우, 촬영 영상 전송 시스템(100)은 그 5번 방송 채널을 통해 상술한 복수의 카메라(210,220,230)에 의해 촬영된 촬영 영상은 물론이고 동기화를 위한 시간 정보를 각각 포함하는 복수 개의 TS 파일을 통합된 형태(통합 TS 파일)로 전송할 수 있는 것이다.For example, when the viewer terminal 400 selects the broadcast channel number 5 to view the baseball relay game, the captured image transmission system 100 transmits the captured image to the plurality of cameras 210, 220, and 230 A plurality of TS files each including time information for synchronization as well as a photographed image can be transmitted in an integrated form (integrated TS file).

즉, 촬영 영상 전송 시스템(100)은 동일한 아이피:포트를 통해 시청자 단말기(400)에 상술한 통합 TS 파일을 전송하는 것이다.That is, the captured image transmission system 100 transmits the above-described integrated TS file to the viewer terminal 400 through the same IP: port.

이에 따라 시청자 단말기(400)에서는 촬영 영상 전송 시스템(100)이 전송한 통합 TS 파일에 포함된 개별 TS 파일을 각각 추출하여 디스플레이 할 수 있게 된다.Accordingly, the viewer terminal 400 can extract and display the individual TS files included in the integrated TS file transmitted by the photographed image transmission system 100, respectively.

예를 들어 시청자 단말기(400)는 하나의 화면에 투수가 투구하는 영상을 주된 영상으로 표시함과 아울러 1루 주자의 영상 또는 외야수의 영상, 감독을 촬영한 영상 등을 동시에 표시할 수 있다.For example, the viewer terminal 400 may display a video shot by a pitcher on one screen as a main image, and display a video of a first-runner, a video of an outfielder, a video of a manager, and the like at the same time.

특히, 각 개별 TS 파일에는 동기화용 시간 정보가 포함되어 있으므로 시청자 단말기(400)는 동시에 표시하는 영상들에 대해 같은 시간으로 동기화시킬 수 있다.In particular, since each individual TS file includes time information for synchronization, the viewer terminal 400 can synchronize images displayed at the same time at the same time.

예를 들어 시청자 단말기(400)는 촬영 영상 전송 시스템(100)으로부터 1번 카메라(210)에 대응되는 TS 파일과 2번 카메라(220)에 대응되는 TS 파일 및, 3번 카메라(230)에 대응되는 TS 파일을 포함하는 통합 TS 파일을 스트리밍 방식으로 수신하여 그 각각의 카메라(210,220,230)에서 촬영된 영상을 동시에 화면상에 표시하는 경우, 그 수신되는 통합 TS 파일로부터 추출되는 TS 파일 내에 포함된 동기화용 시간 정보를 이용하여 같은 시간에 촬영된 영상들이 동시에 표시되도록 할 수 있다.For example, the viewer terminal 400 receives the TS file corresponding to the camera # 1, the TS file corresponding to the camera # 2, and the TS file corresponding to the camera # 3 corresponding to the camera # 2 230 from the captured image transmission system 100 When the integrated TS file including the TS file is received in a streaming manner and images photographed by the respective cameras 210, 220, and 230 are simultaneously displayed on the screen, synchronization included in the TS file extracted from the received integrated TS file The images captured at the same time can be simultaneously displayed using the time information for the time.

즉, 각 카메라(210,220,230)마다 촬영 영상을 전송하는 시간이 다를 수도 있고, 또는 네트워크 상황상 각 카메라(210,220,230)가 전송한 촬영 영상 신호 중 일부가 지연 처리될 수도 있는데, 상술한 바와 같이 촬영 영상 전송 시스템(100)이 각 촬영 영상 신호를 기초로 관리자의 선택에 따른 동기화용 시간 정보를 각 TS 파일에 포함시킴으로써, 시청자 단말기(400)는 각 통합 TS 파일에 포함된 각 TS 파일의 동기화용 시간 정보를 이용하여 동일한 시점에 촬영된 영상들을 동시에 표시할 수 있는 것이다.That is, the time for transmitting the photographed image may be different for each of the cameras 210, 220, and 230, or a part of the photographed image signals transmitted by the cameras 210, 220, and 230 may be delay processed in the network status. The system 100 includes the synchronization time information according to the selection of the manager on the basis of each shot video signal in each TS file so that the viewer terminal 400 can acquire time information for synchronization of each TS file included in each integrated TS file It is possible to simultaneously display images photographed at the same point in time.

이하에서는 도 5를 참조하여 본 발명의 제2 실시예에 따른 촬영 영상 전송 시스템(100)을 포함하는 전체적인 제어 흐름을 설명한다.Hereinafter, an overall control flow including the captured image transmission system 100 according to the second embodiment of the present invention will be described with reference to FIG.

도 5는 도 4와 비교할 때 각 카메라가 촬영한 영상 프레임에 대한 동시점을 판단하는 것이 관리자가 아닌 촬영 영상 전송 시스템(100) 자체에서 영상 분석을 통해 자동 처리된다는 점에 차이가 있다.5 is different from FIG. 4 in that it is automatically processed through image analysis in the photographed image transmission system 100 itself, not in the manager, to determine the same point in time of the image frame photographed by each camera.

촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신되는(단계 S23) 촬영 영상 신호를 기초로 각 카메라별 영상을 재생하고(단계 S25), 그 재생되는 각 영상프레임으로부터 현재 시각 이미지를 추출한다(단계 S27).The photographed image transmission system 100 reproduces each camera-specific image based on the photographed image signal received from each of the cameras 210, 220 and 230 (step S25), extracts a current visual image from each image frame to be reproduced (Step S27).

이어서 촬영 영상 전송 시스템(100)은 추출된 현재 시각 이미지를 분석하여 각 카메라의 영상프레임에 대응되는 현재 시각을 판단한 후(단계 S29), 동일한 현재 시각(예를 들어 동일한 특정 현재 시각)에 대응되는 각 카메라의 영상프레임을 기준 영상 프레임으로 선정한다(단계 S31).Then, the photographed image transmission system 100 analyzes the extracted current time image to determine the current time corresponding to the image frame of each camera (step S29). Then, the photographed image transmission system 100 determines whether the current time corresponds to the same current time The image frame of each camera is selected as a reference image frame (step S31).

여기서 기준 영상 프레임으로 선정한다는 것은 동일한 현재 시각으로 매칭시킬 대상으로 선정한다는 것을 의미할 수 있다.Here, selecting a reference image frame may mean that an object to be matched with the same current time is selected.

이후, 촬영 영상 전송 시스템(100)은 선정된 각 카메라별 기준 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킨다(단계 S33).Thereafter, the photographed image transmission system 100 synchronizes the photographed image signals of the respective cameras based on the selected reference image frames of respective cameras (step S33).

예를 들어 촬영 영상 전송 시스템(100)은 각 카메라별 기준 영상 프레임에 동일한 동기화용 시간 정보를 매칭시켜서 각 카메라의 프레임별 동기화 영상 신호를 생성하는 것이다.For example, the photographed image transmission system 100 generates synchronization image signals for each frame of each camera by matching the same synchronization time information with reference image frames for respective cameras.

이어서 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신된 촬영 영상 신호를 이용하여 전송을 위한 별도 포맷의 파일(일 예로 TS 파일)을 생성하는데(단계 S35), 상술한 바와 같이 동기화용 시간 정보를 매칭시킨 경우에는 각 TS 파일에 그 매칭된 동기화용 시간 정보를 포함시킬 수 있다.Subsequently, the photographed image transmission system 100 generates a separate format file (e.g., a TS file) for transmission using the photographed image signal received from each of the cameras 210, 220, and 230 (step S35) When the time information is matched, the matching time information for synchronization can be included in each TS file.

이후, 촬영 영상 전송 시스템(100)은 각각의 TS 파일을 다중화 처리한 통합 TS 파일을 생성한다(단계 S37).Thereafter, the photographed image transmission system 100 generates an integrated TS file obtained by multiplexing each TS file (step S37).

여기서 TS 파일은 물론이고 통합 TS 파일은 실시간으로 생성되는 콘텐츠 스트림에 해당할 수 있다.Here, the integrated TS file as well as the TS file may correspond to a content stream generated in real time.

이어서 촬영 영상 전송 시스템(100)은 생성한 통합 TS 파일을 한 개의 방송 채널을 통해 시청자 단말기(400)에 전송할 수 있다(단계 S39).Subsequently, the shot image transmission system 100 can transmit the generated integrated TS file to the viewer terminal 400 through one broadcast channel (step S39).

한편, 상술한 각 실시예를 수행하는 과정은 소정의 기록 매체(예를 들어 컴퓨터로 판독 가능한)에 저장된 프로그램 또는 애플리케이션에 의해 이루어질 수 있음은 물론이다. 여기서 기록 매체는 RAM(Random Access Memory)과 같은 전자적 기록 매체, 하드 디스크와 같은 자기적 기록 매체, CD(Compact Disk)와 같은 광학적 기록 매체 등을 모두 포함한다.Meanwhile, it goes without saying that the process of performing each of the above-described embodiments can be performed by a program or an application stored in a predetermined recording medium (for example, a computer-readable). Here, the recording medium includes an electronic recording medium such as a RAM (Random Access Memory), a magnetic recording medium such as a hard disk, and an optical recording medium such as a CD (Compact Disk).

이때, 기록 매체에 저장된 프로그램은 컴퓨터나 스마트폰 등과 같은 하드웨어 상에서 실행되어 상술한 각 실시예를 수행할 수 있다. 특히, 상술한 본 발명에 따른 의 기능 블록 중 적어도 어느 하나는 이러한 프로그램 또는 애플리케이션에 의해 구현될 수 있다.At this time, the program stored in the recording medium may be executed on hardware such as a computer or a smart phone to perform each of the above embodiments. In particular, at least one of the functional blocks according to the present invention described above may be implemented by such a program or application.

또한, 본 발명은 상기한 특정 실시예에 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 변형 및 수정하여 실시할 수 있는 것이다. The present invention is not limited to the above-described specific embodiments, and various modifications and changes may be made without departing from the gist of the present invention.

특히, 상술한 실시예에서는 영상 신호를 동기화하여 다중화 처리하여 전송하는 것을 일 예로 하였으나, 음성 콘텐츠에도 이러한 기술이 적용될 수 있다.In particular, in the above-described embodiment, the video signals are synchronized and multiplexed and transmitted. However, this technique can also be applied to audio contents.

또한, 동기화 처리까지는 영상을 기초로 이루어지고 전송하는 패킷만 음성 패킷으로 이루어질 수도 있다. 예를 들어 상술한 촬영 영상 전송 시스템 대신에 음성 전송 시스템으로 구현될 수 있고, 이 경우, 음성 전송 시스템은 복수의 카메라로부터 각각의 음성 신호를 포함하는 촬영 영상 신호를 수신하고, 그 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별로 영상프레임 스틸컷 이미지를 생성하며, 생성된 각각의 영상프레임 스틸컷 이미지를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키고, 동기화된 각각의 촬영 영상 신호에 대응되는 음성 신호를 다중화시켜 하나의 통합 음성 신호를 생성한 후, 수신 단말기로 전송할 수 있는 것이다.In addition, the synchronization process may be based on an image, and only a packet to be transmitted may be a voice packet. For example, the voice transmission system may be implemented as a voice transmission system instead of the above-described video transmission system. In this case, the voice transmission system may receive an image pickup signal including a voice signal from a plurality of cameras, A still frame image of an image frame is generated for each camera using each of the received shot image signals, the shot image signals of the respective cameras are synchronized with each other based on the generated still images of the respective image frames, The audio signal corresponding to the video signal may be multiplexed to generate one integrated audio signal and then transmitted to the receiving terminal.

이러한 변형 및 수정이 첨부되는 특허청구범위에 속한다면 본 발명에 포함된다는 것은 자명할 것이다. It is to be understood that such variations and modifications are intended to be included in the scope of the appended claims.

100 : 촬영 영상 전송 시스템 210,220,230 : 카메라
310,320,330 : 현재 시각 표시기 400 : 시청자 단말기
110 : 영상 수신부 120 : 재생 처리부
130 : 동기화 처리부 140 : 통합 영상 생성부
150 : 전송부100: photographed image transmission system 210, 220, 230:
310, 320, 330: current time indicator 400:
110: image receiving unit 120:
130: synchronization processor 140:
150:

Claims (16)

(a) 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와;
(b) 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와;
(c) 상기 (b) 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와;
(d) 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와;
(e) 상기 (d) 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.(a) receiving respective photographed video signals from a plurality of cameras;
(b) reproducing an image for each camera using each photographed image signal received from the plurality of cameras;
(c) synchronizing the photographed image signals of the respective cameras based on at least one of analysis according to a predetermined algorithm and manager selection for each camera image reproduced in the step (b);
(d) multiplexing the synchronized photographed image signals to generate one integrated image signal;
(e) transmitting the integrated video signal generated in step (d) to a receiving terminal. 제1항에 있어서,
상기 (c) 단계는,
(c1) 상기 (b) 단계에서 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동을 수행한 후 특정 영상 프레임에서 일시 정지를 수행하는 단계와;
(c2) 상기 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.The method according to claim 1,
The step (c)
(c1) performing a forward / backward movement by a predetermined frame interval according to a selection of an administrator for each camera-specific image being reproduced in the step (b), and then performing a pause in a specific image frame;
(c2) synchronizing the photographed image signals of the respective cameras with each other based on the temporarily stopped image frames of the respective cameras. 제1항에 있어서,
상기 (c) 단계는,
(c1) 상기 (b) 단계에서 재생 중인 각 카메라별 영상으로부터 현재 시각 이미지를 추출하는 단계와;
(c2) 상기 (c1) 단계에서 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.The method according to claim 1,
The step (c)
(c1) extracting a current time image from each camera-specific image being reproduced in the step (b);
(c2) analyzing the current time image extracted in the step (c1) and synchronizing the photographed image signals of the respective cameras based on the respective image frames of the respective cameras corresponding to the same current time A control method of a photographed image transmission system. 제2항 또는 제3항에 있어서,
상기 (c2) 단계에서는 상기 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하고,
상기 (d) 단계에서는 상기 각각의 동기화 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.The method according to claim 2 or 3,
In the step (c2), a synchronized video signal in which the same time information is matched to each of the camera-specific video frames corresponding to the same current time is generated for each camera,
Wherein, in step (d), each of the synchronization video signals is multiplexed to generate one integrated video signal. 제4항에 있어서,
상기 (c2) 단계에서는, 각 카메라별 영상 프레임에서 상기 현재 시각 이미지를 제거한 후 상기 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.5. The method of claim 4,
Wherein, in step (c2), a synchronization image signal is generated for each camera after removing the current time image from each camera image frame and then matching the same time information. 제3항에 있어서,
상기 (c1) 단계에서는, 상기 (b) 단계에서 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기초로 현재 시각 이미지를 추출하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.The method of claim 3,
Wherein, in the step (c1), the current time image is extracted based on a predetermined area in each image frame of each camera-specific image being reproduced in the step (b). 제1항에 있어서,
상기 (d) 단계에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호인 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법.The method according to claim 1,
Wherein the one integrated video signal generated in step (d) is a video signal that can be viewed on one viewing channel. 제1항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.A computer-readable recording medium storing a program for executing the method of claim 1. 하드웨어와 결합되어 제1항의 방법을 실행시키기 위하여 컴퓨터 판독 가능 기록 매체에 저장된 응용 프로그램.An application program stored on a computer readable recording medium for executing the method of claim 1 in combination with hardware. 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 영상 수신부와;
상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 재생 처리부와;
상기 재생 처리부에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 동기화 처리부와;
상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 통합 영상 생성부와;
상기 통합 영상 생성부에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 전송부를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.An image receiving unit for receiving respective photographed image signals from a plurality of cameras;
A playback processor for playing back an image for each camera using each shot image signal received from the plurality of cameras;
A synchronization processing unit for synchronizing the photographed video signals of the respective cameras based on at least one of analysis according to a predetermined algorithm and manager selection for each camera to be reproduced by the reproduction processing unit;
An integrated image generation unit for multiplexing the synchronized photographed image signals to generate an integrated image signal;
And a transmitting unit for transmitting the integrated video signal generated by the integrated video generating unit to the receiving terminal. 제10항에 있어서,
상기 동기화 처리부는 상기 재생 처리부에 의해 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동을 수행한 후 특정 영상 프레임에서 일시 정지를 수행하고, 그 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.11. The method of claim 10,
Wherein the synchronization processing unit performs forward / backward movement by a predetermined frame interval according to a selection of an administrator for each camera-by-camera image being reproduced by the reproduction processing unit, performs a pause in a specific image frame, And synchronizes the photographed image signals of the respective cameras based on the image frames per camera. 제10항에 있어서,
상기 동기화 처리부는, 상기 재생부에 의해 재생 중인 각 카메라별 영상으로부터 현재 시각 이미지를 추출하고, 그 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.11. The method of claim 10,
Wherein the synchronization processing unit extracts a current time image from each camera-related image being reproduced by the playback unit, analyzes the extracted current time image, and generates a synchronization signal for each camera based on the camera- And synchronizing the photographed image signals with each other. 제11항 또는 제12항에 있어서,
상기 동기화 처리부는 상기 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하고,
상기 통합 영상 생성부는 상기 각각의 동기화 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.13. The method according to claim 11 or 12,
Wherein the synchronization processing unit generates a synchronized image signal for each camera, the synchronized image signal matching the same time information to each of the camera-specific image frames corresponding to the same current time,
Wherein the integrated image generating unit multiplexes the respective synchronous image signals to generate one integrated image signal. 제13항에 있어서,
상기 동기화 처리부는 각 카메라별 영상 프레임에서 상기 현재 시각 이미지를 제거한 후 상기 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.14. The method of claim 13,
Wherein the synchronization processing unit removes the current time image from each of the camera-specific image frames, and generates a synchronization image signal for each camera, which matches the same time information. 제12항에 있어서,
상기 동기화 처리부는 상기 재생 처리부에 의해 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기준으로 현재 시각 이미지를 추출하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.13. The method of claim 12,
Wherein the synchronization processing unit extracts a current time image based on a predetermined area in each image frame of each camera-specific image being reproduced by the reproduction processing unit. 제10항에 있어서,
상기 통합 영상 생성부에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호인 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.11. The method of claim 10,
Wherein the one integrated video signal generated by the integrated video generation unit is an image signal that can be viewed on one viewing channel.
KR1020180001907A 2018-01-05 2018-01-05 System and method for transmitting a plurality of video image KR102025157B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180001907A KR102025157B1 (en) 2018-01-05 2018-01-05 System and method for transmitting a plurality of video image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180001907A KR102025157B1 (en) 2018-01-05 2018-01-05 System and method for transmitting a plurality of video image

Publications (2)

Publication Number Publication Date
KR20190083906A true KR20190083906A (en) 2019-07-15
KR102025157B1 KR102025157B1 (en) 2019-09-25

Family

ID=67257639

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180001907A KR102025157B1 (en) 2018-01-05 2018-01-05 System and method for transmitting a plurality of video image

Country Status (1)

Country Link
KR (1) KR102025157B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102273439B1 (en) * 2019-12-31 2021-07-06 씨제이포디플렉스 주식회사 Multi-screen playing system and method of providing real-time relay service
CN114142985A (en) * 2021-11-17 2022-03-04 中国船舶重工集团公司第七一九研究所 Optical system and method for realizing time synchronization of physical isolation information system
KR20220131029A (en) * 2021-03-19 2022-09-27 주식회사 엘지유플러스 Cloud server for monitoring live videos, and operating method thereof
KR20230095297A (en) * 2021-12-22 2023-06-29 주식회사 티빙 Method for providing multi view service and apparatus for same
KR102630621B1 (en) * 2023-07-21 2024-01-29 이단우 System for synchronizing time code for multi-streaming and method thereof

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001069492A (en) * 1999-08-30 2001-03-16 Matsushita Electric Ind Co Ltd Video transmitter
JP2004173083A (en) * 2002-11-21 2004-06-17 Atsushi Matsushita Method and device for simultaneously storing/reproducing a plurality of pictures
KR100974638B1 (en) 2009-06-23 2010-08-10 송지을 System and method for relay broadcast of baseball game
US20130209059A1 (en) * 2012-02-03 2013-08-15 Todd Curry Zaegel Scheele Video frame marking
JP2014064135A (en) * 2012-09-20 2014-04-10 Casio Comput Co Ltd Image pick-up controller, image pick-up control method, reproduction controller, reproduction control method and program
KR101703808B1 (en) * 2015-11-13 2017-02-08 경북대학교 산학협력단 Saystem and method for processing of cctv image using multiplexing scheme

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001069492A (en) * 1999-08-30 2001-03-16 Matsushita Electric Ind Co Ltd Video transmitter
JP2004173083A (en) * 2002-11-21 2004-06-17 Atsushi Matsushita Method and device for simultaneously storing/reproducing a plurality of pictures
KR100974638B1 (en) 2009-06-23 2010-08-10 송지을 System and method for relay broadcast of baseball game
US20130209059A1 (en) * 2012-02-03 2013-08-15 Todd Curry Zaegel Scheele Video frame marking
JP2014064135A (en) * 2012-09-20 2014-04-10 Casio Comput Co Ltd Image pick-up controller, image pick-up control method, reproduction controller, reproduction control method and program
KR101703808B1 (en) * 2015-11-13 2017-02-08 경북대학교 산학협력단 Saystem and method for processing of cctv image using multiplexing scheme

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102273439B1 (en) * 2019-12-31 2021-07-06 씨제이포디플렉스 주식회사 Multi-screen playing system and method of providing real-time relay service
KR20220131029A (en) * 2021-03-19 2022-09-27 주식회사 엘지유플러스 Cloud server for monitoring live videos, and operating method thereof
CN114142985A (en) * 2021-11-17 2022-03-04 中国船舶重工集团公司第七一九研究所 Optical system and method for realizing time synchronization of physical isolation information system
CN114142985B (en) * 2021-11-17 2023-09-19 中国船舶重工集团公司第七一九研究所 Optical system and method for realizing time synchronization of physical isolation information system
KR20230095297A (en) * 2021-12-22 2023-06-29 주식회사 티빙 Method for providing multi view service and apparatus for same
KR102630621B1 (en) * 2023-07-21 2024-01-29 이단우 System for synchronizing time code for multi-streaming and method thereof

Also Published As

Publication number Publication date
KR102025157B1 (en) 2019-09-25

Similar Documents

Publication Publication Date Title
KR102025157B1 (en) System and method for transmitting a plurality of video image
US20200053414A1 (en) Broadcast management system
JP6267961B2 (en) Image providing method and transmitting apparatus
JP5977760B2 (en) Receiving device for receiving a plurality of real-time transmission streams, its transmitting device, and multimedia content reproducing method
KR101128848B1 (en) Server, System and Method for Providing Multi Angle Mobile Broadcasting Service
CN111355966A (en) Surrounding free visual angle live broadcast method and system
JP2007150747A (en) Receiving apparatus and main line image distribution apparatus
KR101841313B1 (en) Methods for processing multimedia flows and corresponding devices
US20160241794A1 (en) Helmet for shooting multi-angle image and shooting method
CN105704399A (en) Playing method and system for multi-picture television program
CN105142003B (en) Television program playing method and device
KR102026454B1 (en) System and method for transmitting a plurality of video image
US20200213631A1 (en) Transmission system for multi-channel image, control method therefor, and multi-channel image playback method and apparatus
KR102024437B1 (en) System and method for transmitting a plurality of video image
JP2003283450A (en) Contents transmission reception system, receiver, contents transmission system, program, and recording medium for the program
KR20120019754A (en) Receiving system for digital braoadcasting using ultrea high definition module
JP2003163897A (en) Contents transmission method, contents transmitter, contents transmission program, contents reception control method, contents reception controller, contents reception control program, and contents time control system
KR20200027638A (en) Apparatus and method for processing a plurality of moving picture
JP2012004991A (en) Broadcast receiving apparatus and control method for the same
JP2004040579A (en) Digital broadcast reception device and synchronous reproduction method for digital broadcast
KR102012580B1 (en) Apparatus and method for multimedia contents handling
KR20060055994A (en) Method for displaying stationary visual for screen capture of the digital television
US10264241B2 (en) Complimentary video content
JP2015109505A (en) Reproduction controller, reproduction device, reproduction control method, and program
JP2004247937A (en) Image pickup device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant