KR101716109B1 - Method for time synchronization of a plurality of images and system displaying multi-images - Google Patents
Method for time synchronization of a plurality of images and system displaying multi-images Download PDFInfo
- Publication number
- KR101716109B1 KR101716109B1 KR1020150165761A KR20150165761A KR101716109B1 KR 101716109 B1 KR101716109 B1 KR 101716109B1 KR 1020150165761 A KR1020150165761 A KR 1020150165761A KR 20150165761 A KR20150165761 A KR 20150165761A KR 101716109 B1 KR101716109 B1 KR 101716109B1
- Authority
- KR
- South Korea
- Prior art keywords
- image information
- image
- time
- information
- pieces
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000002123 temporal effect Effects 0.000 claims description 16
- 239000000284 extract Substances 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 14
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 239000000470 constituent Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
- H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
- H04N7/56—Synchronising systems therefor
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템이 개시된다. 복수의 영상의 시간 동기화 방법은 멀티 영상 재생 시스템이 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하는 단계, 멀티 영상 재생 시스템이 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 분류 기호 각각을 기반으로 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정하는 단계와 멀티 영상 재생 시스템이 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생하는 단계를 포함할 수 있다.A time synchronization method for a plurality of images and a multi-image playback system using such a method are disclosed. A method for time synchronization of a plurality of images includes the steps of: receiving a plurality of pieces of image information generated by a plurality of image capturing apparatuses in a multi-image reproducing system; The method comprising the steps of: classifying a plurality of pieces of image information into a plurality of image information groups based on each of a plurality of classifiers; and determining a plurality of image information groups based on each of the plurality of classifiers, And reproducing them in time synchronization on each of them.
Description
본 발명은 영상 처리 방법 및 장치에 관한 것으로서, 보다 상세하게는, 복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템에 관한 것이다.The present invention relates to an image processing method and apparatus, and more particularly, to a time synchronization method for a plurality of images and a multi-image reproduction system using the method.
오늘날 시설이나 구역의 감시는 다수의 CCTV(closed circuit television)를 기반으로 수행된다. 그리고 취득된 영상을 통한 감시 및 사후 판독의 편의를 위해 각 영상 파일들을 카메라 별로 재생 영역을 분할하여 동시에 재생하는 기술이 널리 활용되고 있다.Today, surveillance of facilities or areas is based on multiple closed circuit television (CCTV). In order to facilitate monitoring and post-reading through the acquired image, techniques for dividing each image file into a plurality of reproduction regions for each camera and simultaneously reproducing the divided regions are widely utilized.
이러한 동시 재생 기술은 CCTV에서 촬영된 영상이 유일한 경우 즉각적으로 적용될 수 있지만 CCTV에서 촬영된 영상이 유일하지 않은 경우(CCTV 마다 복수의 영상이 존재하는 경우)에는 특정 재생 시각에서 어떤 영상을 재생할 것인지 결정하기 위한 프로세스가 필요하다.This simultaneous playback technology can be applied instantaneously in the case where the image captured in CCTV is unique, but in the case where the image captured in CCTV is not unique (if there are plural images in each CCTV), it is determined which image is to be reproduced at a specific reproduction time A process is required.
예를 들어, 영상 데이터의 저장 장치의 결함으로부터 복원된 영상 데이터는 동일한 카메라에서 촬영된 영상일지라도 누락된 부분이 존재하며 정상적으로 복원된 시구간의 영상 데이터들이 각각 별도의 파일로 파편화될 수 있다. 영상 파일들은 각각의 파일이 취득된 카메라 별로 분류될 수 있으며 동시에 하나의 카메라에서 취득된 영상 파일은 복수 개일 수 있다. 하나의 카메라에서 취득된 복수개의 영상 파일은 서로 다른 시간에 촬영되어 생성된 영상 파일이다.For example, image data reconstructed from defects in a storage device of image data may be fragmented into separate files, even though images taken by the same camera are missing, and image data between normally reconstructed images of different time periods may be separated. The image files can be classified according to the camera in which each file is acquired, and at the same time, a plurality of image files can be acquired from one camera. A plurality of image files acquired by one camera are image files generated at different times.
복수의 영상 촬상 장치에서 촬상된 복수의 영상이 시간 동기를 맞추어 하나의 화면상에서 재생하기 위한 방법에 대한 고려가 필요하다.It is necessary to consider a method for reproducing a plurality of images captured by a plurality of image capturing apparatuses on a single screen in synchronism with each other.
본 발명의 일 측면은 복수의 영상의 시간 동기화 방법을 제공한다.One aspect of the present invention provides a time synchronization method for a plurality of images.
본 발명의 다른 측면은 복수의 영상의 시간 동기화 방법을 사용하는 멀티 영상 재생 시스템을 제공한다.Another aspect of the present invention provides a multi-image reproduction system using a time synchronization method of a plurality of images.
본 발명의 일 측면에 따른 복수의 영상의 시간 동기화 방법은 멀티 영상 재생 시스템이 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하는 단계, 상기 멀티 영상 재생 시스템이 상기 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 분류 기호 각각을 기반으로 상기 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정하는 단계와 상기 멀티 영상 재생 시스템이 상기 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생하는 단계를 포함할 수 있다. According to an aspect of the present invention, there is provided a time synchronization method for a plurality of images, the method comprising: receiving a plurality of pieces of image information generated by a plurality of image capturing apparatuses in a multi-image reproduction system; The method comprising the steps of: classifying the plurality of image information into a plurality of image information groups based on each of a plurality of classification symbols included in each of the plurality of metadata of the plurality of image information groups; And reproducing the at least one video information in time synchronization on each of the plurality of lower playback units.
한편, 상기 복수의 메타데이터 각각은 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 더 포함하고, 상기 복수의 하위 재생부의 개수는 상기 복수의 분류 기호의 개수와 동일할 수 있다.Each of the plurality of metadata further includes a start time of each of the plurality of video information and an end time of each of the plurality of video information, and the number of the plurality of lower playback parts is the same as the number of the plurality of classification symbols can do.
또한, 상기 시간 동기화하여 재생하는 단계는 상기 복수의 메타데이터 각각의 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 기반으로 상기 복수의 영상 정보 중 설정된 재생 시간에 촬상된 상기 적어도 하나의 영상 정보를 추출하는 단계와 상기 적어도 하나의 영상 정보를 상기 설정된 재생 시간에 맞추어 재생하는 단계를 포함할 수 있다.In addition, the step of synchronizing and reproducing by time synchronization may include capturing an image at a set reproduction time of the plurality of pieces of image information based on a start time of each of the plurality of pieces of image information of each of the plurality of meta data, Extracting the at least one image information and reproducing the at least one image information according to the set reproduction time.
또한, 상기 복수의 영상 정보를 분류하여 상기 복수의 영상 정보 그룹으로 결정하는 단계는 상기 복수의 영상 정보의 상기 복수의 메타데이터를 추출하여 제1 저장부에 저장하는 단계와 상기 복수의 메타데이터 각각에 포함되는 복수의 분류 기호 각각을 기반으로 상기 복수의 메타데이터를 분류하여 제2 저장부에 저장하여 상기 복수의 영상 정보 그룹을 결정하는 단계를 포함할 수 있다.The step of classifying the plurality of pieces of image information into the plurality of image information groups may include extracting the plurality of pieces of metadata of the plurality of pieces of image information and storing them in a first storage unit, And classifying the plurality of metadata based on each of the plurality of classification symbols included in the plurality of classification symbols and storing the classified metadata in the second storage unit to determine the plurality of image information groups.
또한, 상기 적어도 하나의 영상 정보의 생성을 위해 촬영이 일어난 제1 시간적 길이와 상기 적어도 하나의 영상 정보가 재생되는 제2 시간적 길이가 일치하지 않는 경우, 상기 적어도 하나의 영상 정보의 재생 속도를 조절하여 상기 제1 시간적 길이와 상기 제2 시간적 길이를 맞출 수 있다.In addition, when the first temporal length for capturing the at least one image information and the second temporal length for reproducing the at least one image information do not match, the playback speed of the at least one image information may be adjusted So that the first temporal length and the second temporal length can be matched.
본 발명의 다른 측면에 따른 복수의 영상의 시간 동기화를 수행하는 멀티 영상 재생 시스템은 프로세서를 포함하고, 상기 프로세서는 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하고, 상기 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 분류 기호 각각을 기반으로 상기 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정하고, 상기 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생하도록 구현될 수 있다. According to another aspect of the present invention, there is provided a multi-image reproducing system for performing time synchronization of a plurality of images, the multi-image reproducing system comprising: a processor for receiving a plurality of image information generated by a plurality of image pickup devices, Information on the plurality of image information groups is classified into a plurality of image information groups by classifying the plurality of image information based on each of a plurality of classifiers included in each of a plurality of pieces of metadata of each of the plurality of image information groups, Information can be reproduced in time synchronization on each of the plurality of lower reproducing parts.
한편, 상기 복수의 메타데이터 각각은 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 더 포함하고, 상기 복수의 하위 재생부의 개수는 상기 복수의 분류 기호의 개수와 동일할 수 있다.Each of the plurality of metadata further includes a start time of each of the plurality of video information and an end time of each of the plurality of video information, and the number of the plurality of lower playback parts is the same as the number of the plurality of classification symbols can do.
또한, 상기 프로세서는 상기 복수의 메타데이터 각각의 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 기반으로 상기 복수의 영상 정보 중 설정된 재생 시간에 촬상된 상기 적어도 하나의 영상 정보를 추출하고, 상기 적어도 하나의 영상 정보를 상기 설정된 재생 시간에 맞추어 재생하도록 구현될 수 있다.In addition, the processor may be configured to determine, based on the start time of each of the plurality of pieces of video information and the end time of each of the plurality of pieces of video information, Extracting the image information, and reproducing the at least one image information according to the set reproduction time.
또한, 상기 프로세서는 상기 복수의 영상 정보의 상기 복수의 메타데이터를 추출하여 제1 저장부에 저장하고, 상기 복수의 메타데이터 각각에 포함되는 복수의 분류 기호 각각을 기반으로 상기 복수의 메타데이터를 분류하여 제2 저장부에 저장하여 상기 복수의 영상 정보 그룹을 결정하도록 구현될 수 있다.The processor may extract the plurality of metadata of the plurality of pieces of image information and store the plurality of pieces of metadata in a first storage unit and store the plurality of metadata on the basis of each of the plurality of classification symbols included in each of the plurality of metadata And storing the image information in the second storage unit to determine the plurality of image information groups.
또한, 상기 적어도 하나의 영상 정보의 생성을 위해 촬영이 일어난 제1 시간적 길이와 상기 적어도 하나의 영상 정보가 재생되는 제2 시간적 길이가 일치하지 않는 경우, 상기 적어도 하나의 영상 정보의 재생 속도를 조절하여 상기 제1 시간적 길이와 상기 제2 시간적 길이를 맞출 수 있다.In addition, when the first temporal length for capturing the at least one image information and the second temporal length for reproducing the at least one image information do not match, the playback speed of the at least one image information may be adjusted So that the first temporal length and the second temporal length can be matched.
본 발명의 실시예에 따른 복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템은 복수의 영상 촬상 장치 각각에 의해 생성된 복수의 영상 파일이 시간 동기화되어 특정 시간대에 촬상된 영상이 하나의 화면 상에서 출력될 수 있다.A time synchronization method for a plurality of images according to an embodiment of the present invention and a multi-image playback system using such a method are characterized in that a plurality of image files generated by each of the plurality of image pickup devices are time- And can be output on one screen.
도 1은 본 발명의 실시예에 따른 멀티 영상 재생 시스템을 나타낸 개념도이다.
도 2는 본 발명의 실시예에 따른 멀티 영상 재생 시스템의 동기화 동작을 나타낸 개념도이다.
도 3은 본 발명의 실시예에 따른 재생 제어부의 동작을 나타낸 개념도이다.
도 4는 본 발명의 실시예에 따른 멀티 영상 재생 시스템을 나타낸 개념도이다.
도 5는 본 발명의 실시예에 따른 영상 동기화 방법을 나타낸 개념도이다.
도 6은 본 발명의 실시예에 따른 복수의 영상 정보의 효과적인 재생 방법을 나타낸 개념도이다.
도 7은 본 발명의 실시예에 따른 복수의 영상 정보의 효과적인 재생 방법을 나타낸 개념도이다.1 is a conceptual diagram showing a multi-image reproducing system according to an embodiment of the present invention.
2 is a conceptual diagram illustrating a synchronization operation of the multi-image playback system according to the embodiment of the present invention.
3 is a conceptual diagram illustrating an operation of the reproduction control unit according to the embodiment of the present invention.
4 is a conceptual diagram illustrating a multi-image playback system according to an embodiment of the present invention.
5 is a conceptual diagram illustrating an image synchronization method according to an embodiment of the present invention.
6 is a conceptual diagram illustrating an effective method for reproducing a plurality of video information according to an embodiment of the present invention.
7 is a conceptual diagram illustrating a method for efficiently reproducing a plurality of pieces of image information according to an embodiment of the present invention.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조 부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with an embodiment. It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. The following detailed description is, therefore, not to be taken in a limiting sense, and the scope of the present invention is to be limited only by the appended claims, along with the full scope of equivalents to which such claims are entitled, if properly explained. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in more detail with reference to the drawings.
본 발명의 실시예에 따른 복수의 영상 촬상 장치에서 촬상한 복수의 영상의 시간 동기화 방법 및 장치는 복수의 영상 촬상 장치(또는 카메라)에서 촬상되어 생성된 복수의 영상 정보를 시간 동기화하여 재생하기 위한 방법이 개시된다.A method and apparatus for time synchronization of a plurality of images captured by a plurality of image capturing apparatuses in accordance with an embodiment of the present invention is a method and apparatus for time synchronizing and reproducing a plurality of image information captured and generated by a plurality of image capturing apparatuses A method is disclosed.
복수의 영상 촬상 장치 각각은 복수의 영상 정보를 가질 수 있다. 예를 들어, 카메라 ‘A’는 촬상 결과로 영상 파일1, 영상 파일2, 영상 파일3을 생성할 수 있고, 카메라 ‘B’는 촬상 결과로 영상 파일4, 영상 파일5, 영상 파일6을 생성할 수 있다. 본 발명의 실시예에서 따른 복수의 영상 촬상 장치에서 촬상한 복수의 영상의 시간 동기화 방법에서는 카메라A와 카메라 B에서 특정 시간(T)에 촬상한 영상 정보를 추출하기 위한 방법이 개시된다.Each of the plurality of image pickup devices may have a plurality of image information. For example, the camera 'A' may generate the image file 1, the image file 2, and the image file 3 as an image pickup result, and the camera 'B' may generate the image file 4, the image file 5, can do. In the time synchronization method for a plurality of images captured by a plurality of image capturing apparatuses according to the embodiment of the present invention, a method for extracting image information captured at a specific time (T) in a camera A and a camera B is disclosed.
즉, 복수의 영상 촬상 장치에 의해 촬상 결과로 생성된 복수의 영상 파일을 재생함에 있어서, 하나의 화면 상에서 복수의 영상 촬상 장치에 의해 촬상된 영상을 출력하되, 하나의 화면 상에서 출력되는 영상은 동일한 시간에 촬상된 영상일 수 있도록 시간 동기화를 기반으로 시간의 흐름에 따라 복수의 영상 촬상 장치에서 촬상된 영상이 출력되도록 할 수 있다.That is, in reproducing a plurality of image files generated as image pickup results by a plurality of image pickup apparatuses, an image picked up by a plurality of image pickup apparatuses on one screen is outputted, The image captured by the plurality of image capturing apparatuses may be outputted in accordance with the flow of time based on the time synchronization so that the captured image may be the time.
즉, 본 발명의 실시예에 따른 복수의 영상 촬상 장치에서 촬상한 복수의 영상의 시간 동기화 방법은 복수의 영상 촬상 장치에서 촬상된 복수의 영상들을 시간적으로 올바른 순서에 따라 자동으로 추출하여 재생할 수 있다.That is, the time synchronization method of a plurality of images captured by the plurality of image capturing apparatuses according to the embodiment of the present invention can automatically extract and reproduce a plurality of images captured by the plurality of image capturing apparatuses in a timely correct order .
또한, 본 발명의 실시예에 따른 복수의 영상 촬상 장치에서 촬상한 복수의 영상의 시간 동기화 방법은 영상 정보의 재생 시간과 영상 촬상 수행 시간이 일치하지 않는 경우, 영상 정보의 재생 시간을 조절하여 영상 정보의 재생 시간과 영상 촬상 수행 시간을 맞춰줄 수도 있다.Further, in the time synchronization method of a plurality of images captured by the plurality of image capturing apparatuses according to the embodiment of the present invention, when the reproduction time of the image information does not coincide with the image capturing execution time, The reproduction time of the information and the image capturing execution time can be matched.
도 1은 본 발명의 실시예에 따른 멀티 영상 재생 시스템을 나타낸 개념도이다.1 is a conceptual diagram showing a multi-image reproducing system according to an embodiment of the present invention.
도 1을 참조하면, 멀티 영상 재생 시스템은 비디오 입력부(100), 재생 제어부(110), 멀티 비디오 동기화부(120), 재생부(130), 비디오 파일 관리부(140) 및 프로세서(미도시)를 포함할 수 있다.1, the multi-image reproducing system includes a
비디오 입력부(100)는 복수의 영상 촬상 장치에 의해 촬상된 복수의 영상 정보를 멀티 비디오 동기화(120)부로 입력하기 위해 구현될 수 있다. 비디오 입력부(100)에 입력되는 복수의 영상 정보는 영상 정보를 생성한 영상 촬상 장치 및 영상 정보의 촬상 시간을 기반으로 구분 및 분류될 수 있다.The
비디오 입력부(100)는 비디오 입력되는 영상 촬상 장치 및 영상 정보의 촬상 시간을 기반으로 구분 및 분류된 영상 파일을 멀티 비디오 동기화부(120)로 전송할 수 있다. 예를 들어, 영상 파일의 포맷은 H.264 포맷일 수 있다.The
재생 제어부(110)는 재생부(130)의 분할 수(또는 재생부에 포함되는 하위 재생부의 개수) 및 재생 화면에서 재생할 영상 정보를 제어하기 위해 구현될 수 있다. 멀티 비디오 동기화부(120)는 재생 제어부에 의해 설정된 복수의 영상 정보를 동기화할 수 있다.The
또한, 재생 제어부(110)는 영상 촬상 장치의 식별자(예를 들어, 카메라 번호), 영상 정보의 촬영 날짜, 영상 정보의 촬영 시작 시간, 영상 정보의 촬영 종료 시간에 대한 정보를 멀티 비디오 동기화부(120)로 전송할 수 있다. 또한, 재생 제어부(110)는 비디오 입력부(100)를 통해 입력될 영상 정보(또는 영상 파일)을 선택 및 제어할 수 있다.Further, the
멀티 비디오 동기화부(120)는 재생 제어부(110)에서 수신한 제어 정보 및 비디오 입력부(100)에서 입력된 복수의 영상 정보를 기반으로 복수의 영상 정보에 대한 시간 동기화를 수행할 수 있다. 멀티비디오 동기화부(120)에 의해 동기화된 복수의 영상 정보는 재생부(130)로 전송될 수 있다.The multi-video synchronization unit 120 may perform time synchronization on a plurality of pieces of video information based on the control information received from the
재생부(130)는 멀티 비디오 동기화부(120)에 의해 동기화된 복수의 영상 정보를 시간 동기를 맞추어 재생하기 위해 구현될 수 있다. 재생부에서 복수의 영상 정보의 재생 시간은 시간 바의 조작 또는 직접적인 시간 정보 입력에 의해 설정되어 복수의 영상 정보가 재생될 수 있다. 재생부(130)는 복수의 하위 재생부를 포함할 수 있으며 동기화된 복수의 영상 정보 각각이 복수의 하위 재생부 각각에서 재생될 수 있다. 복수의 하위 재생부 각각은 분류 기호에 의해 분류된 복수의 영상 정보 각각을 재생할 수 있다.The playback unit 130 may be implemented to play back a plurality of pieces of video information synchronized by the multi-video synchronization unit 120 according to time synchronization. The playback time of the plurality of pieces of video information in the playback unit may be set by manipulation of a time bar or by input of direct time information so that a plurality of pieces of video information can be played back. The playback unit 130 may include a plurality of lower playback units, and each of the plurality of synchronized video information may be played back in each of the plurality of lower playback units. Each of the plurality of lower playback units can play back each of the plurality of pieces of image information classified by the classification symbol.
비디오 파일 관리부(140)는 영상 정보의 포맷을 다른 포맷으로 변화시키기 위해 사용될 수 있다. 예를 들어, 비디오 파일 관리부(140)는 H.264 파일 포맷을 가지는 영상 정보를 다른 파일 포맷(예를 들어, avi 포맷)으로 변환시키기 위해 구현될 수 있다.The video file management unit 140 may be used to change the format of the video information into another format. For example, the video file management unit 140 may be implemented to convert image information having the H.264 file format into another file format (for example, avi format).
프로세서(미도시)는 비디오 입력부(100), 재생 제어부(110), 멀티 비디오 동기화부(120), 재생부(130), 비디오 파일 관리부(140)의 동작을 제어하기 위해 구현될 수 있다.A processor (not shown) may be implemented to control operations of the
위와 같은 복수의 영상 정보의 동기화가 수행되는 경우, 하나의 프로그램 상에서 복수의 영상 정보가 시간 동기를 맞추어 재생될 수 있다.When synchronization of a plurality of pieces of image information is performed, a plurality of pieces of image information can be reproduced in time synchronization with one program.
구체적으로 멀티 영상 재생 시스템이 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하고, 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 메타데이터(예를 들어, 분류 기호) 각각을 기반으로 상기 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정할 수 있다. 멀티 영상 재생 시스템이 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생할 수 있다. Specifically, a multi-image reproducing system receives a plurality of pieces of image information generated by a plurality of image capturing apparatuses, and a plurality of pieces of metadata (for example, classification symbols) included in each of a plurality of pieces of metadata of each of the plurality of pieces of image information, The plurality of image information may be classified into a plurality of image information groups based on the plurality of image information. The multi-image reproducing system can reproduce at least one piece of image information included in each of the plurality of image information groups in time synchronization on each of the plurality of lower reproducing sections.
본 발명의 실시예에 따르면, 복수의 영상 정보에 대한 시간 동기화가 수행되는 경우, 시간 상으로 가장 먼저 시작되는 영상을 기준으로 다른 영상의 재생 시간이 결정될 수 있다. 또한, 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보의 시간 동기화 중 특정 시간에 특정 영상 촬상 장치에 의해 촬상된 영상 정보가 존재하지 않는 경우, 신호 없음(No Signal)을 표시해 그 시간에 촬영된 영상이 없음을 표시할 수 있다. According to an embodiment of the present invention, when time synchronization is performed on a plurality of pieces of image information, the playback time of another image can be determined based on an image that is first started in time. When there is no image information captured by the specific image capturing apparatus at a specific time during the time synchronization of a plurality of image information generated by the plurality of image capturing apparatuses, no signal is displayed, Can be displayed.
도 2는 본 발명의 실시예에 따른 멀티 영상 재생 시스템의 동기화 동작을 나타낸 개념도이다.2 is a conceptual diagram illustrating a synchronization operation of the multi-image playback system according to the embodiment of the present invention.
도 2를 참조하면, 멀티 영상 재생 시스템은 재생할 영상 정보를 복수의 영상 장치로부터 수신하여 영상 정보의 메타데이터를 추출하여 분류하기 위해 구현될 수 있다. 위와 같은 동작은 비디오 입력부 또는 재생 제어부에 구현된 재생 영상 선택 모듈에 의해 수행될 수 있다.Referring to FIG. 2, the multi-image playback system may be implemented to receive image information to be reproduced from a plurality of image devices and to extract and classify metadata of the image information. The above operation may be performed by a playback image selection module implemented in the video input unit or the playback control unit.
멀티 영상 재생 시스템의 제1 저장부(210)는 수신한 복수의 영상 정보의 메타데이터를 저장할 수 있다. 영상 분류 모듈은 복수의 영상 정보 각각의 복수의 메타데이터 각각을 분석하고 및 분류할 수 있다. 분석 및 분류된 메타데이터는 멀티 영상 재생 시스템의 제2 저장부(220)에 저장될 수 있다.The
제1 저장부(210)에 저장된 복수의 영상 정보들의 메타데이터들은 추출 및 분석되어 제2 저장부(220)에 저장될 수 있다. 메타 데이터는 영상 정보의 재생 시작 시각 및 영상 정보의 재생 종료 시간, 영상 정보를 촬상한 영상 장치에 대한 정보 및 분류 기호 정보를 포함할 수 있다. 분류 기호 정보는 영상 정보의 동기화를 위한 기준 정보일 수 있다. 예를 들어, 동일한 분류 기호를 가지는 영상 정보는 재생부에 포함되는 하나의 하위 재생부에서 재생될 수 있다. The metadata of the plurality of image information stored in the
예를 들어, 재생 제어부(또는 별도의 구성부)는 재생부에 포함된 복수의 하위 재생부 각각에서 동시에 재생될 복수의 영상 정보(또는 동시에 재생을 해야 할 복수의 영상 촬상 장치)를 설정할 수 있고, 복수의 하위 재생부 각각에서 시간 동기화되어 재생될 복수의 영상 정보 각각은 동일한 분류 기호 정보를 할당받을 수 있다. 동일한 분류 기호를 할당받은 복수의 영상 정보는 재생부에 포함되는 복수의 하위 영상 재생부 중 하나의 하위 영상 재생부에서 출력될 수 있다. 재생부는 제 2 저장부에 저장된 메타 데이터들의 분류 기호의 종류만큼의 하위 영상 재생부를 포함할 수 있다. For example, the reproduction control section (or the separate constituent section) can set a plurality of pieces of video information (or a plurality of video image capturing devices to be simultaneously reproduced) to be simultaneously reproduced in each of the plurality of lower reproducing sections included in the reproducing section , Each of the plurality of video information to be reproduced in time synchronization with each of the plurality of lower playback units can be assigned the same classification symbol information. A plurality of pieces of image information having the same classification symbols assigned thereto may be output from one of the plurality of lower image reproducing units included in the reproducing unit. The reproducing unit may include a lower image reproducing unit as many as the sort symbols of the metadata stored in the second storing unit.
도 3은 본 발명의 실시예에 따른 재생 제어부의 동작을 나타낸 개념도이다.3 is a conceptual diagram illustrating an operation of the reproduction control unit according to the embodiment of the present invention.
도 3을 참조하면, 재생 제어부는 제2 저장부에 저장된 분류된 메타데이터를 기반으로 특정 분류 기호에 해당하는 영상 정보가 특정 재생 시간에 재생되도록 제어할 수 있다.Referring to FIG. 3, the reproduction control unit may control the image information corresponding to a specific classification symbol to be reproduced at a specific reproduction time based on the classified metadata stored in the second storage unit.
재생 제어부는 특정 분류 기호에 해당하는 메타데이터에 대응되는 영상 정보를 추출한다(단계 S300).The reproduction control unit extracts image information corresponding to the metadata corresponding to the specific classification symbol (step S300).
전술한 바와 같이 제2 저장부에는 특정 분류 기호에 해당하는 메타데이터가 분류되어 저장될 수 있고, 재생 제어부는 특정 분류 기호에 해당하는 메타데이터에 대한 영상 정보를 비디오 입력부에서 멀티 비디오 동기화부로 입력되도록 제어할 수 있다.As described above, the metadata corresponding to a specific classification symbol may be classified and stored in the second storage unit, and the reproduction control unit may cause the video input unit to input the video information for the metadata corresponding to the specific classification symbol to the multi- Can be controlled.
재생 제어부는 영상 정보가 특정 재생 시점에 대응되는 위치에서 재생되도록 제어한다(단계 S310).The reproduction control unit controls the video information to be reproduced at a position corresponding to a specific reproduction time (step S310).
재생 제어부는 단계 S300을 기반으로 결정된 영상 정보를 특정 재생 시점을 기준으로 재생하기 위해 구현될 수 있다. 특정 재생 시점은 종합 재생 시작 시간 및 종합 재생 종료 시간 사이의 시점일 수 있다. The reproduction control unit may be implemented to reproduce the image information determined based on the step S300 on the basis of a specific reproduction time point. The specific playback point may be the time point between the total playback start time and the total playback end time.
종합 재생 시작 시간은 제 1 저장부에 저장된 메타 데이터 중에서 가장 이른 재생 시작 시간이고 종합 재생 종료 시간은 제 1 저장부에 저장된 메타 데이터 중에서 가장 늦은 재생 종료 시간일 수 있다. 현재 재생 시간은 종합 재생 시작 시간에서 종합 재생 종료 시간 사이의 시간으로써 재생이 일어나는 동안에는 실시간으로 증가할 수 있다. The total reproduction start time may be the earliest reproduction start time among the metadata stored in the first storage unit and the synthetic reproduction end time may be the latest reproduction end time among the metadata stored in the first storage unit. The current playback time is a time between a total playback start time and a total playback end time, and may increase in real time during playback.
멀티 비디오 동기화부는 복수의 영상이 특정 재생 시점을 기준으로 재생부에 포함되는 복수의 하위 재생부 각각에서 재생될 수 있도록 동기화 절차를 수행할 수 있다.The multi-video synchronization unit may perform a synchronization procedure so that a plurality of images can be reproduced in each of a plurality of lower playback units included in the playback unit based on a specific playback time.
구체적으로 멀티 비디오 동기화부는 동영상 데이터의 재생 시작 시간과 재생 종료 시간을 각각 A, B 라고 하고 특정 재생 시점(또는 현재 재생 시간)을 C라고 가정할 수 있다. 이러한 경우, A ≤ C ≤ B 의 관계를 만족하는 C를 포함하는 복수의 영상 정보가 추출될 수 있고, 복수의 영상 정보 각각은 특정 재생 시점 C를 기준으로 동기화되어 복수의 영상 정보 각각의 분류 기호에 대응되는 재생부의 복수의 하위 재생부 각각에서 출력될 수 있다.More specifically, the multi-video synchronizing unit may assume the reproduction start time and the reproduction end time of the moving picture data as A and B and the specific reproduction time (or the current reproduction time) as C. In this case, a plurality of pieces of image information including C satisfying the relationship of A? C? B can be extracted, and each of the plurality of pieces of image information is synchronized with a specific reproduction point C as a reference, Can be output from each of the plurality of lower reproducing portions of the reproducing portion corresponding to the reproducing portion.
예를 들어, 현재 재생되는 영상 정보의 재생 시작 시간을 A, 현재 재생되는 영상 정보의 재생 종료 시간을 B라고 하고, 특정 재생 시점을 C라고 하면, 영상 정보의 재생 길이는 B-A이고, C-A 에 해당하는 시간에 위치한 영상이 동기화되어 출력될 수 있다.For example, assuming that the reproduction start time of the currently reproduced image information is A, the reproduction end time of the currently reproduced image information is B, and the specific reproduction time is C, the reproduction length of the image information is BA, The images positioned at the time when the image is displayed can be outputted in synchronization with each other.
위와 같은 방법이 사용되는 경우, CCTV에서 추출한 복수의 영상 정보(예를 들어, H.264 파일)가 하나의 프로그램을 통해 하나의 디스플레이(또는 재생부)에 포함되는 복수의 하위 재생 화면(또는 하위 재생부) 상에서 출력될 수 있다.When the above method is used, a plurality of pieces of video information (for example, H.264 file) extracted from the CCTV are transmitted to a plurality of sub-playback screens (or sub- Reproducing section).
기존의 플레이어들은 하나의 프로그램에서 하나의 영상만을 확인할 수 있지만 본 발명의 실시예에 따른 복수의 영상의 시간 동기화 방법 및 장치에서는 하나의 영상 재생 프로그램을 통해 복수의 영상 촬상 장치에 의해 촬상된 복수의 영상이 동시에 시간 동기화되어 재생될 수 있다. 사용자는 카메라 별, 촬영 날짜 별로 저장되어 있는 폴더를 선택해 쉽게 영상을 재생할 수 있다. 또한, 화면의 분할 수를 선택할 수 있고, 타임 바를 움직이는 것과 직접 시간을 입력하는 방식으로 동기화된 복수의 영상을 탐색할 수 있다. 물론 탐색 시에도 재생되는 다수의 영상은 시간에 동기화되어 재생될 수 있다. Existing players can view only one image in one program. However, in the method and apparatus for time synchronization of a plurality of images according to the embodiment of the present invention, a plurality of images captured by a plurality of image capturing apparatuses The images can be reproduced simultaneously in time synchronization. The user can easily reproduce an image by selecting a folder stored for each camera and a shooting date. Also, the number of divisions of the screen can be selected, and a plurality of synchronized images can be searched by moving the time bar and inputting the direct time. Of course, a plurality of images to be reproduced at the time of searching can be reproduced in synchronization with time.
도 4는 본 발명의 실시예에 따른 멀티 영상 재생 시스템을 나타낸 개념도이다.4 is a conceptual diagram illustrating a multi-image playback system according to an embodiment of the present invention.
도 4에서는 멀티 영상 재생 시스템은 복수의 영상 정보(또는 복수의 영상 파일)를 수신할 수 있다. 멀티 영상 재생 시스템은 수신한 복수의 영상 정보를 분류할 수 있다.In Fig. 4, the multi-image reproducing system can receive a plurality of pieces of image information (or a plurality of image files). The multi-image reproduction system can classify a plurality of received image information.
멀티 영상 재생 시스템은 복수의 영상 정보를 영상 촬상 장치를 기반으로 분류한다(단계S400).The multi-image reproducing system classifies a plurality of pieces of image information on the basis of the image pickup device (step S400).
영상 촬상 장치1 내지 영상 촬상 장치10에 의해 촬상된 복수의 영상 정보가 존재하는 경우, 멀티 영상 재생 시스템은 복수의 영상 정보 각각을 영상 촬상 장치를 기준으로 분류할 수 있다.When there is a plurality of pieces of image information captured by the image capturing apparatuses 1 to 10, the multi-image capturing system can classify each of the plurality of pieces of image information on the basis of the image capturing apparatus.
복수의 영상 정보 각각의 메타데이터는 복수의 영상 정보 각각을 생성한 영상 촬상 장치에 대한 정보를 포함할 수 있고, 멀티 영상 재생 시스템은 복수의 영상 정보 각각의 메타데이터를 기반으로 복수의 영상 정보 각각을 영상 촬상 장치를 기준으로 분류할 수 있다. 메타 데이터 중 복수의 영상 정보 각각을 생성한 영상 촬상 장치에 대한 정보가 전술한 분류 기호일 수 있다.The metadata of each of the plurality of pieces of image information may include information on the image capturing apparatuses each of which has generated the plurality of pieces of image information, Can be classified based on the image pickup device. The information on the image capturing apparatus that has generated each of the plurality of pieces of image information in the metadata may be the above-mentioned classification symbol.
멀티 영상 재생 시스템은 동일한 분류 기호를 가지는 영상 정보를 시간 정보를 고려하여 분류한다(단계 S410).The multi-image reproducing system classifies the image information having the same classification symbol in consideration of time information (step S410).
멀티 영상 재생 시스템은 동일한 분류 기호를 가지는 복수의 영상 정보를 시간 정보를 기반으로 분류할 수 있다. 예를 들어, 날짜를 기준으로 1차적인 분류를 수행하고, 복수의 영상 정보가 날짜를 기준으로 분류되지 않을 경우, 분류되지 않은 복수의 영상 정보를 더 작은 시간 단위(예를 들어, 시간, 분 등)를 기준으로 분류할 수 있다. 예를 들어, 영상 촬상 장치1에 의해 일주일 간 촬상이 수행되는 경우, 날짜 별로 7개의 영상 정보가 생성될 수 있다. 이러한 경우, 7개의 영상 정보는 날짜 단위로 분류될 수 있다. The multi-image reproducing system can classify a plurality of image information having the same classification symbol on the basis of time information. For example, a primary classification is performed on the basis of dates, and when a plurality of pieces of image information are not classified based on dates, a plurality of pieces of image information that are not classified can be divided into smaller time units (for example, Etc.). For example, when image capturing is performed for one week by the image capturing apparatus 1, seven pieces of image information can be generated for each date. In this case, the seven pieces of image information can be classified into date units.
또는 동기화를 위한 추가적인 메타데이터가 정의되고 추가적인 동기화를 위한 추가적인 메타데이터를 기반으로 동일한 분류 기준을 가지는 복수의 영상 정보가 분류될 수도 있다.Or additional metadata for synchronization may be defined and multiple pieces of image information having the same classification criteria may be categorized based on additional metadata for additional synchronization.
도 5는 본 발명의 실시예에 따른 영상 동기화 방법을 나타낸 개념도이다. 5 is a conceptual diagram illustrating an image synchronization method according to an embodiment of the present invention.
도 5에서는 복수의 영상 동기화를 위해 복수의 영상 정보 각각에 대해 메타데이터로서 동기화 정보를 추가하는 방법이 개시된다.5, a method of adding synchronization information as metadata to each of a plurality of pieces of image information for synchronizing a plurality of images is disclosed.
도 5를 참조하면, 복수의 영상 촬상 장치는 동일한 기준 시간을 기준으로 동작하여 복수의 영상 정보를 생성할 수 있다. 복수의 영상 정보는 동기화를 위한 메타데이터를 포함할 수 있다. 동기화를 위한 메타데이터는 제1 시간 단위로 설정되는 제1 동기화 정보(500), 제2 시간 단위로 설정되는 제2 동기화 정보(520)를 포함할 수 있다. 제1 시간 단위는 제2 시간 단위보다 큰 시간 단위일 수 있다.Referring to FIG. 5, a plurality of image capturing apparatuses may operate on the basis of the same reference time to generate a plurality of image information. The plurality of pieces of image information may include metadata for synchronization. The metadata for synchronization may include first synchronization information 500 set in a first time unit, and second synchronization information 520 set in a second time unit. The first time unit may be a time unit larger than the second time unit.
예를 들어, 제1 시간 단위는 10분 단위로 변화하여 생성되는 제1 동기화 정보(500), 제2 시간 단위는 1분 단위로 변화하는 제2 동기화 정보(520)일 수 있다. For example, the first time unit may be the first synchronization information 500 generated in units of 10 minutes, and the second time unit may be the second synchronization information 520 that changes in units of one minute.
이러한 동기화를 위한 메타데이터를 기준으로 복수의 영상 정보는 동기화를 수행할 수 있다.The plurality of pieces of image information can perform synchronization based on the metadata for such synchronization.
재생 제어부는 사용자에 의해 입력된 특정 재생 시점과 대응되는 제1 동기화 정보(500) 및 제2 동기화 정보(510)를 찾을 수 있다. 입력된 특정 재생 시점이 24분 34초에 대응되는 시점인 경우, 복수의 영상 정보 각각에서20분을 지시하는 제1 동기화 정보(500), 4분을 지시하는 제2 동기화 정보(510)를 메타데이터로 가진 하위 영상 정보를 찾고, 이후 34초에 대응되는 영상을 찾을 수 있다. 이러한 방법이 사용되는 경우, 보다 빠르게 복수의 영상 정보 각각에 대한 동기화가 가능할 수 있다. The reproduction control unit can find the first synchronization information 500 and the second synchronization information 510 corresponding to a specific playback point input by the user. The first synchronization information 500 indicating 20 minutes in each of the plurality of pieces of image information and the second synchronization information 510 indicating 4 minutes in the plurality of pieces of image information are stored in the meta information memory It is possible to find the lower image information with the data and find the image corresponding to 34 seconds thereafter. If such a method is used, it is possible to synchronize each of a plurality of pieces of image information more quickly.
또한, 멀티 영상 재생 시스템은복수의 영상 정보를 동기화하여 스킵(skip)하여 특정 재생 시점을 찾기 위해 빠르게 넘기는 기능을 제공할 수 있고, 이러한 기능은 제1 동기화 정보(500) 및/또는 제2 동기화 정보(510)를 기반으로 수행될 수 있다. 사용자는 제1 동기화 정보(500)에 대응되는 시점, 제2 동기화 정보(510)에 대응되는 시점을 설정할 수 있고, 사용자의 설정에 따라 제1 동기화 정보(500)에 대응되는 시점, 제2 동기화 정보(510)에 대응되는 시점이 적응적으로 변화되어 메타데이터로 저장될 수 있다. 사용자는 자신이 원하는 스킵 정도를 설정하여 복수의 영상 정보의 동기화를 유지하면서 스킵할 수 있다.In addition, the multi-image playback system can provide a function of quickly skipping a plurality of pieces of image information in order to find a specific playback point by skipping and synchronizing the plurality of pieces of image information, and this function can be realized by the first synchronization information 500 and / Information < RTI ID = 0.0 > 510 < / RTI > The user can set a time corresponding to the first synchronization information 500 and a time corresponding to the second synchronization information 510. The user can set a time point corresponding to the first synchronization information 500, The time corresponding to the information 510 may be adaptively changed and stored as metadata. The user can skip while keeping the synchronization of a plurality of pieces of image information by setting the degree of skipping desired by the user.
도 6은 본 발명의 실시예에 따른 복수의 영상 정보의 효과적인 재생 방법을 나타낸 개념도이다.6 is a conceptual diagram illustrating an effective method for reproducing a plurality of video information according to an embodiment of the present invention.
도 6에서는 복수의 영상 정보가 하나의 화면에서 출력되는 경우, 관리자가 보다 효과적으로 복수의 영상 정보의 재생 화면을 보기 위한 방법이 개시된다. 6 shows a method for an administrator to more effectively view a reproduction screen of a plurality of pieces of video information when a plurality of pieces of video information are output from one screen.
도 6을 참조하면, 멀티 영상 재생 시스템은 특정 기준 시간으로 동기화를 수행하여 재생되는 복수의 영상 정보는 복수의 영상 정보 각각의 재생 시간을 고려하여 재동기화 및 화면의 재분배가 수행될 수 있다.Referring to FIG. 6, in the multi-image reproducing system, a plurality of pieces of image information reproduced by performing synchronization at a specific reference time may be re-synchronized and redistributed in consideration of a reproduction time of each of a plurality of pieces of image information.
예를 들어, 특정 기준 시간이 영상 재생 시작 지점으로 설정되어 영상 정보1(610), 영상 정보2(620), 영상 정보3(630) 및 영상 정보4(640)가 재생되는 경우가 가정될 수 있다. 이때 영상 정보1(610), 영상 정보2(620), 영상 정보3(630) 및 영상 정보4(640) 각각의 종료 시점은 서로 다를 수 있다. 이러한 경우, 재생 도중 동기화가 재수행될 수 있다.For example, it may be assumed that a specific reference time is set as a video playback start point and video information 1 610, video information 2 620, video information 3 630, and video information 4 640 are reproduced have. At this time, the end points of the image information 1 610, the image information 2 620, the image information 3 630, and the image information 4 640 may be different from each other. In this case, synchronization may be re-performed during playback.
예를 들어, 영상 정보1(610)의 종료 시점이 제1 시점(615)이고, 영상 정보2(620)의 종료 시점이 제2 시점(625)이고, 영상 정보3(630)의 종료 시점이 제3 시점(635)이고, 영상 정보4(640)의 종료 시점이 제4 시점(645)일 수 있다. 이러한 경우, 영상 정보1(610), 영상 정보2(620), 영상 정보3(630) 및 영상 정보4(640) 각각은 제1 시점(615), 제2 시점(625), 제3 시점(635), 제4 시점(645) 순서로 순차적으로 종료될 수 있다. 이때, 제동기화 및 화면 재분배가 제1 시점(615), 제2 시점(625), 제3 시점(635), 제4 시점(645)에서 수행될 수 있다.For example, when the end point of the image information 1 610 is the first point of view 615, the end point of the image information 2 620 is the second point of time 625, and the end point of the image information 3 630 is And the end point of the image information 4 640 may be the fourth point of time 645. [ In this case, each of the image information 1 610, the image information 2 620, the image information 3 630, and the image information 4 640 includes a first point of view 615, a second point of
예를 들어, 제1 시점(615)에 영상 정보1(610)이 종료되는 경우, 영상 정보 2(620), 영상 정보3(630), 영상 정보 4(640)에 대한 동기화가 재수행되어 영상 정보 2(620), 영상 정보3(630) 및 영상 정보4(640) 각각이 화면 상에서 출력될 수 있다. 영상 정보 1(610)에 해당하는 하위 재생부는 NO SIGNAL 화면을 표시하거나, 영상 정보 1(610)에 해당하는 하위 재생부의 화면이 사라지고, 영상 정보 2(620), 영상 정보3(630) 및 영상 정보4(640) 각각에 대응되는 하위 재생부가 상대적으로 확장되어 하나의 화면상에 출력될 수 있다.For example, when the first video information 610 is terminated at the first time 615, the synchronization of the video information 2 620, the video information 3 630, and the video information 4 640 is re- Information 2 620, image information 3 630, and image information 4 640 may be output on the screen. The lower playback unit corresponding to the video information 1 610 displays the NO SIGNAL screen or the screen of the lower playback unit corresponding to the video information 1 610 disappears and the video information 2 620, Information 4 640 may be relatively expanded and output on one screen.
마찬가지 방식으로 제2 시점(625)에 영상 정보2(620)가 종료되는 경우, 영상 정보3(630) 및 영상 정보 4(640)에 대한 동기화가 재수행되어 영상 정보3(630) 및 영상 정보4(640) 각각이 화면 상에서 출력될 수 있다. 영상 정보2(620)에 해당하는 하위 재생부는 NO SIGNAL 화면을 표시하거나, 영상 정보 2(620)에 해당하는 하위 재생부의 화면이 사라지고, 영상 정보 3(630) 및 영상 정보4(640) 각각에 대응되는 하위 재생부가 상대적으로 확장되어 하나의 화면상에 출력될 수 있다.In the same manner, when the image information 2 620 is terminated at the second time point 625, the synchronization with respect to the image information 3 630 and the image information 4 640 is performed again and the image information 3 630 and the
이러한 종료 시간이 남은 영상 정보에 대한 재동기화 절차가 수행되는 경우, 보다 정확한 영상 간의 동기화가 수행될 수 있고, 화면의 활용도가 증가될 수 있다.When the resynchronization procedure for the image information with the end time remaining is performed, more accurate synchronization between images can be performed and the utilization of the screen can be increased.
도 7은 본 발명의 실시예에 따른 복수의 영상 정보의 효과적인 재생 방법을 나타낸 개념도이다.7 is a conceptual diagram illustrating a method for efficiently reproducing a plurality of pieces of image information according to an embodiment of the present invention.
도 7에서는 특정 영상 정보가 일정 시간 동안 존재하지 않을 경우, 영상 동기화 방법이 개시된다.In FIG. 7, when specific image information does not exist for a predetermined time, an image synchronization method is disclosed.
도 7을 참조하면, 영상 정보1(710), 영상 정보2(720) 및 영상 정보3(730)이 존재하고 일정 시간 동안 영상 정보 2(720)가 존재하지 않는 경우가 가정될 수 있다.7, it can be assumed that the image information 1 710, the image information 2 720, and the image information 3 730 exist and the image information 2 720 does not exist for a predetermined period of time.
예를 들어, 영상 정보1(710), 영상 정보2(720) 및 영상 정보3(730)이 제1 시간(715)에 동기화되어 재생되던 도중 영상 정보 2(720)가 제1 시간 구간(750) 동안 누락될 수 있다.For example, the intermediate image information 2 720, in which the image information 1 710, the image information 2 720, and the image information 3 730 are reproduced in synchronization with the
이러한 경우, 제1 시간 구간(750)의 시작 지점인 제2 시간(725)에 영상 정보2(720)의 재생이 일시 중지될 수 있고, 영상 정보2(720)에 대응되는 하위 재생부에서 영상 정보2(720)의 출력은 중단될 수 있다. 영상 정보2(720)의 출력이 중단되는 경우, 영상 정보2(720)에 대응되는 하위 재생부가 사라지고, 영상 정보1(710) 및 영상 정보3(730) 각각에 대응되는 하위 재생부 각각의 화면의 크기가 증가될 수 있다.In this case, the reproduction of the video information 2 720 may be temporarily stopped at the
제1 시간 구간(750)의 종료 지점인 제3 시간(735)에 영상 정보1(710), 영상 정보2(720) 및 영상 정보3(730)의 동기화가 재수행될 수 있다. 동기화 이후, 영상 정보2(720)에 대응되는 하위 재생부가 다시 생성될 수 있고, 영상 정보1(710) 및 영상 정보3(730) 각각에 대응되는 하위 재생부 각각의 화면의 크기는 다시 감소될 수 있다.The synchronization of the image information 1 710, the image information 2 720 and the image information 3 730 may be performed again at a
이와 같은 복수의 영상의 시간 동기화 방법은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.The time synchronization method for a plurality of images may be implemented in an application or in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.The program instructions recorded on the computer-readable recording medium may be ones that are specially designed and configured for the present invention and are known and available to those skilled in the art of computer software.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as floptical disks, media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of program instructions include machine language code such as those generated by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules for performing the processing according to the present invention, and vice versa.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made therein without departing from the spirit and scope of the invention as defined in the appended claims. It will be possible.
Claims (10)
멀티 영상 재생 시스템이 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하는 단계;
상기 멀티 영상 재생 시스템이 상기 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 분류 기호 각각을 기반으로 상기 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정하는 단계; 및
상기 멀티 영상 재생 시스템이 상기 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생하는 단계를 포함하며,
상기 복수의 메타데이터 각각은 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 더 포함하고,
상기 복수의 하위 재생부의 개수는 상기 복수의 분류 기호의 개수와 동일한 것을 특징으로 하는 방법.A time synchronization method for a plurality of images,
The method comprising: receiving a plurality of pieces of image information generated by a plurality of image pickup devices;
The multi-image reproduction system classifies the plurality of image information based on each of a plurality of classification symbols included in each of a plurality of metadata of each of the plurality of image information, and determines the plurality of image information groups as a plurality of image information groups; And
And the multi-image reproducing system includes a step of synchronizing and reproducing at least one image information included in each of the plurality of image information groups on each of a plurality of sub-reproducing units,
Wherein each of the plurality of metadata further includes a start time of each of the plurality of image information and an end time of each of the plurality of image information,
Wherein the number of the plurality of lower playback units is equal to the number of the plurality of classification symbols.
상기 복수의 메타데이터 각각의 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 기반으로 상기 복수의 영상 정보 중 설정된 재생 시간에 촬상된 상기 적어도 하나의 영상 정보를 추출하는 단계; 및
상기 적어도 하나의 영상 정보를 상기 설정된 재생 시간에 맞추어 재생하는 단계를 포함하는 것을 특징으로 하는 방법.3. The method of claim 2, wherein the time-
Extracting the at least one piece of image information photographed at a set reproduction time of the plurality of pieces of image information based on a start time of each of the plurality of pieces of image information of each of the plurality of meta data and an end time of each of the plurality of pieces of image information step; And
And reproducing the at least one video information according to the set playback time.
상기 복수의 영상 정보의 상기 복수의 메타데이터를 추출하여 제1 저장부에 저장하는 단계; 및
상기 복수의 메타데이터 각각에 포함되는 복수의 분류 기호 각각을 기반으로 상기 복수의 메타데이터를 분류하여 제2 저장부에 저장하여 상기 복수의 영상 정보 그룹을 결정하는 단계를 포함하는 것을 특징으로 하는 방법.4. The method of claim 3, wherein the step of classifying the plurality of pieces of image information into the plurality of image information groups comprises:
Extracting the plurality of metadata of the plurality of pieces of image information and storing the extracted metadata in a first storage unit; And
And classifying the plurality of metadata based on each of the plurality of classifiers included in each of the plurality of metadata and storing the classified metadata in the second storage unit to determine the plurality of image information groups .
상기 적어도 하나의 영상 정보의 생성을 위해 촬영이 일어난 제1 시간적 길이와 상기 적어도 하나의 영상 정보가 재생되는 제2 시간적 길이가 일치하지 않는 경우, 상기 적어도 하나의 영상 정보의 재생 속도를 조절하여 상기 제1 시간적 길이와 상기 제2 시간적 길이를 맞추는 것을 특징으로 하는 방법.5. The method of claim 4,
Wherein the controller controls the playback speed of the at least one video information when the first temporal length for capturing the at least one image information and the second temporal length for reproducing the at least one video information do not match, Wherein the first temporal length matches the second temporal length.
상기 멀티 영상 재생 시스템은 프로세서를 포함하고,
상기 프로세서는 복수의 영상 촬상 장치에 의해 생성된 복수의 영상 정보를 수신하고,
상기 복수의 영상 정보 각각의 복수의 메타데이터 각각에 포함된 복수의 분류 기호 각각을 기반으로 상기 복수의 영상 정보를 분류하여 복수의 영상 정보 그룹으로 결정하고,
상기 복수의 영상 정보 그룹 각각에 포함되는 적어도 하나의 영상 정보를 복수의 하위 재생부 각각 상에서 시간 동기화하여 재생하도록 구현되며,
상기 복수의 메타데이터 각각은 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 더 포함하고,
상기 복수의 하위 재생부의 개수는 상기 복수의 분류 기호의 개수와 동일한 것을 특징으로 하는 멀티 영상 재생 시스템.A multi-image reproducing system for performing time synchronization of a plurality of images,
The multi-image playback system includes a processor,
The processor receives a plurality of pieces of image information generated by a plurality of image pickup devices,
The plurality of image information is classified into a plurality of image information groups based on each of a plurality of classification symbols included in each of a plurality of metadata of each of the plurality of image information,
And reproducing at least one piece of video information included in each of the plurality of video information groups in time synchronization on each of the plurality of sub-
Wherein each of the plurality of metadata further includes a start time of each of the plurality of image information and an end time of each of the plurality of image information,
Wherein the number of the plurality of lower playback units is equal to the number of the plurality of classification symbols.
상기 프로세서는 상기 복수의 메타데이터 각각의 상기 복수의 영상 정보 각각의 시작 시간, 상기 복수의 영상 정보 각각의 종료 시간을 기반으로 상기 복수의 영상 정보 중 설정된 재생 시간에 촬상된 상기 적어도 하나의 영상 정보를 추출하고,
상기 적어도 하나의 영상 정보를 상기 설정된 재생 시간에 맞추어 재생하도록 구현되는 것을 특징으로 하는 멀티 영상 재생 시스템.8. The method of claim 7,
Wherein the processor is configured to generate the at least one video information, which is captured at a predetermined playback time of the plurality of pieces of video information, based on a start time of each of the plurality of pieces of video information and an end time of each of the plurality of pieces of video information, Respectively,
And reproducing the at least one video information according to the set playback time.
상기 프로세서는 상기 복수의 영상 정보의 상기 복수의 메타데이터를 추출하여 제1 저장부에 저장하고,
상기 복수의 메타데이터 각각에 포함되는 복수의 분류 기호 각각을 기반으로 상기 복수의 메타데이터를 분류하여 제2 저장부에 저장하여 상기 복수의 영상 정보 그룹을 결정하도록 구현되는 것을 특징으로 하는 멀티 영상 재생 시스템.9. The method of claim 8,
Wherein the processor extracts the plurality of metadata of the plurality of pieces of image information and stores the extracted metadata in a first storage unit,
Wherein the plurality of metadata groups are classified based on each of the plurality of classifiers included in each of the plurality of metadata and stored in the second storage unit to determine the plurality of image information groups. system.
상기 적어도 하나의 영상 정보의 생성을 위해 촬영이 일어난 제1 시간적 길이와 상기 적어도 하나의 영상 정보가 재생되는 제2 시간적 길이가 일치하지 않는 경우, 상기 적어도 하나의 영상 정보의 재생 속도를 조절하여 상기 제1 시간적 길이와 상기 제2 시간적 길이를 맞추는 것을 특징으로 하는 멀티 영상 재생 시스템.10. The method of claim 9,
Wherein the controller controls the playback speed of the at least one video information when the first temporal length for capturing the at least one image information and the second temporal length for reproducing the at least one video information do not match, Wherein the first temporal length and the second temporal length are matched with each other.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150165761A KR101716109B1 (en) | 2015-11-25 | 2015-11-25 | Method for time synchronization of a plurality of images and system displaying multi-images |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150165761A KR101716109B1 (en) | 2015-11-25 | 2015-11-25 | Method for time synchronization of a plurality of images and system displaying multi-images |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101716109B1 true KR101716109B1 (en) | 2017-03-15 |
Family
ID=58403119
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150165761A KR101716109B1 (en) | 2015-11-25 | 2015-11-25 | Method for time synchronization of a plurality of images and system displaying multi-images |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101716109B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102270723B1 (en) | 2020-03-31 | 2021-06-30 | (주)클라모스 | Method and apparatus for displaying a multiple images of varying location and size using limited resources |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005317151A (en) * | 2004-04-30 | 2005-11-10 | Nippon Telegr & Teleph Corp <Ntt> | Method, device and program for multimedia data synchronizing reproduction |
JP2013169013A (en) * | 2013-05-23 | 2013-08-29 | Casio Comput Co Ltd | Image processor, control method, and program |
-
2015
- 2015-11-25 KR KR1020150165761A patent/KR101716109B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005317151A (en) * | 2004-04-30 | 2005-11-10 | Nippon Telegr & Teleph Corp <Ntt> | Method, device and program for multimedia data synchronizing reproduction |
JP2013169013A (en) * | 2013-05-23 | 2013-08-29 | Casio Comput Co Ltd | Image processor, control method, and program |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102270723B1 (en) | 2020-03-31 | 2021-06-30 | (주)클라모스 | Method and apparatus for displaying a multiple images of varying location and size using limited resources |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9881215B2 (en) | Apparatus and method for identifying a still image contained in moving image contents | |
CN107615766B (en) | System and method for creating and distributing multimedia content | |
US7483624B2 (en) | System and method for indexing a video sequence | |
US20170201793A1 (en) | TV Content Segmentation, Categorization and Identification and Time-Aligned Applications | |
US8634708B2 (en) | Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method | |
JP4197014B2 (en) | Video search method and apparatus | |
KR20090131220A (en) | Imaging Device and Control Method | |
US11386548B2 (en) | Method, apparatus and computer program product for storing images of a scene | |
US20180210906A1 (en) | Method, apparatus and system for indexing content based on time information | |
US20090214179A1 (en) | Display processing apparatus, control method therefor, and display processing system | |
JP6168453B2 (en) | Signal recording apparatus, camera recorder, and signal processing apparatus | |
KR101716109B1 (en) | Method for time synchronization of a plurality of images and system displaying multi-images | |
JP2012221322A (en) | Authoring support device and authoring support method and program | |
WO2014103374A1 (en) | Information management device, server and control method | |
JP2009022018A (en) | Method and device for retrieving video | |
JP2012048324A (en) | Information processor, processing method of the same, and program | |
KR20090126525A (en) | Method and apparatus for managing digital contents using playback position, and method and apparatus for executing the same | |
TW201607592A (en) | Determination method and device | |
JP3931890B2 (en) | Video search method and apparatus | |
KR20130104027A (en) | Video playing method and video player | |
JP2005039354A (en) | Metadata input method and editing system | |
CN102457677A (en) | Image reproduction device, image reproduction method and program | |
JP2006101324A (en) | Recording and reproducing apparatus and method | |
JP2004297618A (en) | Image extraction method and image extraction device | |
EP3136394A1 (en) | A method for selecting a language for a playback of video, corresponding apparatus and non-transitory program storage device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20151125 |
|
PA0201 | Request for examination | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20161021 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20170215 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20170308 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20170309 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration | ||
PR1001 | Payment of annual fee |
Payment date: 20200506 Start annual number: 4 End annual number: 4 |
|
PR1001 | Payment of annual fee |
Payment date: 20210119 Start annual number: 5 End annual number: 5 |
|
PC1903 | Unpaid annual fee |
Termination category: Default of registration fee Termination date: 20241219 |