KR101681892B1 - Apparatus for image array using time stamp and method thereof - Google Patents

Apparatus for image array using time stamp and method thereof Download PDF

Info

Publication number
KR101681892B1
KR101681892B1 KR1020160135873A KR20160135873A KR101681892B1 KR 101681892 B1 KR101681892 B1 KR 101681892B1 KR 1020160135873 A KR1020160135873 A KR 1020160135873A KR 20160135873 A KR20160135873 A KR 20160135873A KR 101681892 B1 KR101681892 B1 KR 101681892B1
Authority
KR
South Korea
Prior art keywords
image
learning data
character
time stamp
user
Prior art date
Application number
KR1020160135873A
Other languages
Korean (ko)
Inventor
소병민
조철우
Original Assignee
대한민국
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 대한민국 filed Critical 대한민국
Priority to KR1020160135873A priority Critical patent/KR101681892B1/en
Application granted granted Critical
Publication of KR101681892B1 publication Critical patent/KR101681892B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
    • G06N99/005—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4344—Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Image Analysis (AREA)

Abstract

The present invention relates to an apparatus for aligning an image using a time stamp and a method thereof. According to the present invention, the apparatus for aligning the image using the time stamp includes: a learning data construction part for generating learning data by learning a digit or a character and a corresponding location coordinate value of the time stamp recorded on an image selected by a user, and receiving manufacturer and model name information of a device which has taken the image from the user to store the received manufacturer and model name information and the generated learning data in a database; a collection unit for collecting a plurality of images included in an unallocated area of a storage medium and a restored video; a user input unit for receiving a manufacturer and a model name of a device which has taken the restored video from the user; a letter extraction unit for extracting digits or characters of time stamps recorded on the collected images using a recorded location coordinate value included in learning data corresponding to the received manufacturer and model name information of the device among the learning data stored in the database; a recognition unit for recognizing the extracted digits or characters for each image using the learning data; and an image alignment unit for generating a file name for each image according to a set condition using the recognized digits or characters to respectively store the images, and sequentially aligning the images based on the file name. According to the present invention as described above, a recognition rate of the time stamp recorded on the restored image is improved by using the constructed database.

Description

타임스탬프를 이용한 이미지 정렬 장치 및 그 방법{APPARATUS FOR IMAGE ARRAY USING TIME STAMP AND METHOD THEREOF}[0001] APPARATUS FOR IMAGE ARRAY USING TIME STAMP AND METHOD THEREOF [0002]

본 발명은 타임스탬프를 이용한 이미지 정렬 장치 및 그 방법에 관한 것으로서, 더욱 상세하게는 복원된 이미지들을 단시간내에 정렬하기 위한 타임스탬프를 이용한 복원 이미지 정렬 장치 및 그 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an apparatus and method for sorting images using timestamps, and more particularly, to an apparatus and method for restoring images using time stamps for sorting restored images in a short time.

증거 은폐의 목적 또는 다양한 이유로 사건 관련 동영상 파일이 삭제되거나 사라진 경우 디지털 저장매체에서 동영상 복원 작업을 수행해야한다.If the incident-related video file has been deleted or disappeared for the purpose of evidence concealment or for various reasons, a video restore operation must be performed on the digital storage medium.

그러나 디지털 저장매체(하드디스크, USB메모리 등)에 저장된 동영상 파일이 삭제된 후 그 영역에 다른 데이터가 덮어 씌여진 상태라면 파일이 복원되더라도 파일의 일부 혹은 전체가 손상되어 정상적으로 재생이 되지 않을 수도 있다.However, if a video file stored in a digital storage medium (hard disk, USB memory, etc.) is erased and other data is overwritten in that area, even if the file is restored, some or all of the file may be damaged, .

이 때 손상된 파일에서 손상되지 않은 부분만 복원할 경우, 동영상은 여러 장의 프레임(이미지)을 순차적으로 재생하는 것이기 때문에 디지털 저장매체에 저장될 때, 이미지 단위로 저장되어 있어 디지털 저장매체의 비할당영역(현재 빈 공간으로 표시되어 있는 영역이지만 실제로는 이전에 삭제된 파일들이 기록되어 있는 영역)에서 프레임 단위로 동영상을 복원하게 된다.In this case, when restoring only the undamaged portion of a damaged file, the moving image is sequentially reproduced from a plurality of frames (images). Therefore, when stored in a digital storage medium, (A region currently displayed as an empty space, but actually, an area in which previously deleted files are recorded).

일반적으로 블랙박스나 캠코더 동영상은 연, 월, 일, 시, 분, 초 및 채널의 형태로 타임스탬프(날짜와 시간 포함)가 화면에 기록되어 있어서 해당 값을 근거로 하여 촬영된 날짜, 시간 등의 정보를 얻을 수 있다.In general, a black box or a camcorder video has a time stamp (including date and time) recorded on the screen in the form of year, month, day, hour, minute, second and channel so that the date, Can be obtained.

하지만 디지털 저장매체의 특성상 데이터가 순차적으로 저장되지 않는 경우가 많기 때문에 동영상의 프레임 복원 시 촬영된 날짜, 시간 순서가 섞여서 복원될 수도 있다.However, due to the characteristics of the digital storage medium, the data may not be sequentially stored.

이때, 복원되는 프레임의 양은 저장매체의 용량, 이미지의 해상도, 압축률 등에 따라 수만에서 수십만 장에 이르기 때문에 복원된 이미지들을 순서대로 정렬하여 원하는 동영상 파일로 복원하기 까지는 상당한 시간이 소요되는 문제점이 있다.In this case, since the amount of frames to be reconstructed ranges from tens of thousands to hundreds of thousands of frames depending on the capacity of the storage medium, the resolution of images, the compression rate, and the like, it takes a considerable time until the restored images are sorted in order and restored as desired video files.

따라서 이미지에 기록된 타임스탬프를 자동으로 인식하여 대량의 프레임을 정렬하는 작업이 필요하다.Therefore, it is necessary to automatically recognize the timestamp recorded in the image to arrange a large number of frames.

종래의 OCR(광학 문자 인식) 방법의 경우, 글자의 좁은 자간, 글자 배경과 글자 색의 유사함 등 다양한 이유로 오인식이 발생하는 문제점이 있다. OCR 방법의 정확도는 일반적으로 98~99%를 좋은 정확도, 90~98%를 평균적인 정확도, 90% 이하를 나쁜 정확도로 구분하고 있다.In the conventional OCR (Optical Character Recognition) method, there is a problem that misrecognition occurs due to various reasons such as narrow character spacing, similarity between character background and character color. The accuracy of the OCR method generally ranges from 98 to 99% for good accuracy, 90 to 98% for average accuracy, and 90% for poor accuracy.

하지만 대량의 프레임을 처리하는 경우에는, 1%의 오류에도 상당한 양의 프레임이 오인식되는 결과를 초래하는 문제점이 있어 이를 개선해야할 필요가 있다.However, when a large number of frames are processed, there is a problem that a significant amount of frames are misrecognized even with an error of 1%.

본 발명의 배경이 되는 기술은 대한민국 등록특허공보 제10-1058007호(2011. 08. 19. 공고)에 개시되어 있다.The technology of the background of the present invention is disclosed in Korean Patent Registration No. 10-1058007 (published on Aug. 19, 2011).

본 발명이 이루고자 하는 기술적 과제는 복원된 이미지들을 단시간내에 정렬하기 위한 타임스탬프를 이용한 복원 이미지 정렬 장치 및 그 방법을 제공하기 위한 것이다.SUMMARY OF THE INVENTION It is an object of the present invention to provide an apparatus and method for restoring an image using a time stamp for sorting restored images in a short time.

이러한 기술적 과제를 이루기 위한 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치는, 사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성하고, 상기 사용자로부터 상기 이미지를 촬영한 기기의 제조사 및 모델명 정보를 입력받아 상기 입력된 제조사 및 모델명 정보와 상기 생성된 학습데이터를 데이터베이스에 저장하는 학습데이터 구축부; 저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집하는 수집부; 상기 사용자로부터 상기 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는 사용자입력부; 상기 데이터베이스에 저장된 학습데이터 중 상기 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 상기 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출하는 문자 추출부; 상기 학습데이터를 이용하여 상기 추출된 숫자 또는 문자를 각 이미지 별로 인식하는 인식부; 및 상기 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고, 상기 파일명을 기반으로 상기 다수의 이미지를 순차 정렬하는 이미지 정렬부를 포함한다. According to an aspect of the present invention, there is provided an apparatus for sorting images using a time stamp, the apparatus comprising: a learning data generation unit for generating learning data by learning a number or character of a time stamp recorded in an image selected by a user, A learning data building unit for receiving manufacturer and model name information of a device that has taken the image from a user and storing the input maker and model name information and the generated learning data in a database; A collection unit for collecting a plurality of images included in the unassigned area of the storage medium and the restored moving image; A user input unit for receiving a maker and a model name of a device that has photographed the restored moving image from the user; Extracting a number or character of a time stamp recorded in the collected images using the recording position coordinate values included in the learning data corresponding to the manufacturer and model name information of the input device from among the learning data stored in the database An extraction unit; A recognizing unit for recognizing the extracted number or character for each image using the learning data; And an image arranging unit for generating and storing file names for the respective images according to the setting conditions using the recognized numbers or characters, and sequentially arranging the plurality of images based on the file names.

상기 학습데이터 구축부는, 상기 사용자로부터 상기 선택된 이미지에서 연, 월, 일, 시, 분, 초에 해당하는 숫자와, 기기의 채널에 해당하는 문자를 포함하는 타임스탬프가 기록된 기록 위치의 좌표값을 입력받아, 상기 입력된 좌표값을 이용하여 상기 숫자 또는 문자들을 각각 추출하고, 상기 사용자로부터 상기 추출된 숫자 또는 문자들이 나타내는 값을 각각 입력받아 상기 학습데이터를 생성하고, 생성된 학습데이터를 기기의 제조사 및 모델명 별로 상기 데이터베이스에 저장할 수 있다. Wherein the learning data construction unit is configured to construct the learning data based on a coordinate value of a recording position in which a time stamp including a number corresponding to year, month, day, hour, minute and second in the selected image, Extracts the numbers or characters using the input coordinate values, receives the values represented by the extracted numbers or characters from the user, generates the learning data, and transmits the generated learning data to the device May be stored in the database by manufacturer and model name of the manufacturer.

상기 학습데이터 구축부는, 설정된 임계값을 기반으로 상기 추출된 각 숫자 또는 문자로부터 숫자 또는 문자와 배경을 구분하여 배경에 해당하는 픽셀을 설정 RGB 값으로 변경하여 상기 설정 RGB 값은 인식하지 않도록 설정할 수 있다.The learning data construction unit may divide the background of the number or the character from the extracted number or letter based on the set threshold value and change the pixel corresponding to the background to the set RGB value so as not to recognize the set RGB value have.

상기 인식부는, 상기 복원된 이미지의 타임스탬프에서 추출된 숫자 또는 문자 각각에 대하여 상기 학습데이터에 포함된 숫자 또는 문자의 샘플과 비교하여 상기 추출된 숫자 또는 문자가 각각 나타내는 값을 인식할 수 있다.The recognition unit compares the number or character extracted from the time stamp of the restored image with a sample of the number or character included in the learning data and recognizes the value indicated by the extracted number or character, respectively.

상기 순차 정렬된 다수의 이미지들을 결합하여 하나의 동영상 파일을 생성하는 동영상 생성부를 더 포함할 수 있다.And a motion picture generation unit for generating a motion picture file by combining the plurality of sequentially arranged images.

또한, 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 방법은, 상기 이미지 정렬 장치는 사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성하는 단계; 상기 사용자로부터 상기 이미지를 촬영한 기기의 제조사 및 모델명 정보를 입력받아 상기 입력된 제조사 및 모델명 정보와 상기 생성된 학습데이터를 데이터베이스에 저장하는 단계; 저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집하는 단계; 상기 사용자로부터 상기 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는 단계; 상기 데이터베이스에 저장된 학습데이터 중 상기 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 상기 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출하는 단계; 상기 학습데이터를 이용하여 상기 추출된 숫자 또는 문자를 각 이미지 별로 인식하는 단계; 및 상기 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고, 상기 파일명을 기반으로 상기 다수의 이미지를 순차 정렬하는 단계를 포함한다.The method of aligning images using a time stamp according to an embodiment of the present invention may include generating the training data by learning the number or character of the time stamp recorded in the image selected by the user and the corresponding position coordinate value ; Storing the manufacturer and model name information and the generated learning data in a database, receiving manufacturer's and model name information of the device that has photographed the image from the user; Collecting a plurality of images included in the unassigned area of the storage medium and the restored moving image; Receiving a manufacturer and a model name of a device that has photographed the restored moving image from the user; Extracting a number or character of a time stamp recorded in the collected plurality of images using the recording position coordinate value included in the learning data corresponding to the manufacturer and model name information of the input device among the learning data stored in the database ; Recognizing the extracted number or character for each image using the learning data; And generating and storing file names for the respective images according to the setting conditions using the recognized numbers or characters, and sequentially arranging the plurality of images based on the file names.

이와 같이 본 발명에 따르면, 촬영 기기별 타임스탬프의 글자 폰트 및 위치에 대한 데이터베이스를 구축하고, 구축된 데이터베이스를 이용하여 복원된 이미지에 기록된 타임스탬프가 인식되도록 함으로써 인식률이 향상되는 효과가 있다.As described above, according to the present invention, there is an effect that the recognition rate is improved by building a database of the fonts and positions of the time stamps of the photographing devices and recognizing the time stamps recorded in the restored images using the built-in database.

또한, 본 발명에 따르면, 타임스탬프의 정확한 인식을 통해 다량의 이미지들을 단시간내에 자동 정렬할 수 있어 분석에 소요되는 인력과 시간이 저감되는 효과가 있다.In addition, according to the present invention, a large amount of images can be automatically aligned within a short time through accurate recognition of a time stamp, thereby reducing manpower and time required for analysis.

도 1은 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치를 나타낸 블록구성도이다.
도 2는 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 방법의 동작 흐름을 도시한 순서도이다.
도 3은 본 발명의 실시예에 따른 데이터베이스에 저장된 타임스탬프의 숫자 또는 문자의 예시도이다.
도 4 및 도 5는 본 발명의 실시예에 따른 복원된 블랙박스의 동영상 중 전방 및 후방의 이미지를 나타낸 예시이다.1 is a block diagram showing an image sorting apparatus using time stamps according to an embodiment of the present invention.
FIG. 2 is a flowchart illustrating an operation of an image sorting method using a time stamp according to an embodiment of the present invention.
3 is an illustration of a number or letter of a timestamp stored in a database in accordance with an embodiment of the present invention.
FIGS. 4 and 5 are illustrations showing front and rear images of a moving image of a restored black box according to an embodiment of the present invention.

이하 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다. 이 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In this process, the thicknesses of the lines and the sizes of the components shown in the drawings may be exaggerated for clarity and convenience of explanation.

또한 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서, 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.Further, the terms described below are defined in consideration of the functions of the present invention, which may vary depending on the intention or custom of the user, the operator. Therefore, definitions of these terms should be made based on the contents throughout this specification.

먼저, 도 1을 통해 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치에 대하여 설명한다.First, an image alignment apparatus using a time stamp according to an embodiment of the present invention will be described with reference to FIG.

도 1은 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치를 나타낸 블록구성도이다.1 is a block diagram showing an image sorting apparatus using time stamps according to an embodiment of the present invention.

도 1에서와 같이 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치(100)는, 학습데이터 구축부(110), 데이터베이스(120), 수집부(130), 사용자 입력부(140), 문자 추출부(150), 인식부(160), 이미지 정렬부(170) 및 동영상 생성부(180)를 포함한다.1, the image alignment apparatus 100 using a time stamp according to an embodiment of the present invention includes a learning data construction unit 110, a database 120, a collection unit 130, a user input unit 140, An extracting unit 150, a recognizing unit 160, an image arranging unit 170, and a moving image generating unit 180.

본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치(100)는 크게 데이터베이스를 구축하는 과정과, 이미지를 정렬하기 위한 과정으로 구분할 수 있는데 먼저 데이터베이스를 구축하는 과정은 다음과 같다.The image sorting apparatus 100 using the time stamp according to the embodiment of the present invention can roughly divided into a process of building a database and a process of sorting an image.

학습데이터 구축부(110)는 사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성한다.The learning data building unit 110 learns the number or character of the time stamp recorded in the image selected by the user and the corresponding position coordinate value to generate learning data.

자세히는 사용자로부터 선택된 이미지에서 연, 월, 일, 시, 분, 초에 해당하는 숫자와 기기(미도시)의 채널에 해당하는 문자를 포함하는 타임스탬프가 기록된 기록 위치의 좌표값을 입력받아, 입력된 좌표값을 이용하여 숫자 또는 문자들을 각각 추출하고, 사용자로부터 추출된 숫자 또는 문자들이 나타내는 값을 각각 입력받아 학습데이터를 생성한다.In detail, a coordinate value of a recording position in which a time stamp including a number corresponding to the year, month, day, hour, minute and second and a character corresponding to the channel of the device (not shown) Extracts numbers or characters using the input coordinate values, and generates learning data based on the values indicated by the numbers or characters extracted from the user.

또한, 입력된 위치에서 각 숫자 또는 문자들을 추출하여 사용자에게 보여주고 각 숫자 또는 문자들이 나타내는 값을 사용자로부터 입력 받는다.In addition, each number or character is extracted from the input position and displayed to the user, and a value indicated by each number or character is inputted from the user.

그리고, 학습데이터 구축부(110)는 설정된 임계값을 기반으로 추출된 각 숫자 또는 문자로부터 숫자 또는 문자와 배경을 구분하여 배경에 해당하는 픽셀을 설정 RGB 값으로 변경하여 설정 RGB 값은 인식하지 않도록 설정한다.Then, the learning data construction unit 110 divides the background or the number or the character and the background from each number or letter extracted based on the set threshold, changes the pixel corresponding to the background to the set RGB value, and does not recognize the set RGB value Setting.

즉, 추출된 각 숫자 또는 문자에서 사용자 또는 프로그램에서 세팅된 임계값을 기반으로 숫자 또는 문자와 배경을 구분하고 배경에 해당하는 모든 픽셀을 자연적으로 존재하기 힘든 RGB 값(예를 들면 [255, 0, 0])으로 일괄 설정하여 이후 해당 색상은 투명색으로 인식하도록 설정할 수도 있다.That is, based on the threshold value set by the user or the program in each extracted number or character, it is possible to distinguish the background of a number or character from the background, and to divide all pixels corresponding to the background into RGB values that are difficult to naturally exist (for example, , 0]), and the corresponding color may be set to be recognized as a transparent color.

또한, 학습데이터 구축부(110)는 이미지를 촬영한 기기의 제조사 및 모델명 정보를 사용자로부터 입력받아 입력된 제조사 및 모델명 정보와 생성된 학습데이터를 데이터베이스(120)에 저장한다.In addition, the learning data construction unit 110 stores the maker and model name information input from the user and the generated learning data into the database 120, from the manufacturer of the apparatus that captured the image and model name information from the user.

자세히는, 생성된 학습데이터를 기기의 제조사 및 모델명 별로 데이터베이스(120)에 저장한다.More specifically, the generated learning data is stored in the database 120 for each maker and model name of the device.

이와 같은 방법으로 촬영 동영상에 포함된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값의 학습데이터를 기기의 제조사 및 모델명 별로 저장하여 데이터베이스를 구축한다.In this way, learning data of the numbers or characters of the time stamps recorded in the images included in the photographed moving picture and the corresponding position coordinate values are stored for each maker and model name of the device to construct a database.

다음으로는 이미지를 정렬하기 위한 과정에 대해 설명하기로 한다.Next, a process for sorting images will be described.

먼저, 수집부(130)는 저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집한다. 즉, 동영상복원장치(미도시)에 의해 손상 또는 삭제된 동영상이 복원되면, 해당 동영상에 포함된 다수의 이미지를 수집하거나 저장매체의 비할당영역에 저장되어 있는 이미지를 수집한다.First, the collecting unit 130 collects a plurality of images included in the unassigned area of the storage medium and the restored moving image. That is, when a moving image that is damaged or deleted by a moving image restoration device (not shown) is restored, a plurality of images included in the moving image are collected or an image stored in a non-allocated area of the storage medium is collected.

본 발명의 따른 실시예는 복원된 이미지를 정렬하기 위한 장치이므로 동영상의 복원 과정에 대하여는 기재하지 않기로 한다.Since the embodiment of the present invention is an apparatus for sorting a restored image, the restoration process of the moving image will not be described.

그리고 사용자입력부(140)는 사용자로부터 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는다.The user input unit 140 receives the manufacturer and the model name of the device that captured the moving picture restored by the user.

이때 사용자입력부(140)는 마우스 및 키보드와 같은 입력수단이 될 수 있다.At this time, the user input unit 140 may be an input means such as a mouse and a keyboard.

그리고 문자 추출부(150)는 데이터베이스(120)에 저장된 학습데이터 중 사용자입력부(140)를 통해 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 수집부(130)를 통해 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출한다.The character extracting unit 150 extracts the learning data stored in the database 120 using the recording position coordinate values included in the learning data corresponding to the manufacturer and model name information of the device input through the user input unit 140, 130 extracts the number or character of the time stamp recorded in the plurality of images.

그리고 인식부(160)는 학습데이터를 이용하여 문자 추출부(150)에서 추출된 숫자 또는 문자를 각 이미지 별로 인식한다.The recognition unit 160 recognizes the numbers or characters extracted by the character extraction unit 150 for each image using the learning data.

자세히는, 복원된 이미지의 타임스탬프에서 추출된 숫자 또는 문자 각각에 대하여 학습데이터에 포함된 숫자 또는 문자의 샘플과 비교하여 추출된 숫자 또는 문자가 각각 나타내는 값을 인식한다.More specifically, each of the numbers or characters extracted from the time stamp of the restored image is compared with a number or character sample included in the learning data to recognize the value represented by the extracted number or character.

즉, 추출된 숫자 또는 문자 각각에 대하여 데이터베이스(120)에 저장된 학습데이터에 포함된 숫자 또는 문자의 샘플 중 투명색으로 설정된 배경을 제외한 나머지 숫자 또는 문자 부분과의 차이 값을 비교하여 추출된 숫자 또는 문자가 각각 나타내는 값을 인식한다. 이때 문자는 동영상 촬영 기기의 채널(예를 들어 블랙 박스의 전방 및 후방 구분을 위한 채널)을 확인하기 위한 문자일 수 있다.That is, for each extracted number or character, the difference value between the number or character portion included in the learning data stored in the database 120 and the remaining number or character portion excluding the background set in the transparent color is compared with each other, As shown in FIG. In this case, the character may be a character for confirming a channel of the moving picture photographing apparatus (for example, a channel for front and rear division of a black box).

그리고 이미지 정렬부(170)는 인식부(160)에서 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고, 저장된 파일명을 기반으로 다수의 이미지를 순차 정렬한다.The image sorting unit 170 generates a file name for each image according to the setting condition using the number or character recognized by the recognizing unit 160, stores the file name, and sequentially arranges the plurality of images based on the stored file name.

예를 들어 해당 이미지에서 추출된 숫자 또는 문자를 이용하여 <채널정보_연월일시분초_중복시간구분용일련번호.확장자>와 같은 파일명을 생성하고 생성된 파일명으로 해당 이미지를 저장할 수도 있다. 그리고 파일명을 오름차순으로 정리하여 촬영된 시간 순서대로 이미지를 정렬할 수 있다. For example, a file name such as <serial number, extension number> for the channel information _ year, month, day, hour, and minute for duplicate time can be generated by using a number or letter extracted from the image, and the corresponding image can be stored with the generated file name. You can arrange the file names in ascending order and then sort the images in order of time taken.

마지막으로 동영상 생성부(180)는 이미지 정렬부(170)에서 순차 정렬된 다수의 이미지들을 결합하여 하나의 동영상 파일을 생성할 수도 있다.Finally, the moving image generating unit 180 may combine a plurality of sequentially arranged images in the image aligning unit 170 to generate one moving image file.

이하에서는 도 2를 통해 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 방법에 대하여 설명한다.Hereinafter, an image sorting method using a time stamp according to an embodiment of the present invention will be described with reference to FIG.

도 2는 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 방법의 동작 흐름을 도시한 순서도로서, 이를 참조하여 본 발명의 구체적인 동작을 설명한다.FIG. 2 is a flowchart illustrating an operation of an image sorting method using a time stamp according to an embodiment of the present invention, and a specific operation of the present invention will be described with reference to FIG.

본 발명의 실시예에 따르면, 먼저 이미지 정렬 장치(100)의 학습데이터 구축부(110)는 사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성한다(S210).According to the embodiment of the present invention, the learning data construction unit 110 of the image alignment apparatus 100 first generates learning data by learning the number or character of the time stamp recorded in the image selected by the user and the corresponding position coordinate value (S210).

자세히는 사용자로부터 선택된 이미지에서 연, 월, 일, 시, 분, 초에 해당하는 숫자와 기기(미도시)의 채널에 해당하는 문자를 포함하는 타임스탬프가 기록된 기록 위치의 좌표값을 입력받아, 입력된 좌표값을 이용하여 숫자 또는 문자들을 각각 추출하고, 사용자로부터 추출된 숫자 또는 문자들이 나타내는 값을 각각 입력받아 학습데이터를 생성한다.In detail, a coordinate value of a recording position in which a time stamp including a number corresponding to the year, month, day, hour, minute and second and a character corresponding to the channel of the device (not shown) Extracts numbers or characters using the input coordinate values, and generates learning data based on the values indicated by the numbers or characters extracted from the user.

즉, 사용자에게 각 학습데이터를 이미지 뷰어로 보여주면서 연, 월, 일, 시, 분, 초에 해당하는 각 숫자(0 ~ 9) 그리고 기기(예를 들면 블랙박스)의 채널(전방, 후방)을 구분할 수 있는 인자(예를 들면 A, B, 1, 2 등)의 위치 좌표를 마우스 또는 키보드 등을 통해 입력 받을 수 있다.(0 to 9) corresponding to year, month, day, hour, minute and second and channel (front and rear) of the device (for example, black box) while displaying each learning data to the user in the image viewer. (For example, A, B, 1, 2, and so on) that can distinguish between the position coordinates

또한, 입력된 위치에서 각 숫자 또는 문자들을 추출하여 사용자에게 보여주고 각 숫자 또는 문자들이 나타내는 값을 사용자로부터 입력 받는다.In addition, each number or character is extracted from the input position and displayed to the user, and a value indicated by each number or character is inputted from the user.

그리고, 학습데이터 구축부(110)는 설정된 임계값을 기반으로 추출된 각 숫자 또는 문자로부터 숫자 또는 문자와 배경을 구분하여 배경에 해당하는 픽셀을 설정 RGB 값으로 변경하여 설정 RGB 값은 인식하지 않도록 설정한다.Then, the learning data construction unit 110 divides the background or the number or the character and the background from each number or letter extracted based on the set threshold, changes the pixel corresponding to the background to the set RGB value, and does not recognize the set RGB value Setting.

즉, 추출된 각 숫자 또는 문자에서 사용자 또는 프로그램에서 세팅된 임계값을 기반으로 숫자 또는 문자와 배경을 구분하고 배경에 해당하는 모든 픽셀을 자연적으로 존재하기 힘든 RGB 값(예를 들면 [255, 0, 0])으로 일괄 설정하여 이후 해당 색상은 투명색으로 인식하도록 설정할 수도 있다.That is, based on the threshold value set by the user or the program in each extracted number or character, it is possible to distinguish the background of a number or character from the background, and to divide all pixels corresponding to the background into RGB values that are difficult to naturally exist (for example, , 0]), and the corresponding color may be set to be recognized as a transparent color.

도 3은 본 발명의 실시예에 따른 데이터베이스에 저장된 타임스탬프의 숫자 또는 문자의 예시도이다.3 is an illustration of a number or letter of a timestamp stored in a database in accordance with an embodiment of the present invention.

도 3에서와 같이 배경에 해당하는 모든 픽셀을 자연적으로 존재하기 힘든 RGB 값(예를 들면 도 3에서와 같이 적색으로 설정함)으로 설정하여 타임스탬프의 숫자 또는 문자의 샘플을 생성할 수도 있다.As shown in FIG. 3, all the pixels corresponding to the background can be set to RGB values (for example, set to red as shown in FIG. 3), which are hard to naturally exist, so that a number or character sample of the time stamp can be generated.

그리고 학습데이터 구축부(110)는 학습데이터 구축부(110)는 이미지를 촬영한 기기의 제조사 및 모델명 정보를 사용자로부터 입력받아 입력된 제조사 및 모델명 정보와 생성된 학습데이터를 데이터베이스(120)에 저장한다(S220).The learning data constructing unit 110 stores the maker and model name information input from the user and the generated learning data into the database 120, (S220).

자세히는, 생성된 학습데이터를 기기의 제조사 및 모델명 별로 데이터베이스(120)에 저장한다.More specifically, the generated learning data is stored in the database 120 for each maker and model name of the device.

이와 같은 방법으로 촬영 동영상에 포함된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값의 학습데이터를 기기의 제조사 및 모델명 별로 저장하여 데이터베이스를 구축한다.In this way, learning data of the numbers or characters of the time stamps recorded in the images included in the photographed moving picture and the corresponding position coordinate values are stored for each maker and model name of the device to construct a database.

그리고 수집부(130)는 저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집한다(S230).The collection unit 130 collects a plurality of images included in the unallocated area of the storage medium and the restored moving image (S230).

즉, 동영상복원장치(미도시)에 의해 손상 또는 삭제된 동영상이 복원되면, 해당 동영상에 포함된 다수의 이미지를 수집하거나 저장매체의 비할당영역에 저장되어 있는 이미지를 수집한다.That is, when a moving image that is damaged or deleted by a moving image restoration device (not shown) is restored, a plurality of images included in the moving image are collected or an image stored in a non-allocated area of the storage medium is collected.

그리고 사용자입력부(140)는 사용자로부터 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는다(S240).The user input unit 140 receives the manufacturer and model name of the device that captured the moving picture restored by the user (S240).

이때 사용자입력부(140)는 마우스 및 키보드와 같은 입력수단에 의해 입력될 수 있다.At this time, the user input unit 140 may be input by input means such as a mouse and a keyboard.

그리고 문자 추출부(150)는 데이터베이스(120)에 저장된 학습데이터 중 사용자입력부(140)를 통해 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 수집부(130)를 통해 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출한다(S250).The character extracting unit 150 extracts the learning data stored in the database 120 using the recording position coordinate values included in the learning data corresponding to the manufacturer and model name information of the device input through the user input unit 140, 130), the number or character of the time stamp recorded in the plurality of images is extracted (S250).

그리고 인식부(160)는 학습데이터를 이용하여 문자 추출부(150)에서 추출된 숫자 또는 문자를 각 이미지 별로 인식한다(S260).Then, the recognition unit 160 recognizes the numbers or characters extracted by the character extraction unit 150 for each image using the learning data (S260).

자세히는, 복원된 이미지의 타임스탬프에서 추출된 숫자 또는 문자 각각에 대하여 도 3에서와 같이 학습데이터에 포함된 숫자 또는 문자의 샘플과 비교하여 추출된 숫자 또는 문자가 각각 나타내는 값을 인식한다.More specifically, as shown in FIG. 3, each of the numbers or characters extracted from the time stamp of the restored image is compared with a number or character sample included in the learning data to recognize a value represented by the extracted number or character.

즉, 추출된 숫자 또는 문자 각각에 대하여 데이터베이스(120)에 저장된 학습데이터에 포함된 숫자 또는 문자의 샘플 중 투명색으로 설정된 배경을 제외한 나머지 숫자 또는 문자 부분과의 차이 값을 비교하여 추출된 숫자 또는 문자가 각각 나타내는 값을 인식한다. 이때 문자는 동영상 촬영 기기의 채널(예를 들어 블랙 박스의 전방 및 후방 구분을 위한 채널)을 확인하기 위한 문자일 수 있다.That is, for each extracted number or character, the difference value between the number or character portion included in the learning data stored in the database 120 and the remaining number or character portion excluding the background set in the transparent color is compared with each other, As shown in FIG. In this case, the character may be a character for confirming a channel of the moving picture photographing apparatus (for example, a channel for front and rear division of a black box).

도 4 및 도 5는 본 발명의 실시예에 따른 복원된 블랙박스의 동영상 중 전방 및 후방의 이미지를 나타낸 예시이다.FIGS. 4 and 5 are illustrations showing front and rear images of a moving image of a restored black box according to an embodiment of the present invention.

동영상의 프레임 이미지는 기기의 제조사 및 모델명에 따라 타임스탬프의 기록 위치가 상이할 수 있는데, 도 4 및 도 5에서와 같은 위치에 타임스탬프가 기록된 경우, 좌측 상단의 채널(CH) 정보를 인식하여 해당 이미지가 전방을 촬영한 이미지인지 후방을 촬영한 이미지인지 판단할 수 있고, 좌측 하단의 년(y), 월(m), 일(d), 시(H), 분(M), 초(S) 정보를 인식하여 해당 이미지가 촬영된 시간을 판단할 수 있다.The time stamp may be recorded in the frame image of the moving picture according to the maker and the model name of the apparatus. When the time stamp is recorded at the position as shown in FIG. 4 and FIG. 5, (Y), month (m), day (d), hour (H), minute (M), and seconds in the lower left corner of the image (S) information and determine the time at which the corresponding image was photographed.

그리고 이미지 정렬부(170)는 인식부(160)에서 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고(S270), 저장된 파일명을 기반으로 다수의 이미지를 순차 정렬한다(S280).The image sorting unit 170 generates a file name for each image according to the setting condition using the number or character recognized by the recognizing unit 160 and stores the file name (S270). The image sorting unit 170 sequentially arranges the plurality of images based on the stored file name (S280).

예를 들어 해당 이미지에서 추출된 숫자 또는 문자를 이용하여 <채널정보_연월일시분초_중복시간구분용일련번호.확장자>와 같은 파일명을 생성하고 생성된 파일명으로 해당 이미지를 저장할 수도 있다. 그리고 파일명을 오름차순으로 정리하여 촬영된 시간 순서대로 이미지를 정렬할 수 있다. For example, a file name such as <serial number, extension number> for the channel information _ year, month, day, hour, and minute for duplicate time can be generated by using a number or letter extracted from the image, and the corresponding image can be stored with the generated file name. You can arrange the file names in ascending order and then sort the images in order of time taken.

마지막으로 동영상 생성부(180)는 이미지 정렬부(170)에서 순차 정렬된 다수의 이미지들을 결합하여 하나의 동영상 파일을 생성할 수도 있다(S290).Finally, the moving image generating unit 180 may combine a plurality of sequentially arranged images in the image aligning unit 170 to generate one moving image file (S290).

이러한 과정을 통해 복원된 동영상 파일이 정상적으로 재생되도록 할 수 있다.Through this process, the restored video file can be reproduced normally.

상술한 바와 같이, 본 발명의 실시예에 따른 타임스탬프를 이용한 이미지 정렬 장치 및 그 방법은 촬영 기기별 타임스탬프의 글자 폰트 및 위치에 대한 데이터베이스를 구축하고, 구축된 데이터베이스를 이용하여 복원된 이미지에 기록된 타임스탬프가 인식되도록 함으로써 인식률이 향상되는 효과가 있다.As described above, according to the embodiment of the present invention, the image sorting apparatus and the method using the time stamp construct a database of character fonts and positions of time stamps per photographing apparatus, There is an effect that the recognition rate is improved by allowing the recorded time stamp to be recognized.

또한 본 발명의 실시예에 따르면, 타임스탬프의 정확한 인식을 통해 다량의 이미지들을 단시간내에 자동 정렬할 수 있어 분석에 소요되는 인력과 시간이 저감되는 효과가 있다.Also, according to the embodiment of the present invention, a large amount of images can be automatically aligned within a short time through accurate recognition of the time stamp, thereby reducing manpower and time required for analysis.

본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호범위는 아래의 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made without departing from the scope of the invention as defined by the appended claims. will be. Therefore, the true scope of the present invention should be determined by the technical idea of the following claims.

100 : 이미지 정렬 장치 110 : 학습데이터 구축부
120 : 데이터베이스 130 : 수집부
140 : 사용자입력부 150 : 문자 추출부
160 : 인식부 170 : 이미지 정렬부
180 : 동영상 생성부100: image alignment device 110: learning data construction unit
120: Database 130: Collection section
140: user input unit 150: character extraction unit
160: recognizing unit 170: image arranging unit
180:

Claims (10)

사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성하고, 상기 사용자로부터 상기 이미지를 촬영한 기기의 제조사 및 모델명 정보를 입력받아 상기 입력된 제조사 및 모델명 정보와 상기 생성된 학습데이터를 데이터베이스에 저장하는 학습데이터 구축부;
저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집하는 수집부;
상기 사용자로부터 상기 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는 사용자입력부;
상기 데이터베이스에 저장된 학습데이터 중 상기 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 상기 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출하는 문자 추출부;
상기 학습데이터를 이용하여 상기 추출된 숫자 또는 문자를 각 이미지 별로 인식하는 인식부; 및
상기 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고, 상기 파일명을 기반으로 상기 다수의 이미지를 순차 정렬하는 이미지 정렬부를 포함하는 타임스탬프를 이용한 이미지 정렬 장치.Learning data is generated by learning the number or character of the time stamp recorded in the image selected from the user and the corresponding position coordinate value, and the manufacturer and model name information of the device that has taken the image from the user are received, A learning data building unit for storing information and the generated learning data in a database;
A collection unit for collecting a plurality of images included in the unassigned area of the storage medium and the restored moving image;
A user input unit for receiving a maker and a model name of a device that has photographed the restored moving image from the user;
Extracting a number or character of a time stamp recorded in the collected images using the recording position coordinate values included in the learning data corresponding to the manufacturer and model name information of the input device from among the learning data stored in the database An extraction unit;
A recognizing unit for recognizing the extracted number or character for each image using the learning data; And
And an image arrangement unit for generating and storing a file name for each image according to a setting condition using the recognized number or letter, and sequentially arranging the plurality of images based on the file name. 제1항에 있어서,
상기 학습데이터 구축부는,
상기 사용자로부터 상기 선택된 이미지에서 연, 월, 일, 시, 분, 초에 해당하는 숫자와, 기기의 채널에 해당하는 문자를 포함하는 타임스탬프가 기록된 기록 위치의 좌표값을 입력받아, 상기 입력된 좌표값을 이용하여 상기 숫자 또는 문자들을 각각 추출하고, 상기 사용자로부터 상기 추출된 숫자 또는 문자들이 나타내는 값을 각각 입력받아 상기 학습데이터를 생성하고, 생성된 학습데이터를 기기의 제조사 및 모델명 별로 상기 데이터베이스에 저장하는 타임스탬프를 이용한 이미지 정렬 장치.The method according to claim 1,
Wherein the learning data construction unit comprises:
A coordinate value of a recording position at which a time stamp including a number corresponding to year, month, day, hour, minute, and second in the selected image and a character corresponding to a channel of the apparatus is recorded, Extracts the numbers or characters by using the coordinate values obtained from the user, receives the values indicated by the extracted numbers or characters from the user, generates the learning data, and outputs the generated learning data to the device An image sorting device using timestamps stored in a database. 제2항에 있어서,
상기 학습데이터 구축부는,
설정된 임계값을 기반으로 상기 추출된 각 숫자 또는 문자로부터 숫자 또는 문자와 배경을 구분하여 배경에 해당하는 픽셀을 설정 RGB 값으로 변경하여 상기 설정 RGB 값은 인식하지 않도록 설정하는 타임스탬프를 이용한 이미지 정렬 장치. 3. The method of claim 2,
Wherein the learning data construction unit comprises:
An image alignment using a time stamp for changing a pixel corresponding to a background into a set RGB value by separating a number or a character and a background from each extracted number or character based on the set threshold value and setting the set RGB value not to be recognized Device. 제3항에 있어서,
상기 인식부는,
상기 복원된 이미지의 타임스탬프에서 추출된 숫자 또는 문자 각각에 대하여 상기 학습데이터에 포함된 숫자 또는 문자의 샘플과 비교하여 상기 추출된 숫자 또는 문자가 각각 나타내는 값을 인식하는 타임스탬프를 이용한 이미지 정렬 장치.The method of claim 3,
Wherein,
An image sorting apparatus using a time stamp for comparing a number or character extracted from a time stamp of the restored image with a sample of a number or character included in the learning data, . 제1항에 있어서,
상기 순차 정렬된 다수의 이미지들을 결합하여 하나의 동영상 파일을 생성하는 동영상 생성부를 더 포함하는 타임스탬프를 이용한 이미지 정렬 장치.The method according to claim 1,
And a motion picture generation unit for generating a motion picture file by combining the plurality of sequentially arranged images. 타임스탬프를 이용한 이미지 정렬 장치에 의해 수행되는 이미지 정렬 방법에 있어서,
상기 이미지 정렬 장치는 사용자로부터 선택된 이미지에 기록된 타임스탬프의 숫자 또는 문자와 해당 위치 좌표값을 학습하여 학습데이터를 생성하는 단계;
상기 사용자로부터 상기 이미지를 촬영한 기기의 제조사 및 모델명 정보를 입력받아 상기 입력된 제조사 및 모델명 정보와 상기 생성된 학습데이터를 데이터베이스에 저장하는 단계;
저장매체의 비할당영역 및 복원된 동영상에 포함된 다수의 이미지를 수집하는 단계;
상기 사용자로부터 상기 복원된 동영상을 촬영한 기기의 제조사 및 모델명을 입력받는 단계;
상기 데이터베이스에 저장된 학습데이터 중 상기 입력받은 기기의 제조사 및 모델명 정보에 대응하는 학습데이터에 포함된 기록 위치 좌표값을 이용하여 상기 수집된 다수의 이미지에 기록된 타임스탬프의 숫자 또는 문자를 추출하는 단계;
상기 학습데이터를 이용하여 상기 추출된 숫자 또는 문자를 각 이미지 별로 인식하는 단계; 및
상기 인식된 숫자 또는 문자를 이용하여 설정 조건에 따라 각 이미지 별로 파일명을 생성하여 각각 저장하고, 상기 파일명을 기반으로 상기 다수의 이미지를 순차 정렬하는 단계를 포함하는 타임스탬프를 이용한 이미지 정렬 방법.1. An image alignment method performed by an image alignment apparatus using a time stamp,
Wherein the image alignment device generates learning data by learning a number or character of a time stamp recorded in an image selected by the user and a corresponding position coordinate value;
Storing the manufacturer and model name information and the generated learning data in a database, receiving manufacturer's and model name information of the device that has photographed the image from the user;
Collecting a plurality of images included in the unassigned area of the storage medium and the restored moving image;
Receiving a manufacturer and a model name of a device that has photographed the restored moving image from the user;
Extracting a number or character of a time stamp recorded in the collected plurality of images using the recording position coordinate value included in the learning data corresponding to the manufacturer and model name information of the input device among the learning data stored in the database ;
Recognizing the extracted number or character for each image using the learning data; And
And generating and storing a file name for each image according to a setting condition using the recognized number or character, and sequentially arranging the plurality of images based on the file name. 제6항에 있어서,
상기 학습데이터를 생성하는 단계는,
상기 사용자로부터 상기 선택된 이미지에서 연, 월, 일, 시, 분, 초에 해당하는 숫자와, 기기의 채널에 해당하는 문자를 포함하는 타임스탬프가 기록된 기록 위치의 좌표값을 입력받아, 상기 입력된 좌표값을 이용하여 상기 숫자 또는 문자들을 각각 추출하고, 상기 사용자로부터 상기 추출된 숫자 또는 문자들이 나타내는 값을 각각 입력받아 상기 학습데이터를 생성하는 타임스탬프를 이용한 이미지 정렬 방법.The method according to claim 6,
Wherein the step of generating the learning data comprises:
A coordinate value of a recording position at which a time stamp including a number corresponding to year, month, day, hour, minute, and second in the selected image and a character corresponding to a channel of the apparatus is recorded, Extracting the numbers or characters by using the coordinate values and generating the learning data by receiving the values indicated by the extracted numbers or characters from the user. 제7항에 있어서,
상기 학습데이터를 생성하는 단계는,
설정된 임계값을 기반으로 상기 추출된 각 숫자 또는 문자로부터 숫자 또는 문자와 배경을 구분하여 배경에 해당하는 픽셀을 설정 RGB 값으로 변경하여 상기 설정 RGB 값은 인식하지 않도록 설정하는 타임스탬프를 이용한 이미지 정렬 방법.8. The method of claim 7,
Wherein the step of generating the learning data comprises:
An image alignment using a time stamp for changing a pixel corresponding to a background into a set RGB value by separating a number or a character and a background from each extracted number or character based on the set threshold value and setting the set RGB value not to be recognized Way. 제8항에 있어서,
상기 각 이미지 별로 인식하는 단계는,
상기 복원된 이미지의 타임스탬프에서 추출된 숫자 또는 문자 각각에 대하여 상기 학습데이터에 포함된 숫자 또는 문자의 샘플과 비교하여 상기 추출된 숫자 또는 문자가 각각 나타내는 값을 인식하는 타임스탬프를 이용한 이미지 정렬 방법.9. The method of claim 8,
Wherein the step of recognizing each image comprises:
An image sorting method using a time stamp for recognizing a value represented by the extracted number or character by comparing the number or character extracted from the time stamp of the restored image with a number or character sample included in the learning data . 제6항에 있어서,
상기 순차 정렬된 다수의 이미지들을 결합하여 하나의 동영상 파일을 생성하는 단계를 더 포함하는 타임스탬프를 이용한 이미지 정렬 방법.The method according to claim 6,
And combining the plurality of sequentially arranged images to generate a single moving image file.
KR1020160135873A 2016-10-19 2016-10-19 Apparatus for image array using time stamp and method thereof KR101681892B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160135873A KR101681892B1 (en) 2016-10-19 2016-10-19 Apparatus for image array using time stamp and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160135873A KR101681892B1 (en) 2016-10-19 2016-10-19 Apparatus for image array using time stamp and method thereof

Publications (1)

Publication Number Publication Date
KR101681892B1 true KR101681892B1 (en) 2016-12-02

Family

ID=57571746

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160135873A KR101681892B1 (en) 2016-10-19 2016-10-19 Apparatus for image array using time stamp and method thereof

Country Status (1)

Country Link
KR (1) KR101681892B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030003406A (en) * 2001-06-30 2003-01-10 주식회사 케이티 Method for realtime sorting of streaming data in Multimedia Messaging Server system
KR20050055509A (en) * 2003-12-08 2005-06-13 한국전자통신연구원 Apparatus for recovering original image of moving picture character region using mosaic method and method therefor
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
KR20160045613A (en) * 2014-10-17 2016-04-27 삼성전자주식회사 Method and apparatus for storing, processing and reconstructing full resolution image out of sub band encoded images

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030003406A (en) * 2001-06-30 2003-01-10 주식회사 케이티 Method for realtime sorting of streaming data in Multimedia Messaging Server system
KR20050055509A (en) * 2003-12-08 2005-06-13 한국전자통신연구원 Apparatus for recovering original image of moving picture character region using mosaic method and method therefor
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
KR20160045613A (en) * 2014-10-17 2016-04-27 삼성전자주식회사 Method and apparatus for storing, processing and reconstructing full resolution image out of sub band encoded images

Similar Documents

Publication Publication Date Title
CN104063883B (en) A kind of monitor video abstraction generating method being combined based on object and key frame
US8184209B2 (en) Smart slate
CN110267061B (en) News splitting method and system
Davila et al. Whiteboard video summarization via spatio-temporal conflict minimization
CN112287914B (en) PPT video segment extraction method, device, equipment and medium
CN104778238B (en) The analysis method and device of a kind of saliency
CN109886978B (en) End-to-end alarm information identification method based on deep learning
CN107330040B (en) Learning question searching method and system
CN111625687B (en) Method and system for quickly searching people in media asset video library through human faces
CN105678301B (en) method, system and device for automatically identifying and segmenting text image
Yang et al. MIDI passage retrieval using cell phone pictures of sheet music
EP3573327B1 (en) Method and device for displaying target object
US8355583B2 (en) Image processing apparatus and apparatus for searching operator
CN111881904A (en) Blackboard writing recording method and system
CN111814576A (en) Shopping receipt picture identification method based on deep learning
CN100357957C (en) Character recognition apparatus and method for recognizing characters in image
KR101681892B1 (en) Apparatus for image array using time stamp and method thereof
CN112508000B (en) Method and equipment for generating OCR image recognition model training data
CN114519689A (en) Image tampering detection method, device, equipment and computer readable storage medium
CN110458141A (en) A kind of extracting method of key frame of video, apparatus and system
CN112580644A (en) Testing method and device based on video stream cutout time and readable storage medium
KR102460733B1 (en) Method for machine learning for vehicle license plate image and apparatus for performing the method
CN113572998B (en) Data collection method and system based on event camera
CN112015925B (en) Method and system for generating teaching material package by combining multimedia files
CN110958423B (en) Vehicle detection rate determining method and device

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant