KR20100079877A - Method and system for creating captioning based on network - Google Patents

Method and system for creating captioning based on network Download PDF

Info

Publication number
KR20100079877A
KR20100079877A KR1020080138466A KR20080138466A KR20100079877A KR 20100079877 A KR20100079877 A KR 20100079877A KR 1020080138466 A KR1020080138466 A KR 1020080138466A KR 20080138466 A KR20080138466 A KR 20080138466A KR 20100079877 A KR20100079877 A KR 20100079877A
Authority
KR
South Korea
Prior art keywords
caption
video
information
subtitle
resolution
Prior art date
Application number
KR1020080138466A
Other languages
Korean (ko)
Other versions
KR101032471B1 (en
Inventor
장재경
하종진
Original Assignee
한국방송공사
주식회사컴픽스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국방송공사, 주식회사컴픽스 filed Critical 한국방송공사
Priority to KR1020080138466A priority Critical patent/KR101032471B1/en
Publication of KR20100079877A publication Critical patent/KR20100079877A/en
Application granted granted Critical
Publication of KR101032471B1 publication Critical patent/KR101032471B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/186Templates
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/70Type of the data to be coded, other than image and sound
    • H03M7/707Structured documents, e.g. XML
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278Subtitling

Abstract

PURPOSE: A method and a system for creating captioning based on a network are provided to reproduce a video which the caption is overlapped after overlapping a caption with original video, thereby easily determining the insert location of caption. CONSTITUTION: A communication unit(620) receives caption request information from a caption client terminal. A controller(660) extracts caption information and video information corresponding to the caption request information. The controller outputs a driving start control command. A caption generator(640) reproduces the video according to the driving start control command. The caption generator synchronizes caption information with timeline of the video. If the caption generation command is inputted, the caption generator generates caption file corresponding to resolution of the video.

Description

네트워크 기반 자막 생성 방법 및 시스템{Method and system for creating captioning based on network}Method and system for creating captioning based on network

본 발명은 자막 생성에 관한 것으로, 보다 상세하게 네트워크에 기반하여 자막을 원본 동영상의 해상도에 상응하여 생성할 수 있는 방법 및 시스템에 관한 것이다.The present invention relates to subtitle generation, and more particularly, to a method and system for generating subtitles corresponding to a resolution of an original video based on a network.

종래에는 아날로그 캠코더를 촬영하여 기록한 동영상을 편집하기 위해서는 선형 편집 방식으로 편집을 했다. 이와 같은 선형방식의 편집은 비선형 방식의 편집보다 많은 기술과 장비를 필요로 하고 편집에 그만큼 시간이 많이 소요되는 단점이 있다.Conventionally, in order to edit a moving picture recorded by shooting an analog camcorder, the editing was performed by linear editing. Such a linear editing requires more skills and equipment than the nonlinear editing and it takes a long time to edit.

그러나, 최근에는 아날로그 캠코더보다 촬영된 동영상을 편집하기 용이한 디지털 캠코더와 고사양의 PC가 급속히 보급됨에 따라 촬영한 영상을 저장매체에 저장한 후 동영상 편집기를 이용하여 비선형 방식으로 보다 간편하게 편집할 수 있게 되었다.However, as digital camcorders and high-end PCs, which are easier to edit video clips than analog camcorders, are rapidly spreading in recent years, they can be easily edited in a nonlinear fashion using a video editor. It became.

그러나, 현재까지의 자막 파일은 모두 텍스트에 기반하여 생성되어 방송 송출을 위해 자막을 수정하고 동영상에 합성하는데 많은 문제점이 있다.However, all subtitle files to date are generated based on text, and there are many problems in modifying the subtitles for broadcasting and synthesizing them into a video.

본 발명은 네트워크를 기반으로 자막을 생성할 수 있는 방법 및 장치를 제공하기 위한 것이다.The present invention is to provide a method and apparatus capable of generating a subtitle based on a network.

또한, 본 발명은 원본 동영상의 해상도에 상응하여 이미지 포맷으로 자막 파일을 생성할 수 있는 방법 및 장치를 제공하기 위한 것이다.In addition, the present invention is to provide a method and apparatus for generating a subtitle file in an image format corresponding to the resolution of the original video.

또한, 본 발명은 원본 동영상에 자막을 중첩하여 삽입할 수 있는 방법 및 장치를 제공하기 위한 것이다.In addition, the present invention is to provide a method and apparatus that can insert the subtitles superimposed on the original video.

또한, 본 발명은 사용자로부터 동영상의 각 프레임별(또는 타임 라인별) 자막으로 삽입할 텍스트 및 이미지를 입력받고, 이를 네트워크를 통해 자막 제작을 의뢰하여 자막을 생성할 수 있는 방법 및 장치를 제공하기 위한 것이다.The present invention also provides a method and apparatus for receiving a text and an image to be inserted into a subtitle of each frame (or a timeline) of a video from a user, and requesting the subtitle production through a network to generate a subtitle. It is for.

또한, 본 발명은 자막 의뢰를 단문 메시지의 형태로 통보할 수 있는 방법 및 장치를 제공하기 위한 것이다.It is also an object of the present invention to provide a method and apparatus for notifying a caption request in the form of a short message.

본 발명의 일 측면에 따르면, 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결된 자막 생성 장치가 자막을 제작하는 방법 및 이를 수행하기 위한 프로 그램을 기록한 기록 매체에 제공된다.According to an aspect of the present invention, a caption generating device connected through a communication network with a caption requesting terminal and public storage is provided in a recording medium recording a method for producing captions and a program for performing the same.

본 발명의 일 실시예에 따르면, 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결된 자막 생성 장치가 자막을 제작하는 방법에 있어서, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 단계; 상기 공용 스토리지로부터 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상을 추출하는 단계; 상기 동영상을 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계; 자막 수정 정보를 입력받아 상기 자막 정보를 수정하는 단계; 및 자막 생성 명령이 입력되면, 상기 동영상의 해상도를 분석하여 상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계를 포함하는 자막 제작 방법이 제공될 수 있다.According to an embodiment of the present invention, a method for producing a caption by a caption generating device connected through a communication network with a caption requesting terminal and public storage, the method comprising: receiving caption request information from the caption requesting terminal; Extracting caption information and a video corresponding to the caption request information from the public storage; Playing the video, synchronizing the caption information with a timeline of the video, and overlaying the video and the caption information to output the video; Receiving subtitle correction information and correcting the subtitle information; And generating a caption file at a resolution corresponding to the resolution of the video by analyzing the resolution of the video when a caption generation command is input.

상기 자막 파일을 생성하는 단계 이후에, 자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계를 더 포함할 수 있다.After generating the subtitle file, if a subtitle insertion command is input, the method may further include synthesizing the video and the subtitle file to generate a subtitle inserted video.

상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계는, 상기 자막 파일을 상기 동영상의 시퀀스(sequence)로 추가하는 과정이다.The synthesizing the video and the caption file to generate a caption-inserted video is a process of adding the caption file as a sequence of the video.

상기 자막 정보는 타임 코드별 자막으로 삽입될 텍스트 및 이미지 중 하나 이상과 템플릿 정보를 포함할 수 있다.The caption information may include one or more of text and images to be inserted as captions for each time code and template information.

상기 동영상의 타임 라인에 상기 자막 정보를 동기화하는 단계는, 상기 동영상의 플레이헤드(play head)에 맞춰 상기 자막 정보의 타임 코드의 시작점을 일치시키는 과정이다.Synchronizing the subtitle information with the timeline of the video is a process of matching a start point of a time code of the subtitle information in accordance with a playhead of the video.

상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계는, 상기 동영상의 해상도를 분석하는 단계; 분석 결과 상기 동영상의 해상도가 고화질(HD)이면, 설정된 고해상도로 상기 자막 파일을 생성하는 단계; 및 상기 동영상의 해상도가 표준화질(SD)이면, 설정된 표준해상도로 상기 자막 파일을 생성하는 단계를 포함할 수 있다.Generating a subtitle file at a resolution corresponding to the resolution of the video may include analyzing the resolution of the video; If the resolution of the video is high definition (HD), generating the subtitle file at a set high resolution; And generating the subtitle file at the set standard resolution if the resolution of the video is standard definition (SD).

상기 자막 정보는 XML 기반 랭귀지로 생성된다.The caption information is generated in an XML based language.

상기 자막 의뢰 단말은, 상기 동영상의 각 프레임별 또는 타임 라인에 상응하도록 삽입할 자막에 대한 텍스트 및 이미지 중 하나 이상을 입력받고, 출력될 자막의 형태에 대한 템플릿 정보를 선택받으며, 타임 코드별로 상기 입력된 텍스트 및 이미지 중 하나 이상과 상기 템플릿 정보를 포함하는 자막 정보를 생성할 수 있다.The caption requesting terminal receives at least one of text and an image of a caption to be inserted to correspond to each frame or timeline of the video, and receives template information about a type of a caption to be output, Subtitle information including at least one of the input text and the image and the template information may be generated.

상기 의뢰 단말은 상기 자막 정보 및 상기 동영상을 상기 공용 스토리지에 저장하고, 저장된 위치에 대한 정보를 포함하는 자막 의뢰 정보를 생성하여 상기 자막 생성 장치로 전송할 수 있다.The requesting terminal may store the caption information and the video in the public storage, generate caption request information including information on the stored location, and transmit the caption request information to the caption generating device.

상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계는, 제1 영역에 상기 자막 정보를 출력하는 단계; 제2 영역에 상기 동영상을 출력하는 단계; 및 제3 영역에 상기 동영상의 타임 라인 및 상기 자막 정보의 타임 코드를 각각 출력하는 단계를 포함하되, 상기 제1 영역에 출력된 자막 정보 중 어느 하나가 선택되면, 선택된 자막 정보는 상기 제2 영역에 상기 동영상과 중첩되어 출력될 수 있다.Synchronizing the caption information on the timeline of the video and outputting the caption information by overlaying the video and the caption information include: outputting the caption information in a first area; Outputting the video to a second area; And outputting a timeline of the video and a time code of the caption information to a third area, respectively, when any one of caption information output to the first area is selected, the selected caption information is the second area. The video may overlap with the video.

상기 자막 파일은 이미지 형식으로 생성될 수 있다.The caption file may be generated in an image format.

본 발명의 다른 실시예에 따르면, 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결되어 자막을 제작하는 방법을 수행하기 위해 디지털 처리 장치에 의해 수행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며, 상기 디지털 처리 장치에 의해 판독될 수 있는 프로그램을 기록한 기록매체에 있어서, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 단계; 상기 공용 스토리지로부터 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상을 추출하는 단계; 상기 동영상을 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계; 자막 수정 정보를 입력받아 상기 자막 정보를 수정하는 단계; 및 자막 생성 명령이 입력되면, 상기 동영상의 해상도를 분석하여 상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계를 수행하는 프로그램을 기록한 기록 매체가 제공될 수 있다. According to another embodiment of the present invention, a program of instructions that can be executed by a digital processing apparatus to perform a method of producing a subtitle connected to a subtitle requesting terminal and a public storage through a communication network is tangibly implemented. A recording medium recording a program that can be read by a digital processing apparatus, the recording medium comprising: receiving caption request information from the caption requesting terminal; Extracting caption information and a video corresponding to the caption request information from the public storage; Playing the video, synchronizing the caption information with a timeline of the video, and overlaying the video and the caption information to output the video; Receiving subtitle correction information and correcting the subtitle information; And a subtitle generation command, a recording medium recording a program for analyzing the resolution of the moving picture and generating a subtitle file at a resolution corresponding to the resolution of the moving picture.

상기 자막 파일을 생성하는 단계 이후에, 자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계를 더 수행할 수 있다.After generating the caption file, if a caption insertion command is input, the caption file may be further synthesized by synthesizing the video and the caption file.

본 발명의 다른 측면에 따르면, 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결되어 자막을 제작하는 자막 생성 장치가 제공된다.According to another aspect of the present invention, there is provided a caption generating device connected to a caption requesting terminal and a public storage through a communication network to produce captions.

본 발명의 실시예에 따르면, 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결되어 자막을 제작하는 자막 생성 장치에 있어서, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 통신부; 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상 정보를 상기 공용 스토리지로부터 추출하고, 구동 개시 제어 명령을 출력하는 제어부; 상기 구동 개시 제어 명령에 따라 구동되어 상기 동영상을 로딩하여 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하며, 자막 생성 명령이 입력되면, 상기 동영상의 해상도에 상응하는 자막 파일을 생성하는 자막 생성부; 및 상기 자막 생성부의 제어에 따라 상기 동영상 및 상기 자막 정보를 중첩하여 출력하는 디스플레이부를 포함하는 자막 생성 장치가 제공될 수 있다.According to an embodiment of the present invention, a caption generating device connected to a caption requesting terminal and a public storage through a communication network to produce captions, the apparatus comprising: a communication unit receiving caption request information from the caption requesting terminal; A control unit which extracts caption information and video information corresponding to the caption request information from the public storage and outputs a driving start control command; A subtitle that is driven according to the driving start control command to load and play the video, synchronize the caption information on the timeline of the video, and generate a caption file corresponding to the resolution of the video when a caption generation command is input; Generation unit; And a display unit configured to superimpose and output the video and the caption information under the control of the caption generator.

자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 합성부를 더 포함할 수 있다.The subtitle inserting command may further include a synthesizer configured to generate the subtitled video by synthesizing the video and the subtitle file.

상기 합성부는 상기 자막 파일을 상기 동영상의 시퀀스(sequence)로 추가하여 합성할 수 있다.The synthesizing unit may add the subtitle file as a sequence of the video and synthesize the subtitle file.

상기 자막 의뢰 정보는 상기 자막 정보 및 상기 동영상이 저장된 위치에 대한 정보를 포함할 수 있다.The subtitle request information may include information about the subtitle information and the location where the video is stored.

상기 자막 생성부는, 상기 동영상의 플레이 헤드(play head)에 맞춰 상기 자막 정보의 타임 코드의 시작점을 일치시켜 동기화하는 과정이다.The subtitle generator is a process of synchronizing the starting point of the time code of the subtitle information according to the play head of the video.

상기 자막 파일은 이미지 포맷으로 생성된다.The subtitle file is generated in an image format.

상기 자막 생성부는, 상기 동영상의 해상도를 분석하고, 분석 결과 상기 동영상의 해상도가 고화질(HD)이면 고해상도로 상기 자막 파일을 생성하고, 상기 동영상의 해상도가 표준화질이면, 표준해상도로 상기 자막 파일을 생성할 수 있다.The caption generating unit analyzes the resolution of the video, and, as a result of the analysis, generates the caption file at a high resolution if the resolution of the video is high definition (HD), and if the resolution of the video is standard, the caption file at the standard resolution. Can be generated.

상기 자막 정보는 XML 기반의 랭귀지로 생성된다.The caption information is generated in an XML based language.

상기 디스플레이부는 복수의 영역으로 구분되며, 제1 영역은 상기 자막 정보가 출력되고, 제2 영역은 상기 동영상이 출력되며, 제3 영역은 상기 동영상의 타임 라인 및 상기 자막 정보의 타임 코드가 각각 출력되고, 상기 자막 생성부의 제어에 상응하여 외부로부터 선택된 자막 정보는 상기 동영상과 중첩하여 제2 영역에 출력할 수 있다.The display unit is divided into a plurality of areas, the first area of the caption information is output, the second area of the video is output, the third area of the video timeline and the time code of the caption information, respectively The caption information selected from the outside according to the control of the caption generating unit may be output to the second area in superimposition with the video.

상기 디스플레이부는 상기 자막 생성부의 제어에 따라 상기 제1 영역에 자막 정보를 각각 썸네일(thumbnail) 형식으로 출력할 수 있다.The display unit may output caption information in a thumbnail format to the first area under the control of the caption generator.

타임 코드별 자막으로 삽입될 텍스트 및 이미지 중 하나 이상과 템플릿 정보를 포함할 수 있다.One or more of text and images to be inserted as captions for each time code and template information may be included.

상기 자막 의뢰 단말은, 상기 동영상의 각 프레임별 또는 타임 라인에 상응하도록 삽입할 자막에 대한 텍스트 및 이미지 중 하나 이상을 입력받고, 출력될 자막의 형태에 대한 템플릿 정보를 선택받으며, 타임 코드별로 상기 입력된 텍스트 및 이미지 중 하나 이상과 상기 템플릿 정보를 포함하는 자막 정보를 생성할 수 있다.The caption requesting terminal receives at least one of text and an image of a caption to be inserted to correspond to each frame or timeline of the video, and receives template information about a type of a caption to be output, Subtitle information including at least one of the input text and the image and the template information may be generated.

상기 의뢰 단말은 상기 자막 정보 및 상기 동영상을 상기 공용 스토리지에 저장하고, 저장된 위치에 대한 정보를 포함하는 자막 의뢰 정보를 생성하여 상기 자막 생성 장치로 전송할 수 있다.The requesting terminal may store the caption information and the video in the public storage, generate caption request information including information on the stored location, and transmit the caption request information to the caption generating device.

상기 의뢰 단말은 자막 의뢰 정보 전송시 의뢰 알림 메시지를 생성하여 통신망을 통해 전송하되, 상기 의뢰 알림 메시지는 단문 메시지의 형태이다.The requesting terminal generates a request notification message and transmits the request notification message through the communication network when the caption request information is transmitted, and the request notification message is in the form of a short message.

본 발명에 따른 네트워크 기반 자막 생성 방법 및 시스템을 제공함으로써, 본 발명은 네트워크를 기반으로 자막을 생성할 수 있다.By providing a network-based subtitle generation method and system according to the present invention, the present invention can generate a subtitle based on a network.

또한, 본 발명은 원본 동영상의 해상도에 상응하여 이미지 포맷으로 자막 파일을 생성할 수 있다. In addition, the present invention can generate a subtitle file in an image format corresponding to the resolution of the original video.

또한, 본 발명은 원본 동영상에 자막을 중첩하여 출력함으로써, 동영상을 재생하여 모니터링함으로써 쉽게 자막 삽입 위치를 결정하도록 할 수 있는 이점도 있다.In addition, the present invention also has the advantage that it is possible to easily determine the subtitle insertion position by superimposing and outputting the subtitle to the original video, by playing and monitoring the video.

또한, 본 발명은 사용자로부터 동영상의 각 프레임별(또는 타임 라인별) 자막으로 삽입할 텍스트 및 이미지를 입력받고, 이를 네트워크를 통해 자막 제작을 의뢰하도록 하여 장소에 구애받지 않고 자막이 생성되도록 할 수 있는 이점도 있다.In addition, the present invention receives a text and an image to be inserted into the subtitle of each frame (or timeline) of the video from the user, and to request the subtitle production through the network so that the subtitle can be generated anywhere There is also an advantage.

또한, 본 발명은 자막 의뢰를 단문 메시지의 형태로 통보함으로써 자막 생성을 총괄하는 관리자가 이를 쉽게 인지하도록 할 수 있는 이점도 있다.In addition, the present invention also has the advantage that the administrator in charge of the subtitle generation can be easily recognized by notifying the subtitle request in the form of a short message.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것 으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the present invention to specific embodiments, it should be understood to include all transformations, equivalents, and substitutes included in the spirit and scope of the present invention. In the following description of the present invention, if it is determined that the detailed description of the related known technology may obscure the gist of the present invention, the detailed description thereof will be omitted.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. The terms first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.

이하, 본 발명의 실시예를 첨부한 도면들을 참조하여 상세히 설명하기로 한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 네트워크 기반으로 자막을 생성하는 시스템을 개략적으로 도시한 도면이다.1 is a diagram schematically illustrating a system for generating a caption based on a network according to an embodiment of the present invention.

도 1에서 보여지는 바와 같이, 자막 생성을 위한 시스템은 복수의 의뢰 단말(110) 및 자막 생성 장치(120)를 포함하여 구성된다.As shown in FIG. 1, the system for generating a caption includes a plurality of requesting terminals 110 and a caption generating device 120.

의뢰 단말(110)는 동영상 재생 및 자막 정보를 생성할 수 있는 어플리케이 션(이하, 이해와 설명의 편의를 도모하기 위해 “자막 의뢰 어플리케이션”이라 칭하기로 함)이 설치된다. 의뢰 단말(110)는 사용자의 의뢰 단말(110) 조작에 의해 자막 의뢰 어플리케이션을 실행한다. 의뢰 단말(110)는 사용자에 의해 지정된 동영상을 프레임 단위로 검색 또는 재생하고, 사용자로부터 자막 정보를 입력받는다. 여기서, 자막 정보는 텍스트, 이미지, 템플릿 정보 및 타임 코드 정보 중 하나 이상일 수 있다. 텍스트, 이미지 및 템플릿 정보는 동영상(또는 프레임)에 출력되는 실제 자막에 대한 정보이다. 반면, 타임 코드 정보는 자막이 출력 시작되는 프레임의 위치 정보 및 출력 종료되는 프레임의 위치 정보일 수 있다. 타임 코드 정보는 출력 시작되는 프레임의 위치 정보 및 자막 노출(즉, 출력) 지속 시간 정보일 수도 있다.The requesting terminal 110 is installed with an application (hereinafter, referred to as a "subtitle requesting application" for convenience of understanding and explanation) that can generate video playback and subtitle information. The requesting terminal 110 executes a caption requesting application by the user's requesting terminal 110. The requesting terminal 110 searches or plays the video designated by the user on a frame basis, and receives subtitle information from the user. Here, the caption information may be one or more of text, an image, template information, and time code information. The text, image, and template information are information about actual subtitles output in a video (or frame). On the other hand, the time code information may be position information of a frame at which the subtitle is output and position information of a frame at which the subtitle is output. The time code information may be position information of a frame at which output starts and subtitle exposure (ie, output) duration information.

의뢰 단말(110)는 자막 정보의 입력이 완료되면, 해당 자막 정보를 이용하여 자막 의뢰 정보를 생성하여 자막 생성 장치(120)로 전송한다. 자막 의뢰 정보는 자막 정보 및 자막 의뢰된 동영상에 대한 정보를 포함한다. When the input of the caption information is completed, the requesting terminal 110 generates caption request information using the caption information and transmits the caption request information to the caption generating device 120. The caption request information includes caption information and information about a captioned video.

자막 생성 장치(120)는 의뢰 단말(110)로부터 자막 의뢰 정보가 수신되면, 알림 메시지를 생성하여 전송한다. 예를 들어, 알림 메시지는 단문 메시지의 형태로 작성되어 전송될 수 있다. When the caption request information is received from the requesting terminal 110, the caption generating device 120 generates and transmits a notification message. For example, the notification message may be prepared and transmitted in the form of a short message.

또한, 자막 생성 장치(120)는 자막 의뢰 정보를 분석하여 자막 의뢰된 동영상을 추출하여 재생하고, 자막 정보를 분석하여 동영상의 각 위치에 자막 정보를 중첩(overlay)하여 출력한다. 즉, 자막 생성 장치(120)는 자막 정보를 동영상의 각 희망 지점에 중첩하여 출력할 수 있다. In addition, the caption generating device 120 analyzes the caption request information to extract and play the captioned video, and analyzes the caption information to overlay the caption information at each position of the video and output the caption information. That is, the caption generating device 120 may output caption information by superimposing caption information on each desired point of the video.

또한, 자막 생성 장치(120)는 외부 입력에 따라 중첩된 자막을 수정하거나 위치 조정 또는 신규 자막 생성 등과 같은 자막 보완 기능을 수행할 수 있다.In addition, the caption generating device 120 may correct a superimposed subtitle according to an external input, or perform a subtitle supplement function such as repositioning or generating a new subtitle.

도 1에는 도시되어 있지 않으나, 자막 생성을 위한 시스템은 공용 스토리지를 포함할 수 있다. 공용 스토리지는 의뢰 단말(110) 또는 자막 생성 장치(120)와 통신망을 통해 각각 연결되어 있다. 이에 따라 의뢰 단말(110) 또는/및 자막 생성 장치(120)는 각각 생성된 정보 및 파일을 공용 스토리지에 저장하고 독출할 수 있다.Although not shown in FIG. 1, the system for generating subtitles may include public storage. The common storage is connected to the requesting terminal 110 or the caption generating device 120 through a communication network, respectively. Accordingly, the requesting terminal 110 and / or the caption generating device 120 may store and read the generated information and files in the common storage, respectively.

이하, 자막 생성 장치(120)에 대해서는 하기에서 관련 도면을 참조하여 보다 상세히 설명하기로 한다.Hereinafter, the caption generating device 120 will be described in more detail with reference to the accompanying drawings.

도 2는 본 발명의 실시예에 따른 사용자 단말기의 내부 구성을 예시한 블록도이고, 도 3은 본 발명의 실시예에 따른 자막 어플리케이션의 실행 화면을 예시한 도면이며, 도 4는 자막에 연관된 이미지의 편집을 위한 화면을 예시한 도면이고, 도 5에 자막에 연계된 이미지가 타임 코드 정보에 매핑되어 표시된 화면을 예시한 도면이다.2 is a block diagram illustrating an internal configuration of a user terminal according to an embodiment of the present invention, FIG. 3 is a diagram illustrating an execution screen of a caption application according to an embodiment of the present invention, and FIG. 4 is an image associated with a caption. FIG. 5 is a diagram illustrating a screen for editing, and FIG. 5 is a diagram illustrating a screen displayed by mapping an image associated with a caption to time code information.

도 2를 참조하면, 본 발명의 실시예에 따른 의뢰 단말(110)는 입력부(210), 디스플레이부(220), 송수신부(230), 자막 어플리케이션부(240), 저장부(250) 및 제어부(260)를 포함하여 구성된다.Referring to FIG. 2, the requesting terminal 110 according to an embodiment of the present invention includes an input unit 210, a display unit 220, a transceiver unit 230, a caption application unit 240, a storage unit 250, and a controller. And 260.

입력부(210)는 사용자로부터 의뢰 단말(110)의 동작을 제어하기 위한 다양한 제어 명령들을 입력받기 위한 수단이다. 예를 들어, 입력부(210)는 복수의 키버튼 (예를 들어, 숫자/문자키, * 또는 # 기호키, 하나 이상의 기능키(예를 들어, 메뉴키, 통화키, 확인키 등)로 구현되거나 터치스크린 등의 형태로 구현될 수 있다. The input unit 210 is a means for receiving various control commands for controlling the operation of the requesting terminal 110 from the user. For example, the input unit 210 may be implemented as a plurality of key buttons (for example, numeric / character keys, * or # symbol keys, and one or more function keys (for example, menu keys, call keys, confirmation keys, etc.). It may be implemented in the form of a touch screen or the like.

또한, 입력부(210)는 사용자로부터 자막 의뢰 요청 명령을 입력받아 제어부(260)로 출력할 수 있다. 또한, 입력부(210)는 사용자로부터 자막을 위한 다양한 정보를 입력받을 수 있다.In addition, the input unit 210 may receive a subtitle request request command from the user and output the received command to the controller 260. In addition, the input unit 210 may receive various information for captions from a user.

디스플레이부(220)는 제어부(260)의 제어에 의해, 동영상 데이터, 이미지 데이터 문자 또는/및 숫자 중 하나 이상의 조합에 의한 데이터를 디스플레이하는 기능을 수행한다. 예를 들어, 디스플레이부(220)는 액정화면(LCD)일 수 있다.The display unit 220 performs a function of displaying data by at least one combination of video data, image data characters, and / or numbers under the control of the controller 260. For example, the display unit 220 may be a liquid crystal display (LCD).

송수신부(230)는 통신망을 통해 자막 생성 장치(120)와 데이터를 송수신하는 기능을 수행한다.The transceiver 230 performs a function of transmitting and receiving data with the caption generating device 120 through a communication network.

예를 들어, 송수신부(230)는 제어부(260)의 제어에 의해 자막 의뢰 정보를 자막 생성 장치(120)로 전송할 수 있다. 또한, 송수신부(230)는 제어부(260)의 제어에 의해 자막 의뢰 정보 전송시 의뢰 요청 메시지를 생성하여 통신망으로 전송할 수 있다. 여기서, 의뢰 요청 메시지는 단문 메시지의 형태일 수 있다.For example, the transceiver 230 may transmit the caption request information to the caption generating device 120 under the control of the controller 260. In addition, the transceiver 230 may generate a request message when transmitting the caption request information under the control of the controller 260 and transmit the request message to the communication network. Here, the request request message may be in the form of a short message.

자막 어플리케이션부(240)은 제어부(260)의 제어에 따라 구동 개시되거나 구동 종료된다. 예를 들어, 입력부(210)로부터 자막 의뢰 요청 명령이 입력되면, 제어부(260)를 어플리케이션의 실행을 위한 제어 신호를 생성하여 자막 어플리케이션부(240)으로 출력한다. 이에 따라, 자막 어플리케이션부(240)이 실행된다. 그리고, 자막 어플리케이션부(240)은 사용자로부터 자막 텍스트 또는 이미지를 입력받고, 이에 상응하는 타임코드 정보를 설정한다. 본 명세서에서는 자막 텍스트, 이미지 또는/및 타임 코드 정보를 포함하여 자막 정보라 칭하기로 한다. The caption application unit 240 starts driving or ends driving under the control of the controller 260. For example, when a caption request request command is input from the input unit 210, the controller 260 generates a control signal for executing an application and outputs the control signal to the caption application unit 240. Accordingly, the caption application unit 240 is executed. The caption application unit 240 receives caption text or an image from a user and sets corresponding timecode information. In this specification, subtitle information including subtitle text, image, and / or time code information will be referred to as subtitle information.

예를 들어, 자막 어플리케이션부(240)은 자막 생성 장치(120)에 접속할 수 있는 웹 브라우저의 형태로 제공될 수도 있다. For example, the caption application unit 240 may be provided in the form of a web browser that can access the caption generating device 120.

도 3에 자막 어플리케이션부(240)을 통해 자막 정보를 입력받아 설정하는 것을 예시한 도면이다. 도 3에서 보여지는 바와 같이, 자막 어플리케이션부(240)은 동영상을 재생할 수 있다. 그리고, 사용자로부터 자막을 위한 텍스트가 입력되거나 이미지가 선택(또는 생성)되는 경우, 해당 시점의 시간 정보를 생성한다. 본 명세서에서는 자막이 삽입된 시간 정보를 타임 코드 정보라 칭하기로 한다. 도 3에 예시된 바와 같이, 자막은 타임 코드 정보별로 디스플레이된다. 도 3에서 보여지는 바와 같이, 이미지가 타임 코드 정보에 별도로 표시된다. 3 illustrates an example of receiving and setting caption information through the caption application unit 240. As shown in FIG. 3, the caption application unit 240 may play a video. When text for caption is input or an image is selected (or generated) from a user, time information of a corresponding time point is generated. In this specification, time information in which subtitles are inserted will be referred to as time code information. As illustrated in FIG. 3, subtitles are displayed for each time code information. As shown in Fig. 3, the image is displayed separately in the time code information.

도 4는 자막에 연관된 이미지의 편집을 위한 화면을 예시한 도면이다. 도 4에 예시된 바와 같이, 자막 어플리케이션부(240)은 사용자로부터 이미지 편집 명령이 입력되면, 이미지 편집(또는 생성)을 위한 팝업창을 디스플레이한다. 사용자는 해당 팝업창을 통해 그림 작업을 수행할 수 있다.4 is a diagram illustrating a screen for editing an image associated with a caption. As illustrated in FIG. 4, when an image editing command is input from a user, the caption application unit 240 displays a popup window for image editing (or generation). The user can work on the picture through the pop-up window.

도 5에 자막에 연계된 이미지가 타임 코드 정보에 매핑되어 표시된 화면이 예시되어 있다. 즉, 도 5에서 보여지는 바와 같이, 자막을 위한 텍스트 및 그림(즉, 이미지)는 타임 코드 정보에 매핑되어 표시될 수 있다. 자막에 연계된 그림(이미지)가 존재함을 별도의 아이콘을 이용하여 타임 코드 정보에 매핑하여 표시함으로써, 자막에 연계된 그림의 존재 여부를 쉽게 인지하도록 할 수 있는 이점이 있다.FIG. 5 illustrates a screen in which an image associated with a caption is mapped to time code information. That is, as shown in FIG. 5, text and pictures (ie, images) for captions may be mapped and displayed on time code information. By displaying the image (image) associated with the subtitles by mapping them to time code information using a separate icon, there is an advantage that it is possible to easily recognize the existence of the image associated with the subtitles.

또한, 자막 어플리케이션부(240)은 자막 정보를 XML 기반의 랭귀지를 이용하여 생성할 수 있다.In addition, the caption application unit 240 may generate caption information using an XML-based language.

저장부(250)는 본 발명의 실시예에 따른 의뢰 단말(110)를 운용하기 위한 알고리즘, 생성된 자막 정보, 자막 의뢰 정보 등이 저장된다.The storage unit 250 stores an algorithm for operating the requesting terminal 110 according to an embodiment of the present invention, generated subtitle information, subtitle request information, and the like.

제어부(260)는 본 발명의 실시예에 따른 의뢰 단말(110)의 내부 구성 요소(예를 들어, 입력부(210), 디스플레이부(220), 송수신부(230), 자막 어플리케이션부(240), 저장부(250) 등)를 제어하는 기능을 수행한다.The controller 260 is an internal component of the requesting terminal 110 according to an embodiment of the present invention (for example, the input unit 210, the display unit 220, the transceiver 230, the subtitle application unit 240, Storage unit 250).

또한, 제어부(260)는 자막 어플리케이션부(240)에 의해 자막 생성이 완료되면, 자막 정보 및 자막이 삽입된 동영상에 대한 정보를 포함하는 자막 의뢰 정보를 생성한다. 그리고, 제어부(260)는 송수신부(230)를 통해 자막 의뢰 정보를 자막 생성 장치(120)로 전송한다.In addition, when the caption generation is completed by the caption application unit 240, the controller 260 generates caption request information including caption information and information about a video into which the caption is inserted. The controller 260 transmits the caption request information to the caption generating device 120 through the transceiver 230.

또한, 제어부(260)는 자막 의뢰 정보의 전송 완료와 함께 자막 의뢰 알림 메시지를 생성하여 전송할 수도 있다. 여기서, 자막 의뢰 알림 메시지는 단문 메시지의 형태일 수 있다. 즉, 의뢰 단말(110)는 자막 어플리케이션부(240)을 통해 자막을 의뢰할 담당자를 지정할 수 있다. 이에 따라 의뢰 단말(110)는 자막 의뢰 정보 전송과 함께 자막 의뢰 알림 메시지를 생성하여 의뢰 담당자에게 전송할 수도 있다.In addition, the controller 260 may generate and transmit a caption request notification message upon completion of transmission of the caption request information. Here, the caption request notification message may be in the form of a short message. That is, the requesting terminal 110 may designate a person in charge of subtitles through the subtitle application unit 240. Accordingly, the requesting terminal 110 may generate a caption request notification message and transmit the caption request information to the requesting person.

도 6은 본 발명의 실시예에 따른 자막 생성 장치의 내부 구성을 예시한 블록도이고, 도 7은 본 발명의 실시예에 따른 자막 템플릿을 예시한 도면이다.6 is a block diagram illustrating an internal configuration of a caption generating device according to an embodiment of the present invention, and FIG. 7 is a diagram illustrating a caption template according to an embodiment of the present invention.

도 6을 참조하면, 본 발명의 실시예에 따른 자막 생성 장치(120)는 입력부(610), 통신부(620), 디스플레이부(630), 자막 생성부(640), 저장부(650) 및 제어부(660)를 포함하여 구성된다.Referring to FIG. 6, the caption generating device 120 according to an embodiment of the present invention includes an input unit 610, a communication unit 620, a display unit 630, a caption generator 640, a storage unit 650, and a controller. And 660.

입력부(610)는 본 발명의 실시예에 따른 자막 생성 장치(120)의 동작을 제어하기 위한 다양한 제어 명령을 입력받기 위한 수단이다. 예를 들어, 입력부(610)는 복수의 키버튼(예를 들어, 숫자/문자키, * 또는 # 기호키, 하나 이상의 기능키(예를 들어, 메뉴키, 통화키, 확인키 등)로 구현되거나 터치스크린 등의 형태로 구현될 수 있다. The input unit 610 is a means for receiving various control commands for controlling the operation of the caption generating apparatus 120 according to the embodiment of the present invention. For example, the input unit 610 may be implemented as a plurality of key buttons (for example, numeric / character keys, * or # symbol keys, and one or more function keys (for example, menu keys, call keys, confirmation keys, etc.). It may be implemented in the form of a touch screen or the like.

또한, 입력부(610)는 자막 수정 명령, 자막 생성 명령 등 자막 제작을 위한 다양한 명령 및 정보를 입력받아 출력할 수 있다.In addition, the input unit 610 may receive and output various commands and information for caption production, such as a caption correction command and a caption generation command.

통신부(620)는 통신망을 통해 의뢰 단말(110)와 연결되어 데이터를 송수신한다.The communication unit 620 is connected to the requesting terminal 110 through a communication network to transmit and receive data.

예를 들어, 통신부(620)는 의뢰 단말(110)로부터 자막 의뢰 정보를 수신받아 제어부(660)로 출력할 수 있다. 또한, 통신부(620)는 제어부(660)의 제어에 따라 공유 스토리지에 접속하여 자막 의뢰 정보에 상응하는 자막 정보 및 동영상을 추출하여 당해 자막 생성 장치(120)에 저장할 수 있다.For example, the communication unit 620 may receive subtitle request information from the requesting terminal 110 and output the subtitle request information to the controller 660. In addition, the communication unit 620 may access the shared storage under the control of the controller 660, extract the caption information and the video corresponding to the caption request information, and store the same in the caption generating device 120.

디스플레이부(630)는 제어부(660)의 제어에 의해 동영상 데이터, 이미지 데이터, 문자 또는/및 숫자 중 하나 이상의 조합에 의한 데이터를 디스플레이하는 기능을 수행한다. 예를 들어, 디스플레이부(630)는 액정화면(LCD)일 수 있다. 즉, 디스플레이부(630)는 제어부(660)의 제어에 따라 동영상 및 자막 정보를 중 첩(overlay)하여 시각적으로 출력할 수 있다.The display unit 630 performs a function of displaying data by at least one combination of moving image data, image data, characters, and / or numbers under the control of the controller 660. For example, the display unit 630 may be a liquid crystal display (LCD). That is, the display unit 630 may overlay the video and the caption information and output them visually under the control of the controller 660.

자막 생성부(640)는 제어부(660)의 제어에 따라 자막 의뢰 정보에 상응하는 동영상을 로딩한다. 그리고, 자막 생성부(640)는 당해 동영상의 타임 라인에 상응하여 자막 정보를 동기화한다. The subtitle generator 640 loads a video corresponding to the subtitle request information under the control of the controller 660. Subtitle generator 640 synchronizes subtitle information corresponding to the timeline of the video.

예를 들어, 자막 생성부(640)는 당해 동영상의 타임 라인에 상응하여 당해 자막 정보의 타임 코드별 텍스트 또는/및 이미지 중 하나 이상이 해당 지정된 타임 코드에 상응하여 매핑할 수 있다.For example, the subtitle generator 640 may map one or more of the time coded text and / or image of the subtitle information corresponding to the corresponding timeline of the video corresponding to the timeline of the video.

또한, 자막 생성부(640)는 동영상과 자막 정보를 중첩하여 디스플레이부(630)를 통해 출력한다. 여기서, 자막 생성부(640)는 하나 이상의 레이어(layer)를 설정하여 복수의 자막이 중첩되도록 할 수도 있다. 본 명세서에서는 하나의 레이어가 설정되어 동영상과 자막 정보가 중첩되는 것을 가정하여 이를 중점으로 설명하기로 한다.In addition, the caption generator 640 superimposes the video and the caption information and outputs the same through the display 630. Here, the subtitle generator 640 may set one or more layers to overlap the plurality of subtitles. In the present specification, it is assumed that one layer is set and the video and the subtitle information are overlapped.

또한, 자막 생성부(640)는 입력부(610)를 통해 사용자로부터 수정 정보를 입력받고, 이에 상응하여 자막 정보를 수정할 수 있다. 여기서, 수정 정보는 자막 위치 조정 정보, 신규 자막 생성 정보 또는/및 자막 형태 정보 중 하나 이상일 수 있다. 자막 형태 정보는 자막이 출력될 템플릿 정보일 수 있다. In addition, the subtitle generator 640 may receive correction information from the user through the input unit 610 and may modify the subtitle information accordingly. Here, the correction information may be one or more of subtitle position adjustment information, new subtitle generation information, and / or subtitle type information. The caption type information may be template information on which captions are output.

본 명세서에서 템플릿 정보는 자막이 출력되는 패턴인 것으로 정의하기로 한다. 예를 들어, 도 7을 참조하여 간략하게 설명하기로 한다. 자막은 710과 같이 하단에 정지 영상과 같이 출력될 수도 있고, 720과 같이 우측 세로 영역에 출력될 수도 있다. 또한, 자막은 730과 같이 특정 객체를 부각하기 위해 동영상 아이콘과 같 이 출력될 수도 있다. 이와 같이, 자막이 출력되는 패턴을 정의한 것을 본 명세서에서는 템플릿 정보라 칭하기로 한다.In the present specification, the template information will be defined as a pattern in which subtitles are output. For example, it will be briefly described with reference to FIG. 7. The subtitle may be output as a still image at the bottom as shown in 710 or may be output at the right vertical region as shown in 720. In addition, the caption may be output like a video icon to highlight a specific object such as 730. As such, the definition of the pattern for outputting the caption is referred to herein as template information.

또한, 자막 생성부(640)는 입력부(610)를 통해 사용자로부터 자막 생성 명령이 입력되면, 동영상과 자막 정보를 합성하여 자막 삽입된 동영상을 생성할 수 있다. 본 명세서에서는 이해와 설명의 편의를 도모하기 위해 자막 생성부(640)에서 자막 정보와 동영상을 합성하여 자막 삽입된 동영상을 생성하는 것을 가정하여 이를 중점으로 설명한다. 그러나, 구현 방법에 따라 자막 정보 및 동영상의 합성은 별도의 장치에서 수행될 수도 있음은 당연하다. 이와 같은 경우, 자막 생성부(640)는 자막 생성 명령이 입력되면, 미리 설정된 형식에 따라 자막 파일을 생성하여 출력한다. 여기서, 자막 파일은 자막 위치에 대한 프레임별 정확한 타임 코드를 포함한다. 또한, 자막 파일이 정지 영상 자막인 경우, 자막 파일은 알파 채널에 대한 비손실 압축을 지원하는 파일 포맷(예를 들어, PNG, TIFF 등)으로 생성될 수 있다. 그러나 애니메이션 자막인 경우, 자막 파일은 동영상의 프레임에 대한 MOV 파일 형식으로 생성될 수 있다.In addition, when the caption generation command is input from the user through the input unit 610, the caption generating unit 640 may generate a caption-embedded video by synthesizing the video and the caption information. In the present specification, for the convenience of understanding and explanation, it is assumed that the caption generating unit 640 synthesizes the caption information and the video to generate a caption-inserted video. However, it is a matter of course that the synthesis of the caption information and the video may be performed in a separate device according to the implementation method. In this case, when the caption generation command is input, the caption generating unit 640 generates and outputs a caption file according to a preset format. Here, the subtitle file includes the frame-by-frame accurate time code for the subtitle position. In addition, when the caption file is a still image caption, the caption file may be generated in a file format (eg, PNG, TIFF, etc.) that supports lossless compression for the alpha channel. However, in the case of an animated subtitle, the subtitle file may be generated in a MOV file format for a frame of a video.

그리고, 합성 장치에서 당해 자막 파일을 임포트(import)하면, 자막 정보가 원본 동영상의 스퀀스(sequence)에 추가되고, 자막 정보와 원본 동영상이 합성되어 자막 삽입된 동영상을 생성할 수 있다. When the caption file is imported by the synthesizing apparatus, the caption information is added to a sequence of the original video, and the caption information and the original video are synthesized to generate a captioned video.

또한, 자막 파일은 원본 동영상의 해상도가 고화질(HD: high definition)인 경우, 제1 해상도로 생성된다. 원본 동영상의 해상도가 표준화질(SD: standard definition)인 경우, 자막 파일은 제2 해상도로 생성된다. 예를 들어, 제1 해상도 는 1028 X 1080이고, 제2 해상도는 720 X 480일 수 있다. 즉, 자막 파일은 원본 동영상의 해상도에 상응하여 생성될 수 있다.In addition, the subtitle file is generated at the first resolution when the resolution of the original moving image is high definition (HD). If the resolution of the original video is standard definition (SD), the subtitle file is generated at the second resolution. For example, the first resolution may be 1028 X 1080, and the second resolution may be 720 X 480. That is, the caption file may be generated corresponding to the resolution of the original video.

저장부(650)는 본 발명의 실시예에 따른 자막 생성 장치(??)를 운용하기 위한 알고리즘, 자막 정보, 자막 파일, 동영상 등이 저장된다.The storage unit 650 stores an algorithm, a caption information, a caption file, a video, and the like, for operating the caption generating device ?? according to an embodiment of the present invention.

제어부(660)는 본 발명의 실시예에 따른 자막 생성 장치(??)의 내부 구성 요소들(입력부(610), 통신부(620), 디스플레이부(630), 자막 생성부(640), 저장부(650) 등)을 제어하는 기능을 수행한다.The control unit 660 may be configured to include internal components of the caption generating apparatus ?? according to an embodiment of the present invention (input unit 610, communication unit 620, display unit 630, caption generation unit 640, and storage unit). 650, etc.).

또한, 제어부(660)는 자막 생성부(640)의 구동 개시 또는 구동 종료를 제어하는 기능을 수행한다. 예를 들어, 통신부(620)를 통해 자막 의뢰 정보가 수신되면, 자막 생성부(640)가 구동되도록 제어할 수 있다.In addition, the controller 660 performs a function of controlling the start or stop of driving the subtitle generator 640. For example, when caption request information is received through the communication unit 620, the caption generation unit 640 may be controlled to be driven.

도 6에서는 자막 생성부(640)가 자막 파일을 생성하고, 자막 파일과 동영상을 합성하는 기능을 수행하는 것을 가정하여 이를 중점으로 설명하였으나, 자막 파일과 동영상을 합성하는 별도의 구성 요소(예를 들어, 합성부)를 포함할 수도 있음은 당연하다. 이와 같은 경우, 자막 생성부(640)는 자막 파일을 생성하고, 자막 파일과 동영상을 합성하는 기능을 합성부에서 수행된다.In FIG. 6, the subtitle generator 640 generates a subtitle file and performs a function of synthesizing the subtitle file and the video. However, the subtitle generator 640 performs a function of synthesizing the subtitle file and the video. Of course, it may be included). In this case, the subtitle generator 640 generates a subtitle file and performs a function of synthesizing the subtitle file and the video in the synthesizer.

도 8 및 도 9는 본 발명의 실시예에 따른 자막 생성 장치에서 동영상과 자막 정보를 출력한 화면을 예시한 도면이다.8 and 9 illustrate screens for outputting video and caption information in a caption generating apparatus according to an exemplary embodiment of the present invention.

도 8에 예시된 바와 같이, 제1 영역(810)에 의뢰된 자막 정보에 상응하는 동영상이 로딩된다. 그리고, 의뢰된 자막 정보는 제2 영역(820)에 로딩된다. 제2 영 역(820)에서 보여지는 바와 같이, 자막 정보는 각각 썸네일(thumbnail)의 형태로 출력된다.As illustrated in FIG. 8, a video corresponding to subtitle information requested to the first area 810 is loaded. The requested subtitle information is loaded in the second area 820. As shown in the second region 820, the caption information is output in the form of thumbnails, respectively.

그리고, 제3 영역(830)에 동영상의 타임 라인 및 동영상에 동기화된 자막 정보의 타임 코드가 각각 출력된다. 보다 상세하게 동영상의 플레이헤드에 기반하여 자막 정보의 타임 코드의 시작점일 일치시켜 동기화한다.The time code of the caption information synchronized with the video and the timeline of the video are respectively output to the third region 830. In more detail, the start point of the time code of the caption information is synchronized based on the playhead of the video.

제2 영역(820)에 출력된 자막 정보 중 어느 하나가 사용자에 의해 선택되면, 선택된 자막 정보는 설정된 템플릿 정보에 상응하여 동영상에 중첩되어 표시된다. 도 9에 자막 정보가 동영상에 중첩되어 출력된 것이 예시되어 있다.If any one of the subtitle information output to the second area 820 is selected by the user, the selected subtitle information is displayed superimposed on the video corresponding to the set template information. 9 illustrates that subtitle information is superimposed on a video and output.

도 10은 본 발명의 실시예에 따른 사용자 단말기가 자막을 의뢰하는 방법을 나타낸 순서도이다. 이하에서 설명되는 각각의 단계는 의뢰 단말(110)의 각각의 내부 구성 요소에 의해 수행되어지나 이해와 설명의 편의를 도모하기 위해 의뢰 단말(110)로 통칭하여 설명하기로 한다.10 is a flowchart illustrating a method for requesting a caption by a user terminal according to an exemplary embodiment of the present invention. Each step described below is performed by each internal component of the requesting terminal 110, but will be collectively described as the requesting terminal 110 in order to facilitate understanding and explanation.

단계 1010에서 의뢰 단말(110)은 사용자로부터 자막 의뢰 요청 명령을 입력받는다.In step 1010, the requesting terminal 110 receives a subtitle request request command from the user.

단계 1015에서 의뢰 단말(110)은 자막 의뢰 요청 명령에 상응하여 자막 어플리케이션을 실행한다.In step 1015, the requesting terminal 110 executes a caption application in response to a caption request request command.

그리고, 단계 1020에서 의뢰 단말(110)은 자막 어플리케이션을 통해 사용자로부터 자막을 의뢰할 동영상을 선택받아 출력한다. 여기서, 의뢰 단말(110)은 당해 의뢰 단말의 특성을 고려하여 동영상을 저해상도로 출력한다.In operation 1020, the requesting terminal 110 selects and outputs a video to request subtitles from the user through the caption application. Here, the requesting terminal 110 outputs a video in low resolution in consideration of the characteristics of the requesting terminal.

단계 1025에서 의뢰 단말(110)은 사용자로부터 선택된 동영상의 타임 코드에 상응하여(또는 각 프레임별로) 자막으로 삽입할 텍스트 및 이미지 중 하나 이상을 입력받는다.In operation 1025, the requesting terminal 110 receives one or more of a text and an image to be inserted as a caption corresponding to the time code of the selected video (or each frame).

단계 1030에서 의뢰 단말(110)은 입력된 텍스트 및 이미지의 출력 형태를 지정하는 템플릿 정보를 선택받는다.In operation 1030, the requesting terminal 110 receives template information that designates an output form of input text and an image.

단계 1035에서 의뢰 단말(110)은 타임 코드별로 텍스틀 및 이미지 중 하나 이상과 템플릿 정보를 설정하여 자막 정보를 생성한다. 여기서, 자막 정보는 미리 설정된 XML 기반의 랭귀지로 생성될 수 있다.In step 1035, the requesting terminal 110 generates caption information by setting at least one of text and images and template information for each time code. Here, the caption information may be generated in a language based on a preset XML.

여기서, 단계 1025 내지 1030은 동영상의 모든 프레임에 대해 작업이 종료될때까지 복수회 반복 수행될 수 있다.Here, steps 1025 to 1030 may be repeatedly performed a plurality of times until the operation is completed for all frames of the video.

단계 1040에서 의뢰 단말(110)은 생성된 자막 정보 및 당해 자막 정보에 상응하는 동영상을 공용 스토리지에 저장한다. In operation 1040, the requesting terminal 110 stores the generated caption information and a video corresponding to the caption information in the common storage.

다른 예를 들어, 의뢰 단말(110)은 생성된 자막 정보를 공용 스토리지에 저장하고, 당해 자막 정보에 상응하는 원본 동영상이 자막 정보가 저장된 영역(또는 폴더)에 저장되도록 저장 명령을 별도의 장치(예를 들어, 통합 시스템(NPS))에 요청하여 저장되도록 할 수도 있다.For another example, the requesting terminal 110 stores the generated subtitle information in the common storage, and stores a save command so that the original video corresponding to the subtitle information is stored in an area (or a folder) in which the subtitle information is stored. For example, it may be requested by the integrated system (NPS) and stored.

단계 1045에서 의뢰 단말(110)은 생성된 자막 정보에 상응하는 자막 의뢰 정보를 생성하여 통신망을 통해 자막 생성 장치(120)로 전송한다. 여기서, 자막 의뢰 정보는 자막 정보 및 자막 정보 저장된 위치 정보 중 하나 이상을 포함할 수 있다.In operation 1045, the requesting terminal 110 generates caption request information corresponding to the generated caption information and transmits the caption request information to the caption generating device 120 through a communication network. Here, the caption request information may include one or more of caption information and position information stored in the caption information.

다른 예를 들어, 자막 의뢰 정보는 자막 정보 및 자막 정보에 상응하는 동영 상에 대한 정보를 포함할 수 있다. 이와 같은 경우, 자막 생성 장치(120)는 자막 의뢰 정보를 분석하여 자막 정보에 상응하는 동영상을 공용 스토리지로부터 추출하여 당해 자막 생성 장치(120)에 저장하여 자막 생성을 위한 작업을 수행할 수도 있다.As another example, the caption request information may include caption information and information about a moving image corresponding to the caption information. In this case, the caption generating device 120 may analyze the caption request information, extract a video corresponding to the caption information from the common storage, and store the caption generating device 120 in the caption generating device 120 to perform caption generation.

또한, 의뢰 단말(110)은 자막 의뢰 정보에 상응하는 의뢰 알림 메시지를 생성하여 단문 메시지의 형태로 전송할 수도 있다.In addition, the requesting terminal 110 may generate a request notification message corresponding to the caption request information and transmit it in the form of a short message.

도 11은 본 발명의 실시예에 따른 자막 생성 장치가 자막을 생성하는 방법을 나타낸 순서도이다. 이하에서 설명되는 각각의 단계는 자막 생성 장치(120)의 각각의 내부 구성 요소에 의해 수행되어지나 이해와 설명의 편의를 도모하기 위해 자막 생성 장치(120)로 통칭하여 설명하기로 한다.11 is a flowchart illustrating a method of generating a subtitle by the apparatus for generating a subtitle according to an embodiment of the present invention. Each step described below is performed by each internal component of the subtitle generating device 120, but will be collectively described as the subtitle generating device 120 for the convenience of understanding and explanation.

단계 1110에서 자막 생성 장치(120)는 통신망을 통해 의뢰 단말(110)로부터 자막 의뢰 정보를 수신받는다. 여기서, 자막 의뢰 정보는 자막 정보 및 동영상이 저장된 위치 정보일 수 있다. In operation 1110, the caption generating device 120 receives caption request information from the requesting terminal 110 through a communication network. Here, the caption request information may be location information on which caption information and a video are stored.

단계 1115에서 자막 생성 장치(120)는 자막 의뢰 정보를 분석하여 공용 스토리지로부터 자막 정보 및 동영상을 추출한다. 여기서, 추출된 동영상은 원본 동영상인 것을 가정하기로 한다.In operation 1115, the caption generating device 120 analyzes the caption request information to extract caption information and a video from the common storage. Here, it is assumed that the extracted video is the original video.

단계 1120에서 자막 생성 장치(120)는 동영상 및 자막 정보를 로딩하고, 동영상에 자막 정보를 중첩하여 출력한다.In operation 1120, the subtitle generating apparatus 120 loads the video and the caption information, and superimposes the caption information on the video.

보다 상세하게 자막 생성 장치(120)는 동영상의 플레이헤드에 맞춰 자막 정 보의 타임 코드의 시작점을 일치시켜 동기화하고, 동영상 및 자막 정보를 중첩하여 출력할 수 있다.In more detail, the subtitle generating apparatus 120 may synchronize and match the starting point of the time code of the subtitle information in accordance with the playhead of the video, and may superimpose and output the video and subtitle information.

단계 1125에서 자막 생성 장치(120)는 사용자로부터 수정 정보가 입력되면, 입력된 수정 정보에 상응하도록 자막 정보를 수정한다.In operation 1125, when the correction information is input from the user, the caption generating device 120 modifies the caption information to correspond to the input correction information.

단계 1130에서 자막 생성 장치(120)는 자막 생성 명령이 입력되면, 동영상의 해상도에 상응하여 자막 파일을 생성한다. 여기서, 자막 파일은 이미지 파일로 생성된다.In operation 1130, when the caption generating command is input, the caption generating device 120 generates a caption file corresponding to the resolution of the video. Here, the caption file is generated as an image file.

예를 들어, 동영상의 해상도가 고화질이면, 자막 파일을 고해상도로 생성하고, 동영상의 해상도가 표준화질이면, 자막 파일은 표준해상도로 생성할 수 있다. For example, if the resolution of the video is high quality, the caption file may be generated in high resolution, and if the resolution of the video is standardized, the caption file may be generated in standard resolution.

단계 1135에서 자막 생성 장치(120)는 자막 삽입 명령이 입력되면, 동영상과 자막 파일을 합성하여 자막 삽입된 동영상을 최종 결과 파일로써 생성한다. In operation 1135, when the caption inserting command is input, the caption generating device 120 synthesizes the video and the caption file to generate the caption-inserted video as the final result file.

예를 들어, 자막 생성 장치(120)는 자막 삽입 명령에 상응하여 자막 파일을 동영상의 시퀀스로 추가한다. 이를 위해 자막 파일은 삽입될 위치에 대한 프레임별 타임 코드가 각각 설정되어 있음은 당연하다.For example, the caption generating device 120 adds a caption file as a sequence of moving pictures in response to a caption insertion command. To this end, it is natural that the subtitle file is set with a time code for each frame to be inserted.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the appended claims. It will be understood that the invention may be varied and varied without departing from the scope of the invention.

도 1은 본 발명의 실시예에 따른 네트워크 기반으로 자막을 생성하는 시스템을 개략적으로 도시한 도면.1 is a diagram schematically illustrating a system for generating a subtitle based on a network according to an embodiment of the present invention.

도 2는 본 발명의 실시예에 따른 사용자 단말기의 내부 구성을 예시한 블록도.2 is a block diagram illustrating an internal configuration of a user terminal according to an embodiment of the present invention.

도 3은 본 발명의 실시예에 따른 자막 어플리케이션의 실행 화면을 예시한 도면.3 is a diagram illustrating an execution screen of a caption application according to an embodiment of the present invention.

도 4는 자막에 연관된 이미지의 편집을 위한 화면을 예시한 도면.4 illustrates a screen for editing an image associated with a caption.

도 5에 자막에 연계된 이미지가 타임 코드 정보에 매핑되어 표시된 화면을 예시한 도면.5 is a diagram illustrating a screen in which an image associated with a caption is mapped to time code information.

도 6은 본 발명의 실시예에 따른 자막 생성 장치의 내부 구성을 예시한 블록도.6 is a block diagram illustrating an internal configuration of a caption generating device according to an embodiment of the present invention.

도 7은 본 발명의 실시예에 따른 자막 템플릿을 예시한 도면.7 illustrates a subtitle template according to an embodiment of the present invention.

도 8 및 도 9는 본 발명의 실시예에 따른 자막 생성 장치에서 동영상과 자막 정보를 출력한 화면을 예시한 도면.8 and 9 illustrate screens for outputting video and subtitle information in a caption generating device according to an embodiment of the present invention.

도 10은 본 발명의 실시예에 따른 사용자 단말기가 자막을 의뢰하는 방법을 나타낸 순서도.10 is a flowchart illustrating a method for requesting a caption by a user terminal according to an exemplary embodiment of the present invention.

도 11은 본 발명의 실시예에 따른 자막 생성 장치가 자막을 생성하는 방법을 나타낸 순서도.11 is a flowchart illustrating a method of generating a subtitle by the apparatus for generating a subtitle according to an embodiment of the present invention.

Claims (27)

자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결된 자막 생성 장치가 자막을 제작하는 방법에 있어서,In the subtitle generating device connected to the subtitle requesting terminal and the public storage through a communication network to produce a subtitle, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 단계; Receiving subtitle request information from the subtitle requesting terminal; 상기 공용 스토리지로부터 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상을 추출하는 단계;Extracting caption information and a video corresponding to the caption request information from the public storage; 상기 동영상을 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계; 및Playing the video, synchronizing the caption information with a timeline of the video, and overlaying the video and the caption information to output the video; And 자막 생성 명령이 입력되면, 상기 동영상의 해상도를 분석하여 상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계를 포함하는 자막 제작 방법.When the caption generation command is input, analyzing the resolution of the video to produce a subtitle file at a resolution corresponding to the resolution of the video. 제1 항에 있어서,According to claim 1, 상기 자막 파일을 생성하는 단계 이후에,After generating the subtitle file, 자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계를 더 포함하는 자막 제작 방법.When the subtitle insertion command is input, the method comprising the step of synthesizing the video and the subtitle file to generate a subtitle embedded video. 제2 항에 있어서,The method of claim 2, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계는,Synthesizing the video and the subtitle file to generate a subtitle embedded video, 상기 자막 파일을 상기 동영상의 시퀀스(sequence)로 추가하는 과정인 것을 특징으로 하는 자막 제작 방법.And adding the caption file as a sequence of the video. 제1 항에 있어서,According to claim 1, 상기 자막 정보는 타임 코드별 자막으로 삽입될 텍스트 및 이미지 중 하나 이상과 템플릿 정보를 포함하는 것을 특징으로 하는 자막 제작 방법.The caption information includes at least one of text and images to be inserted as captions for each time code and template information. 제1 항에 있어서,According to claim 1, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하는 단계는,Synchronizing the caption information in the timeline of the video, 상기 동영상의 플레이헤드(play head)에 맞춰 상기 자막 정보의 타임 코드의 시작점을 일치시키는 것인 것을 특징으로 하는 자막 제작 방법. And a start point of a time code of the subtitle information according to a play head of the video. 제1 항에 있어서,According to claim 1, 상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계,Generating a subtitle file at a resolution corresponding to the resolution of the video; 상기 동영상의 해상도를 분석하는 단계;Analyzing the resolution of the video; 분석 결과 상기 동영상의 해상도가 고화질(HD)이면, 설정된 고해상도로 상기 자막 파일을 생성하는 단계; 및If the resolution of the video is high definition (HD), generating the subtitle file at a set high resolution; And 상기 동영상의 해상도가 표준화질(SD)이면, 설정된 표준해상도로 상기 자막 파일을 생성하는 단계를 포함하는 것을 특징으로 하는 자막 제작 방법.And if the resolution of the video is standard definition (SD), generating the subtitle file at a set standard resolution. 제1 항에 있어서,According to claim 1, 상기 자막 정보는 XML 기반 랭귀지로 생성되는 것을 특징으로 하는 자막 제작 방법.And the caption information is generated in an XML-based language. 제1 항에 있어서,According to claim 1, 상기 자막 의뢰 단말은,The caption request terminal, 상기 동영상의 각 프레임별 또는 타임 라인에 상응하도록 삽입할 자막에 대한 텍스트 및 이미지 중 하나 이상을 입력받고, 출력될 자막의 형태에 대한 템플릿 정보를 선택받으며, 타임 코드별로 상기 입력된 텍스트 및 이미지 중 하나 이상과 상기 템플릿 정보를 포함하는 자막 정보를 생성하는 것을 특징으로 하는 자막 제작 방법.Receive one or more of text and images of subtitles to be inserted corresponding to each frame or timeline of the video, and receive template information on the type of subtitles to be output; and among the inputted texts and images for each time code. A subtitle production method comprising generating subtitle information including at least one and the template information. 제8 항에 있어서,The method of claim 8, 상기 의뢰 단말은 상기 자막 정보 및 상기 동영상을 상기 공용 스토리지에 저장하고, 저장된 위치에 대한 정보를 포함하는 자막 의뢰 정보를 생성하여 상기 자막 생성 장치로 전송하는 것을 특징으로 하는 자막 제작 방법.The requesting terminal stores the caption information and the video in the public storage, and generates caption request information including information on the stored location and transmits the caption request information to the caption generating device. 제1 항에 있어서,According to claim 1, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계는,Synchronizing the caption information with a timeline of the video, and outputting the video and the caption information by overlaying the caption information; 제1 영역에 상기 자막 정보를 출력하는 단계;Outputting the caption information to a first area; 제2 영역에 상기 동영상을 출력하는 단계; 및Outputting the video to a second area; And 제3 영역에 상기 동영상의 타임 라인 및 상기 자막 정보의 타임 코드를 각각 출력하는 단계를 포함하되,Outputting a time code of the video and a time code of the caption information to a third region, respectively, 상기 제1 영역에 출력된 자막 정보 중 어느 하나가 선택되면, 선택된 자막 정보는 상기 제2 영역에 상기 동영상과 중첩되어 출력되는 것을 특징으로 하는 자막 제작 방법.And when one of the caption information output to the first region is selected, the selected caption information is output to be overlapped with the video in the second region. 제1 항에 있어서,According to claim 1, 상기 자막 파일은 이미지 형식으로 생성되는 것을 특징으로 하는 자막 제작 방법.And the caption file is generated in an image format. 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결되어 자막을 제작하는 자막 생성 장치에 있어서,A caption generating device connected to a caption requesting terminal and public storage through a communication network to produce captions, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 통신부;A communication unit receiving subtitle request information from the subtitle requesting terminal; 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상 정보를 상기 공용 스토리지로부터 추출하고, 구동 개시 제어 명령을 출력하는 제어부;A control unit which extracts caption information and video information corresponding to the caption request information from the public storage and outputs a driving start control command; 상기 구동 개시 제어 명령에 따라 구동되어 상기 동영상을 로딩하여 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하며, 자막 생성 명령이 입력되면, 상기 동영상의 해상도에 상응하는 자막 파일을 생성하는 자막 생성부; 및A subtitle that is driven according to the driving start control command to load and play the video, synchronize the caption information on the timeline of the video, and generate a caption file corresponding to the resolution of the video when a caption generation command is input; Generation unit; And 상기 자막 생성부의 제어에 따라 상기 동영상 및 상기 자막 정보를 중첩하여 출력하는 디스플레이부를 포함하는 자막 생성 장치.And a display unit configured to superimpose and output the video and the caption information under the control of the caption generator. 제12 항에 있어서,The method of claim 12, 자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 합성부를 더 포함하는 자막 생성 장치.And a synthesizer configured to synthesize the video and the subtitle file to generate a subtitle embedded video when the subtitle insertion command is input. 제13 항에 있어서,The method of claim 13, 상기 합성부는 상기 자막 파일을 상기 동영상의 시퀀스(sequence)로 추가하여 합성하는 것을 특징으로 하는 자막 생성 장치.And the synthesizing unit adds the subtitle file as a sequence of the video to synthesize the subtitle file. 제12 항에 있어서,The method of claim 12, 상기 자막 의뢰 정보는 상기 자막 정보 및 상기 동영상이 저장된 위치에 대한 정보를 포함하는 것을 특징으로 하는 자막 생성 장치.The caption request information includes caption information and information on a location where the video is stored. 제12 항에 있어서,The method of claim 12, 상기 자막 생성부는,The subtitle generator, 상기 동영상의 플레이 헤드(play head)에 맞춰 상기 자막 정보의 타임 코드의 시작점을 일치시켜 동기화하는 것을 특징으로 하는 자막 생성 장치.And a start point of a time code of the subtitle information is synchronized with and synchronized with a play head of the video. 제12 항에 있어서,The method of claim 12, 상기 자막 파일은 이미지 포맷으로 생성되는 것을 특징으로 하는 자막 생성 장치.And the caption file is generated in an image format. 제12 항에 있어서,The method of claim 12, 상기 자막 생성부는,The subtitle generator, 상기 동영상의 해상도를 분석하고, 분석 결과 상기 동영상의 해상도가 고화질(HD)이면 고해상도로 상기 자막 파일을 생성하고,Analyzing the resolution of the video, and if the resolution of the video is high definition (HD), generates the subtitle file in high resolution, 상기 동영상의 해상도가 표준화질이면, 표준해상도로 상기 자막 파일을 생성하는 것을 특징으로 하는 자막 생성 장치.And generating the subtitle file at the standard resolution if the resolution of the video is standardized. 제12 항에 있어서,The method of claim 12, 상기 자막 정보는 XML 기반의 랭귀지로 생성되는 것을 특징으로 하는 자막 생성 장치.And the caption information is generated in an XML based language. 제12 항에 있어서,The method of claim 12, 상기 디스플레이부는 복수의 영역으로 구분되며,The display unit is divided into a plurality of areas, 제1 영역은 상기 자막 정보가 출력되고, 제2 영역은 상기 동영상이 출력되며, 제3 영역은 상기 동영상의 타임 라인 및 상기 자막 정보의 타임 코드가 각각 출력되고,A first region outputs the caption information, a second region outputs the video, and a third region outputs a timeline of the video and a timecode of the caption information, respectively; 상기 자막 생성부의 제어에 상응하여 외부로부터 선택된 자막 정보는 상기 동영상과 중첩하여 제2 영역에 출력하는 것을 특징으로 하는 자막 생성 장치.And caption information selected from the outside in response to control of the caption generating unit and outputs caption information overlapping the video to a second region. 제20 항에 있어서,The method of claim 20, 상기 디스플레이부는 상기 자막 생성부의 제어에 따라 상기 제1 영역에 자막 정보를 각각 썸네일(thumbnail) 형식으로 출력하는 것을 특징으로 하는 자막 생성 장치.And the display unit outputs subtitle information in a thumbnail format to the first area under the control of the subtitle generator. 제12 항에 있어서,The method of claim 12, 타임 코드별 자막으로 삽입될 텍스트 및 이미지 중 하나 이상과 템플릿 정보를 포함하는 것을 특징으로 하는 자막 생성 장치.And at least one of text and an image to be inserted as a caption for each time code, and template information. 제12 항에 있어서,The method of claim 12, 상기 자막 의뢰 단말은,The caption request terminal, 상기 동영상의 각 프레임별 또는 타임 라인에 상응하도록 삽입할 자막에 대한 텍스트 및 이미지 중 하나 이상을 입력받고, 출력될 자막의 형태에 대한 템플릿 정보를 선택받으며, 타임 코드별로 상기 입력된 텍스트 및 이미지 중 하나 이상과 상기 템플릿 정보를 포함하는 자막 정보를 생성하는 것을 특징으로 하는 자막 생성 장치.Receive one or more of text and images of subtitles to be inserted corresponding to each frame or timeline of the video, and receive template information on the type of subtitles to be output; and among the inputted texts and images for each time code. And generating caption information including at least one and the template information. 제23 항에 있어서,The method of claim 23, wherein 상기 의뢰 단말은 상기 자막 정보 및 상기 동영상을 상기 공용 스토리지에 저장하고, 저장된 위치에 대한 정보를 포함하는 자막 의뢰 정보를 생성하여 상기 자막 생성 장치로 전송하는 것을 특징으로 하는 자막 생성 장치.The requesting terminal stores the caption information and the video in the public storage, and generates caption request information including information on the stored location and transmits the caption request information to the caption generating device. 제12 항에 있어서,The method of claim 12, 상기 의뢰 단말은 자막 의뢰 정보 전송시 의뢰 알림 메시지를 생성하여 통신망을 통해 전송하되,The requesting terminal generates a request notification message when transmitting the subtitle request information and transmits it through a communication network, 상기 의뢰 알림 메시지는 단문 메시지의 형태인 것을 특징으로 하는 자막 생성 장치.And the request notification message is in the form of a short message. 자막 의뢰 단말 및 공용 스토리지와 통신망을 통해 연결되어 자막을 제작하는 방법을 수행하기 위해 디지털 처리 장치에 의해 수행될 수 있는 명령어들의 프 로그램이 유형적으로 구현되어 있으며, 상기 디지털 처리 장치에 의해 판독될 수 있는 프로그램을 기록한 기록매체에 있어서,A program of instructions that can be executed by a digital processing apparatus to perform a method of producing a subtitle by being connected through a communication network with a caption requesting terminal and a public storage is tangibly embodied and can be read by the digital processing apparatus. In the recording medium which records the program, 상기 자막 의뢰 단말로부터 자막 의뢰 정보를 수신받는 단계; Receiving subtitle request information from the subtitle requesting terminal; 상기 공용 스토리지로부터 상기 자막 의뢰 정보에 상응하는 자막 정보 및 동영상을 추출하는 단계;Extracting caption information and a video corresponding to the caption request information from the public storage; 상기 동영상을 재생하고, 상기 동영상의 타임 라인에 상기 자막 정보를 동기화하고, 상기 동영상 및 자막 정보를 중첩(overlay)하여 출력하는 단계; 및Playing the video, synchronizing the caption information with a timeline of the video, and overlaying the video and the caption information to output the video; And 자막 생성 명령이 입력되면, 상기 동영상의 해상도를 분석하여 상기 동영상의 해상도에 상응하는 해상도로 자막 파일을 생성하는 단계를 수행하는 프로그램을 기록한 기록 매체.And a subtitle generating command that analyzes the resolution of the moving image and generates a subtitle file at a resolution corresponding to the resolution of the moving image. 제15 항에 있어서,The method of claim 15, 상기 자막 파일을 생성하는 단계 이후에,After generating the subtitle file, 자막 삽입 명령이 입력되면, 상기 동영상 및 상기 자막 파일을 합성하여 자막 삽입된 동영상을 생성하는 단계를 더 수행하는 프로그램을 기록한 기록 매체.And a step of synthesizing the moving image and the subtitle file to generate a subtitle inserted movie when the subtitle inserting command is input.
KR1020080138466A 2008-12-31 2008-12-31 Method and system for creating character generation based on network KR101032471B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080138466A KR101032471B1 (en) 2008-12-31 2008-12-31 Method and system for creating character generation based on network

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080138466A KR101032471B1 (en) 2008-12-31 2008-12-31 Method and system for creating character generation based on network

Publications (2)

Publication Number Publication Date
KR20100079877A true KR20100079877A (en) 2010-07-08
KR101032471B1 KR101032471B1 (en) 2011-05-03

Family

ID=42640917

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080138466A KR101032471B1 (en) 2008-12-31 2008-12-31 Method and system for creating character generation based on network

Country Status (1)

Country Link
KR (1) KR101032471B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160026296A (en) 2014-08-29 2016-03-09 주식회사 테라클 Device, method and readable recording medium for managing caption
KR20210055301A (en) * 2019-11-07 2021-05-17 조재범 Review making system
CN115834971A (en) * 2022-11-02 2023-03-21 中央广播电视总台 Subtitle generating method, device and storage medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100613859B1 (en) 2004-06-07 2006-08-21 (주)잉카엔트웍스 Apparatus and method for editing and providing multimedia data for portable device
KR100678938B1 (en) * 2004-08-28 2007-02-07 삼성전자주식회사 Apparatus and method for synchronization between moving picture and caption
KR20060027973A (en) * 2004-09-24 2006-03-29 주식회사 파미르 Apparatus for reproducing multimedia file and method of the same
KR101323979B1 (en) * 2006-12-13 2013-10-30 엘지전자 주식회사 System and Method of Supportting Portable Handler

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160026296A (en) 2014-08-29 2016-03-09 주식회사 테라클 Device, method and readable recording medium for managing caption
KR20210055301A (en) * 2019-11-07 2021-05-17 조재범 Review making system
CN115834971A (en) * 2022-11-02 2023-03-21 中央广播电视总台 Subtitle generating method, device and storage medium

Also Published As

Publication number Publication date
KR101032471B1 (en) 2011-05-03

Similar Documents

Publication Publication Date Title
US8363056B2 (en) Content generation system, content generation device, and content generation program
KR102225977B1 (en) Playback device, playback method, and recording medium
US20090317784A1 (en) Remote delivery system and remote delivery method
US20070041714A1 (en) Image and audio reproducing apparatus and method
KR102055766B1 (en) Moving Picture Summary Play Device, Moving Picture Summary Providing Server and Methods Thereof
US8582948B2 (en) Scenario editing apparatus and scenario editing method, image capturing apparatus and control method thereof, and scenario editing system
TWI221261B (en) Information storage medium including device-aspect-ratio information, method and apparatus therefor
US8774605B2 (en) Display processing apparatus, control method therefor, and display processing system
KR101032471B1 (en) Method and system for creating character generation based on network
CN105763923A (en) Video and video template editing methods and device thereof
US20060127041A1 (en) Recording and reproducing apparatus
US8768144B2 (en) Video image data reproducing apparatus
US7574105B2 (en) Device, system, method and program for data processing, recording medium storing the program, and player
KR100652763B1 (en) Method for editing moving images in a mobile terminal and apparatus therefor
JP5091502B2 (en) Subtitled video display system, server device, and terminal device
KR102558213B1 (en) Playback device, playback method, program, and recording medium
US10714146B2 (en) Recording device, recording method, reproducing device, reproducing method, and recording/reproducing device
JP2001169237A (en) Moving picture edit reproducing device
KR101245149B1 (en) Method and apparatus for providing moving pictures by producing in real time
JP4769168B2 (en) Non-linear editing apparatus and non-linear editing method
JP2006050087A (en) Moving picture processing apparatus, moving picture processing method, and program
WO2004030375A1 (en) Image data creation device, image data reproduction device, image data creation method, image data reproduction method, recording medium containing image data or image processing program, and image data recording device
JP2020010136A (en) Information processing apparatus and program
JP2006172118A (en) Image management server and image management method
JP2018157407A (en) Recording method and terminal device

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140422

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160425

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170426

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180228

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190111

Year of fee payment: 9