KR101488613B1 - System and method of searching scene of video - Google Patents
System and method of searching scene of video Download PDFInfo
- Publication number
- KR101488613B1 KR101488613B1 KR20130097212A KR20130097212A KR101488613B1 KR 101488613 B1 KR101488613 B1 KR 101488613B1 KR 20130097212 A KR20130097212 A KR 20130097212A KR 20130097212 A KR20130097212 A KR 20130097212A KR 101488613 B1 KR101488613 B1 KR 101488613B1
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- search
- sentence management
- time code
- moving picture
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/93—Regeneration of the television signal or of selected parts thereof
Abstract
Description
본 발명은 동영상을 시청할 때 화면에 표시되는 문장을 클릭하면, 내부에서 관리되는 타임 싱크 정보에 의하여 동영상이 해당시점으로 이동되어 재생하는 기술에 관한 것입니다.The present invention relates to a technique for moving a moving picture to a corresponding point in time based on internally managed time synchronization information when a sentence displayed on the screen is clicked when a moving picture is viewed.
장애를 가진 사람들이 TV 방송 콘텐츠를 이용할 수 있도록, 클로즈드 캡션(closed caption) 자막, 수화, 비디오 설명 등과 같은 서비스가 방송에 사용되고 있다. 그 중에서 클로즈드 캡션 자막이 가장 광범위하게 사용되고 있다.Services such as closed caption subtitles, sign language, video description, etc. are being used for broadcasting so that people with a disability can use TV broadcast contents. Among them, closed caption subtitles are most widely used.
비록, 현재의 방송국에서는 지상파 방송에서만 전면적으로 클로즈드 캡션 자막을 지원하고 있지만, 점차적으로 웹 또는 모바일 환경의 멀티미디어에도 클로즈드 캡션 자막이 지원될 것으로 예상되며, 최근에는 종합편성채널이나 케이블에서도 서비스 시작 단계에 있는 추세이다.Although current broadcasting stations support closed captioning entirely only in terrestrial broadcasting, it is expected that closed captioning subtitles will be gradually supported in multimedia on the web or mobile environment. In recent years, There is a trend.
또한, 클로즈드 캡션 자막은 키워드 추출 또는 장면 검색을 위한 프로그램의 메타데이터로서 가치있는 자원으로 고려될 수 있으며 외국어 번역을 위한 초본으로 사용될 수 있다.In addition, closed caption subtitles can be considered as a valuable resource as metadata of a program for keyword extraction or scene retrieval, and can be used as a translation for foreign language translation.
그러므로, 방송국들은 클로즈드 캡션 자막을 효율적으로 재 사용하기 위한 방법 또는 새로운 시스템에 대한 필요에 직면하고 있다. 위와 같은 클로즈드 캡션 자막의 재사용 방법과 새로운 시스템은 클로즈드 캡션 자막의 특성과 현재 사용되고 있는 시스템과의 호환성으로 고려하여 설계될 필요가 있다.Therefore, broadcasters are faced with the need for a new system or a method for efficiently reusing closed caption subtitles. The method of reusing the closed caption caption and the new system should be designed considering the characteristics of the closed caption caption and the compatibility with the currently used system.
2008년 이후로, 한국에서는 장애인들이 방송 콘텐츠에 액세스할 수 있는 권리가 법적으로 보장되었다. 2011년에는 자막 제공 의무 사업자, 자막 제공 프로그램 비율과 같은 장애인들의 방송 콘텐츠 액세스를 위한 구체적인 가이드라인이 제정되었다.Since 2008, the right of people with disabilities to access broadcast content has been legally guaranteed in Korea. In 2011, specific guidelines were established for accessing broadcast content for people with disabilities, such as subtitling providers and the proportion of subtitle provision programs.
일실시예에 따른 동영상 검색 시스템은 동영상을 표시하는 제1 표시부, 상기 동영상의 자막 파일의 텍스트만을 연결하여 가독성 있는 텍스트 창으로 표시하는 제2 표시부, 상기 표시되는 텍스트 창에서 특정 내부 문장 관리단위가 선택되면, 상기 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출하는 독출부, 및 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 표시되도록 상기 제1 표시부를 제어하는 제어부를 포함할 수 있다.A moving picture search system according to an embodiment of the present invention includes a first display unit for displaying a moving picture, a second display unit for displaying only the text of the moving picture caption file in a readable text window, And a control unit for controlling the first display unit to display a position corresponding to the read time code from among the moving pictures when the selected time code is selected, have.
일실시예에 따른 동영상 검색 시스템은 상기 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 상기 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장하는 저장부를 더 포함할 수 있다.The moving picture search system according to an exemplary embodiment of the present invention may include at least one time code included in the subtitle file of the moving picture and a time code mapping information in which at least one internal sentence management unit corresponding to the at least one time code is mapped And the like.
일실시예에 따른 동영상 검색 시스템은 검색어가 입력되면, 상기 내부 문장 관리단위 중에서 상기 입력된 검색어에 상응하는 부분을 검색하는 검색부를 더 포함할 수 있다.The moving picture search system according to an exemplary embodiment may further include a search unit for searching a portion corresponding to the inputted search word from among the internal sentence management units when a search word is input.
일실시예에 따른 동영상 검색 시스템은 여러 단어의 조합으로 이루어진 검색어가 입력되면, 상기 내부 문장 관리단위 중에서 상기 입력된 여러 단어가 모두 포함되어 있는 내부 문장 관리단위를 검색하는 검색부를 더 포함할 수 있다.The moving picture search system according to an embodiment may further include a search unit for searching an inner sentence management unit including a plurality of the input words among the inner sentence management units when a search word composed of a combination of words is input .
일실시예에 따른 동영상 검색 시스템은 여러 단어의 조합으로 이루어진 검색어가 입력되면, 단락 검색을 위하여 사전에 설정된 크기의 인접한 여러 내부 문장 관리단위로 이루어진 단락 내에서 상기 입력된 여러 단어가 모두 포함되어 있는 단락을 검색하는 검색부를 더 포함할 수 있다.In a moving picture search system according to an exemplary embodiment, when a search word composed of a combination of several words is input, all the input words are included in a paragraph made up of adjacent internal sentence management units of a preset size for a paragraph search And a search unit for searching for a paragraph.
일실시예에 따른 검색부는, 상기 검색된 검색어에 상응하는 부분이 강조되도록 상기 제2 표시부를 제어할 수 있다.The search unit according to an embodiment may control the second display unit so that a portion corresponding to the searched search word is emphasized.
일실시예에 따른 검색부는, 상기 검색된 검색어에 상응하는 부분을 카운팅하고, 카운팅 결과를 상기 제2 표시부에 표시할 수 있다.The search unit according to an embodiment may count a portion corresponding to the searched search word and display a counting result on the second display unit.
일실시예에 따른 검색부는, 상기 검색된 검색어가 존재하는 부분들의 위치를 제2 표시부의 스크롤바에 표시할 수 있다.The search unit according to an exemplary embodiment may display a position of a portion where the searched search word exists on a scroll bar of the second display unit.
일실시예에 따른 검색부는, 상기 검색된 검색어가 제2 표시부의 여러 부분에 존재하는 경우, 현재 선택된 지점에서 다음 지점 또는 이전 지점으로 이동하게 할 수 있다. The search unit according to an exemplary embodiment may cause the search term to move from a currently selected point to a next point or a previous point when the searched term exists in various portions of the second display unit.
일실시예에 따른 검색부는, 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어할 수 있다.The search unit may control the first display unit such that the position corresponding to the read time code is repeatedly displayed for a predetermined number of times in the moving image.
일실시예에 따른 상기 독출부는, 상기 표시되는 내부 문장 관리단위 중에서 제1 내부 문장 관리단위와 제2 내부 문장 관리단위가 선택되면, 상기 제1 내부 문장 관리단위 및 상기 제2 내부 문장 관리단위에 상응하는 타임코드를 독출하고, 상기 제어부는, 상기 동영상 중에서 상기 제1 내부 문장 관리단위에 상응하는 위치와 상기 제2 내부 문장 관리단위에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어할 수 있다.If the first and second inner sentence management units are selected from among the displayed inner sentence management units, the reading unit may read the first inner sentence management unit and the second inner sentence management unit Wherein the control unit reads the time code corresponding to the second internal statement management unit and repeatedly displays a position corresponding to the first internal statement management unit and a position corresponding to the second internal statement management unit, The display unit can be controlled.
일실시예에 따른 동영상 검색 시스템은 상기 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신하면, 상기 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하고, 상기 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집하는 편집부를 더 포함할 수 있다.The moving picture retrieval system according to an exemplary embodiment of the present invention checks a time code corresponding to the specific inner sentence management unit when receiving an edit input for a specific inner sentence management unit among the displayed inner sentence management units, And an editing unit for editing a portion corresponding to the time code.
일실시예에 따른 동영상 검색 방법은 제1 표시부에서, 동영상을 표시하는 단계, 제2 표시부에서, 상기 동영상의 자막 파일에 포함되는 텍스트들을 연결하여 완성한 텍스트 창을 표시하는 단계, 독출부에서, 상기 표시되는 텍스트 창 중에서 특정 내부 문장 관리단위가 선택되면, 상기 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출하는 단계, 및 제어부에서, 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 표시되도록 상기 제1 표시부를 제어하는 단계를 포함할 수 있다.The moving picture search method according to an embodiment includes displaying a moving picture on a first display unit, displaying a text window completed by concatenating texts included in a moving picture caption file on a second display unit, Reading a time code corresponding to the selected internal sentence management unit when a specific internal sentence management unit is selected from a displayed text window, and displaying a position corresponding to the read out time code in the moving picture And controlling the first display unit to display the first display unit.
일실시예에 따른 동영상 검색 방법은 저장부에서, 상기 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 상기 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, there is provided a method for searching a moving picture, comprising the steps of: storing at least one time code included in a subtitle file of the moving picture and at least one internal sentence management unit corresponding to the at least one time code, The method may further include the step of:
일실시예에 따른 동영상 검색 방법은 검색부에서, 검색어가 입력되면 상기 내부 문장 관리단위 중에서 상기 입력된 검색어에 상응하는 부분을 검색하는 단계를 더 포함할 수 있다.The moving picture search method according to an exemplary embodiment may further include searching a portion corresponding to the inputted search word from the internal sentence management units when a search word is input in the search unit.
일실시예에 따른 동영상 검색 방법은 검색부에서, 여러 단어의 조합으로 이루어진 검색어가 입력되면 상기 입력된 여러 단어가 모두 포함되어 있는 내부 문장 관리단위를 검색하는 단계를 더 포함할 수 있다.The moving picture search method according to an exemplary embodiment of the present invention may further include searching an inner sentence management unit including a plurality of input words when a search word composed of a plurality of words is input in the search unit.
일실시예에 따른 동영상 검색 방법은 검색부에서, 여러 단어의 조합으로 이루어진 검색어가 입력되면, 단락 검색을 위하여 사전에 설정된 크기의 인접한 여러 내부 문장 관리단위로 이루어진 단락 내에서 상기 입력된 여러 단어가 모두 포함되어 있는 단락을 검색하는 단계를 더 포함할 수 있다.In a moving picture search method according to an exemplary embodiment, when a search word composed of a plurality of words is input in a search unit, a plurality of words are input in a paragraph consisting of adjacent internal sentence management units of a predetermined size for a paragraph search And searching for all included paragraphs.
일실시예에 따른 상기 제1 표시부를 제어하는 상기 단계는 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어하는 단계를 포함할 수 있다.The step of controlling the first display unit according to an embodiment may include controlling the first display unit such that a position corresponding to the read time code is repeatedly displayed for a predetermined number of times among the moving images.
일실시예에 따른 동영상 검색 방법은 편집부에서, 상기 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신하면, 상기 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하는 단계, 및 상기 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집하는 단계를 더 포함할 수 있다.The moving picture search method according to an exemplary embodiment of the present invention includes the steps of: when an editing unit receives an editing input for a specific inner sentence management unit among the displayed inner sentence management units, checking a time code corresponding to the specific inner sentence management unit; And editing a portion corresponding to the identified time code among the moving images.
도 1은 본 발명의 일실시예에 따른 동영상 장면 검색 시스템을 설명하는 도면이다.
도 2는 본 발명의 다른 일실시예에 따른 동영상 장면 검색 시스템을 설명하는 도면이다.
도 3은 자막 파일을 텍스트화하는 실시예를 설명하는 도면이다.
도 4 내지 7은 본 발명의 일실시예에 따른 동영상 장면 검색을 위한 유저인터페이스의 실시예들을 설명하는 도면이다.
도 8은 본 발명의 일실시예에 따른 동영상 장면 검색 방법을 설명하는 도면이다.
도 9는 본 발명의 일실시예에 따른 캡션 자막 보정 장치의 블록도이다.1 is a diagram illustrating a moving picture scene search system according to an embodiment of the present invention.
2 is a diagram illustrating a moving picture scene search system according to another embodiment of the present invention.
Fig. 3 is a diagram for explaining an embodiment in which a caption file is textized.
FIGS. 4 to 7 are diagrams illustrating embodiments of a user interface for moving picture scene search according to an embodiment of the present invention.
8 is a view for explaining a moving picture scene search method according to an embodiment of the present invention.
9 is a block diagram of a caption subtitle correction apparatus according to an embodiment of the present invention.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.
본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.In the following description of the present invention, detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. The terminologies used herein are terms used to properly represent preferred embodiments of the present invention, which may vary depending on the user, the intent of the operator, or the practice of the field to which the present invention belongs. Therefore, the definitions of these terms should be based on the contents throughout this specification. Like reference symbols in the drawings denote like elements.
도 1은 본 발명의 일실시예에 따른 동영상 장면 검색 시스템(100)을 설명하는 도면이다.1 is a diagram illustrating a moving picture
본 발명의 일실시예에 따른 동영상 장면 검색 시스템(100)은 제1 표시부(110), 제2 표시부(120), 독출부(130), 및 제어부(140)를 포함할 수 있다.The moving picture
일실시예에 따른 제1 표시부(110)는 동영상을 표시하고, 제2 표시부(120)는 동영상의 자막 파일에 포함되는 타임코드 정보를 이용한 내부 문장 관리단위를 갖고 있으면서 자막 파일에 포함되는 텍스트만을 연결하여 가독성 있는 텍스트를 표시할 수 있다. The
동영상은 방송 컨텐츠에 포함될 수 있고, 내부 문장 관리단위는 클로즈드 캡션(closed captioning) 방식에 따라 수신되는 자막 파일 내에 포함되는 텍스트 정보로 해석될 수 있다. 내부 문장 관리단위는 제2 표시부(120)에서 사용자가 선택할 수 있는 단위로서, 자막 파일의 타임코드와 1:1로 맵핑될 수 있다. 일례로, 내부 문장 관리단위는 자막 파일의 각 라인이거나, 적어도 하나 이상의 라인들로부터 완성되는 하나의 문장일 수도 있으며 의미상 구분되는 단락일 수 있다. 내부 문장 관리단위에 대해서는 추후 도 3에서 보다 상세히 설명한다.The moving picture may be included in the broadcast content and the inner sentence management unit may be interpreted as text information included in the received subtitle file according to a closed captioning scheme. The internal sentence management unit can be selected by the user on the
일실시예에 따른 독출부(130)는 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위가 선택되면, 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출할 수 있다.The
일실시예에 따른 제어부(140)는 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 표시되도록 제1 표시부(110)를 제어할 수 있다.The
다른 일실시예에 따른 제어부(140)는 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부(110)를 제어할 수 있다. The
또 다른 일실시예에 따른 제어부(140)는 구간 반복 기능을 제공할 수도 있다. 구체적으로, 사용자가 오른쪽에 표시되는 자막들을 제1 선택, 제2 선택하면, 동영상 장면 검색 시스템(100)은 선택된 자막들에 해당하는 동영상 구간을 반복하여 재생할 수 있다. 이를 위해, 독출부(130)는 표시되는 내부 문장 관리단위 중에서 제1 내부 문장 관리단위와 제2 내부 문장 관리단위가 선택되면, 상기 제1 내부 문장 관리단위 및 상기 제2 내부 문장 관리단위에 상응하는 타임코드를 독출할 수 있다. 또한, 제어부(140)는 상기 동영상 중에서 상기 제1 내부 문장 관리단위에 상응하는 위치와 상기 제2 내부 문장 관리단위에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 제1 표시부(110)를 제어할 수 있다.The
도 2는 본 발명의 다른 일실시예에 따른 동영상 장면 검색 시스템(200)을 설명하는 도면이다.2 is a diagram illustrating a moving picture
일실시예에 따른 동영상 장면 검색 시스템(200)은 제1 표시부(210), 제2 표시부(220), 독출부(230), 및 제어부(240) 이외에도, 저장부(250), 검색부(260), 편집부(270)를 더 포함할 수 있다.The moving picture
일실시예에 따른 저장부(250)는 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장할 수 있다.The
일실시예에 따른 검색부(260)는 검색어가 입력되면, 내부 문장 관리단위 중에서 입력된 검색어에 상응하는 부분을 검색할 수 있다. 예를 들어, 검색부(260)는 입력된 검색어에 대해서 제2 표시부(220)에 표시된 텍스트들 중에서 검색어에 상응하는 단어를 검색할 수 있다. The
뿐만 아니라, 검색부(260)는 검색된 검색어에 상응하는 부분이 강조되도록 상기 제2 표시부를 제어할 수 있다. 예를 들어, 검색부(260)는 검색된 검색어와 다른 텍스트들이 구별될 수 있도록 검색된 검색어의 굵기, 색상 등을 변경하도록 제2 표시부(220)를 제어할 수 있다. 또 다른 예로, 검색부(260)는 검색된 검색어에 상응하는 부분을 카운팅하고, 카운팅 결과를 제2 표시부(220)에 표시할 수 있다. 예를 들어, 검색부(260)는 제2 표시부(220)가 표시하는 내부 문장 관리단위들을 포함하는 캡션 자막 중에서 검색어가 포함된 부분이 몇 개인지를 확인한 후 확인된 개수를 제2 표시부(220)에 추가로 표시할 수 있다. 또 다른 예로, 검색어가 포함된 내부 문장 관리 단위들의 위치를 제2 표시부(220)의 스크롤바에 표시하여 검색어가 포함된 부분들의 위치나 분포를 한 눈에 확인할 수 있게 표시할 수 있다.
In addition, the
일실시예에 따른 편집부(270)는 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신할 수 있다. 이러한 경우, 편집부(270)는 상기 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하고, 상기 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집할 수 있다.The
문서편집에 익숙한 일반적인 사용자들에게는 동영상의 타임 라인을 확인하면서 편집하는 것 보다 자막 편집을 통해서 동영상을 편집하는 것이 편리하다. 따라서, 일실시예에 따른 편집부(270)는 타임코드와 연동되고, 제2 표시부(220)를 통해서 표시되는 내부 문장 관리단위에 대해서 텍스트 기반의 편집을 수행하고, 이를 동영상의 편집에 반영함으로써, 동영상 편집을 수월하게 할 수 있다.For ordinary users who are familiar with editing documents, it is convenient to edit the video through subtitle editing rather than viewing the timeline of the video. Accordingly, the
일실시예에 따른 편집부(270)는 텍스트 기반의 편집으로서, 내부 문장 관리단위에 대한 삭제, 복사 및 붙여넣기 등을 수행할 수 있고, 이렇게 편집된 내부 문장 관리단위와 연결된 타임코드에 기초하여, 동영상의 적어도 일부분에 대해 삭제, 복사 및 붙여넣기 등을 편집을 수행할 수 있다.The
도 3은 자막 파일을 텍스트화하는 실시예를 설명하는 도면이다.Fig. 3 is a diagram for explaining an embodiment in which a caption file is textized.
도 3에서 보는 바와 같이, 자막 파일(310)은 내부 문장 관리단위(320)로 텍스트화될 수 있다. 이 때 내부 문장 관리단위(320)와 함께 자막 파일(310)에 포함되어 있는 타임코드<SYNC Start=215021>는 내부 로직을 통해 관리될 수 있고, 제2 표시부에서는 내부 문장 관리단위(320)만이 표시될 수 있다.As shown in FIG. 3, the
내부 문장 관리단위(320)는 자막 파일(310) 중에서 원본의 각 라인일 수도 있고, 완결된 문장 단위일 수도 있으며 의미상 구분되는 단락일 수 있다.The internal
예를 들어서, 자막 파일(310) 중에서는 타임코드<SYNC Start=215021>로 구분되는 "시청자분들이 정말 우리끼리만 너무 재"의 자막과, 타임코드<SYNC Start=215071>로 구분되는 "미있어 하는 것 같다고."의 자막을 포함할 수 있다.For example, in the
이 때 타임코드<SYNC Start=215021>로 구분되는 "시청자분들이 정말 우리끼리만 너무 재"의 자막과, 타임코드<SYNC Start=215071>로 구분되는 "미있어 하는 것 같다고."의 자막은 서로 다른 라인으로서, 각각의 자막을 서로 다른 내부 문장 관리단위로 표시할 수 있다. 또 다른 예로, 타임코드<SYNC Start=215021>로 구분되는 "시청자분들이 정말 우리끼리만 너무 재"의 자막과, 타임코드<SYNC Start=215071>로 구분되는 "미있어 하는 것 같다고."의 자막이 비록 다른 타임코드로 구분되지만, 하나의 완결된 문장의 단위인 점을 고려하여 단일의 내부 문장 관리단위로 표시할 수 있다. 단일의 내부 문장 관리단위로 표시하는 경우, "시청자분들이 정말 우리끼리만 너무 재미있어 하는 것 같다고."의 자막에 해당하는 타임 코드는 내부 문장 관리단위가 시작되는 시점인 타임코드<SYNC Start=215021>로 구분될 수 있다.In this case, the subtitles of "I think it seems to be missed" that the time code "SYNC Start = 215021" is divided into "Subtitle of the audience is really too much alone" and time code <SYNC Start = 215071> As another line, each subtitle can be displayed in a different internal sentence management unit. As another example, subtitles of the subtitles of "the viewers are really too far between us" separated by the time code <SYNC Start = 215021> and subtitles of "I think it seems to be missed" by the time code <SYNC Start = 215071> Although it is divided into different time codes, it can be represented as a single internal sentence management unit considering that it is a unit of a completed sentence. The time code corresponding to the caption of "It seems that the viewers are really only very funny among us. &Quot; when displaying a single inner sentence management unit, the time code <SYNC Start = 215021 ≫.
도 4 내지 7은 본 발명의 일실시예에 따른 동영상 장면 검색을 위한 유저인터페이스의 실시예들을 설명하는 도면이다.FIGS. 4 to 7 are diagrams illustrating embodiments of a user interface for moving picture scene search according to an embodiment of the present invention.
먼저, 도 4를 살펴보면, 일실시예에 따른 동영상 장면 검색 시스템은 제1 표시부를 통해 동영상(410)을 표시하고, 제2 표시부를 통해 동영상에 근접한 위치에 내부 문장 관리단위들을 포함하는 텍스트(420)를 표시할 수 있다.4, a moving picture scene search system according to an exemplary embodiment displays a moving
사용자는 마우스 등의 입력 장치를 통해서 도면부호 430와 같이 동영상의 이동을 원하는 내부 문장 관리단위로서, "-시청자 여러분께 경례-"를 선택할 수 있다.The user can select "salute to viewers" as an internal sentence management unit that desires to move the moving picture like the
본 발명의 일실시예에 따른 독출부는 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위가 선택되면, 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출할 수 있다. 즉, 사용자로부터 선택된 "-시청자 여러분께 경례-"에 상응하는 타임코드를 독출할 수 있다.The reading unit according to an embodiment of the present invention can read a time code corresponding to a selected specific internal sentence management unit when a specific internal sentence management unit is selected from displayed internal sentence management units. That is, the time code corresponding to "- salute to viewers" selected by the user can be read.
본 발명의 일실시예에 따른 독출부는 자막 파일로부터 "-시청자 여러분께 경례-"에 상응하는 타임코드를 독출할 수 있다.The reading unit according to the embodiment of the present invention can read the time code corresponding to "salute to the viewer" from the subtitle file.
또한, 일실시예에 따른 제어부는 독출된 타임코드에 상응하는 위치가 표시되도록 제1 표시부를 제어할 수 있다. 제1 표시부의 제어에 따라서, 표시되는 동영상(410)은 상기 독출된 타임코드에 상응하는 위치로 이동하여 "-시청자 여러분께 경례-"에 해당하는 부분을 재생할 수 있다.In addition, the controller may control the first display unit to display a position corresponding to the read time code. According to the control of the first display unit, the displayed moving
도 5에서는 사용자가 검색어를 입력하는 실시예에 대해서 설명한다.5 shows an embodiment in which a user inputs a search word.
일실시예에 따른 검색부는 검색어가 입력되면, 내부 문장 관리단위 중에서 입력된 검색어에 상응하는 부분을 검색할 수 있다. 예를 들어, 도면부호 530과 같이 사용자가 검색어로서 "홈런"을 입력하여 검색을 클릭하는 경우, 일실시예에 따른 검색부는 내부 문장 관리단위들을 포함하는 텍스트(520) 내에서 "홈런"이 포함된 부분을 검색할 수 있다. 도면부호 540은 "홈런"의 검색어를 포함하는 내부 문장 관리단위로서 검색부를 통해서 검색될 수 있다.When a search word is input, the search unit according to an exemplary embodiment may search for a portion corresponding to the input search word among the internal sentence management units. For example, when a user inputs a "home run" as a search term, such as 530, the search unit according to an embodiment includes a "home run" in the
만약, "홈런"의 검색어를 포함하는 내부 문장 관리단위가 텍스트(520) 내에 많이 포함된 경우라면, 앞으로 버튼 또는 뒤로 버튼을 통해 검색단어의 이전 또는 다음 위치로 이동하여 검색할 수 있다.If the internal sentence management unit including the search term of the "home run" is included in the
또한, 일실시예에 따른 검색부는 "홈런"을 이용한 검색 결과로서, 텍스트(520) 내에서 "홈런"이 사용된 횟수를 표시할 수도 있다. 또한, 일실시예에 따른 검색부는 텍스트(520) 내에서 검색어가 포함된 부분을 하이라이트 등을 이용하여 강조할 수 있고, 타임코드가 가장 빠른 위치에 해당하는 검색어를 표시할 수도 있다.Further, the search unit according to the embodiment may display the number of times the "home run" is used in the
또한, 일실시예에 따른 검색부는 텍스트(520) 내에서 검색어가 포함된 부분을 스크롤바에 표시할 수 있다. 따라서, 사용자는 스크롤을 통해 텍스트(520)를 순차적으로 전부 검색할 필요없이, 스크롤바에 표시된 부분만을 선택하여 검색어가 표시된 부분을 찾을 수 있으며 해당 검색어의 분포를 한 눈에 파악할 수 있다.In addition, the search unit according to one embodiment may display a portion including the search word in the
사용자가 도면부호 540의 내부 문장 관리단위를 선택하는 경우, 일실시예에 따른 독출부는 도면부호 540의 내부 문장 관리단위에 해당하는 타임코드를 독출하고, 제1 표시부는 상기 독출한 타임코드에 상응하는 위치에서 동영상(510)을 재생시킬 수 있다.When the user selects the inner sentence management unit of the
도 6을 살펴보면, 일실시예에 따른 검색부는 입력되는 검색어가 복수개인 경우에 텍스트(620) 내에서 해당하는 검색어가 모두 포함된 내부 문장 관리단위(640)만을 검색할 수 있다.Referring to FIG. 6, in a case where a plurality of search terms are input, the search unit according to an exemplary embodiment may search only the internal
구체적으로, 도면부호 630과 같이 입력되는 검색어가 "아이유"와 "스크랩"인 경우에, 일실시예에 따른 검색부는 텍스트(620) 내부에서 "아이유"와 "스크랩"이 모두 포함되어 있는 내부 문장 관리단위로서, "-아이유를 스크랩북을 함께하게 계십니다."의 내부 문장 관리단위(640)를 검색할 수 있다. 또한, 일실시예에 따른 검색부는 검색된 내부 문장 관리단위(640)에 대해 폰트 컬러를 변경시켜 다른 내부 문장 관리단위들과 차별시킬 수 있다.Specifically, the reference number when the search term is input as shown in 630 is "IU" and "Bookmark", an exemplary search according to the example section inside which is included within the text (620) all of the "IU" and "scrap" sentences an administrative unit, "- gyesipnida to the IU with the scrapbook" can retrieve the internal
일례로, 일실시예에 따른 검색부는 텍스트(620) 중에서 현재 화면 상에서 표시되는 부분에 대해서만 검색할 수도 있다.For example, the search unit according to an exemplary embodiment may search only the portion of the
사용자가 검색된 내부 문장 관리단위(640)를 선택하는 경우, 일실시예에 따른 독출부는 도면부호 640의 내부 문장 관리단위에 해당하는 타임코드를 독출하고, 제1 표시부는 상기 독출한 타임코드에 상응하는 위치에서 동영상(610)을 재생시킬 수 있다.When the user selects the searched internal
도 7을 살펴보면, 일실시예에 따른 검색부는 입력되는 검색어가 복수개인 경우에 텍스트(730) 내에서 해당하는 검색어가 포함된 내부 문장 관리단위를 검색할 수 있다. 이때, 복수개의 검색어를 내부 문장 관리 단위에서 검색하여 복수개의 검색어가 내부 문장 관리 단위에 모두 존재하는지를 찾을 수 있다. 그런데, 복수의 검색어가 모두 포함된 내부 관리 단위가 없는 경우 문장 내부 관리 단위를 확장하여 여러 줄, 예를 들어 텍스트 창에서 눈에 보이는 길이, 즉 구간에서 복수개의 검색어들을 검색할 수 있다. 구간 검색을 위해서는, 사용자가 해당 구간 좌측의 구간 표시(710)를 클릭하고, 구간 표시(710)가 클릭됨에 따라 구간의 시작점 끝점을 누른 것과 같은 효과를 얻을 수 있다.Referring to FIG. 7, the search unit according to an exemplary embodiment may search an inner sentence management unit including a corresponding search term in the
구체적으로, 도면부호 720과 같이 입력되는 검색어가 "이효리"와 "매점"인 경우에, 일실시예에 따른 검색부는 텍스트(730) 내부에서 "이효리"와 "매점" 중에서 어느 하나의 검색어가 포함된 내부 문장 관리단위들을 모두 검색할 수 있다.Specifically, in the case where the search word input as
이 때의 내부 문장 관리 단위는 한 문장 단위일 수도 있고, 도면부호 710으로 구분되는 구간의 단위일 수도 있다.The internal sentence management unit at this time may be a sentence unit or may be a unit of an interval defined by
예를 들어, 해피투게더의 특정코너의 야간매점에서 이효리가 메뉴를 소개하는 장면을 찾고 싶으면 검색창에 "이효리, 매점"이라고 검색했을 때, 한 내부 문장 관리 단위 안에 두 단어가 모두 존재하지 않으므로 텍스트(730)의 눈에 보이는 길이, 즉 구간에서 두 단어가 모두 존재하는 구간을 찾아서 구간 반복 재생이나 동영상 구간 편집이 가능한 구간을 선택할 수 있도록 표시할 수 있다.For example, if you want to find a scene where Lee Hyo Lee introduces a menu at a night corner of Happy Together's specific corner, if you search for "Lee Hyo Lee, Shop" in the search box, It is possible to search for a segment in which both words are present in the segment, that is, the segment that can be repeatedly reproduced or edited.
도면부호 740은 전체의 스크롤 영역 중에서 검색어로 입력된 "이효리", "매점"의 검색어가 포함되어 있는 부분을 표시하는 것이다.
사용자가 검색된 단락 안에서 검색된 내부 문장 관리단위를 선택하는 경우, 일실시예에 따른 독출부는 선택된 내부 문장 관리단위에 해당하는 타임코드를 독출하고, 제1 표시부는 상기 독출한 타임코드에 상응하는 위치에서 동영상을 재생시킬 수 있다.When the user selects an inner sentence management unit searched in the searched paragraph, the reading unit reads the time code corresponding to the selected inner sentence management unit, and the first display unit reads the time code corresponding to the selected inner sentence management unit at a position corresponding to the read time code The video can be played back.
도 8은 본 발명의 일실시예에 따른 동영상 장면 검색 방법을 설명하는 도면이다.8 is a view for explaining a moving picture scene search method according to an embodiment of the present invention.
본 발명의 일실시예에 따른 동영상 장면 검색 방법은 동영상을 표시하고(단계 801), 상기 표시되는 동영상의 자막 파일에 포함되는 내부 문장 관리단위를 상기 동영상에 인접한 위치에 표시할 수 있다(단계 802).In the moving picture scene search method according to an embodiment of the present invention, a moving picture is displayed (Step 801), and an inner sentence management unit included in the subtitle file of the displayed moving picture is displayed at a position adjacent to the moving picture ).
본 발명의 일실시예에 따른 동영상 장면 검색 방법은 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위가 선택되었는지 여부를 확인할 수 있다(단계 803). 만약, 사용자로부터의 선택 입력이 있었다면, 본 발명의 일실시예에 따른 동영상 장면 검색 방법은 특정 내부 문장 관리단위가 선택을 확인하고, 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출할 수 있다(단계 804). 또한, 본 발명의 일실시예에 따른 동영상 장면 검색 방법은 독출된 타임코드를 이용하여 현재 표시되는 동영상 중에서 독출된 타임코드에 상응하는 위치가 표시되도록 제1 표시부를 제어할 수 있다(단계 805).The moving picture scene search method according to an embodiment of the present invention can check whether a specific inner sentence management unit is selected from displayed inner sentence management units (step 803). If there is a selection input from the user, the moving picture scene search method according to an embodiment of the present invention can confirm the selection by a specific inner sentence management unit and read the time code corresponding to the selected inner sentence management unit (Step 804). In addition, the moving picture scene search method according to an embodiment of the present invention may control the first display unit to display a position corresponding to the time code read out from the currently displayed moving picture using the read time code (Step 805) .
본 발명의 일실시예에 따른 동영상 장면 검색 방법은 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 상기 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장하고 이를 유지할 수 있다. 또한, 일실시예에 따른 동영상 장면 검색 방법은 특정 내부 문장 관리단위가 선택되면 저장된 타임코드 맵핑 정보를 참조하여, 선택된 특정 내부 문장 관리단위에 해당하는 타임코드를 독출할 수 있다.The moving picture scene search method according to an embodiment of the present invention may include at least one time code included in a caption file of a moving picture and time code mapping information mapped with at least one internal sentence management unit corresponding to the at least one time code You can save and keep it. In addition, in the moving picture scene search method according to an embodiment, when a specific inner sentence management unit is selected, the time code corresponding to the selected inner sentence management unit can be read by referring to the stored time code mapping information.
일실시예에 따른 동영상 장면 검색 방법은 검색어가 입력되면 상기 내부 문장 관리단위 중에서 상기 입력된 검색어에 상응하는 부분을 검색할 수도 있다. 뿐만 아니라, 검색된 결과를 하이라이트, 폰트 크기, 폰트 색상 등을 변경하여 강조할 수도 있다.The moving picture scene search method according to an exemplary embodiment may search a portion corresponding to the inputted search word from among the inner sentence management units when a search word is input. In addition, the retrieved result can be emphasized by changing the highlight, font size, font color, and the like.
일실시예에 따른 동영상 장면 검색 방법은 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어할 수 있다. The moving picture scene search method according to an embodiment may control the first display unit such that a position corresponding to the read time code is repeatedly displayed for a predetermined number of times among the moving pictures.
뿐만 아니라, 일실시예에 따른 동영상 장면 검색 방법은 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신하면, 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하고, 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집할 수도 있다.In addition, when a moving picture scene search method according to an exemplary embodiment receives an editing input for a specific inner sentence management unit among displayed inner sentence management units, it checks a time code corresponding to a specific inner sentence management unit, You can also edit the part corresponding to the identified time code.
본 발명의 일실시예에 따른 동영상 장면 검색 시스템은 캡션 자막 보정 장치에 의해서 보정되는 자막 파일을 이용하여, 내부 문장 관리단위들을 포함하는 캡션 자막을 생성할 수 있다. 일실시예에 따른 캡션 자막 보정 장치는 도 9에서 상세히 설명한다.The moving picture scene search system according to an embodiment of the present invention can generate a caption subtitle including internal sentence management units by using a subtitle file corrected by the caption subtitle correction apparatus. The caption subtitle correction apparatus according to one embodiment will be described in detail with reference to FIG.
도 9는 본 발명의 일실시예에 따른 캡션 자막 보정 장치의 블록도이다.9 is a block diagram of a caption subtitle correction apparatus according to an embodiment of the present invention.
도 9를 참조하면, 일실시예에 따른 캡션 자막 보정 장치는 수신부(910), 자막 데이터 생성부(920) 및 보정부(930)를 필수적 구성으로 포함할 수 있다. 다른 일실시예에 따른 캡션 자막 보정 장치는 추가적 구성으로서, 폴더 모니터링부(940), 스케줄 모니터링부(950), 필터링부(960), 수동 보정부(970)를 포함할 수 있다.Referring to FIG. 9, a caption subtitle correction apparatus according to an embodiment may include a receiving
수신부(910)는 방송의 음성에 대응한 속기(stenography)를 통해 생성된 캡션(caption) 자막 및 방송의 편성 스케줄 정보를 수신한다. 여기서, 캡션 자막은 장애인을 위한 클로즈드 캡션 자막을 의미한다. 캡션 자막은 방송 프로그램에서 음성에 대응하는 모든 텍스트를 포함한다. The receiving
실시간으로 속기에 의하여 생성된 자막 데이터가 방송사로 연결된 전용 모뎀을 통하여 전달되면 수신부(910)는 해당 데이터가 DTV 인서터와 인코더로 전달되기 전 단계에 분기하여 자막 수신 시간과 텍스트를 로그 형태로 저장하거나 실시간으로 바로 자막데이터 생성부(920)로 전달할 수 있다. If the caption data generated by the shorthanding in real time is transmitted through a dedicated modem connected to the broadcasting company, the receiving
방송의 편성 스케줄 정보는 APC(Automatic Program Control)에 의하여 통제되므로 APC는 편성 정보 변경 내역과 정보를 가장 정확하게 반영한다. 수신부(910)는 APC와 연결된 스케줄 인터페이스로부터 방송의 편성 스케줄 정보를 수신할 수 있다. 수신부(910)는 SOAP(Simple Object Access Protocol) 또는 Restful 웹 서비스 방식으로 스케줄 인터페이스로부터 편성 스케줄 정보를 수신할 수 있다. 예를 들어, 방송의 편성 스케줄 정보는 시간 대 별로 스케줄링 된 방송 프로그램에 대한 제목, 방송 시간, 방송 프로그램의 고유 식별자(Program ID), 방송 프로그램의 간단한 설명, 방송 프로그램의 회차 등을 포함할 수 있다. Broadcast scheduling information is controlled by APC (Automatic Program Control), so APC most accurately reflects changes in schedule information and information. The
자막 데이터 생성부(920)는 캡션 자막의 수신 시간에 기초하여, 편성 스케줄 정보에 포함된 방송 프로그램들 중에서 캡션 자막과 대응하는 방송 프로그램을 검색하고, 검색된 방송 프로그램의 정보를 캡션 자막과 매칭하여 자막 파일을 생성할 수 있다. 자막 파일은 일반적으로 유통되는 SAMI, SRT, SUB 등의 다양한 자막 파일 형식을 지정할 수 있으며 수신부(910)에서 자막 텍스트가 수신된 시간과 프로그램 편성 정보를 참고하여 프로그램 단위의 자막 파일로 완성된다. The caption
또한, 자막 파일에 대한 메타데이터는 방송 프로그램의 제목, 방송 시간, 방송 프로그램에 대한 간단한 설명, 방송 프로그램의 고유 식별자(Program ID), 방송 프로그램의 방송 차수, 캡션 자막의 편집 버전, 자막 파일 형식, 문자 인코딩 형식 및 캡션 자막의 언어코드 중 적어도 하나를 포함할 수 있다. 캡션 자막의 언어코드는 캡션 자막이 한글, 영어 또는 기타 다른 언어인지를 언어별로 설정된 코드로 나타낸다. 자막 데이터 생성부(920)은 생성된 자막 파일과 메타데이터를 중앙 관리 시스템(central management system)에 업로드할 수 있다. The metadata of the subtitle file may include at least one of a title of a broadcast program, a broadcast time, a brief description of the broadcast program, a unique identifier of the broadcast program, a broadcast degree of the broadcast program, A character encoding format, and a language code of a caption subtitle. Caption The language code of the subtitle indicates whether the caption caption is Korean, English or any other language. The caption
보정부(930)는 방송 영상의 음성 인식 결과에 기초하여 자막 데이터 생성부(920)에서 생성된 자막 파일의 캡션 자막의 시간 동기를 보정할 수 있다. 보정부(930)는 시간 동기 보정부에서 캡션 자막과 매칭되는 방송 프로그램의 영상에서 인식되는 음성(speech)의 타이밍과 캡션 자막의 타임 스탬프(timestamp)가 일치하도록, 캡션 자막의 시간 동기를 보정할 수 있다. 방송 프로그램의 영상에서 음성을 인식하는 방식은, 현재까지 통상의 기술자에게 알려진 다양한 종류의 음성 인식 방식이 사용될 수 있다. 또한 자막 파일의 활용 목적에 따라 텍스트 포맷을 변경하는 포맷 변경부, 텍스트 맞춤법이나 보정 결과의 정확도를 검수하는 정정부, 화자에 따라 텍스트 색상을 변경하는 텍스트 컬러링부를 포함할 수 있다. The correcting
폴더 모니터링부(940)는 사전 등록한 폴더에 포함된 방송 프로그램의 영상 파일 이름과 자막 파일의 이름이 동일하면, 보정부(930)에서 보정 작업을 자동으로 시작할 목적으로, 영상 파일 이름과 자막 파일의 이름을 모니터링할 수 있다. 또는 신규 영상 파일만 모니터링하여 영상 파일의 이름에 방송 프로그램의 고유 식별자(Program ID)가 포함되어 있으면, 중앙 관리 시스템(980)의 인터페이스를 통하여 고유 식별자(Program ID)로 해당 영상의 자막을 요청하고 다운로드 받은 뒤 작업을 시작할 수 있다. If the video file name of the broadcasting program included in the pre-registered folder is identical to the title of the subtitle file, the
폴더 모니터링을 위하여 신규 폴더를 등록할 때는 자동 작업의 방식 또한 미리 지정할 수 있다. 즉, 모니터링 폴더마다 보정 대상 자막의 향후 활용 목적에 부합하는 문장 포맷 방식을 미리 설정하여 신규 작업 대상 유입 시 해당 설정에 맞춰 폴더 모니터링부(940)가 보정부(930)에 자동 작업 수행을 요청할 수 있다. 즉, DTV용 자막, 가로 40byte 과 세로 2줄의 VOD 자막, 외국어 번역 초본을 위한 완결된 문장 등의 방식을 신규 모니터링 폴더 등록 시에 같이 지정할 수 있다.When registering a new folder for folder monitoring, you can specify the automatic operation method in advance. That is, a sentence formatting method corresponding to the purpose of future use of the caption to be corrected is preset for each monitoring folder, so that the
스케줄 모니터링부(950)는 방송의 편성 스케줄 정보에 기초하여 기설정된 주기로, 캡션 자막의 시간 동기를 보정할 목적으로 편성 스케줄을 모니터링하고 작업 스케줄링을 할 수 있다. 보정부(930)가 자동 작업을 시작하기 위한 방법으로 상기 폴더 모니터링부(940)을 사용하지 않고 스케줄 모니터링 방식만을 활용할 수 있다. 예를 들어, 시스템 운용자가 스케줄 모니터링부(950)에서 제공하는 편성표를 열람한 뒤 작업 프로그램 대상과 순서를 지정하면 스케줄 모니터링부(950)는 해당 시간에 편성된 작업 대상의 고유 식별자(Program ID)를 이용하여 자막 파일을 자막 중앙 관리 시스템에 요청하고 영상 파일을 저장소에서 요청하여 보정부(930)가 작업을 시작하게 할 수 있다. The
필터링부(960)는 보정부(930)가 특정 프로그램에서는 동작하지 않도록, 방송의 편성 스케줄 정보에서 특정 프로그램을 필터링할 수 있다. 예를 들어, 음악 방송 또는 콘서트를 중계하는 방송 같은 경우, 음성과 음악의 구별이 어려워, 보정부(930)의 동작의 정확도가 떨어질 수 있다. 따라서, 특정 프로그램은 필터링 될 수 있다. 특정 프로그램은 사용자의 설정에 따라 다양하게 조절될 수 있다. 예를 들어 특정 프로그램 코드(Program Code)를 필터링 등록하면 해당 프로그램 코드 하위의 고유 식별자를 가진 파일이 폴더 모니터링부(940)에서 등록한 폴더에서 신규로 감지되어도 보정부(930)로 작업 요청이 되지 않는다. The
수동 보정부(970)는 사용자의 필요에 따라, 캡션 자막 중 사용자로부터 입력된 시간 동기에 기초하여, 캡션 자막의 시간 동기를 보정할 수 있다. 캡션 자막의 전체 또는 구간 또는 문장 별로, 사용자의 입력에 기초하여 타임 스탬프가 조정될 수 있다. 시간 동기뿐만 아니라 문장들의 길이나 병합, 분할 등도 수동으로 조정될 수 있다. 수동 보정부(970)에서는 보정부(930)의 정정부에서 정정된 맞춤법과 타임스탬프 정정 내역들만 표시하여 사용자가 정정된 내용을 확인하고 변경할 수 있다.The
보정부(930)에서 보정된 캡션 자막은 중앙관리시스템(980)으로 전달될 수 있다. 수동 보정부(970)에서 보정된 캡션 자막도 중앙관리시스템(980)으로 전달될 수 있다. 중앙관리시스템(980)은 보정된 캡션 자막을 관리할 수 있다. 중앙관리시스템(980)은 다양한 주체(entity)의 요구에 따라 저장된 캡션 자막을 제공할 수 있다. 예를 들어, 중앙관리시스템(980)은 본 발명의 일실시예에 따른 동영상 장면 검색 시스템으로 저장된 캡션 자막을 제공할 수 있다.The corrected caption subtitles in the
장면검색결과를 리스트, 또는 썸네일이 존재하는 리스트로 표시하는 경우에 자막과 동영상의 동기가 완벽하게 일치하지 않는 경우, 순간을 캡처한 썸네일로는 사용자가 원하는 장면인지 아닌지를 판별하기 힘들다.When the scene search result is displayed as a list or a list in which a thumbnail exists, if the subtitle and the video are not perfectly synchronized, it is difficult to determine whether or not the user wants to use the thumbnail as the captured thumbnail.
본 발명을 이용하는 경우, 사용자는 텍스트를 읽음으로써 텍스트의 콘텍스트를 판별하고 동영상과 직접연동하여 영상을 스크러빙하며 장면을 확인함으로써 원하는 장면을 쉽게 찾을 수 있다.In the case of using the present invention, the user can determine the context of the text by reading the text, directly scrub the image by directly interacting with the moving picture, and confirm the scene by searching the desired scene easily.
또한, 텍스트창의 스크롤 바에 연동되어 있는 위치 표시로 해당 단어가 집중적으로 나타나는 구간을 손쉽게 확인할 수 있다.In addition, it is possible to easily confirm a section in which a corresponding word appears intensively in a position display linked to a scroll bar of a text window.
단어 조합 검색의 경우 한문장안에서 여러 단어가 모두 나오는 경우, 또는 텍스트 창에서 포커스가 멈춰있는 구간 안에 해당단어들이 모두 나오는 경우를 검색함으로써 사용자가 원하는 장면을 더 손쉽게 찾을 수 있다.In the case of a word combination search, a user can easily find a desired scene by searching for a case where a plurality of words appear in a single sentence, or when all of the words appear in a section where focus is stopped in a text window.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다. The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.
Claims (18)
상기 동영상의 자막 파일의 텍스트를 연결하여 가독성 있는 텍스트 창으로 표시하는 제2 표시부;
상기 표시되는 텍스트 창에서 특정 내부 문장 관리단위가 선택되면, 상기 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출하는 독출부;
상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 표시되도록 상기 제1 표시부를 제어하는 제어부; 및
검색어가 입력되면, 상기 내부 문장 관리단위 중에서 상기 입력된 검색어에 상응하는 부분을 검색하는 검색부
를 포함하고,
상기 검색부는,
상기 검색된 검색어가 존재하는 복수의 부분들의 위치가 제2 표시부의 스크롤바 내의 해당 영역에 분포하도록 표시하는 동영상 장면 검색 시스템.A first display unit for displaying a moving picture;
A second display unit for connecting the text of the subtitle file of the moving picture and displaying the text in a readable text window;
A reading unit for reading a time code corresponding to the selected internal sentence management unit when a specific internal sentence management unit is selected in the displayed text window;
A controller for controlling the first display unit such that a position corresponding to the read time code is displayed in the moving picture; And
A search unit for searching a portion corresponding to the input search word among the internal sentence management units,
Lt; / RTI >
The search unit may search,
So that the position of the plurality of parts in which the searched search word exists is distributed in the corresponding area in the scroll bar of the second display part.
상기 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 상기 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장하는 저장부
를 더 포함하는 동영상 장면 검색 시스템.The method according to claim 1,
A storage unit for storing at least one time code included in a caption file of the moving picture and time code mapping information to which at least one internal sentence management unit corresponding to the at least one time code is mapped,
Wherein the video scene detection system further comprises:
상기 검색부는,
상기 검색된 검색어에 상응하는 부분이 강조되도록 상기 제2 표시부를 제어하는 동영상 장면 검색 시스템.The method according to claim 1,
The search unit may search,
And controls the second display unit so that a portion corresponding to the searched word is highlighted.
상기 검색부는,
상기 검색된 검색어에 상응하는 부분을 카운팅하고, 카운팅 결과를 상기 제2 표시부에 표시하는 동영상 장면 검색 시스템.The method according to claim 1,
The search unit may search,
Counts a portion corresponding to the searched search word, and displays a counting result on the second display unit.
상기 검색부는,
여러 단어의 조합으로 이루어진 검색어가 입력되면, 상기 내부 문장 관리단위 중에서 상기 입력된 여러 단어가 모두 포함되어 있는 내부 문장 관리단위를 검색하는 동영상 장면 검색 시스템.The method according to claim 1,
The search unit may search,
When a search word composed of a combination of a plurality of words is input, searches an inner sentence management unit including all of the input words among the inner sentence management units.
상기 검색부는,
여러 단어의 조합으로 이루어진 검색어가 입력되면, 단락 검색을 위하여 사전에 설정된 크기의 인접한 여러 내부 문장 관리 단위로 이루어진 단락 내에서 상기 입력된 여러 단어가 모두 포함되어 있는 단락을 검색하는 동영상 장면 검색 시스템.The method according to claim 1,
The search unit may search,
And searching for a paragraph including all the plurality of input words in a paragraph made up of adjacent internal sentence management units of a size set in advance for a paragraph search when a search word composed of a combination of several words is inputted.
상기 검색부는,
상기 검색된 검색어가 제2 표시부의 여러 부분에 존재하는 경우, 현재 선택된 지점에서 다음 지점 또는 이전 지점으로 이동하는 동영상 장면 검색 시스템.The method according to claim 1,
The search unit may search,
And moving from a currently selected point to a next point or a previous point when the searched term exists in various parts of the second display unit.
상기 제어부는,
상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어하는 동영상 장면 검색 시스템.The method according to claim 1,
Wherein,
And controls the first display unit such that a position corresponding to the read time code is repeatedly displayed for a predetermined number of times among the videos.
상기 독출부는,
상기 표시되는 내부 문장 관리단위 중에서 제1 내부 문장 관리단위와 제2 내부 문장 관리단위가 선택되면, 상기 제1 내부 문장 관리단위 및 상기 제2 내부 문장 관리단위에 상응하는 타임코드를 독출하고,
상기 제어부는,
상기 동영상 중에서 상기 제1 내부 문장 관리단위에 상응하는 위치와 상기 제2 내부 문장 관리단위에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어하는 동영상 장면 검색 시스템.The method according to claim 1,
The read-
Reading a time code corresponding to the first inner sentence management unit and the second inner sentence management unit when the first inner sentence management unit and the second inner sentence management unit are selected from among the displayed inner sentence management units,
Wherein,
And controls the first display unit such that a position corresponding to the first inner sentence management unit and a position corresponding to the second inner sentence management unit are repeatedly displayed for a predetermined number of times among the moving pictures.
상기 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신하면, 상기 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하고, 상기 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집하는 편집부
를 더 포함하는 동영상 장면 검색 시스템.The method according to claim 1,
Wherein the control unit checks a time code corresponding to the specific internal sentence management unit when receiving an edit input for a specific internal sentence management unit among the displayed internal sentence management units, Editorial department
Wherein the video scene detection system further comprises:
제2 표시부에서, 상기 동영상의 자막 파일에 포함되는 텍스트들을 연결하여 완성한 텍스트 창을 표시하는 단계;
독출부에서, 상기 표시되는 텍스트 창 중에서 특정 내부 문장 관리단위가 선택되면, 상기 선택된 특정 내부 문장 관리단위에 상응하는 타임코드를 독출하는 단계;
제어부에서, 상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 표시되도록 상기 제1 표시부를 제어하는 단계; 및
검색부에서, 검색어가 입력되는 경우 상기 내부 문장 관리단위 중에서 상기 입력된 검색어에 상응하는 부분을 검색하는 단계
를 포함하고,
상기 검색하는 단계는, 상기 검색된 검색어가 존재하는 복수의 부분들의 위치가 상기 제2 표시부의 스크롤바 내의 해당 영역에 분포하도록 표시하는 단계
를 포함하는 동영상 장면 검색 방법.In the first display unit, displaying a moving picture;
Displaying a completed text window on a second display unit by connecting texts included in the subtitle file of the moving picture;
Reading a time code corresponding to the selected internal sentence management unit when a specific internal sentence management unit is selected from the displayed text window at the reading unit;
Controlling the first display unit such that a position corresponding to the read time code is displayed in the moving picture; And
Retrieving a portion corresponding to the inputted search word from among the internal sentence management units when a search word is input,
Lt; / RTI >
Wherein the searching step includes the step of displaying a position of the plurality of parts in which the searched search word exists so as to be distributed in the corresponding area in the scroll bar of the second display part
And a moving picture scene search method.
저장부에서, 상기 동영상의 자막 파일에 포함된 적어도 하나 이상의 타임코드와 상기 적어도 하나 이상의 타임코드에 상응하는 적어도 하나 이상의 내부 문장 관리단위가 맵핑된 타임코드 맵핑 정보를 저장하는 단계
를 더 포함하는 동영상 장면 검색 방법.14. The method of claim 13,
Storing at least one time code included in a caption file of the moving picture and time code mapping information in which at least one internal sentence management unit corresponding to the at least one time code is mapped in the storage unit
Wherein the moving picture scene search method further comprises:
상기 제1 표시부를 제어하는 상기 단계는,
상기 동영상 중에서 상기 독출된 타임코드에 상응하는 위치가 선정된 횟수 동안 반복하여 표시되도록 상기 제1 표시부를 제어하는 단계
를 포함하는 동영상 장면 검색 방법.14. The method of claim 13,
Wherein the step of controlling the first display unit comprises:
Controlling the first display unit such that a position corresponding to the read time code is repeatedly displayed for a predetermined number of times among the moving images
And a moving picture scene search method.
편집부에서, 상기 표시되는 내부 문장 관리단위 중에서 특정 내부 문장 관리단위에 대한 편집 입력을 수신하면, 상기 특정 내부 문장 관리단위에 상응하는 타임코드를 확인하는 단계; 및
상기 동영상 중에서 상기 확인된 타임코드에 상응하는 부분을 편집하는 단계
를 더 포함하는 동영상 장면 검색 방법.14. The method of claim 13,
Confirming a time code corresponding to the specific internal sentence management unit when receiving an edit input for a specific internal sentence management unit among the displayed internal sentence management units; And
Editing a portion corresponding to the identified time code in the moving picture
Wherein the moving picture scene search method further comprises:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130097212A KR101488613B1 (en) | 2013-08-16 | 2013-08-16 | System and method of searching scene of video |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130097212A KR101488613B1 (en) | 2013-08-16 | 2013-08-16 | System and method of searching scene of video |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101488613B1 true KR101488613B1 (en) | 2015-02-06 |
Family
ID=52591222
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20130097212A KR101488613B1 (en) | 2013-08-16 | 2013-08-16 | System and method of searching scene of video |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101488613B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110781649A (en) * | 2019-10-30 | 2020-02-11 | 中央电视台 | Subtitle editing method and device, computer storage medium and electronic equipment |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040040312A (en) * | 2002-11-01 | 2004-05-12 | 김광수 | Method of creating caption-based search information and repeating a section using the created search information, and an apparatus using the method |
KR100879684B1 (en) | 2007-09-06 | 2009-01-21 | (주)케이티에프테크놀로지스 | Method for learning foreign language using portable terminal and portable terminal having the same |
KR20110081599A (en) * | 2010-01-08 | 2011-07-14 | 엘지전자 주식회사 | Operating an image display device |
-
2013
- 2013-08-16 KR KR20130097212A patent/KR101488613B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040040312A (en) * | 2002-11-01 | 2004-05-12 | 김광수 | Method of creating caption-based search information and repeating a section using the created search information, and an apparatus using the method |
KR100879684B1 (en) | 2007-09-06 | 2009-01-21 | (주)케이티에프테크놀로지스 | Method for learning foreign language using portable terminal and portable terminal having the same |
KR20110081599A (en) * | 2010-01-08 | 2011-07-14 | 엘지전자 주식회사 | Operating an image display device |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110781649A (en) * | 2019-10-30 | 2020-02-11 | 中央电视台 | Subtitle editing method and device, computer storage medium and electronic equipment |
CN110781649B (en) * | 2019-10-30 | 2023-09-15 | 中央电视台 | Subtitle editing method and device, computer storage medium and electronic equipment |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10482168B2 (en) | Method and apparatus for annotating video content with metadata generated using speech recognition technology | |
CA2774985C (en) | Caption and/or metadata synchronization for replay of previously or simultaneously recorded live programs | |
EP2269191B1 (en) | Method and apparatus for replacement of audio data in a recorded audio/video stream | |
KR100547317B1 (en) | Simultaneous recording and playback apparatus with indexing/searching/browsing functionality | |
JP4550725B2 (en) | Video viewing support system | |
US20030018609A1 (en) | Editing time-based media with enhanced content | |
US20060053470A1 (en) | Management and non-linear presentation of augmented broadcasted or streamed multimedia content | |
US20060031885A1 (en) | Management and non-linear presentation of music-related broadcasted or streamed multimedia content | |
US20060031916A1 (en) | Management and non-linear presentation of broadcasted or streamed multimedia content | |
US20070154171A1 (en) | Navigating recorded video using closed captioning | |
US20130089300A1 (en) | Method and Apparatus for Providing Voice Metadata | |
JP2007082088A (en) | Contents and meta data recording and reproducing device and contents processing device and program | |
US20060031879A1 (en) | Management and non-linear presentation of news-related broadcasted or streamed multimedia content | |
CN101336545A (en) | System and method for searching video signal | |
JP2009105719A (en) | Video content viewing terminal | |
KR101478918B1 (en) | Apparatus and method for correcting caption subtitle | |
JP5857449B2 (en) | Image processing apparatus and recording apparatus | |
KR101412722B1 (en) | Caption management method and caption search method | |
KR101488613B1 (en) | System and method of searching scene of video | |
KR101749420B1 (en) | Apparatus and method for extracting representation image of video contents using closed caption | |
JP2000295538A (en) | System and method for digital program broadcast reception reservation and recording medium recording program relating to the method for digital program broadcast reception reservation | |
KR101930488B1 (en) | Metadata Creating Method and Apparatus for Linkage Type Service | |
KR20150116191A (en) | Subtitling broadcast device using fingerprint data | |
Hughes et al. | Automatic retrieval of closed captions for web clips from broadcast TV content | |
JP4171316B2 (en) | Information editing apparatus, information editing method, and information editing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AMND | Amendment | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20180207 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20190111 Year of fee payment: 5 |