KR101568935B1 - 비자막 영상 생성 방법 및 장치 - Google Patents

비자막 영상 생성 방법 및 장치 Download PDF

Info

Publication number
KR101568935B1
KR101568935B1 KR1020140062205A KR20140062205A KR101568935B1 KR 101568935 B1 KR101568935 B1 KR 101568935B1 KR 1020140062205 A KR1020140062205 A KR 1020140062205A KR 20140062205 A KR20140062205 A KR 20140062205A KR 101568935 B1 KR101568935 B1 KR 101568935B1
Authority
KR
South Korea
Prior art keywords
image
caption
original video
segment
original
Prior art date
Application number
KR1020140062205A
Other languages
English (en)
Inventor
하도영
박재현
Original Assignee
주식회사 에스비에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스비에스 filed Critical 주식회사 에스비에스
Priority to KR1020140062205A priority Critical patent/KR101568935B1/ko
Application granted granted Critical
Publication of KR101568935B1 publication Critical patent/KR101568935B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Circuits (AREA)

Abstract

본 발명은 비자막 영상 생성 방법 및 장치에 관한 것이다. 본 발명의 일 실시예에 따른 비자막 영상 생성 방법은, 자막을 포함하지 않는 원본 영상을 입력받는 단계, 자막을 포함하는 자막 영상을 입력받는 단계, 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 각각 추출하는 단계 및 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 비교하여 자막을 포함하지 않는 비자막 영상을 생성하는 단계를 포함한다. 본 발명에 의하면 방송용 자막을 포함하는 자막 영상과 동일한 내용을 가지면서 방송용 자막을 포함하지 않는 비자막 영상을 보다 용이하고 정확하게 생성할 수 있는 장점이 있다.

Description

비자막 영상 생성 방법 및 장치{METHOD AND APPARATUS FOR GENERATING VIDEO WITHOUT CAPTION OR SUBTITLES}
본 발명은 비자막 영상 생성 방법 및 장치에 관한 것이다.
일반적으로 방송은 정치·경제·사회·문화·시사 등에 관한 보도·논평 및 여론과 교양·음악·연예·스포츠 등을 일반 공중(公衆)에게 전파함을 목적으로 하는 것으로, 무선통신을 이용하는 지상파방송, 유선 및 통신위성을 이용하는 케이블텔레비전(CATV)방송, 인터넷을 이용하는 인터넷방송, 인트라넷을 이용하여 기업의 사내방송 등을 행하는 인트라넷방송 등이 있다.
이들 방송사를 통해서 방송되는 영상 콘텐츠의 경우, 스튜디오나 현장에서 이루어지는 녹음 및 녹화를 통하여 원본 영상이 만들어지고, 원본 영상으로부터 필요한 내용을 발췌, 편집하여 송출본 영상이 만들어지며, 지상파 방송의 경우, 이렇게 생성된 송출본 영상을 메인콘솔(믹서기)에 장착하여 송출기로 전송하고, 송출기에서 전파를 발사함으로써 지상파방송의 송출이 이루어진다.
한편, 최근 한류 열풍과 함께 국내 방송사에서 제작된 각종 프로그램이 해외로 수출되어 전세계에 방영되고 있다. 그런데 국내 방송사에서 제작된 송출본 영상의 경우 편집 과정에서 한국어로 된 자막이 삽입되어 있다. 따라서 이를 해외에 판매하기 위해서는 송출본 영상과 동일한 내용을 포함하면서도 자막은 포함되어 있지 않은 비자막 영상의 제작이 요구된다.
본 발명은 방송용 자막을 포함하는 자막 영상과 동일한 내용을 가지면서 방송용 자막을 포함하지 않는 비자막 영상을 보다 용이하고 정확하게 생성할 수 있는 비자막 영상 생성 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
이러한 목적을 달성하기 위한 본 발명은 비자막 영상 생성 방법에 있어서, 자막을 포함하지 않는 원본 영상을 입력받는 단계, 자막을 포함하는 자막 영상을 입력받는 단계, 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 각각 추출하는 단계 및 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 비교하여 자막을 포함하지 않는 비자막 영상을 생성하는 단계를 포함하는 것을 특징으로 한다.
또한 본 발명은 비자막 영상 생성 장치에 있어서, 자막을 포함하지 않는 원본 영상 및 자막을 포함하는 자막 영상을 입력받는 입력부, 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 각각 추출하는 특징점 추출부 및 상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 비교하여 자막을 포함하지 않는 비자막 영상을 생성하는 영상 생성부를 포함하는 것을 다른 특징으로 한다.
전술한 바와 같은 본 발명에 의하면, 방송용 자막을 포함하는 자막 영상과 동일한 내용을 가지면서 방송용 자막을 포함하지 않는 비자막 영상을 보다 용이하고 정확하게 생성할 수 있는 장점이 있다.
도 1은 본 발명에 의한 비자막 영상 생성 장치의 구성도.
도 2는 종래 기술에 따른 자막 영상의 생성 과정을 설명하기 위한 도면.
도 3 내지 도 5는 본 발명에 의한 비자막 영상 생성 과정을 설명하기 위한 도면.
도 6은 본 발명에 의한 비자막 영상 생성 방법의 흐름도.
전술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되며, 이에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다. 도면에서 동일한 참조부호는 동일 또는 유사한 구성요소를 가리키는 것으로 사용된다.
도 1은 본 발명에 의한 비자막 영상 생성 장치의 구성도이다.
도 1을 참조하면, 본 발명에 의한 비자막 영상 생성 장치(102)는 입력부(104) 및 영상 생성부(106)를 포함한다.
입력부(104)는 자막을 포함하지 않는 원본 영상 및 자막을 포함하는 자막 영상을 각각 입력받는다. 또한 특징점 추출부(114)는 입력된 원본 영상의 특징점 및 자막 영상의 특징점을 각각 추출한다. 그리고 영상 생성부(106)는 입력된 원본 영상의 특징점 및 자막 영상의 특징점을 서로 비교하여, 자막을 포함하지 않는 비자막 영상을 생성, 출력하는 역할을 한다.
보다 구체적으로, 영상 생성부(106)는 분할부(108), 검색부(110), 편집부(112)를 포함한다. 분할부(108)는 입력부(104)를 통해 입력된 자막 영상을 복수의 기준 구간으로 분할하는 역할을 한다. 그리고 검색부(110)는 입력부(104)를 통해 입력된 원본 영상으로부터, 분할부(108)에 의해 분할된 자막 영상의 복수의 기준 구간 각각의 특징점과 대응되는 특징점을 포함하는 영상 구간을 상기 복수의 기준 구간 각각과 대응되는 원본 영상 구간으로 추출한다. 또한 편집부(112)는 검색부(110)를 통해 추출된 원본 영상 구간들을 이용하여 비자막 영상을 생성한다.
본 발명의 일 실시예에서, 검색부(110)는 상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간을 상기 어느 하나의 기준 구간과 대응되는 원본 영상 구간으로 지정할 수 있다.
또한 본 발명의 다른 실시예에서, 검색부(110)는 상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간 중 하나를 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간으로 지정할 수 있다.
또한 본 발명의 다른 실시예에서, 검색부(110)는 상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간들의 일부를 이용하여 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간을 생성할 수 있다.
이하에서는 먼저 종래 기술에 의한 따른 자막 영상의 생성 과정을 살펴본 후, 도 1을 참조하여 본 발명에 의한 비자막 영상 생성 과정에 대하여 보다 상세히 설명한다.
도 2는 종래 기술에 따른 자막 영상의 생성 과정을 설명하기 위한 도면이다. 도 2에서 각 영상의 길이는 영상의 재생 시간을 의미하며, "자막" 표시는 편집에 의해 해당 영상에 자막이 삽입되었음을 의미한다.
특정 프로그램의 방송 시간에 따른 최종 송출본 영상을 만들기 위해서는 먼저 도 2와 같이 현장에서 촬영된 원본 영상이 필요하다. 예를 들어 1시간 30분 짜리 송출본 영상을 제작하기 위해서는 도 2와 같이 수백 시간의 긴 분량을 갖는 원본 영상이 사용된다.
이와 같은 원본 영상이 확보되면, 원본 영상의 1차 편집을 통해 1차 편집 영상이 완성된다. 1차 편집 영상은 편집자가 원본 영상을 재생하면서 방송에 적절한 부분들을 편집하여 생성되는 영상으로, 원본 영상 보다 줄어든 시간 분량을 갖는 영상이다.
다음으로 편집자는 1차 편집 영상을 재생하면서 각 장면마다 필요한 자막을 삽입하여 2차 편집 영상을 생성한다. 그 후 필요에 따라 추가 편집이 실시되고, 최종적으로 편집된 영상은 송출본 영상으로서 해당 프로그램의 방송 시간에 방송된다.
이와 같이 종래에는 원본 영상으로부터 자막이 없는 1차 편집 영상이 생성되고, 그 후 자막 삽입 및 추가 편집을 거쳐 송출본 영상이 생성된다. 그런데 이러한 송출본 영상을 해외에 수출하고자 하는 경우, 송출본 영상에 삽입되어 있는 한국어 자막으로 인해 해외 시청자들이 불편함을 겪을 수 있다. 따라서 프로그램을 수출하는 방송사 입장에서는 송출본 영상과 동일한 분량 및 내용을 포함하면서도 자막은 제거된 비자막 영상을 별도로 제작할 필요성이 있다.
그러나 이러한 비자막 영상은 단순히 송출본 영상으로부터 자막만을 제거하는 방법으로는 생성할 수 없다. 또한 송출본 영상을 참조하면서 편집자가 수작업으로 일일이 원본 영상을 재편집하는 방법을 고려할 수 있으나, 이는 지나치게 많은 시간을 소요하게 되고, 송출본 영상과 100% 일치하는 내용의 영상을 만들기도 어렵다.
따라서 본 발명은 이와 같은 비자막 영상을 보다 용이하고 정확하게 생성할 수 있는 비자막 영상 제작 방법을 제공한다.
본 발명의 비자막 영상 제작 방법에서는 편집자에 의한 편집을 통해 자막이 삽입된 모든 영상을 '자막 영상'으로 지칭한다. 예컨대 위 예시에서 자막 영상은 2차 편집 영상이 될 수도 있고, 송출본 영상이 될 수도 있다. 그러나 본 발명의 비자막 영상 제작 방법에서 사용되는 자막 영상은 반드시 2차 편집 영상이나 송출본 영상에만 한정되는 것이 아니며, 자막이 삽입된 어떠한 종류의 영상이어도 무방하다.
또한 본 발명에서는 자막을 포함하지 않는 영상, 예컨대 원본 영상 또는 1차 편집 영상과 같은 영상을 '원본 영상'으로 지칭한다. 이에 따라 본 발명의 비자막 영상 생성 장치(102)의 입력부(104)는 자막을 포함하지 않는 원본 영상 및 자막을 포함하는 자막 영상을 입력받고, 특징점 추출부(114)는 입력된 원본 영상의 특징점 및 자막 영상의 특징점을 각각 추출하며, 영상 생성부(106)는 입력된 원본 영상 및 자막 영상을 기반으로, 자막 영상과 동일한 내용 및 분량을 가지면서 자막을 포함하지 않는 '비자막 영상'을 생성한다.
이하에서는 본 발명의 영상 생성부(106)에 의해 비자막 영상이 생성되는 과정을 보다 구체적으로 설명한다.
도 3은 본 발명의 일 실시예에 의한 비자막 영상 생성 과정을 설명하기 위한 도면이다.
먼저 도 3을 참조하면, 분할부(108)는 입력된 자막 영상을 복수의 기준 구간(1 내지 100)으로 분할한다. 이 실시예에서, 분할부(108)는 미리 지정된 시간 단위(예컨대, 10초)에 따라 자막 영상을 복수의 기준 구간으로 분할할 수 있다. 즉, 도 3에서 자막 영상은 각각 10초 단위로 분할된 기준 구간들(1 내지 100)로 이루어진다.
다음으로, 검색부(110)는 입력된 원본 영상으로부터, 분할부(108)를 통해 분할된 복수의 기준 구간(1 내지 100) 각각의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간을 추출한다.
이 때 특징점 추출부(114)는 도 3의 자막 영상의 기준 구간들(1 내지 100) 중 기준 구간(1)의 특징점을 추출한다. 여기서 특징점이란 해당 기준 구간의 영상만이 갖는 고유한 값 또는 정보를 의미하는 것으로, 컨텐츠 DNA(Video, Audio, Image), 에지 정보, SIFT 또는 HARRIS 알고리즘, 또는 색상 정보의 블록 별 세부 속성 값, 또는 PSNR(Peak Signal to Noise Rate), 또는 워터마크와 같이 영상에 삽입되는 식별 정보와 같이 기존의 영상 특징점 추출에 의한 값 또는 정보들이 본 발명의 특징점으로서 사용될 수 있다.
검색부(110)는 이렇게 추출된 기준 구간(1)의 특징점과 대응되는 특징점을 포함하는 구간, 즉 원본 영상 구간을 원본 영상으로부터 검출한다. 자막 영상의 기준 구간(1)은 경우에 따라 자막이 삽입된 프레임을 일부 포함할 수는 있으나, 대부분 원본 영상에 포함된 영상과 동일한 영상으로 이루어지기 때문에 원본 영상에는 자막 영상의 기준 구간(1)과 대응되는 영상 구간이 반드시 존재한다. 본 발명에서는 특징점 비교를 통해 이러한 영상 구간, 즉 원본 영상 구간(A)을 검출한다.
이러한 과정을 통해 검색부(110)는 자막 영상의 기준 구간(1)에 대응되는 원본 영상의 원본 영상 구간(A)를 검출할 수 있으며, 마찬가지 방법에 의해 기준 구간(2)에 대응되는 원본 영상 구간(B), 기준 구간(3)에 대응되는 원본 영상 구간(C) 등을 차례로 검출할 수 있다. 이러한 원본 영상 구간은 자막 영상의 모든 기준 구간(1 내지 100)에 대하여 수행된다.
이렇게 검색부(110)를 통해 추출된 원본 영상 구간(A, B, C, ...)은 각 기준 구간(1 내지 100)과 동일하나 단지 자막만이 제거된 영상으로 이루어진다.
한편, 검색부(110)에 의한 원본 영상 구간 추출에서는 영상의 특성(예컨대, 각 기준 구간에 포함묀 자막의 크기나 양)에 따라 일부 원본 영상 구간이 추출되지 않을 수 있다. 이 경우 전술한 바와 같은 검색부(110)의 추출 과정이 일정 횟수 반복됨으로써 원본 영상 구간의 추출이 보완될 수 있다.
편집부(112)는 검색부(110)에 의해 추출된 원본 영상 구간들(A, B, C, ...)을 이어 붙임으로써 비자막 영상을 완성할 수 있다.
도 4는 본 발명의 다른 실시예에 의한 비자막 영상 생성 과정을 설명하기 위한 도면이다.
본 발명의 다른 실시예에서, 분할부(108)는 도 4와 같이 자막 영상을 장면 전환 단위에 따라 분할하여 복수의 기준 구간(1 내지 100)으로 분할할 수 있다. 그리고 나서, 검색부(110)는 입력된 원본 영상으로부터, 분할부(108)를 통해 분할된 복수의 기준 구간(1 내지 100) 각각의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간(A, B, C, ...)을 추출한다. 원본 영상 구간 추출 과정은 도 3의 실시예와 동일한 과정으로 진행되므로 여기서는 설명을 생략한다. 그 후 편집부(112)는 검색부(110)에 의해 추출된 원본 영상 구간들(A, B, C, ...)을 이용하여 비자막 영상을 완성한다.
본 발명의 또 다른 실시예에서는 도 3의 실시예 및 도 4의 실시예가 순차적으로 수행될 수도 있다. 예를 들어 자막 영상을 도 3과 같이 시간 단위에 따른 복수의 기준 구간으로 나누어 원본 영상 구간 추출을 진행한다. 그 후 원본 영상 구간이 추출되지 않은 기준 구간들을 장면 전환 단위를 기준으로 다시 복수의 기준 구간으로 나눈 후 원본 영상 구간 추출을 진행할 수 있다. 또한 이와 같은 시간 단위 분할에 의한 원본 영상 구간 추출 및 장면 전환 단위 분할에 의한 원본 영상 구간 추출은 서로 반대 순서로 진행될 수도 있으며, 각각 반복적으로 수행될 수도 있다. 이와 같은 순차적, 반복적 원본 영상 구간 추출에 의해 보다 정확하고 빠짐없는 영상 구간 추출이 가능하다.
한편, 도 3의 시간 단위 분할에 의한 원본 영상 구간 추출 및 도 4의 장면 전환 단위 분할에 의한 원본 영상 구간 추출이 수행된 후에도 일부 구간에 대하여 원본 영상 구간이 추출되지 않을 수 있다. 이는 자막 영상의 특정 프레임에 지나치게 많거나 지나치게 큰 자막이 삽입됨으로써, 자막이 삽입된 프레임에 의한 특징점과 원본 영상, 즉 자막이 삽입되지 않은 원본 영상의 특징점이 서로 불일치하기 때문이다.
이와 같이 자막 영상의 일부 구간에 대하여, 특징점 추출에 의해 원본 영상 구간이 추출되지 않은 경우, 도 5의 실시예가 적용될 수 있다. 도 5의 실시예에서는 자막 영상의 제1 기준 구간(1)에 대한 원본 영상의 제1 원본 영상 구간(A) 및 제2 기준 구간(2)에 대한 제2 원본 영상 구간(B)이 이미 검출된 상태이다. 그러나 제3 기준 구간(3)의 경우 앞서 언급한 바와 같은 과도한 자막 삽입으로 인해 특징점 추출에 의한 원본 영상 구간 추출이 실패할 수 있다.
검색부(110)는 제1 원본 영상 구간(A) 및 제2 원본 영상 구간(B) 사이에 존재하는 제3 원본 영상 구간(C)을 제1 기준 구간(1) 및 제2 기준 구간(2) 사이에 존재하는 제3 기준 구간(3)에 대응하는 원본 영상 구간으로 결정할 수 있다. 보다 구체적으로, 검색부(110)는 제1 원본 영상 구간(A) 및 제2 원본 영상 구간(B) 사이에 존재하는 제3 원본 영상 구간(C)의 시간 길이가 미리 정해진 기준 시간(예컨대, 2초) 이하인 경우, 제3 원본 영상 구간(C)을 제3 기준 구간(3)에 대응하는 원본 영상 구간으로 결정한다. 이는 프로그램 내용의 연속성에 기인한 것으로서, 제3 원본 영상 구간(C)의 길이가 특정 시간 이하인 경우 사실상 제1 원본 영상 구간(A) 및 제2 원본 영상 구간(B)과 연속되는 영상인 것으로 간주할 수 있기 때문이다.
한편, 자막 영상의 일부 구간에 대하여, 특징점 추출에 의해 원본 영상 구간이 추출되지 않은 경우, 다음과 같은 또 다른 실시예 (1) 또는 (2)가 적용될 수 있다.
(1) 원본 영상 구간이 추출되지 않은 기준 구간이 존재하는 경우, 검색부(110)는 해당 기준 구간을 그대로 원본 영상 구간으로 지정한다.
예를 들어 도 3 또는 도 4에서 자막 영상의 제2 기준 구간(2)에 대응되는 원본 영상 구간이 원본 영상에서 발견되지 않은 경우, 제2 기준 구간(2)은 그대로 제2 원본 영상 구간으로 지정될 수 있다.
(2) 원본 영상 구간이 추출되지 않은 기준 구간이 존재하는 경우, 검색부(110)는 해당 기준 구간과 인접하는 기준 구간에 대응하는 원본 영상 구간의 일부 프레임을 이용하여 해당 기준 구간에 대응하는 원본 영상 구간을 생성할 수 있다.
예를 들어 도 3 또는 도 4에서 자막 영상의 제2 기준 구간(2)에 대응되는 원본 영상 구간이 원본 영상에서 발견되지 않은 경우, 검색부(110)는 먼저 제2 기준 구간(2)과 인접하는 기준 구간(인접 기준 구간), 즉 제1 기준 구간(1) 및 제3 기준 구간(3)을 검색하고, 이 인접 기준 구간들에 대응하는 원본 영상 구간인 제1 원본 영상 구간(A) 및 제3 원본 영상 구간(C)을 각각 검색한다.
그 다음, 검색부(110)는 인접 기준 구간(1, 3)에 대응하는 제1 원본 영상 구간(A) 및 제3 원본 영상 구간(C)의 일부 프레임을 이용하여 제2 기준 구간(2)에 대응되는 원본 영상 구간을 생성한다. 예를 들어 검색부(110)는 제1 원본 영상 구간(A)의 마지막 프레임 또는 제3 원본 영상 구간(C)의 시작 프레임 중 어느 하나를 제2 기준 구간(2)에 대응되는 원본 영상 구간으로 지정할 수 있다. 또한 검색부(110)는 제1 원본 영상 구간(A)의 마지막 프레임 및 제3 원본 영상 구간(C)의 시작 프레임을 모두 이용하여 제2 기준 구간(2)에 대응되는 원본 영상 구간을 생성할 수도 있다.
이와 같이 인접 기준 구간(1, 3)에 대응하는 원본 영상 구간(A, C)의 일부 프레임을 이용하여 생성된 제2 기준 구간(2)의 원본 영상 구간은 재생 시 정지된 것처럼 보일 수 있다. 따라서, 검색부(110)는 각 인접 기준 구간(1, 3)에 대응하는 원본 영상 구간(A, C)의 프레임이 미리 정해진 개수(예컨대 5 프레임 또는 10 프레임) 이하의 프레임을 갖는 경우에만 인접 기준 구간(1, 3)에 대응하는 원본 영상 구간(A, C)의 일부 프레임을 이용하여 제2 기준 구간(2)의 원본 영상 구간을 생성할 수 있다.
한편, 원본 영상 구간을 이용하여 비자막 영상을 완성할 때, 자막 영상의 전체 오디오를 그대로 사용할 수도 있고, 검색된 원본 영상 구간에 대응하는 각 기준 구간의 오디오를 사용할 수도 있다. 다만 (2)에서 기술된 실시예와 같이 인접 기준 구간(1, 3)에 대응하는 원본 영상 구간(A, C)의 일부 프레임을 이용하여 원본 영상 구간이 발견되지 않은 기준 구간(2)의 원본 영상 구간을 생성하는 경우, 오디오의 연속성을 유지하기 위해 해당 기준 구간(2)의 오디오를 그대로 이용할 수 있다.
도 6은 본 발명에 의한 비자막 영상 생성 방법의 흐름도이다.
먼저 자막을 포함하지 않는 원본 영상을 입력받고(602), 자막을 포함하는 자막 영상을 입력받는다(604). 다만 원본 영상의 입력(602)과 자막 영상의 입력(604)은 그 순서가 서로 바뀌어도 무방하다.
다음으로, 입력된 원본 영상 및 자막 영상의 특징점을 각각 추출한다(606). 그리고 나서, 입력된 원본 영상의 특징점 및 자막 영상의 특징점을 비교하여 자막을 포함하지 않는 비자막 영상을 생성한다(608).
도 6에는 도시되지 않았으나, 비자막 영상을 생성하는 단계(608)는 자막 영상을 복수의 기준 구간으로 분할하는 단계, 원본 영상으로부터 복수의 기준 구간 각각의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간을 추출하는 단계 및 추출된 원본 영상 구간을 이용하여 비자막 영상을 생성하는 단계를 포함할 수 있다. 여기서 자막 영상을 복수의 기준 구간으로 분할하는 단계는 자막 영상을 미리 지정된 시간 단위에 따라 복수의 기준 구간으로 분할하는 단계를 포함할 수 있다. 또한 자막 영상을 복수의 기준 구간으로 분할하는 단계는 자막 영상을 장면 전환 단위에 따라 복수의 기준 구간으로 분할하는 단계를 포함할 수도 있다.
또한 도 6에는 도시되지 않았으나, 본 발명에 의한 비자막 영상 생성 방법은 자막 영상의 제1 기준 구간에 대응하는 원본 영상의 제1 원본 영상 구간이 검출되고, 자막 영상의 제2 기준 구간에 대응하는 원본 영상의 제2 원본 영상 구간이 검출된 경우, 제1 원본 영상 구간 및 제2 원본 영상 구간 사이에 존재하는 제3 원본 영상 구간을 제1 기준 구간 및 제2 기준 구간 사이에 존재하는 제3 기준 구간에 대응하는 원본 영상 구간으로 결정하는 단계를 더 포함할 수 있다.
전술한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.

Claims (16)

  1. 자막을 포함하지 않는 원본 영상을 입력받는 단계;
    자막을 포함하는 자막 영상을 입력받는 단계;
    상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 각각 추출하는 단계; 및
    상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 기준 구간 별로 비교하여 자막을 포함하지 않는 비자막 영상을 생성하는 단계를
    포함하는 비자막 영상 생성 방법.
  2. 제1항에 있어서,
    상기 비자막 영상을 생성하는 단계는
    상기 자막 영상을 복수의 기준 구간으로 분할하는 단계;
    상기 원본 영상으로부터 상기 복수의 기준 구간 각각의 특징점과 대응되는 특징점을 포함하는 영상 구간을 상기 복수의 기준 구간 각각과 대응되는 원본 영상 구간으로 추출하는 단계; 및
    추출된 상기 원본 영상 구간을 이용하여 상기 비자막 영상을 생성하는 단계를
    포함하는 비자막 영상 생성 방법.
  3. 제2항에 있어서,
    상기 자막 영상을 복수의 기준 구간으로 분할하는 단계는
    상기 자막 영상을 미리 지정된 시간 단위에 따라 상기 복수의 기준 구간으로 분할하는 단계를
    포함하는 비자막 영상 생성 방법.
  4. 제2항에 있어서,
    상기 자막 영상을 복수의 기준 구간으로 분할하는 단계는
    상기 자막 영상을 장면 전환 단위에 따라 상기 복수의 기준 구간으로 분할하는 단계를
    포함하는 비자막 영상 생성 방법.
  5. 제2항에 있어서,
    상기 자막 영상의 제1 기준 구간에 대응하는 상기 원본 영상의 제1 원본 영상 구간이 검출되고, 상기 자막 영상의 제2 기준 구간에 대응하는 상기 원본 영상의 제2 원본 영상 구간이 검출된 경우, 상기 제1 원본 영상 구간 및 상기 제2 원본 영상 구간 사이에 존재하는 제3 원본 영상 구간을 상기 제1 기준 구간 및 상기 제2 기준 구간 사이에 존재하는 제3 기준 구간에 대응하는 원본 영상 구간으로 결정하는 단계를
    더 포함하는 비자막 영상 생성 방법.
  6. 제2항에 있어서,
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간 전체를 상기 어느 하나의 기준 구간과 대응되는 원본 영상 구간으로 지정하는 단계를
    더 포함하는 비자막 영상 생성 방법.
  7. 제2항에 있어서,
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간 중 하나의 일부 프레임을 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간으로 지정하는 단계를
    더 포함하는 비자막 영상 생성 방법.
  8. 제2항에 있어서,
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간들 각각의 일부 프레임을 이용하여 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간을 생성하는 단계를
    더 포함하는 비자막 영상 생성 방법.
  9. 자막을 포함하지 않는 원본 영상 및 자막을 포함하는 자막 영상을 입력받는 입력부;
    상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 각각 추출하는 특징점 추출부; 및
    상기 원본 영상의 특징점 및 상기 자막 영상의 특징점을 기준 구간 별로 비교하여 자막을 포함하지 않는 비자막 영상을 생성하는 영상 생성부를
    포함하는 비자막 영상 생성 장치.
  10. 제9항에 있어서,
    상기 영상 생성부는
    상기 자막 영상을 복수의 기준 구간으로 분할하는 분할부;
    상기 원본 영상으로부터 상기 복수의 기준 구간 각각의 특징점과 대응되는 특징점을 포함하는 영상 구간을 상기 복수의 기준 구간 각각과 대응되는 원본 영상 구간으로 추출하는 검색부; 및
    추출된 상기 원본 영상 구간을 이용하여 상기 비자막 영상을 생성하는 편집부를
    포함하는 비자막 영상 생성 장치.
  11. 제10항에 있어서,
    상기 분할부는
    상기 자막 영상을 미리 지정된 시간 단위에 따라 상기 복수의 기준 구간으로 분할하는
    비자막 영상 생성 장치.
  12. 제10항에 있어서,
    상기 분할부는
    상기 자막 영상을 장면 전환 단위에 따라 상기 복수의 기준 구간으로 분할하는
    비자막 영상 생성 장치.
  13. 제9항에 있어서,
    상기 영상 생성부는
    상기 자막 영상의 제1 기준 구간에 대응하는 상기 원본 영상의 제1 원본 영상 구간이 검출되고, 상기 자막 영상의 제2 기준 구간에 대응하는 상기 원본 영상의 제2 원본 영상 구간이 검출된 경우, 상기 제1 원본 영상 구간 및 상기 제2 원본 영상 구간 사이에 존재하는 제3 원본 영상 구간을 상기 제1 기준 구간 및 상기 제2 기준 구간 사이에 존재하는 제3 기준 구간에 대응하는 원본 영상 구간으로 결정하는
    비자막 영상 생성 장치.
  14. 제10항에 있어서,
    상기 검색부는
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간 전체를 상기 어느 하나의 기준 구간과 대응되는 원본 영상 구간으로 지정하는
    비자막 영상 생성 장치.
  15. 제10항에 있어서,
    상기 검색부는
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간 중 하나의 일부 프레임을 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간으로 지정하는
    비자막 영상 생성 장치.
  16. 제10항에 있어서,
    상기 검색부는
    상기 복수의 기준 구간 중 어느 하나의 기준 구간의 특징점과 대응되는 특징점을 포함하는 원본 영상 구간이 추출되지 않는 경우, 상기 어느 하나의 기준 구간과 인접하는 인접 기준 구간들에 대응되는 원본 영상 구간들 각각의 일부 프레임을 이용하여 상기 어느 하나의 기준 구간에 대응하는 원본 영상 구간을 생성하는
    비자막 영상 생성 장치.
KR1020140062205A 2014-05-23 2014-05-23 비자막 영상 생성 방법 및 장치 KR101568935B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140062205A KR101568935B1 (ko) 2014-05-23 2014-05-23 비자막 영상 생성 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140062205A KR101568935B1 (ko) 2014-05-23 2014-05-23 비자막 영상 생성 방법 및 장치

Publications (1)

Publication Number Publication Date
KR101568935B1 true KR101568935B1 (ko) 2015-11-13

Family

ID=54610285

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140062205A KR101568935B1 (ko) 2014-05-23 2014-05-23 비자막 영상 생성 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101568935B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101395822B1 (ko) * 2012-06-05 2014-05-16 성균관대학교산학협력단 영상 내 텍스트 정보의 선택적 제거 방법 및 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101395822B1 (ko) * 2012-06-05 2014-05-16 성균관대학교산학협력단 영상 내 텍스트 정보의 선택적 제거 방법 및 장치

Similar Documents

Publication Publication Date Title
US10546599B1 (en) Systems and methods for identifying a mute/sound sample-set attribute
JP4224095B2 (ja) 情報処理装置、情報処理プログラムおよび情報処理システム
US8204366B2 (en) Method, apparatus and program for recording and playing back content data, method, apparatus and program for playing back content data, and method, apparatus and program for recording content data
US8531597B2 (en) Video processing apparatus that stores input viewpoint information and control method thereof
US8682132B2 (en) Method and device for detecting music segment, and method and device for recording data
KR20060027826A (ko) 비디오 처리장치, 비디오 처리장치용 집적회로, 비디오처리방법, 및 비디오 처리 프로그램
US7784083B2 (en) Receiving/generating section information for multimedia contents based on level of performance
US20090196569A1 (en) Video trailer
JP6422511B2 (ja) 再生を介した関連するビデオコンテンツの自動特定
KR20030023576A (ko) 영상 정보 요약 장치, 영상 정보 요약 방법 및 영상 정보요약 처리 프로그램
JP4793929B2 (ja) 特徴情報付プログレスバー構成情報生成機能を有するａｖ装置
KR101741747B1 (ko) 실시간 광고 삽입이 가능한 영상 광고 처리 장치 및 방법
JP4215681B2 (ja) 動画像処理装置及びその方法
JP3821362B2 (ja) インデックス情報生成装置、記録再生装置、及びインデックス情報生成方法
US8737798B2 (en) Recording apparatus
KR101568935B1 (ko) 비자막 영상 생성 방법 및 장치
KR101370904B1 (ko) 영상물의 녹화 방법 및 그 방법을 채용한 방송 수신기
KR101954880B1 (ko) 스미스-워터만 알고리즘을 이용한 자동 자막 싱크 조절 장치 및 방법
US6782549B1 (en) Programme retrieval system and method, and storage in which programme retrieval program is stored
EP2811416A1 (en) An identification method
KR101995531B1 (ko) 방송 음악 제공 방법 및 이를 이용하는 장치
KR102152438B1 (ko) 방송 콘텐츠 송출을 위한 장치 및 방법
JP2009260762A (ja) ダイジェスト作成装置
JP5575936B2 (ja) システム及び番組推薦方法
RU2570831C2 (ru) Способ и абонентское устройство для воспроизведения сигналов изображений вещательного телевидения

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180830

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190807

Year of fee payment: 5