KR20230057070A - 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치 - Google Patents

비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치 Download PDF

Info

Publication number
KR20230057070A
KR20230057070A KR1020210141053A KR20210141053A KR20230057070A KR 20230057070 A KR20230057070 A KR 20230057070A KR 1020210141053 A KR1020210141053 A KR 1020210141053A KR 20210141053 A KR20210141053 A KR 20210141053A KR 20230057070 A KR20230057070 A KR 20230057070A
Authority
KR
South Korea
Prior art keywords
title
video content
determining
generating
background frame
Prior art date
Application number
KR1020210141053A
Other languages
English (en)
Inventor
송민경
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020210141053A priority Critical patent/KR20230057070A/ko
Publication of KR20230057070A publication Critical patent/KR20230057070A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/40—Filling a planar surface by adding surface attributes, e.g. colour or texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Image Processing (AREA)

Abstract

본 발명의 일 실시 예에 따른 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법은, 비디오 콘텐츠에 대한 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하는 단계; 및 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계를 포함할 수 있다.

Description

비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치 {METHOD FOR GENERATING TITLE IMAGE OF VIDEO CONTENT AND TITLE IMAGE GENERATING DEVICE PERFORMING METHOD}
본 발명은 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치에 관한 것이다.
최근에 방송사나 제작사가 다양해지고 많아지면서, 생산되는 비디오 콘텐츠의 양도 급격히 증가하는 추세이다. 특히, 사용자들이 짧은 길이의 동영상을 선호하는 양상이 뚜렷하게 나타나면서, 1 시간 정도로 구성되는 예능 콘텐츠나 드라마 콘텐츠, 또는 1 시간 이상의 영화 콘텐츠가 짧은 길이의 작은 클립들로 재구성되어 소비되는 추세가 두드러지고 있다.
하나의 비디오 콘텐츠를 보다 짧은 단위의 작은 비디오 클립으로 재구성하는 경우, 비디오 콘텐츠의 대표 이미지(예컨대, 썸네일 화면)는 해당 비디오 콘텐츠에 대한 최초 관심도를 끌 수 있는 아주 중요한 요소에 해당하게 된다.
한편, 비디오 콘텐츠의 대표 이미지와 더불어, 대표 이미지의 타이틀을 어떻게 구성하는지는 또한 매우 중요한데, 사람이 비디오 콘텐츠나 비디오 클립마다 수작업으로 타이틀을 제작하게 된다면, 타이틀 제작에 상당한 시간이 소요되는 문제가 있다.
본 발명이 해결하고자 하는 과제는 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법을 제공하는 것이다.
다만, 본 발명이 해결하고자 하는 과제는 이상에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시 예에 따른 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법은, 비디오 콘텐츠에 대한 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하는 단계; 및 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계를 포함할 수 있다.
상기 방법은, 상기 배경 프레임의 색상 정보를 분석하는 단계를 더 포함하고, 상기 타이틀의 최종 디자인을 결정하는 단계는, 상기 배경 프레임의 적어도 일부의 색상 정보에 더 기초하여, 상기 타이틀의 상기 최종 디자인을 결정할 수 있다.
상기 비디오 콘텐츠의 속성 정보는, 상기 비디오 콘텐츠의 장르 및 태그 정보 중에서 적어도 하나를 포함할 수 있다.
상기 방법은, 상기 비디오 콘텐츠에 포함된 복수의 프레임들에서 얼굴을 인식하는 단계; 및 상기 복수의 프레임들 중에서 소정의 인물의 얼굴이 인식되는 프레임을 상기 배경 프레임으로 결정하는 단계를 더 포함할 수 있다.
상기 방법은, 상기 배경 프레임의 크기에 기초하여, 상기 타이틀의 크기를 결정하는 단계를 더 포함하고, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계는, 상기 타이틀의 크기를 더 이용하여, 상기 타이틀 이미지를 생성할 수 있다.
상기 방법은, 상기 타이틀에 대한 로우(raw) 이미지를 획득하는 단계; 및 상기 로우 이미지에서 상기 타이틀이 존재하는 영역을 검출하는 단계를 더 포함하고, 상기 타이틀의 크기를 결정하는 단계는, 상기 배경 프레임의 크기에 기초하여, 상기 타이틀이 존재하는 영역의 크기를 조정하는 단계를 포함할 수 있다.
상기 타이틀의 크기를 결정하는 단계는, 상기 배경 프레임의 가로 크기에 기초하여, 상기 타이틀의 제1 후보 크기를 결정하는 단계; 상기 배경 프레임의 세로 크기에 기초하여, 상기 타이틀의 제2 후보 크기를 결정하는 단계; 및 상기 제1 후보 크기와 상기 제2 후보 크기를 비교하여, 상기 타이틀의 크기를 결정하는 단계를 포함할 수 있다.
상기 제1 후보 크기와 상기 제2 후보 크기를 비교하여, 상기 타이틀의 크기를 결정하는 단계는, 상기 제1 후보 크기보다 작은 상기 제2 후보 크기를 상기 타이틀의 크기로 결정하는 단계를 포함할 수 있다.
상기 방법은, 상기 배경 프레임에서 얼굴을 인식하는 단계; 및 상기 인식의 결과에 기초하여, 상기 배경 프레임 내에서의 상기 타이틀의 위치를 결정하는 단계를 더 포함하고, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계는, 상기 타이틀의 위치를 더 이용하여, 상기 타이틀 이미지를 생성할 수 있다.
상기 타이틀의 위치를 결정하는 단계는, 상기 배경 프레임에서 인식된 상기 얼굴과 중첩되지 않도록 상기 타이틀의 위치를 결정하는 단계를 포함할 수 있다.
상기 방법은, 상기 배경 프레임을 복수의 영역들로 구획하는 단계를 더 포함하고, 상기 배경 프레임에서 인식된 상기 얼굴과 중첩되지 않도록 상기 타이틀의 위치를 결정하는 단계는, 상기 복수의 영역들 중에서, 상기 얼굴이 위치하는 영역이 아닌 다른 영역에 상기 타이틀을 위치시키는 단계를 포함할 수 있다.
상기 타이틀의 최종 디자인을 결정하는 단계는, 상기 타이틀의 마스킹 정보를 이용하여, 상기 타이틀의 그림자를 생성하는 단계; 및 상기 그림자를 이용하여, 상기 최종 디자인을 결정하는 단계를 포함할 수 있다.
상기 타이틀의 최종 디자인을 결정하는 단계는, 상기 배경 프레임의 적어도 일부의 색상 정보와 상기 타이틀의 색상 정보 중에서 적어도 하나에 기초하여, 상기 배경 프레임에 대한 그라데이션을 결정하는 단계; 및 상기 그라데이션을 이용하여, 상기 최종 디자인을 결정하는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따른 타이틀 이미지 생성 장치는, 타이틀 이미지 생성 프로그램이 저장된 메모리; 및 상기 메모리로부터 상기 타이틀 이미지 생성 프로그램을 로드하여, 비디오 콘텐츠에 대한 타이틀의 초기 디자인을 확인하고, 상기 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하고, 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 프로세서를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 컴퓨터 프로그램을 저장하고 있는 컴퓨터 판독 가능 기록매체는, 비디오 콘텐츠에 대한 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하는 단계; 및 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계를 포함하는 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 컴퓨터 판독 가능한 기록매체에 저장되어 있는 컴퓨터 프로그램은, 비디오 콘텐츠에 대한 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하는 단계; 및 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계를 포함하는 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함할 수 있다.
본 발명의 실시 예에 의하면, 비디오 콘텐츠에서 인식한 얼굴과 비디오 콘텐츠의 색상 정보 및 속성 정보를 이용하여 비디오 콘텐츠의 타이틀 이미지를 생성함으로써, 사람의 수작업 없이 정확하게 비디오 콘텐츠의 타이틀 이미지를 생성할 수 있다.
도 1은 본 발명의 실시예에 따른 타이틀 이미지 생성 장치를 나타내는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 타이틀 이미지 생성 프로그램의 기능을 개념적으로 나타내는 블록도이다.
도 3은 타이틀 영역 추출부가 타이틀이 존재하는 영역을 추출한 일 예시를 나타낸다.
도 4는 타이틀의 초기 디자인의 일 예시를 나타낼 수 있다.
도 5는 타이틀 디자인 결정부가 타이틀을 추출한 일 예시를 나타낸다.
도 6은 타이틀 디자인 결정부가 타이틀의 최종 디자인을 결정한 일 예시를 나타낸다.
도 7은 그림자 결정부가 타이틀의 최종 디자인에 그림자를 추가한 일 예시를 나타낸다.
도 8은 타이틀 위치 결정부가 타이틀의 위치를 결정한 예시들을 나타낸다.
도 9는 그라데이션 결정부가 타이틀의 주변 영역에 그라데이션을 적용한 예시들을 나타낸다.
도 10은 본 발명의 실시예에 따른 타이틀 이미지 생성 프로그램이 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법을 나타내는 흐름도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 실시예에 따른 타이틀 이미지 생성 장치를 나타내는 블록도이다.
도 1을 참조하면, 타이틀 이미지 생성 장치(100)는 프로세서(110), 송수신기(120) 및 메모리(130)를 포함할 수 있다.
프로세서(110)는 타이틀 이미지 생성 장치(100)의 동작을 전반적으로 제어할 수 있다.
프로세서(110)는, 송수신기(120)를 이용하여, 외부로부터 비디오 콘텐츠를 수신할 수 있다.
본 명세서에서, 타이틀 이미지 생성 장치(100)는 송수신기(120)를 이용하여 비디오 콘텐츠를 수신하는 것으로 설명하였지만, 이에 한정되지 않는다. 즉, 실시예에 따라, 타이틀 이미지 생성 장치(100)가 입력기(미도시)를 포함하는 경우, 비디오 콘텐츠는 입력기(미도시)를 이용하여 입력될 수 있으며, 또는 비디오 콘텐츠는 타이틀 이미지 생성 장치(100) 내에서 생성될 수도 있다.
메모리(130)는 타이틀 이미지 생성 프로그램(200) 및 타이틀 이미지 생성 프로그램(200)의 실행에 필요한 정보를 저장할 수 있다.
본 명세서에서 타이틀 이미지 생성 프로그램(200)은 비디오 콘텐츠에 대한 타이틀 이미지를 생성하도록 프로그램된 명령어들을 포함하는 소프트웨어를 의미할 수 있다.
프로세서(110)는 타이틀 이미지 생성 프로그램(200)을 실행하기 위하여 메모리(130)에서 타이틀 이미지 생성 프로그램(200) 및 타이틀 이미지 생성 프로그램(200)의 실행에 필요한 정보를 로드할 수 있다.
프로세서(110)는, 타이틀 이미지 생성 프로그램(200)을 실행하여, 비디오 콘텐츠에 대한 타이틀 이미지를 생성할 수 있다.
타이틀 이미지 생성 프로그램(200)의 기능 및/또는 동작에 대하여는 도 2를 통해 상세하게 살펴보기로 한다.
도 2는 본 발명의 일 실시예에 따른 타이틀 이미지 생성 프로그램의 기능을 개념적으로 나타내는 블록도이다.
도 1 및 도 2를 참조하면, 타이틀 이미지 생성 프로그램(200)은 프레임 선택부(210), 얼굴 인식부(220), 배경 프레임 선정부(230), 타이틀 영역 추출부(240), 타이틀 크기 결정부(250), 타이틀 위치 결정부(260), 타이틀 디자인 결정부(270), 그림자 결정부(280), 그라데이션 결정부(290) 및 타이틀 이미지 생성부(300)를 포함할 수 있다.
도 2에 도시된 프레임 선택부(210), 얼굴 인식부(220), 배경 프레임 선정부(230), 타이틀 영역 추출부(240), 타이틀 크기 결정부(250), 타이틀 위치 결정부(260), 타이틀 디자인 결정부(270), 그림자 결정부(280), 그라데이션 결정부(290) 및 타이틀 이미지 생성부(300)는 타이틀 이미지 생성 프로그램(200)의 기능을 쉽게 설명하기 위하여 타이틀 이미지 생성 프로그램(200)의 기능을 개념적으로 나눈 것으로서, 이에 한정되지 않는다. 실시예들에 따라, 프레임 선택부(210), 얼굴 인식부(220), 배경 프레임 선정부(230), 타이틀 영역 추출부(240), 타이틀 크기 결정부(250), 타이틀 위치 결정부(260), 타이틀 디자인 결정부(270), 그림자 결정부(280), 그라데이션 결정부(290) 및 타이틀 이미지 생성부(300) 각각의 기능은 병합/분리 가능하며, 하나의 프로그램에 포함된 일련의 명령어들로 구현될 수 있다.
프레임 선택부(210)는 비디오 콘텐츠에 포함된 전체 프레임 중에서 복수의 프레임들을 선택할 수 있다. 보다 자세하게는, 프레임 선택부(210)는 소정의 시간 간격으로(예컨대, 10 프레임마다 한 프레임씩) 복수의 프레임들을 선택할 수 있다.
24 fps(frames per second) 또는 30 fps로 생성된 비디오 콘텐츠의 경우, 비디오 콘텐츠에는 초당 24 개의 프레임 또는 30개의 프레임이 포함되는데, 비디오 콘텐츠에 포함된 모든 프레임에 대해 타이틀 이미지 생성 프로세스를 수행할 경우, 타이틀 이미지 생성 프로세스의 연산량이 지나치게 커지는 문제가 발생할 수 있다.
따라서, 전체 프레임 중에서 소정의 시간 간격으로 선택된 복수의 프레임들에 대해서만 타이틀 이미지 생성 프로세스를 수행함으로써, 연산량을 감소시킬 수 있다.
얼굴 인식부(220)는 상기 복수의 프레임들에 포함된 얼굴을 인식할 수 있다.
보다 자세하게는, 얼굴 인식부(220)는 상기 복수의 프레임들에 포함된 얼굴을 인식하여, 프레임 별로 어떤 연기자가 출연하는지 감지할 수 있다.
실시예에 따라, 얼굴 인식부(220)는 기 학습된 얼굴 인식 모델을 포함하고, 상기 얼굴 인식 모델을 이용하여 상기 복수의 프레임들에 포함된 얼굴을 인식할 수 있다.
실시예에 따라, 상기 얼굴 인식 모델은 프레임을 입력 받으면, 입력 받은 프레임에 포함된 얼굴을 인식하도록 기 학습된 신경망일 수 수 있다.
상기 얼굴 인식 모델은 지도 학습 방식 또는 비지도 학습 방식으로 학습된 것일 수 있다. 즉, 상기 얼굴 인식 모델은, 학습용 프레임과 함께, 레이블 데이터로서 학습용 프레임에 포함된 얼굴에 대한 정보를 입력할 경우, 학습용 프레임에서 얼굴을 인식한 결과를 출력하도록 학습되거나, 학습용 프레임을 입력할 경우, 학습용 프레임에서 얼굴을 인식한 결과를 출력하도록 학습된 것일 수 있다.
배경 프레임 선정부(230)는 복수의 프레임들 중에서 타이틀 이미지의 배경화면으로 사용될 배경 프레임을 선정할 수 있다.
실시예에 따라, 배경 프레임 선정부(230)는 상기 복수의 프레임들 중에서 기 설정된 인물의 얼굴이 인식된 프레임을 배경 프레임으로 선정하거나, 비디오 콘텐츠의 재생 시간에 따라 선택된 소정의 시간에 해당하는 프레임을 배경 프레임으로 선정할 수 있다.
타이틀 영역 추출부(240)는 타이틀을 포함하는 로우(raw) 이미지에서, 타이틀이 존재하는 영역을 추출할 수 있다.
경우에 따라, 타이틀 이미지를 생성하기 위해 제공된 로우 이미지에 타이틀이 아닌 다른 영역들이 존재할 수 있다. 이러한 로우 이미지를 그대로 이용하여 타이틀 이미지를 생성할 경우, 타이틀의 크기 및/또는 위치를 정확하게 결정할 수 없기 때문에, 타이틀 영역 추출부(240)는 로우 이미지에서 타이틀이 존재하는 영역을 추출할 수 있다.
보다 자세하게는, 타이틀 영역 추출부(240)는 캐니 엣지 검출(canny edge detection)과 같은 영상처리 기법을 이용하여, 로우 이미지에서 엣지들을 검출하고, 검출한 엣지들의 좌표를 이용하여, 기 설정된 형태(예컨대, 사각형)의 영역을 타이틀로서 추출할 수 있다. 이때, 타이틀 영역 추출부(240)는 모폴로지(morphology)와 같은 영상처리 기법을 이용하여, 서로 분리된 경계들을 연결할 수도 있다.
실시예에 따라, 타이틀 영역 추출부(240)는 검출한 엣지들 중에서 가로 방향으로 최소 값(x1)과 최대 값(x2)을 검출하고, 세로 방향으로 최소 값(y1)과 최대 값(y2)을 검출하여, 가로 방향으로 최소 값(x1)과 세로 방향으로 최소 값(y1)을 갖는 제1 좌표(x1, y1), 가로 방향으로 최대 값(x2)과 세로 방향으로 최소 값(y1)을 갖는 제2 좌표(x2, y1), 가로 방향으로 최소 값(x1)과 세로 방향으로 최대 값(y2)을 갖는 제3 좌표(x1, y2), 및 가로 방향으로 최대 값(x2)과 세로 방향으로 최대 값(y2)을 갖는 제4 좌표(x4, y4)를 결정할 수 있다. 타이틀 영역 추출부(240)는 제1 좌표(x1, y1), 제2 좌표(x2, y1), 제3 좌표(x1, y2) 및 제4 좌표(x4, y4)를 연결하여 타이틀이 존재하는 영역을 추출할 수 있다.
예컨대, 도 3은 타이틀 영역 추출부(240)가 타이틀이 존재하는 영역을 추출한 일 예시를 나타낸다.
도 3을 더 참조하면, 로우 이미지(RI)에 타이틀("이산", "인수대비", "하이킥!", "동이") 이외의 영역(검은 여백)이 존재하는 경우, 타이틀 영역 추출부(240)는 로우 이미지(RI)에서 엣지들을 검출함으로써, 타이틀이 존재하는 영역(TA) 만을 추출함을 확인할 수 있다.
타이틀 크기 결정부(250)는 배경 프레임의 크기에 기초하여, 추출한 타이틀의 크기를 결정(조정)할 수 있다.
보다 자세하게는, 타이틀 크기 결정부(250)는 타이틀의 가로 크기와 세로 크기의 비율(이하, 타이틀 비율)을 계산하고, 배경 프레임의 세로 크기에 기 설정된 기준 세로 비율을 곱하여 제1 세로 후보 크기를 결정하고, 상기 제1 세로 후보 크기에 상기 타이틀 비율을 적용하여 제1 가로 후보 크기를 결정하여, 제1 후보 크기(제1 가로 후보 크기, 제1 세로 후보 크기)를 결정할 수 있다.
또한, 타이틀 크기 결정부(250)는 배경 프레임의 세로 크기에 기 설정된 기준 가로 비율을 곱하여 제2 가로 후보 크기를 결정하고, 제2 가로 후보 크기에 상기 타이틀 비율을 적용하여 제2 세로 후보 크기를 결정하여, 제2 후보 크기(제2 가로 후보 크기, 제2 세로 후보 크기)를 결정할 수 있다.
타이틀 크기 결정부(250)는 제1 후보 크기와 제2 후보 크기 중에서 보다 작은 크기를 타이틀의 크기로 결정히고, 타이틀이 존재하는 영역을 결정된 크기로 조정할 수 있다.
타이틀 위치 결정부(260)는, 배경 프레임에 대한 얼굴 인식의 결과에 기초하여, 상기 배경 프레임에서의 타이틀의 위치를 결정할 수 있다.
보다 자세하게는, 타이틀 위치 결정부(260)는 타이틀이 배경 프레임에서 인식된 얼굴과 중첩되지 않도록 타이틀을 위치시킬 수 있다.
이를 위해, 실시예에 따라, 타이틀 위치 결정부(260)는 배경 프레임을 복수의 영역들로 구획하고, 상기 복수의 영역들 중에서 인식된 얼굴이 위치하는 영역(들)이 아닌 다른 영역에 상기 타이틀을 위치시킬 수 있다.
예컨대, 타이틀 위치 결정부(260)가 배경 프레임을 상단과 하단으로 구획할 때, 인식된 얼굴이 상기 배경 프레임의 상단에 위치하는 경우, 타이틀 위치 결정부(260)는 타이틀을 상기 배경 프레임의 하단에 위치시킬 수 있다.
타이틀 디자인 결정부(270)는, 타이틀의 초기 디자인에 기초하여, 타이틀의 최종 디자인을 결정할 수 있다.
보다 자세하게는, 타이틀 디자인 결정부(270)는 타이틀의 초기 디자인이 기본 디자인인지 여부를 판단하고, 판단 결과에 따라 타이틀의 초기 디자인을 보정할지 여부를 결정할 수 있다. 즉, 타이틀의 초기 디자인이 흰색 바탕, 검은 색 바탕과 같은 기본 디자인인 경우, 타이틀 디자인 결정부(270)는 타이틀의 초기 디자인을 보정하기로 결정하고, 반면, 타이틀의 초기 디자인이 타이틀 특유의 고유 디자인인 경우, 타이틀 디자인 결정부(270)는 타이틀의 초기 디자인을 보정하지 않기로 결정할 수 있다.
예컨대, 도 4는 타이틀의 초기 디자인의 일 예시를 나타낼 수 있다.
도 4의 (a)를 더 참조하면, 타이틀들은 흰 색이 아닌 다른 색(또는 둘 이상의 색의 조합)으로 표현되었으므로, 타이틀 디자인 결정부(270)는 타이틀들을 고유 디자인으로 판단할 수 있다.
하지만, 도 4의 (b)를 더 참조하면, 타이틀들이 흰 색의 단식으로 표현되었으므로, 타이틀 디자인 결정부(270)는 타이들을을 기본 디자인으로 판단할 수 있다.
다시 도 2를 참조하면, 실시예에 따라, 타이틀의 초기 디자인이 기본 디자인인 경우, 타이틀 디자인 결정부(270)는 배경 프레임의 적어도 일부의 색상 정보 및 비디오 콘텐츠의 속성 정보 중에서 적어도 하나에 기초하여, 타이틀의 최종 디자인을 결정할 수 있다.
이를 위해, 먼저, 타이틀 디자인 결정부(270)는 타이틀이 존재하는 영역(또는 배경 프레임 중에서 타이틀이 위치하는 영역)에서 타이틀을 마스킹(masking)하여, 타이틀이 존재하는 영역(또는 배경 프레임 중에서 타이틀이 위치하는 영역)에서 타이틀 만을 추출할 수 있다.
예컨대, 도 5는 타이틀 디자인 결정부가 타이틀을 추출한 일 예시를 나타낸다.
도 5를 더 참조하면, 타이틀 디자인 결정부(270)는 배경 프레임(BF) 중에서 타이틀(T6)을 마스킹하여, 타이틀(TM) 만을 추출함을 확인할 수 있다.
이후, 타이틀 디자인 결정부(270)는 배경 프레임의 적어도 일부에서 RGB 기반의 색깔 히스토그램(color histogram)을 추출하고, 추출한 색깔 히스토그램에 기초하여, 배경 프레임의 적어도 일부의 색상 정보를 결정할 수 있다.
예컨대, 타이틀 디자인 결정부(270)는 색깔 히스토그램의 레벨을 2단계(0, 1)로 나누고, 색깔 히스토그램의 레벨이 0에 가까운 경우 배경 프레임의 적어도 일부는 어두운 것으로 결정하고, 색깔 히스토그램의 레벨이 1에 가까운 경우 배경 프레임의 적어도 일부는 밝은 것으로 결정할 수 있다.
실시예에 따라, 상기 배경 프레임의 적어도 일부는 배경 프레임 전체 또는 배경 프레임 중에서 타이틀이 위치하는 영역을 의미할 수 있다. 이는, 타이틀의 색상이 배경 프레임 또는 배경 프레임 중에서 타이틀이 위치하는 영역의 색상과 대비되어야 사용자에게 타이틀이 잘 인식되기 때문이다.
타이틀 디자인 결정부(270)는 결정된 배경 프레임의 적어도 일부의 색상 정보와 기 설정된 비디오 콘텐츠의 속성 정보에 기초하여, 타이틀의 최종 디자인을 결정할 수 있다.
여기서, 상기 비디오 콘텐츠의 속성 정보는 상기 비디오 콘텐츠의 장르 및 태그 정보 중에서 적어도 하나를 포함할 수 있다. 또한, 상기 장르는 로맨스, 스릴러, 호러, 코미디 등을 포함하고, 상기 태그 정보는 분위기(무드), 색감 등을 포함할 수 있다.
실시예에 따라, 타이틀 디자인 결정부(270)는 배경 프레임의 적어도 일부의 색상 정보와 비디오 콘텐츠의 속성 정보를 기 생성된 색상 테이블에 매핑(mapping)하여, 타이틀의 최종 디자인을 결정할 수 있다.
여기서, 상기 색상 테이블은 배경 프레임의 적어도 일부의 색상 정보와 대비되거나, 상기 비디오 콘텐츠의 속성 정보와 매칭되는 색깔이 기 매핑된 테이블을 의미할 수 있다.
따라서, 타이틀 디자인 결정부(270)는 상기 배경 프레임의 적어도 일부의 색상 정보 및 상기 비디오 콘텐츠의 속성 정보 중에서 적어도 하나를 상기 색상 테이블에 입력하여, 상기 배경 프레임의 적어도 일부의 색상 정보와 대비되거나, 상기 비디오 콘텐츠의 속성 정보와 매칭되도록 상기 테이블의 최종 디자인을 결정할 수 있다.
예컨대, 상기 태그 정보가 "바다", "하늘", "물" 등을 나타내는 경우, 타이틀은 색상 테이블 중에서 "파란색", "하늘색" 등을 나타내는 필드에 매핑되고, 상기 태그 정보가 "숲", "나무", "산", "아보카도" 등을 나타내는 경우, 상기 타이틀은 "초록색", "연두색" 등을 나타내는 필드에 매핑될 수 있다.
실시예에 따라, 상기 색상 테이블에는 색감 그룹만 지정될 수 있다. 즉, 상기 색상 테이블의 각 필드에는 녹색, 청색, 적색 등의 색감 그룹이 지정되고, 각 색감 그룹은 복수 개의 색깔을 포함(예컨대, 녹색은 초록색, 연두색 등을 포함하고, 청색은 파란색, 하늘색 등을 포함)할 수 있다.
따라서, 타이틀 디자인의 다양성을 위해, 타이틀 디자인 결정부(270)는 상기 배경 프레임의 적어도 일부의 색상 정보 및 상기 비디오 콘텐츠의 속성 정보 중에서 적어도 하나를 색상 테이블에 입력하여, 타이틀에 대한 색감 그룹 만을 결정하고, 결정된 색감 그룹 중에서 랜덤으로 하나의 색깔을 선택하여, 타이틀의 최종 디자인으로 결정할 수 있다.
예컨대, 도 6은 타이틀 디자인 결정부(270)가 타이틀의 최종 디자인을 결정한 일 예시를 나타낸다.
도 6을 더 참조하면, 비디오 콘텐츠의 장르가 "로맨스"이고, "로맨스"에 매핑되는 색감 그룹이 분홍색 계열인 경우, 타이틀 디자인 결정부(270)는 분홍색 계열 중에서 랜덤으로 결정된 하나의 색을 이용하여 타이틀(TD)을 디자인함을 확인할 수 있다.
그림자 결정부(280)는 배경 프레임으로부터 타이틀이 보다 잘 구분되도록 하기 위해, 타이틀의 최종 디자인에 그림자를 추가할 수 있다.
보다 자세하게는, 그림자 결정부(280)는 타이틀을 마스킹한 마스킹 정보를 이용하여, 타이틀과 동일한 크기의 그림자를 생성하고, 타이틀의 위치에 기초하여 그림자의 위치를 결정할 수 있다. 예컨대, 마스킹 정보가 행렬로 표현되는 경우, 그림자 결정부(280)는 마스킹 정보에 기 설정된 변환 행렬을 연산하여, 그림자의 위치를 결정할 수 있다.
이때, 그림자 결정부(280)는 컨볼루션 연산(예컨대, 가우시안 블러링(gaussian blurring))을 이용하여 그림자의 굵기를 결정할 수 있다.
예컨대, 도 7은 그림자 결정부(280)가 타이틀의 최종 디자인에 그림자를 추가한 일 예시를 나타낸다.
도 7을 더 참조하면, 그림자 결정부(280)가 타이틀의 최종 디자인에 그림자를 추가함으로써, 배경 프레임으로부터 타이틀이 보다 잘 구분됨을 확인할 수 있다.
그라데이션 결정부(290)는 타이틀에 대한 배경 프레임의 그라데이션(gradation)을 결정할 수 있다.
보다 자세하게는, 그라데이션 결정부(290)는 타이틀이 배경 프레임에 보다 잘 융화되도록 배경 프레임 중에서 타이틀의 주변 영역에 그라데이션을 적용할 수 있다.
실시예에 따라, 그라데이션 결정부(290)는 배경 프레임의 적어도 일부의 색상 정보와 타이틀의 색상 정보 중에서 적어도 하나에 기초하여, 그라데이션의 색상 정보를 결정할 수 있다.
예컨대, 상기 타이틀의 색상 정보가 어두운 색(예컨대, 검은 색)을 나타내는 경우, 그라데이션 결정부(290)는 상기 그라데이션의 색상 정보를 밝은 색으로 결정할 수 있다.
또한, 타이틀의 색상 정보가 어두운 색을 나타내는 경우, 그라데이션 결정부(290)는 상기 배경 프레임의 적어도 일부가 더 진해지도록(즉, 상기 배경 프레임의 적어도 일부가 밝은 경우 상기 배경 프레임의 적어도 일부가 더 밝아지고, 상기 배경 프레임의 적어도 일부가 어두운 경우 상기 배경 프레임의 적어도 일부가 더 어두워지도록) 상기 그라데이션의 색상 정보를 결정할 수 있다.
마지막으로, 타이틀 이미지 생성부(300)는 앞에서 결정된 타이틀의 위치, 타이틀의 크기, 타이틀 디자인, 그림자 및 그라데이션에 기초하여, 타이틀 이미지를 생성할 수 있다.
도 8은 타이틀 위치 결정부가 타이틀의 위치를 결정한 예시들을 나타낸다.
도 2 및 도 8의 (a)를 참조하면, 배경 프레임을 상단과 하단으로 구획할 때, 인물의 얼굴(F1)이 배경 프레임의 상단에서 인식되는 경우, 타이틀 위치 결정부(260)는 인물의 얼굴(F1)과 중첩되지 않도록, 타이틀(T1)을 배경 프레임의 하단에 위치시킴을 확인할 수 있다.
또한, 도 2 및 도 8의 (b)를 참조하면, 배경 프레임을 상단과 하단으로 구획할 때, 인물의 얼굴(F2)이 배경 프레임의 하단에서 인식되는 경우, 타이틀 위치 결정부(260)는 인물의 얼굴(F2)과 중첩되지 않도록, 타이틀(T2)을 배경 프레임의 상단에 위치시킴을 확인할 수 있다.
또한, 도 2 및 도 8의 (c)를 참조하면, 배경 프레임을 둘 이상의 영역으로 구획할 때, 인물의 얼굴(F3)이 보다 상단에서 인식되는 경우(또는 인물의 얼굴(F3) 중 다수의 영역이 보다 상단에서 인식되는 경우), 타이틀 위치 결정부(260)는 인물의 얼굴(F3)과 중첩되지 않도록, 타이틀(F3)을 배경 프레임의 보다 하단에 위치시킴을 확인할 수 있다.
또한, 도 2 및 도 8의 (d)를 참조하면, 배경 프레임을 둘 이상의 영역으로 구획할 때, 인물의 얼굴(F4)이 보다 하단에서 인식되는 경우(또는 인물의 얼굴(F4) 중 다수의 영역이 보다 하단에서 인식되는 경우), 타이틀 위치 결정부(260)는 인물의 얼굴(F4)과 중첩되지 않도록, 타이틀(F4)을 배경 프레임의 보다 상단에 위치시킴을 확인할 수 있다.
마지막으로, 도 2 및 도 8의 (e)를 참조하면, 배경 프레임을 둘 이상의 영역으로 구획할 때, 인물의 얼굴들(F5-1, F5-2)이 다수의 영역에서 인식되는 경우, 타이틀 위치 결정부(260)는 인물의 얼굴들(F5-1, F5-2)이 인식되는 영역과는 다른 영역에 타이틀(F5)을 위치시킴을 확인할 수 있다.
도 9는 그라데이션 결정부가 타이틀의 주변 영역에 그라데이션을 적용한 예시들을 나타낸다.
도 2 및 도 9를 참조하면, 타이틀이 검은 색으로 표현되므로, 그라데이션 결정부(290)는 타이틀의 주변 영역에 대하여 밝은 색의 그라데이션을 적용하였음을 확인할 수 있다.
도 10은 본 발명의 실시예에 따른 타이틀 이미지 생성 프로그램이 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법을 나타내는 흐름도이다.
도 1, 도 2 및 도 10을 참조하면, 프레임 선택부(210)는 소정의 시간 간격으로 복수의 프레임들을 선택할 수 있다(S1000).
이후, 얼굴 인식부(220)는 기 학습된 얼굴 인식 모델을 이용하여 상기 복수의 프레임들에 포함된 얼굴을 인식하고(S1010), 배경 프레임 선정부(230)는 복수의 프레임들 중에서 타이틀 이미지의 배경화면으로 사용될 배경 프레임을 선정하고(S1020), 타이틀 영역 추출부(240)는 타이틀을 포함하는 로우 이미지에서, 타이틀이 존재하는 영역을 추출할 수 있다(S1030).
이후, 타이틀 크기 결정부(250)는 배경 프레임의 크기에 기초하여, 추출한 타이틀의 크기를 결정하고(S1040), 타이틀 위치 결정부(260)는, 배경 프레임에 대한 얼굴 인식의 결과에 기초하여, 상기 배경 프레임에서의 타이틀의 위치를 결정할 수 있다(S1050).
이후, 타이틀 디자인 결정부(270)는 배경 프레임의 적어도 일부의 색상 정보 및 비디오 콘텐츠의 속성 정보 중에서 적어도 하나에 기초하여, 타이틀의 최종 디자인을 결정하고(S1060), 그림자 결정부(280)는 배경 프레임으로부터 타이틀이 보다 잘 구분되도록 하기 위해, 타이틀의 최종 디자인에 그림자를 추가하고(S1070), 그라데이션 결정부(290)는 타이틀에 대한 배경 프레임의 그라데이션을 결정하면(S1080), 타이틀 이미지 생성부(300)는 앞에서 결정된 타이틀의 위치, 타이틀의 크기, 타이틀 디자인, 그림자 및 그라데이션에 기초하여, 타이틀 이미지를 생성할 수 있다(S1090).
본 명세서에서는, 설명의 편의를 위하여, 프레임 선택부(210)의 동작(S1000), 얼굴 인식부(220)의 동작(S1010) 및 배경 프레임 선정부(230)의 동작(S1020)이 수행된 이후에, 타이틀 영역 추출부(240)의 동작(S1030)이 수행되는 것으로 기재하였지만, 이에 한정되지 않는다. 즉, 타이틀 영역 추출부(240)의 동작(S1030)은 프레임 선택부(210)의 동작(S1000), 얼굴 인식부(220)의 동작(S1010) 및 배경 프레임 선정부(230)의 동작(S1020) 중에서 적어도 하나와 동시에 수행될 수 있으며, 타이틀 영역 추출부(240)의 동작(S1030)이 수행된 이후에 프레임 선택부(210)의 동작(S1000), 얼굴 인식부(220)의 동작(S1010) 및 배경 프레임 선정부(230)의 동작(S1020)이 수행될 수도 있다.
또한, 본 명세서에서는, 설명의 편의를 위하여, 그림자 결정부(280)가 타이틀의 최종 디자인에 그림자를 추가(S1070)한 이후에, 그라데이션 결정부(290)가 타이틀에 대한 배경 프레임의 그라데이션을 결정(S1080)하는 것으로 기재하였지만, 이에 한정되지 않는다. 즉, 그림자 결정부(280)의 동작(S1070)과 그라데이션 결정부(290)의 동작(S1080)은 동시에 수행될 수 있으며, 그라데이션 결정부(290)의 동작(S1080)이 수행된 이후에 그림자 결정부(280)의 동작(S1070)이 수행될 수도 있다.
본 발명의 실시 예에 의하면, 비디오 콘텐츠에서 인식한 얼굴과 비디오 콘텐츠의 색상 정보 및 속성 정보를 이용하여 비디오 콘텐츠의 타이틀 이미지를 생성함으로써, 사람의 수작업 없이 정확하게 비디오 콘텐츠의 타이틀 이미지를 생성할 수 있다.
본 발명에 첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 인코딩 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 인코딩 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방법으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시 예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 품질에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 균등한 범위 내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 타이틀 이미지 생성 장치
200: 타이틀 이미지 생성 프로그램
210: 프레임 선택부
220: 얼굴 인식부
230: 배경 프레임 선정부
240: 타이틀 영역 추출부
250: 타이틀 크기 결정부
260: 타이틀 위치 결정부
270: 타이틀 디자인 결정부
280: 그림자 결정부
290: 그라데이션 결정부
300: 타이틀 이미지 생성부

Claims (15)

  1. 비디오 콘텐츠에 대한 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하는 단계; 및
    상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  2. 제1 항에 있어서,
    상기 배경 프레임의 색상 정보를 분석하는 단계를 더 포함하고,
    상기 타이틀의 최종 디자인을 결정하는 단계는,
    상기 배경 프레임의 적어도 일부의 색상 정보에 더 기초하여, 상기 타이틀의 상기 최종 디자인을 결정하는
    콘텐츠에 대한 타이틀을 디자인하는 방법.
  3. 제1 항에 있어서,
    상기 비디오 콘텐츠의 속성 정보는,
    상기 비디오 콘텐츠의 장르 및 태그 정보 중에서 적어도 하나를 포함하는
    콘텐츠에 대한 타이틀을 디자인하는 방법.
  4. 제1 항에 있어서,
    상기 비디오 콘텐츠에 포함된 복수의 프레임들에서 얼굴을 인식하는 단계; 및
    상기 복수의 프레임들 중에서 소정의 인물의 얼굴이 인식되는 프레임을 상기 배경 프레임으로 결정하는 단계를 더 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  5. 제1 항에 있어서,
    상기 배경 프레임의 크기에 기초하여, 상기 타이틀의 크기를 결정하는 단계를 더 포함하고,
    상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계는,
    상기 타이틀의 크기를 더 이용하여, 상기 타이틀 이미지를 생성하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  6. 제5 항에 있어서,
    상기 타이틀에 대한 로우(raw) 이미지를 획득하는 단계; 및
    상기 로우 이미지에서 상기 타이틀이 존재하는 영역을 검출하는 단계를 더 포함하고,
    상기 타이틀의 크기를 결정하는 단계는,
    상기 배경 프레임의 크기에 기초하여, 상기 타이틀이 존재하는 영역의 크기를 조정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  7. 제5 항에 있어서,
    상기 타이틀의 크기를 결정하는 단계는,
    상기 배경 프레임의 가로 크기에 기초하여, 상기 타이틀의 제1 후보 크기를 결정하는 단계;
    상기 배경 프레임의 세로 크기에 기초하여, 상기 타이틀의 제2 후보 크기를 결정하는 단계; 및
    상기 제1 후보 크기와 상기 제2 후보 크기를 비교하여, 상기 타이틀의 크기를 결정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  8. 제7 항에 있어서,
    상기 제1 후보 크기와 상기 제2 후보 크기를 비교하여, 상기 타이틀의 크기를 결정하는 단계는,
    상기 제1 후보 크기보다 작은 상기 제2 후보 크기를 상기 타이틀의 크기로 결정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  9. 제1 항에 있어서,
    상기 배경 프레임에서 얼굴을 인식하는 단계; 및
    상기 인식의 결과에 기초하여, 상기 배경 프레임 내에서의 상기 타이틀의 위치를 결정하는 단계를 더 포함하고,
    상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 단계는,
    상기 타이틀의 위치를 더 이용하여, 상기 타이틀 이미지를 생성하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  10. 제9 항에 있어서,
    상기 타이틀의 위치를 결정하는 단계는,
    상기 배경 프레임에서 인식된 상기 얼굴과 중첩되지 않도록 상기 타이틀의 위치를 결정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  11. 제10 항에 있어서,
    상기 배경 프레임을 복수의 영역들로 구획하는 단계를 더 포함하고,
    상기 배경 프레임에서 인식된 상기 얼굴과 중첩되지 않도록 상기 타이틀의 위치를 결정하는 단계는,
    상기 복수의 영역들 중에서, 상기 얼굴이 위치하는 영역이 아닌 다른 영역에 상기 타이틀을 위치시키는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  12. 제1 항에 있어서,
    상기 타이틀의 최종 디자인을 결정하는 단계는,
    상기 타이틀의 마스킹 정보를 이용하여, 상기 타이틀의 그림자를 생성하는 단계; 및
    상기 그림자를 이용하여, 상기 최종 디자인을 결정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  13. 제1 항에 있어서,
    상기 타이틀의 최종 디자인을 결정하는 단계는,
    상기 배경 프레임의 적어도 일부의 색상 정보와 상기 타이틀의 색상 정보 중에서 적어도 하나에 기초하여, 상기 배경 프레임에 대한 그라데이션을 결정하는 단계; 및
    상기 그라데이션을 이용하여, 상기 최종 디자인을 결정하는 단계를 포함하는
    비디오 콘텐츠의 타이틀 이미지를 생성하는 방법.
  14. 타이틀 이미지 생성 프로그램이 저장된 메모리; 및
    상기 메모리로부터 상기 타이틀 이미지 생성 프로그램을 로드하여, 비디오 콘텐츠에 대한 타이틀의 초기 디자인을 확인하고, 상기 타이틀의 초기 디자인이 기본 디자인인 경우, 상기 비디오 콘텐츠의 속성 정보에 기초하여, 상기 타이틀의 최종 디자인을 결정하고, 상기 비디오 콘텐츠에 대한 배경 프레임과 상기 최종 디자인을 이용하여, 상기 비디오 콘텐츠의 타이틀 이미지를 생성하는 프로세서를 포함하는
    타이틀 이미지 생성 장치.
  15. 컴퓨터 판독 가능한 기록매체에 저장되어 있는 컴퓨터 프로그램으로서,
    상기 컴퓨터 프로그램은, 프로세서에 의해 실행되면,
    제1 항 내지 제13 항 중 어느 한 항에 따른 방법을 상기 프로세서가 수행하도록 하기 위한 명령어를 포함하는
    컴퓨터 프로그램.
KR1020210141053A 2021-10-21 2021-10-21 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치 KR20230057070A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210141053A KR20230057070A (ko) 2021-10-21 2021-10-21 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210141053A KR20230057070A (ko) 2021-10-21 2021-10-21 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치

Publications (1)

Publication Number Publication Date
KR20230057070A true KR20230057070A (ko) 2023-04-28

Family

ID=86143223

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210141053A KR20230057070A (ko) 2021-10-21 2021-10-21 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치

Country Status (1)

Country Link
KR (1) KR20230057070A (ko)

Similar Documents

Publication Publication Date Title
US10706334B2 (en) Type prediction method, apparatus and electronic device for recognizing an object in an image
Ajmal et al. A comparison of RGB and HSV colour spaces for visual attention models
US10169655B2 (en) Detection of logos in a sequence of video frames
CN107862315B (zh) 字幕提取方法、视频搜索方法、字幕分享方法及装置
US10607324B2 (en) Image highlight detection and rendering
US9189861B2 (en) Image processing device, image processing method, program, and recording medium
US8861867B2 (en) Reuse of image processing information
CN112329851B (zh) 一种图标检测方法、装置及计算机可读存储介质
US8270714B2 (en) Method and apparatus for colour correction of image sequences
CN107801013A (zh) 白平衡处理方法及装置、电子装置和计算机可读存储介质
US20150071532A1 (en) Image processing device, computer-readable recording medium, and image processing method
WO2019011342A1 (zh) 布料识别的方法、设备、电子设备及储存介质
KR101833943B1 (ko) 동영상의 주요 장면을 추출 및 탐색하는 방법 및 시스템
US10043098B2 (en) Method of detecting color object by using noise and system for detecting light emitting apparatus by using noise
KR20140096595A (ko) 이미지 분류 방법
US9230188B2 (en) Objective metric relating to perceptual color differences between images
CN110070080A (zh) 一种文字检测方法及装置、设备和计算机可读存储介质
KR20210098997A (ko) 자동화된 실시간 하이 다이나믹 레인지 콘텐츠 검토 시스템
US11216922B2 (en) Systems and methods for recognition of user-provided images
US11113537B2 (en) Image detection using multiple detection processes
CN106910207B (zh) 用于识别图像局部区域的方法、装置及终端设备
KR20230057070A (ko) 비디오 콘텐츠의 타이틀 이미지를 생성하는 방법 및 상기 방법을 수행하는 타이틀 이미지 생성 장치
JP2023508641A (ja) データ増強基盤事物分析モデル学習装置及び方法
Berbar Novel colors correction approaches for natural scenes and skin detection techniques
KR20230060085A (ko) 비디오 콘텐츠의 대표 이미지를 생성하는 방법 및 상기 방법을 수행하는 대표 이미지 생성 장치