KR20160057864A - 요약 컨텐츠를 생성하는 전자 장치 및 그 방법 - Google Patents

요약 컨텐츠를 생성하는 전자 장치 및 그 방법 Download PDF

Info

Publication number
KR20160057864A
KR20160057864A KR1020140159019A KR20140159019A KR20160057864A KR 20160057864 A KR20160057864 A KR 20160057864A KR 1020140159019 A KR1020140159019 A KR 1020140159019A KR 20140159019 A KR20140159019 A KR 20140159019A KR 20160057864 A KR20160057864 A KR 20160057864A
Authority
KR
South Korea
Prior art keywords
keyword
content
processor
contents
basic
Prior art date
Application number
KR1020140159019A
Other languages
English (en)
Inventor
유종욱
신기훈
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140159019A priority Critical patent/KR20160057864A/ko
Priority to PCT/KR2015/010944 priority patent/WO2016076540A1/en
Priority to US14/886,196 priority patent/US9654845B2/en
Priority to EP15192777.9A priority patent/EP3021233A1/en
Priority to CN201510779068.9A priority patent/CN105611382A/zh
Publication of KR20160057864A publication Critical patent/KR20160057864A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • G06F16/739—Presentation of query results in form of a video summary, e.g. the video summary being a video sequence, a composite still image or having synthesized frames
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords

Abstract

전자 장치가 개시된다. 본 전자 장치는, 컨텐츠 및 컨텐츠에 대한 부가 정보를 수신하는 통신부, 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 신호 처리부, 부가 정보를 이용하여 기본 키워드 및 기본 키워드와 관련된 연관 키워드를 결정하고, 기본 키워드 및 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 프로세서를 포함한다. 이에 따라, 수월하게 요약 컨텐츠를 생성할 수 있다.

Description

요약 컨텐츠를 생성하는 전자 장치 및 그 방법 { ELECTRONIC APPARATUS FOR GENERATING SUMMARY CONTENTS AND METHODS THEREOF }
본 발명은 요약 컨텐츠를 생성하는 전자 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 자동으로 요약 컨텐츠를 생성하는 전자 장치 및 그 방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 기능을 갖춘 전자 장치가 사용되고 있다. 전자 장치에서는 다양한 유형의 컨텐츠를 수신하여 재생할 수 있다.
컨텐츠와 관련하여서는, 해당 컨텐츠의 내용을 축약시켜 시청자의 관심을 얻기 위한 요약 컨텐츠가 제공되는 경우도 있다. 요약 컨텐츠를 제작하는 방법은 컨텐츠의 종류에 따라 다를 수 있다. 예를 들면, 뉴스의 경우 토픽이나 키워드에 따라 요약 컨텐츠를 만들 수 있고, 예능의 경우 웃음을 유발하는 장면 위주로 요약 컨텐츠를 구성할 수 있다. 드라마 및 영화의 경우에는 빠른 시간 안에 전체 내용을 파악할 수 있도록 내용 기반의 요약 컨텐츠를 만들 수 있다.
특히, 드라마 및 영화의 경우에는 등장인물과 사건에 따라 내용이 전개되고, 요약 컨텐츠를 만들 때 주요 등장인물, 주요 사건이 반드시 포함되어 있어야 한다. 이외 부수적인 장면들은 요약 컨텐츠에서 제외하더라도 전체 흐름에 큰 영향을 미치지 않는다. 등장인물과 사건 기반으로 요약 컨텐츠를 구성하였을 경우 시청자는 이것만 보더라도 전체 내용을 유추하고 이해할 수가 있다.
다만, 이러한 요약 컨텐츠를 제작하기 위해서 종래에는 사람이 직접 컨텐츠를 처음부터 끝까지 보고 주요 장면을 골라내어 편집하는 방법을 이용하여 장시간이 걸리는 문제가 있었다.
따라서, 좀더 편리하고 효율적으로 요약 컨텐츠를 생성할 수 있는 기술에 대한 필요성이 대두되었다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 컨텐츠에 대한 부가 정보를 이용하여, 자동으로 요약 컨텐츠를 생성하는 전자 장치 및 그 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 전자 장치는, 컨텐츠 및 상기 컨텐츠에 대한 부가 정보를 수신하는 통신부, 상기 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 신호 처리부, 상기 부가 정보를 이용하여 기본 키워드 및 상기 기본 키워드와 관련된 연관 키워드를 결정하고, 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 프로세서를 포함한다.
또한, 상기 부가 정보는, 상기 컨텐츠의 내용을 요약한 줄거리 정보를 포함하고, 상기 프로세서는, 상기 줄거리 정보에 포함된 각 단어들을 상기 기본 키워드로 검출하고, 기설정된 서버에서 상기 기본 키워드가 검색되고 연속되어 검색되는 키워드를 상기 연관 키워드로 결정할 수 있다.
그리고, 상기 프로세서는, 상기 컨텐츠를 복수의 컨텐츠 구간으로 구분하고, 상기 줄거리 정보를 상기 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분하며, 상기 복수의 줄거리 구간별로 상기 기본 키워드 및 상기 연관 키워드를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 상기 결정된 키워드에 대응되는 오디오 신호 구간을 탐색할 수 있다.
그리고, 상기 프로세서는, 상기 컨텐츠의 특정 구간 내에서 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 상기 특정 구간 전체를 상기 요약 컨텐츠에 포함시킬 수 있다.
또한, 상기 프로세서는, 상기 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임 사이의 비디오 프레임들을 전부 상기 요약 컨텐츠에 포함시킬 수 있다.
또한, 상기 프로세서는, 상기 줄거리 정보에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어는 상기 기본 키워드에서 제외할 수 있다.
그리고, 상기 부가 정보는, 상기 컨텐츠의 등장 인물의 이미지를 포함하고,
상기 프로세서는, 상기 복수의 비디오 프레임 중에서 상기 이미지가 표시된 비디오 프레임을 상기 요약 컨텐츠에 추가할 수 있다.
또한, 상기 프로세서는, 상기 컨텐츠 전체에서 등장 인물 별로 상기 이미지가 표시된 비디오 프레임의 빈도 수를 확인하여 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 상기 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 상기 요약 컨텐츠를 생성할 수 있다.
그리고, 상기 프로세서는, 상기 메타 데이터로부터 상기 기본 키워드를 검출하고 상기 기본 키워드와 관련된 연관 키워드를 결정할 수 있다.
또한, 디스플레이부를 더 포함하고, 상기 프로세서는, 컨텐츠 리스트를 제공하는 UI 화면 및 컨텐츠 요약 정보를 제공하는 UI 화면 중 적어도 하나에서 상기 요약 컨텐츠를 디스플레이할 수 있다.
한편, 본 발명의 일 실시 예에 따르면, 전자 장치의 요약 컨텐츠 생성 방법은, 컨텐츠 및 상기 컨텐츠에 대한 부가 정보를 수신하는 단계, 상기 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 단계, 상기 부가 정보를 이용하여 기본 키워드 및 상기 기본 키워드와 관련된 연관 키워드를 결정하는 단계 및 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 단계를 포함한다.
또한, 상기 부가 정보는, 상기 컨텐츠의 내용을 요약한 줄거리 정보를 포함하고, 상기 연관 키워드를 결정하는 단계는, 상기 줄거리 정보에 포함된 각 단어들을 상기 기본 키워드로 검출하고, 기설정된 서버에서 상기 기본 키워드가 검색되고 연속되어 검색되는 키워드를 상기 연관 키워드로 결정할 수 있다.
그리고, 상기 요약 컨텐츠를 생성하는 단계는, 상기 컨텐츠를 복수의 컨텐츠 구간으로 구분하고, 상기 줄거리 정보를 상기 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분하며, 상기 복수의 줄거리 구간별로 상기 기본 키워드 및 상기 연관 키워드를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 상기 결정된 키워드에 대응되는 오디오 신호 구간을 탐색할 수 있다.
그리고, 상기 요약 컨텐츠를 생성하는 단계는, 상기 컨텐츠의 특정 구간 내에서 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 상기 특정 구간 전체를 상기 요약 컨텐츠에 포함시킬 수 있다.
또한, 상기 요약 컨텐츠를 생성하는 단계는, 상기 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임 사이의 비디오 프레임들을 전부 상기 요약 컨텐츠에 포함시킬 수 있다.
또한, 상기 요약 컨텐츠를 생성하는 단계는, 상기 줄거리 정보에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어는 상기 기본 키워드에서 제외할 수 있다.
그리고, 상기 부가 정보는, 상기 컨텐츠의 등장 인물의 이미지를 포함하고, 상기 요약 컨텐츠를 생성하는 단계는, 상기 복수의 비디오 프레임 중에서 상기 이미지가 표시된 비디오 프레임을 상기 요약 컨텐츠에 추가할 수 있다.
또한, 상기 요약 컨텐츠를 생성하는 단계는, 상기 컨텐츠 전체에서 등장 인물 별로 상기 이미지가 표시된 비디오 프레임의 빈도 수를 확인하여 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 상기 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 상기 요약 컨텐츠를 생성할 수 있다.
그리고, 상기 연관 키워드를 결정하는 단계는, 상기 메타 데이터로부터 상기 기본 키워드를 검출하고 상기 기본 키워드와 관련된 연관 키워드를 결정할 수 있다.
또한, 컨텐츠 리스트를 제공하는 UI 화면 및 컨텐츠 요약 정보를 제공하는 UI 화면 중 적어도 하나에서 상기 요약 컨텐츠를 디스플레이하는 단계를 더 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 전자 장치는 컨텐츠에 대한 부가 정보를 이용하여 키워드를 결정하고, 그에 대응되는 오디오 신호 구간에 동기화된 비디오 프레임을 취합하여 자동으로 요약 컨텐츠를 생성할 수 있다. 이에 따라, 요약 컨텐츠의 생성에 있어서 효율성을 향상시킬 수 있다.
도 1은 본 발명의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 일 실시 예에 따른 키워드를 결정하는 방법을 설명하기 위한 순서도이다.
도 3은 본 발명의 일 실시 예에 따른 줄거리 정보로부터 연관 키워드를 결정하는 것을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 구간별 비디오 프레임을 검출하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시 예에 따른 특정 구간 전체를 요약 컨텐츠에 포함하는 방법을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 복수의 비디오 프레임에 추가 비디오 프레임을 추가하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시 예에 따른 기본 키워드를 결정하는 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 연관 키워드를 결정하는 방법을 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 등장 인물의 이미지를 더 이용하는 경우를 설명하기 위한 도면이다.
도 10은 본 발명의 일 실시 예에 따른 각각의 등장 인물의 중요도를 반영하여 요약 컨텐츠를 생성하는 것을 설명하기 위한 도면이다.
도 11은 본 발명의 다양한 실시 예에 따라 요약 컨텐츠를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 12는 본 발명의 일 실시 예에 따른 요약 컨텐츠를 생성하는 방법을 설명하기 위한 도면이다.
도 13은 본 발명의 일 실시 예에 따른 컨텐츠의 부가 정보를 설명하기 위한 도면이다.
도 14는 본 발명의 일 실시 예에 따른 전자 장치의 요약 컨텐츠 생성 방법을 설명하기 위한 흐름도이다.
도 15는 본 발명의 다양한 실시 예를 설명하기 위한 도면이다.
도 16은 본 발명의 다른 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블럭도이다.
이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른 전자 장치(100)의 구성을 나타내는 블럭도이다. 도 1에 도시된 바와 같이, 전자 장치(100)는 통신부(110), 신호 처리부(120) 및 프로세서(130)를 포함한다.
통신부(110)는 외부 서버와 통신을 수행한다. 통신부(110)는 외부 서버로부터 컨텐츠 및 컨텐츠에 대한 부가 정보를 수신하고, 요약 컨텐츠가 생성되면 외부 서버로 전송할 수 있다. 컨텐츠 및 컨텐츠에 대한 부가 정보는 동시에 수신될 수도 있으나, 이에 한정되는 것은 아니다. 예를 들어, 컨텐츠는 미리 수신하여 저장되어 있을 수 있고, 이후 사용자가 요약 컨텐츠 생성 명령을 입력하면 컨텐츠에 대한 부가 정보를 수신하여 요약 컨텐츠를 생성할 수 있다. 또한, 컨텐츠는 방송 사업자가 운영하는 컨텐츠 서버로부터 수신하고, 컨텐츠에 대한 부가 정보는 웹으로부터 수신할 수도 있다.
통신부(110)는 이더넷(Ethernet), 무선랜, Wi-Fi 등과 같은 다양한 통신 방식을 이용하여 외부 서버와 통신을 수행할 수 있으나, 반드시 이에 한정되는 것은 아니다. 또한, 외부 서버만이 아니라 다른 전자 장치와도 통신을 수행할 수 있다.
신호 처리부(120)는 신호 처리 회로로서 구현될 수 있으며, 통신부(110)를 통해 수신된 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리한다.
구체적으로, 신호 처리부(120)는 역다중화부, 오디오 디코더부, 비디오 디코더부를 포함할 수 있다.
역다중화(DeMultiplex)부는 재생하고자 하는 컨텐츠를 역 다중화하여, 오디오 데이터 및 비디오 데이터로 분리할 수 있다.
오디오 디코더부와 비디오 디코더부 각각은 역다중화부에 의해 분리된 오디오 데이터와 비디오 데이터를 디코딩할 수 있다. 이하에서는, 설명의 편의와 발명의 이해를 돕기 위해 디코딩된 오디오 데이터를 오디오 신호로, 디코딩된 비디오 데이터를 비디오 프레임으로 기술한다.
한편, 전술한 컨텐츠는 오디오 신호 및 비디오 프레임 뿐만 아니라, 텍스트 정보, EPG 정보와 같은 메타 데이터를 더 포함할 수 있다. 이 경우, 신호 처리부(120)는 수신된 컨텐츠를 신호 처리하여 컨텐츠에 포함된 오디오 신호 및 비디오 프레임과 메타 데이터를 분리할 수 있다.
프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어한다.
프로세서(130)는, 통신부(110)에 의해 수신된 컨텐츠의 부가 정보를 이용하여 기본 키워드 및 기본 키워드에 대한 연관 키워드를 결정한다. 예를 들어, 연관 키워드는 기본 키워드와 관련된 키워드일 수 있다. 예를 들어, 연관 키워드는 기본 키워드의 의미와 관련되거나 글자 형태와 관련된 키워드일 수 있다. 또한, 연관 키워드는 특정 서버에서 연속되어 검색되는 키워드 간의 관계를 분석하여 결정되는 키워드일 수 있으며, 이에 대한 구체적인 내용은 후술한다.
그리고, 프로세서(130)는, 신호 처리부(120)에 의해 분리되는 오디오 신호 구간들 중에서, 기본 키워드 및 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성할 수 있다. 요약 컨텐츠는 복수의 비디오 프레임만 포함하도록 생성될 수도 있으나, 이에 한정되지 않는다. 예를 들어, 복수의 비디오 프레임에 대응되는 오디오 신호를 포함하여 생성될 수도 있다. 또한, 프로세서(130)는 요약 컨텐츠를 생성하기 위해 신호 처리부(120)를 제어할 수 있다. 구체적으로, 프로세서(130)는 복수의 비디오 프레임을 취합하도록 신호 처리부(120)를 제어할 수 있다.
한편, 프로세서(130)는 일반적으로 장치의 제어를 담당하는 구성으로, cpu, 마이컴 등과 혼용될 수 있다. 이하에서는 프로세서(130)로 통일하여 기술한다.
또한, 프로세서(130)와 신호 처리부(120)는 하나의 SoC(system on chip)로 구현될 수 있다. 다만, 이하에서는 설명의 편의를 위해 프로세서(130)와 신호 처리부(120)를 구분하여 설명하기로 한다.
이하에서는 프로세서(130)의 요약 컨텐츠를 생성하는 다양한 방법에 대하여 설명한다.
도 2는 본 발명의 일 실시 예에 따른 키워드를 결정하는 방법을 설명하기 위한 순서도이다.
도 2에 따르면, 전자 장치(100)는 컨텐츠를 수신하면서 동시에 컨텐츠의 부가 정보를 수신한다(S210). 컨텐츠의 부가 정보는 컨텐츠의 줄거리 정보, 하이라이트 정보 및 등장 인물 정보 등일 수 있다. 컨텐츠의 부가 정보는 외부에 구비된 특정 서버로부터 직접 수신할 수도 있고, 인터넷에 연결되어 웹 사이트로부터 수신할 수도 있다. 한편, 컨텐츠의 부가 정보가 수신되지 않은 경우, 프로세서(130)는, 신호 처리부(120)에 의해 신호 처리되어 분리된 오디오 신호 및 비디오 프레임과 메타 데이터 중, 컨텐츠에 포함된 텍스트 정보, EPG 정보와 같은 메타 데이터를 컨텐츠의 부가 정보로서 이용할 수 있다.
프로세서(130)는, 컨텐츠의 부가 정보가 수신되면, 수신된 부가 정보로부터 기본 키워드를 결정한다(S220). 프로세서(130)는 컨텐츠의 부가 정보에 포함된 모든 명사를 기본 키워드로 결정할 수 있다. 다만, 이에 한정되는 것은 아니고, 컨텐츠의 부가 정보에 포함된 명사 중에서 기 설정된 빈도 수 이상 사용된 명사만을 기본 키워드로 결정할 수도 있다. 이와 관련된 내용은 후술한다.
그리고, 프로세서(130)는 기본 키워드로부터 연관 키워드를 결정한다(S230). 연관 키워드는 특정 서버에서 연속되어 검색되는 키워드 간의 관계를 분석하여 결정되는 키워드일 수 있다. 예를 들어, 특정 서버에서 기본 키워드가 검색되고 연속되어 검색되는 키워드를 연관 키워드로 결정할 수 있다. 또한, 연속되어 검색되는 키워드 간의 관계를 누적적으로 저장하여, 누적된 데이터에 기초하여 연관 키워드를 결정할 수도 있다.
그리고, 특정 서버는 전자 장치(100)와는 별도로 구비된 검색 엔진 서버일 수 있다. 예를 들어, 전자 장치(100)는 특정 검색 엔진 서버에서 기본 키워드가 검색되고 연속되어 검색되는 키워드를 연관 키워드로 결정할 수 있다. 다만, 이에 한정되는 것은 아니고, 전자 장치(100)는 특정 검색 엔진 서버로 기본 키워드를 전송하면, 특정 검색 엔진 서버로부터 기본 키워드와 연속되어 검색되는 키워드 중 적어도 하나의 키워드를 수신할 수도 있다. 전자 장치(100)는 수신된 키워드 중 적어도 하나를 연관 키워드로 결정할 수 있다. 또한, 특정 검색 엔진 서버는 연속되어 검색되는 키워드 간의 관계에 기초하여 연관 키워드를 결정해둘 수 있고, 전자 장치(100)는 수신된 키워드 중 연관 키워드를 결정하지 않고, 수신된 키워드 자체를 연관 키워드로 이용할 수 있다. 또한, 특정 서버는 검색 엔진 서버가 아닐 수 있고, 전자 장치(100)를 제조하는 제조업체가 직접 구비할 수도 있다. 그리고, 전자 장치(100)가 기본 키워드와 관련된 연관 키워드 정보를 저장하고 있을 수 있다.
또한, 프로세서(130)는 기본 키워드의 유의어를 연관 키워드로 결정하거나 특정 서버로부터 수신할 수 있다. 예를 들어, 기본 키워드가 '범죄'인 경우, 프로세서(130)는 '범법', '위법행위' 등의 유의어를 연관 키워드로 결정할 수 있다. 그리고, 프로세서(130)는 기본 키워드의 방언이나 옛말을 연관 키워드로 결정할 수도 있고, '판사', '법정' 및 '대법원'과 같이 관련되는 키워드를 연관 키워드로 결정할 수도 있다.
도 3은 본 발명의 일 실시 예에 따른 줄거리 정보(310)로부터 연관 키워드(20)를 결정하는 것을 설명하기 위한 도면이다.
도 3에 따르면, 프로세서(130)는 통신부(110)를 통해 수신된 줄거리 정보(310)로부터 동사, 관형사, 부사 등을 제거하고, 명사만을 추출할 수 있다. 줄거리 정보(310)는 컨텐츠의 내용을 요약한 정보일 수 있다. 또한, 줄거리 정보(310)는 텍스트로만 이루어져 있을 수 있다. 다만, 이에 한정되는 것은 아니고, 텍스트와 그림으로 이루어져 있을 수 있으며, 이 경우 프로세서(130)는 텍스트를 추출하여 기본 키워드(10)를 결정할 수 있다.
프로세서(130)는 추출된 명사 중에서 중복되는 명사를 삭제하고 남은 명사들을 기본 키워드(10)로 결정할 수 있다. 예를 들면, 프로세서(130)는 줄거리 정보(310)로부터 'morning', 'Manolin', 'man', 'shack', 'sight', 'friend', 'hand', 'friend' 등의 명사를 추출할 수 있다. 여기서, 프로세서(130)는 중복되는 두 번째 'friend'를 제거하여, 'morning', 'Manolin', 'man', 'shack', 'sight', 'friend', 'hand' 등으로 구성된 기본 키워드(10)를 결정할 수 있다.
기본 키워드(10)가 결정되면, 프로세서(130)는 기본 키워드(10)로부터 연관 키워드(20)를 결정할 수 있다. 도 3에서는 기본 키워드(10) 중 'man'에 대한 연관 키워드(20)를 도시하였다. 프로세서(130)는 'man'에 대한 유의어로 'male', 'guy', 'dude'…, 연관 검색어로 'men', 'woman', 'boy'…를 결정할 수 있다. 여기서, 연관 검색어는 상술한 연속되어 검색되는 키워드 간의 관계를 분석하여 결정되는 키워드일 수 있다. 다만, 이에 한정되는 것은 아니고, 유의어, 연관 검색어 등이 아닌 반의어가 연관 키워드로 결정될 수도 있다. 또한, 도 3에서 나열한 연관 키워드(20)를 모두 사용하지 않고 제한적으로 사용하는 구성도 얼마든지 가능하다. 프로세서(130)에 의해 결정된 기본 키워드(10) 및 연관 키워드(20) 중 일부만을 사용하는 구성에 대하여는 후술한다.
도 3에서는 줄거리 정보(310)에 기초하여 기본 키워드(10) 및 연관 키워드(20)를 결정하는 방법을 설명하였으나, 이에 한정되는 것은 아니다. 예를 들면, 프로세서(130)는 메타 데이터로부터 기본 키워드를 검출하고 기본 키워드와 관련된 연관 키워드를 결정할 수도 있다. 또한, 프로세서(130)는 기본 키워드로 동사를 이용할 수도 있고, 복수의 기본 키워드에 기초하여 연관 키워드를 결정할 수도 있다. 그리고, 프로세서(130)는 연관 키워드(20)를 이용하지 않고, 기본 키워드(10)만을 이용할 수도 있다.
또한, 도 3에서는 부가 정보로서 줄거리 정보(310)를 수신하는 것으로 설명하였으나, 부가 정보가 줄거리 정보(310)가 아닌 영상 정보나 이미지가 포함된 정보라면 신호 처리부(120)에 의해 메타 데이터를 추출할 수도 있다. 프로세서(130)는 메타 데이터로부터 기본 키워드를 추출할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 구간별 비디오 프레임을 검출하는 방법을 설명하기 위한 도면이다.
도 4에 따르면, 프로세서(130)는 컨텐츠(410)를 복수의 컨텐츠 구간(411, 412, 413, 414, 415, 416)으로 구분하고, 줄거리 정보(310)를 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간(311, 312, 313, 314, 315, 316)으로 구분할 수 있다. 그리고, 프로세서(130)는 복수의 줄거리 구간별로 기본 키워드(10) 및 연관 키워드(20)를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 결정된 키워드에 대응되는 오디오 신호 구간을 탐색할 수 있다.
구체적으로, 프로세서(130)는 수신된 컨텐츠(410)를 6개의 구간으로 구분할 수 있다. 이때, 도 4는 6개의 구간으로 분류하였으나, 이에 한정되는 것은 아니고, 컨텐츠의 재생 시간 등에 기초하여 6개 이상의 구간으로도 분류 가능하다. 또한, 사용자에 의해 구간의 개수를 입력받아, 입력받은 구간의 개수만큼 컨텐츠(410)를 구분하는 것도 가능하다.
그리고, 프로세서(130)는 줄거리 정보(310)를 복수의 컨텐츠 구간(411, 412, 413, 414, 415, 416) 각각에 대응되는 범위의 복수의 줄거리 구간(311, 312, 313, 314, 315, 316)으로 구분할 수 있다. 이때, 프로세서(310)는 줄거리 정보(310)의 데이터 용량, 줄 수, 문단 수 등을 기준으로 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분할 수 있다. 예를 들면, 줄 수를 기준으로 하고, 줄거리 정보(310)의 전체 줄 수가 120줄이라고 가정하면, 프로세서(130)는 줄거리 정보(310)를 각각 20줄로 이루어진 6개의 복수의 줄거리 구간으로 구분할 수 있다. 또한, 문단을 기준을 하고, 줄거리 정보(310)의 전체 문단 수가 18개라고 가정하면, 프로세서(130)는 줄거리 정보(310)를 각각 3문단으로 이루어진 6개의 복수의 줄거리 구간으로 구분할 수 있다.
프로세서(130)는 각각의 구간에 대한 기본 키워드(10)를 결정한다. 그에 따라, 줄거리 정보(310)의 제1 구간(311)에서는 제1 기본 키워드(11)가, 제2 구간(312)에서는 제2 기본 키워드(12)가 결정되고 나머지 구간도 마찬가지로 기본 키워드(10)가 구간 별로 결정될 수 있다. 구간 별로 기본 키워드(10)를 결정하는 방법은 전술하였으므로 생략한다.
프로세서(130)는 각각의 구간에 대한 기본 키워드(10)로부터 상술한 방법으로 연관 키워드(20)를 결정한다. 그에 따라, 제1 기본 키워드(11)로부터 제1 연관 키워드(21)가, 제2 기본 키워드(12)로부터 제2 연관 키워드(22)가 결정되고 나머지 구간도 마찬가지로 연관 키워드(20)가 구간별로 결정될 수 있다. 구간별로 연관 키워드(20)를 결정하는 방법은 전술하였으므로 생략한다.
프로세서(130)는 컨텐츠(410)의 제1 구간(411)에 대하여 제1 연관 키워드(21)를 이용하여 비디오 프레임을 검출한다. 구체적으로, 프로세서(130)는 컨텐츠(410)의 제1 구간(411)에서 제1 기본 키워드(11) 및 제1 연관 키워드(21) 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 컨텐츠(410)의 제1 구간(411)에 대한 제1 요약 컨텐츠를 생성할 수 있다. 프로세서(130)는 모든 구간에 대하여 각각의 요약 컨텐츠를 생성하고 취합하여 하나의 요약 컨텐츠를 생성할 수 있다.
이상과 같은 예에서 컨텐츠(410) 및 줄거리 정보(310)를 구간별로 비교함으로써, 단어의 오검출이 감소될 수 있어 효율적으로 요약 컨텐츠를 생성할 수 있게 된다.
도 5는 본 발명의 일 실시 예에 따른 특정 구간 전체를 요약 컨텐츠에 포함하는 방법을 설명하기 위한 도면이다.
도 5에 따르면, 프로세서(130)는 컨텐츠의 특정 구간 내에서 기본 키워드(10) 및 연관 키워드(20) 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 특정 구간 전체를 요약 컨텐츠에 포함시킬 수 있다. 예를 들어, 도 4에서와 같이 컨텐츠(410)가 6개의 구간으로 구분된 경우, 프로세서(130)는 각각의 구간에 대하여 기본 키워드(10) 및 연관 키워드(20) 중 적어도 하나에 대응되는 복수의 오디오 신호 구간을 검출할 수 있다. 또한, 프로세서(130)는 각각의 구간에서 검출된 오디오 신호 구간의 수를 산출할 수 있다.
만약 기 설정된 수가 150이라고 가정하는 경우, 도 5에서 컨텐츠(410)의 제5 구간(415)은 검출된 오디오 신호의 수가 151개로 기 설정된 수 이상에 해당한다. 그에 따라, 프로세서(130)는 컨텐츠(410)의 제5 구간(415) 전체를 요약 컨텐츠에 포함시킬 수 있다. 다만, 컨텐츠(410)의 다른 구간에 대하여는 검출된 오디오 신호의 수가 기 설정된 수 이상에 해당하지 아니한다. 따라서, 프로세서(130)는 각각의 구간에 대하여 기본 키워드(10) 및 연관 키워드(20) 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 프레임만을 취합할 수 있다. 한편, 오디오 신호 구간의 기 설정된 수는 사용자에 의해 설정될 수 있다.
이상과 같은 실시 예에 따르면, 키워드에 대응되는 오디오 신호 구간이 많이 검출되는 구간 전체를 요약 컨텐츠에 포함시킬 수 있어, 중요 구간을 손쉽게 검출할 수 있고, 의미 전달에 유리한 요약 컨텐츠의 생성이 가능하다.
도 6은 본 발명의 일 실시 예에 따른 복수의 비디오 프레임에 추가 비디오 프레임을 추가하는 방법을 설명하기 위한 도면이다.
도 6에 따르면, 프로세서(130)는 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 제1 비디오 프레임 및 제2 비디오 프레임 사이의 비디오 프레임들을 전부 요약 컨텐츠에 포함시킬 수 있다.
프로세서(130)는 기본 키워드(10) 및 연관 키워드(20) 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임의 전체 컨텐츠에 대한 상대적인 위치를 검출할 수 있다. 도 6의 첫 번째 도면은 프로세서(130)에 의해 추출된 비디오 프레임의 구간(611, 612, 613, 614, 615)을 나타낸다. 또한, 컨텐츠는 전체 67분이며, 첫 번째 추출된 비디오 프레임의 구간(611)은 5~11분, 두 번째 추출된 비디오 프레임의 구간(612)은 23~38분, 세 번째 추출된 비디오 프레임의 구간(613)은 40~49분 등이다.
프로세서(130)는 추출된 비디오 프레임의 시간 정보에 기초하여 제1 비디오 프레임과 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 제1 비디오 프레임과 제2 비디오 프레임 사이의 추출되지 않은 비디오 프레임을 추가로 요약 컨텐츠에 포함시킬 수 있다. 예를 들어, 도 6의 첫 번째 도면에서 기 설정된 임계 시간을 3분으로 가정하면, 두 번째, 세 번째 추출된 비디오 프레임의 구간(612, 613)의 사이 시간과 네 번째, 다섯 번째 추출된 비디오 프레임의 구간(614, 615)의 사이 시간은 2분으로 기 설정된 임계 시간 미만이다. 따라서, 프로세서(130)는 두 번째, 세 번째 추출된 비디오 프레임의 구간(612, 613)의 사이 시간과 네 번째, 다섯 번째 추출된 비디오 프레임의 구간(614, 615)의 사이 시간에 대응되는 비디오 프레임(621, 622)을 요약 컨텐츠에 포함시킬 수 있다. 이는 도 6의 두 번째 도면에 도시되어 있다.
다만, 첫 번째, 두 번째 추출된 비디오 프레임의 구간(611, 612)의 사이 시간은 12분, 세 번째, 네 번째 추출된 비디오 프레임의 구간(613, 614)의 사이 시간은 4분으로, 프로세서(130)는 기 설정된 임계 시간보다 큰 구간은 요약 컨텐츠에 포함시키지 않을 수 있다.
이상과 같은 예에서, 기 설정된 임계 시간은 사용자에 의해 선택될 수 있다. 또한, 기 설정된 임계 시간 미만인 구간을 요약 컨텐츠를 생성하는 경우에 포함시킴으로써 요약 컨텐츠가 좀더 매끄럽게 생성될 수 있다.
도 7은 본 발명의 일 실시 예에 따른 기본 키워드(10)를 결정하는 방법을 설명하기 위한 도면이다.
도 7에 따르면, 프로세서(130)는 줄거리 정보(310)에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어를 기본 키워드(10)에서 제외할 수 있다. 도 7은 줄거리 정보(310)에 포함된 명사가 추출된 것으로 가정하였다. 프로세서(130)는 추출된 각각의 명사가 줄거리 정보(310)에서 사용된 빈도를 계산할 수 있다. 도 7은 'morning'은 23회, 'Manolin'은 25회, 'man'는 7회, 'shack'는 31회 및 'sight'는 17회가 사용된 것으로 가정하였다.
프로세서(130)는 추출된 각각의 명사의 사용 빈도를 기 설정된 수 이하인지 검토할 수 있다. 이때 기 설정된 사용 빈도의 수는 사용자에 의해 설정될 수 있다. 도 7에서 기 설정된 수는 20으로 가정하였다. 검토 결과, 프로세서(130)는 기 설정된 수 이하인, 'man ', 'sight'을 기본 키워드에서 제외하고, 'morning', 'Manolin', 및 'shack'만을 기본 키워드(10)로 결정할 수 있다.
기 설정된 사용 빈도의 수는 사용자에 의해 설정되는 것으로 가정하였으나, 이에 한정되는 것은 아니다. 예를 들면, 추출된 각각의 명사의 사용 빈도 중에서 가장 많이 사용된 것을 기준으로 하여 사용 빈도의 기준을 정할 수도 있고, 추출된 각각의 명사의 사용 빈도의 평균값을 사용 빈도의 기준으로 정할 수도 있다.
도 7은 각 단어들 중 사용 빈도가 기 설정된 빈도 수 이하인 경우 기본 키워드(10)에서 제외하는 구성을 개시하였다. 다만, 이에 한정되지 않고, 사용 빈도 수에 비례하여 연관 키워드(20)의 개수를 결정할 수도 있다. 이에 대해서는 도 8에서 설명한다.
도 8은 본 발명의 일 실시 예에 따른 연관 키워드(20)를 결정하는 방법을 설명하기 위한 도면이다.
도 8에 따르면, 프로세서(130)는 사용 빈도 수에 비례하여 연관 키워드(20)의 개수를 결정할 수 있다. 구체적으로, 프로세서(130)는 사용 빈도가 높은 'shack'의 연관 키워드(20)의 개수가 가장 많도록, 사용 빈도가 낮은 'man'의 연관 키워드(20)의 개수가 가장 적도록 연관 키워드를 결정할 수 있다. 즉, 프로세서(130)는 사용 빈도가 높은 'shack'는 'hut', 'cabin', 'shanty' 및 'whare'의 4개의 연관 키워드(20)를, 사용 빈도가 낮은 'man'는 'male'의 1개의 연관 키워드(20)를 갖도록 할 수 있다. 도 8에서는 사용 빈도 수의 일의 자리에서 올림하여 각 기본 키워드(10) 간의 비례 관계를 설정하였다. 다만, 이에 한정되지 않고, 반올림 또는 내림하여 비례 관계를 설정할 수도 있다.
또한, 도 8에서는 유의어를 연관 키워드(20)로 이용하였고, 그에 따라 고유대명사인 'Manolin'은 연관 키워드(20)가 결정되지 않았다. 다만, 이는 일 실시 예에 불과하고, 연관 검색어를 연관 키워드(20)로 이용하는 경우라면, 'Manolin'에 대한 연관 키워드(20)가 결정될 수도 있다.
또한, 프로세서(130)는 도 7과 같이 기 설정된 수 이하로 사용된 단어를 기본 키워드(10)에서 제외하고, 나머지 단어만으로 사용 빈도에 기초하여 연관 키워드(20)의 개수를 결정할 수도 있다.
이상과 같은 예에서, 줄거리 정보(310)에 포함되는 수많은 단어를 모두 기본 키워드(10)로 하지 않거나, 연관 키워드(20)의 개수를 조절함으로써, 요약 컨텐츠의 재생 시간이 매우 길어지는 문제점을 극복할 수 있다.
도 9는 본 발명의 일 실시 예에 따른 등장 인물의 이미지를 더 이용하는 경우를 설명하기 위한 도면이다.
도 9에 따르면, 통신부(110)에 의해 수신되는 컨텐츠의 부가 정보는 컨텐츠의 등장 인물의 이미지를 포함할 수 있다. 프로세서(130)는 복수의 비디오 프레임 중에서 등장 인물의 이미지가 포함된 비디오 프레임을 요약 컨텐츠에 추가할 수 있다. 즉, 프로세서(130)는 키워드에 대응되는 비디오 프레임의 구간(911, 912)과 등장 인물의 이미지에 대응되는 비디오 프레임의 구간(921, 922) 전부를 이용하여 요약 컨텐츠를 생성할 수 있다.
구체적으로, 프로세서(130)는 키워드 또는 등장 인물의 이미지에 대응되는 비디오 프레임의 시간 정보를 기초로 하여 키워드 및 등장 인물의 이미지 중 적어도 하나에 대응되는 비디오 프레임(931, 912, 922)의 시간 정보를 추출할 수 있다. 이후, 프로세서(130)는 추출된 시간 정보에 기초하여 추출되지 않은 비디오 프레임을 제거하여 최종 요약 컨텐츠(940)를 생성할 수 있다.
도 9에서는, 키워드 및 등장 인물의 이미지 중 적어도 하나에 대응되는 비디오 프레임을 추출하는 구성을 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 프로세서(130)는 키워드 및 등장 인물의 이미지 모두에 대응되는 비디오 프레임만을 추출하거나 등장 인물의 이미지에 대응되는 비디오 프레임만을 추출할 수도 있다.
도 10은 본 발명의 일 실시 예에 따른 각각의 등장 인물의 중요도를 반영하여 요약 컨텐츠를 생성하는 것을 설명하기 위한 도면이다.
도 10에 따르면, 프로세서(130)는 컨텐츠 전체에서 등장 인물 별로 이미지가 표시된 비디오 프레임의 빈도 수를 확인할 수 있다. 도 10에서 제1 등장 인물(1010)은 423프레임, 제2 등장 인물(1020)은 225프레임, 제3 등장 인물(1030)은 57프레임, 제4 등장 인물(1040)은 631프레임 및 제5 등장 인물(1050)은 817프레임만큼 등장하는 것으로 가정하였다.
그리고, 프로세서(130)는 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 요약 컨텐츠를 생성할 수 있다. 기 설정된 빈도 수를 300프레임으로 가정하는 경우, 프로세서(130)는 제2 등장 인물(1020)과 제3 등장 인물(1030)의 이미지가 표시된 비디오 프레임을 제외하고, 요약 컨텐츠를 생성할 수 있다.
기 설정된 빈도 수는 사용자에 의해 미리 결정될 수도 있으나, 이에 한정되는 것은 아니다. 예를 들면, 사용자가 아닌 프로세서(130)가 각 등장 인물 별로 이미지가 표시된 비디오 프레임의 빈도 수가 계산된 후에 빈도 수들의 평균을 기준으로 기 설정된 빈도 수를 정할 수도 있다.
이상과 같은 예를 통해, 프로세서(130)는 컨텐츠 전체에서 출현하는 빈도에 따라 중요 등장 인물을 결정할 수 있고, 요약 컨텐츠를 중요한 인물 위주로 생성할 수 있다.
도 11은 본 발명의 다양한 실시 예에 따라 요약 컨텐츠를 디스플레이하는 방법을 설명하기 위한 도면이다. 도 11에 따르면, 전자 장치(100)는 디스플레이부를 더 포함할 수 있다. 또한, 도 11에서는 요약 컨텐츠가 생성되어 디스플레이되는 구성에 대하여 설명한다.
요약 컨텐츠는 서비스 제공자에 의해 생성될 수 있다. 이 경우, 전자 장치(100)는 서버일 수 있다. 사용자는 서버에 접속하여 특정 컨텐츠를 선택할 수 있고, 전자 장치(100)는 사용자에게 특정 컨텐츠에 대한 기 생성된 요약 컨텐츠를 전송할 수 있다.
한편, 요약 컨텐츠는 사용자에 의해 생성될 수도 있다. 이 경우, 전자 장치(100)는 가정 내의 디스플레이 장치 또는 셋탑박스일 수 있다. 사용자는 특정 컨텐츠를 시청하는 도중 또는 컨텐츠 리스트를 제공하는 UI 화면 상에서 요약 컨텐츠의 생성 명령을 입력할 수 있다. 이에 대한 구체적인 내용은 후술한다.
도 11a는 본 발명의 일 실시 예에 따른 컨텐츠 리스트를 제공하는 UI 화면을 나타내는 도면이다.
도 11a에 따르면, 프로세서(130)는 컨텐츠 리스트를 제공하는 UI 화면을 디스플레이할 수 있다. 프로세서(130)는 컨텐츠 리스트의 좌측 열에 각각의 컨텐츠에 대한 요약 컨텐츠를 디스플레이하고, 우측 열에는 대응되는 컨텐츠에 대한 정보를 디스플레이할 수 있다. 다만, 이에 한정되는 것은 아니고, 프로세서(130)는 좌측 열에 컨텐츠의 썸 네일을 디스플레이할 수도 있고, 특히, 전자 장치(100)가 포커스를 지원하는 경우 포커스된 컨텐츠(1110)만을 요약 컨텐츠로 재생할 수도 있다. 이 경우, 프로세서(130)는 포커스된 컨텐츠(1110)의 요약 컨텐츠만을 재생하고, 포커스되지 않은 나머지 컨텐츠에 대하여는 썸 네일을 디스플레이하거나 포커스되지 않은 나머지 요약 컨텐츠의 시작 화면 만을 정지한 상태로 디스플레이할 수도 있다. 이 때, 포커스가 다른 위치로 변경되면, 정지 상태의 시작 화면에서 요약 컨텐츠가 디스플레이될 수 있다.
포커스된 컨텐츠에 대한 정보(1120)에는 컨텐츠의 제목, 상영 시간 및 줄거리 등을 포함할 수 있다. 다만, 이에 한정되는 것은 아니고, 요약 컨텐츠에 대한 정보를 추가로 포함할 수도 있다.
도 11b는 본 발명의 다른 실시 예에 따른 컨텐츠 요약 정보를 제공하는 UI 화면을 나타내는 도면이다.
도 11b에 따르면, 프로세서(130)는 컨텐츠 요약 정보를 제공하는 UI 화면을 디스플레이할 수 있다. 컨텐츠 요약 정보를 제공하는 UI 화면은 도 11a와 같은 화면에서 어느 하나의 컨텐츠를 선택한 경우에 디스플레이될 수 있다.
프로세서(130)는 컨텐츠 요약 정보를 제공하는 UI 화면에 요약 컨텐츠(1130) 및 대응되는 컨텐츠에 대한 정보(1140)를 디스플레이할 수 있다. 프로세서(130)는 요약 컨텐츠(1130)를 재생할 수 있으나, 이에 한정되는 것은 아니다. 예를 들어, 요약 컨텐츠(1130)는 정지 화면으로 대기하고 있다가 사용자의 재생 명령 등에 따라 재생될 수도 있다.
한편, 컨텐츠에 대한 정보(1140)는 상술한 바와 같이 컨텐츠의 제목, 상영 시간 및 줄거리 등을 포함할 수 있다. 다만, 도 11a 보다 많은 정보를 디스플레이할 수 있으며, 특히, 요약 컨텐츠(1130)가 재생됨에 따라 대응되는 줄거리 정보가 디스플레이되도록 할 수도 있다.
도 11c는 본 발명의 또 다른 실시 예에 따른 요약 컨텐츠를 디스플레이하는 화면을 나타내는 도면이다.
도 11c에 따르면, 프로세서(130)는 요약 컨텐츠(1150) 및 재생 중인 요약 컨텐츠의 장면에 대응되는 줄거리 정보(1160)를 디스플레이하도록 디스플레이부를 제어할 수 있다. 구체적으로, 프로세서(130)는 상술한 다양한 실시 예에 따라 요약 컨텐츠를 생성할 수 있고, 요약 컨텐츠를 생성하는 과정에서 줄거리 정보(1160)에 대응되는 비디오 프레임을 각각의 줄거리 정보(1160)에 대응시켜 둘 수 있다. 이후, 프로세서(130)는 요약 컨텐츠의 생성이 완료되면, 동시에 디스플레이하도록 할 수도 있다. 다만, 이에 한정되는 것은 아니고, 프로세서(130)는 요약 컨텐츠가 생성된 후 줄거리 정보(1160)에서 그에 해당하는 부분을 추출하는 구성도 가능하다.
한편, 도 11c에서 프로세서(130)는 디스플레이부를 통해 요약 컨텐츠(1150)와 재생 중인 요약 컨텐츠의 장면에 대응되는 줄거리 정보(1160)를 디스플레이하는 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들면, 프로세서(130)는 요약 컨텐츠가 생성되기 전에 요약 컨텐츠의 장면에 대응되는 줄거리 정보(1160)를 포함시켜 요약 컨텐츠(1150)를 생성할 수도 있다. 즉, 프로세서(130)는 줄거리 정보(1160)를 요약 컨텐츠와 별개로 디스플레이하는 것이 아닌 줄거리 정보(1160)가 포함된 요약 컨텐츠를 디스플레이하도록 할 수 있다.
한편, 도 11은 요약 컨텐츠가 생성되어 저장된 상태에서 UI 화면 등으로 디스플레이되는 방법을 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 사용자가 요약 컨텐츠의 생성 명령을 입력하는 경우, 프로세서(130)는 해당 컨텐츠에 대한 요약 컨텐츠를 생성하도록 제어할 수 있다. 이에 대한 구체적인 설명은 후술한다. 요약 컨텐츠의 생성이 완료되면, 프로세서(130)는 생성된 요약 컨텐츠를 디스플레이하도록 제어할 수 있다. 또는, 프로세서(130)는 요약 컨텐츠의 생성이 완료되었음을 사용자에게 표시할 수 있고, 사용자의 재생 명령에 따라 요약 컨텐츠를 재생하도록 할 수도 있다.
도 11에서는 기 생성된 요약 컨텐츠를 사용자에게 제공하는 방법을 설명하였다. 도 12에서는 사용자에 의해 요약 컨텐츠가 생성되는 방법을 설명한다.
도 12는 본 발명의 일 실시 예에 따른 요약 컨텐츠를 생성하는 방법을 설명하기 위한 도면이다.
도 12의 첫 번째 도면은 특정 컨텐츠가 디스플레이되는 상태에서 사용자가 요약 컨텐츠의 생성 명령을 입력한 도면이다. 사용자는 특정 컨텐츠를 시청하는 도중에 외출을 하거나 기타 시청이 어려운 사정이 발생하는 경우 요약 컨텐츠의 생성 명령을 입력할 수 있다. 또한, 사용자는 시청하고 있는 특정 컨텐츠를 SNS 등에 업로드하기 위해 요약 컨텐츠의 생성 명령을 입력할 수도 있다. 이 경우, 프로세서(130)는 생성된 요약 컨텐츠를 SNS 서버로 전송할 수 있다.
또한, 프로세서(130)는 스트리밍되고 있는 특정 컨텐츠에 대한 요약 컨텐츠의 생성 명령이 입력되면, 특정 컨텐츠의 전부를 수신할 때까지 기다린 후, 수신이 완료되면 요약 컨텐츠를 생성할 수 있다. 다만, 이에 한정되는 것은 아니고, 특정 컨텐츠의 재생이 완료된 부분까지만 요약 컨텐츠를 생성하고, 아직 재생이 완료되지 않은 부분은 수신이 완료되면 요약 컨텐츠로 생성하여 먼저 생성된 요약 컨텐츠와 병합될 수도 있다. 이하에서는 특정 컨텐츠를 전부 수신한 후 요약 컨텐츠를 생성하는 것으로 설명한다.
사용자가 요약 컨텐츠 생성 명령을 입력하면, 프로세서(130)는 “요약 컨텐츠를 생성하시겠습니까?”라는 확인 메시지(1210)를 디스플레이할 수 있다. 다만, 이는 일 실시 예에 불과하고, 이러한 확인 메시지(1210)를 디스플레이하지 않고 사용자의 요약 컨텐츠 생성 명령에 따라 바로 요약 컨텐츠를 생성할 수 있다.
도 12의 두 번째 도면은 확인 메시지(1210)가 디스플레이된 상태에서 사용자가 Yes를 선택한 도면이다. 그에 따라, 프로세서(130)는 요약 컨텐츠를 생성하게 된다. 프로세서(130)는 요약 컨텐츠를 생성하면서 “요약 컨텐츠 생성 중입니다.”라는 메시지(1220)를 디스플레이할 수 있다. 다만, 이는 일 실시 예에 불과하고, 이러한 메시지(1220)를 디스플레이하지 않고 디스플레이 중인 컨텐츠가 계속하여 디스플레이될 수도 있다. 또한, 디스플레이 장치(100)가 턴 오프되었더라도 전원이 공급되는 상태라면 요약 컨텐츠가 생성될 수도 있다.
도 12의 세 번째 도면은 요약 컨텐츠의 생성이 완료되어 요약 컨텐츠가 디스플레이되는 것을 나타낸 도면이다. 프로세서(130)는 요약 컨텐츠가 생성되면 곧바로 디스플레이할 수 있다. 다만, 이에 한정되는 것은 아니고, 프로세서(130)는 요약 컨텐츠가 생성되었다는 메시지만을 디스플레이할 수도 있다.
한편, 도 12에서는 사용자가 컨텐츠를 시청하는 도중에 요약 컨텐츠를 생성하는 경우에 대해서만 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 사용자는 도 11a 및 11b에서와 같이 컨텐츠 리스트를 제공하는 UI 화면 또는 컨텐츠 요약 정보를 제공하는 UI 화면 상에서 특정 컨텐츠에 대한 요약 컨텐츠 생성 명령을 입력할 수도 있다.
도 13은 본 발명의 일 실시 예에 따른 컨텐츠의 부가 정보를 설명하기 위한 도면이다. 도 13의 구성 중 도 1과 중복되는 부분의 설명은 생략한다.
도 13에 따르면, 전자 장치(100)는 통신부(110), 신호 처리부(120) 및 프로세서(130) 외에 추가적으로 저장부(140)를 포함할 수 있다. 프로세서(130)는 통신부(110)를 통하여 컨텐츠 및 컨텐츠에 대한 부가 정보를 수신할 수 있다. 신호 처리부(120)는 컨텐츠를 신호 처리하여 오디오 신호, 비디오 프레임 및 메타 데이터로 분리할 수 있다. 그 중에서 메타 데이터는 저장부(140)에 저장될 수 있다. 또한, 프로세서(130)는 통신부(110)를 통해 수신된 컨텐츠에 대한 부가 정보를 저장부(140)에 저장할 수 있다.
프로세서(130)는 수신된 컨텐츠의 오디오 신호, 비디오 프레임 및 메타 데이터를 분석할 수 있다. 예를 들어, 오디오 신호를 분석하는 경우 프로세서(130)는 오디오 신호를 텍스트화하여 저장부(140)로 저장할 수 있다. 이 경우 음성 인식 기술이 이용될 수 있다. 또한, 비디오 프레임을 분석하는 경우 프로세서(130)는 비디오 프레임으로부터 등장 인물의 이미지를 추출하여 저장부(140)로 저장할 수 있다. 이 경우 얼굴 인식 기술이 이용될 수 있다.
저장부(140)는 컨텐츠에 대한 부가 정보 뿐만 아니라 컨텐츠를 분석하여 생성된 정보도 저장할 수 있다. 프로세서(130)는 저장된 정보에 기초하여, 기본 키워드를 결정할 수 있다. 또한, 프로세서(130)는 등장 인물의 이미지를 통해 요약 컨텐츠 생성에 이용할 수 있다.
또한, 저장부(140)는 생성된 요약 컨텐츠를 기본 키워드, 연관 키워드 및 줄거리 등과 함께 저장할 수 있다. 다만, 이에 한정되는 것은 아니고, 요약 컨텐츠 만이 대응되는 컨텐츠와 함께 저장될 수도 있다. 또한, 요약 컨텐츠의 수가 많아져 저장 공간이 부족한 경우 생성된 순서에 따라 요약 컨텐츠를 삭제할 수도 있다. 요약 컨텐츠를 삭제하는 경우 사용자에게 삭제 여무를 문의할 수 있다.
도 14는 본 발명의 일 실시 예에 따른 전자 장치(100)의 요약 컨텐츠 생성 방법을 설명하기 위한 흐름도이다.
도 14에 따르면, 전자 장치(100)는 컨텐츠 및 컨텐츠에 대한 부가 정보를 수신한다(S1410). 컨텐츠에 대한 부가 정보는 인터넷을 통해 수신된 정보일 수도 있으나, 컨텐츠를 분석하여 생성된 정보일 수도 있다. 그리고, 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리한다 (S1420). 또한, 신호 처리 과정에서 메타 데이터가 생성될 수 있다.
그리고, 부가 정보를 이용하여 기본 키워드(10) 및 기본 키워드(10)와 관련된 연관 키워드(20)를 결정한다(S1430). 기본 키워드(10)는 컨텐츠의 부가 정보로부터 특정 필터링 과정을 거쳐 추출될 수 있다. 연관 키워드(20)는 기 설정된 방법에 의해 기본 키워드(10)로부터 도출될 수 있으며, 도출된 연관 키워드(20) 중 일부는 특정 필터링 과정을 거쳐 연관 키워드(20)로부터 제외될 수 있다.
그리고, 생성된 오디오 신호 구간들 중에서, 기본 키워드 및 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성할 수 있다(S1440).
또한, 부가 정보는, 컨텐츠의 내용을 요약한 줄거리 정보를 포함하고, 연관 키워드를 결정하는 단계(S1430)는, 줄거리 정보에 포함된 각 단어들을 기본 키워드로 검출하고, 기설정된 서버에서 기본 키워드가 검색되고 연속되어 검색되는 키워드를 연관 키워드로 결정할 수 있다.
그리고, 요약 컨텐츠를 생성하는 단계(S1440)는, 컨텐츠를 복수의 컨텐츠 구간으로 구분하고, 줄거리 정보를 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분하며, 복수의 줄거리 구간별로 기본 키워드 및 연관 키워드를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 결정된 키워드에 대응되는 오디오 신호 구간을 탐색할 수 있다.
또한, 요약 컨텐츠를 생성하는 단계(S1440)는, 컨텐츠의 특정 구간 내에서 기본 키워드 및 연관 키워드 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 특정 구간 전체를 요약 컨텐츠에 포함시킬 수 있다.
그리고, 요약 컨텐츠를 생성하는 단계(S1440)는, 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 제1 비디오 프레임 및 제2 비디오 프레임 사이의 비디오 프레임들을 전부 요약 컨텐츠에 포함시킬 수 있다.
또한, 요약 컨텐츠를 생성하는 단계(S1440)는, 줄거리 정보에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어는 기본 키워드에서 제외할 수 있다.
그리고, 부가 정보는, 컨텐츠의 등장 인물의 이미지를 포함하고, 요약 컨텐츠를 생성하는 단계(S1440)는, 복수의 비디오 프레임 중에서 이미지가 표시된 비디오 프레임을 요약 컨텐츠에 추가할 수 있다.
또한, 요약 컨텐츠를 생성하는 단계(S1440)는, 컨텐츠 전체에서 등장 인물 별로 이미지가 표시된 비디오 프레임의 빈도 수를 확인하여 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 요약 컨텐츠를 생성할 수 있다.
그리고, 연관 키워드를 결정하는 단계(S1430)는, 메타 데이터로부터 기본 키워드를 검출하고 기본 키워드와 관련된 연관 키워드를 결정할 수 있다.
또한, 컨텐츠 리스트를 제공하는 UI 화면 및 컨텐츠 요약 정보를 제공하는 UI 화면 중 적어도 하나에서 요약 컨텐츠를 디스플레이할 수 있다.
한편, 상술한 전자 장치(100)는 키워드를 기본적으로 이용하는 구성으로 설명하였다. 이하에서는 좀더 다양한 실시 예를 설명한다.
도 15는 본 발명의 다양한 실시 예를 설명하기 위한 도면이다.
도 15에 따르면, 프로세서(130)는 키워드에 대응되는 비디오 프레임의 구간(911, 912)을 추출할 수 있다. 그리고, 프로세서(130)는 추출된 비디오 프레임의 구간(911, 912)만을 이용하여 키워드 위주의 요약 컨텐츠를 생성할 수 있다. 이에 대한 설명은 상술한 바와 동일하다.
또한, 프로세서(130)는 등장 인물의 이미지에 대응되는 비디오 프레임(921, 922)을 추출할 수 있다. 그리고, 프로세서(130)는 추출된 비디오 프레임(921, 922)만을 이용하여 등장 인물 위주의 요약 컨텐츠를 생성할 수 있다. 상술한 구성은 등장 인물의 이미지에 대응되는 비디오 프레임(921, 922)을 키워드에 대응되는 비디오 프레임(911, 912)에 추가하는 구성과는 차이가 있다. 등장 인물의 이미지에 대응되는 비디오 프레임(921, 922)만을 이용하여 요약 컨텐츠를 생성하는 경우 시각적 효과를 극대화할 수 있다.
도 15에서는 키워드 또는 등장 인물의 이미지에 대응되도록 비디오 프레임을 추출하는 구성을 도시하였으나, 이에 한정되지 않는다. 예를 들어, 얼굴이 검출된 시점에 발생하는 특정 오디오 신호만을 포함하는 비디오 프레임만을 추출하는 구성도 가능하다.
한편, 프로세서(130)는 키워드에 대응되는 비디오 프레임(911, 912)과 등장 인물의 이미지에 대응되는 비디오 프레임(921, 922)을 통해 요약 컨텐츠를 생성할 수 있다. 이는 상술한 구성으로 자세한 설명은 생략한다.
도 16은 본 발명의 다른 실시 예에 따른 전자 장치(100')의 세부 구성을 나타내는 블럭도이다. 도 16에 따르면, 전자 장치(100')는 통신부(110), 신호 처리부(120), 프로세서(130), 저장부(140), 디스플레이부(150), 사용자 인터페이스부(160), 스피커(180), 버튼(181), 카메라(182), 마이크(183)를 포함한다. 도 16에 도시된 구성요소들 중 도 1에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
프로세서(130)는 저장부(140)에 저장된 각종 프로그램을 이용하여 전자 장치(100)의 동작을 전반적으로 제어한다.
구체적으로, 프로세서(130)는 RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n), 버스(136)를 포함한다.
RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(135-1 내지 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
메인 CPU(133)는 저장부(140)에 액세스하여, 저장부(140)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(140)에 저장된 각종 프로그램 등을 이용하여 다양한 동작을 수행한다.
ROM(132)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(133)는 ROM(132)에 저장된 명령어에 따라 저장부(140)에 저장된 O/S를 RAM(131)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(133)는 저장부(140)에 저장된 각종 어플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(134)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부(미도시)는 수신된 제어 명령에 기초하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이부(150)의 디스플레이 영역 내에 표시된다.
한편, 상술한 프로세서(130)의 동작은 저장부(140)에 저장된 프로그램에 의해 이루어질 수 있다.
저장부(140)는 전자 장치(100)를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 키워드 추출 모듈, 비디오 프레임 추출 모듈, 음성 인식 모듈 등과 같이 다양한 데이터를 저장한다.
이 경우 프로세서(130)는 저장부(140)에 저장된 정보에 기초하여 키워드를 추출하여 요약 컨텐츠를 생성할 수 있다.
사용자 인터페이스부(160)는 다양한 사용자 인터렉션(interaction)을 수신한다. 여기서, 사용자 인터페이스부(160)는 전자 장치(100)의 구현 예에 따라 다양한 형태로 구현 가능하다. 전자 장치(100)가 디지털 TV로 구현되는 경우 사용자 인터페이스부(160)는 원격 제어 장치로부터 리모콘 신호를 수신하는 리모콘 수신부, 사용자 모션을 감지하는 카메라, 사용자 음성을 수신하는 마이크 등으로 구현 가능하다. 또한, 전자 장치(100)가 터치 기반의 휴대 단말로 구현되는 경우 사용자 인터페이스부(160)는 터치패드와 상호 레이어 구조를 이루는 터치 스크린 형태로 구현될 수도 있다. 이 경우, 사용자 인터페이스부(160)는 상술한 디스플레이부(150)로 사용될 수 있게 된다.
스피커(180)는 신호 처리부(120)에서 처리된 각종 오디오 데이터 뿐만 아니라 각종 알림 음이나 음성 메시지 등을 출력하는 구성요소이다.
버튼(181)은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
카메라(182)는 사용자의 제어에 따라 정지 영상 또는 동영상을 촬상하기 위한 구성이다. 카메라(182)는 전면 카메라, 후면 카메라와 같이 복수 개로 구현될 수 있다. 마이크(183)는 사용자 음성이나 기타 소리를 입력받아 오디오 데이터로 변환하기 위한 구성이다.
이상과 같이 본 발명의 다양한 실시 예에 따르면, 잔지 장치는 자동으로 요약 컨텐츠를 생성할 수 있다. 구체적으로, 전자 장치는 컨텐츠의 부가 정보 중 키워드를 추출하여 그에 대응되는 비디오 프레임을 취합하여 요약 컨텐츠를 생성할 수 있다. 그에 따라, 내용을 충실하게 반영하면서도 편리하게 요약 컨텐츠를 생성할 수 있어 효율성이 향상된다.
한편, 이러한 다양한 실시 예에 따른 방법들은 프로그래밍되어 각종 저장 매체에 저장될 수 있다. 이에 따라, 저장 매체를 실행하는 다양한 유형의 전자 장치에서 상술한 다양한 실시 예에 따른 방법들이 구현될 수 있다.
구체적으로는, 본 발명의 일 실시 예에 따르면, 컨텐츠 및 컨텐츠에 대한 부가 정보를 수신하는 단계, 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 단계, 부가 정보를 이용하여 기본 키워드 및 기본 키워드와 관련된 연관 키워드를 결정하는 단계 및 생성된 오디오 신호 구간들 중에서, 기본 키워드 및 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 단계를 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 방송 수신 장치 110 : 통신부
120 : 컨텐츠 처리부 130 : 제어부

Claims (20)

  1. 전자 장치에 있어서,
    컨텐츠 및 상기 컨텐츠에 대한 부가 정보를 수신하는 통신부;
    상기 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 신호 처리부;
    상기 부가 정보를 이용하여 기본 키워드 및 상기 기본 키워드와 관련된 연관 키워드를 결정하고, 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 프로세서;를 포함하는 전자 장치.
  2. 제1항에 있어서,
    상기 부가 정보는, 상기 컨텐츠의 내용을 요약한 줄거리 정보를 포함하고,
    상기 프로세서는,
    상기 줄거리 정보에 포함된 각 단어들을 상기 기본 키워드로 검출하고, 기설정된 서버에서 상기 기본 키워드가 검색되고 연속되어 검색되는 키워드를 상기 연관 키워드로 결정하는 것을 특징으로 하는 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 컨텐츠를 복수의 컨텐츠 구간으로 구분하고, 상기 줄거리 정보를 상기 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분하며, 상기 복수의 줄거리 구간별로 상기 기본 키워드 및 상기 연관 키워드를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 상기 결정된 키워드에 대응되는 오디오 신호 구간을 탐색하는 것을 특징으로 하는 전자 장치.
  4. 제3항에 있어서,
    상기 프로세서는,
    상기 컨텐츠의 특정 구간 내에서 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 상기 특정 구간 전체를 상기 요약 컨텐츠에 포함시키는 것을 특징으로 하는 전자 장치.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임 사이의 비디오 프레임들을 전부 상기 요약 컨텐츠에 포함시키는 것을 특징으로 하는 전자 장치.
  6. 제2항에 있어서,
    상기 프로세서는,
    상기 줄거리 정보에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어는 상기 기본 키워드에서 제외하는 것을 특징으로 하는 전자 장치.
  7. 제1항에 있어서,
    상기 부가 정보는, 상기 컨텐츠의 등장 인물의 이미지를 포함하고,
    상기 프로세서는,
    상기 복수의 비디오 프레임 중에서 상기 이미지가 표시된 비디오 프레임을 상기 요약 컨텐츠에 추가하는 것을 특징으로 하는 전자 장치.
  8. 제7항에 있어서,
    상기 프로세서는,
    상기 컨텐츠 전체에서 등장 인물 별로 상기 이미지가 표시된 비디오 프레임의 빈도 수를 확인하여 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 상기 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 상기 요약 컨텐츠를 생성하는 것을 특징으로 하는 전자 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 메타 데이터로부터 상기 기본 키워드를 검출하고 상기 기본 키워드와 관련된 연관 키워드를 결정하는 것을 특징으로 하는 전자 장치.
  10. 제2항에 있어서,
    디스플레이부;를 더 포함하고,
    상기 프로세서는,
    컨텐츠 리스트를 제공하는 UI 화면 및 컨텐츠 요약 정보를 제공하는 UI 화면 중 적어도 하나에서 상기 요약 컨텐츠를 디스플레이하도록 제어하는 것을 특징으로 하는 전자 장치.
  11. 전자 장치의 요약 컨텐츠 생성 방법에 있어서,
    컨텐츠 및 상기 컨텐츠에 대한 부가 정보를 수신하는 단계;
    상기 컨텐츠를 신호 처리하여 오디오 신호 및 비디오 프레임으로 분리하는 단계;
    상기 부가 정보를 이용하여 기본 키워드 및 상기 기본 키워드와 관련된 연관 키워드를 결정하는 단계; 및
    상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 복수의 오디오 신호 구간에 동기화된 복수의 비디오 프레임을 취합하여 요약 컨텐츠를 생성하는 단계;를 포함하는 전자 장치의 요약 컨텐츠 생성 방법.
  12. 제11항에 있어서,
    상기 부가 정보는, 상기 컨텐츠의 내용을 요약한 줄거리 정보를 포함하고,
    상기 연관 키워드를 결정하는 단계는,
    상기 줄거리 정보에 포함된 각 단어들을 상기 기본 키워드로 검출하고, 기설정된 서버에서 상기 기본 키워드가 검색되고 연속되어 검색되는 키워드를 상기 연관 키워드로 결정하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  13. 제12항에 있어서,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 컨텐츠를 복수의 컨텐츠 구간으로 구분하고, 상기 줄거리 정보를 상기 복수의 컨텐츠 구간 각각에 대응되는 범위의 복수의 줄거리 구간으로 구분하며, 상기 복수의 줄거리 구간별로 상기 기본 키워드 및 상기 연관 키워드를 결정하고, 각 줄거리 구간에 대응되는 컨텐츠 구간별로 상기 결정된 키워드에 대응되는 오디오 신호 구간을 탐색하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  14. 제13항에 있어서,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 컨텐츠의 특정 구간 내에서 상기 기본 키워드 및 상기 연관 키워드 중 적어도 하나에 대응되는 오디오 신호 구간이 기 설정된 수 이상으로 검출되면, 상기 특정 구간 전체를 상기 요약 컨텐츠에 포함시키는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  15. 제11항에 있어서,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 복수의 비디오 프레임 중 하나인 제1 비디오 프레임과 다른 하나인 제2 비디오 프레임 사이의 시간 차가 기 설정된 임계 시간 미만이면 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임 사이의 비디오 프레임들을 전부 상기 요약 컨텐츠에 포함시키는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  16. 제12항에 있어서,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 줄거리 정보에 포함된 각 단어들 중에서 기 설정된 빈도 수 이하로 사용되는 단어는 상기 기본 키워드에서 제외하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  17. 제11항에 있어서,
    상기 부가 정보는, 상기 컨텐츠의 등장 인물의 이미지를 포함하고,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 복수의 비디오 프레임 중에서 상기 이미지가 표시된 비디오 프레임을 상기 요약 컨텐츠에 추가하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  18. 제17항에 있어서,
    상기 요약 컨텐츠를 생성하는 단계는,
    상기 컨텐츠 전체에서 등장 인물 별로 상기 이미지가 표시된 비디오 프레임의 빈도 수를 확인하여 기 설정된 빈도 수 이하로 등장하는 등장 인물의 경우, 상기 등장 인물의 이미지가 표시된 비디오 프레임을 제외하고 상기 요약 컨텐츠를 생성하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  19. 제11항에 있어서,
    상기 연관 키워드를 결정하는 단계는,
    상기 메타 데이터로부터 상기 기본 키워드를 검출하고 상기 기본 키워드와 관련된 연관 키워드를 결정하는 것을 특징으로 하는 전자 장치의 요약 컨텐츠 생성 방법.
  20. 제12항에 있어서,
    컨텐츠 리스트를 제공하는 UI 화면 및 컨텐츠 요약 정보를 제공하는 UI 화면 중 적어도 하나에서 상기 요약 컨텐츠를 디스플레이하는 단계;를 더 포함하는 전자 장치의 요약 컨텐츠 생성 방법.
KR1020140159019A 2014-11-14 2014-11-14 요약 컨텐츠를 생성하는 전자 장치 및 그 방법 KR20160057864A (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020140159019A KR20160057864A (ko) 2014-11-14 2014-11-14 요약 컨텐츠를 생성하는 전자 장치 및 그 방법
PCT/KR2015/010944 WO2016076540A1 (en) 2014-11-14 2015-10-16 Electronic apparatus of generating summary content and method thereof
US14/886,196 US9654845B2 (en) 2014-11-14 2015-10-19 Electronic apparatus of generating summary content and method thereof
EP15192777.9A EP3021233A1 (en) 2014-11-14 2015-11-03 Electronic apparatus for generating summary content and method thereof
CN201510779068.9A CN105611382A (zh) 2014-11-14 2015-11-13 产生概要内容的电子设备及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140159019A KR20160057864A (ko) 2014-11-14 2014-11-14 요약 컨텐츠를 생성하는 전자 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20160057864A true KR20160057864A (ko) 2016-05-24

Family

ID=54608267

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140159019A KR20160057864A (ko) 2014-11-14 2014-11-14 요약 컨텐츠를 생성하는 전자 장치 및 그 방법

Country Status (5)

Country Link
US (1) US9654845B2 (ko)
EP (1) EP3021233A1 (ko)
KR (1) KR20160057864A (ko)
CN (1) CN105611382A (ko)
WO (1) WO2016076540A1 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018155807A1 (ko) * 2017-02-22 2018-08-30 삼성전자 주식회사 전자 장치, 그의 문서 표시 방법 및 비일시적 컴퓨터 판독가능 기록매체
KR20200042767A (ko) * 2018-10-16 2020-04-24 주식회사 포스코아이씨티 키워드 추출 및 요약문 생성 시스템 및 방법
US10768887B2 (en) 2017-02-22 2020-09-08 Samsung Electronics Co., Ltd. Electronic apparatus, document displaying method thereof and non-transitory computer readable recording medium
WO2022059854A1 (ko) * 2020-08-01 2022-03-24 주식회사 크리스피언 비디오 컨텐츠로부터 키워드를 추출하는 전자 장치 및 비디오 컨텐츠로부터 키워드를 추출하는 방법
KR20220067207A (ko) * 2020-11-17 2022-05-24 주식회사 카카오 컨텐츠 정보 제공 방법 및 컨텐츠 정보를 제공하는 사용자 단말
WO2023182542A1 (ko) * 2022-03-22 2023-09-28 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
US11908192B2 (en) 2018-05-29 2024-02-20 Samsung Electronics Co., Ltd. Electronic device and control method therefor
KR102652009B1 (ko) * 2023-09-07 2024-03-27 아이보람 주식회사 모국어 습득 원리를 적용한 영어 교육을 수행함에 있어, 뉴럴 네트워크를 이용하여 사용자 단말에게 동영상을 기반으로 하는 이북을 제공하는 방법 및 장치

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10984248B2 (en) * 2014-12-15 2021-04-20 Sony Corporation Setting of input images based on input music
US20170300748A1 (en) * 2015-04-02 2017-10-19 Scripthop Llc Screenplay content analysis engine and method
US10095786B2 (en) 2015-04-09 2018-10-09 Oath Inc. Topical based media content summarization system and method
US10762284B2 (en) * 2017-08-21 2020-09-01 International Business Machines Corporation Automated summarization of digital content for delivery to mobile devices
CN108307250B (zh) 2018-01-23 2020-10-30 浙江大华技术股份有限公司 一种生成视频摘要的方法及装置
KR102426089B1 (ko) * 2018-02-13 2022-07-28 삼성전자주식회사 전자 장치 및 전자 장치의 요약 영상 생성 방법
CN109218835B (zh) * 2018-09-30 2020-04-14 百度在线网络技术（北京）有限公司 精华视频的生成方法、装置、设备及存储介质
KR102656963B1 (ko) * 2019-04-03 2024-04-16 삼성전자 주식회사 전자 장치 및 전자 장치의 제어 방법
US10904476B1 (en) 2019-12-12 2021-01-26 Amazon Technologies, Inc. Techniques for up-sampling digital media content
US10924629B1 (en) * 2019-12-12 2021-02-16 Amazon Technologies, Inc. Techniques for validating digital media content
KR20220006926A (ko) 2020-07-09 2022-01-18 삼성전자주식회사 요약 비디오를 생성하는 디바이스 및 방법

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5664227A (en) 1994-10-14 1997-09-02 Carnegie Mellon University System and method for skimming digital audio/video data
US8051446B1 (en) 1999-12-06 2011-11-01 Sharp Laboratories Of America, Inc. Method of creating a semantic video summary using information from secondary sources
JP3642019B2 (ja) * 2000-11-08 2005-04-27 日本電気株式会社 Ａｖコンテンツ自動要約システム及びａｖコンテンツ自動要約方法
EP1616275A1 (en) * 2003-04-14 2006-01-18 Koninklijke Philips Electronics N.V. Method and apparatus for summarizing a music video using content analysis
JP4359069B2 (ja) * 2003-04-25 2009-11-04 日本放送協会 要約生成装置及びそのプログラム
US20100005485A1 (en) 2005-12-19 2010-01-07 Agency For Science, Technology And Research Annotation of video footage and personalised video generation
JP4346613B2 (ja) * 2006-01-11 2009-10-21 株式会社東芝 映像要約装置及び映像要約方法
JP4835321B2 (ja) * 2006-08-21 2011-12-14 ソニー株式会社 番組提供方法、番組提供方法のプログラム、番組提供方法のプログラムを記録した記録媒体及び番組提供装置
JP4920395B2 (ja) * 2006-12-12 2012-04-18 ヤフー株式会社 動画要約自動作成装置、方法、及びコンピュータ・プログラム
JP4873018B2 (ja) * 2009-01-09 2012-02-08 ソニー株式会社 データ処理装置、データ処理方法、及び、プログラム
US9111582B2 (en) * 2009-08-03 2015-08-18 Adobe Systems Incorporated Methods and systems for previewing content with a dynamic tag cloud
US9146993B1 (en) * 2012-03-16 2015-09-29 Google, Inc. Content keyword identification
CN103793449B (zh) * 2012-10-26 2017-05-17 三菱电机株式会社 信息处理装置和信息处理方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018155807A1 (ko) * 2017-02-22 2018-08-30 삼성전자 주식회사 전자 장치, 그의 문서 표시 방법 및 비일시적 컴퓨터 판독가능 기록매체
US10768887B2 (en) 2017-02-22 2020-09-08 Samsung Electronics Co., Ltd. Electronic apparatus, document displaying method thereof and non-transitory computer readable recording medium
US11556302B2 (en) 2017-02-22 2023-01-17 Samsung Electronics Co., Ltd. Electronic apparatus, document displaying method thereof and non-transitory computer readable recording medium
US11908192B2 (en) 2018-05-29 2024-02-20 Samsung Electronics Co., Ltd. Electronic device and control method therefor
KR20200042767A (ko) * 2018-10-16 2020-04-24 주식회사 포스코아이씨티 키워드 추출 및 요약문 생성 시스템 및 방법
WO2022059854A1 (ko) * 2020-08-01 2022-03-24 주식회사 크리스피언 비디오 컨텐츠로부터 키워드를 추출하는 전자 장치 및 비디오 컨텐츠로부터 키워드를 추출하는 방법
KR20220067207A (ko) * 2020-11-17 2022-05-24 주식회사 카카오 컨텐츠 정보 제공 방법 및 컨텐츠 정보를 제공하는 사용자 단말
WO2023182542A1 (ko) * 2022-03-22 2023-09-28 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
KR102652009B1 (ko) * 2023-09-07 2024-03-27 아이보람 주식회사 모국어 습득 원리를 적용한 영어 교육을 수행함에 있어, 뉴럴 네트워크를 이용하여 사용자 단말에게 동영상을 기반으로 하는 이북을 제공하는 방법 및 장치

Also Published As

Publication number Publication date
CN105611382A (zh) 2016-05-25
US20160142794A1 (en) 2016-05-19
EP3021233A1 (en) 2016-05-18
US9654845B2 (en) 2017-05-16
WO2016076540A1 (en) 2016-05-19

Similar Documents

Publication Publication Date Title
KR20160057864A (ko) 요약 컨텐츠를 생성하는 전자 장치 및 그 방법
US9787627B2 (en) Viewer interface for broadcast image content
US8615777B2 (en) Method and apparatus for displaying posting site comments with program being viewed
JP4920395B2 (ja) 動画要約自動作成装置、方法、及びコンピュータ・プログラム
JP5135024B2 (ja) コンテンツのシーン出現を通知する装置、方法およびプログラム
JP2007150724A (ja) 映像視聴支援システムおよび方法
TWI527442B (zh) 資訊萃取方法及設備以及其電腦可讀取的媒體
JP2007150723A (ja) 映像視聴支援システムおよび方法
US9147434B2 (en) Information processing apparatus and information processing method
CN101553814A (zh) 用于产生视频数据流摘要的方法和设备
KR101440168B1 (ko) 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기
US20100083314A1 (en) Information processing apparatus, information acquisition method, recording medium recording information acquisition program, and information retrieval system
KR20160059162A (ko) 방송 수신 장치 및 그 제어 방법
CN103327407A (zh) 设置视听内容观看级别的方法
JP5857449B2 (ja) 画像処理装置及び録画装置
KR20140044663A (ko) 방송 수신 장치 및 디스플레이 장치와 이를 이용한 검색 방법
JP5197841B1 (ja) 映像再生装置及び映像再生方法
JP5343658B2 (ja) 録画再生装置及びコンテンツ検索プログラム
JP2008022292A (ja) 出演者情報検索システム、出演者情報取得装置、出演者情報検索装置、および、その方法ならびにプログラム
JP2014130536A (ja) 情報管理装置、サーバ及び制御方法
KR20150048961A (ko) 핫 씬 서비스 시스템, 핫 씬 서비스 방법 및 이를 위한 장치
JP5410128B2 (ja) コンテンツ表示制御装置、コンテンツ表示制御方法、プログラム、記録媒体
KR102664295B1 (ko) 수어 자막 동영상 플랫폼 제공 방법 및 장치
JP5492314B2 (ja) 映像再生装置及び映像再生方法
KR101481689B1 (ko) 숫자정보를 이용한 멀티미디어 컨텐츠 탐색방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application