KR20140126556A - 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체 - Google Patents

감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체 Download PDF

Info

Publication number
KR20140126556A
KR20140126556A KR1020130044884A KR20130044884A KR20140126556A KR 20140126556 A KR20140126556 A KR 20140126556A KR 1020130044884 A KR1020130044884 A KR 1020130044884A KR 20130044884 A KR20130044884 A KR 20130044884A KR 20140126556 A KR20140126556 A KR 20140126556A
Authority
KR
South Korea
Prior art keywords
audio
file
video
meta information
files
Prior art date
Application number
KR1020130044884A
Other languages
English (en)
Inventor
한정안
정유식
박명환
이광희
박민호
정상석
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020130044884A priority Critical patent/KR20140126556A/ko
Publication of KR20140126556A publication Critical patent/KR20140126556A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/38—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/381—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using identifiers, e.g. barcodes, RFIDs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H04N21/2323—Content retrieval operation locally within server, e.g. reading video streams from disk arrays using file mapping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/237—Communication with additional data server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 사용자가 자신의 사진 앨범을 감상하고자 할 때 혹은 음악 파일을 재생하고자 할 때 사용자의 감성 및 상황을 기초로 해당 영상 또는 음원 파일과 매핑된 배경 음악 또는 배경 이미지를 자동으로 선택하여 함께 재생할 수 있도록 하는 감성 기반 멀티미디어 재생 기술에 관한 것으로, 본 발명의 일 측면에 따른 감성 기반 멀티미디어 재생을 위한 방법은, 서버 또는 사용자 단말에서 수행하는 방법으로서, (a) 메타 정보를 기초로 인덱싱 처리된 오디오 또는 비디오 파일 중 하나가 선택되면, 상기 인덱싱 정보를 기초로 상기 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하거나 또는 상기 선택된 비디오 파일에 매칭하는 하나 이상의 오디오 타이틀을 추출하기 위한 단계; 및 (b) 상기 선택된 오디오(또는 비디오) 파일과 상기 추출된 비디오(또는 오디오) 파일 중 적어도 하나를 제공하거나 또는 상기 선택된 비디오 파일에 매칭하는 오디오 타이틀을 제공하여 선택된 비디오(또는 오디오) 파일의 재생 시 추출된 오디오(또는 비디오) 파일을 백그라운드 음악으로 동시에 재생되도록 하기 위한 단계를 포함할 수 있다.

Description

감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체{Apparatus, Server, Terminal, Method, and Recording Medium for playing Multimedia based on Emotion}
본 발명은 사진 및 음악을 포함하는 멀티미디어의 재생 기술에 관한 것으로, 보다 상세하게는 사용자가 자신의 사진 앨범을 감상하고자 할 때 혹은 음악 파일을 재생하고자 할 때 사용자의 감성 및 상황을 기초로 해당 영상 또는 음원 파일과 매핑된 배경 음악 또는 배경 이미지를 자동으로 선택하여 함께 재생할 수 있도록 하는, 감성 기반 멀티미디어 재생 기술에 관한 것이다.
정보 통신 기술이 급속도로 발전함에 따라 다양한 정보, 게임, 멀티미디어 데이터들을 일반인들도 쉽게 접할 수 있는 기회가 많아지고 있다. 이러한 관점에서 스마트 폰, 개인용 컴퓨터 및 개인용 통신기기들은 일반인들에게 다양한 정보를 얻을 수 있도록 하는 매체가 되고 있고, 스마트 폰과 같은 사용자 단말이 보편화되면서 사람들은 언제 어디서든 듣고 싶은 음악을 찾아 듣거나 보고 싶은 사진을 찾아 볼 수 있게 되었다.
일반적으로, 스마트 폰 사용자는 자신의 감정 상태나 현재의 상황(예를 들어, 일시, 계절, 비올 때, 공부할 때, 생일 파티 때 등)에 따라 음악을 다르게 선택하게 되고, 사진을 촬영할 때도 감정 상태나 현재의 상황에 따라 서로 다른 장면의 사진이 생성될 것이다.
따라서, 사용자가 특정 사진을 선택하여 보고 있을 때 해당 사진과 감정 및/또는 상황이 동일/유사한 음악을 들을 수 있거나, 사용자가 특정 음악을 선택하여 들을 때 해당 음악과 감정 및/또는 상황이 동일/유사한 사진 파일을 동시에 볼 수 있다면, 사용자의 만족도를 증대시킬 수 있을 것이다.
그러나, 종래의 대부분의 미디어 서비스는 사용자가 소유하는 데이터에 대해서 한 가지 미디어만 독립적으로 재생하도록 설계되어 있을 뿐 오디오와 비디오 미디어를 연계하여 함께 재생하지는 못하고, 비록 오디오와 비디오를 서로 링크시켜 동시에 재생하는 기술이 공개특허공보 제10-2007-0070734호 등을 통해 제안된 바 있지만, 이러한 종래의 기술은 사전에 별도로 오디오와 비디오를 서로 링크시키기 위한 작업을 수행해야 하는 번거로움이 있으며, 더욱이 사용자의 감성 및/또는 상황을 기반으로 사진 앨범과 음원 파일에 대해서 서로 연관성을 가지고 재생하지는 못하는 문제점이 있었다.
공개특허공보 제10-2007-0070734호(2007.07.04. 공개)
본 발명은 전술한 종래의 문제점을 해결하기 위한 것으로, 그 목적은 사용자가 자신의 사진 앨범을 감상하고자 할 때 혹은 음악 파일을 재생하고자 할 때 사용자의 감성 및/또는 상황 등을 기초로 해당 영상 또는 음원 파일과 매핑된 배경 음악 또는 배경 이미지를 함께 재생할 수 있도록 하는, 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체를 제공하는 것이다.
전술한 목적을 달성하기 위하여 본 발명의 일 측면에 따른 감성 기반 멀티미디어 재생을 위한 장치는, 메타 정보를 기초로 인덱싱 처리된 오디오 또는 비디오 파일 중 하나가 선택되면, 상기 인덱싱 정보를 기초로 상기 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하거나 또는 상기 선택된 비디오 파일에 매칭하는 하나 이상의 오디오 타이틀을 추출하기 위한 매칭 파일 추출부; 및 상기 선택된 오디오(또는 비디오) 파일과 상기 추출된 비디오(또는 오디오) 파일 중 적어도 하나를 제공하거나 또는 상기 선택된 비디오 파일에 매칭하는 오디오 타이틀을 제공하기 위한 오/비디오 파일 제공부를 포함할 수 있고, 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성하기 위한 메타정보 생성부; 상기 생성된 메타정보를 기초로 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대해 인덱싱(indexing) 처리하여 인덱싱 정보를 생성하기 위한 인덱싱 처리부; 및 상기 인덱싱 처리된 오디오 파일, 비디오 파일, 오디오 타이틀, 또는 인덱싱 정보를 저장하기 위한 오/비디오 파일 저장부 중 적어도 하나 이상을 더 포함할 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일의 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 객관적인 고정 정보로서의 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 주관적인 변동 정보로서의 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
상기 매칭 파일 추출부는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 오디오 또는 비디오 파일을 추출할 수 있다.
상기 오/비디오 파일 제공부는, 일 예로 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 상기 유사도에 따라 정렬할 수 있고, 다른 예로 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일을 상기 정렬된 순서 또는 불규칙한 순서에 따라 재생할 수 있고, 또 다른 예로 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일 중 선택된 파일만 재생할 수 있다.
상기 획득된 오디오 또는 비디오 파일은 사용자 단말로부터 업로딩된 파일일 수 있고, 상기 생성된 메타정보는 상기 업로딩 시 상기 사용자 단말로부터 등록된 것일 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 다른 측면에 따른 감성 기반 멀티미디어 재생을 위한 방법은, 서버 또는 사용자 단말에서 수행하는 방법으로서, (a) 메타 정보를 기초로 인덱싱 처리된 오디오 또는 비디오 파일 중 하나가 선택되면, 상기 인덱싱 정보를 기초로 상기 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하거나 또는 상기 선택된 비디오 파일에 매칭하는 하나 이상의 오디오 타이틀을 추출하기 위한 단계; 및 (b) 상기 선택된 오디오(또는 비디오) 파일과 상기 추출된 비디오(또는 오디오) 파일 중 적어도 하나를 제공하거나 또는 상기 선택된 비디오 파일에 매칭하는 오디오 타이틀을 제공하기 위한 단계를 포함할 수 있고, (c) 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성하기 위한 단계; (d) 상기 생성된 메타정보를 기초로 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대해 인덱싱(indexing) 처리하여 인덱싱 정보를 생성하기 위한 단계; 및 (e) 상기 인덱싱 처리된 오디오 파일, 비디오 파일, 오디오 타이틀, 또는 인덱싱 정보를 저장하기 위한 단계 중 적어도 하나를 더 포함할 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일에 대한 객관적인 고정 정보(즉, 생성 시간, 위치, 장르 등을 포함하는 기본 메타 정보), 및 사용자 관점에서의 주관적인 변동 정보(즉, 사용자의 감정 또는 상황 등을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보) 중 적어도 하나를 포함할 수 있다.
상기 단계 (a)는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 오디오 또는 비디오 파일을 추출할 수 있고, 상기 단계 (b)는 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 상기 유사도에 따라 정렬할 수 있다.
일 예로, 상기 단계 (b)는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일을 상기 정렬된 순서 또는 불규칙한 순서에 따라 재생할 수 있다.
다른 예로, 상기 단계 (b)는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일 중 선택된 파일만 재생할 수 있다.
상기 오디오 또는 비디오 파일은 사용자 단말에 있는 파일이거나 또는 사용자 단말로부터 서버로 업로딩된 파일일 수 있고, 상기 단계 (c)에서 생성된 메타정보는 사용자로부터 입력되거나 또는 상기 업로딩 시 사용자 단말로부터 등록된 것일 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따른 감성 기반 멀티미디어 재생을 위한 서버는, 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하는 데이터베이스부; 사용자 단말로부터 상기 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일이 선택되어 재생 요청이 되는 경우, 상기 데이터베이스부의 인덱싱 정보를 기초로 상기 선택된 비디오 파일의 메타정보에 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출하기 위한 매칭 미디어 추출부; 및 상기 사용자 단말에서 비디오 재생 시 오디오가 동시에 재생될 수 있도록 상기 추출된 오디오 파일 또는 오디오 파일의 메타정보를 사용자 단말에게 제공하기 위한 미디어 제공부를 포함할 수 있고, 상기 매칭 미디어 추출부는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출할 수 있으며, 상기 오디오 파일에 대한 메타정보에는 오디오 식별자(ID)가 포함될 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따른 감성 기반 멀티미디어 재생을 위한 사용자 단말은, 사용자로부터 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일을 선택받기 위한 미디어 선택부; 상기 선택된 비디오 파일을 재생하기 위한 미디어 재생부; 및 상기 선택된 비디오 파일의 메타정보에 매칭하는 오디오 파일 또는 오디오 파일의 메타정보를 수신 받는 미디어 수신부를 포함할 수 있고, 상기 미디어 재생부는 상기 미디어 수신부를 통해 수신된 오디오 파일을 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하거나 또는 수신된 오디오 파일의 메타정보를 이용하여 오디오 파일을 수신 받아 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어할 수 있다.
상기 오디오 파일의 메타정보는 오디오 식별자(ID)를 포함할 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따른 감성 기반 멀티미디어 재생을 위한 방법은, 서버에서 수행하는 방법에 있어서, (a) 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하는 단계; (b) 사용자 단말로부터 상기 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일이 선택되어 재생 요청이 되는 경우, 상기 저장된 인덱싱 정보를 기초로 상기 선택된 비디오 파일의 메타정보에 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출하기 위한 단계; 및 (c) 상기 사용자 단말에서 비디오 재생 시 오디오가 동시에 재생될 수 있도록 상기 추출된 오디오 파일 또는 오디오 파일의 메타정보를 사용자 단말에게 제공하기 위한 단계를 포함할 수 있고, 상기 오디오 파일에 대한 메타정보는 오디오 식별자(ID)를 포함할 수 있으며, 상기 단계 (b)는 서로 다른 미디어 파일의 메타 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출할 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따른 감성 기반 멀티미디어 재생을 위한 방법은, 사용자 단말에서 수행하는 방법에 있어서, (a) 사용자로부터 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일을 선택받기 위한 단계; (b) 상기 선택된 비디오 파일을 재생하기 위한 단계; (c) 상기 선택된 비디오 파일의 메타정보에 매칭하는 오디오 파일 또는 오디오 파일의 메타정보를 수신하기 위한 단계; 및 (d) 상기 단계 (c)를 통해 수신된 오디오 파일을 상기 단계 (a)를 통해 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하거나 또는 수신된 오디오 파일의 메타정보를 이용하여 오디오 파일을 수신 받아 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하는 단계를 포함할 수 있고, 상기 오디오 파일의 메타정보는 오디오 식별자(ID)를 포함할 수 있다.
상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
전술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따르면 전술한 바와 같이 다양한 측면에 따른 감성 기반 멀티미디어 재생을 위한 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공할 수 있다.
이상에서 설명한 바와 같이 본 발명의 다양한 측면에 따르면, 사용자가 자신의 사진 앨범을 감상하고자 할 때 또는 음악 파일을 재생하고자 할 때 사용자의 감성 및/또는 상황 등을 기초로 해당 영상 또는 음원 파일과 매핑된 배경 음악 또는 배경 이미지를 함께 재생할 수 있으므로 사용자의 감성 만족도를 증대시키는 효과가 있다.
즉, 본 발명에 따르면 서비스 사용자가 자신의 오디오(예를 들어 음악) 및 비디오(예를 들어 사진) 파일을 인덱싱(indexing) 정보를 기초로 매핑하여 멀티미디어 재생에 있어서 연관성이 있는 오디오/비디오 파일을 함께 재생하도록 함으로써 기존의 독립적인 미디어 서비스 이용과 비교하여 더욱 감성적인 서비스를 제공하는 효과가 있다.
도 1은 본 발명의 실시예에 따른 감성 기반 멀티미디어 재생을 위한 시스템의 구성도,
도 2는 본 발명의 일 실시예에 따른 감성 기반 멀티미디어 재생을 위한 장치의 구성도,
도 3은 본 발명의 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 장치의 구성도,
도 4는 본 발명의 일 실시예에 따른 감성 기반 멀티미디어 재생을 위한 방법의 흐름도,
도 5는 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 서버의 구성도,
도 6은 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 사용자 단말의 구성도,
도 7은 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 방법의 흐름도이다.
이하, 첨부도면을 참조하여 본 발명의 실시예에 대해 구체적으로 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하였다. 또한, 본 발명의 실시예에 대한 설명 시 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명의 실시예에 따른 감성 기반 멀티미디어 재생을 위한 시스템의 구성도로, 동 도면에 도시된 바와 같이, 통신망(10), 서버(20,50), 및 사용자 단말(30,60)을 포함할 수 있다.
통신망(10)은 서버(20,50)와 사용자 단말(30,60) 간을 유선, 무선 및/또는 인터넷 등으로 연결하여 통신할 수 있도록 하는 단독 또는 복합의 어떤 망이어도 좋다.
본 실시예에 따른 서버(20,50)는 사용자로부터 업로드된 음악과 같은 오디오 파일 또는 사진을 포함하는 비디오 파일 등을 저장하고, 사용자로부터의 요청 시 저장된 오디오 또는 비디오 파일을 제공하기 위한 것으로, 예를 들어, 클라우드 서버로 구성할 수 있다.
본 실시예에 따른 사용자 단말(30,60)은, 일 예로 사용자가 획득한 오디오 파일 또는 비디오 파일 등을 자체 저장하고 사용자로부터의 요청 시 저장된 오디오 또는 비디오 파일을 제공하거나, 다른 예로 사용자가 획득한 오디오 파일 또는 비디오 파일 등을 서버(20,50)에 업로드하여 저장하고 사용자로부터의 요청 시 서버(20,50)에 저장된 오디오 또는 비디오 파일을 수신하여 제공하거나, 또 다른 예로 자체 저장 또는 서버(20,50)에 저장된 비디오 또는 오디오 파일의 재생 선택 시 서버로부터 매칭되는 오디오 또는 비디오 파일이나 오디오 파일의 타이틀을 수신하여 함께 재생하기 위한 것으로, 예를 들어 음성/영상 통신, 데이터 통신, 및 인터넷 통신 등이 가능한 이동통신 단말기, 스마트 폰, PDA, IPTV, 스마트 TV, 테블릿 PC, 개인 PC 등을 포함할 수 있다.
도 2는 본 발명의 일 실시예에 따른 감성 기반 멀티미디어 재생을 위한 장치의 구성도로, 본 발명에 따른 감성 기반 멀티미디어 재생을 위한 장치가 도 1의 서버(20)에 구성되는 일 예를 나타내며, 동 도면에 도시된 바와 같이, 오/비디오 파일 획득부(21), 메타정보 생성부(22), 인덱싱 처리부(23), 오/비디오 파일 저장부(24), 매칭 파일 추출부(25), 및 오/비디오 파일 제공부(26)를 포함할 수 있다.
오/비디오 파일 획득부(21)는 오디오(음원) 파일과 비디오(사진) 파일을 다양한 경로를 통해 획득하기 위한 것으로, 예를 들어, 사용자로부터 입력되거나 사용자 단말(30)로부터 업로딩(uploading)된 오디오 파일, 비디오 파일, 및 오디오 타이틀(예를 들어 곡명/가수명 등) 등을 획득할 수 있다.
또한, 오/비디오 파일 획득부(21)는 별도로 제휴된 음악서버(미도시)가 보유한 음원의 오디오 타이틀 또는 오디오 파일 등을 획득할 수 있다.
메타정보 생성부(22)는 오/비디오 파일 획득부(21)를 통해 획득된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성(또는 획득)하기 위한 것으로, 예를 들어, 메타 정보는 오디오 파일, 비디오 파일, 또는 오디오 타이틀의 업로딩 시 사용자 단말(30)로부터 등록된 것 또는 해당 파일 또는 타이틀의 헤더 등에 기록된 것으로부터 생성 또는 획득할 수 있다.
본 실시예에서 메타 정보는, 일 예로 해당 오디오 또는 비디오 파일의 객관적인 고정 정보로서 타이틀, 생성 시간, 위치, 장르, 제목 등을 포함하는 기본 메타 정보로 구성하거나, 다른 예로 사용자의 감정(예를 들어, 기쁨, 슬픔, 즐거움 등) 및/또는 상황(예를 들어, 계절, 날씨, 기념일, 공부할 때, 생일 파티 때 등)과 같은 주관적인 변동 정보를 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보로 구성하거나, 또 다른 예로 기본 메타 정보와 추가 메타 정보를 모두 포함하여 구성할 수 있으며, 이에 한정되지 않고 해당 미디어 대한 객관적인 고정 정보 및 사용자 관점에서의 감정/상황 등을 나타낼 수 있는 주관적인 변동 정보 등을 적절히 조합하여 메타 정보로 사용할 수 있을 것이다.
기본 메타 정보는, 음원 파일의 경우 해당 음원 파일의 헤더 또는 해당 음원 파일의 오디오 타이틀 등에 기록된 생성 연도, 장르, 제목, 작사/작곡가, 가수 등에 대한 정보를 포함할 수 있고, 사진 파일의 경우 해당 사진 파일의 EXIF(Exchangeable Image File format)에 기록된 생성일, 생성 위치 정보(GPS 정보)등을 포함할 수 있다.
추가 메타 정보는 사용자가 오디오 또는 비디오 파일의 업로딩 시 해당 파일에 대해 추가 등록한 키워드로부터 얻을 수 있다.
즉, 본 실시예에 따른 메타 정보는 해당 오디오 또는 비디오 파일에 대한 객관적인 고정 정보(생성 시간, 위치, 장르 등을 포함하는 기본 메타 정보) 및 사용자 관점에서의 주관적인 변동 정보(사용자의 감정 또는 상황 등을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보) 중 하나 이상을 포함하여 구성할 수 있다.
인덱싱 처리부(23)는 메타정보 생성부(22)를 통해 생성된 메타정보를 기초로 오/비디오 파일 획득부(21)를 통해 획득된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각을 인덱싱(indexing) 처리하기 위한 것으로, 예를 들어, 해당 파일 또는 타이틀에 대해 기 설정된 인덱싱 필드에 시간, 위치, 장르, 키워드 등의 메타 정보를 기록하여 인덱싱 정보를 생성함으로써 해당 파일을 인덱싱 처리할 수 있다.
오/비디오 파일 저장부(24)는 인덱싱 처리부(23)를 통해 인덱싱 처리된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 및 해당 인덱싱 정보를 저장하여 데이터베이스화 한다.
매칭 파일 추출부(25)는 오/비디오 파일 저장부(24)에 저장된 오디오 또는 비디오 파일 중 하나가 사용자로부터 선택되거나, 또는 사용자로부터 선택된 비디오 파일의 인덱싱 정보가 수신되면, 그 선택된 미디어 파일에 매칭하는 하나 이상의 다른 미디어 파일을 인덱싱 정보를 기초로 추출하기 위한 것으로, 선택된 미디어 파일의 인덱싱 정보와 다른 미디어 파일의 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출할 수 있다. 예를 들어, 사용자로부터 선택된 파일이 특정 사진 파일이면 그 특정 사진 파일의 인덱싱 정보와 저장된 하나 이상의 음악 파일 또는 오디오 타이틀의 인덱싱 정보들을 서로 비교하여 일정 기준 이상의 유사도를 갖는 하나 이상의 음악 파일 또는 오디오 타이틀을 탐색하여 추출할 수 있다. 유사도는 인덱싱 정보를 구성하는 각 필드 정보(즉, 인덱스 필드에 기록된 메타 정보의 구성 요소)의 일치 정도로 구할 수 있을 것이다.
오/비디오 파일 제공부(26)는 사용자로부터 선택된 오디오(또는 비디오) 파일과 매칭 파일 추출부(25)를 통해 추출된 비디오(또는 오디오) 파일이 사용자 단말(30)에서 동시에 재생되도록 하기 위한 것으로, 일 예로 상기 선택된 오디오(또는 비디오) 파일의 재생 시 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 유사도에 따라 정렬하여 사용자 단말(30)로 제공하여 사용자가 선택적으로 재생할 수 있도록 하거나, 다른 예로 사용자가 상기 선택된 오디오(또는 비디오) 파일의 재생을 선택하면 그 재생 선택된 파일과 함께 상기 추출/제공된 하나 이상의 비디오(또는 오디오) 파일을 유사도에 따라 정렬된 순서 또는 불규칙한 순서에 따라 사용자 단말(30)에서 재생하도록 하거나, 또 다른 예로 사용자가 상기 선택된 오디오(또는 비디오) 파일의 재생을 선택하면 상기 추출/제공된 하나 이상의 비디오(또는 오디오) 파일 중 사용자에 의해 선택된 파일만 재생하하거나, 또 다른 예로 사용자가 선택한 사진의 재생 시 상기 추출된 하나 이상의 오디오 타이틀을 사용자 단말(30)의 별도의 음악어플(예를 들어 M-NET)의 플레이리스트에 자동으로 삽입되도록 하여 사진 재생과 함께 별도의 제휴 음악서버에서 제공하는 음악이 백그라운드로 재생되도록 할 수 있다.
도 3은 본 발명의 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 장치의 구성도로, 본 발명에 따른 감성 기반 멀티미디어 재생을 위한 장치가 도 1의 사용자 단말(30)에 구성되는 것을 나타내며, 동 도면에 도시된 바와 같이, 오/비디오 파일 획득부(31), 메타정보 생성부(32), 인덱싱 처리부(33), 오/비디오 파일 저장부(34), 매칭 파일 추출부(35), 및 오/비디오 파일 제공부(36)를 포함할 수 있다.
도 3의 오/비디오 파일 획득부(31), 메타정보 생성부(32), 인덱싱 처리부(33), 오/비디오 파일 저장부(34), 매칭 파일 추출부(35), 및 오/비디오 파일 제공부(36)는 사용자 단말(30)에 구성되어 구동되는 것만 다르고 도 2의 오/비디오 파일 획득부(21), 메타정보 생성부(22), 인덱싱 처리부(23), 오/비디오 파일 저장부(24), 매칭 파일 추출부(25), 및 오/비디오 파일 제공부(26)와 각각 대응하여 실질적으로 동일한 기능을 수행하므로, 구체적인 설명은 생략한다.
도 4는 본 발명의 실시예에 따른 감성 기반 멀티미디어 재생을 위한 방법의 흐름도로, 도 1~3의 서버(20) 또는 사용자 단말(30)에서 수행하는 방법에 관한 흐름도이고, 본 실시예에서는 설명의 편의를 위해 서버(20)에서 수행하는 경우를 전제로 설명하기로 한다.
먼저, 오/비디오 파일 획득부(21)는 오디오 파일, 비디오 파일, 또는 오디오 타이틀 등을 획득하고(S401), 메타정보 생성부(22)는 단계 S401에서 획득된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성하는데, 본 실시예에서 메타정보는 해당 파일의 해더 등에 기록된 것(즉, 기본 메타 정보) 및/또는 사용자의 입력에 의해 사용자 단말로부터 등록된 것(즉, 추가 메타 정보)으로부터 생성할 수 있다(S402).
이어, 인덱싱 처리부(23)는 단계 S402에서 생성된 메타정보를 기초로 단계 S401에서 획득된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각을 인덱싱(indexing) 처리하고 인덱싱 정보를 생성한다(S403).
이어, 오/비디오 파일 저장부(24)는 단계 S403에서 인덱싱 처리된 오디오 파일, 비디오 파일, 또는 오디오 타이틀 및 해당 인덱싱 정보를 저장하여 데이터베이스를 구축한다(S404).
단계 S401~404의 과정을 거쳐 데이터베이스가 구축된 상태에서, 매칭 파일 추출부(25)는 데이터베이스에 저장된 오디오 또는 비디오 파일 중 하나가 사용자로부터 선택되거나 또는 사용자로부터 선택된 사진 파일의 인덱싱 정보가 수신되면(S405), 단계 S403에서 인덱싱 처리 시 생성된 인덱싱 정보를 기초로 단계 S405에서 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하는데, 예를 들어, 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 오디오 또는 비디오 파일을 데이터베이스에서 검색하여 추출한다(S406).
마지막으로, 오/비디오 파일 제공부(26)는 단계 S405에서 선택된 오디오(또는 비디오) 파일과 단계 S406에서 추출된 비디오(또는 오디오) 파일이 사용자 단말(30)에서 동시에 재생되도록 사용자에게 해당 정보를 제공한다(S407).
단계 S407에서 오/비디오 파일 제공부(26)는, 일 예로 상기 선택된 오디오(또는 비디오) 파일의 재생 시 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 유사도에 따라 정렬하여 제공하거나, 다른 예로 상기 선택된 오디오(또는 비디오) 파일의 재생 시 단계 S406에서 추출된 하나 이상의 비디오(또는 오디오) 파일을 유사도에 따라 정렬된 순서 또는 불규칙한 순서에 따라 제공하여 재생되도록 하거나, 또 다른 예로 단계 S405에서 선택된 오디오(또는 비디오) 파일의 재생 시 단계 S406에서 추출된 하나 이상의 비디오(또는 오디오) 파일 중 사용자에 의해 선택된 파일만 재생되도록 하거나, 또 다른 예로 사용자가 선택한 사진의 재생 시 상기 추출된 하나 이상의 오디오 타이틀을 사용자 단말(30)의 별도의 음악어플(예를 들어 M-NET)의 플레이리스트에 자동으로 삽입되도록 하여 사진 재생과 함께 별도의 제휴 음악서버에서 제공하는 음악이 백그라운드로 재생되도록 할 수 있다.
도 5는 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 서버의 구성도, 도 1의 서버(50)의 세부 구성도이고, 동 도면에 도시된 바와 같이, 데이터베이스부(51), 매칭 미디어 추출부(53), 및 미디어 제공부(55)를 포함할 수 있다.
데이터베이스부(51)는 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하여 데이터베이스를 구축하기 위한 것이다.
일 예로 오디오 파일에 대한 메타정보는 오디오 식별자(ID)를 포함할 수 있고, 다른 예로 메타정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
매칭 미디어 추출부(53)는 사용자 단말(60)로부터 사용자 단말(60) 내에 저장되거나 또는 서버(50)에 저장된 비디오 파일이 선택되어 재생 요청이 되면, 데이터베이스부(51)의 인덱싱 정보를 기초로 그 선택된 비디오 파일의 메타정보에 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출하기 위한 것으로, 예를 들어, 사용자 단말(60)에 저장된 비디오 파일이 선택되는 경우에는 사용자 단말(60)로부터 해당 비디오 파일의 메타 정보를 수신하여 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출할 수 있다.
매칭 미디어 추출부(53)는 인덱싱 정보의 메타 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출할 수 있다.
미디어 제공부(55)는 사용자 단말(60)에서 비디오 재생 시 오디오가 동시에 재생될 수 있도록 매칭 비디오 추출부(53)를 통해 추출된 오디오 파일 또는 오디오 파일의 메타정보를 사용자 단말(60)로 제공하기 위한 것이다.
도 5의 실시예에서는 사용자로부터 선택된 미디어를 비디오로 하고 그 선택된 미디어에 매칭하는 미디어를 오디오로 하여 설명하였으나, 이와 반대로 비디오와 오디오를 서로 치환하거나 또는 다른 형태의 미디어로 치환하는 경우도 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 동일하게 적용이 가능할 것이다.
도 6은 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 사용자 단말의 구성도로, 도 1의 사용자 단말(60)의 세부 구성도이고, 동 도면에 도시된 바와 같이, 미디어 선택부(61), 미디어 재생부(63), 및 미디어 수신부(65)를 포함할 수 있다.
미디어 선택부(61)는 사용자로부터 사용자 단말(60)에 저장되거나 또는 서버(50)에 저장된 비디오 파일을 선택받기 위한 것으로, 예를 들어, 단말(60)에 저장된 사진 파일을 사용자가 직접 선택할 수 있도록 하거나, 서버(50)에 접속하여 해당 서버(50)에 저장된 사진 파일을 선택하도록 할 수 있다.
미디어 재생부(63)는 미디어 선택부(61)를 통해 선택된 비디오 파일을 재생하되, 일 예로 미디어 수신부(65)를 통해 서버(50)로부터 수신된 오디오 파일을 미디어 선택부(61)를 통해 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하거나, 다른 예로 미디어 수신부(65)를 통해 서버(50)로부터 수신된 오디오 파일의 메타정보를 이용하여 별도로 제휴된 음악서버(미도시)로부터 오디오 파일을 수신 받아 선택된 비디오 파일 재생 시 동시에 재생되도록 제어할 수 있다.
미디어 수신부(65)는 미디어 선택부(61)를 통해 선택된 비디오 파일의 메타정보에 매칭하는 오디오 파일 또는 오디오 파일의 메타정보를 서버(50)로부터 수신 받기 위한 것으로, 예를 들어, 서버(50)에게 선택된 비디오 파일의 메타정보를 전달하면서 이에 매칭된 오디오 파일을 요청하고, 이 요청에 대한 답변으로 서버(50)로부터 전달된 오디오 파일 또는 오디오 파일의 메타정보를 수신할 수 있다.
본 실시예에서도 전술한 도 5의 실시예와 동일하게, 일 예로 오디오 파일에 대한 메타정보는 오디오 식별자(ID)를 포함할 수 있고, 다른 예로 메타정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함할 수 있다.
또한 도 6의 실시예에서는 사용자로부터 선택된 미디어를 비디오로 하고 그 선택된 미디어에 매칭하는 미디어를 오디오로 하여 설명하였으나, 이와 반대로 비디오와 오디오를 서로 치환하거나 또는 다른 형태의 미디어로 치환하는 경우도 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 동일하게 적용이 가능할 것이다.
도 7은 본 발명의 또 다른 실시예에 따른 감성 기반 멀티미디어 재생을 위한 방법의 흐름도로, 도 5~6의 장치(50,60)에 적용되므로, 그 장치(50,60)의 동작과 병행하여 설명한다.
먼저, 서버(50)는 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하여 데이터베이스를 구축한다(S701).
다음, 사용자 단말(60)은 사용자로부터 자체 저장된 또는 서버(50)에 저장된 비디오 파일이 선택되는지의 여부를 판단하고(S702), 단계 S702에서 비디오 파일이 선택되면 그 선택된 비디오 파일의 메타 정보를 서버(50)로 전달하면서 매칭하는 오디오 파일을 요청한다(S703).
이어, 서버(50)는 단계 S703에서 사용자 단말(60)로부터 비디오 파일의 메타 정보가 수신되면, 단계 S701에서 구축된 데이터베이스의 인덱싱 정보를 기초로 상기 수신된 비디오 파일의 메타 정보에 매칭되는 메타 정보를 갖는 오디오 파일 또는 오디오 파일의 메타 정보를 인덱싱 정보간의 유사도를 기준으로 추출하고(S704), 단계 S704에서 추출된 오디오 파일 또는 오디오 파일의 메타 정보를 사용자 단말(60)로 전송한다(S705).
이어, 사용자 단말(60)은 단계 S705에서 서버(50)로부터 수신된 것이 오디오 파일의 메타 정보일 경우(S706), 그 수신된 메타 정보를 기초로 별도의 음악 서버에게 해당 오디오 파일을 요청하고(S707), 이에 대한 답변으로 음악 서버로부터 해당 오디오 파일을 수신한다(S708).
마지막으로, 사용자 단말(60)은 단계 S705에서 서버(50)로부터 수신된 것이 오디오 파일이거나(S709) 또는 단계 S708에서 별도의 음악 서버로부터 오디오 파일이 수신된 경우, 단계 S702에서 선택된 비디오 파일의 재생과 동시에 그 수신된 오디오 파일을 백그라운드 음악으로 재생하도록 한다(S710).
전술한 바와 같이 본 발명의 다양한 실시예에 따르면, 일 예로 서버에 업로드된 사진을 사용자가 단말을 통해 선택 또는 재생(슬라이드쇼 등)하면 서버에서 단말로 해당 사진을 전송하여 사용자 단말에 표시되도록 하고, 이와 함께 또는 별도로 서버가 (사용자가 업로드한 음악 중 또는 별도의 제휴음악서버에서 제공하는 음악 중) 매칭되는 음악을 사용자에게 제공할 수 있다. 여기서, 음악을 사용자에게 제공한다는 것은 음악의 곡명(가수명) 등 만을 제공하는 것도 가능하며, 제공사유(예를 들면 1997년 가요 등)도 포함할 수 있다. 또한, 사진 재생 시 단말(30)의 별도의 음악어플(M-NET)의 플레이리스트에 서버(20)로부터 제공된 음악 곡명이 자동으로 삽입되도록 하여 사진 재생과 함께 백그라운드로 별도의 음악어플(M-NET)의 음악을 재생하도록 할 수 있다.
다른 예로, 단말의 어플이 해당 사진 또는 사진의 메타 정보(인덱싱 정보)를 서버에 올려서 분석하게 하여 매칭되는 음악 정보(오디오 타이틀)만을 서버로부터 받고 사진 재생 시 서버로부터 받은 음악 정보를 음악어플의 플레이리스트에 자동으로 삽입되도록 하여 사진 재생과 함께 백그라운드로 별도의 음악어플의 음악을 재생하도록 할 수 있다.
또 다른 예로, 음악 재생의 경우 제휴된 음악 어플을 통해 단말에서 음악을 재생하고 있을 때 해당 음악 정보를 전송(단말이 사진 저장서버에 음악 정보를 전송 또는 음악서버가 사진 저장서버에 음악 정보를 전송)하여, 매칭되는 서버에 저장된 사진이 있다면 해당 사진 정보를 단말로 전송하여 음악 재생과 함께 사진이 표시되도록 하고, 매칭되는 사진이 없다면 표시하지 않도록 할 수 있다.
전술된 본 발명의 다양한 실시예에 따른 감성 기반 멀티미디어 재생을 위한 방법은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독가능 기록 매체로 구현될 수 있다. 상기 컴퓨터 판독 가능 기록 매체는 프로그램 명령, 로컬 데이터 파일, 로컬 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 기록 매체는 본 발명의 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크와 같은 자기-광 매체, 및 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 기록 매체는 프로그램 명령, 로컬 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
10: 통신망
20,50: 서버
30,60: 사용자 단말
21,31: 오/비디오 파일 획득부
22,32: 메타정보 생성부
23,33: 인덱싱 처리부,
24,34: 오/비디오 파일 저장부
25,35: 매칭 파일 추출부
26,36: 오/비디오 파일 제공부
50: 서버
51: 데이터베이스부
53: 매칭 미디어 추출부
55: 미디어 제공부
60: 사용자 단말
61: 미디어 선택부
63: 미디어 재생부
65: 미디어 수신부

Claims (38)

  1. 메타 정보를 기초로 인덱싱 처리된 오디오 또는 비디오 파일 중 하나가 선택되면, 상기 인덱싱 정보를 기초로 상기 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하거나 또는 상기 선택된 비디오 파일에 매칭하는 하나 이상의 오디오 타이틀을 추출하기 위한 매칭 파일 추출부; 및
    상기 선택된 오디오(또는 비디오) 파일과 상기 추출된 비디오(또는 오디오) 파일 중 적어도 하나를 제공하거나 또는 상기 선택된 비디오 파일에 매칭하는 오디오 타이틀을 제공하기 위한 오/비디오 파일 제공부를 포함하는 감성 기반 멀티미디어 재생을 위한 장치.
  2. 제1항에 있어서,
    하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성하기 위한 메타정보 생성부;
    상기 생성된 메타정보를 기초로 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대해 인덱싱(indexing) 처리하여 인덱싱 정보를 생성하기 위한 인덱싱 처리부; 및
    상기 인덱싱 처리된 오디오 파일, 비디오 파일, 오디오 타이틀, 또는 인덱싱 정보를 저장하기 위한 오/비디오 파일 저장부 중 적어도 하나를 더 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  3. 제1항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  4. 제1항에 있어서,
    상기 매칭 파일 추출부는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 오디오 또는 비디오 파일을 추출하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  5. 제4항에 있어서,
    상기 오/비디오 파일 제공부는 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 상기 유사도에 따라 정렬하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  6. 제5항에 있어서,
    상기 오/비디오 파일 제공부는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일을 상기 정렬된 순서 또는 불규칙한 순서에 따라 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  7. 제5항에 있어서,
    상기 오/비디오 파일 제공부는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일 중 선택된 파일만 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  8. 제1항에 있어서,
    상기 오/비디오 파일 제공부는 상기 선택된 비디오 파일의 재생 시, 상기 추출된 하나 이상의 오디오 타이틀을 별도의 음악어플의 플레이리스트에 자동으로 삽입되도록 하여, 해당 비디오 파일의 사진 재생과 함께 별도의 제휴 음악서버에서 제공하는 음악이 백그라운드로 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  9. 제2항에 있어서,
    상기 오디오 또는 비디오 파일은 사용자 단말로부터 업로딩된 파일인 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 장치.
  10. 제9항에 있어서,
    상기 생성된 메타정보는 상기 업로딩 시 상기 사용자 단말로부터 등록된 것을 포함하는 감성 기반 멀티미디어 재생을 위한 장치.
  11. 제1항 내지 제8항 중 어느 한 항의 상기 감성 기반 멀티미디어 재생을 위한 장치를 포함하는 사용자 단말.
  12. 제1항 내지 제10항 중 어느 한 항의 상기 감성 기반 멀티미디어 재생을 위한 장치를 포함하는 서버.
  13. 통신망을 통하여 서로 통신할 수 있는 서버 또는 사용자 단말에서 수행하는 방법으로서,
    (a) 메타 정보를 기초로 인덱싱 처리된 오디오 또는 비디오 파일 중 하나가 선택되면, 상기 인덱싱 정보를 기초로 상기 선택된 오디오(또는 비디오) 파일에 매칭하는 하나 이상의 비디오(또는 오디오) 파일을 추출하거나 또는 상기 선택된 비디오 파일에 매칭하는 하나 이상의 오디오 타이틀을 추출하기 위한 단계; 및
    (b) 상기 선택된 오디오(또는 비디오) 파일과 상기 추출된 비디오(또는 오디오) 파일 중 적어도 하나를 제공하거나 또는 상기 선택된 비디오 파일에 매칭하는 오디오 타이틀을 제공하기 위한 단계를 포함하는 감성 기반 멀티미디어 재생을 위한 방법.
  14. 제13항에 있어서,
    (c) 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대한 메타정보를 생성하기 위한 단계;
    (d) 상기 생성된 메타정보를 기초로 하나 이상의 오디오 파일, 비디오 파일, 또는 오디오 타이틀 각각에 대해 인덱싱(indexing) 처리하여 인덱싱 정보를 생성하기 위한 단계; 및
    (e) 상기 인덱싱 처리된 오디오 파일, 비디오 파일, 오디오 타이틀, 또는 인덱싱 정보를 저장하기 위한 단계 중 적어도 하나를 더 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  15. 제13항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  16. 제13항에 있어서,
    상기 단계 (a)는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 오디오 또는 비디오 파일을 추출하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  17. 제16항에 있어서,
    상기 단계 (b)는 상기 추출된 하나 이상의 비디오(또는 오디오) 파일을 상기 유사도에 따라 정렬하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  18. 제17항에 있어서,
    상기 단계 (b)는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일을 상기 정렬된 순서 또는 불규칙한 순서에 따라 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  19. 제17항에 있어서,
    상기 단계 (a)는 상기 선택된 오디오(또는 비디오) 파일의 재생 시, 상기 제공된 하나 이상의 비디오(또는 오디오) 파일 중 선택된 파일만 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  20. 제13항에 있어서,
    상기 단계 (a)는 상기 선택된 비디오 파일의 재생 시, 상기 추출된 하나 이상의 오디오 타이틀을 별도의 음악어플의 플레이리스트에 자동으로 삽입되도록 하여, 해당 비디오 파일의 사진 재생과 함께 별도의 제휴 음악서버에서 제공하는 해당 음악이 백그라운드로 재생되도록 하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  21. 제14항에 있어서,
    상기 오디오 또는 비디오 파일은 사용자 단말에 있는 파일이거나 또는 사용자 단말로부터 서버로 업로딩된 파일인 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  22. 제21항에 있어서,
    상기 단계 (c)에서 생성된 메타정보는 사용자로부터 입력되거나 또는 상기 업로딩 시 사용자 단말로부터 등록된 것을 포함하는 감성 기반 멀티미디어 재생을 위한 방법.
  23. 제13항 내지 제22항 중 어느 한 항의 상기 감성 기반 멀티미디어 재생을 위한 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.
  24. 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하는 데이터베이스부;
    사용자 단말로부터 상기 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일이 선택되어 재생 요청이 되는 경우, 상기 데이터베이스부의 인덱싱 정보를 기초로 상기 선택된 비디오 파일의 메타정보에 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출하기 위한 매칭 미디어 추출부; 및
    상기 사용자 단말에서 비디오 재생 시 오디오가 동시에 재생될 수 있도록 상기 추출된 오디오 파일 또는 오디오 파일의 메타정보를 사용자 단말에게 제공하기 위한 미디어 제공부를 포함하는 감성 기반 멀티미디어 재생을 위한 서버.
  25. 제24항에 있어서,
    상기 오디오 파일에 대한 메타정보에는 오디오 식별자(ID)가 포함되는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 서버.
  26. 제24항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 서버.
  27. 제24항에 있어서,
    상기 매칭 미디어 추출부는 인덱싱 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 서버.
  28. 사용자로부터 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일을 선택받기 위한 미디어 선택부;
    상기 선택된 비디오 파일을 재생하기 위한 미디어 재생부; 및
    상기 선택된 비디오 파일의 메타정보에 매칭하는 오디오 파일 또는 오디오 파일의 메타정보를 수신 받는 미디어 수신부를 포함하며,
    상기 미디어 재생부는 상기 미디어 수신부를 통해 수신된 오디오 파일을 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하거나 또는 수신된 오디오 파일의 메타정보를 이용하여 오디오 파일을 수신 받아 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 사용자 단말.
  29. 제28항에 있어서,
    상기 오디오 파일의 메타정보는 오디오 식별자(ID)를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 사용자 단말.
  30. 제28항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 사용자 단말.
  31. 서버에서 수행하는 방법에 있어서,
    (a) 하나 이상의 오디오 또는 비디오 파일에 대한 메타정보가 인덱싱(indexing)된 인덱싱 정보를 저장하는 단계;
    (b) 사용자 단말로부터 상기 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일이 선택되어 재생 요청이 되는 경우, 상기 저장된 인덱싱 정보를 기초로 상기 선택된 비디오 파일의 메타정보에 매칭하는 하나 이상의 오디오 파일 또는 오디오 파일의 메타정보를 추출하기 위한 단계; 및
    (c) 상기 사용자 단말에서 비디오 재생 시 오디오가 동시에 재생될 수 있도록 상기 추출된 오디오 파일 또는 오디오 파일의 메타정보를 사용자 단말에게 제공하기 위한 단계를 포함하는 감성 기반 멀티미디어 재생을 방법.
  32. 제31항에 있어서,
    상기 오디오 파일에 대한 메타정보는 오디오 식별자(ID)를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  33. 제31항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  34. 제31항에 있어서,
    상기 단계 (b)는 서로 다른 미디어 파일의 메타 정보 간의 유사도를 기초로 서로 매칭하는 파일을 추출하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  35. 사용자 단말에서 수행하는 방법에 있어서,
    (a) 사용자로부터 사용자 단말에 저장되거나 또는 서버에 저장된 비디오 파일을 선택받기 위한 단계;
    (b) 상기 선택된 비디오 파일을 재생하기 위한 단계;
    (c) 상기 선택된 비디오 파일의 메타정보에 매칭하는 오디오 파일 또는 오디오 파일의 메타정보를 수신하기 위한 단계; 및
    (d) 상기 단계 (c)를 통해 수신된 오디오 파일을 상기 단계 (a)를 통해 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하거나 또는 수신된 오디오 파일의 메타정보를 이용하여 오디오 파일을 수신 받아 상기 선택된 비디오 파일 재생 시 동시에 재생되도록 제어하는 단계를 포함하는 감성 기반 멀티미디어 재생을 위한 방법.
  36. 제35항에 있어서,
    상기 오디오 파일의 메타정보는 오디오 식별자(ID)를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  37. 제35항에 있어서,
    상기 메타 정보는 해당 오디오 또는 비디오 파일의 타이틀, 생성 시간, 위치, 및 장르 중 하나 이상을 포함하는 기본 메타 정보, 및 사용자의 감정 또는 상황을 기초로 정의한 하나 이상의 키워드를 포함하는 추가 메타 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 감성 기반 멀티미디어 재생을 위한 방법.
  38. 제31항 내지 제37항 중 어느 한 항의 상기 감성 기반 멀티미디어 재생을 위한 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.
KR1020130044884A 2013-04-23 2013-04-23 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체 KR20140126556A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130044884A KR20140126556A (ko) 2013-04-23 2013-04-23 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130044884A KR20140126556A (ko) 2013-04-23 2013-04-23 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체

Publications (1)

Publication Number Publication Date
KR20140126556A true KR20140126556A (ko) 2014-10-31

Family

ID=51995786

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130044884A KR20140126556A (ko) 2013-04-23 2013-04-23 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체

Country Status (1)

Country Link
KR (1) KR20140126556A (ko)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017120009A1 (en) * 2016-01-04 2017-07-13 Gracenote, Inc. Generating and distributing playlists with music and stories having related moods
US9798509B2 (en) 2014-03-04 2017-10-24 Gracenote Digital Ventures, Llc Use of an anticipated travel duration as a basis to generate a playlist
US9804816B2 (en) 2014-03-04 2017-10-31 Gracenote Digital Ventures, Llc Generating a playlist based on a data generation attribute
US10019225B1 (en) 2016-12-21 2018-07-10 Gracenote Digital Ventures, Llc Audio streaming based on in-automobile detection
US10270826B2 (en) 2016-12-21 2019-04-23 Gracenote Digital Ventures, Llc In-automobile audio system playout of saved media
US10290298B2 (en) 2014-03-04 2019-05-14 Gracenote Digital Ventures, Llc Real time popularity based audible content acquisition
US10565980B1 (en) 2016-12-21 2020-02-18 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
KR20200027794A (ko) * 2018-09-05 2020-03-13 삼성전자주식회사 영상 표시 장치 및 그 동작방법
WO2020145667A3 (ko) * 2019-01-09 2020-09-17 삼성전자 주식회사 네트워크를 이용한 단말에서의 오디오 음질 제어 방법 및 장치
KR20210030628A (ko) 2019-09-10 2021-03-18 서울대학교산학협력단 딥 러닝 및 스타일 트랜스퍼를 활용한 컨텐츠 추천 시스템
CN112911379A (zh) * 2021-01-15 2021-06-04 北京字跳网络技术有限公司 视频生成方法、装置、电子设备和存储介质
CN116634189A (zh) * 2023-07-20 2023-08-22 天津星耀九洲科技有限公司 交互式直播数据显示方法、装置及电子设备

Cited By (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10762889B1 (en) 2014-03-04 2020-09-01 Gracenote Digital Ventures, Llc Real time popularity based audible content acquisition
US10290298B2 (en) 2014-03-04 2019-05-14 Gracenote Digital Ventures, Llc Real time popularity based audible content acquisition
US9804816B2 (en) 2014-03-04 2017-10-31 Gracenote Digital Ventures, Llc Generating a playlist based on a data generation attribute
US11763800B2 (en) 2014-03-04 2023-09-19 Gracenote Digital Ventures, Llc Real time popularity based audible content acquisition
US9798509B2 (en) 2014-03-04 2017-10-24 Gracenote Digital Ventures, Llc Use of an anticipated travel duration as a basis to generate a playlist
US9959343B2 (en) 2016-01-04 2018-05-01 Gracenote, Inc. Generating and distributing a replacement playlist
US11868396B2 (en) 2016-01-04 2024-01-09 Gracenote, Inc. Generating and distributing playlists with related music and stories
US10261963B2 (en) 2016-01-04 2019-04-16 Gracenote, Inc. Generating and distributing playlists with related music and stories
US10261964B2 (en) 2016-01-04 2019-04-16 Gracenote, Inc. Generating and distributing playlists with music and stories having related moods
US11921779B2 (en) 2016-01-04 2024-03-05 Gracenote, Inc. Generating and distributing a replacement playlist
US11494435B2 (en) 2016-01-04 2022-11-08 Gracenote, Inc. Generating and distributing a replacement playlist
KR20180082616A (ko) * 2016-01-04 2018-07-18 그레이스노트, 인코포레이티드 관련된 분위기들을 갖는 음악 및 스토리들이 있는 재생목록 생성 및 배포
WO2017120009A1 (en) * 2016-01-04 2017-07-13 Gracenote, Inc. Generating and distributing playlists with music and stories having related moods
GB2562913B (en) * 2016-01-04 2022-05-04 Gracenote Inc Generating and distributing playlists with music and stories having related moods
US11216507B2 (en) 2016-01-04 2022-01-04 Gracenote, Inc. Generating and distributing a replacement playlist
GB2562913A (en) * 2016-01-04 2018-11-28 Gracenote Inc Generating and distributing playlists with music and stories having related moods
US10579671B2 (en) 2016-01-04 2020-03-03 Gracenote, Inc. Generating and distributing a replacement playlist
US11061960B2 (en) 2016-01-04 2021-07-13 Gracenote, Inc. Generating and distributing playlists with related music and stories
US11017021B2 (en) 2016-01-04 2021-05-25 Gracenote, Inc. Generating and distributing playlists with music and stories having related moods
US10706099B2 (en) 2016-01-04 2020-07-07 Gracenote, Inc. Generating and distributing playlists with music and stories having related moods
KR20200040312A (ko) * 2016-01-04 2020-04-17 그레이스노트, 인코포레이티드 관련된 분위기들을 갖는 음악 및 스토리들이 있는 재생목록 생성 및 배포
US10740390B2 (en) 2016-01-04 2020-08-11 Gracenote, Inc. Generating and distributing a replacement playlist
US10311100B2 (en) 2016-01-04 2019-06-04 Gracenote, Inc. Generating and distributing a replacement playlist
US10565980B1 (en) 2016-12-21 2020-02-18 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US11481183B2 (en) 2016-12-21 2022-10-25 Gracenote Digital Ventures, Llc Playlist selection for audio streaming
US10275212B1 (en) 2016-12-21 2019-04-30 Gracenote Digital Ventures, Llc Audio streaming based on in-automobile detection
US10270826B2 (en) 2016-12-21 2019-04-23 Gracenote Digital Ventures, Llc In-automobile audio system playout of saved media
US11853644B2 (en) 2016-12-21 2023-12-26 Gracenote Digital Ventures, Llc Playlist selection for audio streaming
US11823657B2 (en) 2016-12-21 2023-11-21 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US11107458B1 (en) 2016-12-21 2021-08-31 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US10419508B1 (en) 2016-12-21 2019-09-17 Gracenote Digital Ventures, Llc Saving media for in-automobile playout
US10372411B2 (en) 2016-12-21 2019-08-06 Gracenote Digital Ventures, Llc Audio streaming based on in-automobile detection
US11368508B2 (en) 2016-12-21 2022-06-21 Gracenote Digital Ventures, Llc In-vehicle audio playout
US11367430B2 (en) 2016-12-21 2022-06-21 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US10019225B1 (en) 2016-12-21 2018-07-10 Gracenote Digital Ventures, Llc Audio streaming based on in-automobile detection
US10742702B2 (en) 2016-12-21 2020-08-11 Gracenote Digital Ventures, Llc Saving media for audio playout
US11574623B2 (en) 2016-12-21 2023-02-07 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US10809973B2 (en) 2016-12-21 2020-10-20 Gracenote Digital Ventures, Llc Playlist selection for audio streaming
KR20200027794A (ko) * 2018-09-05 2020-03-13 삼성전자주식회사 영상 표시 장치 및 그 동작방법
WO2020145667A3 (ko) * 2019-01-09 2020-09-17 삼성전자 주식회사 네트워크를 이용한 단말에서의 오디오 음질 제어 방법 및 장치
KR20210030628A (ko) 2019-09-10 2021-03-18 서울대학교산학협력단 딥 러닝 및 스타일 트랜스퍼를 활용한 컨텐츠 추천 시스템
CN112911379A (zh) * 2021-01-15 2021-06-04 北京字跳网络技术有限公司 视频生成方法、装置、电子设备和存储介质
CN116634189A (zh) * 2023-07-20 2023-08-22 天津星耀九洲科技有限公司 交互式直播数据显示方法、装置及电子设备
CN116634189B (zh) * 2023-07-20 2023-10-03 天津星耀九洲科技有限公司 交互式直播数据显示方法、装置及电子设备

Similar Documents

Publication Publication Date Title
KR20140126556A (ko) 감성 기반 멀티미디어 재생을 위한 장치, 서버, 단말, 방법, 및 기록 매체
US9848228B1 (en) System, method, and program product for generating graphical video clip representations associated with video clips correlated to electronic audio files
US8996412B2 (en) Information processing system and information processing method
US8924404B2 (en) Information processing device, information processing method, and program
US7840559B2 (en) User terminal and content searching and presentation method
US20120041954A1 (en) System and method for providing conditional background music for user-generated content and broadcast media
US20110137920A1 (en) Method of mapping songs being listened to at a given location, and additional applications associated with synchronized lyrics or subtitles
US8249427B2 (en) Content playing device, content playing method, program, and content playing system
JPWO2008096414A1 (ja) コンテンツ取得装置、コンテンツ取得方法、コンテンツ取得プログラムおよび記録媒体
US20210082382A1 (en) Method and System for Pairing Visual Content with Audio Content
US10990625B2 (en) Playlist preview
US10104356B2 (en) Scenario generation system, scenario generation method and scenario generation program
KR101713988B1 (ko) 메타데이터를 추출하여 전송하는 콘텐츠 제공 방법 및 장치
WO2006065959A2 (en) A method for selecting a preview of a media work
EP3738287B1 (en) Content matching system
US20120226780A1 (en) Enabling digital media content to be downloaded to and used on multiple types of computing device
JP5490793B2 (ja) 複製支援装置、端末装置、複製支援方法、及び複製支援プログラム
CN104754417A (zh) 一种ktv点歌系统以及用于在ktv点歌系统中执行的点歌方法
JP2018098763A (ja) ブックマーク装置、タグ解析システム、ブックマーク解析システム、シーン共有システム、ブックマーク方法及びブックマークプログラム
KR101684577B1 (ko) 태그 기반 컨텐츠 목록 제공 방법 및 이를 위한 장치
KR20170027332A (ko) 메타데이터를 추출하여 전송하는 콘텐츠 제공 방법 및 장치
JP5271502B2 (ja) 端末装置
JP2010041467A (ja) 再生システム
KR20150046407A (ko) 콘텐츠 제공 방법 및 서버
KR101634897B1 (ko) 음원 관련 영상제공 시스템과 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application