KR20130059237A - 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치 - Google Patents

음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치 Download PDF

Info

Publication number
KR20130059237A
KR20130059237A KR1020110125457A KR20110125457A KR20130059237A KR 20130059237 A KR20130059237 A KR 20130059237A KR 1020110125457 A KR1020110125457 A KR 1020110125457A KR 20110125457 A KR20110125457 A KR 20110125457A KR 20130059237 A KR20130059237 A KR 20130059237A
Authority
KR
South Korea
Prior art keywords
emotion
music
information
value
input
Prior art date
Application number
KR1020110125457A
Other languages
English (en)
Other versions
KR101527370B1 (ko
Inventor
김정현
이승재
김성민
박지현
이상광
서용석
이정호
윤영석
서영호
유원영
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020110125457A priority Critical patent/KR101527370B1/ko
Priority to US13/467,962 priority patent/US8838617B2/en
Publication of KR20130059237A publication Critical patent/KR20130059237A/ko
Application granted granted Critical
Publication of KR101527370B1 publication Critical patent/KR101527370B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • G06F16/636Filtering based on additional data, e.g. user or group profiles by using biological or physiological data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Physiology (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치에 관한 것으로, 더욱 상세하게는, 사용자로부터 소정의 검색 조건이 입력되면, 상기 입력된 검색 조건에서 밸런스(Valence) 값 및 어로우절(Arousal) 값을 포함하는 감정 수치를 추출하고, 상기 감정 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하고, 음악 감정 데이터베이스에서 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하여 추천 음악 목록을 출력함으로써, 복합 감정에 대한 음악 검색의 수행이 가능하도록 하여 검색 결과에 대한 사용자 만족도를 향상시키는 발명이다.

Description

음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치{METHOD AND APPRATUS FOR SEARCHING RECOMMENDED MUSIC USING EMOTIONAL INFORMATION OF MUSIC}
본 발명은 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치에 관한 것이다. 더욱 상세하게는, 사용자로부터 소정의 검색 조건이 입력되면, 상기 입력된 검색 조건에서 밸런스(Valence) 값 및 어로우절(Arousal) 값을 포함하는 감정 수치를 추출하고, 상기 감정 수치를 이용하여 음악 감정 데이터베이스를 검색하여 추천 음악 목록을 출력함으로써, 음악의 감정 정보를 이용한 추천음악 검색이 가능하도록 하는 방법 및 장치에 관한 것이다.
최근 스마트폰, MP3 플레이어, PDA, 컴퓨터, 디지털 오디오 장비 등의 다양한 기기에서 음악 컨텐츠를 재생할 수 있게 되었고, 이러한 다양한 기기가 폭넓게 보급되어 음악 파일이 대중화되었다. 따라서, 사용자가 개인적으로 보유하고 있는 음악 파일의 수는 점차 증가하고 있는 추세에 있다. 또한, 사용자 개인이 접근 가능한 음악 파일의 수가 기하급수적으로 증가하면서 사용자가 원하는 음악 파일을 효율적으로 찾는 방법이 중요해지고 있다.
종래에는, 음악 파일을 검색 및 추천하기 위하여, 음악의 장르, 또는 음악의 가수 정보를 이용하였다. 하지만, 장르와 가수 정보를 이용하기 위해서는 사전에 장르와 가수에 대한 분류 정보가 필요하고 가수 이름, 혹은 해당 가수가 부른 노래 제목 등을 미리 숙지하고 있어야 하는 불편함이 존재한다.
또한, 최근에는 음악에서 느껴지는 감정 또는 분위기를 기반으로 음악을 검색하고 추천하는 기술(한국특허 10-2010-0024769, '음악추천 시스템 및 방법')에 이 제시되었으나, 음악을 듣고 느끼는 감정이나 음악이 주는 분위기는 주관적이고 모호하여 음악을 하나의 감정으로 분류하여 표현하기 어렵고, 기존의 감정기반 음악 추천시스템은 제한된 감정 키워드를 하나씩 선택하거나 이차원 평면을 감정 별로 영역을 나누어 선택한 영역의 감정을 선택하면 해당 감정의 음악을 추천하는 방식이므로, 사용자가 원하는 음악에 대하여 정확하게 추천목록을 제공하지는 못하였다.
즉, 종래기술은, 하나의 음악에서 느껴지는 복합적인 감정을 표현하거나 선택할 수 없고 인터페이스 또한 직관적이지 못해 사용자의 추천 만족도가 떨어지는 문제점이 존재한다.
이에 따라서, 본 발명은 상기와 같은 문제점을 해결하기 위하여 제안된 것으로, 음악이 갖는 복합적인 감정에 대하여 검색을 수행할 수 있도록 하여, 사용자의 만족도롤 높일 수 있는 추천음악 검색 방법 및 장치를 제공함에 있다.
또한, 본 발명은 사용자가 편리하게 이용할 수 있는 인터페이스를 통하여, 다양한 형식으로 감정에 대한 검색 조건을 입력 받을 수 있도록 하여, 사용자 편의성 향상을 도모할 수 있는 추천음악 검색 방법 및 장치를 제공함에 있다.
본 발명의 목적을 달성하기 위하여, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 추천 음악 검색을 위한 검색 조건을 입력 받는 단계, 상기 입력된 검색 조건이 음악 정보인 경우, 각 음악에 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보와 각 음악에 대응되는 복합 감정에 대한 정보가 저장된 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색하는 단계, 상기 음악 감정 데이터베이스에서 상기 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, AV리그레서(regressor)를 통하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)하는 단계, 밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 단계, 상기 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하는 단계 및 상기 검색된 음악 정보를 포함하는 추천 음악 목록을 출력하는 단계를 포함한다.
또한, 본 발명의 다른 실시 예에 따른 추천음악 검색 장치는, 추천 음악 검색을 위한 검색 조건을 입력 받는 입력 인터페이스부, 각 음악의 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보와 각 음악에 대응되는 복합 감정에 대한 정보를 저장하는 음악 감정 데이터베이스, 밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델, 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)하는 AV리그레서(regressor), 상기 입력된 검색 조건이 음악 정보인 경우, 상기 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색하고, 상기 음악 감정 데이터베이스에서 상기 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, 상기 AV리그레서를 이용하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)하고, 상기 감정 모델을 이용하여 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 제어부, 상기 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하는 검색부; 및 상기 검색부에서 검색된 음악 정보를 포함하는 추천 음악 목록을 출력하는 출력 인터페이스부를 포함한다.
본 발명은, 음악의 감정에 대한 정보를 통하여 검색을 수행하는 경우, 복합 감정에 대한 검색의 수행이 가능하여 검색 결과에 대한 사용자 만족도를 향상시킬 수 있는 효과가 있다.
또한, 본 발명은 사용자가 편리하고 정확하게 추천음악 검색을 위한 감정 조건을 입력할 수 있으므로, 사용자 편의성 및 검색 과정의 효율성을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 실시 예에 따른 추천음악 탐색 과정을 도시한 순서도이다.
도 2는 본 발명의 실시 예에 따른 감정 조건을 이용한 추천음악 검색방법을 도시한 순서도이다.
도 3은 본 발명의 실시 예에 따른 음악 감정 데이터베이스 생성 과정을 도시한 순서도이다.
도 4는 도 2의 음악 검색 과정을 상세히 도시한 도면이다.
도 5는 본 발명의 실시 예에 따른 추천음악 검색장치의 구성을 도시한 도면이다.
도 6은 본 발명의 실시 예에 따른 음악 감정 데이터베이스를 도시한 도면이다.
도 7은 본 발명의 실시 예에 따른 거리 조건 검색을 도시한 도면이다.
도 8은 본 발명의 실시 예에 따른 감정 수치 입력을 위한 사용자 인터페이스 를 도시한 도면이다.
도 9는 본 발명의 실시 예에 따른 음악 입력을 위한 사용자 인터페이스를 도시한 도면이다.
도 10은 본 발명의 실시 예에 따른 감정 키워드 입력을 위한 사용자 인터페이스를 도시한 도면이다.
도 11은 본 발명의 실시 예에 따른 테마 입력을 위한 사용자 인터페이스를 도시한 도면이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 여러 가지 실시 예들을 보다 상세히 설명하도록 하겠다. 나아가, 이하의 설명에서 사용되는 구성요소에 대한 접미사 "부", “기” 및 "장치"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "부", “기” 및 "장치"는 서로 혼용되어 사용될 수 있으며, 하드웨어 또는 소프트웨어로 설계 가능하다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
도 1은 본 발명의 실시 예에 따른 추천음악 탐색 과정을 도시한 순서도이다.
실시 예에 따라, 먼저, 추천 음악 검색을 위한 검색 조건을 입력 받는다(S101). 상기 검색 조건은 음악 정보, 감정 키워드, 감정 수치 정보를 포함할 수 있다.
다음으로, 상기 입력된 검색 조건이 음악 정보인 경우, 각 음악에 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보가 저장된 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색한다(S102).
또한, 음악 감정 데이터베이스에서 상기 입력된 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, AV리그레서(Regressor)를 통하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)할 수 있다.
또한, 밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출한다.
다음으로, 각 음악에 대응되는 복합 감정에 대한 정보를 저장된 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색한다(S104).
즉, 이를 통하여, 복합 감정에 대응되는 음악 정보 검색을 수행할 수 있다.
도 2는 본 발명의 실시 예에 따른 감정 조건을 이용한 추천음악 검색방법을 도시한 순서도이다.
실시 예에 따라, 먼저 추천 음악 검색을 위한 검색 조건을 입력 받는다(S201).
다음으로, 상기 입력된 검색 조건이 어떠한 형식의 검색 조건인지 판단한다.
즉, 먼저 음악 정보의 입력인지 여부를 판단한다(S202).
상기 판단(S202) 결과, 상기 입력된 검색 조건이 음악 정보인 경우, 각 음악에 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보가 저장된 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색 가능한지 여부를 판단한다(S205).
상기 판단(S205) 결과, 상기 음악 감정 데이터베이스에서 상기 입력된 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, AV 리그레서(Regressor)를 통하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)한다(S206).
AV 리그레서는, 음악에서 V(Valance: 긍정-부정 정도)와 A(Arousal: 각성 정도) 값을 추출하는 모듈을 포함한다.
다음으로, 밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출한다(S208).
상기 감정 모델은 선행특허 (대한민국 특허 제11-0053785) “감정 모델을 이용한 음악 검색 장치 및 방법”에 따른 감정 모델이 이용될 수 있다.
다음으로, 각 음악에 대응되는 복합 감정에 대한 정보를 저장된 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색한다(S209).
또한, 추천 음악 검색 과정에서, 확률 값 조건을 적용하여 검색을 수행할 것인지 여부를 판단한다(S210).
상기 판단(S210) 결과, 확률 값 조건을 적용하지 않는 경우, 상기 검색된 음악 정보를 포함하는 추천 음악 목록을 출력한다(S212).
반면에, 상기 판단(S210) 결과, 확률 값 조건을 적용하는 경우, 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 확률 값 조건을 추출하고, 상기 감정 순위 조합에 대응되는 음악 정보에서, 상기 확률 값 조건을 만족하는 음악 정보를 검색하고(S211), 상기 검색된 음악 정보를 포함하는 추천 음악 목록을 출력한다(S212).
상기 감정 순위 조합 및 상기 확률 값 조건을 이용한 검색은 이하 도 4에서 상세히 설명한다.
또한, 상기 판단(S202) 결과, 상기 입력된 검색 조건이 음악 정보가 아닌 경우, 상기 입력된 검색 조건이 감정 키워드(keyword)인지 여부를 판단한다(S203).
상기 판단(S203) 결과, 상기 입력된 검색 조건이 감정 키워드(keyword)인 경우, 상기 감정 키워드에 포함된 감정의 감정 순위 조합을 감정 모델을 이용하여 추출하여(S208) 추천 음악 검색 과정을 수행할 수 있다.
또한, 상기 판단(S203) 결과, 상기 입력된 검색 조건이 감정 키워드(keyword)가 아닌 경우, 상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보인지 여부를 판단한다(S204).
상기 판단(S203) 결과, 상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보인 경우, 거리 기반 추천을 수행할 것인지 여부를 판단한다(S207).
또한, 상기 판단(S207)결과, 거리 기반 추천을 수행하지 않는 경우, 상기 감정 모델을 이용하여, 상기 입력된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하여(S208) 추천 음악 검색 과정을 수행할 수 있다.
반면에, 상기 판단(S207)결과, 거리 기반 추천을 수행하는 경우, 상기 음악 감정 데이터베이스에 저장된 감정 수치 정보를 통하여, 밸런스 수치와 어로우절 수치를 각 축으로 포함하는 이차원평면을 구성하고, 상기 구성된 이차원 평면상에서, 상기 입력된 감정 수치에 대응하는 소정의 좌표를 중심으로, 기 설정된 거리, 및 기 설정된 각도에 대응되는 범위를 계산하고(S213), 상기 범위에 포함되는 음악 정보를 검색(S214) 함으로써, 추천 음악 검색 과정을 수행할 수 있다.
상기 거리 기반 추천 음악 검색에 관하여는 이하 도 7에서 상세히 설명한다.
도 3은 본 발명의 실시 예에 따른 음악 감정 데이터베이스 생성 과정을 도시한 순서도이다.
실시 예에 따라, 소정의 입력 인터페이스를 통하여 음악이 입력되면, AV 리그래서를 통하여 밸런스 수치 및 어로우절 수치를 추출한다(S301).
다음으로, 상기 추출된 밸런스 수치 및 어로우절 수치를 기초로, 감정 모델을 통해 감정 별 확률 값(Pdf)과 이 확률 값의 순위(Rank)를 추출하고(S302), 상기 추출된 정보를 저장하여 음악 감정 데이터베이스를 생성한다(S303).
또한, 상기 생성된 음악 감정 데이터베이스를 이용하여 본 발명의 실시 예에 따른 추천음악 검색을 수행할 수 있다.
도 4는 도 2의 음악 검색 과정을 상세히 도시한 도면이다.
실시 예에 따라, 감정 순위 조합에 대응되는 음악 정보를 검색하는 것은, 입력되는 감정의 순위를 조합하여 검색하는 것으로 복합 감정에 대한 검색이 가능하다. 또한, 입력 가능한 감정의 개수는 분류 가능한 감정의 개수에 따라 달라질 수 있다. 즉, 분류 감정의 개수가 N이면 입력 감정의 개수 역시 N개까지 가능하게 된다.
따라서, 먼저, 선택된 음악이 갖는 감정 중 상위 m개의 감정, 또는 감정키워드 선택을 통해 m개의 감정이 입력되면 m개의 감정 중에서 m개의 감정을 선택할 때 나올 수 있는 시퀀스, 즉 순열 P(m, m)의 시퀀스를 추출하고(S401), 상기 추출된 시퀀스와 일치하는 감정 순위를 갖는 음악을 음악 감정 데이터베이스에서 검색한다(S402).
즉, 실시 예에 따라, 하나의 음악이 입력되면 음악이 갖는 감정 순위(s_Rank1, s_Rank2,…, s_Rankn)를 추출할 수 있고, 1 순위 감정이 s_Rank1이므로 음악 감정 데이터베이스에서 1순위 감정(Rank1)이 s_Rank1과 같은 음악을 추천한다. 이때 감정 유사도가 매우 높은 음악을 검색하려면 최대한 많은 수의 감정 순위가 일치하는 음악일수록 유사도가 높아지기 때문에 음악 감정 데이터베이스에서 n에 근접한 m의 감정 순위가 일치하는 음악을 검색할 수 있다.
또한, 실시 예에 따라, 두 개의 감정 키워드(mood1, mood2)가 입력되면 두 감정을 1순위(Rank1), 2순위(Rank2)로 갖는 노래를 음악 감정 데이터베이스에서 검색할 수 있다. 즉, 음악 감정 데이터베이스에서 Rank1, Rank2 값이 P(2, 2): (mood1, mood2), (mood2, mood1) 시퀀스와 일치하는 음악을 검색할 수 있다.
또한, 확률 값 조건을 적용할 것인지 여부를 판단하여(S403), 확률 값 조건을 적용하는 경우, 감정 순위 정보 외에 추천 목적에 따라 순위 보다 더 세밀한 검색을 위해 감정 확률 조건을 이용할 수 있다.
즉, 실시 예에 따라, 1순위 감정의 확률 값이 α(최소 확률 값 ≤ α ≤ 최대 확률 값)이상인 조건을 주어(S404) 전반적으로 고른 검색 결과를 기대할 수 있다. 또는 1순위 감정과 2순위 감정의 차가 β (Rank1의 Pdf - Rank2의 Pdf)이상 또는 이하인 조건을 주어(S405) 1순위 감정이 지배적으로 많거나 1순위 감정과 2순위 감정이 비슷하게 우세한 검색 결과를 얻을 수 있다.
도 5는 본 발명의 실시 예에 따른 추천음악 검색장치의 구성을 도시한 도면이다.
실시 예에 따라, 추천음악 검색장치는, 추천 음악 검색을 위한 검색 조건을 입력 받는 입력 인터페이스부(501), 각 음악의 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보를 저장하는 음악 감정 데이터베이스(505), 밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델(507), 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)하는 AV리그레서(regressor, 506), 상기 입력된 검색 조건이 음악 정보인 경우, 상기 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색하고, 상기 음악 감정 데이터베이스에서 상기 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, 상기 AV리그레서를 이용하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 추출(또는 생성)하고, 상기 감정 모델을 이용하여 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 제어부(502), 상기 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하는 검색부(508), 추천음악 검색을 위한 거리 계산을 수행하는 거리 계산부(504), 및 상기 검색부에서 검색된 음악 정보를 포함하는 추천 음악 목록을 출력하는 출력 인터페이스부(503)를 포함할 수 있다.
또한, 제어부(502)는, 상기 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 확률 값 조건을 추출할 수 있고, 검색부(508)은, 상기 감정 순위 조합에 대응되는 음악 정보에서, 상기 확률 값 조건을 만족하는 음악 정보를 검색할 수 있다.
또한, 제어부(502)는, 상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보인 경우, 상기 감정 모델을 이용하여, 상기 입력된 감정 수치 정보에 대응되는 감정 순위와 감정 확률값 분포를 추출할 수 있다.
또한, 제어부(502)는, 상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보이고, 거리 기반 검색을 수행하는 것으로 설정된 경우, 상기 음악 감정 데이터베이스에 저장된 감정 수치 정보를 통하여, 밸런스 수치와 어로우절 수치를 각 축으로 포함하는 이차원평면을 구성할 수 있고, 검색부(508)는, 거리 계산부(504)를 이용하여, 상기 구성된 이차원 평면상에서, 상기 입력된 감정 수치에 대응하는 소정의 좌표를 중심으로, 기 설정된 거리, 및 기 설정된 각도에 대응되는 범위의 음악 정보를 검색할 수 있다.
또한, 제어부(502)는, 상기 입력된 검색 조건이 감정 키워드(keyword)인 경우, 상기 감정 키워드에 포함된 감정의 감정 순위 조합을 추출할 수 있다.
또한, 출력 인터페이스부(503)는, 현재 재생 중인 음악의 타이틀(title) 정보 항목을 포함하는 음악 재생 정보창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력할 수 있고, 입력 인터페이스부(501)는, 상기 출력된 사용자 인터페이스에서, 상기 검색 정보 입력창에, 상기 타이틀 정보 항목이 입력되면, 상기 현재 재생 중인 음악의 음악 정보가 검색조건으로 입력된 것으로 인식할 수 있다.
또한, 출력 인터페이스부(503)는, 밸런스 수치 및 어로우절 수치를 각 축으로 포함하고 소정 크기의 격자로 구분된 셀(Cell)들을 포함하는 이차원 평면으로 구성되는 감정 수치 선택창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력할 수 있고, 입력 인터페이스부(501)는, 상기 구분된 격자 중, 어느 하나의 격자의 선택 신호가 수신되면, 상기 수신된 선택 신호에 대응되는 격자의 밸런스 수치 및 어로우절 수치가 감정 수치 정보로 입력된 것으로 인식할 수 있다.
또한, 출력 인터페이스부(503)는, 상기 소정 크기의 격자로 구분된 각 셀들의 위치에 대응되는 밸런스 수치 및 어로우절 수치에 대응되는 음악의 개수를 음악 감정 데이터베이스에서 검색하고, 상기 검색되는 음악의 개수에 따라 서로 다른 색상으로 상기 각 셀을 출력할 수 있다.
또한, 출력 인터페이스부(503)는, 복수개의 감정표현 단어를 포함하는 감정 목록 출력창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력할 수 있고, 입력 인터페이스부(501)는, 상기 감정 목록 출력창에 포함된 소정의 감정표현 단어가 입력되면, 상기 입력된 소정의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 할 수 있다.
또한, 출력 인터페이스부(503)는, 상기 감정 목록 출력창에 포함된 감정표현 단어 중, 복수개의 감정표현 단어가 입력되면, 상기 복수개의 감정표현 단어를 포함하는 테마 정보를 생성하고, 상기 테마 정보창을 출력할 수 있고, 입력 인터페이스부(501)는, 상기 복수개의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식할 수 있다.
상기 사용자 인터페이스의 출력에 대하여는 이하 도 8 내지 도 11에서 상세히 설명한다.
도 6은 본 발명의 실시 예에 따른 음악 감정 데이터베이스를 도시한 도면이다.
실시 예에 따라, 음악 감정 데이터베이스는, 각 음악에 대한 밸런스 수치 및 어로우절 수치를 포함하는 감정 수치 정보를 저장할 수 있다.
즉, 도 6을 참조하면, 각 음악을 식별할 수 있는 음악 ID(601)를 저장할 수 있고, 각 음악에 대한 밸런스 수치 및 어로우절 수치에 대한 좌표 정보(602)를 저장할 수 있다. 또한, 상기 밸런스 수치 및 어로우절 수치는 다시 감정 모델을 통해 감정 별 확률 값(Pdf)과 이 확률 값의 순위(Rank)가 추출되어 저장될 수 있다.
도 7은 본 발명의 실시 예에 따른 거리 조건 검색을 도시한 도면이다.
실시 예에 따라, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 거리 기반 음악 추천을 수행할 수 있다.
즉, 검색조건으로 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보가 입력되고, 검색 장치가 거리 기반 검색을 수행하는 것으로 설정된 경우, 음악 감정 데이터베이스에 저장된 감정 수치 정보를 통하여, 밸런스 수치(701)와 어로우절 수치(702)를 각 축으로 포함하는 이차원평면을 구성하고, 상기 구성된 이차원 평면상에서, 상기 입력된 감정 수치에 대응하는 소정의 좌표를 중심으로, 기 설정된 거리, 및 기 설정된 각도에 대응되는 범위(703)의 음악 정보를 검색할 수 있다.
즉, 상기 이차원 평면상의 임의의 좌표를 중심으로 거리 d, 각도 θ 만큼 떨어진 영역에 포함된 노래를 추천할 수 있다. 또한, 거리 d는, 전체 보유곡 또는 이차원 평면의 영역마다 분포하는 곡 수에 따라 조정될 수 있다. 또한 도 7의 A와 같이 사용자의 음악 감정 성향에 따라 각도 θ 값을 조절하여 검색 영역을 지정함으로써 사용자의 특성을 반영한 추천이 가능하다.
도 8은 본 발명의 실시 예에 따른 감정 수치 입력을 위한 사용자 인터페이스 를 도시한 도면이다.
본 발명의 실시 예에 따른 추천음악 검색 방법은, 밸런스 수치 및 어로우절 수치를 각 축으로 포함하고 소정 크기의 격자로 구분된 셀(Cell)들을 포함하는 이차원 평면으로 구성되는 감정 수치 선택창(804), 및 추천 음악 목록 출력창(802)을 포함하는 사용자 인터페이스를 출력할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 상기 구분된 격자 중, 소정의 커서이동 또는 터치동작을 통하여 어느 하나의 격자의 선택 신호가 수신되면, 상기 수신된 선택 신호에 대응되는 격자의 밸런스 수치 및 어로우절 수치가 감정 수치 정보로 입력된 것으로 인식하여 추천 음악 검색 과정을 수행하고, 추천 음악 목록 출력창(802)에 추천 음악 목록을 출력할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 추천 음악 목록 출력창(802)에 포함된 추천 음악 중, 소정의 커서이동 또는 터치동작을 통하여 어느 하나의 음악이 선택되면, 선택된 음악에 대응되는 정보를 음악 정보창(801)에 출력할 수 있다. 상기 대응되는 정보는, 음악의 아티스트 정보, 및 음악과 관련된 앨범 정보를 포함할 수 있다. 또한, 상기 추천 음악 목록 출력창(802)는, 추천 음악 목록에 포함된 추천 음악의 감정을 나타낼 수 있는 대표 감정 아이콘(805)을 포함할 수 있다.
또한, 상기 격자는 8x8, 10x10, 16x16 등 임의의 크기로 지정될 수 있다. 격자로 구분된 셀(Cell)을 클릭하거나, 터치, 드래그 등의 동작을 이용해 셀이 선택되면 해당 셀 영역에 분포하는 음악 또는 이 셀 영역의 감정 확률분포 정보를 이용하여 추천 음악이 검색될 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 상기 소정 크기의 격자로 구분된 각 셀들의 위치에 대응되는 밸런스 수치 및 어로우절 수치에 대응되는 음악의 개수를 음악 감정 데이터베이스에서 검색하고, 상기 검색되는 음악의 개수에 따라 서로 다른 색상으로 상기 각 셀을 출력할 수 있다. 즉, 예를 들어, 음악의 개수가 많은 셀(803)의 색상을 어둡게 출력할 수 있다.
즉, 사용자가 보유한 음악의 감정 수치 좌표 값을 이차원평면에 배경색과 다른 색으로 구분하여 표현함으로써 보유 음악의 감정분포를 알 수 있다.
또한, 실시 예에 따라, 사용자가 특정 셀을 선택하면, 상기 선택된 셀은 하이라이트로 표현될 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 추천 음악 목록 출력창(802)에 포함된 추천 음악 중, 어느 하나의 음악이 선택되면, 선택된 음악에 대응되는 정보를 음악 정보창(801)에 출력할 수 있다. 상기 대응되는 정보는, 음악의 아티스트 정보, 및 음악과 관련된 앨범 정보를 포함할 수 있다. 또한, 상기 추천 음악 목록 출력창(802)는, 추천 음악 목록에 포함된 추천 음악의 감정을 나타낼 수 있는 대표 감정 아이콘(805)을 포함할 수 있다.
즉, 추천 목록의 각 노래 별로 순위가 높은 감정들을 아이콘이나 색깔 등으로 표시함으로써 리스트만으로도 노래가 갖는 감정을 직관적으로 알 수 있도록 할 수 있다.
도 9는 본 발명의 실시 예에 따른 음악 입력을 위한 사용자 인터페이스를 도시한 도면이다.
본 발명의 실시 예에 따른 추천음악 검색 방법은, 현재 재생 중인 음악의 타이틀(title) 정보 항목을 포함하는 음악 재생 정보창(901), 검색 정보 입력창(908), 및 추천 음악 목록 출력창(906)을 포함하는 사용자 인터페이스를 출력할 수 있다.
상기 음악 타이틀 정보 항목은, 음악의 아티스트 항목, 음악의 곡명 항목을 포함할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 상기 음악 재생 정보창(901)에 포함된 소정의 음악 타이틀 정보 항목이, 소정의 커서이동 또는 터치동작(904)을 통한 드래그 앤 드롭(Drag & Drop) 동작 등의 입력 동작을 통하여 검색 정보 입력창(908)에 입력되면, 상기 입력된 음악 타이틀 정보 항목에 대응되는 음악 정보가 검색 조건으로 입력된 것으로 인식할 수 있다.
또한, 음악 재생 정보창(901)은, 현재 재생 중인 음악의 앨범 이미지와 타이틀 정보(902) 및 다음으로 재생할 음악의 앨범 이미지(903)을 포함할 수 있고, 음악 타이틀이 소정의 커서이동 또는 터치동작(904)을 통한 드래그 앤 드롭(Drag & Drop) 동작 등의 입력 동작을 통하여 검색 정보 입력창(908)에 입력되면, 상기 입력된 음악 타이틀에 대응되는 음악 정보가 검색 조건으로 입력된 것으로 인식할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 추천 음악 목록 출력창(906)에 포함된 추천 음악 중, 어느 하나의 음악이 선택되면, 선택된 음악에 대응되는 정보를 음악 정보창(905)에 출력할 수 있다. 상기 대응되는 정보는, 음악의 아티스트 정보, 및 음악과 관련된 앨범 정보를 포함할 수 있다. 또한, 상기 추천 음악 목록 출력창(906)는, 추천 음악 목록에 포함된 추천 음악의 감정을 나타낼 수 있는 대표 감정 아이콘(907)을 포함할 수 있다.
즉, 실시 예에 따라, 음악을 듣다가 재생 중인 음악과 유사한 음악을 찾고 싶거나 재생목록에 있는 곡과 유사한 곡을 찾고 싶을 때 사용자가 선택한 곡과 유사한 감정의 노래에 대한 추천 음악 목록을 사용자에게 제공할 수 있다. 즉, 음악이 가지는 감정 순위 또는 감정의 확률 값을 이용하여 감정 순위가 일치하는 곡을 추천하거나 감정 확률 값 자체가 일정 범위 내에서 유사한 곡을 추천할 수 있다.
도 10은 본 발명의 실시 예에 따른 감정 키워드 입력을 위한 사용자 인터페이스를 도시한 도면이다.
본 발명의 실시 예에 따른 추천음악 검색 방법은, 복수개의 감정표현 단어를 포함하는 감정 목록 출력창(1001), 검색 정보 입력창(1006), 음악 정보창(1002) 및 추천 음악 목록 출력창(1004)을 포함하는 사용자 인터페이스를 출력할 수 있다.
소정의 음악에 대응되는 감정들은 각 분류 감정들을 대표하는 감정표현 단어로 표시될 수 있고, 이러한 감정표현 단어들은 태그 클라우드(tag cloud)나 아이콘, 또는 리스트 형태로 제공될 수 있다. 도 10은, 태그 클라우드 형태로 감정표현 단어를 나타낸 예로 사용자가 보유하고 있는 곡들의 감정 분포에 따라 각 감정 표현 단어들의 크기가 달라질 수 있다. 즉, 도 10에 도시된 바와 같이, 예를 들어 단어 ‘즐거운’, ‘신나는’의 단어 크기가 다른 단어들 보다 더 크게 표현되어 있어 사용자가 즐겁고 신나는 분위기의 노래를 상대적으로 많이 가지고 있음을 사용자 인터페이스 화면을 통하여 사용자에게 정보를 제공할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 상기 감정 목록 출력창(1001)에 포함된 소정의 감정표현 단어가, 소정의 커서이동 또는 터치동작 (1003)을 통한 드래그 앤 드롭(Drag & Drop) 동작 등의 입력 동작을 통하여 검색 정보 입력창(1006)에 입력되면, 상기 입력된 소정의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식할 수 있다.
즉, 선택된 감정표현 단어가 대표하는 감정을 1순위 또는 2순위로 갖는 노래를 검색하여 추천 목록 출력창(1004)에 출력할 수 있다.
또한, 음악의 감정은 시간에 따라 변하고 사람들마다 약간씩 다르게 느낄 수 있으므로, 이러한 감정의 변화나 다양성을 표현할 수 있도록 감정 단어를 조합하여 복합 감정을 선택할 수 있다. 즉, 도 10에 도시된 바와 같이, 복수개의 단어를 검색 정보 입력창(1006)에 입력하면 해당 감정의 단어가 동시에 선택된다. 예를 들어 밝으면서 신비하고 잔잔한 분위기의 노래가 듣고 싶다면 ‘밝은’, ‘신비한’, ‘잔잔한’ 단어를 조합하여 추천 음악을 검색한다. 즉, 음악의 감정 확률 값 중 이 세가지 감정의 분포가 큰 곡들을 검색하여 추천 목록 출력창(1004)에 출력할 수 있다. 또한, 상기 추천 음악 목록 출력창(1004)는, 추천 음악 목록에 포함된 추천 음악의 감정을 나타낼 수 있는 대표 감정 아이콘(1005)을 포함할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 추천 음악 목록 출력창(1004)에 포함된 추천 음악 중, 어느 하나의 음악이 선택되면, 선택된 음악에 대응되는 정보를 음악 정보창(1002)에 출력할 수 있다. 상기 대응되는 정보는, 음악의 아티스트 정보, 및 음악과 관련된 앨범 정보를 포함할 수 있다.
도 11은 본 발명의 실시 예에 따른 테마 입력을 위한 사용자 인터페이스를 도시한 도면이다.
테마는 시간, 장소, 이벤트 등의 조합으로 만들어지는 상황을 나타내는 것으로, 복수개의 감정이 조합되어 구성될 수 있다. 따라서, 테마 기반 음악 추천은, 그 상황과 어울리는 분위기, 즉, 그 상황에서 느끼는 감정과 그 상황에서 느끼는 감정과 어울리는 노래를 추천할 수 있다. 또한, 음악의 감정과 마찬가지로, 같은 상황에서 느끼는 감정은, 사람마다 상이할 수 있기 때문에, 테마에 어울리는 선호 음악 역시 사람마다 다를 수 있다.
따라서, 본 발명의 실시 예에 따라, 사용자의 입력을 통하여 테마를 생성하고, 생성된 테마와 어울리는 음악을 찾기 위한 인터페이스를 제공할 수 있다. 즉, 감정 조합 기능을 이용하여 사용자가 직접 테마를 생성하고, 상기 생성된 테마에 어울리는 음악을 포함하는 추천 목록을 구성할 수 있다.
즉, 도 11을 참조하면, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 복수개의 감정표현 단어를 포함하는 감정 목록 출력창(1101), 검색 정보 입력창(1103), 및 추천 음악 목록 출력창(1107)을 포함하는 사용자 인터페이스를 출력할 수 있다.
또한, 본 발명의 실시 예에 따른 추천음악 검색 방법은, 상기 감정 목록 출력창(1101)에 포함된 감정 표현 단어 중, 소정의 커서이동 또는 터치동작(1102)을 통한 드래그 앤 드롭(Drag & Drop) 동작 등의 입력 동작을 통하여 검색 정보 입력창(1103)에 복수개의 감정 표현 단어가 입력되면, 상기 복수개의 감정표현 단어를 포함하는 테마 정보를 생성하고, 상기 테마 정보를 포함하는 테마 정보창(1104) 및 테마 저장 메뉴(1105)를 출력하고, 상기 복수개의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식할 수 있다.
또한, 상기 테마 정보창(1104)는, 상기 입력된 복수개의 감정 표현 단어들의 강도를 조절하기 위한 메뉴 항목을 포함할 수 있고, 상기 추천 음악 목록 출력창(1107)는, 추천 음악 목록에 포함된 추천 음악의 감정을 나타낼 수 있는 대표 감정 아이콘(1108)을 포함할 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
501: 입력 인터페이스부
502: 제어부
503: 출력 인터페이스부
504: 거리 계산부
505: 음악 감정 데이터베이스
506: AV리그레서
507: 감정 모델
508: 검색부

Claims (20)

  1. 음악의 감정 정보를 이용한 추천 음악 검색이 가능한 음악 검색 장치에서,
    추천 음악 검색을 위한 검색 조건을 입력 받는 단계;
    상기 입력된 검색 조건이 음악 정보인 경우, 각 음악에 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보가 저장된 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색하는 단계;
    상기 음악 감정 데이터베이스에서 상기 입력된 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, AV리그레서(Regressor)를 통하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 검색하는 단계;
    밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 단계;
    상기 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하는 단계; 및
    상기 검색된 음악 정보를 포함하는 추천 음악 목록을 출력하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  2. 청구항 1에 있어서,
    상기 추천 음악 목록을 출력하는 단계는,
    상기 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 확률 값 조건을 추출하는 단계;
    상기 감정 순위 조합에 대응되는 음악 정보에서, 상기 확률 값 조건을 만족하는 음악 정보를 검색하는 단계; 및
    상기 확률 값 조건을 만족하는 음악 정보를 포함하는 추천 음악 목록을 출력하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  3. 청구항 1에 있어서,
    상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보인 경우, 상기 감정 모델을 이용하여, 상기 입력된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 단계를 더 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  4. 청구항 1에 있어서,
    상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보이고, 거리 기반 검색을 수행하는 것으로 설정된 경우, 상기 음악 감정 데이터베이스에 저장된 감정 수치 정보를 통하여, 밸런스 수치와 어로우절 수치를 각 축으로 포함하는 이차원평면을 구성하는 단계; 및
    상기 구성된 이차원 평면상에서, 상기 입력된 감정 수치에 대응하는 소정의 좌표를 중심으로, 기 설정된 거리, 및 기 설정된 각도에 대응되는 범위의 음악 정보를 검색하는 단계를 더 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  5. 청구항 1에 있어서,
    상기 입력된 검색 조건이 감정 키워드(keyword)인 경우, 상기 감정 키워드에 포함된 감정의 감정 순위 조합을 추출하는 단계를 더 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  6. 청구항 1에 있어서,
    상기 검색 조건을 입력 받는 단계는,
    현재 재생 중인 음악의 타이틀(title) 정보 항목을 포함하는 음악 재생 정보창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하는 단계; 및
    상기 출력된 사용자 인터페이스에서, 상기 검색 정보 입력창에, 상기 타이틀 정보 항목이 입력되면, 상기 현재 재생 중인 음악의 음악 정보가 검색조건으로 입력된 것으로 인식하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  7. 청구항 1에 있어서,
    상기 검색 조건을 입력 받는 단계는,
    밸런스 수치 및 어로우절 수치를 각 축으로 포함하고 소정 크기의 격자로 구분된 셀(Cell)들을 포함하는 이차원 평면으로 구성되는 감정 수치 선택창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하는 단계;
    상기 구분된 격자 중, 어느 하나의 격자의 선택 신호를 수신하는 단계; 및
    상기 수신된 선택 신호에 대응되는 격자의 밸런스 수치 및 어로우절 수치가 감정 수치 정보로 입력된 것으로 인식하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  8. 청구항 7에 있어서,
    상기 사용자 인터페이스를 출력하는 단계는,
    상기 소정 크기의 격자로 구분된 각 셀들의 위치에 대응되는 밸런스 수치 및 어로우절 수치에 대응되는 음악의 개수를 음악 감정 데이터베이스에서 검색하고, 상기 검색되는 음악의 개수에 따라 서로 다른 색상으로 상기 각 셀을 출력하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  9. 청구항 1에 있어서,
    상기 검색 조건을 입력 받는 단계는,
    복수개의 감정표현 단어를 포함하는 감정 목록 출력창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하는 단계; 및
    상기 감정 목록 출력창에 포함된 소정의 감정표현 단어가 입력되면, 상기 입력된 소정의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  10. 청구항 9에 있어서,
    상기 인식하는 단계는,
    상기 감정 목록 출력창에 포함된 감정표현 단어 중, 복수개의 감정표현 단어가 입력되면, 상기 복수개의 감정표현 단어를 포함하는 테마 정보를 생성하고, 상기 테마 정보창을 출력하는 단계; 및
    상기 복수개의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식하는 단계를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 방법.
  11. 추천 음악 검색을 위한 검색 조건을 입력 받는 입력 인터페이스부;
    각 음악에 대한 밸런스(Valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치 정보를 저장하는 음악 감정 데이터베이스;
    밸런스 수치 및 어로우절 수치에 대응되는 복합 감정에 대한 정보를 포함하는 감정 모델;
    음악에 대한 상기 감정 수치 정보를 검색하는 AV리그레서(regressor);
    상기 입력된 검색 조건이 음악 정보인 경우, 상기 음악 감정 데이터베이스에서, 상기 입력된 음악 정보에 대한 상기 감정 수치 정보를 검색하고, 상기 음악 감정 데이터베이스에서 상기 음악 정보에 대응되는 감정 수치 정보가 검색되지 않는 경우, 상기 AV리그레서를 이용하여 상기 입력된 음악에 대한 상기 감정 수치 정보를 검색하고, 상기 감정 모델을 이용하여 상기 검색된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 제어부;
    상기 음악 감정 데이터베이스에서, 상기 추출된 감정 순위 조합에 대응되는 음악 정보를 검색하는 검색부; 및
    상기 검색부에서 검색된 음악 정보를 포함하는 추천 음악 목록을 출력하는 출력 인터페이스부를 포함하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  12. 청구항 11에 있어서,
    상기 제어부는,
    상기 감정 모델을 이용하여, 상기 검색된 감정 수치 정보에 대응되는 확률 값 조건을 추출하고,
    상기 검색부는,
    상기 감정 순위 조합에 대응되는 음악 정보에서, 상기 확률 값 조건을 만족하는 음악 정보를 검색하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  13. 청구항 11에 있어서,
    상기 제어부는,
    상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보인 경우, 상기 감정 모델을 이용하여, 상기 입력된 감정 수치 정보에 대응되는 감정 순위 조합을 추출하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  14. 청구항 11에 있어서,
    상기 제어부는,
    상기 입력된 검색 조건이 밸런스(valence) 수치 및 어로우절(Arousal) 수치를 포함하는 감정 수치정보이고, 거리 기반 검색을 수행하는 것으로 설정된 경우, 상기 음악 감정 데이터베이스에 저장된 감정 수치 정보를 통하여, 밸런스 수치와 어로우절 수치를 각 축으로 포함하는 이차원평면을 구성하고,
    상기 검색부는,
    상기 구성된 이차원 평면상에서, 상기 입력된 감정 수치에 대응하는 소정의 좌표를 중심으로, 기 설정된 거리, 및 기 설정된 각도에 대응되는 범위의 음악 정보를 검색하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  15. 청구항 11에 있어서,
    상기 제어부는,
    상기 입력된 검색 조건이 감정 키워드(keyword)인 경우, 상기 감정 키워드에 포함된 감정의 감정 순위 조합을 추출하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  16. 청구항 11에 있어서,
    상기 출력 인터페이스부는,
    현재 재생 중인 음악의 타이틀(title) 정보 항목을 포함하는 음악 재생 정보창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하고,
    상기 입력 인터페이스부는,
    상기 출력된 사용자 인터페이스에서, 상기 검색 정보 입력창에, 상기 타이틀 정보 항목이 입력되면, 상기 현재 재생 중인 음악의 음악 정보가 검색조건으로 입력된 것으로 인식하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  17. 청구항 11에 있어서,
    상기 출력 인터페이스부는,
    밸런스 수치 및 어로우절 수치를 각 축으로 포함하고 소정 크기의 격자로 구분된 셀(Cell)들을 포함하는 이차원 평면으로 구성되는 감정 수치 선택창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하고,
    상기 입력 인터페이스부는,
    상기 구분된 격자 중, 어느 하나의 격자의 선택 신호가 수신되면, 상기 수신된 선택 신호에 대응되는 격자의 밸런스 수치 및 어로우절 수치가 감정 수치 정보로 입력된 것으로 인식하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  18. 청구항 17에 있어서,
    상기 출력 인터페이스부는,
    상기 소정 크기의 격자로 구분된 각 셀들의 위치에 대응되는 밸런스 수치 및 어로우절 수치에 대응되는 음악의 개수를 음악 감정 데이터베이스에서 검색하고, 상기 검색되는 음악의 개수에 따라 서로 다른 색상으로 상기 각 셀을 출력하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  19. 청구항 11에 있어서,
    상기 출력 인터페이스부는,
    복수개의 감정표현 단어를 포함하는 감정 목록 출력창, 검색 정보 입력창, 및 추천 음악 목록 출력창을 포함하는 사용자 인터페이스를 출력하고,
    상기 입력 인터페이스부는,
    상기 감정 목록 출력창에 포함된 소정의 감정표현 단어가 입력되면, 상기 입력된 소정의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
  20. 청구항 19에 있어서,
    상기 출력 인터페이스부는,
    상기 감정 목록 출력창에 포함된 감정표현 단어 중, 복수개의 감정표현 단어가 입력되면, 상기 복수개의 감정표현 단어를 포함하는 테마 정보를 생성하여 상기 테마 정보를 포함하는 테마 정보창을 출력하고,
    상기 입력 인터페이스부는,
    상기 복수개의 감정표현 단어를 포함하는 감정키워드가 검색 조건으로 입력된 것으로 인식하는 것을 특징으로 하는 음악의 감정 정보를 이용한 추천음악 검색 장치.
KR1020110125457A 2011-11-28 2011-11-28 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치 KR101527370B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110125457A KR101527370B1 (ko) 2011-11-28 2011-11-28 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치
US13/467,962 US8838617B2 (en) 2011-11-28 2012-05-09 Method and apparatus for searching for recommended music using emotional information of music

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110125457A KR101527370B1 (ko) 2011-11-28 2011-11-28 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20130059237A true KR20130059237A (ko) 2013-06-05
KR101527370B1 KR101527370B1 (ko) 2015-06-10

Family

ID=48467774

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110125457A KR101527370B1 (ko) 2011-11-28 2011-11-28 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치

Country Status (2)

Country Link
US (1) US8838617B2 (ko)
KR (1) KR101527370B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101539650B1 (ko) * 2014-10-31 2015-07-28 (주)와이브레인 음악 컨텐츠 제공 시스템
KR20190073045A (ko) * 2017-12-18 2019-06-26 정우주 음악을 추천하기 위한 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
KR20190096787A (ko) * 2018-02-09 2019-08-20 광주과학기술원 감정 평가 시스템

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI489451B (zh) * 2012-12-13 2015-06-21 Univ Nat Chiao Tung 基於語音情感辨識之音樂播放系統及其方法
US10623480B2 (en) 2013-03-14 2020-04-14 Aperture Investments, Llc Music categorization using rhythm, texture and pitch
US10225328B2 (en) 2013-03-14 2019-03-05 Aperture Investments, Llc Music selection and organization using audio fingerprints
US10061476B2 (en) 2013-03-14 2018-08-28 Aperture Investments, Llc Systems and methods for identifying, searching, organizing, selecting and distributing content based on mood
US9875304B2 (en) 2013-03-14 2018-01-23 Aperture Investments, Llc Music selection and organization using audio fingerprints
US9639871B2 (en) * 2013-03-14 2017-05-02 Apperture Investments, Llc Methods and apparatuses for assigning moods to content and searching for moods to select content
US10242097B2 (en) * 2013-03-14 2019-03-26 Aperture Investments, Llc Music selection and organization using rhythm, texture and pitch
US11271993B2 (en) 2013-03-14 2022-03-08 Aperture Investments, Llc Streaming music categorization using rhythm, texture and pitch
CN103605656B (zh) * 2013-09-30 2018-02-02 小米科技有限责任公司 一种推荐音乐的方法、装置及一种移动终端
TWI603213B (zh) * 2014-01-23 2017-10-21 國立交通大學 基於臉部辨識的音樂選取方法、音樂選取系統及電子裝置
US20220147562A1 (en) 2014-03-27 2022-05-12 Aperture Investments, Llc Music streaming, playlist creation and streaming architecture
CN104239499B (zh) * 2014-09-10 2018-01-02 广州砺锋信息科技有限公司 一种基于大数据的高考志愿智能推荐的方法及装置
KR20160051922A (ko) * 2014-10-29 2016-05-12 현대자동차주식회사 차량의 음악 추천 시스템 및 그 방법
US9582496B2 (en) * 2014-11-03 2017-02-28 International Business Machines Corporation Facilitating a meeting using graphical text analysis
CN105930429A (zh) * 2016-04-19 2016-09-07 乐视控股(北京)有限公司 一种音乐推荐的方法及装置
US20180300404A1 (en) * 2017-04-17 2018-10-18 Jose Antonio Lemos-Munoz Leerecs synesthetic library
KR102660124B1 (ko) * 2018-03-08 2024-04-23 한국전자통신연구원 동영상 감정 학습용 데이터 생성 방법, 동영상 감정 판단 방법, 이를 이용하는 동영상 감정 판단 장치
EP3923226A4 (en) * 2019-02-05 2022-03-23 Sony Group Corporation PREFERENCE CALCULATOR, PREFERENCE CALCULATION METHOD AND PROGRAM
CN110162671B (zh) * 2019-05-09 2023-01-03 央视国际网络无锡有限公司 通过音乐情感识别视频广告的方法
CN111274417B (zh) * 2020-01-17 2023-05-12 新华网股份有限公司 情感标注方法、装置、电子设备及计算机可读存储介质
US11284157B2 (en) 2020-06-11 2022-03-22 Rovi Guides, Inc. Methods and systems facilitating adjustment of multiple variables via a content guidance application
CN112989071B (zh) * 2020-12-14 2022-11-04 北京航空航天大学 一种基于人体舞蹈情感的音乐选择方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100401012B1 (ko) * 2000-12-15 2003-10-30 김연경 감정상태에 기초한 선곡기능을 가진 음악제공시스템 및 방법
KR101316627B1 (ko) * 2006-02-07 2013-10-15 삼성전자주식회사 사용자 의도 자동 해석 기반의 음악 추천 방법 및 그 장치
KR100895009B1 (ko) * 2006-06-30 2009-04-24 (주)엔토시스 음악추천 시스템 및 그 방법
KR100975127B1 (ko) 2007-08-24 2010-08-11 (주)큐박스닷컴 감성이 유사한 음악들을 제공하는 서비스 방법 및 시스템
KR101170208B1 (ko) * 2008-08-26 2012-07-31 금오공과대학교 산학협력단 음악추천 시스템 및 방법
US20120233164A1 (en) * 2008-09-05 2012-09-13 Sourcetone, Llc Music classification system and method
TW201022968A (en) * 2008-12-10 2010-06-16 Univ Nat Taiwan A multimedia searching system, a method of building the system and associate searching method thereof
US20110035683A1 (en) * 2009-08-07 2011-02-10 Larry Stead Method and apparatus for synchronous, collaborative media consumption

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101539650B1 (ko) * 2014-10-31 2015-07-28 (주)와이브레인 음악 컨텐츠 제공 시스템
WO2016068634A1 (ko) * 2014-10-31 2016-05-06 (주)와이브레인 음악 컨텐츠 제공 시스템
KR20190073045A (ko) * 2017-12-18 2019-06-26 정우주 음악을 추천하기 위한 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
KR20190096787A (ko) * 2018-02-09 2019-08-20 광주과학기술원 감정 평가 시스템

Also Published As

Publication number Publication date
US20130138684A1 (en) 2013-05-30
KR101527370B1 (ko) 2015-06-10
US8838617B2 (en) 2014-09-16

Similar Documents

Publication Publication Date Title
KR101527370B1 (ko) 음악의 감정 정보를 이용한 추천음악 검색 방법 및 장치
US20220413798A1 (en) Playlist configuration and preview
US10417278B2 (en) Systems and methods to facilitate media search
US8583615B2 (en) System and method for generating a playlist from a mood gradient
US8875021B2 (en) Visual playlist
US20090199120A1 (en) Customizable, reconfigurable graphical user interface
WO2012019827A1 (en) User interface for creating a playlist
US20090063971A1 (en) Media discovery interface
WO2016032985A1 (en) Location-based media searching and sharing
Pampalk et al. MusicSun: A New Approach to Artist Recommendation.
KR20070068452A (ko) 재생리스트를 시각적으로 생성하는 장치 및 방법
KR20090033750A (ko) 콘텐츠 플레이 리스트 추천 방법 및 장치
JP2006039704A (ja) プレイリスト生成装置
KR20130055748A (ko) 콘텐츠 추천 시스템 및 방법
CN104199864A (zh) 一种输入过程中按键音提示的方法和装置
WO2012173021A1 (ja) 情報処理装置、情報処理方法、および、プログラム
KR102516212B1 (ko) 추천 플레이리스트 생성 방법 및 그를 위한 장치
US20220350838A1 (en) Methods and systems for organizing music tracks
KR20120021174A (ko) 감정 모델을 이용한 음악 검색 장치 및 방법
Nakano et al. LyricListPlayer: A consecutive-query-by-playback interface for retrieving similar word sequences from different song lyrics
JP2013003685A (ja) 情報処理装置、情報処理方法、および、プログラム
CN106649480A (zh) 一种音乐列表的生成方法及服务器
JP2010541090A (ja) コンテンツアイテムのコレクションのうちの少なくとも1つを選択する方法
KR101634782B1 (ko) 감정 매칭형 음원 제공시스템 및 음원 제공방법
US20180322195A1 (en) Method for recommending musing in playlist and apparatus using the same

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180529

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 5