KR101034373B1 - Media contents Exploring system and method using Emotional Model - Google Patents

Media contents Exploring system and method using Emotional Model Download PDF

Info

Publication number
KR101034373B1
KR101034373B1 KR1020090034572A KR20090034572A KR101034373B1 KR 101034373 B1 KR101034373 B1 KR 101034373B1 KR 1020090034572 A KR1020090034572 A KR 1020090034572A KR 20090034572 A KR20090034572 A KR 20090034572A KR 101034373 B1 KR101034373 B1 KR 101034373B1
Authority
KR
South Korea
Prior art keywords
media content
emotion
space
content
displayed
Prior art date
Application number
KR1020090034572A
Other languages
Korean (ko)
Other versions
KR20100115921A (en
Inventor
이인권
유민준
김현주
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020090034572A priority Critical patent/KR101034373B1/en
Publication of KR20100115921A publication Critical patent/KR20100115921A/en
Application granted granted Critical
Publication of KR101034373B1 publication Critical patent/KR101034373B1/en

Links

Images

Abstract

본 발명은 감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법에 관한 것이다. 본 발명은 (a) 인간이 느끼는 감정의 정도를 나타내는 감정 수치가 이미 계산된 미디어 컨텐츠들을 N(여기에서 N은 자연수이다)차원의 공간에 표시하는 단계; (b) 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색 신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 단계; 및 (c) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 단계를 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법을 제공한다. 본 발명에 따르면 미디어 컨텐츠에 대한 정확한 지식을 알고 있지 않더라도 느껴지는 분위기에 따라서 공간상에 분포된 미디어 컨텐츠를 실시간으로 들으면서 탐색할 수 있고, 여러 컨텐츠들을 동시에 들으면서 사용자가 느끼는 감정에 따라 듣기를 원하는 미디어 컨텐츠를 더욱 빠르고 직관적으로 탐색할 수 있고, 미디어 컨텐츠들의 리스트를 신속하게 생성할 수 있다는 효과가 있다.The present invention relates to a media content search system and method using an emotion model. The present invention includes the steps of: (a) displaying in the space of the N dimension (where N is a natural number) media contents for which the emotional value indicating the degree of emotion felt by the human is already calculated; (b) receiving a search signal for searching for the media content displayed in the space and selecting at least a portion of the space; And (c) playing the media content present in the selected area or within a predetermined distance from the selected area in real time. According to the present invention, even if the user does not know the exact knowledge of the media content, the media content distributed in the space can be searched in real time according to the sensation of feeling, and the media content that the user wants to listen to according to the feelings of the user while listening to various contents simultaneously Can be navigated more quickly and intuitively, and a list of media contents can be generated quickly.

컨텐츠 탐색, 감정모델, 디지털 음악, 비디오, 영상 탐색, 볼륨조절, 감정수치, 실시간 탐색, 재생 리스트 생성 Content search, emotion model, digital music, video, video search, volume control, emotion value, real time search, playlist generation

Description

감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법{Media contents Exploring system and method using Emotional Model}Media contents Exploring system and method using Emotional Model}

본 발명은 감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법에 관한 것이다. 더욱 상세하게는 감정모델을 이용하여 미디어 컨텐츠를 정렬하고, 정렬된 미디어 컨텐츠를 탐색하는 시스템과 방법에 관한 것으로서, 다양한 장르의 미디어 컨텐츠에 대하여 각 곡에 대한 감정의 강도를 나타내는 어로우절(Arousal) 값과 감정의 긍정도를 나타내는 밸런스(Valence) 값을 추출하는 감정모델을 수립한 후, 어로우절 축과 밸런스 축으로 표현되는 2차원 좌표상에서 원하는 미디어 컨텐츠를 탐색할 수 있는 시스템 및 방법에 관한 것이다.The present invention relates to a media content search system and method using an emotion model. More specifically, the present invention relates to a system and method for arranging media content using an emotion model and searching for the sorted media content. The present invention describes an intensity of emotion for each song in various genres of media content. The present invention relates to a system and method for searching for desired media content on two-dimensional coordinates represented by an alignment axis and a balance axis after establishing an emotion model that extracts a balance value representing a positive value and an emotion. .

최근 MP3 플레이어, PDA, 휴대전화, 컴퓨터, 디지털 오디오 장비 등의 미디어 컨텐츠 재생기기의 폭넓은 보급 및 디지털 컨텐츠 파일의 대중화로 인하여, 개인적으로 보유하고 있는 컨텐츠 파일의 수는 점차 증가하고 있는 추세에 있다. 개인이 보유하고 있는 수많은 컨텐츠 파일을 관리하기 위해 기존에는 사전식 정렬방법을 주로 사용하여 왔다. 그런데, 컨텐츠 파일의 이름을 이용하여 정렬하는 기존의 사전식 정렬방법은 미디어 컨텐츠에 대한 정보를 정확하게 알지 못하는 사용자 가 분위기와 기분에 따라 미디어 컨텐츠를 재생하여 듣거나 보기 원하는 컨텐츠를 찾고자 할 때 미디어 컨텐츠 검색에 오랜 시간을 소비하게 만든다는 단점이 있었다.Recently, due to the wide spread of media content player such as MP3 player, PDA, mobile phone, computer, digital audio equipment and popularization of digital content files, the number of personally owned content files is gradually increasing. . In order to manage a large number of content files owned by individuals, the lexical sorting method has been mainly used. By the way, the conventional dictionary sorting method of sorting by using the name of the content file, when the user who does not know the information on the media content accurately, tries to find the content that they want to hear or watch by playing the media content according to the mood and mood. The drawback was that it would take a long time to search.

이러한 문제점을 해결하기 위해 최근에는 컨텐츠 파일의 메타 데이터 또는 MFCC(Mel Frequency Cepstrum Coefficient) 등의 데이터들을 이용하여 컨텐츠 파일을 정렬하거나, 자기조직화맵(SOM : Self Organizing Map)을 이용한 차원축소 기법을 이용하여 유사한 느낌의 컨텐츠 파일을 분류한 후 이를 바탕으로 원하는 컨텐츠를 검색할 수 있도록 하기 위한 연구들이 진행되고 있다.In order to solve this problem, recently, content files are sorted using metadata such as metadata of a content file or Mel Frequency Cepstrum Coefficient (MFCC), or a dimension reduction technique using a self organizing map (SOM) is used. As a result, studies have been conducted to classify content files with similar feelings and to search for desired contents based on the same.

그러나, 이러한 연구들에 의한 방법들은 장르별, 작곡가별 및 가수별 등으로 분류 및 정렬된 컨텐츠 파일을 다시 리스트에서 검색한 후 선택하여 들어야 한다는 점에서 한계를 가지게 된다.However, the methods of these studies have limitations in that the content files classified and sorted by genre, composer, singer, etc. must be searched again in the list and selected.

따라서, 여전히 미디어 컨텐츠를 듣거나 보고자하는 사용자가 느끼는 감정에 따라 미디어 컨텐츠를 더욱 쉽고 빠르게 탐색할 수 있도록 하는 방안이 요청되고 있는 실정이다.Therefore, there is still a demand for a method for enabling easier and faster navigation of media content according to the feelings of a user who wants to listen to or view media content.

본 발명은 상기한 문제점을 해결하기 위해 인간의 감정에 바탕을 둔 감정모델에 따라 점의 형태로 표현된 미디어 컨텐츠를 N차원의 공간상에 배치하고, 포인터를 이용하여 배치된 점을 탐색하는 동안 포인터에 의해 선택된 공간상의 영역으로부터 일정 범위 내에 존재하는 미디어 컨텐츠들을 실시간으로 듣거나 볼 수 있도록 하여 사용자가 원하는 컨텐츠를 더욱 직관적고 신속하게 선택할 수 있도록 하며, 사용자가 지정한 범위 안에 있는 컨텐츠 파일들의 리스트를 생성하고, 리스트에 수록된 컨텐츠를 재생시키는 감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법을 제공하는 것을 그 목적으로 한다.In order to solve the above problems, the media content expressed in the form of points according to the emotion model based on human emotion is arranged in the N-dimensional space, and while searching for the arranged points using a pointer. It allows you to listen to or view media contents existing within a certain range from the space area selected by the pointer in real time so that users can select the desired contents more intuitively and quickly. It is an object of the present invention to provide a media content search system and method using an emotion model that generates and reproduces the contents contained in a list.

상기한 목적을 달성하기 위해 본 발명은 (a) 인간이 느끼는 감정의 정도를 나타내는 감정 수치가 이미 계산된 미디어 컨텐츠들을 N(여기에서 N은 자연수이다)차원의 공간에 표시하는 단계; (b) 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색 신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 단계; 및 (c) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 단계를 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법을 제공한다.In order to achieve the above object, the present invention comprises the steps of: (a) displaying in the space of the N (where N is a natural number) media content for which the emotional value indicating the degree of emotion that a human feels is calculated; (b) receiving a search signal for searching for the media content displayed in the space and selecting at least a portion of the space; And (c) playing the media content present in the selected area or within a predetermined distance from the selected area in real time.

여기서, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸 런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 한다.Here, the emotion value represents the degree of emotion that a human feels using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. It is characterized by being calculated according to the arrangement-balance model.

또한, 상기 (a)단계는 (a1) 상기 N차원 공간상에 표시되어야 하는 미디어 컨텐츠를 입력 받는 단계; (a2) 상기 입력된 미디어 컨텐츠로부터 상기 입력된 미디어 컨텐츠의 속성을 나타내는 특징값을 추출하는 단계; (a3) 미디어 컨텐츠의 특징값과 감정수치 사이의 연관 관계를 나타내는 선형 또는 비선형의 감정모델에 상기 입력된 미디어 컨텐츠로부터 추출된 특징값을 입력하여 상기 입력된 미디어 컨텐츠의 감정 수치를 계산하는 단계; 및 (a4) 상기 계산된 감정 수치에 따라 상기 입력된 미디어 컨텐츠를 상기 N차원의 공간에 표시하는 단계를 더 포함하는 것을 특징으로 한다.In addition, step (a) may include (a1) receiving media content to be displayed on the N-dimensional space; (a2) extracting feature values representing attributes of the input media content from the input media content; (a3) calculating an emotion value of the input media content by inputting a feature value extracted from the input media content into a linear or non-linear emotion model indicating an association between a feature value and an emotion value of media content; And (a4) displaying the input media content in the N-dimensional space according to the calculated emotional value.

또한, 상기 재생되는 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은 상기 선택된 영역과 상기 공간상에 표시된 음악 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 한다.In addition, when the played media content includes music content, the volume of the media content including the music content is adjusted according to a distance between the selected area and the media content including the music content displayed on the space. It features.

또한, 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 밀집된 정도에 따라 상기 미디어 컨텐츠가 표시된 영역의 명암이 조절되는 것을 특징으로 한다.In addition, the space in which the media content is displayed is characterized in that the contrast of the area where the media content is displayed according to the density of the media content is adjusted.

또한, 상기 미디어 컨텐츠가 표시되는 공간은 상기 공간상에 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현되도록 하는 것을 특징으로 한다.In addition, the space in which the media content is displayed may be represented by grouping media contents adjacent to each other at intervals within a predetermined distance on the space.

또한, 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상은 상기 공간의 일부 영역에 표시되는 화면을 통해 재생되고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 한다.In addition, when the reproduced media content includes image content, an image of the media content including the image content is reproduced through a screen displayed on a partial region of the space, and the transparency of the screen on which the image is reproduced is determined. And adjust the distance between the selected area and the media content including the image content displayed on the space.

또한, 상기 미디어 컨텐츠가 표시되는 공간은 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 한다.In addition, the space in which the media content is displayed is a plane formed on the basis of a two-dimensional coordinate axis corresponding to the emotion value of the media content.

또한, 상기 미디어 컨텐츠가 표시되는 공간에는 상기 미디어 컨텐츠와 관련된 정보를 나타내는 텍스트 정보가 더 표시되는 것을 특징으로 한다.In addition, the space in which the media content is displayed may further include text information indicating information related to the media content.

또한, 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되는 것을 특징으로 한다.In addition, the text information is characterized in that the transparency is adjusted according to the distance between the selected area and the position of the media content.

또한, 상기 감정모델에 따라 감정수치가 계산된 미디어 컨텐츠의 특징값 및 감정수치는 상기 미디어 컨텐츠에 후속하여 입력되는 또 다른 신규 미디어 컨텐츠의 감정수치를 계산하기 위해 이용될 수 있다.In addition, the feature value and the emotion value of the media content whose emotion value is calculated according to the emotion model may be used to calculate the emotion value of another new media content which is subsequently input to the media content.

또한, 상기 (c)단계의 이후단계로 (d) 상기 미디어 컨텐츠들이 그룹화된 미디어 컨텐츠 그룹을 선택하기 위한 선택신호를 입력받고, 상기 선택신호에 따라 선택된 상기 미디어 컨텐츠 그룹에 포함된 미디어 컨텐츠를 재생하는 단계를 더 포함할 수 있다.Further, after the step (c), (d) receiving a selection signal for selecting a media content group in which the media contents are grouped, and playing the media content included in the media content group selected according to the selection signal. It may further comprise the step.

또한, 상기 (c)단계에 이어, (d) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠의 리스트화를 위한 리스트 생성신호를 입력받아 상기 미디어 컨텐츠의 리스트를 생성하는 단계; 및 (e) 상기 리스트에 포함된 미디어 컨텐츠의 선택을 위한 선택신호를 입력받고, 상기 입력된 선택신호에 따라 선택된 미디어 컨텐츠를 재생하는 단계를 더 포함할 수 있다.Further, following the step (c), (d) generating a list of the media content by receiving a list generation signal for listing the media content present in the selected area or within a predetermined distance from the selected area. step; And (e) receiving a selection signal for selecting media content included in the list, and playing the selected media content according to the input selection signal.

또한, 상기 (c)단계에서 상기 미디어 컨텐츠가 재생되는 것은 상기 미디어 컨텐츠의 미리 정해진 특정 부분이 재생되는 것을 특징으로 한다.In addition, in the step (c), the media content is played, characterized in that the predetermined specific portion of the media content is played.

한편, 본 발명은 인간이 느끼는 감정의 정도를 나타내는 감정수치가 이미 계산된 미디어 컨텐츠를 N차원의 공간에 표시하는 화면 표시부; 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 영역 선택부; 및 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 컨텐츠 재생부를 포함하는 것을 특징으로 한다.On the other hand, the present invention is a screen display unit for displaying in the N-dimensional space the media content has already calculated the emotion value indicating the degree of emotion that the human feeling; An area selecting unit which receives a search signal for searching for the media content displayed in the space and selects at least a portion of the space; And a content reproducing unit for reproducing in real time the media content existing in the selected area or within a predetermined distance from the selected area.

여기서, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 한다.Here, the emotion value is an expression indicating the degree of emotion that a human feels using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. It is characterized in that it is calculated according to the foolish-balance model.

또한, 상기 미디어 컨텐츠 탐색 시스템은 미디어 컨텐츠의 특징값을 추출하는 특징값 추출부; 미리 저장된 트레이닝 미디어 컨텐츠의 특징값과 상기 특징값 추출부에 의해 추출된 상기 미디어 컨텐츠의 특징값을 매칭시키는 특징값 매칭부; 및 상기 매칭된 트레이닝 미디어 컨텐츠의 미리 조사된 감정수치를 상기 미디어 컨 텐츠의 특징값과 상기 트레이닝 미디어 컨텐츠의 특징값의 차이에 따라 계산하는 수치 계산부를 포함하는 감정모듈부를 더 포함하는 것을 특징으로 한다.In addition, the media content search system includes a feature value extraction unit for extracting a feature value of the media content; A feature value matching unit for matching a feature value of a pre-stored training media content with a feature value of the media content extracted by the feature value extracting unit; And an emotion module unit including a numerical calculator configured to calculate a pre-irradiated emotion value of the matched training media content according to a difference between the feature value of the media content and the feature value of the training media content. .

또한, 상기 미디어 컨텐츠 탐색 시스템은 상기 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 컨텐츠 재생부에 의해 재생되는 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 조절되도록 하는 볼륨조절부를 더 포함할 수 있다.In addition, when the media content search system includes music content, the media content search system includes a distance between the selected area and the location of the media content, wherein the volume of the media content including the music content played by the content player is determined. It may further include a volume control to be adjusted according to.

또한, 상기 화면 표시부는 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상을 상기 공간의 일부 영역에 표시되는 화면을 통해 재생시키고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되도록 하는 것을 특징으로 한다.In addition, when the reproduced media content includes image content, the screen display unit reproduces the image of the media content including the image content through a screen displayed in a partial region of the space, and the image is reproduced The transparency of the may be adjusted according to the distance between the selected area and media content including the image content displayed on the space.

또한, 상기 화면 표시부는 상기 공간상에 표시된 미디어 컨텐츠들의 밀집된 정도에 따라 상기 미디어 컨텐츠들이 표시된 영역의 명암이 조절되도록 하는 것을 특징으로 한다.The screen display unit may adjust the contrast of an area where the media contents are displayed according to the density of the media contents displayed on the space.

또한, 상기 화면 표시부는 상기 공간상에서 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현하는 것을 특징으로 한다.The screen display unit may group and express media contents adjacent to each other at intervals within a predetermined distance in the space.

또한, 상기 화면 표시부에 의해 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 한다.The space on which the media content is displayed by the screen display unit may be a plane formed on a two-dimensional coordinate axis corresponding to the emotion value of the media content.

또한, 상기 화면 표시부는 상기 미디어 컨텐츠가 표시되는 공간에 상기 미디어 컨텐츠와 관련된 정보를 나타내는 텍스트 정보를 더 표시할 수 있다.The screen display unit may further display text information indicating information related to the media content in a space where the media content is displayed.

또한, 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되도록 할 수 있다.In addition, the text information may allow transparency to be adjusted according to a distance between the selected area and the location of the media content.

한편, 본 발명은 미디어 컨텐츠 탐색 방법을 컴퓨터상에서 수행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체를 제공한다.On the other hand, the present invention provides a computer-readable recording medium having recorded thereon a program for executing a method of searching for media content on a computer.

본 발명에 따르면 미디어 컨텐츠에 대한 정확한 지식을 알고 있지 않더라도 느껴지는 분위기에 따라서 공간상에 분포된 미디어 컨텐츠를 실시간으로 듣거나 보면서 탐색할 수 있고, 동시에 재생되는 여러 미디어 컨텐츠들을 사용자가 느끼는 감정에 따라 더욱 빠르고 직관적으로 탐색할 수 있다는 효과가 있다.According to the present invention, even if the user does not know the exact knowledge of the media content, the media content distributed in the space can be listened or viewed in real time according to the sensation of the atmosphere, and various media contents played at the same time can be further changed according to the user's feeling. The effect is that you can navigate quickly and intuitively.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세하게 설명한다. 우선 각 도면의 구성 요소들에 참조 부호를 첨가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 실시될 수 있음은 물론이다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. First, in adding reference numerals to the components of each drawing, it should be noted that the same reference numerals are used as much as possible even if displayed on different drawings. In addition, detailed description is abbreviate | omitted when it is judged that it may obscure the summary of this invention. In addition, preferred embodiments of the present invention will be described below, but the technical idea of the present invention may be implemented by those skilled in the art without being limited or limited thereto.

도 1은 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 방법의 흐름 도이고, 도 2는 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템의 블럭도이다.1 is a flow diagram of a media content search method according to a preferred embodiment of the present invention, Figure 2 is a block diagram of a media content search system according to a preferred embodiment of the present invention.

이하, 도 1과 도 2를 참조하여 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템(100)과 상기 미디어 컨텐츠 탐색 시스템(100)을 이용하여 미디어 컨텐츠를 탐색하는 방법에 관하여 설명한다.Hereinafter, a method for searching for media content using the media content search system 100 and the media content search system 100 according to an exemplary embodiment of the present invention will be described with reference to FIGS. 1 and 2.

본 발명의 바람직한 실시예에 따른 미디어 컨텐츠(media contents) 탐색 시스템(100)은 화면 표시부(110), 영역 선택부(120), 컨텐츠 재생부(130), 볼륨 조절부(140)를 포함한다. The media contents search system 100 according to an exemplary embodiment of the present invention includes a screen display unit 110, an area selection unit 120, a content playback unit 130, and a volume control unit 140.

미디어 컨텐츠는 다중매체 저작물과 광대역통신망이나 고속 데이터망을 통해 양방향으로 송수신되는 각종 정보 또는 내용물, 디지털화되어 정보기기를 통해 제작·판매·이용되는 정보 등을 말하는 것으로, 본 발명에서의 미디어 컨텐츠는 특히 문자·부호·음성·음향·이미지·영상 등을 포함한다.Media content refers to various pieces of information or contents transmitted and received in both directions through a multimedia work, a broadband communication network or a high-speed data network, and information digitally produced, sold, and used through an information device. Characters, signs, sounds, sounds, images, images, etc.

여기서, 화면 표시부(110)는 미디어 컨텐츠에 대해 인간이 느끼는 감정의 정도를 나타내는 감정수치가 이미 계산된 미디어 컨텐츠를 N차원(여기서 N은 자연수이다)의 공간에 표시한다(S100). Here, the screen display unit 110 displays the media content in which the emotion value indicating the degree of emotion that a human feels with respect to the media content has already been calculated in an N-dimensional space (where N is a natural number) (S100).

여기서, 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 포함하는 것으로 상기 어로우절 및 밸런스 수치에 따라 상기 미디어 컨텐츠가 N차원의 공간상에 표시된다. Here, the emotion value includes an arrow value indicating an intensity of emotion that a human feels for a certain media content and a balance value indicating a positive degree of emotion. Media content is displayed on an N-dimensional space.

더욱 상세하게 상기 어로우절 수치는 감정의 강도로 정의되며, 어로우절 수 치가 커질수록 신나는(exciting) 기분인 것을 의미하고, 수치가 작을수록 조용한(calm) 기분인 것을 의미한다. 또한, 밸런스 수치는 감정의 긍정 및 부정의 정도를 나타내는 것으로, 밸런스 수치가 작을수록 부정적 감정을 나타내고, 수치가 클수록 긍정적 감정을 나타내는 것이다.In more detail, the arrow number is defined as the intensity of emotion, and the larger the arrow number, the more excited the feeling, and the smaller the number, the calmer. In addition, the balance value indicates the degree of positive and negative emotions, the smaller the balance value indicates negative emotions, and the larger the value indicates positive emotions.

한편, 상기 감정수치는 전술한 어로우절 수치와 밸런스 수치를 이용하여 인간이 느끼는 감정의 정도를 수치 등으로 나타내는 어로우절-밸런스 모델(Arousal-Valence Model)에 의해 계산될 수 있다. 이러한 어로우절-밸런스 모델에 의해 어로우절 수치와 밸런스 수치의 좌표값으로 나타나는 감정수치를 상기 N차원 공간중의 특정 영역에 대응되는 특정수로 나타낼수 있다.On the other hand, the emotion value may be calculated by an Arousal-Valence Model that represents the degree of emotion that a human feels as a number using the above-described arrow number and balance value. According to the arrangement-balance model, the emotion value represented by the coordinate value of the arrangement value and the balance value may be represented by a specific number corresponding to a specific area in the N-dimensional space.

미디어 컨텐츠에는 이러한 감정수치가 계산되어 적용되는데, 미디어 컨텐츠에 적용되는 감정수치의 계산은 해당 미디어 컨텐츠에 대한 설문조사에 따른 통계자료, 문화평론가 집단의 평가 수치 등에 따라 계산되어 적용될 수도 있다. 또는 후술하는 감정모듈부(150)에 구축되는 감정모델에 따라 입력되는 미디어 컨텐츠의 감정수치가 자동으로 계산되도록 하는 것도 가능하다.The emotion value is calculated and applied to the media content, and the calculation of the emotion value applied to the media content may be calculated and applied according to statistical data according to a survey on the media content, evaluation values of a group of cultural critics, and the like. Alternatively, the emotion value of the input media content may be automatically calculated according to the emotion model built in the emotion module unit 150 to be described later.

상기 N차원의 공간은 평면인 2차원, 공간인 3차원 또는 다차원인 공간일 수 있다. 바람직하게 상기 공간은 도 3에 도시된 바와 같은 감정평면으로서 상기 어로우절 수치에 대응되는 어로우절 축과 상기 밸런스 수치에 대응되는 밸런스 축으로 이루어지는 2차원의 좌표축을 바탕으로 이루어지는 평면이다. 상기 감정평면의 각 사분면에는 어로우절 수치와 밸런스 수치에 따른 감정영역이 형성되는데 화면 표시부(110)는 어로우절-밸런스 수치를 바탕으로 하는 감정수치가 계산된 미디어 컨텐 츠를 계산된 감정수치에 따라 상기 감정평면상에 분포시킨다. 이때, 분포되는 미디어 컨텐츠는 점의 형태 즉, 도트 패턴(dot pattern)으로 표현되어 상기 감정평면상에 표시될 수 있다.The N-dimensional space may be a two-dimensional plane, a three-dimensional space or a multi-dimensional space. Preferably, the space is a plane formed on a two-dimensional coordinate axis including an emotion axis corresponding to the arrow value and a balance axis corresponding to the balance value as an emotion plane as shown in FIG. 3. In each quadrant of the emotion plane, an emotion region is formed according to an arrangement value and a balance value. The screen display unit 110 calculates the media content on which the emotion value based on the arrangement-balance value is calculated according to the calculated emotion value. It is distributed on the emotion plane. In this case, the distributed media content may be expressed in the form of a dot, that is, a dot pattern and displayed on the emotion plane.

도 4는 그레이 모델에 의해 표현되는 공간의 예시화면이고, 도 5는 섬모델에 의해 표현되는 공간의 예시화면이다.4 is an exemplary screen of a space represented by a gray model, and FIG. 5 is an exemplary screen of a space represented by an island model.

화면 표시부(110)는 상기 N차원의 공간에 표시된 미디어 컨텐츠들이 밀집된 정도에 따라 상기 미디어 컨텐츠가 표시된 영역의 명암이 조절되도록 하는 그레이 모델(gray model)이 적용될 수 있다. 그레이 모델이 적용되어 표현되는 공간은 유사한 분위기의 미디어 컨텐츠가 공간상에 분포된 정도를 사용자가 용이하게 확인하여 볼 수 있도록 한다.The screen display unit 110 may apply a gray model to adjust the contrast of an area where the media content is displayed according to the density of media contents displayed in the N-dimensional space. The space represented by applying the gray model allows a user to easily check and see the degree of distribution of media contents having a similar atmosphere in the space.

더욱 상세하게 설명하면, 상기 그레이 모델은 공간상에 도트 패턴으로 분포되는 각 미디어 컨텐츠는 일정 높이와 부피를 갖는 원뿔이라고 가정하고, 상기 미디어 컨텐츠들이 서로 인접하고 있을 경우, 원뿔이 서로 중첩되도록 하여 중첩된 부분이 더욱 밝게 또는 하얗게 표시하는 것이다. In more detail, the gray model assumes that each media content distributed in a dot pattern in a space is a cone having a certain height and volume. When the media contents are adjacent to each other, the gray models overlap the cones so that they overlap each other. To make the area brighter or whiter.

또한, 화면 표시부(110)는 섬모델(island model)을 적용하여 상기 N차원의 공간에 표시되는 미디어 컨텐츠를 화면상에 표현할 수 있다.In addition, the screen display unit 110 may apply an island model to express the media content displayed in the N-dimensional space on the screen.

섬모델은 상기 공간상에서 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 섬의 형태를 가진 미디어 컨텐츠섬으로 표현하는 것이다. 이러한 섬모델을 적용하면, 미디어 컨텐츠들이 그룹화되어 형성되는 일정 영역에 감정수치에 따라 단계별로 다른 색이 적용되도록 하여 공간상에 분포된 미디어 컨텐츠의 밀집된 정도를 효과적으로 표현할 수 있다. The island model is a media content island having an island shape by grouping media contents adjacent to each other at intervals within a predetermined distance in the space. When the island model is applied, different colors are applied to the predetermined areas formed by grouping the media contents according to emotion values, thereby effectively expressing the density of the media contents distributed in the space.

상술한 그레이모델 또는 섬모델을 적용하여 미디어 컨텐츠가 표시되는 공간을 표현하면, 유사한 느낌을 갖는 미디어 컨텐츠의 수가 많은 부분과 적은 부분을 효과적으로 표현할 수 있어 사용자가 더욱 용이하게 미디어 컨텐츠를 탐색할 수 있다는 장점이 있다.By expressing the space in which the media content is displayed by applying the gray model or the island model described above, a large number and a small part of the media content having a similar feeling can be effectively expressed, so that the user can more easily navigate the media content. There is an advantage.

또한, 화면 표시부(110)는 도 6에 도시된 바와 같이 상기 미디어 컨텐츠에 대한 텍스트 정보를 상기 공간상에 표시하도록 할 수 있다. 여기서 텍스트 정보는 미디어 컨텐츠의 곡명 및 가수명 등의 내용을 포함하는 텍스트로서 미디어 컨텐츠 탐색중에 텍스트 정보를 보고 미디어 컨텐츠를 용이하게 식별할 수 있도록 하는 것이다. 이러한 텍스트 정보는 관련되는 미디어 컨텐츠의 위치에 가까이 있도록 하는 것이 바람직하다. 또한, 상기 텍스트 정보는 상기 미디어 컨텐츠와 영역 선택부(120)에 의해 선택되는 영역 사이의 거리에 따라 투명도가 조절되도록 할 수 있다. 다시 말해, 미디어 컨텐츠와 선택영역 사이의 거리가 가까울수록 불투명하게 표시되고, 상기 거리가 멀어질수록 투명하게 표시되도록 함으로써 사용자가 텍스트 정보를 더욱 용이하게 식별하도록 하는 것이다.In addition, the screen display unit 110 may display text information on the media content on the space as shown in FIG. 6. Here, the text information is text including contents such as a song name and a singer name of the media content so that the text information can be easily identified and the media content can be easily identified during the media content search. Such textual information is preferably kept close to the location of the associated media content. In addition, the text information may allow transparency to be adjusted according to a distance between the media content and an area selected by the area selection unit 120. In other words, the closer the distance between the media content and the selection area is, the more opaque it is displayed, and the farther the distance is, the more transparent it is, so that the user can easily identify the text information.

상술한 바와 같이 화면 표시부(110)에 의해 N차원의 공간상에 미디어 컨텐츠들이 표시되고나면, 영역 선택부(120)는 탐색신호를 입력받아 상기 공간 중에서 적어도 일부 영역을 선택한다(S110). 여기서 영역 선택부(120)에 의해 선택되는 영역은 N차원 공간상의 한 지점일 수 있다.As described above, after the media content is displayed on the N-dimensional space by the screen display unit 110, the area selector 120 receives a search signal and selects at least some areas from the space (S110). The region selected by the region selector 120 may be a point on the N-dimensional space.

이어서, 컨텐츠 재생부(130)는 영역 선택부(120)에 의해 선택된 영역에 존재 하거나 상기 선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시킨다(S120).Subsequently, the content reproduction unit 130 reproduces the media content existing in the area selected by the area selection unit 120 or within a predetermined distance from the selected area in real time (S120).

이때, 선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠가 둘 이상의 복수개인 경우에는 상기 선택된 영역으로부터 소정 거리 이내에 존재하는 모든 미디어 컨텐츠를 동시에 재생시킨다. 또한, 컨텐츠 재생부(130)는 미디어 컨텐츠의 위치와 영역 선택부(120)에 의해 선택된 영역 또는 지점이 일치할 경우에는, 상기 영역 또는 지점에 위치한 미디어 컨텐츠만을 재생시킨다.At this time, when there are two or more media contents existing within a predetermined distance from the selected area, all the media contents existing within the predetermined distance from the selected area are played simultaneously. In addition, when the location of the media content and the area or point selected by the area selection unit 120 coincide with each other, the content player 130 plays only the media content located in the area or point.

이러한 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠를 미디어 컨텐츠 탐색중에 실시간으로 들으면서 원하는 미디어 컨텐츠를 탐색할 수 있기때문에 사용자는 더욱 직관적으로 원하는 미디어 컨텐츠를 찾을 수 있게 된다. Since the user can search the desired media content while listening to the media content played by the content player 130 in real time during the media content search, the user can find the desired media content more intuitively.

바람직하게는 탐색중에 재생되는 디지털 미디어 컨텐츠 파일의 재생부분은 해당 미디어 컨텐츠의 가장 특징적인 부분으로 하여 사용자가 용이하게 미디어 컨텐츠를 탐색할 수 있도록 한다. 예를들어, 미디어 컨텐츠가 음악이라면 해당 음악의 후렴부분만을 재생하도록 하고, 미디어 컨텐츠가 영상 컨텐츠를 포함하는 것이라면 영상의 하이라이트에 해당되는 부분만을 재생하도록 하는 것이다.Preferably, the playback portion of the digital media content file played during the search is the most characteristic part of the media content so that the user can easily search for the media content. For example, if the media content is music, only the chorus portion of the music is played. If the media content includes video content, only the portion corresponding to the highlight of the video is played.

볼륨 조절부(140)는 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨이 상기 영역 선택부(120)에 의해 선택된 영역과 공간 중에 표시된 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 페이드인(fade in) 또는 페이드 아웃(fade out) 되도록 한다.If the media content played by the content reproducing unit 130 includes music content, the volume adjusting unit 140 selects the volume and the volume of the media content including the music content by the area selecting unit 120. Fade in or fade out according to the distance between the media content including the music content displayed during.

선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠가 동시에 들린다 하더라도 상기와 같이 선택된 영역과 미디어 컨텐츠 사이의 거리에 따라 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠의 볼륨은 상기 거리에 따라 자연스럽게 페이드 인/아웃 되기 때문에, 사용자가 미디어 컨텐츠를 탐색하는데 있어서 서로 다른 미디어 컨텐츠의 소리 때문에 혼란을 겪지 않게 되는 것이다.Even if the media content existing within a predetermined distance from the selected area is heard at the same time, the volume of the media content played by the content player 130 naturally fades according to the distance according to the distance between the selected area and the media content as described above. Since it is in / out, the user does not have to be confused by the sounds of different media contents when searching for media contents.

이때, 볼륨 조절부(140)에 의해 조절되는 미디어 컨텐츠의 볼륨은 하기의 [수학식 1]과 같이 계산된다.At this time, the volume of the media content controlled by the volume adjusting unit 140 is calculated as shown in Equation 1 below.

Figure 112009024030833-pat00001
Figure 112009024030833-pat00001

여기서, Vi는 i번째 미디어 컨텐츠의 볼륨, Pmouse는 공간상의 선택된 영역 또는 탐색 포인터의 위치, Pi는 i번째 미디어 컨텐츠의 위치, α는 사용자 정의 파라미터이다.Where V i is the volume of the i-th media content, P mouse is the location of a selected area or search pointer in space, P i is the location of the i-th media content, and α is a user-defined parameter.

상기 [수학식 1]에 따라 미디어 컨텐츠의 볼륨은 선택된 영역과 미디어 컨텐츠 사이의 거리에 반비례하여 조절된다.According to Equation 1, the volume of media content is adjusted in inverse proportion to the distance between the selected area and the media content.

한편, 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 화면 표시부(110)는 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상을 상기 공간의 일부 영역에 표시되는 화면을 통해 재생시키고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되도록 한다.Meanwhile, when the media content played by the content playback unit 130 includes video content, the screen display unit 110 may display an image of the media content including the video content through a screen displayed in a partial region of the space. The transparency of the screen on which the image is played is adjusted according to the distance between the selected area and media content including the image content displayed on the space.

다시 말해, 화면에 재생되는 영상의 투명도는 선택된 영역과 미디어 컨텐츠 사이의 거리가 가까울수록 낮아져서 영상이 선명하게 보이도록 하고, 상기 거리가 멀수록 영상의 투명도는 높아져서 점점 보이지 않도록 하는 것이다. 이렇게 함으로써 복수개의 영상이 동시에 재생되는 경우에도 혼란없이 원하는 미디어 컨텐츠를 신속하게 선택할 수 있게 되는 것이다.In other words, the transparency of the image reproduced on the screen is lower as the distance between the selected area and the media content is closer, so that the image is clearly visible, and as the distance is longer, the transparency of the image becomes higher and less visible. In this way, even when a plurality of images are played at the same time, it is possible to quickly select desired media contents without confusion.

바람직하게는 상기 S120단계 이후의 단계로 영역 선택부(120)에 의해 선택된 영역에 존재하거나, 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠의 리스트화를 위한 리스트 생성신호를 입력받아 미디어 컨텐츠의 리스트를 생성하고(S130:미도시), 상기 생성된 리스트에 포함된 미디어 컨텐츠의 선택을 위한 선택신호를 입력받고, 입력된 선택신호에 따라 선택된 미디어 컨텐츠를 재생하는 단계(S140:미도시)를 더 포함할 수 있다.Preferably, in step S120, the list of media contents may be received by receiving a list generation signal for listing the media contents existing in the region selected by the region selecting unit 120 or within a predetermined distance from the selected region. (S130: not shown), receiving a selection signal for selecting media content included in the generated list, and playing back the selected media content according to the input selection signal (S140: not shown). It may include.

또는, S120단계 이후의 단계로 섬모델에 따라 섬의 형태로 표현된 미디어 컨텐츠의 그룹을 영역 선택부(120)를 통해 선택하고, 선택된 미디어 컨텐츠 그룹을 재생시키도록 할 수 있다(S130':미도시). Alternatively, after the step S120, the group of media contents expressed in the form of an island according to the island model may be selected through the area selection unit 120, and the selected media content group may be played (S130 ′: not shown). city).

여기서 S120단계 이후에 수행되는 미디어 컨텐츠의 재생은 탐색을 통해 찾은 하나 또는 둘 이상의 특정된 미디어 컨텐츠의 전구간을 듣기 위해 재생하는 것으로, 탐색을 위해 실시간으로 미디어 컨텐츠가 재생되는 것과는 구별된다.In this case, the reproduction of the media content performed after step S120 is performed to listen to the whole range of one or more specified media contents found through the search, and is distinguished from the playback of the media content in real time for the search.

도 7은 감정모델에 따라 미디어 컨텐츠의 감정수치를 계산하는 것을 나타낸 순서도이다.7 is a flowchart illustrating calculating emotion values of media content according to an emotion model.

도 7을 참조하여 S100단계를 수행하기 이전에 미리 결정된 감정모델이 구축 되어 있으며, 특징값 추출부(152), 특징값 매칭부(154) 및 수치 계산부(156)를 포함하는 감정모듈부(150)에 의해 미디어 컨텐츠의 감정수치가 계산되는 것을 설명한다.Before the step S100 is performed with reference to FIG. 7, a predetermined emotion model is constructed and includes an emotion module unit including a feature value extractor 152, a feature value matcher 154, and a numerical calculator 156. It will be described that the emotion value of the media content is calculated by 150.

먼저, 상기 감정모듈부(150)를 이용하여 미디어 컨텐츠의 감정수치를 계산하기 위해서는 미디어 컨텐츠를 감정에 따라 분류되도록 하는 감정모델이 먼저 수립된다.First, in order to calculate the emotion value of media content using the emotion module unit 150, an emotion model for classifying media content according to emotion is first established.

감정모델을 수립하기 위해서는 먼저 트레이닝 미디어 컨텐츠에 대한 푸리에 스펙트럼(FFT Spectrum), 켑스트럼(Cepstrum), 자기상관함수(Auto-Correlation), 소리 세기(Loudness) 등과 같은 미디어 컨텐츠의 속성을 나타내기 위한 특징값들을 추출하고, 추출된 미디어 컨텐츠의 특징값과 상기 트레이닝 미디어 컨텐츠들에 대해 미리 조사된 감정수치 사이의 선형 또는 비선형 모델을 정의한다. 이때, 트레이닝 미디어 컨텐츠의 특징값과 어로우절-밸런스 수치로 나타나는 감정수치 간의 상관관계를 정의하는데에는 슈도-인버스(Pseudo-Inverse)가 이용될 수 있다. In order to establish an emotion model, first of all, to express the attributes of media content such as Fourier Spectrum, Cepstrum, Auto-Correlation, Loudness, etc. Feature values are extracted and a linear or non-linear model is defined between the feature values of the extracted media content and the emotion values previously examined for the training media content. In this case, Pseudo-Inverse may be used to define a correlation between the feature value of the training media content and the emotion value represented by the arrangement-balance value.

이렇게 수립된 감정 모델을 이용하여 감정수치를 계산하기 위한 대상이며, 상기 N차원의 공간상에 추가로 표시하고자 하는 신규 미디어 컨텐츠를 입력하면(S10), 특징값 추출부(152)는 신규 미디어 컨텐츠의 특징값을 추출하고(S20), 특징값 매칭부(154)는 상기 신규 미디어 컨텐츠의 특징값과 근사한 특징값을 갖는 트레이닝 미디어 컨텐츠를 검색하여 매칭시킨다. 그리고나서, 수치 계산부(156)는 매칭된 트레이닝 미디어 컨텐츠의 감정수치에 신규 미디어 컨텐츠의 특징값과 트레이닝 미디어 컨텐츠의 특징값의 차이에 따라 보정된 보정값을 포함시켜 신규 미디어 컨텐츠의 감정수치를 산출한다(S30). 이렇게 산출된 감정수치는 신규 미디어 컨텐츠에 적용되어 화면 표시부(110)에 의해 N차원의 공간에 표시되는 것이다(S40). The emotion value is calculated using the established emotion model, and when new media content to be additionally displayed on the N-dimensional space is input (S10), the feature value extractor 152 selects the new media content. The feature value is extracted (S20), and the feature value matching unit 154 searches for and matches training media content having a feature value close to that of the new media content. Then, the numerical calculator 156 includes the correction value corrected according to the difference between the feature value of the new media content and the feature value of the training media content in the emotion value of the matched training media content. Calculate (S30). The calculated emotion value is applied to the new media content and displayed on the N-dimensional space by the screen display unit 110 (S40).

한편, 감정수치가 계산된 신규 미디어 컨텐츠는 상기 신규 미디어 컨텐츠에 후속하여 입력되고, 감정 모듈부(150)에 의해 감정수치가 계산되어야 하는 또 다른 미디어 컨텐츠에 대해서 감정수치의 계산 기준이 되는 트레이닝 미디어 컨텐츠의 역할을 하게 된다. 따라서, 감정 모듈부(150)에 의해 감정수치가 계산되는 미디어 컨텐츠가 누적될수록 감정수치가 계산되어야 하는 신규 미디어 컨텐츠의 감정수치 계산은 더욱 세밀하게 수행될 수 있게 된다.On the other hand, the new media content whose emotion value is calculated is input after the new media content, and the training media which is the basis for calculating the emotion value for another media content whose emotion value is to be calculated by the emotion module unit 150. It will act as content. Accordingly, as the media content for which the emotion value is calculated by the emotion module 150 is accumulated, the emotion value calculation of the new media content for which the emotion value is to be calculated may be performed in more detail.

한편, 본 발명의 미디어 컨텐츠 탐색 방법은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.On the other hand, the media content searching method of the present invention can be implemented in a computer-readable code on a computer-readable recording medium. The computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored.

컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트 들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disks, optical data storage devices, and the like, which may also be implemented in the form of carrier waves (for example, transmission over the Internet). Include. The computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers in the art to which the present invention belongs.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으 로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 아래의 청구 범위에 의해서 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and various modifications, changes and substitutions may be made by those skilled in the art without departing from the essential characteristics of the present invention. It will be possible. Accordingly, the embodiments disclosed in the present invention and the accompanying drawings are not intended to limit the technical spirit of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by the embodiments and the accompanying drawings. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents thereof should be construed as being included in the scope of the present invention.

도 1은 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 방법의 흐름도이다.1 is a flowchart of a method for searching media content according to a preferred embodiment of the present invention.

도 2는 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템의 블럭도이다.2 is a block diagram of a media content search system according to a preferred embodiment of the present invention.

도 3은 미디어 컨텐츠가 표시되는 공간의 일 실시예를 설명하기 위한 개념도이다.3 is a conceptual diagram illustrating an embodiment of a space where media content is displayed.

도 4는 그레이 모델에 의해 표현되는 공간의 일 실시예를 나타낸 도면이다.4 is a diagram illustrating an embodiment of a space represented by a gray model.

도 5는 섬모델에 의해 표현되는 공간의 일 실시예를 나타낸 도면이다.5 is a diagram illustrating an embodiment of a space represented by an island model.

도 6은 텍스트 정보가 표시되는 공간의 일 실시예를 나타낸 도면이다.6 is a diagram illustrating an embodiment of a space where text information is displayed.

도 7은 감정모델에 따라 미디어 컨텐츠의 감정수치를 계산하는 것을 나타낸 순서도이다.7 is a flowchart illustrating calculating emotion values of media content according to an emotion model.

<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>

100 : 미디어 컨텐츠 탐색 시스템100: media content navigation system

110 : 화면 표시부 120 : 영역 선택부110: screen display unit 120: region selection unit

130 : 컨텐츠 재생부 140 : 볼륨 조절부130: content playback unit 140: volume control unit

150 : 감정 모듈부150: emotion module

Claims (25)

(a) 인간이 느끼는 감정의 정도를 나타내는 감정 수치가 이미 계산된 미디어 컨텐츠들을 N(여기에서 N은 자연수이다)차원의 공간에 표시하는 단계;(a) displaying media contents, in which N is a natural number, in which media contents for which an emotional value indicating a degree of emotion felt by a human is already calculated have been calculated; (b) 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색 신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 단계; 및(b) receiving a search signal for searching for the media content displayed in the space and selecting at least a portion of the space; And (c) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 단계를 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.(c) playing the media content in the selected area or within a predetermined distance from the selected area in real time. 제 1 항에 있어서,The method of claim 1, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.The emotion value indicates the degree of emotion that a human feels by using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. Media content search method, characterized in that calculated according to the balance model. 제 1 항에 있어서, The method of claim 1, 상기 (a) 단계는Step (a) is (a1) 상기 N차원 공간상에 표시되어야 하는 미디어 컨텐츠를 입력 받는 단계;(a1) receiving media content to be displayed on the N-dimensional space; (a2) 상기 입력된 미디어 컨텐츠로부터 상기 입력된 미디어 컨텐츠의 속성을 나타내는 특징값을 추출하는 단계;(a2) extracting feature values representing attributes of the input media content from the input media content; (a3) 미디어 컨텐츠의 특징값과 감정수치 사이의 연관 관계를 나타내는 선형 또는 비선형의 감정모델에 상기 입력된 미디어 컨텐츠로부터 추출된 특징값을 입력하여 상기 입력된 미디어 컨텐츠의 감정 수치를 계산하는 단계; 및(a3) calculating an emotion value of the input media content by inputting a feature value extracted from the input media content into a linear or non-linear emotion model indicating an association between a feature value and an emotion value of media content; And (a4) 상기 계산된 감정 수치에 따라 상기 입력된 미디어 컨텐츠를 상기 N차원의 공간에 표시하는 단계를 더 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.and (a4) displaying the input media content in the N-dimensional space according to the calculated emotion value. 제 1 항에 있어서,The method of claim 1, 상기 재생되는 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은If the played media content includes music content, the volume of media content including the music content is 상기 선택된 영역과 상기 공간상에 표시된 음악 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And adjusting the distance according to a distance between the selected area and media content including music content displayed on the space. 제 1 항에 있어서,The method of claim 1, 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 밀집된 정도에 따라 상기 미디어 컨텐츠가 표시된 영역의 명암이 조절되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.The brightness of the area in which the media content is displayed is adjusted according to the density of the media content in the space where the media content is displayed. 제 1 항에 있어서,The method of claim 1, 상기 미디어 컨텐츠가 표시되는 공간은 상기 공간상에 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현되도록 하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And displaying the media content by grouping the media contents adjacent to each other at intervals within a predetermined distance on the space. 제 1 항에 있어서,The method of claim 1, 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상은 상기 공간의 일부 영역에 표시되는 화면을 통해 재생되고, When the media content to be played includes the image content, the image of the media content including the image content is played through a screen displayed on a portion of the space, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.The transparency of the screen on which the image is played is adjusted according to a distance between the selected area and media content including image content displayed on the space. 제 1 항에 있어서,The method of claim 1, 상기 미디어 컨텐츠가 표시되는 공간은 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And a space in which the media content is displayed is a plane formed on a two-dimensional coordinate axis corresponding to the emotion value of the media content. 제 1 항에 있어서,The method of claim 1, 상기 미디어 컨텐츠가 표시되는 공간에는 상기 미디어 컨텐츠와 관련된 정보 를 나타내는 텍스트 정보가 더 표시되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And text information representing information related to the media content is further displayed in a space where the media content is displayed. 제 9 항에 있어서,The method of claim 9, 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And the transparency of the text information is adjusted according to a distance between the selected area and the position of the media content. 제 3 항에 있어서,The method of claim 3, wherein 상기 감정모델에 따라 감정수치가 계산된 미디어 컨텐츠의 특징값 및 감정수치는 상기 미디어 컨텐츠에 후속하여 입력되는 또 다른 신규 미디어 컨텐츠의 감정수치를 계산하기 위해 이용되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And a feature value and an emotion value of the media content whose emotion value is calculated according to the emotion model are used to calculate an emotion value of another new media content which is subsequently input to the media content. 제 6 항에 있어서,The method of claim 6, 상기 (c)단계의 이후단계로After step (c) (d) 상기 미디어 컨텐츠들이 그룹화된 미디어 컨텐츠 그룹을 선택하기 위한 선택신호를 입력받고, 상기 선택신호에 따라 선택된 상기 미디어 컨텐츠 그룹에 포함된 미디어 컨텐츠를 재생하는 단계를 더 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.(d) receiving a selection signal for selecting a media content group in which the media contents are grouped, and playing the media content included in the media content group selected according to the selection signal; How to navigate content. 제 1 항에 있어서, 상기 (c)단계에 이어,The method of claim 1, wherein following step (c), (d) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠의 리스트화를 위한 리스트 생성신호를 입력받아 상기 미디어 컨텐츠의 리스트를 생성하는 단계; 및(d) generating a list of the media content by receiving a list generation signal for listing the media content present in the selected area or within a predetermined distance from the selected area; And (e) 상기 리스트에 포함된 미디어 컨텐츠의 선택을 위한 선택신호를 입력받고, 상기 입력된 선택신호에 따라 선택된 미디어 컨텐츠를 재생하는 단계를 더 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.(e) receiving a selection signal for selecting the media content included in the list, and reproducing the selected media content according to the input selection signal. 제 1 항에 있어서,The method of claim 1, 상기 (c)단계에서 상기 미디어 컨텐츠가 재생되는 것은In the step (c), the media content is played back. 상기 미디어 컨텐츠의 미리 정해진 특정 부분이 재생되는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법.And a predetermined specific portion of the media content is played. 인간이 느끼는 감정의 정도를 나타내는 감정수치가 이미 계산된 미디어 컨텐츠를 N차원의 공간에 표시하는 화면 표시부;A screen display unit displaying media content, in which an emotion value indicating a degree of emotion felt by a human, is already calculated, in an N-dimensional space; 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 영역 선택부; 및An area selecting unit which receives a search signal for searching for the media content displayed in the space and selects at least a portion of the space; And 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 컨텐츠 재생부를 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And a content reproducing unit for reproducing in real time the media content existing in the selected area or within a predetermined distance from the selected area. 제 15 항에 있어서,The method of claim 15, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.The emotion value indicates the degree of emotion that a human feels by using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. Media content navigation system, characterized in that calculated according to the balance model. 제 15 항에 있어서,The method of claim 15, 상기 미디어 컨텐츠 탐색 시스템은The media content search system 미디어 컨텐츠의 특징값을 추출하는 특징값 추출부;A feature value extractor for extracting feature values of the media content; 미리 저장된 트레이닝 미디어 컨텐츠의 특징값과 상기 특징값 추출부에 의해 추출된 상기 미디어 컨텐츠의 특징값을 매칭시키는 특징값 매칭부; 및A feature value matching unit for matching a feature value of a pre-stored training media content with a feature value of the media content extracted by the feature value extracting unit; And 상기 매칭된 트레이닝 미디어 컨텐츠의 미리 조사된 감정수치를 상기 미디어 컨텐츠의 특징값과 상기 트레이닝 미디어 컨텐츠의 특징값의 차이에 따라 계산하는 수치 계산부를 포함하는 감정모듈부를 더 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.The media content further comprises an emotion module unit including a numerical calculation unit for calculating a previously estimated emotion value of the matched training media content according to the difference between the feature value of the media content and the feature value of the training media content. Navigation system. 제 15 항에 있어서,The method of claim 15, 상기 미디어 컨텐츠 탐색 시스템은The media content search system 상기 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 컨텐츠 재생부에 의해 재생되는 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 조절되도록 하는 볼륨조절부를 더 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.When the media content includes music content, the volume control unit adjusts the volume of the media content including the music content played by the content player according to the distance between the selected area and the position of the media content. Media content search system, characterized in that it further comprises. 제 15 항에 있어서,The method of claim 15, 상기 화면 표시부는 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상을 상기 공간의 일부 영역에 표시되는 화면을 통해 재생시키고, If the reproduced media content includes image content, the screen display unit reproduces an image of the media content including the image content through a screen displayed in a partial region of the space, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되도록 하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And a transparency of the screen on which the image is played is adjusted according to a distance between the selected area and media content including image content displayed on the space. 제 15 항에 있어서,The method of claim 15, 상기 화면 표시부는 상기 공간상에 표시된 미디어 컨텐츠들의 밀집된 정도에 따라 상기 미디어 컨텐츠들이 표시된 영역의 명암이 조절되도록 하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And the screen display unit adjusts the contrast of an area where the media contents are displayed according to the density of the media contents displayed on the space. 제 15 항에 있어서,The method of claim 15, 상기 화면 표시부는 상기 공간상에서 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And the screen display unit groups and expresses media content adjacent to each other at intervals within a predetermined distance in the space. 제 15 항에 있어서,The method of claim 15, 상기 화면 표시부에 의해 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And the space in which the media content is displayed by the screen display unit is a plane formed on a two-dimensional coordinate axis corresponding to the emotion value of the media content. 제 15 항에 있어서,The method of claim 15, 상기 화면 표시부는 상기 미디어 컨텐츠가 표시되는 공간에 상기 미디어 컨텐츠와 관련된 정보를 나타내는 텍스트 정보를 더 표시하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And the screen display unit further displays text information indicating information related to the media content in a space where the media content is displayed. 제 23 항에 있어서,The method of claim 23, wherein 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되도록 하는 것을 특징으로 하는 미디어 컨텐츠 탐색 시스템.And the text information adjusts transparency according to a distance between the selected area and the position of the media content. 제 1 항 내지 제 14 항 중 어느 한 항의 미디어 컨텐츠 탐색 방법을 컴퓨터상에서 수행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체.A non-transitory computer-readable recording medium having recorded thereon a computer program for executing the method of claim 1, wherein the method for searching for media content according to claim 1.
KR1020090034572A 2009-04-21 2009-04-21 Media contents Exploring system and method using Emotional Model KR101034373B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090034572A KR101034373B1 (en) 2009-04-21 2009-04-21 Media contents Exploring system and method using Emotional Model

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090034572A KR101034373B1 (en) 2009-04-21 2009-04-21 Media contents Exploring system and method using Emotional Model

Publications (2)

Publication Number Publication Date
KR20100115921A KR20100115921A (en) 2010-10-29
KR101034373B1 true KR101034373B1 (en) 2011-05-16

Family

ID=43134632

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090034572A KR101034373B1 (en) 2009-04-21 2009-04-21 Media contents Exploring system and method using Emotional Model

Country Status (1)

Country Link
KR (1) KR101034373B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102579452B1 (en) * 2018-09-05 2023-09-15 삼성전자주식회사 Image display device and operating method for the same

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060091063A (en) * 2005-02-11 2006-08-18 한국정보통신대학교 산학협력단 Music contents classification method, and system and method for providing music contents using the classification method
KR100643308B1 (en) 2005-07-11 2006-11-10 삼성전자주식회사 Apparatus and method for providing function to search for music file

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060091063A (en) * 2005-02-11 2006-08-18 한국정보통신대학교 산학협력단 Music contents classification method, and system and method for providing music contents using the classification method
KR100643308B1 (en) 2005-07-11 2006-11-10 삼성전자주식회사 Apparatus and method for providing function to search for music file

Also Published As

Publication number Publication date
KR20100115921A (en) 2010-10-29

Similar Documents

Publication Publication Date Title
US8583615B2 (en) System and method for generating a playlist from a mood gradient
Knees et al. An innovative three-dimensional user interface for exploring music collections enriched
KR101527370B1 (en) Method and appratus for searching recommended music using emotional information of music
US11043216B2 (en) Voice feedback for user interface of media playback device
US9213705B1 (en) Presenting content related to primary audio content
US20090063971A1 (en) Media discovery interface
CN103177738B (en) Playlist is configured and preview
JP4356027B2 (en) Information processing apparatus and method, and program
CN107464555A (en) Background sound is added to the voice data comprising voice
CN101520808A (en) Method for visualizing audio data
KR20100072070A (en) Generating metadata for association with a collection of content items
JP2021099536A (en) Information processing method, information processing device, and program
KR101942459B1 (en) Method and system for generating playlist using sound source content and meta information
Knees et al. Exploring music collections in virtual landscapes
US20200228596A1 (en) Streaming music categorization using rhythm, texture and pitch
US8315968B2 (en) Music information processing apparatus, music delivering system, and music information processing method that can satisfy a request from a user
US20220246135A1 (en) Information processing system, information processing method, and recording medium
JP2021101252A (en) Information processing method, information processing apparatus, and program
US20220147558A1 (en) Methods and systems for automatically matching audio content with visual input
KR101034373B1 (en) Media contents Exploring system and method using Emotional Model
KR20120021174A (en) Apparatus and method for music search using emotion model
KR20070048484A (en) Apparatus and method for classification of signal features of music files, and apparatus and method for automatic-making playing list using the same
US20160277864A1 (en) Waveform Display Control of Visual Characteristics
CN110347864A (en) A kind of intelligence adjusts the method and system of audio frequency parameter
Goto et al. PodCastle and Songle: Crowdsourcing-Based Web Services for Retrieval and Browsing of Speech and Music Content.

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140401

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160519

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee