KR20100115921A - Media contents exploring system and method using emotional model - Google Patents
Media contents exploring system and method using emotional model Download PDFInfo
- Publication number
- KR20100115921A KR20100115921A KR1020090034572A KR20090034572A KR20100115921A KR 20100115921 A KR20100115921 A KR 20100115921A KR 1020090034572 A KR1020090034572 A KR 1020090034572A KR 20090034572 A KR20090034572 A KR 20090034572A KR 20100115921 A KR20100115921 A KR 20100115921A
- Authority
- KR
- South Korea
- Prior art keywords
- media content
- emotion
- space
- content
- displayed
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/44—Browsing; Visualisation therefor
- G06F16/444—Spatial browsing, e.g. 2D maps, 3D or virtual spaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Library & Information Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
본 발명은 감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법에 관한 것이다. 더욱 상세하게는 감정모델을 이용하여 미디어 컨텐츠를 정렬하고, 정렬된 미디어 컨텐츠를 탐색하는 시스템과 방법에 관한 것으로서, 다양한 장르의 미디어 컨텐츠에 대하여 각 곡에 대한 감정의 강도를 나타내는 어로우절(Arousal) 값과 감정의 긍정도를 나타내는 밸런스(Valence) 값을 추출하는 감정모델을 수립한 후, 어로우절 축과 밸런스 축으로 표현되는 2차원 좌표상에서 원하는 미디어 컨텐츠를 탐색할 수 있는 시스템 및 방법에 관한 것이다.The present invention relates to a media content search system and method using an emotion model. More specifically, the present invention relates to a system and method for arranging media content using an emotion model and searching for the sorted media content. The present invention describes an intensity of emotion for each song in various genres of media content. The present invention relates to a system and method for searching for desired media content on two-dimensional coordinates represented by an alignment axis and a balance axis after establishing an emotion model that extracts a balance value representing a positive value and an emotion. .
최근 MP3 플레이어, PDA, 휴대전화, 컴퓨터, 디지털 오디오 장비 등의 미디어 컨텐츠 재생기기의 폭넓은 보급 및 디지털 컨텐츠 파일의 대중화로 인하여, 개인적으로 보유하고 있는 컨텐츠 파일의 수는 점차 증가하고 있는 추세에 있다. 개인이 보유하고 있는 수많은 컨텐츠 파일을 관리하기 위해 기존에는 사전식 정렬방법을 주로 사용하여 왔다. 그런데, 컨텐츠 파일의 이름을 이용하여 정렬하는 기존의 사전식 정렬방법은 미디어 컨텐츠에 대한 정보를 정확하게 알지 못하는 사용자 가 분위기와 기분에 따라 미디어 컨텐츠를 재생하여 듣거나 보기 원하는 컨텐츠를 찾고자 할 때 미디어 컨텐츠 검색에 오랜 시간을 소비하게 만든다는 단점이 있었다.Recently, due to the wide spread of media content player such as MP3 player, PDA, mobile phone, computer, digital audio equipment and popularization of digital content files, the number of personally owned content files is gradually increasing. . In order to manage a large number of content files owned by individuals, the lexical sorting method has been mainly used. By the way, the conventional dictionary sorting method of sorting by using the name of the content file, when the user who does not know the information on the media content accurately, tries to find the content that they want to hear or watch by playing the media content according to the mood and mood. The drawback was that it would take a long time to search.
이러한 문제점을 해결하기 위해 최근에는 컨텐츠 파일의 메타 데이터 또는 MFCC(Mel Frequency Cepstrum Coefficient) 등의 데이터들을 이용하여 컨텐츠 파일을 정렬하거나, 자기조직화맵(SOM : Self Organizing Map)을 이용한 차원축소 기법을 이용하여 유사한 느낌의 컨텐츠 파일을 분류한 후 이를 바탕으로 원하는 컨텐츠를 검색할 수 있도록 하기 위한 연구들이 진행되고 있다.In order to solve this problem, recently, content files are sorted using metadata such as metadata of a content file or Mel Frequency Cepstrum Coefficient (MFCC), or a dimension reduction technique using a self organizing map (SOM) is used. As a result, studies have been conducted to classify content files with similar feelings and to search for desired contents based on the same.
그러나, 이러한 연구들에 의한 방법들은 장르별, 작곡가별 및 가수별 등으로 분류 및 정렬된 컨텐츠 파일을 다시 리스트에서 검색한 후 선택하여 들어야 한다는 점에서 한계를 가지게 된다.However, the methods of these studies have limitations in that the content files classified and sorted by genre, composer, singer, etc. must be searched again in the list and selected.
따라서, 여전히 미디어 컨텐츠를 듣거나 보고자하는 사용자가 느끼는 감정에 따라 미디어 컨텐츠를 더욱 쉽고 빠르게 탐색할 수 있도록 하는 방안이 요청되고 있는 실정이다.Therefore, there is still a demand for a method for enabling easier and faster navigation of media content according to the feelings of a user who wants to listen to or view media content.
본 발명은 상기한 문제점을 해결하기 위해 인간의 감정에 바탕을 둔 감정모델에 따라 점의 형태로 표현된 미디어 컨텐츠를 N차원의 공간상에 배치하고, 포인터를 이용하여 배치된 점을 탐색하는 동안 포인터에 의해 선택된 공간상의 영역으로부터 일정 범위 내에 존재하는 미디어 컨텐츠들을 실시간으로 듣거나 볼 수 있도록 하여 사용자가 원하는 컨텐츠를 더욱 직관적고 신속하게 선택할 수 있도록 하며, 사용자가 지정한 범위 안에 있는 컨텐츠 파일들의 리스트를 생성하고, 리스트에 수록된 컨텐츠를 재생시키는 감정 모델을 이용한 미디어 컨텐츠 탐색 시스템 및 방법을 제공하는 것을 그 목적으로 한다.In order to solve the above problems, the media content expressed in the form of points according to the emotion model based on human emotion is arranged in the N-dimensional space, and while searching for the arranged points using a pointer. It allows you to listen to or view media contents existing within a certain range from the space area selected by the pointer in real time so that users can select the desired contents more intuitively and quickly. It is an object of the present invention to provide a media content search system and method using an emotion model that generates and reproduces the contents contained in a list.
상기한 목적을 달성하기 위해 본 발명은 (a) 인간이 느끼는 감정의 정도를 나타내는 감정 수치가 이미 계산된 미디어 컨텐츠들을 N(여기에서 N은 자연수이다)차원의 공간에 표시하는 단계; (b) 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색 신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 단계; 및 (c) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 단계를 포함하는 것을 특징으로 하는 미디어 컨텐츠 탐색 방법을 제공한다.In order to achieve the above object, the present invention comprises the steps of: (a) displaying in the space of the N (where N is a natural number) media content for which the emotional value indicating the degree of emotion that a human feels is calculated; (b) receiving a search signal for searching for the media content displayed in the space and selecting at least a portion of the space; And (c) playing the media content present in the selected area or within a predetermined distance from the selected area in real time.
여기서, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸 런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 한다.In this case, the emotion value indicates the degree of emotion that a human feels by using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. It is characterized by being calculated according to the arrangement-balance model.
또한, 상기 (a)단계는 (a1) 상기 N차원 공간상에 표시되어야 하는 미디어 컨텐츠를 입력 받는 단계; (a2) 상기 입력된 미디어 컨텐츠로부터 상기 입력된 미디어 컨텐츠의 속성을 나타내는 특징값을 추출하는 단계; (a3) 미디어 컨텐츠의 특징값과 감정수치 사이의 연관 관계를 나타내는 선형 또는 비선형의 감정모델에 상기 입력된 미디어 컨텐츠로부터 추출된 특징값을 입력하여 상기 입력된 미디어 컨텐츠의 감정 수치를 계산하는 단계; 및 (a4) 상기 계산된 감정 수치에 따라 상기 입력된 미디어 컨텐츠를 상기 N차원의 공간에 표시하는 단계를 더 포함하는 것을 특징으로 한다.In addition, step (a) may include (a1) receiving media content to be displayed on the N-dimensional space; (a2) extracting feature values representing attributes of the input media content from the input media content; (a3) calculating an emotion value of the input media content by inputting a feature value extracted from the input media content into a linear or non-linear emotion model indicating an association between a feature value and an emotion value of media content; And (a4) displaying the input media content in the N-dimensional space according to the calculated emotional value.
또한, 상기 재생되는 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은 상기 선택된 영역과 상기 공간상에 표시된 음악 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 한다.In addition, when the played media content includes music content, the volume of the media content including the music content is adjusted according to a distance between the selected area and the media content including the music content displayed on the space. It features.
또한, 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 밀집된 정도에 따라 상기 미디어 컨텐츠가 표시된 영역의 명암이 조절되는 것을 특징으로 한다.In addition, the space in which the media content is displayed is characterized in that the contrast of the area where the media content is displayed according to the density of the media content is adjusted.
또한, 상기 미디어 컨텐츠가 표시되는 공간은 상기 공간상에 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현되도록 하는 것을 특징으로 한다.In addition, the space in which the media content is displayed may be represented by grouping media contents adjacent to each other at intervals within a predetermined distance on the space.
또한, 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상은 상기 공간의 일부 영역에 표시되는 화면을 통해 재생되고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되는 것을 특징으로 한다.In addition, when the reproduced media content includes image content, an image of the media content including the image content is reproduced through a screen displayed on a partial region of the space, and the transparency of the screen on which the image is reproduced is determined. And adjust the distance between the selected area and the media content including the image content displayed on the space.
또한, 상기 미디어 컨텐츠가 표시되는 공간은 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 한다.In addition, the space in which the media content is displayed is a plane formed on the basis of a two-dimensional coordinate axis corresponding to the emotion value of the media content.
또한, 상기 미디어 컨텐츠가 표시되는 공간에는 상기 미디어 컨텐츠와 관련된 정보를 나타내는 텍스트 정보가 더 표시되는 것을 특징으로 한다.In addition, the space in which the media content is displayed may further include text information indicating information related to the media content.
또한, 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되는 것을 특징으로 한다.In addition, the text information is characterized in that the transparency is adjusted according to the distance between the selected area and the position of the media content.
또한, 상기 감정모델에 따라 감정수치가 계산된 미디어 컨텐츠의 특징값 및 감정수치는 상기 미디어 컨텐츠에 후속하여 입력되는 또 다른 신규 미디어 컨텐츠의 감정수치를 계산하기 위해 이용될 수 있다.In addition, the feature value and the emotion value of the media content whose emotion value is calculated according to the emotion model may be used to calculate the emotion value of another new media content which is subsequently input to the media content.
또한, 상기 (c)단계의 이후단계로 (d) 상기 미디어 컨텐츠들이 그룹화된 미디어 컨텐츠 그룹을 선택하기 위한 선택신호를 입력받고, 상기 선택신호에 따라 선택된 상기 미디어 컨텐츠 그룹에 포함된 미디어 컨텐츠를 재생하는 단계를 더 포함할 수 있다.Further, after the step (c), (d) receiving a selection signal for selecting a media content group in which the media contents are grouped, and playing the media content included in the media content group selected according to the selection signal. It may further comprise the step.
또한, 상기 (c)단계에 이어, (d) 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠의 리스트화를 위한 리스트 생성신호를 입력받아 상기 미디어 컨텐츠의 리스트를 생성하는 단계; 및 (e) 상기 리스트에 포함된 미디어 컨텐츠의 선택을 위한 선택신호를 입력받고, 상기 입력된 선택신호에 따라 선택된 미디어 컨텐츠를 재생하는 단계를 더 포함할 수 있다.Further, following the step (c), (d) generating a list of the media content by receiving a list generation signal for listing the media content present in the selected area or within a predetermined distance from the selected area. step; And (e) receiving a selection signal for selecting media content included in the list, and playing the selected media content according to the input selection signal.
또한, 상기 (c)단계에서 상기 미디어 컨텐츠가 재생되는 것은 상기 미디어 컨텐츠의 미리 정해진 특정 부분이 재생되는 것을 특징으로 한다.In addition, in the step (c), the media content is played, characterized in that the predetermined specific portion of the media content is played.
한편, 본 발명은 인간이 느끼는 감정의 정도를 나타내는 감정수치가 이미 계산된 미디어 컨텐츠를 N차원의 공간에 표시하는 화면 표시부; 상기 공간에 표시된 상기 미디어 컨텐츠의 탐색을 위한 탐색신호를 입력받아 상기 공간 중 적어도 일부 영역을 선택하는 영역 선택부; 및 상기 선택된 영역에 존재하거나 상기 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시키는 컨텐츠 재생부를 포함하는 것을 특징으로 한다.On the other hand, the present invention is a screen display unit for displaying in the N-dimensional space the media content has already calculated the emotion value indicating the degree of emotion that the human feeling; An area selecting unit which receives a search signal for searching for the media content displayed in the space and selects at least a portion of the space; And a content reproducing unit for reproducing in real time the media content existing in the selected area or within a predetermined distance from the selected area.
여기서, 상기 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 이용하여 인간이 느끼는 감정의 정도를 나타내는 어로우절-밸런스 모델에 따라 계산되는 것을 특징으로 한다.Here, the emotion value is an expression indicating the degree of emotion that a human feels using an arousal value indicating a strength of the human emotion and a balance value indicating a positive degree of the emotion for a certain media content. It is characterized in that it is calculated according to the foolish-balance model.
또한, 상기 미디어 컨텐츠 탐색 시스템은 미디어 컨텐츠의 특징값을 추출하는 특징값 추출부; 미리 저장된 트레이닝 미디어 컨텐츠의 특징값과 상기 특징값 추출부에 의해 추출된 상기 미디어 컨텐츠의 특징값을 매칭시키는 특징값 매칭부; 및 상기 매칭된 트레이닝 미디어 컨텐츠의 미리 조사된 감정수치를 상기 미디어 컨 텐츠의 특징값과 상기 트레이닝 미디어 컨텐츠의 특징값의 차이에 따라 계산하는 수치 계산부를 포함하는 감정모듈부를 더 포함하는 것을 특징으로 한다.In addition, the media content search system includes a feature value extraction unit for extracting a feature value of the media content; A feature value matching unit for matching a feature value of a pre-stored training media content with a feature value of the media content extracted by the feature value extracting unit; And an emotion module unit including a numerical calculator configured to calculate a pre-irradiated emotion value of the matched training media content according to a difference between the feature value of the media content and the feature value of the training media content. .
또한, 상기 미디어 컨텐츠 탐색 시스템은 상기 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우, 상기 컨텐츠 재생부에 의해 재생되는 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨은 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 조절되도록 하는 볼륨조절부를 더 포함할 수 있다.In addition, when the media content search system includes music content, the media content search system includes a distance between the selected area and the location of the media content, wherein the volume of the media content including the music content played by the content player is determined. It may further include a volume control to be adjusted according to.
또한, 상기 화면 표시부는 상기 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상을 상기 공간의 일부 영역에 표시되는 화면을 통해 재생시키고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되도록 하는 것을 특징으로 한다.In addition, when the reproduced media content includes image content, the screen display unit reproduces the image of the media content including the image content through a screen displayed in a partial region of the space, and the image is reproduced The transparency of the may be adjusted according to the distance between the selected area and media content including the image content displayed on the space.
또한, 상기 화면 표시부는 상기 공간상에 표시된 미디어 컨텐츠들의 밀집된 정도에 따라 상기 미디어 컨텐츠들이 표시된 영역의 명암이 조절되도록 하는 것을 특징으로 한다.The screen display unit may adjust the contrast of an area where the media contents are displayed according to the density of the media contents displayed on the space.
또한, 상기 화면 표시부는 상기 공간상에서 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 표현하는 것을 특징으로 한다.The screen display unit may group and express media contents adjacent to each other at intervals within a predetermined distance in the space.
또한, 상기 화면 표시부에 의해 상기 미디어 컨텐츠가 표시되는 공간은 상기 미디어 컨텐츠의 감정수치에 대응되는 2차원의 좌표축을 바탕으로 이루어지는 평면인 것을 특징으로 한다.The space on which the media content is displayed by the screen display unit may be a plane formed on a two-dimensional coordinate axis corresponding to the emotion value of the media content.
또한, 상기 화면 표시부는 상기 미디어 컨텐츠가 표시되는 공간에 상기 미디어 컨텐츠와 관련된 정보를 나타내는 텍스트 정보를 더 표시할 수 있다.The screen display unit may further display text information indicating information related to the media content in a space where the media content is displayed.
또한, 상기 텍스트 정보는 상기 선택된 영역과 상기 미디어 컨텐츠의 위치 사이의 거리에 따라 투명도가 조절되도록 할 수 있다.In addition, the text information may allow transparency to be adjusted according to a distance between the selected area and the location of the media content.
한편, 본 발명은 미디어 컨텐츠 탐색 방법을 컴퓨터상에서 수행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체를 제공한다.On the other hand, the present invention provides a computer-readable recording medium having recorded thereon a program for executing a method of searching for media content on a computer.
본 발명에 따르면 미디어 컨텐츠에 대한 정확한 지식을 알고 있지 않더라도 느껴지는 분위기에 따라서 공간상에 분포된 미디어 컨텐츠를 실시간으로 듣거나 보면서 탐색할 수 있고, 동시에 재생되는 여러 미디어 컨텐츠들을 사용자가 느끼는 감정에 따라 더욱 빠르고 직관적으로 탐색할 수 있다는 효과가 있다.According to the present invention, even if the user does not know the exact knowledge of the media content, the media content distributed in the space can be listened or viewed in real time according to the sensation of the atmosphere, and various media contents played at the same time can be further changed according to the user's feeling. The effect is that you can navigate quickly and intuitively.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세하게 설명한다. 우선 각 도면의 구성 요소들에 참조 부호를 첨가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 실시될 수 있음은 물론이다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. First, in adding reference numerals to the components of each drawing, it should be noted that the same reference numerals are used as much as possible even if displayed on different drawings. In addition, detailed description is abbreviate | omitted when it is judged that it may obscure the summary of this invention. In addition, preferred embodiments of the present invention will be described below, but the technical idea of the present invention may be implemented by those skilled in the art without being limited or limited thereto.
도 1은 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 방법의 흐름 도이고, 도 2는 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템의 블럭도이다.1 is a flow diagram of a media content search method according to a preferred embodiment of the present invention, Figure 2 is a block diagram of a media content search system according to a preferred embodiment of the present invention.
이하, 도 1과 도 2를 참조하여 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템(100)과 상기 미디어 컨텐츠 탐색 시스템(100)을 이용하여 미디어 컨텐츠를 탐색하는 방법에 관하여 설명한다.Hereinafter, a method for searching for media content using the media
본 발명의 바람직한 실시예에 따른 미디어 컨텐츠(media contents) 탐색 시스템(100)은 화면 표시부(110), 영역 선택부(120), 컨텐츠 재생부(130), 볼륨 조절부(140)를 포함한다. The media
미디어 컨텐츠는 다중매체 저작물과 광대역통신망이나 고속 데이터망을 통해 양방향으로 송수신되는 각종 정보 또는 내용물, 디지털화되어 정보기기를 통해 제작·판매·이용되는 정보 등을 말하는 것으로, 본 발명에서의 미디어 컨텐츠는 특히 문자·부호·음성·음향·이미지·영상 등을 포함한다.Media content refers to various pieces of information or contents transmitted and received in both directions through a multimedia work, a broadband communication network or a high-speed data network, and information digitally produced, sold, and used through an information device. Characters, signs, sounds, sounds, images, images, etc.
여기서, 화면 표시부(110)는 미디어 컨텐츠에 대해 인간이 느끼는 감정의 정도를 나타내는 감정수치가 이미 계산된 미디어 컨텐츠를 N차원(여기서 N은 자연수이다)의 공간에 표시한다(S100). Here, the
여기서, 감정수치는 어떤 미디어 컨텐츠에 대해 인간이 느끼는 감정의 강도를 나타내는 어로우절(Arousal) 수치 및 감정의 긍정적인 정도를 나타내는 밸런스(Valence) 수치를 포함하는 것으로 상기 어로우절 및 밸런스 수치에 따라 상기 미디어 컨텐츠가 N차원의 공간상에 표시된다. Here, the emotion value includes an arrow value indicating an intensity of emotion that a human feels for a certain media content and a balance value indicating a positive degree of emotion. Media content is displayed on an N-dimensional space.
더욱 상세하게 상기 어로우절 수치는 감정의 강도로 정의되며, 어로우절 수 치가 커질수록 신나는(exciting) 기분인 것을 의미하고, 수치가 작을수록 조용한(calm) 기분인 것을 의미한다. 또한, 밸런스 수치는 감정의 긍정 및 부정의 정도를 나타내는 것으로, 밸런스 수치가 작을수록 부정적 감정을 나타내고, 수치가 클수록 긍정적 감정을 나타내는 것이다.In more detail, the arrow number is defined as the intensity of emotion, and the larger the arrow number, the more excited the feeling, and the smaller the number, the calmer. In addition, the balance value indicates the degree of positive and negative emotions, the smaller the balance value indicates negative emotions, and the larger the value indicates positive emotions.
한편, 상기 감정수치는 전술한 어로우절 수치와 밸런스 수치를 이용하여 인간이 느끼는 감정의 정도를 수치 등으로 나타내는 어로우절-밸런스 모델(Arousal-Valence Model)에 의해 계산될 수 있다. 이러한 어로우절-밸런스 모델에 의해 어로우절 수치와 밸런스 수치의 좌표값으로 나타나는 감정수치를 상기 N차원 공간중의 특정 영역에 대응되는 특정수로 나타낼수 있다.On the other hand, the emotion value may be calculated by an Arousal-Valence Model that represents the degree of emotion that a human feels as a number using the above-described arrow number and balance value. According to the arrangement-balance model, the emotion value represented by the coordinate value of the arrangement value and the balance value may be represented by a specific number corresponding to a specific area in the N-dimensional space.
미디어 컨텐츠에는 이러한 감정수치가 계산되어 적용되는데, 미디어 컨텐츠에 적용되는 감정수치의 계산은 해당 미디어 컨텐츠에 대한 설문조사에 따른 통계자료, 문화평론가 집단의 평가 수치 등에 따라 계산되어 적용될 수도 있다. 또는 후술하는 감정모듈부(150)에 구축되는 감정모델에 따라 입력되는 미디어 컨텐츠의 감정수치가 자동으로 계산되도록 하는 것도 가능하다.The emotion value is calculated and applied to the media content, and the calculation of the emotion value applied to the media content may be calculated and applied according to statistical data according to a survey on the media content, evaluation values of a group of cultural critics, and the like. Alternatively, the emotion value of the input media content may be automatically calculated according to the emotion model built in the
상기 N차원의 공간은 평면인 2차원, 공간인 3차원 또는 다차원인 공간일 수 있다. 바람직하게 상기 공간은 도 3에 도시된 바와 같은 감정평면으로서 상기 어로우절 수치에 대응되는 어로우절 축과 상기 밸런스 수치에 대응되는 밸런스 축으로 이루어지는 2차원의 좌표축을 바탕으로 이루어지는 평면이다. 상기 감정평면의 각 사분면에는 어로우절 수치와 밸런스 수치에 따른 감정영역이 형성되는데 화면 표시부(110)는 어로우절-밸런스 수치를 바탕으로 하는 감정수치가 계산된 미디어 컨텐 츠를 계산된 감정수치에 따라 상기 감정평면상에 분포시킨다. 이때, 분포되는 미디어 컨텐츠는 점의 형태 즉, 도트 패턴(dot pattern)으로 표현되어 상기 감정평면상에 표시될 수 있다.The N-dimensional space may be a two-dimensional plane, a three-dimensional space or a multi-dimensional space. Preferably, the space is a plane formed on a two-dimensional coordinate axis including an emotion axis corresponding to the arrow value and a balance axis corresponding to the balance value as an emotion plane as shown in FIG. 3. In each quadrant of the emotion plane, an emotion region is formed according to an arrangement value and a balance value. The
도 4는 그레이 모델에 의해 표현되는 공간의 예시화면이고, 도 5는 섬모델에 의해 표현되는 공간의 예시화면이다.4 is an exemplary screen of a space represented by a gray model, and FIG. 5 is an exemplary screen of a space represented by an island model.
화면 표시부(110)는 상기 N차원의 공간에 표시된 미디어 컨텐츠들이 밀집된 정도에 따라 상기 미디어 컨텐츠가 표시된 영역의 명암이 조절되도록 하는 그레이 모델(gray model)이 적용될 수 있다. 그레이 모델이 적용되어 표현되는 공간은 유사한 분위기의 미디어 컨텐츠가 공간상에 분포된 정도를 사용자가 용이하게 확인하여 볼 수 있도록 한다.The
더욱 상세하게 설명하면, 상기 그레이 모델은 공간상에 도트 패턴으로 분포되는 각 미디어 컨텐츠는 일정 높이와 부피를 갖는 원뿔이라고 가정하고, 상기 미디어 컨텐츠들이 서로 인접하고 있을 경우, 원뿔이 서로 중첩되도록 하여 중첩된 부분이 더욱 밝게 또는 하얗게 표시하는 것이다. In more detail, the gray model assumes that each media content distributed in a dot pattern in a space is a cone having a certain height and volume. When the media contents are adjacent to each other, the gray models overlap the cones so that they overlap each other. To make the area brighter or whiter.
또한, 화면 표시부(110)는 섬모델(island model)을 적용하여 상기 N차원의 공간에 표시되는 미디어 컨텐츠를 화면상에 표현할 수 있다.In addition, the
섬모델은 상기 공간상에서 미리 정해진 거리 이내의 간격을 두고 서로 인접하여 있는 미디어 컨텐츠들을 그룹화하여 섬의 형태를 가진 미디어 컨텐츠섬으로 표현하는 것이다. 이러한 섬모델을 적용하면, 미디어 컨텐츠들이 그룹화되어 형성되는 일정 영역에 감정수치에 따라 단계별로 다른 색이 적용되도록 하여 공간상에 분포된 미디어 컨텐츠의 밀집된 정도를 효과적으로 표현할 수 있다. The island model is a media content island having an island shape by grouping media contents adjacent to each other at intervals within a predetermined distance in the space. When the island model is applied, different colors are applied to the predetermined areas formed by grouping the media contents according to emotion values, thereby effectively expressing the density of the media contents distributed in the space.
상술한 그레이모델 또는 섬모델을 적용하여 미디어 컨텐츠가 표시되는 공간을 표현하면, 유사한 느낌을 갖는 미디어 컨텐츠의 수가 많은 부분과 적은 부분을 효과적으로 표현할 수 있어 사용자가 더욱 용이하게 미디어 컨텐츠를 탐색할 수 있다는 장점이 있다.By expressing the space in which the media content is displayed by applying the gray model or the island model described above, a large number and a small part of the media content having a similar feeling can be effectively expressed, so that the user can more easily navigate the media content. There is an advantage.
또한, 화면 표시부(110)는 도 6에 도시된 바와 같이 상기 미디어 컨텐츠에 대한 텍스트 정보를 상기 공간상에 표시하도록 할 수 있다. 여기서 텍스트 정보는 미디어 컨텐츠의 곡명 및 가수명 등의 내용을 포함하는 텍스트로서 미디어 컨텐츠 탐색중에 텍스트 정보를 보고 미디어 컨텐츠를 용이하게 식별할 수 있도록 하는 것이다. 이러한 텍스트 정보는 관련되는 미디어 컨텐츠의 위치에 가까이 있도록 하는 것이 바람직하다. 또한, 상기 텍스트 정보는 상기 미디어 컨텐츠와 영역 선택부(120)에 의해 선택되는 영역 사이의 거리에 따라 투명도가 조절되도록 할 수 있다. 다시 말해, 미디어 컨텐츠와 선택영역 사이의 거리가 가까울수록 불투명하게 표시되고, 상기 거리가 멀어질수록 투명하게 표시되도록 함으로써 사용자가 텍스트 정보를 더욱 용이하게 식별하도록 하는 것이다.In addition, the
상술한 바와 같이 화면 표시부(110)에 의해 N차원의 공간상에 미디어 컨텐츠들이 표시되고나면, 영역 선택부(120)는 탐색신호를 입력받아 상기 공간 중에서 적어도 일부 영역을 선택한다(S110). 여기서 영역 선택부(120)에 의해 선택되는 영역은 N차원 공간상의 한 지점일 수 있다.As described above, after the media content is displayed on the N-dimensional space by the
이어서, 컨텐츠 재생부(130)는 영역 선택부(120)에 의해 선택된 영역에 존재 하거나 상기 선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠를 실시간으로 재생시킨다(S120).Subsequently, the
이때, 선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠가 둘 이상의 복수개인 경우에는 상기 선택된 영역으로부터 소정 거리 이내에 존재하는 모든 미디어 컨텐츠를 동시에 재생시킨다. 또한, 컨텐츠 재생부(130)는 미디어 컨텐츠의 위치와 영역 선택부(120)에 의해 선택된 영역 또는 지점이 일치할 경우에는, 상기 영역 또는 지점에 위치한 미디어 컨텐츠만을 재생시킨다.At this time, when there are two or more media contents existing within a predetermined distance from the selected area, all the media contents existing within the predetermined distance from the selected area are played simultaneously. In addition, when the location of the media content and the area or point selected by the
이러한 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠를 미디어 컨텐츠 탐색중에 실시간으로 들으면서 원하는 미디어 컨텐츠를 탐색할 수 있기때문에 사용자는 더욱 직관적으로 원하는 미디어 컨텐츠를 찾을 수 있게 된다. Since the user can search the desired media content while listening to the media content played by the
바람직하게는 탐색중에 재생되는 디지털 미디어 컨텐츠 파일의 재생부분은 해당 미디어 컨텐츠의 가장 특징적인 부분으로 하여 사용자가 용이하게 미디어 컨텐츠를 탐색할 수 있도록 한다. 예를들어, 미디어 컨텐츠가 음악이라면 해당 음악의 후렴부분만을 재생하도록 하고, 미디어 컨텐츠가 영상 컨텐츠를 포함하는 것이라면 영상의 하이라이트에 해당되는 부분만을 재생하도록 하는 것이다.Preferably, the playback portion of the digital media content file played during the search is the most characteristic part of the media content so that the user can easily search for the media content. For example, if the media content is music, only the chorus portion of the music is played. If the media content includes video content, only the portion corresponding to the highlight of the video is played.
볼륨 조절부(140)는 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠가 음악 컨텐츠를 포함하는 경우 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠의 볼륨이 상기 영역 선택부(120)에 의해 선택된 영역과 공간 중에 표시된 상기 음악 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 페이드인(fade in) 또는 페이드 아웃(fade out) 되도록 한다.If the media content played by the
선택된 영역으로부터 미리 정해진 소정 거리 이내에 존재하는 미디어 컨텐츠가 동시에 들린다 하더라도 상기와 같이 선택된 영역과 미디어 컨텐츠 사이의 거리에 따라 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠의 볼륨은 상기 거리에 따라 자연스럽게 페이드 인/아웃 되기 때문에, 사용자가 미디어 컨텐츠를 탐색하는데 있어서 서로 다른 미디어 컨텐츠의 소리 때문에 혼란을 겪지 않게 되는 것이다.Even if the media content existing within a predetermined distance from the selected area is heard at the same time, the volume of the media content played by the
이때, 볼륨 조절부(140)에 의해 조절되는 미디어 컨텐츠의 볼륨은 하기의 [수학식 1]과 같이 계산된다.At this time, the volume of the media content controlled by the
여기서, Vi는 i번째 미디어 컨텐츠의 볼륨, Pmouse는 공간상의 선택된 영역 또는 탐색 포인터의 위치, Pi는 i번째 미디어 컨텐츠의 위치, α는 사용자 정의 파라미터이다.Where V i is the volume of the i-th media content, P mouse is the location of a selected area or search pointer in space, P i is the location of the i-th media content, and α is a user-defined parameter.
상기 [수학식 1]에 따라 미디어 컨텐츠의 볼륨은 선택된 영역과 미디어 컨텐츠 사이의 거리에 반비례하여 조절된다.According to Equation 1, the volume of media content is adjusted in inverse proportion to the distance between the selected area and the media content.
한편, 컨텐츠 재생부(130)에 의해 재생되는 미디어 컨텐츠가 영상 컨텐츠를 포함하는 경우, 화면 표시부(110)는 상기 영상 컨텐츠를 포함하는 미디어 컨텐츠의 영상을 상기 공간의 일부 영역에 표시되는 화면을 통해 재생시키고, 상기 영상이 재생되는 화면의 투명도는 상기 선택된 영역과 상기 공간상에 표시된 영상 컨텐츠를 포함하는 미디어 컨텐츠 사이의 거리에 따라 조절되도록 한다.Meanwhile, when the media content played by the
다시 말해, 화면에 재생되는 영상의 투명도는 선택된 영역과 미디어 컨텐츠 사이의 거리가 가까울수록 낮아져서 영상이 선명하게 보이도록 하고, 상기 거리가 멀수록 영상의 투명도는 높아져서 점점 보이지 않도록 하는 것이다. 이렇게 함으로써 복수개의 영상이 동시에 재생되는 경우에도 혼란없이 원하는 미디어 컨텐츠를 신속하게 선택할 수 있게 되는 것이다.In other words, the transparency of the image reproduced on the screen is lower as the distance between the selected area and the media content is closer, so that the image is clearly visible, and as the distance is longer, the transparency of the image becomes higher and less visible. In this way, even when a plurality of images are played at the same time, it is possible to quickly select desired media contents without confusion.
바람직하게는 상기 S120단계 이후의 단계로 영역 선택부(120)에 의해 선택된 영역에 존재하거나, 선택된 영역으로부터 미리 정해진 거리 이내에 존재하는 미디어 컨텐츠의 리스트화를 위한 리스트 생성신호를 입력받아 미디어 컨텐츠의 리스트를 생성하고(S130:미도시), 상기 생성된 리스트에 포함된 미디어 컨텐츠의 선택을 위한 선택신호를 입력받고, 입력된 선택신호에 따라 선택된 미디어 컨텐츠를 재생하는 단계(S140:미도시)를 더 포함할 수 있다.Preferably, in step S120, the list of media contents may be received by receiving a list generation signal for listing the media contents existing in the region selected by the
또는, S120단계 이후의 단계로 섬모델에 따라 섬의 형태로 표현된 미디어 컨텐츠의 그룹을 영역 선택부(120)를 통해 선택하고, 선택된 미디어 컨텐츠 그룹을 재생시키도록 할 수 있다(S130':미도시). Alternatively, after the step S120, the group of media contents expressed in the form of an island according to the island model may be selected through the
여기서 S120단계 이후에 수행되는 미디어 컨텐츠의 재생은 탐색을 통해 찾은 하나 또는 둘 이상의 특정된 미디어 컨텐츠의 전구간을 듣기 위해 재생하는 것으로, 탐색을 위해 실시간으로 미디어 컨텐츠가 재생되는 것과는 구별된다.In this case, the reproduction of the media content performed after step S120 is performed to listen to the whole range of one or more specified media contents found through the search, and is distinguished from the playback of the media content in real time for the search.
도 7은 감정모델에 따라 미디어 컨텐츠의 감정수치를 계산하는 것을 나타낸 순서도이다.7 is a flowchart illustrating calculating emotion values of media content according to an emotion model.
도 7을 참조하여 S100단계를 수행하기 이전에 미리 결정된 감정모델이 구축 되어 있으며, 특징값 추출부(152), 특징값 매칭부(154) 및 수치 계산부(156)를 포함하는 감정모듈부(150)에 의해 미디어 컨텐츠의 감정수치가 계산되는 것을 설명한다.Before the step S100 is performed with reference to FIG. 7, a predetermined emotion model is constructed and includes an emotion module unit including a
먼저, 상기 감정모듈부(150)를 이용하여 미디어 컨텐츠의 감정수치를 계산하기 위해서는 미디어 컨텐츠를 감정에 따라 분류되도록 하는 감정모델이 먼저 수립된다.First, in order to calculate the emotion value of media content using the
감정모델을 수립하기 위해서는 먼저 트레이닝 미디어 컨텐츠에 대한 푸리에 스펙트럼(FFT Spectrum), 켑스트럼(Cepstrum), 자기상관함수(Auto-Correlation), 소리 세기(Loudness) 등과 같은 미디어 컨텐츠의 속성을 나타내기 위한 특징값들을 추출하고, 추출된 미디어 컨텐츠의 특징값과 상기 트레이닝 미디어 컨텐츠들에 대해 미리 조사된 감정수치 사이의 선형 또는 비선형 모델을 정의한다. 이때, 트레이닝 미디어 컨텐츠의 특징값과 어로우절-밸런스 수치로 나타나는 감정수치 간의 상관관계를 정의하는데에는 슈도-인버스(Pseudo-Inverse)가 이용될 수 있다. In order to establish an emotion model, first of all, to express the attributes of media content such as Fourier Spectrum, Cepstrum, Auto-Correlation, Loudness, etc. Feature values are extracted and a linear or non-linear model is defined between the feature values of the extracted media content and the emotion values previously examined for the training media content. In this case, Pseudo-Inverse may be used to define a correlation between the feature value of the training media content and the emotion value represented by the arrangement-balance value.
이렇게 수립된 감정 모델을 이용하여 감정수치를 계산하기 위한 대상이며, 상기 N차원의 공간상에 추가로 표시하고자 하는 신규 미디어 컨텐츠를 입력하면(S10), 특징값 추출부(152)는 신규 미디어 컨텐츠의 특징값을 추출하고(S20), 특징값 매칭부(154)는 상기 신규 미디어 컨텐츠의 특징값과 근사한 특징값을 갖는 트레이닝 미디어 컨텐츠를 검색하여 매칭시킨다. 그리고나서, 수치 계산부(156)는 매칭된 트레이닝 미디어 컨텐츠의 감정수치에 신규 미디어 컨텐츠의 특징값과 트레이닝 미디어 컨텐츠의 특징값의 차이에 따라 보정된 보정값을 포함시켜 신규 미디어 컨텐츠의 감정수치를 산출한다(S30). 이렇게 산출된 감정수치는 신규 미디어 컨텐츠에 적용되어 화면 표시부(110)에 의해 N차원의 공간에 표시되는 것이다(S40). The emotion value is calculated using the established emotion model, and when new media content to be additionally displayed on the N-dimensional space is input (S10), the
한편, 감정수치가 계산된 신규 미디어 컨텐츠는 상기 신규 미디어 컨텐츠에 후속하여 입력되고, 감정 모듈부(150)에 의해 감정수치가 계산되어야 하는 또 다른 미디어 컨텐츠에 대해서 감정수치의 계산 기준이 되는 트레이닝 미디어 컨텐츠의 역할을 하게 된다. 따라서, 감정 모듈부(150)에 의해 감정수치가 계산되는 미디어 컨텐츠가 누적될수록 감정수치가 계산되어야 하는 신규 미디어 컨텐츠의 감정수치 계산은 더욱 세밀하게 수행될 수 있게 된다.On the other hand, the new media content whose emotion value is calculated is input after the new media content, and the training media which is the basis for calculating the emotion value for another media content whose emotion value is to be calculated by the
한편, 본 발명의 미디어 컨텐츠 탐색 방법은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.On the other hand, the media content searching method of the present invention can be implemented in a computer-readable code on a computer-readable recording medium. The computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored.
컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트 들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disks, optical data storage devices, and the like, which may also be implemented in the form of carrier waves (for example, transmission over the Internet). Include. The computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers in the art to which the present invention belongs.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으 로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 아래의 청구 범위에 의해서 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and various modifications, changes and substitutions may be made by those skilled in the art without departing from the essential characteristics of the present invention. It will be possible. Accordingly, the embodiments disclosed in the present invention and the accompanying drawings are not intended to limit the technical spirit of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by the embodiments and the accompanying drawings. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents thereof should be construed as being included in the scope of the present invention.
도 1은 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 방법의 흐름도이다.1 is a flowchart of a method for searching media content according to a preferred embodiment of the present invention.
도 2는 본 발명의 바람직한 실시예에 따른 미디어 컨텐츠 탐색 시스템의 블럭도이다.2 is a block diagram of a media content search system according to a preferred embodiment of the present invention.
도 3은 미디어 컨텐츠가 표시되는 공간의 일 실시예를 설명하기 위한 개념도이다.3 is a conceptual diagram illustrating an embodiment of a space where media content is displayed.
도 4는 그레이 모델에 의해 표현되는 공간의 일 실시예를 나타낸 도면이다.4 is a diagram illustrating an embodiment of a space represented by a gray model.
도 5는 섬모델에 의해 표현되는 공간의 일 실시예를 나타낸 도면이다.5 is a diagram illustrating an embodiment of a space represented by an island model.
도 6은 텍스트 정보가 표시되는 공간의 일 실시예를 나타낸 도면이다.6 is a diagram illustrating an embodiment of a space where text information is displayed.
도 7은 감정모델에 따라 미디어 컨텐츠의 감정수치를 계산하는 것을 나타낸 순서도이다.7 is a flowchart illustrating calculating emotion values of media content according to an emotion model.
<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>
100 : 미디어 컨텐츠 탐색 시스템100: media content navigation system
110 : 화면 표시부 120 : 영역 선택부110: screen display unit 120: region selection unit
130 : 컨텐츠 재생부 140 : 볼륨 조절부130: content playback unit 140: volume control unit
150 : 감정 모듈부150: emotion module
Claims (25)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090034572A KR101034373B1 (en) | 2009-04-21 | 2009-04-21 | Media contents Exploring system and method using Emotional Model |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090034572A KR101034373B1 (en) | 2009-04-21 | 2009-04-21 | Media contents Exploring system and method using Emotional Model |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100115921A true KR20100115921A (en) | 2010-10-29 |
KR101034373B1 KR101034373B1 (en) | 2011-05-16 |
Family
ID=43134632
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090034572A KR101034373B1 (en) | 2009-04-21 | 2009-04-21 | Media contents Exploring system and method using Emotional Model |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101034373B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200027794A (en) * | 2018-09-05 | 2020-03-13 | 삼성전자주식회사 | Image display device and operating method for the same |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100615522B1 (en) * | 2005-02-11 | 2006-08-25 | 한국정보통신대학교 산학협력단 | music contents classification method, and system and method for providing music contents using the classification method |
KR100643308B1 (en) | 2005-07-11 | 2006-11-10 | 삼성전자주식회사 | Apparatus and method for providing function to search for music file |
-
2009
- 2009-04-21 KR KR1020090034572A patent/KR101034373B1/en not_active IP Right Cessation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200027794A (en) * | 2018-09-05 | 2020-03-13 | 삼성전자주식회사 | Image display device and operating method for the same |
Also Published As
Publication number | Publication date |
---|---|
KR101034373B1 (en) | 2011-05-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8583615B2 (en) | System and method for generating a playlist from a mood gradient | |
US20210272569A1 (en) | Voice feedback for user interface of media playback device | |
KR101527370B1 (en) | Method and appratus for searching recommended music using emotional information of music | |
JP7283496B2 (en) | Information processing method, information processing device and program | |
JP4356027B2 (en) | Information processing apparatus and method, and program | |
CN106971749A (en) | Audio-frequency processing method and electronic equipment | |
US11271993B2 (en) | Streaming music categorization using rhythm, texture and pitch | |
KR101942459B1 (en) | Method and system for generating playlist using sound source content and meta information | |
KR20190008546A (en) | Method and apparatus for playing videos for music segment | |
US8315968B2 (en) | Music information processing apparatus, music delivering system, and music information processing method that can satisfy a request from a user | |
US20220246135A1 (en) | Information processing system, information processing method, and recording medium | |
JP7140221B2 (en) | Information processing method, information processing device and program | |
Knees et al. | Exploring music collections in virtual landscapes | |
CN106611603A (en) | Audio processing method and audio processing device | |
KR101193362B1 (en) | Method for dividing string into pronunciation unit, method for representation of the tone of string using thereof and storage medium storing video clip representing the tone of string | |
KR101034373B1 (en) | Media contents Exploring system and method using Emotional Model | |
KR20120021174A (en) | Apparatus and method for music search using emotion model | |
US9445210B1 (en) | Waveform display control of visual characteristics | |
KR20070048484A (en) | Apparatus and method for classification of signal features of music files, and apparatus and method for automatic-making playing list using the same | |
Goto et al. | PodCastle and Songle: Crowdsourcing-Based Web Services for Retrieval and Browsing of Speech and Music Content. | |
KR101540598B1 (en) | Method of selecting at least one of a collection of content items | |
WO2021106512A1 (en) | Musical piece creation method and musical piece creation system | |
KR102031282B1 (en) | Method and system for generating playlist using sound source content and meta information | |
JP2022051500A (en) | Related information provision method and system | |
US20240184515A1 (en) | Vocal Attenuation Mechanism in On-Device App |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140401 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20160519 Year of fee payment: 6 |
|
LAPS | Lapse due to unpaid annual fee |