KR101798777B1 - 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법 - Google Patents

동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법 Download PDF

Info

Publication number
KR101798777B1
KR101798777B1 KR1020160089095A KR20160089095A KR101798777B1 KR 101798777 B1 KR101798777 B1 KR 101798777B1 KR 1020160089095 A KR1020160089095 A KR 1020160089095A KR 20160089095 A KR20160089095 A KR 20160089095A KR 101798777 B1 KR101798777 B1 KR 101798777B1
Authority
KR
South Korea
Prior art keywords
stimulus
viewer
video content
magnitude
measuring
Prior art date
Application number
KR1020160089095A
Other languages
English (en)
Inventor
임창환
박성훈
김도원
한창희
김인영
Original Assignee
한양대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to KR1020160089095A priority Critical patent/KR101798777B1/ko
Application granted granted Critical
Publication of KR101798777B1 publication Critical patent/KR101798777B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/377—Electroencephalography [EEG] using evoked responses
    • A61B5/378—Visual stimuli
    • A61B5/04842—
    • A61B5/048—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/372—Analysis of electroencephalograms
    • A61B5/374—Detecting the frequency distribution of signals, e.g. detecting delta, theta, alpha, beta or gamma waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Psychiatry (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Psychology (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

정상상태시각유발전위를 이용하여 동영상 콘텐츠에 대한 시청자의 정서적 흥분을 측정하고 동영상 콘텐츠를 평가하는 방법이 개시된다. 개시된 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법은 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받는 단계; 상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 단계; 및 상기 주파수 성분의 매그니튜드를 이용하여, 상기 시청자의 정서적 흥분 변화를 측정하는 단계를 포함하며, 상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극이다.

Description

동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법{METHOD FOR ESTIMATING EMOTIONAL AROUSAL CHANGES OF VIEWER AND EVALUATING ON VIEDO CONTENTS}
본 발명은 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법에 관한 것으로서, 더욱 상세하게는 정상상태시각유발전위를 이용하여 동영상 콘텐츠에 대한 시청자의 정서적 흥분을 측정하고 동영상 콘텐츠를 평가하는 방법에 관한 것이다.
뉴로시네마틱스(neurocinematics)는 개인이 영화를 시청하는 동안 발생하는 뇌 활동의 변화를 관찰하고 이를 신경 과학 및 영화 제작 등에 응용하려는 분야이다. 뉴로시네마틱스는 최근 신경 과학 및 뇌-컴퓨터 접속 분야(Brain-Computer Interface, BCI)에서 새롭게 부상하고 있는 분야이다.
영화를 시청하는 동안, 시청자의 뇌파를 이용해 인지, 감정 상태, 집중력 변화 등을 추적하려는 다양한 시도들이 이루어지고 있는데, 이 중, 피험자간 상관관계(intersubject correlation, ISC) 방법은, 각 피험자들에게 같은 영화를 보여주며 이들의 뇌 활동을 측정한다. 얻어진 뇌 활동은 분석을 통해 여러 성분으로 나뉘어지고, 모든 피험자들에게서 가장 높은 상관성을 보인 성분, 즉 ISC를 추출해 이를 영화의 흐름과 비교하는 방법이다. 이를 통해 영화의 어떤 부분에서 피험자들이 높은 상관성을 보이고, 어떤 부분에서 낮은 상관성을 보이는지, 시간이 흐름에 따라 상관성이 어떻게 변하는지를 알 수 있다.
ISC는 해당 피험자 그룹에서 서로 가장 높은 상관성을 보이는 성분을 추출하기 때문에, 새로운 피험자가 추가될 때마다 성분을 새로이 다시 추출해야만 한다. 때문에 새로운 피험자에게 적용하기가 어렵고, 또한 단순히 피험자들의 뇌 활동에서 가장 높은 상관성을 보인 성분을 사용하므로 특정한 인지 상태를 반영하는 지표가 아니라는 한계점이 있다.
전술된 방법 이외에도, 영화와 같은 동영상 콘텐츠를 시청하는 시청자의 뇌파를 이용하여 감정 변화를 측정하는 다양한 방법이 연구되고 있다. 관련된 선행문헌으로 대한민국 공개특허 2015-0123423호가 있다.
본 발명은 정상상태시각유발전위를 이용하여 동영상 콘텐츠에 대한 시청자의 정서적 흥분을 측정하고 동영상 콘텐츠를 평가하는 방법을 제공하기 위한 것이다.
상기한 목적을 달성하기 위한 본 발명의 일 실시예에 따르면, 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받는 단계; 상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 단계; 및 상기 주파수 성분의 매그니튜드를 이용하여, 상기 시청자의 정서적 흥분 변화를 측정하는 단계를 포함하며, 상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극인 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법이 제공된다.
또한 상기한 목적을 달성하기 위한 본 발명의 다른 실시예에 따르면, 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파를 측정하는 뇌파 측정부; 상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 주파수 분석부; 및 상기 주파수 성분의 매그니튜드를 이용하여, 상기 시청자의 정서적 흥분 변화를 측정하는 감정 변화 측정부를 포함하며, 상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극인 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 장치가 제공된다.
또한 상기한 목적을 달성하기 위한 본 발명의 또 다른 실시예에 따르면, 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받는 단계; 상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 단계; 상기 주파수 성분의 매그니튜드를 이용하여, 상기 동영상 콘텐츠를 평가하는 단계를 포함하며, 상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극인 동영상 콘텐츠에 대한 평가 방법이 제공된다.
본 발명에 따르면, 정상상태시각유발전위를 이용하여 동영상 콘텐츠를 시청하는 시청자의 정서적 흥분 변화를 용이하게 측정할 수 있으며, 종래 ISC 방법과 비교하여 새로운 피험자(시청자)에게도 손쉽게 적용할 수 있다.
본 발명에 따르면, 정상상태시각유발전위의 매그니튜드를 이용하여 시청자의 정서적 흥분 변화를 측정함으로써, 시청자의 정서적 흥분 변화를 정량적으로 측정할 수 있다.
본 발명에 따르면 동영상 콘텐츠 재생 중에 시청자의 정서적 흥분 변화를 측정 및 분석함으로써, 평가의 객관성을 높일 수 있다.
또한 본 발명에 따르면, 동영상 콘텐츠의 편집 과정에서 미완성 동영상을 시청한 시청자의 정서적 흥분 변화를 측정 및 분석함으로써, 보다 긴장감이나 공포감을 느낄 수 있도록 동영상 콘텐츠를 완성할 수 있다.
도 1은 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 장치를 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법을 설명하기 위한 도면이다.
도 3은 본 발명의 일실시예에 따른 정상상태시각유발전위 유발 자극이 포함된 동영상 콘텐츠를 설명하기 위한 도면이다.
도 4 및 도 5는 본 발명의 일실시예에 따른 시청자의 정서적 흥분 측정 결과를 도시한 도면으로서, 도 4는 정서적 흥분 중 공포감의 변화에 대한 측정 결과를 도시하며, 도 5는 정서적 흥분 중 긴장감의 변화에 대한 측정 결과를 도시한다.
도 6은 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 평가 방법을 설명하기 위한 도면이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
심리학 및 인지과학 분야에서는 인간의 감정을 다차원 정서 모델을 이용하여 표현하는데, 인간의 감정은 주로 Arousal과 Valence의 조합으로 표현된다. Arousal은 각성, 즉 정서적 흥분의 강도를 나타내며, 수치가 높을수록 몸이 긴장되고 떨리는 느낌이며, 낮을수록 평온한 느낌을 나타낸다. Valence는 긍정과 부정의 정도를 나타내며, 수치가 높을수록 기분이 좋으며 낮을수록 기분이 나쁜 상태를 나타낸다.
본 발명은 동영상 콘텐츠를 시청하는 시청자의 감정 변화를 측정하며, 특히 정서적 흥분 변화를 측정한다. 그리고 본 발명은 정상상태시각유발전위(SSVEP: Steady State Visual Evoked Potential)를 이용하여 동영상 콘텐츠에 대한 시청자의 정서적 흥분(emotional arousal) 변화를 측정한다.
정상상태시각유발전위는, 일정한 주파수로 깜빡이는 시각 자극에 눈이 노출되었을 때, 깜빡이는 시각 자극의 주파수에 동기화된 형태로 후두엽에서 관찰되는 뇌파 신호이다.
본 발명은 시청자의 정상상태시각유발전위를 유발시키기위해 동영상 콘텐츠에 정상상태시각유발전위 유발 자극을 포함시켜 시청자가 시청할 수 있도록 한다. 이러한 유발 자극은 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극으로서, 시청자로부터 측정된 뇌파에서 유발 자극에 대응되는 주파수 성분을 분석하여 시청자의 정서적 흥분 변화를 측정하고 추적할 수 있다.
또한 본 발명은 정상상태시각유발전위 유발 자극이 포함된 동영상 콘텐츠를 시청하는 시청자의 정서적 흥분을 측정함으로써, 사용자가 얼마나 많은 공포나 긴장감을 느끼는지 분석할 수 있으며, 이를 통해 동영상 콘텐츠를 평가할 수 있다. 일반적인 동영상 콘텐츠 평가는 시청자가 콘텐츠 시청을 완료한 후 평점을 입력하는 방식으로 이루어지는데, 사용자가 임의로 평점을 입력하므로 객관적이지 못한 측면이 있다. 하지만 본 발명은 콘텐츠 시청중의 뇌파를 분석하여 동영상 콘텐츠를 평가함으로써, 보다 객관적으로 동영상 콘텐츠를 평가할 수 있다.
동영상 콘텐츠는 영화, 드라마, 다큐멘터리 등 동영상 형태의 모든 콘텐츠를 포함한다. 이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 장치를 설명하기 위한 도면이다.
도 1을 참조하면, 본 발명에 따른 정서적 흥분 측정 장치는 뇌파 측정부(110), 주파수 분석부(120) 및 감정 변화 측정부(130)를 포함한다.
뇌파 측정부(110)는 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파를 측정한다. 동영상 콘텐츠는 디스플레이 장치를 통해 재생되며, 정상상태시각유발전위 유발 자극은 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극이다. 즉, 유발 자극은 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 깜빡이며 출력되는 시각 자극이다.
뇌파 측정부(110)는 사용자의 후두엽에 부착된 전극으로 뇌파를 측정한다. 일반적으로 전극의 부착 부위는 대뇌부위에 따라 전두부(Frontal), 중심부(Central), 두정부(Parietal), 측두부(Temporal), 후두부(Occipital), 전두극부(frontopolar)로 19개의 두피전극이 기본으로 사용되나, 실시예에 따라서 전극의 개수 및 부착 위치는 달라질 수 있다. 본 발명은 정상상태시각유발전위를 이용하므로 후두엽(후두부)에 전극을 부착하여 뇌파를 측정한다.
주파수 분석부(120)는 뇌파 측정 결과로부터 유발 자극에 대응되는 주파수 성분을 추출한다. 주파수 분석부(120)는 뇌파 측정 결과에 대한 주파수 분석을 통해, 유발 자극에 이용된 주파수의 성분을 추출할 수 있다. 시청자 등에 따라서 정상상태시각유발전위가 강하게 유발되는 주파수가 다를 수 있는데, 예를 들어 6Hz의 유발 자극이 이용된 경우, 6Hz 주파수 성분이 추출되어 정서적 흥분 측정에 이용된다.
감정 변화 측정부(130)는 추출된 주파수 성분의 매그니튜드(magnitude)를 이용하여, 시청자의 정서적 흥분 변화를 측정한다. 용이한 분석을 위해 감정 변화 측정부(130)는 시간 흐름에 따른 상기 매그니튜드의 패턴을 근사화하고, 근사화된 매그니튜드 패턴을 이용하여, 정서적 흥분 변화를 분석할 수 있다.
매그니튜드 값이 클수록 정서적으로 흥분된, 즉 각성된 정도가 높으며, 시청자가 느끼는 긴장감이나 공포감이 높다는 것을 나타낸다. 반대로 매그니튜드 값이 작을수록 정서적으로 흥분된, 즉 각성된 정도가 낮으며, 시청자가 느끼는 긴장감이나 공포감도 낮다는 것을 나타낸다.
본 발명에 따르면, 정상상태시각유발전위를 이용하여 동영상 콘텐츠를 시청하는 시청자의 정서적 흥분 변화를 용이하고 정량적으로 측정할 수 있으며, 종래 ISC 방법과 비교하여 새로운 피험자(시청자)에게도 손쉽게 적용할 수 있다.
도 2는 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법을 설명하기 위한 도면이다. 도 3은 본 발명의 일실시예에 따른 정상상태시각유발전위 유발 자극이 포함된 동영상 콘텐츠를 설명하기 위한 도면이다.
본 발명에 다른 정서적 흥분 측정 방법은 전술된 정서적 흥분 측정 장치 또는 프로세서를 포함하는 컴퓨팅 장치에서 수행될 수 있다.
본 발명에 따른 정서적 흥분 측정 장치는 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 수신(S210), 즉 입력받는다. 도 1에서 설명된 바와 같이, 정서적 흥분 측정 장치가 직접 뇌파를 측정할 수도 있고, 도 2와 같이, 별도의 뇌파 측정 장치를 통해 측정된 뇌파 측정 결과를 입력받을 수도 있다.
유발 자극은, 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극이다. 도 3에 도시된 바와 같이, 유발 자극(320)은 시청자가 시청할 동영상 콘텐츠(310)에 오버랩되어 인코딩됨으로써, 동영상 콘텐츠 재생시 기 설정된 주파수로 함께 재생될 수 있다. 즉, 시청자는 유발 자극이 오버랩된 동영상 콘텐츠(330)를 시청한다.
유발 자극이 동영상 콘텐츠의 프레임(frame)의 일부 영역에만 오버랩될 경우, 유발 자극이 오버랩된 영역의 영상에 대해서만 정상상태시각유발전위가 유발되므로, 유발 자극(320)은 동영상 콘텐츠(310)의 프레임 전체 영역에 오버랩(330)되는 것이 바람직하다. 또한, 유발 자극으로 인해 화면이 지나치게 가려질 경우, 동영상 콘텐츠 시청이 방해될 수도 있으므로, 유발 자극(320)은 기 설정된 투명도로 동영상 콘텐츠에 오버랩(330)되는 것이 바람직하다. 참고로 도 3에서는 20%의 투명도로 유발 자극이 오버랩된 동영상 콘텐츠(330)가 도시되어 있다.
유발 자극은 일실시예로서, 서로 다른 복수의 유채색이 화면에서 랜덤하게 출력되는 백색 잡음 형태일 수 있다. 즉, 유발 자극이 재생될 때마다 화면에서 유채색 각각이 표시되는 영역은 랜덤하게 변한다. 2개의 유채색이 유발 자극으로 이용될 수 있으며, 정상상태시각유발전위를 보다 강하게 유발시키기 위해 도 3과 같이, 보색 관계인 빨간색과 초록색이 이용될 수 있다.
이 때, 서로 다른 유채색은 화면의 기 설정된 영역별로 랜덤하게 출력되거나 화소 단위로 랜덤하게 출력될 수 있다. 화소 단위로 서로 다른 유채색이 랜덤하게 출력되는 유발 자극이 이용될 경우, 정상상태시각유발전위가 보다 강하게 유발될 수 있다.
다시 도 2로 돌아와, 정서적 흥분 측정 장치는 뇌파 측정 결과로부터 유발 자극에 대응되는 주파수 성분을 추출(S220)한다. 뇌파 측정 결과는 전술된 바와 같이, 후두엽에 대한 측정 결과이며, 정서적 흥분 측정 장치는 10초 길이의 무빙 윈도우를 1초 단위로 이동시키며 고속 푸리에 변환(FFT)를 수행함으로써, 유발 자극에 이용된 주파수의 성분을 시간 흐름에 따라 추출할 수 있다. 여기서 시간 흐름은, 동영상 콘텐츠의 재생 시간 흐름에 대응될 수 있다.
정서적 흥분 측정 장치는 주파수 성분의 매그니튜드를 이용하여, 시청자의 정서적 흥분 변화를 측정(S230)한다. 시간 흐름에 따른 매그니튜드 값의 변화를 이용하여 시청자의 흥분 변화를 측정할 수 있다.
보다 구체적으로 정서적 흥분 측정 장치는 시간 흐름에 따른 매그니튜드의 패턴을 근사화한다. 일실시예로서, 정서적 흥분 측정 장치는 다중 회귀 분석을 이용하여 시간 흐름에 따른 주파수 성분의 매그니튜드를 곡선으로 근사화할 수 있다. 그리고 근사화된 매그니튜드 패턴을 이용하여, 정서적 흥분 변화를 분석한다.
정서적 흥분 측정 장치는 매그니튜드 패턴이 상승할 경우 시청자의 긴장감이나 공포감 역시 상승하는 것으로, 그리고 매그니튜드 패턴이 하강할 경우 시청자의 긴장감이나 공포감 역시 하강하는 것으로 시청자의 정서적 흥분 변화를 분석할 수 있다.
그리고 매그니튜드 값이 클수록 긴장감이나 공포감도 높아지고, 매그니튜드 값이 작을수록 긴장감이나 공포감도 낮아지는 것으로 시청자의 정서적 흥분 변화를 분석할 수 있다.
본 발명에 따르면, 정상상태시각유발전위의 매그니튜드를 이용하여 시청자의 정서적 흥분 변화를 측정함으로써, 정량적으로 시청자의 정서적 흥분 변화를 측정할 수 있다.
도 4 및 도 5는 본 발명의 일실시예에 따른 시청자의 정서적 흥분 측정 결과를 도시한 도면으로서, 도 4는 정서적 흥분 중 공포감의 변화에 대한 측정 결과를 도시하며, 도 5는 정서적 흥분 중 긴장감의 변화에 대한 측정 결과를 도시한다.
도 4 및 도 5의 정서적 흥분 측정 결과(410, 510)는 뇌파 측정 결과 중 6Hz 주파수 성분의 매그니튜드(y축, Normalized Power)를 영화 재생 시간(x축)에 따라 근사화한 곡선 형태로 도시하고 있으며, 여기서 이용된 근사화 방법은 다중 회귀 분석이다. 그리고 도 4 및 도 5에서 이용된 정상상태시각유발전위 유발 자극은 6Hz의 주파수로 재생중인 동영상에서 깜빡이는 자극으로서, 도 3과 같이 적색 및 녹색이 화소 단위로 랜덤하게 깜빡이는 자극이다.
또한 도 4 및 도 5에서는 본 발명에 따른 측정 결과가 시청자의 정서적 흥분 변화를 얼마나 잘 반영하는지 확인하기 위하여, 정서적 흥분 측정 결과를 시청자에 대한 설문 조사 결과(420, 520)와 함께 도시하였다. 도 4 및 도 5의 설문 조사 결과(막대 그래프)는 시청자 37명을 대상으로 이루어졌으며, 영화 재생 시간(x축) 중, 특정 시점에서 시청자들이 공포감 및 긴장감을 느낀 빈도(y축, oftenness)를 나타낸다.
도 4 및 도 5에서, 매그니튜드가 높을수록 공포감 및 긴장감이 높은 것을 나타내는데, 정서적 흥분 측정 결과(410, 510)에서 매그니튜드가 높은 지점과, 설문 조사 결과에서 공포감 및 긴장감을 느낀 빈도가 높은 지점이 유사함을 알 수 있다. 또한 정서적 흥분 측정 결과(410, 510)에서 매그니튜드가 낮은 지점과, 설문 조사 결과에서 공포감 및 긴장감을 느낀 빈도가 낮은 지점이 유사함을 알 수 있다.
즉, 정서적 흥분 측정 결과(410, 510)와 설문 조사 결과의 패턴이 매우 유사함을 알 수 있으며, 본 발명에 따른 시청자의 정서적 흥분 측정 결과가 실제 시청자의 정서적 흥분 변화를 잘 반영하고 있음을 알 수 있다.
도 6은 본 발명의 일실시예에 따른 동영상 콘텐츠에 대한 평가 방법을 설명하기 위한 도면이다.
본 발명에 따른 동영상 평가 방법은, 전술된 정서적 흥분 측정 장치와 같이 정상상태시각유발전위를 이용한다. 프로세서를 포함하는 컴퓨팅 장치나 별도의 동영상 콘텐츠 평가 장치에서 수행될 수 있다.
보다 구체적으로 동영상 콘텐츠 평가 장치는 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받아(S610), 뇌파 측정 결과로부터 유발 자극에 대응되는 주파수 성분을 추출(S620)한다. 그리고, 주파수 성분의 매그니튜드를 이용하여, 동영상 콘텐츠를 평가(S630)한다.
단계 S610 및 단계 S620은 단계 S210 및 단계 S220에 대응된다. 단계 S630 역시 단계 S230과 유사하나, 동영상 콘텐츠 평가 장치는 정서적 흥분 변화를 분석하여 평가 정보를 생성하는 과정에 차이가 있다.
동영상 콘텐츠 평가 장치는 단계 S630에서 시간 흐름에 따른 매그니튜드의 패턴을 근사화하고, 근사화된 매그니튜드 패턴을 이용하여, 동영상 콘텐츠에 대한 정서적 흥분 변화를 분석한다. 그리고 분석 결과를 이용하여, 동영상 콘텐츠에 대한 평가 정보를 생성한다.
동영상 콘텐츠 평가 장치는 일실시예로서, 매그니튜드의 최대값과 최소값의 차이, 매그니튜드가 기준값을 초과한 횟수 또는 매그니튜드의 평균값 등의 파라미터를 이용하여 동영상 콘텐츠를 평가할 수 있다. 전술된 파라미터는 모두 이용되거나 선택적으로 이용될 수 있으며, 복수의 파라미터가 동영상 콘텐츠 평가에 이용될 경우 각 파라미터에 대해 서로 다른 가중치가 부여될 수 있다.
동영상 콘텐츠 평가 장치는 매그니튜드의 최대값과 최소값의 차이가 클 경우 시청자가 느끼는 긴장감이나 공포감이 극대화될 수 있는 것으로 판단하여, 동영상 콘텐츠의 긴장감 및 공포감에 대한 평점을 높게 부여할 수 있다. 또는 매그니튜드가 기준값을 초과한 횟수가 많을수록 또는 매그니튜드의 평균값이 높을수록 시청자가 느끼는 긴장감이나 공포감이 큰 것으로 판단하여, 동영상 콘텐츠의 긴장감 및 공포감에 대한 평점을 높게 부여할 수 있다.
본 발명에 따르면 동영상 콘텐츠 재생 중에 시청자의 정서적 흥분 변화를 측정 및 분석함으로써, 평가의 객관성을 높일 수 있다.
또한 본 발명에 따르면, 동영상 콘텐츠의 편집 과정에서 미완성 동영상을 시청한 시청자의 정서적 흥분 변화를 측정 및 분석함으로써, 보다 긴장감이나 공포감을 느낄 수 있도록 동영상 콘텐츠를 완성할 수 있다.
앞서 설명한 기술적 내용들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예들을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 하드웨어 장치는 실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.

Claims (10)

  1. 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받는 단계;
    상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 단계; 및
    상기 주파수 성분의 매그니튜드를 이용하여, 상기 시청자의 정서적 흥분 변화를 측정하는 단계를 포함하며,
    상기 시청자의 정서적 흥분 변화를 측정하는 단계는
    시간 흐름에 따른 상기 매그니튜드의 패턴을 근사화하는 단계; 및
    상기 근사화된 매그니튜드 패턴을 이용하여, 상기 정서적 흥분 변화를 분석하는 단계를 포함하며,
    상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극인
    동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법.
  2. 제 1항에 있어서,
    상기 유발 자극은
    서로 다른 복수의 유채색이 화면에서 랜덤하게 출력되는 백색 잡음 형태인
    동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법.
  3. 제 1항에 있어서,
    상기 유발 자극은
    화소 단위로 서로 다른 복수의 유채색이 출력되는 자극인
    동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법.
  4. 제 1항에 있어서,
    상기 유발 자극은
    기 설정된 투명도로 상기 동영상 콘텐츠에 오버랩된 자극인
    동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법.
  5. 삭제
  6. 삭제
  7. 정상상태시각유발전위 유발 자극을 포함하는 동영상 콘텐츠를 시청하는 시청자의 뇌파 측정 결과를 입력받는 단계;
    상기 뇌파 측정 결과로부터 상기 유발 자극에 대응되는 주파수 성분을 추출하는 단계;
    상기 주파수 성분의 매그니튜드를 이용하여, 상기 동영상 콘텐츠를 평가하는 단계를 포함하며,
    상기 동영상 콘텐츠를 평가하는 단계는
    시간 흐름에 따른 상기 매그니튜드의 패턴을 근사화하는 단계;
    상기 근사화된 매그니튜드 패턴을 이용하여, 상기 동영상 콘텐츠에 대한 정서적 흥분 변화를 분석하는 단계; 및
    상기 분석 결과를 이용하여, 상기 동영상 콘텐츠에 대한 평가 정보를 생성하는 단계를 포함하며,
    상기 유발 자극은, 상기 동영상 콘텐츠의 재생 중에 기 설정된 주파수로 출력되는 자극인
    동영상 콘텐츠에 대한 평가 방법.
  8. 삭제
  9. 삭제
  10. 제 7항에 있어서,
    상기 유발 자극은
    화소 단위로 서로 다른 복수의 유채색이 화면에서 랜덤하게 출력되는 백색 잡음 형태인
    동영상 콘텐츠에 대한 평가 방법.
KR1020160089095A 2016-07-14 2016-07-14 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법 KR101798777B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160089095A KR101798777B1 (ko) 2016-07-14 2016-07-14 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160089095A KR101798777B1 (ko) 2016-07-14 2016-07-14 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법

Publications (1)

Publication Number Publication Date
KR101798777B1 true KR101798777B1 (ko) 2017-11-16

Family

ID=60806774

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160089095A KR101798777B1 (ko) 2016-07-14 2016-07-14 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법

Country Status (1)

Country Link
KR (1) KR101798777B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210007431A (ko) 2019-07-11 2021-01-20 주식회사 고담 생체신호에 따른 vr콘텐츠 제공시스템
KR20230126393A (ko) 2022-02-23 2023-08-30 인천대학교 산학협력단 광용적 맥파를 이용한 드라마와 영화 시청자의 몰입도를 평가하는 몰입 수준 평가 시스템 및 장치
KR20230126391A (ko) 2022-02-23 2023-08-30 인천대학교 산학협력단 전기 피부 반응을 이용한 드라마와 영화 시청자의 몰입도를 평가하는 몰입 수준 평가 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010512860A (ja) * 2006-12-22 2010-04-30 ニューロ−インサイト プロプライアタリー リミティド エンターテイメント素材または個々のプレゼンテータの心理的影響を判定する方法
US20110125046A1 (en) 2001-06-13 2011-05-26 David Burton Methods and apparatus for monitoring consciousness

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110125046A1 (en) 2001-06-13 2011-05-26 David Burton Methods and apparatus for monitoring consciousness
JP2010512860A (ja) * 2006-12-22 2010-04-30 ニューロ−インサイト プロプライアタリー リミティド エンターテイメント素材または個々のプレゼンテータの心理的影響を判定する方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210007431A (ko) 2019-07-11 2021-01-20 주식회사 고담 생체신호에 따른 vr콘텐츠 제공시스템
KR20230126393A (ko) 2022-02-23 2023-08-30 인천대학교 산학협력단 광용적 맥파를 이용한 드라마와 영화 시청자의 몰입도를 평가하는 몰입 수준 평가 시스템 및 장치
KR20230126391A (ko) 2022-02-23 2023-08-30 인천대학교 산학협력단 전기 피부 반응을 이용한 드라마와 영화 시청자의 몰입도를 평가하는 몰입 수준 평가 시스템

Similar Documents

Publication Publication Date Title
Daly et al. Neural correlates of emotional responses to music: an EEG study
Ding et al. Inter-brain EEG feature extraction and analysis for continuous implicit emotion tagging during video watching
Clarke et al. From perception to conception: how meaningful objects are processed over time
US20100215289A1 (en) Personalized media morphing
Hindi Attar et al. Selective attention to task-irrelevant emotional distractors is unaffected by the perceptual load associated with a foreground task
Allegretti et al. When relevance judgement is happening? An EEG-based study
Molloy et al. Auditory figure-ground segregation is impaired by high visual load
US20100214318A1 (en) Neurologically informed morphing
Abadi et al. Inference of personality traits and affect schedule by analysis of spontaneous reactions to affective videos
US20160021425A1 (en) System and method for predicting audience responses to content from electro-dermal activity signals
EP2649935A2 (en) Evaluation method, evaluation device, program, and recording medium
Heo et al. EEG studies on physical discomforts induced by virtual reality gaming
Gruss et al. Face-evoked steady-state visual potentials: effects of presentation rate and face inversion
KR20110100271A (ko) 신경-반응 데이터를 이용한 브레인 패턴 분석기
Sakaki et al. Association learning for emotional harbinger cues: When do previous emotional associations impair and when do they facilitate subsequent learning of new associations?
Perrin et al. Multimodal dataset for assessment of quality of experience in immersive multimedia
KR101798777B1 (ko) 동영상 콘텐츠에 대한 시청자의 정서적 흥분 측정 방법 및 평가 방법
JP6267424B2 (ja) 視覚ストレス・シーン検出方法、視覚ストレス・シーン低減方法、視覚ストレス検出装置及び視覚ストレス検出装置の検証方法
WO2018088187A1 (ja) 情報処理装置、および情報処理方法、並びにプログラム
Liu et al. An EEG-based study on perception of video distortion under various content motion conditions
Antons et al. Brain activity correlates of quality of experience
Xie et al. Brain activation differences of six basic emotions between 2D screen and virtual reality modalities
McDuff New methods for measuring advertising efficacy
Khoirunnisaa et al. Channel selection of EEG-based cybersickness recognition during playing video game using correlation feature selection (CFS)
Nguyen et al. Time-frequency analysis of pupil size modulated by global luminance, arousal, and saccade preparation signals using Hilbert-Huang transform

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant