KR102020036B1 - 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 - Google Patents
사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 Download PDFInfo
- Publication number
- KR102020036B1 KR102020036B1 KR1020180078401A KR20180078401A KR102020036B1 KR 102020036 B1 KR102020036 B1 KR 102020036B1 KR 1020180078401 A KR1020180078401 A KR 1020180078401A KR 20180078401 A KR20180078401 A KR 20180078401A KR 102020036 B1 KR102020036 B1 KR 102020036B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- image
- user
- emotion
- users
- Prior art date
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 269
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000011156 evaluation Methods 0.000 claims abstract description 98
- 238000012216 screening Methods 0.000 claims description 49
- 230000008859 change Effects 0.000 claims description 46
- 230000033001 locomotion Effects 0.000 claims description 27
- 230000004044 response Effects 0.000 claims description 22
- 230000001815 facial effect Effects 0.000 claims description 19
- 238000010586 diagram Methods 0.000 claims description 16
- 230000014509 gene expression Effects 0.000 claims description 13
- 230000008921 facial expression Effects 0.000 claims description 10
- 230000002996 emotional effect Effects 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 9
- 238000009825 accumulation Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000000644 propagated effect Effects 0.000 description 3
- 230000001186 cumulative effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010195 expression analysis Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000013515 script Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G06K9/00221—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Economics (AREA)
- Marketing (AREA)
- Human Resources & Organizations (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
본 발명은 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법에 관한 것으로, 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 영상 정보 제공부, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 평가 영상 제공부, 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 사용자 정보 제공부 및 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 사용자 감정 정보 제공부를 포함한다.
Description
본 발명은 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법에 관한 것으로, 보다 자세하게는 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 토대로 사용자의 감정 정보를 분석하여 관람 평가 정보를 제공하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법에 관한 것이다.
강의, 영화나 드라마, 게임 등과 같은 영상 컨텐츠의 경우 수강자 또는 시청자, 게이머 등의 사용자를 대상으로 해당 영상 컨텐츠에 대한 정성적 가치를 판단하기 위해 컨텐츠 제공중에 얼마나 집중해서 수강 또는 시청(게임)했는지를 조사하여 컨텐츠 보완 및 개발에 필요한 데이터를 확보하려는 시도가 있었다.
즉, 종래의 컨텐츠 집중도에 대한 조사는 설문조사 형식을 취하기 때문에 영상 컨텐츠의 전체적인 집중도에 대한 평가만이 이루어지게 되며 주관적인 의사가 반영되어 객관화된 결과를 얻지 못하는 문제점이 있었다.
더욱이, 이러한 조사를 위해서는 수강자 또는 시청자가 별도로 시간을 할애하여 설문조사에 응해야 하기 때문에 수강자나 시청자 전체에 대한 평가결과를 획득하기가 제한되며 일부 무성의한 응답자에 대한 조사데이터가 평가결과에 반영되기 때문에 평가데이터의 신뢰도가 저하되는 문제점이 있었다.
이와 관련하여, 한국공개특허 제2016-0139221호는 "집중도 평가시스템"에 관하여 개시하고 있다.
본 발명은 상기와 같은 문제점을 해결하기 위해 발명된 것으로서, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 동시에 제공하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 획득된 사용자 영상으로부터 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하고, 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하여 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 그래프 형태로 생성하여 제공하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법을 제공하는데 그 목적이 있다.
상기의 목적을 달성하기 위한 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치는 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 영상 정보 제공부; 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 평가 영상 제공부; 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 사용자 정보 제공부; 및 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 사용자 감정 정보 제공부;를 포함한다.
또한, 상기 영상 정보 제공부는 상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공하는 것을 특징으로 한다.
또한, 상기 평가 영상 제공부는, 관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받는 영상 선택 정보 수신부; 선택된 영상을 재생시키는 영상 재생부; 및 선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 재생시키는 사용자 영상 재생부;를 포함하는 것을 특징으로 한다.
또한, 상기 사용자 정보 제공부는, 상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공하는 사용자 좌석 정보부; 및 좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공하는 사용자 신상 정보부;를 포함하는 것을 특징으로 한다.
또한, 상기 사용자 감정 정보 제공부는, 사용자 영상에 존재하는 전체 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태로 생성하여 제공하는 전체 감정 정보 제공부; 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받는 좌석 선택 정보 입력부; 및 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태 및 시간대 별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공하는 개인 감정 정보 제공부;를 포함하는 것을 특징으로 한다.
또한, 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 감정 정보 분석부를 포함하되, 상기 감정 정보 분석부는, 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하는 사용자 개인 영상 추출부; 추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출하는 사용자 얼굴 특징점 추출부; 및 추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출하는 사용자 동작 특징점 추출부;를 포함하는 것을 특징으로 한다.
또한, 상기 감정 정보 분석부는, 상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하는 사용자 표정 분석부; 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하는 사용자 반응 분석부; 분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하고, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공하는 사용자 감정 정보 수치화부; 및 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공하는 전체 사용자 감정 정보 수치화부;를 포함하는 것을 특징으로 한다.
또한, 분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 관람 평가 정보 제공부를 포함하되, 상기 관람 평가 정보 제공부는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하는 것을 특징으로 한다.
상기의 목적을 달성하기 위한 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법은 영상 정보 제공부에 의해, 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 단계; 평가 영상 제공부에 의해, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 단계; 사용자 정보 제공부에 의해, 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 단계; 및 사용자 감정 정보 제공부에 의해, 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 단계;를 포함한다.
또한, 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 단계는, 상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공하는 것을 특징으로 한다.
또한, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 단계는, 관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받는 단계; 선택된 영상을 재생시키는 단계; 및 선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 재생시키는 단계;를 포함하는 것을 특징으로 한다.
또한, 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 단계는, 상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공하는 단계; 및 좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공하는 단계;를 포함하는 것을 특징으로 한다.
또한, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 단계 이후에, 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계를 포함하되, 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계는, 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하는 단계;추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출하는 단계; 및 추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출하는 단계;를 포함하는 것을 특징으로 한다.
또한, 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계는, 상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하는 단계; 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하는 단계; 분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하고, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공하는 단계; 및 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공하는 단계;를 포함하는 것을 특징으로 한다.
또한, 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 단계 이후에, 분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 단계를 포함하되, 분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 단계는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하는 것을 특징으로 한다.
상기의 목적을 달성하기 위한 본 발명에 따른 사용자들의 행동 패턴을 기반으로 하는 마케팅 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법은 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 동시에 제공함으로써, 상영 영상의 장면별로 사용자들의 감정 변화를 관찰할 수 있는 효과가 있다.
또한, 본 발명은 획득된 사용자 영상으로부터 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하고, 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하여 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하여, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류(만족, 역겨움, 기쁨, 슬픔, 놀람, 화남, 두려움 및 중립 등) 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공함으로써, 매칭 누적 결과에 따라 사용자 개인에 따른 감정 종류별 수치와 전체 사용자에 대한 감정 종류별 수치를 용이하게 산출할 수 있는 효과가 있다.
또한, 본 발명은 사용자 영상에 존재하는 전체 사용자에 대하여 분석된 감정 정보와 개인 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 그래프 형태로 생성하여 제공함으로써, 사용자들의 감정 정보를 쉽게 파악할 수 있는 효과가 있다.
또한, 본 발명은 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하여 이를 토대로 상영 영상에 대한 객관적으로 만족도를 평가하고, 사용자들의 상영 영상 관람 스타일을 파악할 수 있는 효과가 있다.
도 1은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치의 구성을 설명하기 위한 도면이다.
도 2는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 평가 영상 제공부의 세부 구성을 설명하기 위한 도면이다.
도 3은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 4는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 감정 정보 분석부의 세부 구성을 설명하기 위한 도면이다.
도 5는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 감정 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 6은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법의 순서를 설명하기 위한 순서도이다.
도 7은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법에서 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계의 순서를 설명하기 위한 순서도이다.
도 8 내지 도 11은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 관리자 단말에서 보여지는 화면의 구성을 개략적으로 설명하기 위한 도면이다.
도 2는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 평가 영상 제공부의 세부 구성을 설명하기 위한 도면이다.
도 3은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 4는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 감정 정보 분석부의 세부 구성을 설명하기 위한 도면이다.
도 5는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 감정 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 6은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법의 순서를 설명하기 위한 순서도이다.
도 7은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법에서 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계의 순서를 설명하기 위한 순서도이다.
도 8 내지 도 11은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 관리자 단말에서 보여지는 화면의 구성을 개략적으로 설명하기 위한 도면이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치의 구성을 설명하기 위한 도면이다.
도 1을 참조하여 설명하면, 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치는 크게 영상 정보 제공부(110), 평가 영상 제공부(120), 사용자 정보 제공부(130), 감정 정보 분석부(140), 사용자 감정 정보 제공부(150) 및 관람 평가 정보 제공부(160)를 포함한다.
여기서, 본 발명에서 이용되는 어플리케이션은 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라(10a ~ 10n)로부터 획득된 사용자 영상을 토대로 사용자의 감정 정보를 분석하여 관람 평가 정보를 제공하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 기능을 갖는 프로그램이다.
영상 정보 제공부(110)는 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공한다.
영상 정보 제공부(110)는 상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공할 수 있다.
평가 영상 제공부(120)는 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공한다. 이에 따른 구성 및 기능에 대해서는 이후 설명되는 도 2에서 자세하게 설명하기로 한다.
사용자 정보 제공부(130)는 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공한다. 이에 따른 구성 및 기능에 대해서는 이후 설명되는 도 3에서 자세하게 설명하기로 한다.
감정 정보 분석부(140)는 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석한다.
감정 정보 분석부(140)는 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하고, 추출된 개인 영상으로부터 사용자들의 얼굴 특징점 및 동작 특징점을 추출하여 상영관에서 영상이 상영되는 동안의 사용자의 표정 및 사용자의 반응 패턴을 분석하여, 이를 토대로 사용자의 감정 변화에 대한 감정 정보를 분석하고 감정 종류별 수치를 제공할 수 있다. 이때, 감정 정보 분석부(140)는 감정 종류는 만족, 역겨움, 기쁨, 슬픔, 놀람, 화남, 두려움 및 중립 총 8개로 분류하였으나, 이에 한정되지는 않는다.
이에 따른 구성 및 기능에 대해서는 이후 설명되는 도 4에서 자세하게 설명하기로 한다.
사용자 감정 정보 제공부(150)는 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공한다. 이에 따른 구성 및 기능에 대해서는 이후 설명되는 도 5에서 자세하게 설명하기로 한다.
관람 평가 정보 제공부(160)는 분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공한다.
관람 평가 정보 제공부(160)는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성할 수 있다.
도 2는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 평가 영상 제공부의 세부 구성을 설명하기 위한 도면이다.
도 2를 참조하여 설명하면, 본 발명에 따른 평가 영상 제공부(120)는 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공한다.
이를 위해, 평가 영상 제공부(120)는 영상 선택 정보 수신부(121), 영상 재생부(122) 및 사용자 영상 재생부(123)를 포함할 수 있다.
영상 선택 정보 수신부(121)는 관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받는다.
영상 재생부(122)는 선택된 영상을 관리자 단말에 재생시킨다.
사용자 영상 재생부(123)는 선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 관리자 단말에 재생시켜 상영 영상의 장면별로 사용자들의 감정 변화를 관찰할 수 있도록 하였다.
도 3은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 3을 참조하여 설명하면, 본 발명에 따른 사용자 정보 제공부(130)는 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공한다.
이를 위해, 사용자 정보 제공부(130)는 사용자 좌석 정보부(131) 및 사용자 신상 정보부(132)를 포함할 수 있다. 여기서, 사용되는 사용자의 개인 정보는 상영 영상 관람 전에 개인 정보 활용에 동의한 사용자들의 정보만을 이용하는 것으로 한다.
사용자 좌석 정보부(131)는 상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공한다.
사용자 신상 정보부(132)는 좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공한다.
도 4는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 감정 정보 분석부의 세부 구성을 설명하기 위한 도면이다.
도 4를 참조하여 설명하면, 본 발명에 따른 감정 정보 분석부(140)는 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석한다.
이를 위해, 감정 정보 분석부(140)는 사용자 개인 영상 추출부(141), 사용자 얼굴 특징점 추출부(142), 사용자 동작 특징점 추출부(143), 사용자 표정 분석부(144), 사용자 반응 분석부(145), 사용자 감정 정보 수치화부(146) 및 전체 사용자 감정 정보 수치화부(147)를 포함할 수 있다.
사용자 개인 영상 추출부(141)는 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출한다.
사용자 얼굴 특징점 추출부(142)는 추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출한다.
사용자 동작 특징점 추출부(143)는 추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출한다.
사용자 표정 분석부(144)는 상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석한다.
사용자 반응 분석부(145)는 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석한다. 예를 들어, 사용자 반응 패턴은 사용자가 손을 머리 위에 올리거나, 손을 입 가까이 두는 등과 같은 것을 수 있다.
사용자 감정 정보 수치화부(146)는 분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하고, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공한다.
한편, 전체 사용자 감정 정보 수치화부(147)는 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공한다.
도 5는 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치에 채용되는 사용자 감정 정보 제공부의 세부 구성을 설명하기 위한 도면이다.
도 5를 참조하여 설명하면, 본 발명에 따른 사용자 감정 정보 제공부(150)는 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공한다.
이를 위해, 사용자 감정 정보 제공부(150)는 전체 감정 정보 제공부(151), 좌석 선택 정보 입력부(152) 및 개인 감정 정보 제공부(153)를 포함할 수 있다.
전체 감정 정보 제공부(151)는 사용자 영상에 존재하는 전체 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태로 생성하여 제공한다.
좌석 선택 정보 입력부(152)는 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받는다.
개인 감정 정보 제공부(153)는 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태 및 시간대 별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공한다.
도 6은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법의 순서를 설명하기 위한 순서도이다.
도 6을 참조하여 설명하면, 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법은 앞서 설명한 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치를 이용하는 것으로, 이하 중복되는 설명은 생략하기로 한다.
먼저, 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 활성화시킨다(S100).
다음, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공한다(S110).
S110 단계는 상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공할 수 있다.
다음, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공한다(S120).
S120 단계는 관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받고, 선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 관리자 단말에 재생시킨다.
다음, 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공한다(S130).
S130 단계는 상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공한다. 그리고 좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공한다.
다음, 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받는다(S140).
다음, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공한다(S150).
S150 단계 이전에 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계가 포함되는데 이는 이후 설명되는 도 7에서 자세하게 설명하기로 한다.
그리고 S150 단계는 사용자 영상에 존재하는 전체 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태로 생성하여 제공한다. 또한, 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태 및 시간대 별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공한다.
다음, 분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공한다(S160).
S160 단계는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성할 수 있다.
도 7은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법에서 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계의 순서를 설명하기 위한 순서도이다.
도 7을 참조하여 설명하면, 본 발명에 따른 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계는 먼저, 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출한다(S200).
다음, 추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출한다(S210).
다음, 추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출한다(S220).
다음, 상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석한다(S230).
다음, 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석한다(S240).
다음, 분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석한다(S250).
다음. 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공한다(S260).
다음, 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공한다(S270).
도 8 내지 도 11은 본 발명에 따른 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 관리자 단말에서 보여지는 화면의 구성을 개략적으로 설명하기 위한 도면이다.
도 8은 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션 활성화되면 처음에 제공되는 초기 화면이다. 도 9는 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공하는 화면이다. 도 10은 관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받아 선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 재생시키고, 상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치 따른 사용자들의 좌석 정보와 좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공하는 화면이다. 도 11은 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받고, 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 신상 정보 세부 제공 및 분석된 감정 정보에 따라 제공되는 수치를 방사형 그래프 형태 및 시간대 별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공하는 화면이다.
이처럼, 본 발명은 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 토대로 사용자의 감정 정보를 분석하고, 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하여 상영 영상에 대한 관람 평가 시 활용될 수 있도록 한다.
이상 본 명세서에서 설명한 기능적 동작과 본 주제에 관한 실시형태들은 본 명세서에서 개시한 구조들 및 그들의 구조적인 등가물을 포함하여 디지털 전자 회로나 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어에서 또는 이들 중 하나 이상이 조합에서 구현 가능하다.
본 명세서에서 기술하는 주제의 실시형태는 하나 이상이 컴퓨터 프로그램 제품, 다시 말해 데이터 처리 장치에 의한 실행을 위하여 또는 그 동작을 제어하기 위하여 유형의 프로그램 매체 상에 인코딩되는 컴퓨터 프로그램 명령에 관한 하나 이상이 모듈로서 구현될 수 있다. 유형의 프로그램 매체는 전파형 신호이거나 컴퓨터로 판독 가능한 매체일 수 있다. 전파형 신호는 컴퓨터에 의한 실행을 위하여 적절한 수신기 장치로 전송하기 위한 정보를 인코딩하기 위하여 생성되는 예컨대 기계가 생성한 전기적, 광학적 또는 전자기 신호와 같은 인공적으로 생성된 신호이다. 컴퓨터로 판독 가능한 매체는 기계로 판독 가능한 저장장치, 기계로 판독 가능한 저장 기판, 메모리 장치, 기계로 판독 가능한 전파형 신호에 영향을 미치는 물질의 조합 또는 이들 중 하나 이상이 조합일 수 있다.
컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 스크립트 또는 코드로도 알려져 있음)은 컴파일되거나 해석된 언어나 선험적 또는 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 또는 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다.
컴퓨터 프로그램은 파일 장치의 파일에 반드시 대응하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 또는 다중의 상호 작용하는 파일(예컨대, 하나 이상이 모듈, 하위 프로그램 또는 코드의 일부를 저장하는 파일) 내에, 또는 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상이 스크립트) 내에 저장될 수 있다.
컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.
부가적으로, 본 특허문헌에서 기술하는 논리 흐름과 구조적인 블록도는 개시된 구조적인 수단의 지원을 받는 대응하는 기능과 단계의 지원을 받는 대응하는 행위 및/또는 특정한 방법을 기술하는 것으로, 대응하는 소프트웨어 구조와 알고리즘과 그 등가물을 구축하는 데에도 사용 가능하다.
본 명세서에서 기술하는 프로세스와 논리 흐름은 입력 데이터 상에서 동작하고 출력을 생성함으로써 기능을 수행하기 위하여 하나 이상이 컴퓨터 프로그램을 실행하는 하나 이상이 프로그래머블 프로세서에 의하여 수행 가능하다.
컴퓨터 프로그램의 실행에 적합한 프로세서는, 예컨대 범용 및 특수 목적의 마이크로프로세서 양자 및 어떤 형태의 디지털 컴퓨터의 어떠한 하나 이상이 프로세서라도 포함한다. 일반적으로, 프로세서는 읽기 전용 메모리나 랜덤 액세스 메모리 또는 양자로부터 명령어와 데이터를 수신할 것이다.
컴퓨터의 핵심적인 요소는 명령어와 데이터를 저장하기 위한 하나 이상이 메모리 장치 및 명령을 수행하기 위한 프로세서이다. 또한, 컴퓨터는 일반적으로 예컨대 자기, 자기 광학 디스크나 광학 디스크와 같은 데이터를 저장하기 위한 하나 이상이 대량 저장 장치로부터 데이터를 수신하거나 그것으로 데이터를 전송하거나 또는 그러한 동작 둘 다를 수행하기 위하여 동작가능 하도록 결합되거나 이를 포함할 것이다. 그러나, 컴퓨터는 그러한 장치를 가질 필요가 없다.
본 기술한 설명은 본 발명의 최상의 모드를 제시하고 있으며, 본 발명을 설명하기 위하여, 그리고 당업자가 본 발명을 제작 및 이용할 수 있도록 하기 위한 예를 제공하고 있다. 이렇게 작성된 명세서는 그 제시된 구체적인 용어에 본 발명을 제한하는 것이 아니다.
따라서, 상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다. 요컨대 본 발명이 의도하는 효과를 달성하기 위해 도면에 도시된 모든 기능 블록을 별도로 포함하거나 도면에 도시된 모든 순서를 도시된 순서 그대로 따라야만 하는 것은 아니며, 그렇지 않더라도 얼마든지 청구항에 기재된 본 발명의 기술적 범위에 속할 수 있음에 주의한다.
100 : 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치
110 : 영상 정보 제공부
120 : 평가 영상 제공부
130 : 사용자 정보 제공부
140 : 감정 정보 분석부
150 : 사용자 감정 정보 제공부
160 : 관람 평가 정보 제공부
110 : 영상 정보 제공부
120 : 평가 영상 제공부
130 : 사용자 정보 제공부
140 : 감정 정보 분석부
150 : 사용자 감정 정보 제공부
160 : 관람 평가 정보 제공부
Claims (15)
- 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 영상 정보 제공부;
관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 평가 영상 제공부;
획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 사용자 정보 제공부;
카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 감정 정보 분석부; 및
관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 사용자 감정 정보 제공부를 포함하며,
상기 감정 정보 분석부는 획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하고, 추출된 개인 영상으로부터 사용자들의 얼굴 특징점 및 동작 특징점을 추출하여 상영관에서 영상이 상영되는 동안의 사용자의 표정 및 사용자의 반응 패턴을 분석하여, 이를 토대로 사용자의 감정 변화에 대한 감정 정보를 분석하고 감정 종류별 수치를 제공하기 위해,
상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하는 사용자 표정 분석부; 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하는 사용자 반응 분석부; 분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하고, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공하는 사용자 감정 정보 수치화부; 및 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공하는 전체 사용자 감정 정보 수치화부;를 포함하며,
상기 사용자 감정 정보 제공부는, 사용자 영상에 존재하는 전체 사용자에 대하여 사용자별로 분석된 감정 변화에 대한 감정 정보에 따른 감정 종류별 수치를 각각 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따라 제공되는 감정 종류별 수치를 방사형 그래프 형태로 생성하여 제공하는 전체 감정 정보 제공부; 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받는 좌석 선택 정보 입력부; 및 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 결과를 토대로 하는 방사형 그래프 형태 및 시간대 별 감정 종류별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공하는 개인 감정 정보 제공부를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 제1항에 있어서,
상기 영상 정보 제공부는 상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 제1항에 있어서,
상기 평가 영상 제공부는,
관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받는 영상 선택 정보 수신부;
선택된 영상을 재생시키는 영상 재생부; 및
선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 재생시키는 사용자 영상 재생부;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 제1항에 있어서,
상기 사용자 정보 제공부는,
상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공하는 사용자 좌석 정보부; 및
좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공하는 사용자 신상 정보부;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 삭제
- 제1항에 있어서,
상기 감정 정보 분석부는,
획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하는 사용자 개인 영상 추출부;
추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출하는 사용자 얼굴 특징점 추출부; 및
추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출하는 사용자 동작 특징점 추출부;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 삭제
- 제1항에 있어서,
분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 관람 평가 정보 제공부를 포함하되,
상기 관람 평가 정보 제공부는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 가장 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치. - 영상 정보 제공부에 의해, 관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 단계;
평가 영상 제공부에 의해, 관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 단계;
사용자 정보 제공부에 의해, 획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 단계;
감정 정보 분석부에 의해, 카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계; 및
사용자 감정 정보 제공부에 의해, 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 단계;를 포함하며,
카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계는,
획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하고, 추출된 개인 영상으로부터 사용자들의 얼굴 특징점 및 동작 특징점을 추출하여 상영관에서 영상이 상영되는 동안의 사용자의 표정 및 사용자의 반응 패턴을 분석하여, 이를 토대로 사용자의 감정 변화에 대한 감정 정보를 분석하고 감정 종류별 수치를 제공하기 위해,
상영관에서 영상이 상영되는 동안 추출된 다수개의 얼굴 특징점의 변화를 이용하여 사용자의 표정을 분석하는 단계; 상영관에서 영상이 상영되는 동안 추출된 다수개의 동작 특징점의 변화를 이용하여 사용자의 반응 패턴을 분석하는 단계;분석된 사용자의 표정과 사용자의 반응 패턴을 토대로 상영관에서 영상이 상영되는 동안의 사용자의 감정 변화에 대한 감정 정보를 분석하고, 분석된 감정 정보에 대응되는 기 설정된 다수개의 감정 종류 중 적어도 어느 하나를 매칭시키고 매칭 누적 결과에 따른 감정 종류별 수치를 제공하는 단계; 및 사용자 영상에 존재하는 사용자별로 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따른 수치를 제공하는 단계;를 포함하고,
관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 단계는,
사용자 영상에 존재하는 전체 사용자에 대하여 사용자별로 분석된 감정 변화에 대한 감정 정보에 따른 감정 종류별 수치를 각각 취합한 후 감정 종류별로 도출된 평균 결과를 토대로 전체 사용자에 대하여 분석된 감정 정보에 따라 제공되는 감정 종류별 수치를 방사형 그래프 형태로 생성하여 제공하는 단계; 관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받는 단계; 및 선택된 좌석 선택 정보에 대응되는 좌석의 위치하는 사용자에 대하여 분석된 감정 정보에 따른 감정 종류별 수치를 취합한 결과를 토대로 하는 방사형 그래프 형태 및 시간대 별 감정 종류별 수치의 변화를 토대로 하는 곡선 그래프 형태로 생성하여 제공하는 단계를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법. - 제9항에 있어서,
관리자 단말을 통해 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션이 활성화되면, 평가 가능한 적어도 하나 이상의 상영 영상에 대한 영상 정보를 제공하는 단계는,
상영이 완료된 적어도 하나 이상의 영상의 제목, 영상의 장르, 영상이 상영된 상영관의 위치, 영상 상영 시간 및 날짜 중 적어도 어느 하나를 포함하는 영상 정보를 리스트 형태로 제공하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법. - 제9항에 있어서,
관리자 단말로부터 관리자가 제공된 영상에 대한 정보 리스트 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받으면, 선택한 영상과 영상상영 지역에 설치되어 상영관 영역을 촬영하는 카메라로부터 획득된 사용자 영상을 관리자 단말에 제공하는 단계는,
관리자 단말로부터 관리자가 제공된 영상 정보 중 적어도 어느 하나의 영상을 선택한 영상 선택 정보를 입력받는 단계;
선택된 영상을 재생시키는 단계; 및
선택된 영상의 시작 및 종료에 맞춰 카메라로부터 획득된 사용자 영상을 편집하고, 편집된 사용자 영상을 선택된 영상과 동시에 재생시키는 단계;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법. - 제9항에 있어서,
획득된 사용자 영상에 존재하는 사용자들의 좌석 정보 및 좌석 정보에 대응되는 사용자들의 신상 정보를 제공하는 단계는,
상영관에 구비되는 좌석의 배열 및 번호를 가시화한 좌석 배치도에 획득된 사용자 영상에 존재하는 사용자들의 위치에 대응시켜, 좌석 배치도에서 사용자들이 위치한 좌석의 배열 및 번호 영역을 활성화시켜 사용자들의 좌석 정보를 제공하는 단계; 및
좌석 배치도에서 활성화된 좌석의 배열 및 번호에 위치한 사용자들의 대한 얼굴, 나이, 성별 및 직업 중 적어도 어느 하나를 포함하는 사용자들의 신상 정보를 제공하는 단계;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법. - 제9항에 있어서,
카메라로부터 획득된 사용자 영상을 토대로 사용자들에 대한 감정 정보를 분석하는 단계는,
획득된 사용자 영상으로부터 사용자 영상에 존재하는 사용자별로 개인 영상을 추출하는 단계;
추출된 개인 영상으로부터 사용자들의 눈. 코, 입 및 안면 윤곽으로부터 다수개의 얼굴 특징점을 추출하는 단계; 및
추출된 개인 영상으로부터 사용자들의 몸 및 손의 움직임으로부터 다수개의 동작 특징점을 추출하는 단계;
를 포함하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법. - 삭제
- 제9항에 있어서,
관리자 단말로부터 관리자가 제공된 사용자들의 좌석 정보 중 어느 하나의 좌석을 선택한 좌석 선택 정보를 입력받으면, 해당 좌석에 위치하는 사용자에 대하여 분석된 감정 정보를 제공하는 단계 이후에,
분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 단계를 더 포함하되,
분석된 감정 정보를 토대로 관람 평가 정보를 생성하여 관리자 단말에 제공하는 단계는 분석 결과를 토대로 상영 영상의 장면별로 사용자들의 감정 변화, 특정 감정 종류의 수치가 가장 높은 상영 영상의 장면, 상영 영상의 장르와 연관된 특정 감정 종류의 수치, 사용자들의 연령별, 성별, 직업별, 시간대별 감정 변화 중 적어도 어느 하나를 포함하는 관람 평가 정보를 생성하는 것을 특징으로 하는 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180078401A KR102020036B1 (ko) | 2018-07-05 | 2018-07-05 | 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180078401A KR102020036B1 (ko) | 2018-07-05 | 2018-07-05 | 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102020036B1 true KR102020036B1 (ko) | 2019-09-24 |
Family
ID=68068689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180078401A KR102020036B1 (ko) | 2018-07-05 | 2018-07-05 | 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102020036B1 (ko) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113544729A (zh) * | 2019-10-30 | 2021-10-22 | 株式会社易为行 | 与观光关联的电动滑板车以及无线耳机租赁系统 |
| WO2021225240A1 (ko) * | 2020-05-08 | 2021-11-11 | (주)이브이패스 | Ar관광콘텐츠 제공이 가능한 전동킥보드 대여시스템 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110012622A (ko) * | 2009-07-31 | 2011-02-09 | 세종대학교산학협력단 | 유비쿼터스 컴퓨팅 공간에서 사용자의 감성 정보에 기초한 전시 관람 서비스를 제공하는 방법 및 장치 |
| KR20140102276A (ko) * | 2011-12-07 | 2014-08-21 | 어펙티바,아이엔씨. | 광고 효과의 감정 기반 평가 |
| KR20150093480A (ko) * | 2014-02-07 | 2015-08-18 | 세종대학교산학협력단 | 표정 인식을 이용한 영상 추출 장치 및 방법 |
| KR20160139221A (ko) * | 2015-05-27 | 2016-12-07 | 노성렬 | 집중도 평가시스템 |
-
2018
- 2018-07-05 KR KR1020180078401A patent/KR102020036B1/ko active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110012622A (ko) * | 2009-07-31 | 2011-02-09 | 세종대학교산학협력단 | 유비쿼터스 컴퓨팅 공간에서 사용자의 감성 정보에 기초한 전시 관람 서비스를 제공하는 방법 및 장치 |
| KR20140102276A (ko) * | 2011-12-07 | 2014-08-21 | 어펙티바,아이엔씨. | 광고 효과의 감정 기반 평가 |
| KR20150093480A (ko) * | 2014-02-07 | 2015-08-18 | 세종대학교산학협력단 | 표정 인식을 이용한 영상 추출 장치 및 방법 |
| KR20160139221A (ko) * | 2015-05-27 | 2016-12-07 | 노성렬 | 집중도 평가시스템 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113544729A (zh) * | 2019-10-30 | 2021-10-22 | 株式会社易为行 | 与观光关联的电动滑板车以及无线耳机租赁系统 |
| WO2021225240A1 (ko) * | 2020-05-08 | 2021-11-11 | (주)이브이패스 | Ar관광콘텐츠 제공이 가능한 전동킥보드 대여시스템 |
| KR20210136534A (ko) * | 2020-05-08 | 2021-11-17 | (주)이브이패스 | Ar관광콘텐츠 제공이 가능한 전동킥보드 대여시스템 |
| KR102459605B1 (ko) * | 2020-05-08 | 2022-10-27 | (주)이브이패스 | Ar관광콘텐츠 제공이 가능한 전동킥보드 대여시스템 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Fremerey et al. | AVtrack360: an open dataset and software recording people's head rotations watching 360 videos on an HMD | |
| Rigby et al. | Development of a questionnaire to measure immersion in video media: The Film IEQ | |
| JP7440020B2 (ja) | 情報処理方法、端末装置、情報処理装置、及び情報処理システム | |
| KR102096077B1 (ko) | 공유된 및 개별화된 자산으로부터 스토리보드-지향형 비디오 제작 | |
| US11670055B1 (en) | Facial expression tracking during augmented and virtual reality sessions | |
| CN103702039B (zh) | 图像编辑装置和图像编辑方法 | |
| US11343595B2 (en) | User interface elements for content selection in media narrative presentation | |
| Karras et al. | Representing software project vision by means of video: a quality model for vision videos | |
| JP5634111B2 (ja) | 映像編集装置、映像編集方法及びプログラム | |
| CN112954390B (zh) | 视频处理方法、装置、存储介质及设备 | |
| KR102020036B1 (ko) | 사용자들의 감정 정보를 기반으로 하는 관람 평가 정보를 제공하는 어플리케이션을 운용하는 장치 및 그 방법 | |
| US20210264929A1 (en) | Dynamic creation and insertion of content | |
| Masia et al. | Influence of directional sound cues on users’ exploration across 360 movie cuts | |
| US20180124453A1 (en) | Dynamic graphic visualizer for application metrics | |
| Dixon | Researching digital performance: virtual practices | |
| De Lima et al. | Video-based interactive storytelling using real-time video compositing techniques | |
| US11601689B2 (en) | Remote virtual reality viewing of an event using crowdsourcing | |
| Evin et al. | Cine-AI: Generating video game cutscenes in the style of human directors | |
| CN114846808A (zh) | 内容发布系统、内容发布方法以及内容发布程序 | |
| Guerrini et al. | Interactive film recombination | |
| US20200387934A1 (en) | Distribution of Promotional Content Based on Reaction Capture | |
| JP2019511139A (ja) | ビデオ及び関連文書を提示するための並びにその視聴を追跡するためのシステム及び方法 | |
| JP6745393B1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| Bitter et al. | As If They Were Here: The Impact of Volumetric Video on Presence in Immersive Augmented Reality Storytelling | |
| Wedel et al. | ViProVoQ: Towards a vocabulary for video quality assessment in the context of creative video production |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GRNT | Written decision to grant |