CN113397547A - 一种基于生理数据的观影评价服务系统和方法 - Google Patents
一种基于生理数据的观影评价服务系统和方法 Download PDFInfo
- Publication number
- CN113397547A CN113397547A CN202110880494.7A CN202110880494A CN113397547A CN 113397547 A CN113397547 A CN 113397547A CN 202110880494 A CN202110880494 A CN 202110880494A CN 113397547 A CN113397547 A CN 113397547A
- Authority
- CN
- China
- Prior art keywords
- module
- physiological
- data
- film
- evaluation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000004458 analytical method Methods 0.000 claims abstract description 27
- 238000013500 data storage Methods 0.000 claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 21
- 230000003993 interaction Effects 0.000 claims abstract description 14
- 230000002996 emotional effect Effects 0.000 claims abstract description 11
- 238000012800 visualization Methods 0.000 claims abstract description 11
- 230000037007 arousal Effects 0.000 claims abstract description 9
- 230000008451 emotion Effects 0.000 claims abstract description 9
- 238000007781 pre-processing Methods 0.000 claims abstract description 9
- 230000004424 eye movement Effects 0.000 claims description 21
- 210000004556 brain Anatomy 0.000 claims description 17
- 230000036772 blood pressure Effects 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 10
- 230000033001 locomotion Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 claims description 4
- 238000013507 mapping Methods 0.000 claims description 4
- 238000013480 data collection Methods 0.000 claims 1
- 238000000537 electroencephalography Methods 0.000 claims 1
- 238000009296 electrodeionization Methods 0.000 abstract description 2
- 230000008569 process Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 230000015654 memory Effects 0.000 description 8
- 210000004761 scalp Anatomy 0.000 description 8
- 238000012880 independent component analysis Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 210000003128 head Anatomy 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000000638 stimulation Effects 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 208000003464 asthenopia Diseases 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000012854 evaluation process Methods 0.000 description 2
- 238000000556 factor analysis Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000001939 inductive effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000010482 emotional regulation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 230000001766 physiological effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
- A61B3/112—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring diameter of pupils
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
- A61B5/02055—Simultaneously evaluating both cardiovascular condition and temperature
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/021—Measuring pressure in heart or blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/377—Electroencephalography [EEG] using evoked responses
- A61B5/378—Visual stimuli
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/377—Electroencephalography [EEG] using evoked responses
- A61B5/38—Acoustic or auditory stimuli
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0201—Market modelling; Market analysis; Collecting market data
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Cardiology (AREA)
- Psychiatry (AREA)
- Physiology (AREA)
- Business, Economics & Management (AREA)
- Psychology (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Ophthalmology & Optometry (AREA)
- Entrepreneurship & Innovation (AREA)
- Data Mining & Analysis (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Pulmonology (AREA)
- Acoustics & Sound (AREA)
- Marketing (AREA)
- Economics (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Child & Adolescent Psychology (AREA)
Abstract
本发明公开了一种基于生理数据的观影评价服务系统和方法,通过观影者在观影前填写SAM情绪状态主观问卷;为观影者佩戴生理信号采集装置;人机交互界面模块对观影者播放固定时长的影片;生理信号采集装置内的生理信息采集模块进行多通道生理数据采集;观影结束后重复步骤三次;观影者主观评价模块对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块;分析处理模块接收数据存储模块输出的数据并进行预处理;特性显示模块可视化手段将信号特征进行展示,实现了将脑电、皮电等生理信号分析并进行显示,填补了使用先进科学的测评设备基于生理数据进行观影评价的系统和方法的空白。
Description
技术领域
本发明属于影视传媒技术领域,涉及观影评价服务技术,具体是一种基于生理数据的观影评价服务系统和方法。
背景技术
随着文化产业发展进步以及消费水平的逐步提升,中国的电影市场进入了繁荣发展时期。而观众的观影体验在无形中塑造着影片票房和口碑,因此,观影评价研究对影片的创作和拍摄有着至关重要的参考价值。
影像观影评价的原因可分为观影心理因素和观影生理因素,已有研究具体包括视觉疲劳诱发因素分析、电影舒适度评估等。在国外电影行业发达的国家,科学的电影测评评估已成体系,但是使用先进科学的测评设备基于生理数据进行观影评价的系统和方法在目前仍是空白。与此同时,现有的脑电、皮电等生理信号分析无法实时分析佩戴者的状态并进行显示。
发明内容
本发明的目的在于提供一种基于生理数据的观影评价服务系统和方法,能够简易、实时高效地将人观看电影时的生理活动数据可视化地反馈给电影从业人员,作为电影评价过程的参考。
本发明的目的可以通过以下技术方案实现:
一种基于生理数据的观影评价服务方法,所述方法包括以下步骤:
步骤1:观影者在观影前填写SAM情绪状态主观问卷;
步骤2:为观影者佩戴生理信号采集装置;
步骤3:通过人机交互界面模块对观影者播放固定时长的影片;
步骤4:通过生理信号采集装置内的生理信息采集模块进行多通道生理数据采集;
步骤5:观影结束后重复步骤1至4三次;
步骤6:观影者通过主观评价模块对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块;
步骤7:分析处理模块接收数据存储模块输出的数据并进行预处理;
步骤8:特性显示模块通过可视化手段将信号特征进行展示。
进一步地,所述通过生理信息采集模块进行多通道生理数据采集之前还包括:
所述人机交互界面模块通过设置通信参数控制信号连接,其中,所述信号连接用于控制生理信息采集模块进行多通道生理数据采集。
进一步地,所述生理数据包括脑电波、皮肤电信号、眼动数据、血压、心率以及指温。
进一步地,所述数据存储模块负责程序运行中数据的记录、保存和输出。
进一步地,所述分析处理模块接收数据存储模块输出的数据并进行预处理,其中,预处理包括以下步骤:
通过分析脑电波的特征、皮肤电信号的特征、眼动数据的特征、心率、血压以及指温的变化情况得出信号特征,并将信号特征输出到特性显示模块。
进一步地,所述可视化手段包括脑电地形图、影像运动直方图以及影片节点与生理数据对应图。
一种基于生理数据的观影评价服务系统,所述观影评价服务系统包括人机交互界面模块、生理信息采集模块、主观评价模块、数据存储模块、分析处理模块和特性显示模块;
所述人机交互界面模块设置为,电影播放与通信参数设置;
所述生理信息采集模块设置为,采集观影者的生理数据;
所述主观评价模块设置为,对观影前后的情绪进行效价评价和唤醒度评价;
所述数据存储模块设置为,记录主观评价模块的评价结果;
所述分析处理模块设置为,分析脑电波的特征、皮肤电信号的特征、眼动数据的特征、心率、血压以及指温的变化情况得出信号特征;
所述特性显示模块设置为,通过可视化手段将信号特征进行展示。
进一步地,所述分析处理模块设置有访问权限。。
与现有技术相比,本发明的有益效果是:
通过观影者在观影前填写SAM情绪状态主观问卷;为观影者佩戴生理信号采集装置;人机交互界面模块对观影者播放固定时长的影片;生理信号采集装置内的生理信息采集模块进行多通道生理数据采集;观影结束后重复步骤三次;观影者主观评价模块对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块;分析处理模块接收数据存储模块输出的数据并进行预处理;特性显示模块可视化手段将信号特征进行展示,实现了将脑电、皮电等生理信号分析并进行显示,填补了使用先进科学的测评设备基于生理数据进行观影评价的系统和方法的空白。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明基于生理信号反馈的观影评价系统的结构示意图。
图2为本发明具体实施方式的操作流程图。
图3为本发明具体实施方式的主观评价流程图。
具体实施方式
下面结合本发明实施例中的附图对本发明实施例进行描述。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
传统的,影像观影评价的原因可分为观影心理因素和观影生理因素,已有研究具体包括视觉疲劳诱发因素分析、电影舒适度评估等。在国外电影行业发达的国家,科学的电影测评评估已成体系,但是使用先进科学的测评设备基于生理数据进行观影评价的系统和方法在目前仍是空白。与此同时,现有的脑电、皮电等生理信号分析无法实时分析佩戴者的状态并进行显示。
针对上述技术问题,本申请提出了一种基于生理数据的观影评价服务系统,另一方面本申请提出了一种基于生理数据的观影评价服务方法;
本申请实施例公开的可以应用在个人电脑、智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑或者可穿戴设备等电子设备中,也可以应用在电子设备运行的多媒体播放应用(例如QQ音乐播放器)或者多媒体编辑应用(例如Au)中。
基于上述描述,参见图1本发明实施例提出一种基于生理信号反馈的观影评价系统,包括人机交互界面模块1、生理信息采集模块2、主观评价模块3、数据存储模块4、分析处理模块5和特性显示模块6。
再具体实施时,系统包括管理员与观影者两类用户,他们具有不同的权限;
人机交互界面模块1包含电影播放功能和通信参数设置功能。电影播放功能可实现2D和VR电影的观影。通信参数设置功能实现信息采集模块与计算机之间的连接参数的设置,仅允许管理员进行操作。
示例性的,2D影像播放界面包括:影院屏幕、座位;VR影像播放界面包括:VR头显、HDMI线缆、VR手柄、VR定位器、支架、座位等;
生理信息采集模块2以生理信号采集系统作为服务器,以计算机作为客户端,来读取生理信号数据,生理信号采集系统通过人机界面模块的通信参数设置控制信号连接,来启动生理信息采集模块2进行多通道生理数据采集。
示例性的,生理数据包括采集脑电波、皮肤电信号、眼动数据、血压、心率以及指温;
再具体实施时,脑电波采集设备包括脑电信号采集模块、存储模块和分析模块;
脑电信号采集模块用于采集脑波信号。存储模块负责程序运行中数据的记录、保存和输出,示例性的,包括记录信号采集模块生成的脑电信号、情绪刺激呈现时刻数据的记录和保存。分析模块对存储模块内的脑电信号数据进行REST重参考滤波、分段、ICA独立成分分析对数据进行计算,分析脑电波的特征。REST重参考可以将实际记录的脑电信号直接转换成理想零参考信号,从而可标准化各种脑电记录。
示例性的,对于m个电极n个样本记录的头皮脑电图,具有无穷参考WREST的头皮电位可建模为:
WREST=S·R 1
其中,WREST为无限参考的头皮脑电图信号m个电极×n个样本,S为头模型中的神经源k个源×n个样本,Rm个电极×k个源为头模型、电极蒙太奇和源轮廓确定的矩阵。
示例性的,对于头皮点We或平均WAR,可建模为:
We=WREST-fwe=S·R-S·fre=S·(R-fge)=S·Re 2
对应于参考电极,f是矩阵R的列向量m,1,re是矩阵R的行向量1,k WREST中的We和WAR分别是头皮点和平均参考的行向量,Re和RAR分别是头皮点和平均参考的矩阵,m是脑电电极的总数。
公式1至公式3分别表示无限参考、头皮点参考和平均参考的头皮脑电图记录。
再具体实施时,皮肤电信号采集设备包括皮电信号采集模块、存储模块和分析模块;
示例性的,皮电信号采集模块用于采集皮电信号;示例性的,存储模块负责程序运行中数据的记录、保存和输出,示例性的,包括皮电信号、情绪刺激呈现时刻皮电数据的记录和保存。示例性的,分析模块对存储模块内的皮电信号数据进行处理分析,将皮电水平SCL幅度、皮肤电导反应SCR的数量和幅度以及主观评分进行数据拟合;
再具体实施时,眼动数据采集设备包括眼动信号采集模块、存储模块和分析模块;
示例性的,眼动数据采集模块用于采集使用者眼睛注视区域以及眼睛观看的图像数据。示例性的,存储模块用于对所采集到的眼动信号、区域、瞳孔数据等进行存储。示例性的,眼动数据分析模块根据眼动数据确定瞳孔面积的标准差、用户反应时长、视线角度超出正常范围的次数和视线注视时长。示例性的,通过眼动仪获取的眼动数据包括瞳孔面积、视线运动轨迹等信息,结合用户观看电影时反映出的用户动作行为信息可以获取用户在观影过程中视觉分神、动作分神和脑力负荷情况
再具体实施时,还设有血压信号采集模块、心率信号采集模块、指温采集模块。
示例性的,血压信号采集模块、心率信号采集模块、指温采集模块用于采集使用者血压、心率、指温数据。存储模块用于对所采集到的生理信号进行存储。
分析模块对存储模块内的生理信号数据进行分析处理。
主观评价模块3,观影者通过主观评价模块3对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块4;
特性显示模块6,根据分析处理模块5计算得到生理信号特征,以脑电地形图、影像运动直方图、影片节点与生理数据对应图的方式展现出来,此功能仅限管理员使用;
参见图2,一种基于生理数据的观影评价服务方法。
步骤1:2D电影观影评价流程。管理员引导观影者填写SAM情绪状态主观问卷;
步骤2:随后为观影者佩戴脑电、皮电、眼动、心率、血压、指温生理信号采集装置;
步骤3:打开人机交互界面模块1,引导观影者观看一部长达3分钟的2D电影;
步骤4:启动生理信息采集模块2进行多通道生理数据采集;
步骤5:观影后引导观影者再次填写SAM情绪状态主观问卷。以上过程重复三次。
参见图2,一种基于生理数据的观影评价服务方法。
步骤1:VR电影观影评价流程。管理员引导观影者填写SAM情绪状态主观问卷;
步骤2:随后为观影者佩戴脑电、皮电、眼动、心率、血压、指温胜生理信号采集装置;
步骤3:打开人机交互界面模块1,引导观影者观看一部长达3分钟的VR电影;
步骤4:启动生理信息采集模块2进行多通道生理数据采集;
步骤5:观影后引导观影者填写SAM情绪状态主观问卷。以上过程重复三次。
上述一种基于生理数据的观影评价服务方法还包括:
步骤6:观影者通过主观评价模块3对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块4;
步骤7:分析处理模块5接收数据存储模块4输出的数据并进行预处理;
步骤8:特性显示模块6通过可视化手段将信号特征进行展示。
参见图3,观影者通过评价模块3对情绪调控前后的情绪刺激进行效价评价和唤醒度评价,评价结果输出到数据存储模块4。
在实验过程中,生理信息采集模块2以生理信号采集系统作为服务器,以计算机作为客户端,来读取生理信号数据。生理信号采集系统通过人机界面模块的通信参数设置控制信号连接,来启动实时采集生理信号,包括脑电波、皮肤电信号、眼动数据、血压、心率以及指温。
数据存储模块4负责程序运行中数据的记录、保存和输出,包括记录信息采集模块收集的脑电波、皮肤电信号、眼动数据、血压、心率以及指温等生理信号,情绪刺激呈现时刻数据的记录和保存。
分析处理模块5接收数据存储模块4输出的数据并进行预处理,通过分别计算脑电波的特征,皮肤电信号的特征,眼动数据的特征,心率、血压、指温值的变化情况,并输出到特性显示模块6。
处理过程中,对存储模块内的脑电信号数据进行REST重参考滤波、分段、ICA独立成分分析,提取脑电信号的特征。对存储模块内的皮电信号数据进行处理分析,将皮电水平SCL幅度、皮肤电导反应SCR的数量和幅度以及主观评分进行数据拟合。对眼动仪获取的观影路径数据进行处理,通过引入球坐标的方式,将观影路径投影到二维矩阵中,对整体的观影数据进行累加,分析整体观影分布离散程度,获得在水平方向以及垂直方向上观影轨迹的直方图,通过高斯函数对直方图情况进拟合,比较拟合图像以及实际观影路径统计图像,验证视觉引导的效果。对血压、心率、指温信号绘制实时图像,结合电影时刻图进行分析。
特性显示模块6根据分析处理模块5计算得到信号特征,通过可视化手段,将各种数据以脑电地形图、影像运动直方图、影片节点与生理数据对应图的方式展现出来,此功能仅限管理员使用。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (8)
1.一种基于生理数据的观影评价服务方法,其特征在于,所述方法包括以下步骤:
步骤1:观影者在观影前填写SAM情绪状态主观问卷;
步骤2:为观影者佩戴生理信号采集装置;
步骤3:通过人机交互界面模块(1)对观影者播放固定时长的影片;
步骤4:通过生理信号采集装置内的生理信息采集模块(2)进行多通道生理数据采集;
步骤5:观影结束后重复步骤1至4三次;
步骤6:观影者通过主观评价模块(3)对观影前后的情绪进行效价评价和唤醒度评价,评价结果输出到数据存储模块(4);
步骤7:分析处理模块(5)接收数据存储模块(4)输出的数据并进行预处理;
步骤8:特性显示模块(6)通过可视化手段将信号特征进行展示。
2.根据权利要求1所述的一种基于生理数据的观影评价服务方法,其特征在于,所述通过生理信息采集模块(2)进行多通道生理数据采集之前还包括:
所述人机交互界面模块(1)通过设置通信参数控制信号连接,其中,信号连接用于控制生理信息采集模块(2)进行多通道生理数据采集。
3.根据权利要求1所述的一种基于生理数据的观影评价服务方法,其特征在于,所述生理数据包括脑电波、皮肤电信号、眼动数据、血压、心率以及指温。
4.根据权利要求1所述的一种基于生理数据的观影评价服务方法,其特征在于,所述数据存储模块(4)负责程序运行中数据的记录、保存和输出。
5.根据权利要求1所述的一种基于生理数据的观影评价服务方法,其特征在于,所述分析处理模块(5)接收数据存储模块(4)输出的数据并进行预处理,其中,预处理包括以下步骤:
通过分析脑电波的特征、皮肤电信号的特征、眼动数据的特征、心率、血压以及指温的变化情况得出信号特征,并将信号特征输出到特性显示模块(6)。
6.根据权利要求1所述的一种基于生理数据的观影评价服务方法,其特征在于,所述可视化手段包括脑电地形图、影像运动直方图以及影片节点与生理数据对应图。
7.一种基于生理数据的观影评价服务系统,其特征在于,所述观影评价服务系统包括人机交互界面模块(1)、生理信息采集模块(2)、主观评价模块(3)、数据存储模块(4)、分析处理模块(5)和特性显示模块(6);
所述人机交互界面模块(1)设置为,电影播放与通信参数设置;
所述生理信息采集模块(2)设置为,采集观影者的生理数据;
所述主观评价模块(3)设置为,对观影前后的情绪进行效价评价和唤醒度评价;
所述数据存储模块(4)设置为,记录主观评价模块(3)的评价结果;
所述分析处理模块(5)设置为,分析脑电波的特征、皮肤电信号的特征、眼动数据的特征、心率、血压以及指温的变化情况得出信号特征;
所述特性显示模块(6)设置为,通过可视化手段将信号特征进行展示。
8.根据权利要求7所述的一种基于生理数据的观影评价服务系统,其特征在于,所述分析处理模块(5)设置有访问权限。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110880494.7A CN113397547A (zh) | 2021-08-02 | 2021-08-02 | 一种基于生理数据的观影评价服务系统和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110880494.7A CN113397547A (zh) | 2021-08-02 | 2021-08-02 | 一种基于生理数据的观影评价服务系统和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113397547A true CN113397547A (zh) | 2021-09-17 |
Family
ID=77688299
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110880494.7A Pending CN113397547A (zh) | 2021-08-02 | 2021-08-02 | 一种基于生理数据的观影评价服务系统和方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113397547A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113995411A (zh) * | 2021-11-09 | 2022-02-01 | 天津大学 | 一种小型便携式多模态鉴赏评估系统及方法 |
CN114253399A (zh) * | 2021-12-22 | 2022-03-29 | Oppo广东移动通信有限公司 | 设备评估方法、装置、存储介质及电子设备 |
CN115381413A (zh) * | 2021-10-21 | 2022-11-25 | 中国科学院心理研究所 | 一种自适应的双模态情绪调节方法与系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104361356A (zh) * | 2014-12-08 | 2015-02-18 | 清华大学 | 一种基于人机交互的电影受众体验评价方法 |
CN111026265A (zh) * | 2019-11-29 | 2020-04-17 | 华南理工大学 | 一种基于vr场景视频的情绪标签连续标注系统及方法 |
-
2021
- 2021-08-02 CN CN202110880494.7A patent/CN113397547A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104361356A (zh) * | 2014-12-08 | 2015-02-18 | 清华大学 | 一种基于人机交互的电影受众体验评价方法 |
CN111026265A (zh) * | 2019-11-29 | 2020-04-17 | 华南理工大学 | 一种基于vr场景视频的情绪标签连续标注系统及方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115381413A (zh) * | 2021-10-21 | 2022-11-25 | 中国科学院心理研究所 | 一种自适应的双模态情绪调节方法与系统 |
CN115381413B (zh) * | 2021-10-21 | 2023-10-24 | 中国科学院心理研究所 | 一种自适应的双模态情绪调节方法与系统 |
CN113995411A (zh) * | 2021-11-09 | 2022-02-01 | 天津大学 | 一种小型便携式多模态鉴赏评估系统及方法 |
CN114253399A (zh) * | 2021-12-22 | 2022-03-29 | Oppo广东移动通信有限公司 | 设备评估方法、装置、存储介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Terkildsen et al. | Measuring presence in video games: An investigation of the potential use of physiological measures as indicators of presence | |
CN109298779B (zh) | 基于虚拟代理交互的虚拟训练系统与方法 | |
CN113397547A (zh) | 一种基于生理数据的观影评价服务系统和方法 | |
US20200023157A1 (en) | Dynamic digital content delivery in a virtual environment | |
Tian et al. | Emotional arousal in 2D versus 3D virtual reality environments | |
US20170293356A1 (en) | Methods and Systems for Obtaining, Analyzing, and Generating Vision Performance Data and Modifying Media Based on the Vision Performance Data | |
KR20190006553A (ko) | 사용자 거동에 관한 눈 추적 기반 정보를 제공하기 위한 방법 및 시스템, 클라이언트 디바이스, 서버 및 컴퓨터 프로그램 제품 | |
Kaufmann et al. | Distortions in the brain? ERP effects of caricaturing familiar and unfamiliar faces | |
KR102168968B1 (ko) | 생체 데이터를 이용한 하이라이트 영상 생성 방법 및 그 장치 | |
CN112545517A (zh) | 一种注意力训练方法和终端 | |
Lees et al. | Speed of rapid serial visual presentation of pictures, numbers and words affects event-related potential-based detection accuracy | |
CN104983435A (zh) | 一种兴趣取向值测验的刺激信息编制方法 | |
Perrin et al. | Multimodal dataset for assessment of quality of experience in immersive multimedia | |
Kroupi et al. | Modeling immersive media experiences by sensing impact on subjects | |
WO2018088187A1 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
Lee et al. | Effects of screen size and visual presentation on visual fatigue based on regional brain wave activity | |
McDuff | New methods for measuring advertising efficacy | |
Castellanos et al. | Emotion in a 360-degree vs. traditional format through EDA, EEG and facial expressions | |
Choy et al. | Quality of experience comparison of stereoscopic 3D videos in different projection devices: flat screen, panoramic screen and virtual reality headset | |
US20200013311A1 (en) | Alternative perspective experiential learning system | |
Khushaba et al. | A neuroscientific approach to choice modeling: Electroencephalogram (EEG) and user preferences | |
Mallam et al. | Accuracy of time duration estimations in virtual reality | |
Elwardy et al. | SSV360: A dataset on subjetive quality assessment of 360 videos for standing and seated viewing on an HMD | |
Touyama et al. | Online control of a virtual object with collaborative SSVEP | |
Cohendet et al. | Emotional interactive movie: adjusting the scenario according to the emotional response of the viewer |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20210917 |