CN109062399A - 多媒体信息的评测方法和系统 - Google Patents

多媒体信息的评测方法和系统 Download PDF

Info

Publication number
CN109062399A
CN109062399A CN201810636536.0A CN201810636536A CN109062399A CN 109062399 A CN109062399 A CN 109062399A CN 201810636536 A CN201810636536 A CN 201810636536A CN 109062399 A CN109062399 A CN 109062399A
Authority
CN
China
Prior art keywords
real
viewing user
user
time
multimedia messages
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810636536.0A
Other languages
English (en)
Inventor
王曦光
王晨
王真峥
朱昕彤
王勇
杨昊
杨育松
鞠靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XINHUA NETWORK CO Ltd
Original Assignee
XINHUA NETWORK CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XINHUA NETWORK CO Ltd filed Critical XINHUA NETWORK CO Ltd
Priority to CN201810636536.0A priority Critical patent/CN109062399A/zh
Publication of CN109062399A publication Critical patent/CN109062399A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Neurosurgery (AREA)
  • Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • General Health & Medical Sciences (AREA)
  • Dermatology (AREA)
  • Game Theory and Decision Science (AREA)
  • Biomedical Technology (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提出一种多媒体信息的评测方法和系统,其中,方法包括:在多媒体信息的播放过程中,获取各观看用户的实时生理反应信号;根据各观看用户的实时生理反应信号确定各用户观看多媒体信息的实时专注度,并根据各观看用户的实时专注度生成第一控制指令;根据第一控制指令对第一反馈设备进行相应的控制操作。由此,以用户难以自主更改的实时生理信号为依据,控制相关反馈设备进行相应的反馈操作,便于直观而又准确的显示用户在观看多媒体信息时的专注度。

Description

多媒体信息的评测方法和系统
技术领域
本发明涉及信息处理技术领域,尤其涉及一种多媒体信息的评测方法和系统。
背景技术
随着互联网技术的进步,计算机设备为用户的生产和生活提供的服务愈发的多样化,比如,计算机设备可以为用户播放视频等多媒体信息,以满足用户的娱乐需求。
相关技术中,提供多媒体信息的商家根据用户对多媒体信息的观看感受优化服务,然而,目前主要采用问卷调查的方式获取用户对提供的多媒体信息的观看感受,这种方式一方面在于问卷调查的时间相较于多媒体信息的播放时间滞后,用户的感受可能随着时间的变化而变化甚至记不清,因此,问卷的调查的结果可参考性不高;另一方面在于问卷调查是一个相对主观的评价方式,受到用户主观性的影响较大,比如,即使被评分的多媒体信息用户在观看的时候很喜欢,但是因为其中一个演员用户不喜欢,仍会给出较低的感受输出。
发明内容
本发明提供一种多媒体信息的评测方法和系统,以解决现有技术中,多媒体信息的评测结果不准确的技术问题。
本发明实施例提供一种多媒体信息的评测方法,包括:在所述多媒体信息的播放过程中,获取各观看用户的实时生理反应信号;根据所述各观看用户的实时生理反应信号确定所述各用户观看所述多媒体信息的实时专注度,并根据所述各观看用户的实时专注度生成第一控制指令;根据所述第一控制指令对第一反馈设备进行相应的控制操作。
本发明另一实施例提供一种多媒体信息的评测系统,包括:生理反应信号采集设备、多媒体播放设备、第一反馈设备、以及处理器;其中,所述多媒体播放设备,用于向观看用户播放多媒体信息;所述生理反应信号采集设备,用于在所述多媒体信息的播放过程中,获取各观看用户的实时生理反应信号,并将所述实时生理反应信号发送给所述处理器;所述处理器,用于根据所述各观看用户的实时生理反应信号确定所述各用户观看所述多媒体信息的实时专注度,并根据所述各观看用户的实时专注度生成第一控制指令发送给所述第一反馈设备;所述第一反馈设备,用于根据所述第一控制指令进行相应的控制操作。
本发明又一实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例所述的多媒体信息的评测方法。
本发明还一实施例提供一种计算机程序产品,当所述计算机程序产品中的指令由处理器执行时,执行如上述实施例所述的多媒体信息的评测方法。
本发明实施例提供的技术方案可以包括以下有益效果:
以用户难以自主更改的实时生理信号为依据,控制相关反馈设备进行相应的反馈操作,便于直观而又准确的显示用户在观看多媒体信息时的专注度。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是根据本发明一个实施例的多媒体信息的评测系统的结构示意图;
图2是根据本发明一个实施例的多媒体信息的评测方法的应用场景示意图;
图3是根据本发明另一个实施例的多媒体信息的评测系统的结构示意图;
图4是根据本发明一个具体实施例的多媒体信息的评测系统的结构示意图;
图5是根据本发明一个实施例的多媒体信息的评测方法的流程图;
图6是根据本发明另一个实施例的多媒体信息的评测方法的流程图;
图7(a)是根据本发明另一个实施例的多媒体信息的评测方法的应用场景示意图;以及
图7(b)是根据本发明又一个实施例的多媒体信息的评测方法的应用场景示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的多媒体信息的评测方法和系统。
基于以上分析可知,相关技术中,通过问卷调查的方式进行多媒体信息的观看感受的获取,而这种评分方式,一方面采集时间不能保证实时性,从而影响观看感受的采集结果的准确性,另一方面感受结果容易受到用户主观情绪的影响,采集结果不能真实的反应多媒体信息播放情况。
为了解决上述技术问题,本发明提出了一种多媒体信息的评测方法,该方法通过实时检测用户在观看多媒体信息时的生理反应信号,获取用户的实时专注度,进而,根据各用户的实时专注度控制相关反馈设备进行实时反馈,由此,不但可以实时获取到用户在观看多媒体信息的实时专注度,而且获取的多媒体信息的观看感受结果与多媒体信息的播放效果较为一致。
在本发明的实施例中,为了更好的实施本发明实施例的多媒体评测方法,还提出了一种实施本发明实施例的多媒体评测方法的系统,为了描述的方便,下面首先对多媒体信息的评测系统进行描述。
图1是根据本发明一个实施例的多媒体信息的评测系统的结构示意图,如图1所示,该多媒体信息的评测系统包括生理反应信号采集设备200、多媒体播放设备100、第一反馈设备300和处理器400。
具体地,多媒体播放设备100,用于向观看用户播放多媒体信息。
其中,多媒体信息包括音视频播放信息等,比如,电影、电视剧、综艺节目等,从而,对应的多媒体播放设备100包括电影投影仪、幕布、智能手机、笔记本电脑等。
生理反应信号采集设备200,用于在多媒体信息的播放过程中,获取各观看用户的实时生理反应信号,并将实时生理反应信号发送给处理器。
其中,生理反应信号可以包括皮肤电导信号、心率信号、心电信号、眼动信号、脑电信号中的一种或者多种信号组合,从而,对应的生理反应信号采集设备200可以为皮肤电导采集设备、心率采集设备、心电采集设备、眼动采集设备、脑电采集设备号中的一种或者多种信号组合。在实际执行过程中,生理反应信号采集设备可以为不同的设备,比如,生理反应信号采集设备200可以以腕带、帽子、手套、项链、脸部贴纸等能直接接触到的用户皮肤进而检测到用户的生理反应信号的设备形式存在。
处理器400,用于根据各观看用户的实时生理反应信号确定各用户观看多媒体信息的实时专注度,并根据各观看用户的实时专注度生成第一控制指令送给第一反馈设备300。
第一反馈设备300,用于根据第一控制指令进行相应的控制操作。
在本发明的实施例中,处理器400包括手机、电脑、个人数字助理、穿戴式设备等具有各种操作系统的硬件设备中的处理器。第一反馈设备300包括灯光设备(比如LED彩色光矩阵、颜色可变化的发光元件、亮度可变化的发光元件等)、升降设备(比如升降气球、升降座椅等)、图像设备(比如显示屏幕等)。
具体地,处理器400根据各观看用户的实时生理反应信号确定各用户观看多媒体信息的实时专注度,并根据各观看用户的实时专注度生成第一控制指令后发送给第一反馈设备300。其中,处理器400和第一反馈设备300的通信方式包括但不限于有线连接、蓝牙、3G、4G等无线连接方式,第一反馈设备300根据第一控制指令进行相应的控制操作,以直观的展现观看用户的实时专注度。
在实际应用中的很多应用场景下,同时存在多个观看用户,比如在观看电影时,不同的观看用户在同一时刻针对同样的电影画面的感受并不相同。
因此,为了更精确的获取到场景中存在多个观看用户时,每个观看用户的实时专注度,在本发明的一个实施例中,为每个观看用户对应设置第一反馈设备,以通过与每个观看用户对应的第一反馈设备直观的反应每个观看用户的实时专注度。
可以理解,在本示例中,当第一反馈设备300为显示屏时,预先针对观看用户的数量将显示屏划分为对应数量的控制区域,如图2所示,观看用户的数量为4个,分别观看用户1-4,针对观看用户数量将显示屏幕划分为四个控制区域a,b,c,d,其中,观看用户1-4分别与四个控制区域a,b,c,d对应。
在获取观看用户1-4的实时专注度后,根据实时专注度生成显示屏上与用户对应的显示区域的第一控制指令,并根据第一控制指令控制对应显示区域的颜色反映用户的实时专注度。
其中,继续参照图2,观看用户1对应的观看用户的实时专注度最高,则根据实时专注度生成显示屏上与观看用户1对应的显示区域的第一控制指令,第一控制对应的显示区域a显示为红色;观看用户2对应的观看用户的实时专注度最低,则根据实时专注度生成显示屏上与观看用户2对应的显示区域的第一控制指令,第一控制对应的显示区域b显示为蓝色;观看用户3对应的观看用户的实时专注度较高,则根据实时专注度生成显示屏上与观看用户3对应的显示区域的第一控制指令,第一控制对应的显示区域c显示为黄色;观看用户4对应的观看用户的实时专注度较低,则根据实时专注度生成显示屏上与观看用户4对应的显示区域的第一控制指令,第一控制对应的显示区域d显示为白色。
由此,在本发明的实施例中,将第一反馈设备300与观看用户个体对应,准确获知每个观看用户的实时专注度并反映,便于根据每个观看用户的实时专注度进行相关数据分析等,比如,分析用户位置关系与多媒体信息播放效果的关系等。
另外,在一些应用场景下,有可能处于同一个场景下的观看用户数量较多,此时,显然第一反馈设备300和观看用户个体的对应难以实现,因而,在本发明的实施例,针对应用场景中存在较多观看用户的场景,将多个观看用户划分为不同的观看用户集合,通过目标设备反映观看用户集合的情绪信息。
作为一种可能的实现方式,第一反馈设备300个体与观看用户集合对应,从而,通过每一个第一反馈设备300反映出对应的每个观看用户集合的实时专注度。
具体地,在本实施例中,预先存储观看用户分布信息,该观看用户分布信息中包含当前场景下,观看用户所在的位置对应的具体用户标识等,比如,在容量为20排的电影播放现场座无虚席,预先存储的观看用户分布信息为观众席第1排到第20排。
进而,根据观看用户的分布信息对观看用户的用户标识进行归类,以将多个观看用户标识分为不同的观看用户集合。继续以上述电影播放场景为例进行举例,观看用户标识对应座位位置,从而,可以将第1排到第3排分为一个观看用户集合,将第4排到第6排分为一个观看用户集合,将第7排到第10排分为一个观看用户集合,将第11排到第15排分为一个观看用户集合,将第16排到第20排分为一个观看用户集合等。
进而,获取一个观看用户集合中多个生理反应信号采集设备100采集的观看用户的生理反应信号,进而,处理器200根据用户的实时生理反应信号确定每个观看用户集合中观看用户的实时专注度,将每个观看用户集合中的实时专注度的平均值作为对应观看用户集合的实时专注度。进而,根据每个观看用户集合的实时专注度生成对应的第一控制指令,以根据第一控制指令控制相关第一反馈设备进行相应的控制操作,以直观的反映每个观看用户集合的实时专注度。
在本发明的一个实施例中,为了进一步提高对多媒体播放效果的评测效率,还可根据当前各观看用户的实时专注度生成针对多媒体信息的评测结果,并通过对应的反馈设备对对应的评测结果进行反馈。
图3是根据本发明另一个实施例的多媒体信息的评测系统的结构示意图,如图3所示,在如图1所示的基础上,该系统还包括第二反馈设备500。
其中,处理器400,还用于根据各观看用户的实时专注度对多媒体信息进行评测,并根据评测结果生成第二控制指令发送给第二反馈设备500。
第二反馈设备500,用于根据第二控制指令进行相应的控制操作。
其中,第二反馈设备500在不同的应用场景下包括灯光设备(比如LED彩色光矩阵、颜色可变化的发光元件、亮度可变化的发光元件等)、升降设备(比如升降气球、升降座椅等)、图像设备(比如显示屏幕等)。
显然,与第一反馈设备300同样的是,第二反馈设备500也可以根据应用场景的不同,为每个观看用户对应设置第二反馈设备500,或者,为每个观看用户集合对应设置第二反馈设备,其中,设置方式与第一反馈设备300设置与实施方式相同,在此不再赘述。
由此,本发明实施例的多媒体信息的评测系统,通过生理反应信号采集设备、多媒体播放设备、相关反馈设备、以及处理器的相互通信,实现了一种基于应用较广、实用性较高的多媒体服务系统,为多媒体信息服务的优化提供了硬件支持。
在本发明的一个实施例中,当应用场景为电影播放场景,第一反馈设备300为设置在座位上方的与座椅一一对应的指示灯310,第二反馈设备500为设置在观看用户集合对应区域的升降气球510时,如图4所示,在座椅600上设置对应的生理反应信号采集设备200,其中,继续参照图4,本发明实施例中的生理反应信号采集设备200为与座椅600连接的包含皮肤电导信号采集传感器的腕带210,多媒体播放设备100为电影播放设备110(图中仅示出电影显示屏幕),电影播放设备110用于向观看用户播放多媒体信息,腕带210在多媒体信息的播放过程中,获取各观看用户的实时生理反应信号,并将实时生理反应信号发送给处理器400。
进而,处理器400根据各观看用户的实时生理反应信号确定各用户观看所述多媒体信息的实时专注度,并根据各观看用户的实时专注度生成第一控制指令发送给指示灯310,以实时指示每个观看用户对当前播放的多媒体信息的专注度,同时,处理器400根据各观看用户的实时专注度对多媒体信息进行评测,并根据评测结果生成第二控制指令发送给升降气球510,以通过升降气球510实时显示观看用户对当前播放的电影的感受。
应当理解的是,本发明实施例的多媒体信息的评测系统,由于可以通过系统各个模块的相互通信,基于观看用户的实时生理反应信号进行对应的显示控制操作,满足了多种场景下的多样化需求,比如,电影播放时观看用户的观看评价的实时获知,又比如,学生听课的专注度的实时获知等,具有较强的实用性和推广性。
下面其次描述应用多媒体信息的评测系统的多媒体信息的评测方法。
图5是根据本发明一个实施例的多媒体信息的评测方法的流程图,如图5所示,该方法包括以下步骤:
步骤101,在多媒体信息的播放过程中,获取各观看用户的实时生理反应信号。
举例而言,当应用场景为电影观看应用场景时,在电影播放时,通过与座椅连接的生理反应信号采集设备获取各观看用户的实时生理反应信号。
步骤102,根据各观看用户的实时生理反应信号确定各用户观看多媒体信息的实时专注度,并根据各观看用户的实时专注度生成第一控制指令。
步骤103,根据第一控制指令对第一反馈设备进行相应的控制操作。
其中,在不同的应用场景下,各观看用户的专注度可以以具体地数值表示,比如以百分制中的数字表示,数值越大代表观看用户越专注,比如以等级制度中的等级表示,等级越大代表观看用户越专注,又比如以具体的符号标志(星星符号、花朵符号、心形符号等)的数量来表示,符号数量越多代表观看用户越专注。
可以理解,各观看用户的生理反应信号会真实的反应多媒体信息的播放效果,比如,当生理反应信号包括皮肤电导信号时,皮肤会对电流或者电压呈现一定的电阻,而电阻的大小会随着情绪变化而变化,通常,在较为轻松的状态下,各观看用户的可能当前在走神,多媒体信息并不能引起各观看用户的兴趣,人体皮肤的电阻较大,从而皮肤电导信号较低,在精神集中时,各观看用户的可能当前正在专注的观看多媒体信息,人体皮肤的电阻较小,从而人体皮肤电导信号较高,这是由于交感和副交感神经根据大脑的认知状态的变化进行拮抗式的调节,而交感和副交感神经的活动会影响皮肤电阻。
又比如,当生理反应信号包括心率信号时,如果各观看用户的心率波动较小,则表明各观看用户的越是专注于当前多媒体信息,如果各观看用户的心率变化比较大,则表明对当前的多媒体信息越是不专注。
需要说明的是,在不同的应用场景下,可采用不同的方式实现根据各观看用户的生理反应信号确定各观看用户的实时专注度,示例说明如下:
第一种示例:
在本示例中,预先根据大量实验数据,获取并存储专注度和生理反应信号的对应关系,从而,在获取生理反应信号后,查询上述对应关系,以获取匹配的观看用户的实时专注度。
第二种示例:
预先根据大量实验数据,构造生理反应信号的深层神经网络模型,该模型的输入为实时生理反应信号,输出为观看用户的专注度,从而,将获取的观看用户的生理反应信号输入该深层神经网络模型,得到输出的观看用户的实时专注度。
第三种示例:
在本示例中,如图6所示,上述步骤102包括:
步骤201,根据预设策略分析各观看用户的实时生理反应信号,并提取各用户的实时专注特征信息。
应当理解的是,在不同的应用场景下,上述分析观看用户的实时生理反应信号的预设策略不同,从而提取到的观看用户的专注特征信息不同:
作为一种可能的实现方式,专注特征信息为专注次数,则可以检测生理反应信号大于预设阈值的次数提取专注次数。
举例而言,当生理反应信号为皮肤电导信号时,由于在实际应用中,观看用户对当前的多媒体信息越专注,则观看用户的脑神经活动越丰富,受到多媒体信息内容的刺激以及交感神经活动的影响,会使得皮肤表面的导电度改变(其成因与交感神经和汗腺活动度有关),精神状态越专注,皮肤电导越大,根据此原理从而检测获知的皮肤电导信号越大。
举例而言,当生理反应信号为眼动信号时,由于在实际应用中,观看用户对当前选手多媒体信息越专注,则观看用户的眼睛注视点会集中在多媒体信息对应的画面上,且会随着电影画面中的人物等而移动,从而检测到的眼动信号变化率(比如眼球的轨迹变化率等、注视点的变化率等)较高,观看用户对当前多媒体信息越不专注,则观看用户的眼睛不会随着电影画面中的人物等而移动或者注视点偏离屏幕,从而检测到的眼动信号变化率较低或者注视点不在屏幕身上。
因而,在本示例中,预先根据大量实验数据设置生理反应信号对应的预设阈值,提取生理反应信号大于预设阈值的次数提取专注次数。
作为另一种可能的实现方式,检测实时生理反应信号大于预设阈值的时间提取专注时间。
由于在实际应用中,观看用户对当前多媒体信息越专注,则会体现在观看用户的生理反应信号上,比如,当生理反应信号为皮肤电导信号时,观看用户对当前多媒体信息内容越专注,则观看用户的心理及认知活动,会使得皮肤表面的导电度增加(其成因是汗腺活动程度的变大),从而检测获知的皮肤电导信号越大。
因而,在本示例中,还可以检测实时生理反应信号大于预设阈值的时间提取专注时间。
作为又一种可能的实现方式,可以检测实时生理反应信号大于预设阈值的幅度提取专注强度。
由于在实际应用中,观看用户对当前多媒体信息内容的专注强度可以反应在生理反应信号中,因而,可以根据生理反应信号的大小来提取观看用户的专注强度,比如,当生理反应信号包括皮肤导电信号时,观看用户对当前多媒体信息内容越专注,则观看用户的心理及认知活动,会使得皮肤表面的导电度增加(其成因是汗腺活动程度的变大),从而检测获知的皮肤电导信号越大。
因而,在本示例中,还可以检测生理反应信号大于预设阈值的幅度提取专注强度,比如,检测皮肤电导信号大于预设阈值的幅度提取专注强度,如预设阈值为A,当前的皮肤电导信号为大于A的B,则可以将B-A作为专注强度。
其中,在不同的应用场景下,上述三种示例采集的观看用户的专注特征信息可以作为单独的参考因素,用于进一步确定观看用户的专注度,也可以将上述三种示例采集的观看用户的专注特征信息的任意两种的组合作为参考因素,用于进一步确定观看用户的专注度,也可以将上述三种示例采集的观看用户的专注特征信息作为参考因素,用于进一步确定观看用户的专注度。
另外,为了保证进一步确定观看用户的专注度的准确度,在本发明的一个实施例中,上述与生理反应信号进行比较的预设阈值还可以根据观看用户的体质类型设置,比如,当生理反应信号包括皮肤电导信号时,对于女性观看用户和男性观看用户、或者不同年龄段的观看用户来讲,其皮肤表面的角质和干燥度等不同,因而,在同样的专注度下测量得到的皮肤电导信号是不同的,为了补偿这种观看用户体质上的差别,还可以根据大量实验数据获取这种差别数据,针对不同体质用户设置不同的预设阈值,比如,由于一般情况下观看男性用户的皮肤汗腺相对于女性用户更加发达,导电性更强,因而设置的预设阈值相对高一些等。
步骤202,应用预设算法对各用户的实时专注特征信息进行计算,获取各用户的实时专注度。
具体而言,根据应用场景的不同,应用预设算法对各观看用户的实时专注特征信息进行计算获取各观看用户的实时专注度的方式不同,下面结合不同的应用场景进行举例:
场景一:
在该场景下,观看用户的实时专注特征信息为单一的特征信息,比如仅仅为专注次数,或者,专注时间,或者,专注强度。
由于观看用户的专注特征信息对应的数据值越大,比如专注次数越大,表示观看用户越专注于当前多媒体信息,因此,本场景下的预设算法为与专注特征信息对应的线性运算算法,比如,该算法可以为Y=a*X,其中,Y为观看用户的专注度,X为专注特征信息对应的数据值,a可以为任意大于0的数。
其中,可以考虑专注特征信息包含不同的特征内容时与观看用户专注度的相关性的不同,比如,在确定用户的专注度时,通常观看用户的专注时间相比于专注次数的参考意义更大,因为有的时候,观看用户虽然多次专注于当前多媒体信息内容,但是持续时间较短,还是认为观看用户没有专注于当前多媒体信息内容,因此,上述a还可以对应于不同的专注特征信息的权重值,比如,当专注特征信息为专注次数时,对应的a为0.6,当专注特征信息为专注时间时,对应的a为0.8。
场景二:
在该场景下,观看用户的专注特征信息为多个特征信息,比如包括专注次数和专注时间,或者,专注时间和专注强度,或者,专注次数、专注时间和专注强度等。
由于观看用户的专注特征信息对应的数据值越大,比如专注次数越大,表示观看用户越专注于当前多媒体信息,因此,对应的预设算法与观看用户的专注特征信息对应的数据值正相关,比如,Y=a1*X1+…+an*Xn,其中,n为大于等于2的正整数,a1到an为正数,a1到an可以相等,也可以不相等,当a1到an不相等时,可以用于表示不同的观看用户的专注特征信息对专注度的不同的参考意义的权重值,X1到Xn表示不同的观看用户的专注特征信息对应的数据值。
当然,在实际操作过程中,该场景中的预设算法还可以是任意体现观看用户的专注特征信息对应的数据值正相关的算法表达,在此不一一列举。
进一步地,在获取到各观看用户的实时专注度后,为了直观的表示观看用户的实时专注度,根据各用户的实时专注度的生成对第一反馈设备的第一控制指令,其中,在不同的应用场景下,根据各用户的实时专注度的生成对第一反馈设备的第一控制指令的方式包括但不限于,预先建立观看用户的专注度和第一控制指令的对应关系,从而,在获取到观看用户的实时专注度后,查询该对应关系,获取对应的第一控制指令,进而,根据第一控制指令对第一反馈设备进行相应的控制操作。并且上述第一反馈设备在不同的应用场景下,可以包括舞台升降装置,舞台灯光、显示屏幕等硬件设备。
举例而言,对于电影院,为了准确的获知每个观看用户对当前电影的专注情况,如图7(a)所示,在每一个座位上方设置一个智能灯,该智能灯的颜色可以变化,从而,如图7(b)所示,在电影播放过程中,根据采集的观看用户1-4的实时生理反应信号,根据实时生理反应信号确定观看用户观看的实时专注度,根据观看用户的实时专注度控制对应座位上的灯泡的颜色变化,以反映出用户的观看专注度,其中,观看用户1和2对于电影比较感兴趣,则用户1和2座位上方的智能灯为暖色系,用户3此时在开小差,则此时用户3对应的座位上的智能灯为灭,用户4此时不喜欢当前电影,则此时用户4对应的座位上的智能灯为冷色系。
在本发明的一个实施例中,为了进一步直观的体现当前多媒体信息的播出效果,在获取到各观看用户的实时专注度后,还可根据各观看用户的实时专注度对多媒体信息进行评测,并根据评测结果生成第二控制指令,并根据第二控制指令控制第二反馈设备进行相应的控制操作。
其中,在实际执行过程中,评测结果可以根据应用场景的不同而不同,比如,该评测结果可以为百分制的分数表示,还可以为等级制表示等,作为一种可能的实现方式,在当前评测结果对应于百分制评分时,可以应用预设的算法对观看用户的实时专注度进行计算,获取各观看用户的实时专注度,比如,预先建立专注度与评测结果的对应关系,从而,在获取各观看用户的专注度后,查询上述对应关系,获取到对应的评分结果,进而,根据各观看用户的评分结果获取多媒体信息的播放效果。
基于以上描述,在获取到各观看用户的实时专注度后,还可基于各观看用户的实时专注度进一步提升观看用户的观看体验。
在本发明的一个实施例中,根据各观看用户的实时专注度确定专注度大于预设阈值的信息推送时刻,在信息推送时刻在多媒体信息中插入推送信息播放给观看用户。
具体而言,处理器将各观看用户的实时专注度发送给多媒体播放设备,进而,多媒体播放设备根据各观看用户的实时专注度确定专注度大于预设阈值的信息推送时刻,并在信息推送时刻在多媒体信息中插入推送信息播放给观看用户。
具体地,当观看用户处于某个感兴趣时刻时,则为了与观看用户的当前情绪形成互动,获取与每个感兴趣时刻的多媒体信息片段对应的提示信息,并将提示信息插入到与感兴趣时刻对应的、信息推送时刻对应的多媒体信息片段中播放给观看用户,由此,一方面,避免观看用户手动搜索其对当前多媒体信息感兴趣的内容,即可自动获取到相关信息,提升了观看用户的观看体验;另一方面,显示提示信息的时机为用户感兴趣的时刻,营造了一种多媒体信息和用户互动的效果,提高了用户和产品的粘性;又一方面,提高了提示信息的提示成功率。
在本发明的一个实施例中,根据各观看用户的实时专注度提取与多个感兴趣时刻对应的多媒体信息进行剪辑,生成多媒体信息的推荐片花。
具体而言,处理器将各观看用户的实时专注度发送给多媒体剪辑设备,多媒体剪辑设备,用于根据各观看用户的实时专注度提取与多个感兴趣时刻对应的多媒体信息进行剪辑,生成多媒体信息的推荐片花。
可以理解,在实际应用中,如果根据观看用户的个人喜好或者当前比较受欢迎的热点元素进行多媒体信息对应的推荐片花的生成,显然会大大提高多媒体信息对应的推荐片花的推广效果等,因此,在本发明的实施例中,根据观看用户的实时专注度提取与播放的多媒体信息对应的多个感兴趣时刻,比如,将用户的实时专注度大于预设阈值的时刻作为感兴趣时刻,并将与多个感兴趣时刻对应的多个多媒体信息片段进行剪辑生成推荐片花。由此,保证了当前推荐片花中的多媒体信息片段均为观看用户感兴趣的片段。
综上所述,发明实施例的多媒体信息的评测系统,以用户难以自主更改的实时生理信号为依据,控制相关反馈设备进行相应的反馈操作,便于直观而又准确的显示用户在观看多媒体信息时的专注度。
为了实现上述实施例,本发明还提出一种非临时性计算机可读存储介质,当所述存储介质中的指令由处理器被执行时,使得能够执行如上述实施例所述的多媒体信息的评测方法。
为了实现上述实施例,本发明还提出一种计算机程序产品,当所述计算机程序产品中的指令处理器执行时,执行如上述实施例所述的多媒体信息的评测方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (17)

1.一种多媒体信息的评测方法,其特征在于,包括:
在所述多媒体信息的播放过程中,获取各观看用户的实时生理反应信号;
根据所述各观看用户的实时生理反应信号确定所述各用户观看所述多媒体信息的实时专注度,并根据所述各观看用户的实时专注度生成第一控制指令;
根据所述第一控制指令对第一反馈设备进行相应的控制操作。
2.如权利要求1所述的方法,其特征在于,还包括:
根据所述各观看用户的实时专注度对所述多媒体信息进行评测,并根据评测结果生成第二控制指令;
根据所述第二控制指令控制第二反馈设备进行相应的控制操作。
3.如权利要求1所述的方法,其特征在于,还包括:
根据所述各观看用户的实时专注度确定专注度大于预设阈值的信息推送时刻;
在所述信息推送时刻在所述多媒体信息中插入推送信息播放给所述观看用户。
4.如权利要求1所述的方法,其特征在于,还包括:
根据所述各观看用户的实时专注度提取与多个感兴趣时刻对应的多媒体信息进行剪辑,生成所述多媒体信息的推荐片花。
5.如权利要求1所述的方法,其特征在于,所述根据所述各观看用户的实时生理反应信号确定所述各用户观看所述多媒体信息的实时专注度,包括:
根据预设策略分析所述各观看用户的实时生理反应信号,并提取所述各用户的实时专注特征信息;
应用预设算法对所述各用户的实时专注特征信息进行计算,获取所述各用户的实时专注度。
6.一种多媒体信息的评测系统,其特征在于,包括:生理反应信号采集设备、多媒体播放设备、第一反馈设备、以及处理器;
其中,所述多媒体播放设备,用于向观看用户播放多媒体信息;
所述生理反应信号采集设备,用于在所述多媒体信息的播放过程中,获取各观看用户的实时生理反应信号,并将所述实时生理反应信号发送给所述处理器;
所述处理器,用于根据所述各观看用户的实时生理反应信号确定所述各用户观看所述多媒体信息的实时专注度,并根据所述各观看用户的实时专注度生成第一控制指令发送给所述第一反馈设备;
所述第一反馈设备,用于根据所述第一控制指令进行相应的控制操作。
7.如权利要求6所述的系统,其特征在于,所述生理反应信号采集设备,包括:
皮肤电导采集设备、心率采集设备、心电采集设备、眼动采集设备、脑电采集设备号中的一种或者多种信号组合。
8.如权利要求6所述的系统,其特征在于,所述第一反馈设备包括:
灯光设备、升降设备、图像设备中的一种或者多种组合。
9.如权利要求6所述的系统,其特征在于,
为每个观看用户对应设置第一反馈设备;或者,
为每个观看用户集合对应设置第一反馈设备。
10.如权利要求6所述的系统,其特征在于,还包括:第二反馈设备,
所述处理器,还用于根据所述各观看用户的实时专注度对所述多媒体信息进行评测,并根据评测结果生成第二控制指令发送给所述第二反馈设备;
所述第二反馈设备,用于根据所述第二控制指令进行相应的控制操作。
11.如权利要求10所述的系统,其特征在于,所述第二反馈设备包括:
灯光设备、升降设备、图像设备中的一种或者多种组合。
12.如权利要求10所述的系统,其特征在于,
为每个观看用户对应设置第二反馈设备;或者,
为每个观看用户集合对应设置第二反馈设备。
13.如权利要求6所述的系统,其特征在于,还包括:座椅,
为每个座椅设置对应的生理反应信号采集设备。
14.如权利要求6所述的系统,其特征在于,
所述处理器,还用于将所述各观看用户的实时专注度发送给所述多媒体播放设备;
所述多媒体播放设备,还用于根据所述各观看用户的实时专注度确定专注度大于预设阈值的信息推送时刻,并在所述信息推送时刻在所述多媒体信息中插入推送信息播放给所述观看用户。
15.如权利要求6所述的系统,其特征在于,还包括:多媒体剪辑设备,
所述处理器,还用于将所述各观看用户的实时专注度发送给所述多媒体剪辑设备;
所述多媒体剪辑设备,用于根据所述各观看用户的实时专注度提取与多个感兴趣时刻对应的多媒体信息进行剪辑,生成所述多媒体信息的推荐片花。
16.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-5任一所述的多媒体评测方法。
17.一种计算机程序产品,其特征在于,当所述计算机程序产品中的指令由处理器执行时,执行如权利要求1-5任一所述的多媒体评测方法。
CN201810636536.0A 2018-06-20 2018-06-20 多媒体信息的评测方法和系统 Pending CN109062399A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810636536.0A CN109062399A (zh) 2018-06-20 2018-06-20 多媒体信息的评测方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810636536.0A CN109062399A (zh) 2018-06-20 2018-06-20 多媒体信息的评测方法和系统

Publications (1)

Publication Number Publication Date
CN109062399A true CN109062399A (zh) 2018-12-21

Family

ID=64821063

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810636536.0A Pending CN109062399A (zh) 2018-06-20 2018-06-20 多媒体信息的评测方法和系统

Country Status (1)

Country Link
CN (1) CN109062399A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110062495A (zh) * 2019-03-28 2019-07-26 深圳市宏智力科技有限公司 脑电波书灯及其控制方法
CN111227849A (zh) * 2020-02-11 2020-06-05 杭州同绘科技有限公司 一种基于vr的注意力评估系统及评估方法
CN112363627A (zh) * 2020-11-26 2021-02-12 西安慧脑智能科技有限公司 基于脑机交互的注意力训练方法和系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110158864A1 (en) * 2009-12-29 2011-06-30 Health & Life Co., Ltd. Physiological Test Device
CN103238311A (zh) * 2011-01-13 2013-08-07 株式会社尼康 电子设备及电子设备的控制程序
KR20130088645A (ko) * 2012-01-31 2013-08-08 한국전자통신연구원 시선 추적을 이용한 광고 제공 방법
CN104665785A (zh) * 2015-01-26 2015-06-03 周常安 生理反馈系统
CN104936028A (zh) * 2015-06-30 2015-09-23 深圳市九洲电器有限公司 基于脑波信号的机顶盒控制方法、装置、机顶盒及系统
CN104994409A (zh) * 2015-06-30 2015-10-21 北京奇艺世纪科技有限公司 一种媒体数据的剪辑方法和装置
CN105700690A (zh) * 2016-03-31 2016-06-22 云南省交通科学研究所 一种基于移动平台的脑电多媒体控制系统
CN207424921U (zh) * 2017-10-13 2018-05-29 上海大学 一种多模观影评价系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110158864A1 (en) * 2009-12-29 2011-06-30 Health & Life Co., Ltd. Physiological Test Device
CN103238311A (zh) * 2011-01-13 2013-08-07 株式会社尼康 电子设备及电子设备的控制程序
KR20130088645A (ko) * 2012-01-31 2013-08-08 한국전자통신연구원 시선 추적을 이용한 광고 제공 방법
CN104665785A (zh) * 2015-01-26 2015-06-03 周常安 生理反馈系统
CN104936028A (zh) * 2015-06-30 2015-09-23 深圳市九洲电器有限公司 基于脑波信号的机顶盒控制方法、装置、机顶盒及系统
CN104994409A (zh) * 2015-06-30 2015-10-21 北京奇艺世纪科技有限公司 一种媒体数据的剪辑方法和装置
CN105700690A (zh) * 2016-03-31 2016-06-22 云南省交通科学研究所 一种基于移动平台的脑电多媒体控制系统
CN207424921U (zh) * 2017-10-13 2018-05-29 上海大学 一种多模观影评价系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110062495A (zh) * 2019-03-28 2019-07-26 深圳市宏智力科技有限公司 脑电波书灯及其控制方法
CN110062495B (zh) * 2019-03-28 2021-08-24 深圳市宏智力科技有限公司 脑电波书灯及其控制方法
CN111227849A (zh) * 2020-02-11 2020-06-05 杭州同绘科技有限公司 一种基于vr的注意力评估系统及评估方法
CN111227849B (zh) * 2020-02-11 2022-04-01 杭州同绘科技有限公司 一种基于vr的注意力评估系统及评估方法
CN112363627A (zh) * 2020-11-26 2021-02-12 西安慧脑智能科技有限公司 基于脑机交互的注意力训练方法和系统

Similar Documents

Publication Publication Date Title
US11743527B2 (en) System and method for enhancing content using brain-state data
Stern Classical and vignette television advertising dramas: Structural models, formal analysis, and consumer effects
CN108319643A (zh) 多媒体信息的评测方法和系统
Rooney et al. Actually in the cinema: A field study comparing real 3D and 2D movie patrons' attention, emotion, and film satisfaction
Soleymani et al. A multimodal database for affect recognition and implicit tagging
US9106958B2 (en) Video recommendation based on affect
Costello et al. Understanding the experience of interactive art: Iamascope in Beta_space
CN110019853A (zh) 感兴趣场景识别方法和系统
CN109062399A (zh) 多媒体信息的评测方法和系统
CN104983435A (zh) 一种兴趣取向值测验的刺激信息编制方法
CA2758272A1 (en) Method and system for measuring user experience for interactive activities
US10455282B2 (en) Sensed content delivery
CN109063954A (zh) 教师教学的测评方法和系统
CN106202226A (zh) 一种资源推荐方法及装置
US20210158228A1 (en) Information processing device, information processing method, information processing system, display device, and reservation system
Vermeulen et al. Heartefacts: augmenting mobile video sharing using wrist-worn heart rate sensors
CN109085917A (zh) 提示信息播放方法和系统
Reeves et al. The challenges of using biodata in promotional filmmaking
Kim Bio‐signal‐processing‐based convolutional neural networks model for music program scene editing
Ye Streamer-Interface-Viewer Entanglement: An Analysis on the Discursive and Affective Live-Streaming Chatroom Interface
Ye Streamer-Interface-Viewer Entanglement in Popular Chinese Social Media Apps: An Analysis of the Discursive and Affective Live-Streaming Chatroom Interfaces.
Bird et al. A grounded theory of music-video use in an exercise facility
Stratton Nonverbal communication and the influence of film success: A literature review
Aukes A Matter of Taste: A study on the influences on YouTube's influencers
Hammond et al. Continuous measures of audience immersion: validating behavioural and physiological measures against self-report

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination