WO2020220180A1 - 媒体内容推荐方法及设备 - Google Patents

媒体内容推荐方法及设备 Download PDF

Info

Publication number
WO2020220180A1
WO2020220180A1 PCT/CN2019/084922 CN2019084922W WO2020220180A1 WO 2020220180 A1 WO2020220180 A1 WO 2020220180A1 CN 2019084922 W CN2019084922 W CN 2019084922W WO 2020220180 A1 WO2020220180 A1 WO 2020220180A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
user
media content
evaluation
sound
Prior art date
Application number
PCT/CN2019/084922
Other languages
English (en)
French (fr)
Inventor
曹秋枫
丁送星
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Priority to PCT/CN2019/084922 priority Critical patent/WO2020220180A1/zh
Priority to CN201980094051.6A priority patent/CN113574525A/zh
Publication of WO2020220180A1 publication Critical patent/WO2020220180A1/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/40Data acquisition and logging

Abstract

本申请实施例提供一种媒体内容推荐方法及设备,该方法包括:在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息;根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。本实施例通过用户的图像信息或声音信息能够准确的确定用户对于当前播放的媒体内容是否感兴趣,从而能够向用户推荐用户感兴趣的节目,以提高推荐媒体内容的精确性。

Description

媒体内容推荐方法及设备 技术领域
本申请涉及多媒体技术领域,尤其涉及一种媒体内容推荐方法及设备。
背景技术
随着计算机技术的发展,智能多媒体播放设备的功能越来越丰富,服务于智能多媒体播放设备的内容提供方也越来越多,产生了越来越多的播放内容。
现有技术中,多媒体设备在为用户推荐媒体内容时,常常基于历史播放记录进行推荐。具体地,用户通过账号登录多媒体设备,多媒体设备获取该账号对应的历史播放记录,并根据该历史播放记录获取相似的媒体内容,并将该相似的媒体内容推荐给用户。当用户观看媒体内容后,多媒体设备会将已播放的媒体内容记录至历史播放记录,从而在下一次媒体推荐时,根据新的历史播放记录进行相似媒体内容推荐。
然而,通过历史播放记录来推荐节目,并不能精确的向用户推荐媒体内容。
发明内容
本申请实施例提供一种媒体内容推荐方法及设备,以实现精确的向用户推荐媒体内容。
第一方面,本申请实施例提供一种媒体内容推荐方法,在媒体内容播放时,获取用户的反应状态信息,其中反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息,其次根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。
在上述过程中,通过用户的图像信息或声音信息能够准确的确定用户对于当前播放的媒体内容是否感兴趣,其次将获取的评价信息作为向用户推荐其他媒体内容的依据,从而能够使得向用户推荐的其他媒体内容为用户感兴趣的内容,以提高推荐媒体内容的精确性。
在一种可能的实施方式中,图像信息包括图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,预设时间段为播放媒体内容中的预设内容的时间段。
其中,通过在预设时间段内设置多种图像采集频率,从而使得图像采集设备所采集的图像可以应用于各种不同的场景,以提升图像采集设备的适用性。
在一种可能的实施方式中,图像信息还包括图像采集设备在预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,第一图像采集频率高于第二图像采集频率。
其中,通过在其他时间段基于第二图像采集频率采集图像,其中,第一图像采集频率高于第二图像采集频率,从而能够提高处理效率并节省多媒体设备的存储空间。
在一种可能的实施方式中,声音信息包括声音采集设备在预设时间段采集的一段或多段声音,预设时间段为播放媒体内容中的预设内容的时间段,在预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
其中,通过在预设时间段设置各种可选的采集频率采集一段或多段声音,以提升声音采集设备的适用性。
在一种可能的实施方式中,在获取用户的反应状态信息之前,首先获取用户指示设备开启的授权信息,具体的:
若反应状态信息包括图像信息,根据用户的第一授权信息,开启图像采集设备,第一授权信息用于指示图像采集设备的开启;
若反应状态信息包括声音信息,根据用户的第二授权信息,开启声音采集设备,第二授权信息用于指示声音采集设备的开启;
若反应状态信息包括图像信息和声音信息,则根据第一授权信息开启图像采集设备和根据第二授权信息开启声音采集设备。
在上述过程中,根据用户的授权信息开启图像采集设备和/或声音采集设备,从而能够确保获取用户的反应状态信息是在用户授权的情况下进行的,避免侵犯用户隐私,以提升用户体验,并且根据反映信息具体确定需要开启的设备,从而节省了资源,避免浪费。
在一种可能的实施方式中,根据反应状态信息,获取用户对媒体内容的评价信息,包括:
若反应状态信息包括图像信息,根据用户的面部表情信息获取用户对媒体内容的评价信息;
若反应状态信息包括声音信息,根据用户的声音情感信息获取用户对媒体内容的评价信息;
若反应状态信息包括图像信息和声音信息,根据用户的面部表情信息和声音情感信息获取用户对媒体内容的评价信息;
其中,面部表情信息是根据图像信息获取的用户在观看媒体内容时的面部情感信息,声音情感信息是根据声音信息获取的用户在观看预设内容时的声音情感信息。
在上述过程中,用户的面部表情信息以及用户的声音感情信息均能够直观并准确的反映用户在观看媒体内容时的状态,从而能够确保获取的评价信息的可靠性。
在一种可能的实施方式中,根据用户的面部表情信息获取用户对媒体内容的评价信息,包括:
若用户的面部表情信息是在预设时间段获取的,则获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息;
若用户的面部表情信息与标准面部表情信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的面部表情信息与标准面部表情信息不一致,则确定用户对媒体内容的评价为减分评价。
其中,将用户的面部表情信息与标准面部表情信息进行比较的实现过程较为简单,其次根据比较确定用户的评价信息具体为加分评价还是减分评价,通过加减分的方式能够有效提升获取评价信息的效率。
在一种可能的实施方式中,根据用户的面部表情信息获取用户对媒体内容的评价信息,包括:
若用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息;
根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。
在上述过程中,当用户面部表情信息是在其他时间段获取时,实时通过用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息,从而从而能够快速有效的确定用户对于节目的反馈效果,保证评价信息的准确性。
在一种可能的实施方式中,根据用户的声音情感信息获取用户对媒体内容的评价信息,包括:
获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息;
若用户的声音情感信息与标准声音情感信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的声音情感信息与标准声音情感信息不一致,则确定用户对媒体内容的评价为减分评价。
其中,将用户的声音情感信息与标准声音情感信息进行比较,从而确定用户对于当前播放的媒体内容的评价信息,能够准确的获取用户对于预设时间段的节目内容的反馈,从而提升用户的评价信息的真实性和有效性。
在一种可能的实施方式中,获取用户的反应状态信息之后,方法还包括:
根据图像信息或声音信息,获取至少一个用户的身份标识;
根据反应状态信息,获取用户对媒体内容的评价信息之后,方法还包括:
将每个用户对媒体内容的评价信息与用户的身份标识关联。
在上述过程中,通过将媒体内容的评价信息与用户的身份标识相关联,从而使得在后续向用户推荐媒体内容时,可以根据当前关联的信息进行推荐媒体内容的推荐,以提升评价信息的利用率,提高推荐准确度。
在一种可能的实施方式中,根据用户的面部表情信息和用户的声音情感信息获取用户对媒体内容的评价信息,包括:
根据图像信息获取至少一个用户的身份标识;
获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致;
根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息,标准声音情感信息是根据预设内容预先定义的信息。
在上述过程中,将面部表情信息与声音情感信息相匹配,其次能够针对每个用户的身份标识分别根据各自的面部表情信息以及声音情感信息确定其评价信息,以提升 用户评价信息获取的全面性以及针对性。
在一种可能的实施方式中,在媒体内容播放之前,方法还包括:
根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种;
根据图像信息或声音信息,获取至少一个用户的身份标识,包括:
根据用户的身份标识与人脸的对应关系以及图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
根据用户的身份标识与声音的对应关系以及声音信息中所包括的声音,获取至少一个用户的身份标识。
其中,通过预先输入用户的身份标识与用户特征,可以使得在后续进行媒体内容推荐时直接进行匹配即可,而无需再实时获取以及匹配,提高了操作效率。
在一种可能的实施方式中,根据反应状态信息,获取用户对媒体内容的评价信息之后,方法还包括:
若评价信息为加分信息,则更新用户对媒体内容的评价信息,得到更新后的评价信息;
若评价信息为减分信息,则根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。
其中,当用户对媒体内容的评价为减分评价时,通过当前状态信息之后的状态信息综合确定是否需要更新用户的评价信息,从而避免了误检测导致的评价信息出错,提升评价信息的准确性。
在一种可能的实施方式中,在媒体内容播放之前,方法还包括:
识别用户的身份标识,若根据用户的身份标识获取到用户的历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容。
在上述实现方式中,若根据用户的身份标识能够获取到历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容,能够有效提升推荐的效率以及历史评价信息的可用性。
在一种可能的实施方式中,媒体内容播放结束之后,方法还包括:
根据用户的评价信息,确定评价列表,评价列表中包括用户已评价的媒体内容;
向媒体源平台发送评价列表,并获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。
在上述实现方式中,通过向媒体源平台发送根据用户的评价信息确定的评价列表,从而使得当前待推荐给用户的媒体内容是用户感兴趣的,以提升媒体内容推荐的准确性。
在一种可能的实施方式中,根据用户的评价信息,确定评价列表,包括:
若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据满足第一预设条件的媒体内容,确定评价列表。
在上述实现方式中,在仅有一个待推荐的用户时,推荐满足第一预设条件的媒体 节目,其中第一预设条件仅考虑当前单个用户的喜好,从而提升媒体节目推荐的效率与准确性。
在一种可能的实施方式中,根据用户的评价信息,确定评价列表,包括:
若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据均满足第二预设条件的媒体内容,确定评价列表。
其中,在多名用户同时观看媒体内容时,根据各用户的评价信息与第二预设条件进行媒体内容的推荐,其中第二预设条件考虑了多名用户共同的喜好,因此能够推荐适合多名用户的媒体内容,以提升用户体验。
第二方面,本申请实施例提供一种媒体内容推荐模块,包括输入模块和处理模块,其中,输入模块,用于在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息;
处理模块,用于根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。
在一种可能的实施方式中,图像信息包括图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,预设时间段为播放媒体内容中的预设内容的时间段。
在一种可能的实施方式中,图像信息还包括图像采集设备在预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,第一图像采集频率高于第二图像采集频率。
在一种可能的实施方式中,声音信息包括声音采集设备在预设时间段采集的一段或多段声音,预设时间段为播放媒体内容中的预设内容的时间段,在预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
在一种可能的实施方式中,在获取用户的反应状态信息之前,处理模块还用于:
若反应状态信息包括图像信息,根据用户的第一授权信息,开启图像采集设备,第一授权信息用于指示图像采集设备的开启;
若反应状态信息包括声音信息,根据用户的第二授权信息,开启声音采集设备,第二授权信息用于指示声音采集设备的开启;
若反应状态信息包括图像信息和声音信息,则根据第一授权信息开启图像采集设备和根据第二授权信息开启声音采集设备。
在一种可能的实施方式中,处理模块具体用于:
若反应状态信息包括图像信息,根据用户的面部表情信息获取用户对媒体内容的评价信息;
若反应状态信息包括声音信息,根据用户的声音情感信息获取用户对媒体内容的评价信息;
若反应状态信息包括图像信息和声音信息,根据用户的面部表情信息和声音情感信息获取用户对媒体内容的评价信息;
其中,面部表情信息是根据图像信息获取的用户在观看媒体内容时的面部情感信息,声音情感信息是根据声音信息获取的用户在观看预设内容时的声音情感信息。
在一种可能的实施方式中,处理模块具体用于:
若用户的面部表情信息是在预设时间段获取的,则获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息;
若用户的面部表情信息与标准面部表情信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的面部表情信息与标准面部表情信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的实施方式中,处理模块具体用于:
若用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息;
根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。
在一种可能的实施方式中,处理模块具体用于:
获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息;
若用户的声音情感信息与标准声音情感信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的声音情感信息与标准声音情感信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的实施方式中,获取用户的反应状态信息之后,处理模块还用于:
根据图像信息或声音信息,获取至少一个用户的身份标识;
根据反应状态信息,获取用户对媒体内容的评价信息之后,将每个用户对媒体内容的评价信息与用户的身份标识关联。
在一种可能的实施方式中,处理模块具体用于:
根据图像信息获取至少一个用户的身份标识;
获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致;
根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息,标准声音情感信息是根据预设内容预先定义的信息。
在一种可能的实施方式中,在媒体内容播放之前,处理模块还用于:
根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种;
根据用户的身份标识与人脸的对应关系以及图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
根据用户的身份标识与声音的对应关系以及声音信息中所包括的声音,获取至少一个用户的身份标识。
在一种可能的实施方式中,处理模块还用于:
根据反应状态信息,获取用户对媒体内容的评价信息之后,若评价信息为加分信息,则更新用户对媒体内容的评价信息,得到更新后的评价信息;
若评价信息为减分信息,则根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。
在一种可能的实施方式中,处理模块还用于:
在媒体内容播放之前,识别用户的身份标识,若根据用户的身份标识获取到用户的历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容。
在一种可能的实施方式中,还包括:输出模块;
处理模块还用于:在媒体内容播放结束之后,根据用户的评价信息,确定评价列表,评价列表中包括用户已评价的媒体内容;
输出模块用于:向媒体源平台发送评价列表;
输入模块还用于:获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。
在一种可能的实施方式中,处理模块具体用于:
若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据满足第一预设条件的媒体内容,确定评价列表。
在一种可能的实施方式中,处理模块具体用于:
若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据均满足第二预设条件的媒体内容,确定评价列表。
第三方面,本申请实施例提供一种媒体内容推荐设备,包括:处理器和存储器;
其中,所述处理器用于调用所述存储器中存储的计算机程序,执行以下操作:
在媒体内容播放时,获取用户的反应状态信息,所述反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的所述用户的图像信息或通过声音采集设备获取的所述用户的声音信息;
根据所述反应状态信息,获取所述用户对所述媒体内容的评价信息,其中,所述评价信息作为向所述用户推荐其他媒体内容的依据。
在一种可能的实现方式中,所述存储器还用于;存储图像采集设备获取的用户的图像信息和/或声音采集设备采集的声音信息。
在一种可能的实现方式中,图像信息包括图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,预设时间段为播放媒体内容中的预设内容的时间段。
在一种可能的实现方式中,图像信息还包括图像采集设备在预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,第一图像采集频率高于第二图像采集频率。
在一种可能的实现方式中,声音信息包括声音采集设备在预设时间段采集的一段 或多段声音,预设时间段为播放媒体内容中的预设内容的时间段,在预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
在一种可能的实现方式中,所述处理器还用于:
在获取用户的反应状态信息之前,若反应状态信息包括图像信息,根据用户的第一授权信息,开启图像采集设备,第一授权信息用于指示图像采集设备的开启;
若反应状态信息包括声音信息,根据用户的第二授权信息,开启声音采集设备,第二授权信息用于指示声音采集设备的开启;
若反应状态信息包括图像信息和声音信息,则根据第一授权信息开启图像采集设备和根据第二授权信息开启声音采集设备。
在一种可能的实现方式中,所述处理器具体用于:
若反应状态信息包括图像信息,根据用户的面部表情信息获取用户对媒体内容的评价信息;
若反应状态信息包括声音信息,根据用户的声音情感信息获取用户对媒体内容的评价信息;
若反应状态信息包括图像信息和声音信息,根据用户的面部表情信息和声音情感信息获取用户对媒体内容的评价信息;
其中,面部表情信息是根据图像信息获取的用户在观看媒体内容时的面部情感信息,声音情感信息是根据声音信息获取的用户在观看预设内容时的声音情感信息。
在一种可能的实现方式中,所述处理器具体用于:
若用户的面部表情信息是在预设时间段获取的,则获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息;
若用户的面部表情信息与标准面部表情信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的面部表情信息与标准面部表情信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的实现方式中,所述处理器具体用于:
若用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息;
根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。
在一种可能的实现方式中,所述处理器具体用于:
获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息;
若用户的声音情感信息与标准声音情感信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的声音情感信息与标准声音情感信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的实现方式中,所述处理器还用于:
获取用户的反应状态信息之后,根据图像信息或声音信息,获取至少一个用户的身份标识;
根据反应状态信息,获取用户对媒体内容的评价信息之后,还包括:
将每个用户对媒体内容的评价信息与用户的身份标识关联。
在一种可能的实现方式中,所述处理器具体用于:
根据图像信息获取至少一个用户的身份标识;
获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致;
根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息,标准声音情感信息是根据预设内容预先定义的信息。
在一种可能的实现方式中,所述处理器还用于:
在媒体内容播放之前,根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种;
根据图像信息或声音信息,获取至少一个用户的身份标识,包括:
根据用户的身份标识与人脸的对应关系以及图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
根据用户的身份标识与声音的对应关系以及声音信息中所包括的声音,获取至少一个用户的身份标识。
在一种可能的实现方式中,所述处理器还用于:
根据反应状态信息,获取用户对媒体内容的评价信息之后,若评价信息为加分信息,则更新用户对媒体内容的评价信息,得到更新后的评价信息;
若评价信息为减分信息,则根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。
在一种可能的实现方式中,所述处理器还用于:
在媒体内容播放之前,识别用户的身份标识,若根据用户的身份标识获取到用户的历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容。
在一种可能的实现方式中,还包括:通信模块;
所述处理器还用于:媒体内容播放结束之后,根据用户的评价信息,确定评价列表,评价列表中包括用户已评价的媒体内容;
所述通信模块用于:向媒体源平台发送评价列表,并获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。
在一种可能的实现方式中,所述处理器具体用于:
若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据满足第一预设条件的媒体内容,确定评价列表。
在一种可能的实现方式中,所述处理器具体用于:
若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据均满足第二预设条件的媒体内容,确定评价列表。
第四方面,本申请实施例提供一种终端设备,包括:媒体内容推荐装置、摄像头和/或麦克风。
其中,媒体内容推荐装置用于执行如上第一方面以及第一方面各种可能的实施方式中任一的方法。
第五方面,本申请实施例提供一种存储介质,所述存储介质用于存储计算机程序,所述计算机程序被计算机或处理器执行时用于实现第一方面任一项所述的认证方法。
本申请实施例提供的媒体内容推荐方法及设备,该方法包括:根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种。在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息。根据反应状态信息,获取用户对媒体内容的评价信息。将每个用户对媒体内容的评价信息与用户的身份标识关联。通过获取用户的身份标识与用户特征的对应关系,从而将每个用户对媒体内容的评价信息与各自对应的身份标识相关联,以便后续针对不同身份标识的用户进行个性化的媒体内容推荐,以提升媒体内容推荐的准确性,其中通过用户的面部表情信息或用户的声音情感信息获取用户对媒体内容的评价信息,能够实时的基于用户对媒体内容的反馈进行评价信息的获取,从而保证评价信息的真实性和准确性。
附图说明
图1A为本申请一实施例提供的媒体内容推荐系统示意图一;
图1B为本申请一实施例提供的媒体内容推荐系统示意图二;
图2为本申请一实施例提供的媒体内容推荐方法的流程图一;
图3为本申请一实施例提供的媒体内容推荐方法的流程图二;
图4为本申请一实施例提供的媒体内容推荐方法的流程图三;
图5为本申请一实施例提供的媒体内容推荐方法的流程图四;
图6为本申请一实施例提供的媒体内容推荐方法的流程图五;
图7为本申请一实施例提供的媒体内容推荐方法的流程图六;
图8为本申请一实施例提供的媒体内容推荐方法的流程示意图一;
图9为本申请一实施例提供的媒体内容推荐方法的流程示意图二;
图10为本申请一实施例提供的媒体内容推荐方法的信令流程图一;
图11为本申请一实施例提供的媒体内容推荐方法的信令流程图二;
图12为本申请一实施例提供的媒体内容推荐装置的结构示意图一;
图13为本申请一实施例提供的媒体内容推荐装置的结构示意图二;
图14为本申请一实施例提供的媒体内容推荐设备的硬件结构示意图。
具体实施方式
本申请实施例描述的系统架构以及业务场景是为了更加清楚的说明本申请实施例的 技术方案,并不构成对于本申请实施例提供的技术方案的限定,本领域普通技术人员可知,随着系统架构的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
图1A为本申请一实施例提供的媒体内容推荐系统示意一。如图1A所示,该推荐系统包括:多媒体设备101以及媒体源平台102,其中,多媒体设备101包括图像采集设备1011以及声音采集设备1012。
具体的,多媒体设备101可以包括但不限于数字电视(Digital Television,DTV)、移动设备、膝上型计算机、外设广告设备、平板设备、个人数字助理(Personal Digital Assistant,PDA)、智能终端、具有无线连接功能的手持式设备或车载设备等其他便携式设备。
在本实施例中,在多媒体设备101上设置有图像采集设备1011,其中图像采集设备1011例如可以为摄像头,还例如可为网络摄像设备等,其中网络摄像设备例如可以包括:镜头、图像传感器、微型处理器、图像处理器、存储器等,此处对图像采集设备1011的具体实现方式不作限定。
其次,在多媒体设备上还设置有声音采集设备1021,其中声音采集设备1021可以包括但不限于远场麦克风、数字广播终端、或个人数字助理等,其主要具备采集声音的功能。该声音采集设备1021中装配有麦克风,麦克风能够对周边环境中的声音信号进行采集,本实施例对声音采集设备1021不做特别限定。
媒体源平台102为用于向多媒体设备101提供媒体内容的平台,其中媒体源平台例如可以是不同运营商提供的平台、不同视频商提供的平台,例如还可以为存储有本地视频的平台等,此处对此不做特别限制。该些媒体源平台可以提供音频、视频等多媒体文件。
多媒体设备101与媒体源平台102之间进行交互,其中交互的方式例如可以通过有线网络,该有线网络例如可以包括同轴电缆、双绞线和光纤等,其中交互的方式还例如可以是无线网络,该无线网络可以是2G网络、3G网络、4G网络或者5G网络、无线保真(Wireless Fidelity,简称WIFI)网络等。此处对交互的具体类型或者具体形式并不做限定,能够实现多媒体设备101与媒体源平台102交互的功能即可。
在另一种可能的实现方式中,上述介绍的图像采集设备1011和声音采集设备1021还可以为独立的外接设备,下面结合图1B进行介绍,图1B为本申请一实施例提供的媒体内容推荐系统示意图二,如图1B所示,该推荐系统包括:多媒体设备101、媒体源平台102、图像采集设备103以及声音采集设备104。
其中,图像采集设备103与声音采集设备104可以为两个独立的设备,也可以为耦合成的一个设备,与多媒体设备101外接,其中外接的具体实现方式例如可以为有线连接,如通过同轴电缆、双绞线和光纤等线缆连接,还例如可以为无线连接,例如通过蓝牙、无线网络等连接,本实施例对此不做限定。
基于现有技术中通过历史播放记录来推荐节目,从而导致不能精确的向用户推荐媒体内容的问题,本申请实施例提供了一种媒体内容推荐方法,下面结合图1所示的系统和图2对本申请实施例提供的媒体内容推荐方法进行详细介绍。
图2为本申请一实施例提供的媒体内容推荐方法的流程图一。本实施例的执行主 体例如可以为上述推荐系统中的多媒体设备。如图2所示,该方法包括:
S201、在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息。
具体的,在用户通过多媒体设备播放媒体内容时,可以获取用户的反应状态信息。该媒体内容可以为音频,也可以为视频,本实施例对多媒体内容的实现方式不做特别限制。
在媒体内容播放的同时,多媒体设备可以控制图像采集设备或声音采集设备中的至少一个的工作。例如,控制图像采集设备采集用户的图像信息。或者,控制声音采集设备来采集用户的声音信息。再或者,控制图像采集设备和声音采集设备同时工作,以获取用户的图像信息和声音信息。
在本实施例中,图像信息例如可以是以帧为单位的图片信息,还例如可以是一段视频信息等。当用户位于多媒体设备附近时,图像信息中包括用户的图像,声音信息包括用户的声音。
在一种可能的实现方式中,例如可以根据预设周期获取用户的反应状态信息,还例如可以实时获取用户的反应状态信息,即在检测到用户的动作变化或者监听到用户的声音信息时获取用户的反应状态信息,本领域技术人员可以理解,具体的获取用户反应状态信息的方式可以根据实际需求进行设定,本实施例对此不作限制。
S202、根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。
在本实施例中,用户对媒体内容的评价信息例如可以为评价分数,如1至100之间的各个数值为评价信息,用于指示不同的用户满意度。或者,用户对媒体内容的评价信息还例如可以为预设的程度指标,如将不感兴趣、有兴趣、十分感兴趣等程度指标作为用户的评价信息,其具体的评价信息可以根据实际需求进行选择,此处对此不作特别限制。
其中,反应状态信息包括图像信息或声音信息,则可以根据图像信息或声音信息获取用户对媒体内容的评价信息。
针对图像信息而言,可以根据用户的图像信息获取用户对当前播放的媒体内容的反馈信息,如通过图像信息判断用户的面部是否正对多媒体设备,或者通过图像信息判断用户是否在睡觉等,根据用户是否对该媒体内容的反馈信息确定用户对该媒体内容是否感兴趣,以对该媒体内容进行加分或减分评价。例如,用户在睡觉,则对媒体内容进行减分评价,用户在关注媒体内容,则对媒体内容进行加分评价。
针对声音信息而言,可以根据用户的声音信息获取用户对当前播放的媒体内容的反馈信息,例如通过声音信息判断用户是否还在观看节目,或者通过声音信息判断用户对当前播放的媒体内容是否有对应的声音反应,如在媒体内容播放至笑点时用户是否发出笑声,在播放至泪点时用户是否有哭声。例如,用户在笑点发出笑声,则对媒体内容进行加分评价,若用户在笑点没有发出笑声,则对媒体内容进行减分评价。
在具体实现过程中,可以仅根据图像信息来获取评价信息,也可以仅根据声音信息来获取评价信息。也可以结合图像信息和声音信息来获取评价信息。当结合图像信 息和声音信息来获取评价信息时,可以将二者的评价进行叠加,也可以采用加权的方式获取综合评价,本实施例对具体的实现方式不做特别限制。
在本申请实施例中,该评价信息作为向用户推荐其他媒体内容的依据,例如,根据评价信息获取其中评价高的媒体内容,向用户推荐该评价高的媒体内容的相关或同类型的节目。
本申请实施例提供的媒体内容推荐方法,该方法包括:在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息;根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。通过用户的图像信息或声音信息能够准确的确定用户对于当前播放的媒体内容是否感兴趣,其次将获取的评价信息作为向用户推荐其他媒体内容的依据,从而能够使得向用户推荐的其他媒体内容为用户感兴趣的内容,以提高推荐媒体内容的精确性。
在上述实施例的基础上,下面结合具体的实施例对本申请提供的媒体内容推荐方法进行进一步地详细介绍,首先结合图3进行说明,图3为本申请一实施例提供的媒体内容推荐方法的流程图二,如图3所示,该方法包括:
S301、根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种。
其中,用户的身份标识用于指示不同的用户身份,为确保在获取用户的评价信息时能够将评价信息与用户的身份标识相关联,以便后续针对各用户进行个性化内容推荐,因此可以预先存储用户的身份标识。
具体的,用户输入的身份标识例如可以为用户的姓名,用户的账号以及昵称等,本领域技术人员可以理解,身份标识只要可以区分不同的用户即可,本实施例对身份标识的具体设置方式不做特别限制。当向用户进行节目推荐时,通过用户输入的身份标识进行推荐,能够使用户感觉到亲近,提高用户的体验。
该用户特征包括人脸或声音中的一种,例如某用户输入用户1的身份标识,并进行面部信息录入,从而获取到用户1的人脸的用户特征,又例如某用户输入张三的身份标识,并进行声音信息录取,从而获取到张三的声音的用户特征,其中用户特征还可以同时包含人脸和声音。
本领域技术人员可以理解,在另一种可能的实现方式中,为了简化用户的操作,用户也可以不输入身份标识以及用户特征,而是多媒体设备针对用户的图像信息和/或声音信息来获取用户的身份标识。例如,针对图像信息而言,可以通过人脸识别等技术来获取人脸,然后根据该人脸生成身份标识“用户A”,将该人脸与“用户A”关联。
针对声音信息而言,可以通过声音识别来获取声音,然后将该声音与“用户B”关联。本领域技术人员可以理解,当图像信息中有一个用户时,根据人脸和声音生成一个用户标识即可,可将人脸、声音与“用户C”关联。
S302、在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获 取的用户的声音信息。
在本申请实施例中,针对不同的媒体内容设置有不同的预设时间段,其中,预设时间段为播放媒体节目中的预设内容的时间段,媒体内容中的预设内容例如可以为媒体内容中的笑点内容,还例如可以为媒体内容中的泪点内容,或者其他预设的梗等。本领域技术人员可以理解,媒体内容中的预设内容可以为能够产生节目效果的内容,其具体的选择可以根据实际媒体内容的内容进行设定,此处对此不作限制。
其中,预设时间段为播放媒体内容中的预设内容的时间段,与预设内容的播放时长相对应,媒体内容中可以包含至少一个预设时间段。在具体实现过程中,该媒体内容的属性信息中会设置该预设内容的时间段,多媒体设备根据该属性信息,可以确定该预设时间段,媒体节目的完整时长可以对应至少一个预设时间段,以及除预设时间段之外的其他时间段。
在本申请实施例中,为了提高处理效率并节省多媒体设备的存储空间,在预设时间段与其他时间段的采集频率不同,其次对于图像信息和声音信息的采集可以不是实时,而是根据一定的采集频率来进行采集。
在一种可选的实现方式中,图像信息包括图像采集设备在预设时间段内按照不规间隔采集的一张或多张图像,其中不规则间隔例如可以为随机生成的时间间隔,还例如可以为预设的不规则间隔等,此处对此不做限定。或者,图像信息包括图像采集设备在预设时间段持续不间断采集的一张或多张图像,具体的,图像采集设备只要处于开启状态,就持续不间断的采集用户的图像信息。再或者,图像信息包括图像采集设备在预设时间段基于第一图像采集频率采集的一张或多张图像,其中第一图像采集频率为根据实际需求选择的频率,本实施对此不作限定。
在另一种可选的实现方式中,图像信息还包括图像采集设备在预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像,其中第二图像采集频率为根据实际需求选择的频率,本实施对此不作限定。
本领域技术人员可以理解,为确保预设时间段内能够准确的获取用户对预设内容对应的节目效果是否做出反应,因此设置第一图像采集频率高于第二图像采集频率,例如当前播放的为某个喜剧短片,在2分15秒至2分45秒存在一个笑点内容,在3分35秒至4分5秒存在一个笑点内容,则此处存在两个预设时间段,在此两个预设时间段内设置图像采集频率为每1秒采集一次,在其他时间段内可设置图像采集频率为每5秒采集一次。
或者,也可以设置第一图像采集频率小于第二图像采集频率,其均可以根据实际需求进行设置,此处对此不作限定,只要设置第一图像采集频率不等于第二图像采集频率即可。
在可选的实施例中,声音信息包括声音采集设备在预设时间段采集的一段或多段声音,其中,在预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集,其具体实现方式与图像信息的采集类似,此处不再赘述。
在本申请实施例中,为避免侵犯用户隐私,可以在获取到用户对图像采集设备和/或声音采集设备授权的开启权限后,再获取用户的反应状态信息。
在一种可选的实现方式中,若反映状态信息仅包括图像信息,则根据用户的第一授权信息,开启图像采集设备,其中,第一授权信息用于指示图像采集设备的开启;
具体的,获取用户的第一授权信息,第一授权信息用于指示图像采集设备的开启的开启,其次根据第一授权信息,开启图像采集设备。
例如可以在用户打开多媒体设备时,或者播放媒体内容之前,通过多媒体设备向用户显示需要开启图像采集设备的提示信息。然后接收用户输入的用户操作从而获取用户的第一授权信息,其次根据第一授权信息获取图像采集设备的开启权限,从而开启图像采集设备。
在另一种可选的实现方式中,若反应状态信息包括声音信息,根据用户的第二授权信息,开启声音采集设备,其中,第二授权信息用于指示声音采集设备的开启。或者,若反应状态信息包括图像信息和声音信息,则根据第一授权信息开启图像采集设备和根据第二授权信息开启声音采集设备,其实现方式与上述开启图像采集设备的类似。
例如根据第一授权信息获取图像采集设备的开启权限以及根据第二授权信息开启声音采集设备的开启权限,从而开启图像采集设备,以及在预设时间段的前N秒开启声音采集设备,其中N为大于等于0的整数。。
通过根据用户的授权信息开启图像采集设备和/或声音采集设备,从而能够确保获取用户的反应状态信息是在用户授权的情况下进行的,避免侵犯用户隐私,以提升用户体验。
S303、根据图像信息或声音信息,识别至少一个用户的身份标识。
本实施例中,预先获取了用户的身份标识与用户特征的对应关系,在根据图像信息识别用户的身份标识时,根据用户的身份标识与人脸的对应关系以及图像信息中所包括的人脸,获取至少一个用户的身份标识。
具体的,图像信息中包括至少一个用户的人脸,对图像信息中的至少一个用户进行人脸识别,其中进行人脸识别的具体实现方式可以参照现有技术,此处不进行赘述,其次根据人脸识别得到人脸,根据图像信息中所包括的人脸和用户的身份标识的对应关系以获取至少一个用户的身份标识。
在根据声音信息识别用户的身份标识时,根据用户的身份标识与声音的对应关系以及声音信息中所包括的声音,获取至少一个用户的身份标识。
在根据声音信息识别至少一个用户的身份标识时,对声音信息中所包含的声音进行声音处理以及特征分析,例如可以进行频段分析,音色分析等,从而得到声音信息中所包括的声音,其次,根据声音和用户的身份标识的对应关系以获取至少一个用户的身份标识。
若没有预先获取到用户的身份标识与用户特征的对应关系,即用户没有输入相应设置,而当前用户的人脸或者声音均为第一次出现,则可以从图像信息中所包括的人脸或声音信息中所包括的声音中获取身份标识,将用户的身份标识设置为用户A、用户B、用户C等,能够进行用户的区分即可,其次根据图像信息中的人脸或者声音信息中的声音建立用户的身份标识与用户特征之间的对应关系。
在本实施例中,识别用户的身份标识的操作进行一次即可,后续可以直接根据用 户的身份标识对该用户的身份标识对应的评价信息进行更新即可,无需再次获取身份标识,从而简化了操作。
S304、根据反应状态信息,获取用户对媒体内容的评价信息。
若反应状态信息包括图像信息,根据用户的面部表情信息获取用户对媒体内容的评价信息。
具体的,对图像信息中至少一个用户的图像信息进行分析处理,从而获取用户的面部表情信息,其中,面部表情信息是根据图像信息获取的用户在观看媒体内容时的面部情感信息,面部表情信息例如可以为用户的整体面部表情,还例如可以为用户的部分面部肌肉状态,如嘴角状态、眼睛状态等,此处对面部表情信息不做限制。
其中,用户在观看媒体内容的面部表情信息可以反映用户在观看媒体内容时对于节目的效果反馈,因此通过获取面部表情信息能够精确的获取到用户对于当前播放的媒体内容的满意程度。
若反应状态信息包括声音信息,根据用户的声音情感信息获取用户对媒体内容的评价信息。
具体的,对声音信息中至少一个用户的声音信息进行分析处理,从而获取用户的声音情感信息,其中声音情感信息例如可以包含声音的情感状态,或者声音的分贝等,此处对此不做限定。
其中,用户在观看媒体内容的声音情感信息同样可以反映用户在观看媒体内容时对于节目的效果反馈,其实现方式与根据面部表情信息获取的类似,此处不再赘述。
若反应状态信息包括图像信息和声音信息,根据用户的面部表情信息和声音情感信息获取用户对媒体内容的评价信息。
当结合面部表情信息和声音情感信息获取评价信息时,可以将二者的评价进行叠加,也可以采用加权的方式获取综合评价,本实施例对具体的实现方式不做特别限制,其中三种方式均可以实现对评价信息的获取。
S305、将每个用户对媒体内容的评价信息与用户的身份标识关联。
进一步地,在上述步骤中识别了用户的身份标识,在确定至少一个用户对媒体内容的评价信息之后,可以将各用户对媒体内容的评价信息与用户的身份标识相关联,从而使得在后续向用户推荐媒体内容时,可以根据当前关联的信息进行推荐媒体内容的推荐。
本申请实施例提供的媒体内容推荐方法,包括:根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应关系,用户特征包括人脸或声音中的一种。在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息。根据反应状态信息,获取用户对媒体内容的评价信息。将每个用户对媒体内容的评价信息与用户的身份标识关联。通过获取用户的身份标识与用户特征的对应关系,从而将每个用户对媒体内容的评价信息与各自对应的身份标识相关联,以便后续针对不同身份标识的用户进行个性化的媒体内容推荐,以提升媒体内容推荐的准确性,其中通过用户的面部表情信息或用户的声音情感信息获取用户对媒体内容的评价信息,能够实时的基于用户对媒体内容的反馈进行评价信息的获取,从而保证 评价信息的真实性和准确性。
在上述实施例的基础上,本申请提供的媒体内容推荐方法可以单独根据用户的面部表情信息或声音情感信息获取用户对媒体内容的评价信息,还可以根据用户的面部表情信息和声音情感信息共同获取用户对媒体内容的评价信息,下面首先结合图4对根据用户的面部表情信息获取用户对媒体内容的评价信息的实现方式进行介绍。
图4为本申请一实施例提供的媒体内容推荐方法的流程图三,如图4所示,该方法包括:
S401、判断用户的面部表情信息是否是在预设时间段获取的,若是,则执行S402,若否,则执行S406。
在本实施例中,媒体内容包括预设时间段和除预设时间段之外的其他时间段,其中在预设时间段和其他时间段的图像采集频率不同,因此首先判断用户的面部表情信息对应的获取时间段是否为预设时间段。
具体的,在根据图像信息获取用户的面部表情信息时,对应将获取的时间节点关联至各面部表情信息,其次根据获取的时间节点与预设时间段对应的起始时间点进行比较,从而判断用户的面部表情的获取是否在预设时间段。
S402、获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息。
若用户的面部表情信息是在预设时间段内获取的,则表明此时媒体内容的节目内容存在对应的节目效果,因此需要检测用户对该预设时间段内对应的媒体内容是否存在反馈信息。
具体的,预设时间段对应的标准面部表情信息为根据预设时间段的节目内容预先设定的表情信息,例如预设时间段对应的节目内容是一个笑点内容时,则对应的标准面部表情信息为“笑”,又例如第三时间段对应的节目内容是一个泪点内容时,则对应的标准面部表情信息为“哭”。
本领域技术人员可以理解,各预设时间段对应的标准面部表情信息是根据节目内容进行具体设定的,本实施例对此不作限制。
S403、判断用户的面部表情信息是否与标准面部表情信息一致,若是,则执行S404,若否,则执行S405。
进一步地,判断用户的面部表情信息是否符合标准面部表情信息,例如标准面部表情信息为“笑”时,则微笑、大笑、捂嘴笑均可以认为与标准面部表情信息一致,又例如标准面部表情信息为“哭”时,则流泪、擦拭眼角,嘴角向下等均可以确定为与标准面部表情信息一致。
其中,判断的具体实现方式例如可以为根据用户的面部表情信息进行特征提取及分析,其次根据特征分析的结果进行判断,还例如从用户的图像信息所包含的人脸中提取形状点,将提取的形状点与预设的标准面部表情信息的形状点对比从而进行判断,本实施例对判断的具体实现方式不做特别限制。
S404、确定用户对媒体内容的评价为加分评价。
若用户的面部表情信息与标准面部表情信息一致,则可以确定获取到用户对当前的节目内容的反馈信息为正面反馈,从而确定用户对媒体内容的评价为加分评价,若 该图像信息非首张图像,则还可以更新用户对媒体内容的评价信息,得到更新后的评价信息。
具体的,例如评价信息为分数时,则可以直接在该节目的分数上直接加上该加分评价对应的分数,如未更新前媒体内容的评价信息为88分,当媒体内容播放至一个笑点内容时,获取到用户的面部表情信息为微笑,其中微笑对应的分数例如为2分,则更新后的评价信息为90分。
其中,评价信息还例如可以为感兴趣、不感兴趣等程度指标,继续使用上述示例的数据,则例如可以在感兴趣的程度指标上增加其权重值,其次根据各程度指标更新后的权重值得到更新后的评价信息。
S405、确定用户对媒体内容的评价为减分评价。
若用户的面部表情信息与标准面部表情信息不一致,则可以确定获取到用户对当前的节目内容的反馈信息为负面反馈,从而确定用户对媒体内容的评价为减分评价。
S406、根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。
具体的,当对媒体内容的评价为减分评价时,为了避免误检测或者获取的时间节点不正确,例如用户在泪点内容时流泪,但是当前时间节点用户的面部表情信息中未检测到用户流泪,或者在某笑点内容时,因为用户反应较慢,在笑点内容对应的预设时间段之后的几秒钟才笑,因此针对减分评价,需要继续获取状态信息之后的状态信息。
根据状态信息之后获取的状态信息,综合确定是否需要更新用户的评价信息,例如当前对媒体内容的评价为减分评价,则可以根据当前的用户的面部表情信息之后的预设数量的图像信息对应的用户的面部表情信息再确定是否更新评价信息。
例如,假设当前的图像信息之后的10张图像信息中,有6张用户的面部表情信息对应减分评价,4张用户的面部表情信息对应加分评价,则确定按照当前减分评价对应的减分信息进行减分。
再例如,还可以按照当前用户的面部表情信息之后的10张图像信息的加分信息和减分信息的权重值进行评价信息的更新,本领域技术人员可以理解,当用户对媒体内容的评价为减分评价时,其更新用户对媒体内容的评价信息的方式可以根据需求进行选择,通过根据状态信息之后获取的状态信息,确定是否更新评价信息,能够提升用户评价信息的准确性。
S407、获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息。
若用户的面部表情信息不是在预设时间段内获取的,即是在预设时间段之外的其他时间段获取的,则表明此时不存在预设的节目效果,直接根据用户的面部表情信息和评价映射表获取评价信息,其中评价映射表用于指示不同面部状态对应的评价信息。
例如评价映射表中存储有打哈欠、面部未面对多媒体设备、眼神涣散等面部信息,其中各个不同的面部信息均对应各自的评价信息,例如打哈欠减5分,面部未面对多媒体设备减10分,或者面部未面对多媒体设备对应不感兴趣的程度指标,具体的评价映射表可以根据实际需求进行设定,此处对此不作限制。
S408、根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。
根据用户的面部表情信息和评价映射表,在评价映射表中查找与当前用户的面部表情信息向匹配的面部信息,其次根据匹配的面部信息对应的评价信息获取第一用户对媒体内容的评价信息。
在本实施例中,评价映射表中存储的面部信息对应的评价信息同样可以分为加分评价或者减分评价,其次根据加分评价或减分评价更新用户对媒体内容的评价信息,其实现方式与上述介绍的类似,此处不再赘述。
本申请实施例提供的媒体内容推荐方法,包括:判断用户的面部表情信息是否是在预设时间段获取的,若是,则获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息。判断用户的面部表情信息是否与标准面部表情信息一致,若是,则确定用户对媒体内容的评价为加分评价。若否,则确定用户对媒体内容的评价为减分评价。根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。若用户的面部表情信息不是在预设时间段内获取的,获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息。根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。通过在预设时间段内根据用户的面部表情信息与标准面部表情信息,确定用户对媒体内容的评价为减分评价或者加分评价,从而能够快速有效的确定用户对于节目的反馈效果,其次当用户对媒体内容的评价为减分评价时,通过当前状态信息之后的状态信息综合确定是否需要更新用户的评价信息,从而避免了误检测导致的评价信息出错,提升评价信息的准确性。其次在其他时间段通过用户的面部表情信息与评价映射表获取用户的评价信息,从而能够实时的根据用户的面部表情确定用户对当前播放的媒体内容是否感兴趣,以保证用户评价信息的真实性。
在上述实施例的基础上,其次结合图5对根据用户的声音信息获取用户对媒体内容的评价信息的实现方式进行介绍。
图5为本申请一实施例提供的媒体内容推荐方法的流程图四,如图5所示,该方法包括:
S501、获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息。
具体的,预设时间段内的节目内容存在对应的节目效果,其中,预设时间段对应的标准声音情感信息为根据预设时间段的节目内容预先设定的声音信息,其中标准声音情感信息是根据预设内容预先定义的声音信息,例如可以包含声音的情感状态,声音的分贝大小等。
例如预设时间段的节目内容对应笑点内容,则对应的标准声音情感信息的情感状态为笑,其中声音的分贝例如可以为1分贝,或者预设时间段的节目内容对应泪点内容时,对应的标准声音情感信息的情感状态为哭。
本领域技术人员可以理解,各预设时间段对应的标准声音情感信息是根据节目内容进行具体设定的,本实施例对此不作限制。
S502、判断用户的声音情感信息与标准声音情感信息是否一致,若是,则执行S503,若否,则执行S504。
将用户的声音情感信息与标准声音情感信息进行比较,例如可以对用户的声音信息进行特征分析,从而获取用户的声音情感信息,还可以获取用户的声音分贝等,其次判断用户的声音情感信息与标准声音情感信息是否一致。
例如在泪点内容时,检测到用户的声音情感信息的情感状态为哭,并且声音的分贝大于1分贝,则可以确定用户的声音信息与标准声音情感信息一致。例如在泪点内容时检测到用户的声音情感信息的声音分贝小于1分贝,或者检测到情感状态不为哭,则可以确定用户的声音情感信息与标准声音情感信息不一致。
S503、确定用户对媒体内容的评价为加分评价。
S504、确定用户对媒体内容的评价为减分评价。
其中,S503、S504的实现方式与S404、S405类似,具体内容可参见上述实施例的介绍,此处不再赘述。
本申请实施例提供的媒体内容推荐方法,包括:获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息。判断用户的声音情感信息与标准声音情感信息是否一致,若是,则确定用户对媒体内容的评价为加分评价。若否,则确定用户对媒体内容的评价为减分评价。通过用户的声音情感信息与标准声音情感信息进行比较,从而确定用户对于当前播放的媒体内容的评价信息,能够准确的获取用户对于预设时间段的节目内容的反馈,从而提升用户的评价信息的真实性和有效性。
在上述实施例的基础上,在声音信息与图像信息对应同一用户的身份标识时,则可以将上述图4中针对图像信息的评价信息与图5中针对声音信息的评价信息进行叠加或加权处理,得到用户对该媒体内容的综合评分。
例如,当前声音信息以及图像信息对应的身份标识均为用户1,则表明获取到了用户1的图像信息和声音信息,可根据用户1的声音信息和图像信息共同确定用户1对当前播放的媒体内容的评价信息。
在一种可能的实现方式中,例如根据用户1的图像信息确定用户1对预设笑点的节目内容作出微笑的反馈,并且根据用户1的声音信息确定用户1对预设笑点的节目内容发出了笑声,则在用户1对该媒体内容的评价信息上同时加上微笑对应的分数以及笑声对应的分数。
在另一种可能的实现方式中,例如在预设时间段内根据用户的图像信息获取到20张用户微笑的图像信息,并且根据用户的声音信息获取到用户的笑声,但是用户的笑声低于预设分贝,则可以根据每张图片中的微笑程度对应的加分权重,以及低于预设分贝的笑声对应的加分权重对用户的评价信息进行更新。
在上述实施例的基础上,为了减轻多媒体设备的处理能力,简化处理过程,可以弱化声音的识别过程,即不需要建立声音与用户的身份标识的关联,从而获取用户的评价信息。下面结合图6进行详细介绍。
图6为本申请一实施例提供的媒体内容推荐方法的流程图五,如图6所示,该方法包括:
S601、根据图像信息获取至少一个用户的身份标识。
其中,S601的实现方式与S303类似,此处不再赘述。
S602、获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致。
在本实施例中,声音情感信息和面部表情信息之间存在匹配关系,例如当前检测到的声音情感信息为笑声,则根据至少一个用户的面部表情信息确定面部表情是“笑”的面部表情信息为匹配的目标面部表情信息。
若当前存在多个用户的面部表情均为“笑”,则可以根据声音情感信息中的声音分贝与笑的程度之间的对应关系获取与声音情感信息匹配的面部表情信息,其中获取与声音情感信息匹配的目标面部表情信息的方式可以根据实际需求进行选择,此处对此不作限定。
其中,不同用户的身份标识对应不同的用户特征,对目标面部表情信息进行处理得到目标面部表情信息对应的用户特征,例如为人脸,其次根据至少一个用户的身份标识对应的用户特征,确定与目标面部表情信息的用户特征匹配的用户的身份标识,从而获取到目标面部表情对应的目标身份标识。
目标面部表情信息与声音情感信息所对应的情感一致,例如目标面部表情指示的表情为笑时,对应的声音情感信息指示的声音为笑声等,其中情感还例如可以设定为难过、伤心、愉悦等,本实施例对其具体对应的情感不作限定。
S603、根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息。
判断声音情感信息是否与预设时间段对应的标准声音情感信息一致,若一致,则确定用户对媒体内容的评价为加分评价,若不一致,则确定用户对媒体内容的评价为减分评价,从而获取目标身份标识对应的用户对媒体内容的评价信息,其具体实现方式与上述实施例中介绍的根据声音情感信息单独获取用户的评价信息类似,此处不再赘述。
本申请实施例提供的媒体内容推荐方法,包括:根据图像信息获取至少一个用户的身份标识。获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致。根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息。通过将面部表情信息与声音情感信息相匹配,其次获取目标面部表情信息对应的身份标识,从而能够针对每个用户的身份标识分别根据各自的面部表情信息以及声音情感信息确定其评价信息,以提升用户评价信息获取的全面性以及针对性。
在上述实施例的基础上,在媒体内容播放之前,还可以识别用户的身份标识,若根据用户的身份标识获取到用户的历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容。
具体的,首先获取用户的身份标识,其次检测根据用户的身份标识是否可以获取到用户的历史评价信息,若可以检测到,则表明该身份标识对应的用户在该多媒体设备上观看过媒体内容,此时根据该用户的历史评价信息决定推荐给用户的媒体内容,其中推荐的媒体内容例如可以为与该用户的历史评价信息中评价信息高于预设分数媒 体内容同类型的媒体内容,或者推荐的媒体内容还可以为其他用户针对该用户的历史评价信息中评价信息高于预设分数媒体内容进行推荐的内容等,其具体实现方式可以根据需求进行设定,此处对此不作限制。
在上述实施例的基础上,本申请提供的媒体内容推荐方法在根据状态信息,获取用户对所述媒体内容的评价信息之后,还可以根据待推荐用户的数量不同,从而进行区别推荐,下面结合具体的实施例对媒体内容进行推荐的实现方式进行说明,结合图7进行介绍。
图7为本申请一实施例提供的媒体内容推荐方法的流程图六,如图7所示,该方法包括:
S701、获取识别出的待推荐的用户的数量。
在本实施例中,进行媒体内容推荐之前,需要首先识别待推荐的用户,其次判断当前待推荐用户的数量,例如当前仅有张三观看媒体内容,则根据张三的评价信息推荐张三感兴趣的媒体内容即可。或者,当前是张三和李四一起观看媒体内容,则需要推荐张三和李四共同感兴趣的媒体内容。
在一种可能的实现方式中,可以通过图像信息进行识别,以获取待推荐的用户的数量,或者,还可以在媒体内容开始播放之前,接收用户输入的待推荐的用户的标识或数量等,本实施例对是被待推荐用户的数量的实现方式不作限定。
S702、若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名。
若识别出一个待推荐的用户,则直接推荐该用户感兴趣的媒体内容即可,在本实施例中,各用户关联有对不同媒体内容的评价信息,其中关联关系例如可以如表1所示:
表1
身份标识 媒体内容 评价信息
张三 速度与激情 97
张三 海王 80
李四 速度与激情 34
李四 海王 77
具体的,确定其中与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容,其中第一预设条件为以该用户的评价作为衡量指标的条件,具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名,或者第一预设条件中还可以包括用户预先输入的条件,如用户设置有不要推荐恐怖片等,第一预设条件的具体设置方式可以根据实现需求进行设定,此处对此不作限定。
下面以表1中用户的身份标识和评价信息为例进行说明,例如当前张三是待推荐的用户,其中第一预设条件例如为评价信息高于90分,则根据表1中用户相关联的不同媒体内容的评价信息,可以确定评价满足第一预设条件的媒体内容为“速度与激情”。
S703、根据满足第一预设条件的媒体内容,确定评价列表。
在一种可能的实现方式中,可以获取满足第一预设条件的媒体内容的节目类型, 其次获取同类型的所有媒体内容,根据排名在预设数量之前的至少一个媒体内容确定评价列表,或者,还可以根据观看过满足第一预设条件的媒体内容的其余用户的推荐信息,从而确定与评价满足第一预设条件的媒体内容类似的媒体内容,以确定评价列表。
S704、若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容;第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名。
若识别出至少两个待推荐的用户,则需要推荐多个用户共同感兴趣的媒体内容,具体的,首先获取与至少两个待推荐的用户中每个用户各自关联的评价信息,并确定每个用户各自关联的评价信息均满足第二预设条件的媒体内容,其中第二预设条件为以多名用户各自的评价作为衡量指标的条件,具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名,第二预设条件中还可以包括用户预先输入的条件等,此处对此不作限定。
以表1中用户的身份标识和评价信息为例进行说明,例如当前张三和李四是待推荐的用户,则需要推荐两个用户都感兴趣的媒体内容,其中第二预设条件例如可以为对评价得分高于70分,则根据表1中两个用户各自关联的不同媒体内容的评价信息,可以确定评价信息均满足第二预设条件的媒体内容为“海王”。
S705、根据均满足第二预设条件的媒体内容,确定评价列表。
其次根据评价信息均满足第二预设条件的媒体内容,确定评价列表,其具体的实现方式与上述根据第一预设条件确定评价列表类似,此处不再赘述。
S706、向媒体源平台发送评价列表,并获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。
进一步地,将评价列表发送至媒体源平台,其次媒体源平台将媒体内容的内容返回至多媒体设备,最终获取媒体源平台返回的待推荐给用户的媒体内容,进行媒体内容的推荐。
本申请实施例提供的媒体内容推荐方法,包括:获取识别出的待推荐的用户的数量。若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名。根据评价满足第一预设条件的媒体内容,确定评价列表。若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容;第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名。根据均满足第二预设条件的媒体内容,确定评价列表。向媒体源平台发送评价列表,并获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。通过用户的评价信息进行媒体内容的推荐,其中在只有单个用户时,仅根据该用户的评价信息与第一预设条件进行节目推荐,从而能够提升节目推荐的准确性,在多名用户同时观看媒体内容时,根据各用户的评价信息与第二预设条件进行媒体内容的推荐,其中第二预设条件考虑了多名用户共同的喜好,因此能够推荐适合多名用户的媒体内容,以提升用户体验。
下面以一个具体场景下的示例对本申请提供的媒体内容推荐方法进行说明,结合 图8以及图9进行介绍,图8为本申请一实施例提供的媒体内容推荐方法的流程示意图一,图9为本申请一实施例提供的媒体内容推荐方法的流程示意图二。
如图8所示,假设此时播放的是一个情感剧,在媒体内容播放时,摄像头每隔30秒记录下观影人的照片,其中30秒即为第一图像采集频率,以及提前根据预设“梗”开启远场麦克风,其中预设“梗”即为预设时间段对应的节目内容。
在预设“梗”对应的预设时间段内,远场麦克风采集用户声音,和/或按照第二图像采集频率采集用户的图像信息,如每隔5秒记录下观影人的照片,其次将采集的照片和声音输入检测观影人状态模型。
其中,检测观影人状态模型在具体实现时,可以仅根据观影人的照片来获取评价信息,也可以仅根据观影人的声音来获取评价信息,也可以结合观影人的照片和声音来获取评价信息,其中三种实现方式的具体操作步骤可参照图4、图5以及图6的实施例。
其次根据状态模型的分析结果获取用户对媒体内容的评价信息,如根据丈夫A不在电视机前、丈夫A眼睛闭上了、丈夫A为正对电视等分析结果进行自动评价,可以确定丈夫A不喜欢观看此类影片,而根据妻子B擦眼泪、正对着电视看、笑等分析结果进行自动评价,可确定妻子B喜欢观看此类影片。
具体的,在用户开始观影时,摄像头首先检测当前观影人的身份,若当前仅有妻子B一人观影,则为妻子B推荐相似的情感剧,若检测到当前丈夫A和妻子B两人进行观影时,因为根据丈夫之前对情感剧的评价表示丈夫对此类影片不感兴趣,因此需要推荐两人都比较喜欢的影片,以提升用户体验。
下面结合图9对检测观影人状态模型的具体实现过程进行介绍,如图9所示,多媒体设备首先进入观影界面,其次在用户的授权下开启电视摄像头,通过摄像头获取用户的图像信息,以识别当前观影人的信息,根据识别的结果判断当前待推荐的用户数量,当前观影人例如为丈夫A和/或丈夫B。
若当前观影人只有妻子B一个人,则直接根据妻子B喜好的媒体内容推荐相似节目即可,若当前观影人为丈夫A和妻子B,则根据丈夫A和妻子B均喜欢的媒体内容进行相似节目的推荐,如根据丈夫A和妻子B对多个媒体内容的评价信息确定丈夫A和妻子B都比较喜欢搞笑综艺节目,则将相似的搞笑综艺节目推荐给两人。
其次,丈夫A和妻子B开始观影,摄像头按照第一图像采集频率每隔一段时间拍摄丈夫A和妻子B的照片,从而获取丈夫A和妻子B的观影状态,并实时判断当前媒体内容播放的时间点是否到达预设笑梗的时间点。
若未到达预设笑梗的时间点,即当前媒体内容播放的时间节点所处的时间段为其他时间段,此时根据各观影人的观影状态分别判断各观影人是否沉浸在观影体验中,其中判断的方式例如可以为判断观影人是否离开座位、面部是否正对电视、眼睛是否处于睁开状态等,若确定观影人沉浸在观影体验中,则表明观影效果较好,在该观影人对该媒体内容的评价上加分,若确定观影人未沉浸在观影体验中,则表明观影效果较差,在该观影人的对该媒体内容的评价上减分。
若到达预设笑梗的时间点,则首先开启远场麦克风,也可在预设笑梗的时间点之前开启远场麦克风,其次针对各个观影人的观影状态分别进行检测以及判断,首先判 断在笑梗时间段内是否检测到观影人在笑,若未检测到观影人笑,则可以确定未达到笑梗的效果,在该观影人对媒体内容的评价上减分,其中,在未检测到观影人笑时,直接更新评价信息,无需再判断是否检测到笑声,从而简化了判断流程,提高系统的效率。
其次,若检测到观影人在笑,则可以初步确定笑梗内容产生了一定的节目效果,接着判断笑梗时间段内是否检测到有笑声,若未检测到有笑声,则表明观影人对笑梗内容作出的反馈一般,此时在该观影人对媒体内容的评价上加上图像信息的笑对应的分数即可,若检测到有笑声,则表明用户对笑梗内容产生的节目效果作出的反馈非常好,此时在该观影人对媒体内容的评价上加上图像信息的笑以及笑声对应的分数。
其中,针对不同的观影人,按照媒体内容播放的时间序列,在预设笑梗对应的预设时间段以及预设笑梗之外的其他时间段,实时更新各观影人对当前播放的媒体内容的评价,从而分别获取丈夫A和妻子B对该节目的评价。
本申请提供的媒体内容推荐方法,根据观影人的图像信息和/或声音信息确定各观影人对媒体内容的评价信息,其次根据观影人的评价信息进行媒体内容的推荐,从而能够提升媒体内容推荐的准确性。
图10为本申请一实施例提供的媒体内容推荐方法的信令流程图一,图11为本申请一实施例提供的媒体内容推荐方法的信令流程图二。
如图10所示,首先多媒体设备接收观影人发送的进入观影应用的指令,其次多媒体设备弹出授权页面,其中授权页面用于获取图像采集设备和声音采集设备的开启权限,其次根据观影人的授权操作,开启图像采集设备和/或声音采集设备,其中声音采集设备可以在预设时间段到达时再开启,以节省资源。
图像采集设备获取观影人的图片信息,根据图片信息识别观影人的身份信息,例如可以根据图片信息的图片识别结果与预先存储的图像信息进行比较,从而获取观影人的身份信息,其次根据观影人的身份信息获取观影人喜好的媒体内容列表,若此时有多个观影人,则获取的媒体内容为多个观影人均喜欢的媒体内容。
将媒体内容列表传输至媒体源平台,其中媒体源平台根据列表信息获取具体的媒体内容,其次多媒体设备接收媒体源平台发送的媒体内容,并将该媒体内容作为相似媒体内容推荐给用户,同时播放该喜好媒体内容。
如图11所示,观影人开始观影,多媒体设备开启图像采集设备采集观影人的图片信息,其次多媒体设备接收图像采集设备发送的观影人观看状态图片,并根据观看状态图片识别观影人是否沉浸在媒体内容的节目内容中,根据识别结果对该观影人对该媒体内容的评价进行加分或者减分。
具体的,媒体源平台对媒体内容进行预先处理,在媒体内容的播放信息中设置有预设梗的时间段,在未到达预设梗对应的时间节点时,循环执行根据观影人的观看状态图片进行评价加分或者减分的操作,例如可以按照第一图像采集频率循环执行,直至到达预设梗对应的开始时间节点。
其次,控制图像采集设备在预设梗即将到达的前N秒开启高速连拍模式,其中高速连拍模式对应的频率为第二图像采集频率,并且多媒体设备控制声音采集设备开启,准备采集观影人的声音信息,应当理解,N为大于等于0的整数。
具体的,在预设梗对应的预设时间段内,图像采集设备按照第二图像采集频率采集观影人的图片信息并发送给多媒体设备,其次多媒体设备根据图片信息识别观影人信息对预设梗的反应,根据识别结果进行评价加分或者评价加分等操作。
其次,声音采集设备在预设梗对应的预设时间段内对观影人的声音进行声音采集,将声音采集的结构发送给多媒体设备,其次多媒体设备根据声音采集的声音信息识别观影人对于预设梗的反应,并对应对评价进行加分或者减分等。
其中,在预设梗对应的预设时间段内,根据图片信息、声音信息进行评价的加减分同样是循环执行的,例如可以按照第二采集频率循环执行,直至到达预设梗对应的结束时间节点。
当预设梗对应的节目内容结束之后,控制图像采集设备恢复低速拍摄模式,并控制声音采集设备关闭,从而能够避免资源的浪费。
在具体实现过程中,媒体内容中可以存在多个预设梗,具体的,按照当前媒体内容具体内容的播放顺序,在预设梗对应的预设时间时间段,以及预设梗之外的其他时间段实时更新各用户对媒体内容的评价信息,从而在媒体内容播放结束时获取各用户对媒体内容的评价信息,以保证评价信息的真实性和有效性。
图12为本申请一实施例提供的媒体内容推荐装置的结构示意图一。如图12所示,该装置120包括:输入模块1201以及处理模块1202。
输入模块1201,用于在媒体内容播放时,获取用户的反应状态信息,反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的用户的图像信息或通过声音采集设备获取的用户的声音信息;
处理模块1202,用于根据反应状态信息,获取用户对媒体内容的评价信息,其中,评价信息作为向用户推荐其他媒体内容的依据。
在一种可能的设计中,图像信息包括图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,预设时间段为播放媒体内容中的预设内容的时间段。
在一种可能的设计中,图像信息还包括图像采集设备在预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,第一图像采集频率高于第二图像采集频率。
在一种可能的设计中,声音信息包括声音采集设备在预设时间段采集的一段或多段声音,预设时间段为播放媒体内容中的预设内容的时间段,在预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
在一种可能的设计中,在获取用户的反应状态信息之前,处理模块1202还用于:
若反应状态信息包括图像信息,根据用户的第一授权信息,开启图像采集设备,第一授权信息用于指示图像采集设备的开启;
若反应状态信息包括声音信息,根据用户的第二授权信息,开启声音采集设备,第二授权信息用于指示声音采集设备的开启;
若反应状态信息包括图像信息和声音信息,则根据第一授权信息开启图像采集设备和根据第二授权信息开启声音采集设备。
在一种可能的设计中,处理模块1202具体用于:
若反应状态信息包括图像信息,根据用户的面部表情信息获取用户对媒体内容的评价信息;
若反应状态信息包括声音信息,根据用户的声音情感信息获取用户对媒体内容的评价信息;
若反应状态信息包括图像信息和声音信息,根据用户的面部表情信息和声音情感信息获取用户对媒体内容的评价信息;
其中,面部表情信息是根据图像信息获取的用户在观看媒体内容时的面部情感信息,声音情感信息是根据声音信息获取的用户在观看预设内容时的声音情感信息。
在一种可能的设计中,处理模块1202具体用于:
若用户的面部表情信息是在预设时间段获取的,则获取预设时间段对应的标准面部表情信息,标准面部表情信息是根据预设内容预先定义的表情信息;
若用户的面部表情信息与标准面部表情信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的面部表情信息与标准面部表情信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的设计中,处理模块1202具体用于:
若用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,评价映射表用于指示不同的面部表情信息对应的评价信息;
根据用户的面部表情信息和评价映射表,获取用户对媒体内容的评价信息。
在一种可能的设计中,处理模块1202具体用于:
获取预设时间段对应的标准声音情感信息,标准声音情感信息是根据预设内容预先定义的声音信息;
若用户的声音情感信息与标准声音情感信息一致,则确定用户对媒体内容的评价为加分评价;
若用户的声音情感信息与标准声音情感信息不一致,则确定用户对媒体内容的评价为减分评价。
在一种可能的设计中,获取用户的反应状态信息之后,处理模块1202还用于:
根据图像信息或声音信息,获取至少一个用户的身份标识;
根据反应状态信息,获取用户对媒体内容的评价信息之后,将每个用户对媒体内容的评价信息与用户的身份标识关联。
在一种可能的设计中,处理模块1202具体用于:
根据图像信息获取至少一个用户的身份标识;
获取与声音情感信息匹配的目标面部表情信息,并从至少一个用户的身份标识中获取与目标面部表情信息对应的目标身份标识,目标面部表情信息与声音情感信息所对应的情感一致;
根据声音情感信息和预设时间段对应的标准声音情感信息,获取目标身份标识对应的用户对媒体内容的评价信息,标准声音情感信息是根据预设内容预先定义的信息。
在一种可能的设计中,在媒体内容播放之前,处理模块1202还用于:
根据用户输入的身份标识以及用户特征,获取用户的身份标识与用户特征的对应 关系,用户特征包括人脸或声音中的一种;
根据用户的身份标识与人脸的对应关系以及图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
根据用户的身份标识与声音的对应关系以及声音信息中所包括的声音,获取至少一个用户的身份标识。
在一种可能的设计中,处理模块1202还用于:
根据反应状态信息,获取用户对媒体内容的评价信息之后,若评价信息为加分信息,则更新用户对媒体内容的评价信息,得到更新后的评价信息;
若评价信息为减分信息,则根据状态信息之后获取的状态信息,确定是否更新用户对媒体内容的评价信息。
在一种可能的设计中,处理模块1202还用于:
在媒体内容播放之前,识别用户的身份标识,若根据用户的身份标识获取到用户的历史评价信息,则根据历史评价信息决定推荐给用户的媒体内容。
本实施例提供的装置,可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,本实施例此处不再赘述。
图13为本申请一实施例提供的媒体内容推荐装置的结构示意图二。如图13所示,本实施例在图12实施例的基础上,还包括:输出模块1303。
在一种可能的设计中,处理模块1302还用于:在媒体内容播放结束之后,根据用户的评价信息,确定评价列表,评价列表中包括用户已评价的媒体内容;
输出模块1303用于:向媒体源平台发送评价列表;
输入模块1301还用于:获取媒体源平台返回的推荐列表,推荐列表包括待推荐给用户的媒体内容。
在一种可能的设计中,处理模块1302具体用于:
若识别出一个待推荐的用户,则确定与待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据满足第一预设条件的媒体内容,确定评价列表。
在一种可能的设计中,处理模块具体1302用于:
若识别出至少两个待推荐的用户,则确定与至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
根据均满足第二预设条件的媒体内容,确定评价列表。
本实施例提供的装置,可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,本实施例此处不再赘述。
图14为本申请一实施例提供的媒体内容推荐设备的硬件结构示意图。如图14所示:
媒体内容推荐设备1401可以通过NFC相关协议进行无线通信,例如与媒体源平台进行无线通信,或者与图像采集设备、声音采集设备等第三方设备进行通信等。
示例性地,媒体内容推荐设备1401可以通过一个或多个通信网络与待通信的电子 设备连接(例如有线或无线)。示例性地,该通信网络可以是局域网,也可以是广域网(wide area networks,WAN)例如互联网。该通信网络可使用任何已知的网络通信协议来实现,上述网络通信协议可以是各种有线或无线通信协议,诸如以太网、通用串行总线(universal serial bus,USB)、火线(FIREWIRE)、全球移动通讯系统(global system for mobile communications,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址接入(code division multiple access,CDMA)、宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE)、蓝牙、无线保真(wireless fidelity,Wi-Fi)、NFC、基于互联网协议的语音通话(Voice over Internet Protocol,VoIP)、或任何其他合适的通信协议。
示例性地,媒体内容推荐设备1401可以通过Wi-Fi或蓝牙与图像采集设备建立连接。又示例性地,媒体内容推荐设备1401不仅通过蓝牙与图像采集设备建立了连接,并通过广域网与媒体源平台建立连接。
其中,媒体内容推荐设备1401可以是移动终端(Mobile Terminal)或用户设备等,如手机、平板电脑、电视、外设广告设备、车载处理装置或具有可移动性的计算机等,可移动性的计算机例如,便携式计算机、袖珍式计算机或手持式计算机等。
示例性的,图14示出了媒体内容推荐设备1401的结构示意图。其中,媒体内容推荐设备1401可以包括处理器1410,外部存储器接口1420,内部存储器1421,通用串行总线(universal serial bus,USB)接口1430,充电管理模块1440,电源管理模块1441,电池1442,天线1,天线2,移动通信模块1450,无线通信模块1460,音频模块1470,扬声器1470A,受话器1470B,麦克风1470C,耳机接口1470D,传感器1480,按键1490,马达1491,指示器1492,摄像头1493,显示屏1494。
可以理解的是,本实施例示意的结构并不构成对媒体内容推荐设备1401的具体限定。在本申请另一些实施例中,媒体内容推荐设备1401可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件,或软件和硬件的组合实现。
其中,处理器1410可以包括一个或多个处理单元,例如:处理器1410可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。在一些实施例中,媒体内容推荐设备1401也可以包括一个或多个处理器1410。其中,控制器可以是媒体内容推荐设备1401的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。处理器1410中还可以设置存储器,用于存储指令和数据。
在一些实施例中,处理器1410中的存储器为高速缓冲存储器。该存储器可以保存处理器1410刚用过或循环使用的指令或数据。如果处理器1410需要再次使用该指令或数据,可从所述存储器中直接调用。这就避免了重复存取,减少了处理器1410的等 待时间,因而提高了媒体内容推荐设备1401的处理效率。
在一些实施例中,处理器1410可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuit sound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purpose input/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
其中,USB接口1430是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为媒体内容推荐设备1401充电,也可以用于媒体内容推荐设备1401与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对媒体内容推荐设备1401的结构限定。在本申请另一些实施例中,媒体内容推荐设备1401也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块1440用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块1440可以通过USB接口1430接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块1440可以通过媒体内容推荐设备1401的无线充电线圈接收无线充电输入。充电管理模块1440为电池1442充电的同时,还可以通过电源管理模块1441为媒体内容推荐设备1401供电。
电源管理模块1441用于连接电池1442,充电管理模块1440与处理器1410。电源管理模块1441接收电池1442和/或充电管理模块1440的输入,为处理器1410,内部存储器1421,显示屏1494,摄像头1493,和无线通信模块1460等供电。电源管理模块1441还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块1441也可以设置于处理器1410中。在另一些实施例中,电源管理模块1441和充电管理模块1440也可以设置于同一个器件中。
媒体内容推荐设备1401的无线通信功能可以通过天线1,天线2,移动通信模块1450,无线通信模块1460,调制解调处理器以及基带处理器等实现。天线1和天线2用于发射和接收电磁波信号。媒体内容推荐设备1401中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块1450可以提供应用在媒体内容推荐设备1401上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块1450可以包括至少一个滤波器,开关,功率放大器,低噪声放大器等。移动通信模块1450可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块1450还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块1450的至少部分功能模块可以被设置于处理器 1410中。在一些实施例中,移动通信模块1450的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器1470A,受话器1470B等)输出声音信号,或通过显示屏1494显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器1410,与移动通信模块1450或其他功能模块设置在同一个器件中。
无线通信模块1460可以提供应用在媒体内容推荐设备14401上的包括无线局域网(wireless local area networks,WLAN),蓝牙,全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),NFC,红外技术(infrared,IR)等无线通信的解决方案。无线通信模块1460可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块1460经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器1410。无线通信模块1460还可以从处理器1410接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,媒体内容推荐设备1401的天线1和移动通信模块1450耦合,天线2和无线通信模块1460耦合,使得媒体内容推荐设备1401可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括GSM,GPRS,CDMA,WCDMA,TD-SCDMA,LTE,GNSS,WLAN,NFC,FM,和/或IR技术等。上述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidou navigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
媒体内容推荐设备1401通过GPU,显示屏1494,以及应用处理器等可以实现显示功能。GPU为图像处理的微处理器,连接显示屏1494和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器1410可包括一个或多个GPU,其执行指令以生成或改变显示信息。
显示屏1494用于显示图像,视频等。显示屏1494包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,媒体内容推荐设备1401可以包括1个或N个显示屏1494,N为大于1的正整数。
媒体内容推荐设备1401可以通过ISP,一个或多个摄像头1493,视频编解码器,GPU,一个或多个显示屏1494以及应用处理器等实现拍摄功能。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通 过NPU可以实现媒体内容推荐设备1401的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口1420可以用于连接外部存储卡,例如Micro SD卡,实现扩展媒体内容推荐设备1401的存储能力。外部存储卡通过外部存储器接口1420与处理器1410通信,实现数据存储功能。例如将音乐、照片、视频等数据文件保存在外部存储卡中。
内部存储器1421可以用于存储一个或多个计算机程序,该一个或多个计算机程序包括指令。处理器1410可以通过运行存储在内部存储器1421的上述指令,从而使得媒体内容推荐设备1401执行本申请一些实施例中所提供的语音切换方法,以及各种功能应用以及数据处理等。内部存储器1421可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统;该存储程序区还可以存储一个或多个应用程序(比如用户特征、用户声音信息等)等。存储数据区可存储媒体内容推荐设备1401使用过程中所创建的数据(比如用户历史观看记录等)等。此外,内部存储器1421可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。在一些实施例中,处理器1410可以通过运行存储在内部存储器1421的指令,和/或存储在设置于处理器1410中的存储器的指令,来使得媒体内容推荐设备1401执行本申请实施例中所提供的媒体内容推荐方法,以及各种功能应用及数据处理。
媒体内容推荐设备1401可以通过音频模块1470,扬声器1470A,受话器1470B,麦克风1470C,耳机接口1470D,以及应用处理器等实现音频功能。例如媒体内容的声音播放,音乐播放等。其中,音频模块1470用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块1470还可以用于对音频信号编码和解码。在一些实施例中,音频模块1470可以设置于处理器1410中,或将音频模块1470的部分功能模块设置于处理器1410中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。媒体内容推荐设备1401可以通过扬声器1470A收听音乐,或收听广播节目等。受话器1470B,也称“听筒”,用于将音频电信号转换成声音信号。
当媒体内容推荐设备1401获取用户的声音信息时,可以通过受话器1470B进行获取。麦克风1470C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当获取用户的声音信息时,可以麦克风1470C获取用户的声音信号,其中麦克风1470C例如可以为远场麦克风,其次将声音信号输入到麦克风1470C。媒体内容推荐设备1401可以设置至少一个麦克风1470C。在另一些实施例中,媒体内容推荐设备1401可以设置两个麦克风1470C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,媒体内容推荐设备1401还可以设置三个,四个或更多麦克风1470C,实现采集声音信号,降噪,还可以识别声音信息,实现定向录音功能等。
耳机接口1470D用于连接有线耳机。耳机接口1470D可以是USB接口1430,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,还可以是美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
传感器1480可以包括压力传感器、陀螺仪传感器、气压传感器、磁传感器、加速度传感器、距离传感器、接近光传感器、指纹传感器、温度传感器、触摸传感器、环境光传感器、骨传导传感器等。
其中,压力传感器用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器可以设置于显示屏。压力传感器的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器电极之间的电容改变。媒体内容推荐设备1401根据电容的变化确定压力的强度。当有触摸操作作用于显示屏,媒体内容推荐设备1401根据压力传感器检测所述触摸操作强度。媒体内容推荐设备也可以根据压力传感器的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器可以用于确定媒体内容推荐设备1401(例如为平板电脑或手机时)的运动姿态。在一些实施例中,可以通过陀螺仪传感器确定媒体内容推荐设备1401围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器检测媒体内容推荐设备1401抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消媒体内容推荐设备1401的抖动,实现防抖。陀螺仪传感器还可以用于导航,体感游戏场景等。
加速度传感器可检测媒体内容推荐设备1401在各个方向上(一般为三轴)加速度的大小。当媒体内容推荐设备1401静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器,用于测量距离。媒体内容推荐设备1401可以通过红外或激光测量距离。在一些实施例中,拍摄场景,媒体内容推荐设备1401可以利用距离传感器180F测距以实现快速对焦。
接近光传感器可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。媒体内容推荐设备1401通过发光二极管向外发射红外光。媒体内容推荐设备1401使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定媒体内容推荐设备1401附近有物体。当检测到不充分的反射光时,媒体内容推荐设备1401可以确定媒体内容推荐设备1401附近没有物体。接近光传感器180G也可用于自动解锁与锁屏。
环境光传感器用于感知环境光亮度。媒体内容推荐设备1401可以根据感知的环境光亮度自适应调节显示屏1494亮度。环境光传感器也可用于获取用户图像信息时视线自动调节白平衡。环境光传感器还可以与接近光传感器配合使用,检测媒体内容推荐设备1401是否处于正常工作状态,以便无效检测等。
指纹传感器(也称为指纹识别器),用于采集指纹。媒体内容推荐设备1401可以利用采集的指纹特性实现指纹解锁,访问应用锁,获取用户权限等。另外,关于指纹传感器的其他记载可以参见名称为“处理通知的方法及电子设备”的国际专利申请 PCT/CN2017/082773,其全部内容通过引用结合在本申请中。
触摸传感器,也可称触控面板或触敏表面。触摸传感器可以设置于显示屏1494,由触摸传感器与显示屏1494组成触摸屏,也称触控屏。触摸传感器1480K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏1494提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器也可以设置于媒体内容推荐设备1401的表面,与显示屏1494所处的位置不同。
骨传导传感器1480M可以获取振动信号。在一些实施例中,骨传导传感器1480M可以获取人体声部振动骨块的振动信号。骨传导传感器1480M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器1480M也可以设置于耳机中,结合成骨传导耳机。音频模块1470可以基于所述骨传导传感器1480M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器1480M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键1490包括开机键,音量键等。按键1490可以是机械按键,也可以是触摸式按键。媒体内容推荐设备1401可以接收按键输入,产生与媒体内容推荐设备1401的用户设置以及功能控制有关的键信号输入。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件程序实现时,可以全部或部分地以计算机程序产品的形式来实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(Digital Subscriber Line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可以用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如,软盘、硬盘、磁带),光介质(例如,DVD)、或者半导体介质(例如固态硬盘(Solid State Disk,SSD))等。

Claims (35)

  1. 一种媒体内容推荐方法,其特征在于,包括:
    在媒体内容播放时,获取用户的反应状态信息,所述反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的所述用户的图像信息或通过声音采集设备获取的所述用户的声音信息;
    根据所述反应状态信息,获取所述用户对所述媒体内容的评价信息,其中,所述评价信息作为向所述用户推荐其他媒体内容的依据。
  2. 根据权利要求1所述的方法,其特征在于,所述图像信息包括所述图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,所述预设时间段为播放所述媒体内容中的预设内容的时间段。
  3. 根据权利要求2所述的方法,其特征在于,所述图像信息还包括所述图像采集设备在所述预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,所述第一图像采集频率高于所述第二图像采集频率。
  4. 根据权利要求1-3任一项所述的方法,其特征在于,所述声音信息包括所述声音采集设备在预设时间段采集的一段或多段声音,所述预设时间段为播放所述媒体内容中的预设内容的时间段,在所述预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
  5. 根据权利要求1-4任一项所述的方法,其特征在于,在所述获取用户的反应状态信息之前,所述方法还包括:
    若所述反应状态信息包括所述图像信息,根据所述用户的第一授权信息,开启所述图像采集设备,所述第一授权信息用于指示所述图像采集设备的开启;
    若所述反应状态信息包括所述声音信息,根据所述用户的第二授权信息,开启所述声音采集设备,所述第二授权信息用于指示所述声音采集设备的开启;
    若所述反应状态信息包括所述图像信息和所述声音信息,则根据所述第一授权信息开启所述图像采集设备和根据所述第二授权信息开启所述声音采集设备。
  6. 根据权利要求2-4任一项所述的方法,其特征在于,所述根据所述反应状态信息,获取所述用户对所述媒体内容的评价信息,包括:
    若所述反应状态信息包括所述图像信息,根据所述用户的面部表情信息获取所述用户对所述媒体内容的评价信息;
    若所述反应状态信息包括所述声音信息,根据所述用户的声音情感信息获取所述用户对所述媒体内容的评价信息;
    若所述反应状态信息包括所述图像信息和所述声音信息,根据所述用户的面部表情信息和所述声音情感信息获取所述用户对所述媒体内容的评价信息;
    其中,所述面部表情信息是根据所述图像信息获取的所述用户在观看所述媒体内容时的面部情感信息,所述声音情感信息是根据所述声音信息获取的所述用户在观看所述预设内容时的声音情感信息。
  7. 根据权利要求6所述的方法,其特征在于,所述根据所述用户的面部表情信息获取所述用户对所述媒体内容的评价信息,包括:
    若所述用户的面部表情信息是在所述预设时间段获取的,则获取所述预设时间段对应的标准面部表情信息,所述标准面部表情信息是根据所述预设内容预先定义的表情信息;
    若所述用户的面部表情信息与所述标准面部表情信息一致,则确定所述用户对所述媒体内容的评价为加分评价;
    若所述用户的面部表情信息与所述标准面部表情信息不一致,则确定所述用户对所述媒体内容的评价为减分评价。
  8. 根据权利要求6所述的方法,其特征在于,所述根据所述用户的面部表情信息获取所述用户对所述媒体内容的评价信息,包括:
    若所述用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,所述评价映射表用于指示不同的面部表情信息对应的评价信息;
    根据所述用户的面部表情信息和所述评价映射表,获取所述用户对所述媒体内容的评价信息。
  9. 根据权利要求6所述的方法,其特征在于,所述根据所述用户的声音情感信息获取所述用户对所述媒体内容的评价信息,包括:
    获取所述预设时间段对应的标准声音情感信息,所述标准声音情感信息是根据所述预设内容预先定义的声音信息;
    若所述用户的声音情感信息与所述标准声音情感信息一致,则确定所述用户对所述媒体内容的评价为加分评价;
    若所述用户的声音情感信息与所述标准声音情感信息不一致,则确定所述用户对所述媒体内容的评价为减分评价。
  10. 根据权利要求1-9任一项所述的方法,其特征在于,所述获取用户的反应状态信息之后,所述方法还包括:
    根据所述图像信息或所述声音信息,获取至少一个用户的身份标识;
    所述根据所述反应状态信息,获取所述用户对所述媒体内容的评价信息之后,所述方法还包括:
    将每个用户对所述媒体内容的评价信息与所述用户的身份标识关联。
  11. 根据权利要求6所述的方法,其特征在于,所述根据所述用户的面部表情信息和所述用户的声音情感信息获取所述用户对所述媒体内容的评价信息,包括:
    根据所述图像信息获取至少一个用户的身份标识;
    获取与所述声音情感信息匹配的目标面部表情信息,并从所述至少一个用户的身份标识中获取与所述目标面部表情信息对应的目标身份标识,所述目标面部表情信息与所述声音情感信息所对应的情感一致;
    根据所述声音情感信息和所述预设时间段对应的标准声音情感信息,获取所述目标身份标识对应的用户对所述媒体内容的评价信息,所述标准声音情感信息是根据所述预设内容预先定义的信息。
  12. 根据权利要求10或11任一项所述的方法,其特征在于,在所述媒体内容播放之前,所述方法还包括:
    根据所述用户输入的身份标识以及用户特征,获取所述用户的身份标识与所述用 户特征的对应关系,所述用户特征包括人脸或声音中的一种;
    所述根据所述图像信息或所述声音信息,获取至少一个用户的身份标识,包括:
    根据所述用户的身份标识与人脸的对应关系以及所述图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
    根据所述用户的身份标识与声音的对应关系以及所述声音信息中所包括的声音,获取至少一个用户的身份标识。
  13. 根据权利要求1-12任一项所述的方法,其特征在于,所述根据所述反应状态信息,获取用户对所述媒体内容的评价信息之后,所述方法还包括:
    若所述评价信息为加分信息,则更新所述用户对所述媒体内容的评价信息,得到更新后的评价信息;
    若所述评价信息为减分信息,则根据所述状态信息之后获取的状态信息,确定是否更新所述用户对所述媒体内容的评价信息。
  14. 根据权利要求10-12任一项所述的方法,其特征在于,在所述媒体内容播放之前,所述方法还包括:
    识别所述用户的身份标识,若根据所述用户的身份标识获取到所述用户的历史评价信息,则根据所述历史评价信息决定推荐给所述用户的所述媒体内容。
  15. 根据权利要求1-14任一项所述的方法,其特征在于,所述所述媒体内容播放结束之后,所述方法还包括:
    根据所述用户的评价信息,确定评价列表,所述评价列表中包括所述用户已评价的媒体内容;
    向媒体源平台发送所述评价列表,并获取所述媒体源平台返回的推荐列表,所述推荐列表包括待推荐给所述用户的媒体内容。
  16. 根据权利要求14或15所述的方法,其特征在于,所述根据所述用户的评价信息,确定评价列表,包括:
    若识别出一个待推荐的用户,则确定与所述待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,所述第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
    根据所述满足第一预设条件的媒体内容,确定评价列表。
  17. 根据权利要求14或15所述的方法,其特征在于,所述根据所述用户的评价信息,确定评价列表,包括:
    若识别出至少两个待推荐的用户,则确定与所述至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,所述第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
    根据所述均满足第二预设条件的媒体内容,确定评价列表。
  18. 一种媒体内容推荐装置,其特征在于,包括:
    输入模块,用于在媒体内容播放时,获取用户的反应状态信息,所述反应状态信息包括如下至少一种类型的信息:通过图像采集设备获取的所述用户的图像信息或通过声音采集设备获取的所述用户的声音信息;
    处理模块,用于根据所述反应状态信息,获取所述用户对所述媒体内容的评价信 息,其中,所述评价信息作为向所述用户推荐其他媒体内容的依据。
  19. 根据权利要求18所述的装置,其特征在于,所述图像信息包括所述图像采集设备在预设时间段不规则间隔采集或持续不间断采集或基于第一图像采集频率采集的一张或多张图像,所述预设时间段为播放所述媒体内容中的预设内容的时间段。
  20. 根据权利要求19所述的装置,其特征在于,所述图像信息还包括所述图像采集设备在所述预设时间段之外的其他时间段基于第二图像采集频率采集的一张或多张图像;其中,所述第一图像采集频率高于所述第二图像采集频率。
  21. 根据权利要求18-20任一项所述的装置,其特征在于,所述声音信息包括所述声音采集设备在预设时间段采集的一段或多段声音,所述预设时间段为播放所述媒体内容中的预设内容的时间段,在所述预设时间段内采集声音的频率包括如下的任一种:持续采集、按照预设频率采集或不规则间隔采集。
  22. 根据权利要求18-21任一项所述的装置,其特征在于,在所述获取用户的反应状态信息之前,所述处理模块还用于:
    若所述反应状态信息包括所述图像信息,根据所述用户的第一授权信息,开启所述图像采集设备,所述第一授权信息用于指示所述图像采集设备的开启;
    若所述反应状态信息包括所述声音信息,根据所述用户的第二授权信息,开启所述声音采集设备,所述第二授权信息用于指示所述声音采集设备的开启;
    若所述反应状态信息包括所述图像信息和所述声音信息,则根据所述第一授权信息开启所述图像采集设备和根据所述第二授权信息开启所述声音采集设备。
  23. 根据权利要求19-21任一项所述的装置,其特征在于,所述处理模块具体用于:
    若所述反应状态信息包括所述图像信息,根据所述用户的面部表情信息获取所述用户对所述媒体内容的评价信息;
    若所述反应状态信息包括所述声音信息,根据所述用户的声音情感信息获取所述用户对所述媒体内容的评价信息;
    若所述反应状态信息包括所述图像信息和所述声音信息,根据所述用户的面部表情信息和所述声音情感信息获取所述用户对所述媒体内容的评价信息;
    其中,所述面部表情信息是根据所述图像信息获取的所述用户在观看所述媒体内容时的面部情感信息,所述声音情感信息是根据所述声音信息获取的所述用户在观看所述预设内容时的声音情感信息。
  24. 根据权利要求23所述的装置,其特征在于,所述处理模块具体用于:
    若所述用户的面部表情信息是在所述预设时间段获取的,则获取所述预设时间段对应的标准面部表情信息,所述标准面部表情信息是根据所述预设内容预先定义的表情信息;
    若所述用户的面部表情信息与所述标准面部表情信息一致,则确定所述用户对所述媒体内容的评价为加分评价;
    若所述用户的面部表情信息与所述标准面部表情信息不一致,则确定所述用户对所述媒体内容的评价为减分评价。
  25. 根据权利要求23所述的装置,其特征在于,所述处理模块具体用于:
    若所述用户的面部表情信息是在其他时间段获取的,则获取评价映射表,其中,所述评价映射表用于指示不同的面部表情信息对应的评价信息;
    根据所述用户的面部表情信息和所述评价映射表,获取所述用户对所述媒体内容的评价信息。
  26. 根据权利要求23所述的装置,其特征在于,所述处理模块具体用于:
    获取所述预设时间段对应的标准声音情感信息,所述标准声音情感信息是根据所述预设内容预先定义的声音信息;
    若所述用户的声音情感信息与所述标准声音情感信息一致,则确定所述用户对所述媒体内容的评价为加分评价;
    若所述用户的声音情感信息与所述标准声音情感信息不一致,则确定所述用户对所述媒体内容的评价为减分评价。
  27. 根据权利要求18-26任一项所述的装置,其特征在于,所述获取用户的反应状态信息之后,所述处理模块还用于:
    根据所述图像信息或所述声音信息,获取至少一个用户的身份标识;
    根据所述反应状态信息,获取所述用户对所述媒体内容的评价信息之后,将每个用户对所述媒体内容的评价信息与所述用户的身份标识关联。
  28. 根据权利要求23所述的装置,其特征在于,所述处理模块具体用于:
    根据所述图像信息获取至少一个用户的身份标识;
    获取与所述声音情感信息匹配的目标面部表情信息,并从所述至少一个用户的身份标识中获取与所述目标面部表情信息对应的目标身份标识,所述目标面部表情信息与所述声音情感信息所对应的情感一致;
    根据所述声音情感信息和所述预设时间段对应的标准声音情感信息,获取所述目标身份标识对应的用户对所述媒体内容的评价信息,所述标准声音情感信息是根据所述预设内容预先定义的信息。
  29. 根据权利要求27或28任一项所述的装置,其特征在于,在所述媒体内容播放之前,所述处理模块还用于:
    根据所述用户输入的身份标识以及用户特征,获取所述用户的身份标识与所述用户特征的对应关系,所述用户特征包括人脸或声音中的一种;
    根据所述用户的身份标识与人脸的对应关系以及所述图像信息中所包括的人脸,获取至少一个用户的身份标识;或者
    根据所述用户的身份标识与声音的对应关系以及所述声音信息中所包括的声音,获取至少一个用户的身份标识。
  30. 根据权利要求18-29任一项所述的装置,其特征在于,所述处理模块还用于:
    所述根据所述反应状态信息,获取用户对所述媒体内容的评价信息之后,若所述评价信息为加分信息,则更新所述用户对所述媒体内容的评价信息,得到更新后的评价信息;
    若所述评价信息为减分信息,则根据所述状态信息之后获取的状态信息,确定是否更新所述用户对所述媒体内容的评价信息。
  31. 根据权利要求27-29任一项所述的装置,其特征在于,所述处理模块还用于:
    在所述媒体内容播放之前,识别所述用户的身份标识,若根据所述用户的身份标识获取到所述用户的历史评价信息,则根据所述历史评价信息决定推荐给所述用户的所述媒体内容。
  32. 根据权利要求18-31任一项所述的装置,其特征在于,还包括:输出模块;
    所述处理模块还用于:在所述媒体内容播放结束之后,根据所述用户的评价信息,确定评价列表,所述评价列表中包括所述用户已评价的媒体内容;
    所述输出模块用于:向媒体源平台发送所述评价列表;
    所述输入模块还用于:获取所述媒体源平台返回的推荐列表,所述推荐列表包括待推荐给所述用户的媒体内容。
  33. 根据权利要求31或32所述的装置,其特征在于,所述处理模块具体用于:
    若识别出一个待推荐的用户,则确定与所述待推荐的用户相关联的评价信息满足第一预设条件的媒体内容;其中,所述第一预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
    根据所述满足第一预设条件的媒体内容,确定评价列表。
  34. 根据权利要求31或32所述的装置,其特征在于,所述处理模块具体用于:
    若识别出至少两个待推荐的用户,则确定与所述至少两个待推荐的用户中每个用户各自关联的评价信息均满足第二预设条件的媒体内容,所述第二预设条件具体为如下中的一种:评价得分高于预设评分或评价排名高于预设排名;
    根据所述均满足第二预设条件的媒体内容,确定评价列表。
  35. 一种终端设备,其特征在于,包括如权利要求1-17任一项所述的媒体内容推荐装置、摄像头和/或麦克风。
PCT/CN2019/084922 2019-04-29 2019-04-29 媒体内容推荐方法及设备 WO2020220180A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/CN2019/084922 WO2020220180A1 (zh) 2019-04-29 2019-04-29 媒体内容推荐方法及设备
CN201980094051.6A CN113574525A (zh) 2019-04-29 2019-04-29 媒体内容推荐方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2019/084922 WO2020220180A1 (zh) 2019-04-29 2019-04-29 媒体内容推荐方法及设备

Publications (1)

Publication Number Publication Date
WO2020220180A1 true WO2020220180A1 (zh) 2020-11-05

Family

ID=73029587

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2019/084922 WO2020220180A1 (zh) 2019-04-29 2019-04-29 媒体内容推荐方法及设备

Country Status (2)

Country Link
CN (1) CN113574525A (zh)
WO (1) WO2020220180A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112492390A (zh) * 2020-11-20 2021-03-12 海信视像科技股份有限公司 一种显示设备及内容推荐方法
CN112632369A (zh) * 2020-12-05 2021-04-09 武汉风行在线技术有限公司 一种识别笑声的短视频推荐系统及方法
CN114638517A (zh) * 2022-03-24 2022-06-17 武汉西泽科技有限公司 一种基于多维度的数据评价分析方法、设备及计算机存储介质
DE102022003320A1 (de) 2021-09-15 2023-03-16 Mercedes-Benz Group AG System zum Vorhersagen von Benutzerbewertungen und Verfahren davon

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104917896A (zh) * 2015-06-12 2015-09-16 努比亚技术有限公司 一种推送数据的方法和终端设备
CN105045115A (zh) * 2015-05-29 2015-11-11 四川长虹电器股份有限公司 一种控制方法及智能家居设备
CN107972028A (zh) * 2017-07-28 2018-05-01 北京物灵智能科技有限公司 人机交互方法、装置及电子设备
CN108476259A (zh) * 2015-12-29 2018-08-31 华为技术有限公司 基于用户行为的内容推荐的系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105045115A (zh) * 2015-05-29 2015-11-11 四川长虹电器股份有限公司 一种控制方法及智能家居设备
CN104917896A (zh) * 2015-06-12 2015-09-16 努比亚技术有限公司 一种推送数据的方法和终端设备
CN108476259A (zh) * 2015-12-29 2018-08-31 华为技术有限公司 基于用户行为的内容推荐的系统和方法
CN107972028A (zh) * 2017-07-28 2018-05-01 北京物灵智能科技有限公司 人机交互方法、装置及电子设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112492390A (zh) * 2020-11-20 2021-03-12 海信视像科技股份有限公司 一种显示设备及内容推荐方法
CN112632369A (zh) * 2020-12-05 2021-04-09 武汉风行在线技术有限公司 一种识别笑声的短视频推荐系统及方法
DE102022003320A1 (de) 2021-09-15 2023-03-16 Mercedes-Benz Group AG System zum Vorhersagen von Benutzerbewertungen und Verfahren davon
CN114638517A (zh) * 2022-03-24 2022-06-17 武汉西泽科技有限公司 一种基于多维度的数据评价分析方法、设备及计算机存储介质

Also Published As

Publication number Publication date
CN113574525A (zh) 2021-10-29

Similar Documents

Publication Publication Date Title
WO2020211701A1 (zh) 模型训练方法、情绪识别方法及相关装置和设备
WO2020220180A1 (zh) 媒体内容推荐方法及设备
EP3893129A1 (en) Recommendation method based on user exercise state, and electronic device
CN113542839B (zh) 电子设备的投屏方法和电子设备
CN112289313A (zh) 一种语音控制方法、电子设备及系统
CN111522250B (zh) 智能家居系统及其控制方法与装置
CN111369988A (zh) 一种语音唤醒方法及电子设备
EP4113415A1 (en) Service recommending method, electronic device, and system
WO2020019176A1 (zh) 一种终端更新语音助手的唤醒语音的方法及终端
CN111107389B (zh) 确定观看直播时长的方法、装置和系统
WO2020216098A1 (zh) 一种跨电子设备转接服务的方法、设备以及系统
CN106993265B (zh) 基于可穿戴设备的通信方法、终端、可穿戴设备
CN103889040A (zh) 发射控制方法、装置及系统
US20230275955A1 (en) Data sharing method, apparatus, and system, and electronic device
CN114173193A (zh) 一种多媒体流的播放方法和电子设备
US20240094972A1 (en) Page Display Method and Apparatus, Electronic Device, and Readable Storage Medium
CN113365274B (zh) 一种网络接入方法和电子设备
CN112423011B (zh) 消息回复方法、装置、设备及存储介质
CN110113669B (zh) 获取视频数据的方法、装置、电子设备及存储介质
US20230402150A1 (en) Adaptive Action Evaluation Method, Electronic Device, and Storage Medium
CN114120987B (zh) 一种语音唤醒方法、电子设备及芯片系统
WO2021110117A1 (zh) 事件订阅方法及电子设备
CN111339513B (zh) 数据分享的方法和装置
CN115525366A (zh) 一种投屏方法及相关装置
WO2021189418A1 (zh) 服务提供方法及装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19927310

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19927310

Country of ref document: EP

Kind code of ref document: A1