CN103024521A - 节目筛选方法、系统及具有该系统的电视 - Google Patents

节目筛选方法、系统及具有该系统的电视 Download PDF

Info

Publication number
CN103024521A
CN103024521A CN2012105792120A CN201210579212A CN103024521A CN 103024521 A CN103024521 A CN 103024521A CN 2012105792120 A CN2012105792120 A CN 2012105792120A CN 201210579212 A CN201210579212 A CN 201210579212A CN 103024521 A CN103024521 A CN 103024521A
Authority
CN
China
Prior art keywords
mood
user
classification
information
program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105792120A
Other languages
English (en)
Other versions
CN103024521B (zh
Inventor
董凯文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL New Technology Co Ltd
Original Assignee
Shenzhen TCL New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL New Technology Co Ltd filed Critical Shenzhen TCL New Technology Co Ltd
Priority to CN201210579212.0A priority Critical patent/CN103024521B/zh
Publication of CN103024521A publication Critical patent/CN103024521A/zh
Application granted granted Critical
Publication of CN103024521B publication Critical patent/CN103024521B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供一种具有情绪识别功能的节目筛选方法,包括以下几个步骤:采集用户脸部特征信息及语音信息;将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别;根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。本发明还公开了一种具有情绪识别功能的节目筛选系统及具有该系统的电视。本发明的节目筛选方法通过采集用户的脸部特征信息和语音信息后与预置的历史情绪对比数据库对比后判断用户当前的情绪类别,最后筛选出与之相对应的历史观看的电视节目和网络影视节目,如此,在无需用户操作的前提下选择了符合用户当时情绪的电视节目和网络影视节目,节省了用户筛选节目的时间。

Description

节目筛选方法、系统及具有该系统的电视
技术领域
本发明涉及一种电视机领域,尤其涉及一种节目的筛选方法、系统及具有该系统的电视。
背景技术
随着智能控制技术和信息技术的飞速发展,为家电的自动化和智能化提供了可能。其中智能电视机已经广泛地进入到百姓的生活中,然而目前还有很多用户的需求无法得到支持。
例如,随着电视节目日益增多,网络影视节目日益丰富,对于用户来说,在传统的遥控操作下,用数字键或节目菜单的方式从众多的电视节目和网络影视节目中选出当前最想观看的类别变得比较困难。因此,亟需一种能够快速筛选出用户所需要观看的节目的方法。
发明内容
本发明的主要目的是提供一种具有情绪识别功能的节目筛选方法、系统及具有该系统的电视,能够通过采集用户的面部信息和语音信息后判断用户当前的情绪值,并筛选出与之相符的电视节目和网络影视节目以供用户选择,如此,在无需用户操作的前提下选择了符合用户当时情绪的电视节目和网络影视节目,增强了用户的体验度。
为实现上述目的,本发明提供一种具有情绪识别功能的节目筛选方法,
包括以下步骤:采集用户脸部特征信息及语音信息;将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别;根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。
优选的,所述采集用户脸部特征信息及语音信息包括:对进入拍摄范围的用户脸部进行锁定,并进行拍摄;对所拍摄的图片进行特征提取,采集脸部特征信息;调用预置的历史情绪对比数据库中的提问信息与用户对话并采集用户的语音信息。
优选的,将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别包括:将所采集的用户脸部特征信息与预置的历史情绪对比数据库进行对比,获得第一情绪类别;将所采集的用户语音信息与预置的历史情绪对比数据库进行对比,获得第二情绪类别;判断第一情绪类别与第二情绪类别是否一致,若是则根据第一情绪类别,判断用户的情绪类别;若否,根据第一情绪类别及第二情绪类别对应的情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。
优选地,所述用户的情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,且每个情绪类别对应一个情绪值,其中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。
优选的,所述预置的历史情绪对比数据库包括:面部情绪对比数据库,用于存储历史采集的用户脸部表情信息;语音情绪对比数据库,用于存储对用户进行提问的信息以及历史采集的用户情绪的词语信息和语调信息;节目信息数据库,用于存储历史采集的用户观看的节目信息。
优选的,所述节目信息包括:电视节目信息及网络影视节目信息。
本发明进一步提供一种具有情绪识别功能的节目筛选系统,包括:采集模块,用于采集用户脸部特征信息及语音信息;情绪判断模块,用于将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别;节目筛选模块,用于根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。
优选的,所述采集模块包括:脸部特征获取单元,用于对进入拍摄范围的用户面部进行锁定,进行拍摄,对所拍摄的图片进行特征提取,采集脸部特征信息;语气信息获取单元,用于调用预置的历史情绪对比数据库中的提问信息与用户对话并采集用户的语音信息。
优选的,所述情绪判断模块包括:情绪值计算单元,用于将所采集的用户脸部特征信息与预置的历史情绪对比数据库进行对比,获得对应所述第一情绪类别对应的情绪值;将所采集的语音信息与预置的历史情绪对比数据库进行对比,获得第二情绪类别对应的情绪值;情绪类别判断单元,用于判断第一情绪类别与第二情绪类别是否一致;若是则根据第一情绪类别,判断用户的情绪类别;若否则根据第一情绪类别对应的情绪值及第二情绪类别对应的情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。
优选地,所述用户的情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,且每个情绪类别对应一个情绪值,其中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。
优选的,所述预置的历史情绪对比数据库包括:面部情绪对比数据库,用于存储历史采集的用户脸部表情特征信息;语音情绪对比数据库,用于存储对用户进行提问的信息以及历史采集的用于对比用户情绪的词语信息和语调信息;节目信息数据库,用于存储历史采集的用户观看的节目信息。
本发明进一步提供一种电视,该电视包括一种具有情绪识别功能的节目筛选系统,该节目筛选系统包括采集模块、情绪判断模块和节目筛选模块,所述采集模块用于采集用户特征信息,所述情绪判断模块用于将所采集的用户特征信息与预置的历史情绪对比数据库对比判断用户的情绪类别,所述节目筛选模块用于根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。
本发明所提供的节目筛选方法,通过采集用户的脸部特征信息和语音信息并与预置的历史情绪对比数据库对比后判断用户当前的情绪类别,最后筛选出与用户当前的情绪类别相对应的历史观看的电视节目和网络影视节目以供用户选择,如此,在无需用户操作的前提下选择了符合用户当时情绪的电视节目和网络影视节目,节省了用户筛选节目的时间。
附图说明
图1为本发明较佳实施方式节目筛选方法的流程图;
图2为本发明较佳实施方式节目筛选方法具体应用实施例流程图;
图3为本发明较佳实施方式节目筛选系统的模块示意图;
图4为图3所示的节目筛选系统的采集模块的示意图;
图5为图3所示的节目筛选系统的情绪判断模块的示意图;
图6为图3所示的节目筛选系统的用户选择单元的示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种具有情绪识别功能的节目筛选方法,请参考图1,图1为本发明较佳实施方式节目筛选方法的流程图,该节目筛选方法包括以下步骤:
在步骤S100中,采集用户脸部特征信息及语音信息。在一些实施例中,采集用户的面部情绪信息和语音情绪信息。例如,当用户开启电子设备,摄像头启动并在其拍摄范围内自行捕捉用户后锁定其面部,连续拍摄几张照片,从照片中提取用户的额头、眼角、嘴角和面容等面部特征信息;再调取语音情绪数据库中的问题并发问,并采集用户语调信息和语气用词。例如,提取问题并通过发音单元进行发问,如“你今天开心么?”或“今天心情怎么样?”等,同时开始录音。最后提取录音中的声音的语调信息和语气用词。
在步骤S200中,将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别。在一些实施例中,用户的情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,且各情绪分类设置相应的情绪值,其中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。在一些实施例中,将采集的用户面部情绪信息与预置的历史情绪对比数据库对比获得第一情绪类别及其对应的情绪值,将采集到的用户语音情绪信息与预置的历史情绪对比数据库对比获得第二情绪类别及其对应的情绪值。最后,结合第一情绪类别和第二情绪类别分别对应的情绪值判断用户当前的情绪类别。在一些实施例中,若获得的第一情绪类别和第二情绪类别一致,则以第一情绪类别为基准;若不一致,则运用加权的方式计算第一情绪类别及第二情绪类别对应的情绪值,进而判断用户的情绪类别。
可以理解,在一些实施例中,可通过洗牌算法从语音情绪对比数据库中随机提取一个问题。
在步骤S300中,根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。在一些实施例中,判断出用户的情绪类别为喜,则从节目信息数据库中调取历史上用户在喜的状态下常看的节目。例如,《天天向上》。
以下将通过一具体的应用实施例对本发明的节目筛选方法做进一步详细的说明,在该具体实施例中,节目筛选的启动从用户打开电子设备开始。如图2所示,图2为本发明较佳实施方式节目筛选方法具体应用实施例流程图。该节目筛选方法包括:
在步骤S11中,摄像头锁定用户面部并拍摄照片。在一些实施例中,摄像头锁定用户的额头、眼角、嘴角和面容。
在步骤S12中,判断照片是否拍摄成功。如果拍摄的照片不清晰则转回到步骤S11。如果拍摄清晰,则进入步骤S13。
可以理解,在一些实施例中,摄像头每隔一段时间再次对用户面部进行拍摄。
在步骤S13中,提取额头、嘴角、眼角和面容等面部特征并对用户情绪进行初步归类。在一些实施例中,拍摄用户的额头皱纹信息、嘴角的弯曲信息、眼角的弯曲和皱纹信息及面容等信息。从拍摄的照片中提取出来并与情绪对比数据库对比后对其进行初步的归类。在一些实施例中,情绪对比数据库至少具有一个面部情绪对比数据库、一个语音情绪对比数据库、一个类别判定数据库和一个节目信息数据库。在一些实施例中,面部情绪对比数据库按性别分为男和女两大类情绪,每个大类别中又按年龄阶段分为儿童、少年、青少年、青年、壮年、中年和老年的分类别,在每一个分类别中都对应有含有额头、眼角、嘴角和面容等面部特征组合后的面部画面,这些面部画面被分别归类到“喜”、“怒”、“哀”、“乐”和“无表情”;语音情绪对比数据库具有按“喜”、“怒”、“哀”、“乐”和“无表情”分类的语音问题和与之对应的说话语气信息和反映情绪的词汇;节目信息数据库具有与用户面部情绪信息及语音情绪信息对应的历史观看节目。在一些实施例中,每一个情绪类别至少含有一个语音问题。在不同的实施例中,语音问题可以以不同的形式表达。在一些实施例中,语音问题可通过判断或询问的方式来表达,例如,语音问题可以是“你今天开心么?”或“今天心情怎么样?”等。在一些实施例中,先根据面容信息初步判断用户的性别和年龄阶段。
可以理解,在一些实施例中,语音问题的数量可以设置多个。
在步骤S14中,判断用户的第一情绪类别。根据初步判断的用户性别和年龄阶段将提取的用户额头、嘴角、眼角和面容等面部特征信息与面部情绪对比数据库对比。依据对应性别和年龄阶段中采集的用户历史观看节目时的额头、嘴角、眼角和面容等面部特征信息对用户的第一情绪类别进行判断。如果其中某个情绪类别的面部特征与当前用户的匹配度达到设定值,即判断用户当前为这个情绪类别。在一些实施例中,情绪类别分为“喜”、 “怒”、 “哀”、“乐”和“无表情”,如果提取的用户面部特征信息与面部情绪对比数据库中采集的用户情绪类别为“喜”时观看节目的面部特征信息达到90%或以上的话,可以判断用户当前的情绪类别为“喜”,如果达不到90%的匹配度,则判断出用户当前的情绪类别不是“喜”,同理可判断用户当前的情绪类别是否为“怒”、“哀”、“乐”或“无表情”。在本实施例中,按“喜”、“乐”、“无表情”、“哀”和“怒”的顺序依次判断,如果匹配度达90%以上则确定其为第一情绪类别,并进入步骤S15。
在步骤S15中,接收第一情绪类别并调用语音情绪对比数据库与用户交流。在一些实施例中,语气信息获取单元接收经用户的面部特征判断出的用户的第一情绪类别并开始调用语音情绪对比数据库中语音问题与用户交流。语音问题可以以不同的形式表达。在一些实施例中,语音问题可通过判断或询问的方式来表达,例如,语音问题可以是“你今天开心么?”或“今天心情怎么样?”等。
可以理解,语音情绪对比数据库还可以根据情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”五个类别,并根据对用户面部判断的情绪类别调取对应情绪类别的问题。
在步骤S16中,抓取用户反映情绪的语音信息,对情绪类别再次进行初步归类。在一些实施例中,将用户的回答录制下来,并对其中反映用户情绪的语调和词语调取出来,与预置的历史情绪对比数据库中用户历史观看的节目时采集的语调和词语对比后对其进行初步归类。在一些实施例中,用户情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”。例如,当调取“今天想看什么类型的节目?”后,用户不耐烦的回答“随便”,提取其中“不耐烦”的语调和“随便”的词汇,并初步判断用户的性别和年龄阶段。
在步骤S17中,判断用户当前的第二情绪类别。将提取的反映用户情绪的语调及词语与语音情绪对比数据库中采集的用户历史观看节目时反映其情绪的语调和词语信息进行对比。如果其中反映用户当前情绪类别的语调和词语与反映用户历史观看节目中的某个情绪类别的语调和词语的匹配度达到设定值,即判断用户当前的情绪类别为用户历史观看节目的该情绪类别。在一些实施例中,匹配度的设定值为90%,即匹配度达到90%或以上的话可以判断用户当前的第二情绪类别。在一些实施例中,情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,如果提取的反映用户情绪的语调及词语与语音情绪对比数据库中采集的用户历史情绪类别为“喜”时观看节目反映其情绪的语调和词语信息进行对比等特征信息达到90%或以上的话,可以判断用户当前的情绪类别为“喜”,如果达不到90%的匹配度则判断出用户当前的情绪类别不是“喜”,同理可判断用户当前的情绪类别是否为“怒”,“哀”、“乐”或“无表情”。在本实施例中,按“喜”、“怒”、“哀”、 “乐”和“无表情”的顺序依次判断,如果匹配度达90%以上则确定其为第二情绪类别,并进入下一步骤。
在步骤S18中,根据判断的第一情绪类别对应的情绪值和第二情绪类别对应的情绪值对用户当前的情绪类别进行评定。在本实施例中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。情绪类别判断单元判断用户的第一情绪类别和第二情绪类别是否相同,若相同,则判断用户当前的情绪类别为第一情绪类别;否则根据第一情绪类别对应的情绪值及第二情绪类别对应的情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。在一些实施例中,第一情绪类别对应的情绪值占60%的加权比重,第二情绪类别对应的情绪值占40%的加权比重。在一些实施例中,第一情绪类别对应的情绪值和第二情绪类别对应的情绪值均为情绪类别“哀”的情绪值,则判断出用户情绪类别为“哀”。
在步骤S19中,筛选节目,在一些实施例中,根据最终评定的用户情绪类别调取与该用户在该情绪类别时历史上爱看的节目。例如,用户当前情绪类别为“哀”,则调取用户在“哀”的情绪类别时常看的节目,如《天天向上》。在本实施例中,节目包括电视节目和网络影视节目。
在步骤S20中,显示筛选出的节目,在一些实施例中,在调取能调节用户当前情绪的类别节目和用户常看的节目后生成菜单选项以供用户选择。在一些实施例中,在显示节目的同时,通过语音提示用户节目准备就绪,等待用户选择确认。
可以理解,在一些实施例中,选择菜单包括不选择的选项以供用户自行搜寻喜爱的节目。
在步骤S21中,根据用户选择播放节目。当用户对选择菜单进行了选择后,播放用户选择的节目。
本发明所提供的节目筛选方法,通过采集用户的面部特征信息和语音信息后判断用户的情绪类别,并在历史情绪对比数据库中筛选出在该情绪类别下用户历史观看的节目。如此,在无需用户操作的前提下选择了符合用户当时情绪的节目,节省了用户筛选节目的时间。
本发明进一步提供了一种具有情绪识别功能的节目筛选系统。
请参照图3,其本发明较佳实施方式的节目筛选系统的模块示意图。在本实施例中,节目筛选系统10可应用于具有节目播放功能的电子设备,如电视机、卡拉ok点歌机或车载影音设备等中,为用户提供符合其当前情绪的节目。在本实施例中,节目筛选系统10包括采集模块100、情绪判断模块200及节目筛选模块300且采集模块100、情绪判断模块200及节目筛选模块300均与历史情绪对比数据库400相连。
节目筛选操作所需的数据包括历史情绪对比数据库400,历史情绪对比数据库400用于存储实现节目筛选操作所需的相应的数据。在一些实施例中,该历史情绪对比数据库400至少具有一个面部情绪对比数据库、一个语音情绪对比数据库及节目信息数据库。
在一些实施例中,面部情绪对比数据库按性别分为男和女两大类情绪,每个大类别中又按年龄阶段分为儿童、少年、青少年、青年、壮年、中年和老年的分类别,在每一个分类别中都对应有含有额头、眼角、嘴角和面容等面部特征组合后的面部画面,这些面部画面被分别归类到“喜”、“怒”、“哀”、“乐”和“无表情”。当用户的性别、年龄阶段和当前的面部特征确定后,与面部情绪对比数据库中的面部画面进行对比并判断出与之最接近的情绪类别。
在一些实施例中,语音情绪对比数据库具有按“喜”、“怒”、“哀”、“乐”和“无表情”分类的语音问题和与之对应的说话语气信息和反映情绪的词汇。在一些实施例中,每一个情绪分类至少含有一个语音问题。在不同的实施例中,语音问题可以以不同的形式表达。在一些实施例中,语音问题可通过判断或询问的方式来表达,例如,语音问题可以是“你今天开心么?”或“今天心情怎么样?”等。在一些实施例中,语音情绪对比数据库还具有语气数据库和情绪词汇数据库。其中,语气数据库内具有各种语调的音调,用于与用户回答的语调作对比。情绪词汇数据库内包含有各种反映情绪的词汇,用于与用户回答的内容作对比。例如,用户用低沉的声音回答“不开心”,将会与数据库中的“哀”相对应。
可以理解,在一些实施例中,面部情绪对比数据库只按年龄阶段分为儿童、少年、青少年、青年、壮年、中年和老年。然后对每一个年龄阶段的额头、眼角、嘴角和面容等特征组合后形成面部画面,并将这些面部画面被分别归类到“喜”、“怒”、“哀”、“乐”和“无表情”。
可以理解的是,在一些实施例中,用户可以自行选择自己当下的心情,节目筛选模块300可以根据用户的选择筛选出对应情绪类别的节目。
情绪判断模块200用于采集用户当前的脸部特征信息和语音信息,调取预置的历史情绪对比数据库400中的符合当前脸部特征信息和语音信息并根据该脸部特征信息和语音信息判断用户当前的情绪类别。
参考图4,图4为图3所示的节目筛选系统的采集模块的示意图。在一些实施例中,采集模块100包括脸部特征获取单元110和语气信息获取单元120。脸部特征获取单元110连接至电子设备开关,用于在电子设备工作后锁定用户并对锁定后的用户进行拍摄,并提取用户的面部照片的额头、眼角、嘴角和面容等脸部特征。语气信息获取单元120与脸部特征获取单元110相连,用于在获得脸部特征后调取语音情绪对比数据库并问用户问题,然后从录制的用户回答问题的内容中的提取语调和语气用词。
在一些实施例中,用户开启电子设备后,摄像头启动并在其拍摄范围内自行捕捉用户后锁定其面部。连续拍摄几张照片,从照片中提取用户的额头、眼角、嘴角和面容等特征信息。
可以理解,在一些实施例中,语气信息获取单元120可通过随机的方式从历史情绪对比数据库400的语音情绪对比数据库中提取问题。具体而言,当语气信息获取单元120接收到脸部特征获取单元110提取完毕的信号后即执行特定的算法,例如在一些实施例中,可采用洗牌算法从历史情绪对比数据库400的语音情绪对比数据库中随即提取一个问题发问。
可以理解,在一些实施例中,可根据照片中用户的额头、眼角、嘴角和面容等特征信息所归属的情绪类别选择对应的问题进行提问。例如,在一些实施例中,当根据拍摄的照片可将其归类到“喜”的类别时,可以调取“今天你高兴么?”类型的问题;当根据拍摄的照片可将其归类到“怒”的类别,此时,可以调取“今天有令你气愤的事情发生么?”。
参考图5,图5为图3所示的节目筛选系统的情绪判断模块200的示意图。在一些实施例中,情绪判断模块200包括情绪值计算单元210和情绪类别判断单元220。情绪值计算单元210用于将所采集的用户脸部特征信息与预置的历史情绪对比数据库400的历史采集的脸部特征信息进行对比,获得第一情绪类别及对应该类别的第一情绪值;将所采集的语音信息与预置在历史情绪对比数据库400中的历史采集的语音信息进行对比,获得第二情绪类别及对应该类别的第二情绪值;在一些实施例中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2和“怒”的情绪值为1。情绪类别判断单元220用于判断第一情绪类别与第二情绪类别是否一致;若是,则根据第一情绪类别,判断为用户的情绪类别;否则根据第一情绪值及第二情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。
在一些实施例中,第一情绪类别与第二情绪类别相同。例如,当第一情绪类别与第二情绪类别均为“哀”时,以第一情绪类别“哀”作为用户的情绪类别。在一些实施例中,第一情绪类别与第二情绪类别不相同,则对第一情绪类别对应的情绪值及第二情绪类别对应的情绪值进行加权计算并判断用户的情绪类别。例如,当第一情绪类别为“喜”而与第二情绪类别为“哀”时,对第一情绪类别对应的情绪值及第二情绪类别对应的情绪值进行加权计算。在一些实施例中,采集的用户脸部特征信息判断的结果占60%加权值,采集的用户语音信息判断的结果占40%加权值,用户的情绪类别公式为:第一情绪值×60%+第二情绪值×40%=用户的情绪值。如果第一情绪值为“喜”对应的情绪值5而第二情绪值为“乐”对应的情绪值4,则用户的当前的情绪值为4.6,大于“喜”和“乐”对应情绪值的平均值4.5,判断用户当前情绪类别为“喜”。
节目筛选模块300包括电视节目筛选单元及网络影视节目筛选单元,电视节目筛选单元接收情绪判断模块200判断的用户情绪类别,并根据用户的情绪类别,筛选出历史上用户在该情绪类别下观看的电视节目信息,网络影音筛选单元同时接收情绪判断模块200判断的用户情绪类别,并根据用户的情绪类别,筛选出历史上用户在该情绪类别下观看的网络影音信息。具体来说,当历史上用户在“哀”的情绪类别下观看了周星驰的《大话西游》,下次当节目筛选系统判断出用户在“哀”的情绪类别时,会调取出关于周星驰的系列电影。
可以理解的是,在一些实施例中,节目筛选模块300还包括用户选择单元500。如图6所示,图6为用户选择单元500的示意图。用户选择单元500包括显示单元510和语音提示单元520,显示单元510用于在筛选出可以调节当前情绪的电视节目和网络影视节目后显示选择和不选择的两个选择菜单,语音提示单元520用于提示用户节目准备就绪,可以进行选择。当节目筛选模块300将电视节目和网络影视节目分类后即跳入用户选择单元500,以便用户选择。
本发明进一步提供一种具有上述节目筛选系统的电视。
本发明所提供的一种具有情绪识别功能的节目筛选系统10,通过设置采集模块100,采集用户特征信息。然后再通过情绪判断模块200将所采集的用户特征信息与预置的历史情绪对比数据库400对比判断用户的情绪类别。节目筛选模块300根据用户的情绪类别筛选出历史上用户在该情绪类别下观看的电视节目信息和网络影音节目信息。如此,在无需用户操作的前提下选择了符合用户当时情绪的电视节目和网络影视节目,为用户带来便利,节省了用户筛选节目的时间。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (12)

1.一种节目筛选方法,其特征在于,包括以下步骤:
采集用户脸部特征信息及语音信息;
将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别;
根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。
2.如权利要求1所述的节目筛选方法,其特征在于,所述采集用户脸部特征信息及语音信息包括:
对进入拍摄范围的用户脸部进行锁定,并进行拍摄;
对所拍摄的图片进行特征提取,采集脸部特征信息;
调用预置的历史情绪对比数据库中的提问信息与用户对话并采集用户的语音信息。
3.根据权利要求2所述的节目筛选方法,其特征在于,将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别包括:
将所采集的用户脸部特征信息与预置的历史情绪对比数据库进行对比,获得第一情绪类别;
将所采集的用户语音信息与预置的历史情绪对比数据库进行对比,获得第二情绪类别;
判断第一情绪类别与第二情绪类别是否一致,若是则根据第一情绪类别,判断用户的情绪类别;若否,根据第一情绪类别及第二情绪类别对应的情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。
4.根据权利要求3所述的节目筛选方法,其特征在于,所述用户的情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,且每个情绪类别对应一个情绪值,其中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。
5.如权利要求2所述的节目筛选方法,其特征在于,所述预置的历史情绪对比数据库包括:
面部情绪对比数据库,用于存储历史采集的用户脸部表情信息;
语音情绪对比数据库,用于存储对用户进行提问的信息以及历史采集的用户情绪的词语信息和语调信息;
节目信息数据库,用于存储历史采集的用户观看的节目信息。
6.根据权利要求1-5任一项所述的节目筛选方法,其特征在于,所述节目信息包括:电视节目信息及网络影视节目信息。
7.一种具有情绪识别功能的节目筛选系统,其特征在于,包括:
采集模块,用于采集用户脸部特征信息及语音信息;
情绪判断模块,用于将所采集的用户脸部特征信息及语音信息与预置的历史情绪对比数据库对比判断用户的情绪类别;
节目筛选模块,用于根据所述用户的情绪类别,筛选出对应当前用户情绪类别的节目信息。
8.如权利要求7所述的节目筛选系统,其特征在于,所述采集模块包括:
脸部特征获取单元,用于对进入拍摄范围的用户面部进行锁定,进行拍摄,对所拍摄的图片进行特征提取,采集脸部特征信息;
语气信息获取单元,用于调用预置的历史情绪对比数据库中的提问信息与用户对话并采集用户的语音信息。
9.如权利要求8所述的节目筛选系统,其特征在于,所述情绪判断模块包括:
情绪值计算单元,用于将所采集的用户脸部特征信息与预置的历史情绪对比数据库进行对比,获得对应所述第一情绪类别对应的情绪值;将所采集的语音信息与预置的历史情绪对比数据库进行对比,获得第二情绪类别对应的情绪值;
情绪类别判断单元,用于判断第一情绪类别与第二情绪类别是否一致;若是则根据第一情绪类别,判断用户的情绪类别;若否则根据第一情绪类别对应的情绪值及第二情绪类别对应的情绪值进行加权计算,获得加权情绪值,并根据该加权情绪值,判断用户的情绪类别。
10.根据权利要求9所述的节目筛选系统,其特征在于,所述用户的情绪类别分为“喜”、“怒”、“哀”、“乐”和“无表情”,且每个情绪类别对应一个情绪值,其中,“喜”的情绪值为5,“乐”的情绪值为4,“无表情”的情绪值为3,“哀”的情绪值为2,“怒”的情绪值为1。
11.如权利要求8所述的节目筛选系统,其特征在于,所述预置的历史情绪对比数据库包括:
面部情绪对比数据库,用于存储历史采集的用户脸部表情特征信息;
语音情绪对比数据库,用于存储对用户进行提问的信息以及历史采集的用于对比用户情绪的词语信息和语调信息;
节目信息数据库,用于存储历史采集的用户观看的节目信息。
12.一种电视,其特征在于,包括如权利要求7-11任一项所述的节目筛选系统。
CN201210579212.0A 2012-12-27 2012-12-27 节目筛选方法、系统及具有该系统的电视 Active CN103024521B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210579212.0A CN103024521B (zh) 2012-12-27 2012-12-27 节目筛选方法、系统及具有该系统的电视

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210579212.0A CN103024521B (zh) 2012-12-27 2012-12-27 节目筛选方法、系统及具有该系统的电视

Publications (2)

Publication Number Publication Date
CN103024521A true CN103024521A (zh) 2013-04-03
CN103024521B CN103024521B (zh) 2017-02-08

Family

ID=47972574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210579212.0A Active CN103024521B (zh) 2012-12-27 2012-12-27 节目筛选方法、系统及具有该系统的电视

Country Status (1)

Country Link
CN (1) CN103024521B (zh)

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103235644A (zh) * 2013-04-15 2013-08-07 北京百纳威尔科技有限公司 信息显示方法及装置
CN103634680A (zh) * 2013-11-27 2014-03-12 青岛海信电器股份有限公司 一种智能电视的播放控制方法及装置
CN104023125A (zh) * 2014-05-14 2014-09-03 上海卓悠网络科技有限公司 根据用户情绪自动切换系统场景的方法及终端
CN104038836A (zh) * 2014-06-03 2014-09-10 四川长虹电器股份有限公司 电视节目智能推送的方法
CN104202718A (zh) * 2014-08-05 2014-12-10 百度在线网络技术(北京)有限公司 一种向用户提供信息的方法与装置
CN104616666A (zh) * 2015-03-03 2015-05-13 广东小天才科技有限公司 一种基于语音分析改善对话沟通效果的方法及装置
CN104759017A (zh) * 2014-01-02 2015-07-08 瑞轩科技股份有限公司 睡眠辅助系统及其作业方法
CN104994000A (zh) * 2015-06-16 2015-10-21 青岛海信移动通信技术股份有限公司 一种图像动态呈现的方法和装置
CN105205756A (zh) * 2015-09-15 2015-12-30 广东小天才科技有限公司 一种行为监控的方法和系统
CN105321442A (zh) * 2014-06-23 2016-02-10 卡西欧计算机株式会社 信息评价装置以及信息评价方法
CN105426404A (zh) * 2015-10-28 2016-03-23 广东欧珀移动通信有限公司 一种音乐信息推荐方法、装置和终端
CN105578277A (zh) * 2015-12-15 2016-05-11 四川长虹电器股份有限公司 基于用户心情推送资源的智能电视系统及其处理方法
CN105637887A (zh) * 2013-08-15 2016-06-01 真实眼私人有限公司 支持包括交互收集计算机用户数据的视频印象分析的方法
CN105874405A (zh) * 2013-12-11 2016-08-17 Lg电子株式会社 智能家用电器、其操作方法及使用智能家用电器的语音识别系统
CN105898411A (zh) * 2015-12-15 2016-08-24 乐视网信息技术(北京)股份有限公司 视频推荐方法、系统及服务器
CN106210820A (zh) * 2016-07-30 2016-12-07 杨超坤 一种交互性能良好的智能电视系统
CN106446187A (zh) * 2016-09-28 2017-02-22 广东小天才科技有限公司 信息的处理方法及装置
CN106469297A (zh) * 2016-08-31 2017-03-01 北京小米移动软件有限公司 情绪识别方法、装置和终端设备
CN106658129A (zh) * 2016-12-27 2017-05-10 上海智臻智能网络科技股份有限公司 基于情绪的终端控制方法、装置及终端
CN106874265A (zh) * 2015-12-10 2017-06-20 深圳新创客电子科技有限公司 一种与用户情绪匹配的内容输出方法、电子设备及服务器
CN107667383A (zh) * 2015-05-25 2018-02-06 微软技术许可有限责任公司 推断用于与数字助理一起使用的提示
CN107888947A (zh) * 2016-09-29 2018-04-06 法乐第(北京)网络科技有限公司 一种视频播放方法与装置
CN108038243A (zh) * 2017-12-28 2018-05-15 广东欧珀移动通信有限公司 音乐推荐方法、装置、存储介质及电子设备
CN108039988A (zh) * 2017-10-31 2018-05-15 珠海格力电器股份有限公司 设备控制处理方法及装置
CN108304154A (zh) * 2017-09-19 2018-07-20 腾讯科技(深圳)有限公司 一种信息处理方法、装置、服务器及存储介质
CN108563688A (zh) * 2018-03-15 2018-09-21 西安影视数据评估中心有限公司 一种影视剧本人物情绪识别方法
CN108875047A (zh) * 2018-06-28 2018-11-23 清华大学 一种信息处理方法及系统
WO2019024068A1 (en) * 2017-08-04 2019-02-07 Xinova, LLC SYSTEMS AND METHODS FOR DETECTING EMOTION IN VIDEO DATA
CN109522799A (zh) * 2018-10-16 2019-03-26 深圳壹账通智能科技有限公司 信息提示方法、装置、计算机设备和存储介质
CN110246519A (zh) * 2019-07-25 2019-09-17 深圳智慧林网络科技有限公司 情绪识别方法、设备及计算机可读存储介质
CN112053205A (zh) * 2020-08-21 2020-12-08 北京云迹科技有限公司 通过机器人情绪识别的产品推荐方法及装置
CN112437333A (zh) * 2020-11-10 2021-03-02 深圳Tcl新技术有限公司 节目播放方法、装置、终端设备以及存储介质
CN112464025A (zh) * 2020-12-17 2021-03-09 当趣网络科技(杭州)有限公司 视频推荐方法、装置、电子设备及介质
CN112818841A (zh) * 2021-01-29 2021-05-18 北京搜狗科技发展有限公司 一种识别用户情绪的方法及相关装置
CN113852861A (zh) * 2021-09-23 2021-12-28 深圳Tcl数字技术有限公司 节目推送方法、装置、存储介质及电子设备
CN115047824A (zh) * 2022-05-30 2022-09-13 青岛海尔科技有限公司 数字孪生多模态设备控制方法、存储介质及电子装置
CN115375001A (zh) * 2022-07-11 2022-11-22 重庆旅游云信息科技有限公司 一种用于景区的游客情绪评估方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1395798A (zh) * 2000-11-22 2003-02-05 皇家菲利浦电子有限公司 根据用户的当前心情产生推荐的方法和装置
CN101751923A (zh) * 2008-12-03 2010-06-23 财团法人资讯工业策进会 语音情绪的分类方法及其情绪语意模型的建立方法
CN101789990A (zh) * 2009-12-23 2010-07-28 宇龙计算机通信科技(深圳)有限公司 一种在通话过程中判断对方情绪的方法及移动终端
US20110184721A1 (en) * 2006-03-03 2011-07-28 International Business Machines Corporation Communicating Across Voice and Text Channels with Emotion Preservation
CN102629321A (zh) * 2012-03-29 2012-08-08 天津理工大学 基于证据理论的人脸表情识别方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1395798A (zh) * 2000-11-22 2003-02-05 皇家菲利浦电子有限公司 根据用户的当前心情产生推荐的方法和装置
US20110184721A1 (en) * 2006-03-03 2011-07-28 International Business Machines Corporation Communicating Across Voice and Text Channels with Emotion Preservation
CN101751923A (zh) * 2008-12-03 2010-06-23 财团法人资讯工业策进会 语音情绪的分类方法及其情绪语意模型的建立方法
CN101789990A (zh) * 2009-12-23 2010-07-28 宇龙计算机通信科技(深圳)有限公司 一种在通话过程中判断对方情绪的方法及移动终端
CN102629321A (zh) * 2012-03-29 2012-08-08 天津理工大学 基于证据理论的人脸表情识别方法

Cited By (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103235644A (zh) * 2013-04-15 2013-08-07 北京百纳威尔科技有限公司 信息显示方法及装置
CN105637887A (zh) * 2013-08-15 2016-06-01 真实眼私人有限公司 支持包括交互收集计算机用户数据的视频印象分析的方法
US10194213B2 (en) 2013-08-15 2019-01-29 Realeyes Oü Method in support of video impression analysis including interactive collection of computer user data
US11044534B2 (en) 2013-08-15 2021-06-22 Realeyes Oü Method in support of video impression analysis including interactive collection of computer user data
CN105637887B (zh) * 2013-08-15 2020-01-14 真实眼私人有限公司 视频印象分析的方法
CN103634680A (zh) * 2013-11-27 2014-03-12 青岛海信电器股份有限公司 一种智能电视的播放控制方法及装置
US10269344B2 (en) 2013-12-11 2019-04-23 Lg Electronics Inc. Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
CN105874405A (zh) * 2013-12-11 2016-08-17 Lg电子株式会社 智能家用电器、其操作方法及使用智能家用电器的语音识别系统
CN104759017A (zh) * 2014-01-02 2015-07-08 瑞轩科技股份有限公司 睡眠辅助系统及其作业方法
CN104023125A (zh) * 2014-05-14 2014-09-03 上海卓悠网络科技有限公司 根据用户情绪自动切换系统场景的方法及终端
CN104038836A (zh) * 2014-06-03 2014-09-10 四川长虹电器股份有限公司 电视节目智能推送的方法
CN105321442A (zh) * 2014-06-23 2016-02-10 卡西欧计算机株式会社 信息评价装置以及信息评价方法
CN104202718A (zh) * 2014-08-05 2014-12-10 百度在线网络技术(北京)有限公司 一种向用户提供信息的方法与装置
CN104616666A (zh) * 2015-03-03 2015-05-13 广东小天才科技有限公司 一种基于语音分析改善对话沟通效果的方法及装置
CN104616666B (zh) * 2015-03-03 2018-05-25 广东小天才科技有限公司 一种基于语音分析改善对话沟通效果的方法及装置
CN107667383A (zh) * 2015-05-25 2018-02-06 微软技术许可有限责任公司 推断用于与数字助理一起使用的提示
CN107667383B (zh) * 2015-05-25 2022-11-25 微软技术许可有限责任公司 推断用于与数字助理一起使用的提示
US10997512B2 (en) 2015-05-25 2021-05-04 Microsoft Technology Licensing, Llc Inferring cues for use with digital assistant
CN104994000A (zh) * 2015-06-16 2015-10-21 青岛海信移动通信技术股份有限公司 一种图像动态呈现的方法和装置
CN105205756A (zh) * 2015-09-15 2015-12-30 广东小天才科技有限公司 一种行为监控的方法和系统
CN105426404A (zh) * 2015-10-28 2016-03-23 广东欧珀移动通信有限公司 一种音乐信息推荐方法、装置和终端
CN106874265A (zh) * 2015-12-10 2017-06-20 深圳新创客电子科技有限公司 一种与用户情绪匹配的内容输出方法、电子设备及服务器
CN106874265B (zh) * 2015-12-10 2021-11-26 深圳新创客电子科技有限公司 一种与用户情绪匹配的内容输出方法、电子设备及服务器
CN105898411A (zh) * 2015-12-15 2016-08-24 乐视网信息技术(北京)股份有限公司 视频推荐方法、系统及服务器
CN105578277A (zh) * 2015-12-15 2016-05-11 四川长虹电器股份有限公司 基于用户心情推送资源的智能电视系统及其处理方法
CN106210820A (zh) * 2016-07-30 2016-12-07 杨超坤 一种交互性能良好的智能电视系统
CN106469297A (zh) * 2016-08-31 2017-03-01 北京小米移动软件有限公司 情绪识别方法、装置和终端设备
CN106446187A (zh) * 2016-09-28 2017-02-22 广东小天才科技有限公司 信息的处理方法及装置
CN107888947A (zh) * 2016-09-29 2018-04-06 法乐第(北京)网络科技有限公司 一种视频播放方法与装置
CN106658129A (zh) * 2016-12-27 2017-05-10 上海智臻智能网络科技股份有限公司 基于情绪的终端控制方法、装置及终端
CN106658129B (zh) * 2016-12-27 2020-09-01 上海智臻智能网络科技股份有限公司 基于情绪的终端控制方法、装置及终端
WO2019024068A1 (en) * 2017-08-04 2019-02-07 Xinova, LLC SYSTEMS AND METHODS FOR DETECTING EMOTION IN VIDEO DATA
CN108304154A (zh) * 2017-09-19 2018-07-20 腾讯科技(深圳)有限公司 一种信息处理方法、装置、服务器及存储介质
CN108304154B (zh) * 2017-09-19 2021-11-05 腾讯科技(深圳)有限公司 一种信息处理方法、装置、服务器及存储介质
WO2019085585A1 (zh) * 2017-10-31 2019-05-09 格力电器(武汉)有限公司 设备控制处理方法及装置
CN108039988B (zh) * 2017-10-31 2021-04-30 珠海格力电器股份有限公司 设备控制处理方法及装置
CN108039988A (zh) * 2017-10-31 2018-05-15 珠海格力电器股份有限公司 设备控制处理方法及装置
CN108038243A (zh) * 2017-12-28 2018-05-15 广东欧珀移动通信有限公司 音乐推荐方法、装置、存储介质及电子设备
CN108563688B (zh) * 2018-03-15 2021-06-04 西安影视数据评估中心有限公司 一种影视剧本人物情绪识别方法
CN108563688A (zh) * 2018-03-15 2018-09-21 西安影视数据评估中心有限公司 一种影视剧本人物情绪识别方法
CN108875047A (zh) * 2018-06-28 2018-11-23 清华大学 一种信息处理方法及系统
CN109522799A (zh) * 2018-10-16 2019-03-26 深圳壹账通智能科技有限公司 信息提示方法、装置、计算机设备和存储介质
CN110246519A (zh) * 2019-07-25 2019-09-17 深圳智慧林网络科技有限公司 情绪识别方法、设备及计算机可读存储介质
CN112053205A (zh) * 2020-08-21 2020-12-08 北京云迹科技有限公司 通过机器人情绪识别的产品推荐方法及装置
CN112437333A (zh) * 2020-11-10 2021-03-02 深圳Tcl新技术有限公司 节目播放方法、装置、终端设备以及存储介质
CN112437333B (zh) * 2020-11-10 2024-02-06 深圳Tcl新技术有限公司 节目播放方法、装置、终端设备以及存储介质
CN112464025A (zh) * 2020-12-17 2021-03-09 当趣网络科技(杭州)有限公司 视频推荐方法、装置、电子设备及介质
CN112818841A (zh) * 2021-01-29 2021-05-18 北京搜狗科技发展有限公司 一种识别用户情绪的方法及相关装置
CN113852861A (zh) * 2021-09-23 2021-12-28 深圳Tcl数字技术有限公司 节目推送方法、装置、存储介质及电子设备
CN115047824A (zh) * 2022-05-30 2022-09-13 青岛海尔科技有限公司 数字孪生多模态设备控制方法、存储介质及电子装置
CN115375001A (zh) * 2022-07-11 2022-11-22 重庆旅游云信息科技有限公司 一种用于景区的游客情绪评估方法及装置

Also Published As

Publication number Publication date
CN103024521B (zh) 2017-02-08

Similar Documents

Publication Publication Date Title
CN103024521A (zh) 节目筛选方法、系统及具有该系统的电视
JP4538756B2 (ja) 情報処理装置、情報処理端末、情報処理方法、およびプログラム
CN105117007B (zh) 显示设备的控制方法、装置及智能垫体
CN104239304B (zh) 一种数据处理的方法、装置以及设备
CN103905904B (zh) 播放多媒体文件的方法及装置
US8886259B2 (en) System and method for user profiling from gathering user data through interaction with a wireless communication device
CN102541259A (zh) 电子设备及其根据脸部表情提供心情服务的方法
CN110505491A (zh) 一种直播的处理方法、装置、电子设备及存储介质
US20110107215A1 (en) Systems and methods for presenting media asset clips on a media equipment device
WO2014206147A1 (zh) 一种推荐多媒体资源的方法和装置
CN102576530A (zh) 对声音模式加了标签的联系人
CN106941624A (zh) 网络视频试看的处理方法和装置
CN109858702A (zh) 客户升级投诉的预测方法、装置、设备及可读存储介质
CN105872619A (zh) 一种视频播放记录的匹配方法及匹配装置
CN110377761A (zh) 一种增强视频体验的方法及装置
CN107809654A (zh) 电视机系统及电视机控制方法
CN111405363B (zh) 一种家庭网络中识别机顶盒的当前用户的方法及设备
CN110362711A (zh) 歌曲推荐方法及装置
CN109758769A (zh) 游戏应用玩家终端确定方法、装置、电子设备及存储介质
CN109587562A (zh) 一种节目播放的内容分级控制方法、智能终端及存储介质
CN104049833A (zh) 基于个人生物特征的终端屏幕图像显示方法及装置
CN107465871A (zh) 基于移动终端自动感应拍照的方法、装置及存储介质
CN106650365A (zh) 一种启用不同工作模式的方法及装置
CN115866339A (zh) 电视节目推荐方法、装置、智能设备及可读存储介质
CN116301329A (zh) 智能设备主动交互方法、装置、设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant