CN109672935A - 基于用户情绪的视频推送系统及方法 - Google Patents

基于用户情绪的视频推送系统及方法 Download PDF

Info

Publication number
CN109672935A
CN109672935A CN201810556316.7A CN201810556316A CN109672935A CN 109672935 A CN109672935 A CN 109672935A CN 201810556316 A CN201810556316 A CN 201810556316A CN 109672935 A CN109672935 A CN 109672935A
Authority
CN
China
Prior art keywords
user
textures
video
text
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810556316.7A
Other languages
English (en)
Inventor
邱冠荣
李学文
林瑞芳
蔡锡奇
徐懿
苏家汉
陈佑诚
黄英雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Yuzhan Precision Technology Co ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Shenzhen Yuzhan Precision Technology Co ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Yuzhan Precision Technology Co ltd, Hon Hai Precision Industry Co Ltd filed Critical Shenzhen Yuzhan Precision Technology Co ltd
Publication of CN109672935A publication Critical patent/CN109672935A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image

Abstract

本发明提供一种基于用户情绪的视频推送系统及方法,所述系统包括侦测模块,当电子装置播放视频时控制摄像单元实时侦测用户的手势动作及脸部表情;确定模块,根据用户的手势动作及脸部表情确定用户的情绪;选择模块,从存储器存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在显示单元上;上传模块,用于将所述贴图及所述贴图的相关信息上传至一服务器;及推送模块,用于从所述服务器获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至显示单元。本发明可以增强观看用户与电子设备以及其他用户之间的互动性,有效提升了用户体验。

Description

基于用户情绪的视频推送系统及方法
技术领域
本发明涉及人机交互技术领域,尤其涉及一种基于用户情绪的视频推送系统及方法。
背景技术
随着科学技术的进步,智能电子设备如智能电视的发展越来越迅速。现如今,智能电视提供的节目趋于多样化,不但能提供电视台的节目,还能提供视频网站的视频。然而,虽然节目类型和数量都增多了,但用户与智能电视之间的互动仍然比较单一,通常只是智能电视提供节目,然后用户选择节目进行观看,用户无法及时反馈自己对节目的喜好以及观看节目过程中的情绪感受,也无法进行用户之间的互动。
发明内容
有鉴于此,有必要提供一种基于用户情绪的视频推送系统及方法,以解决上述技术问题。
一种基于用户情绪的视频推送系统,运行于一电子装置中,所述电子装置包括存储器、显示单元及摄像单元,所述存储器用于存储多个贴图,所述系统包括:
侦测模块,用于当所述电子装置播放视频时控制所述摄像单元实时侦测用户的手势动作及脸部表情;
确定模块,用于根据用户的手势动作及脸部表情确定用户的情绪;
选择模块,用于从所述存储器存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元上;
上传模块,用于将所述贴图及所述贴图的相关信息上传至一服务器;及
推送模块,用于从所述服务器获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元。
一种基于用户情绪的视频推送方法,应用于一电子装置中,所述电子装置包括存储器、显示单元及摄像单元,所述存储器用于存储多个贴图,所述方法包括以下步骤:
当所述电子装置播放视频时,控制所述摄像单元实时侦测用户的手势动作及脸部表情;
根据用户的手势动作及脸部表情确定用户的情绪;
从所述存储器存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元上;
将所述贴图及所述贴图的相关信息上传至一服务器;及
从所述服务器获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元。
上述基于用户情绪的视频推送系统及方法可以在视频推送的过程中接收观看用户反馈的情绪,并将反映所有观看用户的情绪的贴图随视频一起推送,从而增强观看用户与电子设备以及其他用户之间的互动性,有效提升了用户体验。
附图说明
图1是本发明较佳实施方式中基于用户情绪的视频推送系统的应用环境示意图。
图2是本发明较佳实施方式中贴图管理界面的示意图。
图3是本发明较佳实施方式中视频推送系统的贴图显示示意图。
图4是本发明较佳实施方式中视频推送系统的广告视频推送示意图。
图5是本发明较佳实施方式中基于用户情绪的视频推送方法的流程示意图。
主要元件符号说明
电子装置 1
处理器 10
视频推送系统 100
侦测模块 101
确定模块 102
选择模块 103
获取模块 104
上传模块 105
推送模块 106
语音采集模块 107
转换模块 108
搜寻模块 109
贴图管理界面 110
存储器 20
显示单元 30
摄像单元 40
语音采集单元 50
移动终端 2
服务器 3
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
请参考图1,为本发明所提供的基于用户情绪的视频推送系统100。所述视频推送系统100运行于一电子装置1中。在本实施方式中,所述电子装置1可以为智能电视、智能手机或个人电脑。所述视频推送系统100可以在用户使用所述电子装置1观看视频时基于用户的情绪生成或选择表情贴图,并在所述电子装置1播放视频时一并推送观看此视频的用户上传的表情贴图,提高用户观看视频的交互性。
所述电子装置1至少包括处理器10、存储器20、显示单元30、摄像单元40及语音采集单元50。所述存储器20用于存储多个贴图。在本实施方式中,所述贴图用于反映用户的情绪或心情。例如,当用户的情绪高兴时,可以发送一个内容是大笑的卡通人物的贴图,所述贴图可随所述电子装置1播放的视频一并推送给其他用户的电子装置1。其中,所述贴图可以是静态图片或动态图片。
在本实施方式中,所述显示单元30为LCD(Liquid Crystal Display)显示屏,用于显示所述电子装置1播放的视频。当所述电子装置1为智能手机或平板电脑时,所述显示单元30可以是触控显示屏。
在本实施方式中,所述摄像单元40为CCD摄像头或CMOS摄像头。所述摄像单元40用于拍摄用户的手势动作影像及/或脸部影像。其中,所述影像可以是静态或动态。在本实施方式中,所述语音采集单元50为话筒,用于采集用户的语音。
如图1所示,所述处理器10至少包括侦测模块101、确定模块102、选择模块103、获取模块104、上传模块105、推送模块106、语音采集模块107、转换模块108及搜寻模块109。在本实施方式中,上述模块为存储于所述存储器20中且可被所述处理器10调用执行的可程序化软件指令。可以理解的是,在其他实施方式中,上述模块也可为固化于所述处理器10中的程序指令或固件(firmware)。
所述侦测模块101用于当所述电子装置1播放视频时控制所述摄像单元40实时侦测用户的手势动作及脸部表情。
在本实施方式中,所述摄像单元40装设于所述电子装置1的本体上。所述电子装置1播放的视频可以是电视剧、娱乐综艺、纪录片、音乐视频或新闻等。当所述电子装置1播放视频时,所述摄像单元40开始拍摄预设范围内用户的手势动作及脸部表情。其中,所述预设范围为所述摄像单元40前方五米的范围。
在本实施方式中,所述电子装置1的存储器20内预先存储有用户的脸部特征及手部特征,当所述摄像单元40拍摄到用户时,可根据预先存储的脸部特征及手部特征识别用户的脸部及手部,从而实时侦测用户的手势动作及脸部表情。
在其他实施方式中,所述摄像单元40也可以装设于用户的移动终端2上。当所述电子装置1为智能电视时,所述摄像单元40也可以设置于智能电视的机顶盒上。
所述确定模块102用于根据用户的手势动作及脸部表情确定用户的情绪。
在本实施方式中,所述存储器20还预先存储有多个手势动作影像及脸部表情影像,以及手势动作影像及脸部表情影像与用户情绪的对应关系。其中,所述手势动作影像及脸部表情影像由用户根据自己的习惯使用所述摄像单元40拍摄,并存储至所述存储器20中。
在所述电子装置1播放视频的过程中,当所述摄像单元40拍摄到用户的手势动作影像或脸部表情影像时,所述确定模块102判断所述存储器20中是否预先存储有与拍摄到的手势动作影像或脸部表情影像相同或相似的影像,当判断结果为是时,所述确定模块102进一步根据用户手势动作影像及脸部表情影像与用户情绪的对应关系确定所述用户的情绪。在本实施方式中,所述确定模块102采用影像特征对比的方式将所述摄像单元40拍摄到的手势动作影像或脸部表情影像与所述存储器20中预先存储的手势动作影像或脸部表情影像进行比对,并根据比对得到的特征匹配度判断是否预先存储有与拍摄到的手势动作影像或脸部表情影像相同或相似的影像。
在本实施方式中,所述用户的情绪至少包括喜欢、愤怒、悲伤、快乐、活跃及低调。例如,当用户观看视频时的手势动作影像及/或脸部表情影像与所述存储器20存储的愤怒情绪下的手势动作影像及/或脸部表情影像相同或相似时,所述确定模块102可确定用户的情绪为愤怒。
所述选择模块103用于从所述存储器20存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元30上。
在本实施方式中,所述存储器20中存储有每种情绪对应的多个贴图。当所述确定模块102确定用户的情绪时,所述选择模块103从所述情绪对应的多个贴图中任选一个贴图,并将选择的贴图显示在所述显示单元30上。例如,当所述确定模块102确定用户的情绪为愤怒时,所述选择模块103从与愤怒情绪相对应的多个贴图(即能够反映用户愤怒情绪的贴图)中任选一贴图。
在另一实施方式中,所述电子装置1也可在视频播放界面设置一贴图管理选项(图未示),当所述贴图管理选项被点选时提供一贴图管理界面110(如图2所示),用于显示与用户的每种情绪对应的贴图。当用户观看视频时,可以手动点选所述贴图管理选项以访问所述贴图管理界面110,然后用户可以手动选择所述贴图管理界面110上的贴图以显示在所述显示单元30上,用户选择的贴图所对应的情绪即为所述用户当前的情绪。其中,用户可以采用遥控器控制的方式或触控的方式执行上述操作。需要说明的是,在此实施方式中,所述侦测模块101和确定模块102可以省略。
所述获取模块104用于当所述选择模块103选择的贴图显示于所述显示单元30上时,获取所述贴图的相关信息。
在本实施方式中,所述贴图的相关信息至少包括所述贴图在所述显示单元30上的显示位置、显示所述贴图时所述视频的播放时间、当地日期及时间、用户账户名以及所述电子装置1的IP地址。
在本实施方式中,当所述选择模块103选择与用户情绪相匹配的贴图后,所述贴图随机显示在所述显示单元30上,然后所述获取模块104获取所述贴图在所述显示单元30上的显示位置。
在另一实施方式中,当所述贴图随机显示在所述显示单元30上时,用户可以调整所述贴图的显示位置,然后所述获取模块104获取所述贴图在所述显示单元30上调整后的显示位置。例如,当所述电子装置1为智能电视时,用户可通过电视遥控器或与智能电视通信的移动终端2调整贴图显示在显示单元30上的位置。当所述电子装置1为智能手机时,用户也可以通过触控操作调整所述贴图的显示位置。
所述获取模块104根据视频的播放进度获取显示所述贴图时所述视频的播放时间,根据所述电子装置1的系统信息获取当地日期、时间及电子装置1的IP地址,根据用户的登录信息获取用户账户名。
所述上传模块105用于将所述贴图及所述贴图的相关信息上传至一服务器3。
在本实施方式中,当所述电子装置1播放视频时,与视频提供方的服务器3通信连接,从而进行视频的传输。其中,所述视频提供方可以是电视台或视频网站。具体的,所述上传模块105在将所述贴图上传至所述服务器3时,还将所述贴图在所述显示单元30上的显示位置、显示贴图时所述视频的播放时间、当地日期及时间、用户账户名以及所述电子装置1的IP地址传送至所述服务器3,因此,所述贴图记录有所述视频显示所述贴图的位置及播放时间、当地日期及时间、用户账户名以及所述电子装置1的IP地址。
所述推送模块106用于从所述服务器3获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元30。
在本实施方式中,所述推送模块106根据所述相关信息将观看所述视频的用户上传的贴图推送至所述显示单元30。请参考图3,具体的,当所述电子装置1播放所述视频时,所述推送模块106从所述服务器3获取预设时间段内观看过所述视频的所有用户上传的贴图,并将获取的贴图根据贴图的相关信息中显示每个贴图时视频的播放时间,以时间轴的顺序依次滚动显示在所述显示单元30上。同时,每一贴图显示在所述显示单元30的位置与所述贴图的相关信息中的显示位置一致或相对应。在本实施方式中,所述预设时间段为一年,即所述推送模块106仅推送开启所述视频时前一年内用户上传的贴图。需要说明的是,为避免隐私泄露,推送的贴图不记录上传用户的账户名与对应电子装置1的IP地址。
优选的,当所述电子装置1播放视频时,提供正常播放模式及贴图播放模式供用户选择。当用户选择正常播放模式时,所述推送模块106不会将获取的贴图推送至所述显示单元30。当用户选择贴图播放模式时,所述推送模块106才将获取的贴图推送至所述显示单元30。
所述语音采集模块107用于当所述电子装置1播放视频时,响应用户的语音采集指令控制所述语音采集单元50采集用户语音。
在本实施方式中,所述语音采集单元50设置于所述电子装置1的本体上,为避免采集到不需要的语音,所述语音采集单元50默认处于关闭状态。当用户需要输入语音时,可手动开启所述语音采集单元50以发送语音采集指令,所述语音采集单元50响应用户的语音采集指令开始采集用户的语音,其中,采集到的语音包括语音内容、语音音调及语音音量。
所述转换模块108用于将所述语音采集单元50采集到的语音转换为文字,并将转换得到的文字随贴图一并显示在所述显示单元30上。其中,将语音转换为文字的技术为现有技术,在此不作赘述。
所述获取模块104获取所述贴图及文字的相关信息以及用户的情绪参数。在本实施方式中,所述相关信息至少包括所述贴图及文字在所述显示单元30上的显示位置、所述视频显示所述贴图及文字时的播放时间、当地日期及时间、用户账户名以及所述电子装置1的IP地址。所述用户的情绪参数至少包括所述摄像单元40拍摄到的用户脸部表情、所述语音采集单元50采集到的用户语音音调及语音音量。
所述上传模块105还将所述贴图及文字、所述贴图及文字的相关信息及所述用户的情绪参数上传至所述服务器3。所述推送模块106还将获取的观看所述视频的用户上传的贴图及文字随所述视频一并推送至所述显示单元30。
在本实施方式中,所述推送模块106根据所述获取的相关信息以及用户的情绪参数将所述贴图及文字推送至所述显示单元30。具体的,所述推送模块106当所述电子装置1播放所述视频时,所述推送模块106从所述服务器3获取所述预设时间段内观看过所述视频的所有用户上传的贴图及文字,并将获取的贴图及文字根据相关信息中显示每个贴图及文字时视频的播放时间,以时间轴的方式依次显示在所述显示单元30上。每一贴图及文字在所述显示单元30上的显示位置与所述贴图及文字的相关信息中的显示位置一致或相对应。同时,当所述显示单元30显示所述贴图及文字时,所述电子装置1还可以根据用户情绪参数中的语音音调及语音音量还原播放所述文字对应的语音。
进一步地,所述存储器20还存储有多个广告视频,每一广告视频的播放时机与用户的情绪相关联。所述搜寻模块109用于在所述存储器20中搜寻播放时机与所述用户当前情绪相关联的广告视频。
具体的,当用户的情绪为悲伤时,所述搜寻模块109搜寻具有安慰作用的广告视频,例如安全防护产品广告或保险类广告等。当用户的情绪为快乐时,所述搜寻模块109搜寻具有助兴作用的广告视频,例如啤酒广告等。
所述推送模块106还当所述选择的贴图显示结束后,将所述搜寻模块109搜寻到的广告视频推送至所述显示单元30。在本实施方式中,所述选择模块103选择的反映用户当前情绪的贴图在所述显示单元30上滚动显示完成后,所述推送模块106将搜寻到的广告视频推送至所述显示单元30进行播放。
在本实施方式中,当所述电子装置1推送所述广告视频时,暂停播放当前的视频节目,并控制所述广告视频全屏播放。请参考图4,例如,当上传的贴图所对应的用户情绪为快乐时,所述推送模块106控制所述电子装置1暂停播放当前视频,将搜寻到的啤酒广告推送至所述显示单元30上进行全屏播放,当所述啤酒广告播放完毕,再控制所述电子装置1继续播放当前视频。
在其他实施方式中,当所述电子装置1推送所述广告视频时,也可无需暂停当前的视频,而控制所述广告视频以小窗形式进行播放。
请参考图5,为本发明较佳实施方式中基于用户情绪的视频推送方法的流程示意图。
步骤S101,当所述电子装置1播放视频时,实时侦测用户的手势动作及脸部表情。
步骤S102,根据用户的手势动作及脸部表情确定用户的情绪。
在所述电子装置1播放视频的过程中,当所述摄像单元40拍摄到用户的手势动作影像或脸部表情影像时,判断所述存储器20中是否预先存储有与拍摄到的手势动作影像或脸部表情影像相同或相似的影像,当判断结果为是时,进一步根据用户手势动作影像及脸部表情影像与用户情绪的对应关系确定所述用户的情绪。
步骤S103,从所述存储器20存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元30上。
在本实施方式中,所述存储器20中存储有每种情绪对应的多个贴图。当确定用户的情绪类型时,所述步骤S103从所述情绪对应的多个贴图中任选一个贴图。
步骤S104,当所述选择的贴图显示于所述显示单元30上时,获取所述贴图的相关信息。
在本实施方式中,所述贴图的相关信息至少包括所述贴图在所述显示单元30上的显示位置、显示所述贴图时所述视频的播放时间、当地日期及时间、用户账户名以及所述电子装置1的IP地址。
步骤S105,将所述贴图及所述贴图的相关信息上传至一服务器3。
步骤S106,从所述服务器3获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元30。
步骤S107,在所述存储器20中搜寻播放时机与所述用户当前情绪相关联的广告视频。
步骤S108,当所述选择的贴图显示结束后,将搜寻到的广告视频推送至所述显示单元30。
在本实施方式中,当所述电子装置1推送所述广告视频时,暂停播放当前的视频,并控制所述广告视频全屏播放。在其他实施方式中,当所述电子装置1推送所述广告视频时,也可无需暂停当前的视频,而控制所述广告视频以小窗形式进行播放。
在本实施方式中,所述方法还包括步骤:当所述电子装置1播放视频时,响应用户的语音采集指令采集用户语音;将采集到的语音转换为文字,并将转换得到的文字随贴图一并显示在所述显示单元30上;将所述贴图及文字、所述贴图及文字的相关信息及所述用户的情绪参数上传至所述服务器3;将获取的所述贴图及文字推送至所述显示单元30。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术用户应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (11)

1.一种基于用户情绪的视频推送系统,运行于一电子装置中,所述电子装置包括存储器、显示单元及摄像单元,其特征在于,所述存储器用于存储多个贴图,所述系统包括:
侦测模块,用于当所述电子装置播放视频时控制所述摄像单元实时侦测用户的手势动作及脸部表情;
确定模块,用于根据用户的手势动作及脸部表情确定用户的情绪;
选择模块,用于从所述存储器存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元上;
上传模块,用于将所述贴图及所述贴图的相关信息上传至一服务器;及
推送模块,用于从所述服务器获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元。
2.如权利要求1所述的视频推送系统,其特征在于:所述存储器预先存储有多个手势动作影像及脸部表情影像以及手势动作影像及脸部表情影像与用户情绪的对应关系,所述确定模块根据所述摄像单元拍摄的用户手势动作影像及脸部表情影像与所述对应关系确定所述用户的情绪。
3.如权利要求2所述的视频推送系统,其特征在于:所述用户的情绪至少包括喜欢、愤怒、悲伤、快乐、活跃及低调。
4.如权利要求1所述的视频推送系统,其特征在于,所述存储器还存储有多个广告视频,所述系统还包括:
搜寻模块,用于在所述存储器中搜寻与所述用户当前情绪相关联的广告视频;及
所述推送模块还当所述选择的贴图显示结束后,将搜寻到的广告视频推送至所述显示单元。
5.如权利要求1所述的视频推送系统,其特征在于,所述电子装置还包括语音采集单元,所述系统还包括:
语音采集模块,用于当所述电子装置播放视频时,响应用户的语音采集指令控制所述语音采集单元采集用户语音;
转换模块,用于将所述语音采集单元采集到的语音转换为文字;
所述上传模块还将所述贴图及文字、所述贴图及文字的相关信息及用户的情绪参数上传至所述服务器;及
所述推送模块还将获取观看所述视频的用户上传的所述贴图及文字推送至所述显示单元。
6.如权利要求5所述的视频推送系统,其特征在于,所述系统还包括:
获取模块,用于获取所述贴图及文字的相关信息以及用户的情绪参数,其中,所述贴图及文字的相关信息至少包括所述贴图及文字在所述显示单元上的显示位置、所述视频显示所述贴图及文字时的播放时间、当地日期及时间、用户账户名以及所述电子装置的IP地址,所述用户的情绪参数至少包括所述摄像单元拍摄到的用户脸部表情、所述语音采集单元采集到的用户语音音调及语音音量;及
所述推送模块还当所述电子装置播放所述视频时,根据获取的相关信息以及用户的情绪参数将所述贴图及文字推送至所述显示单元。
7.一种基于用户情绪的视频推送方法,应用于一电子装置中,所述电子装置包括存储器、显示单元及摄像单元,所述存储器用于存储多个贴图,其特征在于,所述方法包括以下步骤:
当所述电子装置播放视频时,控制所述摄像单元实时侦测用户的手势动作及脸部表情;
根据用户的手势动作及脸部表情确定用户的情绪;
从所述存储器存储的多个贴图中选择与所述用户的情绪相匹配的贴图,并将选择的贴图显示在所述显示单元上;
将所述贴图及所述贴图的相关信息上传至一服务器;及
从所述服务器获取观看所述视频的用户上传的贴图,并将获取的贴图随所述视频一并推送至所述显示单元。
8.如权利要求7所述的视频推送方法,其特征在于,所述存储器还预先存储有多个手势动作影像及脸部表情影像以及手势动作影像及脸部表情影像与用户情绪的对应关系,所述方法还包括步骤:
根据所述摄像单元拍摄的用户手势动作影像及脸部表情影像与所述对应关系确定所述用户的情绪。
9.如权利要求7所述的视频推送方法,其特征在于,所述存储器还存储有多个广告视频,所述方法还包括以下步骤:
在所述存储器中搜寻与所述用户当前情绪相关联的广告视频;及
当所述上传的贴图显示结束时,将搜寻到的广告视频推送至所述显示单元。
10.如权利要求7所述的视频推送方法,其特征在于,所述电子装置还包括语音采集单元,所述方法还包括以下步骤:
当所述电子装置播放视频时,响应用户的语音采集指令控制所述语音采集单元采集用户语音;
将所述语音采集单元采集到的语音转换为文字;
将所述贴图及文字、所述贴图及文字的相关信息及用户的情绪参数上传至所述服务器;及
将获取观看所述视频的用户上传的所述贴图及文字推送至所述显示单元。
11.如权利要求10所述的视频推送方法,其特征在于,所述方法还包括以下步骤:
获取所述贴图及文字的相关信息以及用户的情绪参数,其中,所述贴图及文字的相关信息至少包括所述贴图及文字在所述显示单元上的显示位置、所述视频显示所述贴图及文字时的播放时间、当地日期及时间、用户账户名以及所述电子装置的IP地址,所述用户的情绪参数至少包括所述摄像单元拍摄到的用户脸部表情、所述语音采集单元采集到的用户语音音调及语音音量;及
当所述电子装置播放所述视频时,根据获取的相关信息以及用户的情绪参数将所述贴图及文字推送至所述显示单元。
CN201810556316.7A 2017-10-13 2018-05-31 基于用户情绪的视频推送系统及方法 Pending CN109672935A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762571802P 2017-10-13 2017-10-13
US62/571802 2017-10-13

Publications (1)

Publication Number Publication Date
CN109672935A true CN109672935A (zh) 2019-04-23

Family

ID=66096284

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810556316.7A Pending CN109672935A (zh) 2017-10-13 2018-05-31 基于用户情绪的视频推送系统及方法

Country Status (3)

Country Link
US (1) US20190116397A1 (zh)
CN (1) CN109672935A (zh)
TW (1) TW201918851A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110390048A (zh) * 2019-06-19 2019-10-29 深圳壹账通智能科技有限公司 基于大数据分析的信息推送方法、装置、设备及存储介质
CN110473049A (zh) * 2019-05-22 2019-11-19 深圳壹账通智能科技有限公司 理财产品推荐方法、装置、设备及计算机可读存储介质
CN110602516A (zh) * 2019-09-16 2019-12-20 腾讯科技(深圳)有限公司 基于视频直播的信息交互方法、装置及电子设备
CN110868634A (zh) * 2019-11-27 2020-03-06 维沃移动通信有限公司 一种视频处理方法及电子设备
CN111414506A (zh) * 2020-03-13 2020-07-14 腾讯科技(深圳)有限公司 基于人工智能情绪处理方法、装置、电子设备及存储介质
CN112235635A (zh) * 2019-07-15 2021-01-15 腾讯科技(北京)有限公司 动画显示方法、装置、电子设备及存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110110142A (zh) * 2019-04-19 2019-08-09 北京大米科技有限公司 视频处理方法、装置、电子设备及介质
CN113992865B (zh) * 2021-10-29 2023-08-29 北京中联合超高清协同技术中心有限公司 超高清转播现场的氛围烘托方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101169955A (zh) * 2006-10-27 2008-04-30 三星电子株式会社 用于生成内容元数据的方法和设备
CN104581360A (zh) * 2014-12-15 2015-04-29 乐视致新电子科技(天津)有限公司 电视终端和播放电视节目的方法
CN104919485A (zh) * 2012-12-13 2015-09-16 微软技术许可有限责任公司 内容反应注释
CN106550276A (zh) * 2015-09-22 2017-03-29 阿里巴巴集团控股有限公司 视频播放过程中多媒体信息的提供方法、装置和系统
CN106792170A (zh) * 2016-12-14 2017-05-31 合网络技术(北京)有限公司 视频处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101169955A (zh) * 2006-10-27 2008-04-30 三星电子株式会社 用于生成内容元数据的方法和设备
CN104919485A (zh) * 2012-12-13 2015-09-16 微软技术许可有限责任公司 内容反应注释
CN104581360A (zh) * 2014-12-15 2015-04-29 乐视致新电子科技(天津)有限公司 电视终端和播放电视节目的方法
CN106550276A (zh) * 2015-09-22 2017-03-29 阿里巴巴集团控股有限公司 视频播放过程中多媒体信息的提供方法、装置和系统
CN106792170A (zh) * 2016-12-14 2017-05-31 合网络技术(北京)有限公司 视频处理方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110473049A (zh) * 2019-05-22 2019-11-19 深圳壹账通智能科技有限公司 理财产品推荐方法、装置、设备及计算机可读存储介质
CN110390048A (zh) * 2019-06-19 2019-10-29 深圳壹账通智能科技有限公司 基于大数据分析的信息推送方法、装置、设备及存储介质
WO2020253372A1 (zh) * 2019-06-19 2020-12-24 深圳壹账通智能科技有限公司 基于大数据分析的信息推送方法、装置、设备及存储介质
CN112235635A (zh) * 2019-07-15 2021-01-15 腾讯科技(北京)有限公司 动画显示方法、装置、电子设备及存储介质
CN110602516A (zh) * 2019-09-16 2019-12-20 腾讯科技(深圳)有限公司 基于视频直播的信息交互方法、装置及电子设备
CN110868634A (zh) * 2019-11-27 2020-03-06 维沃移动通信有限公司 一种视频处理方法及电子设备
CN110868634B (zh) * 2019-11-27 2023-08-22 维沃移动通信有限公司 一种视频处理方法及电子设备
CN111414506A (zh) * 2020-03-13 2020-07-14 腾讯科技(深圳)有限公司 基于人工智能情绪处理方法、装置、电子设备及存储介质
CN111414506B (zh) * 2020-03-13 2023-09-19 腾讯科技(深圳)有限公司 基于人工智能情绪处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
TW201918851A (zh) 2019-05-16
US20190116397A1 (en) 2019-04-18

Similar Documents

Publication Publication Date Title
CN109672935A (zh) 基于用户情绪的视频推送系统及方法
CN109168034B (zh) 商品信息显示方法、装置、电子设备和可读存储介质
US10623783B2 (en) Targeted content during media downtimes
RU2614137C2 (ru) Способ и устройство для получения информации
US9100701B2 (en) Enhanced video systems and methods
CN109118290B (zh) 方法、系统和计算机可读非暂时性存储介质
US8737820B2 (en) Systems and methods for recording content within digital video
US8913171B2 (en) Methods and systems for dynamically presenting enhanced content during a presentation of a media content instance
US8863212B2 (en) Presentation of an adaptive avatar
US20080088735A1 (en) Social media platform and method
CN106462316A (zh) 显示内容的系统和方法
CN110019933A (zh) 视频数据处理方法、装置、电子设备和存储介质
US20120303442A1 (en) Advertisement rendering for multiple synced devices
WO2018217194A1 (en) Methods and systems for correcting, based on speech, input generated using automatic speech recognition
JP2015536518A (ja) メディアアセットに関するコンテクスト上関係する情報を表示するための方法およびシステム
US20170255654A1 (en) Image display device providing individualized feedback
CN104079964B (zh) 传输视频信息的方法及装置
US20120331514A1 (en) Method and apparatus for providing image-associated information
CN104053063A (zh) 用于控制显示装置的直观的基于图像的节目指南
CN111107434A (zh) 信息推荐方法及装置
US20170017382A1 (en) System and method for interaction between touch points on a graphical display
CN104881407A (zh) 基于特征识别的信息推荐系统及方法
CN103180838A (zh) 在屏幕上显示附加信息的方法
US20140003656A1 (en) System of a data transmission and electrical apparatus
KR102492022B1 (ko) 다중 채널 네트워크의 컨텐츠 관리 방법, 장치 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190423