CN109951736B - 一种在线实时视频的滤镜方法及系统 - Google Patents

一种在线实时视频的滤镜方法及系统 Download PDF

Info

Publication number
CN109951736B
CN109951736B CN201910290706.9A CN201910290706A CN109951736B CN 109951736 B CN109951736 B CN 109951736B CN 201910290706 A CN201910290706 A CN 201910290706A CN 109951736 B CN109951736 B CN 109951736B
Authority
CN
China
Prior art keywords
filter
video
user side
user
authority
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910290706.9A
Other languages
English (en)
Other versions
CN109951736A (zh
Inventor
梁小龙
陈靖
李小鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing havo Online Technology Co.,Ltd.
Original Assignee
Beijing Dasheng Online Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dasheng Online Technology Co ltd filed Critical Beijing Dasheng Online Technology Co ltd
Priority to CN201910290706.9A priority Critical patent/CN109951736B/zh
Publication of CN109951736A publication Critical patent/CN109951736A/zh
Application granted granted Critical
Publication of CN109951736B publication Critical patent/CN109951736B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开了一种在线实时视频的滤镜方法及系统,其中,所述方法包括:多个用户进入同一个虚拟房间后,各个用户端均从远程服务器下载滤镜参数到本地,通过远程服务器实时发送自身的在线视频数据并接收该虚拟房间的其他用户端的在线视频数据;在具有第一滤镜权限的用户为待处理用户端的在线视频选择第一滤镜参数后,具有第一滤镜权限的用户端根据第一滤镜参数生成滤镜指令,并发送指令至待处理用户端;待处理用户端根据滤镜指令对实时捕获的视频进行处理,并将处理后的视频数据实时发送至其他用户端。与现有技术相比,本发明可以对在线视频进行滤镜操作,也可以实现远程用户对其他用户的在线视频的滤镜操作。

Description

一种在线实时视频的滤镜方法及系统
技术领域
本发明涉及一种在线实时视频的滤镜方法及系统,属于视频处理技术领域。
背景技术
目前,流行的视频滤镜多数是离线的,只能对本地录制的视频添加滤镜,处理之后再上传至服务器。即使能对在线视频添加滤镜,也只是对自身的视频进行处理,而不能对其他用户端在线视频进行滤镜操作,无法实现远程多用户的滤镜操作。另外,使用滤镜的用户也无法修改滤镜参数,导致滤镜无法适应用户视频的实际光线,影响视频的视觉效果。
发明内容
本发明的目的在于,提供一种在线实时视频的滤镜方法及系统,可以至少解决上述技术问题之一。
为解决上述技术问题,本发明采用如下的技术方案:
一种在线实时视频的滤镜方法,包括以下步骤:步骤S1,多个用户进入同一个虚拟房间后,各个用户端均从远程服务器下载该虚拟房间对应的滤镜参数到本地;步骤S2,每个用户端通过所述远程服务器实时发送自身的在线视频数据并接收该虚拟房间的其他用户端的在线视频数据;步骤S3,具有第一滤镜权限的用户端显示下载的滤镜参数效果图以及待处理用户端的在线视频;步骤S4,在具有第一滤镜权限的用户为所述待处理用户端的在线视频选择第一滤镜参数后,所述具有第一滤镜权限的用户端根据所述第一滤镜参数生成滤镜指令,并发送所述滤镜指令至所述待处理用户端;步骤S5,所述待处理用户端根据所述滤镜指令从本地查找对应的第一滤镜参数,并根据所述第一滤镜参数对实时捕获的视频进行处理;步骤S6,所述待处理用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
前述的在线实时视频的滤镜方法中,还包括:步骤S7,具有第二滤镜权限的用户端显示下载的滤镜参数效果图以及自身的在线视频;步骤S8,在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,具有第二滤镜权限的用户端根据所述第二滤镜参数对实时捕获的视频进行处理;步骤S9,所述具有第二滤镜权限的用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
前述的在线实时视频的滤镜方法中,所述步骤S5中根据所述第一滤镜参数对实时捕获的视频进行处理具体包括:所述待处理用户端根据所述第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射;和/或,所述步骤S8中根据所述第二滤镜参数对实时捕获的视频进行处理具体包括:所述具有第二滤镜权限的用户端根据所述第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。
前述的在线实时视频的滤镜方法中,所述步骤S5中根据所述第一滤镜参数对实时捕获的视频进行处理还包括:所述待处理用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射;和/或,所述步骤S8中根据所述第二滤镜参数对实时捕获的视频进行处理还包括:所述具有第二滤镜权限的用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。
前述的在线实时视频的滤镜方法中,所述映射曲线为带有控制点的bezier平滑曲线,其中,所述控制点用于用户对所述映射曲线进行拖动调整。
一种在线实时视频的滤镜系统,包括远程服务器,以及进入同一个虚拟房间的至少一个具有第一滤镜权限的用户端和至少一个待处理用户端;其中,所述具有第一滤镜权限的用户端包括:第一下载模块,用于所述具有第一滤镜权限的用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;第一视频捕获模块,用于所述具有第一滤镜权限的用户端实时捕获自身的在线视频数据;第一视频传输模块,与所述第一视频捕获模块连接,用于所述具有第一滤镜权限的用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;第一显示模块,分别与所述第一下载模块和所述第一视频传输模块连接,用于所述具有第一滤镜权限的用户端显示下载的滤镜参数效果图以及所述待处理用户端的在线视频;指令生成模块,用于在具有第一滤镜权限的用户为所述待处理用户端的在线视频选择第一滤镜参数后,所述具有第一滤镜权限的用户端根据所述第一滤镜参数生成滤镜指令;指令发送模块,与所述指令生成模块连接,用于所述具有第一滤镜权限的用户端发送所述滤镜指令至所述待处理用户端;所述待处理用户端包括:第二下载模块,用于所述待处理用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;第二视频捕获模块,用于所述待处理用户端实时捕获自身的在线视频数据;第二视频传输模块,与所述第二视频捕获模块连接,用于待处理用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;查找模块,与所述第二下载模块连接,用于所述待处理用户端根据所述滤镜指令从本地查找对应的第一滤镜参数;第一滤镜算法模块,分别与所述查找模块和所述第二视频捕获模块连接,用于根据所述第一滤镜参数对实时捕获的视频进行处理;所述第二视频传输模块,与所述第一滤镜算法模块连接,还用于所述待处理用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
前述的在线实时视频的滤镜系统中,还包括具有第二滤镜权限的用户端,所述具有第二滤镜权限的用户端包括:第三下载模块,用于所述具有第二滤镜权限的用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;第三视频捕获模块,用于所述具有第二滤镜权限的用户端实时捕获自身的在线视频数据;第三视频传输模块,与所述第三视频捕获模块连接,用于所述具有第二滤镜权限的用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;第二显示模块,与所述第三下载模块和所述第三视频捕获模块连接,用于所述具有第二滤镜权限的用户端显示下载的滤镜参数效果图以及自身的在线视频;第二滤镜算法模块,分别与所述第三下载模块和所述第三视频捕获模块连接,用于在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,所述具有第二滤镜权限的用户端根据所述第二滤镜参数对实时捕获的视频进行处理;所述第三视频传输模块,与所述第二滤镜算法模块连接,还用于所述具有第二滤镜权限的用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
前述的在线实时视频的滤镜系统中,所述第一滤镜算法模块,具体用于所述待处理用户端根据所述第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射;和/或,所述第二滤镜算法模块,具体用于所述具有第二滤镜权限的用户端根据所述第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。
前述的在线实时视频的滤镜系统中,所述第一滤镜算法模块,具体用于所述待处理用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射;和/或,所述第二滤镜算法模块,具体用于所述具有第二滤镜权限的用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。
前述的在线实时视频的滤镜系统中,所述映射曲线为带有控制点的bezier平滑曲线,其中,所述控制点用于用户对所述映射曲线进行拖动调整。
与现有技术相比,本发明所述方法和系统可以对在线视频进行滤镜操作,也可以实现远程用户对其他用户的在线视频的滤镜操作。
附图说明
图1和图3为本发明实施例一提供的方法的流程图;
图2为本发明实施例一和二的颜色映射曲线图;
图4和图5为本发明实施例二提供的系统的结构示意图;
图6为在线教育系统的视频滤镜方法流程图。
下面结合附图和具体实施方式对本发明作进一步的说明。
具体实施方式
本发明实施例一:
一种在线实时视频的滤镜方法,如图1所示,主要包括以下步骤:
步骤S1,多个用户进入同一个虚拟房间后,各个用户端均从远程服务器下载该虚拟房间对应的滤镜参数到本地;
本实施例中,用户端可以是手机、PC机、平板电脑等终端,对此本实施例不做具体限定。滤镜参数包括针对不同的RGB颜色计算不同的对应颜色,滤镜参数集中在远程服务器端进行管理,滤镜参数的种类和数量由远程服务器在线灵活配置,可以实时进行更新。
步骤S2,每个用户端通过远程服务器实时发送自身的在线视频数据并接收该虚拟房间的其他用户端的在线视频数据;
本实施例中,进入同一个虚拟房间的多个用户端,都可以将自身实时捕获的在线视频(例如摄像头采集视频)通过远程服务器发送至该房间的其他用户端,当然,也可以通过远程服务器接收其他用户端发来的在线视频。
步骤S3,具有第一滤镜权限的用户端显示下载的滤镜参数效果图以及待处理用户端的在线视频;
本实施例中,第一滤镜权限是指该用户端具有命令处于同一虚拟房间的其他用户端对其自身在线视频添加滤镜的权限,而用户端是否具有第一滤镜权限可以由系统预先设定,也可以由该虚拟房间内的具有最高控制权限的用户端设置。处于同一虚拟房间的每个用户端(包括具有第一滤镜权限的用户端)都能显示自身实时的在线视频,也能同时显示同一虚拟房间内的其他用户端发来的在线实时视频。
步骤S4,在具有第一滤镜权限的用户为待处理用户端的在线视频选择第一滤镜参数后,具有第一滤镜权限的用户端根据第一滤镜参数生成滤镜指令,并发送滤镜指令至待处理用户端;
本实施例中,当具有第一滤镜权限的用户从显示的其他用户端的在线视频中选择其中一个或几个视频添加滤镜,被选择的视频所属的用户端就成为待处理用户端。
步骤S5,待处理用户端根据滤镜指令从本地查找对应的第一滤镜参数,并根据第一滤镜参数对实时捕获的视频进行处理;
步骤S5中,待处理用户端根据第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。映射曲线中对RBG或YUV通道的三种颜色分别进行映射,不同的滤镜参数对应不同的滤镜映射曲线,例如,图2给出了一种滤镜参数对应的映射曲线,X轴代表的是输入颜色的值,y轴代表的是输出颜色的值(即最终处理之后的颜色值)。
可选的,待处理用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。可以采用现有的肤色检测算法对每个像素的颜色进行检测;肤色颜色范围是预先设置并存储在远程服务器中的,例如:HSV空间中,H(0~20)、S(10~150)、V(60~255);肤色和整体的映射曲线是根据经验预先设置的。结合肤色检测算法,如果像素的颜色在肤色颜色范围内,则说明该区域是皮肤区域,针对皮肤区域可使用美化皮肤的曲线进行映射;而如果像素的颜色不在肤色颜色范围内,则说明该区域是非皮肤区域,针对非皮肤区域可使用整体映射曲线进行映射,这样可以确保滤镜对皮肤有更加精细的美化效果。
步骤S6,待处理用户端通过远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
本实施例中,待处理用户端会实时显示滤镜处理后的视频,并且,该虚拟房间的其他用户端(包括发出滤镜指令的具有第一滤镜权限的用户端)也会实时显示待处理用户端发送的添加滤镜后的视频数据。
如果由具有第一滤镜权限的用户端直接对待处理用户端发来的视频进行滤镜处理,那么将只有具有第一滤镜权限的用户端能看见滤镜后的视频,其他用户端(包括待处理用户端)均不能看到滤镜后的视频;如果想要其他用户端看到,则需要额外发送滤镜处理后的视频给其他用户端,这无疑会影响整个在线视频的速度,增加服务器运行压力。而在本实施例中,具有第一滤镜权限的用户端并不会直接对待处理用户端发来的视频进行滤镜处理,而是向待处理用户端发送滤镜指令,由待处理用户端为自己实时捕获的视频添加滤镜,并将添加滤镜的视频实时发送给该虚拟房间的所有其他用户端,整个在线视频系统没有增加额外的视频传输任务,不会影响正常的视频传输速度,还能使虚拟房间内的所有用户端都能实时收看添加滤镜后的视频。
作为本实施例的一种可选实施方式,如图3所示,该方法还包括:
步骤S7,具有第二滤镜权限的用户端显示下载的滤镜参数效果图以及自身的在线视频;
步骤S8,在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,具有第二滤镜权限的用户端根据第二滤镜参数对实时捕获的视频进行处理;
步骤S9,具有第二滤镜权限的用户端通过远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
在本可选实施方式中,第二滤镜权限是指该用户端有权限为自身的在线视频添加滤镜,用户端是否具有第二滤镜权限可以由系统预先设定,也可以由该虚拟房间内的具有最高控制权限的用户端设置;因此,通过设置后,用户端可以既具有第一滤镜权限,也可以同时具有第二滤镜权限。步骤S7中,具有第二滤镜权限的用户端除了显示自身的在线视频外,还显示该虚拟房间的其他用户端发来的在线视频;步骤S9中,具有第二滤镜权限的用户端实时显示滤镜处理后的视频,该虚拟房间的其他用户端也会实时显示具有第二滤镜权限的用户端发送的滤镜处理后的视频。
在本可选实施方式中,步骤S8中根据第二滤镜参数对实时捕获的视频进行处理具体包括:具有第二滤镜权限的用户端根据第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。步骤S8中根据第二滤镜参数对实时捕获的视频进行处理还可以包括:具有第二滤镜权限的用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。可以采用现有的肤色检测算法对每个像素的颜色进行检测;肤色颜色范围是预先设置并存储在远程服务器中的,例如:HSV空间中,H(0~20)、S(10~150)、V(60~255);肤色和整体的映射曲线是根据经验预先设置的。结合肤色检测算法,如果像素的颜色在肤色颜色范围内,则说明该区域是皮肤区域,针对皮肤区域可使用美化皮肤的曲线进行映射;而如果像素的颜色不在肤色颜色范围内,则说明该区域是非皮肤区域,针对非皮肤区域可使用整体映射曲线进行映射,这样可以确保滤镜对皮肤有更加精细的美化效果。
本实施例中,可选的,映射曲线为带有控制点的bezier平滑曲线,其中,控制点用于用户对映射曲线进行拖动调整。用户可以通过拖动控制点的位置来调整映射曲线,使映射曲线更加适应用户视频的实际光线,更加适合视频环境,输出更加美观或者符合某种风格的视频。
本发明实施例二:
一种在线实时视频的滤镜系统,如图4所示,包括远程服务器1,以及进入同一个虚拟房间的至少一个具有第一滤镜权限的用户端2和至少一个待处理用户端3;其中,
具有第一滤镜权限的用户端2包括:第一下载模块21,用于具有第一滤镜权限的用户端2在进入该虚拟房间后,从远程服务器1下载该虚拟房间对应的滤镜参数到本地;第一视频捕获模块22,用于具有第一滤镜权限的用户端2实时捕获自身的在线视频数据;第一视频传输模块23,与第一视频捕获模块22连接,用于具有第一滤镜权限的用户端2通过远程服务器1实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;第一显示模块24,分别与第一下载模块21和第一视频传输模块23连接,用于具有第一滤镜权限的用户端2显示下载的滤镜参数效果图以及待处理用户端3的在线视频;指令生成模块25,用于在具有第一滤镜权限的用户为待处理用户端3的在线视频选择第一滤镜参数后,具有第一滤镜权限的用户端2根据第一滤镜参数生成滤镜指令;指令发送模块26,与指令生成模块25连接,用于具有第一滤镜权限的用户端2发送滤镜指令至待处理用户端3;
待处理用户端3包括:第二下载模块31,用于待处理用户端3在进入该虚拟房间后,从远程服务器1下载该虚拟房间对应的滤镜参数到本地;第二视频捕获模块32,用于待处理用户端3实时捕获自身的在线视频数据;第二视频传输模块33,与第二视频捕获模块32连接,用于待处理用户端3通过远程服务器1实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;查找模块34,与第二下载模块31连接,用于待处理用户端3根据滤镜指令从本地查找对应的第一滤镜参数;第一滤镜算法模块35,分别与查找模块34和第二视频捕获模块32连接,用于根据第一滤镜参数对实时捕获的视频进行处理;第二视频传输模块33,与第一滤镜算法模块35连接,还用于待处理用户端3通过远程服务器1将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
本实施例中,用户端可以是手机、PC机、平板电脑等终端,对此本实施例不做具体限定。滤镜参数包括针对不同的RGB颜色计算不同的对应颜色,滤镜参数集中在远程服务器1端进行管理,滤镜参数的种类和数量由远程服务器1在线灵活配置,可以实时进行更新。
本实施例中,进入同一个虚拟房间的多个用户端,都可以将自身实时捕获的在线视频(例如摄像头采集视频)通过远程服务器1发送至该房间的其他用户端,当然,也可以通过远程服务器1接收其他用户端发来的在线视频。
本实施例中,第一滤镜权限是指该用户端具有命令处于同一虚拟房间的其他用户端对自身在线视频添加滤镜的权限,而用户端是否具有第一滤镜权限可以由系统预先设定,也可以由该虚拟房间内的具有最高控制权限的用户端设置。处于同一虚拟房间的每个用户端(包括具有第一滤镜权限的用户端2)都能显示自身实时的在线视频,也能同时显示同一虚拟房间内的其他用户端发来的在线实时视频。
本实施例中,当具有第一滤镜权限的用户从显示的其他用户端的在线视频中选择其中一个或几个视频添加滤镜,被选择的视频所属的用户端就成为待处理用户端3。
本实施例中,第一滤镜算法模块35,具体用于待处理用户端3根据第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。映射曲线中对RBG或YUV通道的三种颜色分别进行映射,不同的滤镜参数对应不同的滤镜映射曲线,例如,图2给出了一种滤镜参数对应的映射曲线,X轴代表的是输入颜色的值,y轴代表的是输出颜色的值(即最终处理之后的颜色值)。
可选的,第一滤镜算法模块35,具体用于待处理用户端3采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。可以采用现有的肤色检测算法对每个像素的颜色进行检测;肤色颜色范围是预先设置并存储在远程服务器1中的,例如:HSV空间中,H(0~20)、S(10~150)、V(60~255);肤色和整体的映射曲线是根据经验预先设置的。结合肤色检测算法,如果像素的颜色在肤色颜色范围内,则说明该区域是皮肤区域,针对皮肤区域可使用美化皮肤的曲线进行映射;而如果像素的颜色不在肤色颜色范围内,则说明该区域是非皮肤区域,针对非皮肤区域可使用整体映射曲线进行映射,这样可以确保滤镜对皮肤有更加精细的美化效果。
本实施例中,待处理用户端3会实时显示滤镜处理后的视频,并且,该虚拟房间的其他用户端(包括发出滤镜指令的具有第一滤镜权限的用户端2)也会实时显示待处理用户端3发送的添加滤镜后的视频数据。
如果由具有第一滤镜权限的用户端2直接对待处理用户端3发来的视频进行滤镜处理,那么将只有具有第一滤镜权限的用户端2能看见滤镜后的视频,其他用户端(包括待处理用户端3)均不能看到滤镜后的视频;如果想要其他用户端看到,则需要额外发送滤镜处理后的视频给其他用户端,这无疑会影响整个在线视频的速度,增加服务器运行压力。而在本实施例中,具有第一滤镜权限的用户端2并不会直接对待处理用户端3发来的视频进行滤镜处理,而是向待处理用户端3发送滤镜指令,由待处理用户端3为自己实时捕获的视频添加滤镜,并将添加滤镜的视频实时发送给该虚拟房间的所有其他用户端,整个在线视频系统没有增加额外的视频传输任务,不会影响正常的视频传输速度,还能使虚拟房间内的所有用户端都能实时收看添加滤镜后的视频。
作为本实施例的一种可选实施方式,如图5所示,该系统还包括具有第二滤镜权限的用户端4,具有第二滤镜权限的用户端4包括:第三下载模块41,用于具有第二滤镜权限的用户端4在进入该虚拟房间后,从远程服务器1下载该虚拟房间对应的滤镜参数到本地;第三视频捕获模块42,用于具有第二滤镜权限的用户端4实时捕获自身的在线视频数据;第三视频传输模块43,与第三视频捕获模块42连接,用于具有第二滤镜权限的用户端4通过远程服务器1实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;第二显示模块44,与第三下载模块41和第三视频捕获模块42连接,用于具有第二滤镜权限的用户端4显示下载的滤镜参数效果图以及自身的在线视频;第二滤镜算法模块45,分别与第三下载模块41和第三视频捕获模块42连接,用于在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,具有第二滤镜权限的用户端4根据第二滤镜参数对实时捕获的视频进行处理;第三视频传输模块43,与第二滤镜算法模块45连接,还用于具有第二滤镜权限的用户端4通过远程服务器1将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
在可选实施方式中,第二滤镜权限是指该用户端有权限为自身的在线视频添加滤镜,用户端是否具有第二滤镜权限可以由系统预先设定,也可以由该虚拟房间内的具有最高控制权限的用户端设置;因此,通过设置后,用户端可以既具有第一滤镜权限,也可以同时具有第二滤镜权限。第二显示模块44除了显示自身的在线视频外,还显示该虚拟房间的其他用户端发来的在线视频;在第二滤镜算法模块45对视频进行滤镜处理后,第二显示模块44会实时显示滤镜处理后的视频,该虚拟房间的其他用户端也会实时显示具有第二滤镜权限的用户端4发送的滤镜处理后的视频。
在可选实施方式中,第二滤镜算法模块45,具体用于具有第二滤镜权限的用户端4根据第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。可选的,第二滤镜算法模块45,具体用于具有第二滤镜权限的用户端4采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。可以采用现有的肤色检测算法对每个像素的颜色进行检测;肤色颜色范围是预先设置并存储在远程服务器1中的,例如:HSV空间中,H(0~20)、S(10~150)、V(60~255);肤色和整体的映射曲线是根据经验预先设置的。结合肤色检测算法,如果像素的颜色在肤色颜色范围内,则说明该区域是皮肤区域,针对皮肤区域可使用美化皮肤的曲线进行映射;而如果像素的颜色不在肤色颜色范围内,则说明该区域是非皮肤区域,针对非皮肤区域可使用整体映射曲线进行映射,这样可以确保滤镜对皮肤有更加精细的美化效果。
本实施例中,可选的,映射曲线为带有控制点的bezier平滑曲线,其中,控制点用于用户对映射曲线进行拖动调整。用户可以通过拖动控制点的位置来调整映射曲线,使映射曲线更加适应用户视频的实际光线,更加适合视频环境,输出更加美观或者符合某种风格的视频。
可以将视频滤镜引入到在线教育课堂,设计出一套在线教育场景中实时的视频滤镜系统,做到视频滤镜与场景、特定的课程、学生老师的交互匹配,不仅能够美化上课视频,同时让课堂有更好的沉浸感和交互性。
下面以在线教育系统为例对上述实施例进行进一步说明(如图6所示):
1、老师和学生利用账户和密码登录服务器,服务器端根据老师和学生的课程与教材,将对应的多个滤镜参数下载到老师端和学生端,其中,滤镜参数与在线的课程相关,可以根据不同的课程风格提供多个不同的滤镜参数,提高课堂的沉浸感;
2、老师具有第一滤镜权限和第二滤镜权限,在课程中,老师可以设置在同一个教材和教室中的所有学生是否具有第一滤镜权限和第二滤镜权限;
3、在上课中,老师端或者有权限的学生端可以给自己或者别人的在线实施视频添加课程相关的滤镜,滤镜算法模块按照每个用户的滤镜参数对用户的摄像头捕获的视频进行处理,处理之后的图像通过网络传输给同一堂课中的老师和其它学生,达到美化视频,提高沉浸感,增强学员老师之间互动的作用;
4、添加完滤镜后,老师端还可以修改所有人的滤镜参数使滤镜参数与用户的视频场景完美结合。
在线教育中老师跟学生,以及学生跟学生之间的沟通都是通过实时的在线视频进行沟通,因此视频的视觉效果会直接影响到学生和老师的上课体验度。通过上述滤镜方法及系统可以实时的让老师与老师之间相互添加不同的视频滤镜,转换视频的颜色空间,提高视频的质量,同时也可添加跟课程相关的视频滤镜,增加上课的沉浸感、互动性和趣味性。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的创造性精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种在线实时视频的滤镜方法,其特征在于,包括以下步骤:
步骤S1,多个用户进入同一个虚拟房间后,各个用户端均从远程服务器下载该虚拟房间对应的滤镜参数到本地;
步骤S2,每个用户端通过所述远程服务器实时发送自身的在线视频数据并接收该虚拟房间的其他用户端的在线视频数据;
步骤S3,具有第一滤镜权限的用户端显示下载的滤镜参数效果图以及待处理用户端的在线视频;
步骤S4,在具有第一滤镜权限的用户为所述待处理用户端的在线视频选择第一滤镜参数后,所述具有第一滤镜权限的用户端根据所述第一滤镜参数生成滤镜指令,并发送所述滤镜指令至所述待处理用户端;
步骤S5,所述待处理用户端根据所述滤镜指令从本地查找对应的第一滤镜参数,并根据所述第一滤镜参数对实时捕获的视频进行处理;
步骤S6,所述待处理用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
2.根据权利要求1所述的在线实时视频的滤镜方法,其特征在于,还包括:
步骤S7,具有第二滤镜权限的用户端显示下载的滤镜参数效果图以及自身的在线视频;
步骤S8,在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,具有第二滤镜权限的用户端根据所述第二滤镜参数对实时捕获的视频进行处理;
步骤S9,所述具有第二滤镜权限的用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
3.根据权利要求2所述的在线实时视频的滤镜方法,其特征在于,所述步骤S5中根据所述第一滤镜参数对实时捕获的视频进行处理具体包括:所述待处理用户端根据所述第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射;和/或,
所述步骤S8中根据所述第二滤镜参数对实时捕获的视频进行处理具体包括:所述具有第二滤镜权限的用户端根据所述第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。
4.根据权利要求3所述的在线实时视频的滤镜方法,其特征在于,所述步骤S5中根据所述第一滤镜参数对实时捕获的视频进行处理还包括:所述待处理用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射;和/或,
所述步骤S8中根据所述第二滤镜参数对实时捕获的视频进行处理还包括:所述具有第二滤镜权限的用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。
5.根据权利要求3至4任一项所述的在线实时视频的滤镜方法,其特征在于,所述映射曲线为带有控制点的bezier平滑曲线,其中,所述控制点用于用户对所述映射曲线进行拖动调整。
6.一种在线实时视频的滤镜系统,其特征在于,包括远程服务器,以及进入同一个虚拟房间的至少一个具有第一滤镜权限的用户端和至少一个待处理用户端;其中,
所述具有第一滤镜权限的用户端包括:
第一下载模块,用于所述具有第一滤镜权限的用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;
第一视频捕获模块,用于所述具有第一滤镜权限的用户端实时捕获自身的在线视频数据;
第一视频传输模块,与所述第一视频捕获模块连接,用于所述具有第一滤镜权限的用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;
第一显示模块,分别与所述第一下载模块和所述第一视频传输模块连接,用于所述具有第一滤镜权限的用户端显示下载的滤镜参数效果图以及所述待处理用户端的在线视频;
指令生成模块,用于在具有第一滤镜权限的用户为所述待处理用户端的在线视频选择第一滤镜参数后,所述具有第一滤镜权限的用户端根据所述第一滤镜参数生成滤镜指令;
指令发送模块,与所述指令生成模块连接,用于所述具有第一滤镜权限的用户端发送所述滤镜指令至所述待处理用户端;
所述待处理用户端包括:
第二下载模块,用于所述待处理用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;
第二视频捕获模块,用于所述待处理用户端实时捕获自身的在线视频数据;
第二视频传输模块,与所述第二视频捕获模块连接,用于待处理用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;
查找模块,与所述第二下载模块连接,用于所述待处理用户端根据所述滤镜指令从本地查找对应的第一滤镜参数;
第一滤镜算法模块,分别与所述查找模块和所述第二视频捕获模块连接,用于根据所述第一滤镜参数对实时捕获的视频进行处理;
所述第二视频传输模块,与所述第一滤镜算法模块连接,还用于所述待处理用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
7.根据权利要求6所述的在线实时视频的滤镜系统,其特征在于,还包括具有第二滤镜权限的用户端,所述具有第二滤镜权限的用户端包括:
第三下载模块,用于所述具有第二滤镜权限的用户端在进入该虚拟房间后,从所述远程服务器下载该虚拟房间对应的滤镜参数到本地;
第三视频捕获模块,用于所述具有第二滤镜权限的用户端实时捕获自身的在线视频数据;
第三视频传输模块,与所述第三视频捕获模块连接,用于所述具有第二滤镜权限的用户端通过所述远程服务器实时发送自身的在线视频数据,并接收该虚拟房间的其他用户端发送的在线视频数据;
第二显示模块,与所述第三下载模块和所述第三视频捕获模块连接,用于所述具有第二滤镜权限的用户端显示下载的滤镜参数效果图以及自身的在线视频;
第二滤镜算法模块,分别与所述第三下载模块和所述第三视频捕获模块连接,用于在具有第二滤镜权限的用户为自身的在线视频选择第二滤镜参数后,所述具有第二滤镜权限的用户端根据所述第二滤镜参数对实时捕获的视频进行处理;
所述第三视频传输模块,与所述第二滤镜算法模块连接,还用于所述具有第二滤镜权限的用户端通过所述远程服务器将滤镜处理后的视频数据实时发送至该虚拟房间的其他用户端。
8.根据权利要求7所述的在线实时视频的滤镜系统,其特征在于,所述第一滤镜算法模块,具体用于所述待处理用户端根据所述第一滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射;和/或,
所述第二滤镜算法模块,具体用于所述具有第二滤镜权限的用户端根据所述第二滤镜参数采用对应的映射曲线来对RGB或者YUV像素进行重新映射。
9.根据权利要求8所述的在线实时视频的滤镜系统,其特征在于,所述第一滤镜算法模块,具体用于所述待处理用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射;和/或,
所述第二滤镜算法模块,具体用于所述具有第二滤镜权限的用户端采用肤色检测算法分别检测实时捕获的视频中的每个像素的颜色是否在预设的肤色颜色范围内,若是则按照肤色映射曲线进行映射,若否则按照整体映射曲线进行映射。
10.根据权利要求8或9任一项所述的在线实时视频的滤镜系统,其特征在于,所述映射曲线为带有控制点的bezier平滑曲线,其中,所述控制点用于用户对所述映射曲线进行拖动调整。
CN201910290706.9A 2019-04-11 2019-04-11 一种在线实时视频的滤镜方法及系统 Active CN109951736B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910290706.9A CN109951736B (zh) 2019-04-11 2019-04-11 一种在线实时视频的滤镜方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910290706.9A CN109951736B (zh) 2019-04-11 2019-04-11 一种在线实时视频的滤镜方法及系统

Publications (2)

Publication Number Publication Date
CN109951736A CN109951736A (zh) 2019-06-28
CN109951736B true CN109951736B (zh) 2021-06-08

Family

ID=67014858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910290706.9A Active CN109951736B (zh) 2019-04-11 2019-04-11 一种在线实时视频的滤镜方法及系统

Country Status (1)

Country Link
CN (1) CN109951736B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110035321B (zh) * 2019-04-11 2022-02-11 北京大生在线科技有限公司 一种在线实时视频的装饰方法与系统
CN116723416B (zh) * 2022-10-21 2024-04-02 荣耀终端有限公司 图像处理方法及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106230841A (zh) * 2016-08-04 2016-12-14 深圳响巢看看信息技术有限公司 一种基于终端的网络直播中视频实时美颜及推流的方法
CN106231367A (zh) * 2016-09-23 2016-12-14 广州华多网络科技有限公司 美颜处理方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2324856C (en) * 1999-11-15 2007-05-29 Lucent Technologies Inc. Method and apparatus for remote audiovisual signal recording
US20170055007A1 (en) * 2015-08-19 2017-02-23 Ericsson Ab System and method for managing segment delivery and bandwidth responsive to encoding complexity metrics

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106230841A (zh) * 2016-08-04 2016-12-14 深圳响巢看看信息技术有限公司 一种基于终端的网络直播中视频实时美颜及推流的方法
CN106231367A (zh) * 2016-09-23 2016-12-14 广州华多网络科技有限公司 美颜处理方法及装置

Also Published As

Publication number Publication date
CN109951736A (zh) 2019-06-28

Similar Documents

Publication Publication Date Title
US11450350B2 (en) Video recording method and apparatus, video playing method and apparatus, device, and storage medium
US20180324229A1 (en) Systems and methods for providing expert assistance from a remote expert to a user operating an augmented reality device
CN108632633B (zh) 一种网络直播的数据处理方法和装置
US10262465B2 (en) Interactive control station
CN108632632B (zh) 一种网络直播的数据处理方法和装置
CN109951736B (zh) 一种在线实时视频的滤镜方法及系统
US9076345B2 (en) Apparatus and method for tutoring in convergence space of real and virtual environment
CN110413108B (zh) 虚拟画面的处理方法、装置、系统、电子设备及存储介质
CN108635863B (zh) 一种网络直播的数据处理方法和装置
CN104731338B (zh) 一种基于封闭式的增强虚拟现实系统及方法
KR20150087763A (ko) 증강현실을 기반으로 한 협업적 교육콘텐츠 제공 시스템 및 제공 서비스 방법
CN113329252A (zh) 一种基于直播的人脸处理方法、装置、设备和存储介质
CN103002349A (zh) 一种视频播放自适应调节的方法及装置
CN109005627A (zh) 一种灯光控制方法、装置、终端及存储介质
CN106054655A (zh) 一种智能家居联动控制方法和装置
CN112312217A (zh) 一种图像编辑方法、装置、计算机设备和存储介质
CN106454098A (zh) 一种虚拟现实拍摄及显示的方法、系统
KR20050082559A (ko) 댄스 학습 시스템, 이를 이용한 인터넷 커뮤니티 서비스시스템과 인터넷 커뮤니티 서비스 방법, 댄스 학습 방법및 상기 방법들을 실행하는 프로그램을 기록한 컴퓨터로읽을 수 있는 기록매체
CN110766606B (zh) 一种图像处理方法及电子设备
CN112619138A (zh) 游戏中技能特效的显示方法和装置
CN115379195B (zh) 视频生成方法、装置、电子设备和可读存储介质
CN115050228B (zh) 一种素材收集方法及装置、电子设备
KR20200039178A (ko) 디지털 아트 교육장치 및 그 교육방법
CN104581196A (zh) 一种视频图像处理的方法及装置
KR102357262B1 (ko) 통신 장치 및 그 영상통화 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220628

Address after: 100085 third floor, No. 9, Shangdi East Road, Haidian District, Beijing

Patentee after: Beijing havo Online Technology Co.,Ltd.

Address before: 100085 No.1, South District, 6th floor, No.9 Shangdi East Road, Haidian District, Beijing

Patentee before: BEIJING DASHENG ONLINE TECHNOLOGY Co.,Ltd.