CN108391139A - 一种用于视频直播中的视频增强方法、介质及设备 - Google Patents
一种用于视频直播中的视频增强方法、介质及设备 Download PDFInfo
- Publication number
- CN108391139A CN108391139A CN201810036550.7A CN201810036550A CN108391139A CN 108391139 A CN108391139 A CN 108391139A CN 201810036550 A CN201810036550 A CN 201810036550A CN 108391139 A CN108391139 A CN 108391139A
- Authority
- CN
- China
- Prior art keywords
- video
- operation behavior
- client
- live video
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 102
- 238000012545 processing Methods 0.000 claims abstract description 82
- 230000002708 enhancing effect Effects 0.000 claims abstract description 70
- 230000006399 behavior Effects 0.000 claims description 220
- 238000004590 computer program Methods 0.000 claims description 5
- 238000009877 rendering Methods 0.000 claims description 5
- 230000014509 gene expression Effects 0.000 claims description 4
- 230000008569 process Effects 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000001965 increasing effect Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25891—Management of end-user data being end-user preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2408—Monitoring of the upstream path of the transmission network, e.g. client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供了一种用于视频直播中的视频增强方法、设备以及视频处理方法,所述用于视频直播中的视频增强方法包括:获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,或,获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成;基于所述视频增强指令,对直播视频进行增强处理。使得无论主播客户端的视频质量如何,均可基于所述视频增强指令,对观众客户端的直播视频进行增强处理,从而为观众客户端提供质量更高的直播视频。
Description
技术领域
本说明书涉及信息技术领域,尤其涉及一种用于视频直播中的视频增强方法、介质以及设备、。
背景技术
目前,移动互联网技术的发展,产生视频直播应用。在主播环境不好的情况下,例如光线不好的情况下,导致直播视频画面质量低下。或者是观看直播的终端所处的网络宽带比较低也会导致视频画面不理想。
基于现有技术,需要更为有效的视频处理方法,在主播视频正常的情况下,为观众提供比源视频更加清晰的视频画面。
发明内容
本说明书实施例提供一种用于视频直播中的视频增强方法、介质以及设备,使得中视频直播过程中,在主播视频正常的情况下,能够为观众提供比源视频更加清晰的视频画面。
为解决上述技术问题,本说明书实施例是这样实现的:
本发明提供了一种用于视频直播中的视频增强方法,包括:
获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,
或
获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成;
基于所述视频增强指令,对直播视频进行增强处理。
优选的,在上述的用于视频直播中的视频增强方法中,获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,包括:
服务器端从客户端获取与用户的操作行为对应的操作行为标识;
服务器端基于所述操作行为标识生成所述视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
服务器端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
优选的,在上述的用于视频直播中的视频增强方法中,该方法进一步包括:
所述服务器端将所述第二直播视频发送给触发所述操作行为标识的用户,以及将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播视频的用户;
或者,
所述服务器端将所述第二直播视频发送给所有正在观看直播视频的用户。
优选的,在上述的用于视频直播中的视频增强方法中,该方法进一步包括:
服务器端获取到用户的操作行为标识后或者进行视频增强处理后,向接收到所述直播视频的至少一个客户端广播所述操作行为。
优选的,在上述的用于视频直播中的视频增强方法中,获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成所述视频增强指令,包括:
客户端获取与用户的操作行为对应的操作行为标识;
客户端基于所述操作行为标识生成所述视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
客户端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
优选的,在上述的用于视频直播中的视频增强方法中,当主播客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第一直播视频或第二直播视频发送给正在观看直播视频的用户;
当主播客户端获取与主播客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第二直播视频发送给正在观看直播视频的用户;
当观众客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
将所述第二直播视频呈现给触发所述操作行为标识的用户。
优选的,在上述的用于视频直播中的视频增强方法中,该方法进一步包括:
客户端将获取的与用户的操作行为对应的操作行为标识发送给服务器端,以便所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
优选的,在上述的用于视频直播中的视频增强方法中,获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成,包括:
客户端获取与用户的操作行为对应的操作行为标识;
服务器端获取所述操作行为标识,并根据所述操作行为标识生成视频增强指令;
客户端获取服务器端发送的视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
客户端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
优选的,在上述的用于视频直播中的视频增强方法中,当主播客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第一直播视频或第二直播视频发送给正在观看直播视频的用户;
当主播客户端获取与主播客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第二直播视频发送给正在观看直播视频的用户;
当观众客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
将所述第二直播视频呈现给触发所述操作行为标识的用户。
优选的,在上述的用于视频直播中的视频增强方法中,该方法进一步包括:
客户端将获取的与用户的操作行为对应的操作行为标识发送给服务器端,以便所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
优选的,在上述的用于视频直播中的视频增强方法中,视频增强指令设置有至少一个级别,当所述视频增强指令的级别大于一个时,不同级别的视频增强指令对应的视频增强处理参数不同。
优选的,在上述的用于视频直播中的视频增强方法中,对直播视频进行增强处理,包括:
对所述直播视频进行预处理,获得预处理后的直播视频;
对所述预处理后的直播视频进行增强处理,获得增强后的直播视频;
对所述增强后的直播视频进行渲染处理。
优选的,在上述的用于视频直播中的视频增强方法中,对所述预处理后的直播视频进行增强处理,包括:
依次获取所述直播视频中的各帧图像;
对每一帧图像,分别执行以下操作:
对所述直播视频中的图像进行纹理增强;
对所述图像进行色彩增强。
优选的,在上述的用于视频直播中的视频增强方法中,对所述直播视频中的图像进行纹理增强,包括:
确定所述直播视频中的图像的纹理有效区域;
使用锐化强度增强所述纹理有效区域的纹理特征。
优选的,在上述的用于视频直播中的视频增强方法中,通过高斯模糊和高斯锐化确定所述纹理有效区域。
优选的,在上述的用于视频直播中的视频增强方法中,所述的锐化强度根据以下公式确定:
其中,SumDiff表示的锐化强度;clamp()表示当小于0时,SumDiff取值为0,当大于1时,SumDiff取值为1;
fSumDiff=∑|Pixel(0,0)-Pixel(x,y)|-|∑Pixel(0,0)-Pixel(x,y)|,Pixel(0,0)表示所述图像的第一个像素,Pixel(x,y)表示所述图像中的任一像素。
优选的,在上述的用于视频直播中的视频增强方法中,使用锐化强度增强所述纹理有效区域的纹理特征,包括:
针对所述图像中的任一像素Pixel(x,y),分别采用以下方式实现:
其中,Gs(x,y)表示Pixel(x,y)增强后的像素值,GsAdd(x,y)表示高斯锐化权重,Hd表示高斯锐化参数,取值范围为1~9,SumDiff表示锐化强度。
优选的,在上述的用于视频直播中的视频增强方法中,对所述图像进行色彩增强,包括:
将所述直播视频中的第一色域的图像转换为第二色域的图像;
对所述第二色域的图像进行色彩增强;
将色彩增强后的第二色域图像转换为第一色域的图像,获得色彩增强的第一色域的图像。
优选的,在上述的用于视频直播中的视频增强方法中,还包括:将所述第一色域的图像转换为第三色域的图像,再将所述第三色域的图像转换为所述第二色域的图像,对所述第二色域的图像进行色彩增强后,先将增强的第二色域图像转换为第三色域的图像,获得增强的第三色域的图像,再将所述增强的第三色域的图像转换为增强的第一色域的图像。
优选的,在上述的用于视频直播中的视频增强方法中,所述第三色域的图像为RGB图像。
优选的,在上述的用于视频直播中的视频增强方法中,所述第二色域的图像为HSL图像。
优选的,在上述的用于视频直播中的视频增强方法中,将第三色域的图像转换为第二色域的图像,包括:
其中,L表示亮度,S表示饱和度,H表示色调,R表示RGB图像中的红色,G表示RGB图像中的绿色,B表示RGB图像中的蓝色,maxcolor=2N-1,mincolor=0,其中,一个像素用Nbit数据描述。
优选的,在上述的用于视频直播中的视频增强方法中,对所述第二色域的图像进行色彩增强,包括,对所述第二色域中的色调进行增强。
优选的,在上述的用于视频直播中的视频增强方法中,对所述第二色域中的色调进行增强,通过以下公式实现:
H=H+(H-Hmid)×Hrate,
其中,Hmid表示色调中间参考值,Hrate表示色调增强参考值。
本发明还提供了一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现以上所述的方法。
本发明又提供了一种用于在用户设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行以上所述的方法。
在本发明提供的一种用于视频直播中的视频增强方法、设备以及视频处理方法中,所述用于视频直播中的视频增强方法包括:获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,或,获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成;基于所述视频增强指令,对直播视频进行增强处理。使得无论主播客户端的视频质量如何,均可基于所述视频增强指令,对观众客户端的直播视频进行增强处理,从而为观众客户端提供质量更高的直播视频。
附图说明
为了更清楚地说明本说明书实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例中用于视频直播中的视频增强方法的流程图;
图2为本发明一实施例中服务器端获取客户端的操作行为标识,生成所述视频增强指令,并对所述直播视频进行增强处理的流程图;
图3为本发明一实施例中主播客户端获取观众客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图;
图4为本发明一实施例中主播客户端获取主播客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图;
图5为本发明一实施例中观众客户端获取观众客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图;
图6为本发明一实施例中客户端获取用户的操作行为标识,服务器基于所述操作行为标识生成视频增强指令,并发送给客户端,客户端基于所述视频增强指令进行视频增强处理的流程图;
图7为本发明一实施例中,观众客户端基于与观众客户端用户的操作行为对应的操作行为标识生成视频增强指令,并进行视频增强处理的流程图;
图8为本发明一实施例中视频处理方法的流程图;
图9为本发明一实施例中对直播视频进行增强处理的流程图;
图10为图9中步骤S903的流程图;
图11为图9中步骤S905的流程图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
以下结合附图,详细说明本说明书各实施例提供的技术方案。
本发明实施例提供了一种用于视频直播中的视频增强方法,用以在主播视频正常的情况下为观众提供比源视频更加清晰的视频画面,具体的,如图1所示,图1为本发明一实施例中用于视频直播中的视频增强方法的流程图。所述用于视频直播中的视频增强方法包括:获取视频增强指令,如图1中的步骤S101,具体的,获取视频增强指令,包括:获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,以及,直接获取视频增强指令,所述视频增强指令是根据与用户的操作行为对应的操作行为标识生成的中的任意一种;以及基于视频增强指令,对直播视频进行增强处理,如图1中的步骤S103。
具体的,在本发明一实施例中,获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,包括:首先,服务器端从客户端获取与用户的操作行为对应的操作行为标识,然后,所述服务器端基于所述操作行为标识生成所述视频增强指令。如图2所示,图2为本发明一实施例中服务器端获取客户端的操作行为标识,生成所述视频增强指令,并对所述直播视频进行增强处理的流程图。
具体的,步骤S202,服务器端从客户端获取与用户的操作行为对应的操作行为标识。
客户端包括主播客户端和观众客户端,用户的操作行为包括但不限于观众客户端发送视频增强礼物或道具,主播客户端的主播发起的增强视频的操作行为。具体的,所述观众客户端的用户的操作行为可以是用户对主播的打赏或者是用户所购买的视频增强礼物。也就是说,观众客户端在一进入直播间的时候,或者是在观看直播的过程中,对主播进行打赏或者购买视频增强礼物。
当然,在本发明的其他实施例中,所述用户的操作行为还包括主播客户端发起的增强视频的操作行为。
步骤S204,所述服务器端基于所述操作行为标识生成所述视频增强指令。
当所述操作行为是观众端用户发起时,所述服务器基于与所述观众端用户的操作行为对应的操作行为标识,生成所述视频增强指令。
当所述操作行为是主播客户端发起时,所述服务器端基于与主播客户端用户的操作行为对应的操作行为标识,生成所述视频增强指令。
步骤S206,所述服务器端基于所述视频增强指令,对直播视频进行增强处理。
具体的,所述服务器端对第一直播视频进行增强处理,生成第二直播视频,其中,所述第一直播视频由主播客户端实时录制主播直播画面而生成。
所述服务器端可以将所述第二直播视频发送给触发所述操作行为标识的用户,而将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播的用户,也可以将所述第二直播视频发送给接收到所述第一直播视频的所有观众端,即将所述第二直播视频发送给正在观看直播视频的所有用户。
步骤S208,所述服务器端对接收到所述直播视频的至少一个客户端广播所述操作行为。
具体的,所述服务器端在获取到与用户的操作行为对应的操作行为标识后,或者进行视频增强处理后,在直播间中广播所述操作行为,即向接收到所述直播视频的至少一个客户端(包括观众客户端和主播客户端)广播观众端的用户的打赏行为。
在本发明又一实施例中,客户端获取与用户的操作行为对应的操作行为标识,并基于所述操作行为或操作行为标识生成视频增强指令,并且基于所述视频增强指令,对直播视频进行增强处理。
具体,如图3所示,图3为本发明一实施例中主播客户端获取观众客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图。
步骤S301,主播客户端获取观众客户端与用户的操作行为对应的操作行为标识。
即所述主播客户端获取观众客户端的用户发送的视频增强礼物。
步骤S303,主播客户端基于所述操作行为标识生成视频增强指令。
步骤S305,所述主播客户端基于所述视频增强指令,对第一直播进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
步骤S307,所述主播客户端将所述第一直播视频和第二直播视频发送给服务器端。
步骤S309,所述服务器端将所述第一直播视频和/或第二直播视频发送给正在观看直播视频的用户。
所述服务器端可以将所述第二直播视频发送给触发所述操作行为标识的用户,而将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播的用户,也可以将所述第二直播视频发送给接收到所述第一直播视频的所有观众端,即将所述第二直播视频发送给正在观看直播视频的所有用户。
步骤S311,所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
具体的,所述主播客户端在接收到所述观众客户端的与用户的操作行为对应的操作行为标识后,将所述操作行为标识发送给所述服务器端,所述服务器端在接收到所述操作行为标识后,向接收到所述直播视频的至少一个客户端(包括观众客户端和主播客户端)广播所述操作行为。
图4为本发明一实施例中主播客户端获取主播客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图。
步骤S402,主播客户端获取主播客户端与用户的操作行为对应的操作行为标识。
具体的,主播客户端获取与主播的操作行为对应的操作行为标识。
步骤S404,主播客户端基于所述操作行为或操作行为标识生成视频增强指令。
步骤S406,所述主播客户端基于所述视频增强指令,对第一直播进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
步骤S408,所述主播客户端将所述第一直播视频和第二直播视频发送给服务器端。
步骤S410,所述服务器端将所述第二直播视频发送给正在观看直播视频的用户。
所述服务器端将所述第二直播视频发送给正在观看直播视频的所有用户。
步骤S412,所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
具体的,所述主播客户端在接收到与主播的操作行为对应的操作行为标识后,将所述操作行为标识发送给所述服务器端,所述服务器端在接收到所述操作行为标识后,向接收到所述直播视频的至少一个客户端(包括观众客户端和主播客户端)广播所述操作行为。
图5为本发明一实施例中观众客户端获取观众客户端用户的操作行为标识,生成视频增强指令,并进行视频增强处理的流程图。
步骤S501,观众客户端获取观众客户端与用户的操作行为对应的操作行为标识。
步骤S503,观众客户端基于所述操作行为或操作行为标识生成视频增强指令。
步骤S505,所述观众客户端基于所述视频增强指令,对第一直播进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
步骤S507,将所述第二直播视频呈现给触发所述操作行为标识的用户。
步骤S509,所述观众客户端将所述操作行为标识发送给服务器端,所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
具体的,所述观众客户端在接收到与观众客户端的用户的操作行为对应的操作行为标识后,将所述操作行为标识发送给所述服务器端,所述服务器端在接收到所述操作行为标识后,向接收到所述直播视频的至少一个客户端(包括观众客户端和主播客户端)广播所述操作行为。
图6为本发明一实施例中客户端获取用户的操作行为标识,服务器基于所述操作行为标识生成视频增强指令,并发送给客户端,客户端基于所述视频增强指令进行视频增强处理的流程图。
步骤S602,客户端获取与用户的操作行为对应的操作行为标识。
所述操作行为可以是主播客户端的操作行为,也可以是观众客户端的操作行为。客户端获取所述操作行为标识包括:主播客户端获取与主播的操作行为对应的操作行为标识、主播客户端获取与观众客户端用户的操作行为对应的操作行为标识以及观众客户端获取与观众客户端用户的操作行为对应的操作行为标识。
步骤S604,客户端将获取的所述操作行为标识发送给服务器端。
步骤S606,所述服务器端接收所述操作行为标识,并基于所述操作行为标识生成视频增强指令。
步骤S608,所述服务器将所述视频增强指令发送给所述客户端。
步骤S610,所述服务器端向接收到直播视频的至少一个客户端广播所述操作行为。
具体的,所述观众客户端在接收到与观众客户端的用户的操作行为对应的操作行为标识后,将所述操作行为标识发送给所述服务器端,所述服务器端在接收到所述操作行为标识后,向接收到所述直播视频的至少一个客户端(包括观众客户端和主播客户端)广播所述操作行为。
步骤S612,所述客户端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中,第一直播视频由主播客户端实时录制主播直播画面而生成。
步骤S614,所述服务器端将所述第一直播视频和/或第二直播视频发送给正在观看直播视频的用户。
所述服务器端可以将所述第二直播视频发送给触发所述操作行为标识的用户,而将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播的用户,也可以将所述第二直播视频发送给接收到所述第一直播视频的所有观众端,即将所述第二直播视频发送给正在观看直播视频的所有用户。
当所述操作行为是主播发起的,将所述第二直播视频发送给正在观看直播视频的所有用户。当所述操作行为是观众引起的,可以将所述第二直播视频发送给触发所述操作行为标识的用户,而将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播的用户,也可以将所述第二直播视频发送给接收到所述第一直播视频的所有观众端。
在本发明一实施例中,所述视频增强指令设置有至少一个级别,当所述视频增强指令的级别大于一个时,不同级别的视频增强指令对应的视频增强处理的强度不同;针对不同级别的视频增强指令,分别执行以下操作:基于该级别的视频增强指令,对所述直播视频进行与该级别对应的强度的视频增强处理。
具体的,设置有至少一个级别的视频增强指令,每一个级别的视频增强指令对应一个级别的视频增强处理强度。在本发明一实施例中,用峰值信噪比(Peak Signal-to-NoiseRatio,PSNR,单位dB)来度量直播视频的质量。例如,设置有3个不同级别的视频增强指令,分别为第一级别视频增强指令,第二级别视频增强指令以及第三级别视频增强指令,进一步的,所述第一级别视频增强指令对应第一级别的视频增强处理强度,获得第一级别的视频质量,所述第二级别视频增强指令对应第二级别的视频增强处理强度,获得第二级别的视频质量,所述第三级别视频增强指令对应第三级别的视频增强处理强度,获得第三级别的视频质量,其中,在本发明一实施例中,视频质量的第一级别,第二级别以及第三级别依次增大,也就是说,第二级别的视频质量高于第一级别的视频质量,第三级别的视频质量高于第二级别的视频视频质量。
需要说明的是,在本发明的其他实施例中,所述视频增强指令的级别的数量还可以是其他数值,本发明并不以此为限,进一步的,在上述的视频质量的第一级别,第二级别以及第三级别中,还可以是第一级别的视频质量高于第二级别的视频质量,第二级别的视频质量高于第三级别的视频质量,本发明并不以此为限
接下来以一个具体的实施例进行说明,如图7所示,图7为本发明一实施例中,观众客户端基于与观众客户端用户的操作行为对应的操作行为标识生成视频增强指令,并进行视频增强处理的流程图。
首先,观众客户端生成所述视频增强指令,如图7中的步骤S701。
观众端的用户可以在直播一开始就发起所述操作行为,也就是说,观众客户端可以在直播一开始就基于与用户的操作行为对应的操作行为标识生成所述视频增强指令,也可以在观看直播的过程中基于所述操作行为标识生成并发出所述视频增强指令。也就是说,观众客户端可以在任何时候基于所述操作行为标识生成并发出所述视频增强指令。
在本发明一实施例中,所述观众客户端生成的视频增强指令可以是观众客户端对主播的打赏或者是观众客户端所购买的视频增强礼物。也就是说,观众客户端在一进入直播间的时候,或者是在观看直播的过程中,对主播进行打赏或者购买视频增强礼物。
其次,根据观众客户端发出视频增强指令的级别,确定与所述视频增强指令的级别对应的视频增强处理的强度,如图7中的步骤S703。然后,对所述直播视频进行与所述视频增强指令的级别对应强度的视频增强处理,如图7中的步骤S705。
具体的,在本发明一实施例中,可以按照观众客户端向主播打赏的金额或者所购买的视频增强礼物的金额来对其所发送的视频增强指令进行级别设置。
接上例,当设置三个级别的视频增强指令时,可以设置两个金额阈值,分别为第一金额阈值和第二金额阈值,所述第一金额阈值大于所述第二金额阈值。当观众客户端向主播打赏的金额大于等于所述第一金额阈值时,所述观众客户端发送第一级别的视频增强指令,与其对应的视频增强处理的强度是第一级别,获得增强后的直播视频的质量是最高的。
当观众客户端向主播打赏的金额小于所述第一金额阈值,且大于等于第二金额阈值时,所述观众客户端发送的是第二级别的视频增强指令,与其对应的视频增强处理的强度是第二级别,获得的增强后的直播视频的质量低于所述第一级别。
当观众客户端向主播打赏的金额小于所述第二金额阈值时,所述观众客户端发送的是第三级别的视频增强指令,与其对应的视频增强处理的强度是第三级别,获得的增强后的直播视频的质量低于所述第二级别。需要说明的是,所述第三级别的直播视频的质量要高于未进行视频增强前直播视频的质量。
在本发明的另一实施例中,设置有多个视频增强礼物,不同的视频增强礼物对应不同级别的视频增强指令。观众客户端在购买不同视频增强礼物时,会根据该视频增强礼物对应的视频增强指令的级别付出不同的对价,也就是说,不同的视频增强礼物的价格不一样。
例如,接上例,设置有三个不同级别的视频增强指令,第一级别的视频增强指令对应第一价格的视频增强礼物,第二级别的视频增强指令对应第二价格的视频增强礼物,第三级别的视频增强指令对应第三价格的视频增强礼物。例如,当观众客户端购买第一价格的视频增强礼物后,即,所述观众客户端发送第一级别的视频增强指令,所述观众客户端对所述直播视频进行第一级别强度的视频增强处理。在本发明一实施例中,所述第一级别的直播视频质量是最好的,当然,在本发明的其他实施例中,也可以将所述第三级别的直播视频的质量设置为最好的,本发明并不以此为限。
对直播视频进行增强处理的过程如图8所示,图8为本发明一实施例中对直播视频进行处理的流程图。对直播视频进行增强处理的过程包括:对所述直播视频进行预处理,获得预处理后的直播视频,如图8中的步骤S802;然后对所述处理后的直播视频进行增强处理,获得增强后的直播视频,如图8中的步骤S804;以及对增强后的直播视频进行渲染处理,如图8中的步骤S806。
具体的,步骤S802,对直播视频进行预处理。
在本发明一实施例中,接收所述直播视频的观众客户端接收所述直播视频,在接收所述直播视频后,对其进行预处理,所述预处理的过程包括:解码或者解压缩。当然在本发明的其他实施例中,并不以此为限,还包括对接收到的视频其他处理。
在对所述直播视频进行预处理后,获得预处理后的直播视频。
步骤S804,对所述预处理后的直播视频进行增强处理,获得增强后的直播视频。
步骤S806,对所述增强后的直播视频进行渲染处理。
具体而言,对所述增强后的直播视频进行渲染显示,为观众提供视觉效果更佳的直播视频。
在本发明一实施例中,上述步骤S804中对所述预处理后的直播视频进行增强处理的过程,如图9所示,包括:
依次获取实时直播视频中的各帧图像,如图9中的步骤S901;对每一帧图像,分别执行以下操作:对所述图像进行纹理增强,如图9中的步骤S903,然后对纹理增强后的图像进行色彩增强,如图9中的步骤S905。
对于步骤S901,依次获取所述直播视频中的各帧图像。
步骤S903:对每一帧图像,对所述图像进行纹理增强。
具体的,如图10所示,图10为图9中步骤S903的具体实现流程。首先,对所述直播视频中的图像进行降噪处理,如图10中的步骤S9031。
在本发明实施例中,采用图像平滑算法消除图像中的噪声,例如,所述图平滑算法包括但不限于:方框滤波,均值滤波,高斯滤波,中值滤波以及双边滤波等。具体的,在本发明一实施例中,采用高斯模糊算法(即高斯滤波)消除所述图像中的噪声。
进一步的,在本实施例中,采用二维的高斯模糊算法消除所述图像中的噪声,具体的,通过以下公式实现:
其中,σ是x的方差,(x,y)表示图像中第(x,y)个像素点。
然后,对降噪平滑处理后的图像进行锐化,如图10中的步骤S9033。在本发明一实施例中,采用高斯锐化对所述平滑后的图像进行锐化。
具体的,二维高斯锐化通过以下公式实现:
Gs(x,y)=GsAdd(x,y)×Pixel(x,y)+Pixel(x,y),(公式2)。
其中,GsAdd(x,y)表示高斯锐化权重,Pixel(x,y)为图像中的第(x,y)个像素点,Gs(x,y)表示图像中第(x,y)个像素经过高斯锐化后的像素值。
通过所述高斯模糊和高斯锐化确定所述直播视频中图像的纹理有效区域。接下来,对所述纹理有效区域进行进一步增强,具体的,使用锐化强度增强所述纹理有效区域的纹理特征。如图10中的步骤S9035。
具体的,针对所述图像中的任意一个像素Pixel(x,y),分别采用以下公式实现:
其中,Gs(x,y)表示Pixel(x,y)增强后的像素值,GsAdd(x,y)表示高斯锐化权重,Hd表示高斯锐化参数,取值范围为1~9,可以根据实际需要进行设定,SumDiff表示锐化强度。
进一步的,所述锐化强度SumDiff通过以下公式实现:
其中,SumDiff表示的锐化强度;clamp()表示当小于0时,SumDiff取值为0,当大于1时,SumDiff取值为1;
fSumDiff=∑|Pixel(0,0)-Pixel(x,y)|-|∑Pixel(0,0)-Pixel(x,y)|,Pixel(0,0)表示所述图像的第一个像素,Pixel(x,y)表示所述图像中的任一像素。
对于图9中的步骤S905,对所述图像进行色彩增强。具体的实现步骤如图11所示,图11为步骤S905的流程图。
首先,将所述直播视频中的第一色域的图像转换为第三色域的图像,如图11中的步骤S9054。
需要说明的是,所述第一色域的图像为直播视频中的图像格式,可以是任意的视频格式,较佳的,在本发明一实施例中,所述直播视频中的图像为YUV格式的图像,更有利于视频的传输,具体而言,所述第一色域即为YUV色域。
所述第三色域的图像为RGB格式的图像,也就是说,在步骤S9051中,将YUV格式的图像转换为RGB格式的图像。
接下来,将所述第三色域的图像转换为第二色域的图像,如图11中的步骤S9053。在本发明一实施例中,所述第二色域的图像为HSL色域的图像。接上例,将RGB格式的图像转换为HSL格式的图像,也就是说,将RGB色域的图像转换为HSL色域的图像。
在本发明一实施例中,将RGB格式的图像转换为HSL格式的图像的过程通过以下公式实现:
其中,L表示亮度,S表示饱和度,H表示色调,R表示RGB图像中的红色,G表示RGB图像中的绿色,B表示RGB图像中的蓝色,maxcolor=2N-1,mincolor=0,其中,一个像素用Nbit数据描述。
例如,当N取值8时,也就是说一个像素用8bit数据进行描述,此时,L=128,S=-1.0079,每个像素的H根据其本身的RGB值进行计算。
在HSL色域对图像进行色彩增强。如图11中的步骤S9055。
具体的,主要是对敏感的色调H进行增强,在本发明一实施例中,采用线性增强公式实现:
H=H+(H-Hmid)×Hrate,(公式8);
其中,Hmid表示色调中间参考值,Hrate表示色调增强参考值,其取值范围也为1~9,可以根据实际需要进行设定。
更具体的,在本发明一实施例中,当N取值为8时,色调中间参考值可以取值为128。
然后,将增强后的第二色域的图像转换为第三色域的图像,获得增强后的第三色域的图像,如图11中的步骤S9057,具体而言,将增强后的HSL色域的图像转换为RGB色域的图像,从而获得增强的RGB色域的图像。
接下来,再将增强的第三色域的图像转换为第一色域的图像,获得增强后的第一色域图像,即获得色彩增强后的直播视频中的图像,如图11中的步骤S6059所示,具体而言,就是将增强后的RGB色域的图像转换为YUV色域的图像,从而获得增强后的YUV色域的图像,即获得增强后的直播视频中的图像。
具体的,可以通过以下公式实现:
其中,UV(x,y)表示增强后YUV色域中像素点(x,y)的像素值,UVPixel(x,y)表示增强前YUV色域中像素点(x,y)的像素值,一个像素用N位数据描述,chrom表示增强参考值,可以设置为1~9,可以根据实际请求进行设定,clamp()表示当的值小于0时,UV(x,y)取值为0,当的值大于(2N-1)时,UV(x,y)的取值为(2N-1)。
需要说明的是,在本发明的其他实施例中,还可以将所述直播视频中的第一色域的图像直接转换为第二色域的图像,在所述第二色域对图像进行色彩增强后,获得增强后的第二色域的图像,然后再将增强后的第二色域的图像转换为第一色域的图像,从而获得增强后的第一色域的图像,即,获得增强后的所述直播视频中的图像。
本发明实施例还提供了一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现以上所述的用于视频直播中的视频增强方法。
本发明实施例又提供了一种用于在用户设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行以上所述的用于视频直播中的视频增强方法。
在本发明实施例提供的一种用于视频直播中的视频增强方法、设备以及视频处理方法中,所述用于视频直播中的视频增强方法包括:获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,或,获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成;基于所述视频增强指令,对直播视频进行增强处理。使得无论主播客户端的视频质量如何,均可基于所述视频增强指令,对观众客户端的直播视频进行增强,从而为观众客户端提供质量更高的直播视频。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (26)
1.一种用于视频直播中的视频增强方法,其特征在于,包括:
获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,
或
获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成;
基于所述视频增强指令,对直播视频进行增强处理。
2.根据权利要求1所述的用于视频直播中的视频增强方法,其特征在于,获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成视频增强指令,包括:
服务器端从客户端获取与用户的操作行为对应的操作行为标识;
服务器端基于所述操作行为标识生成所述视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
服务器端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
3.根据权利要求2所述的用于视频直播中的视频增强方法,其特征在于,该方法进一步包括:
所述服务器端将所述第二直播视频发送给触发所述操作行为标识的用户,以及将所述第一直播视频发送给除触发所述操作行为标识的用户以外的观看直播视频的用户;
或者,
所述服务器端将所述第二直播视频发送给所有正在观看直播视频的用户。
4.根据权利要求3所述的用于视频直播中的视频增强方法,其特征在于,该方法进一步包括:
服务器端获取到用户的操作行为标识后或者进行视频增强处理后,向接收到所述直播视频的至少一个客户端广播所述操作行为。
5.根据权利要求1所述的用于视频直播中的视频增强方法,其特征在于,获取与用户的操作行为对应的操作行为标识,并基于所述操作行为标识生成所述视频增强指令,包括:
客户端获取与用户的操作行为对应的操作行为标识;
客户端基于所述操作行为标识生成所述视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
客户端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
6.根据权利要求5所述的用于视频直播中的视频增强方法,其特征在于,当主播客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第一直播视频或第二直播视频发送给正在观看直播视频的用户;
当主播客户端获取与主播客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第二直播视频发送给正在观看直播视频的用户;
当观众客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
将所述第二直播视频呈现给触发所述操作行为标识的用户。
7.根据权利要求6所述的用于视频直播中的视频增强方法,其特征在于,该方法进一步包括:
客户端将获取的与用户的操作行为对应的操作行为标识发送给服务器端,以便所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
8.根据权利要求1所述的用于视频直播中的视频增强方法,其特征在于,获取视频增强指令,所述视频增强指令根据与用户的操作行为对应的操作行为标识生成,包括:
客户端获取与用户的操作行为对应的操作行为标识;
服务器端获取所述操作行为标识,并根据所述操作行为标识生成视频增强指令;
客户端获取服务器端发送的视频增强指令;
基于所述视频增强指令,对直播视频进行增强处理,包括:
客户端基于所述视频增强指令,对第一直播视频进行增强处理,生成第二直播视频,其中第一直播视频由主播客户端实时录制主播直播画面而生成。
9.根据权利要求8所述的用于视频直播中的视频增强方法,其特征在于,
当主播客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第一直播视频或第二直播视频发送给正在观看直播视频的用户;
当主播客户端获取与主播客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
主播客户端将所述第一直播视频以及所述第二直播视频发送给所述服务器端,以便所述服务器端将所述第二直播视频发送给正在观看直播视频的用户;
当观众客户端获取与观众客户端用户的操作行为对应的操作行为标识时,该方法进一步包括:
将所述第二直播视频呈现给触发所述操作行为标识的用户。
10.根据权利要求9所述的用于视频直播中的视频增强方法,其特征在于,该方法进一步包括:
客户端将获取的与用户的操作行为对应的操作行为标识发送给服务器端,以便所述服务器端向接收到所述直播视频的至少一个客户端广播所述操作行为。
11.根据权利要求1所述的用于视频直播中的视频增强方法,其特征在于,
视频增强指令设置有至少一个级别,当所述视频增强指令的级别大于一个时,不同级别的视频增强指令对应的视频增强处理参数不同。
12.根据权利要求1所述的用于视频直播中的视频增强方法,对直播视频进行增强处理,包括:
对所述直播视频进行预处理,获得预处理后的直播视频;
对所述预处理后的直播视频进行增强处理,获得增强后的直播视频;
对所述增强后的直播视频进行渲染处理。
13.根据权利要求12所述的视频处理方法,其特征在于,对所述预处理后的直播视频进行增强处理,包括:
依次获取所述直播视频中的各帧图像;
对每一帧图像,分别执行以下至少一下操作:
对图像进行纹理增强;
对所述图像进行色彩增强。
14.根据权利要求13所述的视频处理方法,其特征在于,对所述图像进行纹理增强,包括:
确定所述图像的纹理有效区域;
使用锐化强度增强所述纹理有效区域的纹理特征。
15.根据权利要求14所述的视频处理方法,其特征在于,通过高斯模糊和高斯锐化确定所述纹理有效区域。
16.根据权利要求15所述的视频处理方法,其特征在于,所述的锐化强度根据以下公式确定:
其中,SumDiff表示的锐化强度;clamp()表示当小于0时,SumDiff取值为0,当大于1时,SumDiff取值为1;
fSumDiff=∑|Pixel(0,0)-Pixel(x,y)|-|∑Pixel(0,0)-Pixel(x,y)|,Pixel(0,0)表示所述图像的第一个像素,Pixel(x,y)表示所述图像中的任一像素。
17.根据权利要求16所述的视频处理方法,其特征在于,使用锐化强度增强所述纹理有效区域的纹理特征,包括:
针对所述图像中的任一像素Pixel(x,y),分别采用以下方式实现:
其中,Gs(x,y)表示Pixel(x,y)增强后的像素值,GsAdd(x,y)表示高斯锐化权重,Hd表示高斯锐化参数,取值范围为1~9,SumDiff表示锐化强度。
18.根据权利要求13所述的视频处理方法,其特征在于,对所述图像进行色彩增强,包括:
将所述直播视频中的第一色域的图像转换为第二色域的图像;
对所述第二色域的图像进行色彩增强;
将色彩增强后的第二色域图像转换为第一色域的图像,获得色彩增强的第一色域的图像。
19.根据权利要求18所述的视频处理方法,其特征在于,还包括:将所述第一色域的图像转换为第三色域的图像,再将所述第三色域的图像转换为所述第二色域的图像,对所述第二色域的图像进行色彩增强后,先将增强的第二色域图像转换为第三色域的图像,获得增强的第三色域的图像,再将所述增强的第三色域的图像转换为增强的第一色域的图像。
20.根据权利要求19所述的视频处理方法,其特征在于,所述第三色域的图像为RGB图像。
21.根据权利要求19所述的视频处理方法,其特征在于,所述第二色域的图像为HSL图像。
22.根据权利要求21所述的视频处理方法,其特征在于,将第三色域的图像转换为第二色域的图像,包括:
其中,L表示亮度,S表示饱和度,H表示色调,R表示RGB图像中的红色,G表示RGB图像中的绿色,B表示RGB图像中的蓝色,maxcolor=2N-1,mincolor=0,其中,一个像素用Nbit数据描述。
23.根据权利要求22所述的视频处理方法,其特征在于,对所述第二色域的图像进行色彩增强,包括,对所述第二色域中的色调进行增强。
24.根据权利要求23所述的视频处理方法,其特征在于,对所述第二色域中的色调进行增强,通过以下公式实现:
H=H+(H-Hmid)×Hrate,
其中,Hmid表示色调中间参考值,Hrate表示色调增强参考值。
25.一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现权利要求1至24中任一项所述的方法。
26.一种用于在用户设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行权利要求1至24中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810036550.7A CN108391139B (zh) | 2018-01-15 | 2018-01-15 | 一种用于视频直播中的视频增强方法、介质及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810036550.7A CN108391139B (zh) | 2018-01-15 | 2018-01-15 | 一种用于视频直播中的视频增强方法、介质及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108391139A true CN108391139A (zh) | 2018-08-10 |
CN108391139B CN108391139B (zh) | 2023-06-16 |
Family
ID=63076304
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810036550.7A Active CN108391139B (zh) | 2018-01-15 | 2018-01-15 | 一种用于视频直播中的视频增强方法、介质及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108391139B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109151966A (zh) * | 2018-10-15 | 2019-01-04 | Oppo广东移动通信有限公司 | 终端控制方法、装置、终端设备及存储介质 |
CN109640167A (zh) * | 2018-11-27 | 2019-04-16 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN109688462A (zh) * | 2018-11-27 | 2019-04-26 | Oppo广东移动通信有限公司 | 降低设备功耗的方法、装置、电子设备及存储介质 |
CN109729405A (zh) * | 2018-11-27 | 2019-05-07 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN111355969A (zh) * | 2019-02-13 | 2020-06-30 | 鸿合科技股份有限公司 | 一种互动直播方法及客户端、服务器、电子设备 |
CN112312059A (zh) * | 2020-04-30 | 2021-02-02 | 北京字节跳动网络技术有限公司 | 用于多媒体会议的信息处理方法、装置和电子设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102123296A (zh) * | 2009-12-21 | 2011-07-13 | 三星电子株式会社 | 提供视频内容的方法和装置及再现视频内容的方法和装置 |
WO2012051271A2 (en) * | 2010-10-13 | 2012-04-19 | Home Depot U.S.A., Inc. | Method and system for creating a personalized experience with video in connection with a stored value token |
CN104410918A (zh) * | 2014-12-09 | 2015-03-11 | 广州华多网络科技有限公司 | 一种直播视频参数调整方法和装置 |
CN105187951A (zh) * | 2015-08-05 | 2015-12-23 | 秦永红 | 一种rtmp流媒体直播系统反向控制方法及其系统 |
CN105592322A (zh) * | 2014-09-19 | 2016-05-18 | 青岛海尔电子有限公司 | 一种媒体数据的优化方法及装置 |
CN106231434A (zh) * | 2016-07-25 | 2016-12-14 | 武汉斗鱼网络科技有限公司 | 一种基于人脸检测的直播互动特效实现方法及系统 |
CN107124658A (zh) * | 2017-05-02 | 2017-09-01 | 北京小米移动软件有限公司 | 视频直播方法及装置 |
CN107360160A (zh) * | 2017-07-12 | 2017-11-17 | 广州华多网络科技有限公司 | 直播视频与动画融合方法、装置及终端设备 |
-
2018
- 2018-01-15 CN CN201810036550.7A patent/CN108391139B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102123296A (zh) * | 2009-12-21 | 2011-07-13 | 三星电子株式会社 | 提供视频内容的方法和装置及再现视频内容的方法和装置 |
WO2012051271A2 (en) * | 2010-10-13 | 2012-04-19 | Home Depot U.S.A., Inc. | Method and system for creating a personalized experience with video in connection with a stored value token |
CN105592322A (zh) * | 2014-09-19 | 2016-05-18 | 青岛海尔电子有限公司 | 一种媒体数据的优化方法及装置 |
CN104410918A (zh) * | 2014-12-09 | 2015-03-11 | 广州华多网络科技有限公司 | 一种直播视频参数调整方法和装置 |
CN105187951A (zh) * | 2015-08-05 | 2015-12-23 | 秦永红 | 一种rtmp流媒体直播系统反向控制方法及其系统 |
CN106231434A (zh) * | 2016-07-25 | 2016-12-14 | 武汉斗鱼网络科技有限公司 | 一种基于人脸检测的直播互动特效实现方法及系统 |
CN107124658A (zh) * | 2017-05-02 | 2017-09-01 | 北京小米移动软件有限公司 | 视频直播方法及装置 |
CN107360160A (zh) * | 2017-07-12 | 2017-11-17 | 广州华多网络科技有限公司 | 直播视频与动画融合方法、装置及终端设备 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109151966A (zh) * | 2018-10-15 | 2019-01-04 | Oppo广东移动通信有限公司 | 终端控制方法、装置、终端设备及存储介质 |
CN109640167A (zh) * | 2018-11-27 | 2019-04-16 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN109688462A (zh) * | 2018-11-27 | 2019-04-26 | Oppo广东移动通信有限公司 | 降低设备功耗的方法、装置、电子设备及存储介质 |
CN109729405A (zh) * | 2018-11-27 | 2019-05-07 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
WO2020108091A1 (zh) * | 2018-11-27 | 2020-06-04 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN109640167B (zh) * | 2018-11-27 | 2021-03-02 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN109688462B (zh) * | 2018-11-27 | 2021-06-15 | Oppo广东移动通信有限公司 | 降低设备功耗的方法、装置、电子设备及存储介质 |
CN111355969A (zh) * | 2019-02-13 | 2020-06-30 | 鸿合科技股份有限公司 | 一种互动直播方法及客户端、服务器、电子设备 |
CN112312059A (zh) * | 2020-04-30 | 2021-02-02 | 北京字节跳动网络技术有限公司 | 用于多媒体会议的信息处理方法、装置和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108391139B (zh) | 2023-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108391139A (zh) | 一种用于视频直播中的视频增强方法、介质及设备 | |
CN103281526B (zh) | 网络图像/视频处理系统 | |
CN103227775B (zh) | 用于处理图像或视频数据的方法和系统 | |
DE112006002124B4 (de) | Verfahren zum Verbessern der Kontrastverstärkung | |
CN111402165B (zh) | 图像处理方法、装置、设备及存储介质 | |
KR20120107429A (ko) | 구역 기반의 톤 매핑 | |
CN108235037B (zh) | 对图像数据进行编码和解码 | |
CN110620924B (zh) | 编码数据的处理方法、装置、计算机设备及存储介质 | |
CN113297937B (zh) | 一种图像处理方法、装置、设备及介质 | |
CN108347647A (zh) | 视频画面显示方法、装置、电视机及存储介质 | |
CN110766637B (zh) | 一种视频处理方法、处理装置、电子设备及存储介质 | |
CA3068342A1 (en) | Methods and apparatuses for tone mapping and inverse tone mapping | |
US20200107084A1 (en) | Method and device for playback optimization | |
CN114092360A (zh) | 图像处理方法、设备及可读存储介质 | |
CN113852860A (zh) | 视频处理方法、装置、系统及存储介质 | |
CN110796689B (zh) | 一种视频处理方法、电子设备及存储介质 | |
De Praeter et al. | Simultaneous encoder for high-dynamic-range and low-dynamic-range video | |
US10438328B1 (en) | Chroma blurring reduction in video and images | |
JP2020028111A (ja) | 画像処理方法、画像処理装置、画像処理システム、およびプログラム | |
CN113014745B (zh) | 视频图像降噪方法及装置、存储介质及电子设备 | |
CN113744145B (zh) | 提升图像清晰度的方法、存储介质、电子设备及系统 | |
CN104581196A (zh) | 一种视频图像处理的方法及装置 | |
CN111382772B (zh) | 一种图像处理方法、装置及终端设备 | |
US10362338B2 (en) | Image processing | |
Lee et al. | DCT‐Based HDR Exposure Fusion Using Multiexposed Image Sensors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |