CN115767115A - 直播画面处理方法、装置、设备及存储介质 - Google Patents

直播画面处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115767115A
CN115767115A CN202211215529.6A CN202211215529A CN115767115A CN 115767115 A CN115767115 A CN 115767115A CN 202211215529 A CN202211215529 A CN 202211215529A CN 115767115 A CN115767115 A CN 115767115A
Authority
CN
China
Prior art keywords
frame
live
image
replacement image
video stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211215529.6A
Other languages
English (en)
Inventor
郑丁华
阮承霖
冀晓磊
欧明
吴济宇
黄金强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Anschuang Information Technology Co ltd
Original Assignee
Guangzhou Anschuang Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Anschuang Information Technology Co ltd filed Critical Guangzhou Anschuang Information Technology Co ltd
Priority to CN202211215529.6A priority Critical patent/CN115767115A/zh
Publication of CN115767115A publication Critical patent/CN115767115A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种直播画面处理方法、装置、设备及存储介质,该方法包括:在检测到直播封禁指令时,获取预加载的第一替换图像;对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。本方案可以减少对直播观看用户的影响,降低了视频流的编解码成本。

Description

直播画面处理方法、装置、设备及存储介质
技术领域
本申请实施例涉及计算机技术领域,尤其涉及一种直播画面处理方法、装置、设备及存储介质。
背景技术
随着网络和设备硬件能力的提升,直播行业得到了长足发展。由于直播的合规性要求,需要对直播内容进行实时的审核,针对出现违规的直播需要进行相应的处理措施,以保证直播的合规。
相关技术中,在检测到直播违规时,将直播画面直接替换为固定的黑屏画面。该种替换方式可以是实现对违规内容的禁止,但是由于黑屏画面和原有的直播画面差异较大,采用固定黑屏画面进行替换的方式会导致视频流属性的改变,如帧率、码率、收发包数量以及链路带宽的改变,由此导致直播恢复后出现直播画面清晰度抖动的问题。
发明内容
本申请实施例提供了一种直播画面处理方法、装置、设备及存储介质,解决了相关技术中,对直播画面进行调整时出现的清晰度变化的问题,可以减少对直播观看用户的影响,降低了视频流的编解码成本。
第一方面,本申请实施例提供了一种直播画面处理方法,应用于服务器,该方法包括:
在检测到直播封禁指令时,获取预加载的第一替换图像;
对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
第二方面,本申请实施例还提供了一种直播画面处理装置,包括:
替换图像生成模块,配置为在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
替换图像发送模块,配置为将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
第三方面,本申请实施例还提供了一种直播画面处理设备,该设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本申请实施例所述的直播画面处理方法。
第四方面,本申请实施例还提供了一种存储计算机可执行指令的非易失性存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行本申请实施例所述的直播画面处理方法。
第五方面,本申请实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中,设备的至少一个处理器从计算机可读存储介质读取并执行计算机程序,使得设备执行本申请实施例所述的直播画面处理方法。
本申请实施例中,在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据直播视频流中的视频包类型以及第一替换图像生成第二替换图像,再将第二替换图像发送至第二客户端,用于第二客户端基于第二替换图像进行画面显示,本方案在对直播出现违规的处理时,根据原直播视频流以及预先生成的第一替换图像来动态的得到第二替换图像进行直播画面的替换,该第二替换图像与原直播视频流图像相关联,避免了采用固定的替换图像导致的视频流属性的改变,进而导致直播恢复后出现直播画面清晰度抖动的问题,上述方案可以减少对直播观看用户的影响。同时,使用预加载的第一替换图像来生成第二替换图像,无需实时的基于直播视频流进行转码得到替换图像,降低了视频流的编解码成本。
附图说明
图1为本申请实施例提供的一种直播画面处理方法的应用场景示意图;
图2为本申请实施例提供的一种直播画面处理方法的流程图;
图3为本申请实施例提供的一种显示的直播界面示意图;
图4为本申请实施例提供的一种包含生成第二替换图像的方法的流程图;
图5为本申请实施例提供的另一种包含生成第二替换图像的方法的流程图;
图6为本申请实施例提供的一种直播画面处理过程中的视频流审核的方法的流程图;
图7为本申请实施例提供的一种直播画面处理装置的结构框图;
图8为本申请实施例提供的一种直播画面处理设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请实施例作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请实施例,而非对本申请实施例的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请实施例相关的部分而非全部结构。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
图1为本申请实施例提供的一种直播画面处理方法的应用场景示意图,如图1所示,其中第一客户端01为直播视频流生成的设备端,如主播进行直播时使用的设备;第二客户端02可以是观看直播的观众使用的设备,也可以是其它主播使用的设备,即第一客户端01生成直播视频流后,可相应的传输至第二客户端02进行直播画面的显示,其中第二客户端02可以是多个,即每个用户观看直播时使用的客户端均可理解为第二客户端。其中,第一客户端01在产生直播视频流时,通过服务器03进行直播视频流的转发,服务器03将第一客户端01的直播视频流转发至多个第二客户端02进行显示。可选的,该服务器可以是前端服务器,其内部运行有前端服务进程,通过该前端服务进程实现直播视频流的接收和转发。可选的,在第一客户端01开启直播或者在多人直播的场景中执行上麦操作时,相应的建立和服务器03的通信连接,第二客户端02在登录相应的第二客户端01对应的直播间时,与服务器03建立通信连接,此时服务器03进行第一客户端01的直播视频流的推送,推送至第二客户端02,第二客户端02由此实现相应的直播画面的显示,用户以进行直播观看。
图2为本申请实施例提供的一种直播画面处理方法的流程图,可应用于服务器,具体包括如下步骤:
步骤S101、在检测到直播封禁指令时,获取预加载的第一替换图像。
其中,直播封禁指令用于指示对直播进行封禁处理。可选的,其在对直播内容进行审核的过程中,发现存在违规现象需要对其进行相应处理时生成。具体的审核过程可以是在当前服务器中完成,也可以是通过专门设置的运行审核系统的服务器完成,在通过其它服务器进行审核的情况下,该直播封禁指令为接收的其它服务器发送的指令。
在一个实施例中,在检测到直播封禁指令时,意味着该直播封禁指令所对应的直播画面存在违规,需要进行相应的直播画面的处理。此时,获取预加载的第一替换图像。可选的,该第一替换图像预先生成,并在对应的服务进程启动时进行预加载。
在一个实施例中,还包括对该第一替换图像进行生成的过程。可选的,该第一替换图像可以是包含SPS(Sequence Parameter Set,序列参数集)帧、PPS(Picture ParameterSet,图像参数集)帧、I帧、P帧和B帧的黑屏图像,也可以是其它的包含SPS帧、PPS帧、I帧、P帧和B帧的特殊设置的画面图像,该第一替换图像为合规要求的图像。其中,SPS帧、PPS帧包含了初始化流解码时所需的信息参数(如分辨率),其长度大小约为十几字节,同一视频流参数固定,相同的帧可重复出现。在一个实施例中,生成的第一替换图像包括多种不同的分辨率,如针对分辨率为480P、720P、1080P分别对应生成第一替换图像,以在后续进行第二替换图像的生成时,选择和直播视频流对应的图像分辨率一致的第一替换图像。
步骤S102、对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像。
其中,该第一客户端可以是发起直播的设备端,如主播使用的开启直播的设备端。该第一客户端为直播封禁指令关联的需要进行直播画面处理的设备端。可选的,在该直播封禁指令中携带有需要进行直播画面处理的设备端的标识,也即第一客户端的标识,或者携带有相应的直播间信息,通过直播间信息的查询以确定对应的需要进行直播画面处理的第一客户端。
其中,第一客户端在执行直播功能时,实时推送直播视频流至服务器,服务器进行直播视频流的处理和转发。在进行直播画面的处理过程中,对第一客户端发送的直播视频流进行检测,该直播视频流对应的画面在审核过程中包含违规内容,需要进行直播画面的替换处理。在最终需要将其进行替换为的画面也即第二替换图像,基于该直播视频流中的视频包类型以及前述获取的第一替换图像生成。
可选的,直播视频流中的视频包类型可以是SPS帧类型、PPS帧类型、I帧类型、P帧类型和B帧类型,基于不同的视频包类型生成的第二替换图像不同。其中,画面的不同包括画面帧率、码率以关联的收发包数量的不同。
在一个实施例中,可以是针对视频包类型为SPS帧类型和PPS帧类型的图像帧为一类生成对应的第二替换图像;针对视频包类型为I帧类型的图像帧为一类生成对应的第二替换图像;针对视频包类型为P帧类型和B帧类型的图像帧为一类生成对应的第二替换图像。
在一个实施例中,在直播视频流中的视频包类型为SPS帧和PPS帧的情况下,通过第一替换图像中的SPS帧和PPS帧进行替换生成第二替换图像,即利用第一替换图像中的SPS帧和PPS帧进行原有的直播视频流中SPS帧和PPS帧的替换,二者长度大小相近,直接进行替换。
在一个实施例中,在直播视频流中的视频包类型为I帧的情况下,对第一替换图像中的I帧进行填充生成第二替换图像。可选的,该预先生成的第一替换图像的I帧图像相对较小,由此针对大于该I帧图像的直播视频流的I帧,可对该较小的I帧图像进行填充以保持和直播视频流的I帧图像大小一致或接近。以第一替换图像为黑屏图像为例,其I帧图像的大小较小,为了保证和直播视频流的整体大小长度一致,此时对该第一替换图像中的I帧进行填充,以生成第二替换图像。
在一个实施例中,在直播视频流中的视频包类型为P帧或B帧的情况下,对第一替换图像中相同位置偏移量的P帧或B帧进行填充生成第二替换图像。与I帧类型的第二替换图像生成过程类似,对相应的P帧或B帧进行填充,区别在于首先确定出第一替换图像中相同位置偏移量的P帧或B帧,该位置偏移量标识P帧或B帧相对于关联的I帧的偏移程度。示例性的,以帧序列为I帧、P帧、B帧、B帧、P帧为例,第二个P帧的位置偏移量为4。
步骤S103、将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
其中,在基于不同的直播视频流的视频包类型生成对应的第二替换图像后,将该第二替换图像发送至第二客户端,该第二客户端可以是收看第一客户端进行直播的客户端。服务器通过对直播视频流中的视频帧进行替换生成相应的第二图像帧,转发至第二客户端,即对原有的直播视频流替换为由第二替换图像组成的视频流,在第二客户端中进行实时的合规显示。
在一个实施例中,服务器在检测到直播恢复指令时,基于第一客户端发送的直播视频流中的I帧进行直播画面恢复,即在恢复过程中,从第一个检测到的I帧开始进行直播画面的恢复,以使得第一客户端进行正常的直播过程。在保证直播画面正常播放的情况下,使得显示画面的显示效果最佳。
在一个实施例中,还包括第二客户端进行第二替换图像的播放的过程,具体的可以是:第二客户端在原有显示第一客户端的画面位置显示第二替换图像。示例性的,如图3所示,图3为本申请实施例提供的一种显示的直播界面示意图,该直播界面在第二客户端中显示,其显示由四个直播子界面,包括直播子界面1、直播子界面2、直播子界面3和直播子界面4,其中,每个直播子界面对应一个直播间,假定直播子界面2对应的第一客户端的直播视频流出现违规情况,此时对该直播子界面2中显示的画面替换为第二替换图像,其余三个直播子界面,即直播子界面1、直播子界面3和直播子界面4的直播画面不受影响。该种方式,保证了其它直播间的直播过程不受影响,优化了直播违规的处理过程,避免直接断开直播连接导致的用户退出直播间带来的用户体验差的问题。
由上述方案可知,在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据直播视频流中的视频包类型以及第一替换图像生成第二替换图像,再将第二替换图像发送至第二客户端,用于第二客户端基于第二替换图像进行画面显示,本方案在对直播出现违规的处理时,根据原直播视频流以及预先生成的第一替换图像来动态的得到第二替换图像进行直播画面的替换,该第二替换图像与原直播视频流图像相关联,避免了采用固定的替换图像导致的视频流属性的改变,进而导致直播恢复后出现直播画面清晰度抖动的问题,上述方案可以减少对直播观看用户的影响。同时,使用预加载的第一替换图像来生成第二替换图像,无需实时的基于直播视频流进行转码得到替换图像,降低了视频流的编解码成本。
图4为本申请实施例提供的一种包含生成第二替换图像的方法的流程图,如图4所示,具体包括:
步骤S201、在检测到直播封禁指令时,获取预加载的第一替换图像。
步骤S202、对第一客户端发送的直播视频流进行检测,在所述直播视频流中的视频包类型为I帧的情况下,根据所述直播视频流中的I帧大小以及所述第一替换图像的I帧大小确定填充大小。
在一个实施例中,记录该I帧的大小以及传输时的拆包数。针对直播视频流中I帧比第一替换图像中的I帧大的部分采用填充的方式保持二者一致或相近。示例性的,假定直播视频流中I帧大小为153146字节,以按照1024字节进行拆包为例,则拆分出150个视频包。假设第一替换图像中的I帧大小为146字节,则计算得到的填充大小为153146与146的差值,为153000字节。
步骤S203、根据所述填充大小以及填充帧大小确定填充帧数量,将所述填充帧数量的填充帧插入所述第一替换图像中的I帧之前生成第二替换图像。
在一个实施例中,通过使用填充帧进行I帧图像的填充,可选的,该填充帧可以是SPS帧和PPS帧,以SPS帧和PPS帧大小为23字节为例,需要填充的数量以153000除以23得到的结果为6653个SPS帧和PPS帧。可选的,在具体的填充过程中,可以将该确定出的填充数量的填充帧插入第一替换图像中的I帧之前生成第二替换图像,由此使得替换后的I帧大小与直播视频流中的I帧大小保持一致或相近。
步骤S204、将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
由上述可知,在直播视频流中的视频包类型为I帧的情况下,根据直播视频流中的I帧大小以及第一替换图像的I帧大小确定填充大小,根据填充大小以及填充帧大小确定填充帧数量,将该填充帧数量的填充帧插入第一替换图像中的I帧之前生成第二替换图像,由此保证了替换图像和原有视频流图像大小的一致,避免了采用固定的替换图像导致的视频流属性的改变,进而导致直播恢复后出现直播画面清晰度抖动的问题,保证了前后直播画面清晰度的一致。
图5为本申请实施例提供的另一种包含生成第二替换图像的方法的流程图,如图5所示,具体包括:
步骤S301、在检测到直播封禁指令时,获取预加载的第一替换图像。
步骤S302、对第一客户端发送的直播视频流进行检测,在所述直播视频流中的视频包类型为P帧或B帧的情况下,通过设置的计数器,对所述直播视频流中的P帧或B帧相对于关联的I帧的偏移量进行计数,得到计数值。
在一个实施例中,通过设置的计数器进行位置偏移量的记录。可选的,当检测到I帧时,计数器清零;在检测到I帧后的P帧或B帧时,相应的计数器的计数值加1依次类推,得到每个P帧或B帧的计数值即为各自的位置偏移量。
步骤S303、以所述计数值作为相对于I帧的位置偏移量,在所述第一替换图像中查找对应的P帧或B帧,对所述P帧或B帧进行填充生成第二替换图像。
在生成第二替换图像的过程中,依据计数器的计数值确定相同的对于I帧的位置偏移量,即在第一替换图像中确定的P帧或B帧相对于关联的I帧的位置偏移量与直播视频流中的P帧或B帧相对于关联的I帧位置偏移量一致。在确定一致位置偏移量的P帧或B帧后,进行相应的P帧或B帧的填充生成第二替换图像,其中,具体填充过程可参考I帧的填充过程,此处不再赘述。
可选的,如果第一替换图像中在进行相同位置偏移量的P帧或B帧查找不到的情况下,使用第一替换图像中的I帧对直播视频流中的P帧或B帧进行替换并相应的进行填充生成第二替换图像。
步骤S304、将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
由上述可知,在直播视频流中的视频包类型为P帧或B帧的情况下,通过设置的计数器,对直播视频流中的P帧或B帧相对于关联的I帧的偏移量进行计数,得到计数值,以计数值作为相对于I帧的位置偏移量,在第一替换图像中查找对应的P帧或B帧,对P帧或B帧进行填充生成第二替换图像,该种方式进行的图像替换,可以使得替换后的图像组成的视频流与原本的直播视频流在帧率、码率、传输切分包数上保持一致,减少对直播观看用户的影响,降低了视频流的编解码成本。
图6为本申请实施例提供的一种直播画面处理过程中的视频流审核的方法的流程图,如图6所示,具体包括:
步骤S401、在检测到直播封禁指令时,获取预加载的第一替换图像。
步骤S402、对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像。
步骤S403、将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
步骤S404、同步将接收到的所述第一客户端发送的直播视频流发送至审核系统进行审核,接收所述审核系统反馈的直播恢复指令,在检测到直播恢复指令时,基于所述第一客户端发送的直播视频流中的I帧进行直播画面恢复。
在一个实施例中,服务器进行直播画面处理过程中,可同步将接收到的直播视频流推送至审核系统进行审核,如果审核过程中确定符合规定,则相应的会发出直播恢复指令。服务器在接收到该直播恢复指令后,基于第一客户端发送的直播视频流中的I帧进行直播画面恢复。由此在对直播画面进行替换的同时,给予了整改机会,针对多人连麦直播的情况,减少对直播间内其他麦上用户、观众的影响。
图7为本申请实施例提供的一种直播画面处理装置的结构框图,该装置用于执行上述实施例提供的应用于客户端的直播画面处理方法,具备执行方法相应的功能模块和有益效果。如图7所示,该装置具体包括:替换图像生成模块101和替换图像发送模块102,其中,
替换图像生成模块101,配置为在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
替换图像发送模块102,配置为将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
由上述方案可知,在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据直播视频流中的视频包类型以及第一替换图像生成第二替换图像,再将第二替换图像发送至第二客户端,用于第二客户端基于第二替换图像进行画面显示,本方案在对直播出现违规的处理时,根据原直播视频流以及预先生成的第一替换图像来动态的得到第二替换图像进行直播画面的替换,该第二替换图像与原直播视频流图像相关联,避免了采用固定的替换图像导致的视频流属性的改变,进而导致直播恢复后出现直播画面清晰度抖动的问题,上述方案可以减少对直播观看用户的影响。同时,使用预加载的第一替换图像来生成第二替换图像,无需实时的基于直播视频流进行转码得到替换图像,降低了视频流的编解码成本。
在一个可能的实施例中,所述第一替换图像包括SPS帧、PPS帧、I帧、P帧和B帧,所述替换图像生成模块102,配置为:
在所述直播视频流中的视频包类型为SPS帧和PPS帧的情况下,通过所述第一替换图像中的SPS帧和PPS帧进行替换生成第二替换图像;
在所述直播视频流中的视频包类型为I帧的情况下,对所述第一替换图像中的I帧进行填充生成第二替换图像;
在所述直播视频流中的视频包类型为P帧或B帧的情况下,对所述第一替换图像中相同位置偏移量的P帧或B帧进行填充生成第二替换图像。
在一个可能的实施例中,所述替换图像生成模块102,配置为:
根据所述直播视频流中的I帧大小以及所述第一替换图像的I帧大小确定填充大小,所述第一替换图像的I帧大小小于所述直播视频流中的I帧大小;
根据所述填充大小以及填充帧大小确定填充帧数量;
将所述填充帧数量的填充帧插入所述第一替换图像中的I帧之前生成第二替换图像。
在一个可能的实施例中,所述替换图像生成模块102,配置为:
通过设置的计数器,对所述直播视频流中的P帧或B帧相对于关联的I帧的偏移量进行计数,得到计数值;
以所述计数值作为相对于I帧的位置偏移量,在所述第一替换图像中查找对应的P帧或B帧,对所述P帧或B帧进行填充生成第二替换图像。
在一个可能的实施例中,该装置还包括图像恢复模块103,配置为在所述将所述第二替换图像发送至第二客户端之后,在检测到直播恢复指令时,基于所述第一客户端发送的直播视频流中的I帧进行直播画面恢复。
在一个可能的实施例中,所述图像恢复模块103,还配置为:
在所述检测到直播恢复指令之前,同步将接收到的所述第一客户端发送的直播视频流发送至审核系统进行审核;
接收所述审核系统反馈的直播恢复指令。
在一个可能的实施例中,所述替换图像生成模块101,还配置为:
在所述获取预加载的第一替换图像之前,生成符合审核要求的第一替换图像,所述第一替换图像包括黑屏图像。
图8为本申请实施例提供的一种直播画面处理设备的结构示意图,如图8所示,该设备包括处理器201、存储器202、输入装置203和输出装置204;设备中处理器201的数量可以是一个或多个,图8中以一个处理器201为例;设备中的处理器201、存储器202、输入装置203和输出装置204可以通过总线或其他方式连接,图8中以通过总线连接为例。存储器202作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请实施例中的直播画面处理方法对应的程序指令/模块。处理器201通过运行存储在存储器202中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的直播画面处理方法。输入装置203可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置204可包括显示屏等显示设备。
本申请实施例还提供一种包含计算机可执行指令的非易失性存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种上述实施例描述的直播画面处理方法,其中,包括:
在检测到直播封禁指令时,获取预加载的第一替换图像;
对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
值得注意的是,上述直播画面处理装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本申请实施例的保护范围。
在一些可能的实施方式中,本申请提供的方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在计算机设备上运行时,所述程序代码用于使所述计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的方法中的步骤,例如,所述计算机设备可以执行本申请实施例所记载的直播画面处理方法。所述程序产品可以采用一个或多个可读介质的任意组合实现。

Claims (11)

1.直播画面处理方法,应用于服务器,其特征在于,包括:
在检测到直播封禁指令时,获取预加载的第一替换图像;
对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
2.根据权利要求1所述的直播画面处理方法,其特征在于,所述第一替换图像包括SPS帧、PPS帧、I帧、P帧和B帧,所述根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像,包括:
在所述直播视频流中的视频包类型为SPS帧和PPS帧的情况下,通过所述第一替换图像中的SPS帧和PPS帧进行替换生成第二替换图像;
在所述直播视频流中的视频包类型为I帧的情况下,对所述第一替换图像中的I帧进行填充生成第二替换图像;
在所述直播视频流中的视频包类型为P帧或B帧的情况下,对所述第一替换图像中相同位置偏移量的P帧或B帧进行填充生成第二替换图像。
3.根据权利要求2所述的直播画面处理方法,其特征在于,所述对所述第一替换图像中的I帧进行填充生成第二替换图像,包括:
根据所述直播视频流中的I帧大小以及所述第一替换图像的I帧大小确定填充大小,所述第一替换图像的I帧大小小于所述直播视频流中的I帧大小;
根据所述填充大小以及填充帧大小确定填充帧数量;
将所述填充帧数量的填充帧插入所述第一替换图像中的I帧之前生成第二替换图像。
4.根据权利要求2所述的直播画面处理方法,其特征在于,所述对所述第一替换图像中相同位置偏移量的P帧或B帧进行填充生成第二替换图像,包括:
通过设置的计数器,对所述直播视频流中的P帧或B帧相对于关联的I帧的偏移量进行计数,得到计数值;
以所述计数值作为相对于I帧的位置偏移量,在所述第一替换图像中查找对应的P帧或B帧,对所述P帧或B帧进行填充生成第二替换图像。
5.根据权利要求1-4中任一项所述的直播画面处理方法,其特征在于,在所述将所述第二替换图像发送至第二客户端之后,还包括:
在检测到直播恢复指令时,基于所述第一客户端发送的直播视频流中的I帧进行直播画面恢复。
6.根据权利要求5所述的直播画面处理方法,其特征在于,在所述检测到直播恢复指令之前,还包括:
同步将接收到的所述第一客户端发送的直播视频流发送至审核系统进行审核;
接收所述审核系统反馈的直播恢复指令。
7.根据权利要求1-4中任一项所述的直播画面处理方法,其特征在于,在所述获取预加载的第一替换图像之前,还包括:
生成符合审核要求的第一替换图像,所述第一替换图像包括黑屏图像;
在所述将所述第二替换图像发送至第二客户端之后,还包括:
所述第二客户端在原有显示所述第一客户端的画面位置显示所述第二替换图像。
8.直播画面处理装置,其特征在于,包括:
替换图像生成模块,配置为在检测到直播封禁指令时,获取预加载的第一替换图像,对第一客户端发送的直播视频流进行检测,根据所述直播视频流中的视频包类型以及所述第一替换图像生成第二替换图像;
替换图像发送模块,配置为将所述第二替换图像发送至第二客户端,用于所述第二客户端基于所述第二替换图像进行画面显示。
9.一种直播画面处理设备,所述设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现权利要求1-7中任一项所述的直播画面处理方法。
10.一种存储计算机可执行指令的非易失性存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行权利要求1-7中任一项所述的直播画面处理方法。
11.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求17中任一项所述的直播画面处理方法。
CN202211215529.6A 2022-09-30 2022-09-30 直播画面处理方法、装置、设备及存储介质 Pending CN115767115A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211215529.6A CN115767115A (zh) 2022-09-30 2022-09-30 直播画面处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211215529.6A CN115767115A (zh) 2022-09-30 2022-09-30 直播画面处理方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115767115A true CN115767115A (zh) 2023-03-07

Family

ID=85350764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211215529.6A Pending CN115767115A (zh) 2022-09-30 2022-09-30 直播画面处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN115767115A (zh)

Similar Documents

Publication Publication Date Title
CN113038241B (zh) 一种用于在媒体流中执行修正的方法、计算系统及非暂时性计算机可读介质
CN110708597B (zh) 直播延迟监控方法、装置、电子设备及可读存储介质
US7734085B2 (en) Image data delivery system, image data transmitting device thereof, and image data receiving device thereof
US8543724B2 (en) Methods and apparatuses for a projected PVR experience
US8326997B2 (en) Data retrieval in a two-way network
KR101841313B1 (ko) 멀티미디어 흐름 처리 방법 및 대응하는 장치
EP2383976A2 (en) Methods and apparatuses for a projected PVR experience
US20240163502A1 (en) Transmission apparatus, transmission method, encoding apparatus, encoding method, reception apparatus, and reception method
JP4554837B2 (ja) インタラクティブマルチメディアコンテンツサービスにおけるアップストリームチャネルを利用したユーザ要求の処理方法及びその装置
CN109756744B (zh) 数据处理方法、电子设备及计算机存储介质
KR100984662B1 (ko) 종속 데이터 플로우 전송을 위한 방법
US9215396B2 (en) Faster access to television channels
CN106791903A (zh) 直播处理系统、设备、装置及方法
WO2017092433A1 (zh) 视频实时播放方法及装置
CN115767115A (zh) 直播画面处理方法、装置、设备及存储介质
CN114449344B (zh) 视频流传输方法、装置、电子设备及存储介质
WO2015042767A1 (en) Method for inserting an advertisement into a video stream of an application on demand (aod) service, aod processing device and aod server
CN114173156A (zh) 视频传输方法、电子设备和存储介质
CN114422866A (zh) 一种视频处理方法、装置、电子设备和存储介质
JP6481290B2 (ja) 情報処理装置
CN106534137B (zh) 媒体流传输方法及装置
EP2383975A2 (en) Methods and apparatuses for a projected pvr experience
CN115426503B (zh) 一种转码服务切换方法、装置、设备及存储介质
US10250889B1 (en) System, method and computer readable medium for providing visual content to a user
CN117768687A (zh) 直播流切换方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination