CN114339411B - 视频处理方法、装置及设备 - Google Patents

视频处理方法、装置及设备 Download PDF

Info

Publication number
CN114339411B
CN114339411B CN202111662510.1A CN202111662510A CN114339411B CN 114339411 B CN114339411 B CN 114339411B CN 202111662510 A CN202111662510 A CN 202111662510A CN 114339411 B CN114339411 B CN 114339411B
Authority
CN
China
Prior art keywords
frame rate
video
osd
screen display
layer information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111662510.1A
Other languages
English (en)
Other versions
CN114339411A (zh
Inventor
王丽萍
罗小伟
沈珈立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Ziguang Zhanrui Technology Co ltd
Original Assignee
Xi'an Ziguang Zhanrui Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xi'an Ziguang Zhanrui Technology Co ltd filed Critical Xi'an Ziguang Zhanrui Technology Co ltd
Priority to CN202111662510.1A priority Critical patent/CN114339411B/zh
Publication of CN114339411A publication Critical patent/CN114339411A/zh
Application granted granted Critical
Publication of CN114339411B publication Critical patent/CN114339411B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

本申请提供一种视频处理方法、装置及设备,该方法包括:确定待播放的视频流和屏幕菜单式调节OSD层信息;获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频。提高电子设备的视频显示效果。

Description

视频处理方法、装置及设备
技术领域
本申请涉及视频处理技术领域,尤其涉及一种视频处理方法、装置及设备。
背景技术
终端设备在播放视频时,在视频的帧率小于屏幕的帧率时,终端设备可以将视频的帧率转换为屏幕的帧率,以提高视频播放时的效果。
目前,终端设备在对视频进行处理时,可以通过预设算法对视频的进行补帧操作,以使视频的帧率达到屏幕显示的帧率。例如,终端设备可以通过运动估计与运动补偿算法(Motion Estimation Motion Compesation,MEMC)对视频的视频图层和屏幕菜单式调节方式(on-screen display,OSD)图层进行补帧操作,以使视频的帧率可以达到屏幕显示的帧率。但是,MEMC算法进行帧率补偿时,会对视频的OSD图层造成损失,进而导致视频在屏幕中的显示效果较差。
发明内容
本申请提供一种视频处理方法、装置及设备,用于解决现有技术中视频在屏幕中的显示效果较差的技术问题。
第一方面,本申请提供一种视频处理方法,该方法包括:
确定待播放的视频流和屏幕菜单式调节OSD层信息;
获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;
根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频。
在一种可能的实施方式中,根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频,包括:
判断所述最大OSD帧率是否大于或等于所述屏幕显示帧率;
若是,则根据所述屏幕显示帧率对所述视频流进行帧率转换处理,以及根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频;
若否,则根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,得到融合视频,并根据所述屏幕显示帧率对融合视频进行帧率转换处理,得到所述目标视频。
在一种可能的实施方式中,根据所述屏幕显示帧率对所述视频流进行帧率转换处理,包括:
根据所述屏幕显示帧率,通过MEMC算法对所述视频流进行帧率转换处理,帧率转换处理后的视频流的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,包括:
将所述OSD层信息的帧率设置为所述屏幕显示帧率,以实现对所述OSD层信息进行帧率转换处理,帧率转换处理后的OSD层的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,包括:
将所述OSD层信息的帧率设置为所述视频帧率,得到帧率转换后的OSD层信息;
对所述视频流和所述帧率转换后的OSD层信息进行融合处理。
在一种可能的实施方式中,根据所述屏幕显示帧率对融合视频进行帧率转换处理,包括:
根据所述屏幕显示帧率,通过MEMC算法对所述融合视频进行帧率转换处理,帧率转换处理后的融合视频的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频之后,还包括:
播放所述目标视频。
第二方面,本申请提供一种视频处理装置,该视频处理装置包括确定模块、获取模块和融合模块,其中:
所述确定模块用于,确定待播放的视频流和屏幕菜单式调节OSD层信息;
所述获取模块用于,获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;
所述融合模块用于,根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频。
在一种可能的实施方式中,所述融合模块具体用于:
判断所述最大OSD帧率是否大于或等于所述屏幕显示帧率;
若是,则根据所述屏幕显示帧率对所述视频流进行帧率转换处理,以及根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频;
若否,则根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,得到融合视频,并根据所述屏幕显示帧率对融合视频进行帧率转换处理,得到所述目标视频。
在一种可能的实施方式中,所述融合模块具体用于:
根据所述屏幕显示帧率,通过MEMC算法对所述视频流进行帧率转换处理,帧率转换处理后的视频流的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,所述融合模块具体用于:
将所述OSD层信息的帧率设置为所述屏幕显示帧率,以实现对所述OSD层信息进行帧率转换处理,帧率转换处理后的OSD层的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,所述融合模块具体用于:
将所述OSD层信息的帧率设置为所述视频帧率,得到帧率转换后的OSD层信息;
对所述视频流和所述帧率转换后的OSD层信息进行融合处理。
在一种可能的实施方式中,所述融合模块具体用于:
根据所述屏幕显示帧率,通过MEMC算法对所述融合视频进行帧率转换处理,帧率转换处理后的融合视频的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,所述视频处理装置还包括播放模块,所述播放模块用于:
播放所述目标视频。
第三方面,本申请提供一种电子设备,包括:处理器、存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如第一方面所述的视频处理方法。
第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当所述计算机执行指令被处理器执行时用于实现前述任一项所述的视频处理方法。
第五方面,本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如前述任一项所述的视频处理方法的步骤。
本申请提供一种视频处理方法、装置及设备,确定待播放的视频流和屏幕菜单式调节OSD层信息,获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率,根据视频帧率、最大OSD帧率和屏幕显示帧率,对视频流和OSD层信息进行融合处理和帧率转换处理,得到目标视频。在上述方法中,电子设备可以根据电子设备的最大OSD帧率和电子设备的屏幕显示帧率,灵活的对视频流和OSD层信息进行融合处理和帧率转换处理,避免补帧操作对OSD层信息造成损失,进而提高视频的显示效果。
附图说明
图1为本申请实施例提供的一种应用场景示意图;
图2为本申请实施例提供的一种视频处理方法的流程示意图;
图3为本申请实施例提供的另一种视频处理方法的流程示意图;
图4为本申请实施例提供的一种得到目标视频的过程示意图;
图5为本申请实施例提供的另一种得到目标视频的过程示意图;
图6为本申请实施例提供的一种视频处理方法的过程示意图;
图7为本申请实施例提供的一种视频处理装置的结构示意图;
图8为本申请实施例提供的另一种视频处理装置的结构示意图;
图9为本申请提供的电子设备的硬件结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
为了便于理解,首先对本申请实施例所涉及的概念进行说明。
电子设备:是一种具有无线收发功能的设备。电子设备可以部署在陆地上,包括室内或室外、手持、穿戴或车载;也可以部署在水面上(如轮船等);还可以部署在空中(例如飞机、气球和卫星上等)。所述电子设备可以是手机(mobile phone)、平板电脑(Pad)、带无线收发功能的电脑、虚拟现实(virtual reality,VR)电子设备、增强现实(augmentedreality,AR)电子设备、工业控制(industrial control)中的无线终端、车载电子设备、无人驾驶(self driving)中的无线终端、远程医疗(remote medical)中的无线电子设备、智能电网(smart grid)中的无线电子设备、运输安全(transportation safety)中的无线电子设备、智慧城市(smart city)中的无线电子设备、智慧家庭(smart home)中的无线电子设备、可穿戴电子设备等。本申请实施例所涉及的电子设备还可以称为终端、用户设备(user equipment,UE)、接入终端设备、车载终端、工业控制终端、UE单元、UE站、移动站、移动台、远方站、远程终端设备、移动设备、UE终端设备、无线通信设备、UE代理或UE装置等。电子设备也可以是固定的或者移动的。
在相关技术中,在视频的帧率小于屏幕的帧率时,终端设备可以将视频的帧率转换为屏幕的帧率,以提高视频播放时的效果。目前,终端设备可以对视频进行补帧操作,以使视频的帧率达到屏幕显示的帧率。例如,终端设备可以通过MEMC算法对视频的视频图层和OSD图层进行补帧操作。但是,MEMC算法进行补帧操作时,会对OSD图层造成损失,进而导致视频在屏幕中的显示效果较差。
为了解决相关技术中视频在屏幕中的显示效果较差的技术问题。本申请实施例提供一种视频处理方法,确定带播放的视频流和屏幕菜单式调节OSD层信息,获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率,判断最大OSD帧率是否大于或等于屏幕显示帧率,若是,则根据屏幕显示帧率对视频流进行帧率转换处理,以及根据屏幕显示帧率对OSD层进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,若否,则根据视频帧率对视频流和OSD层信息进行融合处理,得到融合视频,并根据屏幕显示帧率对融合视频进行帧率转换处理。在上述方法中,在OSD输出的帧率可以达到屏幕显示帧率时,OSD模块可以将OSD层信息的帧率设置为屏幕显示帧率,然后终端设备将帧率转换后的视频流与OSD层信息进行融合,这样可以避免MEMC算法对OSD层信息补帧之后造成的信息损失,进而提高视频显示效果。
下面,结合图1,对本申请实施例的应用场景进行说明。
图1为本申请实施例提供的一种应用场景示意图。请参见图1,包括:电子设备。其中,电子设备可以获取视频流和OSD层信息,并根据视频流的视频帧率、电子设备的OSD层的最大OSD帧率和屏幕显示帧率,对视频流和OSD层信息进行融合和帧率转换处理,得到目标视频。这样,电子设备可以根据视频帧率、最大OSD帧率和屏幕显示帧率,灵活的对视频流和OSD层信息进行融合处理,避免补帧操作对OSD层信息造成损失,进而提高视频的显示效果。
下面,通过具体实施例对本申请所示的技术方案进行详细说明。需要说明的是,如下实施例可以单独存在,也可以相互结合,对于相同或相似的内容,在不同的实施例中不再重复说明。
图2为本申请实施例提供的一种视频处理方法的流程示意图。请参见图2,该方法可以包括:
S201、确定待播放的视频流和屏幕菜单式调节OSD层信息。
本申请实施例的执行主体可以为电子设备,也可以为设置在电子设备中的算法测试装置。可选的,算法测试装置可以通过软件实现,也可以通过软件和硬件的结合实现。
待播放的视频流可以为待播放视频的视频层的视频流。例如,视频中的视频图层的视频流可以为待播放的视频流。例如,为待播放的视频流可以为待播放的视频中的动态画面。
屏幕菜单式调节OSD层信息可以为待播放的视频的OSD层信息。例如,视频中的UI图层可以为屏幕菜单式调节OSD层。可选的,OSD层信息可以包括待播放的视频中的所有控件信息。例如,OSD层信息可以包括弹幕信息、控制按键信息等。例如,屏幕菜单式调节OSD层信息可以为待播放的视频中的菜单按键、弹幕等控件信息。
可选的,在电子设备获取到待播放的视频时,电子设备可以对待播放的视频进行拆分处理,得到待播放的视频对应的视频流和OSD层信息。例如,视频包括视频流图层和OSD图层,电子设备可以将视频中的视频流图层和OSD图层拆分,进而得到待播放的视频流和OSD层信息。
S202、获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率。
可选的,视频流的视频帧率可以为待播放视频的视频帧率。例如,视频帧率可以包括视频流的清晰度(如,4K、8K等)和视频流的刷新频率(如60HZ、80HZ等)。可选的,电子设备获取到待播放视频之后,可以获取待播放视频的视频帧率,进而将待播放视频的视频帧率,确定为视频流的视频帧率。例如,若待播放视频的视频帧率为8K@60HZ,则视频流的视频帧率为8K@60HZ,若待播放视频的视频帧率为4K@120HZ,则视频流的视频帧率为4K@120HZ。
可选的,OSD层的最大OSD帧率为OSD层可以输出的最大的视频帧率。例如,若OSD层的最大OSD帧率为4K@120HZ,则OSD层可以输出的OSD信息的最大的视频帧率为4K120HZ。可选的,电子设备中包括OSD模块,在电子设备接收到待播放视频时,电子设备可以获取待播放视频中的OSD层信息,并将OSD层信息转换为对应的视频帧率的信息。例如,电子设备接收到待播放视频时,电子设备可以获取UI图层的图层内容,并通过OSD模块,调整UI图层的视频帧率。可选的,OSD模块可以根据OSD层的最大OSD帧率,灵活的调整输出的OSD层信息的视频帧率,进而提高视频处理的灵活度。例如,若OSD模块的最大的OSD帧率为8K,则OSD模块可以输出4K的OSD层信息,也可以输出8K的OSD层信息。
可选的,电子设备的OSD层的最大OSD帧率可以为预先设置的帧率。例如,在电子设备设置OSD模块时,预先为OSD模块配置最大OSD帧率,在OSD模块工作时,可以根据预先配置的最大OSD帧率输出OSD层信息。例如,在电子设备中设置的OSD模块的最大OSD帧率为8K@60HZ,则OSD模块可以输出8K@60HZ的内容。
可选的,屏幕显示帧率可以为屏幕进行视频播放时的帧率。例如,在电子设备播放视频时,若视频的帧率与屏幕的显示帧率不同,则视频播放的效果较差,若视频的帧率与屏幕的显示帧率相同,则视频播放的效果较好。可选的,电子设备的屏幕显示帧率为屏幕的固有参数,电子设备可以通过屏幕的参数信息,获取屏幕显示帧率。例如,若电子设备已安装屏幕的屏幕显示帧率为8K@60HZ,则电子设备的屏幕显示帧率为8K@60HZ。
S203、根据视频帧率、最大OSD帧率和屏幕显示帧率,对视频流和OSD层信息进行融合处理和帧率转换处理,得到目标视频。
可选的,融合处理可以为将视频流和OSD层信息融合,得到视频信息。例如,电子设备可以将OSD层信息的图层叠加在视频流的图层上侧,进而实现视频流和OSD层信息的融合。帧率转换处理用于对视频流和/或OSD层信息的视频帧率进行转换。例如,帧率转换处理可以将视频流的视频帧率由4K@120HZ转换为8K@60HZ,帧率转换处理也可以将OSD层信息的视频帧率由4K@120HZ转换为8K@60HZ。可选的,帧率转换处理可以输出目标帧率的OSD层信息。例如,目标帧率为8K@60HZ,若OSD模块的最大OSD帧率为8K@60HZ,则OSD模块可以直接输出8K@60HZ的OSD层信息。
可选的,可以根据如下可行的实现方式,得到目标视频:判断最大OSD帧率是否大于或等于屏幕显示帧率。例如,若电子设备的最大OSD帧率为8K@60HZ,电子设备的屏幕显示帧率为4K@60HZ,则,确定电子设备的最大OSD帧率大于屏幕显示帧率,若电子设备的最大OSD帧率为4K@60HZ,电子设备的屏幕显示帧率为8K@60HZ,则确定电子设备的最大OSD帧率小于屏幕显示帧率。
若是,则根据屏幕显示帧率对视频流进行帧率转换处理,以及根据屏幕显示帧率对OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到目标视频。例如,在电子设备的最大OSD帧率大于屏幕显示帧率时,电子设备可以分别对视频流和OSD层信息进行帧率转换处理,并将帧率转换处理后的视频流和OSD层信息进行融合处理,得到目标视频。例如,电子设备的最大OSD帧率大于屏幕显示帧率,若屏幕显示帧率为4K@60HZ,则电子设备可以将视频流的帧率转换为4K@60HZ,将OSD层信息的帧率转换为4K@60HZ,并将4K@60HZ的视频流和4K@60HZ的OSD层信息进行融合处理,得到目标视频,这样由于OSD模块可以直接输出4K@60HZ的OSD层信息,因此,无需对OSD层信息进行补帧操作,进而提高电子设备的视频显示效果。
若否,则根据视频帧率对视频流和OSD层信息进行融合处理,得到融合视频,并根据屏幕显示帧率对融合视频进行帧率转换处理,得到目标视频。例如,在电子设备的最大OSD帧率小于屏幕显示帧率时,电子设备可以将视频流和OSD层信息进行融合,并对融合后的视频进行帧率转换处理,得到目标视频。例如,若电子设备的最大OSD帧率为4K60HZ,屏幕显示帧率为8K60HZ,视频流的帧率为4K80HZ,则电子设备通过OSD模块输出4K@60HZ的OSD层信息,并将4K@80HZ的视频流图层和4K@60盒子的OSD层信息图层重叠,得到融合视频,并通过补帧操作,将融合视频的视频帧率增加至8K@60HZ,得到目标视频。
本申请实施例提供一种视频处理方法,确定待播放的视频流和屏幕菜单式调节OSD层信息,获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率,若最大OSD帧率大于或等于屏幕显示帧率,则根据屏幕显示帧率对视频流进行帧率转换处理,以及根据屏幕显示帧率对OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到目标视频,若最大OSD帧率小于屏幕显示帧率,则根据视频帧率对视频流和OSD层信息进行融合处理,得到融合视频,并根据屏幕显示帧率对融合视频进行帧率转换处理,得到目标视频。在上述方法中,若OSD模块可以输出与屏幕显示帧率相同的OSD层信息,则电子设备可以先输出OSD层信息,再与视频流进行融合,这样无需通过MEMC算法对OSD层信息进行补帧操作,避免MEMC对OSD层信息造成损失,进而提高视频的显示效果。
在图2所示的实施例的基础上,下面,结合图3,对上述视频处理方法的过程进行详细的说明。
图3为本申请实施例提供的另一种视频处理方法的流程示意图。请参见图3,该方法流程包括:
S301、确定待播放的视频流和屏幕菜单式调节OSD层信息。
需要说明的是,步骤S301的执行过程与步骤S201的执行过程相同,本申请实施例对此不再进行赘述。
S302、获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率。
需要说明的是,步骤S302的执行过程与步骤S202的执行过程相同,本申请实施例对此不再进行赘述。
S303、判断最大OSD帧率是否大于或等于屏幕显示帧率。
若是,则执行S304-S305。
若否,则执行S306-S307。
S304、根据屏幕显示帧率对视频流进行帧率转换处理,以及根据屏幕显示帧率对OSD层信息进行帧率转换处理。
可选的,可以根据如下可行的实现方式对视频流进行帧率转换处理:根据屏幕显示帧率,通过MEMC算法对视频流进行帧率转换处理。例如,电子设备可以通过MEMC算法对视频流进行补帧操作,以提高视频流的帧率。例如,若视频流的帧率为4K@60HZ,则电子设备可以通过MEMC算法,将视频流的帧率补帧至4K@120HZ。
可选的,帧率转换处理后的视频流的帧率与屏幕显示帧率相同。例如,电子设备可以通过MEMC算法将视频流的视频帧率转换为屏幕显示帧率。例如,若视频流的视频帧率为4K@60HZ,屏幕显示帧率为8K@60HZ,则电子设备可以通过MEMC算法对视频流进行补帧操作,将视频流的视频帧率转换为8K@60HZ,以使视频流的视频帧率与屏幕显示帧率相同,进而提高视频显示效果。
可选的,可以根据如下可行的实现方式,对OSD层信息进行帧率转换处理:将OSD层信息的帧率设置为屏幕显示帧率,以实现对OSD层信息进行帧率转换处理。其中,帧率转换处理后的OSD层的帧率与屏幕显示帧率相同。例如,电子设备中的OSD模块可以输出与屏幕显示帧率相同的OSD层信息。例如,电子设备的最大OSD帧率为8K@60HZ,若屏幕显示帧率为4K@60HZ,则OSD模块可以直接输出4K@60HZ的OSD层信息,若屏幕显示帧率为8K@60HZ,则OSD模块可以直接输出8K@60HZ的OSD层信息。
可选的,若电子设备的屏幕显示帧率为可调整的帧率,则在OSD模块输出OSD层信息之前,电子设备可以获取当前的屏幕显示帧率,进而根据当前的屏幕显示帧率,输出OSD层信息。例如,若电子设备当前的屏幕显示帧率为4K@60HZ,则OSD模块可以输出4K@60HZ的OSD层信息,若电子设备当前的屏幕显示帧率为4K@120HZ,则OSD模块可以输出4K@120HZ的OSD层信息。
S305、对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到目标视频。
可选的,电子设备中可以设置融合模块,通过融合模块对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到目标视频。例如,在最大OSD帧率大于或等于屏幕显示帧率时,转换处理后的视频流与OSD层信息的视频帧率都与屏幕显示帧率相同,电子设备可以通过图层叠加的方式,将视频流和OSD层信息进行融合,其中,目标视频的视频流和OSD层信息的视频帧率都为屏幕显示帧率,且OSD层信息不是通过补帧操作得到的,进而避免补帧操作对OSD层信息造成损失,提高目标视频的显示效果。
下面,结合图4,对该种情况得到目标视频的过程进行说明。
图4为本申请实施例提供的一种得到目标视频的过程示意图。请参见图4,包络:电子设备。其中,电子设备中包括OSD模块和融合模块,OSD模块输出的最大帧率为8K,电子设备的显示屏幕的屏幕显示帧率为8K。电子设备获取视频流,并通过MEMC算法将视频流转换为8K的视频流。电子设备通过OSD模块输出8K的OSD层信息,并将8K的视频流和8K的OSD层信息输入至融合模块,融合模块对8K的视频流和8K的OSD层信息进行融合处理,得到8K的目标视频。这样,无需MEMC算法对OSD层信息进行补帧操作,避免MEMC算法对OSD层信息造成损失,进而提高视频显示效果。
S306、根据视频帧率对视频流和OSD层信息进行融合处理,得到融合视频。
可选的,可以根据如下可行的实现方式,得到融合视频:将OSD层信息的帧率设置为视频帧率,得到帧率转换后的OSD层信息。例如,在最大OSD帧率小于屏幕显示帧率时,若最大OSD帧率小于视频流的视频帧率,则将OSD层信息的帧率设置为最大OSD帧率,若最大OSD帧率大于视频流的视频帧率,则将OSD层信息的帧率设置为视频帧率。例如,若视频流的视频帧率为4K@120HZ,则OSD模块将OSD层信息的帧率也设置为4K@120HZ。
对视频流和帧率转换后的OSD层信息进行融合处理。例如,电子设备可以将视频流的图层和OSD层信息的图层叠加,得到融合视频。例如,电子设备可以将4K@120HZ的视频流的图层和4K@120HZ的OSD层信息进行融合,得到融合视频。
S307、根据屏幕显示帧率对融合视频进行帧率转换处理,得到目标视频。
可选的,可以根据如下可行的实现方式得到目标视频:根据屏幕显示帧率,通过MEMC算法对融合视频进行帧率转换处理。其中,帧率转换处理后的融合视频的帧率与屏幕显示帧率相同。例如,若屏幕显示帧率为4K@120HZ,融合视频的帧率为4K@60HZ,则电子设备通过MEMC算法对融合视频进行补帧处理,将融合视频的帧率转换为4K@120HZ,得到目标视频,这样,目标视频的帧率与屏幕显示帧率相同,进而提高目标视频的显示效果。
下面,结合图5,对该种情况中得到目标视频的过程进行说明。
图5为本申请实施例提供的另一种得到目标视频的过程示意图。请参见图5,包括:电子设备。其中,电子设备中包括OSD模块和融合模块,OSD模块输出的最大帧率为4K,电子设备的显示屏幕的屏幕显示帧率为8K。电子设备获取视频流的视频帧率为4K。电子设备通过OSD模块输出4K的OSD层信息,并将4K的视频流和4K的OSD层信息输入至融合模块,融合模块对4K的视频流和4K的OSD层信息进行融合处理,得到4K的融合视频,电子设备铜鼓哦MEMC算法对4K的融合视频进行频率转换处理,得到8K的目标视频。这样,电子设备可以输出与屏幕显示帧率相同的目标视频,进而提高视频的显示效果。
S308、播放目标视频。
可选的,在电子设备得到目标视频之后,电子设备可以在屏幕中播放目标视屏。
本申请实施例提供一种视频处理方法,确定待播放的视频流和屏幕菜单式调节OSD层信息,获取视频流的视频帧率、电子设备的OSD层的最大OSD帧率和电子设备的屏幕显示帧率,判断最大OSD帧率是否大于或等于屏幕显示帧率,若是,则根据屏幕显示帧率对视频流进行帧率转换处理,以及根据屏幕显示帧率对OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频,若否,则根据视频帧率对视频流和OSD层信息进行融合处理,得到融合视频,根据屏幕显示帧率对融合视频进行帧率转换处理,得到目标视频,在电子设备得到目标视频之后,播放目标视频。这样,最大OSD帧率大于或等于屏幕显示帧率,则电子设备可以先输出OSD层信息,再与视频流进行融合,这样无需通过MEMC算法对OSD层信息进行补帧操作,避免MEMC对OSD层信息造成损失,进而提高视频的显示效果。
在上述任意一个实施例的基础上,下面。结合图6,对上述视频处理方法的过程进行说明。
图6为本申请实施例提供的一种视频处理方法的过程示意图。请参见图6,包括:电子设备和待播放视频。其中,待播放视频的帧率为4K,电子设备中包括OSD模块和融合模块。OSD模块输出的最大帧率为8K,电子设备的屏幕显示帧率为8K。
请参见图6,将待播放视频输入至电子设备,由于OSD模块输出的最大帧率等于电子设备的屏幕显示帧率,因此,电子设备通过MEMC算法,将4K的视频流转换为8K的视频流,并通过OSD模块输出8K的OSD层信息。
请参见图6,电子设备将8K的视频流和8K的OSD层信息输入至融合模块,融合模块输出8K的目标视频。这样,电子设备可以直接通过OSD模块输出8K的OSD层信息,在MEMC对4K的视频流补帧操作之后,将得到的8K的视频流和8K的OSD层信息进行融合处理,OSD层信息无需通过MEMC算法处理,避免MEMC算法对OSD层信息造成的损失,进而提高目标视频的显示效果。
图7为本申请实施例提供的一种视频处理装置的结构示意图。请参见图7,该视频处理装置10包括确定模块11、获取模块12和融合模块13,其中:
所述确定模块11用于,确定待播放的视频流和屏幕菜单式调节OSD层信息;
所述获取模块12用于,获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;
所述融合模块13用于,根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频。
在一种可能的实施方式中,所述融合模块13具体用于:
判断所述最大OSD帧率是否大于或等于所述屏幕显示帧率;
若是,则根据所述屏幕显示帧率对所述视频流进行帧率转换处理,以及根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频;
若否,则根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,得到融合视频,并根据所述屏幕显示帧率对融合视频进行帧率转换处理,得到所述目标视频。
在一种可能的实施方式中,所述融合模块13具体用于:
根据所述屏幕显示帧率,通过MEMC算法对所述视频流进行帧率转换处理,帧率转换处理后的视频流的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,所述融合模块13具体用于:
将所述OSD层信息的帧率设置为所述屏幕显示帧率,以实现对所述OSD层信息进行帧率转换处理,帧率转换处理后的OSD层的帧率与所述屏幕显示帧率相同。
在一种可能的实施方式中,所述融合模块13具体用于:
将所述OSD层信息的帧率设置为所述视频帧率,得到帧率转换后的OSD层信息;
对所述视频流和所述帧率转换后的OSD层信息进行融合处理。
在一种可能的实施方式中,所述融合模块13具体用于:
根据所述屏幕显示帧率,通过MEMC算法对所述融合视频进行帧率转换处理,帧率转换处理后的融合视频的帧率与所述屏幕显示帧率相同。
本申请实施例提供的视频处理装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例所示的视频处理装置可以为芯片、硬件模组、处理器等。当然,视频处理装置可以为其它形态,本申请实施例对此不作具体限定。
图8为本申请实施例提供的另一种视频处理装置的结构示意图。在图7所示的实施例的基础上,请参见图8,该视频处理装置还包括播放模块14,所述播放模块14用于:
播放所述目标视频。
本申请实施例提供的视频处理装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
本申请实施例所示的视频处理装置可以为芯片、硬件模组、处理器等。当然,视频处理装置可以为其它形态,本申请实施例对此不作具体限定。
图9为本申请提供的电子设备的硬件结构示意图。请参见图9,该电子设备20可以包括:处理器21和存储器22,其中,处理器21和存储器22可以通信;示例性的,处理器21和存储器22通过通信总线23通信,所述存储器22用于存储程序指令,所述处理器21用于调用存储器中的程序指令执行上述任意方法实施例所示的视频处理方法。
可选的,电子设备20还可以包括通信接口,通信接口可以包括发送器和/或接收器。
可选的,上述处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
本申请实施例提供一种可读存储介质,所述可读存储介质上存储有计算机程序;所述计算机程序用于实现如上述任意实施例所述的视频处理方法。
本申请实施例提供一种计算机程序产品,所述计算机程序产品包括指令,当所述指令被执行时,使得计算机执行上述视频处理方法。
实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一可读取存储器中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储器(存储介质)包括:只读存储器(英文:read-only memory,缩写:ROM)、RAM、快闪存储器、硬盘、固态硬盘、磁带(英文:magnetic tape)、软盘(英文:floppydisk)、光盘(英文:optical disc)及其任意组合。
本申请实施例是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程终端设备的处理单元以产生一个机器,使得通过计算机或其他可编程终端设备的处理单元执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程终端设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请实施例进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请实施例的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
在本申请中,术语“包括”及其变形可以指非限制性的包括;术语“或”及其变形可以指“和/或”。本申请中术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。本申请中,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

Claims (9)

1.一种视频处理方法,其特征在于,包括:
确定待播放的视频流和屏幕菜单式调节OSD层信息;
获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;
根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频;
所述根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频,包括:
判断所述最大OSD帧率是否大于或等于所述屏幕显示帧率;
若是,则根据所述屏幕显示帧率对所述视频流进行帧率转换处理,以及根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频;
若否,则根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,得到融合视频,并根据所述屏幕显示帧率对融合视频进行帧率转换处理,得到所述目标视频。
2.根据权利要求1所述的方法,其特征在于,根据所述屏幕显示帧率对所述视频流进行帧率转换处理,包括:
根据所述屏幕显示帧率,通过MEMC算法对所述视频流进行帧率转换处理,帧率转换处理后的视频流的帧率与所述屏幕显示帧率相同。
3.根据权利要求1所述的方法,其特征在于,根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,包括:
将所述OSD层信息的帧率设置为所述屏幕显示帧率,以实现对所述OSD层信息进行帧率转换处理,帧率转换处理后的OSD层的帧率与所述屏幕显示帧率相同。
4.根据权利要求1-3任一项所述的方法,其特征在于,根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,包括:
将所述OSD层信息的帧率设置为所述视频帧率,得到帧率转换后的OSD层信息;
对所述视频流和所述帧率转换后的OSD层信息进行融合处理。
5.根据权利要求1-3任一项所述的方法,其特征在于,根据所述屏幕显示帧率对融合视频进行帧率转换处理,包括:
根据所述屏幕显示帧率,通过MEMC算法对所述融合视频进行帧率转换处理,帧率转换处理后的融合视频的帧率与所述屏幕显示帧率相同。
6.根据权利要求1-3任一项所述的方法,其特征在于,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频之后,还包括:
播放所述目标视频。
7.一种视频处理装置,其特征在于,包括确定模块、获取模块和融合模块,其中:
所述确定模块用于,确定待播放的视频流和屏幕菜单式调节OSD层信息;
所述获取模块用于,获取所述视频流的视频帧率、电子设备的OSD层的最大OSD帧率和所述电子设备的屏幕显示帧率;
所述融合模块用于,根据所述视频帧率、所述最大OSD帧率和所述屏幕显示帧率,对所述视频流和所述OSD层信息进行融合处理和帧率转换处理,得到目标视频;
所述融合模块具体用于,判断所述最大OSD帧率是否大于或等于所述屏幕显示帧率;
若是,则根据所述屏幕显示帧率对所述视频流进行帧率转换处理,以及根据所述屏幕显示帧率对所述OSD层信息进行帧率转换处理,并对帧率转换处理后的视频流和帧率转换处理后的OSD层信息进行融合处理,得到所述目标视频;
若否,则根据所述视频帧率对所述视频流和所述OSD层信息进行融合处理,得到融合视频,并根据所述屏幕显示帧率对融合视频进行帧率转换处理,得到所述目标视频。
8.一种电子设备,其特征在于,包括:处理器、存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如权利要求1-6任一项所述的视频处理方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当所述计算机执行指令被处理器执行时用于实现权利要求1-6任一项所述的视频处理方法。
CN202111662510.1A 2021-12-30 2021-12-30 视频处理方法、装置及设备 Active CN114339411B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111662510.1A CN114339411B (zh) 2021-12-30 2021-12-30 视频处理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111662510.1A CN114339411B (zh) 2021-12-30 2021-12-30 视频处理方法、装置及设备

Publications (2)

Publication Number Publication Date
CN114339411A CN114339411A (zh) 2022-04-12
CN114339411B true CN114339411B (zh) 2023-12-26

Family

ID=81020356

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111662510.1A Active CN114339411B (zh) 2021-12-30 2021-12-30 视频处理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN114339411B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116248956B (zh) * 2022-12-29 2024-02-23 芯动微电子科技(武汉)有限公司 一种灵活优化带宽的多osd视频叠加的方法及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102761730A (zh) * 2009-01-12 2012-10-31 联发科技股份有限公司 视频播放器
CN107172486A (zh) * 2017-05-24 2017-09-15 维沃移动通信有限公司 一种视频解码方法和移动终端
WO2018142945A1 (ja) * 2017-01-31 2018-08-09 ソニー株式会社 情報処理装置および方法
CN109640168A (zh) * 2018-11-27 2019-04-16 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN110892405A (zh) * 2018-03-31 2020-03-17 华为技术有限公司 一种图像显示方法及终端
CN111225150A (zh) * 2020-01-20 2020-06-02 Oppo广东移动通信有限公司 插帧处理方法及相关产品
CN111327959A (zh) * 2020-03-05 2020-06-23 Oppo广东移动通信有限公司 视频插帧方法及相关装置
CN111356026A (zh) * 2020-03-06 2020-06-30 Oppo广东移动通信有限公司 图像数据处理方法及相关装置
WO2021243680A1 (en) * 2020-06-05 2021-12-09 Qualcomm Incorporated Video data processing based on sampling rate

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657487A (zh) * 2015-08-21 2016-06-08 乐视致新电子科技(天津)有限公司 音视频播放设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102761730A (zh) * 2009-01-12 2012-10-31 联发科技股份有限公司 视频播放器
WO2018142945A1 (ja) * 2017-01-31 2018-08-09 ソニー株式会社 情報処理装置および方法
CN107172486A (zh) * 2017-05-24 2017-09-15 维沃移动通信有限公司 一种视频解码方法和移动终端
CN110892405A (zh) * 2018-03-31 2020-03-17 华为技术有限公司 一种图像显示方法及终端
CN109640168A (zh) * 2018-11-27 2019-04-16 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN111225150A (zh) * 2020-01-20 2020-06-02 Oppo广东移动通信有限公司 插帧处理方法及相关产品
CN111327959A (zh) * 2020-03-05 2020-06-23 Oppo广东移动通信有限公司 视频插帧方法及相关装置
CN111356026A (zh) * 2020-03-06 2020-06-30 Oppo广东移动通信有限公司 图像数据处理方法及相关装置
WO2021175054A1 (zh) * 2020-03-06 2021-09-10 Oppo广东移动通信有限公司 图像数据处理方法及相关装置
WO2021243680A1 (en) * 2020-06-05 2021-12-09 Qualcomm Incorporated Video data processing based on sampling rate

Also Published As

Publication number Publication date
CN114339411A (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
KR101788060B1 (ko) 영상표시장치 및 이를 이용한 콘텐츠 관리방법
US20170195650A1 (en) Method and system for multi point same screen broadcast of video
US9674568B2 (en) Audio/video signal synchronization method and apparatus
US9781409B2 (en) Portable terminal device and program
EP3511909A1 (en) Image processing method and device for projecting image of virtual reality content
CN112004086A (zh) 视频数据处理方法及装置
CN111083507B (zh) 连麦方法及系统、第一主播端、观众端及计算机存储介质
CN105898614A (zh) 一种设置屏幕菜单的透明度的方法、装置和芯片
US20170186243A1 (en) Video Image Processing Method and Electronic Device Based on the Virtual Reality
KR102459590B1 (ko) 영상표시장치
CN104883617B (zh) 多屏互动系统及方法
CN111641829B (zh) 视频处理方法及装置、系统、存储介质和电子设备
US20170150212A1 (en) Method and electronic device for adjusting video
US9118903B2 (en) Device and method for 2D to 3D conversion
CN104954150B (zh) 一种多屏互动方法及装置
CN113329252A (zh) 一种基于直播的人脸处理方法、装置、设备和存储介质
CN114339411B (zh) 视频处理方法、装置及设备
CN113986177A (zh) 投屏方法、投屏装置、存储介质与电子设备
CN107333175A (zh) 一种视频处理的方法及移动终端
KR101853660B1 (ko) 3차원 그래픽 콘텐츠 재생 방법 및 장치
CN106168890A (zh) 一种基于屏幕分辨率调节的显示方法、装置及终端
US8537202B2 (en) Video processing apparatus and video processing method
US9538168B2 (en) Determination device and determination method
CN106254810A (zh) 一种视频通话方法和装置
US9208372B2 (en) Image processing apparatus, image processing method, program, and electronic appliance

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant