CN111445427B - 视频图像处理方法以及显示设备 - Google Patents
视频图像处理方法以及显示设备 Download PDFInfo
- Publication number
- CN111445427B CN111445427B CN202010429474.3A CN202010429474A CN111445427B CN 111445427 B CN111445427 B CN 111445427B CN 202010429474 A CN202010429474 A CN 202010429474A CN 111445427 B CN111445427 B CN 111445427B
- Authority
- CN
- China
- Prior art keywords
- pixel point
- pixel
- block noise
- neighborhood
- horizontal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 238000001914 filtration Methods 0.000 claims abstract description 77
- 238000000034 method Methods 0.000 claims description 40
- 238000004891 communication Methods 0.000 claims description 22
- 230000008859 change Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 25
- 238000001514 detection method Methods 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 230000007704 transition Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000005236 sound signal Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请公开了一种视频图像处理方法以及显示设备。本申请中,获取解码后的待显示的图像;根据所述图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定所述图像中的块噪声像素点;对各块噪声像素点及其邻域内其他像素点进行滤波。
Description
技术领域
本申请涉及图像处理技术领域,特别涉及一种视频图像处理方法以及显示设备。
背景技术
在图像处理领域,目前对于图像块噪声的去除处理操作主要在解码器中进行,其利用图像中完整的解码块进行噪声去除,该噪声去除处理操作可以视为解码器功能的一个补充。
为了在显示端提供更好的视觉效果,在不确定视频流在解码器中是否已经进行去除块噪声处理的情况下,需要在显示端对待显示的视频图像进行块噪声去除处理。
发明内容
本申请示例性的实施方式中提供一种视频图像处理方法以及显示设备,用以实现在解码后对图像进行块噪声去除处理,从而提高显示质量。
根据示例性的实施方式中的一方面,提供一种视频图像处理方法,包括:
获取解码后的待显示的图像;
根据所述图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定所述图像中的块噪声像素点;
对各块噪声像素点及其邻域内其他像素点进行滤波。
在一些实施例中,根据所述图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定所述图像中的块噪声像素点,包括:
确定所述图像中的垂直方向的块噪声像素点,其中,若一个像素点是其水平邻域内的像素点中,在垂直方向设定范围内与其他像素点之间灰度差异最大的像素点,则将该像素点确定为垂直方向的块噪声像素点;和/或,确定所述图像中的水平方向的块噪声像素点,其中,若一个像素点是其垂直邻域内的像素点中,在水平方向设定范围内与其他像素点之间灰度差异最大的像素点,则将该像素点确定为水平方向的块噪声像素点。
根据示例性的实施方式中的一方面,提供一种显示设备,包括:显示器,该显示器被配置为显示视频图像;与所述显示器通信的控制器,所述控制器被配置为:
获取解码后的待显示的图像;
根据所述图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定所述图像中的块噪声像素点;
对各块噪声像素点及其邻域内其他像素点进行滤波。
本申请实施例中,在对图像解码后,根据图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定该图像中的块噪声像素点,对各块噪声像素点及其邻域内其他像素点进行滤波,实现了在解码后对图像进行块噪声去除处理,从而提高了视频图像显示质量,进而提高用户感受。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中显示设备200的硬件配置框图;
图3中示例性示出了根据实施例中视频图像处理方法的流程示意图;
图4中示例性示出了根据实施例中垂直方向的块噪声像素点的检测流程示意图;
图5中示例性示出了根据实施例中水平方向的块噪声像素点的检测流程示意图;
图6中示例性示出了根据实施例中垂直方向的块噪声像素点的检测流程示意图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解,本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语″包括″和″具有″以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语″模块″,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI)为用户提供各种控制。
示例的,移动终端100B可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能。也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还与服务器300通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器300可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以是液晶显示器、OLED显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。如图2所示,显示设备200中可以包括调谐解调器220、通信器230、检测器240、外部装置接口250、控制器210、存储器290、用户输入接口、视频处理器260-1、音频处理器260-2、显示器280、音频输入接口272、供电电源。
调谐解调器220,通过有线或无线方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,用于从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。
调谐解调器220,可根据用户选择,以及由控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
调谐解调器220,根据电视信号广播制式不同,可以接收信号的途径有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,可以解调模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过输入/输出接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233等其他网络通信协议模块或近场通信协议模块。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据控制器的控制接收遥控器100A的控制信号。
检测器240,是显示设备200用于采集外部环境或与外部交互的信号的组件。检测器240可以包括光接收器242,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器241,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
在其他一些示例性实施例中,检测器240,还可包括温度传感器,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。示例性的,当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调;当温度偏低的环境时,可以调整显示设备200显示图像色温偏暖色调。
在其他一些示例性实施例中,检测器240还可包括声音采集器,如麦克风,可以用于接收用户的声音,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,显示设备200可以自适应环境噪声。
外部装置接口250,提供控制器210控制显示设备200与外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子251、复合视频消隐同步(CVBS)端子252、模拟或数字分量端子253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。
控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作系统和各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图2所示,控制器210包括随机存取存储器RAM213、只读存储器ROM214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM214中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
控制器210可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块和各种服务模块等。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口,用于将用户的输入信号发送给控制器210,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示屏的更新率有关。输入有通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面。显示器280包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。显示器280,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与控制器210一起集成在一个或多个芯片中。
供电电源,用于在控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
为了在显示设备的显示端提供更好的视觉效果,在不确定视频流在视频处理器的视频解码模块中是否进行去除块噪声的情况下,需要在显示端对待显示的视频图像进行去除块噪声的处理。本申请实施例提供了一种显示设备以及图像处理方法,可以在显示端对待显示的视频图像进行块噪声去除处理,以提高视频显示质量,进而提高用户感受。
下面结合附图对本申请实施例中的图形识别码识别方法进行详细描述。
图3示例性示出了本申请实施例中的视频图像处理方法的流程。该流程可由显示设备执行,更具体地,可由显示设备中的控制器执行。所述显示设备可以是智能电视。
如图所示,该流程可包括如下步骤:
S301:获取解码后的待显示的视频图像。
该步骤中,该待显示的视频图像为解码器解码后的图像帧序列。当解码器对视频帧序列进行解码以及其他图像处理操作后,在进行显示之前,可在显示端采用本申请实施例提供的方法对该视频帧序列中的视频帧进行块噪声去除处理。
S302:根据该图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定该图像中的块噪声像素点。
通常,在显示端无法得到解码块宽度和解码块高度,因此无法知道块噪声出现的位置。本申请实施例通过对图像特涨的检测,获得块噪声出现的位置。具体地,根据该图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定该图像中的块噪声像素点。其中,可检测垂直方向的块噪声像素点,或者检测水平方向的块噪声像素点,或者既检测垂直方向的块噪声像素点也检测水平方向的块噪声像素点。
S303:对各块噪声像素点及其邻域内其他像素点进行滤波,从而去除块噪声。
其中,对于垂直方向的块噪声像素点,其邻域为该垂直方向的块噪声像素点的水平邻域,即以该像素点为中心的水平方向的至少三个像素点;对于水平方向的噪声像素点,其邻域为该水平方向上的块像素点的垂直邻域,即以该像素点为中心的垂直方向上的至少三个像素点。
本申请实施例中,可采用平滑、高斯或均值滤波方法,本申请实施例对所采用的滤波方法不做限制。
根据以上描述可以看出,本申请实施例中,在对图像解码后,根据图像中各像素点与其邻域内其他像素点之间的灰度特征差异,确定该图像中的块噪声像素点,对各块噪声像素点及其邻域内其他像素点进行滤波,实现了在解码后对图像进行块噪声去除处理,从而提高了视频图像显示质量,进而提高用户感受。
在本申请的一些实施例中,检测图像中的垂直方向的块噪声像素点时,若一个像素点是其水平邻域内的像素点中,在垂直方向设定范围内与其他像素点之间灰度差异最大的像素点,则将该像素点确定为垂直方向的块噪声像素点。
其中,一个像素点的水平邻域为以该像素点为中心的水平方向上的至少三个像素点。
在一些实施例中,具体地,检测图像中的垂直方向的块噪声像素点的过程,可如图4所示,包括以下步骤:
S401:根据图像中各像素点的灰度,分别确定各像素点与其水平方向相邻的两个像素点之间的灰度差。
S402:分别将各像素点与其水平方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的水平灰度差异特征值H_grad;
S403:根据各行像素点对应的水平灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点;
S404:分别对各像素点的垂直邻域内被标记的像素点对应的水平灰度差异特征值grad的绝对值进行累加,得到各像素点分别对应的垂直灰度差异特征值V_acc_grad,其中,一个像素点的垂直邻域为以该像素点为中心的垂直方向上的至少三个像素点;
S405:根据各像素点对应的垂直灰度差异特征值V_acc_grad与其水平邻域内各像素点对应的垂直灰度差异特征值V_acc_grad之间的大小关系,确定各像素点是否是垂直方向的块噪声像素点。
在一些实施例中,S405的一种实现方法,可包括:
根据各像素点对应的垂直灰度差异特征值V_acc_grad与其水平邻域内各像素点对应的垂直灰度差异特征值V_acc_grad之间的大小关系,确定各像素点被判定为垂直方向的块噪声像素点的置信度,根据各像素点被判定为垂直方向的块噪声像素点的置信度,确定各像素点是否是垂直方向的块噪声像素点。
其中,若一个像素点对应的垂直灰度差异特征值V_acc_grad大于其水平邻域内其他像素点对应的垂直灰度差异特征值V_acc_grad之和,则该像素点被判定为垂直方向的块噪声像素点的置信度为第一置信度;若一个像素点对应的垂直灰度差异特征值V_acc_grad是其水平邻域内所有的像素点中最大的,则该像素点被判定为垂直方向的块噪声像素点的置信度为第二置信度,否则该像素点被判定为垂直方向的块噪声像素点的置信度为第三置信度,其中,第一置信度高于第二置信度,第二置信度高于第三置信度。
本申请实施例中,水平方向的块噪声像素点的检测方法,其原理与垂直方向的块噪声像素点的检测方法相同。检测图像中的水平方向的块噪声像素点时,若一个像素点是其垂直邻域内的像素点中,在水平方向设定范围内与其他像素点之间灰度差异最大的像素点,则将该像素点确定为水平方向的块噪声像素点。
其中,一个像素点的垂直邻域为以该像素点为中心的垂直方向上的至少三个像素点。
在一些实施例中,具体地,检测图像中的水平方向的块噪声像素点的过程,可如图5所示,包括以下步骤:
S501:根据图像中各像素点的灰度,分别确定各像素点与其垂直方向相邻的两个像素点之间的灰度差。
S502:分别将各像素点与其垂直方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的垂直灰度差异特征值V_grad;
S503:根据各列像素点对应的垂直灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点;
S504:分别对各像素点的水平邻域内被标记的像素点对应的垂直灰度差异特征值V_grad的绝对值进行累加,得到各像素点分别对应的水平灰度差异特征值H_acc_grad,其中,一个像素点的水平邻域为以该像素点为中心的垂直方向上的至少三个像素点;
S405:根据各像素点对应的水平灰度差异特征值H_acc_grad与其垂直邻域内各像素点对应的水平灰度差异特征值H_acc_grad之间的大小关系,确定各像素点是否是水平方向的块噪声像素点。
在一些实施例中,S505的一种实现方法,可包括:
根据各像素点对应的水平灰度差异特征值H_acc_grad与其垂直邻域内各像素点对应的视频灰度差异特征值H_acc_grad之间的大小关系确定各像素点被判定为水平方向的块噪声像素点的置信度,根据各像素点被判定为水平方向的块噪声像素点的置信度,确定各像素点是否是水平方向的块噪声像素点。
其中若一个像素点对应的水平灰度差异特征值H_acc_grad大于其垂直邻域内其他像素点对应的水平灰度差异特征值H_acc_grad之和则该像素点被判定为水平方向的块噪声像素点的置信度为第一置信度若一个像素点对应的水平灰度差异特征值H_acc_grad是其垂直邻域内所有的像素点中最大的,则该像素点被判定为水平方向的块噪声像素点的置信度为第二置信度,否则该像素点被判定为水平方向的块噪声像素点的置信度为第三置信度,其中,第一置信度高于第二置信度,第二置信度高于第三置信度。
下面以一个分辨率为M*N(水平像素数为M个像素,垂直像素数为N)的图像为例,分别基于图4、图5的流程,针对该图像中的像素点(i,j),描述判断其是否为垂直方向的块噪声像素点以及是否是水平方向上的块噪声像素点的过程。其中,(i,j)为该像素点在该图像中的索引,i为水平坐标,j为垂直坐标,0≤i≤M-1,0≤j≤N-1。
如图6所示,判断像素点(i,j)是否是垂直方向的块噪声像素点的过程为:
在S601中,对图像中的每一个像素点,计算其与水平方向上左右相邻的像素点的灰度差,即梯度值。其中,像素点(i,j)与其左边相邻像素点之间的灰度差记为H_grad1,与其右边相邻像素点之间的灰度差记为H_grad2:
H_grad1(i,j)=Y(i,j)-Y(i+1,j)
H_grad2(i,j)=Y(i,j)-Y(i-1,j)
其中,Y(i,j)表示像素点(i,j)的灰度,Y(i+1,j)表示像素点(i+1,j)的灰度,Y(i-1,j)表示像素点(i-1,j)的灰度。
需要说明的是,若像素点(i,j)为图像左边界上的像素点(即i=0),则可以通过差值的方法(比如复制像素点(i,j)),在该像素点的左侧插入一个像素点,从而计算得到像素点(i,j)对应的H_grad1;若像素点(i,j)为图像右边界上的像素点(即i=M-1),则可以通过差值的方法,在该像素点的左侧插入一个像素点,从而计算得到像素点(i,j)对应的H_grad2。
在S602中,针对每个像素点,分别将其H_grad1和H_grad2相加,得到各像素点对应的水平灰度差异特征值,记为H_grad:
H_grad(i,j)=H_grad1(i,j)+H_grad2(i,j)
在S603~S605中,判断像素点(i,j)的H_grad的绝对值是不是水平邻域内的最大H_grad,并根据判断结果修正像素点(i,j)的H_grad:
H_grad(i,j)=H_grad(i,j)*ismax(i,j)
其中,像素点(i,j)的水平邻域为:像素点(i-m,j)到像素点(i+m,j),即以像素点(i,j)为中心的水平方向的(2m+1)个像素点,其中,m的取值范围为m的取值可预先设定,一般可将m的取值设置为4。
通过该步骤,若像素点(i,j)的H_grad是其水平邻域内的最大H_grad,则保持该像素点(i,j)的H_grad值不变,否则将该像素点的H_grad设置为0,通过该方法,可针对各行像素点,根据该行像素点对应的H_grad的变化曲线,将该曲线中各峰值所对应的像素点标记出来,即上述H_grad值保持不变的像素点即为被标记的像素点。
在S606中,针对像素点(i,j),在其垂直邻域内,累加S403中计算得到的H_grad的绝对值,得到像素点(i,j)的累加值V_acc_grad:
其中,像素点(i,j)的垂直邻域为:像素点(i,j-n)到像素点(i,j+n),即以像素点(i,j)为中心的垂直方向的(2n+1)个像素点。其中,一个像素点的垂直邻域可以包括N个像素点,或者包括的像素点数小于N。即,n的取值范围为n的取值可预先设定。
在S607~611中,根据以下公式计算各像素点被判定为垂直方向的块噪声像素点的置信度:
上述公式表示:如果像素点(i,j)的V_acc_grad大于其水平邻域内其他像素点的V_acc_grad之和,则像素点(i,j)被判定为垂直方向的块噪声像素点的置信度最高;如果像素点(i,j)的V_acc_grad是其水平邻域内的其他像素点中最大的,则像素点(i,j)被判定为垂直方向的块噪声像素点的置信度次之;否则,像素点(i,j)被判定为垂直方向的块噪声像素点的置信度为零(即不会被判定为垂直方向的块噪声像素点)。
其中,像素点(i,j)的水平邻域为:像素点(i-m,j)到像素点(i+m,j),即以像素点(i,j)为中心的水平方向的(2m+1)个像素点,其中,m的取值范围为m的取值可预先设定,一般可将m的取值设置为4。
如图5所示,判断像素点(i,j)是否是水平方向的块噪声像素点的过程为:
在S501中,对图像中的每一个像素点,计算其与垂直方向上上下相邻的像素点的灰度差,即梯度值。其中,像素点(i,j)与其上边相邻像素点之间的灰度差记为V_grad1,与其下边相邻像素点之间的灰度差记为grad2:
V_grad1(i,j)=Y(i,j)-Y(i,j+1)
V_grad2(i,j)=Y(i,j)-Y(i,j-1)
其中,Y(i,j)表示像素点(i,j)的灰度,Y(i,j+1)表示像素点(i,j+1)的灰度,Y(i,j-1)表示像素点(i,j-1)的灰度。
需要说明的是,若像素点(i,j)为图像上边界上的像素点(即j=0),则可以通过差值的方法(比如复制像素点(i,j)),在该像素点的左侧插入一个像素点,从而计算得到像素点(i,j)对应的V_grad1;若像素点(i,j)为图像下边界上的像素点(即i=N-1),则可以通过差值的方法,在该像素点的左侧插入一个像素点,从而计算得到像素点(i,j)对应的V_grad2。
在S502中,针对每个像素点,分别将其V_grad1和V_grad2相加,得到各像素点对应的垂直灰度差异特征值,记为V_grad:
V_grad(i,j)=V_grad1(i,j)+V_grad2(i,j)
在S503中,判断像素点(i,j)的V_grad的绝对值是不是垂直邻域内的最大V_grad,并根据判断结果修正像素点(i,j)的V_grad:
V_grad(i,j)=V_grad(i,j)*ismax(i,i)
其中,像素点(i,j)的垂直邻域为:像素点(i,j-n)到像素点(i,j+n),即以像素点(i,j)为中心的垂直方向的(2n+1)个像素点,其中,n的取值范围为n的取值可预先设定,比如可将n的取值设置为4。
通过该步骤,若像素点(i,j)的grad是其垂直邻域内的最大V_grad,则保持该像素点(i,j)的V_grad值不变,否则将该像素点的V_grad设置为0,通过该方法,可针对各列像素点,根据该列像素点对应的V_grad的变化曲线,将该曲线中各峰值所对应的像素点标记出来,即上述V_grad值保持不变的像素点即为被标记的像素点。
在S504中,针对像素点(i,j),在其水平邻域内,累加S503中计算得到的V_grad的绝对值,得到像素点(i,j)的累加值H_acc_grad:
其中,像素点(i,j)的水平邻域为:像素点(i-m,j)到像素点(i+m,j),即以像素点(i,j)为中心的水平方向的(2m+1)个像素点。其中,一个像素点的水平邻域可以包括M个像素点,或者包括的像素点数小于M。即,m的取值范围为m的取值可预先设定。
在S505中,根据以下公式计算各像素点被判定为水平方向的块噪声像素点的置信度:
上述公式表示:如果像素点(i,j)的H_acc_grad大于其垂直邻域内其他像素点的H_acc_grad之和,则像素点(i,j)被判定为水平方向的块噪声像素点的置信度最高;如果像素点(i,j)的H_acc_grad是其垂直邻域内的其他像素点中最大的,则像素点(i,j)被判定为水平方向的块噪声像素点的置信度次之;否则,像素点(i,j)被判定为水平方向的块噪声像素点的置信度为零(即不会被判定为水平方向的块噪声像素点)。
其中,像素点(i,j)的垂直邻域为:像素点(i,j-n)到像素点(i,j+n),即以像素点(i,j)为中心的水平方向的(2n+1)个像素点,其中,n的取值范围为n的取值可预先设定,比如可将n的取值设置为4。
本申请实施例中,在检测得到块噪声像素点后,可基于检测到的块噪声像素点按照常规方式进行滤波处理。
为了更好地实现过渡效果,本申请的一些实施例中,在检测得到块噪声像素点后,可根据各块噪声像素点被判定为块噪声像素点的置信度,确定各块噪声像素点及其邻域内其他像素点的滤波强度,按照各块噪声像素点及其邻域内其他像素点的滤波强度,对各块噪声像素点以及邻域内其他像素点进行滤波。其中,块噪声像素点的滤波强度比其邻域内其他像素点的滤波强度高一个等级,以实现平滑过渡。
其中,对于一个垂直方向的块噪声像素点,若该像素点被判定为垂直方向的块噪声像素点的置信度为第一置信度,则将该垂直方向的块噪声像素点及其水平邻域内的其他像素点的滤波强度设置为第一滤波强度;若该像素点被判定为垂直方向的块噪声像素点的置信度为第二置信度,则将该垂直方向的块噪声像素点及其水平邻域内的其他像素点的滤波强度设置为第二滤波强度;若该像素点被判定为垂直方向的块噪声像素点的置信度为第三置信度,则将该垂直方向的块噪声像素点及其水平邻域内的其他像素点的滤波强度设置为零(即不对该像素点及其水平邻域内的像素点进行滤波)。其中,第一滤波强度大于第二滤波强度。
对于一个水平方向的块噪声像素点,若该像素点被判定为水平方向的块噪声像素点的置信度为第一置信度,则将该水平方向的块噪声像素点及其垂直邻域内的其他像素点的滤波强度设置为第一滤波强度;若该像素点被判定为水平方向的块噪声像素点的置信度为第二置信度,则将该水平方向的块噪声像素点及其垂直邻域内的其他像素点的滤波强度设置为第二滤波强度;若该像素点被判定为水平方向的块噪声像素点的置信度为第三置信度,则将该水平方向的块噪声像素点及其垂直邻域内的其他像素点的滤波强度设置为零(即不对该像素点及其垂直邻域内的像素点进行滤波)。其中,第一滤波强度大于第二滤波强度。
其中,一个像素点被判定为垂直方向的块噪声像素点或被判定为水平方向的块噪声像素点的置信度的计算方法可参见前述实施例的描述,在此不再重复。当然,也可采用其他方法计算一个像素点被判定为垂直方向的块噪声像素点或被判定为水平方向的块噪声像素点的置信度,本申请实施例对此不做限制。
举例来说,可将对垂直方向的块噪声像素点进行滤波处理的滤波强度划分为三档:强、中、弱。
按照前述方法,若计算得到一个像素点被判定为垂直方向的块噪声像素点的置信度V_is_block_noise=2,则对该像素点在水平方向滤波时的滤波强度为″强″,其水平邻域内其他像素点的滤波强度为中,从而实现平滑过渡。
按照前述方法,若计算得到一个像素点被判定为垂直方向的块噪声像素点的置信度V_is_block_noise=1,则对该像素点在水平方向滤波时的滤波强度为″中″,其水平邻域内其他像素点的滤波强度为″弱″,从而实现平滑过渡。
按照前述方法,若计算得到一个像素点被判定为垂直方向的块噪声像素点的置信度V_is_block_noise=0,则对该像素点及其水平邻域内的其他像素点不进行滤波。
也可将对水平方向的块噪声像素点进行滤波处理的滤波强度划分为三档:强、中、弱。
按照前述方法,若计算得到一个像素点被判定为水平方向的块噪声像素点的置信度H_is_block_noise=2,则对该像素点在垂直方向滤波时的滤波强度为″强″,其垂直邻域内其他像素点的滤波强度为中,从而实现平滑过渡。
按照前述方法,若计算得到一个像素点被判定为水平方向的块噪声像素点的置信度H_is_block_noise=1,则对该像素点在垂直方向滤波时的滤波强度为″中″,其水平邻域内其他像素点的滤波强度为″弱″,从而实现平滑过渡。
按照前述方法,若计算得到一个像素点被判定为水平方向的块噪声像素点的置信度H_iS_block_noise=0,则对该像素点及其水平邻域内的其他像素点不进行滤波。
根据本申请的上述实施例,在对判定为块噪声的像素点及其邻域内的像素点进行滤波时,距离块噪声像素点的距离越大,滤波强度越小,从而实现平滑过渡,提高用户感受。
需要说明的是,本申请的上述实施例是以将滤波强度划分为强、中、弱三个等级例描述的,事实上,本申请实施例不限于上述的三个等级,也可以细分为更多等级,以增加过渡的平滑性。
在本申请的一些实施例中,在确定各块像素点及其邻域内的其他像素点的滤波强度后,在进行滤波前,还可以根据该图像的全局噪声强度对各块噪声像素点的滤波等级进行修正,以使得在图像的全局噪声强度较低时,可以减少滤波操作或降低滤波强度,在保证图像滤波效果的同时可以节省处理开销。
具体地,本申请实施例中,在确定各块像素点及其邻域内的其他像素点的滤波强度后,可根据图像的全局块噪声强度调整各块噪声像素点及其邻域内其他像素点的滤波强度,其中,若全局块噪声强度在第一阈值和第二阈值之间,则将所有块噪声像素点及其邻域内其他像素点的滤波强度下调一级,若全局块噪声强度小于第二阈值,则放弃对各块噪声像素点及其邻域内其他像素点进行滤波。其中,第一阈值大于第二阈值。
其中,对于垂直方向的块像素点,可根据图像的全局垂直方向噪声强度对判定为垂直方向的块噪声像素点及其水平邻域内的像素点的滤波强度进行调整;对于水平方向的块像素点,可根据图像的全局水平方向噪声强度对判定为水平方向的块噪声像素点及其邻域内的像素点的滤波强度进行调整。
举例来说,用Lnumber_V表示图像的全局垂直方向噪声强度,并预先设置第一阈值threshold1_V和第二阈值threshold2_V,threshold1_V>threshold2_V,则可按照以下方式对各被判定为垂直方向的块像素点及其水平邻域内的其他像素点的滤波强度进行调整:
如果Lnumber_V大于第一阈值threshold1_V,则不进行滤波强度的调整;如果Lnumber_V介于第一阈值threshold1_V和第二阈值threshold2_V之间(包括第一阈值threshold1_V和第二阈值threshold2_V),则可将所有被判定为垂直方向的块噪声的像素点及其水平邻域内的其他像素点的滤波强度下调一个等级,如果Lnumber_V小于或等于第二阈值threshold2_V,则针对所有被判定为垂直方向的块噪声的像素点及其水平邻域内的其他像素点的不做滤波。
在另一些实施例中,也可以在计算得到各像素点被判定为垂直方向的块噪声像素点的置信度后,根据图像的全局垂直噪声强度,按照以下方式调整计算得到的置信度,然后根据调整后的置信度,按照前述方法确定垂直方向的块噪声像素点及其水平邻域内的其他像素点的滤波强度:
其中,如果Lnumber_V小于threshold2_V,则将置信度下调2个等级,根据调整后的置信度无需对相应置信度的垂直方向的块噪声像素点及其水平邻域内的其他像素点进行滤波;如果Lnumber_V在threshold2_V和threshold1_V之间,则将置信度下调1个等级;如果Lnumber_V大于threshold1_V,则保持置信度不变。threshold2_V<threshold1_V。
水平方向的块噪声像素点及其垂直邻域内的其他像素点的滤波强度调整方式,其原理与垂直方向的块噪声像素点及其水平邻域内的其他像素点的滤波强度调整方式相同。
举例来说,用Lnumber_H表示图像的全局水平方向噪声强度,并预先设置第一阈值threshold1_H和第二阈值threshold2_H,threshold1_H>threshold2_H,则可按照以下方式对各被判定为水平方向的块像素点及其垂直邻域内的其他像素点的滤波强度进行调整:
如果Lnumber_H大于第一阈值threshold1_H,则不进行滤波强度的调整;如果Lnumber_H介于第一阈值threshold1_H和第二阈值threshold2_H之间(包括第一阈值threshold1_H和第二阈值threshold2_H),则可将所有被判定为水平方向的块噪声的像素点及其垂直邻域内的其他像素点的滤波强度下调一个等级,如果Lnumber_H小于或等于第二阈值threshold2_H,则针对所有被判定为水平方向的块噪声的像素点及其垂直邻域内的其他像素点的不做滤波。
在另一些实施例中,也可以在计算得到各像素点被判定为水平方向的块噪声像素点的置信度后,根据图像的全局水平噪声强度,按照以下方式调整计算得到的置信度,然后根据调整后的置信度,按照前述方法确定水平方向的块噪声像素点及其垂直邻域内的其他像素点的滤波强度:
其中,如果Lnumber_H小于threshold2_H,则将置信度下调2个等级,根据调整后的置信度无需对相应置信度的水平方向的块噪声像素点及其垂直邻域内的其他像素点进行滤波;如果Lnumber_H在threshold2_H和threshold1_H之间,则将置信度下调1个等级;如果Lnumber_H大于threshold1_H,则保持置信度不变。threshold2_H<threshold1_H。
理想状态下的视频图像,块噪声呈现一定规律,如间隔相同,换句话说,理想状态下,大部分情况为全局噪声强度大于第一阈值threshold1的情况,需要按照确定出的强度进行滤波。当全局块噪声强度小于第一阈值threshold1但大于第二阈值threshold2时,说明情况并非很理想,不能按照原来的强度进行滤波,因此降低滤波强度等级;当全局块噪声强度小于第二阈值threshold2时,说明块噪声的排列不稳定,此时不做噪声处理,以免使得显示效果恶化。
在本申请的一些实施例中,可采用以下方式确定图像的全局块噪声强度:统计图像中相邻块噪声像素点之间的距离,得到每个距离值对应的块噪声像素点数量;选取所有距离值中块像素点数量最大的距离值;根据选取的距离值所对应的块噪声像素点数量,确定该图像的全局块噪声强度。
根据以上实施例,图像的全局块噪声强度包括全局垂直块噪声强度和/或全局水平块噪声强度。
其中,全局垂直块噪声强度的计算方法可包括:针对每个被判定为垂直方向的块噪声的像素点,计算该像素点与其水平方向上的下一个被判定为垂直方向的块噪声的像素点之间的距离,并统计距离相同的像素点的数量。如果有多种距离值,则从该多个距离值所对应的像素点数量中选取最大的,记为Lnumber_V,Lnumber_V可用于表征全局垂直块噪声强度。
例如,基于以上方法统计得到三种距离L1,L2和L3,其中距离为L1的垂直方向的块噪声像素点的数量为N1,距离为L2的垂直方向的块噪声像素点的数量为N2,距离为L3的垂直方向的块噪声像素点的数量为N3,则从N1、N2和N3中选取最大值作为Lnumber_V。
全局水平块噪声强度的计算方法的原理,与全局垂直块噪声强度的计算方法相同。具体地,全局水平块噪声强度的计算方法可包括:针对每个被判定为水平方向的块噪声的像素点,计算该像素点与其垂直方向上的下一个被判定为水平方向的块噪声的像素点之间的距离,并统计距离相同的像素点的数量。如果有多种距离值,则从该多个距离值所对应的像素点数量中选取最大的,记为Lnumber_H,Lnumber_H可用于表征全局水平块噪声强度。
在应用时,第一阈值threshold1和第二阈值threshold2是预设的。在一些实施例中,全局块噪声强度需要根据判定为块噪声的像素点计算得到,在另外一些实施例中,在处理第K时刻的图像帧时,可以参考第K-1时刻的图像帧的全局块噪声强度。
根据示例性的实施方式中的一方面,提供一种计算机存储介质,所述计算机存储介质中存储有计算机程序指令,当所述指令在计算机上运行时,使得所述计算机执行上述的视频图像处理方法。
在符合本领域常识的基础上,上述各优选条件可任意组合,即得本申请各较佳实施例。
由于本申请实施例中的通信终端和计算机存储介质可以应用于上述处理方法,因此,其所能获得的技术效果也可参考上述方法实施例,本申请的实施例在此不再赘述。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
虽然以上描述了本申请的具体实施方式,但是本领域的技术人员应当理解,这些仅是举例说明,本申请的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本申请的原理和实质的前提下,可以对这些实施方式做出多种变更或修改,但这些变更和修改均落入本申请的保护范围。
Claims (7)
1.一种视频图像处理方法,其特征在于,包括:
获取解码后的待显示的图像;
确定所述图像中的块噪声像素点,所述块噪声像素点包括垂直方向和/或水平方向的块噪声像素点;
对各块噪声像素点及其邻域内其他像素点进行滤波;
其中,确定所述图像中垂直方向的块噪声点像素点,包括:
根据所述图像中各像素点的灰度,分别确定各像素点与其水平方向相邻的两个像素点之间的灰度差;
分别将各像素点与其水平方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的水平灰度差异特征值;
根据各行像素点对应的水平灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点;
分别对各像素点的垂直邻域内被标记的像素点对应的水平灰度差异特征值的绝对值进行累加,得到各像素点分别对应的垂直灰度差异特征值;
根据各像素点对应的垂直灰度差异特征值与其水平邻域内各像素点对应的垂直灰度差异特征值之间的大小关系,确定各像素点是否是垂直方向的块噪声像素点;
其中,确定所述图像中水平方向的块噪声点像素点,包括:
根据所述图像中各像素点的灰度,分别确定各像素点与其垂直方向相邻的两个像素点之间的灰度差;
分别将各像素点与其垂直方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的垂直灰度差异特征值;
根据各列像素点对应的垂直灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点;
分别对各像素点的水平邻域内被标记的像素点对应的垂直灰度差异特征值的绝对值进行累加,得到各像素点分别对应的水平灰度差异特征值;
根据各像素点对应的水平灰度差异特征值与其垂直邻域内各像素点对应的水平灰度差异特征值之间的大小关系,确定各像素点是否是水平方向的块噪声像素点;
其中,一个像素点的水平邻域为以该像素点为中心的水平方向上的至少三个像素点,一个像素点的垂直邻域为以该像素点为中心的垂直方向上的至少三个像素点。
2.如权利要求1所述的方法,其特征在于,根据各像素点对应的垂直灰度差异特征值与其水平邻域内各像素点对应的垂直灰度差异特征值之间的大小关系,确定各像素点是否是垂直方向的块噪声像素点,包括:
根据各像素点对应的垂直灰度差异特征值与其水平邻域内各像素点对应的垂直灰度差异特征值之间的大小关系,确定各像素点被判定为垂直方向的块噪声像素点的置信度;其中,若一个像素点对应的垂直灰度差异特征值大于其水平邻域内其他像素点对应的垂直灰度差异特征值之和,则该像素点被判定为垂直方向的块噪声像素点的置信度为第一置信度,若一个像素点对应的垂直灰度差异特征值是其水平邻域内所有的像素点中最大的,则该像素点被判定为垂直方向的块噪声像素点的置信度为第二置信度,否则该像素点被判定为垂直方向的块噪声像素点的置信度为第三置信度,其中,第一置信度高于第二置信度,第二置信度高于第三置信度;
根据各像素点被判定为垂直方向的块噪声像素点的置信度,确定各像素点是否是垂直方向的块噪声像素点。
3.如权利要求1所述的方法,其特征在于,根据各像素点对应的水平灰度差异特征值与其垂直邻域内各像素点对应的水平灰度差异特征值之间的大小关系,确定各像素点是否是水平方向的块噪声像素点,包括:
根据各像素点对应的水平灰度差异特征值与其垂直邻域内各像素点对应的水平灰度差异特征值之间的大小关系,确定各像素点被判定为水平方向的块噪声像素点的置信度;其中,若一个像素点对应的水平灰度差异特征值大于其垂直邻域内其他像素点对应的水平灰度差异特征值之和,则该像素点被判定为水平方向的块噪声像素点的置信度为第一置信度,若一个像素点对应的水平灰度差异特征值是其垂直邻域内所有的像素点中最大的,则该像素点被判定为水平方向的块噪声像素点的置信度为第二置信度,否则该像素点被判定为水平方向的块噪声像素点的置信度为第三置信度,其中,第一置信度高于第二置信度,第二置信度高于第三置信度;
根据各像素点被判定为水平方向的块噪声像素点的置信度,确定各像素点是否是水平方向的块噪声像素点。
4.如权利要求1所述的方法,其特征在于,对各块噪声像素点及其邻域内其他像素点进行滤波之前,还包括:
根据各块噪声像素点被判定为块噪声像素点的置信度,确定各块噪声像素点及其邻域内其他像素点的滤波强度;其中,块噪声像素点的滤波强度比其邻域内其他像素点的滤波强度高一个等级;
所述对各块噪声像素点及其邻域内其他像素点进行滤波,包括:
按照各块噪声像素点及其邻域内其他像素点的滤波强度,对各块噪声像素点以及邻域内其他像素点进行滤波。
5.如权利要求4所述的方法,其特征在于,还包括:
确定所述图像的全局块噪声强度;
根据全局块噪声强度调整各块噪声像素点及其邻域内其他像素点的滤波强度,其中,若全局块噪声强度在第一阈值和第二阈值之间,则将所有块噪声像素点及其邻域内其他像素点的滤波强度下调一级,弱全局块噪声强度小于第二阈值,则放弃对各块噪声像素点及其邻域内其他像素点进行滤波,所述第一阈值大于所述第二阈值。
6.如权利要求5所述的方法,其特征在于,确定所述图像的全局块噪声强度,包括:
统计所述图像中相邻块噪声像素点之间的距离,得到每个距离值对应的块噪声像素点数量;
选取所有距离值中块像素点数量最大的距离值;
根据选取的距离值所对应的块噪声像素点数量,确定所述图像的全局块噪声强度。
7.一种显示设备,其特征在于,包括:
显示器,该显示器被配置为显示视频图像;
与所述显示器通信的控制器,所述控制器被配置为:
获取解码后的待显示的图像;
确定所述图像中的块噪声像素点,所述块噪声像素点包括垂直方向和/或水平方向的块噪声像素点;
对各块噪声像素点及其邻域内其他像素点进行滤波;
其中,确定所述图像中垂直方向的块噪声点像素点,包括:
根据所述图像中各像素点的灰度,分别确定各像素点与其水平方向相邻的两个像素点之间的灰度差;
分别将各像素点与其水平方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的水平灰度差异特征值;
根据各行像素点对应的水平灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点;
分别对各像素点的垂直邻域内被标记的像素点对应的水平灰度差异特征值的绝对值进行累加,得到各像素点分别对应的垂直灰度差异特征值;
根据各像素点对应的垂直灰度差异特征值与其水平邻域内各像素点对应的垂直灰度差异特征值之间的大小关系,确定各像素点是否是垂直方向的块噪声像素点;
其中,确定所述图像中水平方向的块噪声点像素点,包括:
根据所述图像中各像素点的灰度,分别确定各像素点与其垂直方向相邻的两个像素点之间的灰度差;
分别将各像素点与其垂直方向相邻的两个像素点之间的灰度差相加,得到各像素点对应的垂直灰度差异特征值;
根据各列像素点对应的垂直灰度差异特征值的变化曲线,标记该曲线中各峰值对应的像素点,
分别对各像素点的水平邻域内被标记的像素点对应的垂直灰度差异特征值的绝对值进行累加,得到各像素点分别对应的水平灰度差异特征值;
根据各像素点对应的水平灰度差异特征值与其垂直邻域内各像素点对应的水平灰度差异特征值之间的大小关系,确定各像素点是否是水平方向的块噪声像素点;
其中,一个像素点的水平邻域为以该像素点为中心的水平方向上的至少三个像素点,一个像素点的垂直邻域为以该像素点为中心的垂直方向上的至少三个像素点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010429474.3A CN111445427B (zh) | 2020-05-20 | 2020-05-20 | 视频图像处理方法以及显示设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010429474.3A CN111445427B (zh) | 2020-05-20 | 2020-05-20 | 视频图像处理方法以及显示设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111445427A CN111445427A (zh) | 2020-07-24 |
CN111445427B true CN111445427B (zh) | 2022-03-25 |
Family
ID=71657740
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010429474.3A Active CN111445427B (zh) | 2020-05-20 | 2020-05-20 | 视频图像处理方法以及显示设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111445427B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113613007B (zh) * | 2021-07-19 | 2024-03-05 | 青岛信芯微电子科技股份有限公司 | 一种三维色彩查找表的生成方法及显示设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104486618A (zh) * | 2014-12-30 | 2015-04-01 | 浙江宇视科技有限公司 | 视频图像的噪声检测方法及装置 |
CN107197254A (zh) * | 2011-09-09 | 2017-09-22 | 太阳专利托管公司 | 解码方法及解码装置 |
CN110796615A (zh) * | 2019-10-18 | 2020-02-14 | 浙江大华技术股份有限公司 | 一种图像去噪方法、装置以及存储介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2010001911A1 (ja) * | 2008-07-03 | 2011-12-22 | シャープ株式会社 | フィルタ装置 |
KR20100050655A (ko) * | 2008-11-06 | 2010-05-14 | 삼성전자주식회사 | 블록 노이즈 감소 시스템 및 방법 |
JP2012517774A (ja) * | 2009-02-10 | 2012-08-02 | シリコン イメージ,インコーポレイテッド | ブロックノイズの検出及びフィルタ処理 |
CN107360435B (zh) * | 2017-06-12 | 2019-09-20 | 苏州科达科技股份有限公司 | 块效应检测方法、块噪声滤除方法及装置 |
CN108521575B (zh) * | 2018-04-06 | 2019-12-27 | 天津米步科技有限公司 | 图像噪声的降噪方法及装置 |
-
2020
- 2020-05-20 CN CN202010429474.3A patent/CN111445427B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107197254A (zh) * | 2011-09-09 | 2017-09-22 | 太阳专利托管公司 | 解码方法及解码装置 |
CN104486618A (zh) * | 2014-12-30 | 2015-04-01 | 浙江宇视科技有限公司 | 视频图像的噪声检测方法及装置 |
CN110796615A (zh) * | 2019-10-18 | 2020-02-14 | 浙江大华技术股份有限公司 | 一种图像去噪方法、装置以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111445427A (zh) | 2020-07-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3291540B1 (en) | Image display apparatus and operating method thereof | |
CN111899680B (zh) | 一种显示设备及其设置方法 | |
CN112153446B (zh) | 一种显示设备及流媒体视频音画同步方法 | |
CN112073788A (zh) | 视频数据处理方法、装置及显示设备 | |
CN111432257A (zh) | 一种显示设备开启屏幕保护的方法及显示设备 | |
CN111556350B (zh) | 一种智能终端及人机交互方法 | |
CN114630053A (zh) | 一种hdr图像显示方法及显示设备 | |
CN112073795B (zh) | 视频数据处理方法、装置及显示设备 | |
CN112783380A (zh) | 显示设备和方法 | |
WO2021213097A1 (zh) | 一种显示设备及投屏方法 | |
CN111445427B (zh) | 视频图像处理方法以及显示设备 | |
WO2020248829A1 (zh) | 音视频处理方法及显示设备 | |
CN111078926A (zh) | 一种人像缩略图像的确定方法及显示设备 | |
CN113207003B (zh) | 一种视频图像的运动估计方法及电子设备 | |
CN111726555B (zh) | 一种显示设备及运动估计方法、视频处理方法 | |
CN112218156B (zh) | 一种调节视频动态对比度的方法及显示设备 | |
CN112399235B (zh) | 一种智能电视的摄像头拍照效果增强方法及显示设备 | |
CN112004127B (zh) | 一种信号状态显示方法及显示设备 | |
CN113556590B (zh) | 一种投屏视频流有效分辨率检测方法及显示设备 | |
CN115547265A (zh) | 显示设备及显示方法 | |
CN113015006A (zh) | 显示设备及显示方法 | |
CN112367550A (zh) | 一种媒资列表多标题动态展示的实现方法及显示设备 | |
CN112565915A (zh) | 显示设备和显示方法 | |
CN111949179A (zh) | 一种控件放大方法及显示设备 | |
CN111526398A (zh) | 显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |