CN1879421A - 包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法及相关系统和计算机程序产品 - Google Patents

包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法及相关系统和计算机程序产品 Download PDF

Info

Publication number
CN1879421A
CN1879421A CNA2004800328133A CN200480032813A CN1879421A CN 1879421 A CN1879421 A CN 1879421A CN A2004800328133 A CNA2004800328133 A CN A2004800328133A CN 200480032813 A CN200480032813 A CN 200480032813A CN 1879421 A CN1879421 A CN 1879421A
Authority
CN
China
Prior art keywords
filtering
data
pixel
value
brightness value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2004800328133A
Other languages
English (en)
Inventor
佩尔·托雷尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN1879421A publication Critical patent/CN1879421A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/77Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20012Locally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Processing Of Color Television Signals (AREA)
  • Picture Signal Circuits (AREA)

Abstract

对数字图像和/或视频数据进行处理,其中数据的帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。可以对于当前像素和至少一个相邻像素接收色度值和亮度值,并且可以对当前像素和至少一个相邻像素的色度值进行比较。可以对当前像素的亮度值进行滤波,其中对亮度值的滤波强度基于当前像素和至少一个相邻像素的色度值的比较。

Description

包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法 及相关系统和计算机程序产品
技术领域
本发明涉及图像和/或视频领域,更具体地,涉及数字图像和/或视频数据的处理以及相关系统和计算机程序产品。
背景技术
在授予Siu-Wai Wu等人的美国专利No.5,959,693中讨论了一种用于数字视频的像素自适应噪声消减滤波器。如Wu等人的摘要中所述,当极有可能存在噪声时,自适应地对视频图像的当前像素进行滤波,以提供较强的滤波。当视频图像中可能存在颜色和/或亮度边缘时,提供较弱的滤波。每一个像素都具有亮度和色度幅值。在一种滤波方法中,当前像素介于视频帧的第一和第二像素之间。根据当前像素与第一和第二相邻像素之间的幅值差来确定差信号。多种可用的滤波器提供了对当前像素幅值的连续较强滤波。选择这些滤波器之一来根据差信号对当前像素进行滤波。在该选择处理中还考虑了表示当前像素与和第一和第二像素相邻的像素之间的幅值差的次级差信号。可以通过用户可选择的控制字来进一步对该选择处理设定偏好(biased)。该方案还可以提供对于连续视频帧或图像的时间滤波。还可以使用带有像素内插的滤波。此处通过引用并入美国专利No.5,959,693的全部内容。
发明内容
根据本发明的实施例,可以提供用于对数字图像和/或视频数据进行处理的方法,其中该数据的帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。更具体地,可以对于当前像素和至少一个相邻像素接收色度值和亮度值,并且可以对当前像素和该至少一个相邻像素的色度值进行比较。可以对当前像素的亮度值进行滤波,其中对亮度值的滤波强度基于当前像素与该至少一个相邻像素的色度值的比较。
对当前像素的亮度值进行的滤波可以包括将当前像素的亮度值与至少一个相邻像素的亮度值进行平均,因此可以由在对亮度值进行平均时施加给亮度值的权重来确定滤波的强度。对当前像素和相邻像素的色度值的比较可以包括计算当前像素和相邻像素的色度值之间的差。此外,在当前像素和相邻像素的色度值之间的差高于预定阈值时可以减小滤波的强度,而在当前像素和相邻像素的色度值之间的差低于该预定阈值时可以增大滤波的强度。
可以按照YCrCb格式提供数据,其中Y是亮度值,而Cr和Cb是各个像素的相应的红色和蓝色色度值。此外,对当前像素和相邻像素的色度值的比较可以包括对各个像素的Cr值的差的绝对值和各个像素的Cb值的差的绝对值进行求和。更具体地,各个像素的Cr值的差的绝对值可以是Cr值的平方差,而各个像素的Cb值的差的绝对值可以是Cb值的平方差。另外,减小滤波的强度可以包括使像素的亮度数据通过而不进行滤波。另外,在对当前像素的亮度值进行滤波之前,可以对当前像素和至少一个相邻像素的亮度值进行比较,滤波的强度可以基于第一和第二像素的色度值的比较以及基于亮度值的比较。
接收当前像素和至少一个相邻像素的色度值和亮度值可以包括从数字照相机接收色度值和亮度值,可以对包括经滤波的亮度值的数据进行编码,并通过无线接口进行发送。编码可以包括改变数据的压缩率,滤波的强度可以基于第一和第二像素的色度值的比较以及基于编码过程中所采用的压缩率。从数字照相机接收色度值和亮度值可以包括接收数据帧的色度值和亮度值,对亮度值进行滤波可以包括对数据帧的亮度值进行滤波。另外,可以识别经滤波的帧的应该施加纹理的多个部分,并且可以发送该帧的应该施加纹理的多个部分的识别信息。还可以发送多个纹理中的应该被施加的一个纹理的识别信息。
可以通过无线接口来接收编码数据,并且可以在接收到当前像素和至少一个相邻像素的色度值和亮度值之前对编码数据进行解码,以提供当前像素和至少一个相邻像素的色度值和亮度值。对亮度值进行滤波可以包括对数据帧的亮度值进行滤波,识别该帧的应该施加纹理的部分,在对该数据帧的亮度值进行滤波之后,可以对该帧的所识别的多个部分施加纹理。
此外,第一和相邻像素可以是水平相邻、垂直相邻、对角相邻和/或时间相邻中的一种。另外,对当前像素的亮度值进行滤波可以包括对当前像素的亮度值进行低通滤波。
根据本发明的其他实施例,可以提供用于对来自发送设备的数字图像和/或视频数据进行处理的方法,其中数据帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。另外,在发送之前对数据进行前置滤波和编码,并且可以根据前置滤波算法对数据进行前置滤波。可以从发送设备接收经前置滤波和编码的数据,并且可以对来自发送设备的经前置滤波和编码的数据进行解码。可以根据后置滤波算法对解码数据进行后置滤波,其中前置滤波算法和后置滤波算法相匹配。
根据本发明的其他实施例,可以提供用于对来自发送设备的数字图像和/或视频数据进行处理的方法,其中数据帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。可以在发送之前对数据进行前置滤波和编码,并且可以根据前置滤波算法来对数据进行前置滤波,并从发送设备发送该前置滤波算法的参数。可以从发送设备接收经前置滤波和编码的数据以及该前置滤波算法的参数。可以对来自发送设备的经前置滤波和编码的数据进行解码,并且可以根据后置滤波算法对解码数据进行后置滤波,其中根据从发送设备接收的前置滤波算法的参数来调整后置滤波算法的操作。
根据本发明的其他实施例,可以提供用于对数字图像和/或视频数据进行处理的方法,其中数据帧包括多行和多列像素。可以接收当前像素的亮度值,并且可以对当前像素的亮度值进行滤波。可以对包括经滤波的亮度值的数据进行编码,其中对数据进行编码包括改变数据的压缩率,并且其中对亮度值的滤波强度响应于在编码过程中所采用的压缩率而改变。
根据本发明的更多实施例,可以提供用于对数字图像和/或视频数据进行处理的方法,其中数据帧包括多行和多列像素。可以接收帧的像素的数据并对其进行滤波,并且可以识别该数据帧的应该施加纹理的部分。可以对该帧的像素的经滤波数据进行编码,并且可以发送该帧的像素的经编码和滤波的数据。另外,可以发送数据帧的应该施加纹理的部分的识别信息。
根据本发明的更多实施例,可以提供用于对数字图像和/或视频数据进行处理的方法,其中数据帧包括多行和多列像素。可以接收帧的像素的数据并对其进行解码。可以识别该数据帧的应该施加纹理的部分,并且在对该帧的像素的数据进行了解码之后,可以对该数据帧的所识别部分施加纹理。
根据本发明的其他实施例,可以提供用于对数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机可读程序代码可以包括执行以下操作的计算机可读程序代码:接收当前像素和至少一个相邻像素的色度值和亮度值;对当前像素和至少一个相邻像素的色度值进行比较;以及对当前像素的亮度值进行滤波,其中对亮度值的滤波强度基于当前像素和至少一个相邻像素的色度值的比较。
根据本发明的其他实施例,可以提供用于对来自发送设备的数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值,其中在发送之前对数据进行前置滤波和编码,并且其中根据前置滤波算法来对数据进行前置滤波。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机可读程序代码可以包括执行以下操作的计算机可读程序代码:从发送设备接收经前置滤波和编码的数据;对来自发送设备的经前置滤波和编码的数据进行解码;以及根据后置滤波算法对解码数据进行后置滤波,其中前置滤波算法和后置滤波算法相匹配。
根据本发明的其他实施例,可以提供用于对来自发送设备的数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。此外,可以在发送之前对数据进行前置滤波和编码,根据前置滤波算法来对数据进行前置滤波,并且从发送设备发送前置滤波算法的参数。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机程序产品可以包括执行以下操作的计算机可读程序代码:从发送设备接收经前置滤波和编码的数据;接收从发送设备发送的前置滤波算法的参数;对来自发送设备的经前置滤波和编码的数据进行解码;以及根据后置滤波算法对解码数据进行后置滤波,其中根据从发送设备接收的前置滤波算法的参数来调整后置滤波算法的操作。
根据本发明的更多实施例,可以提供用于对数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机可读程序代码可以包括执行以下操作的计算机可读程序代码:接收当前像素的亮度值;对当前像素的亮度值进行滤波;以及对包括经滤波的亮度值的数据进行编码,其中对数据进行编码包括改变数据的压缩率,并且其中对亮度值的滤波强度响应于在编码过程中所采用的压缩率而改变。
根据本发明的更多实施例,可以提供用于对数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机可读程序代码可以包括执行以下操作的计算机可读程序代码:接收数据帧的像素的数据;对该帧的像素的数据进行滤波;识别该数据帧的应该施加纹理的部分;对该帧的像素的经滤波的数据进行编码;对该帧的像素的经编码和滤波的数据进行发送;以及发送该数据帧的应该施加纹理的部分的识别信息。
根据本发明的更多实施例,可以提供用于对数字图像和/或视频数据进行处理的计算机程序产品,其中数据帧包括多行和多列像素。该计算机程序产品可以包括计算机可读存储介质,该计算机可读存储介质中包含有计算机可读程序代码。该计算机可读程序代码可以包括执行以下操作的计算机可读程序代码:接收数据帧的像素的数据;对该帧的像素的数据进行解码;识别该数据帧的应该施加纹理的部分;以及在对该帧的像素的数据进行解码之后,对该数据帧的所识别的部分施加纹理。
附图说明
图1是根据本发明实施例的通信系统的简图。
图2是根据本发明实施例的移动终端的框图。
图3-9是表示根据本发明实施例的对图像和/或视频数据进行处理的操作的流程图。
图10-12是表示根据本发明实施例的处理器的框图。
具体实施方式
下面将参照附图更加全面地说明本发明,附图中示出了本发明的优选实施例。然而,可以按照许多不同的形式来实施本发明,并且不应当认为本发明限于在此阐述的实施例;相反地,提供这些实施例以使本公开全面且完整,并将本发明的范围完全转达给本领域的技术人员。在所有附图中,相同的标号表示相同的元件。
如本领域技术人员所理解的,本发明可以实施为方法或设备。因此,本发明可以采用硬件实施例、软件实施例或者组合软件和硬件方面的实施例的形式。还应该理解,当单元被表示为与另一单元“连接”或“耦接”时,其可以与该另一单元直接连接或耦接,或者可以存在中间单元。相反,当单元被表示为与另一单元“直接连接”或“直接耦接”时,不存在任何中间单元。
应该强调的是,本说明书中使用的术语“包括(comprise/comprises/comprising)”用于表示所述特征、整体(integer)、步骤或组件的存在,但并不排除一个或更多个其他特征、整体、步骤、组件或它们的组的存在或添加。
现在参照图1,根据本发明的实施例,可以通过包括移动电话交换局(MTSO)103和多个基站105a-c的无线通信系统来提供无线通信。例如,各个基站都可以提供与一个或多个移动终端(MT)107a-d的无线通信,并且移动电话交换局还可以提供与公共交换电话网(PSTN)101和/或诸如内联网和/或互联网的数据通信网络109的通信。因此,该无线通信系统可以在两个移动终端107之间、移动终端107与连接到公共交换电话网101的传统电话之间,以及/或者移动终端107与连接到数据通信网络109和/或连接到公共交换电话网的计算设备(例如个人计算机或膝上计算机)之间提供语音、图像和/或视频、视频、和/或数据通信。
例如,该无线通信系统可以是诸如WiFi网络、蜂窝网络、个人通信服务(PCS)网络、卫星通信网络、超宽带网络以及/或者蓝牙网络的无线通信网络。例如,各个移动终端107可以是无线电话、个人无线数字助理(例如Palm PilotTM或者Pocket PCTM)、寻呼机、无线发信装置(例如BlackberryTM无线手持装置)、无线膝上计算机以及/或者它们的组合。此外,可以在移动终端107之间进行直接通信,而无需使用基站105和/或移动电话交换局103。
因此,移动终端107可以用来提供无线语音和/或数据通信,并且该无线通信可以是数字的。移动终端107中还可以包括数字照相机以及/或者可以包括与其相连接的数字照相机。数字照相机可以采集由多行和多列像素构成的帧,以提供数字图像和/或视频(图片),并且/或者该数字照相机可以采集多个连续帧以提供视频。这种数字图像和/或数字视频以及/或者视频可以存储在移动终端的存储器中,并在该移动终端的显示屏上观看。数字图像和/或视频数据还可以(或另选地)通过无线接口从该移动终端107发送到另一移动终端107,以及/或者发送到与公共交换电话网101和/或数据通信网络109相连的另一设备。数字图像和/或视频数据还可以(或另选地)通过有线接口(例如使用端口218)从该移动终端107发送至另一移动终端或设备。
在通过无线接口发送图像和/或视频时,可以通过在发送之前对该图像和/或视频进行滤波来减小发送的带宽。例如,可以对表示该图像和/或视频的数据进行低通滤波,以减少该图像和/或视频的高频分量,这些高频分量可能消耗相对大的带宽量,而相对难以感知以及/或者提供相对较少的视觉信息。此外,对数据的滤波强度可以逐个像素地变化,以使得可以保留视觉上重要的信息(例如,对象之间的边缘),而更强地对更难感知或视觉上可能不重要的高频分量进行滤波。根据本发明的实施例,可以去除包括纹理中的高频信息在内的在所有像素的色度值方面变化很小的纹理中的高频信息,而对该图像和/或视频的主观质量几乎没有显著的影响。
更具体地,数字图像和/或视频数据帧的每个像素都可以具有亮度值和与该亮度值相关的多个色度值,可以通过基于当前像素和至少一个相邻像素的色度值的比较的对亮度值的滤波强度来对当前像素的亮度值进行滤波。然后可以在发送到另一设备和/或存储在存储器中之前对经滤波的图像和/或视频数据进行编码,以进一步减小传输时消耗的带宽,以及/或者进一步减小存储时消耗的存储器。另外或者另选地,可以在再现和/或存储图像和/或视频之前,在接收数字图像和/或视频数据的设备处执行根据本发明实施例的滤波。
如图2所示,根据本发明实施例的移动终端207可以包括天线211、收发器213、处理器215、存储器217、端口218、用户接口219以及/或者数字照相机220。更具体地,用户接口219可以包括扬声器221、麦克风223、键盘225、显示器227(例如平板显示屏或液晶显示器)以及/或者触敏显示屏229中的一个或更多个。移动终端207可以是无线电话、个人无线数字助理(例如Palm PilotTM或者Pocket PCTM)、寻呼机、无线发信装置(例如BlackberryTM无线手持装置)、无线膝上计算机以及/或者它们的组合。此外,如以上针对图1所讨论的,移动终端可以通过诸如WiFi网络、蜂窝网络、个人通信服务(PCS)网络、卫星通信网络、超宽带网络以及/或者蓝牙网络的一种或多种通信网络来提供无线通信。
另外,移动终端207可以提供与另一设备的直接通信,而不需要使用中间通信系统或网络。例如,移动终端207可以使用射频、红外线以及/或者光耦合来提供与另一移动终端的直接无线通信。另选地,移动终端207可以通过端口218使用有线和/或光纤连接来提供与另一移动终端的直接通信。该移动终端还可以是数字静态照相机和/或数字视频相机,而不提供其他通信和/或计算功能。
根据本发明的实施例,数字照相机220可以采集单个帧作为静态图像和/或视频以提供图片,以及/或者采集多个连续帧以提供视频。更具体地,可以将图像和/或视频定义为包括多行和多列像素的帧,并且各个像素的数据可以包括亮度值和多个色度值。例如,根据YCbCr格式,通过亮度值Y、色度蓝色值Cb以及色度红色值Cr来定义各个像素。此外,根据某些格式,可以对色度值进行二次抽样,以减少数据处理、存储器以及/或者传输带宽要求。例如,根据YCbCr 4:2:2格式,对于各个像素都保持所抽样的Y(亮度值),而对于每一对像素仅保持一个Cb(色度蓝色值)和一个Cr(色度红色值)。根据YCbCr 4:2:0格式,对于各个像素都保持所抽样的Y(亮度值),而对于每四个像素的块仅保持一个Cb和一个Cr。
可以将通过数字照相机220采集的像素数据提供给处理器215和/或存储器217中的任何一个或两者,或者可以最初将像素数据存储在包含在数字照相机220内的存储器中。例如,可以在处理器215处进行处理之前,将来自数字照相机的原始像素数据存储在存储器217中。另选地,可以在处理器215处对像素数据进行处理之后,将经处理的像素数据存储到存储器217中。另选地,可以在处理器215中对像素数据进行处理,并通过收发器213和天线211进行发送,而不将原始的或经处理的像素数据存储在存储器217中。
因此,图2的处理器215可以对从数字照相机220、存储器217、收发器213以及/或者端口218接收的图像和/或视频数据进行滤波。例如,该处理器可以在从数字照相机220和/或存储器217接收数据之后,对该数据进行编码,以通过无线接口从收发器213和天线211进行发送。另选地,处理器215可以在通过无线接口接收到数据后,从收发器213接收该数据,并且该处理器可以在滤波之前对该数据进行解码。
更具体地,处理器215可以对数字图像和/或视频数据进行处理,以使得可以根据当前像素和与当前正在处理的像素相邻的像素的色度值的比较来对帧的像素的亮度值进行滤波。更具体地,可以从存储器217、数字照相机220、收发器213和/或端口218接收当前像素和至少一个相邻像素的色度值和亮度值。可以对当前像素和至少一个相邻像素的色度值进行比较,并且可以通过基于当前像素和至少一个相邻像素的色度值的比较的对亮度值的滤波强度,来对当前像素的亮度值进行滤波。因此,对帧中的亮度值的滤波强度可以根据各个像素和相邻像素的色度值的比较而逐个像素地变化。
这里使用的术语“当前像素”是指当前正在处理的像素,而术语“相邻像素”是指与当前正在处理的像素相邻的像素。相邻像素可以与当前像素水平相邻、垂直相邻或者对角相邻,并且相邻像素可以直接或紧接地与当前像素相邻,其间没有中间像素。另选地,当前像素与相邻像素之间可以存在中间像素。此外,相邻像素可以与一系列视频帧中的当前像素在时间上相邻,从而该相邻像素占据了当前像素的帧的先前帧或后续帧中的对应像素位置。
另外,可以对相邻像素进行选择,以使得当前像素和相邻像素不共享相同的一个或更多个色度值。例如,如果对色度值进行二次抽样以使得四个像素的块根据YCbCr 4:2:0格式共享相同的Cb和Cr值,则可以从与包括当前像素在内的像素块不同的相邻像素块中选择相邻像素。类似地,如果对色度值进行二次抽样以使得多对两个像素根据YCbCr 4:2:2格式共享相同的Cb和Cr值,则可以从与包括当前像素在内的像素对不同的相邻像素对中选择相邻像素。
更具体地,处理器215可以通过对当前像素的亮度值与一个或更多个相邻像素的亮度值进行平均,来对当前像素的亮度值进行滤波,并且可以通过在进行平均时施加给亮度值的权重来确定滤波的强度。根据一具体实施例,当前像素的亮度值可以与位于其任意侧的两个水平、垂直和/或对角相邻像素的亮度值进行平均。对于相对强的滤波,可以对进行平均以提供当前像素的经滤波的亮度值的三个亮度值中的每一个施加大致相等的权重(即,大约33.33%)。对于相对弱的滤波,在对三个像素的亮度值进行平均以提供当前像素的经滤波的亮度值时,可以对两个相邻像素的亮度值施加相对低的权重(即,大约10%),而对当前像素的亮度值施加相对高的权重(即,大约80%)。通过对两个相邻像素的亮度值施加0%的权重,而对当前像素的亮度值施加100%的权重,可以使当前像素的原始亮度值通过,而不进行滤波。如果不希望对特定像素的亮度值进行滤波,则可以使该像素的原始亮度值通过滤波,而不产生变化或进行平均,从而提供零滤波。以上仅通过示例的方式讨论了滤波,并且例如更高级的实现可以考虑更多的周围像素。
处理器215可以通过计算当前像素和相邻像素的色度值之间的差,来比较当前像素和相邻像素的色度值。当进行比较的像素的色度值之间的差高于预定阈值时,可以减小处理器所施加的滤波强度,而在当前像素和相邻像素的色度值之间的差低于该预定阈值时,可以增大处理器215所施加的滤波强度。例如,如果色度值之间的差小于该预定阈值,则在进行平均时可以对相邻像素的亮度值施加大于零的预定权重,而如果色度值之间的差大于该预定阈值,则在进行平均时可以对相邻像素的亮度值施加零权重。另外,在色度值之间的差小于该预定阈值时所施加的非零权重可以根据其他因素(例如,亮度值的比较、在编码过程中采用的压缩度)而变化,并且/或者与发送或接收设备的滤波特性相匹配。另选地,滤波的强度可以在像素之间以下述的方式变化,即当前像素的亮度值的滤波强度与当前像素和相邻像素的色度值的差成反比。
根据本发明的具体实施例,可以按照YCbCr格式(其中Y是亮度值,而Cr和Cb是相应的红色和蓝色色度值)提供帧的各个像素的数字数据。可以通过对各个像素的Cr值的差的绝对值和各个像素的Cb值的差的绝对值进行求和,由处理器215对当前像素和相邻像素的色度值进行比较。此外,各个像素的Cr值的差的绝对值可以是Cr值的平方差,而各个像素的Cb值的差的绝对值可以是Cb值的平方差。因此,通过根据以下公式计算差D,由处理器对色度值进行比较:
       D=(Cbi-Cbj)2+(Cri-Crj)2                方程1
在该公式中,Cri和Crj分是相应的当前(i)像素和相邻(j)像素的红色色度值,而Cbi和Cbj是相应的当前(i)像素和相邻(j)像素的蓝色色度值。
如上所述,由处理器215对当前像素的亮度值施加的滤波强度可以相对于在比较色度值时根据方程1的公式计算的值D相反地变化。如果值D(当前像素和相邻像素的色度值的差)超过了预定阈值K,则该当前像素的亮度值可以通过而不发生改变,从而实际上没有施加滤波。如上所述,例如,通过仅使当前像素的原始亮度值通过,或者通过对当前像素和其他像素进行平均而对相邻像素施加零(0%)权重,不能实现滤波。根据本发明的实施例,实验测试已经表明,K=25的值可以提供用于确定何时忽略对当前像素的亮度值的低通滤波的适当阈值。
在对当前像素的亮度值进行滤波之前,还可以对当前像素和至少一个相邻像素的亮度值进行比较,并且由处理器215施加的滤波强度可以基于色度值的比较以及基于亮度值的比较。根据本发明的一些实施例,如果对于当前像素,色度值之间的差(例如,方程1的值D)超过了预定阈值(例如,K),则可以使当前像素通过而不进行滤波。如果色度值之间的差小于该预定阈值,则可以确定当前像素是否具有显著的(significant)颜色分量。例如,如果色度值Cbi或Cri中的任何一个超过了预定阈值(例如M),则可以假定当前像素具有显著的颜色分量,并且可以进行低通滤波。
如果色度值Cbi或Cri都没有超过该预定阈值(例如M),则该像素可能是灰度级(黑或白)像素,并且处理器215可以在滤波之前进一步确定当前像素与相邻像素之间的亮度值是否存在显著的变化。如果亮度值没有显著的变化,则可以对当前像素的亮度值进行低通滤波。如果亮度值存在显著的变化,则可以使当前像素的亮度值通过滤波,而不发生变化。因此,通过在当前像素的两个色度值都足够低但相邻亮度值存在很大变化时禁止滤波,可以更加精确地保留图像和/或视频的黑色和白色区域之间的边缘。
如图10所示,根据本发明的实施例,处理器215a可以被构造为包括编码器1011和滤波器1015。在处理器215a处接收色度值和亮度值可以包括直接地或者通过用于存储这些值的存储器从数字照相机接收色度值和亮度值。此外,可以由滤波器1015对数字图像和/或视频数据进行滤波,并由编码器1011对其进行编码,并由收发器通过无线接口进行发送。通过如上所述使用滤波器1015对亮度值进行滤波,可以滤除不易感知的高频信息,以使得编码后的图像和/或视频数据在通过无线接口进行发送时可以消耗较少的带宽。
另外,用于对数字图像和/或视频数据进行编码的编码器1011可以改变应用于数字图像和/或视频数据的压缩率,并且滤波器1015的滤波强度可以基于色度值的比较以及基于编码器1011所采用的压缩率。例如,可以改变压缩率,以保持正通过无线接口发送的图像和/或视频的相对恒定的比特率。例如,可以使用量化参数(QP)来确定编码过程中的损耗量,其中低QP值提供相对低的压缩和相对高的质量,而高QP值提供相对高的压缩和相对低的质量。通过相对高的QP值和高压缩,可能会增加所得到的图像和/或视频中的大量压缩假象(artifact)。
例如,在发送经编码的视频图像和/或视频数据时,编码器1011的压缩率控制机制可以改变QP值以提供相对恒定的比特率。在进行编码之前如上所述对亮度值进行滤波时,滤波器1015的强度可以响应于QP值而变化。具体地,可以在QP值相对高时增大滤波器1015的强度,并且可以在QP值相对低时减小滤波器的强度。因此,可以响应于编码器1011所采用的压缩级别来对滤波器1015的强度进行修改,因此可以减小失真。还可以使用其他编码信息(例如,运动矢量和/或宏块跳越信息)来修改滤波器1015的操作。
根据本发明的一些实施例,可以使用色度值的比较来确定用于在滤波器1015处进行滤波的阈值。例如,如果使用方程1确定的色度值的差超过了阈值K,则当前像素的亮度值可以通过,而不被滤波器1015改变(即,弱滤波或无滤波)。如果色度值的差小于阈值K,则可以通过与相邻像素进行平均来对当前像素的亮度值进行滤波。在对亮度值进行平均时所施加的权重可以作为如上所述的QP值的函数而变化。
此外,可以使用来自编码器1011的QP值来改变滤波器1015的滤波强度,并且可以在完成对图像和/或视频数据的前一个块的编码之后将该QP值提供给滤波器1015。例如,可以按照像素组(例如,块、宏块和/或宏块行)来对像素进行编码,并且可以使用在对前一组像素进行编码时所确定的QP值来设定对于包括当前像素的当前组像素的滤波器1015的滤波强度。另选地,可以采用多通滤波和编码,以使得可以在最终编码和/或发送之前,使用用于对当前像素进行编码的QP值来确定对于当前像素的滤波强度。
如图11所示,根据本发明实施例的处理器215b可以包括滤波器1101、编码器1105以及纹理确定块1107。如上所述,滤波器1101可以对图像和/或视频帧的像素执行滤波操作,并且编码器1105可以对该帧的经滤波的像素数据或其多个部分进行编码,并通过无线接口从收发器发送至另一设备。更具体地,在处理器215b处接收色度值和亮度值可以包括接收图像和/或视频数据的帧的色度值和亮度值。此外,在滤波器1101处对色度值进行的比较和对亮度值进行的滤波可以对各个像素执行。另外,可以通过纹理确定块1107来确定经滤波的帧的应该施加纹理的多个部分,并且可以通过收发器来发送该帧的应该施加纹理的多个部分的识别信息。此外,可以将多个纹理中的应当被施加的一个纹理的识别信息发送给接收设备。
当如上所述进行滤波时,作为滤波的结果,可以将图像和/或视频中的纹理化表面(即下述的表面,在该表面中所包含的所有像素具有相对均匀的色度,但在该表面中所包含的所有像素的亮度有变化)转换为在视觉上平滑的表面。表面纹理的细节可能对于感知包括该表面的对象来讲不重要,但是滤波可能会提供不自然的外观。因此,可以通过使用人工纹理(例如“舒适噪声”)来替换已被滤除的原始纹理,以提供更加自然的外观,其中,用于发送人工纹理的特征的带宽可以小于用于发送实际纹理信息的带宽。
可以由纹理确定块1107通过对来自滤波器110的帧的经滤波的像素数据和直接来自数字照相机和/或帧的帧的未滤波像素数据进行比较来确定经滤波的帧的应该施加纹理的多个部分。对于帧的已经去除了纹理的各个区域,可以由纹理确定块1107对所去除的纹理进行分类和参数化,然后可以将纹理参数和/或分类连同用于发送该帧的经滤波和编码的像素数据的位流一起进行发送。因此,接收该图像和/或视频帧的设备可以接收到该帧的纹理参数和/或分类,并且可以使用该纹理参数和/或分类向已经滤除了实际纹理的表面人工添加高频信息(即,人工纹理和/或“舒适噪声”)。
因为根据本发明的上述实施例,色度值在已进行了低通滤波的表面上可以相对不变,所以对于人工纹理和/或“舒适噪声”的应用,可以选择帧的具有相对不变的色度值的区域。换句话说,接收设备可以使用色度值来确定帧的哪些区域已经被滤除了纹理信息,以及在这些区域中施加什么纹理和/或“舒适噪声”。在接收视频的多个帧时,该接收设备还被设置为使得对那些可以逐个视频序列帧移动的表面稳定地施加人工纹理和/或“舒适噪声”。因为包括人工纹理和/或“舒适噪声”的表面逐帧移动,所以人工纹理和/或“舒适噪声”应该沿着该表面移动。
如图12所示,根据本发明其他实施例的处理器215c可以包括解码器1201、后置滤波器1203以及纹理重构块1205。因此,处理器215c可以便于从例如参照图11所述的发送纹理信息的发送设备接收图像和/或视频数据。后置滤波器1203例如可以如参照图10和11的前置滤波器1015和1101所述进行工作。更具体地,后置滤波器1203可以在通过无线接口接收经编码的图像和/或视频数据的设备中的解码器1201处进行解码之后提供后置滤波。更具体地,可以通过无线接口来接收经编码的数字图像和/或视频数据。此外,可以由解码器1201对经编码的数字图像和/或视频数据进行解码,以提供所接收的当前像素和至少一个相邻像素的色度值和亮度值。
如果已经与图像和/或视频数据一起发送了诸如“舒适噪声”的人工纹理信息的分类和/或参数,则可以通过纹理重构块1205来确定该帧的应该施加人工纹理的多个部分,并且可以在后置滤波器1203对来自图像和/或视频数据的帧的亮度值进行了滤波之后施加人工纹理。
因此,可以在编码和从发送设备发送之前由前置滤波器对图像和/或视频数据进行前置滤波,并且/或者还可以在接收设备处接收和解码之后对该图像和/或视频数据进行后置滤波。通过执行前置滤波和后置滤波两者,可以减少由于编码和/或解码而导致的大量高频假象和失真。根据本发明的使用前置滤波和后置滤波两者的一些实施例,可以将有关前置滤波器类型和/或参数的信息从发送设备发送到接收设备。接收设备随后可以对后置滤波器的操作进行调整,以与对应的前置滤波器的操作相匹配。可以将前置滤波器类型和/或参数作为图像和/或视频位流中的用户数据进行发送,或者以封装文件格式进行存储。另外地或者另选地,图像和/或视频编码解码器标准可以包括前置滤波器类型和/或参数作为位流的一部分。如果根据通用标准设置了前置滤波器和后置滤波器,则可以不需要发送滤波器类型和/或参数。
此外,根据本发明的实施例,可以不要求前置滤波器和后置滤波器类型和/或参数精确匹配。通过使用与前置滤波器参数相关的信息并选择略有不同的滤波器作为后置滤波器,可以提供足够的和/或较好的结果。
图10-12的处理器用于例示本发明的实施例,而不是将处理器的操作限定为所示和所述的具体功能。通过示例的方式,图10-12的处理器没有示出支持诸如蜂窝无线电话通信的无线通信的公知操作。此外,根据本发明的实施例,可以对图10-12的处理器的功能进行混合,并且根据本发明的实施例,并不要求将图10-12中所示的所有功能都用于进行操作。例如,移动终端207的处理器215可以包括处理器215b和215c两者的功能,以支持向另一设备发送带有纹理信息的图像和/或视频数据,以及支持从另一设备接收带有纹理信息的图像和/或视频数据。另选地,移动终端207的处理器215可以包括具有或不不具有QP值反馈的处理器215a的功能。另选地,移动终端207的处理器215可以包括不具有纹理确定块125b的处理器215b的功能,并且/或者处理器215可以包括不具有纹理重构块1205的处理器215c的功能。另选地,处理器215可以实现为具有如图10所示的添加有QP值反馈的处理器215b的功能。
根据图3所示的本发明的实施例,可以对数字图像和/或视频数据进行处理,以使得可以根据当前像素和与当前正在处理的像素相邻的像素的色度值的比较,来对图像和/或视频帧的像素的亮度值进行滤波。更具体地,可以在块301处接收当前像素和至少一个相邻像素的色度值和亮度值。可以在块303处对当前像素和至少一个相邻像素的色度值进行比较,并且在块305处,可以通过基于当前像素和至少一个相邻像素的色度值的比较的亮度值的滤波强度来对当前像素的亮度值进行滤波。因此,对帧中的亮度值的滤波强度可以根据各个像素和相邻像素的色度值的比较而逐个像素地改变。
这里使用的术语“当前像素”是指当前正在处理的像素,而术语“相邻像素”是指与当前正在处理的像素相邻的像素。相邻像素可以与当前像素水平相邻、垂直相邻,或者对角相邻,并且相邻像素可以与当前像素直接相邻,而其间没有中间像素。另选地,当前像素与相邻像素之间可以存在中间像素。此外,相邻像素可以与一系列视频帧中的当前像素在时间上相邻,以使得该相邻像素占据该当前像素的帧的先前帧或后续帧中的对应像素位置。
另外,可以对相邻像素进行选择,以使得当前像素和相邻像素不共享相同的一个或更多个色度值。例如,如果对色度值进行二次抽样以使得四个像素的块根据YCbCr 4:2:0格式共享相同的Cb和Cr值,则可以从与包括当前像素的像素块不同的相邻像素块中选择相邻像素。类似地,如果对色度值进行二次抽样以使得多对两个像素根据YCbCr 4:2:2格式共享相同的Cb和Cr值,则可以从与包括当前像素的像素对不同的相邻像素对中选择相邻像素。
更具体地,在块305处对当前像素的亮度值进行滤波可以包括对当前像素的亮度值与一个或更多个相邻像素的亮度值进行平均,并且滤波的强度可以由在进行平均时施加给亮度值的权重来确定。根据一具体实施例,可以将当前像素的亮度值与位于其任意侧的两个水平、垂直和/或对角相邻像素的亮度值进行平均。对于相对强的滤波,可以对进行平均以提供当前像素的经滤波的亮度值的三个亮度值中的每一个施加大致相等的权重(即,大约33.33%)。对于相对弱的滤波,在对三个像素的亮度值进行平均以提供当前像素的经滤波的亮度值时,可以对两个相邻像素的亮度值施加相对低的权重(即,大约10%)而对当前像素的亮度值施加相对高的权重(即,大约80%)。通过对两个相邻像素的亮度值施加0%的权重,而对当前像素的亮度值应用100%的权重,可以使当前像素的原始亮度值通过,而不进行滤波。如果不希望对特定像素的亮度值进行滤波,则可以使该像素的原始亮度值通过滤波,而不产生变化或进行平均,从而提供零滤波。
在块303处对当前像素和相邻像素的色度值进行比较可以包括计算当前像素和相邻像素的色度值之间的差。当进行比较的像素的色度值之间的差高于预定阈值时,可以减小块305处所施加的滤波强度,而在当前像素和相邻像素的色度值之间的差低于该预定阈值时,可以增大块305处所施加的滤波强度。例如,如果色度值之间的差小于该预定阈值,则可以在进行平均时对相邻像素的亮度值施加大于零的预定权重,而如果色度值之间的差大于该预定阈值,则可以在进行平均时对相邻像素的亮度值施加零权重。另外,在色度值之间的差小于该预定阈值时所施加的非零权重可以根据其他因素(例如,亮度值的比较、在编码过程中所采用的压缩程度)而变化,并且/或者与发送或接收设备的滤波特性相匹配。另选地,滤波的强度可以按照以下方式在像素之间变化,即对当前像素的亮度值的滤波强度与当前像素和相邻像素的色度值的差成反比。
根据本发明的具体实施例,可以按照YCbCr格式(其中,Y是亮度值,而Cr和Cb是相应的红色和蓝色色度值)来提供帧的各个像素的数字数据。可以在块303处通过对各个像素的Cr值的差的绝对值和各个像素的Cb值的差的绝对值进行求和,来比较当前像素和相邻像素的色度值。此外,各个像素的Cr值的差的绝对值可以是Cr值的平方差,并且各个像素的Cb值的差的绝对值可以是Cb值的平方差。因此,在块303处通过根据以下公式来计算差D,以对色度值进行比较:
            D=(Cbi-Cbj)2+(Cri-Crj)2          方程1
该公式中,Cri和Crj分别是当前(i)像素和相邻(j)像素的红色色度值,而Cbi和Cbj分别是当前(i)像素和相邻(j)像素的蓝色色度值。
如上所述,在块305处应用于当前像素的亮度值的滤波强度可以相对于在块303处根据方程1的公式对色度值进行比较时计算的值D相反地变化。如果值D(当前像素和相邻像素的色度值的差)超过了预定阈值K,则当前像素的亮度值可以通过块305,而不发生变化,因此实际上没有进行滤波。如上所述,例如,通过仅使当前像素的原始亮度值通过,或者通过对当前像素和其他像素进行平均而对相邻像素施加零(0%)权重,不能实现滤波。根据本发明的实施例,实验测试已经表明,K=25的值可以提供用于确定何时忽略对于当前像素的亮度值的低通滤波的适当阈值。
在块305处对当前像素的亮度值进行滤波之前,还可以对当前像素和至少一个相邻像素的亮度值进行比较,并且块305处的滤波强度可以基于色度值的比较以及基于亮度值的比较。根据本发明的一些实施例,如果对于当前像素,色度值之间的差(例如,方程1的值D)超过了预定阈值(例如,K),则可以使当前像素通过而不在块305处进行滤波。如果色度值之间的差小于该预定阈值,则可以确定当前像素是否具有显著的颜色分量。例如,如果色度值Cbi或Cri中的任何一个超过了预定阈值(例如,M),则可以假定当前像素具有显著的颜色分量,并且可以在块305处进行低通滤波。
如果色度值Cbi或Cri都没有超过该预定阈值(例如,M),则该像素可能是灰度级(黑或白)像素,可以在块305处在进行滤波之前进一步确定当前像素与相邻像素之间的亮度值是否存在显著的变化。如果亮度值没有显著的变化,则可以在块305处对当前像素的亮度值进行低通滤波。如果亮度值存在显著的变化,则可以使当前像素的亮度值通过块305处的滤波,而没有变化。因此,可以通过在当前像素的两个色度值都足够低但是相邻亮度值存在很大变化时禁止滤波,来更加精确地保留图像和/或视频的黑色和白色区域之间的边缘。
在块301处接收色度值和亮度值可以包括直接地或者通过用于存储这些值的存储器从数字照相机接收色度值和亮度值。此外,可以对包括当前像素的经滤波的亮度值的数字图像和/或视频数据进行编码,并通过无线接口进行发送。通过如上所述对亮度值进行滤波,可以滤除不易感知的高频分量,以使得编码后的图像和/或视频数据可以在通过无线接口进行发送时消耗较小的带宽。
另外,对数字图像和/或视频数据进行编码可以包括改变应用于数字图像和/或视频数据的压缩率,并且块305处的滤波强度可以基于块303处的色度值的比较以及基于在编码过程中所采用的压缩率。例如,可以改变压缩率,以保持通过无线接口发送的图像和/或视频的相对恒定的比特率。例如,可以使用量化参数(QP)来确定编码过程中的损耗量,其中低QP值提供相对低的压缩和相对高的质量,而高QP值提供相对高的压缩和相对低的质量。通过相对高的QP值和高压缩,可以增加所得到的图像和/或视频中的大量压缩假象。
例如,在发送经编码的视频图像和/或视频数据时,压缩率控制机制可以改变QP值以提供相对恒定的比特率。当在进行编码之前如上参照图3所述对亮度值进行滤波时,块305处的滤波强度可以响应于QP值而变化。具体地,可以在QP值相对高时增大滤波的强度,而可以在QP值相对低时减小滤波的强度。因此,响应于在编码过程中所采用的压缩级别来对滤波的强度进行修改,因此可以减少失真。也可以使用其他编码信息(例如,运动矢量和/或宏块跳越信息)来修改滤波。
根据本发明的一些实施例,可以使用块303处的色度值的比较来确定用于进行滤波的阈值。例如,如果使用方程1确定的色度值的差超过了阈值K,则可以使当前像素的亮度值通过,而在块305处不产生变化(即,弱滤波或无滤波)。如果色度值的差小于阈值K,则可以通过与相邻像素进行平均来在块305处对当前像素的亮度值进行滤波。在对亮度值进行平均时所施加的权重可以作为如上所述的QP值的函数而改变。
此外,可以在完成图像和/或视频数据的前一个块之后提供用于改变滤波强度的QP值。例如,可以按照像素组(例如,块、宏块和/或宏块行)来对像素进行编码,并且可以使用在对前一组像素进行编码时所确定的QP值来设定针对包括当前像素在内的当前组像素的滤波强度。另选地,可以采用多通滤波和编码,以使得可以在最终编码和/或发送之前,使用用于对当前像素进行编码的QP值来确定对于当前像素的滤波强度。
如上所述,可以对图像和/或视频帧的像素执行图3的操作,并且可以对该帧的经滤波的像素数据或其多个部分进行编码,并发送给另一设备。更具体地,在块301处接收色度值和亮度值可以包括接收图像和/或视频数据的帧的色度值和亮度值。此外,在块303处对色度值进行的比较和在块305处对亮度值进行的滤波可以对各个像素执行。另外,可以确定经滤波的帧的应该施加纹理的多个部分,并且可以发送该帧的应该施加纹理的多个部分的识别信息。此外,可以将多个纹理中的应当被施加的一个纹理的识别信息发送给接收设备。
当如上参照图3所述对像素进行滤波时,作为滤波的结果,可以将图像和/或视频中的纹理化表面(即下述的表面,在该表面中所包含的所有像素具有相对均匀的色度,但在该表面中所包含的所有像素的亮度有变化)转换为在视觉上平滑的表面。表面纹理的细节可能对于感知包括该表面的对象来说不重要,但是滤波可能会提供不自然的外观。因此,可以通过使用人工纹理(例如“舒适噪声”)替换已被滤除的原始纹理来提供更加自然的外观,其中,用于发送人工纹理的特征的带宽可以小于用于发送实际纹理信息的带宽。
可以通过对该帧的经滤波的像素数据和该帧的未滤波像素数据进行比较来确定经滤波的帧的应该施加纹理的多个部分。对于该帧的已经去除了纹理的各个区域,可以对所去除的纹理进行分类和参数化,然后可以将纹理参数和/或分类连同用于发送该帧的经滤波和编码的像素数据的位流一起进行发送。因此,接收该图像和/或视频帧的设备可以接收该帧的纹理参数和/或分类,并且可以使用该纹理参数和/或分类对已经滤除了实际纹理的表面人工添加高频信息(即,人工纹理和/或“舒适噪声”)。
因为根据以上参照图3所述的本发明实施例,色度值在进行了低通滤波的表面上可以相对不变,所以对于人工纹理和/或“舒适噪声”的施加,可以选择帧的具有相对不变的色度值的区域。换句话说,接收设备可以使用色度值来确定帧的哪些区域已经被滤除了纹理信息,以及在这些区域中施加什么纹理和/或“舒适噪声”。在接收视频的多个帧时,接收设备还被设置为对那些可以逐个视频序列帧移动的表面稳定地施加人工纹理和/或“舒适噪声”。因为包括人工纹理和/或“舒适噪声”的表面是逐帧移动的,所以人工纹理和/或“舒适噪声”应该沿着该表面移动。
根据本发明的其他实施例,可以执行以上参照图3所述的处理,以在通过无线接口接收经编码的图像和/或视频数据的设备中进行解码之后提供后置滤波。更具体地,可以通过无线接口接收经编码的数字图像和/或视频数据。此外,可以对经编码的数字图像和/或视频数据进行解码,以提供在块301处接收的当前像素和至少一个相邻像素的色度值和亮度值。如果已经与图像和/或视频数据一起发送了诸如“舒适噪声”的人工纹理信息的分类和/或参数,则可以确定该帧的应该施加纹理的多个部分,并且在从图像和/或视频数据的帧中对亮度值进行滤波之后施加人工纹理。
因此,可以在编码和从发送设备发送之前根据图3的操作对图像和/或视频数据进行前置滤波,并且/或者还可以在接收设备处接收和解码之后对该图像和/或视频数据进行后置滤波。通过执行前置滤波和后置滤波两者,可以减少由于编码和/或解码而导致的大量高频假象和失真。根据本发明的使用前置滤波和后置滤波两者的一些实施例,可以将有关前置滤波器类型和/或参数的信息从发送设备发送给接收设备。接收设备随后可以对后置滤波器的操作进行调整,以与对应的前置滤波器的操作相匹配。前置滤波器类型和/或参数可以作为图像和/或视频位流中的用户数据进行发送,或者可以按照封装文件格式进行存储。另外地或者另选地,图像和/或视频编码解码器标准可以包括前置滤波器类型和/或参数作为该位流的一部分。如果根据通用标准设置了前置滤波器和后置滤波器,则可以不需要发送滤波器类型和/或参数。
此外,根据本发明的实施例,可以不要求前置滤波器和后置滤波器类型和/或参数的精确匹配。通过使用与前置滤波器参数相关的信息并选择略有不同的滤波器作为后置滤波器,可以提供足够的和/或较好的结果。
图4中示出了根据本发明的其他实施例。对于图像和/或视频数据的帧的各个像素,可以在块401处接收当前像素的亮度值Yi,可以在块403处接收当前像素的色度值Cbi和Cri,可以在块405处接收相邻像素的色度值Cbj和Crj。可以在块407处根据以上在方程1提供的公式来计算当前像素和相邻像素的色度值之间的差D。
如果在块409处当前像素和相邻像素的色度值之间的差D大于阈值K,则在块415处使当前像素的亮度值通过,而不发生变化,以进行后续处理(例如编码)。当前像素和相邻像素的色度值之间的足够大的差可以表示当前像素可能形成了对象、表面等之间的边缘的一部分,并且通过使当前像素的亮度值通过而不进行低通滤波,可以更加精确地保留边缘特征。
如果在块409处当前像素和相邻像素的色度值之间的差D小于阈值K,并且在块411处当前像素的色度值Cbi或者Cri中的任何一个大于阈值M,则可以在后续处理之前在块417处对当前像素的亮度值进行低通滤波。如果在块409处当前像素和相邻像素的色度值之间的差D小于阈值K,并且在块411处当前像素的色度值都不大于阈值M,则可以在块413处检测到亮度值的变化。
如果在块411处当前像素的色度值都不超过阈值M,则当前像素可能是黑色或白色,并且当前像素和相邻像素之间的亮度值的显著变化可能表示该帧的黑色和白色区域之间的边缘。因此,如果在块411处当前像素的色度值都不超过阈值M,并且在块413处存在当前像素和相邻像素之间的亮度值的显著变化,则可以在块415处使当前像素的亮度值通过而不进行滤波,以保留帧的黑色和白色部分之间的边缘。如果在块411处当前像素的色度值都不超过阈值M,并且在块413处当前像素和相邻像素的亮度值之间没有显著的变化,则可以在块417处对当前像素的亮度值进行低通滤波。
色度值Cbj和Crj被选择用于在块407处计算差D的相邻像素、用于在块413处比较亮度值的相邻像素,以及/或者用于在块417处进行平均的一个或更多个相邻像素可以是与当前像素相邻的相同或不同像素。如上所述,术语“当前像素”是指当前正在处理的像素,而术语“相邻像素”是指与当前正在处理的像素相邻的像素。相邻像素可以与当前像素水平相邻、垂直相邻,或者对角相邻,并且相邻像素可以直接与当前像素相邻,而其间没有中间像素。另选地,当前像素与相邻像素之间可以存在中间像素。此外,相邻像素可以与一系列视频帧中的当前像素在时间上相邻,以使得该相邻像素占据当前像素的帧的先前帧或后续帧中的对应像素位置。
如果在块419处待处理的帧中存在另一像素,则可以如以上参照块401-417所述对下一像素进行亮度值的处理。如果在块421处存在待处理的另一帧,则可以如以上参照块401-419所述对下一帧进行亮度值的处理。
因此,块415和417的操作提供了对亮度值的相对低强度的滤波(块415)以及对亮度值的相对高强度的滤波(块417)。具体地,可以在块415处通过使亮度值通过而不发生改变来提供对亮度值的相对低强度的滤波。可以在块417处通过对当前像素的亮度值和一个或更多个相邻像素的亮度值进行平均,来提供相对高强度的滤波,并且可以通过对进行平均的当前像素和相邻像素施加权重来确定其强度。此外,块417处所施加的滤波的强度可以响应于诸如由编码器所采用的压缩级别的其他因素而改变,并且/或者与发送设备或接收设备的滤波特性相匹配。例如,施加给进行平均的当前像素和相邻像素的亮度值的相对权重可以作为由编码器所采用的压缩级别的函数而改变,并且/或者与发送设备或接收设备的滤波特性相匹配。
另外,可以对帧中的所选择的像素或所有像素的亮度值进行图4的操作。例如,可以对位于帧的边缘的像素进行不同的处理,以对在处理边缘像素时不能应用相邻像素的定义的可能性进行补偿。更具体地,当正在进行处理的当前像素位于帧的边缘时,相邻像素的定义可以不同。另选地,可以不对边缘像素的亮度值进行滤波。另选地,当正在处理的当前像素位于帧的边缘时,可以使用外推法来提供相邻像素数据。
如上所述,可以在编码和发送之前,在发送设备处进行对图像和/或视频数据的滤波,并且还在解码之后在接收设备处进行滤波,由此减小可能由于编码和/或解码而导致的假象和/或失真。通过在编码和发送之前提供前置滤波和在解码之后提供后置滤波,可以实现高频假象和/或失真的进一步减小。
根据本发明的其他实施例,数字图像和/或视频数据的帧可以包括多行和多列像素,每一个像素的数据都包括亮度值和色度值。可以在发送之前在发送设备处对数字图像和/或视频数据进行前置滤波和编码,并且可以根据前置滤波算法来执行前置滤波。如图5所示,可以在块501处在接收设备处接收来自发送设备的经前置滤波和编码的数据,可以在块503处对经前置滤波和编码的数据进行解码,并且可以在块505处根据后置滤波算法,对解码后的数据进行后置滤波,其中前置滤波算法和后置滤波算法相匹配。例如,前置滤波算法和后置滤波算法中的每一个都可以如参照图3和4所述来实现。
根据本发明的具体实施例,可以从发送设备发送前置滤波算法的参数,并在接收设备处接收该参数。此外,可以根据从发送设备接收的前置滤波算法的参数来调整后置滤波算法的操作。例如,前置滤波算法和后置滤波算法都可以如参照图3和/或4所述来实现。例如,在授予Siu-Wai Wu等人的美国专利No.5,959,693和授予Okada的美国专利No.6,456,328中讨论了其他的视频滤波器。在此通过引用并入美国专利No.5,959,693和美国专利No.6,456,328的全部内容。
从发送设备发送到接收设备的参数例如可以包括:在块417处进行低通滤波时施加给当前和相邻亮度值的权重;用于块407的计算的相邻像素的定义;块409的阈值K的数值;块411处的阈值M的数值;以及/或者用于块413的亮度的显著变化的定义。可以响应于这些参数中的一个或更多个以及/或者其他参数来调整后置滤波算法。
尽管发送设备的前置滤波器和接收设备的后置滤波器可以如参照图3和/或4所述来实现,但是也可以使用其他滤波算法。因此,可以将发送设备的前置滤波器算法的识别信息发送给接收设备。因此,可以响应于前置滤波算法的识别信息的接收,对后置滤波算法进行调整,以与前置滤波算法相匹配。
根据本发明的其他实施例,可以在发送之前对数字图像和/或视频数据的帧进行前置滤波和编码,其中根据前置滤波算法对数据进行前置滤波,并且可以从发送设备发送前置滤波的参数。如图6所示,可以在块601处接收来自发送设备的经前置滤波和编码的数字数据,可以在块603处接收前置滤波算法的参数,并且可以在块605处对数字数据进行解码。另外,可以根据后置滤波算法对解码后的数字图像和/或视频数据进行后置滤波,其中在块607处根据从发送设备接收的前置滤波算法的参数来调整后置滤波算法的操作。
如上所述,前置滤波算法和后置滤波算法可以相匹配。此外,前置滤波算法和后置滤波算法可以如参照图3和/或4所述来实现,或者可以使用其他算法。例如,在授予Siu-Wai Wu等人的美国专利No.5,959,693和授予Okada的美国专利No.6,456,328中讨论了其他的视频滤波器。从发送设备接收到的前置滤波算法的参数可以包括:在块417处进行低通滤波时施加给当前和相邻亮度值的权重;用于块407处的计算的相邻像素的定义;块409的阈值K的数值;块411的阈值M的数值;以及/或者用于块413的亮度的显著变化的定义。可以响应于这些参数中的一个或更多个以及/或者其他参数来调整后置滤波算法。
另外地或另选地,可以将发送设备的前置滤波器算法的识别信息发送给接收设备。由此可以响应于前置滤波算法的识别信息的接收,对后置滤波算法进行调整,以与前置滤波算法相匹配。
可以接收前置滤波器参数作为图像和/或视频位流中的用户数据,或者可以按照封装文件格式进行存储。此外,根据图像和/或视频编码解码器标准可以将前置滤波器参数包括为该位流的一部分。根据本发明的实施例,不要求前置滤波器和后置滤波器类型和/或参数的精确匹配。通过使用与前置滤波器参数有关的信息并选择稍有不同的滤波器作为后滤波器,可以提供足够的并且/或者较好的结果。
根据本发明的其他实施例,图像和/或视频数据的帧可以包括多行和多列像素。如图7所示,可以在块701处接收当前像素的亮度值,并且可以在块703处对该亮度值进行滤波。在块705处,可以对包括经滤波的亮度值的数字图像和/或视频数据进行编码,并可以改变数字数据的压缩率。此外,可以响应于在编码过程中所采用的压缩率而改变对亮度值的滤波强度。
例如,可以如参照图3和/或4所述来实现块703处的滤波。例如,在授予Siu-Wai Wu等人的美国专利No.5,959,693和授予Okada的美国专利No.6,456,328中讨论了其他的视频滤波器。当如以上参照图4所述进行滤波时,可以响应于压缩率而改变在块417处所施加的滤波强度。此外,可以通过无线接口来发送包括经滤波的亮度值的经编码的数字图像和/或视频数据。
通过根据在编码过程中所采用的压缩级别来改变滤波强度,可以在相对“有损”压缩之后减小来自滤波的失真。可以通过量化参数(QP)值来确定在编码过程中的损耗量。相对低的QP值可以提供相对低的压缩和相对高的质量,而相对高的QP值可以提供相对高的压缩和相对低的质量。因此,较低的QP值可能导致所得到的图像和/或视频中的压缩假象的增加。
压缩率控制机制可以改变在编码过程中所使用的QP值,以提供相对恒定的比特率。因此,可以使用与在编码过程中当前正在使用的QP值有关的信息来改变对亮度值的滤波强度。更具体地,当用于编码的QP值增大时可以增大对亮度值的滤波强度,而当用于编码的QP值减小时可以减小对亮度值的滤波强度。因此,可以提高图像和/或视频传输的性能,而不会在所得到的图像和/或视频中增加清晰可见的失真。还可以响应于运动矢量和/或宏块跳越信息来改变对于亮度值的滤波强度。
图8中示出了处理数字图像和/或视频数据的其他实施例。如图8所示,可以在块801处接收数字图像和/或视频数据的帧的像素数据,可以在块803处对该帧的像素的数据进行滤波。可以在块805处识别该帧的应该施加纹理的部分,并且可以在块807处对像素的经滤波的数据进行编码。可以在块809处发送该帧的像素的经编码和滤波的数据,并且可以在块811处发送该帧的应该施加纹理的部分的识别信息。另外,还可以提供并发送要被施加的纹理的特征,并且该特征可以是多个预定特征之一。
更具体地,识别数字图像和/或视频数据的帧的应该施加纹理的部分可以包括对该帧的像素的经滤波的数据和该帧的像素的未滤波的数据进行比较,并基于经滤波和未滤波的数据的比较来识别数字图像和/或视频数据的帧的应该施加纹理的部分。此外,帧的像素的数据可以包括亮度值和色度值,并且识别数字数据的帧的应该施加纹理的部分可以包括识别具有类似色度值的像素。另外,纹理可以包括该帧的应该施加纹理的所识别部分中所包括的亮度值的变化。例如,可以如参照图3和/或4所述来执行块803处的滤波操作,并且在块801处接收像素的数据可以包括从数字照相机接收像素。例如,在授予Siu-Wai Wu等人的美国专利No.5,959,693和授予Okada的美国专利No.6,456,328中讨论了其他的视频滤波器。
图9中示出了本发明的其他实施例。如图9所示,可以在块901处接收数字图像和/或视频数据的帧的像素数据,可以在块903处对像素的数据进行编码,并且可以在块905处识别该帧的应该施加纹理的部分。另外,可以在对该帧的像素的数据进行解码之后,在块907处向该帧的所识别的部分施加纹理。此外,可以在施加纹理之前对经解码的数据进行滤波。例如,可以根据以上参照图3和/或4所述的操作来对经解码的数据进行滤波。例如,在授予Siu-Wai Wu等人的美国专利No.5,959,693和授予Okada的美国专利No.6,4506,328中讨论了其他的视频滤波器。
更具体地,可以从例如如以上参照图8所述进行工作的发送设备接收纹理的特征,并且可以根据所接收的特征来施加纹理。此外,该特征可以识别多个预定纹理之一。另外,识别该帧的应该施加纹理的部分可以包括识别具有类似色度值的像素。
如上所述,根据本发明实施例的前置滤波和后置滤波可能导致处理后的图像和/或视频中的纹理的丢失。例如,对象的表面可能具有相对恒定的颜色(即,构成该表面的所有像素具有类似的色度值),但是该表面可能具有由构成该表面的像素的亮度值的变化而导致的纹理。然而,根据本发明实施例的滤波可以减小相对恒定颜色的整个表面的亮度值的这些变化,以使得处理后的图像和/或视频中的表面可以看起来相对平坦和/或平滑,并且/或者可以具有不自然的外观。原始纹理的精确细节对于感知包括该表面的对象而言相对不重要,因此可以通过使用人工纹理(例如“舒适噪声”)替换原始纹理,使得处理后的图像和/或视频的表面显得更加自然。
通过对原始像素数据和经滤波的像素数据进行比较,可以对已经去除的纹理进行分类和/或参数化。然后,可以连同位流一起发送该纹理分类和/或参数,并在接收设备处用来通过向所识别的表面人工添加高频信息(例如“舒适噪声”)来重构纹理。
可以在根据各种协议进行工作的移动终端中实现以上参照图3-9所述的操作。例如并且通过非限定的方式,根据本发明实施例的移动终端可以通过一个或更多个通信网络(例如,WiFi网络、蜂窝无线电话网络、个人通信服务网络、卫星通信网络、超宽带网络以及/或者蓝牙网络)来提供通信。根据本发明的另选实施例,还可以在根据不同的通信协议进行工作的移动终端中实现图3-9的操作。另外,本发明的多个方面可以实施为方法、系统和/或计算机程序产品。因此,本发明可以实施为硬件和/或软件(包括固件、驻留软件、微码等)。
图3-9的流程图示出了例如由处理器215使用的用于控制根据本发明实施例的通信设备的软件和数据的示例性实现的构架、功能和操作。在该方面,每个块都可以表示模块、片段或者代码的一部分,其包括用于实现一个或更多个特定逻辑功能的一个或更多个可执行指令。还应该注意,在某些另选实施中,块中所说明的功能可以不按照在块中说明的顺序来执行。例如,根据所涉及的功能,表示为连续的两个块可以基本上并行地执行,或者这些块常常可以按照相反的顺序来执行。
以上参照根据本发明实施例的方法、设备(系统)和/或计算机程序产品的方框图和/或流程图对本发明进行了说明。应该理解,这些方框图和/或流程图中的每一个块,以及这些方框图和/或流程图中的块的组合都可以通过计算机程序指令来实现。可以将这些计算机程序指令设置在通用计算机、特殊用途计算机的处理器以及/或者可编程数据处理设备的处理器中,以制造一种机器,使得通过计算机以及/或者其他可编程数据处理设备的处理器来执行的这些指令实现用于实施这些方框图和/或流程图的一个或更多个块中指定的功能/动作的手段。
还可以将这些计算机程序指令存储在可以引导计算机或其他可编程数据处理设备以特定方式进行工作的计算机可读存储器中,从而存储在计算机可读存储器中的这些指令可以实现下述的产品,该产品包括实现方框图和/或流程图的一个或更多个块中指定的功能/动作的指令。
还可以将这些计算机程序指令载入到计算机或其他可编程数据处理设备上,以在该计算机或其他可编程设备上执行一系列操作步骤,以实现由计算机实施的处理,使得在计算机或其他可编程设备上执行的指令可以提供用于实施方框图和/或流程图的一个或更多个块中指定的功能/动作的步骤。
还应该注意,在某些另选实现中,在块中所说明的功能可以不按照流程图中所说明的顺序来执行。例如,根据所涉及的功能/动作,表示为连续的两个块实际上可以基本上并行地执行,或者这些块常常可以按照相反的顺序来执行。
在附图和说明书中,已对本发明的典型优选实施例进行了公开,尽管采用了特定的术语,但是它们仅在一般和描述意义上使用而并非出于限制的目的,以下权利要求中阐述了本发明的范围。

Claims (49)

1、一种对数字图像和/或视频数据进行处理的方法,其中该数据的帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值,所述方法包括:
接收当前像素和至少一个相邻像素的色度值和亮度值;
对所述当前像素与所述至少一个相邻像素的色度值进行比较;以及
对所述当前像素的亮度值进行滤波,其中对所述亮度值的滤波强度基于所述当前像素与所述至少一个相邻像素的色度值的比较。
2、根据权利要求1所述的方法,其中,对当前像素的亮度值进行滤波包括对当前像素的亮度值与至少一个相邻像素的亮度值进行平均。
3、根据权利要求2所述的方法,其中,所述滤波的强度由对所述亮度值进行平均时施加给所述亮度值的权重来确定。
4、根据权利要求1所述的方法,其中,对当前像素和相邻像素的色度值进行比较包括计算当前像素和相邻像素的色度值之间的差。
5、根据权利要求4所述的方法,还包括:
在当前像素和相邻像素的色度值之间的差高于一预定阈值时减小所述滤波的强度;以及
在当前像素和相邻像素的色度值之间的差低于所述预定阈值时增大所述滤波的强度。
6、根据权利要求4所述的方法,其中,以YCrCb格式提供所述数据,其中Y是亮度值,而Cr和Cb是各个像素的相应的红色和蓝色色度值。
7、根据权利要求6所述的方法,其中,对当前像素和相邻像素的色度值进行比较包括对各个像素的Cr值的差的绝对值和各个像素的Cb值的差的绝对值进行求和。
8、根据权利要求7所述的方法,其中,各个像素的Cr值的差的绝对值包括Cr值的平方差,并且其中各个像素的Cb值的差的绝对值包括Cb值的平方差。
9、根据权利要求5所述的方法,其中,减小所述滤波的强度包括使像素的亮度值数据通过而不进行滤波。
10、根据权利要求1所述的方法,还包括:
在对当前像素的亮度值进行滤波之前,对当前像素与至少一个相邻像素的亮度值进行比较,其中所述滤波的强度基于当前像素和至少一个相邻像素的色度值的比较以及基于所述亮度值的比较。
11、根据权利要求1所述的方法,其中,接收当前像素和至少一个相邻像素的色度值和亮度值包括从数字照相机接收所述色度值和亮度值,所述方法还包括:
对包括经滤波的亮度值的数据进行编码;以及
发送经编码的数据。
12、根据权利要求11所述的方法,其中,编码包括改变所述数据的压缩率,其中所述滤波的强度基于第一和第二像素的色度值的比较以及基于编码过程中所采用的压缩率。
13、根据权利要求11所述的方法,其中,从数字照相机接收色度值和亮度值包括接收数据的帧的色度值和亮度值,并且其中对所述亮度值进行滤波包括对数据的帧的亮度值进行滤波,所述方法还包括:
识别经滤波的帧的应该施加纹理的多个部分,以及
发送所述帧的应该施加纹理的多个部分的识别信息。
14、根据权利要求13所述的方法,还包括:
发送多个纹理中的应该被施加的一个纹理的识别信息。
15、根据权利要求1所述的方法,还包括:
接收经编码的数据;以及
在接收当前像素和至少一个相邻像素的色度值和亮度值之前,对经编码的数据进行解码,以提供当前像素和至少一个相邻像素的色度值和亮度值。
16、根据权利要求15所述的方法,其中,对所述亮度值进行滤波包括对数据的帧的亮度值进行滤波,所述方法还包括:
识别所述帧的应该施加纹理的部分;以及
在对所述数据的帧中的亮度值进行滤波之后,对所述帧的所识别的部分施加纹理。
17、根据权利要求1所述的方法,其中,所述第一和相邻像素是水平相邻、垂直相邻、对角相邻、在时间上相邻以及/或者非直接相邻中的一种。
18、根据权利要求1所述的方法,其中,对当前像素的亮度值进行滤波包括对当前像素的亮度值进行低通滤波。
19、一种对来自发送设备的数字图像和/或视频数据进行处理的方法,其中所述数据的帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值,其中,在发送之前对所述数据进行前置滤波和编码,并且其中根据前置滤波算法对所述数据进行前置滤波,所述方法包括:
从所述发送设备接收经前置滤波和编码的数据;
对来自所述发送设备的经前置滤波和编码的数据进行解码;以及
根据后置滤波算法对经解码的数据进行后置滤波,其中所述前置滤波算法和后置滤波算法相匹配。
20、根据权利要求19所述的方法,其中,从所述发送设备发送所述前置滤波算法的参数,所述方法还包括:
接收从所述发送设备发送的所述前置滤波算法的参数,其中根据从所述发送设备接收的所述前置滤波算法的参数来调整所述后置滤波算法的操作。
21、根据权利要求20所述的方法,其中,从所述发送设备发送的所述前置滤波算法的参数包括由所述前置滤波算法对所述数据的亮度值施加的滤波强度,并且其中根据由所述前置滤波算法施加的滤波强度来调整后置滤波的强度。
22、根据权利要求20所述的方法,其中,从所述发送设备发送的所述前置滤波算法的参数包括所述前置滤波算法的识别信息,并且其中响应于所述前置滤波算法的识别信息的接收,对所述后置滤波算法进行调整,以与所述前置滤波算法相匹配。
23、根据权利要求19所述的方法,其中,所述前置滤波算法和后置滤波算法中的每一个都比较当前像素和至少一个相邻像素的色度值,并对当前像素的亮度值进行滤波,以使得对当前像素的亮度值的滤波强度基于当前像素和至少一个相邻像素的色度值的比较。
24、一种对来自发送设备的数字图像和/或视频数据进行处理的方法,其中所述数据的帧包括多行和多列像素,每一个像素的数据都包括亮度值和色度值,其中在发送之前对所述数据进行前置滤波和编码,其中根据前置滤波算法对所述数据进行前置滤波,并且其中从所述发送设备发送所述前置滤波算法的参数,该方法包括:
从所述发送设备接收经前置滤波和编码的数据;
接收从所述发送设备发送的所述前置滤波算法的参数;
对来自所述发送设备的经前置滤波和编码的数据进行解码;以及
根据后置滤波算法对经解码的数据进行后置滤波,其中根据从所述发送设备接收的所述前置滤波算法的参数来调整所述后置滤波算法的操作。
25、根据权利要求24所述的方法,其中,所述前置滤波算法和后置滤波算法相匹配。
26、根据权利要求24所述的方法,其中,所述前置滤波算法和后置滤波算法中的每一个都比较当前像素和至少一个相邻像素的色度值,并对当前像素的亮度值进行滤波,以使得对当前像素的亮度值的滤波强度基于当前像素和至少一个相邻像素的色度值的比较。
27、根据权利要求24所述的方法,其中,从所述发送设备发送的所述前置滤波算法的参数包括由所述前置滤波算法对所述数据的亮度值施加的滤波强度,并且其中根据由所述前置滤波算法施加的滤波强度来调整所述后置滤波的强度。
28、根据权利要求24所述的方法,其中,从所述发送设备发送的所述前置滤波算法的参数包括所述前置滤波算法的识别信息,并且其中响应于所述前置滤波算法的识别信息的接收,对所述后置滤波算法进行调整,以与所述前置滤波算法相匹配。
29、一种对数字图像和/或视频数据进行处理的方法,其中所述数据的帧包括多行和多列像素,所述方法包括:
接收当前像素的亮度值;
对所述当前像素的亮度值进行滤波;以及
对包括经滤波的亮度值的数据进行编码,其中对数据进行编码包括改变所述数据的压缩率,并且其中对所述亮度值的滤波强度响应于在编码过程中所采用的压缩率而改变。
30、根据权利要求29所述的方法,其中,接收还包括接收当前像素的色度值和接收至少一个相邻像素的亮度值和色度值,所述方法还包括:
比较当前像素和所述至少一个相邻像素的色度值,其中对所述亮度值的滤波强度还基于当前和所述至少一个相邻像素的色度值的比较。
31、根据权利要求29所述的方法,还包括:
通过无线接口发送包括经滤波的亮度值的所述经编码的数据。
32、根据权利要求29所述的方法,其中,对当前像素的亮度值进行滤波包括对当前像素的亮度值与至少一个相邻像素的亮度值进行平均。
33、根据权利要求32所述的方法,其中,滤波的强度由对所述亮度值进行平均时施加给所述亮度值的权重来确定。
34、根据权利要求29所述的方法,还包括:
响应于在编码过程中所采用的相对高的压缩率而增大所述滤波的强度;以及
响应于在编码过程中所采用的相对低的压缩率而减小所述滤波的强度。
35、一种对数字图像和/或视频数据进行处理的方法,其中所述数据的帧包括多行和多列像素,所述方法包括:
接收帧的像素的数据;
对所述帧的像素的数据进行滤波;
识别所述数据的帧的应该施加纹理的部分;
对所述帧的像素的经滤波的数据进行编码;
发送所述帧的像素的经编码和滤波的数据;以及
发送所述数据的帧的应该施加纹理的部分的识别信息。
36、根据权利要求35所述的方法,还包括:
提供要施加给所述帧的所识别部分的纹理的特征;以及
发送要施加给所述帧的所识别部分的纹理的特征。
37、根据权利要求36所述的方法,其中,提供所述纹理的特征包括识别多个预定纹理中的一个。
38、根据权利要求35所述的方法,其中,识别所述数据的帧的应该施加纹理的部分包括对所述帧的像素的经滤波数据和所述数据的帧的像素的未滤波数据进行比较,以及基于对所述帧的经滤波数据和未滤波数据的比较来识别所述数据的帧的应该施加纹理的部分。
39、根据权利要求35所述的方法,其中,所述帧的像素的数据包括亮度值和色度值,并且其中识别所述数据的帧的应该施加纹理的部分包括识别具有相似色度值的像素。
40、根据权利要求35所述的方法,其中,所述帧的像素的数据包括亮度值和色度值,并且其中所述纹理包括所述帧的应该施加纹理的所识别部分中所包括的亮度值的变化。
41、根据权利要求35所述的方法,其中,所述帧的像素的数据包括亮度值和色度值,并且其中对所述帧的像素的数据进行滤波包括:
接收当前像素和至少一个相邻像素的色度值和亮度值;
对当前像素和至少一个相邻像素的色度值进行比较;以及
对当前像素的亮度值进行滤波,其中对亮度值的滤波强度基于对当前像素和至少一个相邻像素的色度值的比较。
42、根据权利要求35所述的方法,其中,接收所述数据的帧的像素的数据包括从数字照相机接收所述数据。
43、一种用于处理数字图像和/或视频数据的方法,其中所述数据的帧包括多行和多列像素,所述方法包括:
接收所述数据的帧的像素的数据;
对所述帧的像素的数据进行解码;
识别所述数据的帧的应该施加纹理的部分;以及
在对所述帧的像素的数据进行解码之后,对所述数据的帧的所识别部分施加纹理。
44、根据权利要求43所述的方法,还包括:
接收要施加给所述帧的所识别部分的纹理的特征,其中对所述帧的所识别部分施加纹理包括根据所接收的特征来施加纹理。
45、根据权利要求44所述的方法,其中,所述特征识别多个预定纹理中的一个。
46、根据权利要求43所述的方法,其中,所述帧的像素的数据包括亮度值和色度值,并且其中识别所述数据的帧的应该施加纹理的部分包括识别具有相似色度值的像素。
47、根据权利要求43所述的方法,其中,所述帧的像素的数据包括亮度值和色度值,并且其中所述纹理包括所述帧的应该施加纹理的所识别部分中所包括的亮度值的变化。
48、根据权利要求43所述的方法,还包括:
在施加所述纹理之前,对所述帧的像素的经解码数据进行滤波。
49、根据权利要求43所述的方法,其中,接收所述数据的帧的像素的数据包括通过无线接口接收所述数据。
CNA2004800328133A 2003-11-05 2004-10-29 包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法及相关系统和计算机程序产品 Pending CN1879421A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/701,730 2003-11-05
US10/701,730 US20050094003A1 (en) 2003-11-05 2003-11-05 Methods of processing digital image and/or video data including luminance filtering based on chrominance data and related systems and computer program products

Publications (1)

Publication Number Publication Date
CN1879421A true CN1879421A (zh) 2006-12-13

Family

ID=34551482

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2004800328133A Pending CN1879421A (zh) 2003-11-05 2004-10-29 包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法及相关系统和计算机程序产品

Country Status (5)

Country Link
US (2) US20050094003A1 (zh)
EP (1) EP1680928B1 (zh)
KR (1) KR101069975B1 (zh)
CN (1) CN1879421A (zh)
WO (1) WO2005051003A2 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103281526A (zh) * 2011-12-15 2013-09-04 弗莱克斯电子有限责任公司 网络图像/视频处理系统
CN104581345A (zh) * 2014-12-29 2015-04-29 广东欧珀移动通信有限公司 一种调整显示帧的方法及装置
CN105183755A (zh) * 2015-07-17 2015-12-23 小米科技有限责任公司 一种图片的显示方法及装置
CN107257458A (zh) * 2010-05-10 2017-10-17 寰发股份有限公司 采用回路内滤波处理来处理视频的方法和装置
WO2018120021A1 (zh) * 2016-12-30 2018-07-05 陶霖密 显示面板、显示装置和像素渲染方法
CN110930962A (zh) * 2019-11-26 2020-03-27 山东浪潮人工智能研究院有限公司 一种细微亮度变化放大显示方法及电路
CN111614901A (zh) * 2020-05-27 2020-09-01 惠州Tcl移动通信有限公司 一种图像拍摄方法、装置、存储介质及终端

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US8203617B2 (en) * 2003-11-05 2012-06-19 Telefonaktiebolaget Lm Ericsson (Publ) Apparatus and method for increasing coding efficiency with an adaptive pre-filter
US20050094003A1 (en) * 2003-11-05 2005-05-05 Per Thorell Methods of processing digital image and/or video data including luminance filtering based on chrominance data and related systems and computer program products
JP2005167399A (ja) * 2003-11-28 2005-06-23 Noritsu Koki Co Ltd 画像ノイズ除去方法
US20080084932A1 (en) * 2006-10-06 2008-04-10 Microsoft Corporation Controlling loop filtering for interlaced video frames
KR100922898B1 (ko) * 2007-12-17 2009-10-20 한국전자통신연구원 IP 미디어의 QoE 보장형 영상품질 측정장치 및측정방법
JP4900722B2 (ja) * 2008-03-12 2012-03-21 株式会社メガチップス 画像処理装置
TWI387319B (zh) * 2009-06-02 2013-02-21 Novatek Microelectronics Corp 影像處理電路及方法
US10477249B2 (en) 2009-06-05 2019-11-12 Apple Inc. Video processing for masking coding artifacts using dynamic noise maps
DE102010028746B4 (de) * 2010-05-07 2012-06-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Bildsensor und Verfahren zum Aufnehmen eines Bildes
US8787443B2 (en) 2010-10-05 2014-07-22 Microsoft Corporation Content adaptive deblocking during video encoding and decoding
US9042458B2 (en) 2011-04-01 2015-05-26 Microsoft Technology Licensing, Llc Multi-threaded implementations of deblock filtering
US20130279882A1 (en) 2012-04-23 2013-10-24 Apple Inc. Coding of Video and Audio with Initialization Fragments
CN103391416A (zh) * 2012-05-08 2013-11-13 联咏科技股份有限公司 图像处理方法
KR102192674B1 (ko) 2014-06-26 2020-12-17 삼성전자 주식회사 이미지 처리 장치 및 방법
US9811882B2 (en) * 2014-09-30 2017-11-07 Electronics And Telecommunications Research Institute Method and apparatus for processing super resolution image using adaptive preprocessing filtering and/or postprocessing filtering
GB2536904B (en) * 2015-03-30 2017-12-27 Imagination Tech Ltd Image filtering based on image gradients
US9842410B2 (en) * 2015-06-18 2017-12-12 Samsung Electronics Co., Ltd. Image compression and decompression with noise separation
US10467735B2 (en) * 2015-08-25 2019-11-05 Interdigital Vc Holdings, Inc. Inverse tone mapping based on luminance zones
EP3203439B1 (en) 2016-02-04 2019-10-02 InterDigital VC Holdings, Inc. Method and device for reducing noise in a component of a picture
KR20180056313A (ko) * 2016-11-18 2018-05-28 삼성전자주식회사 텍스처를 처리하는 방법 및 장치
CA3004647C (en) * 2017-05-12 2022-04-12 Carpin Manufacturing, Inc. Self-adjustment restrictor
CN112055965A (zh) 2018-04-04 2020-12-08 日本放送协会 预测图像校正装置、图像编码装置、图像解码装置以及程序
CN113518227B (zh) * 2020-04-09 2023-02-10 于江鸿 数据处理的方法和系统
EP4268460A4 (en) * 2020-12-28 2024-06-12 Telefonaktiebolaget LM Ericsson (publ) TIME FILTER

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0250534B2 (en) * 1985-12-24 1994-09-28 British Broadcasting Corporation Bandwidth compression for television signals
JP2576989B2 (ja) * 1986-06-07 1997-01-29 ドイツチエ・トムソン−ブラント・ゲゼルシヤフト・ミツト・ベシユレンクテル・ハフツング 運動検出によりデイジタルビデオ信号のノイズを低減する方式
JPH0822072B2 (ja) * 1987-09-04 1996-03-04 日本ビクター株式会社 搬送色信号処理回路
EP0340648B1 (en) * 1988-04-30 1994-11-23 Victor Company Of Japan, Limited Picture-quality improving circuit
US5012329A (en) * 1989-02-21 1991-04-30 Dubner Computer Systems, Inc. Method of encoded video decoding
JPH0374970A (ja) * 1989-08-16 1991-03-29 Toshiba Corp 輝度信号高域強調回路
US6134373A (en) * 1990-08-17 2000-10-17 Samsung Electronics Co., Ltd. System for recording and reproducing a wide bandwidth video signal via a narrow bandwidth medium
US5323232A (en) * 1990-08-01 1994-06-21 Matsushita Electric Industrial Co., Ltd. Filter device for decimation and interpolation of chrominance components of a video signal
US5150203A (en) * 1990-12-26 1992-09-22 The Grass Valley Group, Inc. Variable chrominance filtering for encoding television signals
EP0547696B1 (fr) * 1991-12-18 1999-04-21 Laboratoires D'electronique Philips S.A.S. Système de transmission et/ou stockage de signaux correspondant à des images texturées
KR0148130B1 (ko) * 1992-05-18 1998-09-15 강진구 블럭킹아티팩트를 억제시키는 부호화/복호화 방법 및 그 장치
JPH07231396A (ja) * 1993-04-19 1995-08-29 Mitsubishi Electric Corp 画質補正回路
US5598514A (en) * 1993-08-09 1997-01-28 C-Cube Microsystems Structure and method for a multistandard video encoder/decoder
US5557538A (en) * 1994-05-18 1996-09-17 Zoran Microelectronics Ltd. MPEG decoder
US6026190A (en) * 1994-10-31 2000-02-15 Intel Corporation Image signal encoding with variable low-pass filter
JP3746540B2 (ja) * 1995-06-07 2006-02-15 オリンパス株式会社 画像処理装置
US5974186A (en) * 1995-10-24 1999-10-26 Georgia Tech Research Corporation Video coding system and method for noisy signals
GB2306833B (en) * 1995-10-30 2000-03-29 Sony Uk Ltd Video data compression
US5712687A (en) * 1996-04-25 1998-01-27 Tektronix, Inc. Chrominance resampling for color images
DE69605106T2 (de) * 1996-07-09 2000-07-20 Stmicroelectronics S.R.L., Agrate Brianza Schaltung zur Chrominanzübergangsverbesserung in Echtzeitvideoempfang
US6456328B1 (en) * 1996-12-18 2002-09-24 Lucent Technologies Inc. Object-oriented adaptive prefilter for low bit-rate video systems
US5959693A (en) * 1997-05-07 1999-09-28 General Instrument Corporation Pixel adaptive noise reduction filter for digital video
JP3925588B2 (ja) * 1997-11-25 2007-06-06 セイコーエプソン株式会社 画像処理装置、画像処理方法および画像処理制御プログラムを記録した媒体
KR100282389B1 (ko) * 1997-12-31 2001-02-15 구자홍 에이치디티브이 비디오 디코더의 메모리 제어 방법
US6480538B1 (en) * 1998-07-08 2002-11-12 Koninklijke Philips Electronics N.V. Low bandwidth encoding scheme for video transmission
JP2002026801A (ja) * 2000-07-05 2002-01-25 Toshiba Corp 無線通信端末
JP2002041285A (ja) * 2000-07-28 2002-02-08 Toshiba Corp データ処理装置およびデータ処理方法
JP3630622B2 (ja) * 2000-08-31 2005-03-16 シャープ株式会社 パターンアンテナ及びそれを備えた無線通信装置
US7450641B2 (en) * 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
US8275047B2 (en) * 2001-09-20 2012-09-25 Xilinx, Inc. Method and device for block-based conditional motion compensation
US7606435B1 (en) * 2002-02-21 2009-10-20 At&T Intellectual Property Ii, L.P. System and method for encoding and decoding using texture replacement
US7181086B2 (en) 2002-06-06 2007-02-20 Eastman Kodak Company Multiresolution method of spatially filtering a digital image
US7280703B2 (en) * 2002-11-14 2007-10-09 Eastman Kodak Company Method of spatially filtering a digital image using chrominance information
US20050094003A1 (en) 2003-11-05 2005-05-05 Per Thorell Methods of processing digital image and/or video data including luminance filtering based on chrominance data and related systems and computer program products

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107257458A (zh) * 2010-05-10 2017-10-17 寰发股份有限公司 采用回路内滤波处理来处理视频的方法和装置
CN107257458B (zh) * 2010-05-10 2021-01-05 寰发股份有限公司 采用回路内滤波处理来处理视频的方法和装置
CN103281526B (zh) * 2011-12-15 2018-08-28 弗莱克斯电子有限责任公司 网络图像/视频处理系统
CN103281526A (zh) * 2011-12-15 2013-09-04 弗莱克斯电子有限责任公司 网络图像/视频处理系统
CN104581345B (zh) * 2014-12-29 2017-11-24 广东欧珀移动通信有限公司 一种调整显示帧的方法及装置
CN104581345A (zh) * 2014-12-29 2015-04-29 广东欧珀移动通信有限公司 一种调整显示帧的方法及装置
JP2017527832A (ja) * 2015-07-17 2017-09-21 小米科技有限責任公司Xiaomi Inc. ピクチャ表示方法および装置
WO2017012232A1 (zh) * 2015-07-17 2017-01-26 小米科技有限责任公司 一种图片的显示方法及装置
US9892524B2 (en) 2015-07-17 2018-02-13 Xiaomi Inc. Image displaying methods, devices, and storage media
CN105183755A (zh) * 2015-07-17 2015-12-23 小米科技有限责任公司 一种图片的显示方法及装置
CN105183755B (zh) * 2015-07-17 2018-10-12 小米科技有限责任公司 一种图片的显示方法及装置
WO2018120021A1 (zh) * 2016-12-30 2018-07-05 陶霖密 显示面板、显示装置和像素渲染方法
CN110930962A (zh) * 2019-11-26 2020-03-27 山东浪潮人工智能研究院有限公司 一种细微亮度变化放大显示方法及电路
CN111614901A (zh) * 2020-05-27 2020-09-01 惠州Tcl移动通信有限公司 一种图像拍摄方法、装置、存储介质及终端

Also Published As

Publication number Publication date
WO2005051003A2 (en) 2005-06-02
EP1680928A2 (en) 2006-07-19
US8274577B2 (en) 2012-09-25
KR101069975B1 (ko) 2011-10-04
EP1680928B1 (en) 2013-05-15
US20070291141A1 (en) 2007-12-20
KR20060115739A (ko) 2006-11-09
WO2005051003A3 (en) 2005-10-27
US20050094003A1 (en) 2005-05-05

Similar Documents

Publication Publication Date Title
CN1879421A (zh) 包括基于色度数据的亮度滤波的处理数字图像和/或视频数据的方法及相关系统和计算机程序产品
US9445097B2 (en) Image decoding method using intra prediction mode
KR20190120145A (ko) 인루프 필터링을 적용한 예측 방법을 이용한 영상 부호화/복호화 방법 및 장치
CN1922859A (zh) 图像压缩方法、图像压缩装置、图像传输系统、数据压缩预处理装置及计算机程序
EP2888879B1 (en) Color adaptation in video coding
JP4360416B2 (ja) 画像圧縮方法、画像圧縮装置およびプログラム
CN1665298A (zh) 从数字运动画面数据中去除噪声的方法
WO2011014637A1 (en) System and method of compressing video content
EP3014880A2 (en) Encoding video captured in low light
CN1543220A (zh) 视频解码装置和方法
CN1599462A (zh) 图像编码和解码装置及方法
CN106303521B (zh) 一种基于感知敏感度的hevc率失真优化方法
CN1531347A (zh) 图象信号编码装置及图象信号编码方法
JP2004336103A (ja) 画像情報圧縮装置
US7038814B2 (en) Fast digital image dithering method that maintains a substantially constant value of luminance
CN1882083A (zh) 一种降低图像方块效应的方法
CN1124569C (zh) 数字化图象编码和解码的方法和装置
US20230037509A1 (en) Video coding method and system
US20230188738A1 (en) Encoding and decoding video content using prediction-aware flexible skip coding
Huang et al. Deep learning based angular intra-prediction for lossless HEVC video coding
WO2018134128A1 (en) Filtering of video data using a shared look-up table
CN1578428A (zh) 运动画面接收设备,发送设备及其解码和编码方法
JP7176132B2 (ja) 画像処理方法および電子デバイス
JP2018137542A (ja) 符号化装置、符号化方法、及び、プログラム
CN1578157A (zh) 图像编码装置与图像编码方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20061213