CN105611373B - 视频图像处理方法及装置 - Google Patents

视频图像处理方法及装置 Download PDF

Info

Publication number
CN105611373B
CN105611373B CN201510980536.9A CN201510980536A CN105611373B CN 105611373 B CN105611373 B CN 105611373B CN 201510980536 A CN201510980536 A CN 201510980536A CN 105611373 B CN105611373 B CN 105611373B
Authority
CN
China
Prior art keywords
data
occlusion area
pixel
video image
row
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510980536.9A
Other languages
English (en)
Other versions
CN105611373A (zh
Inventor
吴小勇
刘洁
王维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Priority to CN201510980536.9A priority Critical patent/CN105611373B/zh
Publication of CN105611373A publication Critical patent/CN105611373A/zh
Application granted granted Critical
Publication of CN105611373B publication Critical patent/CN105611373B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs

Abstract

本公开是关于一种视频图像处理方法及装置,属于图像处理领域。所述方法包括:获取视频图像的数据;采用获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;输出所述替换后的视频图像的数据。所述装置包括获取模块、确定模块、处理模块和输出模块。本公开采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。

Description

视频图像处理方法及装置
技术领域
本公开涉及图像处理领域,特别涉及一种视频图像处理方法及装置。
背景技术
随着智能电视和机顶盒的普及,用户可以更方便地在智能电视上观看视频。在国内,监管部门不允许不符合规定的画面在智能电视上呈现出来被用户看到,例如视频网站上的台标(Logo)。相关技术中,通常会在不符合规定的画面位置叠加一层马赛克图片来进行遮挡。在这种方式中,马赛克图片遮挡了不符合规定画面的同时,还遮挡了其他有效区域的画面,并且马赛克图片的内容一直不变,与周围的图像画面的兼容性较差,影响了用户观看的视觉效果。
发明内容
为克服相关技术中存在的问题,本公开提供一种视频图像处理方法及装置。
一方面,提供了一种视频图像处理方法,所述方法包括:
获取视频图像的数据;
采用获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;
输出所述替换后的视频图像的数据。
在本公开实施例的一种实现方式中,所述待遮挡区域为设定对象所在的区域,所述设定对象包括视频网站的台标或电视台的台标。
进一步地,所述采用获取到的所述数据,确定所述视频图像中的待遮挡区域,包括:
利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;
根据所述台标的像素点中各个像素点的坐标,确定所述视频图像中的待遮挡区域。
在本公开实施例的一种实现方式中,所述采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,包括:
采用所述待遮挡区域的最外侧的一行像素点的数据,替换所述待遮挡区域中各行像素点的数据;或者,
采用所述待遮挡区域的最外侧的一列像素点的数据,替换所述待遮挡区域中各列像素点的数据。
在本公开实施例的另一种实现方式中,所述采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,包括:
采用所述待遮挡区域的最后一行像素点的数据,替换所述待遮挡区域中的各行像素点的数据。
另一方面,提供了一种视频图像处理装置,所述装置包括:
获取模块,用于获取视频图像的数据;
确定模块,用于采用所述获取模块获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
处理模块,用于采用所述确定模块确定出的所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;
输出模块,用于输出所述处理模块得到的替换后的视频图像的数据。
在本公开实施例的一种实现方式中,所述待遮挡区域为设定对象所在的区域,所述设定对象包括视频网站的台标或电视台的台标。
进一步地,所述确定模块,用于利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;根据所述台标的像素点中各个像素点的坐标,确定所述视频图像中的待遮挡区域。
在本公开实施例的一种实现方式中,所述处理模块用于采用所述待遮挡区域的最外侧的一行像素点的数据,替换所述待遮挡区域中各行像素点的数据;或者,采用所述待遮挡区域的最外侧的一列像素点的数据,替换所述待遮挡区域中各列像素点的数据。
在本公开实施例的另一种实现方式中,所述处理模块用于采用所述待遮挡区域的最后一行像素点的数据,替换所述待遮挡区域中的各行像素点的数据。
又一方面,提供了一种视频图像处理装置,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取视频图像的数据;
采用获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
采用所述待遮挡区域中的任一行或列图像数据,替换所述待遮挡区域中的各行或列图像数据,得到替换后的视频图像的数据;
输出所述替换后的视频图像的数据。
本公开的实施例提供的技术方案可以包括以下有益效果:
通过确定图像视频中的待遮挡区域,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的视频图像处理方法的应用场景的示意图;
图2是根据一示例性实施例示出的一种视频图像处理方法的流程图;
图2a是根据一示例性实施例示出的视频图像的画面显示示意图;
图3是根据一示例性实施例示出的另一种视频图像处理方法的流程图;
图4是根据一示例性实施例示出的一种视频图像处理装置的框图;
图5是根据一示例性实施例示出的另一种视频图像处理装置的框图;
图6是根据一示例性实施例示出的另一种视频图像处理装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的视频图像处理方法的应用场景的示意图。如图1所示,电视10通过机顶盒20与服务器30连接,用户50可以通过遥控器40等控制设备,向电视10发送控制指令,例如,节目播放指令等,电视10收到节目播放指令后,通过机顶盒20向服务器30转发该节目播放指令,服务器30将节目播放指令对应的视频图像的数据发送给机顶盒20,机顶盒再将数据转发给电视10播放。
图2是根据一示例性实施例示出的一种视频图像处理方法的流程图。该方法可以应用于机顶盒、电视或者服务器中,如图2所示,该方法包括以下步骤。
在步骤201中,获取视频图像的数据。
其中,该视频图像的数据通常为YUV格式数据,YUV格式包括但不限于YUV444交错格式、YVYU格式、YUV420P或YUYV格式等。该YUV格式数据可以以字节对齐的方式存储,例如,按照8字节或者16字节对齐的方式存储。
在步骤202中,采用获取到的数据,确定视频图像中的待遮挡区域。
其中,待遮挡区域可以为设定对象所在的区域,设定对象包括但不限于视频网站的台标、电视台的台标、产品的商标等。
在步骤203中,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据。
其中,待遮挡区域中的一排像素点可以是横排(即行)的像素点,也可以是竖排(即列)的像素点。
如图2a所示,在本公开实施例中,行是指用户正常观看视频时,看到的视频图像的左右方向(即视频图像的宽度方向),如图2a中的箭头x方向,对于电视而言,通常为水平方向,而列是指用户正常观看视频时,看到的视频图像的上下方向(即视频图像的高度方向),如图2a中的箭头y方向,对于电视而言,通常为竖直方向。
实现时,优选采用待遮挡区域中最外侧的一行像素点的数据,替换待遮挡区域中各行像素点的数据;或者,
采用待遮挡区域的最外侧的一列像素点的数据,替换待遮挡区域中各列像素点的数据。
由于某些台标内可能会有文字等黑色部分,若采用待遮挡区域的中部的行或列的像素点的数据来替换其它行或列的数据,可能会出现较大面积的黑色区域,在图像中会比较突出,影响显示效果,而采用待遮挡区域的最外侧的行或列的像素点的数据来替换其它行或列的数据可以避免这种情况出现,提高图像的显示效果。
更优选地,可以采用待遮挡区域的最后一行像素点的数据,替换待遮挡区域中的各行像素点的数据。其中,最后一行像素点是指沿图2a中的y方向,位于待遮挡区域的最下方的一行像素点。以图2a中的虚线所示的矩形框为待遮挡区域为例,最后一行像素点是指位于矩形框的下侧边21a的一行像素点。由于最后一行像素点的颜色与背景图像的颜色接近的可能性较大,采用最后一行像素点的数据替换待遮挡区域中的各行数据,使得待遮挡区域在进行数据替换后可以更好地与背景融合在一起,进一步提高画面显示效果。
当然,也可以采用待遮挡区域中部的一行像素点的数据来替换待遮挡区域中各行像素点的数据,或者,采用待遮挡区域中部的一列像素点的数据来替换待遮挡区域中各列像素点的数据。
在步骤204中,输出替换后的视频图像的数据。
当本实施例的方法应用于服务器时,该步骤204可以包括:将替换后的视频图像的数据发送给机顶盒;
当本实施例的方法应用于机顶盒时,该步骤204可以包括:将替换后的视频图像的数据发送给电视;
当本实施例的方法应用于电视时,该步骤204可以包括:将替换后的视频图像的数据发送给电视的渲染模块。
本公开实施例通过确定图像视频中的待遮挡区域,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。并且,采用替换像素点的数据的方式对图像画面进行模糊处理,处理方式简单,效率高,基本上每一帧视频图像的处理时间不会超过10ms,不会对视频的正常播放产生影响。
图3是根据一示例性实施例示出的另一种视频图像处理方法的流程图。该方法应用于机顶盒、电视或者服务器中,在本实施例中,以待遮挡区域为视频网站或电视台的台标所在区域为例,对本公开进行说明。如图3所示,该方法包括以下步骤。
在步骤301中,获取视频图像的数据。
其中,该视频图像的数据通常为YUV格式数据,YUV格式包括YUV444交错格式、YVYU格式、YUV420P或YUYV格式等。该YUV格式数据可以以字节对齐的方式存储,例如,按照8字节或者16字节对齐的方式存储。
在步骤302中,利用台标检测算法对视频图像的数据进行检测,确定台标的像素点。
其中,台标检测算法用于对台标进行检测和定位。
在本实施例中,该步骤302可以包括:
提取视频图像的关键帧;
将提取的关键帧作为基准帧,与其后的关键帧作帧间差分处理,记录每个像素点对应的差分值,并求每个像素点对应的差分值的累加和;
将累加和小于设定阈值的像素点确定为台标的像素点。
需要说明的是,为了减少计算量,可以先将关键帧图像转化为灰度图像,然后再进行帧间差分处理。
在本实施例中,采用了基于多帧视频图像的台标检测算法来确定台标的像素点,基于多帧视频图像的台标检测算法利用了台标的时空不变性,即台标在多帧视频图像中的位置、颜色、尺寸等均固定不变,因此,具有该特性的其他待遮挡对象也可以采用该基于多帧视频图像的算法来确定。
在步骤303中,根据台标的像素点的坐标,确定视频图像中的待遮挡区域。
在本实施例中,待遮挡区域可以为矩形区域。
在一种实现方式中,该步骤303可以包括:
根据台标的像素点的坐标中的最小横坐标,最大横坐标,最小纵坐标以及最大纵坐标,确定待遮挡区域的左上角顶点坐标以及待遮挡区域的高度和宽度;
根据待遮挡区域的左上角顶点坐标以及待遮挡区域的宽度和高度,确定视频图像中的待遮挡区域。
在实现时,台标的像素点的坐标中最小横坐标和最大纵坐标构成待遮挡区域的左上角顶点坐标,最大横坐标与最小横坐标的差值对应于待遮挡区域的宽度,最大纵坐标和最小纵坐标的差值对应于待遮挡区域的高度。
其中,待遮挡区域的高度的方向与前述列的方向相同,而待遮挡区域的宽度与前述行的方向相同。
在另一种实现方式中,该步骤303还可以包括:
根据台标的像素点的坐标中的最小横坐标、最大横坐标、最小纵坐标以及最大纵坐标,确定待遮挡区域四个顶点的坐标;
根据四个顶点的坐标确定视频图像中的待遮挡区域。
其中,根据台标的像素点的坐标中的最小横坐标、最大横坐标、最小纵坐标以及最大纵坐标,确定待遮挡区域四个顶点的坐标,可以采用以下两种方式。
第一种,将台标的像素点的坐标中的最小横坐标和最大纵坐标作为待遮挡区域的左上角顶点坐标,将台标的像素点的坐标中最小横坐标和最小纵坐标作为待遮挡区域的左下角顶点坐标,将台标的像素点的坐标中最大横坐标和最大纵坐标作为待遮挡区域的右上角顶点坐标,将台标的像素点的坐标中最大横坐标和最小纵坐标作为待遮挡区域的右下角顶点坐标。
第二种,首先,将台标的像素点的坐标中的最小横坐标减小第一设定值,得到新的最小横坐标;将台标的像素点的坐标中的最大横坐标增大第二设定值,得到新的最大横坐标;将台标的像素点的坐标中的最小纵坐标减小第三设定值,得到新的最小纵坐标;将台标的像素点的坐标中的最大纵坐标增大第四设定值,得到新的最大纵坐标,其中,第一设定值、第二设定值、第三设定值、第四设定值可以根据实际需要设置,例如1~5个像素点,优选为1~2个;
然后,将新的最小横坐标和新的最大纵坐标作为待遮挡区域的左上角顶点坐标,将新的最小横坐标和新的最小纵坐标作为待遮挡区域的左下角顶点坐标,将新的最大横坐标和新的最大纵坐标作为待遮挡区域的右上角顶点坐标,将新的最大横坐标和新的最小纵坐标作为待遮挡区域的右下角顶点坐标。
采用第二种方式确定出的待遮挡区域会采用第一种方式确定出的待遮挡区域的尺寸大,结合后续步骤中的替换数据的方式,可以使得待遮挡区域的图像被模糊处理后可以更好地与背景融合,进一步提高用户的观看体验。
通过步骤302-303即可实现确定视频图像中的待遮挡区域。
需要说明的是,在本实施例中,以多帧视频图像确定待遮挡区域为例对确定包含台标的待遮挡区域进行了说明,在其他实施例中,还可以采用基于单帧图像的台标检测算法来确定包含台标的待遮挡区域,本公开对此不做限制。
例如,可以采用如下基于单帧图像的台标检测算法,该基于单帧图像的台标检测算法可以包括如下步骤:
获取台标模版;
采用检测窗口在单帧视频图像中滑动,获得多个待检测图像;
分别计算获得的多个待检测图像和台标模版的相似度;
将相似度大于设定值的待检测图像所在的区域作为待遮挡区域。
其中,计算获得待检测图像和台标模版的相似度,可以包括:
确定台标模版的第一特征值;
确定待检测图像的第二特征值;
采用第一特征值和第二特征值计算台标模版和待检测图像的距离(即相似度)。其中,距离包括但不限于欧式距离、余弦距离等。
该基于单帧视频图像的台标检测算法是在视频图像中搜索台标所在区域,也可以用于搜索其他设定对象所在区域,例如,产品的商标等。
在步骤304中,采用待遮挡区域的最后一行像素点的数据,替换待遮挡区域中的各行像素点的数据,得到替换后的视频图像的数据。
由于台标通常位于图像的上半部分,例如左上角或者右上角,最后一行像素点的颜色与背景图像的颜色接近的可能性较大,所以采用最后一行像素点的数据,替换待遮挡区域中的各行像素点的数据可以提高替换后的待遮挡区域的图像与背景融合的可能性。
在步骤305中,输出替换后的视频图像的数据。
当本实施例的方法应用于服务器时,该步骤307可以包括:将替换后的视频图像的数据发送给机顶盒;
当本实施例的方法应用于机顶盒时,该步骤307可以包括:将替换后的视频图像的数据发送给电视;
当本实施例的方法应用于电视时,该步骤307可以包括:将替换后的视频图像的数据发送给电视的渲染模块。
需要说明的是,当待遮挡区域中的设定对象是视频网站或电视台的台标时,由于在一个视频中,台标的位置通常不会发生变化,所以在采用步骤302和步骤303确定出待遮挡区域后,可以保存该待遮挡区域的参数(例如前述待遮挡区域的顶点的坐标),对于后续获取的每帧视频图像的数据,均直接根据保存的待遮挡区域的参数来确定视频图像中的待遮挡区域并获取待遮挡区域的数据,然后按照步骤304-307是对待遮挡区域的数据进行处理并输出处理后的视频图像的数据。而当待遮挡区域中的设定对象是产品的商标时,由于其出现的位置不固定,所以需要针对每一帧图像单独确定其中的待遮挡区域,相应地,对于这类出现位置不固定的设定对象而言,需要采用基于单帧的目标检测方法来确定包含设定对象的待遮挡区域。
本公开实施例通过确定图像视频中的待遮挡区域,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。并且,采用替换像素点的数据的方式对图像画面进行模糊处理,处理方式简单,效率高,基本上每一帧视频图像的处理时间不会超过10ms,不会对视频的正常播放产生影响。
图4是根据一示例性实施例示出的一种视频图像处理装置的框图。如图4所示,该装置可以包括:获取模块401、确定模块402、处理模块403和输出模块404。
其中,获取模块401被配置为获取视频图像的数据。确定模块402被配置为采用获取模块401获取到的数据,确定视频图像中的待遮挡区域,该待遮挡图像区域为矩形区域。处理模块403被配置为采用确定模块402确定出的待遮挡区域中的一排像素点的数据,替换该待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据。输出模块404被配置为输出处理模块403得到的替换后的视频图像的数据。
其中,待遮挡区域中的一排像素点可以是横排(即行)的像素点,也可以是竖排(即列)的像素点。关于待遮挡区域的行和列的描述可以参见前述步骤203,在此省略详细描述。
其中,获取模块401获取到的视频图像的数据可以为YUV格式数据,YUV格式包括YUV444交错格式、YVYU格式、YUV420P或YUYV格式等。该YUV格式数据可以以字节对齐的方式存储,例如,按照8字节或者16字节对齐的方式存储。
其中,待遮挡区域为设定对象所在的区域,该设定对象包括视频网站的台标、电视台的台标或产品的商标等。
本公开实施例通过确定图像视频中的待遮挡区域,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。
图5是根据一示例性实施例示出的一种视频图像处理装置的框图。如图5所示,该装置可以包括:获取模块501、确定模块502、处理模块503和输出模块504。
其中,获取模块501被配置为获取视频图像的数据。确定模块502被配置为采用获取模块501获取到的数据,确定视频图像中的待遮挡区域,该待遮挡图像区域为矩形区域。处理模块503被配置为采用确定模块502确定出的待遮挡区域中的一排像素点的数据,替换该待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据。输出模块504被配置为输出处理模块503得到的替换后的视频图像的数据。
其中,获取模块501获取到的视频图像的数据可以为YUV格式数据,YUV格式包括YUV444交错格式、YVYU格式、YUV420P或YUYV格式等。该YUV格式数据可以以字节对齐的方式存储,例如,按照8字节或者16字节对齐的方式存储。
进一步地,确定模块502用于利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;根据台标的像素点中各个像素点的坐标,确定视频图像中的待遮挡区域。
确定模块502确定待遮挡区域的方式可以参见步骤302和303,在此省略详细描述。
优选地,处理模块503用于采用待遮挡区域中最外侧的一行像素点的数据,替换待遮挡区域中各行像素点的数据;或者,采用待遮挡区域的最外侧的一列像素点的数据,替换待遮挡区域中各列像素点的数据。
更优选地,处理模块503用于采用待遮挡区域中最后一行像素点的数据,替换待遮挡区域中各行像素点的数据。
当本实施例的装置应用于服务器时,输出模块504用于将替换后的视频图像的数据发送给机顶盒;
当本实施例的装置应用于机顶盒时,输出模块504用于将替换后的视频图像的数据发送给电视;
当本实施例的装置应用于电视时,输出模块504用于将替换后的视频图像的数据发送给电视的渲染模块。
本公开实施例通过确定图像视频中的待遮挡区域,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,从而可以将待遮挡区域的图像模糊掉,满足监管部门的需求,而且,采用该方式进行遮挡,对视频图像的整体画面效果影响较小。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图6是根据一示例性实施例示出的一种视频图像处理装置600的框图。例如,装置600可以是机顶盒、电视或者服务器等。
参照图6,装置600可以包括以下一个或多个组件:处理组件602,存储器604,电力组件606,多媒体组件608,音频组件610,输入/输出(I/O)的接口612,传感器组件614,以及通信组件616。
处理组件602通常控制装置600的整体操作,诸如与显示相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件602可以包括一个或多个模块,便于处理组件602和其他组件之间的交互。例如,处理组件602可以包括多媒体模块,以方便多媒体组件608和处理组件602之间的交互。处理组件602还可以包括GPU,用于对图形数据进行处理等。
存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令,图片,视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件606为装置600的各种组件提供电力。电力组件606可以包括电源管理系统,一个或多个电源,及其他与为装置600生成、管理和分配电力相关联的组件。
多媒体组件608包括在装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件608包括一个前置摄像头和/或后置摄像头。当装置600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如,音频组件610包括一个麦克风(MIC),当装置600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中,音频组件610还包括一个扬声器,用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器,用于为装置600提供各个方面的状态评估。例如,传感器组件614可以检测到装置600的打开/关闭状态,组件的相对定位,例如组件为装置600的显示器和小键盘,传感器组件614还可以检测装置600或装置600一个组件的位置改变,用户与装置600接触的存在或不存在,装置600方位或加速/减速和装置600的温度变化。传感器组件614可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件614还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信组件616还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器604,上述指令可由装置600的处理器620执行以完成上述方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当该存储介质中的指令由机顶盒、电视或服务器的处理器执行时,使得机顶盒、电视或服务器能够执行一种视频图像处理方法,该方法包括:
获取视频图像的数据;
采用获取到的数据,确定视频图像中的待遮挡区域,该待遮挡图像区域为矩形区域;
采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;
输出替换后的视频图像的数据。
在本公开实施例的一种实现方式中,该待遮挡区域为设定对象所在的区域,该设定对象包括视频网站的台标或电视台的台标。
进一步地,采用获取到的数据,确定视频图像中的待遮挡区域,包括:
利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;
根据台标的像素点中各个像素点的坐标,确定视频图像中的待遮挡区域。
在本公开实施例的一种实现方式中,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,包括:
采用待遮挡区域的最外侧的一行像素点的数据,替换待遮挡区域中各行像素点的数据;或者,
采用待遮挡区域的最外侧的一列像素点的数据,替换待遮挡区域中各列像素点的数据。
在本公开实施例的另一种实现方式中,采用待遮挡区域中的一排像素点的数据,替换待遮挡区域中的各排像素点的数据,包括:
采用待遮挡区域的最后一行像素点的数据,替换待遮挡区域中的各行像素点的数据。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (11)

1.一种视频图像处理方法,其特征在于,所述方法包括:
获取视频图像的数据;
采用获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;
输出所述替换后的视频图像的数据。
2.根据权利要求1所述的方法,其特征在于,所述待遮挡区域为设定对象所在的区域,所述设定对象包括视频网站的台标或电视台的台标。
3.根据权利要求2所述的方法,其特征在于,所述采用获取到的所述数据,确定所述视频图像中的待遮挡区域,包括:
利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;
根据所述台标的像素点中各个像素点的坐标,确定所述视频图像中的待遮挡区域。
4.根据权利要求1-3任一项所述的方法,所述采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据,包括:
采用所述待遮挡区域的最外侧的一行像素点的数据,替换所述待遮挡区域中各行像素点的数据;或者,
采用所述待遮挡区域的最外侧的一列像素点的数据,替换所述待遮挡区域中各列像素点的数据。
5.根据权利要求1-3任一项所述的方法,其特征在于,所述采用所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,包括:
采用所述待遮挡区域的最后一行像素点的数据,替换所述待遮挡区域中的各行像素点的数据。
6.一种视频图像处理装置,其特征在于,所述装置包括:
获取模块,用于获取视频图像的数据;
确定模块,用于采用所述获取模块获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
处理模块,用于采用所述确定模块确定出的所述待遮挡区域中的一排像素点的数据,替换所述待遮挡区域中的各排像素点的数据,得到替换后的视频图像的数据;
输出模块,用于输出所述处理模块得到的替换后的视频图像的数据。
7.根据权利要求6所述的装置,其特征在于,所述待遮挡区域为设定对象所在的区域,所述设定对象包括视频网站的台标或电视台的台标。
8.根据权利要求7所述的装置,其特征在于,所述确定模块,用于利用台标检测算法对视频图像的数据进行检测,确定台标的像素点;根据所述台标的像素点中各个像素点的坐标,确定所述视频图像中的待遮挡区域。
9.根据权利要求6-8任一项所述的装置,其特征在于,所述处理模块用于采用所述待遮挡区域的最外侧的一行像素点的数据,替换所述待遮挡区域中各行像素点的数据;或者,采用所述待遮挡区域的最外侧的一列像素点的数据,替换所述待遮挡区域中各列像素点的数据。
10.根据权利要求6-8任一项所述的装置,其特征在于,所述处理模块用于采用所述待遮挡区域的最后一行像素点的数据,替换所述待遮挡区域中的各行像素点的数据。
11.一种视频图像处理的装置,其特征在于,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取视频图像的数据;
采用获取到的所述数据,确定所述视频图像中的待遮挡区域,所述待遮挡图像区域为矩形区域;
采用所述待遮挡区域中的任一行或列图像数据,替换所述待遮挡区域中的各行或列图像数据,得到替换后的视频图像的数据;
输出所述替换后的视频图像的数据。
CN201510980536.9A 2015-12-23 2015-12-23 视频图像处理方法及装置 Active CN105611373B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510980536.9A CN105611373B (zh) 2015-12-23 2015-12-23 视频图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510980536.9A CN105611373B (zh) 2015-12-23 2015-12-23 视频图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN105611373A CN105611373A (zh) 2016-05-25
CN105611373B true CN105611373B (zh) 2019-03-08

Family

ID=55990861

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510980536.9A Active CN105611373B (zh) 2015-12-23 2015-12-23 视频图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN105611373B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106851332B (zh) * 2017-01-04 2019-09-20 北京百度网讯科技有限公司 视频流处理方法、装置和系统
CN106851397B (zh) * 2017-02-28 2020-03-10 青岛海信电器股份有限公司 一种台标更换方法及装置
CN108079579B (zh) * 2017-12-28 2021-09-28 珠海豹好玩科技有限公司 一种图像处理方法、装置以及终端
CN108198249B (zh) * 2018-03-07 2024-02-02 上海交通大学医学院附属第九人民医院 一种基于虚拟现实技术的视野缺损模拟装置和方法
CN109660870B (zh) * 2018-12-04 2020-12-25 北京奇艺世纪科技有限公司 一种视频遮罩方法、装置及设备
CN109996109B (zh) * 2019-03-19 2021-12-17 北京奇艺世纪科技有限公司 一种图像处理方法和装置
CN112150345A (zh) * 2019-06-28 2020-12-29 北京嗨动视觉科技有限公司 图像处理方法及装置、视频处理方法和发送卡
CN111010606B (zh) * 2019-12-12 2022-02-15 北京金山云网络技术有限公司 视频处理方法和装置
CN112581567A (zh) * 2020-12-25 2021-03-30 腾讯科技(深圳)有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101312540A (zh) * 2008-07-03 2008-11-26 浙江大学 基于深度和遮挡信息的虚拟视点合成方法
CN101610421A (zh) * 2008-06-17 2009-12-23 深圳华为通信技术有限公司 视频通讯方法、装置及系统
CN102281384A (zh) * 2011-07-11 2011-12-14 成都索贝数码科技股份有限公司 用于图像遗弃区域遮蔽方法、装置及视频处理方法、系统
CN103731657A (zh) * 2014-01-26 2014-04-16 冠捷显示科技(厦门)有限公司 一种对dibr算法处理后的含有空洞影像的空洞填充处理方法
CN104318251A (zh) * 2014-10-29 2015-01-28 广州视源电子科技股份有限公司 一种相片实时处理方法和装置
CN104918107A (zh) * 2015-05-29 2015-09-16 小米科技有限责任公司 视频文件的标识处理方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8396302B2 (en) * 2011-01-11 2013-03-12 Intel Corporation Method of detecting logos, titles, or sub-titles in video frames

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101610421A (zh) * 2008-06-17 2009-12-23 深圳华为通信技术有限公司 视频通讯方法、装置及系统
CN101312540A (zh) * 2008-07-03 2008-11-26 浙江大学 基于深度和遮挡信息的虚拟视点合成方法
CN102281384A (zh) * 2011-07-11 2011-12-14 成都索贝数码科技股份有限公司 用于图像遗弃区域遮蔽方法、装置及视频处理方法、系统
CN103731657A (zh) * 2014-01-26 2014-04-16 冠捷显示科技(厦门)有限公司 一种对dibr算法处理后的含有空洞影像的空洞填充处理方法
CN104318251A (zh) * 2014-10-29 2015-01-28 广州视源电子科技股份有限公司 一种相片实时处理方法和装置
CN104918107A (zh) * 2015-05-29 2015-09-16 小米科技有限责任公司 视频文件的标识处理方法及装置

Also Published As

Publication number Publication date
CN105611373A (zh) 2016-05-25

Similar Documents

Publication Publication Date Title
CN105611373B (zh) 视频图像处理方法及装置
CN110620946B (zh) 字幕显示方法及装置
US9674395B2 (en) Methods and apparatuses for generating photograph
EP3154270B1 (en) Method and device for adjusting and displaying an image
US9323982B2 (en) Display apparatus for performing user certification and method thereof
CN105491289B (zh) 防止拍照遮挡的方法及装置
CN108399349B (zh) 图像识别方法及装置
EP3291533A1 (en) Terminal and controlling method thereof
US10007841B2 (en) Human face recognition method, apparatus and terminal
US9924226B2 (en) Method and device for processing identification of video file
CN108712603B (zh) 一种图像处理方法及移动终端
US10217487B2 (en) Method and device for controlling playback
US10264209B2 (en) Mobile terminal and controlling method thereof
US20180107360A1 (en) Mobile terminal and method for controlling the same
US11545188B2 (en) Video processing method, video playing method, devices and storage medium
EP3379805B1 (en) Method, apparatus for controlling a smart device and computer storage medium
KR20170048555A (ko) 홍채 이미지 획득 방법 및 장치, 및 홍채 인식 장치
KR20160127606A (ko) 이동 단말기 및 그 제어 방법
US20220084237A1 (en) Method and apparatus for determining an icon position
CN107507128A (zh) 图像处理方法及设备
CN107820116B (zh) 视频播放方法及装置
US9449369B2 (en) Image processing apparatus and control method thereof
CN110620947A (zh) 字幕显示区域确定方法及装置
CN108108685B (zh) 进行面部识别处理的方法和装置
CN105120302A (zh) 视频处理方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant