CN113645469A - 图像处理方法、装置、智能终端及计算机可读存储介质 - Google Patents

图像处理方法、装置、智能终端及计算机可读存储介质 Download PDF

Info

Publication number
CN113645469A
CN113645469A CN202010391456.0A CN202010391456A CN113645469A CN 113645469 A CN113645469 A CN 113645469A CN 202010391456 A CN202010391456 A CN 202010391456A CN 113645469 A CN113645469 A CN 113645469A
Authority
CN
China
Prior art keywords
image
sub
processed
target
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010391456.0A
Other languages
English (en)
Other versions
CN113645469B (zh
Inventor
余俊卿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010391456.0A priority Critical patent/CN113645469B/zh
Publication of CN113645469A publication Critical patent/CN113645469A/zh
Application granted granted Critical
Publication of CN113645469B publication Critical patent/CN113645469B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请实施例提供了一种图像处理方法,其中方法包括:对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,第一子图像对应的图像通道为颜色通道,第二子图像对应的图像通道为透明通道;按照目标图像处理方式对第二子图像进行处理,得到处理后的中间图像;将中间图像和第一子图像进行拼接处理,得到拼接图像;对拼接图像进行编码,得到待处理图像的编码数据。采用上述方式,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,还可以在保存图像透明信息的同时,有效降低图像的大小,有利于提高图像的解码成功率。

Description

图像处理方法、装置、智能终端及计算机可读存储介质
技术领域
本申请涉及图像处理技术领域,尤其涉及一种图像处理方法、一种图像处理装置以及智能终端和计算机可读存储介质。
背景技术
在图形图像学中,颜色通道代表数字图像中像素点的颜色信息,透明通道代表数字图像中像素点的透明信息。每张图像都有一个或多个颜色通道,图像中默认的颜色通道数取决于其颜色模式,即一张图像的颜色模式将决定其颜色通道的数量。例如,RGB图像有3个颜色通道,分别为红(Red)、绿(Green)、蓝(Blue)。每个颜色通道都存放着图像中颜色元素的信息,所有颜色通道中的颜色叠加混合产生图像中像素点的颜色。透明通道也称Alpha通道,白色的Alpha像素用以定义不透明的彩色像素,而黑色的Alpha像素定义透明像素,黑白之间的灰阶Alpha像素则定义彩色图像中的半透明像素。
目前,在对图像进行编码处理时,会丢弃图像的透明通道(或者说透明信息),这会使得解码得到的图像丢失原有的透明信息,图像还原度较低。
发明内容
本申请实施例提供了一种图像处理方法、装置、智能终端及计算机可读存储介质,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,还可以在保存图像透明信息的同时,有效降低图像的大小,有利于提高图像的解码成功率。
一方面,本申请实施例提供了一种图像处理方法,所述方法包括:
对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
对所述拼接图像进行编码,得到所述待处理图像的编码数据。
在一实施例中,所述按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,包括:
对所述第二子图像进行压缩处理,得到压缩处理后的图像,其中,所述压缩处理后的图像的宽和高分别为所述第二子图像的宽和高的1/N,所述N为大于1的整数;
将所述压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,其中,所述M为大于1的整数。
在一实施例中,所述将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像,包括:
将所述M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;
将所述第一子图像和所述拼接后的中间图像沿所述第一图像方向进行拼接,得到拼接图像,其中,所述第一图像方向与所述第二图像方向垂直。
在一实施例中,目标中间图像在所述压缩处理后的图像对应的所述M张中间图像沿所述第一图像方向的排列结果中的排列顺序,与在所述拼接后的中间图像对应的所述M张中间图像沿所述第二图像方向的排列结果中的排列顺序相同;其中,所述目标中间图像为所述M张中间图像中的任意一张。
在一实施例中,所述M与所述N相等,所述M张中间图像中的各张图像的尺寸相同。
在一实施例中,所述按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,包括:
将所述第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,所述压缩后的中间图像在所述目标图像方向上的尺寸为所述第二子图像在所述目标图像方向上的尺寸的1/X,所述X为大于1的整数;
其中,所述将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像,包括:
将所述第一子图像和所述压缩后的中间图像沿所述目标图像方向进行拼接,得到拼接图像。
在一实施例中,所述对所述拼接图像进行编码,得到所述待处理图像的编码数据之后,所述方法还包括:
将所述编码数据发送给解码端,以便于所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值;
其中,在对所述编码数据进行解码时,目标像素点的解码值是根据所述目标像素点的编码值以及根据所述目标像素点的坐标在目标区域上确定的匹配像素点的编码值得到的,所述目标像素点是所述拼接图像中所述第一子图像所对应图像区域中的像素点,所述目标区域是所述拼接图像中所述处理后的中间图像所对应的图像区域。
在一实施例中,所述匹配像素点的坐标是根据所述目标像素点的坐标、所述拼接图像的尺寸、所述中间图像所对应的压缩比例、所述中间图像所对应的分割比例中的一种或者多种确定的。
在一实施例中,所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像之前,所述方法还包括:
获取图像集合,所述图像集合是根据视频、动态图、序列帧中的任一种得到的;
从所述图像集合中获取待处理图像,以便于执行所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像的步骤;
其中,所述待处理图像为所述图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。
一方面,本申请实施例提供了一种图像处理装置,所述装置包括:
第一处理单元,用于对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
第二处理单元,用于按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
拼接单元,用于将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
编码单元,用于对所述拼接图像进行编码,得到所述待处理图像的编码数据。
在一实施例中,所述第二处理单元,具体用于:
对所述第二子图像进行压缩处理,得到压缩处理后的图像,其中,所述压缩处理后的图像的宽和高分别为所述第二子图像的宽和高的1/N,所述N为大于1的整数;将所述压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,其中,所述M为大于1的整数。
在一实施例中,所述拼接单元,具体用于:
将所述M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;将所述第一子图像和所述拼接后的中间图像沿所述第一图像方向进行拼接,得到拼接图像,其中,所述第一图像方向与所述第二图像方向垂直。
在一实施例中,目标中间图像在所述压缩处理后的图像对应的所述M张中间图像沿所述第一图像方向的排列结果中的排列顺序,与在所述拼接后的中间图像对应的所述M张中间图像沿所述第二图像方向的排列结果中的排列顺序相同;其中,所述目标中间图像为所述M张中间图像中的任意一张。
在一实施例中,所述M与所述N相等,所述M张中间图像中的各张图像的尺寸相同。
在一实施例中,所述第二处理单元,具体用于:
将所述第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,所述压缩后的中间图像在所述目标图像方向上的尺寸为所述第二子图像在所述目标图像方向上的尺寸的1/X,所述X为大于1的整数;
其中,所述拼接单元,具体用于:将所述第一子图像和所述压缩后的中间图像沿所述目标图像方向进行拼接,得到拼接图像。
在一实施例中,所述装置还包括收发单元,所述收发单元用于:
将所述编码数据发送给解码端,以便于所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值;
其中,在对所述编码数据进行解码时,目标像素点的解码值是根据所述目标像素点的编码值以及根据所述目标像素点的坐标在目标区域上确定的匹配像素点的编码值得到的,所述目标像素点是所述拼接图像中所述第一子图像所对应图像区域中的像素点,所述目标区域是所述拼接图像中所述处理后的中间图像所对应的图像区域。
在一实施例中,所述匹配像素点的坐标是根据所述目标像素点的坐标、所述拼接图像的尺寸、所述中间图像所对应的压缩比例、所述中间图像所对应的分割比例中的一种或者多种确定的。
在一实施例中,所述装置还包括获取单元,所述获取单元用于:
获取图像集合,所述图像集合是根据视频、动态图、序列帧中的任一种得到的;从所述图像集合中获取待处理图像,以便于执行所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像的步骤;
其中,所述待处理图像为所述图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。
一方面,本申请实施例提供了一种智能终端,包括:处理器和存储器,所述存储器存储有可执行程序代码,所述处理器用于调用所述可执行程序代码,执行上述图像处理方法。
相应地,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述图像处理方法。
本申请实施例通过将待处理图像分离成包括颜色通道的第一子图像和包括透明通道的第二子图像,将对第二子图像进行处理得到的中间图像和第一子图像进行拼接处理,得到拼接图像,对拼接图像进行编码,得到待处理图像的编码数据,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,还可以在保存图像透明信息的同时,有效降低图像的大小,有利于提高图像的解码成功率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种图像处理方法的流程示意图;
图2是本申请实施例提供的一组带透明通道的动画序列帧;
图3示出了图2中图像10的透明通道分离结果;
图4示出了图3中图像202压缩后的结果;
图5示出了图4中图像203的分割方式;
图6是本申请实施例提供的一种图像拼接方式的示意图;
图7a是本申请实施例提供的一种图像处理方式的示意图;
图7b是本申请实施例提供的另一种图像处理方式的示意图;
图8a是本申请实施例提供的另一种图像拼接方式的示意图;
图8b是本申请实施例提供的又一种图像拼接方式的示意图;
图9是本申请实施例提供的又一种图像处理方式的示意图;
图10是本申请实施例提供的又一种图像处理方式的示意图;
图11是本申请实施例提供的另一种图像处理方法的流程示意图;
图12是本申请实施例提供的又一种图像处理方法的流程示意图;
图13是本申请实施例提供的一种图像处理装置的结构示意图;
图14是本申请实施例提供的一种智能终端的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
目前,在对图像进行编码处理时,会丢弃图像的透明通道(或者说透明信息)。如H.264(高度压缩数字视频编解码器标准)协议不支持透明通道,又如采用视频编码格式QuickTime编码后的图像由于通常无法在解码端进行硬件解码(利用图形处理器GPU资源解码的方案),故在编码时也会丢弃图像的透明通道。编码时丢弃图像的透明通道会使得解码得到的图像丢失原有的透明信息,图像还原度较低。
为在图像编码时保留图像的透明通道,可以将透明通道和颜色通道1:1压制,解码后再做像素的合成。但这种方式会导致解码时图像分辨率较大,这会增大解码压力,从而增加解码失败率,并且解码时内存占用较高,相比原图像翻倍。例如:一张1024*1920分辨率的图像通过此种方式会生成一个2048*1920分辨率的图像,相比原图像增加100%大小。
基于此,本申请实施例提供了一种图像处理方法以解决上述问题。该图像处理方法包括如下步骤:对待处理图像进行透明通道分离处理,得到不带透明通道的第一子图像和仅带透明通道的第二子图像;按照目标图像处理方式对仅带透明通道的第二子图像进行处理,得到处理后的中间图像,其中,目标图像处理方式包括图像压缩和图像分割中的至少一种,中间图像可以是一张或者多张;进一步地,将处理得到的中间图像和第一子图像进行拼接处理,得到拼接图像,拼接图像包括待处理图像的颜色信息和透明信息;最后对拼接图像进行编码,得到待处理图像的编码数据。采用上述方式,一方面可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像;另外由于对仅带透明通道的子图像进行了压缩和/或分割处理,从而可以在保存图像透明信息的同时,有效降低拼接图像的大小(或者说分辨率),这有利于减小解码压力,提高图像的解码成功率,还可以降低占用的内存,节省存储资源。另外,将不带透明通道的子图像和仅有透明通道的中间图像拼接成一张图像,有利于在解码时快速获取像素点的透明信息,提高解码效率。除此之外,上述图像处理方式可以适用于多种编码方式,不仅可以在编码处理时保留透明通道,并且支持硬件解码。以上介绍了该图像处理方法的主要步骤,下面对该图像处理方法的各个步骤进行详细描述。
本发明实施例提供的图像处理方法可以由具备图像处理(图像压缩、图像分割等)和图像编码功能的智能终端执行。智能终端可以是智能手机(如Android手机、iOS手机等)、平板电脑、个人计算机、工作站、服务器、移动互联网设备(Mobile Internet Devices,简称MID)等计算机设备。
请参阅图1,图1为本申请实施例提供的一种图像处理方法的流程示意图。本申请实施例中所描述的图像处理方法包括但不限于以下步骤:
S101、智能终端对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像。其中,第一子图像对应的图像通道为颜色通道,第二子图像对应的图像通道为透明通道。
本申请实施例中,待处理图像所对应的图像通道包括颜色通道和透明通道,也即是说待处理图像中的各像素点包括颜色信息和透明信息,颜色信息包括各种颜色对应的色值,透明信息包括透明度。智能终端对待处理图像进行透明通道分离,将待处理图像分离成不带透明通道的第一子图像和仅有透明通道的第二子图像。不带透明通道的第一子图像也即是仅有颜色通道的图像,第一子图像中的各像素点仅包括颜色信息,不包括透明信息;仅有透明通道的第二子图像中的各像素点仅包括透明信息,不包括颜色信息。将待处理图像先分离成仅有颜色通道的第一子图像和仅有透明通道的第二子图像,以便于后续对仅有透明通道的第二子图像进行图像压缩和/或图像分割处理,并将处理得到的中间图像和仅有颜色通道的第一子图像进行拼接处理,以使得拼接得到的图像在包括待处理图像的颜色信息和透明信息的基础上,具备较小的图像大小,这有利于减小解码压力,提高图像的解码成功率。
例如,待处理图像包括RGB((Red Green Blue,红绿蓝)三个颜色通道和透明通道Alpha,待处理图像中的像素点对应的像素值记为(Red,Green,Blue,Alpha)。其中,颜色值(Red,Green,Blue)表示像素点的颜色信息,各种颜色叠加混合产生像素点的颜色;透明度值(Alpha)表示像素点的透明信息,也即是表示像素点的透明度,Alpha值越小,透明度越高,反之,透明度越低。对待处理图像进行透明通道分离后,分离得到的仅有颜色通道的第一子图像中的像素点的像素值为(Red,Green,Blue),即像素点只包括颜色信息;分离得到的仅有透明通道的第二子图像中的像素点的像素值为(Alpha,Alpha,Alpha),即像素点只包括透明信息。如,待处理图像原图中某像素点的像素值为(50,110,230,100),则分离得到的第一子图像中与该某像素点相匹配的像素点的像素值(颜色值)为(50,110,230),分离得到的第二子图像中与该某像素点相匹配的像素点的像素值(透明度值)为(100,100,100)。
在一实施方式中,待处理图像是事先获取到的图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。智能终端在获取到视频、动态图、序列帧中的任意一种之后,从获取到的视频、动态图或者序列帧中获取其包括的多帧图像,并根据获取到的多帧图像确定图像集合。其中,获取到的视频、动态图或者序列帧中的图像带有透明通道;智能终端获取到的视频、动态图或者序列帧,可以是事先存储在智能终端本地,也可以是其他计算机设备发送给智能终端的,还可以是智能终端根据其配置的拍摄设备采集到的图像生成的。例如,如图2所示,图像1-图像10为一组带透明通道的动画序列帧,图像1-图像10构成了图像集合,待处理图像可以是图像1-图像10中的任一张图像。
如图3所示,示出了图2中图像10的透明通道分离结果,图3中的图像201为图像10对应的不带透明通道的第一子图像,图3中的图像202为图像10对应的仅有透明通道的第二子图像。其中,图像10、第一子图像201以及第二子图像202的尺寸均为W(宽)*H(高)。
S102、所述智能终端按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像。其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种,所述中间图像可以是一张或者多张。将仅有透明通道的第二子图像进行图像压缩和/或图像分割处理,以便于后续将处理得到的中间图像和仅有颜色通道的第一子图像进行拼接处理,这可以使得拼接得到的图像在缺失待处理图像的少量透明信息的基础上保留待处理图像的完整颜色信息,从而有利于在后续图像解码时获得还原度较高的图像。
本申请实施例中,智能终端按照目标图像处理方式对第二子图像进行处理的方式包括:
方式一:智能终端先对第二子图像进行压缩处理,使得压缩处理后的图像的宽和高分别为第二子图像的原始宽和高的1/N,N为大于1的整数,如2、3、4、5等。进一步地,智能终端将压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,M为大于1的整数。其中,第一图像方向可以是图像的宽所在的方向,也可以是图像的高所在的方向。
在一实施方式中,M与N相等;M张中间图像中的各张图像的尺寸相同,即对该压缩处理后的图像采用的是等比分割。采用此分割方式,有利于提高后续图像拼接的效率,并且有利于提高后续图像解码时的像素点匹配效率。
例如,如图4和图5所示,图4中的图像203为将图3中的第二子图像202压缩处理后的图像,图像203的尺寸为(W/2)*(H/2),图像203的宽为第二子图像202的宽的1/2,图像203的高为第二子图像202的高的1/2。如图5所示,将图像203沿图像的宽所在的方向进行等比分割后,得到2张中间图像,分别为中间图像2031和中间图像2032。中间图像2031和2032的尺寸均为(W/4)*(H/2)。其中,在图中所示的图像坐标系下,图像的宽所在的方向,也即是X轴方向(或者说水平方向)。
又例如,如图7a或图7b所示,图7a或图7b中的图像201为对待处理图像进行透明通道分离后得到的不带透明通道的第一子图像,图像202为对待处理图像进行透明通道分离后得到的仅有透明通道的第二子图像;图像203为将第二子图像202压缩处理后的图像,图像203的尺寸为(W/3)*(H/3),图像203的宽为第二子图像202的宽的1/3,图像203的高为第二子图像202的高的1/3。将图像203沿图像的高所在的方向进行等比分割后,得到3张中间图像,分别为中间图像2031、2032和2033。中间图像2031、2032和2033的尺寸均为(W/3)*(H/9)。其中,在图中所示的图像坐标系下,图像的高所在的方向,也即是Y轴方向(或者说竖直方向)。
又例如,如图9所示,图9中的图像201为对待处理图像进行透明通道分离后得到的不带透明通道的第一子图像,图像202为对待处理图像进行透明通道分离后得到的仅有透明通道的第二子图像;图像203为将第二子图像202压缩处理后的图像,图像203的尺寸为(W/2)*(H/2),图像203的宽为第二子图像202的宽的1/2,图像203的高为第二子图像202的高的1/2。将图像203沿图像的宽所在的方向进行非等比分割后,得到2张中间图像,分别为中间图像2031和中间图像2032。中间图像2031和中间图像2032的尺寸不同,中间图像2031的尺寸为(W/6)*(H/2),而中间图像2032的尺寸为(W/3)*(H/2)。其中,在图中所示的图像坐标系下,图像的宽所在的方向,也即是X轴方向(或者说水平方向)。
方式二:智能终端将第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,压缩后的中间图像在目标图像方向上的尺寸为第二子图像在目标图像方向上的尺寸的1/X,X为大于1的整数;目标图像方向可以是图像的宽所在的方向,也可以是图像的高所在的方向。
例如,如图10所示,图10中的图像201为对待处理图像进行透明通道分离后得到的不带透明通道的第一子图像,图像202为对待处理图像进行透明通道分离后得到的仅有透明通道的第二子图像;图像203为将第二子图像202沿图像的宽所在的方向压缩处理后得到的中间图像。在图中所示的图像坐标系下,图像的宽所在的方向X轴方向,也即是X轴方向(或者说水平方向)。中间图像203的尺寸为(W/3)*H,中间图像203的宽为第二子图像202的宽的1/3,中间图像203的高与第二子图像202的高的相同。
S103、所述智能终端将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像。其中,拼接图像包括第一子图像对应的图像区域以及第二子图像(或者说中间图像)对应的图像区域,也即是说拼接图像包括待处理图像的颜色信息和透明信息。
本申请实施例中,当采用上述方式一对第二子图像进行处理时,智能终端采用如下方式对中间图像和第一子图像进行拼接处理。智能终端先将分割得到的M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;然后将第一子图像和该拼接后的中间图像沿第一图像方向进行拼接,得到最终的拼接图像。其中,第二图像方向与第一图像方向垂直,也即是说,当第一图像方向为图像的宽所在的方向时,第二图像方向为图像的高所在的方向;当第一图像方向为图像的高所在的方向时,第二图像方向为图像的宽所在的方向。
在一实施方式中,目标中间图像在压缩处理后的图像对应的该M张中间图像沿第一图像方向的排列结果中的排列顺序,与在拼接后的中间图像对应的该M张中间图像沿第二图像方向的排列结果中的排列顺序相同;其中,目标中间图像为分割得到的M张中间图像中的任意一张。采用此拼接方式,有利于提高后续图像解码时的像素点匹配效率。
例如,若采用的是图4和图5所示的图像处理方式对第二子图像进行的处理,则相应地拼接处理方式如图6所示,先将中间图像2031和中间图像2032沿图像的高所在的方向(Y轴方向或者说竖直方向)进行拼接,得到拼接后的中间图像204;其中,中间图像2031和中间图像2032沿X轴和Y轴方向的排列顺序均为:中间图像2031→中间图像2032。然后将中间图像204拼接到第一子图像201的右侧,得到最终的拼接图像205。需要说明的是,也可以将中间图像204拼接到第一子图像201的左侧,得到最终的拼接图像。也可以在拼接时将中间图像2032放置在中间图像2031的上面,即中间图像2031和中间图像2032沿Y轴方向的排列顺序为:中间图像2032→中间图像2031;然后将按照此方式拼接得到的中间图像拼接到第一子图像201的左侧或者右侧,得到最终的拼接图像。
又例如,若采用的是图7a所示的图像处理方式对第二子图像进行的处理,则相应地拼接处理方式如图7a和图8a所示。如图7a所示,先将中间图像2031、2032和2033沿图像的宽所在的方向(X轴方向或者说水平方向)进行拼接,得到拼接后的中间图像204;其中,中间图像2031、2032和2033沿Y轴和X轴方向的排列顺序均为:中间图像2031→中间图像2032→中间图像2033。如图8a所示,然后将中间图像204拼接到第一子图像201的下侧或上侧,得到最终的拼接图像205。
又例如,若采用的是图7b所示的图像处理方式对第二子图像进行的处理,则相应地拼接处理方式如图7b和图8b所示。如图7b所示,先将中间图像2031、2033和2032沿图像的宽所在的方向(X轴方向或者说水平方向)进行拼接,得到拼接后的中间图像204;其中,中间图像2031、2032和2033沿Y轴方向的排列顺序为:中间图像2031→中间图像2032→中间图像2033;而沿X轴方向的排列顺序为:中间图像2031→中间图像2033→中间图像2032。如图8b所示,然后将中间图像204拼接到第一子图像201的下侧或上侧,得到最终的拼接图像205。
又例如,若采用的是图9所示的图像处理方式对第二子图像进行的处理,则相应地拼接处理方式如图9所示,先将中间图像2031和中间图像2032沿图像的高所在的方向(Y轴方向或者说竖直方向)进行拼接;由于中间图像2031和2032的尺寸不同,可以对拼接得到的图像进行图像填充,图9中206所示区域为图像填充区域,由于中间图像2031和2032在拼接时是左对齐的,故图像填充区域206位于中间图像2031的右侧;对拼接得到的图像填充完成后,得到拼接后的中间图像204。然后将中间图像204拼接到第一子图像201的右侧,得到最终的拼接图像205。需要说明的是,也可以将中间图像204拼接到第一子图像201的左侧,得到最终的拼接图像。也可以在对中间图像2031和2032沿竖直方向进行拼接时,将中间图像2031和2032右对齐,此时图像填充区域应位于中间图像2031的左侧。另外,中间图像2031和2032的拼接位置可以互换。
当采用上述方式二对第二子图像进行处理时,智能终端采用如下方式对中间图像和第一子图像进行拼接处理。智能终端将第一子图像和该压缩后的中间图像沿目标图像方向进行拼接,得到最终的拼接图像。
例如,若采用的是图10所示的图像处理方式对第二子图像进行的处理,则相应地拼接处理方式如图10所示,将中间图像203拼接到第一子图像201的右侧,得到最终的拼接图像205。需要说明的是,也可以将中间图像203拼接到第一子图像201的左侧,得到最终的拼接图像。
S104、所述智能终端对所述拼接图像进行编码,得到所述待处理图像的编码数据。
本申请实施例中,编码数据包括第一子图像中的各像素点的编码值,该编码值包括用于表示颜色信息的颜色值;编码数据还包括第二子图像对应的中间图像中各像素点的编码值,该编码值包括用于表示透明信息的透明度值。其中,编码数据还可以包括拼接图像的尺寸、中间图像所对应的压缩比例、中间图像所对应的分割比例中的一种或者多种。在一实施方式中,智能终端可采用高度压缩数字视频编解码器标准H.264对该拼接图像进行编码,得到待处理图像的编码数据。
本申请实施例通过将待处理图像分离成包括颜色通道的第一子图像和包括透明通道的第二子图像,将对第二子图像进行处理得到的中间图像和第一子图像进行拼接处理,得到拼接图像,对拼接图像进行编码,得到待处理图像的编码数据,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,另外由于对仅带透明通道的子图像进行了压缩和/或分割处理,从而可以在保存图像透明信息的同时,有效降低拼接图像的大小(或者说分辨率),例如:一张1024*1920分辨率的图像通过图4、图5和图6所示的方式会生成一个1280*1920分辨率的图像,相比原图像增加25%大小,相对于采用将透明通道和颜色通道1:1压制的方式生成的2048*1920分辨率的图像,本方案有效降低了图像的分辨率。这有利于减小解码压力,提高图像的解码成功率,还可以降低占用的内存,节省存储资源。另外,将不带透明通道的子图像和仅有透明通道的中间图像拼接成一张图像,有利于在解码时快速获取像素点的透明信息,提高解码效率。除此之外,上述图像处理方式可以适用于多种编码方式,不仅可以在编码处理时保留透明通道,并且支持硬件解码。
采用本方案提供的图像处理方法在针对带透明通道的动画图像(视频、动态图、序列帧)进行处理时,智能终端(或者说编码端)所执行的主要步骤如图11所示:将带透明通道的视频、动态图或者序列帧中包括的多张图像按顺序(如图像的显示顺序)分离成序列帧;针对分离得到的序列帧中的每一张图像,先对图像进行透明通道分离,得到不带透明通道的子图像和仅带透明通道的子图像;然后压缩仅带透明通道的子图像的图像大小,使得压缩后的图像宽高分别为原图像宽高的1/N;将压缩后的图像沿第一图像方向等比分割成M张中间图像,M可以与N相等;将分割得到的M张中间图像沿第二图像方向拼接成第一拼接图像,第二图像方向和第一图像方向垂直;进一步地,将不带透明通道的子图像和第一拼接图像沿第一图像方向拼接成第二拼接图像。采用上述处理方式完成对分离得到的序列帧中的每一张图像的处理之后,根据得到的多张第二拼接图像形成新的序列帧,并对新的序列帧中的各拼接图像按顺序进行编码得到编码数据,或者说利用图像编码方式(如H.264编码)将新的序列帧中的各拼接图像按顺序编码压缩成视频。
在一实施例中,本申请实施例提供的图像处理方法中,在智能终端(编码端)对该拼接图像进行编码,得到待处理图像的编码数据之后,也即是步骤S104之后,还包括图12所示的如下步骤:
S105、所述智能终端(编码端)将所述编码数据发送给解码端。
本申请实施例中,解码端是具备图像解码以及图像处理功能的计算机设备。编码端可以通过无线通信(例如4G、Wifi等)或者有线通信的方式将该编码数据发送给解码端。
相应地,解码端接收编码端发送的编码数据。
S106、所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值。
在一实施方式中,解码端对编码数据进行解码时,包括如下步骤:
S1061、根据所述编码数据获取目标像素点的编码值。
本申请实施例中,目标像素点是拼接图像中第一子图像所对应图像区域中的像素点;该编码值包括用于表示颜色信息的颜色值。
S1062、根据所述目标像素点的坐标在目标区域上确定匹配像素点,并根据所述编码数据获取所述匹配像素点的编码值。
本申请实施例中,目标区域是拼接图像中第二子图像(或者说中间图像)所对应的图像区域。该匹配像素点的编码值包括用于表示透明信息的透明度值。在一实施方式中,解码端可以根据拼接图像的尺寸、中间图像所对应的压缩比例、中间图像所对应的分割比例中的一种或者多种以及目标像素点的坐标,确定与目标像素点相匹配的匹配像素点的坐标。
例如,若采用的是图4、图5以及图6所示的方式对待处理图像进行的处理,则处理得到的拼接图像205的尺寸(或者说分辨率)为W1*H,其中,W1=1.25W;在图中所示的坐标系下,针对拼接图像中不带透明通道的图像区域中的任一目标像素点(x,y),目标像素点(x,y)与拼接图像中仅有透明通道的图像区域中与目标像素点(x,y)相匹配的匹配像素点(x1,y1)之间的坐标映射关系如下:
当x≤(W1*0.8)/2时,x1=x/2+0.8*W1,y1=y/2,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/2+0.8*W1),y/2)的像素点匹配。
当(W1*0.8)/2<x<W1*0.8时,x1=x/2+0.6*W1,y1=y/2+H/2,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/2+0.6*W1),(y/2+H/2))的像素点匹配。需要说明的是,在计算匹配像素点的坐标值时,可以向上取整。
又例如,若采用的是图7a以及图8a所示的方式对待处理图像进行的处理,则处理得到的拼接图像205的尺寸(或者说分辨率)为W*H1,其中,H1=10*H/9;在图中所示的坐标系下,针对图8a左图所示的拼接图像中不带透明通道的图像区域中的任一目标像素点(x,y),目标像素点(x,y)与图8a左图所示的拼接图像中仅有透明通道的图像区域中与目标像素点(x,y)相匹配的匹配像素点(x1,y1)之间的坐标映射关系如下:
当y≤(H1*0.9)/3时,y1=y/3+0.9*H1,x1=x/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为(x/3,(y/3+0.9*H1))的像素点匹配。
当(H1*0.9)/3<y≤(H1*0.9)*2/3时,y1=y/3+0.8*H1,x1=x/3+W/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/3+W/3),(y/3+0.8*H1))的像素点匹配。
当(H1*0.9)*2/3<y≤H1*0.9时,y1=y/3+0.7*H1,x1=x/3+W*2/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/3+W*2/3),(y/3+0.7*H1))的像素点匹配。
在图中所示的坐标系下,针对图8a右图所示的拼接图像中不带透明通道的图像区域中的任一目标像素点(x,y),目标像素点(x,y)与图8a右图所示的拼接图像中仅有透明通道的图像区域中与目标像素点(x,y)相匹配的匹配像素点(x1,y1)之间的坐标映射关系如下:
当0.1*H1<y≤0.4*H1时,y1=y/3-H1*1/30,x1=x/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为(x/3,(y/3-H1*1/30))的像素点匹配。
当0.4*H1<y≤0.7*H1时,y1=y/3-H1*4/30,x1=x/3+W/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/3+W/3),(y/3-H1*4/30))的像素点匹配。
当0.7*H1<y≤H1时,y1=y/3-H1*7/30,x1=x/3+W*2/3,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/3+W*2/3),(y/3-H1*7/30))的像素点匹配。
需要说明的是,在计算匹配像素点的坐标值时,可以向上取整。
又例如,若采用的是图9所示的方式对待处理图像进行的处理,则处理得到的拼接图像205的尺寸(或者说分辨率)为W2*H,其中,W2=W*4/3;在图中所示的坐标系下,针对拼接图像中不带透明通道的图像区域中的任一目标像素点(x,y),目标像素点(x,y)与拼接图像中仅有透明通道的图像区域中与目标像素点(x,y)相匹配的匹配像素点(x1,y1)之间的坐标映射关系如下:
当x≤(W2*0.75)/3时,x1=x/2+0.75*W2,y1=y/2,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/2+0.75*W2),y/2)的像素点匹配。
当(W2*0.75)/3<x≤W2*0.75时,x1=x/2+W2*5/8,y1=y/2+H/2,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/2+W2*5/8),(y/2+H/2))的像素点匹配。需要说明的是,在计算匹配像素点的坐标值时,可以向上取整。
又例如,若采用的是图10所示的方式对待处理图像进行的处理,则处理得到的拼接图像205的尺寸(或者说分辨率)为W3*H,其中,W3=W*4/3;在图中所示的坐标系下,针对拼接图像中不带透明通道的图像区域中的任一目标像素点(x,y),目标像素点(x,y)与拼接图像中仅有透明通道的图像区域中与目标像素点(x,y)相匹配的匹配像素点(x1,y1)之间的坐标映射关系如下:
当x≤W2*0.75时,x1=x/3+0.75*W3,y1=y,也即是拼接图像中坐标为(x,y)的像素点与坐标为((x/3+0.75*W3),y)的像素点匹配。需要说明的是,在计算匹配像素点的坐标值时,可以向上取整。
S1063、根据所述目标像素点的编码值以及所述匹配像素点的编码值确定所述目标像素点的解码值。
本申请实施例中,目标像素点的解码值包括用于表示颜色信息的颜色值和用于表示透明信息的透明度值。例如目标像素点的编码值包括的颜色值为(50,110,230),匹配像素点的编码值包括的透明度值为(100,100,100),则目标像素点的解码值包括的像素点值为(50,110,230,100)。
进一步地,解码端解码得到各目标像素点的解码值之后,根据各目标像素点的解码值可以还原得到待处理图像,还原得到的待处理图像的尺寸为W*H,与原图像一致。即使在图像编码过程由于带透明通道的子图像压缩丢失了少量的透明信息,但还原得到的待处理图像还是包括了大多数的透明信息,故图像还原度较高。另外,由于在图像编码过程对带透明通道的子图像进行了压缩和/或分割处理,故在保存图像透明信息的同时,有效降低了拼接图像的大小(或者说分辨率),例如:一张1024*1920分辨率的图像通过图4、图5和图6所示的方式会生成一个1280*1920分辨率的图像,相比原图像增加25%大小,相对于采用将透明通道和颜色通道1:1压制的方式生成的2048*1920分辨率的图像,本方案有效降低了图像的分辨率。较小分辨率的图像不仅可以降低解码压力,提高图像解码成功率,还可以降低占用的内存,节省存储资源。另外,由于编码时将不带透明通道的子图像和仅有透明通道的中间图像拼接成了一张图像,故在解码时可以快速获取像素点的透明信息,从而提高解码效率。除此之外,采用前文所述的图像处理方式得到的编码图像,支持大多数设备进行硬件解码,硬件解码效率高,功耗低。
需要说明的是,如果前文所述的编码过程是针对带透明通道的动画图像(视频、动态图、序列帧)进行的处理,则针对编码得到的编码数据(或者说视频)采用上述方式进行解码,可以还原得到视频、动态图或者序列帧中的每一帧图像,进而可以解码得到原视频、原动态图或者原序列帧。梁歪上述解码过程也可以由编码端执行,具体实现方式可参考前文描述,此处不再赘述。
请参阅图13,图13为本申请实施例提供的一种图像处理装置的结构示意图。本申请实施例中所描述的图像处理装置,对应于前文所述的智能终端,所述装置包括:
第一处理单元1301,用于对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
第二处理单元1302,用于按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
拼接单元1303,用于将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
编码单元1304,用于对所述拼接图像进行编码,得到所述待处理图像的编码数据。
在一实施例中,所述第二处理单元1302,具体用于:
对所述第二子图像进行压缩处理,得到压缩处理后的图像,其中,所述压缩处理后的图像的宽和高分别为所述第二子图像的宽和高的1/N,所述N为大于1的整数;将所述压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,其中,所述M为大于1的整数。
在一实施例中,所述拼接单元1303,具体用于:
将所述M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;将所述第一子图像和所述拼接后的中间图像沿所述第一图像方向进行拼接,得到拼接图像,其中,所述第一图像方向与所述第二图像方向垂直。
在一实施例中,目标中间图像在所述压缩处理后的图像对应的所述M张中间图像沿所述第一图像方向的排列结果中的排列顺序,与在所述拼接后的中间图像对应的所述M张中间图像沿所述第二图像方向的排列结果中的排列顺序相同;其中,所述目标中间图像为所述M张中间图像中的任意一张。
在一实施例中,所述M与所述N相等,所述M张中间图像中的各张图像的尺寸相同。
在一实施例中,所述第二处理单元1302,具体用于:
将所述第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,所述压缩后的中间图像在所述目标图像方向上的尺寸为所述第二子图像在所述目标图像方向上的尺寸的1/X,所述X为大于1的整数;
其中,所述拼接单元1303,具体用于:将所述第一子图像和所述压缩后的中间图像沿所述目标图像方向进行拼接,得到拼接图像。
在一实施例中,所述装置还包括收发单元1305,所述收发单元用于1305:
将所述编码数据发送给解码端,以便于所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值;
其中,在对所述编码数据进行解码时,目标像素点的解码值是根据所述目标像素点的编码值以及根据所述目标像素点的坐标在目标区域上确定的匹配像素点的编码值得到的,所述目标像素点是所述拼接图像中所述第一子图像所对应图像区域中的像素点,所述目标区域是所述拼接图像中所述处理后的中间图像所对应的图像区域。
在一实施例中,所述匹配像素点的坐标是根据所述目标像素点的坐标、所述拼接图像的尺寸、所述中间图像所对应的压缩比例、所述中间图像所对应的分割比例中的一种或者多种确定的。
在一实施例中,所述装置还包括获取单元1306,所述获取单元1306用于:
获取图像集合,所述图像集合是根据视频、动态图、序列帧中的任一种得到的;从所述图像集合中获取待处理图像,以便于执行所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像的步骤;
其中,所述待处理图像为所述图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。
可以理解的是,本申请实施例的图像处理装置的各功能单元的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
本申请实施例通过将待处理图像分离成包括颜色通道的第一子图像和包括透明通道的第二子图像,将对第二子图像进行处理得到的中间图像和第一子图像进行拼接处理,得到拼接图像,对拼接图像进行编码,得到待处理图像的编码数据,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,还可以在保存图像透明信息的同时,有效降低图像的大小,有利于提高图像的解码成功率。
请参阅图14,图14为本申请实施例提供的一种智能终端的结构示意图。本申请实施例中所描述的智能终端包括:处理器1401、存储器1402及通信接口1403。其中,处理器1401、存储器1402及通信接口1403可通过总线或其他方式连接,本申请实施例以通过总线连接为例。
其中,处理器1401(或称CPU(Central Processing Unit,中央处理器))是终端的计算核心以及控制核心,其可以解析终端内的各类指令以及处理终端的各类数据,例如:CPU可以用于解析用户向终端所发送的开关机指令,并控制终端进行开关机操作;再如:CPU可以在终端内部结构之间传输各类交互数据,等等。通信接口1403可选的可以包括标准的有线接口、无线接口(如Wi-Fi、移动通信接口等),受处理器1401的控制用于收发数据。存储器1402(Memory)是终端中的记忆设备,用于存放程序和数据。可以理解的是,此处的存储器1402既可以包括终端的内置存储器,当然也可以包括终端所支持的扩展存储器。存储器1402提供存储空间,该存储空间存储了终端的操作系统,可包括但不限于:Android系统、iOS系统、Windows Phone系统等等,本申请对此并不作限定。
在本申请实施例中,处理器1401通过运行存储器1402中的可执行程序代码,执行如下操作:
对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
对所述拼接图像进行编码,得到所述待处理图像的编码数据。
在一实施例中,所述处理器1401按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像时,具体用于:对所述第二子图像进行压缩处理,得到压缩处理后的图像,其中,所述压缩处理后的图像的宽和高分别为所述第二子图像的宽和高的1/N,所述N为大于1的整数;将所述压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,其中,所述M为大于1的整数。
在一实施例中,所述处理器1401将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像时,具体用于:将所述M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;将所述第一子图像和所述拼接后的中间图像沿所述第一图像方向进行拼接,得到拼接图像,其中,所述第一图像方向与所述第二图像方向垂直。
在一实施例中,目标中间图像在所述压缩处理后的图像对应的所述M张中间图像沿所述第一图像方向的排列结果中的排列顺序,与在所述拼接后的中间图像对应的所述M张中间图像沿所述第二图像方向的排列结果中的排列顺序相同;其中,所述目标中间图像为所述M张中间图像中的任意一张。
在一实施例中,所述M与所述N相等,所述M张中间图像中的各张图像的尺寸相同。
在一实施例中,所述处理器1401按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像时,具体用于:将所述第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,所述压缩后的中间图像在所述目标图像方向上的尺寸为所述第二子图像在所述目标图像方向上的尺寸的1/X,所述X为大于1的整数;
其中,所述处理器1401将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像时,具体用于:将所述第一子图像和所述压缩后的中间图像沿所述目标图像方向进行拼接,得到拼接图像。
在一实施例中,所述处理器1401对所述拼接图像进行编码,得到所述待处理图像的编码数据之后,还用于:通过通信接口1403将所述编码数据发送给解码端,以便于所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值。
其中,在对所述编码数据进行解码时,目标像素点的解码值是根据所述目标像素点的编码值以及根据所述目标像素点的坐标在目标区域上确定的匹配像素点的编码值得到的,所述目标像素点是所述拼接图像中所述第一子图像所对应图像区域中的像素点,所述目标区域是所述拼接图像中所述处理后的中间图像所对应的图像区域。
在一实施例中,所述匹配像素点的坐标是根据所述目标像素点的坐标、所述拼接图像的尺寸、所述中间图像所对应的压缩比例、所述中间图像所对应的分割比例中的一种或者多种确定的。
在一实施例中,所述处理器1401对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像之前,还用于:获取图像集合,所述图像集合是根据视频、动态图、序列帧中的任一种得到的;从所述图像集合中获取待处理图像,以便于执行所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像的步骤;其中,所述待处理图像为所述图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。
具体实现中,本申请实施例中所描述的处理器1401、通信接口1403及存储器1402可执行本申请实施例提供的一种图像处理方法中所描述的智能终端的实现方式,也可执行本申请实施例提供的一种图像处理装置中所描述的实现方式,在此不再赘述。
本申请实施例通过将待处理图像分离成包括颜色通道的第一子图像和包括透明通道的第二子图像,将对第二子图像进行处理得到的中间图像和第一子图像进行拼接处理,得到拼接图像,对拼接图像进行编码,得到待处理图像的编码数据,不仅可以在图像编码时保存图像的透明信息,从而有利于在图像解码时获得还原度较高的图像,还可以在保存图像透明信息的同时,有效降低图像的大小,有利于提高图像的解码成功率。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行如本申请实施例所述的图像处理方法。
本申请实施例还提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行如本申请实施例所述的图像处理方法。
需要说明的是,对于前述的各个方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(Random AccessMemory,RAM)、磁盘或光盘等。
以上所揭露的仅为本申请部分实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (12)

1.一种图像处理方法,其特征在于,所述方法包括:
对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
对所述拼接图像进行编码,得到所述待处理图像的编码数据。
2.如权利要求1所述的方法,其特征在于,所述按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,包括:
对所述第二子图像进行压缩处理,得到压缩处理后的图像,其中,所述压缩处理后的图像的宽和高分别为所述第二子图像的宽和高的1/N,所述N为大于1的整数;
将所述压缩处理后的图像沿第一图像方向进行分割,得到分割后的M张中间图像,其中,所述M为大于1的整数。
3.如权利要求2所述的方法,其特征在于,所述将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像,包括:
将所述M张中间图像沿第二图像方向进行拼接,得到拼接后的中间图像;
将所述第一子图像和所述拼接后的中间图像沿所述第一图像方向进行拼接,得到拼接图像,其中,所述第一图像方向与所述第二图像方向垂直。
4.如权利要求3所述的方法,其特征在于,目标中间图像在所述压缩处理后的图像对应的所述M张中间图像沿所述第一图像方向的排列结果中的排列顺序,与在所述拼接后的中间图像对应的所述M张中间图像沿所述第二图像方向的排列结果中的排列顺序相同;其中,所述目标中间图像为所述M张中间图像中的任意一张。
5.如权利要求2所述的方法,其特征在于,所述M与所述N相等,所述M张中间图像中的各张图像的尺寸相同。
6.如权利要求1所述的方法,其特征在于,所述按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,包括:
将所述第二子图像沿目标图像方向进行压缩处理,得到压缩后的中间图像,其中,所述压缩后的中间图像在所述目标图像方向上的尺寸为所述第二子图像在所述目标图像方向上的尺寸的1/X,所述X为大于1的整数;
其中,所述将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像,包括:
将所述第一子图像和所述压缩后的中间图像沿所述目标图像方向进行拼接,得到拼接图像。
7.如权利要求1-6任一项所述的方法,其特征在于,所述对所述拼接图像进行编码,得到所述待处理图像的编码数据之后,所述方法还包括:
将所述编码数据发送给解码端,以便于所述解码端对所述编码数据进行解码,得到所述待处理图像对应的各像素点的解码值;
其中,在对所述编码数据进行解码时,目标像素点的解码值是根据所述目标像素点的编码值以及根据所述目标像素点的坐标在目标区域上确定的匹配像素点的编码值得到的,所述目标像素点是所述拼接图像中所述第一子图像所对应图像区域中的像素点,所述目标区域是所述拼接图像中所述处理后的中间图像所对应的图像区域。
8.如权利要求7所述的方法,其特征在于,所述匹配像素点的坐标是根据所述目标像素点的坐标、所述拼接图像的尺寸、所述中间图像所对应的压缩比例、所述中间图像所对应的分割比例中的一种或者多种确定的。
9.如权利要求1所述的方法,其特征在于,所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像之前,所述方法还包括:
获取图像集合,所述图像集合是根据视频、动态图、序列帧中的任一种得到的;
从所述图像集合中获取待处理图像,以便于执行所述对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像的步骤;
其中,所述待处理图像为所述图像集合中所对应图像通道包括颜色通道和透明通道的任意一张图像。
10.一种图像处理装置,其特征在于,所述装置包括:
第一处理单元,用于对待处理图像进行透明通道分离处理,得到第一子图像和第二子图像,其中,所述第一子图像对应的图像通道为颜色通道,所述第二子图像对应的图像通道为透明通道;
第二处理单元,用于按照目标图像处理方式对所述第二子图像进行处理,得到处理后的中间图像,其中,所述目标图像处理方式包括图像压缩和图像分割中的至少一种;
拼接单元,用于将所述中间图像和所述第一子图像进行拼接处理,得到拼接图像;
编码单元,用于对所述拼接图像进行编码,得到所述待处理图像的编码数据。
11.一种智能终端,其特征在于,包括:处理器和存储器,所述处理器和所述存储器相互连接,其中,所述存储器存储有可执行程序代码,所述处理器用于调用所述可执行程序代码,执行如权利要求1-9任一项所述的图像处理方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行如权利要求1-9任一项所述的图像处理方法。
CN202010391456.0A 2020-05-11 2020-05-11 图像处理方法、装置、智能终端及计算机可读存储介质 Active CN113645469B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010391456.0A CN113645469B (zh) 2020-05-11 2020-05-11 图像处理方法、装置、智能终端及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010391456.0A CN113645469B (zh) 2020-05-11 2020-05-11 图像处理方法、装置、智能终端及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN113645469A true CN113645469A (zh) 2021-11-12
CN113645469B CN113645469B (zh) 2022-06-24

Family

ID=78415305

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010391456.0A Active CN113645469B (zh) 2020-05-11 2020-05-11 图像处理方法、装置、智能终端及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN113645469B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114390285A (zh) * 2021-12-30 2022-04-22 科大讯飞股份有限公司 压缩编码方法及数据封装方法和相关装置、设备、介质
CN114863143A (zh) * 2022-05-20 2022-08-05 北京百度网讯科技有限公司 图像检测方法、装置、电子设备及存储介质
WO2024051394A1 (zh) * 2022-09-07 2024-03-14 腾讯科技(深圳)有限公司 视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020126909A1 (en) * 1998-09-21 2002-09-12 Fuji Photo Film Co., Ltd. Image encoding device, image encoding method, recording medium for recording image encoding procedure, and recording medium which records image file
CN101742317A (zh) * 2009-12-31 2010-06-16 北京中科大洋科技发展股份有限公司 一种带阿尔法透明通道的视频压缩编码方法
CN102036059A (zh) * 2009-09-25 2011-04-27 腾讯科技(深圳)有限公司 一种透明图像的压缩和解压缩方法、装置和系统
CN102821279A (zh) * 2012-07-31 2012-12-12 北京天神互动科技有限公司 一种保留alpha通道的图片压缩方法
US20140126814A1 (en) * 2011-11-01 2014-05-08 Zynga Inc. Image compression with alpha channel data
CN105979282A (zh) * 2016-06-02 2016-09-28 腾讯科技(深圳)有限公司 一种动画帧处理方法、服务器、终端及系统
US20190087981A1 (en) * 2017-09-21 2019-03-21 Tiny Pixels Technologies Inc. System and method for coding and decoding of an asset having transparency
CN109785410A (zh) * 2019-01-30 2019-05-21 郑州云海信息技术有限公司 一种图层合并方法、装置及相关组件

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020126909A1 (en) * 1998-09-21 2002-09-12 Fuji Photo Film Co., Ltd. Image encoding device, image encoding method, recording medium for recording image encoding procedure, and recording medium which records image file
CN102036059A (zh) * 2009-09-25 2011-04-27 腾讯科技(深圳)有限公司 一种透明图像的压缩和解压缩方法、装置和系统
CN101742317A (zh) * 2009-12-31 2010-06-16 北京中科大洋科技发展股份有限公司 一种带阿尔法透明通道的视频压缩编码方法
US20140126814A1 (en) * 2011-11-01 2014-05-08 Zynga Inc. Image compression with alpha channel data
CN102821279A (zh) * 2012-07-31 2012-12-12 北京天神互动科技有限公司 一种保留alpha通道的图片压缩方法
CN105979282A (zh) * 2016-06-02 2016-09-28 腾讯科技(深圳)有限公司 一种动画帧处理方法、服务器、终端及系统
US20190087981A1 (en) * 2017-09-21 2019-03-21 Tiny Pixels Technologies Inc. System and method for coding and decoding of an asset having transparency
CN109785410A (zh) * 2019-01-30 2019-05-21 郑州云海信息技术有限公司 一种图层合并方法、装置及相关组件

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
吴振华: "一种基于自适应分块八叉树颜色量化的图像压缩技术", 《计算机工程与科学》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114390285A (zh) * 2021-12-30 2022-04-22 科大讯飞股份有限公司 压缩编码方法及数据封装方法和相关装置、设备、介质
CN114863143A (zh) * 2022-05-20 2022-08-05 北京百度网讯科技有限公司 图像检测方法、装置、电子设备及存储介质
WO2024051394A1 (zh) * 2022-09-07 2024-03-14 腾讯科技(深圳)有限公司 视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品

Also Published As

Publication number Publication date
CN113645469B (zh) 2022-06-24

Similar Documents

Publication Publication Date Title
CN113645469B (zh) 图像处理方法、装置、智能终端及计算机可读存储介质
US11012489B2 (en) Picture file processing method, picture file processing device, and storage medium
CN105959724B (zh) 一种视频数据处理方法以及装置
US20170155899A1 (en) Image compression method and apparatus using matching
US11882297B2 (en) Image rendering and coding method and related apparatus
US8559709B1 (en) Method and apparatus for progressive encoding for text transmission
CN109040792B (zh) 一种视频重定向的处理方法、云终端和云桌面服务器
CN111277829B (zh) 编解码方法及装置
TWI439138B (zh) 呈現影像圖框之非圖框邊緣區塊的強化壓縮
EP3002948A1 (en) Decoder, decoding method, and codec system
WO2019166008A1 (en) Method for processing projection-based frame that includes projection faces packed in cube-based projection layout with padding
CN114040246A (zh) 图形处理器的图像格式转换方法、装置、设备及存储介质
CN110049347B (zh) 在直播界面配置图像的方法、系统、终端和装置
CN114339412B (zh) 视频质量增强方法、移动终端、存储介质及装置
US20120218292A1 (en) System and method for multistage optimized jpeg output
CN110022481A (zh) 视频码流的解码、生成方法及装置、存储介质、电子装置
CN112991412B (zh) 一种液晶仪表序列帧动画性能优化方法及液晶仪表
CN112184538B (zh) 图像加速方法、相关装置、设备及存储介质
CN111246208B (zh) 视频处理方法、装置及电子设备
JP2003087572A (ja) 画像圧縮方法および装置、画像圧縮プログラムならびに画像処理装置
CN111935483A (zh) 一种视频图像无损编解码方法及系统
CN113127637A (zh) 一种字符的还原方法及装置、存储介质、电子装置
CN114938408B (zh) 一种云手机的数据传输方法、系统、设备及介质
CN111953986A (zh) 图像处理方法及装置
CN111314701A (zh) 视频处理方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant