CN111447453B - 图像处理方法及装置 - Google Patents

图像处理方法及装置 Download PDF

Info

Publication number
CN111447453B
CN111447453B CN202010246408.2A CN202010246408A CN111447453B CN 111447453 B CN111447453 B CN 111447453B CN 202010246408 A CN202010246408 A CN 202010246408A CN 111447453 B CN111447453 B CN 111447453B
Authority
CN
China
Prior art keywords
processing unit
macro block
code stream
data code
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010246408.2A
Other languages
English (en)
Other versions
CN111447453A (zh
Inventor
张文强
范志刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Wanxiang Electronics Technology Co Ltd
Original Assignee
Xian Wanxiang Electronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Wanxiang Electronics Technology Co Ltd filed Critical Xian Wanxiang Electronics Technology Co Ltd
Priority to CN202010246408.2A priority Critical patent/CN111447453B/zh
Publication of CN111447453A publication Critical patent/CN111447453A/zh
Application granted granted Critical
Publication of CN111447453B publication Critical patent/CN111447453B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开提供一种图像处理方法及装置,涉及图像处理领域,能够解决处理器对图像进行编码处理时编码效率低的问题。具体技术方案为:第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与待编码帧图像对应的多个宏块以及图像数据;针对每个待编码图像,第一处理单元根据第一预设对应关系从多个宏块中确定与第一处理单元的对应的第一宏块和与第二处理单元的对应的第二宏块,并将第二宏块发送至第二处理单元;第一处理单元对第一宏块进行编码,生成第一数据码流;第二处理单元对第二宏块进行编码,生成第二数据码流。本发明用于提高帧图像编码效率以及第一终端设备中处理器资源的利用率。

Description

图像处理方法及装置
技术领域
本公开涉及图像处理领域,尤其涉及一种图像处理方法及装置。
背景技术
目前,随着计算机性能的提高,在计算机内部,越来越多的芯片都具备多核处理器,并且内核(处理单元)数量还在不断增加。现有的基于处理器对图像进行处理过程时,一帧图像经过宏块划分后,所有的宏块平均分配给处理器的处理单元后完成编码处理。
发明内容
本公开实施例提供一种图像处理方法及装置,能够解决现有技术中处理器对图像进行编码处理时编码效率低的问题。所述技术方案如下:
根据本公开实施例的第一方面,提供一种图像处理方法,应用于第一终端设备,所述第一终端设备包括第一处理单元和第二处理单元,所述方法包括:
第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,所述图像数据包括所述多个宏块的宏块类型;
针对每个待编码图像,所述第一处理单元根据第一预设对应关系从所述多个宏块中确定与所述第一处理单元的对应的第一宏块和与所述第二处理单元的对应的第二宏块,并将所述第二宏块发送至所述第二处理单元,所述第一预设对应关系为处理单元与宏块类型的对应关系;
所述第一处理单元对所述第一宏块进行编码,生成第一数据码流;
所述第二处理单元对接收到的所述第二宏块进行编码,生成第二数据码流。
采用上述方案,该第一处理单元能够根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一处理单元对该第一宏块进行编码,生成第一数据码流;该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流,高性能的处理单元能够对视频类型的宏块进行编码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块进行编码处理,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。
在一个实施例中,所述第二处理单元对接收到的所述第二宏块进行编码后,所述方法还包括:
所述第二处理单元将所述第二数据码流发送至所述第一处理单元;
所述第一处理单元根据所述第一数据码流和接收到的所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备;
或者,所述第一处理单元将所述第一数据码流发送至所述第二处理单元;
所述第二处理单元根据接收到的所述第一数据码流和所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备。
在一个实施例中,所述第一处理单元对所述第一宏块进行编码包括:
所述第一处理单元生成所述第一宏块的第一运动向量;
所述第一处理单元确定所述第一宏块的颜色空间是否为与所述第一处理单元匹配的颜色空间;
若是,则所述第一处理单元根据所述运动向量对所述第一宏块进行编码;
若否,则所述第一处理单元将所述第一宏块的颜色空间转换为与所述第一处理单元匹配的颜色空间;
所述第一处理单元根据所述第一运动向量对所述转换后的第一宏块进行编码。
通过生成该第一宏块的第一运动向量,能够对该第一宏块进行编码前的预处理,再根据该第一运动向量对该第一宏块进行编码,能够提高编码效率。通过确定该第一宏块的颜色空间是否为与该第一处理单元匹配的颜色空间,能够避免该第一宏块的颜色空间与该第一处理单元不匹配,而直接对该第一宏块进行编码时造成的处理器资源浪费以及时间浪费,提升编码效率。
在一个实施例中,所述图像数据还包括所述宏块的位置信息,所述第一处理单元根据所述第一数据码流和接收到的所述第二数据码流生成与所述待编码帧图像对应的编码帧图像包括:
所述第一处理单元根据所述第一宏块的位置信息和所述第二宏块的位置信息确定所述第一宏块和所述第二宏块在所述待编码帧图像的排列顺序;
所述第一处理单元根据所述排列顺序对所述第一数据码流以及所述第二数据码流进行排列,生成所述编码帧图像。
通过将该第一数据码流和该第二数据码流按照排列顺序进行排列,能够将同一个待编码帧图像对应的数据码流一起发送至第二终端设备,避免了再向第二设备发送多个待编码图像对应的数据码流时,出现不同待编码图像对应的数据码流在发送过程中乱序的问题,提高了传输的准确性。
在一个实施例中,所述图像数据还包括所述待编码帧图像的帧序号,所述将所述编码帧图像发送至第二终端设备包括:
根据所述帧序号确定所述编码帧图像的发送顺序;
按照所述发送顺序依次将所述编码帧图像以及所述图像数据发送至所述第二终端设备。
根据本公开实施例的第二方面,提供一种图像处理方法,应用于第二终端设备,所述第二终端设备包括第三处理单元和第四处理单元,所述方法包括:
所述第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧对应的图像数据,所述图像数据包括宏块类型;
针对每个编码帧图像,所述第三处理单元根据第二预设对应关系,从所述编码帧图像中确定与所述第三处理单元的对应的第三数据码流和与所述第四处理单元的对应的第四数据码流,并将所述第四数据码流发送至所述第四处理单元,所述第二预设对应关系为处理单元和宏块类型的对应关系,所述第三数据码流和所述第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流;
所述第三处理单元对所述第三数据码流进行解码,生成所述第三宏块;
所述第四处理单元对接收到的所述第四数据码流进行解码,生成所述第四宏块。
采用上述方案,该第三处理单元能够根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第三处理单元对该第三数据码流进行解码,生成该第三宏块;该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块,高性能的处理单元能够对视频类型的宏块在编码后生成的数据码流进行解码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块在编码后生成的数据码流进行解码处理,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
在一个实施例中,所述第四处理单元对接收到的所述第四数据码流进行解码后,所述方法还包括:
所述第四处理单元将所述第四宏块发送至所述第三处理单元;
所述第三处理单元根据所述第三宏块和接收到的所述第四宏块生成与每个编码帧图像对应的解码帧图像;
或者,所述第三处理单元将所述第三宏块发送至所述第四处理单元;
所述第四处理单元根据接收到的所述第三宏块和所述第四宏块生成与每个编码帧图像对应的解码帧图像。
在一个实施例中,所述图像数据还包括所述宏块的位置信息,所述第三处理单元根据所述第三宏块和接收所述第四宏块生成与每个编码帧图像对应的解码帧图像包括:
所述第三处理单元根据所述第三宏块的位置信息和所述第四宏块的位置信息确定所述第三宏块和所述第四宏块在待编码图像中的排列顺序;
所述第三处理单元根据所述排列顺序对所述第三宏块和所述第四宏块进行排列,生成所述解码帧图像。
在一个实施例中,所述第三处理单元对所述第三数据码流进行解码,生成第三宏块后,所述方法还包括:
所述第三处理单元确定所述第三宏块的颜色空间是否为与所述第三处理单元匹配的颜色空间;
若否,则所述第三处理单元将所述第三宏块的颜色空间转换为与所述第三处理单元匹配的颜色空间。
通过确定该第三宏块的颜色空间是否为与该第三处理单元匹配的颜色空间,能够避免该第三宏块的颜色空间与该第三处理单元不匹配,根据该第四宏块不能生成该解码帧图像的问题,从而避免了处理器资源的浪费以及时间浪费,提升了图像的解码效率。
根据本公开实施例的第三方面,提供一种图像处理装置,应用于第一终端设备,所述第一终端设备包括第一处理单元和第二处理单元,所述装置包括:
宏块划分模块,用于第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,所述图像数据包括所述多个宏块的宏块类型;
第一宏块确定模块,用于针对每个待编码图像,所述第一处理单元根据第一预设对应关系从所述多个宏块中确定与所述第一处理单元的对应的第一宏块和与所述第二处理单元的对应的第二宏块,并将所述第二宏块发送至所述第二处理单元,所述第一预设对应关系为处理单元与宏块类型的对应关系;
第一数据码流生成模块,用于所述第一处理单元对所述第一宏块进行编码,生成第一数据码流;
第二数据码流生成模块,用于所述第二处理单元对接收到的所述第二宏块进行编码,生成第二数据码流。
在一个实施例中,所述装置还包括:
数据码流发送模块,用于所述第二处理单元将所述第二数据码流发送至所述第一处理单元;
编码帧图像生成模块,用于所述第一处理单元根据所述第一数据码流和接收到的所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备;
或者,数据码流发送模块,用于所述第一处理单元将所述第一数据码流发送至所述第二处理单元;
编码帧图像生成模块,用于所述第二处理单元根据接收到的所述第一数据码流和所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备。
在一个实施例中,所述第一数据码流生成模块用于:
所述第一处理单元生成所述第一宏块的第一运动向量;
所述第一处理单元确定所述第一宏块的颜色空间是否为与所述第一处理单元匹配的颜色空间;
若是,则所述第一处理单元根据所述运动向量对所述第一宏块进行编码;
若否,则所述第一处理单元确定所述第一宏块的颜色空间转换为与所述第一处理单元匹配的颜色空间;
所述第一处理单元根据所述第一运动向量对所述转换后的第一宏块进行编码。
在一个实施例中,所述图像数据还包括所述宏块的位置信息,所述编码帧图像生成模块用于:
所述第一处理单元根据所述第一宏块的位置信息和所述第二宏块的位置信息确定所述第一宏块和所述第二宏块在所述待编码帧图像的排列顺序;
所述第一处理单元根据所述排列顺序对所述第一数据码流以及所述第二数据码流进行排列,生成所述编码帧图像。
在一个实施例中,所述图像数据还包括所述待编码帧图像的帧序号,所述编码帧图像生成模块用于:
根据所述帧序号确定所述编码帧图像的发送顺序;
按照所述发送顺序依次将所述编码帧图像以及所述图像数据发送至所述第二终端设备。
本公开实施例提供的图像处理装置,第一处理单元能够对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一处理单元对该第一宏块进行编码,生成第一数据码流;该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流,高性能的处理单元能够对视频类型的宏块进行编码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块进行编码处理,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。
根据本公开实施例的第四方面,提供一种图像处理装置,应用于第二终端设备,所述第二终端设备包括第三处理单元和第四处理单元,所述装置包括:
编码帧图像接收模块,用于所述第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧对应的图像数据,所述图像数据包括宏块类型;
第三数据码流确定模块,用于针对每个编码帧图像,所述第三处理单元根据第二预设对应关系,从所述编码帧图像中确定与所述第三处理单元的对应的第三数据码流和与所述第四处理单元的对应的第四数据码流,并将所述第四数据码流发送至所述第四处理单元,所述第二预设对应关系为处理单元和宏块类型的对应关系,所述第三数据码流和所述第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流;
第三宏块生成模块,用于所述第三处理单元对所述第三数据码流进行解码,生成所述第三宏块;
第四宏块生成模块,用于所述第四处理单元对接收到的所述第四数据码流进行解码,生成所述第四宏块。
在一个实施例中,所述装置还包括:
宏块发送模块,用于所述第四处理单元将所述第四宏块发送至所述第三处理单元;
解码帧图像生成模块,用于所述第三处理单元根据所述第三宏块和接收到的所述第四宏块生成与每个编码帧图像对应的解码帧图像;
或者,宏块发送模块,用于所述第三处理单元将所述第三宏块发送至所述第四处理单元;
解码帧图像生成模块,用于所述第四处理单元根据接收到的所述第三宏块和所述第四宏块生成与每个编码帧图像对应的解码帧图像。
在一个实施例中,所述图像数据还包括所述宏块的位置信息,所述解码帧图像生成模块用于:
所述第三处理单元根据所述第三宏块的位置信息和所述第四宏块的位置信息确定所述第三宏块和所述第四宏块在待编码图像中的排列顺序;
所述第三处理单元根据所述排列顺序对所述第三宏块和所述第四宏块进行排列,生成所述解码帧图像。
在一个实施例中,所述装置还包括:
颜色空间转换模块,用于所述第三处理单元确定所述第三宏块的颜色空间是否为与所述第三处理单元匹配的颜色空间;
若否,则所述第三处理单元确定所述第三宏块的颜色空间转换为与所述第三处理单元匹配的颜色空间。
本公开实施例提供的图像处理装置,该第三处理单元能够接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧图像对应的图像数据,针对每个编码帧图像,该第三处理单元根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第三处理单元对该第三数据码流进行解码,生成该第三宏块;该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块,高性能的处理单元能够对视频类型的宏块在编码后生成的数据码流进行解码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块在编码后生成的数据码流进行解码处理,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是本公开实施例提供的一种图像处理系统的结构示意图;
图2是本公开实施例提供的一种图像处理方法的流程图;
图3是本公开实施例提供的另一种图像处理方法的流程图;
图4是本公开实施例提供的一种图像处理方法的流程图;
图5是本公开实施例提供的另一种图像处理方法的流程图;
图6是本公开实施例提供的一种图像处理装置的结构示意图一;
图7是本公开实施例提供的一种图像处理装置的结构示意图二;
图8是本公开实施例提供的另一种图像处理装置的结构示意图一;
图9是本公开实施例提供的另一种图像处理装置的结构示意图二。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是本公开实施例提供的一种图像处理系统的结构示意图,如图1所示,该系统包括:
第一终端设备11和第二终端设备12。其中,第一终端设备用于对获取的待编码的帧图像进行编码,生成编码帧图像,并将该编码帧图像发送至第二终端设备。其中,该第一终端设备11包括第一处理单元111和第二处理单元112,该第二终端设备12包括第三处理单元121和第四处理单元122。
第一处理单元在获取待编码的帧图像后,对该待编码的帧图像进行宏块划分,得到多个宏块。再从该多个宏块中确定与该第一处理单元对应的第一宏块,以及与该第二处理单元对应的第二宏块,并将该第二宏块发送给该第二处理单元,由该第二处理单元对该第二宏块进行编码处理。同时,该第一处理单元对该第一宏块进行编码处理。
进一步地,该第一设备对该多个宏块进行编码处理后,生成该待编码的帧图像对应的编码帧图像,再将该编码帧图像发送至该第二终端设备。
该第二终端设备接收该第一终端设备发送的该编码帧图像后,从该编码帧图像中确定与该第三处理单元对应的第三数据码流,以及与该第四处理单元对应的第四数据码流,并将该第四数据码流发送给该第四处理单元,由该第四处理单元对该第四数据码流进行解码处理。同时,该第三处理单元对该第三数据码流进行解码处理。
采用上述系统,该第一终端设备中的第一处理单元能够对该第一处理单元对应的第一宏块进行编码处理,该第二处理单元能够对该第二处理单元对应的第二宏块进行编码处理,在该第一处理单元为低性能处理器,该第二处理单元为高性能处理器时,该第一处理单元处理文字类型的第一宏块,该第二处理单元处理视频类型的第二宏块。同样地,在该第一处理单元为高性能处理器,该第二处理单元为低性能处理器时,该第一处理单元处理视频类型的第一宏块,该第二处理单元处理文字类型的第二宏块,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。该第二终端设备中的第三处理单元能够对该第三处理单元对应的第三数据码流进行解码处理,该第四处理单元能够对该第四处理单元对应的第四数据码流进行编码处理,在该第三处理单元为低性能处理器,该第四处理单元为高性能处理器时,该第三处理单元处理文字类型的宏块对应的第三数据码流,该第四处理单元处理视频类型的宏块对应的第四数据码流。同样地,在该第三处理单元为高性能处理器,该第四处理单元为低性能处理器时,该第三处理单元处理视频类型的宏块对应的第三数据码流,该第四处理单元处理文字类型的宏块对应的第四数据码流,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
下面结合图2实施例,对本发明提供的图像处理系统如何进行图像处理进行说明。
图2是本公开实施例提供的一种图像处理方法的流程图,该方法应用于第一终端设备。如图2所示,该方法包括:
S201、第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与待编码帧图像对应的多个宏块以及图像数据,该图像数据包括该多个宏块的宏块类型。
在本步骤中,该第一处理单元可以为该第一终端设备中的任意一个处理单元,可以为低性能处理单元,也可以为高性能处理单元,本实施例此处不做具体限制。
该第一处理单元在获取待编码帧图像后,分别对该待编码帧图像进行宏块划分,生成与所述待编码帧图像对应的多个宏块。再对与所述待编码帧图像对应的多个宏块分别进行宏块类型检测,将该多个宏块划分为不同类型的宏块,例如文字类型的宏块、图像类型的宏块以及视频类型的宏块。在对不同类型的宏块进行处理时,对处理器性能的要求也不同。例如,在对文字类型的宏块进行处理时,对处理器的性能要求较低,而在对视频类型的宏块进行处理时,对处理器性能的要求较高。
S202、针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一预设对应关系为处理单元与宏块类型的对应关系。
示例性地,该第二处理单元为该第一终端设备中除了第一处理单元以外的其他至少一个处理单元。
针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定该第一处理单元对应的第一宏块以及该第二处理单元对应的第二宏块。示例性地,该第一预设对应关系为处理单元的标识信息与宏块类型的对应关系。该处理单元的标识信息包括处理单元的识别号(ID,Identification)以及该处理单元的属性参数。
例如,当该第一处理单元的为ID号为1,该第一处理单元的属性参数表示该第一处理单元为低性能处理单元时,当该第二处理单元的ID号为2,该第二处理单元的属性参数表示该第二处理单元为高性能处理单元时,该第一处理单元从该多个宏块中确定与第一处理单元对应的文字类型和图像类型的第一宏块以及与该第二处理单元对应的视频类型的第二宏块,并将该第二宏块发送给该第二处理单元。
又如,当该第一处理单元的ID号为1,该第一处理单元的属性参数表示该第一处理单元为高性能处理单元时,当该第二处理单元的ID号为2,该第二处理单元的属性参数表示该第二处理单元为低性能处理单元时,该第一处理单元从该多个宏块中确定与第一处理单元对应的视频类型的第一宏块以及与该第二处理单元对应的文字类型和图像类型的第二宏块,并将该第二宏块发送给该第二处理单元。
S203、该第一处理单元对该第一宏块进行编码,生成第一数据码流;
S204、该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流。
生成该第一数据码流和该第二数据码流后,该第一终端设备根据该第一数据码流和该第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将该编码帧图像发送给第二终端设备。
本公开实施例提供的图像处理方法,第一处理单元能够对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一处理单元对该第一宏块进行编码,生成第一数据码流;该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流,高性能的处理单元能够对视频类型的宏块进行编码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块进行编码处理,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。
下面结合图3实施例,对图2实施例提供的图像处理方法做进一步详细说明。图3是本公开实施例提供的第二种图像处理方法的流程图,该方法应用于第一终端设备。如图3所示,该方法包括:
S301、第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,该图像数据包括该多个宏块的宏块类型。
S302、针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一预设对应关系为处理单元与宏块类型的对应关系。
本实施例提供的S301和S302和图2实施例提供的S201和S202类似,本实施此处不再赘述。
S303、该第一处理单元对该第一宏块进行编码,生成第一数据码流。
示例性地,该第一处理单元生成第一宏块的第一运动向量;再确定该第一宏块的颜色空间是否为与该第一处理单元匹配的颜色空间。若是,则该第一处理单元根据该运动向量对该第一宏块进行编码;若否,则该第一处理单元将该第一宏块的颜色空间转换为与该第一处理单元匹配的颜色空间,再根据该第一运动向量对该转换后的第一宏块进行编码。
例如,当该第一宏块的颜色空间为RGB,而该第一处理单元匹配的颜色空间为YUV,则该第一处理单元将该第一宏块的颜色空间转换为YUV,再根据该第一运动向量对该转换后的第一宏块进行编码,生成第一数据码流。当该第一宏块的颜色空间为RGB,该第一处理单元匹配的颜色空间为RGB,则该第一处理单元该第一运动向量对该第一宏块进行编码,生成第一数据码流。
又如,当该第一宏块的颜色空间为YUV,而该第一处理单元匹配的颜色空间为RGB,则该第一处理单元将该第一宏块的颜色空间转换为RGB,再根据该第一运动向量对该转换后的第一宏块进行编码,生成第一数据码流。当该第一宏块的颜色空间为YUV,该第一处理单元匹配的颜色空间为YUV,则该第一处理单元该第一运动向量对该第一宏块进行编码,生成第一数据码流。
通过生成该第一宏块的第一运动向量,能够对该第一宏块进行编码前的预处理,再根据该第一运动向量对该第一宏块进行编码,能够提高编码效率。通过确定该第一宏块的颜色空间是否为与该第一处理单元匹配的颜色空间,能够避免该第一宏块的颜色空间与该第一处理单元不匹配,直接对该第一宏块进行编码时造成处理器资源浪费以及时间浪费,提升编码效率。
S304、该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流。
该第二处理单元对该第二宏块进行编码的过程与该第一处理单元对该第一宏块进行编码的过程类似,本实施此处不再赘述。
S305、该第二处理单元将该第二数据码流发送至该第一处理单元;
S306、该第一处理单元根据该第一数据码流和接收到的该第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将该编码帧图像发送至第二终端设备。
在一实施例中,该第二处理单元在该第二宏块进行编码,生成第二数据码流后,将该第二数据码流发送至该第一处理单元,由该第一处理单元根据该第一数据码流和接收到的该第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将该编码帧图像发送至第二终端设备。
下面对该第一处理单元如何根据该第一数据码流和接收到的该第二数据码流生成与所述待编码帧图像对应的编码帧图像进行说明。
示例性地,该图像数据还包括该多个宏块的位置信息,该第一处理单元根据所述第一宏块的位置信息和所述第二宏块的位置信息确定该第一宏块和该第二宏块在该待编码帧图像的排列顺序;再根据该排列顺序对该第一数据码流以及该第二数据码流进行排列,生成该编码帧图像,该编码帧图像即为经过排列的该待编码帧图像对应的数据码流。
通过将该第一数据码流和该第二数据码流按照排列顺序进行排列,能够将同一个待编码帧图像对应的数据码流一起发送至第二终端设备,避免了再向第二设备发送多个待编码图像对应的数据码流时,出现不同待编码图像对应的数据码流在发送过程中乱序的问题,提高了传输的准确性。
下面对该第一处理单元如何将该所述待编码帧图像对应的编码帧图像发送至第二终端设备进行说明。
示例性地,该图像数据还包括该待编码帧图像的帧序号,该第一处理单元根据该帧序号确定该编码帧图像的发送顺序,再按照该发送顺序依次将该编码帧图像以及该图像数据发送至该第二终端设备。
例如,该第一处理单元获取5个待编码帧图像,并按照上述过程分别对该5个待编码帧图像进行编码后,生成分别与5个待编码帧图像对应的5个编码图像。再根据该5个待编码帧图像的帧序号(1-5)确定该5个编码图像的发送顺序,按照帧序号从小到大的发送顺序将该5个编码图像发送至该第二终端设备。即先发送帧序号为1的待编码帧图像对应的编码图像,再先发送帧序号为2的待编码帧图像对应的编码图像,按照帧序号从小到大的顺序依次将该5个编码帧图像发送至该第二终端设备。
在另一实施例中,该第一处理单元在该第一宏块进行编码,生成第一数据码流后,将该第一数据码流发送至该第二处理单元,由该第二处理单元根据接收到的该第一数据码流和该第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将该编码帧图像发送至第二终端设备。
该第二处理单元生成与所述待编码帧图像对应的编码帧图像的过程与该第一处理单元生成与所述待编码帧图像对应的编码帧图像的过程类似,本实施例此处不再赘述。
该第二处理单元将该编码帧图像发送至该第二终端设备的过程与该第一处理单元将该编码帧图像发送至该第二终端设备的过程类似,本实施例此处不再赘述。
本公开实施例提供的图像处理方法,该第一处理单元能够根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一处理单元对该第一宏块进行编码,生成第一数据码流;该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流,高性能的处理单元能够对视频类型的宏块进行编码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块进行编码处理,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。
下面结合图4实施例,对第二终端设备如何进行图像解码进行说明。图4是本公开实施例提供的一种图像处理方法的流程示意图,该方法应用于第二终端设备。如图4所示,该方法包括:
S401、该第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧图像对应的图像数据,该图像数据包括宏块类型。
在本步骤中,该第三处理单元可以为该第三终端设备中的任意一个处理单元,可以为低性能处理单元,也可以为高性能处理单元,本实施例此处不做具体限制。
S402、针对每个编码帧图像,该第三处理单元根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第二预设对应关系为处理单元和宏块类型的对应关系,该第三数据码流和该第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流。
示例性地,该第四处理单元为该第二终端设备中除了第三处理单元以外的其他至少一个处理单元。
针对每个编码帧图像,该第三处理单元根据第二预设对应关系从该编码帧图像中确定该第三处理单元对应的第三数据码流以及该第四处理单元对应的第四数据码流。示例性地,该第二预设对应关系为处理单元的标识信息与宏块类型的对应关系,该第三数据码流和该第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流。该处理单元的标识信息包括处理单元的ID号以及该处理单元的属性参数。
例如,当该第三处理单元的ID号为3,该第三处理单元的属性参数表示该第三处理单元为低性能处理单元,该第四处理单元的ID号为4,该第四处理单元的属性参数表示该第四处理单元为高性能处理单元时,该第三处理单元从该编码帧图像中确定与该第三处理单元对应的文字类型以及图像类型的第三宏块经过编码后生成的第三数据码流,以及该第四处理单元对应的视频类型的第四宏块经过编码后生成的第四数据码流,并将该第四数据码流发送给该第四处理单元。
又如,当该第三处理单元的ID号为3,该第三处理单元的属性参数表示该第三处理单元为高性能处理单元,该第四处理单元的ID号为4,该第四处理单元的属性参数表示该第四处理单元为低性能处理单元时,该第三处理单元从该编码帧图像中确定与该第三处理单元对应的视频类型的第三宏块经过编码后生成的第三数据码流,以及该第四处理单元对应的文字类型以及视频类型的第四宏块经过编码后生成的第四数据码流,并将该第四数据码流发送给该第四处理单元。
在本实施例中,该第三数据码流可以为图2和图3实施例中的第一数据码流,也可以为图2和图3实施例中的第二数据码流,该第四数据码流可以为图2和图3实施例中的第一数据码流,也可以为图2和图3实施例中的第二数据码流,本实施此处不做限制。
S403、该第三处理单元对该第三数据码流进行解码,生成该第三宏块;
S404、该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块。
生成该第三宏块和该第四宏块后,该第一终端设备根据该第三宏块和该第四宏块生成与每个编码帧图像对应的解码帧图像,并控制该第二设备显示该解码帧图像。
在本实施例中,该第三宏块可以为图2和图3实施例中的第一宏块,也可以为图2和图3实施例中的第二宏块,该第四宏块可以为图2和图3实施例中的第一宏块,也可以为图2和图3实施例中的第二宏块,本实施此处不做限制。
本公开实施例提供的图像处理方法,该第三处理单元能够接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧图像对应的图像数据,针对每个编码帧图像,该第三处理单元根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第三处理单元对该第三数据码流进行解码,生成该第三宏块;该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块,高性能的处理单元能够对视频类型的宏块在编码后生成的数据码流进行解码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块在编码后生成的数据码流进行解码处理,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
下面结合图5实施例,对图4实施例提供的图像处理方法做进一步详细说明。图5是本公开实施例提供的另一种图像处理方法的流程示意图,该方法应用于第二终端设备。如图5所示,该方法包括:
S501、该第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧图像对应的图像数据,该图像数据包括宏块类型。
S502、针对每个编码帧图像,该第三处理单元根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第二预设对应关系为处理单元和宏块类型的对应关系,该第三数据码流和该第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流。
本实施例提供的S501和S502与图4实施例提供的S401和S402类似,本实施例此处不再赘述。
S503、该第三处理单元对该第三数据码流进行解码,生成该第三宏块;
示例性地,该第三处理单元对该第三数据码流进行解码,生成该第三宏块后,确定该第三宏块的颜色空间是否为与第三处理单元匹配的颜色空间;若否,则将第三处理单元将第三宏块的颜色空间转换为与该第三处理单元匹配的颜色空间。
例如,当该第三宏块的颜色空间为RGB,而该第三处理单元匹配的颜色空间为YUV,则该第三处理单元将该第三宏块的颜色空间转换为YUV,再根据转换后的第三宏块生成解码帧图像。当该第三宏块的颜色空间为RGB,该第三处理单元匹配的颜色空间为RGB,则第三处理单元可以根据该第三宏块生成解码帧图像。
又如,当该第三宏块的颜色空间为YUV,而该第三处理单元匹配的颜色空间为RGB,则该第三处理单元将该第三宏块的颜色空间转换为RGB,再根据转换后的第四宏块生成解码帧图像。当该第三宏块的颜色空间为YUV,该第三处理单元匹配的颜色空间为YUV,则第三处理单元可以根据该第三宏块生成解码帧图像。
通过确定该第三宏块的颜色空间是否为与该第三处理单元匹配的颜色空间,能够避免该第三宏块的颜色空间与该第三处理单元不匹配,根据该第四宏块不能生成该解码帧图像的问题,从而避免了处理器资源浪费以及时间浪费,提升了图像的解码效率。
S504、该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块。
同样地,该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块后,确定该第四宏块的颜色空间是否为与第四处理单元匹配的颜色空间;若否,则将第四处理单元将该第四宏块的颜色空间转换为与该第四处理单元匹配的颜色空间。
通过确定该第四宏块的颜色空间是否为与该第四处理单元匹配的颜色空间,能够避免该第四宏块的颜色空间与该第四处理单元不匹配,根据该第四宏块不能生成该解码帧图像的问题,从而避免了处理器资源浪费以及时间浪费,提升了图像的解码效率。
S505、该第四处理单元将该第四宏块发送至该第三处理单元;
S506、该第三处理单元根据该第三宏块和接收到的该第四宏块生成与每个编码帧图像对应的解码帧图像。
在一实施例中,该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块后,将该第三宏块发送给该第三处理单元,由该第三处理单元对接收到的该第四宏块和该第三宏块生成与每个编码帧图像对应的解码帧图像,再控制该第二终端设备显示该解码帧图像。
下面对该第三处理单元如何根据该第三宏块和该第四宏块生成该解码帧图像进行说明。
该图像数据还包括宏块的位置信息,该第三处理单元根据该第三宏块的位置信息和该第四宏块的位置信息确定该第三宏块和该第四宏块在待编码图像中的排列顺序,再根据该排列顺序对该第三宏块和该第四宏块进行排列,生成该解码帧图像。
在另一实施例中,该第三处理单元对该第三数据码流进行解码,生成该第三宏块后,将该第三宏块发送给该第四处理单元,由该第四处理单元对该第四宏块和该接收到的第三宏块生成与每个编码帧图像对应的解码帧图像,再控制该第二终端设备显示该解码帧图像。
该第四处理单元生成该解码帧图像的过程与该第三处理单元生成该解码帧图像类似,本实施例此处不再赘述。
本公开实施例提供的图像处理方法,该第三处理单元能够根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第三处理单元对该第三数据码流进行解码,生成该第三宏块;该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块,高性能的处理单元能够对视频类型的宏块在编码后生成的数据码流进行解码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块在编码后生成的数据码流进行解码处理,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
基于上述图2至图5对应的实施例中所描述的图像处理方法,下述为本公开装置实施例,可以用于执行本公开方法实施例。
图6是本公开实施例提供的一种图像处理装置的结构示意图一,该装置应用于第一终端设备,该第一终端设备包括第一处理单元和第二处理单元。
如图6所示,该装置包括:
宏块划分模块601,用于第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与待编码帧图像对应的多个宏块以及图像数据,图像数据包括多个宏块的宏块类型;
第一宏块确定模块602,用于针对每个待编码图像,第一处理单元根据第一预设对应关系从多个宏块中确定与第一处理单元的对应的第一宏块和与第二处理单元的对应的第二宏块,并将第二宏块发送至第二处理单元,第一预设对应关系为处理单元与宏块类型的对应关系;
第一数据码流生成模块603,用于第一处理单元对第一宏块进行编码,生成第一数据码流;
第二数据码流生成模块604,用于第二处理单元对接收到的第二宏块进行编码,生成第二数据码流。
图7是根据图6实施例提供的一种图像处理装置的结构示意图二。如图7所示,该装置还包括:
数据码流发送模块605,用于第二处理单元将第二数据码流发送至第一处理单元;
编码帧图像生成模块606,用于第一处理单元根据第一数据码流和接收到的第二数据码流生成与待编码帧图像对应的编码帧图像,并将编码帧图像发送至第二终端设备;
或者,数据码流发送模块605,用于第一处理单元将第一数据码流发送至第二处理单元;
编码帧图像生成模块606,用于第二处理单元根据接收到的第一数据码流和第二数据码流生成与待编码帧图像对应的编码帧图像,并将编码帧图像发送至第二终端设备。
在一个实施例中,该第一数据码流生成模块603用于:
第一处理单元生成第一宏块的第一运动向量;
第一处理单元确定第一宏块的颜色空间是否为与第一处理单元匹配的颜色空间;
若是,则第一处理单元根据运动向量对第一宏块进行编码;
若否,则第一处理单元确定第一宏块的颜色空间转换为与第一处理单元匹配的颜色空间;
第一处理单元根据第一运动向量对转换后的第一宏块进行编码。
在一个实施例中,该图像数据还包括宏块的位置信息,该编码帧图像生成模块606用于:
第一处理单元根据第一宏块的位置信息和第二宏块的位置信息确定第一宏块和第二宏块在待编码帧图像的排列顺序;
第一处理单元根据排列顺序对第一数据码流以及第二数据码流进行排列,生成编码帧图像。
在一个实施例中,该图像数据还包括待编码帧图像的帧序号,该编码帧图像生成模块606用于:
根据帧序号确定编码帧图像的发送顺序;
按照发送顺序依次将编码帧图像以及图像数据发送至第二终端设备。
本公开实施例提供的图像处理装置,第一处理单元能够对获取的待编码帧图像分别进行宏块划分,生成与待编码帧图像对应的多个宏块以及图像数据,针对每个待编码图像,该第一处理单元根据第一预设对应关系从该多个宏块中确定与该第一处理单元的对应的第一宏块和与该第二处理单元的对应的第二宏块,并将该第二宏块发送至该第二处理单元,该第一处理单元对该第一宏块进行编码,生成第一数据码流;该第二处理单元对接收到的该第二宏块进行编码,生成第二数据码流,高性能的处理单元能够对视频类型的宏块进行编码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块进行编码处理,能够在提高帧图像编码效率的同时,提高第一终端设备中处理资源的利用率。
图8是本公开实施例提供的另一种图像处理装置的结构示意图一,该装置应用于第二终端设备,该第二终端设备包括第三处理单元和第四处理单元。
如图8所示,该装置包括:
编码帧图像接收模块801,用于第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧对应的图像数据,图像数据包括宏块类型;
第三数据码流确定模块802,用于针对每个编码帧图像,第三处理单元根据第二预设对应关系,从编码帧图像中确定与第三处理单元的对应的第三数据码流和与第四处理单元的对应的第四数据码流,并将第四数据码流发送至第四处理单元,第二预设对应关系为处理单元和宏块类型的对应关系,第三数据码流和第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流;
第三宏块生成模块803,用于第三处理单元对第三数据码流进行解码,生成第三宏块;
第四宏块生成模块804,用于第四处理单元对接收到的第四数据码流进行解码,生成第第四宏块。
图9是根据图8实施例提供的另一种图像处理装置的结构示意图二。如图9所示,该装置还包括:
宏块发送模块805,用于第四处理单元将第四宏块发送至第三处理单元;
解码帧图像生成模块806,用于第三处理单元根据第三宏块和接收到的第四宏块生成与每个编码帧图像对应的解码帧图像;
或者,宏块发送模块805,用于第三处理单元将第三宏块发送至第四处理单元;
解码帧图像生成模块806,用于第四处理单元根据接收到的第三宏块和第四宏块生成与每个编码帧图像对应的解码帧图像。
在一个实施例中,该图像数据还包括宏块的位置信息,该解码帧图像生成模块806用于:
第三处理单元根据第三宏块的位置信息和第四宏块的位置信息确定第三宏块和第四宏块在待编码图像中的排列顺序;
第三处理单元根据排列顺序对第三宏块和第四宏块进行排列,生成解码帧图像。
在一个实施例中,该装置还包括:
颜色空间转换模块807,用于第三处理单元确定第三宏块的颜色空间是否为与第三处理单元匹配的颜色空间;
若否,则第三处理单元确定第三宏块的颜色空间转换为与第三处理单元匹配的颜色空间。
本公开实施例提供的图像处理装置,该第三处理单元能够接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧图像对应的图像数据,针对每个编码帧图像,该第三处理单元根据第二预设对应关系,从该编码帧图像中确定与该第三处理单元的对应的第三数据码流和与该第四处理单元的对应的第四数据码流,并将该第四数据码流发送至该第四处理单元,该第三处理单元对该第三数据码流进行解码,生成该第三宏块;该第四处理单元对接收到的该第四数据码流进行解码,生成该第四宏块,高性能的处理单元能够对视频类型的宏块在编码后生成的数据码流进行解码处理,低性能的处理单元能够对文字类型的宏块以及图像类型的宏块在编码后生成的数据码流进行解码处理,能够在提高帧图像解码效率的同时,提高第二终端设备中处理资源的利用率。
基于上述图2和图3对应的实施例中所描述的图像处理方法,本公开实施例还提供一种计算机可读存储介质,例如,非临时性计算机可读存储介质可以是只读存储器(英文:Read Only Memory,ROM)、随机存取存储器(英文:Random Access Memory,RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令,用于执行上述图2和图3对应的实施例中所描述的图像处理方法,此处不再赘述。
基于上述图4和图5对应的实施例中所描述的图像处理方法,本公开实施例还提供一种计算机可读存储介质,例如,非临时性计算机可读存储介质可以是只读存储器(英文:Read Only Memory,ROM)、随机存取存储器(英文:Random Access Memory,RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令,用于执行上述图4和图5对应的实施例中所描述的图像处理方法,此处不再赘述。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (11)

1.一种图像处理方法,其特征在于,应用于第一终端设备,所述第一终端设备包括第一处理单元和第二处理单元,所述方法包括:
第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,所述图像数据包括所述多个宏块的宏块类型;
针对每个待编码图像,所述第一处理单元根据第一预设对应关系从所述多个宏块中确定与所述第一处理单元的对应的第一宏块和与所述第二处理单元的对应的第二宏块,并将所述第二宏块发送至所述第二处理单元,所述第一预设对应关系为处理单元与宏块类型的对应关系,所述第一预设对应关系为处理单元的标识信息与宏块类型的对应关系,所述处理单元的标识信息包括所述处理单元的识别号以及所述处理单元的属性参数,其中,高性能参数的处理单元的识别号对应视频类型的宏块,低性能参数的处理单元的识别号对应文字类型或图像类型的宏块;
所述第一处理单元对所述第一宏块进行编码,生成第一数据码流;
所述第二处理单元对接收到的所述第二宏块进行编码,生成第二数据码流。
2.根据权利要求1所述的方法,其特征在于,所述第二处理单元对接收到的所述第二宏块进行编码后,所述方法还包括:
所述第二处理单元将所述第二数据码流发送至所述第一处理单元;
所述第一处理单元根据所述第一数据码流和接收到的所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备;
或者,所述第一处理单元将所述第一数据码流发送至所述第二处理单元;
所述第二处理单元根据接收到的所述第一数据码流和所述第二数据码流生成与所述待编码帧图像对应的编码帧图像,并将所述编码帧图像发送至第二终端设备。
3.根据权利要求1所述的方法,其特征在于,所述第一处理单元对所述第一宏块进行编码包括:
所述第一处理单元生成所述第一宏块的第一运动向量;
所述第一处理单元确定所述第一宏块的颜色空间是否为与所述第一处理单元匹配的颜色空间;
若是,则所述第一处理单元根据所述运动向量对所述第一宏块进行编码;
若否,则所述第一处理单元将所述第一宏块的颜色空间转换为与所述第一处理单元匹配的颜色空间;
所述第一处理单元根据所述第一运动向量对所述转换后的第一宏块进行编码。
4.根据权利要求1所述的方法,其特征在于,所述图像数据还包括所述宏块的位置信息,所述第一处理单元根据所述第一数据码流和接收到的所述第二数据码流生成与所述待编码帧图像对应的编码帧图像包括:
所述第一处理单元根据所述第一宏块的位置信息和所述第二宏块的位置信息确定所述第一宏块和所述第二宏块在所述待编码帧图像的排列顺序;
所述第一处理单元根据所述排列顺序对所述第一数据码流以及所述第二数据码流进行排列,生成所述编码帧图像。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述图像数据还包括所述待编码帧图像的帧序号,所述将所述编码帧图像发送至第二终端设备包括:
根据所述帧序号确定所述编码帧图像的发送顺序;
按照所述发送顺序依次将所述编码帧图像以及所述图像数据发送至所述第二终端设备。
6.一种图像处理方法,其特征在于,应用于第二终端设备,所述第二终端设备包括第三处理单元和第四处理单元,所述方法包括:
所述第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧对应的图像数据,所述图像数据包括宏块类型;
针对每个编码帧图像,所述第三处理单元根据第二预设对应关系,从所述编码帧图像中确定与所述第三处理单元的对应的第三数据码流和与所述第四处理单元的对应的第四数据码流,并将所述第四数据码流发送至所述第四处理单元,所述第二预设对应关系为处理单元和宏块类型的对应关系,所述第三数据码流和所述第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流,所述第二预设对应关系为处理单元的标识信息与宏块类型的对应关系,所述处理单元的标识信息包括所述处理单元的识别号与所述处理单元的属性参数,其中,高性能参数的处理单元的识别号对应视频类型的宏块,低性能参数的处理单元的识别号对应文字类型或图像类型的宏块;
所述第三处理单元对所述第三数据码流进行解码,生成所述第三宏块;
所述第四处理单元对接收到的所述第四数据码流进行解码,生成所述第四宏块。
7.根据权利要求6所述的方法,其特征在于,所述第四处理单元对接收到的所述第四数据码流进行解码后,所述方法还包括:
所述第四处理单元将所述第四宏块发送至所述第三处理单元;
所述第三处理单元根据所述第三宏块和接收到的所述第四宏块生成与每个编码帧图像对应的解码帧图像;
或者,所述第三处理单元将所述第三宏块发送至所述第四处理单元;
所述第四处理单元根据接收到的所述第三宏块和所述第四宏块生成与每个编码帧图像对应的解码帧图像。
8.根据权利要求7所述的方法,其特征在于,所述图像数据还包括所述宏块的位置信息,所述第三处理单元根据所述第三宏块和接收所述第四宏块生成与每个编码帧图像对应的解码帧图像包括:
所述第三处理单元根据所述第三宏块的位置信息和所述第四宏块的位置信息确定所述第三宏块和所述第四宏块在待编码图像中的排列顺序;
所述第三处理单元根据所述排列顺序对所述第三宏块和所述第四宏块进行排列,生成所述解码帧图像。
9.根据权利要求6至8任一项所述的方法,其特征在于,所述第三处理单元对所述第三数据码流进行解码,生成第三宏块后,所述方法还包括:
所述第三处理单元确定所述第三宏块的颜色空间是否为与所述第三处理单元匹配的颜色空间;
若否,则所述第三处理单元将所述第三宏块的颜色空间转换为与所述第三处理单元匹配的颜色空间。
10.一种图像处理装置,其特征在于,应用于第一终端设备,所述第一终端设备包括第一处理单元和第二处理单元,所述装置包括:
宏块划分模块,用于第一处理单元对获取的待编码帧图像分别进行宏块划分,生成与所述待编码帧图像对应的多个宏块以及图像数据,所述图像数据包括所述多个宏块的宏块类型;
第一宏块确定模块,用于针对每个待编码图像,所述第一处理单元根据第一预设对应关系从所述多个宏块中确定与所述第一处理单元的对应的第一宏块和与所述第二处理单元的对应的第二宏块,并将所述第二宏块发送至所述第二处理单元,所述第一预设对应关系为处理单元与宏块类型的对应关系,所述第一预设对应关系为处理单元的标识信息与宏块类型的对应关系,所述处理单元的标识信息包括所述处理单元的识别号以及所述处理单元的属性参数,其中,高性能参数的处理单元的识别号对应视频类型的宏块,低性能参数的处理单元的识别号对应文字类型或图像类型的宏块;
第一数据码流生成模块,用于所述第一处理单元对所述第一宏块进行编码,生成第一数据码流;
第二数据码流生成模块,用于所述第二处理单元对接收到的所述第二宏块进行编码,生成第二数据码流。
11.一种图像处理装置,其特征在于,应用于第二终端设备,所述第二终端设备包括第三处理单元和第四处理单元,所述装置包括:
编码帧图像接收模块,用于所述第三处理单元接收第一终端设备发送的多个编码帧图像以及分别与多个编码帧对应的图像数据,所述图像数据包括宏块类型;
第三数据码流确定模块,用于针对每个编码帧图像,所述第三处理单元根据第二预设对应关系,从所述编码帧图像中确定与所述第三处理单元的对应的第三数据码流和与所述第四处理单元的对应的第四数据码流,并将所述第四数据码流发送至所述第四处理单元,所述第二预设对应关系为处理单元和宏块类型的对应关系,所述第三数据码流和所述第四数据码流分别为第三宏块和第四宏块在编码后生成的数据码流,所述第二预设对应关系为处理单元的标识信息与宏块类型的对应关系,所述处理单元的标识信息包括所述处理单元的识别号与所述处理单元的属性参数,其中,高性能参数的处理单元的识别号对应视频类型的宏块,低性能参数的处理单元的识别号对应文字类型或图像类型的宏块;
第三宏块生成模块,用于所述第三处理单元对所述第三数据码流进行解码,生成所述第三宏块;
第四宏块生成模块,用于所述第四处理单元对接收到的所述第四数据码流进行解码,生成所述第四宏块。
CN202010246408.2A 2020-03-31 2020-03-31 图像处理方法及装置 Active CN111447453B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010246408.2A CN111447453B (zh) 2020-03-31 2020-03-31 图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010246408.2A CN111447453B (zh) 2020-03-31 2020-03-31 图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN111447453A CN111447453A (zh) 2020-07-24
CN111447453B true CN111447453B (zh) 2024-05-17

Family

ID=71654025

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010246408.2A Active CN111447453B (zh) 2020-03-31 2020-03-31 图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN111447453B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101252691A (zh) * 2008-03-12 2008-08-27 中兴通讯股份有限公司 一种多处理器并行实现高分辨率图像滤波的方法
CN101267564A (zh) * 2008-04-16 2008-09-17 中国科学院计算技术研究所 一种多处理器视频编码芯片装置和方法
CN101426139A (zh) * 2008-12-08 2009-05-06 中国科学院长春光学精密机械与物理研究所 图像压缩装置
JP2009194415A (ja) * 2008-02-12 2009-08-27 Digital Media Professional:Kk 画像処理装置
CN101895746A (zh) * 2009-05-22 2010-11-24 索尼公司 解码处理设备及方法、数据分发程序和解码处理程序
CN102098503A (zh) * 2009-12-14 2011-06-15 中兴通讯股份有限公司 一种多核处理器并行解码图像的方法和装置
CN102150425A (zh) * 2008-09-11 2011-08-10 谷歌公司 用于使用并行处理来进行解码的系统和方法
CN104041050A (zh) * 2012-01-20 2014-09-10 高通股份有限公司 多线程纹理解码
CN104202602A (zh) * 2014-08-18 2014-12-10 三星电子(中国)研发中心 执行视频编码的装置及方法
WO2017041551A1 (zh) * 2015-09-11 2017-03-16 中兴通讯股份有限公司 基于spice协议的图像传输方法及装置
WO2019228207A1 (zh) * 2018-05-28 2019-12-05 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009194415A (ja) * 2008-02-12 2009-08-27 Digital Media Professional:Kk 画像処理装置
CN101252691A (zh) * 2008-03-12 2008-08-27 中兴通讯股份有限公司 一种多处理器并行实现高分辨率图像滤波的方法
CN101267564A (zh) * 2008-04-16 2008-09-17 中国科学院计算技术研究所 一种多处理器视频编码芯片装置和方法
CN102150425A (zh) * 2008-09-11 2011-08-10 谷歌公司 用于使用并行处理来进行解码的系统和方法
CN101426139A (zh) * 2008-12-08 2009-05-06 中国科学院长春光学精密机械与物理研究所 图像压缩装置
CN101895746A (zh) * 2009-05-22 2010-11-24 索尼公司 解码处理设备及方法、数据分发程序和解码处理程序
CN102098503A (zh) * 2009-12-14 2011-06-15 中兴通讯股份有限公司 一种多核处理器并行解码图像的方法和装置
CN104041050A (zh) * 2012-01-20 2014-09-10 高通股份有限公司 多线程纹理解码
CN104202602A (zh) * 2014-08-18 2014-12-10 三星电子(中国)研发中心 执行视频编码的装置及方法
WO2017041551A1 (zh) * 2015-09-11 2017-03-16 中兴通讯股份有限公司 基于spice协议的图像传输方法及装置
WO2019228207A1 (zh) * 2018-05-28 2019-12-05 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质
CN110545432A (zh) * 2018-05-28 2019-12-06 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于TILEPRO64的H.264/AVC多粒度并行编码研究;肖强;;信息通信;20130815(第06期);全文 *

Also Published As

Publication number Publication date
CN111447453A (zh) 2020-07-24

Similar Documents

Publication Publication Date Title
US11412248B2 (en) Image encoding method and apparatus, and image decoding method and apparatus
US10750169B2 (en) Method and apparatus for intra chroma coding in image and video coding
US10805644B2 (en) Device and method for entropy encoding and decoding
EP2916543B1 (en) Method for coding/decoding depth image and coding/decoding device
WO2016165603A1 (zh) 一种视频数据的编解码方法及装置
US10547868B2 (en) Method and device for encoding and decoding information indicating intra skip mode prediction method
US20200236359A1 (en) Apparatus and method for image coding with boundary partition processing
CN103959791A (zh) 针对高效率视频代码化(hevc)用信号发送并置图片的显式方式
CN103636220A (zh) 帧内编码编码的方法及装置
CN104969557A (zh) 对用于视频编码的并置参考图片以显式方式进行信号传输
US8923640B1 (en) Coherence groups: region descriptors for low bit rate encoding
US10554997B2 (en) Video coding/decoding method, encoder, and decoder
CN112166606B (zh) 用于处理图像的方法及其设备
US11943470B2 (en) Method and apparatus for inter prediction in video coding system
CN110636334B (zh) 数据传输方法及系统
US20220279179A1 (en) Method and device for high-level image segmentation and image encoding/decoding
CN111447453B (zh) 图像处理方法及装置
CN116456149A (zh) 基于ue引擎分布式渲染视频同步系统和方法
CN111031325A (zh) 数据处理方法及系统
CN113327302A (zh) 图片处理方法及装置、存储介质、电子装置
CN112114760A (zh) 图像处理方法及装置
CN111988615B (zh) 一种解码方法、装置、电子设备及存储介质
CN109672889A (zh) 约束的序列数据头的方法及装置
JP2019012980A (ja) 決定装置、符号化装置、復号装置及びプログラム
US20210235097A1 (en) Transform method and inverse transform method for picture block and apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant