CN111654699A - 图像传输方法及装置 - Google Patents

图像传输方法及装置 Download PDF

Info

Publication number
CN111654699A
CN111654699A CN202010478901.7A CN202010478901A CN111654699A CN 111654699 A CN111654699 A CN 111654699A CN 202010478901 A CN202010478901 A CN 202010478901A CN 111654699 A CN111654699 A CN 111654699A
Authority
CN
China
Prior art keywords
frame image
image
macro block
current frame
previous frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010478901.7A
Other languages
English (en)
Other versions
CN111654699B (zh
Inventor
马传文
范志刚
卢涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Wanxiang Electronics Technology Co Ltd
Original Assignee
Xian Wanxiang Electronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Wanxiang Electronics Technology Co Ltd filed Critical Xian Wanxiang Electronics Technology Co Ltd
Priority to CN202010478901.7A priority Critical patent/CN111654699B/zh
Priority claimed from CN202010478901.7A external-priority patent/CN111654699B/zh
Publication of CN111654699A publication Critical patent/CN111654699A/zh
Application granted granted Critical
Publication of CN111654699B publication Critical patent/CN111654699B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Abstract

本公开提供了一种图像传输方法及装置,涉及图像传输技术领域,能够解决带宽有限导致图像均无法传输完成的问题。所述方法包括:当传输当前帧图像且相邻的前一帧图像未传输完时,将当前帧图像与相邻的前一帧图像进行比较;其中,当前帧图像和相邻的前一帧图像均包括多个宏块;若相邻的前一帧图像中的第一宏块与当前帧图像中的第二宏块相同,则将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,但不将当前帧图像中的第二宏块传输至接收端。

Description

图像传输方法及装置
技术领域
本公开涉及图像传输技术领域,尤其涉及图像传输方法及装置。
背景技术
随着多媒体技术和网络技术的发展,人们对终端设备上图像显示速度和质量的要求越来越高。
图像传输常用的方式包括有非渐进式编码和渐进式(progressive)编码。在带宽较小的情况下,非渐进式编码会使得网络负荷太重,从而导致严重丢帧。而在渐进式编码的方式中,发送端将图像帧分层发送,接收端逐一显示接收到的图层,直至显示出完整的图像帧。
但是,即使采用渐进式编码方式进行传输,在带宽有限的情况下,也可能导致每一帧图像都无法传输完成,进而导致每一帧图像的显示都不是最清晰状态,影响用户体验。
发明内容
本公开实施例提供一种图像传输方法及装置,能够解决带宽有限导致图像均无法传输完成的问题。所述技术方案如下:
根据本公开实施例的第一方面,提供一种图像传输方法,该方法包括:当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较;其中,所述当前帧图像和所述相邻的前一帧图像均包括多个宏块;
若所述相邻的前一帧图像中的第一宏块与所述当前帧图像中的第二宏块相同,则将所述相邻的前一帧图像中的所述第一宏块中未传输的内容传输至接收端,但不将所述当前帧图像中的所述第二宏块传输至所述接收端。
可选地,若所述相邻的前一帧图像中的第一宏块与所述当前帧图像中的第二宏块不相同,则停止传输所述第一宏块,而将所述当前帧图像中的第二宏块传输至所述接收端。
可选地,在所述当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较之前,所述方法还包括:获取多帧目标传输图像,其中,多帧所述目标传输图像包括所述当前帧图像和所述相邻的前一帧图像;将所述目标传输图像划分为多个预设大小的所述宏块。
可选地,所述预设大小包括8×8像素、16×16像素或64×64像素。
可选地,所述当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与相邻的前一帧图像进行比较,包括:将所述当前帧图像与所述相邻的前一帧图像中相同位置的所述宏块进行比较。
可选地,所述方法还包括:将所述目标传输图像中的所述宏块通过分层编码传输至所述接收端。
可选地,所述将所述目标传输图像中的所述宏块通过分层编码传输至所述接收端,包括:按照预设分层方式,将所述目标传输图像中的所述宏块划分为多个图层;将所述多个图层依次传输至所述接收端。
可选地,所述按照预设分层方式,将所述目标传输图像中的所述宏块划分为多个图层,包括:按照频率直方图,将宏块划分为多个图层;按照各图层中所包括像素的频率从大到小的顺序,将各图层传输至接收端。
可选地,按照预设分层方式,将所述目标传输图像中的所述宏块划分为多个图层,包括:
按照所述宏块中各像素的关注度系数,将所述目标传输图像中的所述宏块划分为多个所述图层;其中,所述像素的关注度系数与所述像素至所述宏块预设位置之间的距离成反相关;
按照各所述图层中所包括像素的平均关注度系数从大到小的顺序,将各所述图层传输至所述接收端。
本申请实施例提供了一种图像传输方法,当传输当前帧图像且相邻的前一帧图像未传输完时,发送端可以将当前帧图像与相邻的前一帧图像进行比较,当相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块相同时,则通过将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,而不将当前帧图像中的第二宏块传输至接收端。由于第二宏块为当前帧图像和相邻的前一帧图像中完全相同的冗余部分,所以减少一次传输,可以减少编码量和传输量,从而减轻传输带宽压力,提高资源的利用率,且由于前一帧图像的第一宏块是完整传输的,可以尽量提高接收端显示的清晰度,提升用户体验。
根据本公开实施例的第二方面,提供一种图像传输装置,包括:用于当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较;其中,所述当前帧图像和所述相邻的前一帧图像均包括多个宏块;
筛选模块,用于若所述相邻的前一帧图像中的第一宏块与所述当前帧图像的第二宏块相同,则将所述相邻的前一帧图像中的所述第一宏块中未传输的内容传输至接收端,但不将所述当前帧图像中的所述第二宏块传输至所述接收端。
可选地,筛选模块,还用于若所述相邻的前一帧图像中的第一宏块与所述当前帧图像中的第二宏块不相同,则停止传输所述第一宏块,而将所述当前帧图像中的第二宏块传输至所述接收端。
可选地,图像传输装置还包括:
获取模块,用于获取多帧目标传输图像,其中,多帧所述目标传输图像包括所述当前帧图像和所述相邻的前一帧图像;
划分模块,用于将所述目标传输图像划分为多个预设大小的所述宏块。
本申请实施例提供了一种图像传输装置,当传输当前帧图像且相邻的前一帧图像未传输完时,发送端可以将当前帧图像与相邻的前一帧图像进行比较,当相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块相同时,则通过将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,而不将当前帧图像中的第二宏块传输至接收端。由于第二宏块为当前帧图像和相邻的前一帧图像中完全相同的冗余部分,所以减少一次传输,可以减少编码量和传输量,从而减轻传输带宽压力,提高资源的利用率,且由于前一帧图像的第一宏块是完整传输的,可以尽量提高接收端显示的清晰度,提升用户体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是本公开实施例提供的一种图像传输方法的流程图;
图2是本公开实施例提供的一种图像传输方法的流程图;
图3是本公开实施例提供的一种图像传输方法的流程图;
图4是本公开实施例提供的一种图像传输方法的流程图;
图5是本公开实施例提供的一种预设分层方式的示意图;
图6是本公开实施例提供的一种图像传输装置的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开实施例提供一种图像传输方法,应用于发送端,如图1所示,该图像传输方法包括以下步骤:
S101、发送端获取多帧目标传输图像。其中,多帧目标传输图像包括当前帧图像和相邻的前一帧图像。
发送端可以通过调用图像传感器等组件来直接采集得到目标传输图像,或者,可以接收用户提交的图像作为目标传输图像,或者,可以从存储器或其他设备获取目标传输图像。当然,在实际应用中,发送端也可以通过其他方式来获取目标传输图像,本申请实施例对获取目标传输图像的方式不做具体限定。
需要说明的是,目标传输图像可以包括独立的图像,也可以包括归属于动态图片或视频中某一帧的图像。
当前帧图像指的是发送端即将开始传输的一帧图像,而与其相邻的前一帧图像指的是在传输顺序上与当前帧图像传输顺序相邻,但在时间线上比即将传输的当前帧图像时间早,已经在传输但是还未传输完成的一帧图像。
S102、发送端将目标传输图像划分为多个预设大小的宏块。
所谓的宏块指的是目标传输图像中包括数个像素的局部图像区域。针对多帧目标传输图像的每一帧,若目标传输图像尺寸和划分方式均相同,则可以被划分为个数相同的预设大小的宏块。
其中,对于宏块的形状,本申请实施例不做具体限定,例如,可以为正方形、长方形、不规则的多边形等。
基于此,为了后续对目标传输图像更方便的分析处理,可以将目标传输图像按照边长为偶数倍像素的正方形进行划分,即,预设大小为2m×2m像素,m为大于或者等于1的正整数。
可选地,预设大小包括8×8像素、16×16像素或64×64像素。即,发送端将目标传输图像划分为多个8×8像素的宏块,或者,发送端将目标传输图像划分为多个16×16像素的宏块,或者,发送端将目标传输图像划分为多个64×64像素的宏块。
S103、当传输当前帧图像且相邻的前一帧图像未传输完时,发送端将当前帧图像与相邻的前一帧图像进行比较。其中,当前帧图像和相邻的前一帧图像均包括多个宏块。
发送端将当前帧图像与相邻的前一帧图像进行比较,指的是发送端将当前帧图像所包括的像素与相邻的前一帧图像所包括的像素的像素值进行比较。
需要说明的是,发送端可以以遍历的方式,从第一行像素至最后一行像素,并且每行从左至右的将当前帧图像与相邻的前一帧图像的每一个像素进行比较。或者,发送端可以将当前帧图像与相邻的前一帧图像中相同位置的宏块同时进行比较。
示例性的,将当前帧图像与相邻的前一帧图像中的像素按照8×8像素的划分方法,划分为多个宏块后,将当前帧图像中的第一行第1个宏块,与相邻的前一帧图像中的第一行第1个宏块进行比较,依次类推,将其他相同位置的宏块可以同时进行比较。
其中,将当前帧图像与相邻的前一帧图像中相同位置的宏块进行比较时,其具体的比较方式本申请对此不做特殊限制。例如,针对当前帧图像和相邻的前一帧图像中相同位置处的宏块,可以以从宏块的第一行至最后一行,从左至右的方式进行比较。
S104、若相邻的前一帧图像中的第一宏块与当前帧图像中的第二宏块相同,则将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,但不将当前帧图像中的第二宏块传输至接收端。
所谓的前一帧图像中的第一宏块与当前帧图像中的第二宏块相同指的是相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块中的每一像素的像素值均相同,此时,该第一宏块属于前一帧图像的局部,第二宏块属于当前帧图像的局部,说明前一帧图像和当前帧图像具有相同的冗余部分。如果第一宏块和第二宏块是相同的位置,则进一步说明前一帧图像和当前帧图像的相同的位置处具有相同的冗余部分。
可以理解的是,当前一帧图像和当前帧图像具有多组相同的宏块时,则相邻的前一帧图像包括多个第一宏块,当前帧图像包括多个第二宏块,每一组第一宏块和第二宏块是相同的。
基于此,对于第二宏块,即,对于前一帧图像和当前帧图像的冗余部分,可以减少一次传输,相应的,会减少一次的编码量和传输量。由于相邻的前一帧图像已经在传输中,而当前帧图像即将传输但是实际上还未传输,所以可以将相邻的前一帧图像中的第一宏块传输至接收端,而不将当前帧图像中的第二宏块传输。
本申请实施例提供了一种图像传输方法,当传输当前帧图像且相邻的前一帧图像未传输完时,发送端可以将当前帧图像与相邻的前一帧图像进行比较,当相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块相同时,则通过将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,而不将当前帧图像中的第二宏块传输至接收端。由于第二宏块为当前帧图像和相邻的前一帧图像中完全相同的冗余部分,所以减少一次传输,可以减少编码量和传输量,从而减轻传输带宽压力,提高资源的利用率,且由于前一帧图像的第一宏块是完整传输的,可以尽量提高接收端显示的清晰度,提升用户体验。
可选地,在上述S104之后,该方法还包括:
若相邻的前一帧图像中的第一宏块与当前帧图像中的第二宏块不相同,则停止传输第一宏块,而将当前帧图像中的第二宏块传输至接收端。
当相邻的前一帧图像中的第一宏块与当前帧图像中的第二宏块不相同时,说明图像发生了改变,可以停止传输前一帧图像中第一宏块未传输完的内容,从而进一步减轻传输带宽压力,提高资源的利用率。
可选地,在上述S102之后,该方法还包括:
发送端将目标传输图像中的宏块通过分层编码传输至接收端。
其中,分层编码指的是将宏块的像素划分到多个不同图层上,然后,对每个图层进行编码传输。由于每个图层仅包括部分像素,因此在传输时,可以适应较小的带宽,使得接收端可以先显示出图像的大概轮廓,再逐渐显示清晰。
可以理解的是,由于多帧目标传输图像包括当前帧图像和相邻的前一帧图像,所以,当前帧图像和相邻的前一帧图像中的宏块都是通过分层编码传输至接收端的。
可选地,将目标传输图像中的宏块通过分层编码传输至接收端,如图2所示,包括:
S201、按照预设分层方式,将目标传输图像中的宏块划分为多个图层。
需要说明的是,划分的图层总数可以根据实际情况确定,本申请实施例对此不做特殊限制。
S202、将多个图层依次传输至接收端。
基于此,所谓的当传输当前帧图像且相邻的前一帧图像未传输完就指的是,当前帧图像中的宏块的第1个图层将要传输而相邻的前一帧图像中的宏块所包括的图层一部分已经传输,一部分还未传输的状态。
所谓的将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,但不将当前帧图像中的第二宏块传输至接收端,指的是,在当前帧图像中的第二宏块的第1个图层还未传输,而相邻的前一帧图像中的第一宏块所包括的图层一部分已经在传输,另一部分还未传输的情况下,在比较发现第一宏块和第二宏块相同后,将相邻的前一帧图像中的第一宏块所包括的未传输的那一部分图层继续进行传输,而将当前帧图像中的第二宏块所包括的所有图层不传输了。
所谓的停止传输第一宏块,而将当前帧图像中的第二宏块传输至接收端,指的是,在当前帧图像中的第二宏块的第1个图层还未传输,而相邻的前一帧图像中的第一宏块所包括的图层一部分已经在传输,另一部分还未传输的情况下,在比较发现第一宏块和第二宏块不相同后,将相邻的前一帧图像中的第一宏块所包括的未传输的那一部分图层不传输了,而将当前帧图像中的第二宏块所包括的所有图层开始进行编码传输。
示例性的,前一帧图像中的第一宏块a一共分了5个图层,之前已经编码传输了2个图层。那么,当发送端判断到第一宏块a与当前帧图像中同一位置处的第二宏块b相同时,发送端继续传输第一宏块a剩余的未传输的3个图层,而不将当前帧图像中的第二宏块b传输至接收端。而当发送端判断前一帧图像中的第一宏块a和当前帧图像中同一位置处的第二宏块b不相同时,发送端不再传输宏块a剩余的未传输的3个图层,而将当前帧图像的第二宏块b的所有图层开始编码传输。
可选地,按照预设分层方式,将目标传输图像中的宏块划分为多个图层,如图3所示,包括:
S301、按照频率直方图,将宏块划分为多个图层。
S302、按照各图层中所包括像素的频率从大到小的顺序,将各图层传输至接收端。
其中,频率直方图中横轴表示像素值,纵轴表示频率。由此,在频率直方图中,根据横轴和纵轴的信息,可以得到各像素值的像素出现的次数,即频率。
示例性的,在频率直方图中,10个不同的像素值a1~a10分别对应的频率为P1~P10。发送端将每个像素值对应的像素划分为一个图层,则可以将整个图像划分为10个图层,分别对应第一图层至第十图层。
然后,将各像素值按照频率进行排序,若P1>P5>P7>P6>P10>P3>P8>P9>P2>P4;则发送端在传输时,将按照第一图层、第五图层、第七图层、第六图层、第十图层、第三图层、第八图层、第九图层、第二图层,最后为第四图层的顺序进行传输。
示例性的,在频率直方图中,10个不同的像素值a1~a10分别对应的频率为P1~P10。发送端先将各像素值按照频率进行排序,若P1>P5>P7>P6>P10>P3>P8>P9>P2>P4;则前五个频率较高的像素值对应的像素划分为基础色图层,将后五个频率较低的像素值对应的像素划分为逃逸色图层。
然后,由于基础色图层所包括的像素相对于逃逸色图层的频率较高,因此,发送端在传输时,先传输基础色图层,再传输逃逸色图层至接收端。
可选地,按照预设分层方式,将目标传输图像中的宏块划分为多个图层,如图4所示,包括:
S401、按照宏块中各像素的关注度系数,将目标传输图像中的宏块划分为多个图层。其中,像素的关注度系数与像素至宏块预设位置之间的距离成反相关。
S402、按照各图层中所包括像素的平均关注度系数从大到小的顺序,将各图层传输至接收端。
需要说明的是,关注度系数用于表示人眼视觉对图像关注的程度,示例性的,可以使用0~1之间的数值进行表示。按照各像素的关注度系数,在将第一宏块划分为多个图层时,可以将人眼视觉重点关注的部分,尽量划分到一个或者多个图层,而将不重要的部分,划分到其他图层。
所谓的预设位置指的是在宏块中,预先指定的某一位置,用于以该位置为基准,计算该宏块中各个像素与该位置的距离。其中,预设位置可以根据需要进行设置,本申请对此不进行特殊限制。
示例性的,预设位置可以为宏块的物理中心,或者,预设位置为宏块的从左上至右下的对角线,或者从右上至左下的对角线,或者预设位置还可以为宏块的某一顶点。
所谓的平均关注度系数等于各个关注度系数乘以相应的像素数目,平均关注度系数越大,也就是该图层靠近预设位置的像素越多,越是人眼视觉的重点关注部分。由此,按照各图层中所包括像素的平均关注度系数从大到小的顺序,将各图层传输至接收端,可以使得用户先观察到这些重点部分,虽然其他部分的图像还未显示,但是用户已经能了解到图像中的重要细节,这种方式,使得用户体验更好。
示例性的,如图5所示,宏块c的大小为16×16像素的正方形宏块,预设位置为从左上至右下的一条对角线L,该宏块c中各个像素至该对角线之间的距离指的是各个像素的物理中心至对角线L的垂直距离,且该垂直距离以一个像素的对角线长度d为单位。假设像素与对角线L的垂直距离越小,越是人眼视觉的重点关注部分,则该像素的关注度系数越大。其中,关注度系数的取值范围0~1。
由此,发送端将与对角线L垂直距离为0d和4d的像素划分为第一图层P1,对应的关注度系数分别为0.8和0.4;计算得到第一图层所包括的像素的平均关注度系数为16×0.8+16×0.4=19.2。
发送端将与对角线L垂直距离为2d和6d的像素划分为第二图层P2,对应的关注度系数分别为0.6和0.2;计算得到第二图层所包括的像素的平均关注度系数为24×0.6+8×0.2=16。
发送端将与对角线L垂直距离为1d和5d的像素划分为第三图层P3,对应的关注度系数分别为0.7和0.3;计算得到第三图层所包括的像素的平均关注度系数为28×0.7+12×0.3=23.2。
发送端将与对角线L垂直距离为3d和7d的像素划分为第四图层P4;对应的关注度系数分别为0.5和0.1;计算得到第四图层所包括的像素的平均关注度系数为20×0.5+4×0.1=10.4。
发送端将与对角线L垂直距离为0.5d和4.5d的像素划分为第五图层P5;对应的关注度系数分别为0.75和0.35;计算得到第五图层所包括的像素的平均关注度系数为30×0.75+14×0.35=27.4。
发送端将与对角线L垂直距离为1.5d和5.5d的像素划分为第六图层P6;对应的关注度系数分别为0.65和0.25;计算得到第六图层所包括的像素的平均关注度系数为26×0.65+10×0.25=19.4。
发送端将与对角线L垂直距离为2.5d和6.5d的像素划分为第七图层P7;对应的关注度系数分别为0.55和0.15;计算得到第七图层所包括的像素的平均关注度系数为22×0.55+6×0.15=13。
发送端将与对角线L垂直距离为3.5d和7.5d的像素划分为第八图层P8;对应的关注度系数分别为0.45和0.05;计算得到第八图层所包括的像素的平均关注度系数为18×0.45+2×0.05=8.2。
然后,按照各图层中所包括像素的平均关注度系数从大到小进行排序,由于27.4>23.2>19.4>19.2>16>13>10.4>8.2,则发送端按照第五图层、第三图层、第六图层、第一图层、第二图层、第七图层和第八图层的顺序传输至接收端。
本申请实施例提供一种图像传输装置,可以应用于发送端,如图6所示,包括:
比较模块601,用于当传输当前帧图像且相邻的前一帧图像未传输完时,将当前帧图像与相邻的前一帧图像进行比较;其中,当前帧图像和相邻的前一帧图像均包括多个宏块。
筛选模块602,用于若相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块相同,则将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,但不将当前帧图像中的第二宏块传输至接收端。
本申请实施例提供了一种图像传输装置,该图像传输装置可以应用于发送端。当传输当前帧图像时,图像传输装置可以当传输当前帧图像且相邻的前一帧图像未传输完时,将当前帧图像与相邻的前一帧图像进行比较,当相邻的前一帧图像中的第一宏块与当前帧图像的第二宏块相同,则将相邻的前一帧图像中的第一宏块中未传输的内容传输至接收端,但不将当前帧图像中的第二宏块传输至接收端。由于第二宏块为当前帧图像和相邻的前一帧图像中完全相同的冗余部分,所以减少一次传输,可以减少编码量和传输量,从而减轻传输带宽压力,提高资源的利用率,且由于前一帧图像的第一宏块是完整传输的,可以尽量提高接收端显示的清晰度,提升用户体验。
可选地,筛选模块602,还用于若相邻的前一帧图像中的第一宏块与当前帧图像中的第二宏块不相同,则停止传输第一宏块,而将当前帧图像中的第二宏块传输至接收端。
可选地,图像传输装置还包括:
获取模块603,用于获取多帧目标传输图像,其中,多帧目标传输图像包括当前帧图像和相邻的前一帧图像。
划分模块604,用于将目标传输图像划分为多个预设大小的宏块。
基于上述图1对应的实施例中所描述的图像传输方法,本公开实施例还提供一种计算机可读存储介质,例如,非临时性计算机可读存储介质可以是只读存储器(英文:ReadOnlyMemory,ROM)、随机存取存储器(英文:RandomAccessMemory,RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令,用于执行上述图1对应的实施例中所描述的数据传输方法,此处不再赘述。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种图像传输方法,其特征在于,所述方法包括:
当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较;其中,所述当前帧图像和所述相邻的前一帧图像均包括多个宏块;
若所述相邻的前一帧图像中的第一宏块与所述当前帧图像中的第二宏块相同,则将所述相邻的前一帧图像中的所述第一宏块中未传输的内容传输至接收端,但不将所述当前帧图像中的所述第二宏块传输至所述接收端。
2.根据权利要求1所述的图像传输方法,其特征在于,所述方法还包括:
若所述相邻的前一帧图像中的第一宏块与所述当前帧图像中的第二宏块不相同,则停止传输所述第一宏块,而将所述当前帧图像中的第二宏块传输至所述接收端。
3.根据权利要求1所述的图像传输方法,其特征在于,在所述当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较之前,所述方法还包括:
获取多帧目标传输图像,其中,多帧所述目标传输图像包括所述当前帧图像和所述相邻的前一帧图像;
将所述目标传输图像划分为多个预设大小的所述宏块。
4.根据权利要求3所述的图像传输方法,其特征在于,所述预设大小包括8×8像素、16×16像素或64×64像素。
5.根据权利要求1所述的图像传输方法,其特征在于,所述当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与相邻的前一帧图像进行比较,包括:
将所述当前帧图像与所述相邻的前一帧图像中相同位置的所述宏块进行比较。
6.根据权利要求3所述的图像传输方法,其特征在于,所述方法还包括:
将所述目标传输图像中的所述宏块通过分层编码传输至所述接收端。
7.根据权利要求6所述的图像传输方法,其特征在于,所述将所述目标传输图像中的所述宏块通过分层编码传输至所述接收端,包括:
按照预设分层方式,将所述目标传输图像中的所述宏块划分为多个图层;
将所述多个图层依次传输至所述接收端。
8.根据权利要求7所述的图像传输方法,其特征在于,所述按照预设分层方式,将所述目标传输图像中的所述宏块划分为多个图层,包括:
按照所述宏块中各像素的关注度系数,将所述目标传输图像中的所述宏块划分为多个所述图层;其中,所述像素的关注度系数与所述像素至所述宏块预设位置之间的距离成反相关;
按照各所述图层中所包括像素的平均关注度系数从大到小的顺序,将各所述图层传输至所述接收端。
9.一种图像传输装置,其特征在于,包括:
比较模块,用于当传输当前帧图像且相邻的前一帧图像未传输完时,将所述当前帧图像与所述相邻的前一帧图像进行比较;其中,所述当前帧图像和所述相邻的前一帧图像均包括多个宏块;
筛选模块,用于若所述相邻的前一帧图像中的第一宏块与所述当前帧图像的第二宏块相同,则将所述相邻的前一帧图像中的所述第一宏块中未传输的内容传输至接收端,但不将所述当前帧图像中的所述第二宏块传输至所述接收端。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至8任一项所述的图像传输方法。
CN202010478901.7A 2020-05-29 图像传输方法及装置 Active CN111654699B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010478901.7A CN111654699B (zh) 2020-05-29 图像传输方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010478901.7A CN111654699B (zh) 2020-05-29 图像传输方法及装置

Publications (2)

Publication Number Publication Date
CN111654699A true CN111654699A (zh) 2020-09-11
CN111654699B CN111654699B (zh) 2024-05-17

Family

ID=

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112637635A (zh) * 2020-12-15 2021-04-09 西安万像电子科技有限公司 文件保密方法及系统、计算机可读存储介质及处理器
WO2023134128A1 (zh) * 2022-01-11 2023-07-20 苏州浪潮智能科技有限公司 一种视频压缩处理方法、装置及介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112637635A (zh) * 2020-12-15 2021-04-09 西安万像电子科技有限公司 文件保密方法及系统、计算机可读存储介质及处理器
WO2023134128A1 (zh) * 2022-01-11 2023-07-20 苏州浪潮智能科技有限公司 一种视频压缩处理方法、装置及介质

Similar Documents

Publication Publication Date Title
US10715831B2 (en) Stereoscopic video encoding and decoding methods and apparatus
EP2916543B1 (en) Method for coding/decoding depth image and coding/decoding device
EP2938069B1 (en) Depth-image decoding method and apparatus
EP1587329B1 (en) Three-dimensional video providing method and three-dimensional video display device
De Silva et al. Display dependent preprocessing of depth maps based on just noticeable depth difference modeling
CN106131670B (zh) 一种自适应视频编码方法及终端
Aflaki et al. Subjective quality assessment of asymmetric stereoscopic 3D video
JP3781210B2 (ja) 立体視化装置及び立体視化方法
CN101888566A (zh) 立体视频编码率失真性能估计方法
CN115834876A (zh) 解码和编码设备、存储比特流的介质和数据发送设备
US20170302920A1 (en) Methods, encoders and decoders for coding of video sequencing
US9924169B2 (en) Method and apparatus for selecting a filter based on a variance of depth data
DE102019218316A1 (de) 3d-renderer-zu-videocodierer-pipeline für verbesserte visuelle qualität und geringe latenz
CN111131831B (zh) 数据传输方法及装置
US9602831B2 (en) Method and apparatus for processing video signals
CN110740316A (zh) 数据编码方法及装置
CN113853796A (zh) 用于体积视频编码和解码的方法、装置和计算机程序产品
CN104853208B (zh) 一种视频编码方法和装置
CN111654699B (zh) 图像传输方法及装置
CN111654699A (zh) 图像传输方法及装置
EP2890124A1 (en) Coding method and device applied to hevc-based 3dvc
US20150117517A1 (en) Video signal processing method and device
CN112911297A (zh) 编解码方法、设备及系统
CN113542864A (zh) 视频的花屏区域检测方法、装置、设备及可读存储介质
CN107547895B (zh) 一种图像处理方法及其装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant