CN116418987A - 图像编码方法、装置、设备及介质 - Google Patents
图像编码方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN116418987A CN116418987A CN202111671988.0A CN202111671988A CN116418987A CN 116418987 A CN116418987 A CN 116418987A CN 202111671988 A CN202111671988 A CN 202111671988A CN 116418987 A CN116418987 A CN 116418987A
- Authority
- CN
- China
- Prior art keywords
- image
- detected
- scene change
- term reference
- current image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000008859 change Effects 0.000 claims abstract description 119
- 238000001514 detection method Methods 0.000 claims abstract description 91
- 230000007774 longterm Effects 0.000 claims abstract description 50
- 238000004590 computer program Methods 0.000 claims description 5
- 230000000630 rising effect Effects 0.000 abstract description 5
- 230000009466 transformation Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/142—Detection of scene cut or scene change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请公开一种图像编码方法、装置、设备及介质，包括：获取当前待检测图像和图像参考队列；其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列存储有解码后的图像，后置长期参考队列根据短期参考队列生成；根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。由于考虑到当前待检测图像与解码后的图像之间的场景是否发生变换，则基于场景变换检测结果选用相应编码方式对当前待检测图像进行编码，可以有效避免现有编码方式所造成的屏幕共享图像质量低、码率上升、延时增大，及网络拥塞等情况。
Description
技术领域
本申请实施例涉及图像编码领域，尤其涉及一种图像编码方法、装置、设备及介质。
背景技术
屏幕共享的原理是在发送端采集屏幕内容，并将采集的内容处理后发送至远端，远端接收到数据后进行解析并渲染到本地设备上。但是，通常采集到的屏幕原始图像(如RGB图像)的数据量较大，大多数网络都无法满足实时传输屏幕原始内容的需求。因此，需要对原始图像进行压缩编码，使编码后的数据大小能够满足实时网络情况。
目前，常见的编码分为帧内编码和帧间编码两种，帧内编码后的数据大小与当前编码图片的复杂度强相关，帧间编码后的数据大小与参考的编码图片的相似度强相关。在屏幕共享的过程中，若遇到屏幕内容中场景切换，那么切换前后两帧画面的变化往往比较大，如果按照帧间编码，则编码后的数据量会比较大。因此，大多数编码器会采用帧内编码，但是帧内编码也会产生较大的数据量，并且切换后的画面越复杂数据量越大，图像质量也会越低，从而容易引发码率飙升，并产生延时增大，网络拥塞的情况。
发明内容
本申请提供了一种图像编码方法、装置、设备及介质，可以有效避免现有技术中编码方式所造成的屏幕共享图像质量低、码率上升、延时增大，以及网络拥塞的情况。
第一方面，本申请实施例提供了一种图像编码方法，应用于屏幕共享场景下，该方法包括：
获取当前待检测图像和图像参考队列；
其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；
根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；
根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。
第二方面，本申请实施例还提供了一种图像编码装置，应用于屏幕共享场景下，该装置包括：
获取模块，用于获取当前待检测图像和图像参考队列；
其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；
检测模块，用于根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；
编码模块，用于根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。
第三方面，本申请实施例还提供了一种计算机设备，该计算机设备包括：存储器、处理器，当存储器存储有计算机程序，处理器执行计算机程序时，实现如本申请实施例提供的一种图像编码方法。
第四方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，当该计算机程序被处理器执行时，实现如本申请实施例提供的一种图像编码方法。
本申请提供了一种图像编码方法、装置、设备及介质，该方法包括：获取当前待检测图像和图像参考队列；其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。由于考虑到了当前待检测图像与解码后的图像之间的场景是否发生变换，那么基于场景变换检测结果选用相应的编码方式对当前待检测图像进行编码，可以有效避免现有技术中编码方式所造成的屏幕共享图像质量低、码率上升、延时增大，以及网络拥塞的情况。
附图说明
图1是本申请实施例提供的一种图像编码方法的流程图；
图2是本申请实施例提供的场景切换的示意图；
图3是本申请实施例提供的现有技术编码方式与本方案编码方式编码后数据大小的对比示意图；
图4是本申请实施例提供的现有技术编码方式与本方案编码方式编码后图像质量的对比示意图；
图5是本申请实施例提供的另一种图像编码装置的结构示意图；；
图6是本申请实施例提供的一种图像编码装置的结构示意图；
图7是本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。
另外，在本申请实施例中，“可选地”或者“示例性地”等词用于表示作例子、例证或说明。本申请实施例中被描述为“可选地”或者“示例性地”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“可选地”或者“示例性地”等词旨在以具体方式呈现相关概念。
图1为本申请实施例提供的一种图像编码方法的流程图，该方法可以应用于屏幕共享场景下，能够在共享的图像内容进行切换时，采用适当的方式对图像内容进行编码，避免共享屏幕的内容发生切换时造成图像质量下降，码率上升，进而产生网络拥塞的情况。如图1所示，该方法可以包括但不限于以下步骤：
S101、获取当前待检测图像和图像参考队列。
本申请实施例中的当前待检测图像可以理解为在屏幕共享场景下，待编码、共享的图像。可以理解的是，在进行屏幕共享时，可以以传输图片的方式共享不同屏幕上展示的视频、文字等等。进一步地，本申请实施例中设计的图像参考队列可以包括短期参考队列和后置长期参考队列两种不同的图像编码参考队列，且后置长期参考队列和短期参考队列中存储的图像均为解码后的图像，这里解码后的图像也可以理解为先进行编码，再解码后得到的图像。进一步地，上述后置长期参考队列可以根据短期参考队列生成。
S102、根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果。
示例性地，本步骤的实现方式可以包括：根据短期参考队列中最近M帧图像对当前待检测图像进行第一次场景变换检测，获取第一次场景变换检测的结果。在第一次场景变换检测的结果为当前待检测图像相对于最近M帧图像发生场景变换的情况下，根据后置长期参考队列中最近N帧图像对当前待检测图像进行第二次场景变换检测，获取第二次场景变换检测的结果。
进一步地，上述第一次场景变换检测的结果可以包括当前待检测图像相对于短期参考队列中最近M帧图像发生场景变换，或者当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换。第二次场景变换检测的结果可以包括当前待检测图像相对于后置长期参考队列中最近N帧图像发生场景变换，或者当前待检测图像相对于后置长期参考队列中最近N帧图像未发生场景变换，即每次场景变换检测的结果都可能为场景发生变换和场景未发生变换中的任意一种情况。其中，上述M和N均为大于0的整数，且M和N的取值可以相同，也可以不同。
S103、根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。
本申请实施例中，对当前待检测图像进行编码的方式可以包括帧内编码和帧间编码两种编码方式。示例性地，在场景变换检测结果为当前待检测图像相对于后置长期参考队列中最近N帧图像发生场景变换的情况下，可以对当前待检测图像进行帧内编码。在场景变换检测结果包括当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换，或者，当前待检测图像相对于后置长期参考队列中最近N帧图像未发生场景变换的情况下，可以对当前待检测图像进行帧间编码，这样由于当前待检测图像与最近N帧图像的相似度强相关，那么采用帧间编码可以使得当前待检测图像编码后的数据量小，且编码后的图像质量较高。
这样考虑到当前待检测图像与后置长期参考队列、短期参考队列中各个解码后的图像之间的场景内容是否发生变换，从而选取相应的编码方式可以有效避免现有技术中编码方式所造成的屏幕共享图像质量低、码率上升、延时增大，以及网络拥塞的情况。
本申请实施例提供了一种图像编码方式，应用于屏幕共享场景下，该方法包括：获取当前待检测图像和图像参考队列；其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。由于考虑到了当前待检测图像与已编码后的图像之间的场景是否发生变换，那么基于场景变换检测结果选用相应的编码方式对当前待检测图像进行编码，可以有效避免现有技术中编码方式所造成的屏幕共享图像质量低、码率上升、延时增大，以及网络拥塞的情况。
在一种示例中，上述步骤S102中，当前待检测图像相对于短期参考队列中最近M帧图像发生场景变换包括当前待检测图像与短期参考队列中最近M帧图像中的任意一帧的相似度小于第一相似度阈值，当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换包括当前待检测图像与短期参考队列中最近M帧图像中的任意一帧的相似度大于或等于第一相似度阈值，当前待检测图像相对于后置长期参考队列中最近N帧图像发生场景变换包括当前待检测图像与后置长期参考队列中最近N帧图像中的任意一帧图像的相似度小于第二相似度阈值，当前待检测图像相对于后置长期参考队列中最近N帧图像未发生场景变换包括当前待检测图像与后置长期参考队列中最近N帧图像中的任意一帧图像的相似度大于或等于第二相似度阈值。
需要说明的是，上述第一相似度阈值与第二相似度阈值可以相同，也可以不同，比如，第一相似度阈值与第二相似度阈值均可以为75％。可以理解的是，由于第一相似度阈值与第二相似度阈值均用于判断当前待检测图像与不同参考队列中图像之间的相似度，那么第一相似度阈值与第二相似度阈值的取值范围均为0～100％。示例性地，可以通过图像中相同位置像素点之间的差值确定两帧图像之间的相似度。
在一种示例中，上述步骤S103中对当前待检测图像进行帧间编码的实现方式可以包括：
在场景变换检测结果包括当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换的情况下，基于M帧图像中与当前待检测图像相似度最高的图像对当前待检测图像进行帧间编码；在场景变换检测结果包括当前待检测图像相对于后置长期参考队列中最近N帧图像未发生场景变换的情况下，基于N帧图像中与当前待检测图像相似度最高的图像对当前待检测图像进行帧间编码。
进一步地，在一种示例中，在上述步骤S103之后，本申请实施例还提供了一种基于编码后的当前待检测图像更新上述短期参考队列的实现方式。例如，对编码后的当前待检测图像进行解码，将解码后的当前待检测图像更新至短期参考队列。可以理解的是，这里编码后的当前待检测图像可以包括上述帧内编码或帧间编码后的图像。
例如，假设当前待检测图像为X，基于短期参考队列中最近M帧图像对X进行场景变换检测，若X与最近M帧图像相比，未发生场景变换，那么基于M帧图像中与X相似度最高的图像S1对X进行帧间编码，得到X1，并将X1解码后更新至短期参考队列。若X与最近M帧图像相比，发生场景变换，则基于后置长期参考队列中最近N帧图像对X进行场景变换检测，若X相比最近N帧图像未发生场景变换，则基于N帧图像中与X相似度最高的图像S2对X进行帧间编码，得到X2，并将X2解码后更新至短期参考队列。若X相比最近N帧图像发生场景变换，则对X进行帧内编码，得到X3，并将X3解码后更新至短期参考队列。即无论对X采用哪种编码方式，均可以将编码后的图像进行解码，并更新至短期参考队列。
示例性地，上述步骤S101中根据短期参考队列生成后置长期参考队列的实现方式可以包括：确定短期参考队列中最近一帧图像；将确定出的最近一帧图像添加至后置长期参考队列。
需要说明的是，这里的短期参考队列为上述步骤S101中获取的图像参考队列中包含的短期参考队列，即该短期参考队列还未涉及到基于解码后的当前待检测图像更新短期参考队列。
可以理解的是，在步骤S101中获取当前待检测图像和图像参考队列时，该图像参考队列中包含的短期参考队列和后置长期参考队列也是采用上述同样的方式确定得到的。
如图2所示，为屏幕共享过程中共享的各个图像，其中，1-30帧为画面一的静止状态，30-31帧为从画面一切换到画面二，发生场景切换，31-60帧是画面二静止状态，60-61帧又从画面二切换回到画面一，同样发生场景切换。若采用现有技术进行编码，那么在对第61帧画面进行编码时，将进行帧内编码或者参考第31帧画面进行帧间编码。无论采用哪种方式，图像编码后的码率、图像质量都会比较差。而基于本申请实施例提出的方案，由于设计了短期参考队列和后置长期参考队列对当前待检测图像进行了场景变换检测，那么基于检测结果进行编码时，可以参考第30帧画面对第61帧画面进行帧间编码，这样编码后的图像的码率和图像质量相比于现有技术都会比较好。
并且选用同款编码器，针对上述场景，分别采用现有技术中两种不同的编码方式(标注为现有技术1、现有技术2)与本方案中的编码方式进行编码、对比测试，如图3和图4所示，无论从编码后的数据大小(单位为bit)，还是图像质量来看，本方案的编码方式均优于现有技术1和现有技术2中的编码方式。其中，图3中的数据越小，表示编码效果越好。图4中的纵轴的图像质量的值越大，表示编码效果越好。
图5为本申请实施例提供的一种图像编码装置的结构示意图，该装置可以应用于屏幕共享场景下，如图5所示，该装置包括：获取模块501、检测模块502、编码模块503；
获取模块，用于获取当前待检测图像和图像参考队列；
其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；
检测模块，用于根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；
编码模块，用于根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。
在一种示例中，检测模块，用于根据短期参考队列中最近M帧图像对当前待检测图像进行第一次场景变换检测，获取第一次场景变换检测的结果；以及，在第一次场景变换检测的结果为当前待检测图像相对于最近M帧图像发生场景变换的情况下，根据后置长期参考对列中最近N帧图像对当前待检测图像进行第二次场景变换检测，获取第二次场景变换检测的结果；
其中，第一次场景变换检测的结果包括当前待检测图像相对于短期参考队列中最近M帧图像发生场景变换，或者当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换，第二次场景变换检测的结果包括当前待检测图像相对于后置长期参考对列中最近N帧图像发生场景变换，或者当前待检测图像相对于后置长期参考对列中最近N帧图像未发生场景变换，M和N均为大于0的整数。
示例性地，当前待检测图像相对于短期参考队列中最近M帧图像发生场景变换包括当前待检测图像与短期参考队列中最近M帧图像中的任意一帧的相似度小于第一相似度阈值，当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换包括当前待检测图像与短期参考队列中最近M帧图像中的任意一帧的相似度大于或等于第一相似度阈值，当前待检测图像相对于后置长期参考对列中最近N帧图像发生场景变换包括当前待检测图像与后置长期参考对列中最近N帧图像中的任意一帧图像的相似度小于第二相似度阈值，当前待检测图像相对于后置长期参考对列中最近N帧图像未发生场景变换包括当前待检测图像与后置长期参考对列中最近N帧图像中的任意一帧图像的相似度大于或等于第二相似度阈值。
在一种示例中，编码模块，用于在场景变换检测结果包括当前待检测图像相对于后置长期参考对列中最近N帧图像发生场景变换的情况下，则对当前待检测图像进行帧内编码；在场景变换检测结果包括当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换，或者当前待检测图像相对于长期参考队列中最近N帧图像为发生场景变换的情况下，对当前待检测图像进行帧间编码。
进一步地，上述编码模块，还用于在场景变换检测结果包括当前待检测图像相对于短期参考队列中最近M帧图像未发生场景变换的情况下，基于M帧图像中与当前待检测图像相似度最高的图像对当前待检测图像进行帧间编码；在场景变换检测结果包括当前待检测图像相对于后置长期参考队列中最近N帧图像未发生场景变换的情况下，基于N帧图像中与当前待检测图像相似度最高的图像对当前待检测图像进行帧间编码。
如图6所示，在一种示例中，上述装置还可以包括更新模块504；
更新模块，用于更新短期参考队列和后置长期参考队列。
示例性地，更新模块，用于对编码后的当前待检测图像进行解码，将解码后的当前待检测图像更新至短期参考队列。
更新模块，也可以用于确定短期参考队列中最近一帧图像，将确定出的最近一帧图像添加至后置长期参考队列。
本申请实施例所提供的图像编码装置可执行本申请图1实施例所提供的图像编码方法，具备执行方法相应的功能单元和有益效果。
图7为本申请实施例提供的一种计算机设备的结构示意图，如图7所示，该计算机设备包括处理器701、存储器702、输入装置703、输出装置704；计算机设备中处理器701的数量可以是一个或多个，图7中以一个处理器701为例；计算机设备中的处理器701、存储器702、输入装置703和输出装置704可以通过总线或其他方式连接，图7中以通过总线连接为例。
存储器702作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请实施例图1中的图像编码的方法对应的程序指令/模块(例如，图像编码的装置中的获取模块501、检测模块502、编码模块503)。处理器701通过运行存储在存储器702中的软件程序、指令以及模块，从而执行计算机设备的各种功能以及数据处理，即实现上述的图像编码方法。
存储器702可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据云服务器的使用所创建的数据等。此外，存储器702可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器702可进一步包括相对于处理器701远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置703可用于接收输入的数字或字符信息，以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置704可包括显示屏等显示设备。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由处理器执行时用于执行一种图像编码的方法，该方法包括：
获取当前待检测图像和图像参考队列；
其中，图像参考队列包括短期参考队列和后置长期参考队列，短期参考队列和后置长期参考队列均存储有解码后的图像，后置长期参考队列根据短期参考队列生成；
根据图像参考队列对当前待检测图像进行场景变换检测，获取场景变换检测结果；
根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本申请任意实施例所提供的图像编码的方法。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本申请可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。
值得注意的是，上述图像编码的装置的实施例中，所包括的各个模块、单元只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。
注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。
Claims (10)
1.一种图像编码方法，应用于屏幕共享场景下，其特征在于，包括：
获取当前待检测图像和图像参考队列；
其中，所述图像参考队列包括短期参考队列和后置长期参考队列，所述短期参考队列和后置长期参考队列均存储有解码后的图像，所述后置长期参考队列根据所述短期参考队列生成；
根据所述图像参考队列对所述当前待检测图像进行场景变换检测，获取场景变换检测结果；
根据所述场景变换检测结果选用与所述场景变换检测结果对应的编码方式对所述当前待检测图像进行编码。
2.根据权利要求1所述的方法，其特征在于，所述根据所述图像参考队列对所述当前待检测图像进行场景变换检测，获取场景变换检测结果，包括：
根据所述短期参考队列中最近M帧图像对所述当前待检测图像进行第一次场景变换检测，获取第一次场景变换检测的结果；
在所述第一次场景变换检测的结果为所述当前待检测图像相对于所述最近M帧图像发生场景变换的情况下，根据所述后置长期参考队列中最近N帧图像对所述当前待检测图像进行第二次场景变换检测，获取第二次场景变换检测的结果。
3.根据权利要求1或2任一项所述的方法，其特征在于，所述根据所述场景变换检测结果选用与所述场景变换检测结果对应的编码方式对所述当前待检测图像进行编码，包括：
在所述场景变换检测结果包括所述当前待检测图像相对于所述后置长期参考队列中最近N帧图像发生场景变换的情况下，对所述当前待检测图像进行帧内编码；
在所述场景变换检测结果包括所述当前待检测图像相对于所述短期参考队列中最近M帧图像未发生场景变换，或者所述当前待检测图像相对于所述后置长期参考队列中最近N帧图像未发生场景变换的情况下，则对所述当前待检测图像进行帧间编码。
4.根据权利要求3所述的方法，其特征在于，所述对所述当前待检测图像进行帧间编码，包括：
在所述场景变换检测结果包括所述当前待检测图像相对于所述短期参考队列中最近M帧图像未发生场景变换的情况下，基于所述M帧图像中与所述当前待检测图像相似度最高的图像对所述当前待检测图像进行帧间编码；
在所述场景变换检测结果包括所述当前待检测图像相对于所述后置长期参考队列中最近N帧图像未发生场景变换的情况下，基于所述N帧图像中与所述当前待检测图像相似度最高的图像对所述当前待检测图像进行帧间编码。
5.根据权利要求1所述的方法，其特征在于，在所述根据场景变换检测结果选用与场景变换检测结果对应的编码方式对当前待检测图像进行编码之后，所述方法还包括：
基于编码后的所述当前待检测图像更新所述短期参考队列。
6.根据权利要求5所述的方法，其特征在于，所述基于编码后的所述当前待检测图像更新所述短期参考队列，包括：
对编码后的所述当前待检测图像进行解码；
将解码后的所述当前待检测图像更新至所述短期参考队列。
7.根据权利要求1所述的方法，其特征在于，根据所述短期参考队列生成所述后置长期参考队列，包括：
确定所述短期参考队列中最近一帧图像；
将确定出的所述最近一帧图像添加至所述后置长期参考队列。
8.一种图像编码装置，应用于屏幕共享场景下，其特征在于，包括：
获取模块，用于获取当前待检测图像和图像参考队列；
其中，所述图像参考队列包括短期参考队列和后置长期参考队列，所述短期参考队列和后置长期参考队列均存储有解码后的图像，所述后置长期参考队列根据所述短期参考队列生成；
检测模块，用于根据所述图像参考队列对所述当前待检测图像进行场景变换检测，获取场景变换检测结果；
编码模块，用于根据所述场景变换检测结果选用与所述场景变换检测结果对应的编码方式对所述当前待检测图像进行编码。
9.一种计算机设备，包括存储器、处理器，其特征在于，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时，实现如权利要求1-7任一项所述的图像编码方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-7任一项所述的图像编码方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111671988.0A CN116418987A (zh) | 2021-12-31 | 2021-12-31 | 图像编码方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111671988.0A CN116418987A (zh) | 2021-12-31 | 2021-12-31 | 图像编码方法、装置、设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116418987A true CN116418987A (zh) | 2023-07-11 |
Family
ID=87051833
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111671988.0A Pending CN116418987A (zh) | 2021-12-31 | 2021-12-31 | 图像编码方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116418987A (zh) |
-
2021
- 2021-12-31 CN CN202111671988.0A patent/CN116418987A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6087940B2 (ja) | 復号化ピクチャ・バッファおよび参照ピクチャ・リストのための状態情報のシグナリング | |
| US9699099B2 (en) | Method of transmitting data in a communication system | |
| US9262986B2 (en) | Reference frame management for screen content video coding using hash or checksum functions | |
| US9172907B2 (en) | Method and apparatus for dynamically adjusting aspect ratio of images during a video call | |
| US9560379B2 (en) | Inter-prediction method and video encoding/decoding method using the inter-prediction method | |
| JP2015501098A5 (zh) | ||
| US20130142447A1 (en) | Method and apparatus for encoding and decoding image | |
| CN111163318B (zh) | 一种基于反馈优化的人机视觉编码方法和装置 | |
| WO2021057481A1 (zh) | 视频编解码方法和相关装置 | |
| US9306987B2 (en) | Content message for video conferencing | |
| WO2021057705A1 (zh) | 视频编解码方法和相关装置 | |
| US20140254688A1 (en) | Perceptual Quality Of Content In Video Collaboration | |
| CN112218076B (zh) | 一种视频编码方法、装置、系统及计算机可读存储介质 | |
| CN111343503B (zh) | 视频的转码方法、装置、电子设备及存储介质 | |
| US20130039429A1 (en) | Computer display content coding method and system | |
| WO2021057480A1 (zh) | 视频编解码方法和相关装置 | |
| WO2021057479A1 (zh) | 视频编解码方法和相关装置 | |
| WO2023024832A1 (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
| CN116418987A (zh) | 图像编码方法、装置、设备及介质 | |
| CN116668741A (zh) | 云桌面的显示方法、图像显示方法、设备和存储介质 | |
| CN109413445B (zh) | 一种视频传输方法及装置 | |
| CN113557525B (zh) | 图像处理方法和装置 | |
| WO2021057478A1 (zh) | 视频编解码方法和相关装置 | |
| US9451285B2 (en) | Inter-prediction method and video encoding/decoding method using the inter-prediction method | |
| CN111225238A (zh) | 信息处理方法及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |