CN109151481B - 图片的传输和接收的方法、装置、系统、设备和介质 - Google Patents

图片的传输和接收的方法、装置、系统、设备和介质 Download PDF

Info

Publication number
CN109151481B
CN109151481B CN201710508345.1A CN201710508345A CN109151481B CN 109151481 B CN109151481 B CN 109151481B CN 201710508345 A CN201710508345 A CN 201710508345A CN 109151481 B CN109151481 B CN 109151481B
Authority
CN
China
Prior art keywords
pictures
coded
picture
encoded
generate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710508345.1A
Other languages
English (en)
Other versions
CN109151481A (zh
Inventor
毛煦楠
高欣玮
张涛
郭利财
时永方
高安林
邓海波
郭耀耀
谷沉沉
何健
吕静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710508345.1A priority Critical patent/CN109151481B/zh
Priority to PCT/CN2018/086510 priority patent/WO2019001149A1/zh
Publication of CN109151481A publication Critical patent/CN109151481A/zh
Priority to US16/546,034 priority patent/US10869048B2/en
Application granted granted Critical
Publication of CN109151481B publication Critical patent/CN109151481B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/395Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving distributed video coding [DVC], e.g. Wyner-Ziv video coding or Slepian-Wolf video coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种图片的传输和接收的方法、装置及其系统,其中,传输方法包括:获取图片;根据图片生成视频序列,其中,视频序列包括通过复制图片生成的N个待编码图片,其中,N为正整数;获取分辨率设置序列,其中,分辨率设置序列包括N个待编码图片对应的分辨率;根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端。由此,扩展了图片的处理方式,使得图片可以根据需要以不同分辨率进行组合显示,满足了不同场景下的需求。

Description

图片的传输和接收的方法、装置、系统、设备和介质
技术领域
本发明涉及图片处理技术领域,特别涉及一种图片的传输和接收的方法、装置、系统、设备和介质。
背景技术
目前,图片作为一种信息承载的载体被广泛使用,尤其随着微信、QQ等社交软件的兴起,用户越来越频繁的使用图片进行交流,相关技术中,根据原有图片的大小加载图片,比如,原有图片的大小是4M,则占用相应的加载资源(比如网络传输资源和内存资源等),加载出大小为4M的图片。
然而,上述完全基于图片本身大小进行图片传输的方式中,当图片过大,或者网速网速过慢的时候,图片发生传输延迟等,从而导致用户不能即时观看到相关图片。
发明内容
本发明提供一种图片的传输和接收的方法、装置及其系统,以解决现有技术中,基于图片本身大小进行图片传输的方式中,当图片过大,或者网速网速过慢的时候,图片发生传输延迟等,从而导致用户不能即时观看到相关图片的技术问题。
本发明第一实施例提供一种图片的传输方法,包括以下步骤:获取图片;根据所述图片生成视频序列,其中,所述视频序列包括通过复制所述图片生成的N个待编码图片,其中,N为正整数;获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率;根据所述分辨率设置序列对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片,并将所述N个编码图片发送至解码端,以使所述解码端对所述编码图片进行解码显示。
本发明第二实施例提供一种图片的接收方法,包括:接收N个编码图片,其中,所述N个编码图片复制所述图片并编码后生成的N个编码图片;对第i个编码图片进行解码以生成第i个解码图片,并向用户展示所述第i个解码图片,其中,i为小于N的正整数;根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。
本发明第三实施例提供一种图片的传输装置,包括:第一获取模块,用于获取图片;生成模块,用于根据所述图片生成视频序列,其中,所述视频序列包括通过复制所述图片生成的N个待编码图片,其中,N为正整数;第二获取模块,用于获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率;编码模块,用于根据所述分辨率设置序列对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片;发送模块,用于将所述N个编码图片发送至解码端,以使所述解码端对所述编码图片进行解码显示。
本发明第四实施例提供一种图片的接收装置,包括:接收模块,用于接收N个编码图片,其中,所述N个编码图片复制所述图片并编码后生成的N个编码图片;解码模块,用于对第i个编码图片进行解码以生成第i个解码图片;展示模块,用于向用户展示所述第i个解码图片,其中,i为小于N的正整数;所述解码模块,还用于根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。
本发明第五实施例提供一种图片处理系统,包括:本发明第三实施例所述的图片的传输装置;本发明第三实施例所述的图片的接收装置。
本发明第六实施例提供一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如本发明第一实施例所述的图片的传输方法。
本发明第七实施例提供一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如本发明第二实施例所述的图片的接收方法。
本发明第八实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明第一实施例所述的图片的传输方法。
本发明第九实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明第二实施例所述的图片的接收方法。
本发明实施例提供的技术方案可以包括以下有益效果:
获取图片,根据图片生成视频序列,获取分辨率设置序列,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端对编码图片进行解码显示。由此,扩展了图片的处理方式,使得图片可以根据需要以不同分辨率进行组合显示,满足了不同场景的需要。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中,
图1为根据现有技术的图片加载不出来的显示界面;
图2是根据本发明一个实施例的基于SVC进行空间的可伸缩性处理过程示意图;
图3是根据本发明一个实施例的图片的传输方法的流程图;
图4是根据本发明一个实施例的混合分辨率编码框架示意图;
图5是根据本发明一个具体实施例的图片的传输方法的流程图;
图6是根据本发明一个实施例的图片的接收方法的流程图;
图7(a)是根据本发明一个实施例的图片显示的效果示意图;
图7(b)是根据本发明另一个实施例的图片显示的效果示意图;
图8是根据本发明一个实施例的图片的传输装置的结构示意图;
图9是根据本发明另一个实施例的图片的传输装置的结构示意图;
图10是根据本发明一个实施例的图片的接收装置的结构示意图;
图11是根据本发明一个实施例的图片处理系统的结构示意图;以及
图12是根据本发明一个具体实施例的图片处理系统的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
基于以上分析可知,现有图片传输处理方式中,完全依赖于图片本身大小进行处理,这种处理方式,受到图片大小以及传输网速的限制,当图片过大,或者网速较低的时候,图片可能不能即时被加载出来,甚至如图1所示,长时间显示给用户加载中的界面,用户体验较差。
相关技术中,SVC(Scalable Video Coding,可伸缩视频编码技术)技术作为一种可伸缩视频编码技术,采用分层编码的结构,可以在时间、空间和质量三个维度上实现可伸缩性,即每个维度上具有一个基本层和多个增强层,该技术可以将一个视频源编码成一个包含多个子流的SVC视频流,不同的时间增强层和空间增强层的组合对对应不同的子流,其中每个子流都能解码出一个视频。
举例而言,当一个视频流基于SVC进行空间的可伸缩性处理时,可以将视频流的不同的帧,进行分辨率的不同的编码处理,如图2所示,在第1层到第3层可以分别针对视频的不同的帧分别编码成QCIF、CIF、4CIF格式的图片,编码后可以得到一个同时具有三个空间分辨率的码流,其中,发送端可以根据宽带来选择不同空间分辨率的视频流,接收端收到较多增强层则解码出分辨率较高的视频序列,收到较少的增强层则解码出较低分辨率的视频序列。
然而,SVC技术虽然提出了可对视频流处理成不同帧速率或者分辨率的码流的方式,但是,其是针对视频流进行处理的技术,当处理对象仅仅是图片时,将难以实现,另外,根据SVC技术的实现原理可知,接收端根据当前网络带宽选择不同的码流,意味着,当多个连续时刻的宽带资源相差较大时,码流对应的分辨率是不同的,甚至不停跳变,这种完全依赖宽带资源进行显示的方式,给用户带来的视觉体验较差。
而在本发明的实施例中,为了避免图片传输延迟等,将图片处理成视频序列,并对视频序列中多个图片进行编码处理,但是与SVC技术不同的是,在本申请中,图片分辨率能够按需设置并传输。
下面结合附图来描述本发明实施例的图片的传输和接收的方法、装置及其系统。
图3是根据本发明一个实施例的图片的传输方法的流程图,如图3所示,该方法包括:
S101,获取图片。
可以理解,本发明实施例中的图片,可以是网页中待加载的图片,社交软件中待发送的图片等,也就是说,该图片可以是任意待传输展示的图片,在此不作限制。
需要说明的是,根据具体应用场景的不同,可采用不同的方式实现对图片的获取,作为一种可能的实现方式,通过钩子函数监测图片发送触发函数是否被调用,一旦检测到该函数被调用,则获取相关图片。
作为另一种可能的实现方式,识别当前运行的进程中,待传输的文件的文件格式,如果识别为“jpg”、“bmp”等,则确定该待传输的文件为图片,从而获取相关图片。
S102,根据图片生成视频序列,其中,视频序列包括通过复制图片生成的N个待编码图片,其中,N为正整数。
具体地,根据图片生成视频序列,将单一的图片扩展成一个视频流,其中,视频序列包括通过复制图片生成的N个待编码图片,由此,复制的N个待编码图片可以看成一个视频流中的不同帧,将待处理的信息由图片格式转换为视频流格式,便于后续的分辨率设置操作。
其中,N的大小可以根据具体的应用需求进行设定。
S103,获取分辨率设置序列,其中,分辨率设置序列包括N个待编码图片对应的分辨率。
S104,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端对编码图片进行解码显示。
具体地,在根据图片生成视频序列后,获取分辨率设置序列,其中,分辨率设置序列包括N个待编码图片对应的分辨率,以针对该视频序列中的每一个图片进行分辨率的改变,进而,根据每一个图片对应的分辨率,分别对N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端对所述编码图片进行解码显示。
需要说明的是,根据具体应用场景的不同,可采用不同的方式,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片:
第一种示例,对第i个待编码图片进行编码以生成第i个编码图片,将第i个编码图片作为第i参考图片对所述第i+1个待编码图片进行编码以生成第i+1个编码图片,其中,i为小于N的正整数,由此,根据上次出现的帧进行预测,降低了图片传输的延迟。
在本实施例中,第一帧为I帧,只采用帧内编码,其他帧均为P帧,可采用帧内编码或帧间编码,根据编码器能力,P帧可采用多参考帧技术,即P帧中的编码块可参考该帧之前的多个已编码帧。其中,如果当前P帧为全分辨率图片,而被参考帧为下采样图片,则对被参考帧进行上采样,作为当前帧的参考图片。
第二种示例,对每一帧图片进行编码处理。
在本示例中,采用如图4所示的混合分辨率编码框架进行编码,参照图4,对每一帧图片,可以采用全分辨率编码,也可先进行下采样再对下采样图片进行编码,对一副输入图片,首先查询分辨率设置序列,判断其采用全分辨率编码,还是下采样图片编码。
如果当前帧采用全分辨率编码,则在码流中加入标志位,告知解码段当前图片采用全分辨率编码,然后对当前图片进行全分辨率编码,编码流程与原视频编码流程相似。
当然,在本示例中,也可以结合上述第一种示例示出的帧间预测的方式实施,即如果当前图片是帧间预测帧,还需要进一步判断当前帧的被参考帧是否有全分辨率重建图片,如果当前帧的被参考帧没有全分辨率图片,则需要对当前帧的被参考帧上采样到全分辨率图片。
如果当前帧采用下采样编码,则首先原始图片对其进行下采样;如果下采样得到的图片宽度、高度不是16的整倍数,则需要扩边;因为编码视频图片的分辨率发生了改变,因此需要在每帧数据前,在码流中加入相应的信息,告知解码器,当前帧采用了下采样编码。
由此,在本发明实施例中,将一张图片处理成包含多个该图片的视频序列,进而根据分辨率设置序列将该视频序列中的图片,分别处理成不同的分辨率的编码图片,由此,得到一组与预设的分辨率序列对应的编码后的视频序列,由于预设的分辨率序列是根据具体应用需求标定的,因此,该编码后的视频序列能满足在不同的场景需要。
为了更加清楚的描述,编码后的视频序列与不同的场景需要的对应关系,下面结合不同的应用场景进行举例:
第一种场景:
在该场景下,在带宽不足,或图片数据量较大时,数据传输时间较长时,可先显示低质量图片,以即时传输相关图片,待数据传输完成,再提高图片质量。
由此,在本示例中,分辨率设置序列为,按照视频序列中图片的传输顺序分辨率逐渐增加,即N个待编码图片中第一至第M个待编码图片对应下采样分辨率,N个待编码图片中第M+1至第N个待编码图片对应全采样分辨率,其中,M为小于N的正整数。其中,M和N的值的大小,可以根据应用需要设置。
在本示例中,N个待编码图片分别对应帧序号,获取每个待编码图片对应的量化参数,其中,第一至第M个待编码图片对应的量化参数逐渐减小,第M+1至第N个待编码图片对应的量化参数逐渐减小,其中,量化参数用以衡量编码的程度,即忠实于原图片的程度,量化参数越高,则编码后的图片相对于原图片差距越大,可以包括采样点的数量和采样间隔等,由此,根据分辨率设置序列、每个待编码图片对应的量化参数对视频序列中的N个待编码图片进行编码以生成N个编码图片中,对应于下采样分辨率的第一至第M个编码图片的分辨率逐渐增加,对应于全采样分辨率的第M+1至第N个编码图片总体相比于第一至第M个待编码图片的分辨率高,且分辨率也逐渐增加,由此,实现了在解码端加载该N个编码图片时,呈现出图像质量逐渐提高的技术效果。
需要说明的是,在本实施例中,为了进一步确保视频帧的图片越往后分辨率越高,第M+1个待编码图片的量化参数与预设量化参数阈值之间的差值小于第M个待编码图片的量化参数。
其中,预设的量化参数阈值可以是根据大量实验数据标定的,优选地,该量化参数可以为6。
也就是说,如果前一帧是下采样图片,后一帧是全分辨率图片,需保证后一帧量化参数减去预设量化参数偏差后小于前一帧量化参数。从而,一种可能的能的量化参数及分辨率如下标1所示。
表1
帧序号 0 1 2 3 4
分辨率 下采样 下采样 全分辨率 全分辨率 全分辨率
量化参数 34 28 30 26 20
为了使得本领域的技术人员,对第一种场景中的图片的传输方法更加清楚,下面举例说明:
图片的传输方法可以包括如图5所示的三个步骤,其中,步骤一中,图片扩展为视频序列,将一副图片重复n次,扩展为包含n帧的视频序列,视频序列的每一帧相同,都是待编码图片。
进而,在步骤二中,选择部分帧进行下采样编码,即对扩展后的视频前m帧进行下采样,其中m可以等于0,或其他小于n的整数,在步骤三中,混合分辨率编码,根据步骤二决定的分辨率选择策略,对视频序列进行混合分辨率编码。
当然,在本场景中,为了避免图片的传输延迟,也可采用固定的量化参数对N个待编码图片进行编码,缩小图片的数据量,保证了图片的即时传输。
第二种场景:
在该场景下,用户可能具有将图片由清晰变为模糊显示的需求,比如,当发送的图片为风景图片时,为了表示当前该风景下对应的天气为由晴转阴,则将对应的图片渐渐模糊显示,以渲染天气的变化。
由此,在本示例中,分辨率设置序列为,按照视频序列中图片的传输顺序分辨率逐渐降低,即N个待编码图片中第一至第M个待编码图片对应全采样分辨率,N个待编码图片中第M+1至第N个待编码图片对应下采样分辨率,其中,M为小于N的正整数。其中,M和N的值的大小,可以根据应用需要设置。
在本示例中,N个待编码图片分别对应帧序号,获取每个待编码图片对应的量化参数,其中,第一至第M个待编码图片对应的量化参数逐渐增大,第M+1至第N个待编码图片对应的量化参数逐渐增大,其中,根据分辨率设置序列、每个待编码图片对应的量化参数对视频序列中的N个待编码图片进行编码以生成N个编码图片。
从而,编码后的视频序列中,第1至第N个编码图片越来越不忠实于原图片,可以营造一种逐渐模糊的视觉效果。
第三种场景:
在该场景下,用户可能具有将图片由清晰变为模糊再变为清晰的显示的需求,比如,当发送的图片为车辆图片时,可以表示车辆从隧道外进入隧道之后再驶出隧道的视觉效果。
由此,在本示例中,N个待编码图片中第一至第M1个待编码图片对应下采样分辨率,N个待编码图片中第M+1至第M2个待编码图片对应下采样分辨率(此处下采样分辨率低于第一至第M1个待编码图片对应下采样分辨率),N个待编码图片中第M2至第N个待编码图片对应全采样分辨率,M1和M2为小于N的正整数。其中,M1、M2和N的值的大小,可以根据应用需要设置。
在本示例中,N个待编码图片分别对应帧序号,获取每个待编码图片对应的量化参数,其中,第一至第M1个待编码图片对应的量化参数逐渐增大,第M+1至第M2个待编码图片对应的量化参数逐渐增大,第M2至第N个待编码图片对应的量化参数逐渐减小,其中,根据分辨率设置序列、每个待编码图片对应的量化参数对视频序列中的N个待编码图片进行编码以生成N个编码图片。
第四种场景:
在该场景下,用户可能具有将图片由模糊变为清晰再变为模糊的显示的需求,比如,当发送的图片为鱼的图片时,可以表示鱼从水底浮出水面再次潜入水底的视觉效果。
由此,在本示例中, N个待编码图片中第一至第M1个待编码图片对应下采样分辨率,N个待编码图片中第M+1至第M2个待编码图片对应全采样分辨率(此处下采样分辨率低于第一至第M1个待编码图片对应下采样分辨率),N个待编码图片中第M2至第N个待编码图片对应下采样分辨率,M1和M2为小于N的正整数。其中,M1、M2和N的值的大小,可以根据应用需要设置。
在本示例中,N个待编码图片分别对应帧序号,获取每个待编码图片对应的量化参数,其中,第一至第M1个待编码图片对应的量化参数逐渐减小,第M+1至第M2个待编码图片对应的量化参数逐渐增大,第M2至第N个待编码图片对应的量化参数逐渐减小,其中,根据分辨率设置序列、每个待编码图片对应的量化参数对视频序列中的N个待编码图片进行编码以生成N个编码图片。
基于以上各种场景的应用,需要强调的是,在实际应用中,无论采用何种组合方式设置分辨率设置序列,都应该确保图片传输的流畅度,比如,有可能待编码的图片是高清图片,图片的数据量较大,即使对图片进行编码处理后,也有可能有些编码后的图片较大而导致传输卡顿,因此,为了提高传输效率,在本发明的一个实施例中,可以针对待编码图片的具体的数据量的大小情况,进行编码码率的确定。
具体而言,在本发明的一个实施例中,获取图片的数据量信息,并根据图片的数据量信息生成对应的码率限制信息,其中,码率限制信息可以根据网速设定,用以限制编码后的图片的大小,用以指示图片的编码程度,比如,如果码率限制信息是2M,则所有编码后的图片的大小都不能超过2M。
进而,根据分辨率设置序列和码率限制信息对视频序列中的N个待编码图片进行编码以生成N个编码图片。
其中,上述实施例中,图片的数据量信息可以是待编码图片的一个图片的数据量信息,也可以是整个视频序列中包含的总的待编码图片的数据量信息,这取决于预设的码率限制信息与图片的数据量信息的对应关系中,采用的图片的数据量信息的具体内容。
比如,如果预设的码率限制信息与图片的数据量信息的对应关系中,每张图片大于2M,则码率限制信息是1,则获取的图片数据量信息即为一张图片的数据量,如果预设的码率限制信息与图片的数据量信息的对应关系中,视频序列图片大于20M,则码率限制信息是2,则获取的图片数据量信息即为视频序列所有图片的数据量。
由此,本发明实施例的图片的传输方法,将图片处理成视频序列,进而根据具体应用场景,设置对应的分辨率设置序列,以满足不同的场景需要,打破了图片的格式限制,提供了一种新型的图片传输方式。
综上所述,本发明实施例的图片的传输方法,获取图片,根据图片生成视频序列,获取分辨率设置序列,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端对编码图片进行解码显示。由此,扩展了图片的处理方式,使得图片可以根据需要以不同分辨率进行组合显示。
为了更全面的描述本发明的图片的传输方法,下面集中在解码侧进行描述。
图6是根据本发明一个实施例的图片的接收方法的流程图,如图6所示,该方法包括:
S201,接收N个编码图片,其中,N个编码图片复制图片并编码后生成的N个编码图片。
具体地,N个编码图片是针对一个待传输图片复制成的N个图片编码生成的,N个编码图片的相对于初始图片,数据量较低。
S202,对第i个编码图片进行解码以生成第i个解码图片,并向用户展示第i个解码图片,其中,i为小于N的正整数。
可以理解,在针对每一个图片进行编码时,加入代表其编码方式的标识位,从而,对第i个编码图片进行解码时,根据对应的标识位获知该图片的编码方式,以根据该编码方式进行解码生成第i个解码图片,并向用户展示第i个解码图片。
S203,根据第i个解码图片对第i+1个编码图片进行解码以生成第i+1个解码图片,并使用第i+1个解码图片替换第i个解码图片。
具体而言,在本示例中,由于第i个解码图片和第i+1个编码图片,都是在初始图片的基础上得到的,即第i个解码图片和第i+1个编码图片具有强相关性,因此,可以基于第i个解码图片对第i+1个编码图片进行解码以生成第i+1个解码图片,从而解码效率大大提高。
由此,在本示例中,客户端查看图片时,每收到一帧视频数据,即可进行解码,解码时首先读取当前帧分辨率信息,然后解码得到重建图片,如果当前帧是下采样图片,则需要进行上采样显示,如果当前帧是全分辨率图片,则直接输出重建图片。
从而,待客户端收到新一帧数据并解码后,显示新一帧解码重建图片,如果视频编码量化参数逐帧降低,则解码如图7(a)所示,得到的图片质量逐帧提高,故可在客户端实现渐进式图片显示功能。
如果视频编码量化参数逐帧提高,则解码如图7(b)所示,得到的图片质量逐帧降低,故可在客户端实现渐进式图片暗化功能。
综上所述,在本发明实施例的图片的接收方法中,接收N个编码图片,其中,N个编码图片复制图片并编码后生成的N个编码图片,对第i个编码图片进行解码以生成第i个解码图片,并向用户展示第i个解码图片,根据第i个解码图片对第i+1个编码图片进行解码以生成第i+1个解码图片,并使用第i+1个解码图片替换第i个解码图片。由此,通过对编码后的多个图片的解码,以不同分辨率的组合显示图片,满足了对应场景的需要,提升了用户体验。
为了实现上述实施例,本发明还提出了一种图片的传输装置,图8是根据本发明一个实施例的图片的传输装置的结构示意图,如图8所示,该装置包括:第一获取模块110、生成模块120、第二获取模块130、编码模块140和发送模块150。
其中,第一获取模块110,用于获取图片。
生成模块120,用于根据图片生成视频序列,其中,视频序列包括通过复制图片生成的N个待编码图片,其中,N为正整数。
第二获取模块130,用于获取分辨率设置序列,其中,分辨率设置序列包括N个待编码图片对应的分辨率。
编码模块140,用于根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片。
在本发明的一个实施例中,如图9所示的根据本发明另一个实施例的图片的传输装置的结构示意图可知,编码模块140包括第一编码单元141和第二编码单元142。
其中,第一编码单元,用于对第i个待编码图片进行编码以生成第i个编码图片。
第二编码单元,用于将第i个编码图片作为第i参考图片对第i+1个待编码图片进行编码以生成第i+1个编码图片,其中,i为小于N的正整数。
发送模块150,用于将N个编码图片发送至解码端。
需要说明的是,前述对图片的传输方法实施例的解释说明也适用于该实施例的图片的传输装置,其实现原理类似,在此不再赘述。
综上所述,本发明实施例的图片的传输装置,获取图片,根据图片生成视频序列,获取分辨率设置序列,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端对编码图片进行解码显示。由此,扩展了图片的处理方式,使得图片可以根据需要以不同分辨率进行组合显示。
为了实现上述实施例,本发明还提出了一种图片的接收装置,图10是根据本发明一个实施例的图片的接收装置的结构示意图,如图10所示,该装置包括:接收模块210、解码模块220和展示模块230。
其中,接收模块210,用于接收N个编码图片,其中,N个编码图片复制图片并编码后生成的N个编码图片。
解码模块220,用于对第i个编码图片进行解码以生成第i个解码图片。
展示模块230,用于向用户展示第i个解码图片,其中,i为小于N的正整数。
在本发明的一个实施例中,解码模块220,还用于根据第i个解码图片对第i+1个编码图片进行解码以生成第i+1个解码图片,并使用第i+1个解码图片替换第i个解码图片。
要说明的是,前述对图片的接收方法实施例的解释说明也适用于该实施例的图片的接收装置,其实现原理类似,在此不再赘述。
综上所述,在本发明实施例的图片的接收装置中,接收N个编码图片,其中,N个编码图片复制图片并编码后生成的N个编码图片,对第i个编码图片进行解码以生成第i个解码图片,并向用户展示第i个解码图片,根据第i个解码图片对第i+1个编码图片进行解码以生成第i+1个解码图片,并使用第i+1个解码图片替换第i个解码图片。由此,通过对编码后的多个图片的解码,以不同分辨率的组合显示图片,满足了对应场景的需要,提升了用户体验。
为了实现上述实施例,本发明还提出了一种图片处理系统,图11是根据本发明一个实施例的图片处理系统的结构示意图,如图11所示,该图片处理系统包括图片的传输装置100和图片的接收装置200。
其中,对图片的传输装置100的解释说明,与上述描述的图片处理系统包括图片的传输装置对应,对图片的接收装置200的解释说明,与上述描述的图片处理系统包括图片的接收装置对应,在此不再赘述。
为了清楚说明本实施例提供的图片处理系统,下面结合一种应用场景下,图片处理系统的工作流程进行说明。
如图12所述,该图片处理系统中,包括图片资源服务器1000、编码服务器2000和解码服务器3000。
其中,图片资源服务器1000用于存储获取的图片信息,并将图片复制为多个,以生成包含多个图片的视频序列。
编码服务器2000,存储有分辨率设置序列,用于根据所述分辨率设置序列对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片,并将所述N个编码图片发送至解码端。
解码服务器3000,用于接收N个编码图片,对第i个编码图片进行解码以生成第i个解码图片,并向用户展示所述第i个解码图片,其中,i为小于N的正整数;根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。
综上所述,本发明实施例的图片的处理系统,获取图片,根据图片生成视频序列,获取分辨率设置序列,根据分辨率设置序列对视频序列中的N个待编码图片进行编码以生成N个编码图片,并将N个编码图片发送至解码端,以使解码端接收N个编码图片,对第i个编码图片进行解码以生成第i个解码图片,并向用户展示所述第i个解码图片,根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。由此,扩展了图片的处理方式,使得图片可以根据需要以不同分辨率进行组合显示。
为了实现上述实施例,本发明还提出了一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如上述实施例描述的图片的传输方法。
为了实现上述实施例,本发明还提出了另一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如上述实施例描述的图片的接收方法。
为了实现上述实施例,本发明还提出了一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述实施例描述的图片的传输方法。
为了实现上述实施例,本发明还提出了一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述实施例描述的图片的接收方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (12)

1.一种图片的传输方法,其特征在于,包括以下步骤:
获取图片;
根据所述图片生成视频序列,其中,所述视频序列包括通过复制所述图片生成的N个待编码图片,所述N个待编码图片分别对应帧序号;具体包括:
获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率,所述N个待编码图片中第一至第M个待编码图片对应下采样分辨率,所述N个待编码图片中第M+1至第N个待编码图片对应全采样分辨率,其中,N为正整数,M为小于N的正整数;
获取每个待编码图片对应的量化参数,其中,所述第一至第M个待编码图片对应的量化参数逐渐减小,所述第M+1至第N个待编码图片对应的量化参数逐渐减小,所述第M+1个待编码图片的量化参数与预设量化参数阈值之间的差值小于所述第M个待编码图片的量化参数,预设的量化参数阈值根据大量实验数据标定;
根据所述分辨率设置序列、所述每个待编码图片对应的量化参数对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片,并将所述N个编码图片发送至解码端,以使所述解码端对所述编码图片进行解码显示。
2.如权利要求1所述的图片的传输方法,其特征在于,所述根据所述分辨率设置序列对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片具体包括:
对第i个待编码图片进行编码以生成第i个编码图片;
将所述第i个编码图片作为第i参考图片对所述第i+1个待编码图片进行编码以生成第i+1个编码图片,其中,i为小于N的正整数。
3.如权利要求1所述的图片的传输方法,其特征在于,还包括:
获取所述图片的数据量信息;
根据所述图片的数据量信息生成对应的码率限制信息,其中,
根据所述分辨率设置序列和所述码率限制信息对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片。
4.一种图片的接收方法,其特征在于,包括:
接收N个编码图片,其中,所述N个编码图片复制所述图片并编码后生成的N个编码图片;其中,所述N个编码图片根据分辨率设置序列对视频序列中的N个待编码图片进行编码生成;
所述N个待编码图片分别对应帧序号;具体包括:
获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率,所述N个待编码图片中第一至第M个待编码图片对应下采样分辨率,所述N个待编码图片中第M+1至第N个待编码图片对应全采样分辨率,其中,N为正整数,M为小于N的正整数;
获取每个待编码图片对应的量化参数,其中,所述第一至第M个待编码图片对应的量化参数逐渐减小,所述第M+1至第N个待编码图片对应的量化参数逐渐减小,所述第M+1个待编码图片的量化参数与预设量化参数阈值之间的差值小于所述第M个待编码图片的量化参数,预设的量化参数阈值根据大量实验数据标定;
根据所述分辨率设置序列、所述每个待编码图片对应的量化参数对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片;
对第i个编码图片进行解码以生成第i个解码图片,并向用户展示所述第i个解码图片,其中,i为小于N的正整数;
根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。
5.一种图片的传输装置,其特征在于,包括:
第一获取模块,用于获取图片;
生成模块,用于根据所述图片生成视频序列,其中,所述视频序列包括通过复制所述图片生成的N个待编码图片,所述N个待编码图片分别对应帧序号具体包括:获取每个待编码图片对应的量化参数,其中,第一至第M个待编码图片对应的量化参数逐渐减小,第M+1至第N个待编码图片对应的量化参数逐渐减小,所述第M+1个待编码图片的量化参数与预设量化参数阈值之间的差值小于所述第M个待编码图片的量化参数,预设的量化参数阈值根据大量实验数据标定;
第二获取模块,用于获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率;所述N个待编码图片中第一至第M个待编码图片对应下采样分辨率,所述N个待编码图片中第M+1至第N个待编码图片对应全采样分辨率,其中,N为正整数,M为小于N的正整数;
其中,根据所述分辨率设置序列、所述每个待编码图片对应的量化参数对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片;
编码模块,用于根据所述分辨率设置序列对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片;
发送模块,用于将所述N个编码图片发送至解码端,以使所述解码端对所述编码图片进行解码显示。
6.如权利要求5所述的装置,其特征在于,所述编码模块包括:
第一编码单元,用于对第i个待编码图片进行编码以生成第i个编码图片;
第二编码单元,用于将所述第i个编码图片作为第i参考图片对所述第i+1个待编码图片进行编码以生成第i+1个编码图片,其中,i为小于N的正整数。
7.一种图片的接收装置,其特征在于,包括:
接收模块,用于接收N个编码图片,其中,所述N个编码图片复制所述图片并编码后生成的N个编码图片;其中,所述N个编码图片根据分辨率设置序列对视频序列中的N个待编码图片进行编码生成;
所述N个待编码图片分别对应帧序号;具体包括:
获取每个待编码图片对应的量化参数,其中,第一至第M个待编码图片对应的量化参数逐渐减小,第M+1至第N个待编码图片对应的量化参数逐渐减小,所述第M+1个待编码图片的量化参数与预设量化参数阈值之间的差值小于所述第M个待编码图片的量化参数,预设的量化参数阈值根据大量实验数据标定;
获取分辨率设置序列,其中,所述分辨率设置序列包括所述N个待编码图片对应的分辨率,所述N个待编码图片中第一至第M个待编码图片对应下采样分辨率,所述N个待编码图片中第M+1至第N个待编码图片对应全采样分辨率,其中,N为正整数,M为小于N的正整数;
其中,根据所述分辨率设置序列、所述每个待编码图片对应的量化参数对所述视频序列中的所述N个待编码图片进行编码以生成N个编码图片;
解码模块,用于对第i个编码图片进行解码以生成第i个解码图片;
展示模块,用于向用户展示所述第i个解码图片,其中,i为小于N的正整数;
所述解码模块,还用于根据所述第i个解码图片对所述第i+1个编码图片进行解码以生成第i+1个解码图片,并使用所述第i+1个解码图片替换所述第i个解码图片。
8.一种图片处理系统,其特征在于,包括:
如权利要求5或6所述的图片的传输装置;
如权利要求7所述的图片的接收装置。
9.一种计算机设备,其特征在于,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求1-3中任一所述的图片的传输方法。
10.一种计算机设备,其特征在于,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求4所述的图片的接收方法。
11.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-3中任一所述的图片的传输方法。
12.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求4所述的图片的接收方法。
CN201710508345.1A 2017-06-28 2017-06-28 图片的传输和接收的方法、装置、系统、设备和介质 Active CN109151481B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201710508345.1A CN109151481B (zh) 2017-06-28 2017-06-28 图片的传输和接收的方法、装置、系统、设备和介质
PCT/CN2018/086510 WO2019001149A1 (zh) 2017-06-28 2018-05-11 图片的传输和接收的方法、装置及其系统
US16/546,034 US10869048B2 (en) 2017-06-28 2019-08-20 Method, device and system for transmitting and receiving pictures using a hybrid resolution encoding framework

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710508345.1A CN109151481B (zh) 2017-06-28 2017-06-28 图片的传输和接收的方法、装置、系统、设备和介质

Publications (2)

Publication Number Publication Date
CN109151481A CN109151481A (zh) 2019-01-04
CN109151481B true CN109151481B (zh) 2022-03-15

Family

ID=64741018

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710508345.1A Active CN109151481B (zh) 2017-06-28 2017-06-28 图片的传输和接收的方法、装置、系统、设备和介质

Country Status (3)

Country Link
US (1) US10869048B2 (zh)
CN (1) CN109151481B (zh)
WO (1) WO2019001149A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3051059A1 (en) * 2017-01-30 2018-08-02 Euclid Discoveries, Llc Video characterization for smart encoding based on perceptual quality optimization
CN108848376B (zh) * 2018-06-20 2022-03-01 腾讯科技(深圳)有限公司 视频编码、解码方法、装置和计算机设备
CN113315973B (zh) * 2019-03-06 2022-12-20 深圳市道通智能航空技术股份有限公司 编码方法、图像编码器及图像传输系统
CN110049336B (zh) * 2019-05-22 2020-08-25 腾讯科技(深圳)有限公司 视频编码方法和视频解码方法
CN113179450B (zh) * 2021-03-23 2022-06-03 重庆扬成大数据科技有限公司 一种用于大数据环境下分析城市运营管理的工作方法
CN115396672B (zh) * 2022-08-25 2024-04-26 广东中星电子有限公司 比特流存储方法、装置、电子设备和计算机可读介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769747A (zh) * 2012-06-29 2012-11-07 中山大学 一种基于并行迭代的分级分布式视频编解码方法及系统
CN103546751A (zh) * 2012-07-10 2014-01-29 美国博通公司 视频编码方法和系统
WO2014028404A1 (en) * 2012-08-13 2014-02-20 Qualcomm Incorporated Device and method for scalable coding of video information
CN103813174A (zh) * 2012-11-12 2014-05-21 腾讯科技(深圳)有限公司 一种混合分辨率编解码方法和装置
CN105763761A (zh) * 2014-12-16 2016-07-13 广州市动景计算机科技有限公司 一种图片数据传输方法及装置
CN105830448A (zh) * 2013-10-22 2016-08-03 Vid拓展公司 用于视频传输系统的错误隐藏模式信令
CN105959700A (zh) * 2016-05-31 2016-09-21 腾讯科技(深圳)有限公司 视频图像编码的方法和装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3773585B2 (ja) * 1996-03-29 2006-05-10 富士通株式会社 画像符号化装置
US7352808B2 (en) * 2004-01-29 2008-04-01 International Business Machines Corporation System and method for the dynamic resolution change for video encoding
US9060172B2 (en) * 2005-09-15 2015-06-16 Sri International Methods and systems for mixed spatial resolution video compression
US8325800B2 (en) * 2008-05-07 2012-12-04 Microsoft Corporation Encoding streaming media as a high bit rate layer, a low bit rate layer, and one or more intermediate bit rate layers
US9615098B1 (en) * 2009-11-30 2017-04-04 Google Inc. Adaptive resolution transcoding for optimal visual quality
US8885702B2 (en) * 2011-10-17 2014-11-11 Google Inc. Rate-distortion-complexity optimization of video encoding guided by video description length
US9357213B2 (en) * 2012-12-12 2016-05-31 Imagine Communications Corp. High-density quality-adaptive multi-rate transcoder systems and methods
US10397574B2 (en) * 2014-05-12 2019-08-27 Intel Corporation Video coding quantization parameter determination suitable for video conferencing
US10187655B2 (en) * 2015-09-30 2019-01-22 Apple Inc. Memory-to-memory low resolution motion estimation systems and methods
US10356406B2 (en) * 2016-01-19 2019-07-16 Google Llc Real-time video encoder rate control using dynamic resolution switching
US10701394B1 (en) * 2016-11-10 2020-06-30 Twitter, Inc. Real-time video super-resolution with spatio-temporal networks and motion compensation
CN109819263B (zh) * 2017-11-22 2022-08-19 腾讯科技(深圳)有限公司 视频编码方法、装置、计算机设备及存储介质
US10462483B1 (en) * 2018-04-26 2019-10-29 Tencent America LLC Method and apparatus for video coding
US10812823B2 (en) * 2018-07-11 2020-10-20 Apple Inc. Global motion vector video encoding systems and methods

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769747A (zh) * 2012-06-29 2012-11-07 中山大学 一种基于并行迭代的分级分布式视频编解码方法及系统
CN103546751A (zh) * 2012-07-10 2014-01-29 美国博通公司 视频编码方法和系统
WO2014028404A1 (en) * 2012-08-13 2014-02-20 Qualcomm Incorporated Device and method for scalable coding of video information
CN103813174A (zh) * 2012-11-12 2014-05-21 腾讯科技(深圳)有限公司 一种混合分辨率编解码方法和装置
CN105830448A (zh) * 2013-10-22 2016-08-03 Vid拓展公司 用于视频传输系统的错误隐藏模式信令
CN105763761A (zh) * 2014-12-16 2016-07-13 广州市动景计算机科技有限公司 一种图片数据传输方法及装置
CN105959700A (zh) * 2016-05-31 2016-09-21 腾讯科技(深圳)有限公司 视频图像编码的方法和装置

Also Published As

Publication number Publication date
US10869048B2 (en) 2020-12-15
CN109151481A (zh) 2019-01-04
US20190394476A1 (en) 2019-12-26
WO2019001149A1 (zh) 2019-01-03

Similar Documents

Publication Publication Date Title
CN109151481B (zh) 图片的传输和接收的方法、装置、系统、设备和介质
TWI587693B (zh) 用於減少視訊編碼及解碼中之延遲的方法、系統及電腦可讀取媒體
JP5678067B2 (ja) スキップモードによって映像を符号化、復号化する方法及びその装置
US8644381B2 (en) Apparatus for reference picture resampling generation and method thereof and video decoding system using the same
JP6245888B2 (ja) エンコーダおよび符号化方法
JP6854795B2 (ja) 補助フレームをサポートするビデオコーディングフォーマットでビデオストリームを符号化するための方法およびエンコーダ
US9734557B2 (en) Method and apparatus for generating 3K-resolution display image for mobile terminal screen
KR102273025B1 (ko) 선택적인 노이즈제거 필터링을 이용한 스케일러블 비디오 부호화 방법 및 그 장치, 선택적인 노이즈제거 필터링을 이용한 스케일러블 비디오 복호화 방법 및 그 장치
CN103596009B (zh) 解码器及解码方法
CN109672897B (zh) 全景视频编码方法及装置
KR102013240B1 (ko) 영역별 특성에 기초한 영상 부호화 방법 및 그 장치, 그리고 영상 복호화 방법 및 그 장치
US20100153687A1 (en) Streaming processor, operation method of streaming processor and processor system
KR20180098117A (ko) 디코딩된 이미지 데이터로부터 이미지 데이터를 재구성하기 위한 방법 및 디바이스
KR20060027778A (ko) 베이스 레이어를 이용하는 영상신호의 엔코딩/디코딩 방법및 장치
CN114125448B (zh) 视频编码方法、解码方法及相关装置
CN111464812B (zh) 编码解码的方法、系统、装置、存储介质及处理器
CN115361582B (zh) 一种视频实时超分辨率处理方法、装置、终端及存储介质
CN110572677B (zh) 视频编解码方法和装置、存储介质及电子装置
KR20170033471A (ko) Hdr과 sdr 출력 영상을 복호화하기 위한 톤매핑 관련 부가 정보의 전송 방법 및 장치
CN110636295B (zh) 视频编解码方法和装置、存储介质及电子装置
US20160117796A1 (en) Content Adaptive Decoder Quality Management
CN113179408A (zh) 一种图像编解码方法及装置
EP3606070A1 (en) Systems, methods, and apparatuses for video processing
JP2013207499A (ja) 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法及び受信プログラム
TW200847790A (en) Image sequence streaming methods, transmitters and receivers utilizing the same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant