CN108259904B - 用于图像数据编码的方法、编码器和电子设备 - Google Patents

用于图像数据编码的方法、编码器和电子设备 Download PDF

Info

Publication number
CN108259904B
CN108259904B CN201611246732.4A CN201611246732A CN108259904B CN 108259904 B CN108259904 B CN 108259904B CN 201611246732 A CN201611246732 A CN 201611246732A CN 108259904 B CN108259904 B CN 108259904B
Authority
CN
China
Prior art keywords
encoder
image data
frame
background frames
initial sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611246732.4A
Other languages
English (en)
Other versions
CN108259904A (zh
Inventor
杨鼎
蒙启程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FAFA Automobile (China) Co., Ltd.
Original Assignee
Fafa Automobile China Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fafa Automobile China Co ltd filed Critical Fafa Automobile China Co ltd
Priority to CN201611246732.4A priority Critical patent/CN108259904B/zh
Publication of CN108259904A publication Critical patent/CN108259904A/zh
Application granted granted Critical
Publication of CN108259904B publication Critical patent/CN108259904B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/197—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施方式提供一种用于图像数据编码的方法、编码器和电子设备，包括：所述方法包括：所述编码器接收连续的背景帧，直到所述编码器接收到第一帧图像数据；所述编码器基于接收的连续的背景帧生成初始序列信息；所述编码器在接收到所述第一帧图像数据之后对所述第一帧图像数据进行编码；所述编码器在对所述第一图像数据编码结束之后输出所述初始序列信息；以及所述编码器输出编码后的第一帧图像数据。通过上述技术方案，在接收真正的图像帧之前向编码器输入连续的背景帧以激励编码器先生成初始序列并保存，当真实图像数据来临时可以省去编码器原有生成初始序列的时间和不确定的延迟时间。

Description

用于图像数据编码的方法、编码器和电子设备
技术领域
本发明涉及数据处理领域，具体地，涉及一种用于图像数据编码的方法、编码器和电子设备。
背景技术
在车机手机互联过程中，当手机连接到车机时，需要将手机的屏幕画面投射到车机，或者在车机屏幕上播放手机上的视频流。但是往往会发现在执行投屏或播放视频流时车机需要延迟一段时间才能显示手机屏幕画面。造成延迟的原因之一是在手机中对实时视频流进行编码(例如h.264编码)的过程中，编码器在接收到第一帧图像数据时，编码器先产生初始化序列，然后发送初始化序列信息，之后对第一帧图像数据进行编码以产生图像编码信息，之后发送图像编码信息。由于编码器产生初始化序列的时间不固定，这种编码机制会导致一定的编码延迟，不太适合实时流传输。
发明内容
本发明实施方式的目的是提供一种用于编码器对图像数据编码的方法、编码器和电子设备，能够降低编码延迟。
为了实现上述目的，本发明实施方式提供一种用于编码器对图像数据进行编码的方法，所述方法包括：接收连续的背景帧，直到所述编码器接收到第一帧图像数据；基于接收的连续的背景帧生成并保存初始序列信息；在接收到所述第一帧图像数据之后对所述第一帧图像数据进行编码；在对所述第一图像数据编码结束之后输出所述初始序列信息；以及输出编码后的第一帧图像数据。
可选地，所述方法还包括：在接收到的所述连续的背景帧的数量超过预设数量时生成所述初始序列信息。
可选地，所述连续的背景帧是黑色的yuv帧。
可选地，所述连续的背景帧的帧间隔是10ms。
本发明实施方式还提供一种编码器，所述编码器被配置成接收连续的背景帧，直到接收到第一帧图像数据；基于接收的连续的背景帧生成并保存初始序列信息；在接收到所述第一帧图像数据之后对所述第一帧图像数据进行编码；在对所述第一图像数据编码结束之后输出所述初始序列信息；以及输出编码后的第一帧图像数据。
可选地，所述编码器还被配置成：在接收到的所述连续的背景帧的数量超过预设数量时生成所述初始序列信息。
可选地，所述连续的背景帧是黑色的yuv帧。
可选地，连续的背景帧的帧间隔是10ms。
可选地，所述编码器是h.264编码器。
本发明实施方式还提供一种电子设备，所述电子设备包括帧生成器，被配置成生成连续的背景帧；以及上述的编码器。
通过上述技术方案，在接收真正的图像帧之前向编码器输入连续的背景帧以激励编码器先生成初始序列并保存，当真实图像数据来临时可以省去编码器原有生成初始序列的时间和不确定的延迟时间。
本发明实施方式的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本发明实施方式的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明实施方式，但并不构成对本发明实施方式的限制。在附图中：
图1是根据本发明实施方式提供的用于对图像数据进行编码的方法的流程图；以及
图2是根据本发明实施方式提供的编码器的结构框图；以及
图3是根据本发明实施方式提供的电子设备的结构框图。
附图标记说明
21 背景帧接收模块 22 初始序列信息生成模块
23 编码模块 24 输出模块
31 帧生成器 32 编码器
具体实施方式
以下结合附图对本发明实施方式的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本发明实施方式，并不用于限制本发明实施方式。
图1是根据本发明实施方式提供的用于编码器对图像数据进行编码的方法的流程图。如图1所示，在本发明的实施方式中，提供了一种用于编码器对图像数据进行编码的方法，该方法可以包括：
初始化编码器，包括设置编码格式、码率、帧间隔、图像高宽等。编码器可以例如是h.264编码器，但不限于此。
编码器接收连续的背景帧，直到编码器接收到第一帧图像数据。
连续的背景帧可以由例如帧生成器生成。帧生成器可以通过软件、硬件、固件或其任意的结合实现。在本发明实施方式中，背景帧可以是黑色的yuv帧。但是本领域技术人员可以理解，背景帧的设定可以不限于此，例如背景帧可以是黑色以外的其他颜色的背景帧，例如蓝色、红色等。另外，连续的背景帧的帧间隔可以例如是10ms。
编码器基于接收的连续的背景帧生成初始序列信息。编码器可以保存生成的初始序列信息。在本发明实施方式中，编码器可以在接收到预定数量(例如1至10个)的背景帧后开始生成并保存初始序列信息(例如在存储器中)。同时，编码器也会产生背景帧的编码信息，但是可以忽略或丢弃该数据。
编码器在接收连续的背景帧的时候等待第一帧图像数据的到来。当编码器接收到第一帧图像数据之后对第一帧图像数据进行编码。
具体来说，帧生成器生成连续的背景帧后将连续的背景帧依次输入到队列，编码器从该队列接收连续的背景帧。当第一帧图像数据到来的时候(例如从其他的处理模块(例如格式转换模块)输出的)，也被输入到该队列，编码器从该队列取得该第一帧图像数据，并对其进行编码。
编码器在对第一图像数据编码结束之后先输出保存的初始序列信息；以及
编码器之后再输出编码后的第一帧图像数据。
之后，编码器不再输出任何初始序列信息，编码器可以对后续帧图像数据进行编码。
图2是根据本发明实施方式提供的编码器的结构框图。如图2所示，在本发明另一实施方式中，提供了一种编码器，包括：
背景帧接收模块21，用于接收连续的背景帧直到接收到第一帧图像数据；
初始序列信息生成模块22，用于基于接收的连续的背景帧生成初始序列信息；
编码模块23，用于在接收到第一帧图像数据之后对第一帧图像数据进行编码；
输出模块24，用于在对第一图像数据编码结束之后输出初始序列信息以及再输出编码后的第一帧图像数据。
其中，初始序列信息生成模块22还用于在接收到的连续的背景帧的数量超过预设数量时生成初始序列信息。
连续的背景帧可以是黑色的yuv帧。另外，连续的背景帧的帧间隔可以例如是10ms。
编码模块23还用于在生成初始序列信息之后，将初始序列信息保存在存储模块(未示出)中。同时，编码模块23也会产生背景帧的编码信息，但是可以忽略或丢弃该数据。
编码器可以例如是h.264编码器，但也可以是其他形式的编码器。
本发明另一实施方式提供了一种编码器，可以被配置成：
接收连续的背景帧，直到接收到第一帧图像数据；
基于接收的连续的背景帧生成初始序列信息；
在接收到第一帧图像数据之后对第一帧图像数据进行编码；
在对第一图像数据编码结束之后输出初始序列信息；以及
输出编码后的第一帧图像数据。
连续的背景帧可以由例如帧生成器生成。帧生成器可以通过软件、硬件、固件或其任意的结合实现。在本发明实施方式中，背景帧可以是黑色的yuv帧。但是本领域技术人员可以理解，背景帧的设定可以不限于此，例如背景帧可以是黑色以外的其他颜色的背景帧，例如蓝色、红色等。
编码器可以保存生成的初始序列信息。在本发明实施方式中，编码器可以在接收到预定数量(例如1至10个)的背景帧后开始生成初始序列信息。同时，编码器也会产生背景帧的编码信息，但是可以忽略或丢弃该数据。
编码器在接收连续的背景帧的时候等待第一帧图像数据的到来。当编码器接收到第一帧图像数据之后对第一帧图像数据进行编码。
具体来说，帧生成器生成连续的背景帧后将连续的背景帧依次输入到队列，编码器从该队列接收连续的背景帧。当第一帧图像数据到来的时候(例如从其他的处理模块(例如格式转换模块)输出的)，也被输入到该队列，编码器从该队列取得该第一帧图像数据，并对其进行编码。
可选地，编码器还可以被配置成：在生成初始序列信息之后，保存初始序列信息(例如到存储器)。
编码器还可以进行初始化，其可以包括设置编码格式、码率、帧间隔、图像高宽等。
在编码器输出编码后的第一帧图像数据之后，编码器不再输出任何初始序列信息，编码器可以对后续帧图像数据进行编码。
编码器是可以h.264编码器，也可以是其他形式的编码器。
图3是根据本发明实施方式提供的电子设备的结构框图。如图3所示，在本发明另一实施方式中，提供了一种电子设备，可以包括帧生成器31，被配置成生成连续的背景帧；以及编码器32。编码器32可以例如是上述实施方式中描述的编码器。编码器可以例如是h.264编码器。
本领域技术人员可以理解，本申请实施方式中提及的编码器、帧生成器等可以通过软件、硬件、固件或其任意组合来实现。
本发明实施方式提供的方案，可以在接收真正的图像帧之前向编码器输入连续的背景帧以激励编码器先生成初始序列并保存，当真实图像数据来临时可以省去编码器原有生成初始序列的时间和不确定的延迟时间。尤其是在车机手机互联过程中能够避免在第一帧数据到来后，还需等待一帧才能真正得到编码数据的延迟，能够提高硬件编码的实时性，提升车机手机互联体验。
以上结合附图详细描述了本发明的可选实施方式，但是，本发明实施方式并不限于上述实施方式中的具体细节，在本发明实施方式的技术构思范围内，可以对本发明实施方式的技术方案进行多种简单变型，这些简单变型均属于本发明实施方式的保护范围。
另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合。为了避免不必要的重复，本发明实施方式对各种可能的组合方式不再另行说明。
本领域技术人员可以理解实现上述实施方式方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施方式所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
此外，本发明实施方式的各种不同的实施方式之间也可以进行任意组合，只要其不违背本发明实施方式的思想，其同样应当视为本发明实施方式所公开的内容。

Claims (8)

1.一种用于编码器对图像数据进行编码的方法，其特征在于，所述方法包括：
接收连续的背景帧，直到所述编码器接收到第一帧图像数据；
基于接收的连续的背景帧生成并保存关于该连续的背景帧的初始序列信息；
在接收到所述第一帧图像数据之后对所述第一帧图像数据进行编码；
在对所述第一帧图像数据编码结束之后输出所述初始序列信息；以及
输出编码后的所述第一帧图像数据，其中
在接收到的所述连续的背景帧的数量超过预设数量时生成所述初始序列信息。
2.根据权利要求1所述的方法，其特征在于，所述连续的背景帧是黑色的yuv帧。
3.根据权利要求1所述的方法，其特征在于，所述连续的背景帧的帧间隔是10ms。
4.一种编码器，其特征在于，所述编码器被配置成：
接收连续的背景帧，直到接收到第一帧图像数据；
基于接收的连续的背景帧生成并保存关于该连续的背景帧的初始序列信息，其中在接收到的所述连续的背景帧的数量超过预设数量时生成所述初始序列信息；
在接收到所述第一帧图像数据之后对所述第一帧图像数据进行编码；
在对所述第一帧图像数据编码结束之后输出所述初始序列信息；以及
输出编码后的所述第一帧图像数据。
5.根据权利要求4所述的编码器，其特征在于，所述连续的背景帧是黑色的yuv帧。
6.根据权利要求4所述的编码器，其特征在于，所述连续的背景帧的帧间隔是10ms。
7.根据权利要求4至6中任意一项所述的编码器，其特征在于，所述编码器是h.264编码器。
8.一种电子设备，其特征在于，所述电子设备包括：
帧生成器，被配置成生成连续的背景帧；以及
根据权利要求4至7中任意一项所述的编码器。
CN201611246732.4A 2016-12-29 2016-12-29 用于图像数据编码的方法、编码器和电子设备 Active CN108259904B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611246732.4A CN108259904B (zh) 2016-12-29 2016-12-29 用于图像数据编码的方法、编码器和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611246732.4A CN108259904B (zh) 2016-12-29 2016-12-29 用于图像数据编码的方法、编码器和电子设备

Publications (2)

Publication Number Publication Date
CN108259904A CN108259904A (zh) 2018-07-06
CN108259904B true CN108259904B (zh) 2022-04-05

Family

ID=62720080

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611246732.4A Active CN108259904B (zh) 2016-12-29 2016-12-29 用于图像数据编码的方法、编码器和电子设备

Country Status (1)

Country Link
CN (1) CN108259904B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113365143B (zh) * 2021-05-31 2024-03-19 努比亚技术有限公司 一种音频爆音的消除方法及相关设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4754336A (en) * 1985-12-20 1988-06-28 Fujitsu Limited Picture data communication system with scanning pattern change
CN101009835A (zh) * 2007-01-26 2007-08-01 清华大学 基于背景的运动估计编码方法
CN101014129A (zh) * 2007-03-06 2007-08-08 孟智平 一种视频数据压缩方法
CN101221663A (zh) * 2008-01-18 2008-07-16 电子科技大学中山学院 一种基于运动目标检测的智能监控报警方法
US7403568B2 (en) * 2003-08-13 2008-07-22 Apple Inc. Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using temporal filtering
CN103037209A (zh) * 2011-09-30 2013-04-10 腾讯科技（深圳）有限公司 视频帧的解码处理方法和装置
CN103200408A (zh) * 2013-04-23 2013-07-10 华录出版传媒有限公司 一种视频编解码方法
CN106254868A (zh) * 2016-08-19 2016-12-21 浙江宇视科技有限公司 视频编码码率控制方法、装置及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4754336A (en) * 1985-12-20 1988-06-28 Fujitsu Limited Picture data communication system with scanning pattern change
US7403568B2 (en) * 2003-08-13 2008-07-22 Apple Inc. Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using temporal filtering
CN101009835A (zh) * 2007-01-26 2007-08-01 清华大学 基于背景的运动估计编码方法
CN101014129A (zh) * 2007-03-06 2007-08-08 孟智平 一种视频数据压缩方法
CN101221663A (zh) * 2008-01-18 2008-07-16 电子科技大学中山学院 一种基于运动目标检测的智能监控报警方法
CN103037209A (zh) * 2011-09-30 2013-04-10 腾讯科技（深圳）有限公司 视频帧的解码处理方法和装置
CN103200408A (zh) * 2013-04-23 2013-07-10 华录出版传媒有限公司 一种视频编解码方法
CN106254868A (zh) * 2016-08-19 2016-12-21 浙江宇视科技有限公司 视频编码码率控制方法、装置及系统

Also Published As

Publication number Publication date
CN108259904A (zh) 2018-07-06

Similar Documents

Publication Publication Date Title
US11140401B2 (en) Coded-block-flag coding and derivation
US9872021B2 (en) Video conversion method and apparatus
CN110430441B (zh) 一种云手机视频采集方法、系统、装置及存储介质
JP5285682B2 (ja) 画像符号化装置、画像符号化方法
CN113473126B (zh) 视频流的处理方法、装置、电子设备及计算机可读介质
EP2677750A1 (en) Coding method, decoding method, and equipments for transform coefficients
CN110572695A (zh) 媒体数据的编码、解码方法及电子设备
CN110049347B (zh) 在直播界面配置图像的方法、系统、终端和装置
CN108259904B (zh) 用于图像数据编码的方法、编码器和电子设备
CN115134629A (zh) 视频传输方法、系统、设备及存储介质
US9674554B2 (en) Image processing system with coding mode and method of operation thereof
JP2009081726A (ja) エントロピー符号化装置、エントロピー符号化方法およびコンピュータプログラム
CN105745929B (zh) 加速逆变换的方法和装置以及解码视频流的方法和装置
US10356410B2 (en) Image processing system with joint encoding and method of operation thereof
CN109413445B (zh) 一种视频传输方法及装置
CN114079823A (zh) 基于Flutter的视频渲染方法、装置、设备及介质
CN104796702A (zh) 一种h264视频帧率的转换方法及装置
CN111372085B (zh) 影像解码装置与方法
US20120183234A1 (en) Methods for parallelizing fixed-length bitstream codecs
CN111083416B (zh) 数据处理方法、装置、电子设备及可读存储介质
US20180062907A1 (en) Server device, user terminal device, control methods thereof and streaming system
CN104780390A (zh) 一种视频处理方法及装置
CN111447453B (zh) 图像处理方法及装置
WO2021082799A1 (zh) 一种视频会议辅流处理方法及装置
CN112106368B (zh) 一种图像的块内编码或解码方法、数据处理装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20180719

Address after: 511458 9, Nansha District Beach Road, Guangzhou, Guangdong, 9

Applicant after: Rui Chi intelligent automobile (Guangzhou) Co., Ltd.

Address before: 100026 8 floor 909, 105 building 3, Yao Yuan Road, Chaoyang District, Beijing.

Applicant before: Music Automotive (Beijing) Co., Ltd.

TA01 Transfer of patent application right
CB02 Change of applicant information

Address after: 511458 9, Nansha District Beach Road, Guangzhou, Guangdong, 9

Applicant after: Hengda Faraday future intelligent vehicle (Guangdong) Co., Ltd.

Address before: 511458 9, Nansha District Beach Road, Guangzhou, Guangdong, 9

Applicant before: Rui Chi intelligent automobile (Guangzhou) Co., Ltd.

CB02 Change of applicant information
TA01 Transfer of patent application right

Effective date of registration: 20190318

Address after: 100015 Building No. 7, 74, Jiuxianqiao North Road, Chaoyang District, Beijing, 001

Applicant after: FAFA Automobile (China) Co., Ltd.

Address before: 511458 9, Nansha District Beach Road, Guangzhou, Guangdong, 9

Applicant before: Hengda Faraday future intelligent vehicle (Guangdong) Co., Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant