CN106792148A - 一种提高图像流畅度的方法及系统 - Google Patents

一种提高图像流畅度的方法及系统 Download PDF

Info

Publication number
CN106792148A
CN106792148A CN201611132317.6A CN201611132317A CN106792148A CN 106792148 A CN106792148 A CN 106792148A CN 201611132317 A CN201611132317 A CN 201611132317A CN 106792148 A CN106792148 A CN 106792148A
Authority
CN
China
Prior art keywords
thread
image
frame per
rate
view data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611132317.6A
Other languages
English (en)
Inventor
钟小勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vtron Technologies Ltd
Original Assignee
Vtron Technologies Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vtron Technologies Ltd filed Critical Vtron Technologies Ltd
Priority to CN201611132317.6A priority Critical patent/CN106792148A/zh
Publication of CN106792148A publication Critical patent/CN106792148A/zh
Priority to PCT/CN2017/096478 priority patent/WO2018103360A1/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Facsimiles In General (AREA)

Abstract

本发明公开一种提高图像流畅度的方法，包括检测当前的图像数据发送帧率，双线程中的数据存储及读取速率根据当前图像数据发送帧率动态调节。本发明利用双线程技术，线程a用于网络数据接收存储。线程b用于图像解码显示。当CPU性能较低时，只会导致线程b图像解码较慢，但是对线程a的网络接收影响较小，不会引起网络丢包情况的发生。同时本发明检测当前图像数据发送帧率，根据图像数据发送帧率动态调节双线程中数据存储及读取速率，能够提升画面显示的流畅度、降低延时，有效地解决了图像花屏、延时加深及流畅度降低的问题，增强了系统的稳定性和兼容性。

Description

一种提高图像流畅度的方法及系统
技术领域
本发明涉及视频处理领域，具体涉及一种提高图像流畅度的方法及系统。
背景技术
现有技术中，编码器发送过来的远程业务系统的图像数据，是由软件通过CPU解码并控制GPU渲染输出到显示器显示的。目前较为主流的方法都是使用双线程技术，一个线程用来缓冲存储编码数据，另一个线程用来读取数据并解码显示。如申请号为2015107795536的中国发明专利公开的那样，但是这种方法存在以下问题：在CPU性能较低时，由于图像解码较慢和显示时间不均匀，导致编码器发送队列溢出而引起网络丢包，使得图像出现花屏、延时加深及流畅度降低等问题。
发明内容
本发明的目的是解决现有技术的缺陷，提供一种提高图像流畅度的方法，采用的技术方案如下：
一种提高图像流畅度的方法，包括检测当前的图像数据发送帧率，根据当前图像数据发送帧率动态调节双线程中的数据存储及读取速率。
本发明的另一目的是解决现有技术的缺陷，提供一种提高图像流畅度的系统，采用的技术方案如下：
一种提高图像流畅度的系统，包括接收缓冲模块和处理模块；
所述接收缓冲模块用于接收存储图像数据，并检测图像数据的发送帧率，其存储速率根据图像的发送帧率调节；
所述处理模块用于读取图像数据并进行处理，其读取速率根据所述图像数据的发送帧率调节。
与现有技术相比，本发明的有益效果：
利用双线程技术，线程a用于网络数据接收存储。线程b用于图像解码显示。当CPU性能较低时，只会导致线程b图像解码较慢，但是对线程a的网络接收影响较小，不会引起网络丢包情况的发生。同时本发明检测当前图像数据发送帧率，根据图像数据发送帧率动态调节双线程中数据存储及读取速率，能够提升画面显示的流畅度、降低延时，有效地解决了图像花屏、延时加深及流畅度降低的问题，增强了系统的稳定性和兼容性。
附图说明
图1是本发明实施例1的方法流程图；
图2是本发明实施例2的系统结构示意图。
具体实施方式
下面结合附图和实施例对本发明做进一步详细描述。
实施例1：
一种提高图像流畅度的方法，包括检测当前的图像数据发送帧率，根据当前图像数据发送帧率动态调节双线程中的数据存储及读取速率。
具体地，本实施例包括以下步骤：
通过预先创建的线程a接收图像数据，并在线程a中检测图像数据的发送帧率，根据所述发送帧率设置数据存储速率；
按设置的存储速率将接收到的图像数据存储到循环队列中；
根据所述发送帧率设置预先创建的用于对读取图像数据并进行处理的线程b的读取速率；
从所述循环队列中读取出图像数据，处理后进行显示。
其中，所述图像数据可以是编码器通过网络发送来的远端业务系统的图像数据，也可以是通过其他形式发送来的图像数据。所述处理模块对图像数据的处理包括解码、渲染。
实施例2：
一种提高图像流畅度的系统，包括接收缓冲模块和处理模块；
所述接收缓冲模块用于接收存储图像数据，并检测图像数据的发送帧率，其存储速率根据图像的发送帧率调节；
所述处理模块用于读取图像数据并进行处理，其读取速率根据所述图像数据的发送帧率调节。
具体地，本实施例的一种提高图像流畅度的系统具体包括网络接收模块、循环队列模块、处理模块和显示模块，所述网络接收模块用于接收图像数据并检测图像数据的发送帧率，所述循环队列模块用于存储图像数据，其存储速率根据所述发送帧率调节，所述处理模块用于从循环队列模块中读取图像数据进行处理并交由显示模块显示，其读取根据所述发送帧率调节。
其中，所述图像数据可以是编码器通过网络发送来的远端业务系统的图像数据，也可以是通过其他形式发送来的图像数据。所述处理模块对图像数据的处理包括解码、渲染。

Claims (4)

1.一种提高图像流畅度的方法，其特征在于，包括检测当前的图像数据发送帧率，根据当前图像数据发送帧率动态调节双线程中的数据存储及读取速率。
2.根据权利要求1所述的一种提高图像流畅度的方法，其特征在于，包括以下步骤：
通过预先创建的线程a接收图像数据，并在线程a中检测图像数据的发送帧率，根据所述发送帧率设置数据存储速率；
按设置的存储速率将接收到的图像数据存储到循环队列中；
根据所述发送帧率设置预先创建的用于对读取图像数据并进行处理的线程b的读取速率；
从所述循环队列中读取出图像数据，处理后进行显示。
3.一种提高图像流畅度的系统，包括接收缓冲模块和处理模块；
所述接收缓冲模块用于接收存储图像数据，并检测图像数据的发送帧率，其存储速率根据图像的发送帧率调节；
所述处理模块用于读取图像数据并进行处理，其读取速率根据所述图像数据的发送帧率调节。
4.根据权利要求3所述的一种提高图像流畅度的系统，其特征在于，包括网络接收模块、循环队列模块、处理模块和显示模块，所述网络接收模块用于接收图像数据并检测图像数据的发送帧率，所述循环队列模块用于存储图像数据，其存储速率根据所述发送帧率调节，所述处理模块用于从循环队列模块中读取图像数据进行处理并交由显示模块显示，其读取速率根据所述发送帧率调节。
CN201611132317.6A 2016-12-09 2016-12-09 一种提高图像流畅度的方法及系统 Pending CN106792148A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611132317.6A CN106792148A (zh) 2016-12-09 2016-12-09 一种提高图像流畅度的方法及系统
PCT/CN2017/096478 WO2018103360A1 (zh) 2016-12-09 2017-08-08 一种提高图像流畅度的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611132317.6A CN106792148A (zh) 2016-12-09 2016-12-09 一种提高图像流畅度的方法及系统

Publications (1)

Publication Number Publication Date
CN106792148A true CN106792148A (zh) 2017-05-31

Family

ID=58875053

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611132317.6A Pending CN106792148A (zh) 2016-12-09 2016-12-09 一种提高图像流畅度的方法及系统

Country Status (2)

Country Link
CN (1) CN106792148A (zh)
WO (1) WO2018103360A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018103360A1 (zh) * 2016-12-09 2018-06-14 威创集团股份有限公司 一种提高图像流畅度的方法及系统
CN113727175A (zh) * 2021-08-11 2021-11-30 西安诺瓦星云科技股份有限公司 多路视频源回显方法、系统和显示控制设备
CN114900720A (zh) * 2022-04-02 2022-08-12 杭州星犀科技有限公司 媒体流的流畅性评估方法、系统、电子装置和存储介质
CN115623248A (zh) * 2022-12-19 2023-01-17 腾讯科技（深圳）有限公司 数据处理方法、帧率调整方法、装置，设备及计算机介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1719888A (zh) * 2005-08-08 2006-01-11 北京中星微电子有限公司 实现视频逐行到隔行转换的装置和转换方法
CN101287122A (zh) * 2008-05-23 2008-10-15 清华大学 一种具有主动式缓存管理和复杂度控制功能的视频解码方法
CN103269421A (zh) * 2013-05-23 2013-08-28 广东威创视讯科技股份有限公司 视频图像的降帧方法和系统
CN103369299A (zh) * 2012-04-09 2013-10-23 维图通讯有限公司 一种基于h.264编码技术的视频监控方法
WO2015127335A2 (en) * 2014-02-23 2015-08-27 Qualcomm Incorporated Ultrasonic authenticating button
CN104917990A (zh) * 2014-03-12 2015-09-16 索尼电脑娱乐美国公司 通过调整垂直消隐进行视频帧速率补偿
CN105469772A (zh) * 2015-12-30 2016-04-06 广东威创视讯科技股份有限公司 一种远程kvm控制方法、远程kvm控制端及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BE1000415A7 (nl) * 1987-03-18 1988-11-22 Bell Telephone Mfg Asynchroon op basis van tijdsverdeling werkend communicatiesysteem.
CN101771492A (zh) * 2008-12-29 2010-07-07 华为技术有限公司 调整流媒体码率的方法和装置
CN106792148A (zh) * 2016-12-09 2017-05-31 广东威创视讯科技股份有限公司 一种提高图像流畅度的方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1719888A (zh) * 2005-08-08 2006-01-11 北京中星微电子有限公司 实现视频逐行到隔行转换的装置和转换方法
CN101287122A (zh) * 2008-05-23 2008-10-15 清华大学 一种具有主动式缓存管理和复杂度控制功能的视频解码方法
CN103369299A (zh) * 2012-04-09 2013-10-23 维图通讯有限公司 一种基于h.264编码技术的视频监控方法
CN103269421A (zh) * 2013-05-23 2013-08-28 广东威创视讯科技股份有限公司 视频图像的降帧方法和系统
WO2015127335A2 (en) * 2014-02-23 2015-08-27 Qualcomm Incorporated Ultrasonic authenticating button
CN104917990A (zh) * 2014-03-12 2015-09-16 索尼电脑娱乐美国公司 通过调整垂直消隐进行视频帧速率补偿
CN105469772A (zh) * 2015-12-30 2016-04-06 广东威创视讯科技股份有限公司 一种远程kvm控制方法、远程kvm控制端及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018103360A1 (zh) * 2016-12-09 2018-06-14 威创集团股份有限公司 一种提高图像流畅度的方法及系统
CN113727175A (zh) * 2021-08-11 2021-11-30 西安诺瓦星云科技股份有限公司 多路视频源回显方法、系统和显示控制设备
CN114900720A (zh) * 2022-04-02 2022-08-12 杭州星犀科技有限公司 媒体流的流畅性评估方法、系统、电子装置和存储介质
CN114900720B (zh) * 2022-04-02 2023-11-21 杭州星犀科技有限公司 媒体流的流畅性评估方法、系统、电子装置和存储介质
CN115623248A (zh) * 2022-12-19 2023-01-17 腾讯科技（深圳）有限公司 数据处理方法、帧率调整方法、装置，设备及计算机介质

Also Published As

Publication number Publication date
WO2018103360A1 (zh) 2018-06-14

Similar Documents

Publication Publication Date Title
CN106792148A (zh) 一种提高图像流畅度的方法及系统
WO2017219896A1 (zh) 视频流的传输方法及装置
US20190104311A1 (en) Server-based encoding of adjustable frame rate content
US20220272402A1 (en) Video stream playing method, system, terminal and storage medium
CN107979582B (zh) 一种udp数据流传输方法及其装置
CN102752670B (zh) 减少网络视频传输中马赛克现象的方法、装置及系统
US20200314440A1 (en) Data Stream Encoder Configuration
WO2007051202A3 (en) Accelerating video decoding using multiple processors
US20170013274A1 (en) Intra-refresh for video streaming
WO2020078172A1 (zh) 帧率控制方法、装置、终端及存储介质
JP7336459B2 (ja) 符号化されたビデオビットストリームの低遅延消費
WO2022095797A1 (zh) 图像的压缩方法、装置、智能终端及计算机可读存储介质
US20200104973A1 (en) Methods and apparatus for frame composition alignment
US20200105227A1 (en) Methods and apparatus for improving frame rendering
WO2018107338A1 (zh) 图像信号处理方法和装置
KR20140102605A (ko) 화상 처리 장치
US10446071B2 (en) Device and method of using slice update map
KR102619668B1 (ko) 슬라이스 업데이트 맵을 이용하는 장치 및 방법
WO2017084351A1 (zh) 一种基于安卓平台的黑白屏幕显示方法、装置和智能终端
CN111428560B (zh) 视频图像处理方法、装置、电子设备及存储介质
TW201813406A (zh) 一種使用環形緩衝器和競賽模式環形緩衝器訪問控制方案的視訊處理系統
EP2688299A1 (en) Video processing method and system, and related device
CN115002541A (zh) 一种降低客户端云串流渲染的系统
US10880562B2 (en) Image processing method and camera thereof
US11410700B2 (en) Video playback buffer adjustment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170531