CN109361937A - 一种大屏多路推流码率自动调整方法 - Google Patents

一种大屏多路推流码率自动调整方法 Download PDF

Info

Publication number
CN109361937A
CN109361937A CN201811121041.0A CN201811121041A CN109361937A CN 109361937 A CN109361937 A CN 109361937A CN 201811121041 A CN201811121041 A CN 201811121041A CN 109361937 A CN109361937 A CN 109361937A
Authority
CN
China
Prior art keywords
plug
flow
thread
size screen
screen monitors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811121041.0A
Other languages
English (en)
Inventor
施文波
周宇
孔陈祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Original Assignee
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Jiangsu Electric Power Co Ltd, Jiangsu Electric Power Information Technology Co Ltd filed Critical State Grid Jiangsu Electric Power Co Ltd
Priority to CN201811121041.0A priority Critical patent/CN109361937A/zh
Publication of CN109361937A publication Critical patent/CN109361937A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种大屏多路推流码率自动调整方法，在主线程中控制各个推流子线程的截屏和推流同步，保证终端接收多路推流时接收到同一帧数据，首先大屏在推流前，初始化多路推流的线程，每个线程管理一路推流界面；每个推流线程负责获取大屏对应区域的一帧画面，并判断与上一帧图片的区别；若变化较大，则进行高码率编码并推流到终端；若没有变化则放弃这一帧推流；若变化较小，则进行低码率编码并推流到终端。本发明将一个大屏切割成多个区域进行多路视频的推流，对于活动较频繁的区域，进行高码率，高帧率的方式推流，而对于活动不平凡的区域，降低推流的帧率和码率，从而使得整个大屏的推流实现清晰，流畅的效果。

Description

一种大屏多路推流码率自动调整方法
技术领域
本发明属于大屏界面推流技术，具体说是一种将大屏分为多路推流的技术，实现活动区域高分辨率，高码率，高流畅度推流的大屏多路推流码率自动调整方法。
背景技术
当前在大屏推流的解决方案上，传统的方法是捕获大屏的整体界面进行推流。这样由于大屏的分辨率都比较高，捕获一帧图像的数据量非常的大，无论是对于硬件性能还是网络传输的压力非常大，导致大屏推流的时候，出现卡顿，不流畅等现象，影响大屏推流效果。
发明内容
本发明的目的是提供一种大屏多路推流码率自动调整方法，将一个大屏切割成多个区域进行多路视频的推流，对于活动较频繁的区域，进行高码率，高帧率的方式推流，而对于活动不平凡的区域，降低推流的帧率和码率，从而使得整个大屏的推流实现清晰，流畅的效果。
本发明的目的通过以下技术方案实现：
一种大屏多路推流码率自动调整方法，其特征在于：该方法在主线程中控制各个推流子线程的截屏和推流同步，保证终端接收多路推流时接收到同一帧数据，包括：初始化同步和推流同步；具体如下：
首先大屏在推流前，初始化多路推流的线程，每个线程管理一路推流界面；每个推流线程负责获取大屏对应区域的一帧画面，并判断与上一帧图片的区别；若变化较大，则进行高码率编码并推流到终端；若没有变化则放弃这一帧推流；若变化较小，则进行低码率编码并推流到终端。
进一步，初始化同步。要支持多路推流的同步，需要一个机制去控制多个推流线程在获取大屏一帧画面时的同步。本方法选择线程间通讯的机制（信号和槽），主线程通过定时器，将获取一帧大屏画面的事件通过信号的方式传输给各路推流线程，当推流线程接收到截屏信号后，截取自己线程所对应的大屏区域的一帧画面，并将该帧画面和上一帧画面进行比对，判断该区域活动的频率，若活动频率较大，则进行高码率编码。若活动频率较小，则进行低码率编码。若无活动频率，保存这一帧数据，不进行推流。处理完成后返回给主线程处理完成的信号。
推流同步。当主线程接收完所有子线程发送的处理完成的信号后，统一向子线程发送推流信号。推流子线程接收到推流信号后，将编码后的数据推流到对应的终端。终端接收到这一帧数据后，进行解码并展示。
本发明将一个大屏切割成多个区域进行多路视频的推流，对于活动较频繁的区域，进行高码率，高帧率的方式推流，而对于活动不平凡的区域，降低推流的帧率和码率，从而使得整个大屏的推流实现清晰，流畅的效果。
附图说明
图1是大屏多路推流码率自动调整流程图。
具体实施方式
一种大屏多路推流码率自动调整方法，首先大屏在推流前，初始化多路推流的线程，每个线程管理一路推流界面。每个推流线程负责获取大屏对应区域的一帧画面，并判断与上一帧图片的区别。若变化较大，则进行高码率编码并推流到终端。若没有变化则放弃这一帧推流。若变化较小，则进行低码率编码并推流到终端。为保证各路推流的同步，需要在主线程中控制各个推流子线程的截屏和推流同步。这样可以保证终端接收多路推流时能接收到同一帧数据。因此将多路推流技术分为初始化同步和推流同步。
下面结合附图1和具体实施例对本发明的处理流程进一步详细阐述，以智能大屏展示平台推流为例。
步骤1：根据预设的推流线路数量初始化推流线程；
步骤2：主线程初始化定时器，用于子线程在获取一帧画面的时候保持同步；
步骤3：大屏开始推流的时候，主线程启动定时器，向各路子线程发送获取一帧画面的命令；
步骤4：推流子线程获取到主线程发送的获取一帧画面的命令后，开始对自己所对应的大屏区域截取一帧画面，并和上一帧画面进行活动频率分析，根据分析结果对这一帧画面数据进行编码；
步骤5：子线程编码结束后，给主线程发送处理完成信号。；
步骤6：主线程统计接收到的处理完成信号的个数，带全部子线程完成处理后，向各路子线程发送推流指令。
步骤7：子线程接收到主线程发送的推流命令后，将编码完成的一帧数据发送到对应的各个终端上进行展示。跳至步骤3循环处理
步骤8：推流结束，主线程关闭定时器，子线程释放画面资源，等待下一次推流开始。

Claims (4)

1.一种大屏多路推流码率自动调整方法，其特征在于：该方法在主线程中控制各个推流子线程的截屏和推流同步，保证终端接收多路推流时接收到同一帧数据，包括：初始化同步和推流同步；具体如下：
首先大屏在推流前，初始化多路推流的线程，每个线程管理一路推流界面；每个推流线程负责获取大屏对应区域的一帧画面，并判断与上一帧图片的区别；若变化较大，则进行高码率编码并推流到终端；若没有变化则放弃这一帧推流；若变化较小，则进行低码率编码并推流到终端。
2.根据权利要求1所述的大屏多路推流码率自动调整方法，其特征在于：初始化同步：控制多个推流线程在获取大屏一帧画面时的同步；选择线程间通讯的机制，主线程通过定时器，将获取一帧大屏画面的事件通过信号的方式传输给各路推流线程，当推流线程接收到截屏信号后，截取自己线程所对应的大屏区域的一帧画面，并将该帧画面和上一帧画面进行比对，判断该区域活动的频率，若活动频率较大，则进行高码率编码；若活动频率较小，则进行低码率编码；若无活动频率，保存这一帧数据，不进行推流；处理完成后返回给主线程处理完成的信号。
3.根据权利要求1所述的大屏多路推流码率自动调整方法，其特征在于：推流同步：当主线程接收完所有子线程发送的处理完成的信号后，统一向子线程发送推流信号；推流子线程接收到推流信号后，将编码后的数据推流到对应的终端；终端接收到这一帧数据后，进行解码并展示。
4.根据权利要求1所述的大屏多路推流码率自动调整方法，其特征在于具体步骤如下：
步骤1：根据预设的推流线路数量初始化推流线程；
步骤2：主线程初始化定时器，用于子线程在获取一帧画面的时候保持同步；
步骤3：大屏开始推流的时候，主线程启动定时器，向各路子线程发送获取一帧画面的命令；
步骤4：推流子线程获取到主线程发送的获取一帧画面的命令后，开始对自己所对应的大屏区域截取一帧画面，并和上一帧画面进行活动频率分析，根据分析结果对这一帧画面数据进行编码；
步骤5：子线程编码结束后，给主线程发送处理完成信号；
步骤6：主线程统计接收到的处理完成信号的个数，带全部子线程完成处理后，向各路子线程发送推流指令；
步骤7：子线程接收到主线程发送的推流命令后，将编码完成的一帧数据发送到对应的各个终端上进行展示；跳至步骤3循环处理；
步骤8：推流结束，主线程关闭定时器，子线程释放画面资源，等待下一次推流开始。
CN201811121041.0A 2018-09-25 2018-09-25 一种大屏多路推流码率自动调整方法 Pending CN109361937A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811121041.0A CN109361937A (zh) 2018-09-25 2018-09-25 一种大屏多路推流码率自动调整方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811121041.0A CN109361937A (zh) 2018-09-25 2018-09-25 一种大屏多路推流码率自动调整方法

Publications (1)

Publication Number Publication Date
CN109361937A true CN109361937A (zh) 2019-02-19

Family

ID=65347771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811121041.0A Pending CN109361937A (zh) 2018-09-25 2018-09-25 一种大屏多路推流码率自动调整方法

Country Status (1)

Country Link
CN (1) CN109361937A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114827542A (zh) * 2022-04-25 2022-07-29 重庆紫光华山智安科技有限公司 多路视频码流抓图方法、系统、设备及介质
CN117596234A (zh) * 2023-09-28 2024-02-23 书行科技(北京)有限公司 一种多人会话方法及装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100316066A1 (en) * 2009-06-16 2010-12-16 Qualcomm Incorporated Managing video adaptation algorithms
CN102752598A (zh) * 2012-07-09 2012-10-24 北京博雅华录视听技术研究院有限公司 快速自适应码率控制方法
CN103248947A (zh) * 2012-02-08 2013-08-14 海尔集团公司 一种视频多屏共享方法及实现该方法的系统
CN103680470A (zh) * 2012-09-03 2014-03-26 杭州海康威视数字技术股份有限公司 大屏控制的图像显示方法及系统
WO2014083953A1 (ja) * 2012-11-27 2014-06-05 ソニー株式会社 表示装置及び表示方法、並びにコンピューター・プログラム
CN103986960A (zh) * 2014-06-03 2014-08-13 王军明 一种单视频画面分割多路由远传精确同步拼接显示的方法
CN105451061A (zh) * 2014-09-23 2016-03-30 中兴通讯股份有限公司 屏幕共享方法和装置
KR20160109804A (ko) * 2015-03-13 2016-09-21 엔트릭스 주식회사 클라우드 스트리밍 서비스 시스템, 화면 분할을 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
CN106454154A (zh) * 2016-11-24 2017-02-22 Tcl数码科技（深圳）有限责任公司 一种电视墙拼接方法及系统
CN108234933A (zh) * 2016-12-21 2018-06-29 上海杰图软件技术有限公司 基于多路图像信号处理的实时拼接全景影像的方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100316066A1 (en) * 2009-06-16 2010-12-16 Qualcomm Incorporated Managing video adaptation algorithms
CN103248947A (zh) * 2012-02-08 2013-08-14 海尔集团公司 一种视频多屏共享方法及实现该方法的系统
CN102752598A (zh) * 2012-07-09 2012-10-24 北京博雅华录视听技术研究院有限公司 快速自适应码率控制方法
CN103680470A (zh) * 2012-09-03 2014-03-26 杭州海康威视数字技术股份有限公司 大屏控制的图像显示方法及系统
WO2014083953A1 (ja) * 2012-11-27 2014-06-05 ソニー株式会社 表示装置及び表示方法、並びにコンピューター・プログラム
CN103986960A (zh) * 2014-06-03 2014-08-13 王军明 一种单视频画面分割多路由远传精确同步拼接显示的方法
CN105451061A (zh) * 2014-09-23 2016-03-30 中兴通讯股份有限公司 屏幕共享方法和装置
KR20160109804A (ko) * 2015-03-13 2016-09-21 엔트릭스 주식회사 클라우드 스트리밍 서비스 시스템, 화면 분할을 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
CN106454154A (zh) * 2016-11-24 2017-02-22 Tcl数码科技（深圳）有限责任公司 一种电视墙拼接方法及系统
CN108234933A (zh) * 2016-12-21 2018-06-29 上海杰图软件技术有限公司 基于多路图像信号处理的实时拼接全景影像的方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114827542A (zh) * 2022-04-25 2022-07-29 重庆紫光华山智安科技有限公司 多路视频码流抓图方法、系统、设备及介质
CN114827542B (zh) * 2022-04-25 2024-03-26 重庆紫光华山智安科技有限公司 多路视频码流抓图方法、系统、设备及介质
CN117596234A (zh) * 2023-09-28 2024-02-23 书行科技(北京)有限公司 一种多人会话方法及装置
CN117596234B (zh) * 2023-09-28 2024-05-28 书行科技(北京)有限公司 一种多人会话方法及装置

Similar Documents

Publication Publication Date Title
CA2951065C (en) Synchronizing playback of segmented video content across multiple video playback devices
CN101917391B (zh) 一种网络视频的播放方法及一种网络视频播放系统
KR102419249B1 (ko) 오디오 및 비디오를 동기시키기 위한 시스템 및 방법
CN105262974A (zh) 一种实现多人屏幕无线共享的方法
CN109361937A (zh) 一种大屏多路推流码率自动调整方法
CN105072360B (zh) 一种多屏拼接控制显示系统及方法
TW201448575A (zh) 用於快速切換的編碼解碼器技術
EP1675399A3 (en) Fast channel switching for digital TV
CN103686199A (zh) 网络电视多窗口节目预览的方法及系统及终端
CN110557458A (zh) 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统
CN106331530B (zh) 一种电视墙的同步快速切换显示方法、解码设备
US20130135427A1 (en) Techniques For a Rate-Adaptive Video Conference Bridge
CN104254014A (zh) 一种模拟电视墙的视频上墙配置方法及系统
CN105898506A (zh) 媒体文件的多屏播放方法和系统
CN108055497A (zh) 一种会议信号播放方法和装置、视频会议终端、移动设备
CN110933450A (zh) 多路直播同步方法、系统、边缘设备、终端及存储介质
CN105187689A (zh) 一种多终端共同播放超高清视频的同步方法
GB2401001B (en) Apparatus and method for sending image data
CN104159079B (zh) 一种图像实时解码显示方法
CN101453571A (zh) 一种对比电视图像效果的方法及设备
US8077736B2 (en) Fast audio/visual reception in DVB-H systems
CN102546803A (zh) 基于能力集的远端桌面通信方法
CN106851053A (zh) 一种基于互联网的导播方法、终端和系统
CN104978157A (zh) 显示装置及其图像显示方法
CN107018379B (zh) 一种视频流的传输方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190219