CN115134340A - 一种基于摄像机的低延迟智能云广播方法 - Google Patents

一种基于摄像机的低延迟智能云广播方法 Download PDF

Info

Publication number
CN115134340A
CN115134340A CN202210756552.XA CN202210756552A CN115134340A CN 115134340 A CN115134340 A CN 115134340A CN 202210756552 A CN202210756552 A CN 202210756552A CN 115134340 A CN115134340 A CN 115134340A
Authority
CN
China
Prior art keywords
camera
platform
client
transmission channel
audio data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210756552.XA
Other languages
English (en)
Inventor
王一鸣
张彪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Shidong Technology Co ltd
Original Assignee
Hangzhou Shidong Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Shidong Technology Co ltd filed Critical Hangzhou Shidong Technology Co ltd
Priority to CN202210756552.XA priority Critical patent/CN115134340A/zh
Publication of CN115134340A publication Critical patent/CN115134340A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及音视频通信技术领域，本发明公开了一种基于摄像机的低延迟智能云广播方法，包括以下步骤；客户端在发起实时广播前，平台会提前通知摄像头并与摄像头建立消息传输通道，同时，平台与客户端也会建立消息传输通道；广播过程中，客户端实时录制广播人的声音，并实时将音频数据上传到平台，平台将音频数据通过消息传输通道推送给摄像头，摄像机采用流式获取音频数据，解析数据并播放声音。发明采用流式上传和流式下载音频数据，从客户端录入语音发送，到摄像头接收端接收语音，延迟在100ms以内，同时传输通道采用GCC和FEC算法，抗丢包率提升30%；本发明在软件性能上也提升了50%，进一步降低了平台资源成本投入。

Description

一种基于摄像机的低延迟智能云广播方法
技术领域
本发明涉及音视频通信技术领域，具体为一种基于摄像机的低延迟智能云广播方法。
背景技术
为顺应农村现代化发展趋势，满足农村信息传播需求和幸福乡村建设要求，结合手机、智能摄像头、音柱、智能音箱等多形态终端设备的通知产品“智能云广播”已经非常普遍，该产品适用于疫情应急信息通知、党建宣传、自然灾害通知等。
以往的实时云广播方案，采用音频文件切片方案，该方案在客户端上传文件速率、文件切片、摄像头下载文件等环节都耗时很久，总耗时3秒以上；
所以导致现有智能云广播产品方案存在实时广播高延迟的问题，即广播人喊话，摄像头要等几秒后才会播放广播。
发明内容
本发明的目的在于提供一种基于摄像机的低延迟智能云广播方法，解决现有智能云广播产品方案存在的实时喊话高延迟问题：广播人喊话，摄像头接收端要等几秒后才会播放喊话内容的技术问题，本发明可以实现延迟小于100ms的实时广播效果。
为实现上述目的，本发明提供如下技术方案：一种基于摄像机的低延迟智能云广播方法，包括以下步骤；
步骤一：登陆APP或PC客户端；
步骤二：点击开始实时广播，客户端会向平台请求建立客户端与平台间的消息传输通道，同时，平台给摄像头下发指令，建立摄像头与平台间的消息传输通道；
步骤三：用户使用APP或PC客户端发起实时广播进行喊话；
步骤四：客户端将音频数据通过G711编码，封装成一个一个语音包，通过客户端消息传输通道发送至平台，平台将接收到的音频数据包通过摄像头消息传输通道实时转发给摄像头端；
步骤五：摄像机实时接收音频数据后解析，验证数据完整性并播放；
步骤六：摄像机若接收到包含“喊话结束”标记的音频数据包，则同步播放结果给平台；
步骤七：平台收到摄像机的结束播放消息后，主动断开与摄像头的传输通道，释放资源；
步骤八：平台将播放结果返回给客户端，同时断开与客户端的传输通道，释放资源；
步骤九：客户端展示内容给客户。
优选的，步骤二中，消息通道都经过金融级别加密处理。
优选的，步骤四中，平台对传输通道采用FEC和AQR算法处理。
优选的，步骤九中，内容包括播放时长、播放摄像头信息。
本发明提出的一种基于摄像机的低延迟智能云广播方法，有益效果在于：本发明采用流式上传和流式下载音频数据，从客户端录入语音发送，到摄像头接收端接收语音，延迟在100ms以内；同时传输通道采用GCC和FEC算法，抗丢包率提升30%；本发明在软件性能上也提升了50%，进一步降低了平台资源成本投入。
附图说明
图1为本发明的流程框图；
图2为本发明的原理框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例，请参阅图1-2，本发明提供一种技术方案：一种基于摄像机的低延迟智能云广播方法，其特征在于：包括以下步骤；
步骤一：登陆APP或PC客户端；
步骤二：点击开始实时广播，客户端会向平台请求建立客户端与平台间的消息传输通道，同时，平台给摄像头下发指令，建立摄像头与平台间的消息传输通道，消息通道都经过金融级别加密处理；
步骤三：用户使用APP或PC客户端发起实时广播进行喊话；
步骤四：客户端将音频数据通过G711编码，封装成一个一个语音包，通过客户端消息传输通道发送至平台，平台将接收到的音频数据包通过摄像头消息传输通道实时转发给摄像头端，平台对传输通道采用FEC和AQR算法处理；
步骤五：摄像机实时接收音频数据后解析，验证数据完整性并播放；
步骤六：摄像机若接收到包含“喊话结束”标记的音频数据包，则同步播放结果给平台；
步骤七：平台收到摄像机的结束播放消息后，主动断开与摄像头的传输通道，释放资源；
步骤八：平台将播放结果返回给客户端，同时断开与客户端的传输通道，释放资源；
步骤九：客户端展示播放时长、播放摄像头信息等内容给客户。
客户端在发起实时广播前，平台会提前通知摄像头并与摄像头建立消息传输通道，同时，平台与客户端也会建立消息传输通道；广播过程中，客户端实时录制广播人的声音，并实时将音频数据上传到平台，平台将音频数据通过消息传输通道推送给摄像头，摄像机采用流式获取音频数据，解析数据并播放声音。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (4)

1.一种基于摄像机的低延迟智能云广播方法，其特征在于：包括以下步骤；
步骤一：登陆APP或PC客户端；
步骤二：点击开始实时广播，客户端会向平台请求建立客户端与平台间的消息传输通道，同时，平台给摄像头下发指令，建立摄像头与平台间的消息传输通道；
步骤三：用户使用APP或PC客户端发起实时广播进行喊话；
步骤四：客户端将音频数据通过G711编码，封装成一个一个语音包，通过客户端消息传输通道发送至平台，平台将接收到的音频数据包通过摄像头消息传输通道实时转发给摄像头端；
步骤五：摄像机实时接收音频数据后解析，验证数据完整性并播放；
步骤六：摄像机若接收到包含“喊话结束”标记的音频数据包，则同步播放结果给平台；
步骤七：平台收到摄像机的结束播放消息后，主动断开与摄像头的传输通道，释放资源；
步骤八：平台将播放结果返回给客户端，同时断开与客户端的传输通道，释放资源；
步骤九：客户端展示内容给客户。
2.根据权利要求1所述的一种基于摄像机的低延迟智能云广播方法，其特征在于：步骤二中，消息通道都经过金融级别加密处理。
3.根据权利要求1所述的一种基于摄像机的低延迟智能云广播方法，其特征在于：步骤四中，平台对传输通道采用FEC和AQR算法处理。
4.根据权利要求1所述的一种基于摄像机的低延迟智能云广播方法，其特征在于：步骤九中，内容包括播放时长、播放摄像头信息。
CN202210756552.XA 2022-06-30 2022-06-30 一种基于摄像机的低延迟智能云广播方法 Pending CN115134340A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210756552.XA CN115134340A (zh) 2022-06-30 2022-06-30 一种基于摄像机的低延迟智能云广播方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210756552.XA CN115134340A (zh) 2022-06-30 2022-06-30 一种基于摄像机的低延迟智能云广播方法

Publications (1)

Publication Number Publication Date
CN115134340A true CN115134340A (zh) 2022-09-30

Family

ID=83382686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210756552.XA Pending CN115134340A (zh) 2022-06-30 2022-06-30 一种基于摄像机的低延迟智能云广播方法

Country Status (1)

Country Link
CN (1) CN115134340A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024104183A1 (zh) * 2022-11-14 2024-05-23 天翼数字生活科技有限公司 设备联动实时播报方法、装置、存储介质、计算机设备

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007055442A1 (en) * 2005-11-08 2007-05-18 Netcodec Co. Method and system for controlling network camera through session initiation protocol
CN104378596A (zh) * 2014-11-18 2015-02-25 小米科技有限责任公司 一种与摄像设备进行远程通话的方法及装置
US20150067808A1 (en) * 2009-09-08 2015-03-05 Thomas Varghese Client Identification System Using Video Conferencing Technology
CN105553978A (zh) * 2015-12-14 2016-05-04 西安科技大学 带式输送机可视化辅助维修系统及流媒体的交互过程
US20170280043A1 (en) * 2016-03-22 2017-09-28 Tyco International Management Company System and method for controlling surveillance cameras
CN207457761U (zh) * 2017-10-26 2018-06-05 杭州壹道物联科技有限公司 一种远程监控语音通信装置
CN108307138A (zh) * 2018-01-24 2018-07-20 湖北省广播电视信息网络股份有限公司 可远程通讯的视频系统和视频方法
CN208015745U (zh) * 2018-04-12 2018-10-26 深圳市欧博科技有限公司 一种广域网广播及监控系统
CN208028987U (zh) * 2018-04-24 2018-10-30 杨贵寅 一种高智能多功能监控摄像头
CN113364549A (zh) * 2021-07-07 2021-09-07 邯郸市金世达科技有限公司 一种基于网络摄像机实现现场语音提示和网络广播的方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007055442A1 (en) * 2005-11-08 2007-05-18 Netcodec Co. Method and system for controlling network camera through session initiation protocol
US20150067808A1 (en) * 2009-09-08 2015-03-05 Thomas Varghese Client Identification System Using Video Conferencing Technology
CN104378596A (zh) * 2014-11-18 2015-02-25 小米科技有限责任公司 一种与摄像设备进行远程通话的方法及装置
CN105553978A (zh) * 2015-12-14 2016-05-04 西安科技大学 带式输送机可视化辅助维修系统及流媒体的交互过程
US20170280043A1 (en) * 2016-03-22 2017-09-28 Tyco International Management Company System and method for controlling surveillance cameras
CN207457761U (zh) * 2017-10-26 2018-06-05 杭州壹道物联科技有限公司 一种远程监控语音通信装置
CN108307138A (zh) * 2018-01-24 2018-07-20 湖北省广播电视信息网络股份有限公司 可远程通讯的视频系统和视频方法
CN208015745U (zh) * 2018-04-12 2018-10-26 深圳市欧博科技有限公司 一种广域网广播及监控系统
CN208028987U (zh) * 2018-04-24 2018-10-30 杨贵寅 一种高智能多功能监控摄像头
CN113364549A (zh) * 2021-07-07 2021-09-07 邯郸市金世达科技有限公司 一种基于网络摄像机实现现场语音提示和网络广播的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024104183A1 (zh) * 2022-11-14 2024-05-23 天翼数字生活科技有限公司 设备联动实时播报方法、装置、存储介质、计算机设备

Similar Documents

Publication Publication Date Title
US10930262B2 (en) Artificially generated speech for a communication session
US12096046B2 (en) Live streaming method and system, server, and storage medium
CN110267064B (zh) 音频播放状态处理方法、装置、设备及存储介质
US20050262260A1 (en) Two-way audio/video conference system
WO2015168823A1 (zh) 一种基于互联网通信及流媒体直播的交互应答系统及方法
CN102325181B (zh) 一种基于共享业务的音视频即时交互通信方法及系统
US20040170159A1 (en) Digital audio and/or video streaming system
CN110535871A (zh) 一种基于WebRTC的课堂实时视频投影方法及系统
CN110943977B (zh) 多媒体业务数据传输方法、服务端、设备及存储介质
CN112261633B (zh) 一种用于智能耳机的音频录音及转换方法
CN115134340A (zh) 一种基于摄像机的低延迟智能云广播方法
CN108366044B (zh) 一种VoIP远程音视频共享方法
WO2023071813A1 (zh) 一种数据传输方法、设备及存储介质和终端设备
CN1534503A (zh) 实现网络游戏中实时影音会谈的方法、系统及储存媒体
CN104253696A (zh) 基于互联网的警用手持语音对讲方法及系统
CN113014950A (zh) 一种直播同步的方法、系统和电子设备
CN111711870B (zh) 一种跨网络边界的实时流传输方法
AU2013262210A1 (en) Transmission method for media data stream and thin client
CN105763941A (zh) 一种频道切换方法和系统
US20050050090A1 (en) Call method, copyright protection system and call system
KR20110074780A (ko) 휴대 전화 텔레비전 프로그램을 공유하는 방법 및 이동 단말
CN111787417B (zh) 基于人工智能ai的音视频的传输控制方法及相关设备
CN114710568A (zh) 音视频数据通信方法、设备及存储介质
CN115914178B (zh) 一种voip实时音视频通话方法、系统及装置
US20240015199A1 (en) Method and Apparatus for Delivering Musical, Theatrical, and Film Performance over Unreliable Channels

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination