CN104796578A - 一种基于节目声音特征的多屏同步方法 - Google Patents

一种基于节目声音特征的多屏同步方法 Download PDF

Info

Publication number
CN104796578A
CN104796578A CN201510213712.6A CN201510213712A CN104796578A CN 104796578 A CN104796578 A CN 104796578A CN 201510213712 A CN201510213712 A CN 201510213712A CN 104796578 A CN104796578 A CN 104796578A
Authority
CN
China
Prior art keywords
screen
signal
method based
zero passage
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510213712.6A
Other languages
English (en)
Other versions
CN104796578B (zh
Inventor
董政
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Baiyun Science & Technology Co ltd
Hainan Suanyi Technology Co.,Ltd.
Original Assignee
Chengdu Mo Yun Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Mo Yun Science And Technology Ltd filed Critical Chengdu Mo Yun Science And Technology Ltd
Priority to CN201510213712.6A priority Critical patent/CN104796578B/zh
Publication of CN104796578A publication Critical patent/CN104796578A/zh
Application granted granted Critical
Publication of CN104796578B publication Critical patent/CN104796578B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明为了简化视频同步对现场视频同步硬件设备的依赖程度，本发明提供了一种基于节目声音特征的多屏同步方法，包括：(1)获取多个屏幕的各自的一段节目声音信号，所述节目声音信号包括频率基本在10Hz以下的声音；该频率可以在不影响声音播放的情况下，产生辅助视频同步的效果；(2)采集所述的各段节目声音信号的特征；(3)根据采集到的特征使所述各个屏幕的显示同步化。本发明改善了视频播放时的用户体验，从信号播放源智能化地消除了视频信号不同步问题，并降低了播放终端对视频硬件编解码的依赖性，降低了播放现场的硬件成本。

Description

一种基于节目声音特征的多屏同步方法
技术领域
本发明涉及视频处理技术领域，更具体地，涉及一种基于节目声音特征的多屏同步方法。
背景技术
视频同步多是针对大屏幕或多个屏幕的显示进行同步处理。在各类大厅应用中，用户会安装多块大屏同步显示多类不同的信息，方便进行视频指挥、视频会议、远程会商等业务。而利用计算机显卡支持多屏显示的功能，也可以将计算机的内容以更大的分辨率进行输出显示。所需显示的图像经由编码器编码接入网络，经网络远传，统一解码上大屏，这种方式使图像显示的分辨率和尺寸符合大屏显示需求。例如，将多路的HD(High Definition，分辨率达到1920x1080的高清信号)或者UHD(Ultra High Definition，分辨率3840x2160达到的超高清信号)视频，拼接成分辨率达到8Kx4K，16Kx8K的超高分辨率视频。多路视频拼接时，各路播放设备输出视频要保持同步，以保证超高分辨率视频在时域的同步性和画面完整性。
现有技术中，通过软件控制多路播放设备输出视频的同步。各路HD或者UHD播放设备通过网络连接，其中一台设定为主播放设备，其它设为从播放设备。由主播放设备发送一个视频输出的心跳信号，其它各路播放设备按照心跳信号，输出视频信号，从而实现各路视频信号的同步。然而，对视频信号的处理往往需要使同步设备支持多种不同格式的视频源。
此外，视频信号提供方，例如，电视台，无法对各播放终端不同步问题给与任何干预。这不利于在不同地区和场合的视频信号处理方降低视频同步(例如，公交车站广告等的播放)所需的设备购买和维护费用。
发明内容
本发明为了简化视频同步对现场视频同步硬件设备的依赖程度，本发明提供了一种基于节目声音特征的多屏同步方法，包括：
(1)获取多个屏幕的各自的一段节目声音信号，所述节目声音信号包括频率基本在10Hz以下的声音；该频率可以在不影响声音播放的情况下，产生辅助视频同步的效果。而现有技术中对其他特征的音频进行处理的技术要么需要以节目中的特定语言为标志，要么需要以节目中的特定声音为标志，而这两种情况都不利于本发明对通用视频节目的多地低成本播放的技术效果。
(2)采集所述的各段节目声音信号的特征；
(3)根据采集到的特征使所述各个屏幕的显示同步化。
进一步地，所述步骤(1)包括：
接收各屏幕各自的一段节目信号；
分解所述各段节目信号中的声音信号和图像信号；
对所述各段声音信号进行预处理。
进一步地，所述步骤(2)包括：
计算该声音信号的过零信息；
对各段声音信号的过零信息进行统计，得到过零统计信息；
计算各过零统计信息的均值。
进一步地，所述步骤(2)包括：
计算该声音信号的过零信息；
对各段声音信号的过零信息进行统计，得到过零统计信息；
计算各过零统计信息的均方差。
进一步地，所述步骤(3)包括：
判断采集到的特征是否超过预设阈值，如果超过，则使所述各个屏幕的显示同步化。
进一步地，使所述各个屏幕的显示同步化包括：
根据各个屏幕自身的过零统计信息与计算得到的均值的差，对各个屏幕进行信号延迟。
进一步地，所述对各个屏幕进行信号延迟是通过插入延迟视频帧实现的。
进一步地，所述预处理包括对声音信号的放大和滤波，以得到频率基本在10Hz和10Hz以下的低噪声音信号。
本发明的有益效果是：改善了视频播放时的用户体验，从信号播放源(例如，电视台)智能化地消除了视频信号不同步问题，并降低了播放终端对视频硬件编解码的依赖性，降低了播放现场的硬件成本。利用本发明的技术方案，视频播放现场只需要设置复用器、视频输入帧采集装置以及处理器，而不需要同步器等成本较高的器件。
附图说明
图1示出了根据本发明的基于节目声音特征的多屏同步方法的流程框图。
具体实施方式
如图1所示的实施例中，多个待同步的屏幕所显示的视频格式采用H264、AVI、RMVB等格式中的至少两种。基于节目声音特征的多屏同步方法包括如下步骤：
在视频信号提供源(例如，电视台或视频转播/直播现场的视频信号采集方或其他的视频信号提供方)加入频率为10Hz或10Hz以下的音频信号，优选地为加入频率为5Hz的音频信号。
在待同步的多个屏幕处，接收各屏幕各自的时长在1分钟的电视节目信号；
利用复用器将所述各段1分钟的节目信号分解为声音信号和图像信号；
对声音信号的放大和滤波，以得到频率基本在10Hz和10Hz以下的低噪声音信号。
计算该声音信号的过零点区间的正的极小值的个数。
统计各段声音信号的各个过零点区间的正的极小值的个数之和。
对所有屏幕计算正的极小值的个数之和的均值。
在本发明的另一实施例中，还可以计算各过零统计信息的均方差而不是上述均值。
判断采集到的各过零点区间的正的极小值是否超过预设阈值，如果超过，则使所述各个屏幕的显示同步化。根据本发明的一个实施例，此步骤中，根据各个屏幕自身的过零统计信息与计算得到的均值的差，通过延迟各帧中输入视频信号的输入帧生成延迟帧，通过向高于均值的屏幕的信号插入延迟视频帧，对各个屏幕进行信号延迟。该延迟帧的产生是将从输入端输入的视频信号帧延迟一个帧的产生延迟帧。
上对本发明实施例所提供的一种多终端同步显示方法进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的系统及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种基于节目声音特征的多屏同步方法，其特征在于，包括：
(1)获取多个屏幕的各自的一段节目声音信号，所述节目声音信号包括频率基本在10Hz以下的声音；
(2)采集所述的各段节目声音信号的特征；
(3)根据采集到的特征使所述各个屏幕的显示同步化。
2.根据权利要求1的基于节目声音特征的多屏同步方法，其特征在于，所述步骤(1)包括：
接收各屏幕各自的一段节目信号；
分解所述各段节目信号中的声音信号和图像信号；
对所述各段声音信号进行预处理。
3.根据权利要求1的基于节目声音特征的多屏同步方法，其特征在于，所述步骤(2)包括：
计算该声音信号的过零信息；
对各段声音信号的过零信息进行统计，得到过零统计信息；
计算各过零统计信息的均值。
4.根据权利要求1的基于节目声音特征的多屏同步方法，其特征在于，所述步骤(2)包括：
计算该声音信号的过零信息；
对各段声音信号的过零信息进行统计，得到过零统计信息；
计算各过零统计信息的均方差。
5.根据权利要求3的基于节目声音特征的多屏同步方法，其特征在于，所述步骤(3)包括：
判断采集到的特征是否超过预设阈值，如果超过，则使所述各个屏幕的显示同步化。
6.根据权利要求5的基于节目声音特征的多屏同步方法，其特征在于，使所述各个屏幕的显示同步化包括：
根据各个屏幕自身的过零统计信息与计算得到的均值的差，对各个屏幕进行信号延迟。
7.根据权利要求6的基于节目声音特征的多屏同步方法，其特征在于，所述对各个屏幕进行信号延迟是通过插入延迟视频帧实现的。
8.根据权利要求2的基于节目声音特征的多屏同步方法，其特征在于，所述预处理包括对声音信号的放大和滤波，以得到频率基本在10Hz和10Hz以下的低噪声音信号。
CN201510213712.6A 2015-04-29 2015-04-29 一种基于节目声音特征的多屏同步方法 Active CN104796578B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510213712.6A CN104796578B (zh) 2015-04-29 2015-04-29 一种基于节目声音特征的多屏同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510213712.6A CN104796578B (zh) 2015-04-29 2015-04-29 一种基于节目声音特征的多屏同步方法

Publications (2)

Publication Number Publication Date
CN104796578A true CN104796578A (zh) 2015-07-22
CN104796578B CN104796578B (zh) 2018-03-13

Family

ID=53561076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510213712.6A Active CN104796578B (zh) 2015-04-29 2015-04-29 一种基于节目声音特征的多屏同步方法

Country Status (1)

Country Link
CN (1) CN104796578B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898502A (zh) * 2016-04-11 2016-08-24 深圳Tcl新技术有限公司 音视频同步播放的方法及装置
CN113766215A (zh) * 2021-09-07 2021-12-07 中电科航空电子有限公司 一种机载客舱旅客广播同步测试方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020107803A1 (en) * 1998-08-13 2002-08-08 International Business Machines Corporation Method and system of preventing unauthorized rerecording of multimedia content
CN101820310A (zh) * 2010-02-08 2010-09-01 北京邮电大学 基于端点检测的无线音频传感器网络音频媒体的同步方法
CN102056026A (zh) * 2009-11-06 2011-05-11 中国移动通信集团设计院有限公司 音视频同步检测方法及其系统、语音检测方法及其系统
CN103297674A (zh) * 2012-02-27 2013-09-11 索尼公司 信号处理装置、系统和方法，程序，电子器件

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020107803A1 (en) * 1998-08-13 2002-08-08 International Business Machines Corporation Method and system of preventing unauthorized rerecording of multimedia content
CN102056026A (zh) * 2009-11-06 2011-05-11 中国移动通信集团设计院有限公司 音视频同步检测方法及其系统、语音检测方法及其系统
CN101820310A (zh) * 2010-02-08 2010-09-01 北京邮电大学 基于端点检测的无线音频传感器网络音频媒体的同步方法
CN103297674A (zh) * 2012-02-27 2013-09-11 索尼公司 信号处理装置、系统和方法，程序，电子器件

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898502A (zh) * 2016-04-11 2016-08-24 深圳Tcl新技术有限公司 音视频同步播放的方法及装置
WO2017177524A1 (zh) * 2016-04-11 2017-10-19 深圳Tcl新技术有限公司 音视频同步播放的方法及装置
CN105898502B (zh) * 2016-04-11 2019-09-20 深圳Tcl新技术有限公司 音视频同步播放的方法及装置
CN113766215A (zh) * 2021-09-07 2021-12-07 中电科航空电子有限公司 一种机载客舱旅客广播同步测试方法及系统
CN113766215B (zh) * 2021-09-07 2024-06-25 中电科航空电子有限公司 一种机载客舱旅客广播同步测试方法及系统

Also Published As

Publication number Publication date
CN104796578B (zh) 2018-03-13

Similar Documents

Publication Publication Date Title
US11627351B2 (en) Synchronizing playback of segmented video content across multiple video playback devices
CN108076349B (zh) 网络互动直播方法、系统及电子设备
KR101841313B1 (ko) 멀티미디어 흐름 처리 방법 및 대응하는 장치
WO2014155377A1 (en) Method and system for automatically adding subtitles to streaming media content
CN105376628A (zh) 音视频信号同步方法和装置
US10015530B2 (en) Extracting data from advertisement files for ad insertion
CN106063283B (zh) 用于同步两个电子设备处的回放的方法和装置
CN103763578A (zh) 一种节目关联信息推送方法和装置
CN115499678B (zh) 视频直播方法、装置及直播服务器
US10924779B2 (en) Location agnostic media control room and broadcasting facility
CN104796578B (zh) 一种基于节目声音特征的多屏同步方法
CN111669605A (zh) 多媒体数据与其关联互动数据的同步方法和装置
CN111835988B (zh) 字幕的生成方法、服务器、终端设备及系统
CN113892274A (zh) 同步控制装置、同步控制方法以及同步控制程序
CN115706762B (zh) 一种移动直播实时语音识别生成字幕的方法及装置
JP2010081141A (ja) 字幕放送システム及び字幕放送方法
CN114885198A (zh) 面向混合网络的伴音与视频协同呈现系统
CA2824708C (en) Video content generation
CN105323533A (zh) 视频会议方法及系统
Aiersilan et al. A 3D Framework for Improving Low-Latency Multi-Channel Live Streaming
KR101403969B1 (ko) 타임코드를 상실한 동영상의 자막 재생 시점 인식 방법
CN104320717A (zh) 一种转换节目源的方法及终端电视机
CN102801970A (zh) 基于像素重组的大屏幕系统ip视频流采集系统及方法
HK40061197A (zh) 同步控制装置、同步控制方法以及同步控制程序
CN111405306A (zh) 一种基于播放后捕获再二次编码的pis流媒体服务方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200326

Address after: 571924 3001, floor 2, building A17, Hainan Ecological Software Park, hi tech industry demonstration zone, old town, Chengmai County, Haikou City, Hainan Province

Patentee after: Hainan anmaiyun Technology Co.,Ltd.

Address before: China high tech Zone of Chengdu City, Sichuan province 610041 Road 99, 7 Building 3 layer 312-315

Patentee before: CHENGDU BAIYUN SCIENCE & TECHNOLOGY Co.,Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 571900 Room 217, Building 8831, Walker Park, Hainan Ecological Software Park, High tech Industrial Demonstration Zone, Laocheng Town, Chengmai County, Hainan Province

Patentee after: Hainan Suanyi Technology Co.,Ltd.

Country or region after: China

Address before: 571924 3001, 2nd floor, building A17, Hainan Ecological Software Park, hi tech Industrial Demonstration Zone, Laocheng Town, Chengmai County, Haikou City, Hainan Province

Patentee before: Hainan anmaiyun Technology Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20250414

Address after: No. 1701, 17th Floor, Building 10, No. 219 Tianhua 2nd Road, Chengdu High tech Zone, China (Sichuan) Pilot Free Trade Zone, Chengdu City, Sichuan Province 610000

Patentee after: CHENGDU BAIYUN SCIENCE & TECHNOLOGY Co.,Ltd.

Country or region after: China

Address before: 571900 Room 217, Building 8831, Walker Park, Hainan Ecological Software Park, High tech Industrial Demonstration Zone, Laocheng Town, Chengmai County, Hainan Province

Patentee before: Hainan Suanyi Technology Co.,Ltd.

Country or region before: China