CN110677710A - 多媒体终端的同步控制方法和终端控制系统 - Google Patents
多媒体终端的同步控制方法和终端控制系统 Download PDFInfo
- Publication number
- CN110677710A CN110677710A CN201910981217.8A CN201910981217A CN110677710A CN 110677710 A CN110677710 A CN 110677710A CN 201910981217 A CN201910981217 A CN 201910981217A CN 110677710 A CN110677710 A CN 110677710A
- Authority
- CN
- China
- Prior art keywords
- terminal
- message
- time
- gateway
- terminals
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提出一种多媒体终端的同步控制方法和终端控制系统,终端控制系统包括第一终端,第一网关,多个第二网关以及与各第二网关对应的多个第二终端,所述同步控制方法包括:获取第一终端向第二终端发送报文时的报文发送时间;测量第一终端与第二终端之间报文往返时间,获取最大往返时间;根据报文发送时间和最大往返时间计算报文发送至多个第二终端的报文到达时间,并获取最大报文到达时间;将最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值;根据同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。可以提高各第二终端执行控制动作的同步性,进而解决多终端显示不同步的问题。
Description
技术领域
本发明涉及终端同步控制技术领域,具体涉及一种多媒体终端的同步控制方法和终端控制系统。
背景技术
在多媒体领域,各种音视频终端随处可见,包括监控解码器、广告机、数字公告牌、各种移动设备等等。很多场合会要求对同一个音视频源产生的数据进行分发到各个终端,然后在终端上进行解码展示。由于各个终端的硬件参数、软件系统、网络环境等不一致,从而导致同一个音视频源产生的媒体数据到各个终端上展示的时间差异较大,比方说两个终端的画面出现了2~3s的时间差,即多终端不同步问题,最终导致用户体验差。随着时间越长,可能需要重启整个系统,才能保证各个终端之间的媒体数据展示时间差在合理的范围内。
发明内容
本发明所要解决的技术问题是提供一种多媒体终端的同步控制方法和终端控制系统,以解决现有技术中多终端不同步问题。
为了实现上述目的,本发明实施例采用如下技术方案:
一种多媒体终端的同步控制方法,应用于终端控制系统,所述终端控制系统包括第一终端,第一网关,多个第二网关以及与各第二网关对应的多个第二终端,所述同步控制方法包括:获取所述第一终端向第二终端发送报文时的报文发送时间;测量所述第一终端与所述第二终端之间报文往返时间,获取最大往返时间;根据所述报文发送时间和最大往返时间计算报文发送至多个第二终端的报文到达时间,并获取最大报文到达时间;将所述最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值;根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
优选的,所述测量所述第一终端与所述第二终端之间报文往返时间的步骤之前还包括:同步多个所述第二终端的终端系统时钟。
优选的,所述根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作的步骤包括:记录每个第二终端接收到报文的时刻,根据第二终端接收到报文的时刻和同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
优选的,所述同步多个所述第二终端的终端系统时钟的步骤包括:所述第一网关将当前的第一系统时钟发送至多个所述第二网关;所述第二网关获取所述第一系统时钟和所述第二网关与所述第一网关之间的传输时间间隔,根据所述第一系统时钟和所述传输时间间隔调整所述第二网关的第二系统时钟;获取第二终端与所述第二网关之间的传输时间间隔,根据所述第二系统时钟和所述传输时间间隔调整所述第二终端的终端系统时钟。
本发明还提供一种终端控制在系统,所述终端控制系统包括第一终端,第一网关,多个第二网关以及与各第二网关对应的多个第二终端,还包括:获取模块,用于获取所述第一终端发送报文的报文发送时间以及所述第一终端与所述第二终端之间报文往返时间,并获取最大往返时间;处理模块,用于根据所述报文发送时间和最大往返时间计算报文发送至多个第二终端的报文到达时间,并获取最大报文到达时间,将所述最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值;控制模块,根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
优选的,所述第一网关用于将当前的第一系统时钟发送至多个所述第二网关;所述第二网关用于获取所述第一系统时钟和所述第二网关与所述第一网关之间的传输时间间隔,根据所述第一系统时钟和所述传输时间间隔调整所述第二网关的第二系统时钟。
相对于现有技术中的方案,本发明的优点:本发明提供的多媒体终端的同步控制方法和终端控制系统,通过报文的最大往返时间计算最大报文到达时间,从而计算每个第二终端的报文到达时间与最大报文到达时间的差值,根据该差值调节各第二终端的同步解码时刻,可以提高各第二终端执行控制动作的同步性,进而解决多终端显示不同步的问题。
附图说明
下面结合附图及实施例对本发明作进一步描述:
图1所示为本发明实施例提供的多媒体终端的同步控制方法的流程示意图。
图2所示为本发明实施例提供的多媒体终端的同步控制方法的另一流程示意图。
图3所示为本发明终端控制系统的结构框图。
图4所示为本发明终端控制系统的另一结构框图。
具体实施方式
以下结合具体实施例对上述方案做进一步说明。应理解,这些实施例是用于说明本发明而不限于限制本发明的范围。实施例中采用的实施条件可以如具体厂家的条件做进一步调整,未注明的实施条件通常为常规实验中的条件。
请参考图1所示,本发明提供一种多媒体终端的同步控制方法,应用于终端控制系统,所述同步控制方法包括:
步骤S10,获取第一终端向第二终端发送报文时的报文发送时间。本发第一终端向各个第二终端发送报文即视频帧数据,标记为同步帧,记录发送同步帧的时刻点为T0。
步骤S20,测量第一终端与第二终端之间报文往返时间,获取最大往返时间。本发明第一终端向第二终端发送报文,使用RTT服务定时测量各个接入的第二终端(第二终端1,第二终端2,第二终端3……终端n)到第一终端的报文往返时间,并记录为RTTn(n=1,2,3……n),通过比较,找出最大往返时间,记录为RTTmax。
步骤S30,根据报文发送时间和最大往返时间计算报文发送至多个第二终端的报文到达时间,并获取最大报文到达时间。本发明根据报文往返时间RTTn,推算出当前报文到达每个第二终端的时刻,称为报文到达时间,记录为TZn(TZn=T0+0.5*RTTn),并计算出最大报文到达时间,本发明中TZmax对应的时刻点就是RTT时间最大的终端的到达时刻。
步骤S40,将最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值。在本发明第二终端接收到的第一终端的报文的时间一般存在较大差异,若直接根据报文到达时间执行报文的控制动作,将导致各第二终端的动作不同步,因此本实施例中,需要计算同步延时值,即最大报文到达时间与每个第二终端的报文到达时间的差值,根据所述同步延时值调整同步解码时间,使得各第二终端能同步执行报文的控制动作。本发明的实施例中,以TZmax时间为同步解码时刻,同步解码时间也就是上述所说的各第二终端执行报文的控制动作对应的动作执行时间。本实施例中,对于每一个第二终端,解码时间与到报文到达时间存在差值,即TZmax–TZn,这个值我们简称为同步延时值,记录为TDn。
步骤S50,根据同步延时值计算多个第二终端的动作执行时间,执行报文的控制动作。本发明一实施例中,记录每个第二终端接收到报文的时刻TRn,根据第二终端接收到报文的时刻和同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。本发明根据第二终端接收到报文的时刻TRn和同步延时值TDn来计算报文的同步解码时刻为TRn+TDn。
本发明通过定期的执行上述步骤,通过报文的最大往返时间计算最大报文到达时间,并根据最大报文的到达时间计算同步延时值,根据该同步延时值调节各第二终端的同步解码时刻,可以提高各第二终端执行控制动作的同步性,进而解决多终端显示不同步的问题。
本发明中,考虑到各第二终端的终端系统时钟存在较大差异,将影响各第二终端系统的控制动作执行的同步性,因此,在本发明的其中一实施例中,请参考图2所示,所述测量所述第一终端与所述第二终端之间报文往返时间的步骤之前还包括同步多个第二终端的终端系统时钟,具体步骤为:
步骤S11,第一网关将当前的第一系统时钟发送至多个第二网关。
步骤S12,第二网关获取第一系统时钟和第二网关与第一网关之间的传输时间间隔,根据第一系统时钟和传输时间间隔调整第二网关的第二系统时钟。
本发明中,获取每个第二网关与第一网关之间的传输时间间隔的方式不受限制,本领域技术人员可根据实际需求进行设置。在本发明的其中一实施例中,获取每个第二网关与第一网关之间的传输时间间隔的步骤包括:第一网关向第二网关发送对时响应报文,该第二网关根据接收的对时响应报文向第一网关发送对时回复报文,根据第一网关发送对时响应报文时的第一系统时钟,第一网关接收到对时回复报文时的第一系统时钟以及第二网关接收对时响应报文和发送对时回复报文之间的延时时间间隔计算得到传输时间间隔。
步骤S13,获取第二终端与第二网关之间的传输时间间隔,根据第二系统时钟和传输时间间隔调整第二终端的终端系统时钟。
请参考图3所示,本发明还提供一种终端控制系统,包括第一终端110,第一网关120,多个第二网关130以及与各第二网关130对应的多个第二终端140。
第二终端140用于接收第一终端110发送的报文,所述第一网关120用于将当前的第一系统时钟发送至多个第二网关130;第二网关130用于获取第一系统时钟和第二网关130与第一网关120之间的传输时间间隔,根据第一系统时钟和所述传输时间间隔调整所述第二网关130的第二系统时钟。
请参考图4所述,本发明还包括获取模块150,处理模块160和控制模块170,其中,获取模块150用于获取所述第一终端110发送报文的报文发送时间以及所述第一终端110与所述第二终端140之间报文往返时间,并获取最大往返时间;处理模块160用于根据所述报文发送时间和最大往返时间计算报文发送至多个第二终端140的报文到达时间,并获取最大报文到达时间,将所述最大报文到达时间与每个第二终端140的报文到达时间的差值作为同步延时值;控制模块170根据所述同步延时值计算多个第二终端140的动作执行时间,执行所述报文的控制动作。
综上所述,本发明提供的一种多媒体终端的同步控制方法和终端控制系统,通过计算每个第二终端的报文到达时间与最大报文达到时间的差值,根据该差值调节各第二终端的同步解码时刻,可以提高各第二终端执行控制动作的同步性,进而解决多终端显示不同步的问题,提升了用户体验。
上述实施例只为说明本发明的技术构思及特点,其目的在于让熟悉此项技术的人是能够了解本发明的内容并据以实施,并不能以此限制本发明的保护范围。凡如本发明精神实质所做的等效变换或修饰,都应涵盖在本发明的保护范围之内。
Claims (6)
1.一种多媒体终端的同步控制方法,应用于终端控制系统,其特征在于,所述终端控制系统包括第一终端,第一网关,多个第二网关以及与多个第二网关对应的多个第二终端,所述同步控制方法包括:
获取所述第一终端向第二终端发送报文时的报文发送时间;
测量所述第一终端与所述第二终端之间报文往返时间,获取最大往返时间;
根据所述报文发送时间和最大往返时间计算报文发送至每个第二终端的报文到达时间,并获取最大报文到达时间;
将所述最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值;
根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
2.根据权利要求1所述的多媒体终端的同步控制方法,其特征在于,所述测量所述第一终端与所述第二终端之间报文往返时间的步骤之前还包括:
同步多个所述第二终端的终端系统时钟。
3.根据权利要求1所述的多媒体终端的同步控制方法,其特征在于,所述根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作的步骤包括:
记录每个第二终端接收到报文的时刻,根据第二终端接收到报文的时刻和同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
4.根据权利要求2所述的多媒体终端的同步控制方法,其特征在于,所述同步多个所述第二终端的终端系统时钟的步骤包括:
所述第一网关将当前的第一系统时钟发送至多个所述第二网关;
所述第二网关获取所述第一系统时钟和所述第二网关与所述第一网关之间的传输时间间隔,根据所述第一系统时钟和所述传输时间间隔调整所述第二网关的第二系统时钟;
获取第二终端与所述第二网关之间的传输时间间隔,根据所述第二系统时钟和所述传输时间间隔调整所述第二终端的终端系统时钟。
5.一种终端控制系统,其特征在于,所述终端控制系统包括第一终端,第一网关,多个第二网关以及与各第二网关对应的多个第二终端,其特征在于,还包括:
获取模块,用于获取所述第一终端发送报文的报文发送时间以及所述第一终端与所述第二终端之间报文往返时间,并获取最大往返时间;
处理模块,用于根据所述报文发送时间和最大往返时间计算报文发送至多个第二终端的报文到达时间,并获取最大报文到达时间,将所述最大报文到达时间与每个第二终端的报文到达时间的差值作为同步延时值;
控制模块,根据所述同步延时值计算多个第二终端的动作执行时间,执行所述报文的控制动作。
6.根据权利要求5所述的终端控制系统,其特征在于,所述第一网关用于将当前的第一系统时钟发送至多个所述第二网关;所述第二网关用于获取所述第一系统时钟和所述第二网关与所述第一网关之间的传输时间间隔,根据所述第一系统时钟和所述传输时间间隔调整所述第二网关的第二系统时钟。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910981217.8A CN110677710A (zh) | 2019-10-16 | 2019-10-16 | 多媒体终端的同步控制方法和终端控制系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910981217.8A CN110677710A (zh) | 2019-10-16 | 2019-10-16 | 多媒体终端的同步控制方法和终端控制系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110677710A true CN110677710A (zh) | 2020-01-10 |
Family
ID=69082652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910981217.8A Pending CN110677710A (zh) | 2019-10-16 | 2019-10-16 | 多媒体终端的同步控制方法和终端控制系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110677710A (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1528405A2 (en) * | 2003-10-31 | 2005-05-04 | Samsung Electronics Co., Ltd. | Method for calculating a time delay introduced by a repeater in mobile communication network |
CN1859745A (zh) * | 2005-12-16 | 2006-11-08 | 华为技术有限公司 | 宽带码分多址网络同频切换中的同步方法 |
CN101014136A (zh) * | 2007-02-05 | 2007-08-08 | 北京大学 | 一种用于多视点视频采集的时间同步方法及系统 |
CN102084679A (zh) * | 2008-07-03 | 2011-06-01 | 株式会社Ntt都科摩 | 无线基站装置、无线通信系统以及延迟校正方法 |
CN102387171A (zh) * | 2010-08-25 | 2012-03-21 | 株式会社Ntt都科摩 | 音乐的多端协同播放方法、多端协同音乐播放系统和用户终端 |
CN104751864A (zh) * | 2015-03-09 | 2015-07-01 | 广东欧珀移动通信有限公司 | 一种多播放设备的控制方法、相关设备及系统 |
CN106445458A (zh) * | 2016-10-08 | 2017-02-22 | 广东欧珀移动通信有限公司 | 播放控制方法、装置及终端 |
WO2017139014A1 (en) * | 2016-02-08 | 2017-08-17 | Intel IP Corporation | Rx-tx time difference report for tdd systems and associated devices |
JP2018098642A (ja) * | 2016-12-13 | 2018-06-21 | 日本電信電話株式会社 | 端末−デバイス間遅延計測/推定装置、方法、およびプログラム |
CN109379620A (zh) * | 2018-11-28 | 2019-02-22 | 广州四三九九信息科技有限公司 | 音视频缓冲方法和装置 |
CN109478940A (zh) * | 2016-07-07 | 2019-03-15 | 思科技术公司 | 确定性的、校准的、同步的网络互联访问 |
US20190253168A1 (en) * | 2012-08-24 | 2019-08-15 | Accedian Networks Inc. | System for establishing and maintaining a clock reference indicating one-way latency in a data network |
-
2019
- 2019-10-16 CN CN201910981217.8A patent/CN110677710A/zh active Pending
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050096066A1 (en) * | 2003-10-31 | 2005-05-05 | Samsung Electronics Co., Ltd. | Method for decision of time delay by repeater in mobile communication network |
EP1528405A2 (en) * | 2003-10-31 | 2005-05-04 | Samsung Electronics Co., Ltd. | Method for calculating a time delay introduced by a repeater in mobile communication network |
CN1859745A (zh) * | 2005-12-16 | 2006-11-08 | 华为技术有限公司 | 宽带码分多址网络同频切换中的同步方法 |
CN101014136A (zh) * | 2007-02-05 | 2007-08-08 | 北京大学 | 一种用于多视点视频采集的时间同步方法及系统 |
CN102084679A (zh) * | 2008-07-03 | 2011-06-01 | 株式会社Ntt都科摩 | 无线基站装置、无线通信系统以及延迟校正方法 |
CN102387171A (zh) * | 2010-08-25 | 2012-03-21 | 株式会社Ntt都科摩 | 音乐的多端协同播放方法、多端协同音乐播放系统和用户终端 |
US20190253168A1 (en) * | 2012-08-24 | 2019-08-15 | Accedian Networks Inc. | System for establishing and maintaining a clock reference indicating one-way latency in a data network |
CN104751864A (zh) * | 2015-03-09 | 2015-07-01 | 广东欧珀移动通信有限公司 | 一种多播放设备的控制方法、相关设备及系统 |
WO2017139014A1 (en) * | 2016-02-08 | 2017-08-17 | Intel IP Corporation | Rx-tx time difference report for tdd systems and associated devices |
CN109478940A (zh) * | 2016-07-07 | 2019-03-15 | 思科技术公司 | 确定性的、校准的、同步的网络互联访问 |
CN106445458A (zh) * | 2016-10-08 | 2017-02-22 | 广东欧珀移动通信有限公司 | 播放控制方法、装置及终端 |
JP2018098642A (ja) * | 2016-12-13 | 2018-06-21 | 日本電信電話株式会社 | 端末−デバイス間遅延計測/推定装置、方法、およびプログラム |
CN109379620A (zh) * | 2018-11-28 | 2019-02-22 | 广州四三九九信息科技有限公司 | 音视频缓冲方法和装置 |
Non-Patent Citations (1)
Title |
---|
史磊: ""视频自适应传输中拥塞控制策略的研究"", 《中国优秀硕士学位论文全文数据库》 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10298344B1 (en) | Systems and methods for indicating when frames egress a PHY module of a network device | |
EP3118855B1 (en) | Audio synchronous playing method, device and system | |
KR101595526B1 (ko) | 콘텐츠 동기 전송 시스템 및 방법 | |
CN109392074B (zh) | 时钟校准方法和装置 | |
CN113179441B (zh) | 一种同步播放方法、装置、系统及计算机设备 | |
CN113286184B (zh) | 一种在不同设备上分别播放音频与视频的唇音同步方法 | |
US10148753B2 (en) | Method, server, and system for synchronizing group member information | |
JP5930685B2 (ja) | 時刻同期装置、無線端末および時刻同期システム | |
US11368634B2 (en) | Audio stream and video stream synchronous switching method and apparatus | |
US20220007321A1 (en) | Network Entities and Methods for a Wireless Network System for Determining Time Information | |
CN112787742B (zh) | 时钟同步的方法及装置、无线耳机、可读存储介质 | |
CN109639534A (zh) | 一种测试网络传输性能的方法、装置及计算机存储介质 | |
US9331803B2 (en) | System and method of synchronization among a control apparatus and a plurality of terminals | |
CN110620939B (zh) | 一种网络状态确定方法、装置、电子设备及存储介质 | |
EP3316593A1 (en) | Method and device for implementing synchronous playing | |
CN101316161B (zh) | 一种分布式视频同步显示方法和系统 | |
US11263112B2 (en) | Method and apparatus for evaluating quality of software running environment of device | |
CN110677710A (zh) | 多媒体终端的同步控制方法和终端控制系统 | |
WO2023088211A1 (zh) | 一种显示画面同步方法、系统及电子设备 | |
CN110830678A (zh) | 一种多通道视频信号同步输出方法、装置、系统及介质 | |
WO2020030062A1 (zh) | 一种通信方法及装置 | |
JP3496218B2 (ja) | 同期信号形成用周期的同期基準発生装置および方法 | |
US20180176872A1 (en) | Metered interface | |
WO2015188481A1 (zh) | 未读消息的处理方法、装置及系统 | |
WO2020171802A1 (en) | Synchronization for 5gs time sensitive communications (tsc) using machine learning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200110 |
|
RJ01 | Rejection of invention patent application after publication |