CN111954050A - 一种多设备间视频同步的方法及系统 - Google Patents

一种多设备间视频同步的方法及系统 Download PDF

Info

Publication number
CN111954050A
CN111954050A CN201910397321.2A CN201910397321A CN111954050A CN 111954050 A CN111954050 A CN 111954050A CN 201910397321 A CN201910397321 A CN 201910397321A CN 111954050 A CN111954050 A CN 111954050A
Authority
CN
China
Prior art keywords
display
system clock
video frame
master device
local system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910397321.2A
Other languages
English (en)
Other versions
CN111954050B (zh
Inventor
方兴文
张崇松
黄家钗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rockchip Electronics Co Ltd
Original Assignee
Fuzhou Rockchip Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuzhou Rockchip Electronics Co Ltd filed Critical Fuzhou Rockchip Electronics Co Ltd
Priority to CN201910397321.2A priority Critical patent/CN111954050B/zh
Publication of CN111954050A publication Critical patent/CN111954050A/zh
Application granted granted Critical
Publication of CN111954050B publication Critical patent/CN111954050B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种多设备间视频同步的方法和系统,主设备向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;局域网内的各个设备根据主设备的本地系统时钟确定各自解码后的视频帧的显示时间戳和显示中断产生时的显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;不需要额外的同步控制设备来控制各个设备的视频同步,实现去中心化的多设备间同步,设备数量的设置灵活性高,同时局域网内的每台设备都是根据主设备的本地系统时钟进行同步,从设备的同步与本地时钟无关,保证了同步时钟源的一致性,提高了多设备间的视频同步的精度,提升了多设备同步播放的效果。

Description

一种多设备间视频同步的方法及系统
技术领域
本发明涉及视频同步领域,尤其涉及一种多设备间视频同步的方法及系统。
背景技术
日常生活中,通过多设备来播放视频的场景随处可见,比如:广告机、电视墙、超市货架产品展示屏等。在通过多设备播放视频的过程中,一个关键的步骤就是实现多设备间播放的视频的同步性。
现有技术中为了实现多设备间播放的视频的同步性,通常有两种方式,一种是通过一个专用的同步控制设备控制各个设备间视频播放的同步性,另一种方式是设置一个服务器,由各个设备分别与所述服务器同步,从而实现各个设备之间的同步。但是,第一种方式需要专用的同步控制设备,成本高,并且同步控制设备能够连接的设备数量有限;第二种方式由于是各个设备分别与服务器同步,各个设备间的同步误差较大。
发明内容
本发明所要解决的技术问题是:提供一种多设备间视频同步的方法及系统,低成本且精度高地实现各设备间的视频同步。
为了解决上述技术问题,本发明采用的一种技术方案为:
一种多设备间视频同步的方法,包括步骤:
S1、主设备向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
S2、所述主设备和从设备分别根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,所述主设备和从设备分别根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示。
进一步的,所述步骤S2中所述根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳包括:
解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟;
所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值。
进一步的,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3。
进一步的,所述步骤S1包括:
主设备定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
所述从设备每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
所述步骤S2包括:
所述主设备和从设备分别根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳。
进一步的,所述步骤S3之后还包括步骤:
S4、所述局域网中的各个设备的音频输出根据各个设备当前显示的视频帧的时钟进行同步。
为了解决上述技术问题,本发明采用的另一种技术方案为:
一种多设备间视频同步的系统,包括主设备和从设备,所述主设备和从设备处于同一个局域网,所述主设备包括第一存储器、第一处理器以及存储在所述第一存储器上并可在所述第一处理器上运行的第一计算机程序,所述从设备包括第二存储器、第二处理器以及存储在所述第二存储器上并可在所述第二处理器上运行的第二计算机程序;
所述第一处理器执行所述第一计算机程序时实现以下步骤:
S1、向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;
所述第二处理器执行所述第二计算机程序时实现以下步骤:
S1、接收与其处于同一局域网的主设备广播的所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示。
进一步的,所述根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳包括:包括:
解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟;
所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值。
进一步的,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3。
进一步的,所述第一处理器执行所述第一计算机程序时实现以下步骤:
定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
所述第二处理器执行所述第二计算机程序时实现以下步骤:
每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳。
进一步的,所述步骤S3之后所述第一处理器执行所述第一计算机程序时实现以下步骤:
音频输出根据所述主设备当前显示的视频帧的时钟进行同步;
所述步骤S3之后所述第二处理器执行所述第二计算机程序时实现以下步骤:
音频输出根据所述从设备当前显示的视频帧的时钟进行同步。
本发明的有益效果在于:将多个设备连接至同一个局域网,并设置其中一个设备为主设备,其余设备为从设备,通过主设备向同一局域网下的所有从设备发送主设备的本地系统时钟,局域网内的各个设备根据主设备的本地系统时钟确定各自解码后的视频帧的显示时间戳和显示中断产生时的显示事件时间戳,并根据视频帧的显示时间戳和显示事件时间戳确定视频帧的显示;不需要额外的同步控制设备来控制各个设备的视频同步,实现去中心化的多设备间同步,成本低,并且连接设备数量可以扩充到局域网能支持的设备数量,设备数量的设置灵活性高,同时局域网内的每台设备都是根据主设备的本地系统时钟进行同步,从设备的同步与本地时钟无关,保证了同步时钟源的一致性,提高了多设备间的视频同步的精度,提升了多设备同步播放的效果。
附图说明
图1为本发明实施例的一种多设备间视频同步的方法的步骤流程图;
图2为本发明实施例的一种多设备间视频同步的系统的结构示意图;
图3为本发明实施例的多设备间的连接示意图;
图4为本发明实施例的计算视频帧显示时间戳的步骤流程图;
图5为本发明实施例的显示视频帧的步骤流程图;
标号说明:
1、主设备;2、第一存储器;3、第一处理器;4、从设备;5、第二存储器;6、第二处理器;7、一种多设备间视频同步的系统。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果,以下结合实施方式并配合附图予以说明。
本发明的多设备间视频同步的方法及系统可以用于任何需要同步多设备间的视频的应用场景,比如广告机、电视墙、超市货架产品展示屏等,下面结合具体的应用场景来说明。
请参照图1,一种多设备间视频同步的方法,可以将多个设备通过有线网络或无线网络的方式连接至同一个局域网,比如多个设备可以都连接到同一个AP,并将各设备连接到对应的显示屏上,其中,所述设备的连接数量为局域网内能够支撑的设备数量,多个设备连接到同一个局域网后,可以设置其中一个设备为主设备,其余设备为从设备,其连接示意图如图3所示;
在实现各设备之间的视频同步时,具体包括步骤:
S1、启动局域网内的设备广播消息监听服务,主设备向与其处于同一局域网的从设备广播所述主设备的本地系统时钟,这样与主设备同处于一个局域网的其他从设备就能够监听到主设备发送的本地系统时钟;
S2、在主设备发送其本地系统时钟,并被各个从设备监听到后,所述主设备和从设备分别根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
在一个可选的实施例中,解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟,是一个固定延迟常量;
在确定出每一帧视频帧对应的显示时间戳后,各设备将带有显示时间戳的视频帧放入各自的显示队列等待显示,其具体流程图如图4所示;
其中,当局域网内的各个设备接收到播放请求时,主设备开始广播其本地系统时钟;
S3、当显示中断产生时,所述主设备和从设备分别根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;
其中,可以通过调节各设备的时钟频率达到显示中断同步;
在另一个可选的实施例中,所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值,进行同步时,主设备会发送其本地系统时钟给各个从设备,此时各个设备通过公式Δt=Tlocal2’-Thost1计算所述差值,如果是主设备,则所述Δt=0,Tlocal2’表示各个设备与主设备同步时对应的本地系统时钟;
在另一个可选的实施例中,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3,继续等待下一个显示中断事件,其具体流程图如图5所示;
S4、所述局域网中的各个设备的音频输出根据各个设备当前显示的视频帧的显示时间戳进行同步,其中,为了保证声音的流畅性,可以根据情况对音频数据进行重采样;
具体的,当音频时间戳小于视频帧的显示时间戳时,可以调整音频采样率,加速音频播放,反之,当音频时间戳大于视频帧的显示时间戳时,可以减速音频播放,从而实现与视频帧的同步,使得音频不会出现断音现象或卡顿现象。
在另一个可选的实施例中,所述步骤S1包括:
主设备定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
所述从设备每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
所述步骤S2包括:
所述主设备和从设备分别根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
其中,各设备会记录主设备首次发送的主设备的本地系统时钟;
通过定时广播主设备的本地系统时间,使得各从设备每接收到一个新的主设备的本地系统时钟,能够再次调整从设备时钟与主设备时钟的差值以实现与主设备之间的同步,通过定时更新保证计算出的从设备时钟和主设备时钟差值的准确性。
请参照图2,一种多设备间视频同步的系统7,包括主设备1和从设备4,所述主设备1和从设备4处于同一个局域网,所述主设备1包括第一存储器2、第一处理器3以及存储在所述第一存储器2上并可在所述第一处理器3上运行的第一计算机程序,所述从设备4包括第二存储器5、第二处理器6以及存储在所述第二存储器5上并可在所述第二处理器6上运行的第二计算机程序;
所述第一处理器2执行所述第一计算机程序时实现以下步骤:
S1、向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;
S4、音频输出根据当前显示的视频帧的时钟进行同步;
所述第二处理器5执行所述第二计算机程序时实现以下步骤:
S1、接收与其处于同一局域网的主设备广播的所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;
其中,显示中断可以由一个中断控制器统一发送给局域网内的各个设备;
S4、音频输出根据当前显示的视频帧的显示时间戳进行同步;
其中,在主设备进行广播时,局域网内的各设备启动广播消息监听服务,这样与主设备同处于一个局域网的其他从设备就能够监听到主设备发送的本地系统时钟;
在一个可选的实施例中,解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟,是一个固定延迟常量;
在确定出每一帧视频帧对应的显示时间戳后,各设备将带有显示时间戳的视频帧放入各自的显示队列等待显示,其具体流程图如图4所示;其中,当局域网内的各个设备接收到播放请求时,主设备开始广播其本地系统时钟;
在另一个可选的实施例中,所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值,进行同步时,主设备会发送其本地系统时钟给各个从设备,此时各个设备通过公式Δt=Tlocal2’-Thost1计算所述差值,如果是主设备,则所述Δt=0,Tlocal2’表示各个设备与主设备同步时对应的本地系统时钟;
在另一个可选的实施例中,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3,继续等待下一个显示中断事件,其具体流程图如图5所示;
在另一个可选的实施例中,所述第一处理器2执行所述第一计算机程序时实现以下步骤:
定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
所述第二处理器5执行所述第二计算机程序时实现以下步骤:
每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
其中,各设备会记录主设备首次发送的主设备的本地系统时钟;
通过定时广播主设备的本地系统时间,使得各从设备每接收到一个新的主设备的本地系统时钟,能够再次调整从设备时钟与主设备时钟的差值,通过定时更新保证计算出的从设备时钟和主设备时钟差值的准确性。
综上所述,本发明提供的一种多设备间视频同步的方法及系统,将多个设备连接至同一个局域网,并设置其中一个设备为主设备,其余设备为从设备,通过主设备定时向同一局域网下的所有从设备发送主设备的本地系统时钟,局域网内的各个设备根据主设备的本地系统时钟确定各自解码后的视频帧的显示时间戳和显示中断产生时的显示事件时间戳,在确定显示事件时间戳时根据定时发送的主设备的本地系统时钟进行定时更新各设备本地时钟与主设备时钟之间的偏差,避免误差的累计,并根据视频帧的显示时间戳和显示事件时间戳确定视频帧的显示;基于主设备的本地系统时钟来确定视频帧的显示时间戳,并进行不同设备间时钟偏差的校正以确定统一的显示事件时间戳,不需要额外的同步控制设备来控制各个设备的视频同步,实现去中心化的多设备间同步,成本低,并且连接设备数量可以扩充到局域网能支持的设备数量,设备数量的设置灵活性高,同时局域网内的每台设备都是根据主设备的本地系统时钟进行同步,从设备的同步与本地时钟无关,不会造成误差的累计,保证了同步时钟源的一致性,提高了多设备间的视频同步的精度,提升了多设备同步播放的效果。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等同变换,或直接或间接运用在相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种多设备间视频同步的方法,其特征在于,包括步骤:
S1、主设备向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
S2、所述主设备和从设备分别根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,所述主设备和从设备分别根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示。
2.根据权利要求1所述的一种多设备间视频同步的方法,其特征在于,所述步骤S2中所述根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳包括:
解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟;
所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值。
3.根据权利要求1或2所述的一种多设备间视频同步的方法,其特征在于,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3。
4.根据权利要求2所述的一种多设备间视频同步的方法,其特征在于,所述步骤S1包括:
主设备定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
所述从设备每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
所述步骤S2包括:
所述主设备和从设备分别根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳。
5.根据权利要求1或2或4所述的一种多设备间视频同步的方法,其特征在于,所述步骤S3之后还包括步骤:
S4、所述局域网中的各个设备的音频输出根据各个设备当前显示的视频帧的显示时间戳进行同步。
6.一种多设备间视频同步的系统,其特征在于,包括主设备和从设备,所述主设备和从设备处于同一个局域网,所述主设备包括第一存储器、第一处理器以及存储在所述第一存储器上并可在所述第一处理器上运行的第一计算机程序,所述从设备包括第二存储器、第二处理器以及存储在所述第二存储器上并可在所述第二处理器上运行的第二计算机程序;
所述第一处理器执行所述第一计算机程序时实现以下步骤:
S1、向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示;
所述第二处理器执行所述第二计算机程序时实现以下步骤:
S1、接收与其处于同一局域网的主设备广播的所述主设备的本地系统时钟;
S2、根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
S3、当显示中断产生时,根据所述主设备的本地系统时钟确定显示事件时间戳,并根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示。
7.根据权利要求6所述的一种多设备间视频同步的系统,其特征在于,所述根据所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳包括:包括:
解码后的每一帧视频帧对应的显示时间戳Tnd=Tn-T1+Thost1+Tdelay,T1表示第一帧视频帧码流自带的显示时间戳,Tn表示第n帧视频帧码流自带的显示时间戳,Thost1表示所述主设备的本地系统时钟,Tdelay表示根据不同视频分辨率确定的对应的首帧起播延迟;
所述根据所述主设备的本地系统时钟确定显示事件时间戳包括:
显示事件时间戳Tsync=Tlocal2–Δt,Tlocal2表示显示中断产生时各个设备对应的本地系统时钟,Δt表示各个设备分别与主设备同步时计算出的各个设备对应的本地系统时钟与主设备的本地系统时钟的差值。
8.根据权利要求6或7所述的一种多设备间视频同步的系统,其特征在于,所述根据所述显示事件时间戳和视频帧对应的显示时间戳确定对应的视频帧的显示包括:
判断所述显示事件时间戳是否大于或者等于所述局域网中的各个设备显示队列中的首帧视频帧对应的显示时间戳,若是,则所述各个设备显示所述首帧视频帧,否则,返回执行步骤S3。
9.根据权利要求7所述的一种多设备间视频同步的系统,其特征在于,所述第一处理器执行所述第一计算机程序时实现以下步骤:
定时向与其处于同一局域网的从设备广播所述主设备的本地系统时钟;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳;
所述第二处理器执行所述第二计算机程序时实现以下步骤:
每接收到主设备发送的所述主设备的本地系统时钟,根据最新接收的所述主设备的本地系统时钟对所述Δt进行更新;
根据所述主设备第一次发送的所述主设备的本地系统时钟确定解码后的每一帧视频帧对应的显示时间戳。
10.根据权利要求6或7或9所述的一种多设备间视频同步的系统,其特征在于,所述步骤S3之后所述第一处理器执行所述第一计算机程序时实现以下步骤:
音频输出根据所述主设备当前显示的视频帧的时钟进行同步;
所述步骤S3之后所述第二处理器执行所述第二计算机程序时实现以下步骤:
音频输出根据所述从设备当前显示的视频帧的显示时间戳进行同步。
CN201910397321.2A 2019-05-14 2019-05-14 一种多设备间视频同步的方法及系统 Active CN111954050B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910397321.2A CN111954050B (zh) 2019-05-14 2019-05-14 一种多设备间视频同步的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910397321.2A CN111954050B (zh) 2019-05-14 2019-05-14 一种多设备间视频同步的方法及系统

Publications (2)

Publication Number Publication Date
CN111954050A true CN111954050A (zh) 2020-11-17
CN111954050B CN111954050B (zh) 2022-08-30

Family

ID=73336421

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910397321.2A Active CN111954050B (zh) 2019-05-14 2019-05-14 一种多设备间视频同步的方法及系统

Country Status (1)

Country Link
CN (1) CN111954050B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113365127A (zh) * 2021-06-02 2021-09-07 众立智能科技(深圳)有限公司 局域网多屏显示同步方法及装置
CN113438385A (zh) * 2021-06-03 2021-09-24 深圳市昊一源科技有限公司 一种视频同步方法及无线图像传输系统
CN113453053A (zh) * 2021-06-25 2021-09-28 杭州海康威视数字技术股份有限公司 分布式视频同步显示系统及视频同步显示方法、存储介质
CN114630169A (zh) * 2020-12-10 2022-06-14 上海三思电子工程有限公司 同步显示方法、装置、系统、终端及存储介质
CN115225943A (zh) * 2022-07-14 2022-10-21 深圳创维-Rgb电子有限公司 视频同步方法、装置、设备及计算机可读存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030128294A1 (en) * 2002-01-04 2003-07-10 James Lundblad Method and apparatus for synchronizing audio and video data
CN102227142A (zh) * 2011-06-10 2011-10-26 复旦大学 一种基于视频数据块分发的同步播放方法
EP1654614B1 (en) * 2003-07-28 2013-08-07 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
CN103634312A (zh) * 2013-11-26 2014-03-12 广州晶锐信息技术有限公司 一种基于音频共享实现多音频快速同步的设备管理方法
CN105429724A (zh) * 2015-10-20 2016-03-23 北京小鸟听听科技有限公司 时钟校正方法、时钟校正装置及音箱
CN106131947A (zh) * 2016-09-14 2016-11-16 潘进 一种无线网络设备间时钟同步的方法
CN106507217A (zh) * 2016-10-27 2017-03-15 腾讯科技(北京)有限公司 视频流的时间戳的处理方法和装置
CN107079193A (zh) * 2014-10-31 2017-08-18 瑞典爱立信有限公司 视频流同步
CN108462991A (zh) * 2017-02-22 2018-08-28 北京小鸟听听科技有限公司 处理器时钟同步方法、设备及系统
WO2018170852A1 (zh) * 2017-03-23 2018-09-27 华为技术有限公司 多设备间唇音同步方法及设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030128294A1 (en) * 2002-01-04 2003-07-10 James Lundblad Method and apparatus for synchronizing audio and video data
EP1654614B1 (en) * 2003-07-28 2013-08-07 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
CN102227142A (zh) * 2011-06-10 2011-10-26 复旦大学 一种基于视频数据块分发的同步播放方法
CN103634312A (zh) * 2013-11-26 2014-03-12 广州晶锐信息技术有限公司 一种基于音频共享实现多音频快速同步的设备管理方法
CN107079193A (zh) * 2014-10-31 2017-08-18 瑞典爱立信有限公司 视频流同步
CN105429724A (zh) * 2015-10-20 2016-03-23 北京小鸟听听科技有限公司 时钟校正方法、时钟校正装置及音箱
CN106131947A (zh) * 2016-09-14 2016-11-16 潘进 一种无线网络设备间时钟同步的方法
CN106507217A (zh) * 2016-10-27 2017-03-15 腾讯科技(北京)有限公司 视频流的时间戳的处理方法和装置
CN108462991A (zh) * 2017-02-22 2018-08-28 北京小鸟听听科技有限公司 处理器时钟同步方法、设备及系统
WO2018170852A1 (zh) * 2017-03-23 2018-09-27 华为技术有限公司 多设备间唇音同步方法及设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114630169A (zh) * 2020-12-10 2022-06-14 上海三思电子工程有限公司 同步显示方法、装置、系统、终端及存储介质
CN113365127A (zh) * 2021-06-02 2021-09-07 众立智能科技(深圳)有限公司 局域网多屏显示同步方法及装置
CN113365127B (zh) * 2021-06-02 2021-12-24 众立智能科技(深圳)有限公司 局域网多屏显示同步方法及装置
CN113438385A (zh) * 2021-06-03 2021-09-24 深圳市昊一源科技有限公司 一种视频同步方法及无线图像传输系统
CN113453053A (zh) * 2021-06-25 2021-09-28 杭州海康威视数字技术股份有限公司 分布式视频同步显示系统及视频同步显示方法、存储介质
CN115225943A (zh) * 2022-07-14 2022-10-21 深圳创维-Rgb电子有限公司 视频同步方法、装置、设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN111954050B (zh) 2022-08-30

Similar Documents

Publication Publication Date Title
CN111954050B (zh) 一种多设备间视频同步的方法及系统
JP6465946B2 (ja) 分散型ビデオ表示用のシステム、制御装置及び制御方法
US9912845B2 (en) Video information reproduction system and video information reproduction device
US20160357493A1 (en) Synchronization of videos in a display wall
US10734032B2 (en) Method, device, and system of synchronously playing media file
CN113365127B (zh) 局域网多屏显示同步方法及装置
JP5913596B2 (ja) 無線ネットワーク時刻同期のための方法及び装置
CN109218795A (zh) 一种多设备播放进度同步方法、装置及终端设备
KR102566550B1 (ko) 복수의 커넥티드 장치 간 디지털 콘텐츠의 재생 동기화를 맞추는 방법 및 이를 이용한 장치
US9807408B2 (en) Control mechanism for video output
CN103475908A (zh) 一种多屏同步播放的方法和装置
CN101419827B (zh) 在音频视频交叉文件中进行音频与视频数据同步的方法
EP3041244B1 (en) Methods and devices for distributed audio/video synchronization and playback using an a/v orchestrator
CN113179441A (zh) 一种同步播放方法、装置、系统及计算机设备
CN112653532A (zh) 时钟同步的方法、装置和系统
CN113453053B (zh) 分布式视频同步显示系统及视频同步显示方法、存储介质
CN103491317A (zh) 一种三维图形图像多屏同步播放方法、设备及系统
JP2000322039A (ja) 表示装置、制御装置および多画面表示システム
CN106060580A (zh) 图像同步显示方法及装置
US9742966B2 (en) Data processing system
US9635633B2 (en) Multimedia synchronization system and method
CN115694704A (zh) 一种时间同步方法、装置、设备及存储介质
CN111949068B (zh) 一种多设备间时序调整的方法及系统
CN113365128A (zh) 多led显示屏同步播放方法、系统及led显示设备
CN115426515B (zh) 多设备同步校准的方法、设备、系统和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 350000 building 18, 89 software Avenue, Gulou District, Fuzhou City, Fujian Province

Patentee after: Ruixin Microelectronics Co.,Ltd.

Address before: 350000 building 18, 89 software Avenue, Gulou District, Fuzhou City, Fujian Province

Patentee before: FUZHOU ROCKCHIP ELECTRONICS Co.,Ltd.

CP01 Change in the name or title of a patent holder