CN103002273A - 发送装置和方法、接收装置和方法、通信系统以及程序 - Google Patents

发送装置和方法、接收装置和方法、通信系统以及程序 Download PDF

Info

Publication number
CN103002273A
CN103002273A CN2012103275736A CN201210327573A CN103002273A CN 103002273 A CN103002273 A CN 103002273A CN 2012103275736 A CN2012103275736 A CN 2012103275736A CN 201210327573 A CN201210327573 A CN 201210327573A CN 103002273 A CN103002273 A CN 103002273A
Authority
CN
China
Prior art keywords
signal
transmission
packet signal
dispensing device
regularly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012103275736A
Other languages
English (en)
Inventor
高桥宏彰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103002273A publication Critical patent/CN103002273A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Abstract

本发明涉及发送装置和方法、接收装置和方法、通信系统以及程序。提供了一种发送装置，其包括：分组信号生成单元，被配置来生成视频的分组信号；发送单元，被配置来通过异步传输网络发送分组信号；定时生成单元，被配置来根据从参考信号源获得的参考信号来生成视频帧同步信号；以及定时调节单元，被配置来根据帧同步信号来执行调节，使得该分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。

Description

发送装置和方法、接收装置和方法、通信系统以及程序
技术领域
本公开涉及发送装置、接收装置、发送方法、通信系统、接收方法以及程序。
背景技术
作为发送现场直播视频的方案，已知了通过异步分组传输网络(例如以太网)来发送相机视频的系统。例如，JP 2006-325020A公开了一种基于以下前提的技术：在同时通过因特网接收来自网络相机的视频并再现这些视频的情况中，减小抖动(jitter)。
发明内容
当通过分组传输网络(例如以太网)发送从多个相机发送的视频信号时，如果经由称为网络切换机(switch)的切换机通过单根电缆将多个相机的视频信号集体地发送给相机接收器，那么可简化系统配置。
然而，如果多个相机的视频信号同时输入到网络切换机，那么由于相机的时钟是同步的，假定由切换机通过单根电缆来集体发送多个相机的视频信号时，相机的分组信号的定时将被同步。在这种情况下，会出现以下两种情况：首先优先地从切换机输出一个相机的分组的情况，以及首先优先地从切换机输出另一个相机的分组的情况。因此，由于一个相机的分组信号相比于另一个相机的分组信号被延迟，所以假设网络将抖动增大。
建于以上情况，减小将多个相机的视频信号集体地发送给相机接收器的系统内的网络抖动是所希望的。
根据本公开的一个实施例，提供了一种发送装置，包括：分组信号生成单元，被配置来生成视频的分组信号；发送单元，被配置来通过异步传输网络发送分组信号；定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及定时调节单元，被配置来基于帧同步信号来执行调节，以使得分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
根据本公开的另一个实施例，提供了一种接收装置，包括：接收单元，被配置来通过异步传输网络接收视频的分组信号；抖动测量单元，被配置来测量异步传输网络内的分组信号的抖动；定时调节单元，被配置来基于抖动生成控制信号以用于执行调节，以使得发送分组信号的发送装置处的分组信号的发送定时与其它发送装置处的发送定时不同；以及发送单元，被配置来将控制信号发送给发送装置。
根据本公开的又一个实施例，提供了一种通信系统，包括多个发送装置，每个发送装置包括：分组信号生成单元，被配置来生成视频的分组信号；发送单元，被配置来通过异步传输网络发送分组信号；定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及定时调节单元，被配置来基于帧同步信号来执行调节，以使得分组信号的发送定时与其它发送装置处的分组信号的发送定时不同；切换机，被配置来接收从多个发送装置发送的分组信号，并且通过单根电缆发送所接收的分组信号；以及接收装置，包括被配置来接收从切换机发送的分组信号的接收单元。
根据本公开的实施例，能够减小将多个相机的视频信号集体地发送给相机接收器的系统内的网络抖动。
附图说明
图1为示出通过异步分组传输网络(例如以太网)发送相机视频的系统的配置示意图；
图2为示出从相机(1)和相机(2)输入到网络切换机的分组信号、从网络切换机输出的分组信号、以及网络抖动之间的关系的定时图；
图3为示出在多个相机之间提供优先级的示例的定时图；
图4为示出用于实现图3中所示的分组发送定时的相机(1)的配置的方框图；
图5为示出根据第二实施例的相机的配置的方框图；
图6为示出相机接收器的配置的示意图；以及
图7为示出相机接收器内的反馈环路的处理的流程图。
具体实施方式
在下文中，将参考附图详细描述本公开的优选实施例。要注意的是，在该说明书和附图中，用相同的参考数字表示具有大致相同功能和结构的结构元件，并且省略对这些结构元件的重复说明。
要注意的是，将按照以下顺序进行描述。
1.第一实施例
1-1.基础技术
1-2.本实施例的分组传输的示例
1-3.相机的示例性配置
2.第二实施例
2-1.第二实施例概述
2-2.相机的示例性配置
2-3.相机接收器的示例性配置
2-4.相机接收器内反馈环路的处理
2-5.确定优先级的方法
2-6.分组发送定时的分散量
1.第一实施例
1-1.基础技术
首先，将描述本公开的基础技术。图1为示出通过分组传输网络(例如以太网)发送相机视频的通信系统100的配置示意图。通信系统100包括相机(1)200、相机(2)300、网络切换机130、参考信号源140以及相机接收器(相机控制单元)400。通过异步分组传输网络500(例如以太网)连接每个元件。相机(1)200、相机(2)300以及相机接收器400与参考信号源140发送的信号同步地操作。此外，每个相机(1)200和相机(2)300从自参考信号源140发送的参考信号来生成内部时钟(时间信息)。因此，每个相机(1)200和相机(2)300内的时钟例如为有关世界标准化日期和时间(日期、小时、分、秒)的信息。使用NTP(网络时间协议)、GPS(全球定位系统)或RTC(实时时钟)之类的技术，可将该时钟调节到正确的时间。因此，调节相机(1)200和相机(2)300的时钟，从而使这两个相机精确地同步。
每个相机(1)200和相机(2)300捕获视频(例如现场直播)，并且将视频信号、音频信号等等发送给网络切换机130。网络切换机130通过单根电缆将从相机(1)200和相机(2)300发送来的A/V分组和控制分组集体地发送给相机接收器400。相机接收器400对从相机(1)200和相机(2)300发送的信号解码，并且将这些信号发送给(未示出的)后级的视频切换器。视频切换器根据从外面输入的切换信息，在相机(1)200和相机(2)300等等的视频之间适当地进行切换，并且将视频输出到显示设备等。根据这种配置，使用单个相机接收器400，可处理多个相机200和相机300的视频信号。因此，无需提供与每个相机对应的相机接收器。因此，当提供多个相机时，能够明显地简化系统配置。
图2为显示从相机(1)200和相机(2)300输入到网络切换机130的分组信号、从网络切换机130输出的分组信号、以及网络抖动之间的关系的定时图。在图2中，“相机1切换机输入”和“相机2切换机输入”分别表示从相机(1)200和相机(2)300输入到网络切换机130的分组信号。此外，“切换机输出”表示从网络切换机130输出的分组信号。分组信号包括例如在相机(1)200或相机(2)300所在侧获取的视频信号、音频信号的A/V分组以及包括控制信息的控制分组。
相机(1)200和相机(2)300通过参考信号被同步。因此，下面所述的帧同步信号(帧同步)的提前量大约相等。因此，从相机(1)200和相机(2)300输入到网络切换机130的分组信号的帧具有大致相同的分区位置的时间定时。此外，相机(1)200和相机(2)300从自参考信号源140发送的参考信号中生成的时钟也被同步。因此，如图2中所示，从相机(1)200和相机(2)300输出的A/V分组和控制分组的定时被同步。
相机(1)200和相机(2)300的分组几乎同时到达网络切换机130。因此，当通过单根电缆(如图2的“切换机输出”中所示)将这两个相机的A/V分组和控制分组集体地发送给相机接收器400时，网络切换机130首先输出一个相机的分组，然后输出另一个相机的分组。
在这种情况下，如图2中所示，存在以下两种情况：首先从网络切换机130优先输出相机(1)200的分组的情况，以及首先从网络切换机130优先输出相机(2)300的分组的情况。
本文中，如果分组大小为1500字节，那么一个分组的传输时间为大约12μs。如图2中所示，假设相机(1)200和相机(2)300的分组同时到达网络切换机130。在这种情况下，存在以下两种情况：网络切换机130首先优先输出相机(1)200的分组并且在12μs之后输出相机(2)300的分组的情况；相反，网络切换机130首先优先输出相机(2)300的分组并且在12μs之后发送相机(1)200的分组的情况。
当图1中的系统被实际上构成、网络切换机130实际上连接到该系统、并且进行测量时发现，取决于网络切换机130的类型，不仅存在下述情况：在发送一个相机的分组之后，网络切换机130立即发送另一个相机的分组；还存在以下情况：在发送一个相机的分组后间隔12μs后，网络切换机130发送另一个相机的分组。在这种情况下，在这两个相机的分组信号之间产生总共24μs(＝12μs+12μs)的差异。
将这种差异被视为网络抖动，如图2的下部分的特性所示，从而导致A/V质量退化。图2中所示的抖动示出了相机(1)200的抖动。还发现，当相机(1)200的分组相比于相机(2)300的分组被延迟时，抖动会增大，并且随着差异量的增大(12μs→24μs)，抖动会进一步增大。
为了降低抖动的影响，可以通过在接收侧提供充足的缓冲来吸收抖动。然而，如果提供了缓冲，那么会延迟A/V信号和控制信号。
因此，本实施例提出了一种分组传输类型的同步相机系统，该系统可尽可能地减小因网络切换机130内分组的冲突造成的网络抖动。
1-2.本实施例的分组传输的示例
为了减小抖动，在本实施例中，在多个相机的分组发送定时之间提供优先级。图3为示出在多个相机之间提供优先级的示例的定时图。在图3中，使相机(1)200优先，并且将相机(2)300的分组发送定时相对于相机(1)200的分组传输时间延迟12μs。
因此，网络切换机130总是首先接收来自相机(1)200的分组，然后接收来自相机(2)300的分组。因此，网络切换机130总是可按照以下顺序集体地输出分组：相机(1)200→相机(2)300。因此，相机(1)200和相机(2)300的分组传输变得顺畅，从而确实能够降低网络抖动。
虽然图1示出了将同步信号从参考信号源140发送到每个相机200和300以及相机接收器400的配置，但是下述每个实施例基于如下假设：使用视频信号线发送同步信号。
1-3.相机的示例性配置
图4为示出用于执行图3中所示的分组发送定时的相机(1)200的配置的方框图。本文中，将作为示例来描述相机(1)200的配置。然而，对于相机(2)300的配置而言，同样如此。
如图4中所示，相机(1)200包括诸如CCD或CMOS之类的图像传感器210、图像LSI 220、编码器230、缓冲器240、以太网MAC 250、以太网PHY 260、定时调节单元270以及定时生成单元280。图4中所示的每个元件可由电路(硬件)或由CPU(中央处理单元)和使CPU运行的程序(软件)来配置。在这种情况下，程序可存储在储存介质内，例如相机(1)200的存储器，或者可存储在从外面连接的存储介质内。
从图像传感器210捕捉的视频数据由图像LSI 220处理以及由编码器230进行编码，以使得数据具有适合于进行网络传输的格式，并且因此将该数据分组化。
本文中，图像传感器210、图像LSI 220以及编码器230的操作定时由帧同步信号(帧同步)以及自参考信号生成的时钟来确定。该操作定时由定时生成单元280生成。根据传输通道内的延迟以及编码器230内的延迟来提前每个相机200和300内的帧同步信号的定时，并且将该定时设置成比相机接收器400内的帧同步信号更早的定时。因此，相机接收器400可获得与相机接收器400内的帧同步信号同步的解码视频，而不会受到传输通道内的延迟或编码器230内的延迟的影响。在第一实施例中，假设帧同步信号的提前量为固定值。
具体而言，基于从参考信号源140发送的参考信号，在相机(相机(1)200和相机(2)300)内生成同步的时钟。基于时钟生成帧同步信号。此外，如上所述，根据传输通道等内的延迟，来使相机200和300内的帧同步信号的定时提前。因此，定时生成单元280内生成的帧同步信号所确定的操作定时相对于参考时钟被提前了传输通道等内的延迟的量。根据时钟以及帧同步信号来控制每个元件，例如图像传感器210、图像LSI220以及编码器230。
定时调节单元270基于帧同步信号来确定相机(1)200处的分组发送定时。图4示出了由定时调节单元270固定地设置定时的示例。例如，定时调节单元270对缓冲器240执行比帧同步信号的定时晚50μs开始传输帧的初始分组的设置。这个设置值(50μs)也可以由用户通过直接操作相机等的控制台来设置。
提供了缓冲器240来吸收(调节)时间，直到将编码器230输出的分组输入到以太网MAC 250为止。定时调节单元270向缓冲器240通知将帧的初始分组传输给以太网MAC 250的上述定时。即，在上述示例中，从缓冲器240输出帧的初始分组时的定时被设置为比帧同步信号的定时迟50μs。
在以太网MAC 250内经历预定过程之后，分组信号由以太网PHY260进行处理，并且输出到网络。以太网MAC 250将诸如传输目标地址之类的控制信息加入分组内，并且以MAC帧为单位来发送数据。以太网PHY 260根据网络的物理连接/传输方案将数据发送给传输网络500。
如上所述，根据定时调节单元270所通知的定时来设置从缓冲器240到以太网MAC 250的分组传输的定时。因此，通过改变从定时调节单元270到缓冲器240的通知的定时，可以相对于相机(2)300处的分组发送定时来改变相机(1)200处的分组发送定时。
因此，由于相机(2)300的定时调节单元270通知相比于帧同步信号延迟了12μs的分组发送定时，因此可以总是相对于相机(1)200处的分组传输来延迟相机(2)300处的分组发送定时。因此，如图3中所示，能够相对于相机(1)200处的分组发送定时将相机(2)300处的分组发送定时延迟12μs。要注意的是，分组发送定时的位移量不限于12μs，并且可为任何给定的值。
虽然使用以太网的示例被显示为传输方案，但是使用其他的分组传输方案可类似地执行处理。此外，虽然本实施例描述了通过编码来压缩图像的示例，但是即使在使用未压缩的视频信号时，也可同样执行该处理。
虽然上述示例描述了相机(1)200的优先级高于相机(2)300的优先级的情况，但是根据不同的参数，可适当地设置该优先级。
如上所述，根据本实施例，在使用异步分组传输方案(例如以太网)的视频传输系统中，能够最佳地分散从多个同步相机输出的分组的发送定时。因此，由于可确定地抑制网络切换机130内的分组的冲突，所以能够将抖动抑制到最小。
此外，甚至不提供具有分组优先级化控制功能等的昂贵网络切换机时，也可预期到相似的效果。此外，由于这种网络切换机的设置通常复杂并且困难，所以可减轻用户的负担。
由于可将抖动抑制到最小，所以视频缓冲器可被减小该相应量。因此，可减小系统延迟。而且，分散分组意味着将瞬时吞吐量平均化。因此，还能够增大网络系统内可容纳的相机的数量。
2.第二实施例
2-1.第二实施例概述
第一实施例已经描述了用户使用定时调节单元270固定地设置分组信号发送定时的示例。第二实施例示出了一个示例，其中，相机接收器400将分组信号发送定时发送给每个相机200和300，并且基于发送的定时，每个相机200和300设置分组信号发送定时。根据这种配置，能够基于相机接收器400侧上所测得的抖动或网络延迟来动态地设置每个相机200和300处的分组发送定时。
具体而言，每个相机(1)200和相机(2)300从相机接收器400接收指示用于调节帧同步信号的提前量的控制信号PHS以及用于控制分组发送定时的控制信号。根据在网络上进行传输所必须的并且在相机接收器400侧上获取的延迟量来设置表示帧同步信号的提前量的控制信息PHS。由于网络内的延迟量更大，所以通过将帧同步信号的提前量设置为较大，能够防止视频的分组信号到达相机接收器400的定时的延迟，从而补偿网络内的延迟。将表示帧同步信号的提前量的控制信息发送给定时生成单元280，以使得每个相机200和300侧上的帧同步信号的定时得到调节。
根据在相机接收器400侧上所测量的抖动来设置用于控制分组发送定时的控制信息。执行控制，以使得当抖动较大时分组发送定时被位移。将用于控制分组发送定时的控制信息从相机接收器400发送到相机200和300。由定时调节单元270来处理用于控制分组发送定时的控制信息，从而调节从缓冲器240发送的分组信号的定时。
2-2.相机的示例性配置
图5为示出根据第二实施例的每个相机200和300的配置的方框图。基本配置与图4中所示的第一实施例中的基本配置相同。然而，在第二实施例中，用于控制分组发送定时的控制信号和指示帧同步信号的提前量的控制信息两者均被从相机接收器400发送。用于控制分组发送定时的控制信号以及指示帧同步信号的提前量的控制信息通过以太网PHY 260和以太网MAC 250被接收，并且被发送给缓冲器240。要注意的是，图5中所示的每个元件也可由电路(硬件)或由CPU(中央处理单元)和使CPU运行的程序(软件)来配置。在这种情况下，该程序可存储在存储介质内，例如相机(1)200的存储器，或者可存储在从外面连接的存储介质内。
然后，将用于控制分组发送定时的控制信号从缓冲器240发送到定时调节单元270。此外，将指示帧同步信号的提前量的控制信息从缓冲器240发送到定时调节单元270，并且进一步发送到定时生成单元280。
因此，基于指示从相机接收器400侧发送来的发送定时的控制信号，定时调节单元270可动态地调节将从缓冲器240发送到以太网MAC 250的分组信号的定时。此外，基于指示帧同步信号的提前量的控制信息，定时生成单元280可生成具有动态变化的提前量的帧同步信号。
因此，当定时调节单元270控制从缓冲器240到以太网MAC 250的分组的定时时，能够根据在相机接收器400侧上获取的抖动来确定地抑制由于如参考图1所述的在相同的定时处发送分组而引起的抖动的生成。
此外，由于定时生成单元280基于指示帧同步信号的提前量的控制信息来生成帧同步信号，所以能够动态地补偿根据传输通道的状况而变化的延迟量。
因此，根据第二实施例，能够动态地补偿根据传输通道的状况生成的并且在视频帧到达相机接收器400时生成的延迟。此外，通过基于从相机接收器400发送的分组发送定时的控制信息来动态地调节分组发送定时，能够确定地抑制由从网络切换机130发送到相机接收器400的分组信号的冲突造成的抖动。
2-3.相机接收器的示例性配置
在第二实施例中，用于控制分组发送定时的控制信息以及指示帧同步信号的提前量的控制信息被从相机接收器400发送到相机200和300。因此，相机接收器400包括获取这种控制信息的元件。图6为示出相机接收器400的配置的示意图。相机接收器400对从视频切换器130输入的每个相机的视频数据等进行解码。如图6中所示，相机接收器400包括以太网PHY 410、以太网MAC 420、缓冲器430、解码器440、抖动测量单元450、定时调节单元460、定时生成单元470以及延迟时间计算单元480。图6中所示的每个元件可由电路(硬件)或由CPU(中央处理单元)和使CPU运行的程序(软件)来配置。在这种情况下，该程序可存储在存储介质内，例如相机接收器400的存储器，或者可存储在从外面连接的存储介质内。
通过以太网PHY 410和以太网MAC 420将从网络接收到的A/V分组和控制分组输入到缓冲器430以便吸收抖动。抖动测量单元450测量缓冲器430内每个相机200和300的抖动量。每个相机200和300和相机接收器400通过参考信号被同步。因此，抖动测量单元450可基于在相机侧上加入分组中的时间信息(时间戳记)来测量每个相机200和300内的抖动量。定时调节单元460基于每个相机200和300内的抖动量来计算每个相机200和300处的最佳分组发送定时。将每个相机200和300处的最佳分组发送定时的计算结果发送给相机200和300，并且监控反馈的结果。因此，形成了反馈环路。
对于抖动测量单元450所测量的“抖动量”和“每个相机200和300处的最佳分组发送定时”之间的关系，如果该“抖动量”较大，那么相机接收器400执行“改变相机200和300的分组发送定时”的处理。因此，相机接收器400基于抖动测量单元450所测量的“抖动量”来生成用于控制分组发送定时的控制信息，并且经由缓冲器430、以太网MAC 420以及以太网PHY将该控制信息发送给相机200和300。
此外，延迟时间计算单元480计算异步传输网络500内传输延迟的量，并且基于该传输延迟的量，生成用于指示每个相机200和300内的帧同步信号的提前量的控制信号。指示帧同步信号的提前量的控制信号经由缓冲器430、以太网MAC以及以太网PHY 410被发送给异步传输网络500，并被发送给每个相机200和300。
在第二实施例中，也能够提供一种不执行抖动测量或反馈环路的配置，但是在相机接收器400侧上固定地指定相机200和300的分组发送定时。即，用户可固定地指定“相机(2)300处的分组发送定时应总是比相机(1)200处的分组发送定时延迟24μs”。
在本实施例中，已经描述了使用视频信号线来传输同步信号的方案。然而，相似的配置也可用于如下系统中：通过将同步信号线从参考信号源140直接连接到图1中所示的相机200和300来实现同步。
2-4.相机接收器内的反馈环路的处理
接下来，描述相机接收器400内的反馈环路的处理。图7为示出反馈环路的算法的流程图。在图7中，根据每个相机的传输量确定每个相机200和300的优先级。首先，在步骤S10中，判断抖动测量单元450所测量的抖动是否大于预定阈值，如果判定所测得的抖动大于该阈值，那么流程前进到步骤S12。在步骤S12中，比较相机(1)200和相机(2)300的A/V传输量。如果该抖动小于或等于该阈值，那么该处理进入步骤S10中的待机模式。
在下一个步骤S14中，判断相机(1)200的传输量是否大于相机(2)300的传输量。如果判定相机(1)200的传输量大于相机(2)300的传输量，那么该处理前进到步骤S16。在步骤S16中，使具有更大传输量的相机(1)优先于相机(2)300，并且将相机(2)300处的分组发送定时延迟12μs。
在下一个步骤S18中，判断该抖动是否小于预定阈值。如果判定该抖动已变为小于该预定阈值，那么该处理返回到开始。同时，如果判定该抖动未变为小于该预定阈值，那么处理前进到步骤S20。
在步骤S20中，判断相机(2)300的总定时延迟量是否为50μs或以下。如果判定总定时延迟量为50μs或以下，那么处理前进到步骤S22。在步骤S22中，将相机(2)300处的分组发送定时进一步延迟5μs，并且该处理返回到步骤S18。如果在步骤S20中判定总定时延迟量大于50μs，那么该处理返回到开始。
同时，如果在步骤S14中判定相机(1)200的传输量不大于相机(2)300的传输量，那么该处理前进到步骤S24。在步骤S24中，使相机(2)300优先于相机(1)200，并且将相机(1)200处的分组发送定时延迟12μs。
在下一个步骤S26中，判断该抖动是否已变为小于预定阈值。如果判定该抖动已变为小于预定阈值，那么该处理返回到开始。同时，如果判定该抖动未变为小于预定阈值，那么处理前进到步骤S28。
在步骤S28中，判断相机(1)200的总定时延迟量是否为50μs或以下。如果判定总定时延迟量为50μs或以下，那么处理前进到步骤S30。在步骤S30中，将相机(1)200处的分组发送定时进一步延迟5μs，并且该处理返回到步骤S26。如果在步骤S28中判定总定时延迟量大于50μs，那么该处理返回到开始。
2-5.确定优先级的方法
在图7的处理中判断应当优先化相机(1)200和相机(2)300中的哪一个时(步骤S14)，判定传输量更大的相机的优先级更高。然而，优先级的判定不限于此。后文中会描述确定相机200和300的优先级的方法。
例如，可以根据用户提前规定的相机优先级来确定要被优先化的相机。具体而言，可通过用户从每个相机的控制台进行的输入来固定地设置相机的优先级。此外，可将网络抖动更小的相机的优先级设置为高，作为确定相机的优先级的标准。
或者，作为确定相机的优先级的标准，还可以将传输延迟更小的相机的优先级设置为高。
2-6.分组传输时间的分散量
此外，在确定用于分散从多个相机输出的分组的发送定时的分散量时，可使用所测量的网络的抖动值来确定分散量。例如，当所测量的网络的抖动值较小时，可将一个相机处的分组发送定时相对于另一个相机处的分组发送定时的延迟量设为12μs，并且例如，当所测量的网络的抖动值较大时，可将另一个相机处的分组发送定时相对于一个相机处的分组发送定时的延迟量设为24μs。
同样，在确定用于分散从多个相机输出的分组的发送定时的分散量时，也可以使用所测量的网络延迟值。例如，当所测量的网络延迟值较小时，可将一个相机处的分组发送定时相对于另一个相机处的分组传输时间的延迟量设为12μs，并且例如，当所测量的网络延迟值较大时，可将另一个相机处的分组发送定时相对于一个相机处的分组发送定时的延迟量设为24μs。
如上所述，根据第二实施例，可基于从相机接收器400侧发送的控制信号来调节分组发送定时。因此，能够确定地抑制由于同时传输来自多个相机的分组信号所造成的抖动的生成。此外，因为可基于由传输通道或缓冲器引起的延迟量的动态变化来控制帧同步信号的提前量，所以可以确定地抑制分组信号的延迟。
虽然已参考附图详细描述了本公开的优选实施例，但是本公开不限于此。对于本领域的技术人员而言明显的是，可进行各种修改或变更，只要它们在所附权利要求书或其等同物的技术范围内即可。应理解的是，这种修改或变更也在本公开的技术范围内。
应注意的是，可如下这样来配置该技术。
(1)一种发送装置，包括：
分分组信号生成单元，被配置来生成视频的分组信号；
发送单元，被配置来通过异步传输网络发送所述分组信号；
定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及
定时调节单元，被配置来基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(2)根据(1)所述的发送装置，其中，所述定时调节单元基于从接收所述分组信号的接收装置发送来的控制信号来调节所述分组信号的发送定时，所述控制信号指示所述分组信号的发送定时。
(3)根据(1)所述的发送装置，其中，发送定时是基于所述异步传输网络内的抖动而确定的定时。
(4)根据(1)所述的发送装置，其中，所述定时生成单元基于从接收所述分组信号的所述接收装置发送来的帧同步信号的提前量来生成帧同步信号。
(5)根据(4)所述的发送装置，其中，所述提前量为基于所述异步传输网络中的传输延迟量确定的值。
(6)根据(1)所述的发送装置，其中，所述定时调节单元根据预先设置的优先级执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(7)根据(1)所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的抖动而设置的优先级来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(8)根据(1)所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的传输量而设置的优先级来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(9)根据(1)所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的传输延迟而设置的优先级来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(10)一种接收装置，包括：
接收单元，被配置来通过异步传输网络接收视频的分组信号；
抖动测量单元，被配置来测量所述异步传输网络内的所述分组信号的抖动；
定时调节单元，被配置来基于抖动生成控制信号以用于执行调节，以使得发送所述分组信号的发送装置处的所述分组信号的发送定时与其它发送装置处的发送定时不同；以及
发送单元，被配置来将所述控制信号发送给发送装置。
(11)根据(10)所述的接收装置，其中，所述定时调节单元生成所述控制信号，以使得当抖动越大时，所述发送装置处的发送定时的调节量越大。
(12)根据(10)所述的接收装置，还包括延迟时间计算单元，被配置来计算所述异步传输网络内的传输延迟时间，其中，所述接收装置将控制信号发送给所述发送装置以用于根据延迟时间将所述发送装置的帧同步信号提前。
(13)根据(10)所述的接收装置，其中，所述定时调节单元生成控制信号以用于根据预定的优先级来调节多个发送装置的每个发送装置处的分组信号的发送定时。
(14)根据(13)所述的接收装置，其中，所述优先级是根据所述异步传输网络内的抖动、所述异步传输网络内的传输量或者所述异步传输网络内的传输延迟中的一者设置的。
(15)根据(10)所述的接收装置，其中，当发送装置处的分组信号的发送定时的总延迟量大于或等于预定阈值时，所述接收装置不发送控制信号。
(16)一种通信系统，包括：
多个发送装置，每个发送装置包括：分组信号生成单元，被配置来生成视频的分组信号；发送单元，被配置来通过异步传输网络发送所述分组信号；定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及定时调节单元，被配置来基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同；
切换机，被配置来接收从多个发送装置发送的分组信号，并且通过单根电缆发送所接收的分组信号；以及
接收装置，包括被配置来接收从所述切换机发送的分组信号的接收单元。
(17)一种发送方法，包括：
生成视频的分组信号；
通过异步传输网络发送所述分组信号；
基于从参考信号源获取的参考信号来生成视频帧同步信号；以及
基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同。
(18)一种程序，促使计算机用作：
用于生成视频的分组信号的装置；
用于通过异步传输网络发送所述分组信号的装置；
用于基于从参考信号源获取的参考信号来生成视频帧同步信号的装置；以及
用于基于所述帧同步信号执行调节，以使得所述分组信号的发送定时与其它发送装置处的分组信号的发送定时不同的装置。
(19)一种接收方法，包括：
通过异步传输网络接收视频的分组信号；
测量所述异步传输网络内的所述分组信号的抖动；
生成控制信号以用于执行调节，以使得发送了所述分组信号的发送装置处的所述分组信号的发送定时与其它发送装置处的发送定时不同；以及
将所述控制信号发送给发送装置。
(20)一种程序，促使计算机用作：
用于通过异步传输网络接收视频的分组信号的装置；
用于测量所述异步传输网络内的所述分组信号的抖动的装置；
用于生成控制信号以用于执行调节，以使得发送了所述分组信号的发送装置处的所述分组信号的发送定时与其它发送装置处的发送定时不同的装置；以及
用于所述将控制信号发送给发送装置的装置。
本公开所包含的主题与于2011年9月9日提交给日本专利局的日本优先专利申请JP 2011-197258中所公开的主题相关，其全部内容通过引用的方式结合在本文中。

Claims (20)

1.一种发送装置，包括：
分组信号生成单元，被配置来生成视频的分组信号；
发送单元，被配置来通过异步传输网络发送所述分组信号；
定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及
定时调节单元，被配置来基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
2.根据权利要求1所述的发送装置，其中，所述定时调节单元基于从接收所述分组信号的接收装置发送来的控制信号来调节所述分组信号的发送定时，所述控制信号指示所述分组信号的发送定时。
3.根据权利要求1所述的发送装置，其中，发送定时是基于所述异步传输网络内的抖动而确定的定时。
4.根据权利要求1所述的发送装置，其中，所述定时生成单元基于从接收所述分组信号的所述接收装置发送来的帧同步信号的提前量来生成帧同步信号。
5.根据权利要求4所述的发送装置，其中，所述提前量为基于所述异步传输网络中的传输延迟量确定的值。
6.根据权利要求1所述的发送装置，其中，所述定时调节单元根据预先设置的优先级执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
7.根据权利要求1所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的抖动而设置的优先级来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
8.根据权利要求1所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的传输量而设置的优先级来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
9.根据权利要求1所述的发送装置，其中，所述定时调节单元根据基于所述异步传输网络内的传输延迟而设置的优先级来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
10.一种接收装置，包括：
接收单元，被配置来通过异步传输网络接收视频的分组信号；
抖动测量单元，被配置来测量所述异步传输网络内的所述分组信号的抖动；
定时调节单元，被配置来基于抖动生成控制信号以用于执行调节，以使得发送所述分组信号的发送装置处的所述分组信号的发送定时与其他发送装置处的发送定时不同；以及
发送单元，被配置来将所述控制信号发送给发送装置。
11.根据权利要求10所述的接收装置，其中，所述定时调节单元生成所述控制信号，以使得当抖动越大时，所述发送装置处的发送定时的调节量越大。
12.根据权利要求11所述的接收装置，还包括延迟时间计算单元，被配置来计算所述异步传输网络内的传输延迟时间，其中，所述接收装置将控制信号发送给所述发送装置以用于根据延迟时间将所述发送装置的帧同步信号提前。
13.根据权利要求11所述的接收装置，其中，所述定时调节单元生成控制信号以用于根据预定的优先级来调节多个发送装置的每个发送装置处的分组信号的发送定时。
14.根据权利要求13所述的接收装置，其中，所述优先级是根据所述异步传输网络内的抖动、所述异步传输网络内的传输量或者所述异步传输网络内的传输延迟中的一者设置的。
15.根据权利要求11所述的接收装置，其中，当发送装置处的分组信号的发送定时的总延迟量大于或等于预定阈值时，所述接收装置不发送控制信号。
16.一种通信系统，包括：
多个发送装置，每个发送装置包括：分组信号生成单元，被配置来生成视频的分组信号；发送单元，被配置来通过异步传输网络发送所述分组信号；定时生成单元，被配置来基于从参考信号源获得的参考信号来生成视频帧同步信号；以及定时调节单元，被配置来基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同；
切换机，被配置来接收从多个发送装置发送的分组信号，并且通过单根电缆发送所接收的分组信号；以及
接收装置，包括被配置来接收从所述切换机发送的分组信号的接收单元。
17.一种发送方法，包括：
生成视频的分组信号；
通过异步传输网络发送所述分组信号；
基于从参考信号源获取的参考信号来生成视频帧同步信号；以及
基于所述帧同步信号来执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同。
18.一种程序，用于促使计算机用作：
用于生成视频的分组信号的装置；
用于通过异步传输网络发送所述分组信号的装置；
用于基于从参考信号源获取的参考信号来生成视频帧同步信号的装置；以及
用于基于所述帧同步信号执行调节，以使得所述分组信号的发送定时与其他发送装置处的分组信号的发送定时不同的装置。
19.一种接收方法，包括：
通过异步传输网络接收视频的分组信号；
测量所述异步传输网络内的所述分组信号的抖动；
生成控制信号以用于执行调节，以使得发送所述分组信号的发送装置处的所述分组信号的发送定时与其他发送装置处的发送定时不同；以及
将所述控制信号发送给发送装置。
20.一种程序，用于促使计算机用作：
用于通过异步传输网络接收视频的分组信号的装置；
用于测量所述异步传输网络内的所述分组信号的抖动的装置；
用于生成控制信号以用于执行调节，以使得发送所述分组信号的发送装置处的所述分组信号的发送定时与其他发送装置处的发送定时不同的装置；以及
用于所述将控制信号发送给发送装置的装置。
CN2012103275736A 2011-09-09 2012-09-03 发送装置和方法、接收装置和方法、通信系统以及程序 Pending CN103002273A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011197258A JP2013058986A (ja) 2011-09-09 2011-09-09 通信システム、送信装置、受信装置、送信方法、受信方法及びプログラム
JP2011-197258 2011-09-09

Publications (1)

Publication Number Publication Date
CN103002273A true CN103002273A (zh) 2013-03-27

Family

ID=46888902

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012103275736A Pending CN103002273A (zh) 2011-09-09 2012-09-03 发送装置和方法、接收装置和方法、通信系统以及程序

Country Status (5)

Country Link
US (1) US8937973B2 (zh)
EP (1) EP2568653A1 (zh)
JP (1) JP2013058986A (zh)
CN (1) CN103002273A (zh)
RU (1) RU2012137236A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5817664B2 (ja) * 2012-03-19 2015-11-18 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
JP5988249B2 (ja) * 2012-03-26 2016-09-07 パナソニックＩｐマネジメント株式会社 無線通信システム及び方法並びにデータ受信装置、方法及びプログラム
JP6098824B2 (ja) 2013-03-08 2017-03-22 パナソニックＩｐマネジメント株式会社 カメラシステムおよび切替装置
EP3158916A4 (en) * 2014-06-23 2018-03-14 Olympus Corporation Image pickup device and endoscopic device
JP6978852B2 (ja) * 2017-05-10 2021-12-08 キヤノン株式会社 同期信号出力装置、制御方法、及び、プログラム
CN113271476B (zh) * 2021-05-12 2022-07-12 湖南泽天智航电子技术有限公司 一种提升视频数据流帧的同步方法、设备、装置及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1478349A (zh) * 2000-11-29 2004-02-25 ���˹���Ѷ��� 发送及接收实时数据
US20040052209A1 (en) * 2002-09-13 2004-03-18 Luis Ortiz Methods and systems for jitter minimization in streaming media
CN1759541A (zh) * 2003-02-10 2006-04-12 汤姆森特许公司 改变延迟和带宽条件下的无线链路上的视频分组
US7619972B2 (en) * 2003-09-10 2009-11-17 Thales Uk Plc Video system

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2669798B1 (fr) * 1990-11-23 1994-09-16 Lmt Radio Professionelle Dispositif pour la transmission d'informations synchrones par un reseau asynchrone, notamment un reseau atm.
JPH0964874A (ja) * 1995-08-28 1997-03-07 Sony Corp データ伝送方法およびデータ伝送システム
US6493034B1 (en) * 1999-08-23 2002-12-10 Elbex Video Ltd. Method and apparatus for remote adjustment of a time delay circuit of externally synchronized video transmitters
US7023883B1 (en) * 2000-12-27 2006-04-04 Cisco Technology, Inc. Method for providing a network timing reference clock in ethernet-connected VOIP equipment
JP2006325020A (ja) 2005-05-19 2006-11-30 Canon Inc データ処理装置及びデータ処理方法
JP5353277B2 (ja) * 2009-02-06 2013-11-27 日本電気株式会社 ストリーム信号伝送装置及び伝送方法
US8854992B2 (en) * 2009-07-09 2014-10-07 Motorola Mobility Llc Artificial delay inflation and jitter reduction to improve TCP throughputs
GB2476116A (en) * 2009-12-14 2011-06-15 Dublin Inst Of Technology Real-time VoIP transmission quality predictor and quality-driven de jitter buffer
JP5083350B2 (ja) 2010-03-18 2012-11-28 コニカミノルタビジネステクノロジーズ株式会社 画像形成装置及び画像形成装置の制御方法
WO2011118113A1 (ja) * 2010-03-26 2011-09-29 パナソニック株式会社 表示装置及び映像システム
CN104350778A (zh) * 2012-05-31 2015-02-11 交互数字专利控股公司 设备到设备(d2d)链路自适应

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1478349A (zh) * 2000-11-29 2004-02-25 ���˹���Ѷ��� 发送及接收实时数据
US20040052209A1 (en) * 2002-09-13 2004-03-18 Luis Ortiz Methods and systems for jitter minimization in streaming media
CN1759541A (zh) * 2003-02-10 2006-04-12 汤姆森特许公司 改变延迟和带宽条件下的无线链路上的视频分组
US7619972B2 (en) * 2003-09-10 2009-11-17 Thales Uk Plc Video system

Also Published As

Publication number Publication date
RU2012137236A (ru) 2014-03-10
EP2568653A1 (en) 2013-03-13
JP2013058986A (ja) 2013-03-28
US8937973B2 (en) 2015-01-20
US20130063659A1 (en) 2013-03-14

Similar Documents

Publication Publication Date Title
US9723193B2 (en) Transmitting device, receiving system, communication system, transmission method, reception method, and program
CN103002273A (zh) 发送装置和方法、接收装置和方法、通信系统以及程序
CN102474656B (zh) 接收设备和摄像系统
KR101126091B1 (ko) 네트워크 단말기들의 클록 동기화를 위한 방법 및 시스템
CN102932676B (zh) 基于音视频同步的自适应带宽传输和播放方法
US8731036B2 (en) Packet filter-based clock synchronization system, apparatus, and method, and program thereof
CN101175215B (zh) 时序恢复方法及其系统
US20080259966A1 (en) Synchronization of one or more source RTP streams at multiple receiver destinations
CN109565466B (zh) 多设备间唇音同步方法及设备
US9326022B2 (en) Wireless communication system, wireless communication device, and wireless communication method
CN101795190B (zh) 用于调整时钟信号的方法和装置
KR101704324B1 (ko) 중계 장치 및 통신 시스템 및 중계 방법
WO2024060763A1 (zh) 一种无线智能可穿戴装置及其图像采集方法
JP3499818B2 (ja) タイムスタンプのオフセット調整方法及びそれを用いたパケット伝送装置
CN203722758U (zh) 一种用于分布式视频系统的同步装置
JPWO2007060722A1 (ja) 受信装置
GB2492749A (en) Synchronising Wireless Video Data Nodes
US20220360845A1 (en) Reception apparatus, reception method, and transmission and reception system
US20100067531A1 (en) Apparatus and method for controlling independent clock domains to perform synchronous operations in an asynchronous network
CN101141368B (zh) 用于控制流媒体数据回放处理速率的方法和装置
JP2000151570A (ja) Ｉｐ端末装置
JP2010119015A (ja) 画像伝送装置、送信装置、受信装置および画像伝送システム
JP2007274536A (ja) 受信装置及び送受信方法
US20150280864A1 (en) Communication Device, Communication Program, Communication Method, and Information Processing Device
WO2014203449A1 (ja) 通信システム、通信システムの制御方法、送信装置、及び受信装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130327