CN103262536A - 发送装置、发送方法、和程序 - Google Patents

发送装置、发送方法、和程序 Download PDF

Info

Publication number
CN103262536A
CN103262536A CN2012800023905A CN201280002390A CN103262536A CN 103262536 A CN103262536 A CN 103262536A CN 2012800023905 A CN2012800023905 A CN 2012800023905A CN 201280002390 A CN201280002390 A CN 201280002390A CN 103262536 A CN103262536 A CN 103262536A
Authority
CN
China
Prior art keywords
regulated quantity
time
image
write
catching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012800023905A
Other languages
English (en)
Inventor
V.S.拉纳藤加
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103262536A publication Critical patent/CN103262536A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401Monitoring of the client buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及可抑制图像的紊乱等的发送装置、发送方法、和程序,所述紊乱等是当从数据传送通道传送来的图像被以低延迟进行显示时所产生的。RTP通信部分获取调节量,所述调节量用于调节开始捕获图像的捕获定时;捕获调节部分基于所述调节量调节所述捕获定时;捕获部分同步于所述调节的捕获定时捕获所述图像;和所述RTP通信部分将所述捕获的图像发送到接收装置。本技术可应用于例如捕获和发送图像的发送装置。

Description

发送装置、发送方法、和程序
技术领域
本公开涉及发送装置、发送方法、和程序。更具体地,本公开涉及可抑制图像的紊乱等的发送装置、发送方法、和程序,所述紊乱等是当从发送装置经由数据传送通道例如网络传送来的图像被以低延迟进行显示时所产生的。 
背景技术
近年来,远程外科手术已得以实施,例如在远程地点通过操作机器臂对患者实施外科手术。在这种远程外科手术过程中,执行外科手术的医生在观看通过对正在进行的外科手术摄像而获取的动图像的同时操作机器臂;因此期望所述动图像以多帧(或多字段)的低延迟或更小的延迟(大致实时地)进行传送。 
在给定这种情况下,编码技术已被提出,用以将构成动图像的各图画的多行作为块数据单元,和用以通过小波变换对各个块数据单元进行编码(压缩)(见专利文献1,例如)。 
根据此类型的编码技术,发送装置开始编码所述块数据而不等待在图画内的所述块数据的完整单元的输入,并且发送结果所得的经编码的数据。接收装置在从发送装置接收完整的经编码的数据之前开始解码(解压)所述编码的数据。 
接收装置因此可解码所述编码的数据,并且在图画应得以显示时对预定的显示定时及时产生可显示的图画。由此,接收装置可允许监视器同步于显示定时而显示图画。 
引用列表 
专利文献 
专利文献1:日本专利申请特许公开号2007-311924 
发明内容
本发明要解决的问题 
然而,数据传送通道例如网络的拥塞,可能阻止发送装置以多帧的低延迟或更小的延迟发送动图像。 
在此情况下,接收装置无法对预定的显示定时及时产生可显示的图画。未得以对显示定时及时产生的可显示的图画可能无法被例如显示在监视器上且被略过,从而造成待显示在监视器上的图像的紊乱等。 
本公开鉴于这种情形而提出,并且用于抑制图像的紊乱等,所述紊乱等是当从数据传送通道传送来的图像被以低延迟进行显示时而产生的。 
对问题的解决方案 
根据本公开的一方面的发送装置包括:获取部分,其获取调节量,所述调节量用于调节开始捕获图像的捕获定时;捕获调节部分,其基于所述调节量调节所述捕获定时;捕获部分,其同步于调节的捕获定时而捕获所述图像;和发送部分,其将所述捕获的图像发送到接收装置。 
所述接收装置包括保持部分,所述保持部分临时保持所述图像、将从所述发送部分接收的图像写到所述保持部分中、和允许写入所述保持部分的所述图像同步于预定的显示定时而显示,以及所述获取部分可获取基于下述两者之间的比较结果而计算出的调节量,所述两者即:允许延迟时间,其表示:当所述图像被写入所述保持部分中时,所述写入在所述写入已经开始时、在自写入开始时间的预定所需时间内未完成而所允许的延迟时间;和必要时间,其为:对于利用所述允许延迟时间或者更少延迟时间而已被写入的所述图像、从该写入开始时间到所述显示定时所至少花费的时间。 
可进一步包括:第一计算部分,其计算所述允许延迟时间;第二计算部分,其计算所述必要时间;比较部分,其比较所述允许延迟时间和所述必要时间;和调节量计算部分,其基于所述比较部分的比较结果计算所述调节量,并且,所述获取部分可获取由所述调节量计算部分计算出的调节量。 
如果比较结果被获取而示出所述必要时间长于所述允许延迟时间,则所述调节量计算部分可计算用于调节所述捕获定时的所述调节量,使得所述必要时间被减小到使下述条件满足的程度,所述条件即:所述必要时间长于所述允许延迟时间。 
如果比较结果被获取而示出所述必要时间不长于所述允许延迟时间,则所述调节量计算部分可计算用于调节所述捕获定时的所述调节量,使得所述 必要时间变成长于所述允许延迟时间。 
所述获取部分可通过从所述接收装置接收所述调节量从而获取所述调节量。 
可进一步包括:第一测量部分,其测量将所述图像写到所述接收装置的所述保持部分中所用的写入时间,并且,所述第一计算部分可基于所述写入时间的分布而计算所述允许延迟时间。 
可进一步包括:第二测量部分,其测量将所述图像开始写到所述接收装置的所述保持部分中所用的写入准备时间,并且,所述第二计算部分基于所述写入准备时间的分布而计算所述必要时间。 
根据本公开的一方面的发送方法用于发送装置,所述发送装置捕获和发送图像,所述发送方法包括下述步骤:通过所述发送装置,获取调节量,所述调节量用于调节开始捕获图像的捕获定时;基于所述调节量调节所述捕获定时;同步于调节的捕获定时而捕获所述图像;和将所述捕获的图像发送到接收装置。 
根据本公开的一方面的程序用于使计算机能够起下述功能,所述功能即用作:获取部分,其获取调节量,所述调节量用于调节开始捕获图像的捕获定时;捕获调节部分,其基于所述调节量调节所述捕获定时;捕获部分,其同步于调节的捕获定时捕获所述图像;和发送控制部分,其允许所述捕获的图像被发送到接收装置。 
根据本公开的一方面,调节量被获取,所述调节量用于调节开始捕获图像的捕获定时;所述捕获定时基于所述调节量而得以调节;所述图像同步于调节的捕获定时而被捕获;并且所述捕获的图像被发送到接收装置。 
发明的效果 
根据本公开,图像的紊乱等可得以抑制,所述紊乱等是当从数据传送通道传送来的图像被以低延迟进行显示时所产生的。 
附图说明
图1是根据本公开的发送/接收系统的示例配置的框图。 
图2是同步于显示定时的图像的显示的示例的图示。 
图3是测量写入信息的示例方法的图示。 
图4是写入准备时间的示例分布的图示。 
图5是缓冲器写入时间的示例分布的图示。 
图6是计算必要时间和允许延迟时间的示例方法的图示。 
图7是用于开始写图像的写入开始时间根据捕获定时而改变的示例情况的第一图示。 
图8是调节捕获定时的示例的第一图示。 
图9是用于开始写所述图像的写入开始时间因所述调节的捕获定时而已改变的示例情况的第一图示。 
图10是用于开始写所述图像的写入开始时间根据所述捕获定时而改变的示例情况的第二图示。 
图11是调节所述捕获定时的示例的第二图示。 
图12是用于开始写所述图像的写入开始时间因所述调节的捕获定时而已改变的示例情况的第二图示。 
图13是传送时间的变化的示例的第一图示。 
图14是传送时间的变化的示例的第二图示。 
图15是用于描述由所述发送装置执行的发送处理的流程图。 
图16是用于描述图15中在步骤S6中的捕获调节处理的流程图。 
图17是用于描述由所述接收装置执行的调节量计算处理的流程图。 
图18是测量奇数号字段图像的写入信息的示例方法的图示。 
图19是测量渐进式(progressive)图像的写入信息的示例方法的图示。 
图20是计算机的示例配置的框图。 
具体实施方式
现在将在下面描述本公开的实施例(下文称为本文实施例)。应注意,该描述将按以下顺序进行。 
1.本文实施例(通过调节捕获定时Vblank从而抑制图像的紊乱等的示例) 
2.示例变形例 
<1.本文实施例> 
[发送/接收系统的示例配置] 
图1示出根据本公开的发送/接收系统。 
此发送/接收系统包括:发送装置21、接收装置22、和网络23例如英特 网。 
在此发送/接收系统中,发送装置21例如调节捕获定时Vblank以开始捕获(获取)图像,并且将在所述调节的捕获定时时刻捕获的图像发送到接收装置22。 
这使接收装置22能够以低延迟显示从发送装置21接收的图像而无紊乱等。 
[发送装置21的示例配置] 
发送装置21包括:捕获部分41、编码部分42、分组部分43、RTP(实时传输协议)通信部分44、捕获调节部分45、操作部分46、和控制部分47。 
捕获部分41同步于由捕获调节部分45所调节的捕获定时Vblank而获取(捕获)外部分输入(对应于视频输入(VIDEO IN))的图像数据,并且将所述图像数据提供到编码部分42。作为所述图像数据,例如,可使用包括多行的帧图像。作为另外一个示例,可使用字段图像,所述字段图像包括多行中的奇数号行或偶数号行。 
本文实施例将参考图1至图18以假定使用字段图像作为所述图像数据而进行描述。在此情况下,捕获部分41,同步于由捕获调节部分45调节的捕获定时Vblank而交替地获取奇数号字段图像和偶数号字段图像作为所述图像数据,并且将所述图像数据提供到编码部分42。 
这里,所述奇数号字段图像是指所述多行中由奇数号行组成的字段图像。所述偶数号字段图像是指所述多行中由偶数号行组成的字段图像。 
应注意,使用帧图像作为所述图像数据将参考图19进行描述。 
编码部分42执行编码处理以将来自捕获部分41的图像数据进行编码,并且将经由该编码处理而获取的经编码的数据提供到分组部分43。 
作为所述编码处理,可使用小波编码处理以对图像数据进行编码,例如通过使用小波变换以压缩所述图像数据。 
分组部分43将来自编码部分42的经编码的数据分组(转换)成多个RTP分组,并且将所述RTP分组输出到RTP通信部分44。RTP分组是指与IETF RFC3550中所描述的RTP相符合的分组。 
RTP通信部分44根据RTP将时间等作为时间印记添加到来自分组部分43的RTP分组,所述时间为用于发送所述RTP分组例如到接收装置22的时间等。RTP通信部分44然后将添加有所述时间印记的RTP分组经由网络23 发送到接收装置22。 
另外,RTP通信部分44根据RTP接收来自接收装置22经由网络23而提供的RTCP消息,并且将所述消息提供到捕获调节部分45。 
这里,所述RTCP消息包括用于调节捕获定时Vblank的调节量Zforward和Zbackward。调节量Zforward和Zbackward例如由接收装置22计算和发送。调节量Zforward和Zbackward之一被设置成例如零。 
捕获调节部分45执行捕获调节处理,以基于来自RTP通信部分44的调节量Zforward和Zbackward而调节捕获部分41的捕获定时Vblank。 
换句话说,例如,如果调节量Zforward=0,则捕获调节部分45做出调节,使得捕获定时Vblank按调节量Zbackward而被提前。如果,例如,调节量Zbackward=0,捕获调节部分45做出调节,使得捕获定时Vblank按调节量Zforward而被延迟。由捕获调节部分45执行的捕获调节处理下面将参考图16进行描述。 
操作部分46包括待由使用者操作的操作按钮等,并且操作部分46根据使用者对控制部分47的操作提供操作信号。 
控制部分47基于例如来自操作部分46的操作信号、从而控制捕获部分41、编码部分42、分组部分43、和RTP通信部分44。 
[接收装置22的示例配置] 
接收装置22包括:RTP通信部分61、分组组建部分62、解码部分63、写入控制部分64、缓冲器65、显示控制部分66、显示部分67、写入信息测量部分68、写入信息存储部分69、调节量计算部分70、操作部分71、和控制部分72。 
RTP通信部分61经由网络23接收从RTP通信部分44发送出的RTP分组、并且将它们提供到分组组建部分62。RTP通信部分61基于来自调节量计算部分70的调节量、从而产生包括所述调节量的RTCP消息,并且将所述消息经由网络23发送到RTP通信部分44。 
分组组建部分62将来自RTP通信部分61的RTP分组进行组建,以产生待解码的已编码数据并且将所述数据提供到解码部分63。 
解码部分63对来自分组组建部分62的经编码的数据执行解码处理,并且将结果所得的图像数据提供到写入控制部分64。所述解码处理对应于由编码部分42执行的编码处理。作为所述解码处理,使用例如通过小波变换的 逆变换从而进行解码和解压的解码处理。 
写入控制部分64将来自解码部分63的图像数据提供到缓冲器65用于存储(写)。另外,写入控制部分64对图像数据的各单元将写入缓冲器65已开始时的写入开始时间Ts和所述写入已结束时的写入结束时间Te提供到写入信息测量部分68。 
缓冲器65临时存储来自写入控制部分64的图像数据。 
显示控制部分66从缓冲器65读取图像数据,并且将所述数据提供到显示部分67。显示控制部分66然后允许显示部分67同步于预定的显示定时Vblank而显示从缓冲器65读取的图像数据。 
图2示出一示例,其中显示控制部分66允许图像数据的各单元在预定的显示定时Vblank时刻被显示。 
所述图像数据,例如字段图像,为由所述多行中的奇数号行组成的奇数号字段图像nodd或由所述多行中的偶数号行组成的偶数号字段图像neven这两者之一。 
在图2中,水平轴线表示时间;竖直轴线表示对于在对应的时间所显示的行的行号。这里假定:奇数号字段图像nodd和偶数号字段图像neven各由540行组成。 
显示定时Vblank(nodd)表示用于开始显示奇数号字段图像nodd的时间。显示定时Vblank(neven)表示用于开始显示偶数号字段图像neven的时间。 
显示控制部分66从缓冲器65读取奇数号字段图像nodd,并且允许显示部分67同步于预定的显示定时Vblank(nodd)显示所述图像。显示控制部分66也从缓冲器65读取偶数号字段图像neven,并且允许显示部分67同步于预定的显示定时Vblank(neven)显示所述图像。 
显示部分67利用例如交错(interlacing)方案显示图像数据的各单元。换句话说,例如,显示部分67在显示控制部分66的控制下将奇数号字段图像nodd和偶数号字段图像neven作为图像数据的单元进行交替地显示。显示部分67可以为接收装置22的部分件,如图1所示,或者可以分离于接收装置22而被单独地设置。在此情况下,接收装置22内的显示控制部分66经由例如线缆等而连接到设置在接收装置22之外的显示部分67。 
写入信息测量部分68测量已写入在缓冲器65中的偶数号字段图像neven的写入信息。写入信息测量部分68可以连同与偶数号字段图像neven的写入 信息一起或者替代地、测量已写入在缓冲器65中的奇数号字段图像nodd的写入信息。这将在下面参考图18进行描述。 
如果,例如帧图像被用作所述图像数据、并且显示部分67设计成经由渐进式方案显示图像数据的各单元,则写入信息测量部分68将采用帧图像作为图像数据的各单元并且测量所述帧图像的写入信息。这将在下面参考图19进行描述。 
下面的描述假定:写入信息测量部分68测量已写入在缓冲器65中的偶数号字段图像neven的写入信息。 
写入信息测量部分68测量例如写入准备时间Xn和缓冲器写入时间Pn作为已写入在缓冲器65中的偶数号字段图像neven的写入信息,所述写入准备时间Xn是直到偶数号字段图像neven的写入开始所必要的时间,所述缓冲器写入时间Pn是对于偶数号字段图像neven的写入所用的时间。 
图3示出一示例,其中写入信息测量部分68对偶数号字段图像neven测量写入准备时间Xn和缓冲器写入时间Pn。 
这里,在图3中,写入开始时间Ts表示当偶数号字段图像neven写入缓冲器65中的所述写入已开始时的时间。写入结束时间Te表示当偶数号字段图像neven写入缓冲器65中的所述写入已结束时的时间。 
应注意,写入信息测量部分68由写入控制部分64提供对于偶数号字段图像neven的写入开始时间Ts和写入结束时间Te。 
如图3所示,写入信息测量部分68基于来自写入控制部分64的写入开始时间Ts和预定的显示定时Vblank(n-1even)、从而测量写入准备时间Xn(=Vblank(n-1even)-Ts)。 
另外,例如,如图3所示,写入信息测量部分68基于来自写入控制部分64的写入开始时间Ts和写入结束时间Te、从而测量缓冲器写入时间Pn(=Te–Ts)。 
写入信息测量部分68将对于各偶数号字段图像neven所测量的写入准备时间Xn和缓冲器写入时间Pn提供到写入信息存储部分69用于存储。 
再次参考图1,写入信息存储部分69将来自写入信息测量部分68的写入准备时间Xn和缓冲器写入时间Pn作为所述写入信息进行存储。 
调节量计算部分70基于存储在写入信息存储部分69中的写入信息、从而执行调节量计算处理以计算用于调节发送装置21的捕获部分41处的捕获 定时Vblank的调节量Zforward和Zbackward。应注意,所述调节量计算处理将参考例如图17进行详细描述。 
调节量计算部分70将经由所述调节量计算处理计算出的调节量Zforward和Zbackward提供到RTP通信部分61。 
操作部分71包括待由使用者操作的操作按钮等,并且操作部分71根据使用者对控制部分72的操作提供操作信号。 
控制部分72基于例如来自操作部分71的操作信号、从而控制RTP通信部分61、分组组建部分62、解码部分63、写入控制部分64、显示控制部分66、写入信息测量部分68、和调节量计算部分70。 
[调节量计算处理和捕获调节处理的细节] 
现在将参考图4至图12,描述由接收装置22的调节量计算部分70执行的调节量计算处理和由发送装置21的捕获调节部分45执行的捕获调节处理。 
图4示出存储在写入信息存储部分69中的写入准备时间Xn的示例分布。 
在图4中,水平轴线表示写入准备时间Xn;竖直轴线表示写入准备时间Xn的频率。 
调节量计算部分70基于存储在写入信息存储部分69中的写入准备时间Xn、从而产生X分布信息,所述X分布信息表示写入准备时间Xn的分布,如图4所示。 
调节量计算部分70然后基于写入准备时间Xn的X分布信息、从而计算阈值Xth;所述阈值Xth利用按升序分选的写入准备时间Xn、从而用于区别:占据上位的百分之α(其中例如α=95)的写入准备时间Xn和占据剩余下位的百分之(100-α)的写入准备时间Xn。 
这里,利用按升序分选的写入准备时间Xn,阈值Xth是占据上位的百分之α(其中例如α=95)的写入准备时间Xn的最大值或以上,以及小于占据下位的百分之(100-α)的写入准备时间Xn的最小值。值α是例如通过使用者的操作而预定的。 
图5示出存储在写入信息存储部分69中的缓冲器写入时间Pn的示例分布。 
在图5中,水平轴线表示缓冲器写入时间Pn;竖直轴线表示缓冲器写 入时间Pn的频率。 
调节量计算部分70基于存储在写入信息存储部分69中的多个缓冲器写入时间Pn、从而产生P分布信息,所述P分布信息表示缓冲器写入时间Pn的分布,如图5所示。 
调节量计算部分70然后基于缓冲器写入时间Pn的P分布信息、从而计算阈值Pth;所述阈值Pth利用按升序分选的缓冲器写入时间Pn、从而用于区别:占据上位的百分之α的缓冲器写入时间Pn和占据下位的百分之(100-α)的缓冲器写入时间Pn。 
这里,利用按升序分选的缓冲器写入时间Pn,阈值Pth是占据上位的百分之α的缓冲器写入时间Pn的最大值或以上,以及小于占据下位的百分之(100-α)的缓冲器写入时间Pn的最小值。 
图6示出一示例,其中调节量计算部分70计算基于阈值Pth的允许延迟时间Yth,和基于阈值Xth的必要时间Y。 
调节量计算部分70,如图6所示,基于由缓冲器写入时间Pn的P分布信息计算出的阈值Pth、从而利用表达式(1)计算允许延迟时间Yth。 
Yth=Pth–(1/60)          (1) 
这里,允许延迟时间Yth是指当偶数号字段图像neven的写入在所述写入已经开始时、在自写入开始时间Ts的预定的期望写入时间1/60内未完成而所使用的延迟时间。所述允许延迟时间Yth是显示偶数号字段图像neven而在至少百分之α的概率下无紊乱等所允许的延迟时间。 
应注意,所述期望写入时间1/60是指:当在写入控制部分64处进行数据写入不存在延迟等情况时、所期望的偶数号字段图像neven(或奇数号字段图像nodd)的写入时间。 
所述期望写入时间1/60是根据例如显示偶数号字段图像neven(或奇数号字段图像nodd)所用的时间而判定的。在当前的实例中,显示部分67配置成显示奇数号字段图像和偶数号字段图像各持续显示时间1/60。由此,例如,所述期望写入时间被类似地判定成1/60。当显示部分67显示奇数号字段图像和偶数号字段图像各持续显示时间1/m时,所述期望写入时间为例如1/m。 
调节量计算部分70,例如基于从写入准备时间Xn的X分布信息计算出的阈值Xth、从而对于在百分之α的概率下待接收的偶数号字段图像neven——或换句话说,待利用允许延迟时间Yth或更少延迟时间而写入的偶数号字段 图像neven——计算必要时间Y。 
这里,所述必要时间Y是指:对于待利用所述允许延迟时间Yth或者更少延迟时间而被写入缓冲器65中的偶数号字段图像neven、从该写入开始时间Ts到显示定时(neven)所至少花费的时间。 
换句话说,例如,调节量计算部分70,如图6所示,基于显示定时Vblank(n-1even)与显示定时(neven)之间的显示间隔Vblank Interval、和阈值Xth、从而利用下面的表达式(2)计算必要时间Y。 
Y=Vblank Interval–Xth           (2) 
调节量计算部分70基于是否所计算出的必要时间Y满足下面的表达式(3)、从而判定是否偶数号字段图像neven可得以显示而在至少百分之α的概率下无紊乱等。 
Y>Yth         (3) 
调节量计算部分70然后基于所述判定的结果、从而计算调节量Zforward和Zbackward。换句话说,例如,如果满足表达式(3),则调节量计算部分70计算调节量Zforward(=Y–Yth),如图6所示。调节量计算部分70然后将计算出的调节量Zforward和设置成0的调节量Zbackward提供到RTP通信部分61。 
现在将参考图7至图9,描述在如果表达式(3)满足时所执行的调节量计算处理和捕获调节处理。所述调节量计算处理由调节量计算部分70执行,并且所述捕获调节处理由捕获调节部分45执行。 
应注意,以下描述假定:在接收装置22侧的显示定时同步于在发送装置21侧的捕获定时;然而,所述显示定时可不同步于所述捕获定时。 
如图7A所示,发送装置21侧同步于捕获定时Vblank(neven)而开始捕获偶数号字段图像neven。 
如果表达式(3)满足,如图7B所示,则接收装置22侧在写入开始时间Ts时刻将偶数号字段图像neven开始写到缓冲器65中。具有行号i的行(i)然后将在该行(i)的显示定时之前被写入到缓冲器65中。 
在此情况下,调节量计算部分70计算调节量Zforward(=Y–Yth),如图7B所示,和将调节量Zbackward设置成零,并且将调节量Zforward和Zbackward提供到RTP通信部分61。RTP通信部分61产生包括来自调节量计算部分70的调节量Zforward和Zbackward的RTCP消息,并且将所述消 息经由网络23发送到发送装置21的RTP通信部分44。 
发送装置21的RTP通信部分44将来自RTP通信部分61经由网络23而接收的RTCP消息提供到捕获调节部分45。 
捕获调节部分45基于包括在来自RTP通信部分44的RTCP消息中的调节量Zforward和Zbackward、从而调节捕获部分41的捕获定时Vblank。 
在当前的实例中,包括在RTCP消息中的调节量Zbackward为零。因此,捕获调节部分45调节当前的捕获定时Vblank,如图8A所示,以便通过将当前的捕获定时Vblank按调节量Zforward进行延迟、从而获取捕获定时Vblank,如图8B所示。 
由此,捕获部分41将利用调节的捕获定时Vblank捕获外部分偶数号字段图像neven,所述调节的捕获定时Vblank是例如按调节量Zforward被延迟的,如图9A所示。 
接收装置22的写入控制部分64因此将在写入开始时间Ts’开始写偶数号字段图像neven,所述写入开始时间Ts’(=Ts+Zforward)是按调节量Zforward被延迟的,如图9B所示。在此情况下,所述必要时间Y被无限制地减小到使表达式(3)满足的程度。 
现在将参考图10至图12,描述在如果表达式(3)不满足时所执行的调节量计算处理和捕获调节处理。所述调节量计算处理由调节量计算部分70执行,并且所述捕获调节处理由捕获调节部分45执行。 
应注意,如图10A所示,发送装置21侧同步于捕获定时Vblank(neven)而开始捕获偶数号字段图像neven。 
如果表达式(3)不满足,则接收装置22侧在写入开始时间Ts时刻将偶数号字段图像neven开始写到缓冲器65中,如图10B所示。给定具有行号i的行(i),则具有行号L或之外(i≥L)的行例如将在所述行(i≥L)的显示定时之后被写到缓冲器65中。 
这里,具有行号L的行是指图10B中当粗虚线与实线交叉时所在的行,所述粗虚线表示偶数号字段图像neven的各行的写入定时,并且所述实线表示偶数号字段图像neven的各行的显示定时。 
在此情况下,如图10B所示,调节量计算部分70计算调节量Zbackward(=Yth–Y)和将调节量Zforward设置成零,并且将调节量Zforward和Zbackward提供到RTP通信部分61。RTP通信部分61产生包括来自调节量 计算部分70的调节量Zforward和Zbackward的RTCP消息,并且将所述消息经由网络23发送到发送装置21的RTP通信部分44。 
发送装置21的RTP通信部分44将来自RTP通信部分61经由网络23而接收的RTCP消息提供到捕获调节部分45。 
捕获调节部分45基于包括在来自RTP通信部分44的RTCP消息中的调节量Zforward和Zbackward、从而调节捕获部分41的捕获定时Vblank。 
在当前的实例中,包括在RTCP消息中的调节量Zforward为零。因此,捕获调节部分45调节当前的捕获定时Vblank,如图11A所示,以便通过将当前的捕获定时Vblank按调节量Zbackward进行提前从而获取捕获定时Vblank,如图11B所示。 
捕获部分41因此例如将在调节的捕获定时Vblank时刻捕获外部分偶数号字段图像neven,所述调节的捕获定时Vblank是按调节量Zforward而被提前的,如图12A所示。 
接收装置22的写入控制部分64因此将在写入开始时间Ts’(Ts–Zbackward)开始写偶数号字段图像neven,所述写入开始时间Ts’(Ts–Zbackward)是从写入开始时间Ts按调节量Zbackward被提前的,如图12B所示。在此情况下,如图12B所示,表达式(3)将满足。 
应注意,调节量计算部分70适宜地执行所述调节量计算处理。这是因为:所述图像数据的传送时间根据网络23的拥塞和其它情况而变化,其甚至在利用调节后的捕获定时Vblank的情况下也引起如图7A和图7B中或图10A和图10B中所示的状态。 
现在,图13和图14各示出一示例,其中所述传送时间根据网络23的拥塞和其它情况而变化。 
在图13和图14中,竖直轴线表示代表图像数据的RTP分组的分组号。水平轴线表示:由捕获部分41执行的“捕获”处理、由解码部分42执行的“编码”处理、由分组部分43执行的“分组”处理、在RTP通信部分44与RTP通信部分61之间经由网络23而执行的RTP分组“转移”处理、由分组组建部分62执行的“分组组建”处理、和由解码部分63执行的“解码”处理各自所用的时间。对于构成所述图像数据的数据执行这些处理。 
如图13和图14所示,所述“转移”处理所用的时间将根据网络23的情况而显著地变化。即,如果网络23的拥塞相对较小,则所述“转移”处理所 用的时间将短,如图13所示。如果网络23的拥塞相对较大,则所述“转移”处理所用的时间将长,如图14所示。 
所述“转移”处理所用的时间因此以及所述传送时间根据网络23的拥塞和其它情况而变化,这转而引起如图7A和图7B中或图10A和图10B所示的状态。由此,调节量计算部分70需要适宜地执行所述调节量计算处理。 
捕获调节部分45然后需要基于来自调节量计算部分70经由RTP通信部分61、网络23、和RTP通信部分44而提供的调节量Zforward和Zbackward、从而调节捕获部分41的捕获定时Vblank。 
[发送装置21的操作的描述] 
现在将参考图15中的流程图,描述由发送装置21执行的发送处理。 
此发送处理例如在操作部分46被操作时开始,以便捕获和发送图像数据。控制部分47然后根据来自操作部分46的操作信号经由捕获调节部分45通过控制捕获部分41、从而执行所述发送处理。 
换句话说,在步骤S1,捕获部分41——在控制部分47的控制下且同步于由步骤S6的捕获调节处理而调节的捕获定时Vblank——获取外部分输入的图像数据并且将所述数据提供到编码部分42,所述步骤S6将在下面描述。 
这里,如果步骤S6的捕获调节处理还未执行,则捕获部分41例如同步于预定的捕获定时Vblank、从而获取外部分输入的图像数据并且将所述数据提供到编码部分42。 
在步骤S2中,编码部分42执行所述编码处理、以将来自捕获部分41的图像数据进行编码,并且将经由所述编码处理而获取的经编码的数据提供到分组部分43。 
在步骤S3中,分组部分43将来自编码部分42的所述编码的数据分组(转换)成多个RTP分组、并且将所述分组输出到RTP通信部分44。 
在步骤S4中,RTP通信部分44根据RTP将时间等作为时间印记添加到来自分组部分43的RTP分组,所述时间为用于发送所述RTP分组例如到接收装置22的时间等。RTP通信部分44然后将添加有所述时间印记的RTP分组经由网络23发送到接收装置22。 
在步骤S5中,RTP通信部分44判定:是否包括调节量Zforward和Zbackward的所述RTCP消息已从接收装置22经由网络23而被接收。如果判定所述消息尚未被接收,则所述处理返回到步骤S1、并且由此后起以相 似的方式执行所述处理。 
如果RTP通信部分44在步骤S5中判定:包括调节量Zforward和Zbackward的RTCP消息已从接收装置22经由网络23而被接收,则所述RTCP消息被提供到捕获调节部分45。 
在步骤S6中,捕获调节部分45执行所述捕获调节处理、以基于来自RTP通信部分44的RTCP消息调节捕获定时Vblank。同样在步骤S6中,捕获调节部分45在所述捕获调节处理的完成后返回到所述处理的步骤S1,并且由此后起以相似的方式执行所述处理。应注意,所述发送处理在例如操作部分46被使用者操作时而完成,以便停止发送图像数据。 
现在将参考图16的流程图,描述在图15的步骤S6中的捕获调节处理。 
如上述,捕获调节部分45由RTP通信部分44提供RTCP消息。 
在步骤S21中,捕获调节部分45从RTP通信部分44所提供的RTCP消息获取(抽取)包括在所述RTCP消息中的调节量Zforward和Zbackward。 
在步骤S22中,捕获调节部分45判定是否所述获取的调节量Zbackward为零。如果调节量Zbackward被判定为零,则所述处理继续进行到步骤S23。 
在步骤S23中,捕获调节部分45控制捕获部分41,以便将捕获部分41的捕获定时Vblank按获取的其它调节量Zforward延迟。 
换句话说,例如,捕获调节部分45调节当前的捕获定时Vblank,如图8A所示,以便获取捕获定时Vblank,如图8B所示。 
捕获部分41因此同步于所述调节的捕获定时Vblank而捕获图像数据的各单元,如图9A所示。接收装置22的显示控制部分66由此利用必要时间Y在显示定时Vblank时刻显示图像数据,如图9B所示,所述必要时间Y被尽可能多地减小到使表达式(3)满足的程度。 
在步骤S22中,捕获调节部分45判定是否所述获取的调节量Zbackward为零。如果调节量Zbackward被判定不为零,或换句话说,如果调节量Zforward被判定为零,则所述处理继续进行到步骤S24。 
在步骤S24中,捕获调节部分45控制捕获部分41,以便将捕获部分41的捕获定时Vblank按所述获取的其它调节量Zbackward提前。 
换句话说,例如,捕获调节部分45调节当前的捕获定时Vblank,如图11A所示,以便获取捕获定时Vblank,如图11B所示。捕获部分41因此同步于所述调节的捕获定时Vblank而捕获所述图像数据的各单元,如图12A 所示。接收装置22的显示控制部分66由此在满足表达式(3)的显示定时Vblank时刻显示图像数据,如图12B所示。 
所述捕获调节处理因此完成并且返回到图15中的步骤S6。所述处理返回到步骤S1。在步骤S1中,捕获部分41同步于经由所述捕获调节处理调节的捕获定时Vblank而捕获所述图像数据的各单元。 
如上述,根据捕获调节处理,如果表达式(3)不满足,则捕获调节部分45在步骤S24中调节所述捕获定时Vblank以便满足表达式(3)。 
接收装置22因此可抑制下述情形,即:因所述图像的一部分被略过而在所述图像中产生紊乱等。 
另外,例如,即使表达式(3)满足,捕获调节部分45在步骤S23中调节所述捕获定时Vblank,以便将必要时间Y尽可能多地减小到使表达式(3)满足的程度。 
因此,对于奇数号字段图像nodd和偶数号字段图像neven从所述写入开始时间到所述显示定时所用的总体时间得以减小,从而使所述图像能够以最小化的低延迟进行显示。 
[接收装置22的操作的描述] 
现在将参考图17的流程图,描述由接收装置22执行的调节量计算处理。 
所述调节量计算处理例如当所述RTP分组从发送装置21经由网络23而被发送时开始。RTP通信部分61接收从RTP通信部分44经由网络23而发送的RTP分组、并且将所述分组提供到分组组建部分62。分组组建部分62将来自RTP通信部分61的RTP分组进行组建,以产生待解码的经编码的数据、并且将所述数据提供到解码部分63。解码部分63对来自分组组建部分62的经编码的数据执行解码处理,并且将结果所得的图像数据提供到写入控制部分64。所述解码处理对应于由编码部分42执行的编码处理。 
写入控制部分64将来自解码部分63的图像数据(奇数号字段图像和偶数号字段图像)提供到缓冲器65用于存储(写)。另外,写入控制部分64对于各偶数号字段图像neven将写入缓冲器65已开始时的写入开始时间Ts和所述写入已结束时的写入结束时间Te提供到写入信息测量部分68。 
显示控制部分66从缓冲器65读取所述奇数号字段图像和偶数号字段图像作为所述图像数据,并且允许显示部分67同步于预定的显示定时Vblank而显示所述图像数据。 
在步骤S41中,基于来自写入控制部分64的写入开始时间Ts和预定的显示定时Vblank,写入信息测量部分68对于偶数号字段图像neven测量写入准备时间Xn、并且将该写入准备时间Xn提供到写入信息存储部分69用于存储。 
在步骤S42中,基于来自写入控制部分64的公开(disclosure)时间Ts和结束时间Te,写入信息测量部分68对于偶数号字段图像neven测量缓冲器写入时间Pn、并且将该缓冲器写入时间Pn提供到写入信息存储部分69用于存储。 
在步骤S43中,调节量计算部分70判定:是否内建的定时部分(未示出)所测量的时间已经过预定的时间。如果所测得的时间被判定为尚未经过预定的时间,则所述处理返回到步骤S41、并且由此后起以相似的方式执行所述处理。 
如果调节量计算部分70在步骤S43中判定所测得的时间已经过预定的时间,则所述处理继续进行到步骤S44。 
在步骤S44中,调节量计算部分70从写入信息存储部分69读取写入准备时间Xn、并且计算X分布信息,所述X分布信息表示已被读取的写入准备时间Xn的分布。 
在步骤S45中,调节量计算部分70基于在步骤S44中计算出的X分布信息而计算阈值Xth。 
在步骤S46中,调节量计算部分70基于显示间隔Vblank Interval和阈值Xth、从而利用表达式(2)计算必要时间Y。 
在步骤S47中,调节量计算部分70从写入信息存储部分69读取缓冲器写入时间Pn、并且计算P分布信息,所述P分布信息表示已被读取的缓冲器写入时间Pn的分布。 
在步骤S48中,调节量计算部分70根据在步骤S47中计算出的P分布信息而计算阈值Pth。 
在步骤S49中,调节量计算部分70基于在步骤S48中计算出的阈值Pth和所述期望写入时间1/60、从而利用表达式(1)计算允许延迟时间Yth。 
在步骤S50中,调节量计算部分70基于在步骤S46中计算出的必要时间Y和在步骤S49中计算出的允许延迟时间Yth、从而判定是否满足表达式(3)。如果判定为满足表达式(3),则所述处理继续进行到步骤S51。 
在步骤S51中,调节量计算部分70基于必要时间Y和允许延迟时间Yth而计算调节量Zforward(=Y–Yth),如图7B所示。调节量Zforward将为用于调节捕获定时Vblank的调节量,使得必要时间Y被减小到使表达式(3)满足的程度。 
在步骤S52中,调节量计算部分70将调节量Zbackward设置成零、并且将调节量Zforward和Zbackward提供到RTP通信部分61。所述处理继续进行到步骤S53。 
然后,在步骤S53中,RTP通信部分61产生包括来自调节量计算部分70的调节量Zforward和Zbackward的RTCP消息、并且将所述消息经由网络23发送到发送装置21的RTP通信部分44。 
在步骤S50中,如果调节量计算部分70基于在步骤S46中计算出的必要时间Y和在步骤S49中计算出的允许延迟时间Yth而判定表达式(3)不满足,则所述处理继续进行到步骤S54。 
在步骤S54中,调节量计算部分70基于必要时间Y和允许延迟时间Yth而计算调节量Zbackward(=Yth–Y),如图10B所示。调节量Zbackward将为用于调节捕获定时Vblank的调节量,使得表达式(3)满足。 
在步骤S55中,调节量计算部分70将调节量Zforward设置成零、并且将调节量Zforward和Zbackward提供到RTP通信部分61。所述处理继续进行到步骤S53,其中执行上述的步骤S53中的处理。所述调节量计算处理因此完成。 
如上述,根据所述调节量计算处理,调节量Zforward和Zbackward根据例如偶数号字段图像neven的写入信息而被计算出,以便获取能够满足表达式(3)的捕获定时Vblank。 
然后,在所述捕获调节处理中,捕获定时Vblank基于经由所述调节量计算处理计算出的调节量Zforward和Zbackward而得到调节。 
接收装置22因此在表达式(3)满足的情况下写入所述图像,并且由此可抑制下述情形,即:因所述图像的一部分被略过而在所述图像中产生紊乱等。 
另外,例如,根据调节量计算处理,即使表达式(3)满足,用于调节捕获定时Vblank的调节量Zforward和Zbackward也被计算出,以便将必要时间Y尽可能地减小到使表达式(3)满足的程度。 
因此,对于奇数号字段图像nodd和偶数号字段图像neven从所述写入开始时间到所述显示定时所用的总体时间得以减小,从而使所述图像能够以最小化的低延迟进行显示。 
<2.示例变形例> 
应注意,在步骤S22中,如果调节量Zbackward=0,则所述捕获调节处理允许所述处理继续进行到步骤S23、以将捕获定时Vblank按调节量Zforward提前,但这不是限制性的。 
即,例如,如果调节量Zbackward=0,则因为表达式(3)满足,从而可将捕获定时Vblank保留为未调节的。在此情况下,如图7B所示,偶数号字段图像neven将同步于显示定时Vblank(neven)而显示。 
另外,虽然接收装置22的调节量计算部分70计算调节量Zforward和Zbackward,但是该调节量计算部分70可仅计算将要用于调节所述捕获定时的调节量。在此情况下,RTP通信部分61将不发送被设置成零的调节量、而仅发送将要用于调节所述捕获定时的调节量。 
发送装置21的捕获调节部分45然后将使用从RTP通信部分61经由RTP通信部分44和网络23而获取的调节量、以调节所述捕获定时。 
应注意,在本文实施例中,接收装置22的调节量计算部分70计算调节量Zforward和Zbackward。尽管如此,发送装置21例如可设置有写入信息测量部分68至调节量计算部分70,使得调节量Zforward和Zbackward在发送装置21侧被计算出。 
在此情况下,捕获调节部分45基于在发送装置21侧由调节量计算部分70计算出的调节量Zforward和Zbackward、从而调节所述捕获定时。 
如果发送装置21设置有写入信息测量部分68至调节量计算部分70,则接收装置22的写入控制部分64对于图像数据的各单元将写入开始时间Ts、写入结束时间Te、和显示定时Vblank提供到RTP通信部分61。RTP通信部分61然后将来自写入控制部分64的所述写入开始时间Ts、写入结束时间Te、和显示定时Vblank经由网络23提供到在发送装置21侧的写入信息测量部分68。 
应注意,如果发送装置21设置有写入信息测量部分68至调节量计算部分70,则接收装置22可以不设置有写入信息测量部分68至调节量计算部分70。 
在本文实施例中,必要时间Y和允许延迟时间Yth是基于偶数号字段图像neven的写入信息而计算出。所述必要时间Y和允许延迟时间Yth也可基于例如奇数号字段图像nodd的写入信息而计算出,如图18所示。或者,必要时间Y和允许延迟时间Yth可基于例如奇数号字段图像nodd的写入信息和偶数号字段图像neven的写入信息而计算出。 
另外,例如,如果所述图像利用渐进式方案而显示,则显示部分67可使用渐进式图像(帧图像)作为各图像、并且基于所述渐进式图像的写入信息而计算必要时间Y和允许延迟时间Yth,如图19所示。调节量Zforward(=Y–Yth)或调节量Zbackward(=Yth–Y)然后基于已被计算出的必要时间Y和允许延迟时间Yth而计算。 
更进一步,在产生表示写入准备时间Xn的分布的X分布信息时,如图4所示,调节量计算部分70利用写入准备时间Xn的频率为1从而产生所述X分布信息,而无关于写入准备时间Xn的测量的定时。 
尽管如此,,调节量计算部分70可利用随所述测量定时处于更近期而更多增加的写入准备时间Xn的频率从而产生所述X分布信息。这是因为,越近期的写入准备时间Xn被测得,则可越准确地表示用于待接收图像的写入准备时间。 
这也应用于表示缓冲器写入时间Pn的分布的P分布信息的生成,如图5所示。 
这允许调节量计算部分70更准确地产生表示用于待接收图像的写入准备时间的X分布信息、和更准确地产生表示用于待接收图像的缓冲器写入时间的P分布信息。 
调节量计算部分70因此将能够基于这种X分布信息和这种P分布信息、从而更准确地计算用于待接收图像的必要时间Y和允许延迟时间Yth。由此,调节量计算部分70将能够基于必要时间Y与允许延迟时间Yth之间的比较结果(表达式(3)是否满足的判定结果)、从而计算更准确的调节量。发送装置21的捕获调节部分45因此将能够基于由调节量计算部分70计算出的调节量、从而更适宜地调节捕获定时Vblank。 
应注意,本技术可采用以下配置。 
(1)一种发送装置,包括:获取部分,其获取调节量,所述调节量用于调节开始捕获图像的捕获定时;捕获调节部分,其根据所述调节量调节所 述捕获定时;捕获部分,其同步于所述调节的捕获定时而捕获所述图像;和发送部分,其将所述捕获的图像发送到接收装置。 
(2)如以上(1)所述的发送装置,其中,所述接收装置包括保持部分,所述保持部分临时保持所述图像、将从所述发送部分接收的图像写到所述保持部分中、和允许写入所述保持部分的所述图像同步于预定的显示定时而显示,以及所述获取部分获取基于下述两者之间的比较结果而计算出的调节量,所述两者即:允许延迟时间,其表示:当所述图像被写入所述保持部分中时,所述写入在所述写入已经开始时、在自写入开始时间的预定所需时间内未完成而所允许的延迟时间;和必要时间,其为:对于利用所述允许延迟时间或者更少延迟时间而已被写入的所述图像、从该写入开始时间到所述显示定时所至少花费的时间。 
(3)如以上(2)所述的发送装置,进一步包括:第一计算部分,其计算所述允许延迟时间;第二计算部分,其计算所述必要时间;比较部分,其比较所述允许延迟时间和所述必要时间;和调节量计算部分,其基于所述比较部分的比较结果计算所述调节量,其中,所述获取部分获取由所述调节量计算部分计算出的调节量。 
(4)如以上(3)所述的发送装置,其中,如果比较结果被获取而示出所述必要时间长于所述允许延迟时间,则所述调节量计算部分计算用于调节所述捕获定时的所述调节量,使得所述必要时间被减小到使下述条件满足的程度,所述条件即:所述必要时间长于所述允许延迟时间。 
(5)如以上(3)或(4)所述的发送装置,其中,如果比较结果被获取而示出所述必要时间不长于所述允许延迟时间,则所述调节量计算部分计算用于调节所述捕获定时的所述调节量,使得所述必要时间变成长于所述允许延迟时间。 
(6)如以上(2)所述的发送装置,其中,所述获取部分通过从所述接收装置接收所述调节量从而获取所述调节量。 
(7)如以上(3)所述的发送装置,进一步包括:第一测量部分,其测量将所述图像写到所述接收装置的所述保持部分中所用的写入时间,其中,所述第一计算部分基于所述写入时间的分布而计算所述允许延迟时间。 
(8)如以上(3)或(7)所述的发送装置,进一步包括:第二测量部分,其测量将所述图像开始写到所述接收装置的所述保持部分中所用的写入 准备时间,其中,所述第二计算部分基于所述写入准备时间的分布而计算所述必要时间。 
应注意,以上描述的一系列的处理可通过硬件或软件而实行。当所述一系列的处理通过软件而实行时,构成所述软件的程序经由程序记录介质而被安装到专用硬件中所集成的计算机中,或者例如被安装到可利用所安装的不同程序而实行不同功能的通用计算机中。 
[计算机的示例配置] 
图20是对于借助程序实行上述一系列处理的计算机所用的硬件的示例配置的框图。 
CPU(中央处理单元)201根据存储在ROM(只读存储器)202或存储部分208中的程序而实行不同的处理。RAM(随机存取存储器)203适宜地存储待由CPU201实行的程序和数据。CPU201、ROM202和RAM203经由总线204而相互连接。 
CPU201也经由总线204连接到输入/输出接口205。输入/输出接口205连接到包括键盘、鼠标、麦克风等的输入部分206、并且连接到包括显示器、扬声器等的输出部分207。CPU201实行与从输入部分206输入的指令相对应的不同处理。CPU201然后将所述处理的结果输出到输出部分207。 
连接到输入/输出接口205的存储部分208包括例如硬件、并且存储待由CPU201实行的程序和不同类型的数据。通信部分209经由网络例如英特网和本地局域网而与外部分装置通信。 
更进一步,所述程序可经由通信部分209而获取、并且被存储在存储部分208中。 
连接到输入/输出接口205的驱动器210驱动可移除介质211例如在安装了的情况下的磁盘、光盘、光磁盘、或半导体存储器、并且获取存储在其中的程序、数据等。所获取的程序和数据按需被转移到存储部分208用于存储。 
用于记录(存储)待安装到计算机中且通过所述计算机而成为可运行的所述程序的记录介质,包括:如图20所示,可移除介质211,其为封装的介质,其包括磁盘(包括软盘)、光盘(包括CD-ROM(压缩盘只读存储器)和DVD(数字多用途盘))、光磁盘(包括小型盘(Mini-Disc,MD)),半导体存储器等;临时或永久地存储程序的ROM202;构成存储部分208的硬盘等。所述程序经由通信部分209而被记录在所述记录介质中,所述通信部分 209是接口例如在使用有线式或无线式通信介质如本地局域网、英特网、和数字卫星广播时按需而用的路由器和调制解调器。 
应注意,在本说明书中,描述上述一系列处理的步骤当然包括按所描述的顺序待以时间顺序而执行的处理,但也可包括并行地或独立地运行的处理,即使这些处理不按时间顺序处理。 
另外,在本说明书中,系统是指包括多个装置的装备。 
应注意,以上描述的本文实施例不应解释成限制本公开中的实施例,并且在不背离本公开的精神的情况下可进行各种变型。 
附图标记列表 
21  发送装置 
22  接收装置 
23  网络 
41  捕获部分 
42  编码部分 
43  分组部分 
44  RTP通信部分 
45  捕获调节部分 
46  操作部分 
47  控制部分 
61  RTP通信部分 
62  分组组建部分 
63  解码部分 
64  写入控制部分 
65  缓冲器 
66  显示控制部分 
67  显示部分 
68  写入信息测量部分 
69  写入信息存储部分 
70  调节量计算部分 
71  操作部分 
72  控制部分 

Claims (10)

1.一种发送装置,包括:
获取部分,其获取调节量,所述调节量用于调节开始捕获图像的捕获定时;
捕获调节部分,其根据所述调节量调节所述捕获定时;
捕获部分,其同步于调节的捕获定时而捕获所述图像;和
发送部分,其将捕获的图像发送到接收装置。
2.如权利要求1所述的发送装置,其中,
所述接收装置包括保持部分,所述保持部分临时保持所述图像,
将从所述发送部分接收的图像写到所述保持部分中,和
允许写入所述保持部分的所述图像同步于预定的显示定时而显示,以及
所述获取部分获取基于下述两者之间的比较结果而计算出的调节量,所述两者为:
允许延迟时间,其表示在从已经开始写入时的写入开始时间起的预定所需时间内、所述图像写入所述保持部分未完成时允许的延迟时间,以及
必要时间,其为对于利用所述允许延迟时间或者更少延迟时间而已被写入的所述图像、从该写入开始时间到所述显示定时所至少花费的时间。
3.如权利要求2所述的发送装置,进一步包括:
第一计算部分,其计算所述允许延迟时间;
第二计算部分,其计算所述必要时间;
比较部分,其比较所述允许延迟时间和所述必要时间;和
调节量计算部分,其基于所述比较部分的比较结果计算所述调节量,
其中,所述获取部分获取由所述调节量计算部分计算出的调节量。
4.如权利要求3所述的发送装置,其中,
在比较结果被获取而示出所述必要时间长于所述允许延迟时间的情况下,所述调节量计算部分计算用于调节所述捕获定时的所述调节量,使得所述必要时间被减小到使下述条件满足的程度,所述条件为所述必要时间长于所述允许延迟时间。
5.如权利要求4所述的发送装置,其中,
在比较结果被获取而示出所述必要时间不长于所述允许延迟时间的情况下,所述调节量计算部分计算用于调节所述捕获定时的所述调节量,使得所述必要时间变成长于所述允许延迟时间。
6.如权利要求2所述的发送装置,其中,
所述获取部分通过从所述接收装置接收所述调节量从而获取所述调节量。
7.如权利要求3所述的发送装置,进一步包括:
第一测量部分,其测量将所述图像写到所述接收装置的所述保持部分中所用的写入时间,
其中,所述第一计算部分基于所述写入时间的分布而计算所述允许延迟时间。
8.如权利要求3所述的发送装置,进一步包括:
第二测量部分,其测量将所述图像开始写到所述接收装置的所述保持部分中所用的写入准备时间,
其中,所述第二计算部分基于所述写入准备时间的分布而计算所述必要时间。
9.一种用于发送装置的发送方法,所述发送装置捕获和发送图像,所述发送方法包括下述步骤:通过所述发送装置,
获取调节量,所述调节量用于调节开始捕获图像的捕获定时;
基于所述调节量调节所述捕获定时;
同步于调节的捕获定时而捕获所述图像;和
将捕获的图像发送到接收装置。
10.一种用于使计算机能够用作以下各部分的程序,所述各部分包括:
获取部分,其获取调节量,所述调节量用于调节开始捕获图像的捕获定时;
捕获调节部分,其基于所述调节量调节所述捕获定时;
捕获部分,其同步于调节的捕获定时捕获所述图像;和
发送控制部分,其允许捕获的图像被发送到接收装置。
CN2012800023905A 2011-06-13 2012-06-06 发送装置、发送方法、和程序 Pending CN103262536A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-131672 2011-06-13
JP2011131672A JP2013005064A (ja) 2011-06-13 2011-06-13 送信装置、送信方法、及びプログラム
PCT/JP2012/064535 WO2012173020A1 (ja) 2011-06-13 2012-06-06 送信装置、送信方法、及びプログラム

Publications (1)

Publication Number Publication Date
CN103262536A true CN103262536A (zh) 2013-08-21

Family

ID=47357009

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012800023905A Pending CN103262536A (zh) 2011-06-13 2012-06-06 发送装置、发送方法、和程序

Country Status (5)

Country Link
US (1) US20130141596A1 (zh)
EP (1) EP2582133A4 (zh)
JP (1) JP2013005064A (zh)
CN (1) CN103262536A (zh)
WO (1) WO2012173020A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012222643A (ja) * 2011-04-11 2012-11-12 Sony Corp 表示制御装置、表示制御方法、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030037158A1 (en) * 1997-08-22 2003-02-20 Koichi Yano Data communication apparatus and method
JP2007082045A (ja) * 2005-09-16 2007-03-29 Toa Corp 通信装置、その通信方法、通信プログラム及び通信プログラムを記録したコンピュータ読み取り可能な記録媒体
US20100135381A1 (en) * 2008-11-28 2010-06-03 Hitachi Kokusai Electric Inc. Encoding/decoding device and video transmission system

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5917943A (en) * 1995-03-31 1999-06-29 Canon Kabushiki Kaisha Image processing apparatus and method
US5999656A (en) * 1997-01-17 1999-12-07 Ricoh Co., Ltd. Overlapped reversible transforms for unified lossless/lossy compression
JPH11215480A (ja) * 1998-01-21 1999-08-06 Canon Inc 映像通信システム及び映像送信装置及び映像受信装置及びそれらの制御方法及び記憶媒体
US6091777A (en) * 1997-09-18 2000-07-18 Cubic Video Technologies, Inc. Continuously adaptive digital video compression system and method for a web streamer
GB2406014B (en) * 2003-09-10 2007-01-31 Thales Uk Plc Video system
JP4371120B2 (ja) * 2006-05-16 2009-11-25 ソニー株式会社 画像処理装置及び画像処理方法、プログラム及び記録媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030037158A1 (en) * 1997-08-22 2003-02-20 Koichi Yano Data communication apparatus and method
JP2007082045A (ja) * 2005-09-16 2007-03-29 Toa Corp 通信装置、その通信方法、通信プログラム及び通信プログラムを記録したコンピュータ読み取り可能な記録媒体
US20100135381A1 (en) * 2008-11-28 2010-06-03 Hitachi Kokusai Electric Inc. Encoding/decoding device and video transmission system

Also Published As

Publication number Publication date
EP2582133A1 (en) 2013-04-17
JP2013005064A (ja) 2013-01-07
EP2582133A4 (en) 2014-11-12
WO2012173020A1 (ja) 2012-12-20
US20130141596A1 (en) 2013-06-06

Similar Documents

Publication Publication Date Title
US8675728B2 (en) Transmitting apparatus and method, and receiving apparatus and method
CN102172020B (zh) 用于发送视频的方法和设备
JP5162939B2 (ja) 情報処理装置および方法、並びにプログラム
CN101466045B (zh) 自适应解码同步装置、同步方法及视频解码和显示系统
US11044437B2 (en) Method and system for combining multiple area-of-interest video codestreams into a combined video codestream
US20110123170A1 (en) Information processing apparatus and method
CN101754018B (zh) 信息处理器及其方法
CN102378003A (zh) 信息处理装置和方法以及程序
CN104618786A (zh) 音视频同步方法和装置
CN102215320A (zh) 发送设备、接收设备、控制方法和通信系统
WO2011162168A1 (ja) 情報処理装置および情報処理方法
KR20130098147A (ko) 입체 3차원 비디오 정보의 통신을 위한 방법 및 시스템
CN105430453A (zh) 媒体数据采集方法、媒体终端及在线音乐教学系统
WO2013154025A1 (ja) 情報処理装置および方法、並びに、プログラム
CN108521869A (zh) 无线数据传输方法和设备
CN103262536A (zh) 发送装置、发送方法、和程序
CN103460697A (zh) 显示控制装置、显示控制方法和程序
JPWO2008123125A1 (ja) 画質評価システム、方法およびプログラム
US20100272170A1 (en) Image encoding apparatus, image encoding method and medium on which image encoding program is recorded
CN102158695A (zh) 图像处理设备和方法
JP2017224928A (ja) 情報処理システム、情報処理装置、情報処理方法およびプログラム
JP5784826B2 (ja) 動画伝送、受信方法および装置
JP5300760B2 (ja) 映像伝送システム、映像伝送方法及びプログラム
CN103069479A (zh) 显示控制装置、显示控制方法、和程序
WO2021002135A1 (ja) データ送信装置、データ送信システム、及び、データ送信方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130821