CN101106697A - 数据传输系统、接收装置和方法、以及发送装置和方法 - Google Patents

数据传输系统、接收装置和方法、以及发送装置和方法 Download PDF

Info

Publication number
CN101106697A
CN101106697A CNA2007101358201A CN200710135820A CN101106697A CN 101106697 A CN101106697 A CN 101106697A CN A2007101358201 A CNA2007101358201 A CN A2007101358201A CN 200710135820 A CN200710135820 A CN 200710135820A CN 101106697 A CN101106697 A CN 101106697A
Authority
CN
China
Prior art keywords
flow data
stored
user
storage part
described flow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101358201A
Other languages
English (en)
Other versions
CN101106697B (zh
Inventor
斋藤友伸
大林雄
哈沙·特里·乌
海尔特·厄伊特胡芬
汤姆·弗兰斯·毛里茨·霍斯蒂
大西学
清水俊吉
西川贵博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Europe Belgium NV
Sony Corp
Original Assignee
Sony Service Center Europe NV
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Service Center Europe NV, Sony Corp filed Critical Sony Service Center Europe NV
Publication of CN101106697A publication Critical patent/CN101106697A/zh
Application granted granted Critical
Publication of CN101106697B publication Critical patent/CN101106697B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383Accessing a communication channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • H04N5/783Adaptations for reproducing at a rate different from the recording rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种数据传输系统,具有发送流数据的发送装置和接收流数据并将切换流数据的请求传输至所述发送装置的接收装置,其中,所述发送装置响应于所接收的请求来切换所述流数据。所述接收装置包括:接收部;存储部,用于临时存储流数据并将其传送;操作检测部,用于检测用户是否操作了所述请求;以及控制部,用于当操作检测部检测所述用户的操作时,控制存储在存储部中的流数据的传送速率以快进流数据。所述发送装置包括:信息添加部,用于当接收到用户操作的通知时,将关于用户操作的附加信息添加至流数据;以及发送部,用于发送添加有附加信息的流数据。

Description

数据传输系统、接收装置和方法、以及发送装置和方法
相关申请的交叉参考
本发明包含于2006年7月14日向日本专利局提交的日本专利申请JP 2006-194925的主题,其全部内容结合于此作为参考。
技术领域
本发明涉及数据传输系统、接收装置和接收方法、以及发送装置和发送方法。更具体地,本发明涉及数据流系统等。
背景技术
近来,已经提供了通过流方式传输图像数据、音频数据等的许多服务。为了改进网络中数据的传输和接收的不稳定性并平滑地再生流数据,通过流方式接收流数据的终端通常具有临时存储流数据的缓存器。
图1示出了相关技术的数据流系统1的结构。在相关技术的数据流系统1中,响应于客户端13的任何请求,发送诸如图像数据和音频数据的流数据的服务器11通过网络12将流数据发送至客户端13。
注意,例如,服务器11在其中安装有电视调谐器并且可从诸如数字通用盘(DVD)播放器的外部装置接收任何图像和音频信号。基于从外部接收的控制信号,服务器11还可以在从电视调谐器接收的图像和音频信号与从DVD播放器接收的图像和音频信号之间进行切换,或者改变电视调谐器的信道。此外,可以通过服务器11控制诸如DVD播放器的外部装置的操作。
如图2所示,客户端13包括接收部21、缓存器22和24、解码器23、再生部26、以及输出部27。
接收部21通过网络12从服务器11接收流数据,并对流数据进行解调。缓存器22接收并存储流数据。
缓存器22还在解码器23执行解码处理时将存储的流数据提供给解码器23。解码器23从缓存器22接收流数据,并分别对图像数据和音频数据进行解码,从而将解码的图像数据和音频数据提供给存储它们的缓存器24。
缓存器24将所存储的流数据提供给再生部26。再生部26再生从缓存器24接收的流数据,并将再生的流数据提供给输出部27。
输出部27由用于显示图像的显示器、用于发声的扬声器和/或类似物构成,并基于流数据和/或对应于图像的音频来输出图像。
如果网络12中的通信状态稳定,则客户端13能够保持足够的通信率以接收流数据,使得缓存器24能够像如图3所示的缓存器24中流数据的阴影区一样存储足够的数据量。如果网络12中的通信状态随后变得不稳定,则客户端13降低通信率以接收流数据,使得缓存器24像如图4所示的缓存器24中流数据的阴影区一样存储减少的数据量。
尽管减少了存储在缓存器24中的流数据的数据量,再生部26也再生存储在缓存器24中的流数据(从未示出的再生速度控制部接收),使得即使当存储在缓存器24中的流数据的数据量减少时也不会停止再生操作,从而使流数据能够被平滑地再生。即,流数据被一次存储在缓存器24中,并且再生部26再生已经过去固定时间段后的流数据。
注意,在图3和4中,为了简化描述,仅示出了构成图2所示客户端13的部件中的缓存器24和再生部26,而忽略了缓存器22。此外,在图3和4中,缓存器24下方标记的三角形标记表示缓存器中所存储的数据量。在每幅图中,根据从左端到右端的位置增加缓存器中所表示的数据量。
然而,如上所述,再生部26再生存储在缓存器24中的已经过去固定时间段后的流数据,使得如果用户执行固定操作来指示改变电视调谐器等的信道,则很难在对应于该操作的用户操作后再生流数据,除非已经完全再生了存储在缓存器24中的操作前的流数据。
因此,仅在他或她观看并听见存储在缓存器24中的操作前的流数据固定时间段之后(即,已经完全再生了操作前的流数据之后),用户才可观看并听见她或她的操作后的流数据。
图5示出了用户操作时存储在缓存器24中的流数据项。
在图5中,时间在从上向下的时间方向上流逝。图5顶部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态1”;图5顶部第二行所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态2”;图5中部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态3”;图5底部第二行所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态4”;以及图5底部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态5”。
换句话说,在图5中,随着时间的流逝,分别将服务器11、网络12、缓存器24以及再生部26的状态从状态1经过状态2、3、4转换为状态5。
注意,在图5中,如图3和4的情况,为了简化说明,仅示出构成图2所示客户端13的部件中的缓存器24和再生部26。此外,在图5中,白色方块表示用户执行任意操作之前的流数据,而黑色方块表示用户已经执行任意操作之后的流数据。
在图5所示的状态1中,基于如果用户执行了诸如信道改变的固定操作而从客户端13接收的改变信道的通知,服务器11将待被发送的流数据从操作前的流数据切换为操作后的流数据。此时,客户端13还没有从服务器11接收到操作后的流数据,使得缓存器24存储操作前的流数据,且再生部26再生操作前的流数据。
缓存器24由先入先出(FIFO)存储器构成。当客户端13通过网络12从服务器11接收操作后的流数据时,如状态2~4所示,缓存器24以其存储顺序来读取数据项。因此,缓存器24按顺序读取操作前的流数据项。此时,由于从缓存器24读取的数据项全部为操作前的流数据,所以再生部26再生操作前的流数据。
当任何操作后的流数据变为缓存器24中所存储的流数据项中最后的一个时,缓存器24读取操作后的流数据,并且如状态5所示,再生部26随后再生该流数据。
此外,存在在用户执行任意操作的时间点通过删除存储操作前的流数据的缓存器中的内容(即,通过刷新(flush)它们)而没有任何延迟地再生操作后的流数据的方法。
图6示出了在用户执行任意操作的时间点缓存器24中的刷新操作。注意,在图6中,为了简化说明,仅示出了构成客户端13的部件中的缓存器24和再生部26。
如图5的情况,在图6中,图6顶部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态1”;图6中部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态2”;以及图6底部所示的服务器11、网络12、缓存器24以及再生部26的状态被称作“状态3”。换句话说,在图6中,随着时间的流逝,分别将服务器11、网络12、缓存器24以及再生部26的状态从状态1经过状态2转换为状态3。
在图6中,如果用户执行了诸如信道改变的固定操作,如状态1所示,响应于来自客户端13的改变信道的通知,服务器11将待被发送的流数据从操作前的流数据切换为操作后的流数据。此时,刷新客户端13的缓存器24,然后再生部26可再生操作前的流数据。
当客户端13随后通过网络12从服务器11接收操作后的流数据时,已经刷新了缓存器24,使得缓存器24可以如状态2所示存储操作后的流数据作为最后被存储的流数据。然后,再生部26如状态3所示直接从刷新的缓存器24读出操作后的流数据并将其再生。
因此,在如图6所示刷新了缓存器24的相关技术的客户端13中,缓存器24刷新存储的操作前的流数据,然后存储操作后的流数据,使得再生部26可再生操作后的流数据。
日本专利申请公开第2004-356695号已经披露了一种数据分配系统,其中,如果用户操纵遥控器,则将溢出阈值变为其低于普通阈值的用于操作的阈值;以及如果确定缓存器中的流数据量超过用于操作的阈值,则可通过控制将被快速进行的任何再生处理缩短在显示装置上显示内容的时间段。
发明内容
然而,如上所述,在图5所示的客户端13中,在用户操作时,再生已被存储在缓存器中的操作前的流数据,然后再生操作后的流数据,使得难以直接将数据变为操作后的流数据,由此不能直接反映用户的操作,从而由于数据传输的这种延迟使系统对用户不友好。
具体地,如图5所示,在客户端13中,在再生部26再生已存储在缓存器24中过去固定时间段后的流数据,使得在用户执行任何预定操作时,如果还没有完成已存储在缓存器24中的操作前的流数据的再生,则难以对应于该操作再生操作后的流数据。这引起了误操作。
如图6所示,已经提出通过在用户操作时刷新存储在缓存器24中的操作前的流数据直接再生操作后的流数据的方法。
根据该方法,尽管可通过刷新存储在存储器24中的操作前的流数据直接再生来自服务器11的操作后的流数据,但是也难以再生已通过刷新删除的操作前的流数据。换句话说,操作前的流数据的这种删除不能使用户观看到刷新部分的图像,并能够使用户听到时间上中断的音频。
具体地,如果用户指示客户端13改变连接至服务器11的DVD记录器等中诸如快进再生、回倒、暂停、慢放再生的相同内容的再生速度,则会根据操作前的流数据和操作后的流数据之间的时间发生割裂,这会引起用户操作的不便。例如,如图7所示,如果在位置1和2之间刷新操作前的流数据,则如果当再生位置1处的流数据时用户暂停系统,则因为位置1和2之间不存在操作前的流数据,所以在位置2处观看并听见基于暂停的流数据的图像和音频。
期望提供数据传输系统、接收装置和接收方法、以及发送装置和发送方法,其允许减少在数据传送中的任何延迟,并通过在用户操作时动态地改变存储在缓存器中的流数据的再生速度来防止数据时断时续。
根据本发明的实施例,提供了一种数据传输系统,包括:发送装置,用于发送流数据;以及接收装置,用于从发送装置接收流数据,并向发送装置发送切换流数据的请求。发送装置响应于从接收装置接收的切换流数据的请求来切换流数据。接收装置包括:接收部,用于从发送装置接收流数据;存储部,用于临时存储所接收的流数据,然后传送所接收的流数据;操作检测部,用于检测用户是否进行了请求切换流数据的操作;以及控制部,用于当操作检测部检测到用户进行了请求切换流数据的操作时,控制存储在存储部中的流数据的传送速率,以及控制存储在存储部中的流数据的再生速度,从而执行存储在存储部中的流数据的快进再生。发送装置包括:信息添加部,用于当发送装置从接收装置接收到表示用户进行了请求切换流数据的操作的通知时,向流数据添加用户进行了请求切换流数据的操作的附加信息;以及发送部,用于将添加有附加信息的流数据发送给接收装置。
在该实施例中,当发送装置从接收装置接收到表示用户进行了请求切换流数据的操作的通知时,将用户进行了请求切换流数据的操作的附加信息添加至流数据,然后将添加有附加信息的流数据发送给接收装置。接收装置从发送装置接收这种流数据,然后临时存储并传送所接收的流数据。还检测用户是否操作了流数据的切换信息,使得可以控制流数据的传送速率。如果检测到用户进行了请求切换流数据的操作,则控制存储在存储部中的流数据的再生速度,从而执行存储在存储部中的流数据的快进再生。
这使得能够以非常小的延迟传输数据,并防止数据时断时续。
根据本发明的另一实施例,提供了一种接收流数据并发送切换流数据的请求的接收装置。接收装置包括:接收部,用于接收流数据;存储部,用于临时存储所接收的流数据,随后传送所接收的流数据;操作检测部,用于检测用户是否进行了请求切换流数据的操作;以及控制部,用于当操作检测部检测到用户进行了请求切换流数据的操作时,控制存储在存储部中的流数据的传送速率,以及控制存储在存储部中的流数据的再生速度,从而执行存储在存储部中所的流数据的快进再生。
在本发明的该实施例中,接收装置从发送装置接收流数据,然后将所接收的流数据临时存储在存储部中,随后将其传送。还检测用户是否进行了请求切换流数据的操作,使得可以控制流数据的传送速率。如果检测到用户进行了请求切换流数据的操作,则控制存储在存储部中的流数据的再生速度,从而执行存储在存储部中的流数据的快进再生。
这使得能够以非常小的延迟接收数据,并防止数据时断时续。
此外,当操作检测部检测到用户进行了请求切换流数据的操作时,发送部可向发送装置发送用户进行了请求切换流数据的操作的通知,以允许将用户进行了请求切换流数据的操作的附加信息添加至发送装置中的流数据。控制部可以控制存储在存储部中的流数据的再生速度以执行快进再生,直至检测到添加至存储在存储部中的流数据的附加信息。
当检测到附加信息时,控制部还可以控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的慢放再生,直至存储在存储部中的流数据的量变为预定量。
当操作检测部检测到用户进行了请求切换流数据的操作时,发送部可向发送装置发送用户进行了请求切换流数据的操作的通知,以允许将用户进行了请求切换流数据的操作的附加信息添加至发送装置中的流数据。控制部可控制存储在存储部中的流数据的再生速度,以当检测到添加至存储在存储部中的流数据的附加信息到达接收装置时开始存储在存储部中的流数据的快进再生,以及再生存储在存储部中的流数据预定的时间段,直到添加有附加信息的部分。
可将预定时间段设置为1秒以下。
在已经完成流数据的快进再生之后,控制部可控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的慢放再生,直至存储在存储部中的流数据达到预定量。
当操作检测部检测到用户进行了请求切换流数据的操作时,信息添加部可将用户进行了请求切换流数据的操作的附加信息添加至最后从发送装置接收的存储在存储部中的流数据项中的流数据。控制部可控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的快进再生,直至检测到添加至存储在存储部中的流数据的附加信息。
当检测到附加信息时,控制部可控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的慢放再生,直至存储在存储部中的流数据达到预定量。
当操作检测部检测到用户进行了请求切换流数据的操作时,存储部可存储添加至最后从发送装置接收的存储在存储部中的流数据项中的流数据的时间点。控制部可控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的快进再生,直至添加至所再生的流数据的时间点超过存储的时间点。
当检测到附加信息时,控制部可控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的慢放再生,直至存储在存储部中的流数据达到预定量。
可以提供由用户操作的操作部以指示提供数据流的外部设备的切换、信道的切换、或外部装置的再生、回倒、快进、暂停或停止。用户的操作包括关于发送流数据的装置的切换、信道的切换、或外部装置的再生、回倒、快进、暂停或停止的指示。
根据本发明又一实施例,提供了一种从发送装置接收流数据并将切换流数据的请求发送至发送装置的接收装置的接收方法。该接收方法包括步骤:通过接收装置的接收部从发送装置接收流数据;将所接收的流数据临时存储在接收装置的存储部中,然后传送所接收的流数据;通过接收装置的操作检测部检测用户是否进行了请求切换流数据的操作;以及当操作检测部检测到用户进行了请求切换流数据的操作时,控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的快进再生。
根据发明的其它实施例,提供了使计算机执行接收装置的上述接收方法的程序产品,其中,接收装置从发送装置接收流数据并将切换流数据的请求传输至发送装置。
在本发明的这些实施例中,接收装置从发送装置接收流数据,然后临时存储和传送所接收的流数据。还检测用户是否进行了请求切换流数据的操作,使得可以控制流数据的传送速率。如果检测到用户进行了请求切换流数据的操作,则控制存储在存储部中的流数据的再生速度以执行存储在存储部中的流数据的快进再生。
这使得能够以非常小的延迟接收数据,并防止数据时断时续。
根据发明的再一实施例,提供了一种发送装置,其将流数据发送至每个接收装置,并响应于从任意接收装置接收的切换流数据的请求切换流数据以发送切换的流数据。该发送装置包括:信息添加部,用于当发送装置从接收装置接收表示用户进行了请求切换流数据的操作的通知时,将用户进行了请求切换流数据的操作的附加信息添加至流数据;以及发送部,用于将添加有附加信息的流数据发送至接收装置。
在该实施例中,当发送装置从接收装置接收到表示用户进行了请求切换流数据的操作的通知时,将用户进行了请求切换流数据的操作的附加信息添加至流数据,并将添加有附加信息的流数据发送至接收装置。
这使得能够以非常小的延迟发送数据,并防止数据时断时续。
当用户进行了请求切换流数据的操作时,存储部可临时存储流数据,并刷新存储在其中的流数据。
当用户进行了请求切换流数据的操作时,存储部可以刷新存储在其中的的流数据,仅留下完整组成的一个图像的流数据。
可以提供接收部,使其从接收装置接收表示用户进行了请求切换流数据的操作的通知。信息添加部可响应于接收的通知将附加信息添加至流数据。
用户操作包括关于提供流数据的外部设备的切换、信道的切换、或流数据的再生、回倒、快进、暂停或停止的指示。
根据发明的再一实施例,提供了一种发送装置的发送方法,其中,发送装置将流数据发送至每个接收装置,并响应于从任意接收装置接收的切换流数据的请求切换流数据以发送流数据。该方法包括步骤:当发送装置从接收装置接收到表示用户进行了请求切换流数据的操作的通知时,通过发送装置的信息添加部将用户进行了请求切换流数据的操作的附加信息添加至流数据;以及通过发送装置的发送部发送添加有附加信息的流数据。
根据发明的又一其它实施例,提供了一种使计算机执行发送装置的上述发送方法的程序产品,其中,发送装置将流数据发送至每个接收装置,并响应于从任意接收装置接收的切换流数据的请求来切换流数据以发送切换的流数据。
在本发明的这些实施例中,当发送装置从接收装置接收到表示用户进行了请求切换流数据的操作的通知时,将用户进行了请求切换流数据的操作的附加信息添加至流数据,然后将添加有附加信息的流数据发送至接收装置。
这使得能够以非常小的延迟发送数据,并防止数据时断时续。
本说明书的结论部分特别指出并直接要求了本发明的主题。然而,通过参照附图阅读说明书的其余部分并结合附图,本领域的技术人员将更好地理解本发明的结构和操作方法以及本发明进一步的优点和目的,在附图中,相同的参考标号表示相同的元件。
附图说明
图1是用于示出相关技术的数据流系统1的结构框图;
图2是用于示出相关技术的客户端的结构框图;
图3是用于说明缓存器状态的示图;
图4是用于说明缓存器状态的示图;
图5是用于说明用户操作时存储在缓存器中的流数据项的示图;
图6是用于说明用户操作时刷新存储在缓存器中的流数据的示图;
图7是用于说明刷新后的流数据的示图;
图8是用于示出应用本发明的数据流系统101的实施例的结构框图;
图9是用于示出客户端的硬件结构的框图;
图10是用于示出服务器的功能结构的框图;
图11是用于示出客户端的功能结构的框图;
图12是用于解释流数据发送处理的流程图;
图13是用于说明帧的示图;
图14是用于说明RTP数据包的示图;
图15是用于解释通过图11所示的客户端执行的流数据接收处理的流程图;
图16是用于解释通过图11所示的再生速度控制部执行的再生速度控制处理的流程图;
图17是用于示出快进再生模式的示图;
图18是用于示出慢放再生模式的示图;
图19是用于示出普通再生模式的示图;
图20是用于示出客户端另一功能结构的框图;
图21是用于解释通过图20所示的客户端执行的流数据接收处理的流程图;
图22是用于说明存储在缓存器中的流数据项的示图;
图23是用于示出客户端的又一功能结构的框图;
图24是用于解释通过图23所示的客户端执行的流数据接收处理的流程图;
图25是用于说明存储在缓存器中的流数据项的示图;
图26是用于解释通过图23所示的再生速度控制部执行的再生速度控制处理的流程图;以及
图27是用于解释通过图11所示的再生速度控制部执行的再生速度控制处理的流程图。
具体实施方式
尽管下面将描述本发明的实施例,但对于在说明书和附图中描述的实施例的所有内容,如果有的话,在说明述和附图中描述但没有描述为对应于任意权利要求的实施例不应被理解为不对应于权利要求。相反,如果一个实施例在说明书和附图中被描述为对应于任意权利要求的实施例,该实施例也不应理解为不对应于除该权利要求之外的其它权利要求。
下面,将参照附图描述本发明的实施例。图8示出了应用本发明的数据流系统101的实施例的结构。
数据流系统101包括服务器111、图像和音频源112、网络113、以及客户端114。客户端114包括操作部115和输出部116。
服务器111由通过流方式来发送诸如运动图像的内容的专用服务器等构成。服务器111经由网络113将通过对从图像和音频源112提供的图像和音频信号执行预定处理所获得的流数据发送至客户端114。
图像和音频源112是具有模拟或数字形式的图像信息和/或音频信息的信号源。可由通过天线接收广播信号并输出图像和音频信号的调谐器(未示出)以及诸如DVD记录器、硬盘记录器、视频磁带记录器的外部装置组成图像和音频源112。也可以由具有各种文件的图像信息和/或音频信息的源组成图像和音频源112。图像和音频源112还可包括在服务器111中。
网络113被连接至服务器111和客户端114。网络113由作为使用无线通信的网络的所谓无线局域网(LAN)组成。网络113允许服务器111和每个客户端114根据诸如实时传输协议(RTP)的任何协议来互相通信。
注意,对于无线LAN标准,例如,使用电气和电子工程师协会(IEEE)802.11。然而,除无线LAN外,网络113还可由使用遵循以太网(商标)等的有线通信的网络,诸如互联网的相互连接的网络、通信信道等组成。如果协议包括诸如时戳的时间信息,则可在其中使用除RTP之外的另一种协议。
客户端114由可连接至网络113的装置(例如,个人计算机、游戏机、或移动电话)组成。客户端114通过网络113从服务器11接收流数据。在客户端114中,将接收的流数据提供给输出部116。输出部116在诸如液晶显示器的显示器上显示基于接收的流数据的图像,并通过扬声器来发出对应于所显示图像的音频。因此,用户可从服务器111观看和/或倾听流数据。
如果用户通过设置在客户端114中的操作部115操作客户端114,则客户端114通过网络113向服务器111发送对应于他或她的操作的请求。然后,服务器111接收该请求,并通过网络113将与从客户端114接收的请求相对应的流数据发送至客户端114。
注意,尽管在图8中为数据流系统101一个一个地设置服务器111、网络113、以及客户端114,但也可分别由多个来组成。当然,尽管将操作部115和输出部116示为一个,但也可以分别由多个组成这些部件。此外,尽管在图8中数据流系统101设置有多个图像和音频源112,但也可由一个图像或音频源来构成该源。
图9示出了客户端114的硬件结构。
客户端114中的中央处理单元(CPU)151基于存储在只读存储器(ROM)152或存储部158中的程序执行各种处理。在随机存取存储器(RAM)153中,适当地存储将在CPU 151上执行的程序、其中使用的数据等。这些CPU 151、ROM 152、和RAM 153经由总线154相互连接。
对于CPU 151,通过总线154连接输入/输出接口155。对于输入/输出接口155,连接有由键盘、鼠标、麦克风等组成的输入部156和由显示器、扬声器等组成的输出部157。CPU 151执行对应于由输入部156输入的命令的各种处理。然后,CPU 151控制输出部157输出从处理结果获得的图像、音频等。注意,输入部156和输出部157分别对应于图8所示的操作部115和输出部116。
例如,连接至输入/输出接口155的存储部158由存储被CPU151执行的程序和各种将在其中使用的数据的硬盘组成。通信部159通过网络113与外部装置进行通信。
可从用于通过通信部159进行下载的外部服务器获取任意程序,并将其存储在存储部158上。
当安装诸如磁盘、光盘、磁光盘、半导体存储器等的可移动介质161时,连接至输入/输出接口155的驱动器160驱动这些可移动介质,以获取存储在其中的程序和数据。将这样获取的程序和数据根据需要传送至存储部158,并存储在其中。
服务器111也具有与客户端114一样的硬件结构,将省略对其的详细描述。服务器111和客户端114不限于图9所示的内部结构,根据需要可以添加或删除任意功能,使得服务器111和客户端114可具有对应于功能的结构。
换句话说,服务器111的硬件结构不限于图9所示的结构,且服务器111可至少具有稍后描述的图10中所示的功能结构。
图10示出了服务器111的这种功能结构。
服务器111包括控制部211、通信部212、输入部213、编码器214、打包器(packetizer)215、缓存器216、以及标记信息添加部217。
控制部211控制服务器111各个部件的操作。
通信部212在控制部211的控制下通过网络113与诸如客户端114的任意外部装置进行通信。通信部212包括:发送部212a,用于发送各种包;以及接收部212b,用于接收各种包。
在控制部211的控制下,对应于图9所示输入部156的输入部213从图像和音频源112接收图像信号和音频信号,并将这样接收的图像信号和音频信号提供给编码器214。如果来自图像和音频源112的图像信号和音频信号为模拟数据信号,则可以添加将来自图像和音频源112的图像信号和音频信号从模拟数据转换为数字数据的A/D转换器(未示出),并将通过这种转换获得的数字数据提供给编码器214。
编码器214根据预定的编码方式对来自图像和音频源112的图像信号和音频信号进行编码,并将这样编码的图像信号和音频信号提供给打包器215。下面,将描述在使用运动图像专家组相4(MPEG4)作为图像信号和音频信号的编码方式情况下的该实施例,但是还可以使用诸如MPEG2、进阶视频编码(AVC)、H.264的任何其它编码方式。
打包器215接收图像信号和音频信号,并将图像数据包括在RTP方式的包中以生成RTP包。打包器215将生成的RTP包提供给缓存器216,并且缓存器216存储所生成的RTP包。
注意,如果已经将来自图像和音频源112的图像信号和音频信号转换成MPEG4格式的信号,则因为不需要编码器214的编码处理,所以打包器215直接将从输入部213接收的MPEG4的数据包括在RTP方式的包中以生成RTP包。
接收部212b通过网络113从客户端114接收用于切换操作的请求。接收部212b将接收的用于切换操作的请求提供给标记信息添加部217。
用于切换操作的请求被称作当操纵客户端114的用户通过利用在客户端114中的输出部116上所显示的用于远程控制的屏幕来执行诸如切换调谐器中信道的预定操作时客户端114通过网络113发送至服务器111的请求。该请求能够使服务器111执行对应于用户操作的任何操作。用户的预定操作为信道的切换、提供流数据的外部装置的切换、以及对诸如输出流数据的DVD记录器、硬盘记录器、和磁带录像机的外部装置的诸如再生、回倒再生、快进再生、暂停、或停止的技巧播放的操作。
标记信息添加部217基于从接收部212b接收的用于切换操作的请求将任何标记信息添加至通过打包器215生成RTP包。
这里,标记信息被称作表示已经由操纵客户端114的用户执行了预定操作的信息。用户的预定操作为调谐器中信道的切换、技巧播放的操作等。
如果标记信息添加部217将任意标记信息添加至RTP包,则打包器215将添加有标记信息的RTP包提供给缓存器216,并且缓存器216存储这种RTP包。
例如,缓存器216由具有例如环形缓冲区结构的FIFO型存储器组成,并临时存储从打包器215接收的RTP包。换句话说,以最初存储的顺序将存储在缓存器216中的RTP包提供给通信部212。
发送部212a通过网络113将存储在缓存器216中的RTP包发送至客户端114。这能够使服务器111通过网络113将流数据发送至客户端114。
客户端114的硬件结构不限于图9所示的结构,客户端114可至少具有将稍后描述的图11所示的功能结构。
图11示出了客户端114的这种功能结构。
客户端114包括操作部115、输出部116、控制部251、通信部252、缓存器253、解码器254、缓存器255、再生速度控制部256、以及再生部257。
控制部251控制客户端114中各个部件的操作。
对应于图9所示通信部159的通信部252在控制部251的控制下通过网络113与外部装置进行通信。该通信部包括:发送部252a,用于发送各种包;以及接收部252b,用于接收各种包。
接收部252b通过网络113从服务器111接收流数据,并解调该流数据以将其提供给存储流数据的缓存器253。然后,根据解码器254执行处理的时间点,将存储在缓存器253中的流数据提供给解码器254。
解码器254分别对来自存储在缓存器253中的流数据的图像数据和音频数据进行解码,并将通过解码获得的流数据提供给缓存器255。缓存器255存储经过解码的流数据。
例如,解码器254仅能够在控制部251的控制下对存储在缓存器253中的流数据中的I帧进行解码,或者能够对存储在缓存器253中的流数据进行解码,并仅将特定帧提供给缓存器255,从而从通过解码获得的流数据中的8个帧中选择一个帧。
例如,缓存器255由具有例如环形缓冲区结构的FIFO型存储器组成,并存储从解码器254接收的RTP包。换句话说,以最初存储的顺序将存储在缓存器255中的流数据提供给再生速度控制部256。
注意,考虑到网络113的传输速度以及服务器111和客户端114的处理性能,将缓存器255的容量设置为具有一定充裕的空间。
再生速度控制部256控制存储在缓存器255中的流数据的再生速度,使得可以以对应于再生模式的再生速度再生流数据,将在稍后对其进行详细描述。换句话说,通过将存储在缓存器255中的流数据提供给再生部257的再生速度控制部256来提取流数据。
该实施例的再生模式分为三种模式:普通再生模式、快进再生模式、以及慢放再生模式。当再生模式为普通再生模式时,再生速度控制部256再生存储在缓存器255中的流数据,使其能够实时地被再生。当再生模式为快进再生模式时,再生速度控制部256再生存储在缓存器255中的流数据,使其能够在比实时更短的时间段内被再生。换句话说,再生速度控制部256再生存储在缓存器255中的流数据,使其能够被快进再生。当再生模式为慢放再生模式时,再生速度控制部256再生存储在缓存器255中的流数据,使其能够在比实时更长的时间段内被再生。换句话说,再生速度控制部256再生存储在缓存器255中的流数据,使其能够被慢放再生。
因此,当再生模式为慢放再生模式时,再生速度控制部256再生存储在缓存器255中的流数据,使其能够在比普通再生时间段更长的时间段内被再生。根据流数据中的图像数据,通过在当更新图像以形成更长间隔的期间调整间隔时间,可实现慢放再生模式。
根据流数据中的音频数据,例如通过增加采样数,似乎可延长音频。换句话说,当连续再生这种仿佛被延长了的音频帧时,也可以实现音频慢放再生模式。
这使得能够即使当执行慢放再生时也能够不发生任何的音频中断来再生音频。如果增加采样数,则音频频率下降,但是通过恰当地调节慢放再生的程度,可以再生音频,而不会给用户带来任何不适的感觉。这里,基于存储在缓存器255中的流数据的量,可将慢放再生的程序设定为固定值,例如,105%,或者在例如从100%至120%的预定范围内连续或逐渐地改变。注意,上述的105%意味着其再生时间的周期与普通标准再生时间的周期相比延长了5%。
尽管在该实施例中将包括“普通再生模式”、“快进再生模式”、以及“慢放再生模式”的再生模式描述为实例,但再生模式还可以包括任何其它再生模式。
再生部257再生从再生速度控制部256接收的流数据,并将再生的流数据提供给输出部116。
对应于图9所示的输出部157的输出部116由诸如LCD的显示器、扬声器等组成。输出部116基于从再生部257接收的流数据显示图像,并发出对应于图像的音频。
对应于图9所示输入部156的操作部115将对应于用户的预定操作的操作信号提供给控制部251。注意,预定操作为信道的切换、技巧播放的操作等。
控制部251基于来自控制部115的操作信号将用于切换操作的请求提供给发送部252a。发送部252a从控制部251接收用于切换操作的请求,并通过网络113将用于切换操作的请求提供给服务器111。
下面将描述构成数据流系统101的服务器111和客户端114的操作。
首先,将参照图10所示的框图和图12所示的流程图描述服务器111的流数据发送处理。
在步骤S11中,控制部211确定是否通过网络113从客户端114接收到用于开始流的请求。
如果在步骤S11中确定没有从客户端114接收到用于开始流的请求,则处理返回到步骤S11,然后重复上述处理。换句话说,重复步骤S11的处理,直至用户操作客户端114以使服务器111接收流数据,并且在步骤S11中,确定接收到用于开始流的请求。
如果在步骤S11中确定从客户端114接收到用于开始流的请求,则在步骤S12中,输入部213从图像和音频源112读出图像和音频信号,并将这些图像和音频信号提供给编码器214。
在步骤S13中,编码器214从输入部213接收图像和音频信号,并根据诸如MPEG4的预定编码方式对图像和音频信号进行编码。然后,编码器214将关于通过编码获得的图像和音频信号的流数据提供给打包器215。
现在,从服务器111发送的流数据包括多个帧,每个帧都组成一幅图像。流数据能够使通过连续显示这些帧而显示运动图像。
基于根据设备特性和被使用的应用程序等,可以设置在一秒的周期内显示多少帧。例如,通过增加表示在一秒的周期内可显示的帧数的帧率,可使显示的图像质量平滑,而通过减小帧率,可使显示的图像质量粗糙,从而可以忽略任何帧。例如,可将帧率设置为30帧/秒。换句话说,此时可在每个1/30秒内显示每个帧。
此外,通过设置在一秒的周期内流过的数据量,可改变显示的图像质量。例如,通过增加表示在一秒的周期内流过的数据量的比特率,可以以高图像质量显示图像,而通过降低比特率,可以劣化图像质量。换句话说,比特率与显示的图像质量具有折中关系,使得通过增加比特率,可增加数据量,而通过减小比特率,可减少数据量。
这些帧不是彼此独立的,而是以画面组(GOP)单元为单位压缩或延伸的。GOP由内画面(I)帧、预测画面(P)帧和双向预测画面(B)帧组成。
I帧具有可完全组成一个画面的信息,并且为GOP中的基准帧。I帧仅进行帧内压缩,这使其压缩率较小并保留更多的数据量。
P帧仅具有关于与在先的帧不同的信息,并依赖于在先的帧。P帧除进行帧内压缩之外,还基于与I帧的不同而进行仅沿时间轴方向的预测以使用帧间压缩。这使得P帧的压缩率相比于I帧增加,并且减少了其数据量。
B帧具有关于与在先的帧和在后的帧不同的信息,并依赖于在先的帧和在后的帧。B帧除进行帧内压缩之外,还进行双向预测,以使用利用与在先和在后的帧的每一个的不同的双向预测压缩。这使得B帧的压缩率相比于I帧进一步增加。
即,P帧和B帧不单独再生图像,但再生每个帧的图像,帧的序列(队列)是必不可少的。
图13示出了的帧的细节。在图13中,方形表示帧,以及附于各个帧的字母I、P和B分别表示这些帧为I帧、P帧和B帧。假设在图13中,时间从左向右流逝。
在图13中,由6个帧(I帧、B帧、B帧、P帧、B帧、以及B帧)组成GOP。
在GOP中,第一个I帧具有可完全组成一个画面的信息,使得第一个I帧与任何其它帧无关。第一个I帧之后的第二个B帧依赖于在先的帧和在后的帧,使其依赖于如图13通过虚线所示的在先的B帧和在后的I帧。如图13中通过虚线所示的一样,第二个B帧之后的第三个B帧类似地依赖于在先的P帧和在后的B帧。
第三个B帧之后的第四个P帧依赖于在后的帧,使其如图13中由虚线所示依赖于I帧。第四个P帧之后的第五个B帧如图13中由虚线所示依赖于在先的B帧和在后的P帧。第五个B帧之后的第六个B帧如图13中由虚线所示依赖于在先的I帧和在后的B帧。
编码器214将由如图13所示的帧组成的流数据提供给打包器215。
重新参照图12所示的流程图,在步骤S214中,打包器215从编码器214接收流数据,并将流数据包括在具有RTP方式的包中以生成RTP包。
在步骤S215中,控制部211监控接收部212b的状态,从而确定是否通过网络113从客户端114接收到用于切换操作的请求。
如果在步骤S15中没有从客户端114接收到用于切换操作的请求,则处理跳过步骤S16~S18,进入步骤S19,在该步骤中,缓存器216从打包器215接收RTP包,并将RTP包存储在其中。这使得将在打包器215中生成并将被发送至客户端114的RTP包存储在缓存器216中。
在步骤S20中,发送部212a通过网络113接收存储在缓存器216中的RTP数据包并将其发送至客户端114。这使得基于用于开始从客户端114接收的流的请求,服务器111通过网络113将流数据发送至客户端114。
在步骤S21中,控制部211监控输入部213的状态,以确定是否已经完成通过输入部213从图像和音频源112读取的图像和音频信号。
如果在步骤S21中确定没有完成来自图像和音频源112的图像和音频信号,则处理返回到步骤S12,并重复上述处理。
换句话说,在步骤S12~S21中,服务器111对从图像和音频源112接收的图像和音频信号进行编码,并根据编码的图像和音频信号生成RTP包。然后,服务器111在缓存器216中存储生成的RTP包,并同时通过网络113将存储的RTP包发送至客户端114。这使得流数据通过网络113从服务器111被发送至客户端114。稍后将描述步骤S16~S18。
如果用户随后操作如图11所示的客户端114中的操作部115,以将被客户端114接收的流数据的信道切换至另一信道,并在步骤S15中确定从客户端114接收到用于切换操作的请求,则标记信息添加部217基于从接收部212b接收的用于切换操作的请求将标记信息添加至通过打包器215生成的RTP包。
图14示出了RTP包。RTP包的开头包括具有2比特的版本信息,其在图14中表示为“V”。版本信息与RTP包的版本相关。
在图14中表示为“P”的1比特的填充符紧接着版本信息。在图14中表示为“X”的1比特的扩展信息紧接着填充符。扩展信息表示扩展报头是否存在,并且如果RTP包包括扩展报头,则将其值设置为预定值。
在RTP包中,在图14中表示为“CC”的贡献源(CSRC)量紧接着扩展信息。CSRC量表示CSRC标识符的数目。
通过简档定义在图14中表示为“m”的紧接CSRC量的1比特的标志信息。
标志信息后的具有7比特的有效负荷类型为定义RTP包格式的信息。在如图14所示的RTP包中,有效负荷类型(PT)设置为33。
有效负荷类型之后的序列号为具有16比特的信息。序列号表示RTP包的再生顺序,并每次发送都增大。序列号被用于检测任何包损失,并恢复RTP包的再生顺序。
序列号之后具有32比特的时戳为存储在RTP包中的流数据的顶部八位字节表示其采样时间的信息。当扩展RTP包时基于时戳控制处理时间,使得可以控制实时图像或音频的再生。为包括相同帧的流数据的RTP包设置共同的时戳。
时戳之后的同步源(SSRC)标识符为表示包括在RTP包中的流数据的源的32比特的信息。
标记信息紧接着RTP包中的SSRC标识符。标记信息在图14终表示为“标记信息”。标记信息与操纵客户端114的用户已经完成预定操作的这种信息相关,其中,例如在1~65535的预定范围内设置序列号。例如,标记信息添加部217将包括在RTP包中的标记信息的序列号加1,并将增加的序列号作为标记信息的添加至RTP包。
流数据紧接着RTP包中的标记信息。流数据被表示为图14中的“原始数据”。
RTP包为包括将被发送至客户端114的流数据的包的实例。尽管在该实施例中已将RTP用作发送流数据的协议,但也可以使用诸如实时流协议(RTSP)或对话描述协议(SDP)的其它协议。
重新参照图2的流程图,在步骤S17,刷新存储在缓存器216中的RTP包。这使得所有存储在缓存器216中的RTP数据包被破坏。
注意,仅可以刷新特定数据,而不是存储在缓存器216中的所有RTP包。例如,在缓存器216中,作为指定数据,仅保留不依赖于在先的帧和在后的帧的I帧,而刷新除I帧之外的数据。这能够使用户通过利用保留在缓存器216中的适于再生图像的数据操作客户端114来观看和听见流数据,而不会感觉到任何的时间间断。
如果缓存器216包括多个I帧,则可以保留所有的I帧,或者可以仅保留最新的I帧。如果仅保留最新的I帧,则当缓存器216存储流数据时,服务器111中另一个缓存器(未示出)存储在缓存器216中存储的I帧中最新的I帧。然后,在已经刷新存储在缓存器216中的所有数据后,缓存器216存储在另一缓存器中存储的最新的I帧。这使得缓存器216仅存储最新的I帧。
在步骤S18中,输入部213在控制部211的控制下切换将被如此读取的图像和音频信号。特别地,如果将被客户端114接收的流数据的信道被改变为另一信道,则输入部213读取另一信道的图像和音频信号。
在步骤S19中,缓存器216存储从打包器215接收的RTP包。这使得只有通过标记信息添加部217添加了标记信息的RTP包被存储在缓存器216中。以最高速度通过网络113将基于添加有标记信息的RTP包所生成的帧发送至客户端114。
在步骤S20中,发送部212a通过网络113将存储在缓存器216中的RTP包发送至客户端114。在步骤S21中,重复上述步骤S12~S21的处理,直至确定已经完成通过输入部213从图像和音频源112读取的图像和音频信号。
换句话说,缓存器216在将标记信息添加至RTP包后存储包括由用户改变的另一信道的流数据的RTP包,并且发送部212a通过网络113将存储的RTP包发送至客户端114。
如果已经完成了通过输入部213从图像和音频源112读出的图像和音频信号,并在步骤S21中确定已经完成了来自图像和音频源112的图像和音频信号,则服务器111的流数据发送处理结束。
因此,服务器111通过网络113将流数据发送至每个客户端114。
下面,将参照图11所示的框图和图15所示的流程图描述图11所示的客户端114的流数据接收处理。
在步骤S31中,控制部251确定用户是否基于来自操作部115的操作信号请求客户端114以开始流。
如果在步骤S31中确定用户没有请求客户端114开始流,则处理重复步骤S31。换句话说,重复步骤S31的处理,直至用户通过他或她对操作部115的操作,用户请求客户端114开始流,然后在步骤S31中确定他或她请求客户端114开始流。
如果在步骤S31中确定用户请求客户端114以开始流,则在步骤S32中,发送部252a在控制部251的控制下通过网络113将用于开始流的请求发送至服务器111。
在步骤S33,控制部251监控通信部252的状态,以确定是否基于用于开始流的请求通过网络113从服务器111接收流数据。
如果在步骤S33中确定没有从服务器111接收到流数据,则在步骤S33中重复上述处理。换句话说,重复步骤S33的处理,直至服务器111通过网络113发送流数据,然后在步骤S33中确定从服务器111接收了流数据。
另一方面,随后在步骤S33中确定接收到流数据,控制部115在步骤S34中确定用户是否执行了诸如信道改变的任何切换操作,即,他或她基于从操作部115接收的操作信号执行上述预定操作。
如果在步骤S34中确定用户执行了任意切换操作,则在步骤S35中,基于来自操作部115的操作信号,在控制部251的控制下,发送部252a通过网络113将用于切换操作的请求发送至服务器111。这使得客户端114通知服务器111用户已经执行了预定操作。
另一方面,如果在步骤S34中确定用户没有执行任何切换操作,则跳过步骤S35的处理,并且处理进入步骤S36,在该步骤终,缓存器253存储通过网络113从服务器111接收和从接收部252b提供的流数据。
在步骤S37中,在解码器254执行任意处理时解码器254读取存储在缓存器253中的流数据,并以预定解码方式对读取的流数据进行解码。解码器254将这样解码的流数据提供给缓存器255,并且缓存器255将解码的流数据存储在其中。
在步骤S38中,缓存器255从解码器254接收解码的流数据并将其进行存储。注意,由于缓存器255为FIFO型存储器,所以从最初存储的项开始依次将存储在缓存器255中的流数据项提供给再生速度控制部256。
在步骤S39中,再生速度控制部256执行任何再生速度控制处理。具体地,再生速度控制部256控制存储在缓存器255中的流数据的再生速度,使得可以以对应于普通再生模式、快进再生模式以及慢放再生模式的再生速度来再生流数据。
这里,将参照图16所示的流程图描述图11所示的再生速度控制部256的再生速度控制处理(对应于步骤S39中的处理)的细节。
在步骤S51中,基于来自操作部115的操作信号,再生速度控制部256在控制部251的控制下确定用户是否执行了诸如信道改变的任何切换操作,即,任何预定操作。
如果在步骤S51中确定用户执行了预定操作,则再生速度控制部256将其再生模式设置为快进再生模式。具体地,例如,再生速度控制部256从存储在缓存器255中的帧1~13中选择开头的帧1,然后再生速度控制部256选择每第四帧的帧,即,帧5、帧9以及帧13。再生速度控制部256将选择的帧1、5、9以及13提供给再生部257。
换句话说,由于再生速度控制部256仅从存储在缓存器255中的帧1~13中选择帧1、5、9以及13,所以其控制存储在缓存器255中的流数据,从而被快进。
因此,如果用户执行任何切换操作,则可将存储在缓存器255中的流数据的再生速度变为快进,使得客户端114可以在从服务器111接收流数据之后迅速再生已被切换的流数据。
因此,当服务器111通过网络113发送流数据时,可以通过使用缓存器255稳定地观看流数据的图像和听见流数据的音频。当用户对来自图像和音频源112的图像和音频信号执行任何操作时,可以基于用户的操作以非常小的延迟观看图像和听见音频。这能够使得当用户执行任何切换操作时提高响应,从而提高其操作特性。
伴随切换操作的任意延迟通过快进再生缩短,而不是通过刷新存储在缓存器255中的流数据来缩短,使得用户在用户的切换操作的前后可以连续观看图像和听见音频,而不会有任何时间上的中断。这使用户正确地把握相互前后的内容,从而提高了诸如来自图像和音频源112的图像和音频信号的快进、回倒等的操作特性。
注意,尽管在图17所示的实例中,再生速度控制部256仅从存储在缓存器255中的帧1~13中选择帧1、5、9以及13,但并不限于此。再生速度控制部256可以只选择存储在缓存器255中的流数据中所包括的I帧,或者可以通过使系统内的时钟周期更短以及将由缩短的时钟周期所表示的时间与每个帧中的时戳进行比较来选择任意期望帧。
另一方面,如果在步骤S51中确定用户没有执行预定操作,则在步骤S53中再生速度控制部256确定是否从存储在缓存器255的开头位置(再生位置)中的流数据中检测到任何标记信息。
换句话说,如上所述,当服务器111接收用于切换操作的请求时,将标记信息添加至RTP包,使得在用户执行切换操作之后将标记信息添加至包括流数据的RTP包的开头,从而使客户端114在用户通过确定是否检测到标记信息而执行切换操作后承认接收到流数据。
如果在步骤S53中确定从流数据中检测到标记信息,则再生速度控制部256将再生模式设置为慢放再生模式。具体地,如图18所示,再生速度控制部256再生例如存储在缓存器255中的所有帧1~13。此时,再生速度控制部256对流数据执行任何改变处理,使得在将帧提供给再生部257之前,使每个帧的再生时间的周期比普通再生时间的周期更长,并在再生改变的流数据的情况下将其提供给再生部257。
例如,这种改变处理涉及在视频帧的情况下将每个帧长度增长两倍,从而实现慢放再生。该改变处理还涉及在音频帧的情况下增加包括在音频帧中的采样数,以生成更长的音频帧,并将生成的音频帧提供给再生部257。例如,当生成包括100个采样项的音频帧长5%的音频帧时,再生速度控制部256生成5个音频帧,并将生成的音频帧添加至原始音频帧。例如,通过计算前后采样值的平均值或使用诸如线形内插、样条内插和贝塞尔内插的典型内插法来实现如何生成这五个音频帧。
另一方面,在步骤S53中确定没有从流数据中检测到标记信息,在步骤S55中,再生速度控制部256确定缓存器255中的流数据的量是否超过预定量。
如果在步骤S55中确定存储在缓存器255中的流数据的量没有超过预定量,则处理返回到步骤S39,或者执行这些步骤的图15所示流程图的后面部分。注意,随后将描述步骤S40~S42。
因此,当用户操作客户端114执行任何切换操作时,再生速度控制部256将存储在缓存器255中的流数据的再生模式变为快进再生模式,使得可以在比实时周期更短的时间段内再生流数据。当从存储在缓存器255中的流数据中检测到标记信息时,该检测之后的流数据为改变的流数据,这就表示完全再生将被快进的流数据。因此,再生速度控制部256将其再生模式从快进再生模式变为慢放再生模式,使得增加了将被存储在缓存器255中的流数据的量。
换句话说,当将再生模式变为快进再生模式时,以比实时再生周期更短的时间段来再生在存储缓存器255中的流数据,使得存储在缓存器255中的流数据的量非常少。因此,为了增加存储在缓存器255中的流数据的量,再生速度控制部256将其再生模式从快进再生模式变为慢放再生模式。在缓存器255中,与从中读取的数据相比,增加了其中存储的数据。这使得逐步增加存储在缓存器255中的流数据的量,而不引起再生部257的流数据再生的任何停止。
如果检测到缓存器255中的流数据的量超过预定量,则再生速度控制部256确定可以保持通过网络113从服务器111接收的流数据的足够量。此时,因为不需要保持从服务器111接收的更多的流数据的量,所以再生速度控制部256将再生模式从慢放再生模式变为普通再生模式。这使得在普通再生模式的再生中,将被添加至缓存器255的流数据的量等于从缓存器255读出的流数据的量。再生部257可通过被保持的存储在缓存器255中的流数据的一定量来连续再生流数据项。
注意,再生速度控制部256通过计算缓存器255中最新位置的流数据的时戳与其中再生位置的流数据的时戳之间的差来检测存储在缓存器255中的流数据的量。
再生速度控制部256可基于存储在缓存器255中的流数据的量而不是基于存储在缓存器255中的流数据的量是否超过预定值来连续地改变再生模式。具体地,当存储在缓存器255中的流数据的量低于预定值时,再生速度控制部256将再生模式变为慢放再生模式。此时,再生速度控制部256可调节存储在缓存器255中的流数据的量。例如,当如果存储在缓存器255中的流数据下降至预定值以下很多使得以较慢的速度再生存储在缓存器255中的流数据时,再生速度控制部256将再生模式变为更慢放的再生模式。当如果存储在缓存器255中的流数据接近预定值使得以稍慢一点的速度再生存储在缓存器255中的流数据时,再生速度控制部256将再生模式变为稍慢一点的的慢放再生模式。
类似地,当存储在缓存器255中的流数据的量超过预定值时,再生速度控制部256可以调节存储在缓存器255中的流数据的量。具体地,当如果存储在缓存器255中的流数据比预定值增大很多使得以较快的速度再生存储在缓存器255中的流数据时,再生速度控制部256将再生模式变为快进再生模式。当如果存储在缓存器255中的流数据接近预定值使得以比普通再生稍快一点的速度再生存储在缓存器255中的流数据时,再生速度控制部256将再生模式变为稍快一点的再生模式。
尽管当用户执行任何切换操作时在上述实施例中再生速度控制部256将再生模式变为快进再生模式,但并不限于此。例如,如果从存储在缓存器255中的流数据(服务器111通过网络113最后发送的)中检测到标记信息,则再生速度控制部256可将再生模式变为快进再生模式。
重新参照图15所示的流程图,在步骤S40中,再生部257再生从再生速度控制部256接收的存储在缓存器255中的流数据,并将再生的流数据提供给输出部116。
在步骤S41中,输出部116从再生部257接收流数据,并输出再生的流数据,从而将基于该流数据的图像显示在显示器上并发出对应于该图像的音频。
在步骤S42中,控制部251监控通信部252的状态,以确定是否已经完成通过网络113从服务器111发送的流数据。
如果在步骤S42中确定还没有完成流数据,则处理返回到步骤S34,然后重复上述步骤S34~S42的处理。
另一方面,如果在步骤S42中确定已经完成了流数据,则图11所示客户端114的流数据接收处理结束。
因此,客户端114可通过网络113从服务器111接收流数据。
因此,当用户执行任何预定操作时,客户端114执行快进处理,而不刷新存储在缓存器中的流数据,从而破坏存储在缓存器中的流数据,使得在用户执行预定操作前,可以不用破坏流数据就能再生用户执行预定操作后的流数据。当用户操作客户端114以改变诸如快进再生的相同内容的再生速度时,在用户执行预定操作前的流数据和在用户执行预定操作后的流数据之间没有发生时间的中断。这使得用户基于流数据观看图像和听见音频而没有任何的不适感觉。
尽管在上述实施例中服务器111已将标记信息添加至流数据,但客户端114也可将标记信息添加至流数据。接下来,将描述将标记信息添加至流数据的客户端114的操作。注意,如果客户端114将标记信息添加至流数据,时间上缩短了保留在客户端114中的所有流数据,变成作为用户想要观看的图像和听见的音频的流数据。
图20示出了客户端114的另一功能结构。在图20中,对与图11所示类似的元件给予相同的标号,由于它们执行相同的处理,所以省略其详细描述。即,除图11所示的客户端114之外,还为图20所示的客户端114提供了标记信息添加部301。
当用户执行任意预定操作时,基于来自操作部115的操作信号,在控制部251的控制下,标记信息添加部301将标记信息添加至存储在缓存器255中的流数据中的通过网络113从服务器111最后接收的流数据。
下面将参照图20所示的框图和图21所示的流程图描述图20所示客户端114的流数据接收处理。
类似于图15中所示的步骤S31~S33,在步骤S71~S73中,如果用户操作了操作部115以开始流,则开始流数据接收处理。
在步骤S74中,如果确定用户已经执行了切换操作,则在步骤S75中,标记信息添加部301将标记信息添加至存储在缓存器255中的流数据中的通过网络113从服务器111最后接收的流数据。
此时,基于来自操作部115的操作信号,在控制部251的控制下,发送部252a通过网络113将用于切换操作的请求发送至服务器111。接收用于切换操作的请求的服务器111发送操作后的流数据。此时,对于该流数据,不添加任何标记信息。
换句话说,当用户已经执行了切换操作时,客户端114通过网络113从服务器111接收没有添加任何标记信息的流数据。
图22示出了存储在缓存器255中的流数据项。
在图22中示出了缓存器255中的三种状态。假设在图22中从其开头至其末尾排列为状态1、2和3,则随着时间的流逝,以状态1、状态2和状态3的顺序改变存储在缓存器255中的流数据。
在图22中,通过虚线将缓存器255分成9个方块,每个方块都表示存储在缓存器255中的流数据。在图22中,时间从左向右流逝。换句话说,缓存器255为FIFO型存储器,使得首先从其中读出最早存储的流数据。在9个方块中,最左边的方块表示存储在缓存器255末尾中的流数据。最左边的方块表示最后存储在缓存器255中的流数据,而最右边的方块表示首先存储在缓存器255中的流数据。因此,9个方块中最右边的方块表示存储在缓存器255中的流数据的开头项,使得再生部257再生流数据的开头项。
如图22所示的状态1所示,标记信息添加部301将具有星号“*”的标记信息添加至存储在缓存器255中并存储在缓存器255末尾的流数据中通过网络113从服务器111最后接收的流数据。具体地,标记信息添加部301将标记信息添加至例如组成图14所示流数据的RTP包。
重新参照图21所示的流程图,类似于图15所示的步骤S36~S38,在步骤S76~S78中,对接收的流数据进行解码并将其临时存储。
在步骤S79中,再生速度控制部256执行再生速度控制处理以控制再生速度,使得可以期望的速率再生存储在缓存器255中的流数据。再生速度控制部256将这种流数据提供给再生部257。
与步骤S79中的处理相关的、图20所示的再生速度控制部256中的再生速度调节处理与参照图16所示流程图描述的再生速度调节处理一致,将省略对其的详细描述。在这种情况下,在图16所示的步骤S53中,再生速度控制部256确定是否从存储在缓存器255中的开头(再生位置)中的流数据中检测出标记信息。此时,再生速度控制部256检测的标记信息为客户端114(而不是服务器111)中的标记信息添加部301添加的标记信息。
换句话说,当用户执行切换操作时,标记信息添加部301将标记信息添加至流数据,使得将标记信息添加至用户操作后的流数据的开头。这使得客户端114通过确定是否检测到标记信息来承认用户切换操作后的流数据。
具体地,在图16所示的步骤S52中,再生速度控制部256将再生模式变为快进再生模式,直至如图22的状态2所示,添加有星号的标记信息的流数据到达缓存器255的开头。换句话说,当用户执行切换操作时,再生速度控制部256将存储在缓存器255中的流数据的再生速度变为快进再生。这使客户端114在从服务器111接收到这种流数据后可立刻再生已被变为快进再生的流数据。
在图16所示的步骤S54中,如图22的状态3所示,当添加有星号的标记信息的流数据到达缓存器255的开头时,再生速度控制部256然后将再生模式变为慢放再生模式。换句话说,当从流数据中检测到标记信息时,检测后的流数据为用户执行切换操作后的流数据,使得可用再生将被快进的所有流数据。再生速度控制部256将再生模式从快进再生模式变为慢放再生模式,以增加存储在缓存器255中的流数据的量。
在图16所示的步骤S56中,如果确定存储在缓存器中的流数据的量超过预定值,则因为缓存器255已经存储了足够量的流数据,所以再生速度控制部256将再生模式变为普通再生模式。这使得再生速度控制部256能够以普通再生速度再生存储在缓存器255中的流数据。
重新参照图21所示的流程图,类似于图21所示的步骤S40~S42,在步骤S80~S82中,再生已通过网络113从服务器111接收的流数据,直至完成流数据并将其输出。
因此,由于通过客户端114将标记信息添加至流数据去除了与服务器111的合作,所以用户可以任意高独立性设计客户端114。
注意,当客户端114对其添加标记信息时,在用户执行切换操作时的时间点与将标记信息添加至流数据时的时间点之间出现时间差。因此,如果在网络113中出现小的延迟以及顺利地将在服务器111中生成的流数据通过网络113发送至客户端114,则可以获得与服务器111将标记信息添加至流数据的情况相同的完美效果。
尽管已经描述了通过将标记信息添加至流数据来通知用户执行切换操作的上述实施例,但是除添加标记信息之外,还可以通过在用户执行切换操作的时间点处存储时戳来通知用户执行切换操作。下面将描述如果通过存储时戳来通知用户执行切换操作的客户端114的操作。
图23示出了客户端114的又一功能结构。
在图23中,对与图11所示类似的元件给予相同的标号,由于它们执行相同的处理,所以将省略其详细描述。即,除图11所示的客户端114之外,还为图23所示的客户端114提供提供时戳存储部311。
当用户执行任何预定操作时,基于来自操作部115的操作信号,在控制部251的控制下,时戳存储部311存储与存储在缓存器255末尾中以及在缓存器255中所存储的流数据中通过网络113从服务器111最后接收的流数据相关的时戳。
下面将参照图23所示的框图和图24所示的流程图描述图23所示的客户端114的流数据接收处理。
类似于图15所示的步骤S31~S33,在步骤S91~S93中,如果用户操作操作部115来开始流,则开始流数据接收处理。
在步骤S94中,如果确定用户已经执行了切换操作,则在步骤S95中,时戳存储部311存储与存储在缓存器255中的流数据中的通过网络113从服务器111最后接收的流数据相关的时戳。
此时,基于来自操作部115的操作信号,在控制部251的控制下,发送部252a通过网络113将用于切换操作的请求发送至服务器111。接收用于切换操作的请求的服务器111发送操作后的流数据。注意,对于该流数据,不添加任何标记信息。
换句话说,当用户已经执行切换操作时,客户端114通过网络113从服务器111接收没有添加任何标记信息的操作后的流数据。
图25示出了存储在缓存器255中的流数据项。
在图25中示出了缓存器255中的三种状态。假设在图25中从其开头至其末尾排列为状态1、2和3,则随着时间的流逝,以状态1、状态2和状态3的顺序改变存储在缓存器255中的流数据。
在状态1中,通过虚线将缓存器255分成9个方块10~18,每个都表示存储在缓存器255中的流数据。在图25中,时间从左向右流逝。换句话说,缓存器255为FIFO型存储器,使得首先从其中读出最早存储的流数据。在9个方块中,最左边的方块18表示存储在缓存器255末尾中的流数据。最左边的方块18表示最后存储在缓存器255中的流数据,而最右边的方块10表示首先存储在缓存器255中的流数据。因此,9个方块中的最右边的方块10表示存储在缓存器255中的流数据的开头项,使得再生部257再生流数据的开头项。
类似地,在缓存器255的状态2中,9个方块中最右边的方块14表示存储在缓存器255中的流数据的开头项。在缓存器255的状态3中,9个方块中最右边的方块18表示存储在缓存器255中的流数据的开头项。
如图25所示的状态1所示,时戳存储部311存储与存储在缓存器255中的流数据中的通过网络113从服务器111最后接收并被存储在缓存器255末尾的方块18中的流数据相关的时戳。具体地,时戳存储部311存储与例如组成如图14所示缓存器255末尾处存储的流数据的RTP包相关的时戳。
因此,再生速度控制部256利用例如将存储在时戳存储部311中的RTP包的时戳与组成存储在缓存器255开头处并被再生部257再生的流数据的RTP包的时戳来获取切换操作后的流数据。
重新参照图24所示的流程图,类似于图15所示的步骤S36~S38,在步骤S96~S98中,对接收的流数据进行解码并将其临时存储。
在步骤S99中,再生速度控制部256执行再生速度控制处理以控制再生速度,使得可以期望的速率再生存储在缓存器255中的流数据。再生速度控制256将这种流数据提供给再生部257。
这里,下面将参照图26所示的流程图描述对应于步骤S99中处理的图23所示的再生速度控制部256的再生速度控制处理的细节。
类似于图16所示的步骤S51和S52,在步骤S111和S112中,当用户执行任何切换操作时,再生速度控制部256将再生模式变为快进再生模式。
在步骤S113中,再生速度控制部256确定存储在缓存器255开头(再生位置)处的流数据的时戳是否超过存储在时戳存储部311中的时戳。换句话说,再生速度控制部256将再生模式保持为快进再生模式,直至如图25所示状态2中所示与流数据(其时戳存储在时戳存储部311中)相关的方块18已到达的缓存器255的开头。
换句话说,当用户执行切换操作时,再生速度控制部256将存储在缓存器255中的流数据的再生速度变为快进再生。这使客户端114在从服务器111接收这种数据流之后可以立刻再生已被变为快进再生的流数据。
重新参照图26所示的流程图,在步骤S113和S114中,如图25所示的状态3一样,当与流数据相关的方块18已到达缓存器255的开头时,再生速度控制部256将再生模式变为慢放再生模式。换句话说,如果存储在缓存器255的开头(再生位置)处的流数据的时戳超过存储在时戳存储部311中的时戳,则存储在缓存器255的开头(再生位置)处的流数据的时戳超过存储在时戳存储部311中的时戳之后的流数据为用户执行切换操作后的流数据,使得再生将被快进的所有流数据。因此,再生速度控制部256将再生模式从快进再生模式变为慢放再生模式,以增加存储在缓存器255中的流数据的量。
重新参照图26所示的流程图,在步骤S115和S116中,如果确定存储在缓存器255中的流数据的量超过预定值,则再生速度控制部256将再生模式从慢放再生模式变为普通再生模式,因为缓存器255存储了足够量的流数据。然后,再生速度控制部256以普通的再生速度再生存储在缓存器255中的流数据。
重新参照图24所示的流程图,类似于图15所示的步骤S40和S42,在步骤S100和S102中,再生并输出通过网络113从服务器111接收的流数据,直至已经完成流数据。
因此,由于通过客户端114存储时戳去除了与服务器111的合作,所以用户可以任意的高独立性设计客户端114。换句话说,不管服务器111的任何操作,客户端114都可以通过本发明的实施例实现任何功能。
注意,当客户端114存储时戳时,在用户执行任何切换操作时的时间点与类似于添加标记信息的情况的存储的时戳之间会出现时间差。因此,如果网络113中出现很小的延迟并且顺利地将服务器111中生成的流数据通过网络113发送至客户端114,则可以获得与服务器111将标记信息添加至流数据的情况相同的完美效果。
尽管在上述实施例中如图16和26所示的流程图一样,当确定用户执行任何切换操作时,再生速度控制部256将再生模式变为快进再生模式(参见图16所示的步骤S52和图26所示的步骤S112),但替代这种方法,可以确定是否已经接收到添加有标记信息的RTP包,并且如果确定已经接收到添加有标记信息的RTP包,则可将再生模式变为快进再生模式。下面,将参照图27描述如果已经接收到添加有标记信息的RTP包则将再生模式变为快进再生模式的客户端114的操作。
注意,该客户端114的结构类似于图11所示的结构,并且该客户端114的操作也类似于通过上述图15所示的流程图所表示的操作,将适当地省略对其的详细描述。
换句话说,图27示出了用于解释图11所示再生速度控制部256的再生速度控制处理的其它实例细节的流程图,其相应于图15所示的步骤S39。
在步骤S131中,再生速度控制部256确定是否通过网络113从服务器111接收到添加有标记信息的流数据。
如果在步骤S131中确定接收到添加有标记信息的流数据,则在步骤S132中,再生速度控制部256将再生模式设置为快进再生模式。再生速度控制部256将再生模式保持为快进再生模式,直至在步骤S133中确定已经从存储在缓存器255的开头位置(再生位置)中的流数据中检测到标记信息。
当在步骤S133中确定已经从存储在缓存器255的开头位置(再生位置)中的流数据中检测到标记信息时,在步骤S134中,再生速度控制部256将再生模式变为慢放再生模式。
然后,再生速度控制部256将再生模式保持在慢放再生模式,直至在步骤S135中确定存储在缓存器255中的流数据超过预定值,并且当在步骤S135中确定在缓存器255中所存储的流数据超过预定值时,在步骤S136中,再生速度控制部256然后将再生模式变为普通再生模式,这类似于图16所示的步骤S55和S56。
然后,处理返回到步骤S39,并随后执行下面的处理。
换句话说,再生速度控制部256确定客户端114是否从服务器111接收到标记信息。如果确定接收到标记信息,则再生速度控制部256将再生模式设置为快进再生模式,通过这样开始快进再生,并且在预定的时间段内快进再生流数据直到再生添加有标记信息的流数据部分的位置。当已经再生流数据到添加有标记信息的流数据的部分时,再生速度控制部256将再生模式设置为慢放再生模式。
因此,执行快进再生预定的时间段,使得可以在预定的时间段内将新的流数据存储在缓存器255中。即使网络113缺乏稳定性,也能够连续再生流数据。注意,上述预定的时间段是指一秒以下,优选地为300ms~600ms,特别是大约400ms。如果将该预定的时间段设置的过长,则会引起误操作,而如果将其设置的过短,则会在网络113缺乏稳定性时引起再生的任意中断。
代替图27所示流程图中的步骤S133,可以确定在已经接收到标记信息之后是否过去了预定的时间段,并且如果确定过去了预定的时间段,则处理可进入步骤S133。在这种情况下,当在已经接收到标记信息之后过去了预定的时间段时,自动地将再生模式从快进再生模式变为慢放再生模式。
因此,当连接至图像和音频源112的服务器111将流数据发送给每个客户端114时,每个客户端114都具有缓存器,使得可以稳定地再生流数据,以及还可以以非常小的延迟再生响应于与图像和音频源112相关的用户的任何操作的流数据。这能够提高响应于与图像和音频源112相关的用户的设置操作的响应,从而提高其可用性。
由于通过对存储在缓存器中的流数据执行快进再生实现缩短伴随用户操作的延迟,所以用户可以连续地观看图像并听见音频,而在用户操作前的流数据和用户操作后的流数据之间没有任何时间上的中断。这使得当用户执行技巧播放时,他或她正确地把握之前和之后的内容关系,从而能够提高诸如图像和音频源112的快进和回倒的任何稳定性。
在上述实施例中,尽管再生速度控制部256控制存储在缓存器255中的流数据的再生速度,但类似于存储在缓冲器255中的流数据的再生速度的控制,再生速度控制部256还可以控制存储在缓存器253中的流数据的再生速度,这对于发送和/或接收尤其有用。
尽管为每个客户端114提供了两个缓存器253、255,但本发明不限于此。每个客户端114中可以使用一个或三个或更多缓存器。即使当每个客户端114具有一个或三个或更多缓存器时,类似于存储在缓冲器255中的流数据的再生速度的控制,再生速度控制部256可以控制存储在这些缓存器的每一个中的流数据的再生速度。
可以通过硬件或软件实现上述的系列处理。如果通过软件实现系列处理,则通过使用任何记录介质将组成软件的程序安装在嵌入专用硬件中的计算机中,或者例如通过在其中安装各种程序来将其安装在可执行各种功能的通用个人计算机中。
记录介质包括图9所示的可移动介质161,例如磁盘(包括软盘)、光盘(包括压缩光盘只读存储器(CD-ROM),DVD)、磁光盘(迷你光盘(商标))或半导体存储器,其记录程序并可为了向用户提供除安装在计算机内的程序之外的其它程序而发送所记录的程序,并且记录介质可以包括图9所示的ROM 152或存储部158,其记录程序并可以为每个用户发送预先安装在计算机内的程序。
通过诸如路由器或调制解调器的任何接口或通过诸如局域网、互联网、或数字卫星广播的任何有线或无线通信介质将用于实现上述一系列处理的程序安装在计算机中。
注意,在本说明书中,存储在记录介质中的程序中所描述的步骤不仅随着沿所描述顺序的时序被处理,而且还可以并行或单独地被执行。
还应该注意,在本说明书中,将系统称作由多个装置构成的整个设备。
本领域技术人员应该明白,根据设计要求和其他因素,在所附的权利要求或其等同范围以内,本发明可以进行各种修改、组合、自组合和变更。

Claims (21)

1.一种数据传输系统,包括:
发送装置,用于发送流数据;以及
接收装置,用于从所述发送装置接收所述流数据,并向所述发送装置发送切换所述流数据的请求,其中,所述发送装置响应于切换所述流数据的请求来切换所述流数据,所述请求是从所述接收装置接收到的:
其中,所述接收装置包括:
接收部,用于从所述发送装置接收所述流数据;
存储部,用于临时存储所接收的流数据,然后传送所接收的流数据;
操作检测部,用于检测用户是否进行了请求切换所述流数据的操作;以及
控制部,用于当所述操作检测部检测到所述用户进行了请求切换所述流数据的操作时,控制存储在所述存储部中的所述流数据的传送速率,以及控制存储在所述存储部中的所述流数据的再生速度,以执行存储在所述存储部中的所述流数据的快进再生;以及其中,所述发送装置包括:
信息添加部,用于当所述发送装置从所述接收装置接收到表示所述用户进行了请求切换所述流数据的操作的通知时,向所述流数据添加所述用户进行了请求切换所述流数据的操作的附加信息;以及
发送部,用于向所述接收装置发送添加有所述附加信息的所述流数据。
2.一种接收流数据并发送切换所述流数据的请求的接收装置,所述接收装置包括:
接收部,用于接收所述流数据;
存储部,用于临时存储所接收的流数据,然后传送所接收的流数据;
操作检测部,用于检测用户是否进行了请求切换所述流数据的操作;以及
控制部,用于当所述操作检测部检测到所述用户进行了请求切换所述流数据的操作时,控制存储在所述存储部中的所述流数据的传送速率,以及控制存储在所述存储部中的所述流数据的再生速度,以执行存储在所述存储部中的所述流数据的快进再生。
3.根据权利要求2所述的接收装置,进一步包括发送部,用于当操作检测部检测到用户进行了请求切换所述流数据的操作时,发送所述用户进行了请求切换所述流数据的操作的通知,以允许将用户进行了请求切换所述流数据的操作的附加信息添加至所述流数据,其中,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行快进再生,直至检测到添加至存储在所述存储部中的所述流数据的所述附加信息。
4.根据权利要求3所述的接收装置,其中,当检测到所述附加信息时,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度,以执行存储在所述存储部中的所述流数据的慢放再生,直至存储在所述存储部中的流数据的量变为预定量。
5.根据权利要求2所述的接收装置,进一步包括发送部,用于当操作检测部检测到用户进行了请求切换所述流数据的操作时,发送所述用户进行了请求切换所述流数据的操作的通知,以允许将用户进行了请求切换所述流数据的操作的附加信息添加至所述流数据,其中,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度,以当检测到添加至存储在所述存储部中的所述流数据的附加信息到达所述接收装置时开始存储在所述存储部中的所述流数据的快进再生,以及再生存储在所述存储部中的所述流数据预定的时间段,直到添加有所述附加信息的部分。
6.根据权利要求5所述的接收装置,其中,所述预定的时间段为1秒以下。
7.根据权利要求5所述的接收装置,其中,在已经完成所述流数据的所述快进再生之后,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行存储在所述存储部中的所述流数据的慢放再生,直至存储在所述存储部中的所述流数据达到预定量。
8.根据权利要求2所述的接收装置,进一步包括信息添加部,用于当操作检测部检测到用户进行了请求切换所述流数据的操作时,将所述用户进行了请求切换所述流数据的操作的附加信息添加至存储在所述存储部中的多项流数据中最后接收的流数据,其中,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行存储在所述存储部中的所述流数据的快进再生,直至检测到添加至存储在所述存储部中的所述流数据的所述附加信息。
9.根据权利要求8所述的接收装置,其中,当检测到所述附加信息时,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行存储在所述存储部中的所述流数据的慢放再生,直至存储在所述存储部中的所述流数据达到预定量。
10.根据权利要求2所述的接收装置,进一步包括存储部,用于当操作检测部检测到用户进行了请求切换所述流数据的操作时,存储添加至存储在所述存储部中的多项流数据中最后接收的流数据的时间点,其中,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行存储在所述存储部中的所述流数据的快进再生,直至添加至被再生的流数据的所述时间点超过所存储的时间点。
11.根据权利要求10所述的接收装置,其中,当检测到所述附加信息时,所述控制部控制存储在所述存储部中的所述流数据的所述再生速度以执行存储在所述存储部中的所述流数据的慢放再生,直至存储在所述存储部中的所述流数据达到预定量。
12.根据权利要求2所述的接收装置,进一步包括由用户操作的操作部,所述操作部指示提供所述流数据的外部设备的切换、信道的切换、或外部装置的再生、回倒、快进、暂停或停止。
其中,所述用户的操作包括关于提供所述流数据的外部设备的切换、信道的切换、或所述外部装置的再生、回倒、快进、暂停或停止的指示。
13.一种接收流数据并发送切换所述流数据的请求的接收装置的接收方法,所述接收方法包括以下步骤:
通过所述接收装置的接收部接收所述流数据;
将所接收的流数据临时存储在所述接收装置的存储部中,然后传送所接收的流数据;
通过所述接收装置的操作检测部检测用户是否进行了请求切换所述流数据的操作;以及
当所述操作检测部检测到所述用户进行了请求切换所述流数据的操作时,控制存储在所述存储部中的所述流数据的再生速度,以执行存储在所述存储部中的所述流数据的快进再生。
14.一种使计算机执行接收流数据并发送切换所述流数据的请求的接收装置的接收方法的程序产品,所述接收方法包括以下步骤:
通过所述接收装置的接收部接收所述流数据;
将所接收的流数据临时存储在所述接收装置的存储部中,然后传送所接收的流数据;
通过所述接收装置的操作检测部检测用户是否进行了请求切换所述流数据的操作;以及
当所述操作检测部检测到所述用户进行了请求切换所述流数据的操作时,控制存储在所述存储部中的所述流数据的再生速度,以执行存储在所述存储部中的所述流数据的快进再生。
15.一种发送流数据并响应于接收到的切换所述流数据的请求而切换所述流数据来发送切换后的流数据的发送装置,所述发送装置包括:
信息添加部,用于当所述发送装置接收到表示所述用户进行了请求切换所述流数据的操作的通知时,将所述用户进行了请求切换所述流数据的操作的附加信息添加至所述流数据;以及
发送部,用于发送添加有所述附加信息的所述流数据。
16.根据权利要求15所述的发送装置,进一步包括存储部,用于临时存储所述流数据,
其中,当所述用户进行了请求切换所述流数据的操作时,所述存储部刷新存储在其中的所述流数据。
17.根据权利要求16所述的发送装置,其中,当所述用户进行了请求切换所述流数据的操作时,所述存储部刷新存储在其中的所述流数据,仅留下完整组成一个图像的流数据。
18.根据权利要求15所述的发送装置,进一步包括接收部,用于接收表示所述用户进行了请求切换所述流数据的操作的通知,
其中,所述信息添加部响应于所接收的通知,将所述附加信息添加至所述流数据。
19.根据权利要求15所述的发送装置,其中,所述用户的操作包括关于提供所述流数据的外部设备的切换、信道的切换、或所述流数据的再生、回倒、快进、暂停或停止的指示。
20.一种发送流数据并响应于接收到的切换所述流数据的请求而切换所述流数据来发送切换后的流数据的发送装置的发送方法,所述方法包括以下步骤:
当所述发送装置接收到表示所述用户进行了请求切换所述流数据的操作的通知时,通过所述发送装置的信息添加部将所述用户进行了请求切换所述流数据的操作的附加信息添加至所述流数据;以及
通过所述发送装置的发送部发送添加有所述附加信息的所述流数据。
21.一种使计算机执行发送流数据并响应于接收到的切换所述流数据的请求而切换所述流数据来发送切换后的流数据的发送装置的发送方法的程序产品,所述方法包括以下步骤:
当所述发送装置接收到表示所述用户进行了请求切换所述流数据的操作的通知时,通过所述发送装置的信息添加部将所述用户进行了请求切换所述流数据的操作的附加信息添加至所述流数据;以及
通过所述发送装置的发送部发送添加有所述附加信息的所述流数据。
CN200710135820.1A 2006-07-14 2007-07-16 数据传输系统、接收装置和方法、以及发送装置和方法 Expired - Fee Related CN101106697B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006194925A JP4347322B2 (ja) 2006-07-14 2006-07-14 受信装置および方法、並びにプログラム
JP2006194925 2006-07-14
JP2006-194925 2006-07-14

Publications (2)

Publication Number Publication Date
CN101106697A true CN101106697A (zh) 2008-01-16
CN101106697B CN101106697B (zh) 2014-12-03

Family

ID=38581972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200710135820.1A Expired - Fee Related CN101106697B (zh) 2006-07-14 2007-07-16 数据传输系统、接收装置和方法、以及发送装置和方法

Country Status (5)

Country Link
US (1) US9148696B2 (zh)
EP (1) EP1879393B1 (zh)
JP (1) JP4347322B2 (zh)
CN (1) CN101106697B (zh)
TW (1) TWI358234B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938456A (zh) * 2009-06-30 2011-01-05 华为技术有限公司 一种减小媒体延迟的方法、设备及系统
CN102547411A (zh) * 2010-12-14 2012-07-04 康佳集团股份有限公司 流视频的传输和播放方法及其实现装置
CN103384316A (zh) * 2012-05-04 2013-11-06 瑞萨电子(中国)有限公司 电视接收机及其音量曲线调节方法
JP2014511526A (ja) * 2011-02-18 2014-05-15 アビニシオ テクノロジー エルエルシー ソート
CN108989849A (zh) * 2018-08-01 2018-12-11 广州长嘉电子有限公司 一种dvb-t2+s2电视信号处理方法及系统
CN111666056A (zh) * 2020-05-28 2020-09-15 北京百度网讯科技有限公司 屏幕切换显示方法、装置、智能后视镜和可读存储介质
CN111901692A (zh) * 2020-08-06 2020-11-06 杭州当虹科技股份有限公司 一种基于多音视频流合成vr的系统

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1879347B1 (en) * 2006-07-14 2012-05-30 Sony Europe Limited System and method of audio/video streaming
JP5282383B2 (ja) * 2007-09-06 2013-09-04 ソニー株式会社 コンテンツ再生装置、コンテンツ再生方法、プログラム、およびコンテンツ再生システム
JP4735697B2 (ja) 2008-09-29 2011-07-27 ソニー株式会社 電子機器、コンテンツ再生方法及びプログラム
JP5195546B2 (ja) * 2009-03-12 2013-05-08 船井電機株式会社 データ受信装置および表示装置
TWI384882B (zh) * 2009-07-28 2013-02-01 Mstar Semiconductor Inc 封包順序回復控制器及其方法
JP5493564B2 (ja) * 2009-08-04 2014-05-14 日本電気株式会社 動画出力装置、動画出力方法およびプログラム
US8073995B2 (en) * 2009-10-19 2011-12-06 Research In Motion Limited Efficient low-latency buffer
CN102714029B (zh) * 2010-01-20 2016-03-23 株式会社半导体能源研究所 显示装置的显示方法
TWI423625B (zh) * 2010-10-28 2014-01-11 Chunghwa Telecom Co Ltd 資料傳輸速率調控系統及其方法
CN102137298B (zh) * 2011-03-02 2015-12-09 华为技术有限公司 3d格式描述信息的获取方法和装置
US9065744B2 (en) * 2011-06-20 2015-06-23 Netscout Systems, Inc. Performance optimized and configurable state based heuristic for the classification of real-time transport protocol traffic
DE102012215352A1 (de) * 2012-08-29 2014-05-28 Continental Automotive Gmbh Wiedergeben von Mediendaten mit reduzierter Geschwindigkeit
JP2014183519A (ja) * 2013-03-21 2014-09-29 Hitachi Kokusai Electric Inc 再生装置
US9269328B2 (en) * 2014-06-24 2016-02-23 Google Inc. Efficient frame rendering
US20160173675A1 (en) * 2014-12-16 2016-06-16 Hyundai Motor Company In-vehicle multimedia system considering call situation and method for controlling the same
KR102532645B1 (ko) * 2016-09-20 2023-05-15 삼성전자 주식회사 적응적 스트리밍 서비스에서 스트리밍 어플리케이케이션으로 데이터를 제공하는 방법 및 장치
TWI687821B (zh) * 2018-11-21 2020-03-11 核桃運算股份有限公司 資料追蹤裝置、方法及其電腦程式產品
CN113382212B (zh) * 2021-08-13 2021-11-16 深圳市有为信息技术发展有限公司 播放实时音视频流的方法、装置及电子设备

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5768561A (en) * 1992-06-30 1998-06-16 Discovision Associates Tokens-based adaptive video processing arrangement
JPH0737369A (ja) * 1993-07-19 1995-02-07 Sony Corp 映像信号記録再生装置
US5557724A (en) * 1993-10-12 1996-09-17 Intel Corporation User interface, method, and apparatus selecting and playing channels having video, audio, and/or text streams
EP0735763B1 (en) * 1995-03-31 2000-07-05 Sony Europa B.V. A system for information on demand
JPH09275481A (ja) * 1996-02-09 1997-10-21 Murata Mach Ltd 通信端末装置及び通信方法
US6356545B1 (en) * 1997-08-08 2002-03-12 Clarent Corporation Internet telephone system with dynamically varying codec
US8290351B2 (en) * 2001-04-03 2012-10-16 Prime Research Alliance E., Inc. Alternative advertising in prerecorded media
US7493644B1 (en) * 1999-12-28 2009-02-17 Nokia Corporation Method, apparatus, and system for video fast forward functionality in a mobile phone
AU2001232262B2 (en) * 2000-02-10 2005-11-03 Tokyo Broadcasting System, Inc. Receiving terminal device and control method therefor
JP2002044555A (ja) * 2000-07-28 2002-02-08 Sony Corp 情報表示制御装置および方法
CN100350798C (zh) * 2001-02-21 2007-11-21 联合视频制品公司 具有个人视频记录特征的交互式节目导视器的系统和方法
JP2003016725A (ja) * 2001-06-27 2003-01-17 Sony Corp コンテンツデータの送信装置および送信方法、並びにコンテンツデータの処理装置および処理方法
KR100456441B1 (ko) * 2002-01-18 2004-11-09 주식회사 휴맥스 저장 매체에 저장된 서비스의 중지 시점부터 서비스를제공하는 방법 및 장치
US20040034874A1 (en) * 2002-08-19 2004-02-19 Hord Phillip M. Pop-up PVR advertising
US7716700B2 (en) * 2002-11-25 2010-05-11 Time Warner Interactive Video Group Inc. Technique for delivering entertainment programming content including commercial content therein over a communications network
GB0300361D0 (en) 2003-01-07 2003-02-05 Koninkl Philips Electronics Nv Audio-visual content transmission
JP2004356695A (ja) 2003-05-27 2004-12-16 Sony Corp データ配信システムおよびデータ配信方法、ならびにデータ受信装置およびデータ受信方法
EP1642206B1 (en) * 2003-07-07 2017-12-20 Irdeto B.V. Reprogrammable security for controlling piracy and enabling interactive content
DK1665769T3 (da) * 2003-09-12 2014-06-30 Opentv Inc Fremgangsmåde og system til styring af optagelse og afspilning af interaktive applikationer
CN101077002B (zh) * 2003-10-02 2017-02-08 提维股份有限公司 用于在播放广告期间向用户播放替代内容的方法和装置
US20050166255A1 (en) * 2004-01-06 2005-07-28 Hallberg Bryan S. Operation modes for a personal video recorder
US20050198681A1 (en) * 2004-03-08 2005-09-08 Sharp Laboratories Of America, Inc. Playout buffer management to minimize startup delay
KR20070085203A (ko) 2004-06-07 2007-08-27 슬링 미디어 인코퍼레이티드 퍼스널 미디어 브로드캐스팅 시스템
US20050283535A1 (en) 2004-06-17 2005-12-22 Michele Covell Method and system for interactive control of media over a network
US20060013554A1 (en) * 2004-07-01 2006-01-19 Thomas Poslinski Commercial storage and retrieval
US8266311B2 (en) * 2004-07-29 2012-09-11 Microsoft Corporation Strategies for transmitting in-band control information
GB0504210D0 (en) * 2005-03-01 2005-04-06 Kerven Katherine E Transmission of promotional material
US20060230176A1 (en) * 2005-04-12 2006-10-12 Dacosta Behram M Methods and apparatus for decreasing streaming latencies for IPTV
KR20100050180A (ko) * 2008-11-05 2010-05-13 삼성전자주식회사 프로젝터를 구비한 휴대 단말기 및 그 휴대 단말기에서 표시부 제어 방법

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938456A (zh) * 2009-06-30 2011-01-05 华为技术有限公司 一种减小媒体延迟的方法、设备及系统
CN102547411A (zh) * 2010-12-14 2012-07-04 康佳集团股份有限公司 流视频的传输和播放方法及其实现装置
JP2014511526A (ja) * 2011-02-18 2014-05-15 アビニシオ テクノロジー エルエルシー ソート
CN103384316A (zh) * 2012-05-04 2013-11-06 瑞萨电子(中国)有限公司 电视接收机及其音量曲线调节方法
CN103384316B (zh) * 2012-05-04 2016-12-21 瑞萨电子(中国)有限公司 电视接收机及其音量曲线调节方法
CN108989849A (zh) * 2018-08-01 2018-12-11 广州长嘉电子有限公司 一种dvb-t2+s2电视信号处理方法及系统
CN108989849B (zh) * 2018-08-01 2021-01-29 广州长嘉电子有限公司 一种dvb-t2+s2电视信号处理方法及系统
CN111666056A (zh) * 2020-05-28 2020-09-15 北京百度网讯科技有限公司 屏幕切换显示方法、装置、智能后视镜和可读存储介质
CN111666056B (zh) * 2020-05-28 2024-01-05 阿波罗智联(北京)科技有限公司 屏幕切换显示方法、装置、智能后视镜和可读存储介质
CN111901692A (zh) * 2020-08-06 2020-11-06 杭州当虹科技股份有限公司 一种基于多音视频流合成vr的系统

Also Published As

Publication number Publication date
JP2008022507A (ja) 2008-01-31
EP1879393A3 (en) 2011-12-28
TW200826679A (en) 2008-06-16
US9148696B2 (en) 2015-09-29
CN101106697B (zh) 2014-12-03
JP4347322B2 (ja) 2009-10-21
EP1879393A2 (en) 2008-01-16
TWI358234B (en) 2012-02-11
US20080052408A1 (en) 2008-02-28
EP1879393B1 (en) 2014-12-24

Similar Documents

Publication Publication Date Title
CN101106697B (zh) 数据传输系统、接收装置和方法、以及发送装置和方法
CN101150717B (zh) 用于音频/视频流送的系统和方法
US20090293093A1 (en) Content server, information processing apparatus, network device, content distribution method, information processing method, and content distribution system
WO2005043784A1 (ja) 複数サービスが多重化された放送波の受信装置および受信方法
JP2006186580A (ja) 再生装置およびデコード制御方法
JP2006513608A (ja) オーディオ−ビジュアル・コンテンツ伝送システム及び方法
CN105453580A (zh) 接收方法、发送方法、接收装置及发送装置
JP5524193B2 (ja) メディアストリーム処理
CN102883152A (zh) 具有适应性的媒体流传输
CN106792154B (zh) 视频播放器的跳帧同步系统及其控制方法
US7493644B1 (en) Method, apparatus, and system for video fast forward functionality in a mobile phone
JP5781550B2 (ja) メディアコンテンツデータ再生装置及び方法
CN108810656B (zh) 一种实时直播ts流的去抖处理方法及处理系统
JP2008029006A (ja) クライアント装置、通信システム及びデータ処理方法
JP5282383B2 (ja) コンテンツ再生装置、コンテンツ再生方法、プログラム、およびコンテンツ再生システム
JP2012015928A (ja) 映像送信装置
JP2008079114A (ja) 同期再生システム
JP4526294B2 (ja) ストリームデータ送信装置、受信装置、プログラムを記録した記録媒体、およびシステム
JPWO2005081528A1 (ja) 情報配信システム及び方法とその情報配信装置、受信端末、情報中継装置
JP2003153254A (ja) データ処理装置及びデータ処理方法、並びにプログラム、記憶媒体
KR20070049504A (ko) 디지털 콘텐츠 재생 장치 및 그의 역방향 콘텐츠 저장 및재생방법
KR100651566B1 (ko) 이동통신 단말기에서 출력 버퍼링을 이용한 멀티미디어재생 장치 및 그 제어 방법
JP4735666B2 (ja) コンテンツサーバ、情報処理装置、ネットワーク機器、コンテンツ配信方法、情報処理方法およびコンテンツ配信システム
CN1327443C (zh) 一种流媒体点播的音视频切换方法
JP2001359071A (ja) データ配信装置及び方法、データ配信システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141203

Termination date: 20150716

EXPY Termination of patent right or utility model