CN101594203B - 发送装置、发送方法和接收装置 - Google Patents
发送装置、发送方法和接收装置 Download PDFInfo
- Publication number
- CN101594203B CN101594203B CN2009101413265A CN200910141326A CN101594203B CN 101594203 B CN101594203 B CN 101594203B CN 2009101413265 A CN2009101413265 A CN 2009101413265A CN 200910141326 A CN200910141326 A CN 200910141326A CN 101594203 B CN101594203 B CN 101594203B
- Authority
- CN
- China
- Prior art keywords
- view data
- receiving terminal
- terminal apparatus
- data
- control message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000005540 biological transmission Effects 0.000 title abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 41
- 238000004891 communication Methods 0.000 claims abstract description 23
- 230000008859 change Effects 0.000 claims description 7
- 230000008569 process Effects 0.000 description 18
- 238000005516 engineering process Methods 0.000 description 16
- 238000012546 transfer Methods 0.000 description 10
- 241001269238 Data Species 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/633—Control signals issued by server directed to the network components or client
- H04N21/6332—Control signals issued by server directed to the network components or client directed to client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
- H04N21/6543—Transmission by server directed to the client for forcing some client operations, e.g. recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供了发送装置、发送方法和接收装置。缓冲存储器存储作为要发送的图像数据的第一图像数据和第二图像数据,第二图像数据的分辨率比第一图像数据的分辨率高。发送部件将第一图像数据或第二图像数据作为流式数据发送。通信部件从接收终端设备接收一控制消息,该控制消息表示网络状况和施加到接收终端设备中执行升级的处理装置上的负载水平。控制部件在控制消息表明网络状况坏时发送第一图像数据,在控制消息表明网络状况好时发送第一图像数据或第二图像数据,而在控制消息表明网络状况好并且施加到处理装置上的负载水平较高时控制接收终端设备不执行升级。
Description
技术领域
本发明涉及通信系统中使用的发送装置、发送方法和接收装置,其中发送装置和接收终端设备通过例如IP通信网络连接到该通信系统。
背景技术
近年来,除常见的下载传送系统之外,作为因特网数据传送系统的流式传送(stream transfer)服务也越来越多地被使用。在下载传送系统中,作为数据文件的视频文件和音频文件从递送服务器被临时下载到接收终端设备,随后这些文件被再现。因此,在该系统中,在完全传送完文件之前难以再现它们。结果,这种系统不适于长时间再现、实时再现等等。在流式传送系统中,在正从发送方向接收终端设备传送数据的同时,由于可以再现所接收的数据,所以流式传送系统已被用于诸如因特网电话、远程TV会议、视频点播服务等等之类的因特网服务。
作为这种流式传送型因特网技术,已知有在因特网工程任务组请求注释(IETF RFC)1889中创建的实时传输协议(RTP)。在根据RTP传送数据时,时间信息作为时间戳被添加到数据。时间戳允许获得发送方和接收方之间的时间关系。结果,可以在不受分组的延迟变动(抖动)影响的情况下同步再现分组。
然而,RTP不确保实时数据传送。由于RTP所提供的传输服务不包括分组递送的优先级、指派、管理等等,所以与其他类型的分组类似,RTP分组也具有发生递送延迟和分组丢失的风险。具体而言,当错误发生在有线区域中超过每105一次和在无线区域中超过每103一次时,如果根据RTP传送分组,则由于它们的可靠性下降,难以维持递送媒体的质量。
因此,可以使用这样一种技术,该技术利用RTP分组的顺序号检测丢失的分组、利用自动重复请求(ARQ)向发送方发送重传请求、从而使发送方重传所丢失的分组。另外,还知道另一种技术,该技术根据可靠性较高的传输控制协议(TCP)发布重传请求从而使发送方重传所丢失的分组。然而,尽管TCP具有差错抵抗力,但是它的吞吐量较小并且延迟较大。因此,即使重传了丢失的分组,也可能不能及时再现它们。
另外,还知道一种纠错技术,即前向纠错(FEC)。在该技术中,冗余地发送FEC数据以用于纠错。如果发生了差错,就利用FEC数据对其进行纠正。与前述ARQ技术相比,由于不重传数据所以FEC技术可以缩短延迟时间。然而,由于添加了冗余数据,所以如果传输路径丢失分组较少,则吞吐量将减小。另外,由于FEC技术使接收终端设备方执行复杂的差错检测和编码处理,所以媒体质量依赖于接收终端设备方的处理性能。因此,由于难以根据网络状况和接收终端设备简单地决定最优添加FEC数据,所以FEC技术存在处理时间开销的问题。
前述技术是分组丢失对策和差错对策的示例。此外,还知道防止导致分组丢失的网络拥塞的技术。另外,作为用于无差错对策地传送分组的技术,还知道用于控制传送速率的技术和用于控制运动图像的帧速率的技术。换言之,当发送终端设备方传送一运动图像时,如果网络状况恶化,则该发送终端设备方以比常规传送速率低的速率发送运动图像,以降低分组丢失和分组延迟发生的机会。在流式传输系统中,单独或者组合使用这些差错对策和速率控制。
例如,日本专利申请早期公开No.2005-136548(专利文献1)公开了一种技术,用于获得通信网络的发送状态,基于该发送状态使发送分组的发送速率增大、减小或者维持发送速率,在发出了重传请求时使重传分组被重传。
发明内容
可以仅对发送方(服务器)进行控制来有利地执行专利文献1中所述的速率控制。然而,当发送诸如运动图像之类的多媒体数据的发送速率降低了时,再现质量将恶化。尽管有许多算法用于提高运动图像的质量,但是只有数种技术用于提高分辨率和图像质量。另外,这些技术是要用于诸如盘介质之类的存储类型介质,而不根据网络的环境和接收终端设备的计算性能动态改变分辨率和图像质量。
考虑到此,希望提供一种发送装置、发送方法和接收装置,根据网络状况好还是坏以及施加到接收终端设备中执行升级(upscaling)的处理装置上的负载的水平对要发送的图像数据的分辨率进行控制。
根据本发明的一个实施例,提供了一种发送装置,其包括缓冲存储器、发送部件、通信部件和控制部件。该缓冲存储器存储作为要发送的图像数据的第一图像数据和第二图像数据。该第二图像数据的分辨率比第一图像数据的分辨率高。发送部件将第一图像数据或第二图像数据作为流式数据发送。通信部件从接收终端设备接收一控制消息,该控制消息表示网络状况和施加到接收终端设备中的用于执行升级的处理装置上的负载的水平。控制部件在控制消息表明网络状况坏时发送第一图像数据,在控制消息表明网络状况好时发送第一图像数据或第二图像数据,而在控制消息表明网络状况好并且施加到处理装置上的负载的水平较高时控制接收终端设备不执行升级。
控制部件优选在控制消息表明所述网络状况好并且施加到处理装置上的负载水平较低时,控制接收终端设备来执行用于不改变所接收到的图像数据的分辨率的处理或者用于执行升级的处理。
对控制消息的答复优选地包含指定由接收终端设备执行的处理的信息。
优选提供了多种升级算法,并且取决于升级算法中被使用的升级算法,施加到处理装置上的负载的水平被改变。
根据本发明的一个实施例,提供了一种发送方法。作为要发送的图像数据的第一图像数据和第二图像数据被存储。该第二图像数据的分辨率比第一图像数据的分辨率高。第一图像数据或第二图像数据作为流式数据被发送。从接收终端设备接收一控制消息,该控制消息表示网络状况和施加到该接收终端设备中的用于执行升级的处理装置上的负载的水平。在控制消息表明网络状况坏时发送第一图像数据。在控制消息表明网络状况好时发送第一图像数据或第二图像数据。而在控制消息表明网络状况好并且施加到处理装置上的负载水平较高时控制接收终端设备不执行升级。
根据本发明的一个实施例,提供了一种接收装置,其包括缓冲存储器、监视器和控制部件。缓冲存储器接收作为流式数据的第一图像数据或第二图像数据,该第二图像数据的分辨率比第一图像数据的分辨率高。监视器监视施加到用于执行从第一图像数据到第二图像数据的升级的处理装置上的负载的水平。控制部件在第一图像数据被接收到并且施加到处理装置上的负载的水平较高时使得不执行升级。
根据本发明的一个实施例,通过根据网络状况降低要发送的图像的分辨率从而降低实时递送或者流式递送中的比特率可以解决前述现有技术的问题,从而可以平滑地传送数据。另外,通过升级接收到的运动图像,可以以较高的质量再现该图像。
根据本发明的一个实施例,通过根据施加到再现装置中执行升级的处理装置上的负载水平来估计能够再现的运动图像的分辨率,可以稳定地再现并且以再现装置的最高质量服务运动图像。
根据本发明的一个实施例,接收方测量网络状况、基于测量出的网络状况估计可用分辨率、并通知发送终端设备,使得灵活应对不保证服务质量(QoS)的网络。
结合下面对如附图所示的本发明的最佳实施例的详细说明,本发明的这些和其他目的、特征和优点将变清楚。
附图说明
图1是示出了根据本发明实施例的通信系统的框图;
图2是示出了根据本发明实施例的通信系统的功能框图;
图3是示出了根据本发明实施例的发送装置的操作的流程的流程图;
图4是示出了根据本发明实施例的接收终端设备的操作的流程的流程图;以及
图5A-5C是示出了根据本发明实施例的发送装置的控制的示例的示意图。
具体实施方式
下面,将参考附图描述本发明的优选实施例。尽管下面将描述的这些实施例是本发明的优选实施例,并且对它们施加了各种在技术上优选的限制,但是应当理解除非说明了这些实施例对本发明施加了限制之外本发明的范围不受限于这些实施例。
根据本发明一个实施例,使用了一种流式传送系统。在该系统中,接收装置从发送装置接收数据,并且再现基于所接收的数据的图像和声音。在该流式传送系统中,从发送装置发送的数据一般称作流式数据(streaming data)。更具体而言,通过对图像数据应用运动图像专家组(MPEG)编码处理而生成的MPEG流被置于因特网协议(IP)分组中。这些IP分组通过因特网被传送。
本发明一个实施例具有图1所示的系统结构。换言之,多个接收终端设备200通过通信网络(例如IP网络300)被连接到发送装置100。IP网络300是利用IP的网络(因特网、有线局域网(LAN)、无线LAN等)。发送装置100用作服务器,而接收终端设备200用作客户端。接收终端设备200包括个人计算机、个人数字助理(PDA)、移动电话等等。这种通信系统在发送装置100和接收终端设备200之间传输作为分组的数据。接收终端设备200陆续再现所接收到的分组(流式再现)。
发送装置100通过接103把由摄录机(recorder-integrated videocamera)101和麦克风102所获得的视频数据和音频数据(在下文中这些类型的内容数据总称为媒体数据,然而,经压缩编码的视频数据和音频数据也称作媒体数据,除非有必要区分它们)输入到总线104。媒体数据作为流式数据通过IP网络300被发送到接收终端设备200。该流式数据是随时间流逝被流式再现并陆续发送或接收的数据。
连接到总线104的有中央处理单元(CPU)105、只读存储器(ROM)106、随机存取存储器(RAM)107和外部存储装置108。CPU105根据存储在ROM 106或者外部存储装置108中的程序执行各种类型的处理。RAM 107存储程序和数据,使得CPU 105利用所述数据来执行程序。
连接到发送装置100中的总线104的还有输入装置109(包括键盘、鼠标、开关等等)、作为监视器的显示装置110、以及通信接口111。CPU 105根据从输入装置109输入的命令来执行各种类型的处理。外部存储装置108包括例如硬盘驱动器,并且记录程序和各种类型的数据,使得CPU 105利用所述数据来执行程序。例如,要发送的媒体数据预先被存储在外部存储装置108中。通信接口111通过IP网络300与接收终端设备200通信。
与连接到发送装置100的那些类似,通过总线204连接到接收终端设备200的有CPU 205、ROM 206、RAM 207、外部存储装置208、输入装置209、作为监视器的显示装置210、以及通信接口211。接收终端设备200通过通信接口211和IP网络300与发送装置100通信。另外,接收终端设备200包括再现诸如音频数据之类的媒体数据的音频再现装置212和再现视频数据的显示装置213。
在图1所示的系统中,发送装置100通过接口103将由摄录机101和麦克风102所获得的媒体数据存储到RAM 107中。媒体数据可以预先被存储到RAM 107中。利用CPU 105的处理该媒体数据被转换成流式数据,流式数据通过通信接口111被传送到IP网络300。在该情形中,如后面将描述,根据网络环境好坏以及施加到接收终端设备200的处理负载水平,对发送的媒体数据(图像数据)的分辨率进行控制。例如,高分辨率(清晰度)(下文简称为HD)图像数据或者标准分辨率(清晰度)(下文简称为SD)的图像数据被发送。
SD图像是由例如460×480个像素(水平像素数×垂直像素数)构成的图像(视频图形阵列(VGA))。另一方面,HD图像是由例如1080i、720p、1080p等构成的图像。HD图像由(扫描线数、逐行(p)或隔行(i))表示。例如,1080p表示扫描系统是逐行的,并且水平扫描线数乘以垂直扫描线数是1920×1080。除了前述HD图像的格式之外,还有包括扩展图形阵列(XGA)格式(1024×768像素)在内的其他格式。根据本发明实施例,可以使用前述格式的HD图像中的任意一种。
接收终端设备200通过通信接口211接收从发送装置100发送来的流式数据,并且将接收到的流式数据存储到作为缓冲存储器的RAM 207中。CPU 205执行再现处理。显示装置213显示图像,并且音频再现装置212再现声音。
当接收终端设备200已接收到的接收媒体数据是SD图像数据时,不仅可以再现该SD图像数据,而且将该SD图像数据升级为HD图像数据。如上所述,存在多种HD图像格式。接收终端设备200可以将SD图像升级成根据多种HD图像格式中的一种的HD图像,或者将SD图像升级成根据宽高比例如为4∶3的另一种HD图像格式的HD图像。可以利用由多个CPU完成并且在“PLAYSTATION 3”(索尼公司的注册商标)中实现的图像处理方法来将SD图像升级成HD图像。
图2是示出了根据本发明实施例的系统结构的功能框图。在发送装置100中,编码器11对由摄录机101和麦克风102获得的媒体数据进行压缩编码,编码器11是利用图1中示出的CPU 105、ROM 106和RAM 107的软件处理实现的。视频数据根据运动图像专家组第2阶段(MPEG2)、高级视频编码(AVC)(H.246)、MPEG 4等被压缩,而音频数据根据高级音频编码(AAA)、MPEG音频等被压缩。
摄录机101和麦克风102将实时获得的媒体数据提供给发送装置100的编码器11。从编码器11输出的经编码数据被存储到缓冲存储器12(对应于图1中所示的RAM 107)。替代实时数据,可以发送存储部件(例如与图1中所示的外部存储装置108相对应的硬盘驱动器、盘记录和再现部件等)中存储的经压缩的媒体数据。存储部件13中存储的再现数据被提供给缓冲存储器12。
缓冲存储器12中存储的媒体数据被提供给发送部件14(对应于图1中所示的通信接口111)。发送部件14生成作为一系列分组的流式数据。这些流式数据被从发送部件14发送到IP网络300。发送部件14具有将实时获得的媒体数据或者存储在存储部件13中的媒体数据作为流式数据发送的机构。一般来说,发送部件14根据从接收终端发送来的请求开始发送流式数据。或者,发送方可以将流式数据发送给多个接收终端设备(称作多播)。
另外,发送装置100具有接收部件15(对应于图1中所示的通信接口111)。接收部件15通过IP网络300从接收终端设备200接收表示网络环境好坏的信息和表示施加到构成接收终端设备200的升级处理部件的CPU上的负载的水平的信息(称作控制消息)。由接收部件15接收到的控制消息被提供给控制部件16(对应于图1中所示的CPU 105)。控制部件16根据该控制消息对编码器11和存储部件13进行控制,从而改变作为所发送的流式数据的运动图像的分辨率。
例如,控制部件16控制编码器11的压缩比率。SD图像和HD图像之一被从编码器11输出。当HD图像存储在存储部件13中并且控制部件16使存储部件13输出SD图像时,存储部件13输出由HD图像降级成的SD图像。或者,存储部件13可以预先存储SD图像质量内容。
接收终端设备200的接收部件21(对应于图1所示的通信接口211)通过IP网络300从发送装置100接收流式数据。接收部件21将该流式数据转换成媒体数据。该媒体数据被提供给分组分析部件22(对应于图1所示的CPU 205和RAM 207)。分组分析部件22对分组丢失的程度等进行分析。所接收到的媒体数据被存储到缓冲存储器23(对应于图1所示的RAM 207)中。
媒体数据被从缓冲存储器23提供给解码器24。解码器24对该媒体数据解压缩。解码器24是利用图1中所示的CPU 205、ROM 206和RAM207执行的软件处理实现的。从解码器提供来的媒体数据被连接到接收终端设备200的显示装置213和音频再现装置212再现。与解码器24连接设置有升级引擎27。升级引擎27利用CPU、ROM和RAM的软件处理对图像进行升级。
升级引擎27执行将低分辨率图像(例如SD图像)转换成高分辨率图像(例如HD图像)的软件处理。升级引擎27根据施加到接收终端设备200的CPU的负载水平、用户的指定等等来执行升级处理。设置了对施加到构成升级引擎27的CPU上的负载水平进行监视的CPU监视器28。CPU监视器28对施加到构成升级引擎27的CPU上的负载水平进行监视,并且将代表该负载水平的信息提供给控制部件25。CPU监视器28测量CPU的计算负载量,即,CPU的计算负载比率。例如,如果存在多种升级技术,则施加到CPU上的负载的水平取决于所使用的升级技术。如果升级引擎27由多个CPU构成,则可以检测CPU的数目来作为施加到其上的负载的水平。
另外,与接收终端设备200的接收部件21相连接地设置有网络监视器26。网络监视器26监视负载丢失、抖动等等,来判断网络环境是好还是坏。网络监视器26根据所接收数据的分组丢失和延迟状态来了解网络环境,并将代表网络环境的信息提供给控制部件25。控制部件25通过发送部件29将一请求作为控制消息发送给发送装置100,来使发送装置100根据网络环境改变比特率。如果网络环境坏,则执行降低比特率的处理(例如,发送SD图像)。如果网络环境好,则执行增大比特率的处理(例如,发送HD图像)。
控制部件25从网络监视器26接收表示网络环境好坏的信息并从升级引擎27接收代表施加到CPU上的负载水平的信息,并根据这些信息来生成控制消息。所生成的控制消息通过IP网络300被从发送部件29发送到发送装置100的接收部件15。
控制部件25将控制消息发送到发送装置100,请求它发送接收终端设备200认为它可以正常接收的低分辨率数据。结果,可以降低发送数据的量,从而可以在没有丢失的情况下将数据递送到接收终端。如果施加到接收终端设备方的计算负载的水平较低,则可以升级低分辨率的SD图像来生成高分辨率的HD图像。相反,如果计算负载的水平较高,则判断出难以升级低分辨率的SD图像,从而在不升级的情况下再现该低分辨率SD图像。或者,根据计算量相对较小的算法来升级低分辨率SD图像。执行升级的定时可由接收终端设备自由指定。例如,在接收终端设备200接收到对控制消息的答复ACK时可以执行升级。
接收终端设备200发送给发送装置100的控制消息包含例如以下信息。
1)关于网络状况
-分组丢失率
-抖动
-链路速度
2)CPU计算负载
-CPU负载比率(%)
-关于是否可以执行升级的判断
在发送或接收数据的同时,控制消息被周期性地发送。例如,按照例如10秒的间隔发送监视结果。或者,可以仅在最初发送数据时才发送控制消息。当发送装置100已正确地接收了控制消息时,发送装置100向接收终端设备200发送接收响应(ACK)。
图3示出了发送装置100的操作的流程。在步骤S1,完成发送启动准备。在步骤S2,获得要发送的媒体数据。该数据是从摄录机101实时获得的或者从存储部件13获得的。
在步骤S3,判断是否使编码器11编码数据。这种编码意指将HD分辨率转换成SD分辨率的处理。后面将讨论,发送装置100根据控制消息的旨意来指定要发送的媒体数据的分辨率。当判断结果表明没有必要编码时,流程前进到步骤S4。在步骤S4,准备好发送数据。当判断结果表明有必要编码时,流程前进到步骤S5。在步骤S5,执行编码(将HD分辨率转换成SD分辨率)。当要发送的媒体数据是从摄录机101获得的数据时,判断结果表明有必要压缩编码。当要发送的媒体数据是存储部件13中存储的数据时,判断结果表明没有必要编码。
当已准备好发送数据时(在步骤S4),媒体数据被存储到缓冲存储器12中并且被置于分组中。在步骤S6,发送由分组构成的流式数据。
在步骤S7,判断是否接收到了控制消息。在尚未接收到控制消息时,流程返回到步骤S2(获得数据)。当接收到了控制消息时,流程前进到步骤S8。在步骤S8,将所接收到的控制消息提供给控制部件16,随后发送回一答复ACK。此后,流程返回到步骤S2(获得数据)。控制消息包含表示施加到构成接收终端设备200的升级引擎的CPU上的负载水平是高还是低的信息和表示网络环境好坏的信息。
图4示出了接收终端设备200的操作的流程。在步骤S11,从发送装置100接收到发送启动通知。在步骤S12,接收到分组。
在步骤S13,判断是否有必要解压缩解码。在判断结果表明没有必要解码时,流程前进到步骤S14。在步骤S14,判断是否有必要升级。当在步骤S13中的判断结果表明有必要解码时,流程前进到步骤S15。在步骤S15,执行解码处理。
当在步骤S14中的判断结果表明没有必要升级时,流程前进到步骤S16。在步骤S16,再现已接收到的媒体数据。当在步骤S14中的判断结果表明有必要升级时,流程前进到步骤S17。在步骤S17,执行升级。换言之,SD图像被转换成HD图像。在步骤S16,再现已被升级的HD图像。
是否执行升级是基于从发送装置100接收到的命令或者施加到接收终端设备200的CPU的负载的水平来判断的。例如,当施加到CPU的负载水平较高时,即使有必要升级,也不执行升级。在该情形中,确定没有必要升级。另外,在用户未指定升级时,判断没有必要执行升级。
当在步骤S21中接收终端设备200已接收到分组时,在步骤S22中网络监视器26获得表示网络状况环境的信息,并且在步骤S25中CPU监视器28获得表示施加到升级引擎27的CPU上的负载水平的信息。在步骤S23,创建一控制消息,该控制消息包含表示网络环境的状况的信息和表示施加到CPU的负载水平的信息。在步骤S24,该控制消息被从发送部件29发送到发送装置100。
接下来,将描述本发明的一个实施例。发送装置100的控制部件16基于从接收终端设备200发送来的控制消息改变要发送的运动图像的分辨率。接收终端设备200获得所接收的运动图像的分辨率,并基于由CPU监视器28所检测出的施加到CPU上的负载水平对该运动图像进行升级。在需要时,接收终端设备200不升级该运动图像。另外,由于在每种算法中计算处理的负载水平不同,所以算法也被改变。
图5A-5C中所示的控制表中列出了这些处理的示例。在该示例中,将分辨率分类成SD和HD两种级别。或者,也可以将分辨率分类成更精细的级别。另外,也可以将网络状况分类成更精细的状态。
或者,发送装置100可以不指定接收终端设备200执行的处理。换言之,接收终端设备方可以根据网络环境来动态判断是否有必要升级,并且即使发送方未改变分辨率也对运动图像进行升级。
在图5A至5C中示出的示例中,如图5A所示,处理基于从接收终端设备200接收到的控制消息中包含的信息而被执行,该信息表示网络环境的好坏并表示施加到接收终端设备的CPU的负载水平的高低。图5A中的“a”表示发送数据的图像分辨率为SD,如图5B所示。图5B中的“b”表示发送数据的图像分辨率为HD,如图5B所示。图5A中的“1”表示接收终端设备以SD图像质量再现数据,如图5C所示。图5A中的“2”表示接收终端设备将SD图像质量升级成HD图像质量,如图5C所示。图5A中的“3”表示接收终端设备以HD图像质量再现数据,如图5C所示。
接下来,将描述图5A中示出的表格中的各个处理。
如果网络环境坏并且施加到接收终端的负载水平较高,则:a-1(发送SD图像。接收终端设备以SD图像质量再现该SD图像。)
如果网络环境坏并且施加到接收终端设备的负载水平较低,则:a-2(发送SD图像。接收终端设备将该SD图像升级成HD图像)。
如果网络环境好并且施加到接收终端设备的负载水平较高,则:在SD图像被发送时,不执行升级。优选地,发送装置将HD图像发送给接收终端设备,随后接收终端设备以HD图像质量再现该HD图像。(然而,如果媒体数据是SD图像或者网络环境不适于发送HD图像,则可以将SD图像发送到接收终端设备,接收终端设备可以再现该SD图像。)
如果网络环境好并且施加到接收终端设备的负载水平较低,则:接收终端设备可以执行三种处理之一。优选地,发送终端设备发送HD图像,并且接收终端设备再现该HD图像。然而,如果网络环境受限制并且媒体数据是SD图像,则接收终端设备将该SD图像升级成HD图像。另外,在用户已指定了SD图像质量时,发送装置发送SD图像。
接下来,将描述发送装置100和接收终端设备200的控制处理的示例。假设在正发送和接收HD分辨率数据时网络环境变坏。在该情形中,按照以下顺序执行控制处理。
1)发送装置100将HD分辨率数据发送到接收终端设备200。
2)接收终端设备200解码该HD分辨率数据并再现解码后的数据。
3)接收终端设备200检测到网络状况正变坏并向发送装置100发送一控制消息。此刻,发送了表明例如“分组丢失率5%,CPU负载比率30%”的控制消息。
4)发送装置100接收到该控制消息,并将发送数据的HD分辨率改变到SD分辨率。
5)发送装置100向接收终端设备200发送一答复ACK,该答复ACK表明发送装置100已改变与该控制消息相对应的分辨率。
6)当接收终端设备200从发送装置100接收到与该控制消息相对应的答复ACK时,如果CPU负载比率为30%,则接收终端设备200判断出能执行升级,随后升级SD分辨率数据、并再现经升级的数据。
7)在执行前述处理的同时,如果网络状况转好,则发送装置100将原始HD分辨率的数据发送到接收终端设备200。
本领域的技术人员应当理解,取决于设计要求和其他因素,可以进行各种修改、组合、子组合和变更,只要它们处于所附权利要求或其等同物的范围之内。例如,发送装置可以将从另一服务器等接收到的流式数据等等中继到接收终端设备。或者,发送装置可以将由接收终端设备接收到的低分辨率图像数据升级,并将经升级的图像数据发送给另一接收终端设备。另外,根据本发明的该实施例,可以根据是否执行了升级并通过选择算法,来区分低比特率运动图像递送服务的质量。因此,可以创建基于费用区分服务的商业模型。
本申请包含与2008年5月30日向日本专利局提交的日本在先专利申请JP 2008-142724相关的主题,这里通过引用将该申请的全部内容并入。
Claims (6)
1.一种发送装置,包括:
缓冲存储器,该缓冲存储器存储作为要发送的图像数据的第一图像数据和第二图像数据,所述第二图像数据的分辨率比所述第一图像数据的分辨率高;
发送部件,该发送部件将所述第一图像数据或所述第二图像数据作为流式数据发送;
通信部件,该通信部件从接收终端设备接收一控制消息,该控制消息表示网络状况和施加到所述接收终端设备中的用于执行从所述第一图像数据到所述第二图像数据的升级的处理装置上的负载的水平;以及
控制部件,该控制部件控制所述发送部件在所述控制消息表明所述网络状况坏时发送所述第一图像数据,在所述控制消息表明所述网络状况好时发送所述第一图像数据或所述第二图像数据,而在所述控制消息表明所述网络状况好并且施加到所述处理装置上的负载的水平较高时控制所述接收终端设备不执行所述升级。
2.如权利要求1所述的发送装置,
其中所述控制部件在所述控制消息表明所述网络状况好并且施加到所述处理装置上的负载的水平较低时,控制所述接收终端设备来执行不改变所接收到的图像数据的分辨率的处理或者执行用于执行所述升级的处理。
3.如权利要求1所述的发送装置,
其中对所述控制消息的答复包含指定由所述接收终端设备执行的处理的信息。
4.如权利要求1所述的发送装置,
其中在所述接收终端设备提供了多种升级算法,并且取决于所述升级算法中被使用的升级算法,施加到所述处理装置上的负载的水平被改变。
5.一种发送方法,包括以下步骤:
存储作为要发送的图像数据的第一图像数据和第二图像数据并将所述第一图像数据或所述第二图像数据作为流式数据发送,其中所述第二图像数据的分辨率比所述第一图像数据的分辨率高;
从接收终端设备接收一控制消息,该控制消息表示网络状况和施加到所述接收终端设备中的用于执行从所述第一图像数据到所述第二图像数据的升级的处理装置上的负载的水平;以及
在所述控制消息表明所述网络状况坏时发送所述第一图像数据,在所述控制消息表明所述网络状况好时发送所述第一图像数据或所述第二图像数据,而在所述控制消息表明所述网络状况好并且施加到所述处理装置上的负载的水平较高时控制所述接收终端设备不执行所述升级。
6.一种接收装置,包括:
缓冲存储器,该缓冲存储器接收作为流式数据的第一图像数据或第二图像数据,所述第二图像数据的分辨率比所述第一图像数据的分辨率高;
监视器,该监视器监视施加到用于执行从所述第一图像数据到所述第二图像数据的升级的处理装置上的负载的水平;以及
控制部件,该控制部件在所述第一图像数据被接收到并且施加到所述处理装置上的负载的水平较高时使得不执行所述升级。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008142724A JP4670902B2 (ja) | 2008-05-30 | 2008-05-30 | 送信装置、送信方法および受信装置 |
JP2008142724 | 2008-05-30 | ||
JP2008-142724 | 2008-05-30 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101594203A CN101594203A (zh) | 2009-12-02 |
CN101594203B true CN101594203B (zh) | 2013-03-27 |
Family
ID=40911049
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009101413265A Expired - Fee Related CN101594203B (zh) | 2008-05-30 | 2009-05-31 | 发送装置、发送方法和接收装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20090295988A1 (zh) |
EP (1) | EP2129126A1 (zh) |
JP (1) | JP4670902B2 (zh) |
KR (1) | KR20090124993A (zh) |
CN (1) | CN101594203B (zh) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9485299B2 (en) * | 2009-03-09 | 2016-11-01 | Arris Canada, Inc. | Progressive download gateway |
US9197677B2 (en) * | 2009-03-09 | 2015-11-24 | Arris Canada, Inc. | Multi-tiered scalable media streaming systems and methods |
US8566393B2 (en) | 2009-08-10 | 2013-10-22 | Seawell Networks Inc. | Methods and systems for scalable video chunking |
US8190677B2 (en) | 2010-07-23 | 2012-05-29 | Seawell Networks Inc. | Methods and systems for scalable video delivery |
JP5598155B2 (ja) * | 2010-08-12 | 2014-10-01 | ソニー株式会社 | 情報処理装置および方法、並びに送受信システム |
JP5897792B2 (ja) * | 2010-12-10 | 2016-03-30 | ソニー株式会社 | 画像処理装置、画像再生装置、および画像再生システム |
KR101904053B1 (ko) * | 2012-03-13 | 2018-11-30 | 삼성전자 주식회사 | 단말장치의 멀티미디어 처리장치 및 방법 |
US9712887B2 (en) | 2012-04-12 | 2017-07-18 | Arris Canada, Inc. | Methods and systems for real-time transmuxing of streaming media content |
JP5838925B2 (ja) | 2012-06-29 | 2016-01-06 | ブラザー工業株式会社 | 通信システム、端末装置、動画の表示方法、及びプログラム |
JP2014049942A (ja) * | 2012-08-31 | 2014-03-17 | Seiko Epson Corp | 表示システム、画像供給装置、プログラム、及び、表示システムの制御方法 |
DE102013001814A1 (de) * | 2013-02-04 | 2014-08-07 | Silicon Software Gmbh | Eingebettetes System zur Videoverarbeitung mit Hardware-Mitteln |
US10349922B2 (en) * | 2013-02-15 | 2019-07-16 | B-K Medical Aps | On demand ultrasound performance |
WO2014147835A1 (ja) * | 2013-03-22 | 2014-09-25 | 株式会社東芝 | 通信装置、通信方法及びプログラム |
JP2015061108A (ja) * | 2013-09-17 | 2015-03-30 | 株式会社リコー | 通信システム、通信装置および方法 |
JP6022076B2 (ja) * | 2013-10-15 | 2016-11-09 | 株式会社東芝 | 電子機器および通信制御方法 |
JP6371539B2 (ja) * | 2014-03-06 | 2018-08-08 | 日本放送協会 | 送信装置、受信装置及び水中伝送システム |
JP5999205B2 (ja) * | 2015-01-28 | 2016-09-28 | ソニー株式会社 | 通信装置 |
KR102209292B1 (ko) * | 2015-11-04 | 2021-01-29 | 삼성전자 주식회사 | 멀티미디어 시스템에서 데이터 제공 방법 및 장치 |
JP6332364B2 (ja) * | 2016-08-24 | 2018-05-30 | ソニー株式会社 | 通信装置、通信方法およびプログラム |
JP6922344B2 (ja) * | 2017-03-31 | 2021-08-18 | 富士通株式会社 | 情報処理装置、情報処理システム、及び情報処理方法 |
CN109951676B (zh) * | 2017-12-21 | 2021-06-01 | 富泰华工业(深圳)有限公司 | 画面传输方法及摄像装置 |
CN112153465B (zh) * | 2019-06-28 | 2024-01-16 | 北京京东尚科信息技术有限公司 | 图像加载方法及装置 |
WO2021118557A1 (en) | 2019-12-11 | 2021-06-17 | Google Llc | Methods, systems, and media for selecting formats for streaming media content items |
JP7138739B2 (ja) | 2021-02-10 | 2022-09-16 | ソフトバンク株式会社 | 通信システム、通信装置、及びプログラム |
CN114978898B (zh) * | 2022-05-12 | 2024-04-12 | 泽景(西安)汽车电子有限责任公司 | 数据传输控制方法、装置、抬头显示器和存储介质 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5821986A (en) * | 1994-11-03 | 1998-10-13 | Picturetel Corporation | Method and apparatus for visual communications in a scalable network environment |
US6172672B1 (en) * | 1996-12-18 | 2001-01-09 | Seeltfirst.Com | Method and system for providing snapshots from a compressed digital video stream |
US6057884A (en) * | 1997-06-05 | 2000-05-02 | General Instrument Corporation | Temporal and spatial scaleable coding for video object planes |
DE59906217D1 (de) * | 1999-12-30 | 2003-08-07 | Swisscom Mobile Ag | Verfahren für die übermittlung von bilddaten |
US6704362B2 (en) * | 2001-07-06 | 2004-03-09 | Koninklijke Philips Electronics N.V. | Resource scalable decoding |
JP2003110558A (ja) * | 2001-09-28 | 2003-04-11 | Oki Electric Ind Co Ltd | 通信品質監視システム |
JP3757857B2 (ja) * | 2001-12-12 | 2006-03-22 | ソニー株式会社 | データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム |
FR2857198B1 (fr) * | 2003-07-03 | 2005-08-26 | Canon Kk | Optimisation de qualite de service dans la distribution de flux de donnees numeriques |
JP4362761B2 (ja) | 2003-10-29 | 2009-11-11 | ソニー株式会社 | 送信装置および方法、記録媒体、並びにプログラム |
JP3833212B2 (ja) * | 2003-11-19 | 2006-10-11 | シャープ株式会社 | 画像処理装置、画像処理プログラムおよび可読記録媒体 |
JP4207019B2 (ja) * | 2005-05-16 | 2009-01-14 | 船井電機株式会社 | クライアント・サーバシステム |
KR100700982B1 (ko) * | 2005-05-24 | 2007-03-29 | 삼성전자주식회사 | 영상처리방법과, 영상처리장치와 이를 포함하는영상처리시스템 및 그 제어방법 |
JP2006344283A (ja) * | 2005-06-08 | 2006-12-21 | Toshiba Corp | 録画再生装置及び録画再生方法 |
JP2007013315A (ja) * | 2005-06-28 | 2007-01-18 | Toshiba Corp | 情報処理装置および動画像再生方法 |
US7483939B2 (en) * | 2005-08-25 | 2009-01-27 | General Electric Company | Medical processing system allocating resources for processing 3D to form 2D image data based on report of monitor data |
JP4479650B2 (ja) * | 2005-11-29 | 2010-06-09 | ソニー株式会社 | コミュニケーションシステム、端末装置及びコンピュータプログラム |
WO2007129257A1 (en) * | 2006-05-04 | 2007-11-15 | Koninklijke Philips Electronics N.V. | Controlled frame rate conversion |
JP4834472B2 (ja) * | 2006-06-20 | 2011-12-14 | 株式会社東芝 | 情報処理装置、動画再生方法、およびプログラム |
US8731064B2 (en) * | 2006-09-11 | 2014-05-20 | Apple Inc. | Post-processing for decoder complexity scalability |
US8250618B2 (en) * | 2006-09-18 | 2012-08-21 | Elemental Technologies, Inc. | Real-time network adaptive digital video encoding/decoding |
KR101280443B1 (ko) * | 2007-01-23 | 2013-06-28 | 삼성테크윈 주식회사 | 영역 영상을 처리하는 장치 및 그 제어방법 |
KR101156117B1 (ko) * | 2007-08-02 | 2012-07-03 | 삼성전자주식회사 | 영상 검출 장치 및 영상 검출 방법 |
-
2008
- 2008-05-30 JP JP2008142724A patent/JP4670902B2/ja not_active Expired - Fee Related
-
2009
- 2009-04-28 EP EP20090251199 patent/EP2129126A1/en not_active Withdrawn
- 2009-05-27 US US12/472,525 patent/US20090295988A1/en not_active Abandoned
- 2009-05-29 KR KR20090047406A patent/KR20090124993A/ko not_active Application Discontinuation
- 2009-05-31 CN CN2009101413265A patent/CN101594203B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP2129126A1 (en) | 2009-12-02 |
JP2009290691A (ja) | 2009-12-10 |
CN101594203A (zh) | 2009-12-02 |
KR20090124993A (ko) | 2009-12-03 |
US20090295988A1 (en) | 2009-12-03 |
JP4670902B2 (ja) | 2011-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101594203B (zh) | 发送装置、发送方法和接收装置 | |
US7502818B2 (en) | Data communications system, data sender, data receiver, data communications method, and computer program | |
US8472520B2 (en) | Systems and methods for transmitting and receiving data streams with feedback information over a lossy network | |
US9565482B1 (en) | Adaptive profile switching system and method for media streaming over IP networks | |
US8005028B2 (en) | Data communication system, data transmitting device, data transmitting method, data receiving device, and data receiving method | |
EP1786136A1 (en) | Packet retransmission apparatus, communication system and program | |
US20080310825A1 (en) | Record quality based upon network and playback device capabilities | |
CN102714728B (zh) | 视频图像编码数据的显示方法、设备和通信系统 | |
JP4850932B2 (ja) | 画像伝送装置 | |
JP2009021783A (ja) | 送信装置、受信装置、誤り訂正システム、送信方法及び誤り訂正方法 | |
US8869220B2 (en) | Using program clock references to assist in transport of video stream to wireless device | |
US20080133744A1 (en) | Multimedia data streaming server and method for dynamically changing amount of transmitting data in response to network bandwidth | |
US20120151291A1 (en) | Receiving apparatus and processing method for receiving apparatus | |
JP5377040B2 (ja) | 送信装置及び送信方法 | |
US20140118618A1 (en) | Transmission apparatus, transmission method, reception apparatus, reception method, and computer program | |
KR20080035804A (ko) | 네트워크 적응형 데이터 전송 방법, 이를 위한 데이터 전송시스템, 데이터 송신 장치, 및 데이터 수신 장치 | |
US8582640B2 (en) | Adaptive joint source channel coding | |
JP4455405B2 (ja) | 映像通信装置、映像配信サーバ、双方向映像通信システム、及びプログラム | |
JP2004153610A (ja) | 動画像配信方法、無線端末、動画像配信制御装置、及び動画像配信システム | |
JP2005110013A (ja) | 受信装置、受信方法および受信プログラム | |
KR100916312B1 (ko) | 적응적 가중 오류 정정 부호화 및 다중 표현열 부호화를사용한 비디오 전송 장치 및 그 방법 | |
WO2021002135A1 (ja) | データ送信装置、データ送信システム、及び、データ送信方法 | |
JP4541758B2 (ja) | 画像伝送装置 | |
WO2010117644A1 (en) | Method and apparatus for asynchronous video transmission over a communication network | |
WO2008078853A1 (en) | Method for receiving efficient video using received signal strength notification mechanism in iptv environment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130327 Termination date: 20150531 |
|
EXPY | Termination of patent right or utility model |