CN1454429A - 多媒体通信终端 - Google Patents

多媒体通信终端 Download PDF

Info

Publication number
CN1454429A
CN1454429A CN00819746A CN00819746A CN1454429A CN 1454429 A CN1454429 A CN 1454429A CN 00819746 A CN00819746 A CN 00819746A CN 00819746 A CN00819746 A CN 00819746A CN 1454429 A CN1454429 A CN 1454429A
Authority
CN
China
Prior art keywords
tolerance
fault
terminal
request
mentioned
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN00819746A
Other languages
English (en)
Other versions
CN100385944C (zh
Inventor
中屋雄一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of CN1454429A publication Critical patent/CN1454429A/zh
Application granted granted Critical
Publication of CN100385944C publication Critical patent/CN100385944C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/68—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving the insertion of resynchronisation markers into the bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404—Monitoring of server processing errors or hardware failure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379—Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及在使用有传送错误的通信线路的多媒体通信终端中，能够进行符合通信线路的状况或者用户的喜好的容错性控制的多媒体通信终端，在接收终端中设置直接输入与用户的容错性相关的请求的装置，并将此信息传送到发送终端使编码比特流容错性的强度变更。

Description

多媒体通信终端
技术领域
本发明涉及一种能够应付通信线路的传送错误的影响的多媒体通信系统。
背景技术
用于进行使用了无线携带终端的运动图像通信的环境正在变得完善。过去，由于低线路容量(传送比特率)、高传送错误率、低电池容量(等价于低运算能力)三项技术的限制，人们认为这样的通信终端的开发很困难。但是由于以IMT-2000方式所代表的高比特率便携电话系统、以MPEG-4所代表的高信息压缩率·高容错性图像编码方式的问世，和高性能电池、低消耗电功率处理器的开发，上述三项技术上的限制正在克服。
图1中表示遵照国际标准MPEG-4的编码器100的构成实例。MPEG-4，作为编码方式采用组合了块匹配和DCT(离散余弦变换)的混合编码方式(帧间/帧内适应编码方式)。减法器102，计算输入图像信号(当前帧的原图像信号)101和帧间/帧内编码切换开关119的输出图像信号113(后面说明)的差，并输出误差图像信号103。此误差图像信号，使用DCT变换器104变换成DCT系数后使用量化器105进行量化，成为量化DCT系数106。此量化DCT系数在作为传送信息输出到通信线路的同时，也在编码器内为了合成帧间预测图像信号进行使用。
接着，对预测图像信号合成的步骤进行说明。预测图像信号合成在编码器100内用单点划线围起来所示的块107内进行。上述量化DCT系数106，经由反量化器108和反DCT变换器109成为解码误差图像信号110(与在接收方所再生的误差图像信号相同的图像信号)。在加法器111中，将帧间/帧内编码切换开关119的输出图像信号113(后面说明)加到此信号上，就得到当前帧的解码图像信号(与在接收方所再生的当前帧的解码图像信号相同的图像信号)。此图像信号被临时存储到帧存储器114，仅延迟1帧部分的时间。因此，在当前时刻，帧存储器114正输出过去帧的解码图像信号115。此过去帧的解码图像信号115和当前帧的输入图像信号101被输入到块匹配单元116，进行块匹配处理。在块匹配中，将图像信号分割为多个块，对各块从过去帧的解码图像信号中取出与当前帧的原图像信号最相似的部分，由此来合成当前帧的预测图像信号117。此时，有必要进行检测各块在过去帧和当前帧之间移动了多大程度的处理(运动推定处理)。通过运动推定处理检测出的各块的运动矢量作为运动矢量信息120被传送到接收方。接收方，由此运动矢量信息和过去帧的解码图像信号，就可以合成与在发送方能独立得到的信号相同的预测图像信号。预测图像信号117与“0”信号118同时输出到帧间/帧内编码切换开关119。此开关，通过选择两个输入中的任何一个，来切换帧间编码和帧内编码。在选择预测图像信号117的情况下(图2表示此情况)，进行帧间编码。另一方面，在选择“0”信号118的情况下，由于输入图像信号原封不动地进行DCT编码并输出到通信线路，就成为进行帧内编码。为了接收方正确地得到解码图像数据，有必要知道在发送方是进行帧间编码还是进行帧内编码。为此，将帧间/帧内识别标志121向通信线路输出。最终的H.263编码比特流123，通过使用多路化器122对量化DCT系数、运动矢量、帧内/帧间识别标志的信息进行多路化来得到。
在图2中，表示接收图1的编码器100输出的编码比特流123的解码器200的构成实例。接收到的MPEG-4比特流217，通过分离器216被分离成量化DCT系数201、运动矢量信息202和帧内/帧间识别标志203。量化DCT系数201经由反量化器204和反DCT变换器205就成为已解码的误差图像信号206。此误差图像信号通过加法器207相加到帧间/帧内编码切换开关214的输出图像信号215，并作为解码图像信号208输出。帧间/帧内编码切换开关214根据帧间/帧内编码识别标志203来切换输出。进行帧间编码的情况下使用的预测图像信号212，在预测图像信号合成单元211进行合成。在这里，对存储在帧存储器209中的过去帧解码图像信号210，进行按照接收到的运动矢量信息202使每个块移动位置的处理。另一方面在帧内编码的情况下，帧间/帧内编码切换开关，原封不动地输出“0”信号213。
进行了MPEG-4编码的图像信号，由持有亮度信息的1个亮度平面(Y平面)和持有颜色信息(也称色差信息)的2个色差平面(U平面和V平面)构成。此时图像信号在水平方向上持有2m个象素、在垂直方向上持有2n个象素的情况下(设m和n为正整数)，特征就是Y平面在水平方向上持有2m个象素、在垂直方向上持有2n个象素，U和V平面在水平方向上持有m个象素、在垂直方向上持有n个象素。象这样色差平面的分辨率低是因为人们的视觉具有对色差空间上的变化的感觉比较迟钝的特征。输入这样的图像信号，MPEG-4就以称为宏块的块为单位进行编码·解码的处理。
在图3中说明宏块的构成。宏块由Y块、U块和V块3个块构成，持有亮度信息的Y块301的大小是16×16象素，持有色差信息的U块302以及V块303的大小是8×8象素。在MPEG-4中，帧内编码和帧间编码的切换是以此宏块为单位进行的。另外，在块匹配的处理中，可以对每个宏块传送运动矢量。
在无线通信中，杜绝通信线路中的传送错误的发生几乎不可能。其另一方面，由信息压缩技术所压缩的编码数据，具有经不起错误比特(数据中的比特的反向)且多比特的反向就会使解码器失控(再生处理停止的状态、不接收来自用户的信息的状态等)或者再生信息显著劣化的性质。一般在数据通信中，活用Reed-Solomon编码等的错误修正编码或者发送方重发发生了传送错误的包的重发式协议，来假定达到在所传送的数据中没有发生错误，或者即使发生也是极低的错误比特率(包含在数据中的比特反向的概率)的情况多。但是，错误修正编码或者重发式协议的使用会导致传送数据的实际的比特率的降低和传送延迟的增加，在低速率的实时通信中未必是合适的解决方案。
所以在无线环境中，在进行低比特率图像通信的情况下，在假设接收方所得到的编码比特流中错误比特会发生的基础上，就需要用于最低限度地防止由解码此比特流所得到的再生图像的劣化的技术(容错性编码技术)。容错性编码技术的最简单的例子是提高进行帧内编码的宏块的比例的情况。在进行了帧间编码的情况下，因为过去帧的再生图像被当前帧的解码时所使用，就会发生某帧中发生了的劣化原封不动地在以后的帧中残留的现象。为了防止此现象的发生，提高进行帧内编码的宏块的比例，使在过去的帧中发生了的劣化难以继承到以后的帧内的话就可以了。但是，一般提高进行帧内编码的宏块的比例与编码性能(固定了比特率的情形的图像质量)的降低有关。也就是，在使用上述的方法使编码比特流的容错性提高了的情况下，反之传送错误不发生时的再生图像的质量将会劣化。
在国际标准MPEG-4所规定的图像编码方式中，进而采用以下的三个种容错性编码技术。
(1)同步恢复标记
在MPEG-4的编码比特流中，除了发生特殊的代码字的情形之外不会排列连续16个以上的0。此特殊的代码字有表示VOP(VideoObject Plane---MPEG-4中这样称呼运动图像的帧)起始的VOP起始代码和同步恢复标记2个种类。其中的同步恢复标记是，为了提高编码比特流的容错性，由发送方的编码装置特意传送的代码字。同步恢复标记可以插入除了VOP的最初的宏块以外的所有关于宏块的编码信息之前。解码装置在发现了编码比特流中有错误的情况下，如果查找下一个同步恢复标志，从其之后的数据开始解码，至少能够正确地解码同步恢复标记以后的数据。发送方的编码装置，能够通过独立的判断来调整将同步恢复标记插入编码比特流中的频率。如果提高插入同步恢复标记的频率当然容错性就提高。但是，作为反面效果，由于伴随着冗余信息的传送编码性能就会降低，没有传送错误的情况下的图像质量将会劣化。
(2)数据分割
由于传送错误的影响，宏块的运动矢量出错并进行了解码的情况，与关于DCT系数的信息中发生了错误的情况相比，就会知道在再生图像中将发生更大的劣化。着眼于这一点，对由2个同步恢复标记所夹的多个宏块，首先仅整理重要的信息来进行传送就是数据分割的想法。这是因为同步恢复标志之后所传送的信息比之前所传送的信息受传送错误的影响的概率要低。
在数据分割中优先被传送的是宏块的属性信息、宏块的运动矢量(仅是帧间编码的情况)、宏块的直流DCT系数(仅是帧内编码的情况)三种信息。例如当处于5个进行帧间编码的宏块的信息由同步恢复标志所夹的状态时，首先在传送关于5个宏块的属性信息以后传送5个运动矢量，最后整理关于5个宏块的DCT系数并进行传送。利用此数据分割的容错性提高，在同步恢复标志的传送频率高的情况下会显著。但是，在使容错性提高的情况下，会发生编码性能降低的现象。
(3)可反解码式的可变长度代码
在MPEG-4中，使用代码长度根据将要发生的信息进行变化的可变长度代码。但是，一般由可变长度代码所编码的数据，仅可以在一个方向上进行解码。也就是，必须在正确地发现编码数据的开头后，从先传送的比特开始依次进行解码处理。但是，当在代码字的设计上考虑特殊的办法后，就能够设计从反方向也可以解码的可变长度代码(可反解码式的可变长度代码)。通过使用可反解码式的可变长度代码，即使对由于传送错误的影响从正向解码困难的比特流，也能够从最末尾沿反向进行解码，就能够最小限度地防止遗失的信息。
MPEG-4中，在DCT系数编码上，能够使用可反解码式的可变长度代码。此外，即使在使用了反解码式的可变长度代码的情况下，必须正确地发现数据的开头(末尾)这一点并没有变。另外，在关于运动矢量和宏块的属性的信息的编码中不使用可反解码式的可变长度代码。所以，为了使容错性提高，有必要提高同步恢复标记的频率，这就会导致编码性能的降低。
通过使用这些容错性技术，就能够跳跃性地降低对错误比特发生的编码比特流进行解码时的图像质量劣化。但是，对这些容错性技术有必要注意一点，就是其具有当提高容错性后编码性能就会降低的共有性质。也就是，过度地提高容错性，反过来就可能与接收方的再生图像的质量变差的结果有关。另外，由于错误比特发生的质量劣化(发生原图像中没有的图案等)，和由于编码性能的降低发生的质量劣化(发生整体模糊)，一般性质不同。根据这些劣化的不同再生图像的观察者感觉到的障碍的相对强度会因人而异，即使错误比特率的条件相同，根据观察者的喜好的不同最佳容错性的强度也会不同的情况多。
发明内容
编码比特流的容错性和编码性能是互斥的关系。本发明的目的就是构筑根据用户的喜好或者通信线路的状态等条件来选择最佳的容错性强度的多媒体通信系统。
根据用户的喜好用户本身来操作自己使用的终端，或者根据通信线路的状态等条件，来选择赋予所发送的编码比特流的容错性的最佳强度。
附图说明
图1是示出MPEG-4的图像编码器的构成实例的图。
图2是示出MPEG-4的图像信号解码器的构成实例的图。
图3是示出在MPEG-4中的宏块的构成实例的图。
图4A-图4C是示出在本发明中使用的系统的构成实例的图。
图5是示出根据用户的请求使发送方发送的比特流的容错性变化的接收终端的构成实例的图。
图6是示出对传送错误率等的通信线路的状态进行检测，自动地调整从发送方所发送的比特流的容错性强度的接收终端的构成实例的图。
图7是示出图6所示的终端的容错性变更请求信息发生单元中的处理的流程图的实例的图。
图8是示出与图5以及图6所示的接收终端对应的发送终端的构成实例的图。
图9A是示出图4A所示的系统的构成实例中，在实时进行图像信号的编码的情形中图8的图像编码比特流发生单元的构成实例的图。
图9B是示出图4B所示的系统的构成实例中，在实时进行图像信号的转换编码的情形中图8的图像编码比特流发生单元的构成实例的图。
图9C是示出图4C所示的系统的构成实例中，在原封不动地传送所存储的比特流的情形中图8的图像编码比特流发生单元的构成实例的图。
图10是示出使用通用处理器安装了图5以及图6的接收终端的情形的构成实例的图。
图11是示出使用通用处理器安装了图8的发送终端的情形的构成实例的图。
图12是示出使用图10的通用处理器进行了安装的接收终端中的处理的实例的流程图。
图13是示出使用图11的通用处理器进行了安装的接收终端中的处理的实例的流程图。
具体实施方式
在本发明中使用的系统的形态如图4A-图4C所示。在图4A所示的发送终端410中，利用照相机402进行图像信号输入和利用图像编码装置403进行实时图像编码，这里所编码的比特流使用发送装置404进行发送，接收方的终端405是对此进行再生的系统。在图4B所示的发送终端406中作为数据记录在存储介质407中的是以高比特率进行编码后的比特流，对于此数据在转换编码器中进行实时转换编码(比特率的变换)，进行将比特率降低到所使用的通信线路能够传送的级别的处理。通过进行实时的转换编码，就能够生成符合此时状况的比特流。这样所生成的比特流，使用发送装置409进行发送，接收方的终端410进行接收并再生。与此相对在图4C所示的发送终端411中，在存储介质412中准备好传送用的编码比特流，所选择的比特流使用发送装置413原封不动地进行发送，接收方的终端414进行接收。
在假定所传送的信息中包含图像信息和声音信息的情况下，作为使所传送的比特流的容错性变化的方法的实例，可以考虑以下的项目。
①进行帧内编码的宏块的发生频率：
在提高了频率的情况下，虽然容错性会提高但编码性能就会降低。
②同步恢复标记的发生频率：
在提高了频率的情况下，虽然容错性会提高但编码性能就会降低。
③声音信息的传送停止：
在停止了声音信息的传送的情况下，虽然能够强化该部分的图像信息的容错性。但是，用户就会感觉到由于不传送声音信息而产生的障碍。
④图像信息的传送停止：
在停止了图像信息的传送的情况下，虽然能够强化该部分的图像信息的容错性。但是，用户就会感觉到由于不传送图像信息而产生的障碍。
下面说明对组合了这些项目的容错性进行控制的实例。
第1等级：
·将进行帧编码的宏块设为1个VOP为最低2个。
·将下一个同步恢复标志传送到从前一个同步恢复标志数起超过480比特的后一个宏块边界。
·传送图像和声音双方信息。
第2等级：
·将进行帧编码的宏块设为1个VOP为最低2个。
·将下一个同步恢复标志传送到从前一个同步恢复标志数起超过640比特的后一个宏块边界。
·传送图像和声音双方信息。
第3等级：
·将进行帧编码的宏块设为1个VOP为最低4个。
·将下一个同步恢复标志传送到从前一个同步恢复标志数起超过640比特的后一个宏块边界。
·传送图像和声音双方信息。
第4等级：
·将进行帧编码的宏块设为1个VOP为最低4个。
·将下一个同步恢复标志传送到从前一个同步恢复标志数起超过640比特的后一个宏块边界。
·仅传送图像信息。
第5等级：
·仅传送声音信息。
在此实例中，第1等级的容错性最低，直到第5等级随着编号的增加，容错性变高。但是，在传送线路中没有发生错误的情形的再生信息的质量，反过来随着与等级相关的编号的增加而变低。
进而，用户关于容错性的认识可以有各种形态。例如，即使在观察了相同的再生图像的情况下，根据用户的不同，会有认为图像的紊乱相对多且运动图像的帧速率相对高的状态的情形和认为图像的紊乱相对少且运动图像的帧速率相对低的状态的情形。关于本发明的容错性的请求也必须响应于这样的认识上的个人差别。
图5表示根据用户的请求使发送方发送的比特流的容错性变化的接收终端500的构成实例。此终端具有接收·再生已编码的运动图像信息和声音信息的比特流的功能。来自通信线路的接收信号515经由通信线路解码器514向分离器513供给，被分离成图像编码比特流和声音编码比特流。图像编码比特流在图像信号解码器509进行解码。此数字解码图像信号经由数字/模拟转换器508在显示器507中显示。同样地，声音编码比特流在声音信号解码器512进行解码。当成为数字化的解码声音以后经由数字/模拟转换器511在扬声器510中输出。另一方面，用户输入关于容错性的用户请求501，根据此输入在容错性变更请求信息发生单元502中所发生的容错性变更请求信息516经由多路化器504以及通信线路编码电路505作为发送信息506向发送方传送。这里的用户请求501，可以是相对的(使容错性比现状提高/降低一个等级)也可以是绝对的(例如，直接指定仅传送声音等的容错性的等级)。此外，此接收终端在有另外进行发送的信息503的情况下(例如，此终端是双向通信终端，发送图像和声音信息的情形)，将此信息与容错性变更请求信息516进行多路化并传送即可。如此终端这样，如果根据用户的请求直接调整从发送方发送的比特流的容错性成为可能，就能够得到符合用户个人的喜好的最佳的再生信息。此外，在502中所发生的容错性变更请求信息516，例如是2比特的信息，“00”的话就意味“无变更请求”，“01”的话就意味“请求提高容错性”，“10”的话就意味“请求降低容错性”这样来定义即可。另外，在以绝对的数值指定容错性的级别的情况下，进一步增加比特数来对应即可。例如，将容错性变更请求信号设为3比特，将“000”定义为“无变更请求”的话，就能够请求7个等级的容错性级别。
使用图5的终端，在终端的用户请求变更容错性时的用户接口，可考虑各种各样的方法。例如，也可以独立设置请求提高容错性的按钮和反之请求降低的按钮，也可以利用已有的电话号码输入用的按钮进行特定号码的输入。另外，也可以准备“模式按钮”或者“菜单按钮”，当按下此按钮特定的次数后，终端就成为接收容错性变更请求的输入的状态，例如按“0”的按钮的话就请求提高容错性，“1”的话就与其相反这样来定义各自的按钮所具有的含义。
图6是对传送错误率等的通信线路的状态进行检测，自动地调整从发送方所发送的比特流的容错性强度的接收终端600的构成实例。与图5相同的构成部件赋予相同的参考标记。此终端的通信线路解码单元604，经由通信线路输出关于已接收的比特流中错误比特的发生状况的信息603。像这样对错误比特的发生状况进行检查，可以使用在通信线路编码中所使用的错误检测或者错误修正代码的功能来进行。关于此错误比特的发生状况的信息被输入到容错性变更请求信息发生单元602，根据错误比特的发生状况，对发送方变更将要送出的容错性变更请求信息605。
图7中说明此容错性变更请求信息发生单元602中的处理的流程图的实例。在步骤701中处理开始，紧接着在步骤702中输入关于已接收的比特流中的错误比特的发生状况的信息(图6的603)。在步骤703中如果错误比特率为10-6以下的话，在步骤708中发送请求第1等级的容错性的信号。与此相同，当在步骤704、步骤705以及步骤706中错误比特率分别为10-5、10-4以及10-3以下的情况下，分别在步骤709、步骤710以及步骤711中分别发送请求第2等级、第3等级以及第4等级的容错性的信号。另一方面，在错误比特率超过10-3的情况下，在步骤707中发送请求第5等级的容错性的信号。
在图6的终端600中，通过用户的设定601，就能够根据错误比特率来变更所请求的容错性的等级。通过活用此功能，就能够根据用户的喜好，例如在错误比特率为10-4以下就请求第1等级的容错性，在超过10-4的情况下就请求第5等级的容错性这样来变更终端的设定。像这样在用户独自将容错性的设定输入到终端时使用用户接口，可考虑各种各样的方法。例如，可考虑准备“模式按钮”或者“菜单按钮”，当按下此按钮特定的次数后，终端就成为接收关于容错性的自动变更的用户设定的状态，通过用户的设定的变更也可以在通信开始前进行，也可是在通信中进行。另外，也可考虑将此用户设定记录到内置于终端中的闪存中，在此终端进行和其他的终端的通信时，在通信开始之后必须将存储在闪存中的用户设定发送到对方终端这样的构成。
进而，也能够在图6中说明了的容错性的自动变更之外，增加在必要的情况下能够有选择地使用图5中说明了的通过手动的容错性的变更请求。在此情况下，作为通常的设定，可以设为用户预先将希望的容错性设定在容错性变更请求信息发生单元602中，由系统自动地进行对应，仅当用户想进行通过手动的容错性的变更时，设为解除通常的设定进行通过手动的容错性的变更。用于此设定的用户接口也与图5同样地，例如也可以独立设置设定提高容错性的按钮和反之设定降低的按钮，也可以设为通过按照预定的约定对此按钮进行操作来解除通常的设定并进行通过手动的容错性的变更，也可以利用已有的电话号码输入用的按钮进行特定号码的输入。另外，也可以准备“模式按钮”或者“菜单按钮”，当按下此按钮特定的次数后，终端就成为接收容错性设定的输入的状态，例如按“0”的按钮就设定提高容错性，按“1”就与其相反这样来定义各自的按钮所具有的含义。
在这里，当准许根据用户的喜好来设定容错性后，就会有用户忘记自己的设定而持有关于接收状态的不满的可能性。为此，也可以当根据用户的喜好设定了容错性时，在接收终端的画面中显示表示其已设定的容错性的消息。
在图8中说明与图5以及图6所示的终端对应的发送终端800的构成实例。从接收方终端发送的信息810，经由通信线路解码器809和分离器808被分离成容错性变更请求信息806以及其他的接收信息807。容错性变更请求信息输入到图像编码比特流发生单元801和声音编码比特流发生单元802双方，在各自单元中根据请求来变更所输出的图像编码比特流811以及声音编码比特流812的容错性。这些比特流在多路化器803中进行多路化，经由通信线路编码器804作为发送信息805输出到通信线路。
在图9A中说明，图4A所示的发送终端401中在实时进行图像信号的编码的情形中图8的图像编码比特流发生单元的构成实例。与图8相同的构成元件赋予相同的参考标记。从照相机901所输入的图像信息通过A/D转换器902输入到图像编码器903。此图像编码器根据容错性变更请求信息806，来变更所输出的图像编码比特流811的容错性。
在图9B中说明，图4B所示的发送终端406中在实时进行图像信号的转换编码的情形中图8的图像编码比特流发生单元801的构成实例。与图8相同的构成元件赋予相同的参考标记。记录在硬盘等的存储介质1001中的图像信息，输入到转换编码器1002。此转换编码器根据容错性变更请求信息806，来变更所输出的图像编码比特流811的容错性。
在图9C中说明图4C所示的发送终端411中，在原封不动地传送所存储的比特流的情形中图8的图像编码比特流发生单元的构成实例。在此情况下，持有各等级的容错性的编码比特流预先存储在存储介质1101中。因此，就能够根据容错性变更请求信息806，仅通过选择并输出该编码比特流来实现处理。
本发明，除了图5、图6以及图8所示的使用现有型号的专用电路·专用芯片的终端之外，也能够适用使用了通用处理器的软件终端。
在图10中说明使用通用处理器安装了图5以及图6所示的接收终端的情形的接收终端1200的构成实例。在接收终端1200中，从通信线路所接收的信息1215，被临时存储到通信线路输入缓冲器1214以后就被读入到通用处理器1208。通用处理器利用硬盘或者软盘等的存储设备1205以及处理用存储器1204来进行通信线路解码、分离、图像信号解码和声音解码处理。此结果所得的解码图像信号被临时存储到图像信号输出缓冲器1203以后就经由D/A转换器1202作为输出图像信号输出到显示器1201。同样地，声音信息也被临时存储到声音信号输出缓冲器1211以后就经由D/A转换器1210作为输出声音信号输出到扬声器1209。另一方面，来自用户的输入1212，经由用户输入缓冲器1213由通用处理器1208处理，经由多路化、通信线路编码作为发送信息1207发送到通信线路。此来自用户的输入1212，在接收终端1200起到图5所示的接收终端500的作用的情况下，相当于与容错性相关的用户的请求501。另一方面，在接收终端1200起到图6所示的接收终端600的作用的情况下，来自用户的输入1212，相当于用尸的设定601。
在图12中说明图10所示的接收终端1200起到图5所示的接收终端500的作用的情况的流程图的实例。在步骤1401中处理开始，在步骤1402中解码并显示1帧的图像信号。接着，在步骤1403中检查是否有来自用户提高容错性的请求，在有请求的情况下，在步骤1405中对作为通信对方的发送终端输出请求提高容错性的信号。同样地，在步骤1404中检查是否有来自用户降低容错性的请求，在有请求的情况下，在步骤1406中输出请求降低容错性的信号。然后返回到步骤1402，对下一帧进行解码、显示，反复同样的处理。
在图11中说明使用通用处理器安装了图8的发送终端的情形的发送终端1300的构成实例。在此图中，按照图9A的实例，假定从照相机取得图像信息实时进行编码。从照相机1301经由A/D转换器所取得的输入图像信号存储在图像信号输入缓冲器1303中，通用处理器1308从这里读入信息进行图像编码的处理。另一方面，关于声音信息也经由扬声器1309、A/D转换器1310取得并存储在声音信号输入缓冲器1311中，与图像信号同样地在通用处理器1308中施加编码的处理。通用处理器活用存储设备1305以及处理用存储器1305进行编码、多路化和通信线路编码的处理。通用处理器输出的信息一旦存储在通信线路输出缓冲器1307中以后就作为传送信息1307输出。另一方面，从接收终端所发送的信息1314经由通信线路输入缓冲器1313在通用处理器1308中施加通信线路解码和分离的处理。在这里抽取出所接收的容错性变更请求信息(图8的806所对应)，在编码处理中对编码比特流的容错性的强度进行变更。此外，在发送终端1300起到图9B或图9C所示的安装实例的作用的情况下，用单点划线围起来所示的图像·声音取得单元1312就不需要了。
在图13中说明图11所示的发送终端1300中的处理的流程图的实例。在步骤1501中处理开始，在步骤1502中将容错性的级别E设为初始值2。接着，在步骤1503中检查是否从接收终端接收到提高容错性的请求，在接收到的情况下，在步骤1506中将1加到E的值上。但是，在E的值已是最大值5的情况下，就不变更E的值。在没有接收到提高容错性请求的情况下，在步骤1504中检查是否接收到降低容错性的请求，在接收到的情况下，在步骤1507中从E的值减去1。但是，在E的值已是最小值1的情况下，就不变更E的值。在步骤1504中没有接收到降低容错性的请求，或者在步骤1506或步骤1507的处理结束了以后，在步骤1505中将容错性设置到第E等级后对1帧的图像信号进行编码，并将该编码信息输出到通信线路。在此处理完成以后，处理再次返回到步骤1503。
通过本发明，在进行利用了传送错误容易发生的通信线路的多媒体通信的情况下，就能够根据通信线路的状况或者用户的请求来控制赋予所传送的编码比特流的容错性的强度。

Claims (7)

1.一种具有接收发送终端以预定的容错性传送的信息的已编码的比特流的装置，和解码并显示接收到的上述比特流的装置的多媒体接收终端，其特征在于，该接收终端具有：
输入与用户的容错性相关的请求的装置，以及
将上述与用户的容错性相关的请求发送到上述发送终端的装置。
2.一种具有接收发送终端以预定的容错性传送的信息的已编码的比特流的装置和解码并显示接收到的上述比特流的装置的多媒体接收终端，其特征在于，该接收终端具有：
输入与用户的容错性相关的设定的装置，
评价上述接收终端接收的信息的容错性，并检测与上述设定的差异的装置，以及
将与符合该检测出的容错性的差异的容错性相关的请求发送到上述发送终端的装置。
3.一种多媒体发送终端，该发送终端对应于具有接收以预定的容错性从发送终端所传送的信息的已编码的比特流的装置、解码并显示接收到的上述比特流的装置、输入与用户的容错性相关的请求的装置以及将上述与用户的容错性相关的请求发送到上述发送终端的装置的多媒体接收终端，其特征在于：
该发送终端具有对虽然是相同的内容但容错性不同的多个已编码的比特流进行存储的服务器，根据上述与用户的容错性相关的请求选择并发送出具有预定的容错性的比特流。
4.如权利要求1至3的任何一个中所述的多媒体接收终端，其特征在于：
上述与用户的容错性相关的请求，包括与上述发送终端传送图像信息以及声音信息的状态相关的请求和与只传送声音信息的状态相关的请求。
5.如权利要求1至3的任何一个中所述的多媒体接收终端，其特征在于：
当上述与用户的容错性相关的请求发送到上述发送终端时，与该请求内容相关的消息显示在接收终端的画面上。
6.如权利要求1至3的任何一个中所述的多媒体接收终端，其特征在于：
在上述与用户的容错性相关的请求的选择项中，包含请求发送含有图像和声音信息的比特流的选择项，和请求发送只含有声音信息或者只含有图像信息的比特流的选择项。
7.如权利要求1至3的任何一个中所述的多媒体接收终端，其特征在于：
在上述与用户的容错性相关的请求的选择项中，包含图像的紊乱相对多且运动图像的帧速率相对高的状态和图像的紊乱相对少且运动图像的帧速率相对低的状态。
CNB008197466A 2000-07-10 2000-07-10 多媒体接收终端以及多媒体发送终端 Expired - Lifetime CN100385944C (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2000/004591 WO2002005558A1 (fr) 2000-07-10 2000-07-10 Terminal de communication multimedia

Publications (2)

Publication Number Publication Date
CN1454429A true CN1454429A (zh) 2003-11-05
CN100385944C CN100385944C (zh) 2008-04-30

Family

ID=11736245

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB008197466A Expired - Lifetime CN100385944C (zh) 2000-07-10 2000-07-10 多媒体接收终端以及多媒体发送终端

Country Status (6)

Country Link
US (1) US7712119B1 (zh)
EP (1) EP1301038A4 (zh)
JP (1) JP4373088B2 (zh)
KR (1) KR100716093B1 (zh)
CN (1) CN100385944C (zh)
WO (1) WO2002005558A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931807A (zh) * 2010-06-29 2010-12-29 北京中星微电子有限公司 验证多媒体播放器容错性的方法和装置
CN112637586A (zh) * 2020-12-15 2021-04-09 北京百度网讯科技有限公司 异常视频构造方法、检测方法、装置、设备、介质及产品

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100441604B1 (ko) * 2002-03-19 2004-07-23 삼성전자주식회사 멀티미디어 스트리밍 서비스를 위한 패킷 전송장치 및 그방법
EP1613087A4 (en) 2003-04-10 2010-03-31 Nec Corp COMPRESSION / CODING METHOD FOR MOVABLE PICTURES, IMPLEMENTATION DEVICE AND MOBILE IMAGE COMMUNICATION SYSTEM
JP2005033336A (ja) * 2003-07-08 2005-02-03 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
US9661376B2 (en) * 2005-07-13 2017-05-23 Polycom, Inc. Video error concealment method
KR100640487B1 (ko) * 2005-09-08 2006-11-01 삼성전자주식회사 이동 통신 단말기의 화상 통화 서비스 수행 방법
JP2008070561A (ja) * 2006-09-13 2008-03-27 Canon Inc 表示装置及びその制御方法
US8111757B2 (en) 2007-09-28 2012-02-07 Motorola Mobility, Inc. Method and apparatus for video signal processing
FR2959636B1 (fr) * 2010-04-28 2012-07-13 Canon Kk Procede d'acces a une partie spatio-temporelle d'une sequence video d'images
TWI428018B (zh) * 2010-11-25 2014-02-21 Realtek Semiconductor Corp 影像轉換的裝置及方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5475421A (en) * 1992-06-03 1995-12-12 Digital Equipment Corporation Video data scaling for video teleconferencing workstations communicating by digital data network
US5606725A (en) * 1994-11-29 1997-02-25 Xel Communications, Inc. Broadband network having an upstream power transmission level that is dynamically adjusted as a function of the bit error rate
US5742892A (en) * 1995-04-18 1998-04-21 Sun Microsystems, Inc. Decoder for a software-implemented end-to-end scalable video delivery system
JP3068002B2 (ja) * 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
JPH10164552A (ja) 1996-11-29 1998-06-19 Matsushita Electric Ind Co Ltd ビデオオンデマンド送信装置及びビデオオンデマンド端末装置
US6384862B1 (en) * 1997-03-12 2002-05-07 Telefoaktiebolaget L M Ericsson Imaging system and method for interactive control of image quality
US6243568B1 (en) * 1997-03-22 2001-06-05 Sharp Laboratories Of America, Inc. System and method for intuitively indicating signal quality in a wireless digital communications network
JPH10276196A (ja) * 1997-03-28 1998-10-13 Ando Electric Co Ltd 通信監視装置
JPH10276193A (ja) * 1997-03-31 1998-10-13 Matsushita Electric Ind Co Ltd データ処理方法
JP3687293B2 (ja) * 1997-08-11 2005-08-24 横河電機株式会社 動画通信管理装置
JP3873405B2 (ja) * 1997-10-21 2007-01-24 ソニー株式会社 データ配信システム及びデータ配信装置
JPH11313301A (ja) * 1998-02-27 1999-11-09 Hitachi Ltd 番組配信システム、番組配信装置、番組品質変換装置、及び番組受信装置
US6425132B1 (en) * 1998-04-06 2002-07-23 Wavetek Corporation Ingress testing of CATV system utilizing remote selection of CATV node
JP3838784B2 (ja) 1998-07-08 2006-10-25 松下電器産業株式会社 画像伝送システム
US6490705B1 (en) * 1998-10-22 2002-12-03 Lucent Technologies Inc. Method and apparatus for receiving MPEG video over the internet
US6587433B1 (en) * 1998-11-25 2003-07-01 3Com Corporation Remote access server for multiple service classes in IP networks
US6917617B2 (en) * 1998-12-16 2005-07-12 Cisco Technology, Inc. Use of precedence bits for quality of service
JP4137270B2 (ja) * 1999-02-22 2008-08-20 三菱電機株式会社 ビットストリーム変換装置
US6661837B1 (en) * 1999-03-08 2003-12-09 International Business Machines Corporation Modems, methods, and computer program products for selecting an optimum data rate using error signals representing the difference between the output of an equalizer and the output of a slicer or detector
US7142567B1 (en) * 1999-04-01 2006-11-28 Sedna Patent Services, Llc Rate generator in a video on demand system having multiple constant bit rate data
WO2000072548A1 (en) * 1999-05-25 2000-11-30 Nokia Corporation Interworking method and apparatus
US6807648B1 (en) * 1999-09-13 2004-10-19 Verizon Laboratories Inc. Variable-strength error correction in ad-hoc networks
JP3403683B2 (ja) * 1999-11-26 2003-05-06 沖電気工業株式会社 画像符号化装置および方法
US6300973B1 (en) * 2000-01-13 2001-10-09 Meir Feder Method and system for multimedia communication control
US6778533B1 (en) * 2000-01-24 2004-08-17 Ati Technologies, Inc. Method and system for accessing packetized elementary stream data
US6798838B1 (en) * 2000-03-02 2004-09-28 Koninklijke Philips Electronics N.V. System and method for improving video transmission over a wireless network
US7260826B2 (en) * 2000-05-31 2007-08-21 Microsoft Corporation Resource allocation in multi-stream IP network for optimized quality of service

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931807A (zh) * 2010-06-29 2010-12-29 北京中星微电子有限公司 验证多媒体播放器容错性的方法和装置
CN101931807B (zh) * 2010-06-29 2016-07-06 无锡中感微电子股份有限公司 验证多媒体播放器容错性的方法和装置
CN112637586A (zh) * 2020-12-15 2021-04-09 北京百度网讯科技有限公司 异常视频构造方法、检测方法、装置、设备、介质及产品

Also Published As

Publication number Publication date
US7712119B1 (en) 2010-05-04
JP4373088B2 (ja) 2009-11-25
CN100385944C (zh) 2008-04-30
KR100716093B1 (ko) 2007-05-09
EP1301038A1 (en) 2003-04-09
KR20030018044A (ko) 2003-03-04
EP1301038A4 (en) 2007-11-28
WO2002005558A1 (fr) 2002-01-17

Similar Documents

Publication Publication Date Title
AU2006200634B2 (en) Color space scalable video coding and decoding method and apparatus for the same
Torres et al. Video coding: the second generation approach
CN1225127C (zh) 一种用于视频编码的编码端/解码端双向预测方法
CN1258928C (zh) 用于改良视频编码中的错误隐藏的错误隐藏方法和编码器
US8619854B2 (en) Scalable video encoding and decoding method using switching pictures and apparatus thereof
EP1538566A3 (en) Method and apparatus for scalable video encoding and decoding
CN1723710A (zh) 用于对视频数据编码的系统和用于对视频数据解码的系统
CN101156449A (zh) 具有功耗影响编码/解码模式的便携式终端
CN101262604A (zh) 一种感兴趣区优先传输的可伸缩视频编码方法
CN1910925A (zh) 编码和解码视频比特流的方法和装置
WO2004008734A3 (en) Method and apparatus for transcoding between hybrid video codec bitstreams
CN100455020C (zh) 低码率下屏幕编码方法
CN106303661B (zh) 一种直播客户端实现自适应屏幕旋转的方法及系统
CN1454429A (zh) 多媒体通信终端
CN107637078A (zh) 视频译码系统和方法中的残差变换和逆向变换
US20040264792A1 (en) Coding and decoding of video data
CN102333223A (zh) 视频数据编码方法、解码方法、编码系统和解码系统
KR20050031460A (ko) 하이브리드 예측 코드를 사용하는 다중 표현 움직임보상을 수행하는 방법 및 장치
JPH09172378A (ja) モデルベースの局所量子化を使用する画像処理のための方法および装置
MXPA06006117A (es) Metodo y aparato de codificacion y decodificacion escalables de video.
CN1288913C (zh) 视频获取设备和通过低数据速率链路传送高质量视频的方法
CN1147157C (zh) 解码装置和解码方法
US5737446A (en) Method for estimating high frequency components in digitally compressed images and encoder and decoder for carrying out same
KR100952761B1 (ko) 시간적 확장성 영상 코딩 장치 및 방법
WO2019245551A1 (en) Intra-picture prediction in video coding systems and methods

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: HITACHI LTD.

Free format text: FORMER OWNER: HITACHI,LTD.

Effective date: 20130718

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130718

Address after: Tokyo, Japan

Patentee after: Hitachi Consumer Electronics Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: Hitachi Manufacturing Co., Ltd.

ASS Succession or assignment of patent right

Owner name: HITACHI MAXELL LTD.

Free format text: FORMER OWNER: HITACHI LTD.

Effective date: 20150327

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150327

Address after: Osaka, Japan

Patentee after: Hitachi Maxell, Ltd.

Address before: Tokyo, Japan

Patentee before: Hitachi Consumer Electronics Co.,Ltd.

TR01 Transfer of patent right

Effective date of registration: 20171213

Address after: Kyoto Japan

Patentee after: Mike seer

Address before: Osaka, Japan

Patentee before: Hitachi Maxell, Ltd.

TR01 Transfer of patent right
CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20080430