KR101049701B1 - 통신 채널을 통한 정보의 전달 - Google Patents

통신 채널을 통한 정보의 전달 Download PDF

Info

Publication number
KR101049701B1
KR101049701B1 KR1020067026266A KR20067026266A KR101049701B1 KR 101049701 B1 KR101049701 B1 KR 101049701B1 KR 1020067026266 A KR1020067026266 A KR 1020067026266A KR 20067026266 A KR20067026266 A KR 20067026266A KR 101049701 B1 KR101049701 B1 KR 101049701B1
Authority
KR
South Korea
Prior art keywords
data
bit rate
channel
constant bit
information unit
Prior art date
Application number
KR1020067026266A
Other languages
English (en)
Other versions
KR20070014200A (ko
Inventor
해리나스 가루대드리
품 사게통
산지브 난다
슈타인 에이 룬트비
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20070014200A publication Critical patent/KR20070014200A/ko
Application granted granted Critical
Publication of KR101049701B1 publication Critical patent/KR101049701B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/06Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/36Flow control; Congestion control by determining packet size, e.g. maximum transfer unit [MTU]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/764Media network packet handling at the destination 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/166IP fragmentation; TCP segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/321Interlayer communication protocols or service data unit [SDU] definitions; Interfaces between layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6156Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64707Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless for transferring content from a first network to a second network, e.g. between IP and wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/06Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • H04W28/065Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information using assembly or disassembly of packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/04Wireless resource allocation
    • H04W72/044Wireless resource allocation based on the type of the allocated resource
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18Service support devices; Network management devices
    • H04W88/181Transcoding devices; Rate adaptation devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/12Wireless traffic scheduling
    • H04W72/1263Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W80/00Wireless network protocols or protocol adaptations to wireless operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/04Large scale networks; Deep hierarchical networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Telephone Function (AREA)
  • Alarm Systems (AREA)
  • Communication Control (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Small-Scale Networks (AREA)

Abstract

복수의 일정한 비트 레이트 통신 채널을 통해 정보 유닛을 송신하는 방법 및 장치가 개시된다. 기술은 그 정보 유닛을 인코딩하는 단계를 포함하며, 그에 의해, 복수의 데이터 패킷을 생성한다. 인코딩은 데이터 패킷 사이즈가 통신 채널의 물리 레이어 패킷 사이즈에 매칭하도록 제약된다. 정보 유닛은 가변 비트 레이트 데이터 스트림, 멀티미디어 데이터, 비디오 데이터, 및 오디오 데이터를 포함한다. 통신 채널은, CDMA 채널, WCDMA, GSM 채널, GPRS 채널, 및 EDGE 채널을 포함한다.
애플리케이션 레이어 데이터 패킷, 물리 레이어 데이터 패킷, EBR

Description

통신 채널을 통한 정보의 전달{DELIVERY OF INFORMATION OVER A COMMUNICATION CHANNEL}
35 U.S.C §119 에 따른 우선권 주장
본 특허 출원은, 발명의 명칭이 "CDMA 물리 레이어 산물에 의해 운송되는 멀티미디어 패킷 (Multimedia Packets Carried by CDMA Physical Layer Products)" 으로 2004년 5월 13일자로 출원되어 본 발명의 양수인에게 양도되어 있으며, 여기서 참조로서 명백하게 포함되는 미국 가출원 제 60/571,673 호를 우선권 주장한다.
공동-계류중인 특허 출원에 대한 참조
본 특허 출원은 다음의 공동-계류중인 미국 특허 출원에 관한 것으로,
본 특허 출원과 동시에 출원되어 대리인 참조 번호 제 030166U2를 갖는 "통신 시스템의 채널로의 정보의 할당을 위한 방법 및 장치 (Method And Apparatus For Allocation Of Information To Channels Of A Communication System)" 로 본 발명의 양수인에게 양도되어 있으며, 여기서 참조로서 명백하게 포함하고,
본 특허 출원과 동시에 출원되어 대리인 참조 번호 제 030166U3을 갖는 "무선 통신 시스템을 통해 송신되는 멀티미디어 데이터의 헤더 압축 (Header Compression Of Multimedia Data Transmitted Over A Wireless Communication System)" 으로 본 발명의 양수인에게 양도되어 있으며, 여기서 참조로서 명백하게 포함하며,
본 특허 출원과 동시에 출원되어 대리인 참조 번호 제 030166U4를 갖는 "무선 통신 시스템에서의 오디오 및 비디오 데이터의 동기화 (Synchronization Of Audio And Video Data In A Wireless Communication System)" 로 본 발명의 양수인에게 양도되어 있으며, 여기서 참조로서 명백하게 포함한다.
배경
기술분야
본 발명은 일반적으로 통신 시스템을 통한 정보의 전달에 관한 것으로, 더 상세하게는, 일정한 비트 레이트 통신 링크의 물리 레이어 패킷에 매칭하기 위해 정보 유닛의 파티셔닝 (partitioning) 에 관한 것이다.
배경기술
다양한 통신 네트워크를 통한 멀티미디어의 전달에 대한 요구는 증가되고 있다. 예를 들어, 소비자는, 인터넷, 유선 및 무선 네트워크와 같은 다양한 통신 채널을 통해 비디오의 전달을 원한다. 멀티미디어 데이터는 상이한 포맷 및 상이한 데이터 레이트일 수 있고, 다양한 통신 네트워크는 그들 각각의 통신 채널을 통하여 실시간 데이터의 송신을 위해 상이한 메커니즘을 사용한다.
일반화되어 가는 통신 네트워크의 일 타입은 무선 통신용 이동 무선 네트워크이다. 무선 통신 시스템은, 예를 들어, 셀룰러 전화기, 페이징, 무선 로컬 루프, 개인 휴대 정보 단말기 (PDA), 인터넷 전화기 및 위성 통신 시스템을 포함하는 많은 애플리케이션을 갖는다. 특히 중요한 애플리케이션은 이동 가입자를 위한 셀룰러 전화 시스템이다. 여기에서 사용되는 바와 같이, "셀룰러" 시스템 이라는 용어는 셀룰러 및 개인 통신 서비스 (PCS) 주파수 양자를 포함한다. 다양한 공중-경유 인터페이스는, 주파수 분할 다중 액세스 (FDMA), 시간 분할 다중 액세스 (TDMA), 및 코드 분할 다중 액세스 (CDMA) 를 포함하는 그러한 셀룰러 전화 시스템에 대해 개발되어 왔다.
상이한 국내 및 국제 표준은, 예를 들어, AMPS (Advanced Mobile Phone Service), GSM (Global System for Mobile), GPRS (General Packet Radio Service), EDGE (Enhanced Data GSM Environment), (종종, 여기에서 IS-95로서 총괄적으로 지칭되는) IS-95 (Interim Standard 95) 및 그의 파생물, 즉, IS-95A, IS-95B, ANSI J-STD-008, 및 cdma2000, UMTS (Universal Mobile Telecommunications Service) 및 광대역 CDMA (WCDMA) 와 같은 새로운 (emerging) 고-데이터-레이트 시스템을 포함하는 다양한 공중 인터페이스를 지원하기 위해 달성되어 왔다. 이들 표준들은 TIA (Telecommunication Industry Association), 3GPP (3rd Generation Partnership project), ETSI (European Telecommunication Standards Institute), 및 다른 주지된 표준체에 의해 공포되었다.
셀룰러 전화 네트워크와 같은 이동 무선 네트워크의 사용자 또는 소비자는, 무선 통신 링크를 통해 비디오, 멀티미디어, 및 인터넷 프로토콜 (IP) 과 같은 스트리밍 미디어를 수신하길 원한다. 예를 들어, 소비자는 그들의 셀 폰 또는 다른 휴대용 무선 통신 디바이스상에서 전화 원격 회의 (teleconference) 또는 텔레비전 브로드캐스트와 같은 비디오를 수신할 수 있기를 원한다. 소비자가 그들의 무선 통신 디바이스로 수신하기를 원하는 데이터의 타입의 다른 예는 멀티미디 어 멀티캐스트/브로드캐스트 및 인터넷 액세스를 포함한다.
상이한 타입의 멀티미디어 데이터 소스 및 스트리밍 데이터를 송신하기를 원하는 상이한 타입의 통신 채널이 존재한다. 예를 들어, 멀티미디어 데이터 소스는 일정한 비트 레이트 (CBR) 또는 가변 비트 레이트 (VBR) 로 데이터를 생성할 수 있다. 또한, 통신 채널은 CBR 또는 VBR로 데이터를 송신할 수 있다. 아래에서, 표 1은 데이터 소스 및 통신 채널의 다양한 조합을 리스팅 (list) 한다.
Figure 112006092485154-pct00001
통상적으로, 통신 채널은 물리 레이어 패킷 또는 물리 레이어 프레임으로서 지칭되는 청크 (chunk) 로 데이터를 송신한다. 멀티미디어 소스에 의해 생성된 데이터는, mu-law 또는 A-law를 사용하여 인코딩된 보이스 신호와 같이, 바이트 (byte) 의 연속적인 스트림일 수도 있다. 좀 더 빈번하게, 멀티미디어 소스에 의해 생성된 데이터는 데이터 패킷으로 지칭되는 바이트의 그룹으로 이루어진다. 예를 들어, MPEG-4 비디오 인코더는, 여기에서 비디오 프레임으로서 지칭되는 정보 유닛의 시퀀스로서 비주얼 정보를 압축한다. 통상적으로, 비주얼 정보는, 인코더에 의해 통상적으로 25 또는 30㎐의 일정한 비디오 프레임 레이트로 인코딩되며, 디코더에 의해 동일한 레이트로 렌더링 (render) 되야 한다. 비디오 프레임 주기는 2개의 비디오 프레임들 사이의 시간이고, 비디오 프레임 레이트의 역으로서 계산될 수 있다, 예를 들어, 40㎳의 비디오 프레임 주기는 25㎐의 비디오 프레임 레이트에 대응한다. 각각의 비디오 프레임은 변화가능한 수의 데이터 패킷으로 인코딩되고, 모든 데이터 패킷은 디코더로 송신된다. 데이터 패킷의 일부가 손실되면, 그 패킷은 디코더에 의해 이용가능하지 않게 된다. 한편, 디코더는, 일부의 데이터 패킷이 손실될지라도 결과적인 비디오 시퀀스의 일부 품질 열화의 희생으로 비디오 프레임을 재구성할 수도 있다. 따라서, 각각의 데이터 패킷은 비디오 프레임의 설명의 일부를 포함하므로, 패킷 수는 하나의 비디오 프레임으로부터 또 다른 수의 비디오 프레임으로 변화가능하다.
소스가 일정한 비트 레이트로 데이터를 생성하고 통신 채널이 일정한 레이트로 데이터를 송신하는 경우, 그 통신 채널 데이터 레이트가 적어도 소스 데이터 레이트만큼 고속이거나, 그렇지 않으면 2개의 데이터 레이트가 매칭된다고 가정하면, 통신 시스템 리소스는 효율적으로 이용된다 한다. 즉, 소스의 일정한 데이터 레이트가 채널의 일정한 데이터 레이트와 동일하면, 채널의 리소스는 완전히 이용될 수 있고 소스 데이터는 딜레이없이 송신될 수 있다. 유사하게, 소스가 가변 레이트로 데이터를 생성하고 채널이 가변 레이트로 송신한다면, 채널 데이터 레이트가 소스 데이터 레이트를 지원할 수 있는 한, 2개의 데이터 레이트는 매칭될 수 있고, 또한, 채널의 리소스는 완전히 이용되며 모든 소스 데이터는 딜레이없이 송신될 수 있다.
소스가 일정한 데이터 레이트로 데이터를 생성하고 채널이 가변 데이터 레이트 채널이면, 채널 리소스는 가능한 효과적으로 이용되지 않을 수도 있다. 예를 들어, 이러한 미스매칭된 케이스에서, 통계적인 멀티플렉싱 이득 (SMG) 은 매칭된 CBR 채널상의 CBR 소스와 비교된 SMG보다 더 작다. 통계적인 멀티플렉싱 이득은, 동일한 통신 채널이 다수의 사용자들 사이에서 사용될 수 있거나 멀티플렉싱될 수 있는 경우 발생한다. 예를 들어, 통신 채널이 보이스를 송신하기 위해 사용되는 경우, 일반적으로 스피커는 연속적으로 토킹 (talk) 하지 않는다. 즉, 스피커로부터의 "토크" 스퍼트 (spurt) 에 부속하여 무음 (silence; 청취 (listening)) 이 존재할 것이다. "토크" 스퍼트 대 무음에 대한 시간의 비율이, 예를 들어, 1:1 이었다면, 평균적으로 일정한 통신 채널이 멀티플렉싱될 수 있으며 2명의 사용자를 지원할 수 있다. 그러나, 데이터 소스가 동일한 데이터 데이트를 갖고 가변 레이트 채널을 통해 전달되는 경우, 통신 채널이 또 다른 사용자에 의해 사용될 수 있는 시간이 존재하지 않기 때문에 SMG가 존재하지 않는다. 즉, CBR 소스에 대한 "무음" 동안 중단이 없다.
상기 표 1에서 나타낸 마지막 경우는, 멀티미디어 데이터의 소스가 비디오와 같은 멀티미디어 데이터 스트림과 같이 가변 비트 레이트 스트림인 때의 상황이고, 그 멀티미디어 데이터의 소스는 일정한 비트 레이트 할당을 갖는 무선 라디오 (radio) 채널과 같이 일정한 비트 레이트를 갖는 통신 채널을 통해 송신된다. 이러한 경우, 통상적으로 딜레이는 소스와 통신 채널 사이에 도입되며, 통신 채널이 효과적으로 이용될 수 있도록 데이터의 "스퍼트" 를 생성한다. 즉, 가변 레이트 데이터 스트림은 버퍼에 저장되고, 그 버퍼의 출력이 데이터 레이트가 고정된 채널에 매칭하기 위해 일정한 데이터 레이트로 비울 수 있도록 충분히 길게 딜레이된다. 버퍼는 버퍼를 비우지 않고 일정한 출력을 유지할 수 있도록 데이터를 충분히 저장하거나 딜레이할 필요가 있으므로, CBR 통신 채널은 완전히 이용되고 통신 채널의 리소스가 낭비되지 않는다.
인코더는 비디오 프레임 주기에 따라 비디오 프레임을 주기적으로 생성한다. 비디오 프레임은 데이터 패킷으로 이루어지고, 비디오 프레임에서 데이터의 총량은 가변적이다. 비디오 디코더는, 뷰어 (viewer) 에 대해 수용가능한 결과를 보장하기 위해 인코더에 의해 사용되는 동일한 비디오 프레임 레이트로 그 비디오 프레임을 렌더링해야 한다. 변화가능한 양의 데이터를 갖고, 일정한 비디오 프레임 레이트로 일정한 레이트 통신 채널을 통한 비디오 프레임의 송신은, 비효율성을 야기할 수 있다. 예를 들어, 비디오 프레임에서 데이터의 총량이 너무 커서 비디오 프레임 주기내에서 채널의 비트 레이트로 송신되지 않으면, 디코더는 비디오 프레임 레이트에 따라 그 비디오 프레임의 총량을 렌더링할 시간내에서 모든 프레임을 수신하지 못할 수도 있다. 실제로, 트래픽 세이핑 (shaping) 버퍼는 일정한 레이트 채널을 통한 전달에 대하여 그러한 큰 변화를 평활화하기 위해 사용된다. 이것은, 일정한 비디오 프레임 레이트가 디코더에 의해 유지될 것이라면, 비디오를 렌더링할 시에 딜레이를 도입한다.
또 다른 문제는, 다중의 비디오 프레임으로부터의 데이터가 단일 물리 레이어 패킷에 포함되면, 단일 물리 레이어 패킷의 손실이 다중의 비디오 프레임의 열화를 야기한다는 것이다. 데이터 패킷이 물리 레이어 패킷 사이즈에 근접하는 때의 상황에 대해서도, 하나의 물리 레이어 패킷의 손실은 다중의 비디오 프레임의 열화를 야기할 수 있다.
따라서, 일정한 데이터 레이트 채널을 통한 가변 데이터 레이트 멀티미디어 데이터의 송신을 개선할 수 있는 기술 및 장치에 대한 필요가 당업계에 존재한다.
요약
여기에서 개시된 실시형태는, 일정한 비트 레이트 통신 채널을 통해 정보 유닛을 송신하는 방법 및 장치를 제공함으로써 상술된 필요를 어드레싱한다. 기술은 정보 유닛을 데이터 패킷으로 파티셔닝하는 단계를 포함하며, 여기서, 데이터 패킷의 사이즈는 통신 채널의 물리 레이어 데이터 패킷 사이즈에 매칭하도록 선택된다. 예를 들어, 각각의 정보 유닛에 포함된 바이트의 수는 시간에 걸쳐 변할 수도 있고, 통신 채널의 각각의 물리 레이어 데이터가 운송할 수 있는 바이트의 수는 독립적으로 변할 수도 있다. 기술은 정보 유닛의 파티션을 설명하며, 그에 의해, 복수의 데이터 패킷을 생성한다. 예를 들어, 인코더는 통신 채널의 물리 레이어 패킷 사이즈를 초과하지 않거나 "매칭" 하는 데이터 패킷의 사이즈로 정보 유닛을 인코딩하도록 제약될 수도 있다. 그 후, 데이터 패킷은 통신 채널의 물리 레이어 데이터 패킷에 할당된다.
여기에서, 비디오에 대한 "멀티미디어 프레임" 이라는 어구는 디코딩이후, 디스플레이 디바이스상에서 디스플레이/렌더링될 수 있는 비디오 프레임을 의미하는 것으로 사용된다. 또한, 비디오 프레임은 독립적으로 디코딩가능한 유닛으로 분할될 수 있다. 비디오 용어로, 그들은 "슬라이스 (slice)" 로 지칭된다. 오디오 및 스피치의 경우, "멀티미디어 프레임" 이라는 용어는, 스피치 또는 오디오가 수신기에서 전송 및 디코딩을 위해 압축되는 시간 윈도우의 정보를 의미하는 것으로 여기에서 사용된다. 여기에서, "정보 유닛 간격" 이라는 어구는 상술된 멀티미디어 프레임의 시간 지속 기간을 표현하는 것으로 사용된다. 예를 들어, 비디오의 경우, 정보 유닛 간격은 매 초당 10 프레임 비디오의 경우에서 100 밀리초이다. 또한, 일 예로서, 스피치의 경우, 정보 유닛 간격은 cdma2000, GSM 및 WCDMA 에서 통상적으로 20밀리초이다. 이러한 설명으로부터, 통상적으로 오디오/스피치 프레임은 독립적으로 디코딩가능한 유닛으로 추가적으로 분할되지 않으며, 통상적으로 비디오 프레임은 독립적으로 디코딩가능한 슬라이스로 추가적으로 분할된다는 것이 명백하다. "멀티미디어 프레임", "정보 유닛 간격" 등의 어구가 비디오, 오디오 및 스피치의 멀티미디어 데이터를 지칭하는 콘텍스트로부터 명백하다.
기술은 GSM (Global System for Mobile Communication), GPRS (General Packet Radio Service), EDGE (Enhanced Data GSM Environment), 또는 TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS-2000, HRPD, 광대역 CDMA (WCDMA) 와 같은 CDMA에 기초한 표준 등과 같은 다양한 공중-경유 인터페이스로 사용될 수 있다.
양태는, 하나 이상의 이용가능한 일정한 비트 레이트 통신 채널의 가능한 물리 레이어 패킷 사이즈를 결정하는 단계를 포함한다. 정보 유닛은 파티셔닝되고, 그에 의해 개별 데이터 패킷의 사이즈가 하나 이상의 일정한 비트 레이트 통신 채널의 물리 레이어 패킷들중 하나를 초과하지 않거나 그 하나에 매칭되도록 복수의 데이터 패킷을 생성한다. 그 후, 데이터 패킷은 인코딩되어 매칭된 일정한 비트 레이트 통신 채널의 물리 레이어 패킷에 할당된다. 인코딩 정보는 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈로 장비된 소스 인코더를 포함할 수 있다.
설명된 기술을 사용하면, 정보 유닛은 하나 이상의 일정한 비트 레이트 채널을 통해 송신되는 데이터 패킷의 스트림으로 인코딩된다. 정보 유닛이 사이즈에서 변함에 따라, 그 정보 유닛은 상이한 사이즈의 데이터 패킷으로 인코딩될 수도 있고, 이용가능한 서로 다른 물리 레이어 패킷 사이즈를 갖는 일정한 비트 레이트 채널의 상이한 조합은 그 데이터 패킷을 송신하기 위해 사용될 수도 있다. 예를 들어, 정보 유닛은 상이한 사이즈의 비디오 프레임에 포함된 비디오 데이터를 포함할 수도 있으므로, 고정된 비트 레이트 통신 채널 물리 레이어 패킷의 상이한 조합은 상이한 사이즈의 비디오 프레임의 송신물을 수용하기 위해 선택될 수도 있다.
다른 양태는, 물리 레이어 패킷 사이즈 및 복수의 일정한 비트 레이트 통신 채널의 이용가능한 데이터 레이트를 결정하는 단계를 포함한다. 그 후, 정보 유닛은 데이터 패킷에 할당되며, 여기서, 개별 데이터 패킷 사이즈는 개별의 일정한 비트 레이트 통신 채널들 중 하나의 물리 레이어 패킷에 적합한 사이즈이도록 선택된다. 개별의 일정한 비트 레이트 채널들의 조합은, 물리 레이어 패킷 사이즈가 가변 비트 레이트 데이터 스트림 패킷 사이즈에 매칭하도록 선택될 수도 있다. 예를 들어, 하나 이상의 일정한 비트 레이트 채널의 상이한 조합들은 가변 비트 레이트 데이터 스트림에 의존하여 선택될 수도 있다.
또 다른 양태는 정보 유닛을 수용하도록 구성되는 인코더이다. 그 후, 정보 유닛은 데이터 패킷으로 파티셔닝되며, 여기서, 개별 데이터 패킷의 사이즈는 이용가능한 일정한 비트 레이트 통신 채널 중 하나의 물리 레이어 패킷 사이즈를 초과하지 않거나 그 사이즈에 매칭된다.
또 다른 양태는 복수의 일정한 비트 레이트 통신 채널로부터 데이터 스트림을 수용하도록 구성되는 디코더이다. 데이터 스트림은 디코딩되고, 그 디코딩된 데이터 스트림은 가변 비트 레이트 데이터 스트림으로 누적된다.
일정한 비트 레이트 통신 채널의 예는, GSM, GPRS, EDGE, 또는 TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS-2000, HRPD, 및 광대역 CDMA (WCDMA) 와 같은 CDMA에 기초한 표준을 포함한다.
본 발명의 다른 특징 및 이점은 예시적인 실시형태의 다음의 설명으로부터 명백하며, 그 예시적인 실시형태는 예로서 본 발명의 양태를 설명한다.
도면의 간단한 설명
도 1은 본 발명에 따라 구성된 통신 시스템 (100) 의 일부의 도시이다.
도 2는, 도 1의 시스템의 무선 네트워크를 통해 패킷 데이터를 전달하는 다양한 공중 인터페이스 옵션 및 예시적인 패킷 데이터 네트워크를 도시한 블록도이다.
도 3은, GSM 공중 인터페이스를 이용하는 도 1의 시스템의 2개의 무선 프레임 (302 및 304) 을 도시한 블록도이다.
도 4는 도 1의 시스템에서 통상적인 비디오 시퀀스에 대해 프레임 사이즈에서의 변화의 일 예를 도시한 차트이다.
도 5는, 도 1의 시스템에서 CBR 채널을 통해 송신될 다양한 사이즈의 프레임의 송신물을 지원하기 위해 사용되는 버퍼링 딜레이를 도시한 블록도이다.
도 6은 도 1의 시스템에서 CBR 채널을 통해 가변 비트 레이트 (VBR) 멀티미디어 스트림을 스트리밍함으로써 도입되는 버퍼링 딜레이를 도시한 그래프이다.
도 7은, 시스템에서 64 kbps의 공칭 레이트 및 AVC/H.264 및 MPEG-4에 대한 일정한 Qp로 인코딩된 다양한 50개의 프레임 시퀀스 비디오 클립에 대해 밀리초 단위의 버퍼 딜레이 Δb를 도시한 바 (bar) 그래프이다.
도 8은, 도 7에 도시된 시퀀스의 잘 알려진 객관적인 메트릭 (objective metric) "피크 신호 대 잡음 비" (PSNR) 에 의해 표현된 바와 같이, 비주얼 품질을 도시한 바 그래프이다.
도 9는 시스템에서 RTP/UDP/IP 프로토콜을 사용하여 무선 링크를 통해 비디오 데이터와 같은 멀티미디어 데이터를 송신하는 경우 존재하는 캡슐화의 다양한 레벨을 도시한 다이어그램이다.
도 10은 시스템에서 멀티미디어 데이터 패킷과 같은 애플리케이션 데이터 패킷의 물리 레이어 데이터 패킷으로의 할당의 일 예를 도시한 다이어그램이다.
도 11은 시스템에서 EBR 기술에 따라 애플리케이션 레이어 패킷을 인코딩하는 일 예를 도시한다.
도 12는 인터넷과 같은 IP/UDP/RTP를 통해 VBR 데이터 스트림을 송신하는 코덱의 하나의 실시형태를 도시한 블록도이다.
도 13은, 채널 패킷 손실이 1%인 경우, 상이한 인코딩 기술을 사용하여, 인코딩된 비디오 시퀀스의 다양한 예들에 대한 피크 신호 대 잡음 비에서의 상대적인 드롭 (drop) 을 도시한 바 그래프이다.
도 14는 채널 손실이 인코딩된 비디오 시퀀스의 다양한 예들에 대해 5%인 경우 피드 신호 대 잡음 비 (PSNR) 에서의 상대적인 드롭을 도시한 바 그래프이다.
도 15는 도 13의 인코딩된 비디오 시퀀스에 대해 수신된 결함있는 데이터 패킷의 퍼센트를 도시한 바 그래프이다.
도 16은 도 14의 인코딩된 비디오 시퀀스에 대해 수신된 결함있는 데이터 패킷의 퍼센트를 도시한 바 그래프이다.
도 17은 4개의 상이한 경우에 대해 샘플 인코딩된 비디오 시퀀스의 PSNR 대 비트 레이트를 도시한 그래프이다.
도 18은 4개의 상이한 경우에 대해 또 다른 인코딩된 비디오 시퀀스의 PSNR 대 비트 레이트를 도시한 그래프이다.
도 19는 평균 레이트 64 kbps의 AVC/H.264 스트림에 대한 송신 계획을 도시한 그래프이다.
도 20은 데이터를 송신하는 방법의 일 실시형태를 도시한 흐름도이다.
도 21은 데이터를 송신하는 방법의 또 다른 실시형태를 도시한 흐름도이다.
도 22는 본 발명의 예시적인 실시형태에 따라 구성된 무선 통신 디바이스 또는 이동국 (MS) 의 블록도이다.
상세한 설명
여기에서 "예시적인" 이라는 용어는 "예, 예시, 또는 예증으로서 제공되는"의 의미로 사용된다. "예시적인" 것으로서 여기에서 설명되는 임의의 실시형태는 다른 실시형태에 비하여 반드시 바람직하거나 유리한 것으로서 해석할 필요는 없다.
여기에서, "스트리밍" 이라는 용어는, 대화형 (conversational) 의 유니캐스트 및 브로드캐스트 애플리케이션에서 전용 및 공유 채널을 통해 오디오, 스피치 또는 비디오 정보와 같이 사실상 연속적인 멀티미디어 데이터의 실시간 전달을 의미하는 것으로 사용된다. 여기에서, 비디오에 대해 "멀티미디어 프레임" 이라는 어구는 디코딩 이후 디스플레이 디바이스상에서 디스플레이/렌더링될 수 있는 비디오 프레임을 의미하는 것으로 사용된다. 또한, 비디오 프레임은 독립적으로 디코딩가능한 유닛으로 분할될 수 있다. 비디오 용어로, 그들은 "슬라이스" 로 지칭된다. 오디오 및 스피치의 경우, "멀티미디어 프레임" 이라는 용어는, 스피치 또는 오디오가 수신기에서 전송 및 디코딩을 위해 압축되는 시간 윈도우의 정보를 의미하는 것으로 여기에서 사용된다. 여기에서, "정보 유닛 간격" 이라는 어구는 상술된 멀티미디어 프레임의 시간 지속기간을 표현하기 위해 사용된다. 예를 들어, 비디오의 경우, 정보 유닛 간격은 매 초당 10 프레임의 비디오의 경우에서 100 밀리초이다. 또한, 일 예로서, 스피치의 경우, 정보 유닛 간격은 통상적으로 cdma2000, GSM 및 WCDMA에서 20 밀리초이다. 이러한 설명으로부터, 통상적으로 오디오/스피치 프레임은 독립적으로 디코딩가능한 유닛으로 추가적으로 분할되지 않고, 통상적으로 비디오 프레임은 독립적으로 디코딩가능한 슬라이스로 추가적으로 분할된다는 것이 명백하다. "멀티미디어 프레임", "정보 유닛 간격" 등의 어구가 비디오, 오디오 및 스피치의 멀티미디어 데이터를 지칭하는 때의 콘텍스트로부터 명백하다.
복수의 일정한 비트 레이트 통신 채널을 통해 정보 유닛을 송신하는 기술이 설명된다. 기술은 정보 유닛을 데이터 패킷으로 파티셔닝하는 단계를 포함하며, 여기서, 그 데이터 패킷의 사이즈는 통신 채널의 물리 레이어 데이터 패킷 사이즈에 매칭하도록 선택된다. 예를 들어, 정보 유닛은 일정한 레이트에서 발생할 수도 있고, 통신 채널은 상이한 레이트로 물리 레이어 데이터 패킷을 송신할 수도 있다. 기술은 정보 유닛을 파티셔닝하는 단계를 설명하고, 그에 의해, 복수의 데이터 패킷을 생성한다. 예를 들어, 인코더는, 통신 채널의 물리 레이어 패킷 사이즈에 매칭하는 사이즈로 정보 유닛을 인코딩하도록 제약될 수도 있다. 그 후, 인코딩된 데이터 패킷은 통신 채널의 물리 레이어 데이터 패킷에 할당된다. 정보 유닛은 가변 비트 레이트 데이터 스트림, 멀티미디어 데이터, 비디오 데이터 및 오디오 데이터를 포함할 수도 있다. 통신 채널은, GSM, GPRS, EDGE, 또는 TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, cdma2000, 광대역 CDMA (WCDMA) 등과 같은 CDMA에 기초한 표준을 포함한다.
양태는, 하나 이상의 이용가능한 일정한 비트 레이트 통신 채널의 가능한 물리 레이어 패킷 사이즈를 결정하는 단계를 포함한다. 정보 유닛은 파티셔닝되며, 그에 의해, 개별 데이터 패킷의 사이즈가 하나 이상의 일정한 비트 레이트 통신 채널의 물리 레이어 패킷들 중 하나에 매칭되도록 복수의 데이터 패킷을 생성한다. 그 후, 데이터 패킷은 인코딩되고, 매칭된 일정한 비트 레이트 통신 채널의 물리 레이어 패킷에 할당된다. 이러한 방식에서, 정보 유닛은 하나 이상의 일정한 비트 레이트 채널을 통해 송신되는 데이터 패킷의 스트림으로 인코딩된다. 정보 유닛이 변함에 따라, 그 정보 유닛은 상이한 사이즈의 데이터 패킷으로 인코딩될 수도 있고, 상이한 이용가능한 물리 레이어 패킷 사이즈를 갖는 일정한 비트 레이트의 상이한 조합은 데이터 패킷을 송신하기 위해 사용될 수도 있다. 예를 들어, 정보 유닛은 상이한 사이즈의 프레임에 포함된 비디오 데이터를 포함할 수도 있으므로, 고정된 비트 레이트 통신 채널 물리 레이어 패킷의 상이한 조합은 상이한 사이즈의 비디오 프레임의 송신물을 수용하도록 선택될 수도 있다.
다른 양태는 복수의 일정한 비트 레이트 통신 채널의 이용가능한 데이터 레이트 및 물리 레이어 패킷 사이즈를 결정하는 단계를 포함한다. 그 후, 정보 유닛은 데이터 패킷에 할당되며, 여기서, 개별 데이터 패킷 사이즈는 개별의 일정한 비트 레이트 통신 채널 중 하나의 물리 레이어 패킷에 적합한 사이즈이도록 선택된다. 개별의 일정한 비트 레이트 채널의 조합은, 물리 레이어 패킷 사이즈가 가변 비트 레이트 데이터 스트림 패킷 사이즈에 매칭하도록 선택될 수도 있다. 예를 들어, 일정한 비트 레이트 채널의 하나 이상의 상이한 조합들은, 가변 비트 레이트 데이터 스트림에 의존하여 선택될 수도 있다.
또 다른 양태는 정보 유닛을 수용하도록 구성된 인코더이다. 그 후, 정보 유닛은 데이터 패킷으로 파티셔닝되며, 여기서, 개별 데이터 패킷의 사이즈는 이용가능한 일정한 비트 레이트 통신 채널 중 하나의 물리 레이어 패킷 사이즈에 매칭된다.
또 다른 양태는 복수의 일정한 비트 레이트 통신 채널로부터 데이터 스트림을 수용하도록 구성된 디코더이다. 데이터 스트림은 디코딩되고 디코딩된 데이터 스트림은 가변 비트 레이트 데이터 스트림으로 누적된다.
정보 유닛의 예들은, 가변 비트 레이트 데이터 스트림, 멀티미디어 데이터, 비디오 데이터, 및 오디오 데이터를 포함한다. 정보 유닛은 일정한 반복 레이트에서 발생할 수도 있다. 예를 들어, 정보 유닛은 비디오 데이터의 프레임들일 수도 있다. 일정한 비트 레이트 통신 채널의 예들은, CDMA 채널, GSM 채널, GPRS 채널, 및 EDGE 채널을 포함한다.
또한, 유선 네트워크를 통해 콘텐츠 서버 또는 소스로부터 모바일까지, 가변 비트 레이트 데이터, 멀티미디어 데이터, 비디오 데이터, 스피치 데이터, 또는 오디오 데이터와 같은 정보 유닛을 송신하기 위한 프로토콜 및 포맷의 예가 제공된다. 설명된 기술은, 유니캐스트 스트리밍, 대화형 및 브로드캐스트 스트리밍 애플리케이션과 같은 임의의 타입의 멀티미디어 애플리케이션에 적용가능하다. 예를 들어, (무선 모바일로의 유선 스트리밍에 대한 콘텐츠 서버와 같이) 기술은 비디오 데이터와 같은 멀티미디어 데이터뿐만 아니라, 브로드캐스트/멀티캐스트 서비스, 또는 2개의 모바일 사이의 비디오 전화기와 같은 오디오 및 대화형 서비스와 같은 다른 멀티미디어 애플리케이션을 송신하기 위해 사용될 수 있다.
도 1은 본 발명에 따라 구성된 통신 시스템 (100) 을 도시한다. 통신 시스템 (100) 은, 인프라구조 (101), 다중의 무선 통신 디바이스 (WCD; 104 및 105), 및 지상선 (landline) 통신 디바이스 (122 및 124) 를 포함한다. 또한, WCD는 이동국 (MS) 또는 모바일로서 지칭될 것이다. 일반적으로, WCD는 이동 또는 고정일 수도 있다. 지상선 통신 디바이스 (122 및 124) 는, 예를 들어, 스트리밍 데이터와 같은 다양한 타입의 멀티미디어 데이터를 제공하는, 서빙 노드 또는 콘텐츠 서버를 포함할 수 있다. 또한, MS는 멀티미디어 데이터와 같은 스트리밍 데이터를 송신할 수 있다.
또한, 인프라구조 (101) 는 기지국 (102), 기지국 제어기 (106), 이동 스위칭 센터 (108), 스위칭 네트워크 (120) 등과 같은 다른 컴포넌트를 포함할 수도 있다. 일 실시형태에서, 기지국 (102) 은 기지국 제어기 (106) 와 통합되고, 다른 실시형태에서는 기지국 (102) 과 기지국 제어기 (106) 는 별도의 컴포넌트이다. 상이한 타입의 스위칭 네트워크 (120) 가 통신 시스템 (100) 에서 신호를 라우팅하기 위해 사용될 수도 있으며, 예를 들어, 그 스위칭 네트워크 (120) 는, IP 네트워크 또는 공중 스위칭 전화 네트워크 (PSTN) 일 수도 있다.
"순방향 링크" 또는 "다운링크" 라는 용어는 인프라구조 (101) 로부터 MS까지의 신호 경로를 지칭하고, "역방향 링크" 또는 "업링크" 라는 용어는 MS로부터 인프라구조까지의 신호 경로를 지칭한다. 도 1에서 도시된 바와 같이, MS (104 및 105) 는 순방향 링크를 통해 신호 (132 및 136) 를 수신하고, 역방향 링크를 통해 신호 (134 및 138) 를 송신한다. 일반적으로, MS (104 및 105) 로부터 송신된 신호는, 또 다른 원격 유닛과 같은 또 다른 통신 디바이스 또는 지상선 통신 디바이스 (122 및 124) 에서의 수신을 위해 의도되며, IP 네트워크 또는 스위칭 네트워크를 통해 라우팅된다. 예를 들어, 개시한 WCD (104) 로부터 송신된 신호 (134) 가 목적지 MS (105) 에 의해 수신되도록 의도되면, 그 신호는 인프라구조 (101) 를 통해 라우팅되고, 신호 (136) 는 순방향 링크를 통해 목적지 MS (105) 로 송신된다. 유사하게, 인프라구조 (101) 에서 개시된 신호는 MS (105) 로 브로드캐스팅될 수도 있다. 예를 들어, 콘텐츠 제공자는, 스트리밍 멀티미디어 데이터와 같은 멀티미디어 데이터를 MS (105) 에 전송할 수도 있다. 통상적으로, MS 또는 지상선 통신 디바이스와 같은 통신 디바이스는 신호의 개시자 및 신호에 대한 목적지 양자일 수도 있다.
MS (104) 의 예는 셀룰러 전화기, 무선 통신 인에이블된 개인용 컴퓨터, 및 개인 휴대 정보 단말기 (PDA), 및 다른 무선 디바이스를 포함한다. 통신 시스템 (100) 은 하나 이상의 무선 표준을 지원하도록 설계될 수도 있다. 예를 들어, 표준은, GSM (Global System for Mobile Communication), GPRS (General Packet Radio Service), EDGE (Enhanced Data GSM Enviroment), TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, cdma2000, 광대역 CDMA (WCDMA) 등으로서 지칭되는 표준들을 포함할 수도 있다.
도 2는 예시적인 패킷 데이터 네트워크, 및 무선 네트워크를 통해 패킷 데이터를 전달하는 다양한 공중 인터페이스 옵션을 도시한 블록도이다. 설명된 기술은 도 2에서 도시된 패킷 스위칭 데이터 네트워크 (200) 와 같은 패킷 스위칭 데이터 네트워크 (200) 로 구현될 수도 있다. 도 2의 예에서 나타낸 바와 같이, 패킷 스위칭 데이터 네트워크 시스템은, 무선 채널 (202), 복수의 수신 노드 또는 MS (204), 전송 노드 또는 콘텐츠 서버 (206), 서빙 노드 (208), 및 제어기 (210) 를 포함할 수도 있다. 전송 노드 (206) 는 인터넷과 같은 네트워크 (212) 를 통해 서빙 노드 (208) 에 커플링될 수도 있다.
서빙 노드 (208) 는, 예를 들어, 패킷 데이터 서빙 노드 (PDSN) 또는 서빙 GPRS 지원 노드 (SGSN) 및 게이트웨이 GPRS 지원 노드 (GGSN) 를 포함할 수도 있다. 서빙 노드 (208) 는 전송 노드 (206) 로부터 패킷 데이터를 수신할 수도 있고 정보의 패킷을 제어기 (210) 로 서빙할 수도 있다. 제어기 (210) 는, 예를 들어, 기지국 제어기/패킷 제어 기능 (BSC/PCF) 또는 무선 네트워크 제어기 (RNC) 를 포함할 수도 있다. 일 실시형태에서, 제어기 (210) 는 무선 액세스 네트워크 (RAN) 를 통해 서빙 노드 (208) 와 통신한다. 제어기 (210) 는 서빙 노드 (208) 와 통신하고 무선 채널 (202) 을 통해 정보의 패킷을 MS와 같은 하나 이상의 수신 노드 (204) 에 송신한다.
일 실시형태에서, 서빙 노드 (208) 또는 전송 노드 (206), 또는 양자는 데이터 스트림을 인코딩하는 인코더, 또는 데이터 스트림을 디코딩하는 디코더, 또는 양자를 또한 포함할 수도 있다. 예를 들어, 인코더는 비디오 스트림을 인코딩할 수 있고, 그에 의해, 데이터의 가변-사이즈 프레임을 생성하며, 디코더는 데이터의 가변 사이즈 프레임을 수신하여 그들을 디코딩할 수 있다. 프레임이 다양한 사이즈이지만 비디오 프레임 레이트는 일정하기 때문에, 데이터의 가변 비트 레이트 스트림이 생성된다. 유사하게, MS는 데이터 스트림을 인코딩하는 인코더, 또는 수신된 데이터 스트림을 디코딩하는 디코더, 또는 양자를 포함할 수도 있다. "코덱" 이라는 용어는 인코더 및 디코더의 조합을 설명하기 위해 사용된다.
도 2에서 도시된 일 예에서, 네트워크 또는 인터넷 (212) 에 접속된 전송 노드 (206) 로부터의, 멀티미디어 데이터와 같은 데이터는 전송 노드 또는 패킷 데이터 서빙 노드 (PDSN; 208), 및 제어기, 또는 기지국 제어기/패킷 제어 기능 (BSC/PCF: 210) 을 통해 수신 노드 또는 MS (204) 에 전송될 수 있다. MS (204) 와 BSC/PCF (210) 사이를 인터페이싱하는 무선 채널 (202) 은 공중 인터페이스이고, 통상적으로 시그널링 및 전달자 (bearer), 또는 페이로드, 데이터를 위해 많은 채널을 사용할 수 있다.
공중 인터페이스
공중 인터페이스 (202) 는 다수의 무선 표준들 중 임의의 무선 표준에 따라 동작할 수도 있다. 예를 들어, 표준은, GSM (Global System for Mobile Communication), GPRS (General Packet Radio Service), EDGE (Enhanced Data GSM Enviroment) 와 같이 TDMA에 기초한 표준, 또는 TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS-2000, HRPD, cdma2000, 광대역 CDMA (WCDMA) 와 같이 CDMA에 기초한 표준 등을 포함할 수도 있다.
cdma2000에 기초한 시스템에서, 데이터는, 예를 들어, 일반적으로 보이스를 송신하기 위해 사용되는 기본 채널 (FCH), 전용 제어 채널 (DCCH), 보조 채널 (SCH), 및 패킷 데이터 채널 (PDCH) 뿐만 아니라 다른 채널과 같은 다중의 채널을 통해 송신될 수 있다.
FCH는, 예를 들어, 풀 레이트, 하프 (half) 레이트, 1/4 레이트 및 1/8 레이트와 같이 다중의 고정된 레이트로 스피치의 송신을 위한 통신 채널을 제공한다. FCH는 이들 레이트들을 제공하고, 사용자의 스피치 활성도가 타겟 보이스 품질을 달성하기 위해 풀 레이트 미만을 요구하는 경우, 시스템은 더 작은 데이터 레이트들 중 하나를 사용함으로써 시스템의 다른 사용자에 대한 간섭을 감소시킨다. 시스템 용량을 증가시키기 위해 소스 레이트를 줄이는 이득은 CDMA 네트워크에서 널리 공지되어 있다.
DCCH는 FCH와 유사하지만, 2개의 고정된 레이트, 즉, 무선 구성 3 (RC3) 의 9.6kbps 및 무선 구성 5 (RC5) 의 14.4kbps 중 하나에서만 풀 레이트를 제공한다. 이것은 1x 트래픽 레이트로 지칭된다. SCH는 cdma2000에서 1x, 2x, 4x, 8x 및 16x로 트래픽 레이트를 제공하도록 구성될 수 있다. 송신될 데이터가 존재하지 않는 경우, DCCH 및 SCH 양자는, 시스템의 다른 사용자에 대해 감소된 간섭을 보장하기 위해 또는 기지국 송신기의 송신 전력 버짓 (budget) 내에서 유지하기 위해, 또한 dtx로서 지칭되는 어떠한 데이터도 송신하지 않는 송신을 중지할 수 있다. PDCH는 n*45 바이트인 데이터 패킷을 송신하도록 구성될 수 있으며, 여기서 n={1, 2, 4, 8} 이다.
FCH 및 DCCH 채널은, 예를 들어, 대화형 서비스를 인에이블하기 위해 데이터의 통신에 대해 일정한 딜레이 및 낮은 데이터 패킷 손실을 제공한다. SCH 및 PDCH 채널은 FCH 및 DCCH보다 더 높은 대역폭, 예를 들어, 300kbps 내지 3Mbps를 제공하는 다중의 고정된 비트 레이트 채널을 제공한다. 또한, SCH 및 PDCH는, 이들 채널들이 많은 사용자들 사이에서 공유되기 때문에 가변 딜레이를 갖는다. SCH의 경우, 다중의 사용자는 제시간에 멀티플렉싱되며, 그 SCH는 시스템 로드에 의존하여 상이한 양의 딜레이를 도입한다. PDCH의 경우, 대역폭 및 딜레이는, 예를 들어, 무선 조건, 즉, 협의된 서비스의 품질 (QoS) 및 다른 스케줄링 고려사항에 의존한다. 유사한 채널은, TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, UMTS, 및 광대역 CDMA (WCDMA) 에 기초하여 시스템에서 이용가능하다.
FCH가 보이스 사용자에 의해 요구되는 전력을 보전하기 위해 다중의 고정된 비트 데이터 레이트 (풀, 하프, 1/4 및 1/8) 를 제공한다. 통상적으로, 송신될 신호의 시간-주파수 구조가 품질을 과도하게 떨어뜨리지 않고 더 높은 압축을 용인하는 경우, 보이스 인코더 또는 보코더는 더 낮은 데이터 레이트를 사용할 것이다. 통상적으로 이러한 기술은 소스 제어된 가변 비트 레이트 보코더로서 지칭된다. 따라서, TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, UMTS, 또는 cdma2000에 기초한 시스템에서, 데이터를 송신하기에 이용가능한 다중의 고정된 비트 레이트 채널이 존재한다.
cdma2000과 같은 CDMA에 기초한 시스템에서, 통신 채널은 "슬롯" 의 연속적인 스트림으로 분할된다. 예를 들어, 통신 채널은 20ms 세그먼트 또는 시간 슬롯으로 분할될 수도 있다. 또한, 이것은 "송신 시간 간격 (TTI)" 로 지칭된다. 이들 시간 슬롯동안 송신된 데이터는 패킷으로 어셈블링 (assemble) 되며, 여기서, 데이터의 사이즈는 채널의 이용가능한 데이터 레이트 또는 채널의 대역폭에 의존한다. 따라서, 임의의 개별 시간 슬롯동안, 그들 각각의 통신 채널을 통해 송신되는 개별 데이터 패킷이 존재하는 것이 가능하다. 예를 들어, 단일 시간 슬롯 동안, 데이터 패킷은 DCCH 채널을 통해 송신될 수도 있고, 상이한 데이터 패킷은 SCH 채널을 통해 동시에 송신될 수도 있다.
유사하게, GSM, 또는 GPRS, 또는 EDGE에 기초한 시스템에서, 데이터는 프레임내의 다중의 시간 슬롯을 사용하여 BSC (210) 와 MS (204) 사이에서 송신될 수 있다. 도 3은 GSM 공중 인터페이스에서 2개의 무선 프레임 (302 및 304) 을 도시한 블록도이다. 도 3에서 도시된 바와 같이, GSM 공중 인터페이스 무선 프레임 (302 및 304) 은, 각각, 8개의 시간슬롯으로 분할된다. 개별 시간슬롯은 시스템의 특정 사용자에게 할당된다. 또한, GSM 송신 및 수신은 2개의 상이한 주파수를 사용하며, 순방향 링크 및 역방향 링크는 3개의 시간슬롯에 의해 오프셋된다. 예를 들어, 도 3에서, 다운링크 무선 프레임 (302) 은 시간 t0에서 시작하여 하나의 주파수에서 송신될 것이고, 업링크 무선 프레임 (304) 은 상이한 주파수에서 송신될 것이다. 다운링크 무선 프레임 (302) 은 3개의 시간 슬롯, 즉, TS0 내지 TS2에 의해 업링크 무선 프레임으로부터 오프셋된다. 다운링크와 업링크 무선 프레임들 사이에서 오프셋을 갖는 것은, 무선 통신 디바이스 또는 단말기로 하여금 동일한 시간에서 송신 및 수신할 수 있어야 하지 않고 동작할 수 있도록 한다.
GSM 무선 통신 디바이스 또는 단말기에서의 진보는, 동일한 무선 프레임 동안 다중의 시간슬롯을 수신할 수 있는 GSM 단말기들을 발생한다. 이들은 "멀티슬롯 클래스" 로 지칭되며, 여기에서 전체로서 포함된 3GPP TS 45.002의 Annex B에서 발견될 수 있다. 따라서, GSM 또는 GPRS 또는 EDGE에 기초한 시스템에서, 데이터를 송신하기에 이용가능한 다중의 고정된 시간 슬롯이 존재한다.
VBR 멀티미디어 특징
일반적으로, 비디오와 같은 가변 비트 레이트 (VBR) 멀티미디어 데이터는 공통적인 특징을 포함한다. 예를 들어, 비디오 데이터는, 카메라와 같은 센서에 의해 일정한 프레임 레이트로 일반적으로 포착된다. 일반적으로, 멀티미디어 송신기는 비디오 스트림을 인코딩하기 위해 상한을 갖는 유한한 프로세싱 시간을 요구한다. 일반적으로, 멀티미디어 수신기는 비디오 스트림을 디코딩하기 위해 상한을 갖는 유한한 프로세싱 시간을 요구한다.
일반적으로, 멀티미디어 프레임들이 생성되었던 동일한 프레임 레이트로 그 멀티미디어 프레임들을 재구성하는 것이 바람직하다. 예를 들어, 비디오의 경우, 비디오가 센서 또는 카메라에서 포착되었던 동일한 레이트로 재구성된 비디오 프레임을 디스플레이하는 것이 바람직하다. 재구성 및 포착 레이트를 동일하게 하는 것은, 다른 멀티미디어 엘리먼트와 동기화하는 것을 용이하게 한다, 예를 들어, 첨부한 오디오 스트림 또는 스피치 스트림과 비디오 스트림을 동기화하는 것이 간략화된다.
비디오의 경우, 인간의 인지의 관점에서, 일관된 레벨의 품질을 유지하는 것이 일반적으로 바람직하다. 일반적으로, 일관된 품질의 멀티미디어 스트림을 프로세싱하는 것보다 품질에서 변동을 갖는 연속적인 멀티미디어 스트림을 프로세싱하는 것이 더 성가시고 힘들다. 예를 들어, 프리즈 (freeze) 프레임 및 블로키니스 (blockiness) 와 같은 품질 인공물을 포함하는 비디오 스트림을 프로세싱하는 것은 일반적으로 성가시다.
딜레이 고려사항
예를 들어, 오디오/비디오와 같은 멀티미디어 콘텐츠를 전송하는 것은 통상적으로 딜레이를 초래한다. 이들 딜레이들 중 일부는 코덱 설정으로 인한 것이고, 일부는, 다른 것들 중, 공중 인터페이스를 통해 전송되는 패킷의 재-송신 및 재-순서화 (re-ordering) 를 허용하는 무선-링크 프로토콜 (RLP) 송신 등과 같은 네트워크 설정으로 인한 것이다. 멀티미디어 송신의 딜레이를 산정하는 객관적인 방법은 인코딩된 스트림을 관측하는 것이다. 예를 들어, 송신물은, 완전하고 독립적으로 디코딩가능한 패킷이 수신될 때까지 디코딩될 수 없다. 따라서, 딜레이는 패킷의 사이즈 및 송신물의 레이트에 의해 영향을 받을 수 있다.
예를 들어, 패킷이 사이즈에서 64k 바이트이고 초당 64k 바이트로 채널을 통해 송신되면, 그 패킷은 디코딩될 수 없고 전체 패킷이 수신될 때까지 1초 동안 딜레이되어야 한다. 수신된 모든 패킷은 가장 큰 패킷을 수용하기에 충분히 딜레이될 필요가 있으므로, 패킷은 일정한 레이트에서 디코딩될 수 있다. 예를 들어, 가변 사이즈의 비디오 패킷이 수신되면, 수신기는 가장 큰 패킷 사이즈를 수용하기 위해 필요한 딜레이와 동일한 양만큼 모든 수신 패킷을 딜레이 또는 버퍼링할 필요가 있다. 딜레이는 디코딩된 비디오가 일정한 레이트에서 렌더링 또는 디스플레이되도록 용인할 것이다. 시간보다 빨리 최대 패킷 사이즈가 공지되지 않으면, 최대 패킷 사이즈의 추정 및 관련 딜레이는 패킷의 인코딩동안 사용된 파라미터에 기초하여 수행될 수 있다.
바로 전에 설명된 기술은 임의의 비디오 코덱 (H.263, AVC/H.264, MPEG-4 등) 에 대한 딜레이를 산정할 시에 사용될 수 있다. 또한, 비디오 디코더만이 MPEG (Motion Picture Expert Group) 및 ITU (International Telecommunication Union) 에 의해 표준으로 특정된다면, 통상적인 무선 배치에서 모바일에 대한 상이한 인코더 구현에 의해 도입된 딜레이를 추정하기 위해 사용될 수 있는 객관적인 측정을 갖는 것이 바람직하다.
일반적으로, 비디오 스트림은 멀티미디어 서비스의 임의의 타입의 데이터보다 더 많은 딜레이, 예를 들어, 스피치, 오디오, 타이밍된 텍스트 등보다 더 많은 딜레이를 가질 것이다. 비디오 스트림에 의해 통상적으로 경험된 더 긴 딜레이 때문에, 일반적으로, 비디오 데이터와 동기화될 필요가 있는 다른 멀티미디어 데이터는, 비디오와의 동기화를 유지하기 위해 의도적으로 딜레이될 필요가 있을 것이다.
인코더/디코더 딜레이
일부 멀티미디어 인코딩 기술에서, 멀티미디어 데이터 프레임은 이전의 기준 멀티미디어 데이터 프레임으로부터의 정보를 사용하여 인코딩되거나 디코딩된다. 예를 들어, MPEG-4 표준을 구현하는 비디오 코덱은 상이한 타입의 비디오 프레임을 인코딩 및 디코딩할 것이다. MPEG-4에서, 비디오는 통상적으로 "I" 프레임 및 "P" 프레임으로 인코딩된다. I 프레임은 자급식, 즉, 비디오의 하나의 완전한 프레임을 렌더링 또는 디스플레이하기 위해 필요한 모든 정보를 포함한다. P 프레임은 자급식이 아니며, 통상적으로 모션 (motion) 벡터 및 차동 텍스처 (texture) 정보와 같은 이전의 프레임에 관하여 차동적인 정보를 포함할 것이다. 통상적으로, I 프레임은, 콘텐츠 및 인코더 설정에 의존하여, P 프레임보다 약 8 내지 10배 더 크다. 멀티미디어 데이터의 인코딩 및 디코딩은, 이용가능한 프로세싱 리소스에 의존할 수도 있는 딜레이를 도입한다. 이러한 타입의 방식의 통상적인 구현은, 프로세싱 리소스로 하여금, 동시에, 하나의 프레임을 포착 또는 디스플레이하고 또 다른 프레임을 프로세싱하게 하도록 핑-퐁 (ping-pong) 버퍼를 이용할 수도 있다.
사실상, 예측적인 코딩 및 또한 많은 파라미터의 가변 길이 코딩 (VLC) 의 사용때문에, H.263, AVC/H.264, MPEG-4, 등과 같은 비디오 인코더는 본질적으로 가변 레이트이다. 회로 스위칭 네트워크 및 패킷 스위칭 네트워크를 통한 가변 레이트 비트스트림의 실시간 전달은 일반적으로 전송기 및 수신기에서 버퍼에 의한 트래픽 세이핑에 의해 달성된다. 트래픽 세이핑 버퍼는 통상적으로 바람직하지 않은 부가적인 딜레이를 도입한다. 예를 들어, 한 사람이 스피치를 말할 때와 또 다른 사람이 그 스피치를 청취할 때 사이에 딜레이가 존재하는 경우, 부가적인 딜레이는 전화 원격 회의 동안 성가실 수 있다.
인코더 및 디코더 딜레이는 인코더 및 디코더가 멀티미디어 데이터를 프로세싱해야 하는 시간의 양에 영향을 줄 수 있다. 예를 들어, 데이터를 프로세싱하고 원하는 프레임 레이트를 유지하기 위해 인코더 및 디코더에 대해 허용된 시간의 상한은,
Δe = Δd = 1/f
로 주어지고, 여기서, Δe 및 Δd는, 각각, 인코더 및 디코더 딜레이를 나타내고, f는 소정의 서비스에 대해 매 초당 프레임 (fps) 에서 원하는 프레임 레이트이다.
예를 들어, 통상적으로, 비디오 데이터는, 15fps, 10fps, 또는 7.5fps인 원하는 프레임 레이트를 갖는다. 데이터를 프로세싱하고 원하는 프레임 레이트를 유지하기 위해 인코더 및 디코더에 대해 허용된 시간의 상한은, 각각의 프레임 레이트 15fps, 10fps, 또는 7.5fps에 대해, 각각, 66.6 ms, 100ms 및 133ms의 상한을 생성한다.
레이트 제어 버퍼 딜레이
일반적으로, 멀티미디어 서비스의 일관된 인지의 품질을 유지하기 위해, 상이한 수의 비트가 상이한 프레임에 대해 요구될 수도 있다. 예를 들어, 비디오 코덱은 일관된 품질을 유지하기 위해 P 프레임과는 달리 I 프레임을 인코딩하도록 상이한 수의 바이트를 사용할 필요가 있을 수도 있다. 따라서, 일관된 품질 및 일정한 프레임 레이트를 유지하는 것은, 가변 비트 레이트 스트림인 비디오 스트림을 생성한다. 인코더에서 일관된 품질은 인코더 "양자화 파라미터 (Qp)" 를 상수 또는 타겟 Qp 주변의 더 작은 변수로 설정함으로써 달성될 수 있다.
도 4는 "카폰 (carphone)" 이라 명칭된 통상적인 비디오 시퀀스에 대해 프레임 사이즈의 변화의 일 예를 도시한 차트이다. 카폰 시퀀스는 당업자에게 널리 공지되어 있는 표준 비디오 시퀀스이며, 비디오 압축, 에러 정정 및 송신과 같은 다양한 기술들을 평가할 시에 사용을 위해 "공통적인" 비디오 시퀀스를 제공하기 위해 사용된다. 도 4는, 각각, 참조 부호 (402 및 404) 에 의해 표시된 MPEG-4 및 AVC/H.264를 사용하여 인코딩된 카폰 데이터의 프레임의 샘플 수에 대해 프레임 사이즈, 즉, 바이트의 변화의 일 예를 도시한다. 인코딩의 원하는 품질은 인코더 파라미터 "Qp"를 원하는 값으로 설정함으로써 달성될 수 있다. 도 4에서, 카폰 데이터는, Qp=33 을 갖는 MPEG 인코더를 사용하여, 그리고 Qp=33을 갖는 AVC/H.264를 사용하여 인코딩된다. 도 4에서 도시된 인코딩된 데이터 스트림이 통상적인 무선 라디오 채널과 같은 일정한 비트 레이트 (CBR) 채널을 통해 송신될 경우, 프레임 사이즈의 변화는 일정한, 또는 협의된 QoS 비트레이트를 유지하기 위해 "평활화" 될 필요가 있다. 통상적으로, 프레임 사이즈의 변화의 이러한 "평활화" 는 통상 버퍼링 딜레이 Δb 로 지칭되는 부가적인 딜레이의 도입을 야기한다.
도 5는, 버퍼링 딜레이가 CBR 채널을 통해 송신될 다양한 사이즈의 프레임의 송신을 지원하기 위해 사용될 수 있는 방법을 도시한 블록도이다. 도 5에서 도 시된 바와 같이, 가변 사이즈의 데이터 프레임 (502) 은 버퍼 (504) 에 진입한다. 버퍼 (504) 는, 일정한 사이즈인 데이터 프레임이 CBR 채널 (508) 을 통한 송신을 위해 버퍼 (506) 로부터 출력될 수 있도록, 데이터의 프레임의 충분한 수를 저장할 것이다. 이러한 타입의 버퍼는 통상 "리키 버킷 (leaky bucket)" 버퍼로서 지칭된다. 리키 버킷 버퍼는, 바닥에 구멍이 있는 버킷과 같이, 일정한 레이트로 데이터를 출력한다. 물이 버킷에 진입하는 레이트가 변하면, 버킷에 진입하는 물의 레이트가 누설의 레이트 미만으로 떨어지는 경우, 버킷은 버킷이 마르는 것을 방지하기 위해 버킷의 충분한 양의 물을 유지할 필요가 있다. 유사하게, 버킷에 진입하는 물의 레이트가 누설의 레이트를 초과하는 경우, 버킷은 버킷이 오버플로우하지 않도록 충분히 클 필요가 있다. 유사한 방식으로 버퍼 (504) 는 버킷에 작동하며, 버퍼가 언더플로우하는 것을 방지하기 위해 버퍼가 저장할 필요가 있는 데이터의 양은, 데이터가 버퍼에서 머무르는 시간의 길이에 대응하는 딜레이를 야기한다.
도 6은, 도 1의 시스템에서 CBR 채널을 통해 가변 비트 레이트 (VBR) 멀티미디어 스트림을 스트리밍함으로써 도입되는 버퍼링 딜레이를 도시한 그래프이다. 도 6에서 도시된 바와 같이, 비디오 신호는 VBR 코딩 방식, 즉, MPEG-4를 사용하여 인코딩되며, VBR 스트림을 생성한다. VBR 스트림의 바이트의 수는, 비디오 프레임의 소정의 수를 송신하기 위해 요구되는 바이트의 누적적이거나 총 수를 나타내는 라인 (line; 602) 에 의해 도 6에서 도시된다. 이러한 예에서, MPEG-4 스트림은 64kbps의 평균 비트 레이트로 인코딩되고, 64kbps CBR 채널을 통해 송신 된다. CBR 채널에 의해 송신되는 바이트의 수는 64kbps의 일정한 송신 레이트에 대응하는 일정한 슬로프 라인 (604) 에 의해 나타낸다.
풀 비디오 프레임이 디코딩되도록 하기 위해 디코더에서 수신된 불충분한 데이터로 인한, 디코더에서의 버퍼 언더플로우를 회피하기 위해, 디코더의 디스플레이 (606) 또는 플레이아웃 (playout) 은 디스플레이될 필요가 있다. 이러한 예에서, 딜레이는 원하는 디스플레이 레이트 10fps에 대해 10프레임 또는 1초이다. 이러한 예에서, 64kbps의 일정한 레이트가 채널에 대해 사용되었지만, 평균 데이터 레이트 64kbps를 갖는 MPEG-4 스트림이 32kbps CBR 채널을 통해 송신되면, 버퍼링 딜레이는 시퀀스의 길이로 증가할 것이다. 예를 들어, 도 6에서 도시된 50-프레임 시퀀스에 있어서, 버퍼링 딜레이는 2초로 증가할 것이다.
일반적으로, 버퍼 언더플로우 제약으로 인한 버퍼링 딜레이 Δb는,
Figure 112006092485154-pct00002
Figure 112006092485154-pct00003
로서 계산될 수 있고, 여기서, B(i) = 시간 i에서 인코더의 바이트 단위의 버퍼 점유 (비디오 프레임 #i), R(i) = 시간 i에서 바이트의 인코더 출력 (비디오 프레임 #i), C(i) = 하나의 프레임 틱 (tick) i에서 송신될 수 있는 바이트의 수, f = 초당 프레임의 원하는 수, BW(i) = 시간 i에서 이용가능한 대역폭이다. CBR 송신의 특수한 경우에 대해,
Figure 112006092485154-pct00004
로 나타낸다.
전체의 프리젠테이션 (presentation) 동안, 디코더 버퍼 언더플로우, 또는 버퍼 결핍을 회피하기 위해, 플레이 아웃은 인코더에서 최대 버퍼 점유를 송신하기 위해 요구되는 시간만큼 딜레이되어야 한다. 따라서, 버퍼링 딜레이는,
Figure 112006092485154-pct00005
로서 나타낼 수 있다.
수학식 5의 분모는 전체의 세션 지속 기간 I에 대한 평균 데이터 레이트를 나타낸다. CBR 채널 할당에 있어서, 분모는 C이다. 또한, 상기 분석은, 예시적인 시퀀스의 세트에서 모든 i에 대해 max{Be(i)} 를 계산함으로써 인코더에서 오버플로우를 회피하기 위해 요구되는 공칭 인코더 버퍼 사이즈를 추정하기 위해 사용될 수 있다.
MPEG-4 및 AVC/H.264 버퍼 딜레이 예
도 7은, AVC/H.264 및 MPEG-4에 대해 64kbps의 공칭 레이트 및 일정한 Qp로 인코딩된 다양한 50개의 프레임 시퀀스 비디오 클립에 대하여, 밀리초 단위의 버퍼 딜레이 Δb를 도시한 바 그래프이다. 도 7에서 도시된 바와 같이, 도 6의 MPEG-4 프레임 시퀀스는 1000ms의 버퍼 딜레이를 나타내는 바 (702) 에 의해 나타낸다. AVC/H.264를 사용하여 인코딩된 동일한 비디오 시퀀스는, 400ms의 버퍼 딜레이를 나타내는 바 (704) 에 의해 나타낸다. 비디오 클립의 50개의 프레임 시퀀스의 부가적인 예들이 도 7에 도시되며, 도 7에서, 각각의 시퀀스와 관련되고, MPEG-4 및 AVC/H.264 양자로 인코딩된 버퍼 딜레이를 나타낸다.
도 8은, 도 7에서 도시된 시퀀스의 피크 신호 대 잡음 비 (PSNR) 에 의해 나타낸 바와 같이, 비디오 품질을 도시한 바 그래프이다. 도 8에서 도시된 바와 같이, Qp=15를 갖는 MPEG-4를 사용하여 인코딩된 카폰 시퀀스는 약 28dB의 PSNR을 나타내는 바 (802) 에 의해 나타낸다. Qp=33을 갖는 AVC/H.264를 사용하여 인코딩된 동일한 시퀀스는, 약 35dB의 PSNR을 나타내는 바 (804) 에 의해 나타낸다.
송신 채널 딜레이
송신 딜레이 Δt는 사용된 재송신의 횟수 및 소정의 네트워크에 대한 어떤 일정한 시간에 의존한다. 재송신이 사용되지 않는 경우 Δt는 공칭값을 갖는다고 가정될 수 있다. 예를 들어, 재송신이 사용되지 않는 경우 Δt는 40ms의 공 칭값을 갖는다고 가정될 수도 있다. 재송신이 사용되면, 프레임 삭제 레이트 (FER) 는 떨어지지만 딜레이는 증가할 것이다. 딜레이는 재송신의 횟수 및 관련 오버헤드 딜레이에 적어도 부분적으로 의존할 것이다.
에러 복원도 고려사항
무선 링크 또는 채널을 통해 RTP 스트림을 송신하는 경우, RTP 스트림이 딜레이에 민감하고 RLP 또는 RLC와 같은 재-송신 프로토콜에 의해 100% 신뢰가능한 송신을 보장하는 것이 실용적이지 않기 때문에, 일반적으로 일부 잔여 패킷 손실이 존재할 것이다. 채널 에러의 효과를 이해하는 것을 돕기 위해, RTP/UDP/IP 프로토콜과 같은 다양한 프로토콜의 설명이 아래에서 제공된다. 도 9는, RTP/UDT/IP 프로토콜을 사용하여 무선 링크를 통해 비디오 데이터와 같은 멀티미디어 데이터를 송신하는 경우 존재하는 다양한 레벨의 캡슐화를 도시한 다이어그램이다.
도 9에서 도시된 바와 같이, 비디오 코덱은 비디오 프레임을 설명하는 정보를 포함하는 페이로드 (902) 를 생성한다. 페이로드 (902) 는 수 개의 비디오 패킷 (나타내지 않음) 으로 구성될 수도 있다. 페이로드 (902) 는 슬라이스_헤더 (SH; 904) 를 포함한다. 따라서, 애플리케이션 레이어 데이터 패킷 (905) 은 비디오 데이터 (902) 및 관련 슬라이스_헤더 (904) 로 이루어진다. 페이로드가 인터넷과 같은 네트워크를 통해 통과하는 경우, 부가적인 헤더 정보가 부가될 수도 있다. 예를 들어, 실-시간 프로토콜 (RTP) 헤더 (906), 사용자 데이터그램 프로토콜 (UDP) 헤더 (908), 및 인터넷 프로토콜 (IP) 헤더 (910) 가 부가될 수 도 있다. 이들 헤더들은 그의 소스로부터 그의 목적지까지 페이로드를 라우팅하기 위해 사용되는 정보를 제공한다.
무선 네트워크에 진입할 시에, 포인트 투 포인트 프로토콜 (PPP) 헤더 (912) 가, 비트의 연속적인 스트림으로 패킷을 시리얼라이징 (serialize) 하기 위해 프레이밍 (framing) 정보를 제공하도록 부가된다. 그 후, 예를 들어, cdma2000의 RLP 또는 WCDMA의 RLC와 같은 무선 링크 프로토콜은 RLP 패킷 (914) 으로 비트의 스트림을 패킹 (pack) 한다. 다른 것들 중에서, 무선-링크 프로토콜은 공중 인터페이스를 통해 전송되는 패킷의 재-송신 및 재-순서화를 허용한다. 마지막으로, 공중 인터페이스 MAC-레이어는 하나 이상의 RLP 패킷 (914) 을 취하고, 그들을 MUX 레이어 패킷 (916) 으로 패킹하며, 멀티플렉싱 헤더 (MUX; 918) 를 부가한다. 그 후, 물리 레이어 채널 코더는 디코딩 에러를 검출하기 위한 체크섬 (checksum; CRC; 920) 및 물리 레이어 패킷 (925) 을 형성하는 테일 (tail) 부분 (922) 을 부가한다.
도 9에서 도시된 연속하는 조정되지 않은 캡슐화는 멀티미디어 데이터의 송신에 관해 수 개의 결과를 갖는다. 그러한 일 결과는, 애플리케이션 레이어 데이터 패킷 (905) 과 물리 레이어 패킷 (925) 사이에 미스매치가 존재할 수도 있다는 것이다. 이러한 미스매치의 결과로서, 하나 이상의 애플리케이션 레이어 패킷 (905) 의 일부를 포함하는 물리 레이어 패킷 (925) 이 손실될 때마다, 대응하는 전체의 애플리케이션 레이어 (905) 가 손실된다. 단일 애플리케이션 레이어 데이터 패킷 (905) 의 일부가 2 이상의 물리 레이어 데이터 패킷 (925) 에 포함될 수 도 있기 때문에, 하나의 물리 레이어 패킷 (925) 을 손실하는 것은, 전체의 애플리케이션 레이어 데이터 패킷 (905) 이 적절하게 디코딩될 필요가 있기 때문에 전체의 애플리케이션 레이어 패킷 (905) 의 손실을 야기할 수 있다. 또 다른 결과는, 2 이상의 애플리케이션 레이어 데이터 패킷 (905) 의 일부가 물리 레이어 데이터 패킷 (925) 에 포함되면, 단일 물리 레이어 데이터 패킷 (925) 의 손실은 2 이상의 애플리케이션 레이어 데이터 패킷 (905) 의 손실을 야기할 수 있다는 것이다.
도 10은, 멀티미디어 데이터 패킷과 같은 애플리케이션 데이터 패킷 (905) 의 물리 레이어 데이터 패킷 (925) 으로의 종래의 할당의 일 예를 도시한 다이어그램이다. 도 10에 도시된 것은 2개의 애플리케이션 데이터 패킷 (1002 및 1004) 이다. 애플리케이션 데이터 패킷은, 예를 들어, 각각의 데이터 패킷 (1002 및 1004) 이 비디오 프레임을 나타낼 수 있는 멀티미디어 데이터 패킷일 수 있다. 도 10에 도시된 조정되지 않은 캡슐화는, 단일 애플리케이션 데이터 패킷 또는 2 이상의 애플리케이션 데이터 패킷으로부터의 데이터를 갖는 물리 레이어 패킷을 생성할 수 있다. 도 10에 도시된 바와 같이, 제 1 물리 레이어 데이터 패킷 (1006) 은 단일 애플리케이션 레이어 패킷 (1002) 로부터의 데이터를 포함할 수 있지만, 제 2 물리 레이어 데이터 패킷 (1008) 은 2 이상의 애플리케이션 데이터 패킷 (1002 및 1004) 으로부터의 데이터를 포함할 수 있다. 이러한 예에서, 제 1 물리 레이어 데이터 패킷 (1006) 이 송신 동안 "손실" 되거나 오류발생 (corrupt) 되면, 단일 애플리케이션 레이어 데이터 패킷 (1002) 은 손실된다. 한편, 제 2 물리 레이어 패킷 (1008) 이 손실되면, 2개의 애플리케이션 데이터 패킷 (1002 및 1004) 이 또한 손실된다.
예를 들어, 애플리케이션 레이어 데이터 패킷이 2개의 연속하는 비디오 프레임이면, 제 1 물리 레이어 데이터 패킷 (1006) 의 손실은 단일 비디오 프레임의 손실을 야기한다. 그러나, 제 2 물리 레이어 데이터 패킷의 손실은, 양자의 비디오 프레임의 일부가 손실되고 비디오 프레임의 양자가 디코더에 의해 적절하게 디코딩되거나 복원될 수 없기 때문에, 양자의 비디오 프레임의 손실을 야기한다.
명시적 비트 레이트 (EBR) 제어
CBR 또는 VBR보다는, 명시적 비트 레이트 제어 (EBR) 로 지칭되는 기술의 사용은 CBR 채널을 통한 VBR 소스의 송신을 개선시킬 수 있다. EBR에서, 정보 유닛은 데이터 패킷의 사이즈가 이용가능한 물리 레이어 패킷의 사이즈에 매칭하도록 그 데이터 패킷으로 파티셔닝된다. 예를 들어, 비디오 데이터와 같은 데이터의 VBR 스트림은, 애플리케이션 레이어 데이터 패킷이 데이터가 전송될 통신 채널의 물리 레이어 데이터 패킷에 매칭하도록 데이터 패킷으로 파티셔닝될 수도 있다. 예를 들어, EBR에서, 인코더는, GSM, GPRS, EDGE, TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), cdma2000, 광대역 CDMA (WCDMA) 등과 같은 임의의 공중-경유 표준에서 데이터 스트림을 전송하기 위해 사용되는 물리 채널의 "용량" 에 매칭하는 (이전에 R(i) 로 나타낸) 시간 i 에서 바이트를 출력하도록 제약되거나 구성될 수도 있다. 또한, 인코딩된 패킷은 그것이, 즉, 동일한 수의 바이트 또는 통신 채널의 물리 레이어 데이터 패킷의 사이즈보다 더 작게 사이징된 데이터 패킷을 생성하도록 제약될 수도 있다. 또한, 인코더는, 그것이 출력하는 각각의 애 플리케이션 레이어 데이터 패킷이 독립적으로 디코딩가능하도록 제약될 수 있다. AVC/H.264 참조 인코더에 대한 EBR 기술의 시뮬레이션은, 명시적 레이트의 적절한 수가 VBR 인코딩을 제약하기 위해 사용되면, 인코더가 EBR 기술에 따라 강제되는 경우, 품질에서 인지가능한 손실이 존재하지 않는다는 것을 나타낸다. 아래에서, 일부 채널에 대한 제약의 예는 예로서 설명된다.
멀티미디어 인코딩 및 디코딩
나타낸 바와 같이, 예를 들어, 비디오 인코더와 같은 멀티미디어 인코더는 가변 사이즈의 멀티미디어 프레임을 생성할 수도 있다. 예를 들어, 일부 압축 기술에서, 각각의 신규한 멀티미디어 프레임은 프레임 콘텐츠를 완전히 렌더링하기에 필요한 모든 정보를 포함할 수도 있지만, 다른 프레임은 이전에 완전히 렌더링된 콘텐츠로부터 콘텐츠까지의 변화에 대한 정보를 포함할 수도 있다. 예를 들어, 상술된 바와 같이, MPEG-4 압축 기술에 기초한 시스템에서, 비디오 프레임은 통상적으로 2개의 타입, 즉, I 프레임 또는 P 프레임일 수도 있다. I 프레임은, 각각의 I 프레임이 하나의 완전한 프레임을 렌더링하거나 디스플레이하기에 필요한 모든 정보를 포함한다는 점에서 JPEG 파일과 유사하게 자급식이다. 대조적으로, P 프레임은 통상적으로 이전의 프레임 및 모션 벡터에 관한 차동 정보와 같은 이전 프레임에 관한 정보를 포함한다. 따라서, P 프레임이 이전의 프레임에 의존하기 때문에, P 프레임은 자급식이 아니며, 이전의 프레임에 의존하기 않고 완전한 프레임을 렌더링하거나 디스플레이할 수 없다, 즉, P 프레임은 자체-디코딩될 수 없다. 여기에서, "디코딩된" 이라는 용어는 프레임을 디스플레이하기 위 해 완전한 재구성을 의미하는 것으로 사용된다. 통상적으로, I 프레임은 P 프레임보다 더 크다, 예를 들어, 콘텐츠 및 인코더 설정에 의존하여 약 8 내지 10 배 더 크다.
일반적으로, 각각의 프레임의 데이터는, 이하에 덧붙여 설명될 바와 같이, 각각의 슬라이스가 독립적으로 디코딩될 수 있도록 부분 또는 "슬라이스" 로 파티셔닝될 수 있다. 일 경우, 데이터의 프레임은 단일 슬라이스로 제약될 수도 있고, 다른 경우, 데이터의 프레임은 다수의 슬라이스로 분할된다. 예를 들어, 데이터의 프레임이 비디오 정보이면, 비디오 프레임은 독립적으로 디코딩가능한 슬라이스내에 포함될 수도 있거나, 프레임은 2개 이상의 독립적으로 디코딩가능한 슬라이스로 분할될 수도 있다. 일 실시형태에서, 각각의 인코딩된 슬라이스는, 그 슬라이스의 사이즈가 통신 채널 물리 레이어 데이터 패킷의 이용가능한 사이즈에 매칭하도록 구성된다. 인코더가 비디오 정보를 인코딩하고 있다면, 각각의 슬라이스는, 각각의 비디오 슬라이스의 사이즈가 물리 레이어 패킷의 이용가능한 사이즈에 매칭하도록 구성된다. 즉, 프레임 슬라이스 사이즈는 물리 레이어 패킷 사이즈에 매칭된다.
이용가능한 통신 채널 물리 레이어 데이터 사이즈에 매칭하는 슬라이스를 생성하는 이점은, 애플리케이션 패킷과 물리 레이어 데이터 패킷 사이의 일 대 일 대응이 존재한다는 것이다. 이것은 도 10에서 도시된 바와 같은 조정되지 않은 캡슐화와 관련된 문제의 일부를 완화시키게 한다. 따라서, 물리 레이어 데이터 패킷이 오류발생 또는 손실된다면, 송신 동안, 단지 대응하는 슬라이스만이 손실된 다. 또한, 프레임의 각각의 슬라이스가 독립적으로 디코딩가능하다면, 프레임의 슬라이스의 손실은 프레임의 다른 슬라이스의 디코딩을 방지하지 않을 것이다. 예를 들어, 비디오 프레임이, 각각의 슬라이스가 독립적으로 디코딩가능하고 물리 레이어 데이터 패킷에 매칭되도록 5개의 슬라이스로 분할되면, 그 물리 레이어 데이터 패킷들 중 하나의 오류발생 또는 손실은 단지 대응하는 슬라이스의 손실만을 야기할 것이고, 성공적으로 송신되는 물리 레이어 패킷은 성공적으로 디코딩될 수 있다. 따라서, 전체의 비디오 프레임이 디코딩되지 않을 수도 있지만, 비디오 프레임의 일부는 디코딩될 수도 있다. 이러한 예에서, 5개의 비디오 슬라이스들 중 4개는 성공적으로 디코딩될 것이고, 그에 따라, 비디오 프레임이 감소된 성능이기는 하지만 렌더링 또는 디스플레이되도록 한다.
예를 들어, cdma2000에 기초한 시스템에서, 비디오 슬라이스가 DCCH 및 SCH 채널을 사용하여 전송 노드로부터 MS까지 전달되면, 비디오 슬라이스는 이들 이용가능한 채널에 매칭하도록 사이징될 것이다. 상술된 바와 같이, DCCH 채널은 다중의, 고정된, 데이터 레이트를 지원하도록 구성될 수 있다. cdma2000에 기초한 시스템에서, 예를 들어, DCCH는, 각각, 선택된 레이트 세트 (RS), RS1 및 RS2에 의존하여 9.60kbps 또는 14.4kbps 중 하나의 데이터 송신 레이트를 지원할 수 있다. 또한, SCH 채널은 SCH 무선 구성 (RC) 에 의존하여 다중의, 고정된 데이터 레이트를 지원하도록 구성될 수 있다. SCH는, RC3로 구성된 경우 9.6kbps의 배수 및 RC5로 구성된 경우 14.4kbps의 배수를 지원한다. SCH 데이터 레이트는,
SCH데이터_레이트 = (n*RC 데이터 레이트)
이며, 여기서, 채널 구성에 의존하여 n = 1, 2, 4, 8 또는 16이다.
아래에서, 표 2는 cdma2000에 기초한 통신 시스템에서 DCCH 및 SCH 채널에 대해 가능한 물리 레이어 데이터 패킷 사이즈를 도시한다. 제 1 열 (column) 은, 케이스 또는 가능한 구성을 나타낸다. 제 2 및 제 3 열은, 각각, DCCH 레이트 세트 및 SCH 무선 구성이다. 제 4 열은 4개의 엔트리를 갖는다. 제 1 엔트리는 어떠한 데이터도 DCCH 또는 SCH 중 하나를 통해 전송되지 않는 dtx 경우이다. 제 2 엔트리는 DCCH 채널에 대한 20ms 시간 슬롯의 물리 레이어 데이터 패킷 사이즈이다. 제 3 엔트리는 SCH 채널에 대한 20ms 시간 슬롯의 물리 레이어 데이터 패킷 사이즈이다. 제 4 엔트리는 DCCH 및 SCH 채널의 조합에 대한 20ms 시간 슬롯의 물리 레이어 데이터 패킷 사이즈이다.
Figure 112006092485154-pct00006
애플리케이션 레이어 데이터 패킷이 너무 커서 DCCH 또는 SCH 물리 레이어 데이터 패킷에 적합하지 않는 경우 고려될 트레이드오프 (tradeoff) 가 존재하고 그 대신 결합된 DCCH 플러스 SCH가 사용될 것이라는 것을 알 수 있다. 2개의 패킷을 생성하는 것에 대하여, 결합된 DCCH 플러스 SCH 데이터 패킷 사이즈에 적합하기 위해 사이징되도록 애플리케이션 레이어 데이터 패킷을 인코딩하는 것을 결정할 시에 트래이드오프는, 더 큰 애플리케이션 레이어 패킷 또는 슬라이스가 일반적으로 더 양호한 압축 효율을 생성하지만, 더 작은 슬라이스가 일반적으로 더 양호한 에러 복원도를 생성하는 것이다. 예를 들어, 더 큰 슬라이스는 일반적으로 더 작은 오버헤드를 요구한다. 도 9를 참조하면, 각각의 슬라이스 (902) 는 자신의 슬라이스 헤더 (904) 를 갖는다. 따라서, 2개의 슬라이스가 하나 대신 사용되면, 페이로드에 부가된 2개의 슬라이스 헤더가 존재하며, 패킷을 인코딩하기에 필요한 더 많은 데이터를 야기하므로, 그에 의해 압축 효율을 감소시킨다. 한편, 하나는 DCCH를 통해 송신되고 또 다른 하나는 SCH를 통해 송신되는 2개의 슬라이스가 사용되면, DCCH 데이터 패킷 또는 SCH 데이터 패킷 중 하나에서 만의 오류발생 또는 손실은 여전히 다른 데이터 패킷의 복원을 허용할 것으므로, 그에 의해, 에러 복원도가 개선된다.
표 2를 이해를 돕기 위해, 케이스 (case) 1 및 9의 유도가 상세히 설명될 것이다. 케이스 1에서, DCCH는 9.6kbps의 데이터 레이트에 대응하는 RS1으로 구성된다. 채널이 20ms 시간 슬롯으로 분할되기 때문에, 개별 시간 슬롯내에서 RS1으로 구성된 DCCH를 통해 송신될 수 있는 데이터의 양 또는 물리 레이어 패킷 사이즈는,
9600비트/sec * 20msec = 192비트 = 24바이트
이다. 물리 레이어 패킷, 예를 들어, 에러 정정용 RLP에 부가된 부가적인 오버헤드때문에, 20바이트만이 슬라이스 및 슬라이스 헤더를 포함하는 애플리케이션 레이어 데이터 패킷을 위해 이용가능하다. 따라서, 케이스 1에 있어서, 표 2의 제 4 열의 제 1 엔트리는 20이다.
케이스 1에 대한 SCH는 2x in RC3로 구성된다. RC3은 9.6Kbps의 베이스 (base) 데이터 레이트에 대응하고, 2x는 채널 데이터 레이트가 그 베이스 데이터 레이트에 2배인 것을 의미한다. 따라서, 개별 시간 슬롯내에서, 2x RC3로 구성된 SCH를 통해 송신될 수 있는 데이터의 양 또는 물리 레이어 패킷 사이즈는,
2 * 9600비트/sec * 20msec = 384비트 = 48바이트
이다. 여기서, 물리 레이어 패킷에 부가된 부가적인 오버헤드때문에, 40바이트만이 슬라이스 및 슬라이스 헤더를 포함하는 애플리케이션 레이어 데이터 패킷에 대해 이용가능하다. 따라서, 케이스 1에 있어서, 표 2의 제 4 열의 제 2 엔트리는 40이다. 케이스 1에 있어서, 표 2의 제 4 열의 제 3 엔트리는 제 1 및 제 2 엔트리의 합, 즉, 60이다.
케이스 9는 케이스 1과 유사하다. 양자의 경우, DCCH는 RS1으로 구성되며, 20바이트의 물리 레이어 패킷 사이즈에 대응한다. 케이스 9의 SCH 채널은 2x RC5로 구성된다. RC5는 14.4Kbps의 베이스 데이터 레이트에 대응하고, 2x는 채널 데이터 레이트가 그 베이스 데이터 레이트에 2배인것을 의미한다. 따라서, 개별 시간 슬롯내에서, 2x RC5로 구성된 SCH를 통해 송신될 수 있는 데이터의 양 또는 물리 레이어 패킷 사이즈는,
2 * 14400비트/sec * 20 msec = 576비트 = 72바이트
이다. 여기에서, 물리 레이어 패킷에 부가된 부가적인 오버헤드때문에, 64바이 트만이 슬라이스 및 슬라이스 헤더를 포함하는 애플리케이션 레이어 데이터 패킷에 대해 이용가능하다. 따라서, 케이스 9에 있어서, 표 2의 제 4 열의 제 2 엔트리는 64이다. 케이스 9에 있어서, 표 2의 제 4 열의 제 3 엔트리는 제 1 및 제 2 엔트리의 합, 즉, 84이다.
표 2의 다른 엔트리들은, RS2가 14.4Kbps의 데이터 레이트를 갖는 DCCH에 대응하고, 20msec 시간 슬롯내에 36바이트에 대응하는 방식으로 결정되며, 그 36바이트 중 31바이트가 애플리케이션 레이어에 이용가능하다. 모든 경우에 대해 이용가능한 dtx 동작이 존재하고 그것은 0 페이로드 사이즈이며, 여기서 데이터는 어느 채널을 통해서도 송신되지 않는다는 것을 알 수 있다. 사용자 데이터가 (각각 20msec의) 이용가능한 물리 레이어 슬롯보다 더 적게 송신될 수 있는 경우, dtx는 후속 슬롯에서 사용되며, 시스템에서 다른 사용자에 대한 간섭을 감소시킨다.
상기 표 2에서 나타낸 바와 같이, 예를 들어, DCCH 및 SCH와 같은 이용가능한 다중의 고정된 데이터 레이트 채널을 구성함으로써, CBR 채널의 세트는 VBR 채널과 유사하게 작동할 수 있다. 즉, 다중의 고정된 레이트 채널을 구성하는 것은, CBR 채널이 의사-VBR 채널로서 작동하게 한다. 의사-VBR 채널을 이용하는 기술은, 복수의 이용가능한 일정한 비트 레이트 통신 채널로부터의 CBR 채널의 비트 레이트에 대응하는 가능한 물리 레이어 데이터 패킷 사이즈를 결정하는 단계, 및 데이터의 가변 비트 레이트 스트림을 인코딩하여, 그에 의해, 각각의 데이터 패킷의 사이즈가 물리 레이어 데이터 패킷 사이즈들 중 하나의 사이즈에 매칭되도록 복수의 데이터 패킷을 생성하는 단계를 포함한다.
일 실시형태에서, 통신 채널의 구성은 세션의 시작부에서 확립되고, 그 후, 세션 전반에 걸쳐 변경되지 않거나 단지 빈번하지 않게 변경된다. 예를 들어, 상기 예에서 설명된 SCH는 일반적으로 구성에 설정되고, 전체 세션 전반에 걸쳐 그러한 구성에서 유지한다. 즉, 설명된 SCH는 고정된 레이트 SCH이다. 또 다른 실시형태에서, 채널 구성은 세션동안 동적으로 변경될 수 있다. 예를 들어, 가변 레이트 SCH (V-SCH) 는 각각의 시간 슬롯에 대해 그의 구성을 변경할 수 있다. 즉, 하나의 시간 슬롯동안, V-SCH는 2x RC3와 같은 일 구성으로 구성될 수 있고, 다음의 시간 슬롯에서, V-SCH는 16x RC3와 같은 상이한 구성 또는 V-SCH의 임의의 다른 가능한 구성으로 구성될 수 있다. V-SCH는 부가적인 플렉서빌러티 (flexibility) 를 제공하고, EBR 기술에서 시스템 성능을 개선할 수 있다.
통신 채널의 구성이 전체 세션에 대해 고정되면, 애플리케이션 레이어 패킷 또는 슬라이스는 그들이 이용가능한 물리 레이어 데이터 패킷들 중 가용한 하나에 적합하도록 선택된다. 예를 들어, 표 2의 케이스 1에 나타낸 바와 같이, DCCH 및 SCH가 RS1 및 2x RC3로서 구성되면, 애플리케이션 레이어 슬라이스는, 0바이트, 20바이트, 40바이트, 또는 60바이트 패킷들 중 어느 하나에 적합하도록 선택될 것이다. 유사하게, 표 2의 케이스 4에 나타낸 바와 같이, 채널들이 RS1 및 16x RC3로 구성되었다면, 애플리케이션 레이어 슬라이스는 0바이트, 20바이트, 320바이트, 또는 340바이트 패킷들 중 어느 하나에 적합하도록 선택될 것이다. V-SCH 채널이 사용되었다면, 각각의 슬라이스에 대해 2개의 상이한 구성들 사이에서 변하는 것이 가능하다. 예를 들어, DCCH가 RS1으로 구성되고 V-SCH가 RC3로서 구성 되면, 표 2의 케이스 1 내지 4에 대응하여, 임의의 V-SCH 구성들, 즉, 2x RC3, 4x RC3, 8x RC3 또는 16x RC3 사이에서 변하는 것이 가능하다. 이들 다양한 구성들 사이에서의 선택은, 표 2의 케이스 1 내지 4에 나타낸 바와 같이 0바이트, 20바이트, 40바이트, 60바이트, 80바이트, 100바이트, 160바이트, 180바이트, 320바이트, 또는 340바이트의 물리 레이어 데이터 패킷을 제공한다. 따라서, 이러한 예에서, V-SCH 채널을 사용하는 것은, 애플리케이션 레이어 슬라이스가 표 2의 케이스 1 내지 4에 리스팅된 10개의 상이한 물리 레이어 데이터 패킷 사이즈들 중 임의의 것에 적합하도록 선택되게 한다. cdma2000의 경우, 전달된 데이터의 사이즈는 MS에 의해 추정되며, 이러한 프로세스는 "블라인드 검출 (Blind Detection)" 로 지칭된다.
유사한 기술이 데이터 채널 (DCH) 을 사용하여 광대역 CDMA (WCDMA) 에서 사용될 수 있다. V-SCH와 유사한 DCH는 상이한 물리 레이어 패킷 사이즈를 지원한다. 예를 들어, DCH는 40옥텟 (octet) 의 배수로 0 내지 nx의 레이트를 지원할 수 있고, 여기서, 'nx' 는 DCH 채널의 최대 할당 레이트에 대응한다. nx의 통상적인 값은 64kbps, 128kbps 및 256kbps를 포함한다. "명시적 표시 (Explicit Indication)" 로서 지칭되는 기술에서, 전달된 데이터의 사이즈는 부가적인 시그널링을 사용하여 표시될 수 있으므로, 그에 의해, 블라인드 검출을 행할 필요를 제거한다. 예를 들어, WCDMA의 경우, 전달된 데이터 패킷의 사이즈는, 가변 사이즈의 패킷이 EBR에서와 같이 사용되는 경우, "전송 포맷 결합 표시기 (Transport Format Combination Indicator; TFCI)" 를 사용하여 표시될 수도 있으 므로, MS는 블라인드 검출을 행해야할 필요가 없으며, 그에 의해, MS에 대한 계산적인 부담을 감소시킨다. 설명된 EBR 개념은 패킷 사이즈의 블라인드 검출 및 명시적 표시 양자에 적용가능하다.
애플리케이션 레이어 데이터 패킷이 물리 레이어 데이터 패킷에 적합하도록 애플리케이션 레이어 데이터 패킷을 선택함으로써, 총 데이터 레이트를 갖는 일정한 비트 레이트 통신 채널의 조합은 VBR 통신 채널과 유사한 성능, 및 일부 경우에는, VBR 통신 채널보다 우수한 성능을 갖는 VBR 데이터 스트림을 송신할 수 있다. 일 실시형태에서, 가변 비트 레이트 데이터 스트림은 이용가능한 통신 채널의 물리 레이어 데이터 패킷 사이즈에 매칭하는 사이즈인 데이터 패킷의 스트림으로 인코딩되어, 그 후, 일정한 비트 레이트 채널의 조합을 통해 송신된다. 또 다른 실시형태에서, 가변 비트 레이트 데이터 스트림의 비트 레이트가 변함에 따라, 그 가변 비트 레이트 데이터 스트림은 상이한 사이즈 데이터 패킷으로 인코딩될 수도 있고, 일정한 비트 레이트 채널의 상이한 조합은 그 데이터 패킷을 송신하기 위해 사용될 수도 있다.
예를 들어, 비디오 데이터의 상이한 프레임은 상이한 사이즈일 수도 있으므로, 따라서, 고정된 비트 레이트 통신 채널의 상이한 조합은 그 상이한 사이즈 비디오 프레임의 송신을 수용하기 위해 선택될 수도 있다. 즉, 가변 비트 레이트 데이터는, 일정한 비트 레이트 통신 채널의 총 비트 레이트를 가변 비트 레이트 스트림의 비트 레이트에 매칭하도록, 하나 이상의 일정한 비트 레이트 통신 채널에 데이터 패킷을 할당함으로써, 일정한 비트 레이트 채널을 통해 효율적으로 송신될 수 있다.
또 다른 양태는, 가변 비트 레이트 데이터 스트림을 나타내기 위해 사용된 비트의 총 수를 미리-선택된 최대 비트 수에 제한하도록 인코더가 제약될 수 있다는 것이다. 즉, 가변 비트 레이트 데이터 스트림이 비디오와 같은 멀티미디어 데이터의 프레임이면, 그 프레임은, 각각의 슬라이스가 독립적으로 디코딩될 수 있도록 슬라이스를 선택하고 슬라이스의 비트의 수는 미리-선택된 수의 비트에 제한되는 슬라이스로 분할될 수도 있다. 예를 들어, DCCH 및 SCH 채널이, 각각, RS1 및 2x RC3로 구성되면 (표 2의 케이스 1), 인코더는, 슬라이스가 20바이트, 40바이트, 또는 60바이트 중 어느 하나보다 크지 않도록 제약될 수 있다.
또 다른 실시형태에서, 멀티미디어 데이터를 송신하기 위해 EBR을 사용하는 것은 cdma2000 패킷 데이터 채널 (PDCH) 을 사용할 수 있다. PDCH는 n*45 바이트인 데이터 패킷을 송신하도록 구성될 수 있으며, 여기서, n = {1, 2, 4, 8} 이다. 또한, 예를 들어, 비디오 데이터와 같은 멀티미디어 데이터에 대해 PDCH를 사용하는 것은, 이용가능한 물리 레이어 패킷 사이즈에 매칭하는 "슬라이스" 로 파티셔닝될 수 있다. cdma2000에서, PDCH는 순방향 PDCH (F-PDCH) 및 역방향 PDCH (R-PDCH) 의 이용가능한 서로 다른 데이터 레이트를 갖는다. cdma2000에서, F-PDCH는 R-PDCH보다 조금 더 작은 이용가능한 대역폭을 갖는다. 대역폭에서의 이러한 차이가 이용될 수 있지만, 일부 경우에서는, R-PDCH를 F-PDCH와 동일한 대역폭으로 제한하는 것이 유리하다. 예를 들어, 제 1 MS가 비디오 스트림을 제 2 MS로 송신하면, 그 비디오 스트림은 R-PDCH를 통하여 제 1 MS에 의해 송신 되고 F-PDCH를 통하여 제 2 MS에 의해 수신될 것이다. 제 1 MS가 R-PDCH의 전체 대역폭을 사용하면, 데이터 스트림의 일부는 제 2 MS로의 F-PDCH 송신의 대역폭이 일치하도록 제거되야 한다. 더 작은 대역폭을 갖는 채널을 통해 제 2 MS에 송신될 수 있도록 제 1 MS로부터의 송신물을 재포맷하는 것과 관련된 어려움을 완화시키기 위해, R-PDCH의 대역폭은, 그 대역폭이 F-PDCH의 대역폭과 동일하도록 제한될 수 있다. F-PDCH 대역폭을 제한하는 일 방식은, R-PDCH를 통해 전송된 애플리케이션 데이터 패킷 사이즈를 F-PDCH에 의해 지원되는 애플리케이션 데이터 패킷 사이즈로 제한하고, 그 후, R-PDCH 물리 레이어 패킷의 나머지 비트에 대해 "스터핑 비트 (stuffing bit)" 를 부가하는 것이다. 즉, 스터핑 비트가 F-PDCH 데이터 패킷에 매칭하도록 R-PDCH 데이터 패킷에 부가되면, R-PDCH 데이터 패킷은, 예를 들어, 단지 스터핑 비트의 드롭에 의해 공칭 변화를 갖는 F-PDCH 순방향 링크상에서 사용될 수 있다.
바로 전에 설명된 기술을 사용하면, 표 3은, n의 각각의 값에 대해 하나씩, 4개의 가능한 데이터 레이트 케이스에 대하여 F-PDCH 및 R-PDCH에 대한 가능한 물리 레이어 데이터 패킷 사이즈, 및 R-PDCH에 부가될 "스터핑 비트" 의 개수를 리스팅한다.
Figure 112006092485154-pct00007
DCCH 플러스 SCH를 사용하는 EBR에 의하면, 비디오 스트림과 같은 멀티미디어 스트림이 슬라이스로 분할되면, 일반적으로 더 작은 슬라이스 사이즈는 에러 복원도를 개선하지만, 압축 효율은 떨어질 수도 있다. 유사하게, 더 큰 슬라이스가 사용되면, 일반적으로 압축 효율에서는 증가가 있지만, 개별 패킷의 손실이 더 많은 데이터의 손실을 야기하기 때문에, 시스템 성능은 손실된 패킷으로 인해 열화할 수도 있다.
유사하게, 비디오 슬라이스와 같은 멀티미디어 데이터를 물리 레이어 패킷의 이용가능한 사이즈에 매칭하는 기술은, 다른 공중 경유 표준에 기초한 시스템에서 수행될 수 있다. 예를 들어, GSM, 또는 GPRS, 또는 EDGE에 기초한 시스템에서, 비디오 슬라이스와 같은 멀티미디어 프레임은 이용가능한 시간슬롯에 매칭하도록 사이징될 수 있다. 상술된 바와 같이, 많은 GSM, GPRS 및 EDGE 디바이스는 다중의 시간슬롯을 수신할 수 있다. 따라서, 이용가능한 시간슬롯의 수에 의존하여, 프레임의 인코딩된 스트림은 비디오 슬라이스가 물리 패킷에 매칭되도록 제약될 수 있다. 즉, 멀티미디어 데이터는 패킷 사이즈가 GSM 시간슬롯과 같은 물리 레이어 패킷의 이용가능한 사이즈에 매칭하도록 인코딩될 수 있고, 사용된 물리 레이어 패킷의 총 데이터 레이트는 멀티미디어 데이터의 데이터 레이트를 지원한다.
EBR 성능 고려사항
나타낸 바와 같이, 멀티미디어 데이터 스트림의 인코더가 EBR 모드에서 동작하는 경우, 그 인코더는 물리 레이어에 매칭되도록 멀티미디어 슬라이스를 생성하며, 따라서, 실제의 VBR 모드와 비교하여 압축 효율에서 손실이 없다. 예를 들어, EBR 기술에 따라 동작하는 비디오 코덱은, 비디오가 송신되는 특정 물리 레이어에 매칭되는 비디오 슬라이스를 생성한다. 또한, 에러 복원도, 더 낮은 레이턴시 (latency), 및 더 낮은 송신물 오버헤드에 관하여 이점이 존재한다. 이들 이점의 세부사항은 아래에서 더 설명된다.
채널 에러에서의 성능
도 10을 참조하여 설명된 바와 같이, 종래의 캡슐화에서 물리 레이어 패킷이 손실되는 경우, 2개 이상의 애플리케이션 레이어는 손실될 수도 있다는 것을 나타낼 수 있다. EBR 기술에서, 무선 링크의 각각의 물리 패킷 손실은 정확히 하나의 애플리케이션 레이어 패킷의 손실을 야기한다.
도 11은 EBR 기술에 따라 애플리케이션 레이어 패킷을 인코딩하는 일 예를 도시한다. 상술된 바와 같이, 애플리케이션 레이어 패킷은 다양한 사이즈일 수도 있다. 표 2 및 3에서 설명된 바와 같이, 물리 레이어 패킷은 또한 다양한 사이즈일 수도 있다, 예를 들어, 물리 레이어는 물리 레이어 데이터 패킷의 상이한 사이즈를 이용하는 채널들로 이루어질 수도 있다. 도 11의 예에서, 도시된 4개의 애플리케이션 패킷 (1102, 1104, 1106 및 1108) 및 4개의 물리 레이어 패킷 (1110, 1112, 1114 및 1116) 이 존재한다. 애플리케이션 레이어 패킷을 물리 레이어 패킷에 매칭하는 3개의 상이한 예가 도시된다. 먼저, 단일 애플리케이션 레이어 패킷은 그것이 다중의 물리 레이어 패킷내에서 송신되도록 인코딩될 수 있다. 도 11에 도시된 예에서, 단일 애플리케이션 레이어 패킷 (1102) 은 2개의 물리 레이어 패킷 (1110 및 1112) 으로 인코딩된다. 예를 들어, DCCH 및 SCH가, 각각, RS1 및 2x RC3로 구성되고 (표 2의 케이스 1), 애플리케이션 데이터 패킷이 60바이트이면, 그 애플리케이션 데이터 패킷은 DCCH 및 SCH 패킷 조합에 대응하는 2개의 물리 레이어 패킷을 통해 송신될 수 있다. 단일 애플리케이션 레이어 패킷이 이용가능한 통신 채널에 대응하는 임의의 수의 물리 레이어 패킷으로 인코딩될 수 있다는 것이 고려된다. 도 11에 도시된 제 2 예는, 단일 애플리케이션 레이어 패킷 (1104) 이 단일 물리 레이어 패킷 (1114) 로 인코딩되는 것이다. 예를 들어, 애플리케이션 레이어 데이터 패킷이 40바이트이면, 그 애플리케이션 레이어 데이터 패킷은 바로 표 2의 케이스 1의 SCH 물리 레이어 데이터 패킷을 사용하여 송신될 수 있다. 양자의 이들 예들에서, 단일 물리 레이어 패킷의 손실은 단일 애플리케이션 레이어 패킷만의 손실을 야기한다.
도 11에 도시된 제 3 예는, 다중의 애플리케이션 레이어 패킷이 단일 물리 레이어 패킷 (1116) 으로 인코딩될 수 있다는 것이다. 도 11에 도시된 예에서, 2개의 애플리케이션 레이어 (1106 및 1108) 는 단일 물리 레이어 패킷으로 인코딩되어 송신된다. 2개 이상의 애플리케이션 레이어 패킷이 단일 물리 레이어 패킷내에서 적합하도록 인코딩될 수도 있다는 것이 고려된다. 이러한 예의 결점은, 단일 물리 레이어 패킷 (1116) 의 손실이 다중의 애플리케이션 레이어 패킷 (1106 및 1108) 의 손실을 야기할 것이라는 것이다. 그러나, 단일 물리 레이어 패킷내에서 송신될 다중의 애플리케이션 레이어 패킷을 인코딩하는 것을 보증하는, 물리 레이어의 완전한 이용과 같은 트레이드 오프가 존재한다.
도 12는 인터넷과 같은 IP/UDP/RTP 네트워크를 통해 VBR 데이터 스트림을 송신하는 코덱의 일 예를 도시한 블록도이다. 도 12에 도시된 바와 같이, 코덱은 페이로드 (1204), 또는 슬라이스 및 슬라이스 헤더 (1206) 를 포함하는 애플리케이션 레이어 데이터 패킷 (1202) 을 생성한다. 애플리케이션 레이어 (1202) 는, IP/UDP/RTP 헤더 정보 (1208) 가 애플리케이션 레이어 데이터 패킷 (1202) 에 첨부되는 네트워크를 통과한다. 그 후, 그 패킷은, RLP 헤더 (1210) 및 MUX 헤더 (1214) 가 그 패킷에 첨부되는 무선 네트워크를 통과한다. IP/UDP/RTP 헤더 (1208), RLP 헤더 (1210), 및 MUX 헤더 (1214) 의 사이즈가 공지되어 있기 때문에, 코덱은 슬라이스 및 모든 관련 헤더가 물리 레이어 데이터 패킷, 또는 페이로드 (1216) 에 적합하도록 슬라이스 (1204) 에 대한 사이즈를 선택한다.
도 13은, 채널 패킷 손실이 1%인 경우, 실제 VBR 송신 채널, DCCH 플러스 SCH를 이용하는 EBR 송신, 및 PDCH를 사용하는, 인코딩된 비디오 시퀀스의 다양한 예에 대해 피크 신호 대 노이즈 비 (PSNR) 에서의 상대적인 드롭을 도시한 바 그래프이다. 도 13에 도시된 비디오 시퀀스는, 당업계에 널리 공지되어 있고, 비디오 압축, 에러 정정 및 송신과 같은 다양한 기술을 평가할 시에 사용을 위해 "공통적인" 비디오 시퀀스를 제공하기 위해 사용되는 표준 비디오 시퀀스이다. 도 13에 도시된 바와 같이, 실제 VBR (1302) 시퀀스는, PDCH (1306) 을 사용하는 EBR 및, 그 후, DCCH 플러스 SCH (1304) 를 사용하는 EBR에 선행되는 가장 큰 PSNR 드롭을 갖는다. 예를 들어, 카폰 시퀀스에서, 실제 VBR (1302) 시퀀스는 PSNR에서 약 1.5dB 드롭을 경험하지만, PDCH (1306) 를 사용하는 EBR, 및 DCCH 플러스 SCH (1304) 를 사용하는 EBR은, 각각, PSNR에서 약 0.8 및 0.4dB의 드롭을 경험한다. 도 13은, 송신 채널이 1% 패킷 손실을 경험하는 경우 PSNR에 의해 측정된 바와 같이 VBR 시퀀스에 대한 왜곡은 EBR 시퀀스에 대한 왜곡보다 더 심하다는 것을 도시한다.
도 13과 유사한 도 14는, 채널 손실이 5%인 경우, 실제 VBR (1402), DCCH 플러스 SCH (1404) 를 사용하는 EBR, 및 PDCH (1406) 를 사용하는 EBR을 사용하는, 표준 인코딩 비디오 시퀀스의 다양한 예들에 대해 피크 신호 대 잡음 비 (PSNR) 에서의 상대적인 드롭을 도시한 바 그래프이다. 도 14에 도시된 바와 같이, 실제 VBR (1402) 시퀀스는, PDCH (1406) 를 사용하는 EBR 및, 그 후, DCCH 플러스 SCH (1404) 를 사용하는 EBR에 선행되는 가장 큰 PSNR 드롭을 갖는다. 예를 들어, 카폰 시퀀스에서, 실제 VBR (1402) 시퀀스는 PSNR에서 약 2.5dB 드롭을 경험하지만, PDCH (1406) 를 사용하는 EBR 및 DCCH 플러스 SCH (1404) 를 사용하는 EBR은, 각각, PSNR에서 약 1.4 및 0.8dB의 드롭을 경험한다. 도 14와 도 13을 비교하는 것은, 통신 채널 패킷 손실이 증가하는 경우 PSNR에 의해 측정된 바와 같이 VBR 시퀀스에 대한 왜곡은 EBR 시퀀스에 대한 왜곡보다 심하다는 것을 도시한다.
도 15는, 채널 패킷 손실이 1%인 경우, 실제 VBR (1502), DCCH 플러스 SCH (1504) 를 사용하는 EBR, 및 PDCH (1506) 를 사용하는 EBR을 사용하여 도 13의 인코딩된 비디오 시퀀스에 대해 수신된 결함있는 매크로블록의 퍼센트를 도시한 바 그래프이다. 도 16은 채널 패킷 손실이 5%인 경우, 실제 VBR (1602), DCCH 플러스 SCH (1604) 를 사용하는 EBR, 및 PDCH (1606) 를 사용하는 EBR을 사용하여 도 14의 인코딩된 비디오 시퀀스에 대해 수신된 결함있는 매크로블록의 퍼센트를 도시한 바 그래프이다. 이들 그래프들의 비교는, 양자의 경우에서, 결함있는 매크로블록의 퍼센트가 EBR 시퀀스에서 보다 VBR 시퀀스에서 더 크다는 것을 나타낸다. EBR에서, 슬라이스가 물리 레이어 패킷 사이즈에 매칭되기 때문에, 슬라이스의 결함있는 퍼센트는 패킷 손실 레이트와 동일해야 한다는 것을 나타낸다. 그러나, 슬라이스가 상이한 수의 매크로블록을 포함할 수 있기 때문에, 하나의 슬라이스에 대응하는 하나의 데이터 패킷의 손실은, 상이한 수의 매크로블록을 포함하는 상이한 슬라이스에 대응하는 상이한 데이터 패킷의 손실보다 상이한 수의 결함있는 매크로블록을 야기할 수 있다.
도 17은, 제목이 "현장 감독 (Foreman)" 인 표준 인코딩된 비디오 시퀀스들 중 하나의 레이트 왜곡을 도시한 그래프이다. 도 17에 도시된 바와 같이, PSNR 대 비트 레이트를 나타내는 4개의 상이한 경우가 도시된다. 먼저의 2개의 경우는 VBR (1702 및 1704) 을 사용하여 인코딩된 비디오 시퀀스를 나타낸다. 다음의 2개의 경우는, 상기 표 2의 케이스 15에 리스팅된 바와 같이, 각각, RS2 및 8x in RC5로서 구성된 DCCH 플러스 SCH를 사용하는 EBR인 EBR15를 사용하여 인코딩된 비디오 시퀀스를 나타낸다. VBR 및 EBR 데이터 스트림은 "잡음없는 (clean)" 채널 (1702 및 1706) 및 "잡음있는" 채널 (1704 및 1708) 을 통해 송신된다. 상술된 바와 같이, 잡음없는 채널에서는 송신동안 패킷 손실이 없으며, 잡음있는 채널은 1%의 데이터 패킷을 손실한다. 도 17에 도시된 바와 같이, 잡음없는 채널 (1702) 을 통해 송신되는 VBR 인코딩된 시퀀스는 모든 비트 레이트에 대해 최고의 PSNR을 갖는다. 그러나, 잡음없는 채널 (1706) 을 통해 송신되는 EBR15 인코딩된 시퀀스는 모든 비트 레이트에 대해 거의 동일한 PSNR 성능 또는 레이트 왜곡을 갖는다. 따라서, 송신 채널이 잡음이 없는 경우, VBR 인코딩과 EBR15 인코딩 사이의 성능에서 매우 작은 드롭이 존재한다. 이러한 예는, 송신동안 패킷 손실이 존재하지 않는 경우, 실제 VBR 인코딩 구성과 거의 동일한 성능을 갖는 EBR 인코딩 구성에서 충분한 입도 (granularity) 가 존재할 수 있다는 것을 도시한다.
VBR 인코딩된 시퀀스가 잡음있는 채널 (1704) 을 통해 송신되는 경우, PSNR은 모든 비트 레이트에 걸쳐 3dB 이상 현저하게 드롭한다. 그러나, EBR15 인코딩된 시퀀스가 동일한 잡음있는 채널 (1708) 을 통해 송신되는 경우, 그의 PSNR 성능이 모든 비트 레이트에 걸쳐 열화하지만, 그의 성능은 단지 약 1dB 드롭한다. 따라서, 잡음있는 채널을 통해 송신하는 경우, EBR15 인코딩된 시퀀스의 PSNR 성능은, 동일한 잡음있는 채널을 통해 송신되는 VBR 인코딩된 시퀀스보다 약 2dB 더 높다. 도 17이 도시하는 바와 같이, 잡음없는 채널에서 EBR15 인코딩의 레이트 왜곡 성능은 VBR 인코딩과 비교가능하며, 채널이 잡음있는 레이트 왜곡으로 되는 경우, EBR15 인코딩의 성능은 VBR 인코딩보다 우수하다.
도 17과 유사한 도 18은, "카폰" 이라 명칭된 또 다른 인코딩된 비디오 시퀀스의 레이트 왜곡 커브 (curve) 를 도시한 그래프이다. 또한, PSNR 대 비트 레이트를 나타내는 4개의 상이한 경우가 도시된다. 먼저의 2개의 경우는 VBR (1802 및 1804) 을 사용하여 인코딩된 비디오 시퀀스를 나타낸다. 다음의 2개의 경우는, 상기 표 2의 케이스 15에 리스팅된 바와 같이, 각각, RS2 및 RC5의 8x로서 구성된 DCCH 플러스 VSCH를 사용하는 EBR인 EBR15를 사용하여 인코딩된 비디오 시퀀스를 나타낸다. VBR 및 EBR 데이터 스트림은 "잡음없는" 채널 (1802 및 1806) 및 "잡음있는" 채널 (1804 및 1808) 을 통해 송신된다. 이러한 예에서, 잡음없는 채널 (1806) 을 통해 송신되는 EBR15 인코딩된 시퀀스의 PSNR 성능은, 잡음없는 채널 (1802) 을 통한 VBR 시퀀스의 성능을 초과한다. 잡음있는 채널 (1808) 을 통한 EBR15 시퀀스의 PSNR 성능은 잡음있는 채널 (1804) 을 통해 송신되는 VBR 시퀀스를 약 1.5dB만큼 초과한다. 이러한 예에서, 잡음없는 채널 및 잡음있는 채널 양자에서 카폰 시퀀스를 사용하는 것은, PSNR에 의해 측정된 바와 같이, VBR 인코딩보다 우수한 성능을 갖는 EBR15 인코딩의 레이트 왜곡 성능을 발생하였다.
레이턴시 고려사항
EBR 인코딩의 사용은 레이턴시 성능을 개선한다. 예를 들어, EBR 비디오 슬라이스를 사용하는 것은 인코더 및 디코더에서 트래픽 세이핑 (shaping) 버퍼없이도 무선 채널을 통해 송신될 수 있다. 실시간 서비스에 있어서, 이것은 전체 사용자 경험이 향상될 수 있는 것과 같이 현저한 이점이다.
비디오 인코딩의 가변 비트레이트 (VBR) 특성으로 인한 버퍼링 딜레이를 도시하기 위해, 도 6에 도시된, 64kbps의 평균 비트 레이트로 인코딩되고 64kbps CBR 채널을 통해 송신되는 통상적인 시퀀스에 대한 송신 계획을 고려하자. 디코더에서 버퍼 언더플로우를 회피하기 위해, 커브 (608) 에 의해 나타낸 디스플레이가 딜레이될 필요가 있다. 이러한 예에서, 딜레이는 10fps의 원하는 디스플레이 레이트에 대해 10프레임 또는 1초이다.
버퍼 언더플로우 제약으로 인한 딜레이 Δb는,
Figure 112006092485154-pct00008
로서 계산될 수 있으며, 여기서, B(i) = 프레임 i에서 바이트 단위의 인코더에서의 버퍼 점유, R(i) = 프레임 i에 대한 바이트 단위의 인코더 출력, C(i) = 프레임 간격 i에서 송신될 수 있는 바이트의 수, f = 초당 프레임의 원하는 수, BW(i) = 프레임 간격 i에서 비트의 이용가능한 대역폭이고, CBR 송신의 특수한 경우에 대해 C(i) = C ∀i 를 나타낸다.
전체의 프레젠테이션 동안 디코더 버퍼 결핍을 회피하기 위해, 플레이아웃은 인코더에서 최대 버퍼 점유를 송신하기 위해 요구되는 시간만큼 딜레이되어야 한다.
Figure 112006092485154-pct00009
상기에서 분자는 전체 세션 지속 기간 I에 대한 평균 데이터 레이트를 나타낸다. CBR 채널 할당에 있어서, 분모는 C이다. EBR 경우에 대해, 소정의 100 ms 지속 기간에 대한 총 채널 대역폭이 프레임 사이즈보다 더 크면, 즉, C(i) ≥ R(i) ∀i∈I 보다 더 크다면, 버퍼링 딜레이는 존재하지 않는다. 그 후, 인코더의 버퍼 점유는, 데이터가 도달하자마자 송신될 수 있기 때문에, 0이다. 즉,
B(i) = R(i) - C(i) = 0
이다.
비디오 프레임은 통상적으로 다중의 MAC 레이어 프레임 K (슬롯) 에 걸쳐있다는 것을 나타낸다. 모든 R(i)가 송신될 수 있도록 K 슬롯에 걸쳐 C(i) 를 변 경하는 것이 가능하다면, 버퍼링으로 인한 딜레이 Δb 는 B(i)와 같이 0이다.
Figure 112006092485154-pct00010
도 19는 64kbps의 평균 레이트로 인코딩된 통상적인 EBR 스트림에 대한 송신 예를 도시한다. 도 19에서, 누적 바이트 대 프레임 수는, 멀티미디어 스트림의 소스 (1902), 송신 (1904) 및 디스플레이 (1906) 에 대해 도시된다. 도 19의 예에서, 버퍼링 딜레이는 0이지만, 인코딩, 디코딩 및 송신으로 인한 딜레이는 여전히 존재한다. 그러나, 통상적으로 이들 딜레이들은 VBR 버퍼링 딜레이와 비교되는 경우 훨씬 더 작다.
도 20은 데이터를 송신하는 방법의 일 실시형태를 도시한 흐름도이다. 흐름은 블록 2002에서 시작한다. 그 후, 흐름은 블록 2004로 진행한다. 블록 2004에서, 이용가능한 통신 채널의 가능한 물리 레이어 패킷 사이즈가 결정된다. 예를 들어, 상기 표 2에 도시된 바와 같이, DCCH 및 SCH 채널이 사용되면, 이들 무선 채널들의 구성은 이용가능한 물리 레이어 패킷 사이즈를 확립할 것이다. 그 후, 흐름은, 예를 들어, 가변 비트 데이터 스트림의 프레임과 같은 정보 유닛이 수신되는 블록 2006으로 진행한다. 가변 비트 레이트 데이터 스트림의 예는 비디오 스트림과 같은 멀티미디어 스트림을 포함한다. 그 후, 흐름은 블록 2008으로 진행한다.
블록 2008에서, 정보 유닛은 슬라이스로 파티셔닝된다. 파티션 또는 슬 라이스는, 그들의 사이즈가 가능한 물리 레이어 패킷 사이즈들 중 하나의 사이즈를 초과하지 않도록 선택된다. 예를 들어, 파티션은, 그 파티션의 각각의 사이즈가 하나 이상의 이용가능한 물리 레이어 패킷의 사이즈보다 더 크지 않도록 사이징될 수 있다. 그 후, 흐름은 파티션이 인코딩되어 물리 레이어 패킷에 할당되는 블록 2010으로 진행한다. 예를 들어, 인코딩 정보는 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈을 장비한 소스 인코더를 포함한다. 그 후, 블록 2012에서, 프레임의 모든 파티션이 인코딩되어 물리 레이어 패킷에 할당되고 있는지의 여부를 판정한다. 그렇지 않다면, 블록 2012에서 네거티브 (negative) 결과를 따라, 흐름은 블록 2010으로 진행하고 다음의 파티션이 인코딩되어 물리 레이어 패킷에 할당된다. 블록 2012를 다시 참조하면, 프레임의 모든 파티션이 인코딩되어 물리 레이어 패킷에 할당되면, 블록 2012에서 긍정적인 결과를 따라, 흐름은 블록 2014로 진행한다.
블록 2014에서, 세션의 말단에서와 같이, 정보의 흐름이 종료되는지의 여부를 판정한다. 정보의 흐름이 종료되지 않았다면, 블록 2014에서 네거티브 결과를 따라, 흐름은 블록 2006으로 진행하고 다음의 정보 유닛이 수신된다. 블록 2014를 다시 참조하면, 정보의 흐름이 세션의 말단과 같이 종료되었다면, 블록 2014에서 긍정적인 결과를 따라, 흐름은 블록 2016으로 진행하고 프로세스는 정지한다.
도 21은 데이터를 송신하는 방법의 또 다른 실시형태를 도시한 흐름도이다. 흐름은 블록 2102에서 시작한다. 그 후, 흐름은 블록 2104로 진행한다. 블록 2104에서, 이용가능한 통신 채널의 가능한 물리 레이어 패킷 사이즈가 결정된다. 예를 들어, 상기 표 2에 나타낸 바와 같이, DCCH 및 SCH 채널이 사용되면, 이들 무선 채널들의 구성은 이용가능한 물리 레이어 패킷 사이즈를 확립할 것이다. 그 후, 흐름은 정보 유닛이 수신되는 블록 2106으로 진행한다. 예를 들어, 정보 유닛은 멀티미디어 스트림 또는 비디오 스트림와 같은 가변 비트 레이트 데이터일 수도 있다. 그 후, 흐름은 블록 2108으로 진행한다.
블록 2108에서, 통신 채널들의 구성을 재구성하는 것이 바람직하는지의 여부를 판정한다. V-SCH 채널과 같이 세션동안 재구성될 수 있는 통신 채널이 사용되고 있으면, 세션동안 채널 구성을 변경하는 것이 바람직할 수도 있다. 예를 들어, 데이터의 프레임이 통신 채널의 현재 구성을 통해 송신될 수 있는 것보다 더 많은 데이터를 가지면, 그 통신 채널이 더 많은 데이터를 지원할 수 있도록 더 높은 대역폭으로 구성을 변경하는 것이 바람직할 수도 있다. 블록 2108에서, 통신 채널을 재구성하는 것을 원하지 않는다고 결정되면, 블록 2108에서 네거티브 결과를 따라, 흐름은 블록 2110으로 진행한다. 블록 2110에서, 정보 유닛은 그들의 사이즈가 가능한 물리 레이어 패킷 사이즈들 중 하나의 사이즈를 초과하지 않도록 하는 사이즈들로 파티셔닝된다. 블록 2108을 다시 참조하면, 통신 채널을 재구성하는 것을 원한다고 판정되면, 블록 2108에서 긍정적인 결과를 따라, 흐름은 블록 2112로 진행한다. 블록 2112에서, 원하는 물리 레이어 패킷 사이즈가 결정된다. 예를 들어, 수신된 정보 유닛이 분석될 수도 있고, 전체 유닛을 송신하기에 필요한 데이터 패킷의 사이즈가 결정될 수도 있다. 그 후, 흐름은 블록 2114로 진행한다. 블록 2114에서, 원하는 통신 채널 구성이 결정된다. 예를 들어, 이용가능한 통신 채널의 상이한 구성의 다양한 물리 레이어 패킷 사이즈가 결정될 수 있고, 정보 유닛을 수용하기에 충분하게 큰 물리 레이어 패킷을 갖는 구성이 선택될 수도 있다. 그 후, 통신 채널은 그에 따라 재구성된다. 그 후, 흐름은, 정보 유닛이 그들의 사이즈가 재구성된 통신 채널의 가능한 물리 레이어 패킷 사이즈들 중 하나의 사이즈에 매칭하기 위한 사이즈로 파티셔닝되는 블록 2110으로 진행한다. 그 후, 흐름은 블록 2116으로 진행한다. 블록 2116에서, 파티션은 인코딩되어 물리 레이어 데이터 패킷에 할당된다. 예를 들어, 인코딩 정보는 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈을 장비한 소스 인코더를 포함할 수 있다. 그 후, 흐름은 블록 2118로 진행한다.
블록 2118에서, 정보 유닛의 모든 파티션이 인코딩되어 물리 레이어 패킷에 할당되었는지의 여부를 판정한다. 그렇지 않다면, 블록 2118에서 네거티브 결과를 따라, 흐름은 블록 2110으로 진행하고 다음의 파티션이 인코딩되어 물리 레이어 패킷에 할당된다. 블록 2118을 다시 참조하면, 정보 유닛의 모든 파티션이 인코딩되어 물리 레이어 패킷에 할당되었다면, 블록 2118에서 긍정적인 결과에 따라, 흐름은 블록 2120으로 진행한다.
블록 2120에서, 세션의 말단에서와 같이, 정보의 흐름이 종료되는지의 여부를 판정한다. 정보의 흐름이 종료되지 않았다면, 블록 2120에서 네거티브 결과를 따라, 흐름은 블록 2106으로 진행하고 다음의 정보 유닛이 수신된다. 블록 2120을 다시 참조하면, 정보의 흐름이 종료되었다면, 블록 2120에서 긍정적인 결과 를 따라, 흐름은 블록 2122로 진행하고 프로세스는 정지한다.
도 22는, 본 발명의 예시적인 실시형태에 따라 구성된 무선 통신 디바이스 또는 이동국 (MS) 의 블록도이다. 통신 디바이스 (2202) 는, 네트워크 인터페이스 (2206), 코덱 (2208), 호스트 프로세서 (2210), 메모리 디바이스 (2212), 프로그램 제품 (2214), 및 사용자 인터페이스 (2216) 를 포함한다.
인프라구조로부터의 신호는 네트워크 인터페이스 (2206) 에 의해 수신되어 호스트 프로세서 (2210) 에 전송된다. 호스트 프로세서 (2210) 는 신호를 수신하고, 신호의 콘텐츠에 의존하여 적절한 액션 (action) 으로 응답한다. 예를 들어, 호스트 프로세서 (2210) 는 수신 신호 자체를 디코딩할 수도 있거나, 디코딩을 위해 코덱 (2208) 으로 그 수신 신호를 라우팅할 수도 있다. 또 다른 실시형태에서, 수신 신호는 네트워크 인터페이스 (2206) 로부터 코덱 (2208) 으로 직접 전송된다.
일 실시형태에서, 네트워크 인터페이스 (2206) 는, 무선 채널을 통해 인프라구조에 인터페이스하는 트랜시버 및 안테나일 수도 있다. 또 다른 실시형태에서, 네트워크 인터페이스 (2206) 는 지상선을 통해 인프라구조에 인터페이스하기 위해 사용되는 네트워크 인터페이스 카드일 수도 있다. 코덱 (2208) 은, 중앙 프로세싱 유닛 (CPU) 과 같은 디지털 신호 프로세서 (DSP), 또는 범용 프로세서로서 구현될 수도 있다.
호스트 프로세서 (2210) 및 코덱 (2208) 양자는 메모리 디바이스 (2212) 에 접속된다. 메모리 디바이스 (2212) 는, WCD의 동작 동안, 데이터를 저장할뿐만 아니라, 호스트 프로세서 (2210) 또는 코덱 (2208) 에 의해 실행될 프로그램 코드를 저장하기 위해 사용될 수도 있다. 예를 들어, 호스트 프로세서, 코덱, 또는 양자는, 메모리 디바이스 (2212) 에 임시적으로 저장된 프로그래밍 명령의 제어하에서 동작할 수도 있다. 또한, 호스트 프로세서 (2210) 및 코덱 (2208) 은 그들 자신의 프로그램 저장 메모리를 포함할 수 있다. 프로그래밍 명령이 실행되는 경우, 호스트 프로세서 (2210) 또는 코덱 (2208), 또는 양자는, 예를 들어, 멀티미디어 스트림을 디코딩 또는 인코딩하는 것과 같은 그들의 기능을 수행한다. 따라서, 프로그래밍 단계는 각각의 호스트 프로세서 (2210) 및 코덱 (2208) 의 기능을 구현하므로, 호스트 프로세서 및 코덱은, 각각, 원하는 바대로 콘텐츠 스트림을 디코딩 또는 인코딩하는 기능을 수행하게 할 수 있다. 프로그래밍 단계는 프로그램 제품 (2214) 으로부터 수신될 수도 있다. 프로그램 제품 (2214) 은, 호스트 프로세서, 코덱, 또는 양자에 의한 실행을 위해, 프로그램 단계를 메모리 (2212) 에 저장 및 전송할 수도 있다.
프로그램 제품 (2214) 은, RAM 메모리, 플래쉬 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터뿐만 아니라, 하드 디스크, 착탈형 디스크, CD-ROM, 또는 컴퓨터 판독가능 명령을 저장할 수도 있는 당업계에 알려진 임의의 다른 형태의 저장 매체와 같은 다른 저장매체와 같은 반도체 메모리 칩일 수도 있다. 또한, 프로그램 제품 (2214) 은, 네트워크로부터 수신되고 메모리내에 저장되며 그 후 실행되는 프로그램 단계를 포함하는 소스 파일일 수도 있다. 이러한 방식에서, 본 발명에 따른 동작을 위해 필요한 프로세싱 단계는, 프로그램 제품 (2214) 상에 수록될 수도 있다. 도 22에서, 호스트 프로세서가 그 저장 매체로부터 정보를 판독할 수도 있고, 그 저장 매체로부터 정보를 기입할 수도 있도록 호스트 프로세서 (2210) 에 커플링되는 예시적인 저장 매체가 도시된다. 또 다른 방법으로, 저장 매체는 호스트 프로세서 (2210) 와 일체형일 수도 있다.
사용자 인터페이스 (2216) 는 호스트 프로세서 (2210) 및 코덱 (2208) 양자에 접속된다. 예를 들어, 사용자 인터페이스 (2216) 는 사용자에게 멀티미디어 데이터를 출력하기 위해 사용되는 디스플레이 및 스피커를 포함할 수도 있다.
당업자는 실시형태와 관련하여 설명된 방법의 단계가 본 발명의 범위를 벗어나지 않고 상호교체될 수도 있다는 것을 알 수 있다.
또한, 당업자는 임의의 다양한 서로 다른 기술 및 기법을 이용하여 정보 및 신호를 표현할 수도 있음을 알 수 있다. 예를 들어, 상기의 설명 전반에 걸쳐 참조될 수도 있는 데이터, 명령, 커맨드 (commands), 정보, 신호, 비트, 심볼, 및 칩은 전압, 전류, 전자기파, 자계 또는 자성 입자, 광계 또는 광자, 또는 이들의 임의의 결합으로 나타낼 수도 있다.
또한, 당업자는 여기에서 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 회로들, 및 알고리즘 단계들을 전자 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 결합으로 구현할 수도 있음을 알 수 있다. 하드웨어와 소프트웨어의 이러한 대체 가능성을 분명히 설명하기 위하여, 다양한 예시적인 컴포넌트들, 블록들, 모듈들, 회로들 및 단계들을 주로 그들의 기능의 관점에서 상술하였다. 그러한 기능이 하드웨어로 구현될지 소프트웨어로 구현될지는 전체 시스템에 부과된 특정한 애플리케이션 및 설계 제약조건들에 의존한다. 당업자는 설명된 기능을 각각의 특정한 애플리케이션에 대하여 다양한 방식으로 구현할 수도 있지만, 그러한 구현의 결정이 본 발명의 범주를 벗어나도록 하는 것으로 해석하지는 않아야 한다.
여기에서 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 회로들은 범용 프로세서, 디지털 신호 프로세서 (DSP), 주문형 집적회로 (ASIC), 필드 프로그래머블 게이트 어레이 (FPGA), 또는 기타 프로그래머블 로직 디바이스, 별도의 게이트 또는 트랜지스터 로직, 별도의 하드웨어 컴포넌트들, 또는 여기서 설명된 기능을 수행하도록 설계되는 이들의 임의의 결합으로 구현 또는 수행될 수도 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 다른 방법으로, 그 프로세서는 임의의 종래 프로세서, 제어기, 마이크로 제어기, 또는 상태 기계일 수도 있다. 또한, 프로세서는 컴퓨팅 디바이스들의 결합, 예를 들어, DSP 와 마이크로프로세서의 결합, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들 또는 임의의 기타 다른 구성물로 구현될 수도 있다.
여기에 개시된 실시형태들과 관련하여 설명된 방법 또는 알고리즘의 단계는 프로세서에 의해 실행되는 하드웨어, 소프트웨어 모듈, 또는 그 2 개의 결합으로 직접 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM, 또는 당업계에 알려진 임의의 다른 형태의 저장 매체에 상주할 수도 있다. 예시적인 저장 매체는 프로세서에 커플링되며, 그 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 다른 방법으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 ASIC 내에 상주할 수도 있다. ASIC는 사용자 단말기 내에 상주할 수도 있다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.
개시되어 있는 실시형태들에 대한 상기의 설명은 당업자로 하여금 본 발명을 제조 또는 이용할 수 있도록 제공된다. 당업자는 이들 실시형태에 대한 다양한 변형들을 명백히 알 수 있으며, 여기에서 정의된 일반적인 원리들은 본 발명의 사상 또는 범위를 벗어나지 않고도 다른 실시형태들에 적용될 수도 있다. 따라서, 본 발명은 여기에서 설명된 실시형태들에 제한되는 것이 아니라, 여기에서 개시된 원리 및 신규한 특징들과 부합하는 최광의 범위를 부여하려는 것이다.

Claims (71)

  1. 무선 통신 시스템에서 정보를 송신하는 방법으로서,
    복수의 이용가능한 일정 비트 레이트 통신 채널의 이용가능한 물리 레이어 패킷 사이즈들을 결정하는 단계; 및
    각각의 파티션의 사이즈가 상기 복수의 이용가능한 일정 비트 레이트 통신 채널에 의해 제공되는 상기 결정된 물리 레이어 패킷 사이즈들 중 하나에 매칭되게 파티션이 사이징되도록, 정보 유닛을 파티셔닝하는 것에 대한 제약을 확립하는 단계를 포함하는, 정보 송신 방법.
  2. 제 1 항에 있어서,
    정보의 파티셔닝은, 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈을 장비한 소스 인코더를 포함하는, 정보 송신 방법.
  3. 제 1 항에 있어서,
    상기 정보 유닛은 가변 비트 레이트 데이터 스트림을 포함하는, 정보 송신 방법.
  4. 제 1 항에 있어서,
    상기 정보 유닛은 멀티미디어 데이터를 포함하는, 정보 송신 방법.
  5. 제 1 항에 있어서,
    상기 정보 유닛은 비디오 데이터를 포함하는, 정보 송신 방법.
  6. 제 1 항에 있어서,
    상기 정보 유닛은 오디오 데이터를 포함하는, 정보 송신 방법.
  7. 제 1 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 CDMA 채널인, 정보 송신 방법.
  8. 제 7 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 보조 채널을 포함하는, 정보 송신 방법.
  9. 제 7 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 전용 제어 채널을 포함하는, 정보 송신 방법.
  10. 제 7 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 패킷 데이터 채널을 포함하는, 정보 송신 방법.
  11. 제 1 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GSM 채널인, 정보 송신 방법.
  12. 제 1 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 EDGE 채널인, 정보 송신 방법.
  13. 제 1 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GPRS 채널인, 정보 송신 방법.
  14. 제 1 항에 있어서,
    상기 제약은 상기 정보 유닛의 인코딩 동안 사용되는, 정보 송신 방법.
  15. 제 1 항에 있어서,
    상기 정보 유닛은 일정한 간격으로 발생하는, 정보 송신 방법.
  16. 무선 통신 시스템에서 정보를 송신하는 방법으로서,
    복수의 이용가능한 일정 비트 레이트 통신 채널에 대해 이용가능한 물리 레이어 패킷 사이즈들을 결정하는 단계; 및
    정보 유닛을 데이터 패킷으로 인코딩하는 단계를 포함하며,
    개별 데이터 패킷 사이즈는 상기 이용가능한 일정 비트 레이트 통신 채널의 상기 결정된 물리 레이어 패킷 사이즈들 중 하나에 매칭하도록 선택되는, 정보 송신 방법.
  17. 제 16 항에 있어서,
    정보를 인코딩하는 단계는, 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈을 장비한 소스 인코더를 포함하는, 정보 송신 방법.
  18. 제 16 항에 있어서,
    상기 정보 유닛은 멀티미디어 스트림을 포함하는, 정보 송신 방법.
  19. 제 16 항에 있어서,
    상기 정보 유닛은 비디오 데이터를 포함하는, 정보 송신 방법.
  20. 제 16 항에 있어서,
    상기 정보 유닛은 오디오 데이터를 포함하는, 정보 송신 방법.
  21. 제 16 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 CDMA 채널인, 정보 송신 방법.
  22. 제 21 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 보조 채널은 포함하는, 정보 송신 방법.
  23. 제 21 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 전용 제어 채널을 포함하는, 정보 송신 방법.
  24. 제 21 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 패킷 데이터 채널을 포함하는, 정보 송신 방법.
  25. 제 16 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GSM 채널인, 정보 송신 방법.
  26. 제 16 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 EDGE 채널인, 정보 송신 방법.
  27. 제 16 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GPRS 채널인, 정보 송신 방법.
  28. 제 16 항에 있어서,
    상기 정보 유닛은 일정 간격으로 발생하는, 정보 송신 방법.
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 복수의 이용가능한 일정 비트 레이트 통신 채널로부터 물리 레이어 패킷 사이즈들의 세트를 결정하도록 구성되는 제어기; 및
    정보 유닛을 데이터 패킷으로 파티셔닝하도록 구성되는 인코더를 포함하며,
    개별 데이터 패킷 사이즈는 상기 이용가능한 일정 비트 레이트 통신 채널의 상기 결정된 물리 레이어 패킷 사이즈들 중 하나에 매칭하도록 선택되는, 무선 통신 디바이스.
  40. 제 39 항에 있어서,
    상기 인코더는 가변 사이즈의 파티션을 생성할 수 있는 레이트 제어 모듈을 더 포함하는, 무선 통신 디바이스.
  41. 제 39 항에 있어서,
    상기 물리 레이어 패킷을 송신하도록 구성되는 송신기를 더 포함하는, 무선 통신 디바이스.
  42. 제 39 항에 있어서,
    상기 정보 유닛은 가변 비트 레이트 스트림을 포함하는, 무선 통신 디바이스.
  43. 제 39 항에 있어서,
    상기 정보 유닛은 멀티미디어 데이터를 포함하는, 무선 통신 디바이스.
  44. 제 39 항에 있어서,
    상기 정보 유닛은 비디오 데이터를 포함하는, 무선 통신 디바이스.
  45. 제 39 항에 있어서,
    상기 복수의 일정 비트 레이트 통신 채널은 CDMA 채널인, 무선 통신 디바이스.
  46. 제 39 항에 있어서,
    상기 복수의 일정 비트 레이트 통신 채널은 GSM 채널인, 무선 통신 디바이스.
  47. 제 39 항에 있어서,
    상기 복수의 일정 비트 레이트 통신 채널은 GPRS 채널인, 무선 통신 디바이스.
  48. 제 39 항에 있어서,
    상기 복수의 일정 비트 레이트 통신 채널은 EDGE 채널인, 무선 통신 디바이스.
  49. 무선 통신 시스템의 인코더로서,
    정보 유닛을 수용하고 상기 정보 유닛을 데이터 패킷으로 파티셔닝하도록 구성되며,
    상기 데이터 패킷은 이용가능한 일정 비트 레이트 통신 채널의 상기 결정된 물리 레이어 패킷 사이즈들 중 하나에 매칭하도록 사이징되는, 인코더.
  50. 제 49 항에 있어서,
    상기 정보 유닛은 일정 레이트로 발생하는, 인코더.
  51. 제 49 항에 있어서,
    상기 정보 유닛은 가변 레이트 데이터 스트림을 포함하는, 인코더.
  52. 제 49 항에 있어서,
    상기 정보 유닛은 멀티미디어 데이터를 포함하는, 인코더.
  53. 제 49 항에 있어서,
    상기 정보 유닛은 비디오 데이터를 포함하는, 인코더.
  54. 제 49 항에 있어서,
    상기 정보 유닛은 오디오 데이터를 포함하는, 인코더.
  55. 제 49 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 CDMA 채널인, 인코더.
  56. 제 49 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GSM 채널인, 인코더.
  57. 제 49 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 GPRS 채널인, 인코더.
  58. 제 49 항에 있어서,
    상기 일정 비트 레이트 통신 채널은 EDGE 채널인, 인코더.
  59. 제 49 항에 있어서,
    상기 인코더는, 패킷의 총량이 미리-선택된 최대 비트 수에 제한되도록 제약되는, 인코더.
  60. 삭제
  61. 삭제
  62. 삭제
  63. 삭제
  64. 삭제
  65. 삭제
  66. 삭제
  67. 삭제
  68. 삭제
  69. 삭제
  70. 데이터를 인코딩하는 방법을 수록한 컴퓨터 판독가능 매체로서,
    상기 방법은,
    정보 유닛을 파티셔닝함으로써, 복수의 데이터 패킷을 생성하는 단계를 포함하며,
    각각의 데이터 패킷은 각각의 데이터 패킷 사이즈가 이용가능한 일정 비트 레이트 통신 채널에 대응하는 상기 결정된 물리 레이어 패킷 사이즈들 중 하나에 매칭하도록 사이징되는, 컴퓨터 판독가능 매체.
  71. 삭제
KR1020067026266A 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달 KR101049701B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US57167304P 2004-05-13 2004-05-13
US60/571,673 2004-05-13
PCT/US2005/016837 WO2005114943A2 (en) 2004-05-13 2005-05-13 Delivery of information over a communication channel

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020097004108A Division KR101068055B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달

Publications (2)

Publication Number Publication Date
KR20070014200A KR20070014200A (ko) 2007-01-31
KR101049701B1 true KR101049701B1 (ko) 2011-07-15

Family

ID=34969576

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020067026266A KR101049701B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달
KR1020087021553A KR100918596B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026252A KR100870215B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템을 통해 송신된 멀티미디어 데이터의 헤더압축
KR1020067026267A KR100871305B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026204A KR100906586B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화
KR1020097004108A KR101068055B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달

Family Applications After (5)

Application Number Title Priority Date Filing Date
KR1020087021553A KR100918596B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026252A KR100870215B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템을 통해 송신된 멀티미디어 데이터의 헤더압축
KR1020067026267A KR100871305B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026204A KR100906586B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화
KR1020097004108A KR101068055B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달

Country Status (14)

Country Link
US (6) US8855059B2 (ko)
EP (9) EP1751956B1 (ko)
JP (5) JP4554680B2 (ko)
KR (6) KR101049701B1 (ko)
CN (5) CN1977516B (ko)
AT (4) ATE484157T1 (ko)
BR (4) BRPI0510961A (ko)
CA (6) CA2565977C (ko)
DE (4) DE602005011611D1 (ko)
ES (4) ES2323011T3 (ko)
MX (4) MXPA06013210A (ko)
MY (3) MY142161A (ko)
TW (4) TWI353759B (ko)
WO (4) WO2005115009A1 (ko)

Families Citing this family (196)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7136395B2 (en) * 2000-11-30 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Method and system for transmission of headerless data packets over a wireless link
ATE484157T1 (de) * 2004-05-13 2010-10-15 Qualcomm Inc Synchronisierung von audio und video daten in einem drahtlosen nachrichtenübertragungssystem
US7599371B1 (en) * 2004-06-09 2009-10-06 Cisco Technology, Inc. System and method for optimizing data transport in a communications system
FI20040817A0 (fi) * 2004-06-14 2004-06-14 Nokia Corp Pakkausparametrien siirto matkaviestinjärjestelmässä
US7664057B1 (en) * 2004-07-13 2010-02-16 Cisco Technology, Inc. Audio-to-video synchronization system and method for packet-based network video conferencing
US20060062312A1 (en) * 2004-09-22 2006-03-23 Yen-Chi Lee Video demultiplexer and decoder with efficient data recovery
US7804850B2 (en) * 2004-10-01 2010-09-28 Nokia Corporation Slow MAC-e for autonomous transmission in high speed uplink packet access (HSUPA) along with service specific transmission time control
US8281356B2 (en) * 2004-11-17 2012-10-02 Sharp Kabushiki Kaisha Transmitter
US7675872B2 (en) * 2004-11-30 2010-03-09 Broadcom Corporation System, method, and apparatus for displaying pictures
CN101073237B (zh) * 2004-11-30 2012-02-01 艾利森电话股份有限公司 用于传送多媒体文件的方法
US7970345B2 (en) * 2005-06-22 2011-06-28 Atc Technologies, Llc Systems and methods of waveform and/or information splitting for wireless transmission of information to one or more radioterminals over a plurality of transmission paths and/or system elements
US7764713B2 (en) * 2005-09-28 2010-07-27 Avaya Inc. Synchronization watermarking in multimedia streams
US8102878B2 (en) * 2005-09-29 2012-01-24 Qualcomm Incorporated Video packet shaping for video telephony
US9692537B2 (en) * 2005-10-18 2017-06-27 Avago Technologies General Ip (Singapore) Pte. Ltd. System, method, and apparatus for jitter reduction in a video decoder system
US8842555B2 (en) * 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
US8994879B2 (en) * 2005-10-21 2015-03-31 Thomson Licensing Method and apparatus for audio and video synchronization timestamp rollover correction
US8548048B2 (en) * 2005-10-27 2013-10-01 Qualcomm Incorporated Video source rate control for video telephony
US8406309B2 (en) 2005-10-21 2013-03-26 Qualcomm Incorporated Video rate adaptation to reverse link conditions
US8514711B2 (en) * 2005-10-21 2013-08-20 Qualcomm Incorporated Reverse link lower layer assisted video error control
US7839948B2 (en) * 2005-12-02 2010-11-23 Qualcomm Incorporated Time slicing techniques for variable data rate encoding
JP4747816B2 (ja) * 2005-12-05 2011-08-17 日本電気株式会社 パケット相乗り方法、プログラム及び装置
US8014389B2 (en) * 2005-12-06 2011-09-06 Lippershy Celestial Llc Bidding network
RU2420909C2 (ru) * 2005-12-23 2011-06-10 Конинклейке Филипс Электроникс Н.В. Разделение потока данных
US20070169152A1 (en) * 2005-12-30 2007-07-19 Daniel Roodnick Data and wireless frame alignment for error reduction
US8953596B2 (en) * 2006-01-06 2015-02-10 Qualcomm Incorporated Conserving network capacity by releasing QoS resources
US8284713B2 (en) * 2006-02-10 2012-10-09 Cisco Technology, Inc. Wireless audio systems and related methods
KR100754736B1 (ko) * 2006-02-10 2007-09-03 삼성전자주식회사 영상 수신 시스템에서 영상 프레임의 재생 방법 및 그 장치
KR100728038B1 (ko) * 2006-03-03 2007-06-14 삼성전자주식회사 Plc 네트워크상에서 데이터를 묶어서 전송하는 방법 및장치
US7876695B2 (en) * 2006-03-07 2011-01-25 Telefonaktiebolaget Lm Ericsson (Publ) Communication station and method providing flexible compression of data packets
JP4659657B2 (ja) * 2006-03-28 2011-03-30 富士通株式会社 フレーム多重装置
WO2007114633A2 (en) * 2006-04-03 2007-10-11 Lg Electronics Inc. Method of performing scheduling in a wired or wireless communication system and network scheduler thereof
US7684816B2 (en) * 2006-04-06 2010-03-23 Motorola, Inc. Method and apparatus to facilitate communication resource allocation for supergroups
EP2022210A1 (en) * 2006-05-15 2009-02-11 Telefonaktiebolaget L.M. Ericsson Wireless multicast for layered media
CN1983905B (zh) * 2006-05-25 2011-05-11 华为技术有限公司 终端在1x网络下建立HRPD网络分组数据业务的方法
US7920469B2 (en) * 2006-06-15 2011-04-05 Alcatel-Lucent Usa Inc. Indicating a variable control channel structure for transmissions in a cellular system
US20070299983A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Apparatus for synchronizing multicast audio and video
US20070297454A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Systems and methods for multicasting audio
US7584495B2 (en) * 2006-06-30 2009-09-01 Nokia Corporation Redundant stream alignment in IP datacasting over DVB-H
US20080025249A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated 1xEVDO WIRELESS INTERFACE TO ENABLE COMMUNICATIONS VIA A SATELLITE RELAY
US20080025312A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated Zero-header compression for improved communications
US8060651B2 (en) * 2006-08-17 2011-11-15 Sharp Laboratories Of America, Inc. Systems and methods for adaptively packetizing data partitions for transport over a network
US8644314B2 (en) * 2006-09-07 2014-02-04 Kyocera Corporation Protocol and method of VIA field compression in session initiation protocol signaling for 3G wireless networks
US8379733B2 (en) * 2006-09-26 2013-02-19 Qualcomm Incorporated Efficient video packetization methods for packet-switched video telephony applications
US8069412B2 (en) * 2006-10-17 2011-11-29 At&T Intellectual Property I, L.P. Methods, systems, and products for mapping facilities data
US8484059B2 (en) 2006-10-17 2013-07-09 At&T Intellectual Property I, L.P. Methods, systems, and products for surveying facilities
US20080101476A1 (en) * 2006-11-01 2008-05-01 Qualcomm Incorporated Video coding rate adaptation to reduce packetization overhead
CN101179484A (zh) * 2006-11-09 2008-05-14 华为技术有限公司 一种不同媒体流间的同步方法及系统
CN100450163C (zh) * 2006-11-30 2009-01-07 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法
US7889191B2 (en) * 2006-12-01 2011-02-15 Semiconductor Components Industries, Llc Method and apparatus for providing a synchronized video presentation without video tearing
US7953118B2 (en) * 2006-12-08 2011-05-31 Microsoft Corporation Synchronizing media streams across multiple devices
TWI360980B (en) 2006-12-19 2012-03-21 Innovative Sonic Ltd Method of enhancing continuous packet connectivity
KR100946893B1 (ko) * 2007-01-03 2010-03-09 삼성전자주식회사 이동 통신 시스템에서 순방향 패킷 스케줄링 방법 및 그장치
WO2008086243A1 (en) 2007-01-04 2008-07-17 Qualcomm Incorporated Method and apparatus for distributed spectrum sensing for wireless communication
KR101370478B1 (ko) * 2007-01-10 2014-03-06 퀄컴 인코포레이티드 멀티미디어 전화 통신을 위한 컨텐트- 및 링크-의존 코딩 적응 구조
KR101369838B1 (ko) * 2007-04-20 2014-03-06 삼성전자주식회사 전송 스트림 생성장치, 송신 장치, 수신 장치, 이들이포함된 디지털 방송 시스템 및 그 방법
KR100861594B1 (ko) * 2007-04-23 2008-10-07 주식회사 케이티프리텔 멀티미디어 데이터 전송률 제어 장치 및 그 방법
US8667318B2 (en) * 2007-05-14 2014-03-04 Picongen Wireless, Inc. Method and apparatus for wireless clock regeneration
US8873453B2 (en) 2007-05-14 2014-10-28 Sigma Group, Inc. Method and apparatus for wireless transmission of high data rate streams
CN100574283C (zh) * 2007-06-12 2009-12-23 华为技术有限公司 上、下行传输方法及汇聚节点
EP2023521A1 (en) * 2007-07-17 2009-02-11 Alcatel Lucent System and method for improving the use of radio spectrum in transmission of data
CN101094406B (zh) * 2007-07-23 2010-09-29 北京中星微电子有限公司 一种视频数据流的传输方法及装置
GB0715281D0 (en) * 2007-08-07 2007-09-12 Nokia Siemens Networks Oy Reduced transmission time interval
US7826360B1 (en) 2007-08-27 2010-11-02 Marvell International Ltd. Adjusting transmission rates during packet expansion using in band signaling
JP4410277B2 (ja) * 2007-08-28 2010-02-03 富士通株式会社 半導体装置、および半導体装置の制御方法
KR100916469B1 (ko) 2007-08-29 2009-09-08 엘지이노텍 주식회사 미디어 장치 및 그 제어방법
US9521186B2 (en) * 2007-09-13 2016-12-13 International Business Machines Corporation Method and system for file transfer over a messaging infrastructure
US20100329161A1 (en) * 2007-10-02 2010-12-30 Nokia Corporation IP MTU Control Based on Multiradio Schedule
CN101816206B (zh) * 2007-10-04 2014-10-08 Lm爱立信电话有限公司 针对服务gprs支持节点使用电路交换承载的系统间切换
KR100918961B1 (ko) 2007-10-09 2009-09-25 강릉원주대학교산학협력단 무선 통신망에서 동적 영역 압축 및 ncb 결정방법
KR101422012B1 (ko) * 2007-10-19 2014-07-23 엘지전자 주식회사 제어채널 생성 방법, 제어채널 복호화 방법, 이를 구현하는기지국 및 단말
US8797850B2 (en) * 2008-01-10 2014-08-05 Qualcomm Incorporated System and method to adapt to network congestion
US9705935B2 (en) * 2008-01-14 2017-07-11 Qualcomm Incorporated Efficient interworking between circuit-switched and packet-switched multimedia services
US20090185534A1 (en) * 2008-01-18 2009-07-23 Futurewei Technologies, Inc. Method and Apparatus for Transmitting a Packet Header
US9357233B2 (en) * 2008-02-26 2016-05-31 Qualcomm Incorporated Video decoder error handling
JP5115802B2 (ja) * 2008-03-11 2013-01-09 富士通株式会社 スケジューリング装置、スケジューリング方法、およびプログラム
CN101257366B (zh) * 2008-03-27 2010-09-22 华为技术有限公司 编解码方法、通讯系统及设备
US20090268732A1 (en) * 2008-04-29 2009-10-29 Thomson Licencing Channel change tracking metric in multicast groups
MX2010012117A (es) * 2008-05-07 2010-12-01 Digital Fountain Inc Manipulacion de canal rapida y proteccion de corriente de alta calidad sobre un canal de difusion.
WO2009150578A2 (en) * 2008-06-11 2009-12-17 Koninklijke Philips Electronics N.V. Synchronization of media stream components
US20100003928A1 (en) * 2008-07-01 2010-01-07 Motorola, Inc. Method and apparatus for header compression for cdma evdo systems
US20100027524A1 (en) * 2008-07-31 2010-02-04 Nokia Corporation Radio layer emulation of real time protocol sequence number and timestamp
JP2010081212A (ja) * 2008-09-25 2010-04-08 Mitsubishi Electric Corp 音声伝送装置
US8966543B2 (en) * 2008-09-29 2015-02-24 Nokia Corporation Method and system to enable adaptation between physical bearers and OMA-BCAST
JP5135147B2 (ja) * 2008-09-29 2013-01-30 富士フイルム株式会社 動画ファイル送信サーバおよびその動作制御方法
JP5363588B2 (ja) * 2008-12-08 2013-12-11 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 受信オーディオデータをビデオデータと同期させるための装置及び方法
US8204038B2 (en) * 2009-01-13 2012-06-19 Mediatek Inc. Method for efficient utilization of radio resources in wireless communications system
JP4650573B2 (ja) 2009-01-22 2011-03-16 ソニー株式会社 通信装置、通信システム、プログラム、および通信方法
US8560718B2 (en) 2009-03-03 2013-10-15 Ronald R. Davenport, JR. Wired Internet network system for the Internet video streams of radio stations
US8902995B2 (en) * 2009-07-02 2014-12-02 Qualcomm Incorporated Transmitter quieting and reduced rate encoding
US9112618B2 (en) * 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
US8958475B2 (en) * 2009-07-02 2015-02-17 Qualcomm Incorporated Transmitter quieting and null data encoding
KR101669533B1 (ko) * 2009-07-06 2016-10-26 삼성전자주식회사 무선통신 시스템에서 매체 접속 제어 계층 패킷을 구성하는 방법 및 시스템
US9218349B2 (en) 2009-07-27 2015-12-22 International Business Machines Corporation Method and system for transformation of logical data objects for storage
CN101998508B (zh) * 2009-08-14 2013-08-28 华为技术有限公司 数据封装方法及装置
WO2011027936A1 (ko) * 2009-09-03 2011-03-10 에스케이 텔레콤주식회사 근거리 무선통신 기반 프로토콜의 상위에 탑재되는 전송계층의 헤더정보를 압축 및 해제하기 위한 시스템 및 방법, 그리고 이에 적용되는 장치
EP2302845B1 (en) 2009-09-23 2012-06-20 Google, Inc. Method and device for determining a jitter buffer level
KR101757771B1 (ko) * 2009-12-01 2017-07-17 삼성전자주식회사 상호 계층 최적화를 이용한 멀티미디어 데이터 패킷을 송신하는 방법 및 장치
US8780720B2 (en) 2010-01-11 2014-07-15 Venturi Ip Llc Radio access network load and condition aware traffic shaping control
US20110182257A1 (en) * 2010-01-26 2011-07-28 Qualcomm Incorporated White space spectrum commmunciation device with multiplexing capabilties
KR20110090596A (ko) * 2010-02-04 2011-08-10 삼성전자주식회사 지터 보정 방법 및 장치
EP2362653A1 (en) * 2010-02-26 2011-08-31 Panasonic Corporation Transport stream packet header compression
CN101877643B (zh) * 2010-06-29 2014-12-10 中兴通讯股份有限公司 多点混音远景呈现方法、装置及系统
US8630412B2 (en) 2010-08-25 2014-01-14 Motorola Mobility Llc Transport of partially encrypted media
US8477050B1 (en) 2010-09-16 2013-07-02 Google Inc. Apparatus and method for encoding using signal fragments for redundant transmission of data
US20120243602A1 (en) * 2010-09-23 2012-09-27 Qualcomm Incorporated Method and apparatus for pipelined slicing for wireless display
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
US8595374B2 (en) 2010-12-08 2013-11-26 At&T Intellectual Property I, L.P. Method and apparatus for capacity dimensioning in a communication network
CN103262639B (zh) * 2010-12-20 2016-08-10 雅马哈株式会社 无线音频传输方法
US8964783B2 (en) * 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
JP5847846B2 (ja) * 2011-01-21 2016-01-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated ワイヤレスディスプレイのためのユーザ入力バックチャネル
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US20130022032A1 (en) * 2011-01-26 2013-01-24 Qualcomm Incorporated Systems and methods for communicating in a network
US8856212B1 (en) 2011-02-08 2014-10-07 Google Inc. Web-based configurable pipeline for media processing
EP2490447A1 (en) * 2011-02-16 2012-08-22 British Telecommunications Public Limited Company Compact cumulative bit curves
JP2012222530A (ja) * 2011-04-06 2012-11-12 Sony Corp 受信装置及び方法、並びにプログラム
US8831108B2 (en) * 2011-05-04 2014-09-09 Cavium, Inc. Low latency rate control system and method
EP2547062B1 (en) 2011-07-14 2016-03-16 Nxp B.V. Media streaming with adaptation
CN102325261A (zh) * 2011-09-14 2012-01-18 上海交通大学 立体视频采集合成系统的视间视频数据消抖同步方法
CN102521294A (zh) * 2011-11-30 2012-06-27 苏州奇可思信息科技有限公司 基于音频触发式课件的远程教育授课方法
US20130155918A1 (en) * 2011-12-20 2013-06-20 Nokia Siemens Networks Oy Techniques To Enhance Header Compression Efficiency And Enhance Mobile Node Security
CN103179094B (zh) * 2011-12-22 2019-10-01 南京中兴软件有限责任公司 Ip报文头的发送、接收方法、发送装置以及接收装置
CN103179449B (zh) * 2011-12-23 2016-03-02 联想(北京)有限公司 媒体文件的播放方法、电子设备和虚拟机架构
US8687654B1 (en) * 2012-01-05 2014-04-01 Google Inc. Method to packetize an encoded video frame
GB2498992B (en) * 2012-02-02 2015-08-26 Canon Kk Method and system for transmitting video frame data to reduce slice error rate
US20130223412A1 (en) * 2012-02-24 2013-08-29 Qualcomm Incorporated Method and system to improve frame early termination success rate
EP2648418A1 (en) * 2012-04-05 2013-10-09 Thomson Licensing Synchronization of multimedia streams
US9098596B2 (en) * 2012-04-10 2015-08-04 Cable Television Laboratories, Inc. Redirecting web content
US9204095B2 (en) * 2012-05-04 2015-12-01 Hong Jiang Instant communications system having established communication channels between communication devices
CN102665140B (zh) * 2012-05-16 2014-04-09 哈尔滨工业大学深圳研究生院 一种avs视频帧的rtp封装方法
CN103428523B (zh) * 2012-05-22 2015-07-08 华为技术有限公司 评估视频质量的方法和装置
US11089247B2 (en) 2012-05-31 2021-08-10 Apple Inc. Systems and method for reducing fixed pattern noise in image data
US9014504B2 (en) 2012-05-31 2015-04-21 Apple Inc. Systems and methods for highlight recovery in an image signal processor
US8917336B2 (en) 2012-05-31 2014-12-23 Apple Inc. Image signal processing involving geometric distortion correction
US9743057B2 (en) 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
US8872946B2 (en) 2012-05-31 2014-10-28 Apple Inc. Systems and methods for raw image processing
US9077943B2 (en) 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US9105078B2 (en) 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping
US8817120B2 (en) 2012-05-31 2014-08-26 Apple Inc. Systems and methods for collecting fixed pattern noise statistics of image data
US9025867B2 (en) 2012-05-31 2015-05-05 Apple Inc. Systems and methods for YCC image processing
US9142012B2 (en) 2012-05-31 2015-09-22 Apple Inc. Systems and methods for chroma noise reduction
US8953882B2 (en) 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
US9031319B2 (en) 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US9332239B2 (en) 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
US8863307B2 (en) * 2012-06-05 2014-10-14 Broadcom Corporation Authenticating users based upon an identity footprint
TWI513320B (zh) * 2012-06-25 2015-12-11 Hon Hai Prec Ind Co Ltd 視訊會議裝置及其唇形同步的方法
US9236053B2 (en) * 2012-07-05 2016-01-12 Panasonic Intellectual Property Management Co., Ltd. Encoding and decoding system, decoding apparatus, encoding apparatus, encoding and decoding method
US9668161B2 (en) * 2012-07-09 2017-05-30 Cisco Technology, Inc. System and method associated with a service flow router
KR101947000B1 (ko) 2012-07-17 2019-02-13 삼성전자주식회사 방송 시스템에서 멀티미디어 데이터의 전송 특징 정보 전달 방법 및 장치
US20140142955A1 (en) * 2012-11-19 2014-05-22 Apple Inc. Encoding Digital Media for Fast Start on Digital Media Players
US20140192200A1 (en) * 2013-01-08 2014-07-10 Hii Media Llc Media streams synchronization
US20140310735A1 (en) * 2013-04-12 2014-10-16 Codemate A/S Flat rate billing of content distribution
US9532043B2 (en) * 2013-08-02 2016-12-27 Blackberry Limited Wireless transmission of real-time media
FR3011155A1 (fr) * 2013-09-26 2015-03-27 Orange Procedes de synchronisation, de generation d'un flux, programmes d'ordinateur, media de stockage, dispositifs de restitution, d'execution et de generation correspondants.
US20150195326A1 (en) * 2014-01-03 2015-07-09 Qualcomm Incorporated Detecting whether header compression is being used for a first stream based upon a delay disparity between the first stream and a second stream
US9282171B2 (en) * 2014-03-06 2016-03-08 Qualcomm Incorporated Context establishment in marginal grant conditions
US9369724B2 (en) * 2014-03-31 2016-06-14 Microsoft Technology Licensing, Llc Decoding and synthesizing frames for incomplete video data
US9801198B2 (en) * 2014-05-22 2017-10-24 Kyocera Corporation Unlicensed frequency band with licensed frequency band timing
CN103986941A (zh) * 2014-05-28 2014-08-13 深圳市智英实业发展有限公司 一种无线音视频传输系统
EP3016432B1 (en) * 2014-10-30 2018-07-04 Vodafone IP Licensing limited Content compression in mobile network
US10129839B2 (en) * 2014-12-05 2018-11-13 Qualcomm Incorporated Techniques for synchronizing timing of wireless streaming transmissions to multiple sink devices
KR102349450B1 (ko) * 2014-12-08 2022-01-10 삼성전자주식회사 무결성 검사 데이터 제공 방법 및 장치
US9692709B2 (en) 2015-06-04 2017-06-27 Oracle International Corporation Playout buffering of encapsulated media
KR102402881B1 (ko) 2015-06-05 2022-05-27 한화테크윈 주식회사 감시 시스템
US9929879B2 (en) 2015-06-09 2018-03-27 Oracle International Corporation Multipath support of real-time communications
CN104980955A (zh) * 2015-06-19 2015-10-14 重庆市音乐一号科技有限公司 一种改善Wi-Fi Display传输速度的方法
WO2017008263A1 (en) * 2015-07-15 2017-01-19 Mediatek Singapore Pte. Ltd. Conditional binary tree block partitioning structure
CN105245273B (zh) * 2015-08-27 2017-12-12 桂林理工大学 一种照度均衡的rs232与vlc通信协议转换方法
US10523536B2 (en) * 2015-10-26 2019-12-31 Telefonaktiebolaget Lm Ericsson (Publ) Length control for packet header sampling
GB201519090D0 (en) 2015-10-28 2015-12-09 Microsoft Technology Licensing Llc Multiplexing data
WO2017074811A1 (en) * 2015-10-28 2017-05-04 Microsoft Technology Licensing, Llc Multiplexing data
CN106817350A (zh) * 2015-11-30 2017-06-09 中兴通讯股份有限公司 报文处理方法及装置
US11924826B2 (en) 2015-12-10 2024-03-05 Qualcomm Incorporated Flexible transmission unit and acknowledgment feedback timeline for efficient low latency communication
US10332534B2 (en) * 2016-01-07 2019-06-25 Microsoft Technology Licensing, Llc Encoding an audio stream
KR101700370B1 (ko) * 2016-06-08 2017-01-26 삼성전자주식회사 지터 보정 방법 및 장치
KR102497216B1 (ko) * 2017-05-10 2023-02-07 삼성전자 주식회사 슬라이스 기반의 압축을 수행하는 영상 처리 장치 및 영상 처리 방법
US10367750B2 (en) * 2017-06-15 2019-07-30 Mellanox Technologies, Ltd. Transmission and reception of raw video using scalable frame rate
GB2564644B (en) * 2017-07-12 2020-12-16 Canon Kk Method and system of encoding a data stream according to a variable bitrate mode
EP3643074A1 (en) * 2017-08-25 2020-04-29 SZ DJI Technology Co., Ltd. Systems and methods for synchronizing frame timing between physical layer frame and video frame
EP3493535B1 (en) * 2017-11-29 2020-09-09 Mitsubishi Electric R & D Centre Europe B.V. Method for controlling a video encoder of a video camera installed on a moving conveyance
WO2019114911A1 (es) 2017-12-13 2019-06-20 Fiorentino Ramon Sistema interconectado para la transmisión inalámbrica de audio y vídeo de alta calidad entre dispositivos de electrónica de consumo
US10437745B2 (en) * 2018-01-05 2019-10-08 Denso International America, Inc. Mobile de-whitening
US10608947B2 (en) * 2018-02-26 2020-03-31 Qualcomm Incorporated Per-flow jumbo MTU in NR systems
KR102011806B1 (ko) * 2018-04-12 2019-08-19 주식회사 넷커스터마이즈 Udt 기반 트래픽 가속 방법
DE102018212655A1 (de) * 2018-07-30 2020-01-30 Conti Temic Microelectronic Gmbh Erkennung der Bewegungsabsicht eines Fußgängers aus Kamerabildern
US10834296B2 (en) * 2018-09-12 2020-11-10 Roku, Inc. Dynamically adjusting video to improve synchronization with audio
CN109618240A (zh) * 2018-10-26 2019-04-12 安徽清新互联信息科技有限公司 用于实时音视频传输的无线多信道自适应均衡方法
AU2020344540A1 (en) * 2019-09-10 2022-04-28 Sonos, Inc. Synchronizing playback of audio information received from other networks
CN111064541B (zh) * 2019-12-18 2021-05-11 中国南方电网有限责任公司超高压输电公司 一种高低速数据传输通道复用的方法
CN111131917B (zh) * 2019-12-26 2021-12-28 国微集团(深圳)有限公司 音频频谱实时同步方法、播放装置
CN111866753B (zh) * 2020-06-02 2021-06-29 中山大学 一种数字传输广播通信方法及系统
US11956158B2 (en) * 2020-06-08 2024-04-09 Sky Peak Technologies, Inc. Content shaping and routing in a network
KR102408433B1 (ko) * 2021-07-27 2022-06-10 한국항공우주연구원 다중 데이터 전송 방법 및 시스템
CN115484239B (zh) * 2022-09-15 2023-10-27 北京百度网讯科技有限公司 多媒体数据流的处理方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002023745A2 (en) * 2000-09-15 2002-03-21 Qualcomm Incorporated Method and apparatus for high data rate transmission in a wireless communication system
KR20030088054A (ko) * 2001-03-30 2003-11-15 콸콤 인코포레이티드 제어 채널을 모니터링하는데 있어 대기 시간을 최대화하기위한 방법 및 시스템

Family Cites Families (127)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4948019A (en) 1989-03-31 1990-08-14 Rodum Roland K Collapsible clothes hanger
JP2712656B2 (ja) 1989-10-25 1998-02-16 日本電気ホームエレクトロニクス株式会社 Cd―rom記録方法
AU2908492A (en) 1991-10-22 1993-05-21 Cae, Inc. Synchronous parallel electronic timing generator
AU5632394A (en) 1993-03-05 1994-09-08 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
JP3364281B2 (ja) * 1993-07-16 2003-01-08 パイオニア株式会社 時分割ビデオ及びオーディオ信号の同期方式
JP3003839B2 (ja) * 1993-11-08 2000-01-31 エヌ・ティ・ティ移動通信網株式会社 Cdma通信方法および装置
US5541852A (en) * 1994-04-14 1996-07-30 Motorola, Inc. Device, method and system for variable bit-rate packet video communications
US5583652A (en) * 1994-04-28 1996-12-10 International Business Machines Corporation Synchronized, variable-speed playback of digitally recorded audio and video
US5510842A (en) 1994-05-04 1996-04-23 Matsushita Electric Corporation Of America Parallel architecture for a high definition television video decoder having multiple independent frame memories
US5646693A (en) 1994-11-04 1997-07-08 Cismas; Sorin Memory utilization for video decoding and display with 3:2 pull-down
KR0137701B1 (ko) * 1994-12-13 1998-05-15 양승택 엠피이지-2(mpeg-2) 시스템의 피이에스(pes) 패킷화 장치
FI114178B (fi) * 1995-01-09 2004-08-31 Nokia Corp Radiokapasiteetin dynaaminen jakaminen TDMA-järjestelmässä
DE69631393T2 (de) * 1995-03-29 2004-10-21 Hitachi Ltd Dekoder für komprimierte und multiplexierte Bild- und Audiodaten
US5914717A (en) 1995-07-21 1999-06-22 Microsoft Methods and system for providing fly out menus
KR0164184B1 (ko) 1995-08-31 1999-01-15 배순훈 동영상 압축디스크의 엔코딩제어장치
US5844600A (en) 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
KR970012585U (ko) 1995-09-21 1997-04-25 자동차용 선바이저
US6058141A (en) * 1995-09-28 2000-05-02 Digital Bitcasting Corporation Varied frame rate video
IT1281001B1 (it) * 1995-10-27 1998-02-11 Cselt Centro Studi Lab Telecom Procedimento e apparecchiatura per codificare, manipolare e decodificare segnali audio.
US5570372A (en) * 1995-11-08 1996-10-29 Siemens Rolm Communications Inc. Multimedia communications with system-dependent adaptive delays
US5717464A (en) 1995-12-18 1998-02-10 Divicom, Inc. Rate control for a video encoder
IL117133A (en) * 1996-02-14 1999-07-14 Olivr Corp Ltd Method and system for providing on-line virtual reality movies
JPH09312656A (ja) * 1996-03-21 1997-12-02 Sony Corp 伝送装置およびその方法
US5867230A (en) * 1996-09-06 1999-02-02 Motorola Inc. System, device, and method for streaming a multimedia file encoded at a variable bitrate
US6041067A (en) * 1996-10-04 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device for synchronizing data processing
US6473404B1 (en) 1998-11-24 2002-10-29 Connect One, Inc. Multi-protocol telecommunications routing optimization
KR100204043B1 (ko) * 1996-11-28 1999-06-15 정선종 분산처리환경 상에서 오디오/비디오 데이타 전송을 위한 스트림 채널 형성방법
DE19652708C2 (de) * 1996-12-18 1999-08-12 Schott Glas Verfahren zum Herstellen eines befüllten Kunststoff-Spritzenkorpus für medizinische Zwecke
US6154780A (en) * 1996-12-18 2000-11-28 Intel Corporation Method and apparatus for transmission of a flexible and error resilient video bitstream
EP0861001B1 (en) * 1997-02-07 2012-05-23 Texas Instruments Incorporated Error resilient video encoding
KR100223298B1 (ko) * 1997-02-12 1999-10-15 서평원 광대역 종합 정보 통신망의 터미널 정합 장치
US6542481B2 (en) * 1998-06-01 2003-04-01 Tantivy Communications, Inc. Dynamic bandwidth allocation for multiple access communication using session queues
US6181711B1 (en) 1997-06-26 2001-01-30 Cisco Systems, Inc. System and method for transporting a compressed video and data bit stream over a communication channel
US6577610B1 (en) 1997-06-30 2003-06-10 Spacenet, Inc. Flex slotted Aloha transmission system and method
US5913190A (en) 1997-10-17 1999-06-15 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by audio sample rate conversion
US6124895A (en) 1997-10-17 2000-09-26 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by dynamic audio frame alignment
JP3407287B2 (ja) * 1997-12-22 2003-05-19 日本電気株式会社 符号化復号システム
US7043749B1 (en) * 1998-02-27 2006-05-09 Tandberg Telecom As Audio-video packet synchronization at network gateway
US6192257B1 (en) 1998-03-31 2001-02-20 Lucent Technologies Inc. Wireless communication terminal having video image capability
JPH11298878A (ja) 1998-04-08 1999-10-29 Nec Corp 画像スクランブル方法およびそれを実施する装置
US6215789B1 (en) 1998-06-10 2001-04-10 Merlot Communications Local area network for the transmission and control of audio, video, and computer data
FI106832B (fi) * 1998-06-10 2001-04-12 Nokia Networks Oy Suurinopeuksinen datasiirto matkaviestinjärjestelmässä
US6085270A (en) 1998-06-17 2000-07-04 Advanced Micro Devices, Inc. Multi-channel, multi-rate isochronous data bus
US6496504B1 (en) * 1998-08-06 2002-12-17 Ricoh Company, Ltd. Smart allocation of bandwidth for multiple independent calls on a digital network
US6728263B2 (en) * 1998-08-18 2004-04-27 Microsoft Corporation Dynamic sizing of data packets
US6295453B1 (en) 1998-10-07 2001-09-25 Telefonaktiebolaget Lm Ericsson (Publ) Multi-full rate channel assignment for a cellular telephone system
JP2000175189A (ja) * 1998-12-07 2000-06-23 Univ Tokyo 動画符号化方法およびそれに用いる動画符号化装置
JP3454175B2 (ja) 1998-12-24 2003-10-06 日本ビクター株式会社 画像情報送出装置
FI106998B (fi) * 1999-01-15 2001-05-15 Nokia Mobile Phones Ltd Bittinopeuden ohjaus multimedialaitteessa
US7016337B1 (en) 1999-03-02 2006-03-21 Cisco Technology, Inc. System and method for multiple channel statistical re-multiplexing
US6473442B1 (en) 1999-04-12 2002-10-29 Telefonaktiebolaget Lm Ericsson (Publ) Communications system and method for matching and balancing the bit rates of transport channels to the bit rate of a physical channel
KR100335441B1 (ko) 1999-05-01 2002-05-04 윤종용 다중 비디오 디코딩 장치 및 그 방법
KR100352981B1 (ko) 1999-05-21 2002-09-18 유혁 엠펙-1 데이터 전송 장치 및 그 방법
KR100608042B1 (ko) * 1999-06-12 2006-08-02 삼성전자주식회사 멀티 미디어 데이터의 무선 송수신을 위한 인코딩 방법 및그 장치
US6262829B1 (en) 1999-07-29 2001-07-17 Hewlett-Packard Co. Method of digital grayscale control using modulation of a slow-acting light source
US6680955B1 (en) 1999-08-20 2004-01-20 Nokia Networks Oy Technique for compressing a header field in a data packet
FI107680B (fi) * 1999-12-22 2001-09-14 Nokia Oyj Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite
BR0107785B1 (pt) 2000-01-14 2014-12-23 Interdigital Tech Corp Sistema de comunicação sem fio com blocos de transporte de dados seletivamente dimensionados
GB0000873D0 (en) * 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Interconnection of audio/video devices
US6996069B2 (en) 2000-02-22 2006-02-07 Qualcomm, Incorporated Method and apparatus for controlling transmit power of multiple channels in a CDMA communication system
JP2001245268A (ja) 2000-02-29 2001-09-07 Toshiba Corp コンテンツ伝送システム及びコンテンツ処理装置
US7061936B2 (en) * 2000-03-03 2006-06-13 Ntt Docomo, Inc. Method and apparatus for packet transmission with header compression
US6993009B2 (en) * 2000-03-10 2006-01-31 Hughes Electronics Corporation Method and apparatus for deriving uplink timing from asynchronous traffic across multiple transport streams
WO2001080567A1 (en) 2000-04-14 2001-10-25 Sony Corporation Decoder and decoding method, recorded medium, and program
US7680912B1 (en) 2000-05-18 2010-03-16 thePlatform, Inc. System and method for managing and provisioning streamed data
US6535043B2 (en) 2000-05-26 2003-03-18 Lattice Semiconductor Corp Clock signal selection system, method of generating a clock signal and programmable clock manager including same
US7292772B2 (en) 2000-05-29 2007-11-06 Sony Corporation Method and apparatus for decoding and recording medium for a coded video stream
US7274679B2 (en) 2000-06-22 2007-09-25 Mati Amit Scalable virtual channel
US7149549B1 (en) 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
US6529527B1 (en) * 2000-07-07 2003-03-04 Qualcomm, Inc. Method and apparatus for carrying packetized voice and data in wireless communication networks
JP4337244B2 (ja) 2000-07-25 2009-09-30 ソニー株式会社 Mpeg画像ストリームのデコード装置およびデコード方法
EP1312206A1 (en) * 2000-08-16 2003-05-21 Koninklijke Philips Electronics N.V. Method of playing multimedia applications
WO2002015591A1 (en) 2000-08-16 2002-02-21 Koninklijke Philips Electronics N.V. Method of playing multimedia data
ES2272541T3 (es) 2000-08-23 2007-05-01 Koninklijke Philips Electronics N.V. Sistema y dispositivo de comunicaciones.
SE517245C2 (sv) 2000-09-14 2002-05-14 Ericsson Telefon Ab L M Synkronisering av audio- och videosignaler
KR20020043139A (ko) 2000-12-01 2002-06-08 윤종용 이동통신시스템에서 고속 데이터 서비스를 위한 스케쥴링방법
US6920118B2 (en) * 2000-12-20 2005-07-19 Lucent Technologies Inc. Method and apparatus for communicating heterogeneous data traffic
US6904059B1 (en) 2001-03-06 2005-06-07 Microsoft Corporation Adaptive queuing
US6859500B2 (en) * 2001-03-20 2005-02-22 Telefonaktiebolaget Lm Ericsson Run-length coding of non-coded macroblocks
US20020150123A1 (en) * 2001-04-11 2002-10-17 Cyber Operations, Llc System and method for network delivery of low bit rate multimedia content
EP1380159A4 (en) * 2001-04-20 2008-01-09 France Telecom Res And Dev L L SYSTEMS TO ASSIGN THE STORED VIDEO IMAGES SELECTIVELY TO MARKERS, AND METHOD FOR OPERATING THEM
US7230941B2 (en) 2001-04-26 2007-06-12 Qualcomm Incorporated Preamble channel decoding
US20020194606A1 (en) * 2001-06-14 2002-12-19 Michael Tucker System and method of communication between videoconferencing systems and computer systems
JP2003046949A (ja) 2001-07-30 2003-02-14 Hitachi Ltd データ多重化方法、データ記録媒体、データ記録装置及びデータ記録プログラム
US7327789B2 (en) 2001-08-06 2008-02-05 Matsushita Electric Industrial Co., Ltd. Decoding apparatus, decoding method, decoding program, and decoding program storage medium
JP4647149B2 (ja) * 2001-08-06 2011-03-09 独立行政法人情報通信研究機構 トランスポートストリームの送信装置および受信装置
US6847006B2 (en) * 2001-08-10 2005-01-25 Semiconductor Energy Laboratory Co., Ltd. Laser annealing apparatus and semiconductor device manufacturing method
US20080002669A1 (en) 2001-09-14 2008-01-03 O'brien Ray Packet voice gateway
US6968091B2 (en) * 2001-09-18 2005-11-22 Emc Corporation Insertion of noise for reduction in the number of bits for variable-length coding of (run, level) pairs
US7336680B2 (en) * 2001-09-18 2008-02-26 Scientific-Atlanta, Inc. Multi-carrier frequency-division multiplexing (FDM) architecture for high speed digital service
US7075946B2 (en) 2001-10-02 2006-07-11 Xm Satellite Radio, Inc. Method and apparatus for audio output combining
US20040190609A1 (en) * 2001-11-09 2004-09-30 Yasuhiko Watanabe Moving picture coding method and apparatus
US7453843B2 (en) * 2001-12-11 2008-11-18 Texas Instruments Incorporated Wireless bandwidth aggregator
US7292690B2 (en) 2002-01-02 2007-11-06 Sony Corporation Video scene change detection
DE10300048B4 (de) 2002-01-05 2005-05-12 Samsung Electronics Co., Ltd., Suwon Verfahren und Vorrichtung zur Bildcodierung und -decodierung
US7130313B2 (en) 2002-02-14 2006-10-31 Nokia Corporation Time-slice signaling for broadband digital broadcasting
US7596179B2 (en) 2002-02-27 2009-09-29 Hewlett-Packard Development Company, L.P. Reducing the resolution of media data
FI114679B (fi) 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
FR2839407B1 (fr) * 2002-05-02 2004-12-17 Canon Kk Procede et dispositif d'ajustement de la taille maximale des sequences d'information transmises dans un reseau de telecommunications
US8699505B2 (en) * 2002-05-31 2014-04-15 Qualcomm Incorporated Dynamic channelization code allocation
US20030224806A1 (en) 2002-06-03 2003-12-04 Igal Hebron System and method for network data quality measurement
US6956875B2 (en) 2002-06-19 2005-10-18 Atlinks Usa, Inc. Technique for communicating variable bit rate data over a constant bit rate link
US7486678B1 (en) 2002-07-03 2009-02-03 Greenfield Networks Multi-slice network processor
RU2332705C2 (ru) * 2002-07-16 2008-08-27 Нокиа Корпорейшн Способ предоставления возможности компенсации задержки передачи пакетов при потоковой передаче мультимедийных данных
CN1221132C (zh) * 2002-07-30 2005-09-28 华为技术有限公司 实现多种视音频流格式转换的装置和方法
US7567509B2 (en) 2002-09-13 2009-07-28 Dialogic Corporation Methods and systems for jitter minimization in streaming media
TW569556B (en) 2002-10-04 2004-01-01 Avid Electronics Corp Adaptive differential pulse-code modulation compression encoding/decoding method capable of fast recovery and apparatus thereof
US7191384B2 (en) * 2002-10-17 2007-03-13 Qualcomm Incorporated Method and apparatus for transmitting and receiving a block of data in a communication system
US7068708B2 (en) * 2002-12-13 2006-06-27 Motorola, Inc. Method and receiving unit for demodulating a multi-path signal
JP2004226272A (ja) 2003-01-23 2004-08-12 Seiko Epson Corp シミ欠陥の検出方法及び装置
US8483189B2 (en) 2003-03-10 2013-07-09 Panasonic Corporation OFDM signal transmission method, transmission apparatus, and reception apparatus
US7400889B2 (en) 2003-04-01 2008-07-15 Telefonaktiebolaget Lm Ericsson (Publ) Scalable quality broadcast service in a mobile wireless communication network
US7535876B2 (en) 2003-04-01 2009-05-19 Alcatel-Lucent Usa Inc. Method of flow control for HSDPA and HSUPA
EP1616272A1 (en) * 2003-04-14 2006-01-18 Koninklijke Philips Electronics N.V. System and method for performing automatic dubbing on an audio-visual stream
US7391717B2 (en) 2003-06-30 2008-06-24 Microsoft Corporation Streaming of variable bit rate multimedia content
KR100651566B1 (ko) * 2003-08-26 2006-11-28 삼성전자주식회사 이동통신 단말기에서 출력 버퍼링을 이용한 멀티미디어재생 장치 및 그 제어 방법
WO2005025224A1 (ja) * 2003-09-02 2005-03-17 Sony Corporation コンテンツ受信装置、ビデオオーディオ出力タイミング制御方法及びコンテンツ提供システム
US9351013B2 (en) 2003-11-13 2016-05-24 Qualcomm Incorporated Selective and/or scalable complexity control for video codecs
US20050138251A1 (en) 2003-12-18 2005-06-23 Fanning Blaise B. Arbitration of asynchronous and isochronous requests
CA2554757A1 (en) * 2004-01-29 2005-08-11 Chaoticom, Inc. Systems and methods for providing digital content and caller alerts to wireless network-enabled devices
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7558221B2 (en) 2004-02-13 2009-07-07 Seiko Epson Corporation Method and system for recording videoconference data
US7586882B2 (en) * 2004-03-19 2009-09-08 Telefonaktiebolaget Lm Ericsson (Publ) Higher layer packet framing using RLP
US7530089B1 (en) 2004-03-29 2009-05-05 Nortel Networks Limited System and method for improving video quality using a constant bit rate data stream
US7865255B2 (en) * 2004-03-31 2011-01-04 Mstar Semiconductor, Inc. Audio buffering system and method of buffering audio in a multimedia receiver
CN100576820C (zh) * 2004-05-07 2009-12-30 艾格瑞系统有限公司 与帧集合一起使用的mac报头压缩
ATE484157T1 (de) 2004-05-13 2010-10-15 Qualcomm Inc Synchronisierung von audio und video daten in einem drahtlosen nachrichtenübertragungssystem

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002023745A2 (en) * 2000-09-15 2002-03-21 Qualcomm Incorporated Method and apparatus for high data rate transmission in a wireless communication system
KR20030088054A (ko) * 2001-03-30 2003-11-15 콸콤 인코포레이티드 제어 채널을 모니터링하는데 있어 대기 시간을 최대화하기위한 방법 및 시스템

Also Published As

Publication number Publication date
ATE426988T1 (de) 2009-04-15
MXPA06013193A (es) 2007-02-14
US20050259623A1 (en) 2005-11-24
EP2214412A3 (en) 2012-11-14
DE602005027837D1 (de) 2011-06-16
ES2366192T3 (es) 2011-10-18
JP2007537683A (ja) 2007-12-20
EP2214412A2 (en) 2010-08-04
EP1751987B1 (en) 2010-10-06
CA2566125A1 (en) 2005-12-01
EP1751987A1 (en) 2007-02-14
CN1973515A (zh) 2007-05-30
BRPI0510952A (pt) 2007-11-20
CA2566125C (en) 2012-01-24
KR20070014200A (ko) 2007-01-31
ATE484157T1 (de) 2010-10-15
MY142161A (en) 2010-10-15
EP1757027B1 (en) 2008-12-10
TWI394407B (zh) 2013-04-21
KR20080084866A (ko) 2008-09-19
JP2011142616A (ja) 2011-07-21
CN1985477B (zh) 2012-11-07
CA2566126A1 (en) 2005-12-01
CA2565977A1 (en) 2005-12-01
KR100918596B1 (ko) 2009-09-25
ATE417436T1 (de) 2008-12-15
KR20090039809A (ko) 2009-04-22
US20140362740A1 (en) 2014-12-11
ES2354079T3 (es) 2011-03-09
TW201145943A (en) 2011-12-16
KR100871305B1 (ko) 2008-12-01
EP2182734A1 (en) 2010-05-05
CA2566124A1 (en) 2005-12-01
US8855059B2 (en) 2014-10-07
US20050259690A1 (en) 2005-11-24
ATE508567T1 (de) 2011-05-15
JP2007537681A (ja) 2007-12-20
WO2005114943A2 (en) 2005-12-01
BRPI0510961A (pt) 2007-11-20
BRPI0510953A (pt) 2007-11-20
JP2007537682A (ja) 2007-12-20
CN1969562B (zh) 2011-08-03
US20150016427A1 (en) 2015-01-15
ES2318495T3 (es) 2009-05-01
EP2262304B1 (en) 2012-08-22
ES2323011T3 (es) 2009-07-03
WO2005115009A1 (en) 2005-12-01
WO2005114919A1 (en) 2005-12-01
DE602005013517D1 (de) 2009-05-07
CN1969562A (zh) 2007-05-23
EP1751956A2 (en) 2007-02-14
EP1751956B1 (en) 2011-05-04
CN1973515B (zh) 2013-01-09
EP1751955A1 (en) 2007-02-14
KR20070014201A (ko) 2007-01-31
EP2262304A1 (en) 2010-12-15
CN102984133A (zh) 2013-03-20
WO2005114943A3 (en) 2006-01-19
MXPA06013210A (es) 2007-02-28
EP1751955B1 (en) 2009-03-25
US20050259613A1 (en) 2005-11-24
BRPI0510962A (pt) 2007-11-20
CA2565977C (en) 2013-06-11
KR20070013330A (ko) 2007-01-30
MY139431A (en) 2009-09-30
US20050259694A1 (en) 2005-11-24
JP2007537684A (ja) 2007-12-20
KR100906586B1 (ko) 2009-07-09
WO2005114950A1 (en) 2005-12-01
TWI353759B (en) 2011-12-01
US9674732B2 (en) 2017-06-06
CA2771943A1 (en) 2005-12-01
EP2182734B1 (en) 2013-12-18
US8089948B2 (en) 2012-01-03
MY141497A (en) 2010-04-30
TW200618564A (en) 2006-06-01
CN1977516B (zh) 2010-12-01
CA2811040A1 (en) 2005-12-01
DE602005023983D1 (de) 2010-11-18
CA2771943C (en) 2015-02-03
MXPA06013186A (es) 2007-02-14
JP4448171B2 (ja) 2010-04-07
US9717018B2 (en) 2017-07-25
EP2592836A1 (en) 2013-05-15
JP4554680B2 (ja) 2010-09-29
TWI381681B (zh) 2013-01-01
EP3331246A1 (en) 2018-06-06
CA2566124C (en) 2014-09-30
TW200618544A (en) 2006-06-01
KR100870215B1 (ko) 2008-11-24
CN1985477A (zh) 2007-06-20
KR101068055B1 (ko) 2011-09-28
US10034198B2 (en) 2018-07-24
TW200623737A (en) 2006-07-01
KR20070023731A (ko) 2007-02-28
EP1757027A1 (en) 2007-02-28
JP4361585B2 (ja) 2009-11-11
DE602005011611D1 (de) 2009-01-22
CN102984133B (zh) 2016-11-23
JP5356360B2 (ja) 2013-12-04
BRPI0510952B1 (pt) 2019-09-03
MXPA06013211A (es) 2007-03-01
CN1977516A (zh) 2007-06-06

Similar Documents

Publication Publication Date Title
KR101049701B1 (ko) 통신 채널을 통한 정보의 전달
TWI416900B (zh) 用以配置資訊至一通信系統之通道之方法及裝置

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
A107 Divisional application of patent
AMND Amendment
J201 Request for trial against refusal decision
B601 Maintenance of original decision after re-examination before a trial
E801 Decision on dismissal of amendment
S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140627

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160629

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170629

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180628

Year of fee payment: 8