KR20070023731A - 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화 - Google Patents

무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화 Download PDF

Info

Publication number
KR20070023731A
KR20070023731A KR1020067026204A KR20067026204A KR20070023731A KR 20070023731 A KR20070023731 A KR 20070023731A KR 1020067026204 A KR1020067026204 A KR 1020067026204A KR 20067026204 A KR20067026204 A KR 20067026204A KR 20070023731 A KR20070023731 A KR 20070023731A
Authority
KR
South Korea
Prior art keywords
audio
frame
data
video
decoded
Prior art date
Application number
KR1020067026204A
Other languages
English (en)
Other versions
KR100906586B1 (ko
Inventor
해리나스 가루대드리
품 사게통
산지브 난다
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20070023731A publication Critical patent/KR20070023731A/ko
Application granted granted Critical
Publication of KR100906586B1 publication Critical patent/KR100906586B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W28/00—Network traffic management; Network resource management
    • H04W28/02—Traffic management, e.g. flow control or congestion control
    • H04W28/06—Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/36—Flow control; Congestion control by determining packet size, e.g. maximum transfer unit [MTU]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04—Protocols for data compression, e.g. ROHC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/166—IP fragmentation; TCP segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/321—Interlayer communication protocols or service data unit [SDU] definitions; Interfaces between layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64707—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless for transferring content from a first network to a second network, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W28/00—Network traffic management; Network resource management
    • H04W28/02—Traffic management, e.g. flow control or congestion control
    • H04W28/06—Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • H04W28/065—Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information using assembly or disassembly of packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W72/00—Local resource management
    • H04W72/04—Wireless resource allocation
    • H04W72/044—Wireless resource allocation based on the type of the allocated resource
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18—Service support devices; Network management devices
    • H04W88/181—Transcoding devices; Rate adaptation devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W72/00—Local resource management
    • H04W72/12—Wireless traffic scheduling
    • H04W72/1263—Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W80/00—Wireless network protocols or protocol adaptations to wireless operation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W84/00—Network topologies
    • H04W84/02—Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/04—Large scale networks; Deep hierarchical networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Telephone Function (AREA)
  • Alarm Systems (AREA)
  • Communication Control (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Small-Scale Networks (AREA)

Abstract

네트워크, 예를 들어, 무선 또는 IP 네트워크를 통해 송신되는 오디오 비디오 스트림을, 수신기의 애플리케이션에 의해 오디오 비디오 스트림 프레임을 렌더링하는데 요구되는 주기 이내에 오디오의 전체 프레임 및 비디오의 전체 프레임이 동시에 송신되도록 인코딩하는 기술이 개시된다. 기술의 양태는 오디오 및 비디오 RTP 스트림을 수신하는 단계 및 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 단계를 포함한다. 또한, RTP 오디오 데이터의 전체 프레임은 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 할당된다. 비디오 및 오디오 통신 채널 패킷은 동시에 송신된다. RTP 스트림의 수신 및 할당은 원격국 또는 기지국에서 수행될 수 있다.
멀티미디어, 동기화, 통신 시스템

Description

무선 통신 시스템에서 오디오 데이터와 비디오 데이터의 동기화{SYNCHRONIZATION OF AUDIO AND VIDEO DATA IN A WIRELESS COMMUNICATION SYSTEM}
35 U.S.C §119 에 의한 우선권 주장
본 특허 출원은, 본 출원의 양수인에게 양도된, 2004 년 5 월 13 일 출원된 발명의 명칭을 "Multimedia Packets Carried by CDMA Phisical Layer Products"로 하는 미국 가출원 제 60/571,673 호에 대해 우선권을 주장하며, 상기 출원은 본 명세서에 참조로 포함된다.
공동계류중인 특허 출원에 대한 참조
본 특허 출원은 공동계류중인 이하의 미국 특허 출원:
본 출원과 동시에 출원되어 본 출원의 양수인에게 양도되었고 본 명세서에 전체적으로 참조로 포함되는, 대리인 도켓 번호 제 030166U1 을 갖는 "Delivery of Information Over A Communication Channal";
본 출원과 동시에 출원되어 본 출원의 양수인에게 양도되었고 본 명세서에 전체적으로 참조로 포함되는, 대리인 도켓 번호 제 030166U2 를 갖는 "Method And Apparatus For Allocation Of Information To Channels Of A Communication System"; 및
본 출원과 동시에 출원되어 본 출원의 양수인에게 양도되었고 본 명세서에 전체적으로 참조로 포함되는, 대리인 도켓 번호 제 030166U3 를 갖는 "Header Compression Of Multimedia Data Transmitted Over A Wireless Communication System"과 관련된 것이다.
배경
I. 기술 분야
본 발명은 일반적으로 무선 통신 시스템을 통한 정보 전송에 관련된 것으로 보다 구체적으로는 무선 통신 시스템을 통해 송신되는 오디오 및 비디오 데이터의 동기화에 관련된 것이다.
II . 배경 기술
다양한 통신 네트워크를 통해 오디오 또는 비디오 데이터와 같은 멀티미디어 또는 실시간 데이터를 송신하는 다양한 기술이 개발되었다. 그러한 기술중 하나는 실시간 전송 프로토콜 (RTP) 이다. RTP 는 멀티캐스트 또는 유니캐스트 네트워크 서비스를 통한 실시간 데이터 송신 애플리케이션에 적합한 엔드-투-엔드 네트워크 전송 기능을 제공한다. RTP 는 자원 예약을 어드레스하지 않으며 실시간 서비스의 고품질 서비스를 보장하지 않는다. 데이터 전송은 제어 프로토콜 (TRCP) 에 의해 증대되어 대형 멀티캐스트 네트워크를 측정가능한 방식으로 데이터 전송의 모니터링을 가능하게 하고, 최소한의 제어 및 식별 기능성을 제공한다. RTP 및 RTCP 는 하부계층인 전송 및 네트워크 층과 무관하도록 설계된다. 프로토콜은 RTP-레벨 트랜지스터 및 믹서의 사용을 지원한다. RTP 에 관해 더 자세한 사항은 "RTP: A Transport Protocol for Real-Time Applications", H. Schulzrinne [Columbia University], S. Casner [Packet Design], R. Frederick [Blue Coat Systems Inc.], V. Jacobson [Packet Design], RFC-3550 드래프트 표준, Internet Engineering Steering Group, July 2003 에 기재되어 있으며, 이는 전체적으로 본 명세서에 참조로 포함된다.
RTP 의 양태를 나타내는 일례는 RTP 가 음성 통신을 위한 인터넷의 인터넷 프로토콜 (IP) 서비스의 최상부에서 운송되는 오디오 컨퍼런스이다. 할당 메커니즘을 통해, 컨퍼런스의 개시자는 멀티캐스트 그룹 주소 및 포트 쌍을 획득한다. 한 포트는 오디오 데이터용으로 사용되고 다른 포트는 제어 (RTCP) 패킷용으로 사용된다. 이 주소 및 포트 정보는 의도된 참석자들에게 분배된다. 각 컨퍼런스 참석자에 의해 이용되는 오디오 컨퍼런스 애플리케이션은 예를 들어, 20 ㎳ 지속기간의 파티션과 같이 소형 파티션에서 오디오 데이터를 전송한다. 오디오 데이터의 각 파티션은 RTP 헤더가 선행하며; 결합된 RTP 헤더 및 데이터는 UDP 패킷으로 캡슐화된다. RTP 헤더는 데이터에 관한 정보를 포함하며, 예를 들어, PCM, ADPCM 또는 LPC 와 같은 어떤 타입의 오디오 인코딩이 각 패킷에 포함되어 있는지, RTP 패킷이 렌더링될 시간인 시간 스탬프 (TS), 손실/복제 패킷을 검출하는데 이용될 수 있는 패킷의 순차적인 번호인 시퀀스 번호 (SN) 등을 지시한다. 이것은 전송자가 컨퍼런스 도중에 이용되는 인코딩 타입을 변경할 수 있게 하며, 예를 들어, 저대역 링크를 통해 접속된 신규 참석자를 받아들일 수 있게 하거나 네트워크 정체에 대해 반응할 수 있게 한다.
RTP 표준에 따라, RTP 컨퍼런스에서 오디오 및 비디오 매체가 모두 이용되는 경우, 그것들은 별개의 RTP 세션으로서 송신된다. 즉, 별개의 RTP 및 RTCP 패킷이 2 개의 상이한 UDP 포트 쌍 및/또는 멀티캐스트 어드레스를 이용하여 각 매체에 대해 송신된다. 양 세션에 모두 참석한 사용자가 양 세션에 대한 RTCP 패킷에서 동일한 명칭을 사용하여 세션들이 관련될 수 있는 것을 제외하고는, RTP 레벨에서 오디오 및 비디오 세션 사이에 직접적인 연결은 없다.
별개의 RTP 세션으로서 오디오 및 비디오를 송신하려는 모티베이션은 컨퍼런스의 일부 참석자들이 그들이 선택하는 경우 단지 하나의 매체만을 수신할 수 있게 한다. 분리에도 불구하고 소스의 오디오 및 비디오의 동기화된 플레이백은 양 세션에 대한 RTP/RTCP 에서 운반되는 타이밍 정보를 이용하여 달성될 수 있다.
인터넷과 같은 패킷 네트워크는 때때로 패킷을 손실 또는 재주문한다. 또한, 개별 패킷들은 그 각각의 송신 시간에서 다양한 양의 딜레이를 경험할 수도 있다. 이러한 손상에 대처하기 위해, RTP 헤더는 수신기가 소스에 의해 생성된 타이밍을 복구할 수 있게 하는 타이밍 정보 및 시퀀스 번호를 포함한다. 이 타이밍 복구는 세션의 RTP 패킷의 각 소스에 대해 개별적으로 수행된다.
RTP 헤더가 타이밍 정보 및 시퀀스 번호를 포함하고 있음에도 불구하고, 오디오 및 비디오는 별개의 RTP 스트림에서 전송되기 때문에, 스트림 사이에 잠재적인 시간 슬립이 존재하며 이를 립싱크 또는 AV-싱크로도 칭한다. 수신기에서의 애플리케이션은 오디오 및 비디오를 렌더링하기 이전에 이 스트림들을 재동기화해야할 것이다. 또한, 오디오 및 비디오와 같은 RTP 스트림이 무선 네트워크를 통해 송신되는 애플리케이션에서는, 패킷이 상실되어 스트림의 재동기화를 보다 어 렵게 만들 가능성이 높아진다.
따라서, 당업계에서는 네트워크를 통해 송신되는 오디오 및 비디오 RTP 스트림의 동기화를 향상시킬 필요가 있다.
요약
본 명세서에 개시된 실시형태들은, 네트워크를 통해 송신되는 오디오 비디오 스트림과 같은 데이터 스트림을 동기화되도록 인코딩함으로써 전술한 요청에 대처한다. 예를 들어, 오디오의 전체 프레임 및 비디오의 전체 프레임은, 수신기의 애플리케이션에 의해 오디오 및 비디오 프레임을 렌더링하기 위해 요구되는 프레임 주기 이내에 송신된다. 예를 들어, 데이터 스트림 동기화기는 제 1 인코딩된 데이터 스트림을 수신하고 디코딩된 제 1 데이터 스트림을 출력하도록 구성되는 제 1 디코더를 포함하며, 여기서 제 1 인코딩된 데이터 스트림은 정보 간격 동안 제 1 비트 레이트를 갖는다. 또한, 동기화된 데이터는 제 2 인코딩된 데이터 스트림을 수신하고 디코딩된 제 2 데이터 스트림을 출력하도록 구성되는 제 2 디코더를 포함할 수도 있으며, 여기서 제 2 인코딩된 데이터 스트림은 정보 간격 동안 제 2 비트 레이트를 갖는다. 제 1 버퍼는 하나 이상의 정보 간격 동안 제 1 인코딩된 데이터 스트림을 축적하고 각 간격 주기마다 제 1 디코딩된 데이터 스트림의 프레임을 출력하도록 구성된다. 제 2 버퍼는 하나 이상의 정보 간격 동안 제 2 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 제 2 디코딩된 데이터 스트림의 프레임을 출력하도록 구성된다. 결합기는 제 1 디코딩된 데이터 스트림의 프레임 및 제 2 디코딩된 데이터 스트림의 프레임을 수신하고 제 1 및 제 2 디코딩 된 데이터 스트림의 동기화된 프레임을 출력하도록 구성된다. 제 1 인코딩된 데이터 스트림은 비디오 데이터일 수도 있고, 제 2 인코딩된 데이터 스트림은 오디오 데이터일 수도 있다.
이 기술의 양태는 오디오 및 비디오 RTP 스트림을 수신하는 단계 및 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 단계를 포함한다. 또한, RTP 오디오 데이터의 전체 프레임은 오디오 데이터 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임이 할당된다. 비디오 및 오디오 통신 채널 패킷은 동시에 송신된다. RTP 스트림의 수신 및 할당은 원격국 또는 기지국에서 수행될 수 있다.
다른 양태는 오디오 및 비디오 데이터를 포함하는 통신 채널 패킷을 수신하는 것이다. 오디오 및 비디오 데이터를 디코딩하는 단계 및 오디오 및 비디오 데이터의 프레임 주기와 동일한 주기 동안 데이터를 축적하는 단계를 포함한다. 프레임 주기의 마지막에 비디오의 프레임 및 오디오의 프레임이 결합된다. 오디오 프레임 및 비디오 프레임이 동시에 송신되고 각 송신이 프레임 주기 이내에 발생하기 때문에, 오디오 및 비디오 프레임은 동기화된다. 디코딩 및 축적은 원격국 또는 기지국에서 수행될 수 있다.
도면의 간단한 설명
도 1 은 본 발명에 따라 구성되는 통신 시스템의 일부를 나타낸 도면이다.
도 2 는 도 1 의 시스템에서 무선 네트워크를 통해 패킷 데이터를 전송하기 위한 예시적인 패킷 데이터 네트워크 및 다양한 에어 인터페이스 옵션을 나타내는 블록도이다.
도 3 은 무선 통신 채널을 통해 개별 RTP 스트림의 송신을 위한 종래 기술에서 동기화의 곤란성을 나타내는 차트이다.
도 4 는 본 발명에 따라 무선 통신 채널을 통해 개별 RTP 스트림의 송신을 위한 기술을 나타내는 차트이다.
도 5 는 통신 채널 패킷을 수신하도록 구성되는 무선 오디오/비디오 수신기의 일부의 블록도이다.
도 6 은 통신 채널 패킷을 송신하도록 구성되는 무선 오디오/비디오 송신기의 일부의 블록도이다.
도 7 은 무선 통신 링크를 통한 독립적인 RTP 스트림의 송신의 플로우 차트이다.
도 8 은 무선 통신 채널을 통해 오디오 및 비디오 데이터 수신의 플로우 차트이다.
도 9 는 본 발명의 예시적인 실시형태에 따라 구성되는, 무선 통신 디바이스 또는 이동국 (MS) 의 블록도이다.
발명의 상세한 설명
"예시적인" 이란 용어는 본 명세서에서 "예, 예시, 예증으로 기능하는" 것을 의미하기 위해 이용된다. "예시적인" 것으로서 본 명세서에 개시된 임의의 실시형태는 다른 실시형태에 비해 바람직하다거나 이로운 것으로 해석될 필요는 없 다.
"스트리밍" 이란 용어는 본 명세서에서, 대화용, 유니캐스트 및 브로드캐스트 애플리케이션에서 전용 및 공유 채널을 통해 오디오, 연설 또는 비디오 정보와 같이 연속적인 특성의 멀티미디어 데이터의 실시간 전송을 의미하기 위해 이용된다. 본 명세서에서 비디오에 대한 "멀티미디어 프레임" 이란 어구는 디코딩 후 디스플레이/렌더링될 수 있는 비디오 프레임을 의미하기 위해 이용된다. 비디오 프레임은 독립적으로 디코딩가능한 유닛으로 더 분할될 수 있다. 비디오 회담에서, 이것들은 "슬라이스"로 불린다. 오디오 및 스피치의 경우, "멀티미디어 프레임" 이란 용어는 송신 및 수신기에서의 디코딩을 위해 스피치 또는 오디오가 압축되는 시간 윈도우에서의 정보를 의미하기 위해 이용된다. "정보 유닛 간격" 이란 어구는 본 명세서에서 전술한 멀티미디어 프레임의 시간 지속기간을 나타내기 위해 이용된다. 예를 들어, 비디오의 경우, 초당 10 프레임 비디오의 경우에 정보 유닛 간격은 100 ㎳ 이다. 또한, 스피치의 경우, 정보 유닛 간격은 통상적으로 CDMA2000, GSM 및 WCDMA 에서 20 ㎳ 이다. 이 서술로부터, 통상적으로 오디오/스피치 프로엠은 독립적으로 디코딩가능한 유닛으로 더 분할되지 않고 통상적으로 비디오 프레임은 독립적으로 디코딩가능한 슬라이스들로 더 분할되는 것이 명확하다. "멀티미디어 프레임", "정보 유닛 간격" 등이 비디오, 오디오 및 스피치의 멀티미디어 데이터를 지칭할 때 그것은 문맥상 명확하다.
상수 비트 레이트 통신 채널을 통해 송신되는 RTP 스트림을 동기화하는 기술을 설명한다. 그 기술은 RTP 스트림에서 송신되는 정보 유닛을 데이터 패킷으 로 파티셔닝하는 것을 포함하며, 데이터 패킷의 사이즈는 통신 채널의 물리적 계층 데이터 패킷 사이즈와 매칭되도록 선택된다. 예를 들어, 서로 동기화된 오디오 및 비디오 데이터가 인코딩될 수도 있다. 인코더는 데이터를 통신 채널의 가용 물리적 계층 패킷 사이즈와 매칭되게 인코딩하도록 강제될 수도 있다. RTP 스트림은 동시에 또는 직렬적으로 송신되지만 시간 프레임 내에서 오디오 및 비디오 패킷은 동기화와 함께 렌더링되기 때문에, 하나 이상의 가용 물리적 계층 패킷 사이즈와 매칭하도록 데이터 패킷 사이즈를 강제하는 것은 동기화된 복수 RTP 스트림의 송신을 지원한다. 예를 들어, 오디오 및 비디오 RTP 스트림이 송신되고 데이터 패킷이 그 사이즈가 가용 물리 계층 패킷과 매칭될 것이 강제되는 경우, 오디오 및 비디오 데이터는 디스플레이 시간 내에서 송신되고 동기화된다. 공동계류중인 특허 출원에 대한 참조에 열거된 공동계류중인 출원에 개시된 바와 같이, RTP 스트림을 나타내기 위해 필요한 데이터 양이 변함에 따라, 상이한 물리 계층 패킷 사이즈의 선택을 통해 통신 채널 용량이 변한다.
RTP 스트림과 같은 정보 유닛의 예는 가변 비트 레이트 데이터 스트림, 멀티미디어 데이터, 비디오 데이터 및 오디오 데이터를 포함한다. 정보 유닛은 상수 반복 레이트로 발생할 수도 있다. 예를 들어, 정보 유닛은 오디오/비디오 데이터의 프레임일 수도 있다.
다양한 에어 인터페이스를 지원하기 위해, 상이한 국내 및 국제 표준, 예를 들어, 어드밴스트 모바일 전화 서비스 (AMPS), 모바일용 글로벌 시스템 (GSM), 제네럴 패킷 무선 서비스 (GPRS), 인핸스트 데이터 GSM 환경 (EDGE), 인터림 표준 95 (IS-95) 및 그 변형인 IS-95A, IS-95B, ANSI J-STD-008 (본 명세서에서 종종 총칭하여 IS-95 라함), 및 CDMA2000, 유니버셜 모바일 텔레커뮤니케이션 서비스 (UMTS), 광대역 CDMA, WCDMA 등과 같은 이머징 하이-데이터-레이트 시스템 등이 확립되어왔다. 이 표준들은 미국통신산업협회 (TIA), 제 3 세대 파트너쉽 프로젝트 (3GPP), 유럽통신표준협회 (ETSI) 및 기타 잘 알려진 표준 기구에 의해 공표되었다.
도 1 은 본 발명에 따라 구성되는 통신 시스템 (100) 을 나타낸다. 통신 시스템 (100) 은 인프라스트럭처 (101), 복수의 무선 통신 디바이스 (WCD; 104 및 105), 및 랜드라인 통신 디바이스 (122 및 124) 를 포함한다. WCD 는 또한 이동국 (MS) 또는 모바일로 지칭될 것이다. 일반적으로, WCD 는 모바일이거나 고정국일 수도 있다. 랜드라인 통신 디바이스 (122 및 124) 는, 예를 들어, 스트리밍 멀티미디어 데이터와 같은 다양한 타입의 멀티미디어 데이터를 제공하는 서비스 노드, 또는 콘텐츠 서버를 포함할 수 있다. 또한, MS 는 멀티미디어 데이터와 같은 스트리밍 데이터를 송신할 수 있다.
또한, 인프라스트럭처 (101) 는 기지국 (102), 기지국 제어기 (106), 모바일 스위칭 센터 (108), 스위칭 네트워크 (120) 등과 같은 다른 구성요소를 포함할 수도 있다. 일 실시형태에서, 기지국 (102) 은 기지국 제어기 (106) 와 집적되고, 다른 실시형태에서는 기지국 (102) 및 기지국 제어기 (106) 는 별개 구성요소이다. 상이한 타입의 스위칭 네트워크 (120) 는, 통신 시스템 (100), 예를 들어, IP 네트워크 또는 공중 스위칭 전화 네트워크 (PSTN) 에서 신호를 라우팅하는 데 이용될 수도 있다.
"순방향 링크" 또는 "다운링크" 라는 용어는 인프라스트럭처 (101) 로부터 MS 로의 신호 경로를 지칭하고, "역방향 링크" 또는 "업링크" 라는 용어는 MS 로부터 인프로스트럭처로의 신호 경로를 지칭한다. 도 1 에 나타낸 바와 같이, MS (104 및 105) 는 순방향 링크 상에서 신호 (132 및 136) 를 수신하고, 역방향 링크 상에서 신호 (134 및 138) 를 송신한다. 일반적으로, MS (104 및 105) 로부터 송신되는 신호는 다른 원격 유닛, 또는 랜드라인 통신 디바이스 (122 및 124) 와 같은 다른 통신 디바이스에서 수신될 것으로 의도되고, 스위칭 네트워크 (120) 를 통해 라우팅된다. 예를 들어, 발신중인 WCD (104) 로부터 송신된 신호 (134) 가 목표 MS (105) 에 의해 수신될 것이 의도되는 경우, 신호는 인프라스트럭처 (101) 를 통해 라우팅되고 신호 (136) 는 순방향 링크 상에서 목표 MS (105) 로 송신된다. 유사하게, 인프라스트럭처 (101) 에서 발신된 신호는 MS (105) 로 브로드캐스팅될 수도 있다. 예를 들어, 콘텐츠 제공자는 스트리밍 멀티미디어 데이터와 같은 멀티미디어 데이터를 MS (105) 로 전송할 수도 있다. 통상적으로, MS 또는 랜드라인 통신 디바이스와 같은 통신 디바이스는 신호의 발신자이거나 신호의 목표일 수도 있다.
MS (104) 의 예는 셀룰러 전화, 무선 통신이 가능한 개인용 컴퓨터 및 개인용 디지털 보조기 (PDA), 및 다른 무선 디바이스를 포함한다. 통신 시스템 (100) 은 하나 이상의 무선 표준을 지원하도록 설계될 수도 있다. 예를 들어, 그 표준은 이동 통신용 글로벌 시스템 (GSM), 일반 패킷 무선 서비스 (GPRS), 인핸 스트 데이터 GSM 환경 (EDGE), TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, CDMA2000, 광대역 CDMA (WCDMA) 등으로 칭해지는 표준을 포함할 수도 있다.
도 2 는 예시적인 패킷 데이터 네트워크 및 무선 네트워크를 통해 패킷 데이터를 전송하기 위한 다양한 에어 인터페이스 옵션을 나타내는 블록도이다. 개시된 기술은 도 2 에 나타낸 것과 같은 패킷 스위칭 데이터 네트워크 (200) 에서 구현될 수도 있다. 도 2 의 예에서 나타낸 바와 같이, 패킷 스위칭 데이터 네트워크 시스템은 무선 채널 (202), 복수의 수신 노드 또는 MS (204), 전송 노드 또는 콘텐츠 서버 (206), 서비스 노드 (208), 및 제어기 (210) 를 포함할 수도 있다. 전송 노드 (206) 는 인터넷과 같은 네트워크 (212) 를 통해 서비스 노드 (208) 에 연결될 수도 있다.
서비스 노드 (208) 는 예를 들어 패킷 데이터 서빙 노드 (PDSN) 또는 서빙 GPRS 지원 노드 (SGSN) 또는 게이트웨이 GPRS 지원 노드 (GGSN) 를 포함할 수도 있다. 서비스 노드 (208) 는 전송 노드 (206) 로부터 패킷 데이터를 수신할 수도 있고, 제어기 (210) 에 정보 패킷을 서비스할 수도 있다. 제어기 (210) 는 예를 들어, 기지국 제어기/패킷 제어 기능 (BSC/PCF) 또는 무선 네트워크 제어기 (RNC) 를 포함할 수도 있다. 일 실시형태에서, 제어기 (210) 는 무선 액세스 네트워크 (RAN) 를 통해 서비스 노드 (208) 와 통신한다. 제어기 (210) 는 서비스 노드 (208) 와 통신하고, 무선 채널 (202) 을 통해 정보 패킷을 MS 와 같은 하나 이상의 수신 노드 (204) 로 송신한다.
일 실시형태에서, 서비스 노드 (208) 또는 전송 노드 (206) 또는 그 양자는 또한, 데이터 스트림 인코딩용 인코더 또는 데이터 스트림용 디코더 또는 그 둘 다를 포함할 수도 있다. 예를 들어, 인코더는 오디오/비디오 스트림을 인코딩하여 데이터 프레임을 생성할 수 있고, 디코더는 데이터 프레임을 수신하고 그들을 디코딩할 수 있다. 유사하게, MS 는 데이터 스트림 인코딩용 인코더, 또는 수신 데이터 스트림 디코딩용 디코더 또는 그 둘 다를 포함할 수도 있다. "코덱" 이란 용어는 인코더 및 디코더의 조합을 기술하기 위해 이용된다.
도 2 에 나타낸 일례에서, 네트워크 또는 인터넷 (212) 에 접속된 전송 노드 (206) 로부터의 멀티미디어 데이터와 같은 데이터는, 서비스 노드 또는 패킷 데이터 서비스 노드 (PDSN; 206) 및 제어기 또는 기지국 제어기/패킷 제어 기능 (BSC/PCF; 208) 을 통해 수신 노드 또는 MS (204) 로 전송될 수 있다. MS (204) 와 BSC/PCF (210) 사이의 무선 채널 (202) 인터페이스는 에어 인터페이스이고, 통상적으로 시그널링 및 베어러 또는 패이로드, 데이터를 위해 다수의 채널을 이용할 수 있다.
에어 인터페이스 (202) 는 임의의 개수의 무선 표준에 따라 동작할 수도 있다. 예를 들어, 그 표준은 이동 통신용 글로벌 시스템 (GSM), 제네럴 패킷 무선 서비스 (GPRS), 인핸스트 데이터 GSM 환경 (EDGE) 과 같은 TDMA 기반 표준, 또는 TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, CDMA2000, 광대역 CDMA (WCDMA) 등과 같은 CDMA 기반 표준을 포함할 수도 있다.
도 3 은 무선 통신 채널을 통한 개별 RTP 스트림 송신을 위한 종래 기술에서 의 동기화의 곤란성을 나타내는 차트이다. 도 3 에 나타낸 예에서, 비디오 및 오디오 데이터의 프레임은 RTP 스트림으로 인코딩되고, 그 후 통신 채널 패킷에 할당된다. 도 3 은 비디오 프레임 (302) 의 스트림을 나타낸다. 통상적으로, 비디오 프레임은 상수 레이트로 발생한다. 예를 들어, 비디오 프레임은 10 ㎐ 로 발생할 수도 있으며, 즉, 매 100 ㎳ 마다 신규 프레임이 발생한다.
도 3 에 나타낸 바와 같이, 각 프레임을 나타내는 막대의 높이에 의해 지시되는 바와 같이, 개별 비디오 프레임은 상이한 양의 데이터를 포함할 수도 있다. 예를 들어, 비디오 데이터가 Motion Picture Expert Group (MPEG) 데이터로 인코딩된 경우, 비디오 스트림은 인트라 프레임 (I 프레임), 및 프리딕티브 프레임 (P 프레임) 으로 구성된다. I 프레임은 자체-포함되며 (self-contained), 즉 하나의 완전한 비디오 프레임을 렌더링 또는 디스플레이하는데 필요한 모든 정보를 포함한다. P 프레임은 자체-포함되지 않고, 통상적으로, 모션 벡터 및 차동 텍스트 정보와 같이 이전 프레임에 상대적인 차동 (differential) 정보를 포함한다. 통상적으로, 콘텐츠 및 인코더 설정에 따라 I 프레임은 P 프레임보다 8 내지 10 배까지 더 클 수도 있다. 비디오 프레임이 상이한 양의 데이터를 가질 수도 있을지라도 그것들은 여전히 상수 레이트로 발생한다. I 및 P 프레임은 복수 비디오 슬라이스로 더 파티셔닝될 수 있다. 비디오 슬라이스는 디스플레이 스크린의 더 작은 영역을 나타내고, 디코더에 의해 개별적으로 디코딩될 수 있다.
도 3 에서, 비디오 프레임 N 및 N+4 는 I 프레임을 나타내고, 비디오 프레임 N+1, N+2, N+3 및 N+5 는 P 프레임을 나타낼 수 있다. 도면에서 프레임을 나타 내는 막대의 높이에 의해 지시되는 바와 같이, I 프레임은 P 프레임보다 더 많은 양의 데이터를 포함한다. 그 후, 비디오 프레임은 RTP 스트림 (304) 에서 패킷으로 패킷화된다. 도 3 에 나타낸 바와 같이, 비디오 I 프레임 N 및 N+4 에 대응하는 RTP 패킷 N 및 N+4 는 그 폭에 의해 지시되는 바와 같이, 비디오 P 프레임 N+1, N+2, 및 N+3 에 대응하는 RTP 패킷 N+1, N+2, 및 N+3 보다 더 크다.
비디오 RTP 패킷은 통신 채널 패킷 (306) 에 할당된다. CDMA 또는 GSM 과 같은 종래 통신 채널에서, 통신 채널 데이터 패킷 (306) 은 상수 사이즈이고, 상수 레이트로 송신된다. 예를 들어, 통신 채널 데이터 패킷 (306) 는 50 ㎐ 레이트로 송신될 수도 있으며, 즉, 매 20 ㎳ 마다 신규 데이터 패킷이 송신된다. 통신 채널 패킷이 상수 사이즈이기 때문에, 더 큰 RTP 패킷을 송신하기 위해 그것은 더 많은 통신 채널 패킷을 취한다. 따라서, I 비디오 프레임 N 및 N+4 에 대응하는 RTP 패킷을 송신하기 위해, P 비디오 프레임 N+1, N+2, 및 N+3 에 대응하는 더 작은 RTP 패킷을 송신하기 위해 필요한 통신 채널보다 더 많은 통신 채널 패킷 (306) 을 취한다. 도 3 에 나타낸 예에서, 비디오 프레임 N 은 9 개의 통신 채널 패킷 (306) 의 블록 (308) 을 차지한다. 비디오 프레임 N+4 는 9 개의 통신 채널 패킷 (306) 의 블록 (316) 을 차지한다.
비디오 데이터의 각 프레임에 대해, 대응하는 오디오 데이터가 있다. 도 2 는 오디오 프레임 (320) 의 스트림을 나타낸다. 오디오 프레임 N, N+1, N+2, N+3, N+4, 및 N+5 각각은 각 비디오 프레임에 대응하고, 10 ㎐ 레이트로 발생하며, 즉, 매 100 ㎳ 마다 신규 오디오 프레임이 시작된다. 일반적으로, 오디오 데이 터는 덜 복잡하며, 관련 비디오 데이터보다 더 적은 비트로 표현될 수 있고, 통상적으로 RTP 패킷 (322) 은 한 프레임 주기 내에서 통신 채널을 통해 송신될 수 있는 사이즈가 되도록 인코딩된다. 또한, 통상적인 오디오 프레임은 CDMA, GSM, WCDMA 등에서 매 20 ㎳ 마다 생성된다. 그러한 경우에 복수의 오디오 프레임은 오디오 및 비디오 패킷이 RTP 패캣화를 위해 동일한 시간 지속기간을 나타내도록 번들링된다. 예를 들어, RTP 패킷 N, N+1, N+2, N+3, N+4, 및 N+5 는, 각 RTP 패킷이 무선 통신 채널을 통해 100 ㎳ 프레임 주기 내에서 송신될 수 있도록 각 RTP 패킷이 통신 채널 패킷 (324) 에 할당될 수 있는 사이즈이다.
도 3 에 나타낸 바와 같이, 오디오 프레임 패킷 N, N+1, N+2, N+3, N+4, 및 N+5 는 5 개의 통신 채널 패킷 (324) 을 각각 갖는 블록 (326, 328, 330, 332, 334 및 336) 을 각각 차지한다.
비디오 프레임 및 오디오 프레임을 그 각각의 통신 채널 패킷에 할당하는 것을 비교하면, 오디오 및 비디오 프레임 사이의 동기화가 상실된 것이 나타나 있다. 도 3 에 나타낸 예에서, 9 개의 통신 채널 패킷 (306) 의 블록 (308) 은 비디오 프레임 N 을 송신하기 위해 요구된다. 비디오 프레임 N 과 관련된 오디오 프레임 N 은 5 개의 통신 채널 패킷 (324) 의 블록 (326) 에서 송신되었다. 통신 채널 패킷에서 비디오 및 오디오가 동시에 송신되기 때문에, 비디오 프레임 N 을 송신하는 동안, 오디오 프레임 N 뿐만 아니라 오디오 프레임 N+1 의 블록 (328) 에서 5 개의 통신 채널 패킷 중 4 개도 송신된다.
예를 들어, 도 3 에서, 비디오 및 관련 오디오, 프레임 레이트가 10 ㎐ 이고 통신 채널 패킷 레이트가 50 ㎐ 인 경우, 프레임 N 의 100 ㎳ 주기 동안, 모든 오디오 데이터가 송신되지만 비디오 데이터는 단지 일부만이 송신된다. 이 예에서, 다른 4 개의 통신 채널 패킷 (306) 이 송신될 때까지 프레임 N 에 대한 모든 비디오 데이터는 송신되지 않아서, 완전한 비디오 프레임 N 은 송신을 위해 180 ㎳ 요구하고, 오디오 프레임 N 의 완전한 송신을 위해 100 ㎳ 를 요구한다. 오디오 및 비디오 RTP 스트림이 독립적이기 때문에, 오디오 프레임 N+1 데이터의 일부는 비디오 프레임 N 데이터가 송신되는 시간 동안 송신된다. 비디오 및 오디오 스트림 사이의 이러한 동기화의 상실은 통신 채널의 수신기에서 비디오와 오디오 사이의 "슬립" 을 야기할 수 있다.
프리딕티브 코딩에 기인하여, 또한 많은 파라미터의 가변 길이 코딩 (VLC) 의 이용에 기인하여, H.263, AVC/H.264, MPEG-4 등과 같은 비디오 인코더는 사실상 본질적으로 가변 레이트이기 때문에, 회로 스위칭 네트워크 및 패킷 스위칭 네트워크를 통한 가변 레이트 비트스트림의 실시간 전송은 일반적으로 송신기 및 수신기에서의 버퍼로 트래픽 세이핑 함으로써 달성된다. 트래픽 세이핑 버퍼는 통상적으로 바람직하지 못한 추가적인 딜레이를 야기한다. 예를 들어, 추가적인 딜레이는 텔레컨퍼런스 도중 한 참석자가 말했을 때와 다른 참석자가 그 말을 들을 때 사이에 딜레이가 존재할 때 거슬릴 수 있다.
예를 들어, 통신 채널의 수신기에서의 비디오는 원래의 비디오 프레임 레이트와 동일한 레이트로 플레이백되기 때문에, 통신 채널의 딜레이는 플레이백의 일시중지를 유발할 수 있다. 도 3 에서, 비디오 프레임 N 은 전체 프레임의 데이 터가 수신될 때까지 플레이백될 수 없다. 전체 프레임 데이터가 프레임 주기 동안 수신되지 않았기 때문에, 프레임 N 에 대한 전체 프레임 데이터가 수신될 때까지 플레이백은 일시중지되어야 한다. 또한, 오디오 및 비디오의 플레이백이 동기화되도록 프레임 N 에 대한 모든 비디오 데이터가 수신될 때까지 오디오 프레임 N 으로부터의 모든 데이터가 저장될 필요가 있다. 또한, 프레임 N 으로부터의 비디오 데이터가 계속 수신중일 때 수신되는 프레임 N+1 로부터의 오디오 데이터는, 프레임 N+1 로부터의 비디오 데이터가 모두 수신될 때까지 저장되어야만 한다. 비디오 프레임의 가변 사이즈 때문에, 동기화를 달성하기 위해 대형 트래픽 세이핑 버퍼가 요구된다.
도 4 는 본 발명에 따라 무선 통신 채널을 통해 개별 RTP 스트림의 송신을 위한 기술을 나타내는 차트이다. 도 4 는 도 3 과 유사하게 가변 사이즈의 비디오 프레임 (302) 의 스트림 및 오디오 프레임 (320) 의 스트림을 나타내며, 이들 각각은 독립적인 RTP 스트림 (304 및 322) 으로 인코딩된다. 비디오 및 오디오 프레임은 상수 레이트로, 예를 들어, 10 ㎐ 레이트로 발생한다.
도 4 에서, 도 3 과 같이, 비디오 프레임 N 및 N+4 는 I 프레임을 나타낼 수 있고, 비디오 프레임 N+1, N+2, N+3, 및 N+5 는 P 프레임을 나타낼 수 있다. 비디오 프레임은 RTP 스트림 (304) 에서 패킷으로 패킷화된다. 도 4 에 나타낸 바와 같이, 비디오 I 프레임 N 및 N+4 에 대응하는 RTP 패킷 N 및 N+4 는, 그 폭에 의해 지시되는 바와 같이, 비디오 P 프레임 N+1, N+2, 및 N+3 에 대응하는 RTP 패킷 N+1, N+2, 및 N+3 보다 더 크다.
비디오 RTP 패킷은 통신 채널 패킷 (406) 으로 할당된다. 상기 공동계류중인 특허 출원에 대한 참조에서 열거된 공동계류중인 출원에 개시된 기술을 이용하여, 통신 채널의 용량은 가변적이다. 통신 채널 패킷 (406) 의 가변 용량 때문에, 비디오 프레임 N 은 4 개의 통신 채널 패킷 (406) 을 포함하는 블록 (408) 에서 송신될 수 있다.
TIA/EIA-95-B (IS-95), TIA/EIA-98-C (IS-98), IS2000, HRPD, CDMA2000, 및 광대역 CDMA (WCDMA) 와 같은 CDMA 에 기초한 표준과 같은 종래의 통신 채널에서, 통신 채널 데이터 패킷 (406) 은 50 ㎐ 레이트로 송신될 수도 있으며, 즉 매 20 ㎳ 마다 신규 데이터 패킷이 송신된다. 통신 채널 패킷 (406) 용량이 변할 수 있기 때문에, 비디오 프레임 N 의 인코딩은, 전체 비디오 프레임 N 이 프레임 주기 동안 송신될 수 있도록 강제될 수 있다. 도 4 에 나타낸 바와 같이, 통신 채널 패킷 (406) 의 용량은 비디오 프레임 N 에 대응하는 RTP 패킷 N 을 송신할 때 증가되어 전체 패킷이 프레임 주기 동안 송신될 수 있다. 또한, 개시된 기술은 GSM, GPRS, 또는 EDGE 에 기초한 통신 채널에 적용될 수 있다.
도 4 에 나타낸 바와 같이, 비디오 프레임 N, N+1, N+2, N+3, N+4, 및 N+5 는 RTP 패킷으로 인코딩되고, 통신 채널 블록 (408, 410, 412, 414, 416, 및 418) 에 각각 할당된다. 또한, 통신 채널 용량을 변경함으로써 전체 비디오 프레임이 프레임 주기 동안 송신된다. 예를 들어, 비디오 프레임 레이트가 10 ㎐ 인 경우, 비디오 데이터의 전체 프레임은 100 ㎳ 프레임 주기 동안 송신된다.
비디오 데이터 (302) 의 각 프레임에 대해, 대응하는 오디오 프레임 (320) 이 존재한다. 오디오 프레임 N, N+1, N+2, N+3, N+4, 및 N+5 각각은 각 비디오 프레임에 대응하고, 10 ㎐ 레이트로 발생하며, 즉, 매 100 ㎳ 마다 신규 오디오 프레임이 시작된다. 도 3 과 관련하여 설명한 바와 같이, 오디오 데이터는 관련 비디오 데이터에 비해 일반적으로 덜 복잡해서 더 적은 비트로 표현될 수 있으며, 통상적으로, 프레임의 100 ㎳ 주기 내에서 통신 채널을 통해 송신될 수 있는 사이즈의 RTP 패킷 (322) 이 되도록 인코딩된다. 즉, 오디오 RTP 패킷 N, N+1, N+2, N+3, N+4, 및 N+5 는, 각 RTP 패킷이 통신 채널 패킷의 블록 (326, 328, 330, 332, 334, 및 336) 에 각각 할당될 수 있는 사이즈이다. 따라서, 비디오 프레임이 10 ㎐ 인 경우 각 비디오 프레임은 통신 채널을 통해 100 ㎳ 프레임 주기 내에 송신될 수 있다. 비디오와 유사하게, 오디오 패킷 사이즈가 큰 경우, 통신 채널 용량은 또한, 프레임 주기 동안 전체 오디오 프레임의 송신을 지원하기 위해 변경될 수 있다.
도 4 에서 각각의 통신 채널 패킷에 비디오 프레임 및 오디오 프레임의 할당하는 것을 비교하면, 비디오 및 오디오 프레임이 동기화되어 있는 것이 나타나 있다. 즉, 매 프레임 주기마다 전체 비디오 및 전체 오디오 프레임이 송신된다. 비디오 및 오디오의 전체 프레임이 매 프레임 주기마다 송신되기 때문에, 추가적인 버퍼링 필요가 없다. 수신된 비디오 및 오디오 데이터는 프레임 주기 동안 축적되기만 하면 되고, 그 후 플레이 아웃될 수 있다. 통신 채널에 의해 도입되는 딜레이가 없기 때문에 비디오 및 오디오 프레임은 동기화가 유지된다.
도 3 에 나타낸 바와 같이, 비디오 프레임 N+1, N+2 및 N+3 은 비디오 데이 터의 전체 프레임을 송신하기 위해 단지 4 개의 비디오 통신 채널 패킷 (306) 을 필요로한다. 도 4 에 나타낸 바와 같이, 비디오 통신 채널 패킷 (406) 은 사이즈가 감소되어 비디오 데이터가 5 개의 패킷에 꼭 들어맞을 수도 있고, 또는 블랭크 패킷이 송신될 수도 있다. 이와 유사하게, 오디오 통신 채널에 가용의 초과 용량이 존재하는 경우 블랭크 패킷이 송신될 수도 있다. 따라서, 비디오 및 오디오 데이터는 인코딩되어 오디오 및 비디오 데이터의 전체 프레임이 동일하거나 더 적은 주기를 차지하는 통신 채널 패킷, 또는 각각의 프레임 레이트에 할당된다.
전술한 바와 같이, 통신 네트워크의 양태에 따라, RTP 스트림을 동기화하는데 상이한 기술이 이용될 수 있다. 예를 들어, 통신 네크워크는 오버 프로비전될 수도 있으며, 즉, 그것이 초과 용량을 가지거나, 통신 네트워크가 보증된 서비스 품질을 가질 수도 있다. 또한, 통신 네트워크를 통해 송신될 때 동기화를 유지하도록 RTP 스트림이 변형될 수도 있다. 이 기술들 각각은 이하 설명한다.
오버 프로비전드 ( over provisioned ) 통신 네트워크
PDSN (208) 과 송신자 (206) 사이의 통신 링크가 오버 프로비전드인 경우의 시나리오에서, 즉, 유선 인터넷을 통한 데이터의 송신에 사용 가능한 초과 용량이 존재하는 경우, 정체로 인한 딜레이는 존재하지 않는다. 통신 링크에서 초과 용량이 존재하기 때문에, 송신을 딜레이시킬 필요가 없어서 송신은 통신 링크에 의해 수용될 수 있다. 송신에서 딜레이 없이는, 음성 및 비디오 패킷 사이에 그것들이 PDSN 과 같은 인프라스트럭처에 도달하는 때의 "시간 슬립"이 존재하지 않는다. 즉, 본 발명에서 개시하는 바와 같이, 오디오 및 비디오 데이터는 PDSN 까지 서로 동기화되어 유지되며, 그 동기화는 PDSN 과 ㎳ 사이에 유지된다.
오버 프로비전드 시나리오에서, 오디오-시각 동기화는 용이하게 달성된다. 예를 들어, 비디오 데이터는, 100 ㎳ 프레임에 기초하여 초당 10 프레임 (fps) 의 프레임 레이트를 가질 수도 있으며, 관련 오디오는 20 ㎳ 스피치 프레임에 기초하여 50 fps 의 프레임 레이트를 가질 수도 있다. 이 예에서, 5 프레임의 수신된 오디오 데이터가 버퍼링되어, 비디오 프레임 레이트와 동기화된다. 즉, 100 ㎳ 의 오디오 데이터에 상응하는 5 프레임의 오디오 데이터가 버퍼링되어, 100 ㎳ 의 비디오 프레임과 동기화된다.
최대 딜레이 상에서 보증된 QoS 를 갖는 통신 네트워크
적절한 수의 더 높은 프레임 레이트 스피치 프레임을 버퍼링함으로써, 더 낮은 프레임 레이트 비디오 프레임을 매칭할 수 있다. 일반적으로, 비디오 패킷은 서비스 품질 (QoS) 이
QoS_delay = nT ㎳ (수학식 1)
를 보증하는 서비스 품질로 전송되며, 여기서, n 은 프레임에서의 딜레이이고;
T = 1000/초당프레임
이다.
스피치 및 비디오가 동기화될 수 있는 것을 보장할 정도로 충분한 스피치 프레임을 저장하기 위해, nT/w 스피치 프레임을 저장하도록 사이징된 버퍼가 필요하며, 여기서 w 는 스피치 프레임의 ㎳ 단위의 지속기간이다. CDMA2000 UMTS 에서, 스피치 프레임의 지속기간 w 는 20 ㎳ 이고, 다른 통신 채널에서는 스피치 프 레임의 지속기간은 상이하거나 변할 수도 있다.
오디오 및 비디오 데이터를 동기화하는 다른 기술은 두 데이터 스트림 모두를 버퍼링하는 것을 포함한다. 예를 들어, 통신 시스템이 보증된 최대 딜레이 DQ ㎳ 를 갖는 경우, 동기화를 유지하기 위해 적절히 사이징된 버퍼가 채택될 수 있으며, 여기서 DQ 는 오디오 및 데이터 스트림의 송신 동안 경험될 수 있는 최대 딜레이를 의미한다.
예를 들어, 보증된 최대 딜레이 DQ 를 갖는 경우, DQ / T 비디오 프레임 (T 는 비디오 프레임의 ㎳ 단위의 지속기간) 및 DQ / w 스피치 프레임 (w 는 스피치 프레임의 ㎳ 단위의 지속기간) 을 버퍼링하는 것은 오디오 비디오 동기화 (AV-싱크) 를 보장할 것이다. 추가적인 버퍼 공간은 공통적으로 디지터 (dejitter) 버퍼로 불린다.
오디오 및 비디오 데이터 스트림의 동기화 기술을 설명하였다. 그 기술은 동기화될 필요가 없는 임의의 데이터 스트림에 이용될 수 있다. 동일한 정보 간격을 갖고 동기화될 필요가 있는 제 1 높은 비트 레이트 데이터 스트림 및 제 2 낮은 비트 레이트 데이터 스트림의 2 개의 데이터 스트림이 존재하는 경우, 높은 비트 레이트 데이터를 버퍼링하는 것은 그것이 낮은 비트 레이트 데이터와 동기화될 수 있게 한다. 버퍼의 사이즈는 전술한 QoS 에 따라 결정될 수 있다. 유사하게, 전술한 바와 같이, 높은 비트 레이트 데이터 스트림 및 낮은 비트 레이트 데이터 스트림 모두가 버퍼링되어 동기화될 수 있다.
전술한 기술들은, 제 1 인코딩 데이터 스트림을 수신하고 디코딩된 제 1 데이터 스트림을 출력하도록 구성되는 제 1 디코더, 및 제 2 인코딩 데이터 스트림을 수신하고 디코딩된 제 2 데이터 스트림을 출력하도록 구성되는 제 2 디코더를 포함하는 데이터 스트림 동기화기에 의해 수행될 수 있으며, 여기서 제 1 인코딩 데이터 스트림은 정보 간격 동안 제 1 비트 레이트를 갖고, 제 2 인코딩 데이터 스트림은 정보 간격 동안 제 2 비트 레이트를 갖는다. 또한, 동기화된 데이터 스트림은 하나 이상의 정보 간격 동안 제 1 디코딩 데이터 스트림을 축적하도록 구성되고 각 간격 주기마다 제 1 디코딩 데이터 스트림의 프레임을 출력하도록 구성되는 제 1 버퍼, 및 하나 이상의 정보 간격 동안 제 2 디코딩 데이터 스트림을 축적하도록 구성되고 각 간격 주기마다 제 2 디코딩된 데이터 스트림의 프레임을 출력하도록 구성되는 제 2 버퍼를 포함한다. 제 1 디코딩 데이터 스트림의 프레임 및 제 2 디코딩 데이터 스트림의 프레임을 수신하도록 구성되고 제 1 및 제 2 디코딩 데이터 스트림의 동기화된 프레임을 출력하도록 구성되는 결합기를 포함한다. 일례에서, 제 1 인코딩 데이터 스트림은 비디오 데이터일 수도 있고 제 2 인코딩 데이터 스트림은 오디오 데이터이며, 제 1 비트 레이트가 제 2 비트 레이트보다 더 높다.
멀티플렝싱된 오디오 및 비디오의 단일 RTP 스트림
다른 실시형태는 단일 RTP 스트림에서 오디오 및 비디오를 운반하기 위한 것이다. 전술한 바와 같이, IP 네트워크에서 오디오 및 비디오를 단일 RTP 스트림으로 송신하는 것은 일상적인 것이 아니다. RTP 는 예를 들어, 비디오와 오 디오가 모두 가능한 단말기 및 단지 오디오만 가능한 단말기와 같이 상이한 자원을 갖는 참석자들이 동일한 멀티미디어 컨퍼런스에 참석할 수 있도록 설계된다.
오디오 및 비디오를 개별 RTP 스트림을 송신하는 제약은 비디오 서비스용 무선 네트워크에서는 적용 불가능할 수도 있다. 이 경우, 신규 RTP 프로파일이 특정 스피치 및 비디오 코덱 페이로드를 운반하도록 설계될 수도 있다. 오디오 및 비디오를 공통 RTP 스트림으로 조합하는 것은 오버 프로비전드 통신 네트워크를 요구하지 않고도 오디오 데이터와 비디오 데이터 사이의 어떠한 시간 슬립을 제거시킨다. 따라서, 오디오 비디오 동기화는 전술한 오버 프로비전드 네트워크와 관련하여 설명한 기술들을 이용하여 달성될 수 있다.
도 5 는 통신 채널 패킷을 수신하도록 구성되는 무선 오디오/비디오 수신기 (500) 의 일부의 블록도이다. 도 5 에 나타낸 바와 같이, 오디오/비디오 수신기 (500) 는 통신 채널 패킷을 수신하도록 구성되는 통신 채널 인터페이스 (502) 를 포함한다. 통신 채널 인터페이스 (502) 는 비디오 디코더 (504) 로 비디오 통신 채널 패킷을 출력하고, 오디오 디코더 (506) 로 오디오 통신 채널 패킷을 출력한다. 비디오 디코더 (504) 는 비디오 통신 채널 패킷을 디코딩하고 비디오 데이터를 비디오 버퍼 (508) 로 출력한다. 오디오 디코더 (506) 는 오디오 통신 채널 패킷을 디코딩하고 오디오 데이터를 오디오 버퍼 (510) 로 출력한다. 비디오 버퍼 (508) 및 오디오 버퍼는 한 프레임 주기 동안 각각 비디오 및 오디오 데이터를 축적한다. 비디오 버퍼 (508) 및 오디오 버퍼 (510) 는 각각 비디오 프레임 및 오디오 프레임을 결합기 (512) 로 출력한다. 결합기 (512) 는 비디 오 및 오디오 프레임을 결합하도록 구성되고 동기화된 오디오 비디오 신호를 출력한다. 비디오 버퍼 (508), 오디오 버퍼 (510) 및 결합기 (512) 의 동작은 제어기 (514) 에 의해 제어될 수도 있다.
도 6 은 통신 채널 패킷을 송신하도록 구성되는 무선 오디오/비디오 송신기 (600) 의 일부의 블록도이다. 도 6 에 나타낸 바와 같이, 오디오/비디오 송신기 (600) 는 비디오 데이터 RTP 스트림을 수신하도록 구성되는 비디오 통신 채널 인터페이스 (602) 를 포함한다. 비디오 통신 채널 인터페이스는 통신 채널 패킷에 RTP 패킷을 할당한다. 전술한 바와 같이, 통신 채널 패킷의 용량은 RTP 비디오 데이터의 가치의 전체 프레임을 비디오 프레임과 동일한 주기를 차지하는 통신 채널 패킷에 할당하도록 변할 수도 있다. 또한, 오디오/비디오 송신기 (600) 는 오디오 데이터 RTP 스트림을 수신하도록 구성되는 오디오 통신 채널 인터페이스 (604) 를 포함한다. 오디오 통신 채널 인터페이스 (604) 는 통신 채널 패킷에 RTP 패킷을 할당한다. 전술한 바와 같이, 일반적으로, 통신 채널 패킷의 용량은 RTP 오디오 데이터의 전체 프레임을 오디오 프레임과 동일한 주기를 차지하는 통신 채널 패킷에 할당하기에 충분할 것이다. 채널 용량이 충분하지 않은 경우, 비디오 통신 채널 패킷과 유사하게 그것은 변경될 수 있어서, 오디오 프레임과 동일한 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하기에 충분한 용량이 될 것이다.
비디오 및 오디오 통신 채널 패킷은 각각 비디오 및 오디오 통신 채널 인터페이스 (602 및 604) 에 의해 출력되고 결합기 (606) 로 전송된다. 결합기 (606) 는 비디오 및 오디오 통신 채널 패킷을 수신하고 그것들을 결합하고 복합 신호를 출력하도록 구성되는다. 결합기 (606) 의 출력은 복합 신호를 무선 채널로 송신하는 송신기 (608) 로 전송된다. 비디오 통신 채널 인터페이스 (602), 오디오 통신 채널 인터페이스 (604) 및 결합기 (606) 의 동작은 제어기 (614) 에 의해 제어될 수도 있다.
도 7 은 무선 통신 링크를 통신 독립적인 RTP 스트림의 송신의 플로우 차트이다. 플로우는 비디오 및 오디오 RTP 데이터 스트림이 수신되는 블록 (702) 에서 시작한다. 그 후, 플로우는 비디오 RTP 스트림이 통신 채널 패킷에 할당되는 블록 (704) 으로 계속된다. 블록 (706) 에서, 오디오 RTP 스트림은 통신 채널 패킷에 할당된다. 블록 (708) 에서, 비디오 및 오디오 통신 채널 패킷은 결합되고 무선 채널을 통해 송신된다.
도 8 은 무선 통신 채널을 통한 오디오 및 비디오 데이터의 수신의 플로우 차트이다. 플로우는 비디오 및 오디오 데이터가 무선 통신 채널을 통해 수신되는 블록 (802) 에서 시작한다. 플로우는 비디오 및 오디오 데이터가 디코딩되는 블록 (804) 으로 계속된다. 블록 (806) 에서, 디코딩된 비디오 및 오디오 데이터는 각각의 비디오 및 오디오 프레임으로 어셈블링된다. 블록 (810) 에서, 비디오 및 오디오 데이터는 동기화된 비디오/오디오 프레임으로 결합된다. 블록 (810) 에서, 동기화된 비디오/오디오 프레임이 출력된다.
도 9 는 본 발명의 예시적인 실시형태에 따라 구성되는 무선 통신 디바이스, 또는 이동국 (MS) 의 블록도이다. 통신 디바이스 (902) 는 네트워크 인터페이 스 (906), 코덱 (908), 호스트 프로세서 (910), 메모리 디바이스 (912), 프로그램 제품 (914), 및 사용자 인터페이스 (916) 를 포함한다.
인프라스트럭처로부터의 신호들은 네트워크 인터페이스 (906) 에 의해 수신되고 호스트 프로세서 (910) 로 전송된다. 호스트 프로세서 (910) 는 신호를 수신하고, 신호의 콘텐츠에 따라, 적절한 액션으로 반응한다. 예를 들어, 호스트 프로세서 (910) 는 수신된 신호 자체를 디코딩할 수도 있고 또는 수신된 신호를 디코딩을 위해 코덱 (908) 으로 라우팅할 수도 있다. 다른 실시형태에서, 수신된 신호는 네트워크 인터페이스 (906) 로부터 코덱 (908) 으로 직접 전송될 수도 있다.
일 실시형태에서, 네트워크 인터페이스 (906) 는 무선 채널을 통해 인프라스트럭처로 인터페이스하기 위한 송수신기 및 안테나일 수도 있다. 다른 실시형태에서, 네트워크 인터페이스 (906) 는 랜드라인을 통해 인프라스트럭처로 인터페이스하기 위해 이용되는 네트워크 인터페이스 카드일 수도 있다. 코덱 (908) 은 디지털 신호 프로세서 (DSP), 또는 중앙 프로세싱 유닛 (CPU) 과 같은 범용 프로세서일 수도 있다.
호스트 프로세서 (910) 및 코덱 (908) 모두는 메모리 디바이스 (912) 에 접속된다. 메모리 디바이스 (812) 는 WCD 의 동작 동안 데이터를 저장하고 호스트 프로세서 (910) 또는 DSP (908) 에 의해 실행될 프로그램 코덱을 저장하는데 이용될 수도 있다. 예를 들어, 호스트 프로세서, 코덱 또는 둘 모두는 메모리 디바이스 (912) 에 임시적으로 저장되는 프로그래밍 지시의 제어 하에서 동작할 수도 있다. 또한, 호스트 프로세서 (910) 및 코덱 (908) 은 그 자체의 프로그램 저장 메모리를 포함할 수 있다. 프로그래밍 지시들이 실행될 때, 호스트 프로세서 (910) 또는 코덱 (908) 또는 둘 모두는 그것들의 기능들, 예를 들어 오디오/비디오 데이터와 같은 멀티미디어 스트림의 디코딩 또는 인코딩, 오디오 및 비디오 프레임의 어셈블링을 수행한다. 따라서, 프로그래밍 단계들은 호스트 프로세서 (910) 및 코덱 (908) 각각의 기능성을 구현해서, 요구에 따라, 호스트 프로세서 및 코덱은 각각 콘텐츠 스트림의 디코딩 또는 인코딩 및 프레임의 어셈블링의 기능을 수행하도록 제작될 수 있다. 프로그래밍 단계들은 프로그램 제품 (914) 으로부터 수신될 수도 있다. 프로그램 제품 (914) 은 프로그래밍 단계들을 호스트 프로세서, 코덱 또는 둘 모두에 의해 실행될 수 있도록 메모리 (912) 로 저장 및 전송할 수도 있다.
프로그래 제품 (914) 은 RAM 메모리, 플래쉬 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 및 하드 디스크, 탈착형 디스크, CD-ROM, 또는 컴퓨터 판독가능 지시들을 저장할 수도 있는 당업계에 공지된 임의의 형태의 저장 매체일 수도 있다. 또한, 프로그램 제품 (914) 은 네트워크로부터 수신되어 메모리로 저장된 후 실행되는 프로그램 단계들을 포함하는 소스 파일일 수도 있다. 이 방식으로, 본 발명에 따른 동작을 위해 필요한 프로그래밍 단계들은 프로그램 제품 (914) 에 탑재되어 있을 수도 있다. 도 9 에서, 예시적인 저장 매체는, 호스트 프로세서가 저장 매체로부터 정보를 판독하고 정보를 저장 매체에 기록할 수도 있도록 호스트 프로세서 (910) 에 연결된 것으로 나타나 있다. 이와 다르 게는, 저장 매체는 호스트 프로세서 (910) 에 집적될 수도 있다.
사용자 인터페이스 (916) 는 호스트 프로세서 (910) 및 코덱 (908) 에 접속된다. 예를 들어, 사용자 인터페이스 (916) 는 멀티미디어 데이터를 사용자에게 출력하는데 이용되는 디스플레이 및 스피커를 포함할 수도 있다.
당업자는 실시형태와 관련하여 설명한 방법의 단계들이 발명의 범위를 벗어나지 않고 변환될 수도 있음을 인식할 것이다.
또한, 당업자는 정보 및 신호가 임의의 다양한 상이한 기술 및 테크닉을 이용하여 나타내어질 수도 있음을 이해할 것이다. 예를 들어, 명세서 전체에 걸쳐 언급되었을 수도 있는 데이터, 지시, 명령, 정보, 신호, 비트, 심볼, 및 칩은 전압, 전류, 전자기파, 자기장 또는 자기입자, 광학장 또는 광입자, 또는 그것들의 임의의 조합으로 나타낼 수도 있다.
또한, 당업자는 본 명세서에서 개시된 실시형태와 관련하여 설명한 다양한 예시적인 로직 블록, 모듈, 회로, 및 알고리즘 단계는 전자 하드웨어, 컴퓨터 소프트웨어, 또는 그 조합으로 구현될 수도 있음을 이해할 것이다. 하드웨어와 소프트웨어의 이러한 상호변환가능성을 명확하게 나타내기 위해, 다양한 예시적인 구성요소, 블록, 모듈, 회로, 및 단계들은 그것들의 기능성의 관점에서 일반적으로 설명하였다. 그러한 기능성은 특정 애플리케이션 및 전체 시스템에 부과된 설계 제약에 따라 하드웨어 또는 소프트웨어로 구현된다. 당업자는 개시된 기능성을 각 특성 애플리케이션에 대해 다양한 방식으로 구현할 수도 있으나, 그러한 그현 결정은 본 발명의 범위를 벗어나게 하는 것으로 해석되어서는 안된다.
본 명세서에 개시한 실시형태와 관련하여 설명한 다양한 예시적인 논리 블록, 모듈, 및 회로는 범용 프로세서, 디지털 신호 프로세서 (DSP), 주문형 집적회로 (ASIC), 필드 프로그래머블 게이트 어레이 (FPGA), 또는 기타 프로그래머블 로직 디바이스, 별도의 게이트 또는 트랜지스터 로직, 별도의 하드웨어 컴포넌트, 또는 여기서 설명된 기능을 수행하도록 설계되는 이들의 임의의 조합으로 구현 또는 수행될 수도 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 다른 방법으로는, 그 프로세서는 임의의 종래 프로세서, 제어기, 마이크로 제어기, 또는 상태 머신일 수도 있다. 또한, 프로세서는 컴퓨팅 디바이스들의 조합, 예를 들어, DSP 와 마이크로프로세서의 조합, 복수의 마이크로프로세서, DSP 코어와 결합된 하나 이상의 마이크로프로세서 또는 임의의 기타 다른 구성으로 구현될 수도 있다.
본 명세서에 개시된 실시형태들과 관련하여 설명된 방법 또는 알고리즘의 단계는 하드웨어에서 직접, 프로세서에 의해 실행되는 소프트웨어 모듈에서, 또는 그 2 개의 조합으로 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM, 또는 당업계에 알려진 임의의 다른 형태의 저장 매체에 상주할 수도 있다. 예시적인 저장 매체는 프로세서에 연결되며, 그 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기록할 수 있다. 다른 방법으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 ASIC 내에 상주할 수도 있다. ASIC 은 사용자 단말기 내에 상주할 수도 있 다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.
개시된 실시형태들에 대한 상기의 설명은 당업자로 하여금 본 발명을 제조 또는 이용할 수 있도록 제공된다. 당업자는 이들 실시형태에 대한 다양한 변형들을 명백히 알 수 있으며, 여기에서 정의된 일반적인 원리들은 본 발명의 사상 또는 범위를 벗어나지 않고도 다른 실시형태들에 적용될 수도 있다. 따라서, 본 발명은 여기에서 설명된 실시형태들에 제한되는 것이 아니라, 여기에서 개시된 원리 및 신규한 특징들과 부합하는 최광의 범위를 부여하려는 것이다.

Claims (29)

  1. 정보 간격 동안 제 1 비트 레이트를 갖는 제 1 인코딩된 데이터 스트림을 수신하고 디코딩된 제 1 데이터 스트림을 출력하도록 구성되는 제 1 디코더;
    상기 정보 간격 동안 제 2 비트 레이트를 갖는 제 2 인코딩된 데이터 스트림을 수신하고 디코딩된 제 2 데이터 스트림을 출력하도록 구성되는 제 2 디코더;
    하나 이상의 정보 간격 동안 상기 제 1 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 1 디코딩된 데이터 스트림의 프레임을 출력하도록 구성되는 제 1 버퍼;
    하나 이상의 정보 간격 동안 상기 제 2 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 2 디코딩된 데이터 스트림의 프레임을 출력하도록 구성되는 제 2 버퍼; 및
    상기 제 1 디코딩된 데이터 스트림의 프레임 및 상기 제 2 디코딩된 데이터 스트림의 프레임을 수신하고 제 1 및 제 2 디코딩된 데이터 스트림의 동기화된 프레임을 출력하도록 구성되는 결합기를 구비하는, 데이터 스트림 동기화기.
  2. 제 1 항에 있어서,
    상기 제 1 인코딩된 데이터 스트림은 비디오 데이터인, 데이터 스트림 동기화기.
  3. 제 1 항에 있어서,
    상기 제 2 인코딩된 데이터 스트림은 오디오 데이터인, 데이터 스트림 동기화기.
  4. 제 1 항에 있어서,
    상기 제 1 비트 레이트는 상기 제 2 비트 레이트보다 더 높은, 데이터 스트림 동기화기.
  5. 인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하도록 구성되는 비디오 디코더;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하도록 구성되는 오디오 디코더;
    하나 이상의 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하도록 구성되는 비디오 버퍼;
    복수의 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하도록 구성되는 오디오 버퍼; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 수신하고 오디오 비디오 데이터의 동기화된 프레임을 출력하도록 구성되는 결합기를 구비하는, 원격국 (remote station) 장치.
  6. 제 5 항에 있어서,
    상기 비디오 디코더는 MPEG 디코더, H.263 디코더, 또는 H.264 디코더인, 원격국 장치.
  7. 제 5 항에 있어서,
    상기 오디오 디코더는 MPEG 디코더, H.263 디코더, 또는 H.264 디코더인, 원격국 장치.
  8. 제 5 항에 있어서,
    오디오 및 비디오 데이터의 디코딩 및 동기화를 제어하는 제어 프로세서를 더 구비하는, 원격국 장치.
  9. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하도록 구성되는 비디오 통신 채널 인터페이스;
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하도록 구성되는 오디오 통신 채널 인터페이스; 및
    상기 비디오 및 오디오 통신 채널 패킷을 송수신하도록 구성되는 송신기를 구비하는, 원격국 장치.
  10. 제 9 항에 있어서,
    통신 채널 패킷에 오디오 및 비디오 데이터의 할당을 제어하는 제어 프로세서를 더 구비하는, 원격국 장치.
  11. 인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하도록 구성되는 비디오 디코더;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하도록 구성되는 오디오 디코더;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하도록 구성되는 비디오 버퍼;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하도록 구성되는 오디오 버퍼; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 수신하고 오디오 비디오 데이터의 동기화된 프레임을 출력하도록 구성되는 결합기를 구비하는, 기지국 장치.
  12. 제 11 항에 있어서,
    상기 비디오 디코더는 MPEG 디코더, H.263 디코더, 또는 H.264 디코더인, 기지국 장치.
  13. 제 11 항에 있어서,
    상기 오디오 디코더는 MPEG 디코더, H.263 디코더, 또는 H.264 디코더인, 기지국 장치.
  14. 제 11 항에 있어서,
    상기 오디오 및 비디오 데이터의 디코딩 및 동기화를 제어하는 제어 프로세서를 더 구비하는, 기지국 장치.
  15. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하도록 구성되는 비디오 통신 채널 인터페이스;
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하도록 구성되는 오디오 통신 채널 인터페이스; 및
    상기 비디오 및 오디오 통신 채널 패킷을 송수신하도록 구성되는 송신기를 구비하는, 기지국 장치.
  16. 제 15 항에 있어서,
    통신 채널 패킷에 상기 오디오 및 비디오 데이터의 할당을 제어하는 제어 프 로세서를 더 구비하는, 기지국 장치.
  17. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하도록 구성되는 비디오 통신 채널 인터페이스;
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하도록 구성되는 오디오 통신 채널 인터페이스; 및
    상기 비디오 및 오디오 통신 채널 패킷을 송수신하도록 구성되는 송신기를 구비하는 기지국 장치;
    비디오 통신 채널 패킷을 수신하고 디코딩된 비디오 데이터를 출력하도록 구성되는 비디오 디코더;
    오디오 통신 채널 패킷을 수신하고 디코딩된 오디오 데이터를 출력하도록 구성되는 오디오 디코더;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하도록 구성되는 비디오 버퍼;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하도록 구성되는 오디오 버퍼; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 수신하고 오디오 비디오 데이터의 동기화된 프레임을 출력하도록 구성되는 결합기를 구비하 는 원격국 장치를 구비하는, 무선 통신 시스템.
  18. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하도록 구성되는 비디오 통신 채널 인터페이스;
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하도록 구성되는 오디오 통신 채널 인터페이스; 및
    상기 비디오 및 오디오 통신 채널 패킷을 송수신하도록 구성되는 송신기를 구비하는 원격국 장치;
    비디오 통신 채널 패킷을 수신하고 디코딩된 비디오 데이터를 출력하도록 구성되는 비디오 디코더;
    오디오 통신 채널 패킷을 수신하고 디코딩된 오디오 데이터를 출력하도록 구성되는 오디오 디코더;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하도록 구성되는 비디오 버퍼;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하도록 구성되는 오디오 버퍼; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 수신하고 오디오 비디오 데이터의 동기화된 프레임을 출력하도록 구성되는 결합기를 구비하 는 기지국 장치를 구비하는, 무선 통신 시스템.
  19. 정보 간격 동안 제 1 비트 레이트를 갖는 제 1 인코딩된 데이터 스트림을 수신하고 디코딩된 제 1 데이터 스트림을 디코딩 및 출력하는 단계;
    상기 정보 간격 동안 제 2 비트 레이트를 갖는 제 2 인코딩된 데이터 스트림을 수신하고 디코딩된 제 2 데이터 스트림을 디코딩 및 출력하는 단계;
    하나 이상의 정보 간격 동안 상기 제 1 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 1 디코딩된 데이터 스트림의 프레임을 출력하는 단계;
    하나 이상의 정보 간격 동안 상기 제 2 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 2 디코딩된 데이터 스트림의 프레임을 출력하는 단계; 및
    상기 제 1 디코딩된 데이터 스트림의 프레임 및 상기 제 2 디코딩된 데이터 스트림의 프레임을 결합하고 제 1 및 제 2 디코딩된 데이터 스트림의 동기화된 프레임을 출력하는 단계를 포함하는, 데이터 스트림 디코딩 동기화 방법.
  20. 인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하는 단계;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하는 단계;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주 기마다 비디오 데이터의 프레임을 출력하는 단계;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하는 단계; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 결합하고 비디오 프레임 주기마다 오디오 비디오 데이터의 동기화된 프레임을 출력하는 단계를 포함하는, 오디오 및 비디오 데이터 디코딩 및 동기화 방법.
  21. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 단계; 및
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하는 단계를 포함하는, 오디오 및 비디오 데이터 인코딩 방법.
  22. 데이터 스트림 디코딩 및 동기화 방법을 탑재하는 컴퓨터 판독가능 매체로서,
    상기 데이터 스트림 디코딩 및 동기화 방법은,
    정보 간격 동안 제 1 비트 레이트를 갖는 제 1 인코딩된 데이터 스트림을 수신하고 디코딩된 제 1 데이터 스트림을 디코딩 및 출력하는 단계;
    상기 정보 간격 동안 제 2 비트 레이트를 갖는 제 2 인코딩된 데이터 스트림을 수신하고 디코딩된 제 2 데이터 스트림을 디코딩 및 출력하는 단계;
    하나 이상의 정보 간격 동안 상기 제 1 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 1 디코딩된 데이터 스트림의 프레임을 출력하는 단계;
    하나 이상의 정보 간격 동안 상기 제 2 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 2 디코딩된 데이터 스트림의 프레임을 출력하는 단계; 및
    상기 제 1 디코딩된 데이터 스트림의 프레임 및 상기 제 2 디코딩된 데이터 스트림의 프레임을 결합하고 제 1 및 제 2 디코딩된 데이터 스트림의 동기화된 프레임을 출력하는 단계를 포함하는, 컴퓨터 판독가능 매체.
  23. 오디오 및 비디오 데이터 디코딩 및 동기화 방법을 탑재하는, 컴퓨터 판독가능 매체로서,
    상기 오디오 및 비디오 데이터 디코딩 및 동기화 방법은,
    인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하는 단계;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하는 단계;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하는 단계;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하는 단계; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 결합하고 오디오 비디오 데이터의 동기화된 프레임을 출력하는 단계를 포함하는, 컴퓨터 판독가능 매체.
  24. 오디오 및 비디오 데이터 인코딩 방법을 탑재하는 컴퓨터 판독가능 매체로서,
    상기 오디오 및 비디오 데이터 인코딩 방법은,
    비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 단계; 및
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하는 단계를 포함하는, 컴퓨터 판독가능 매체.
  25. 정보 간격 동안 제 1 비트 레이트를 갖는 제 1 인코딩된 데이터 스트림을 디코딩하고 디코딩된 제 1 데이터 스트림을 출력하는 수단;
    상기 정보 간격 동안 제 2 비트 레이트를 갖는 제 2 인코딩된 데이터 스트림을 디코딩하고 디코딩된 제 2 데이터 스트림을 출력하는 수단;
    하나 이상의 정보 간격 동안 상기 제 1 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 1 디코딩된 데이터 스트림의 프레임을 출력하는 수단;
    하나 이상의 정보 간격 동안 상기 제 2 디코딩된 데이터 스트림을 축적하고 각 간격 주기마다 상기 제 2 디코딩된 데이터 스트림의 프레임을 출력하는 수단; 및
    상기 제 1 디코딩된 데이터 스트림의 프레임 및 상기 제 2 디코딩된 데이터 스트림의 프레임을 결합하고 제 1 및 제 2 디코딩된 데이터 스트림의 동기화된 프레임을 출력하는 수단을 구비하는, 데이터 스트림 동기화기.
  26. 인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하는 수단;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하는 수단;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하는 수단;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하는 수단; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 결합하고 오디오 비디오 데이터의 동기화된 프레임을 출력하는 수단을 구비하는, 원격국 장치.
  27. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 수단; 및
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하는 수단을 구비하는, 원격국 장치.
  28. 인코딩된 비디오 데이터를 수신하고 디코딩된 비디오 데이터를 출력하는 수단;
    인코딩된 오디오 데이터를 수신하고 디코딩된 오디오 데이터를 출력하는 수단;
    비디오 프레임 주기 동안 디코딩된 비디오 데이터를 축적하고 각 프레임 주기마다 비디오 데이터의 프레임을 출력하는 수단;
    오디오 프레임 주기 동안 디코딩된 오디오 데이터를 축적하고 각 프레임 주기마다 오디오 데이터의 프레임을 출력하는 수단; 및
    상기 비디오 데이터의 프레임 및 상기 오디오 데이터의 프레임을 결합하고 오디오 비디오 데이터의 동기화된 프레임을 출력하는 수단을 구비하는, 기지국 장치.
  29. 비디오 RTP 스트림을 수신하고, 비디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 비디오 데이터의 전체 프레임을 할당하는 수단; 및
    오디오 RTP 스트림을 수신하고, 오디오 프레임 레이트 이하의 주기를 차지하는 통신 채널 패킷에 RTP 오디오 데이터의 전체 프레임을 할당하는 수단을 구비하 는, 기지국 장치.
KR1020067026204A 2004-05-13 2005-05-13 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화 KR100906586B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US57167304P 2004-05-13 2004-05-13
US60/571,673 2004-05-13
PCT/US2005/016839 WO2005115009A1 (en) 2004-05-13 2005-05-13 Synchronization of audio and video data in a wireless communication system

Publications (2)

Publication Number Publication Date
KR20070023731A true KR20070023731A (ko) 2007-02-28
KR100906586B1 KR100906586B1 (ko) 2009-07-09

Family

ID=34969576

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020067026266A KR101049701B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달
KR1020087021553A KR100918596B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026252A KR100870215B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템을 통해 송신된 멀티미디어 데이터의 헤더압축
KR1020067026267A KR100871305B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026204A KR100906586B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화
KR1020097004108A KR101068055B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달

Family Applications Before (4)

Application Number Title Priority Date Filing Date
KR1020067026266A KR101049701B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달
KR1020087021553A KR100918596B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치
KR1020067026252A KR100870215B1 (ko) 2004-05-13 2005-05-13 무선 통신 시스템을 통해 송신된 멀티미디어 데이터의 헤더압축
KR1020067026267A KR100871305B1 (ko) 2004-05-13 2005-05-13 통신 시스템의 채널에 정보를 할당하는 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020097004108A KR101068055B1 (ko) 2004-05-13 2005-05-13 통신 채널을 통한 정보의 전달

Country Status (14)

Country Link
US (6) US8855059B2 (ko)
EP (9) EP1751956B1 (ko)
JP (5) JP4554680B2 (ko)
KR (6) KR101049701B1 (ko)
CN (5) CN1977516B (ko)
AT (4) ATE484157T1 (ko)
BR (4) BRPI0510961A (ko)
CA (6) CA2565977C (ko)
DE (4) DE602005011611D1 (ko)
ES (4) ES2323011T3 (ko)
MX (4) MXPA06013210A (ko)
MY (3) MY142161A (ko)
TW (4) TWI353759B (ko)
WO (4) WO2005115009A1 (ko)

Families Citing this family (196)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7136395B2 (en) * 2000-11-30 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Method and system for transmission of headerless data packets over a wireless link
ATE484157T1 (de) * 2004-05-13 2010-10-15 Qualcomm Inc Synchronisierung von audio und video daten in einem drahtlosen nachrichtenübertragungssystem
US7599371B1 (en) * 2004-06-09 2009-10-06 Cisco Technology, Inc. System and method for optimizing data transport in a communications system
FI20040817A0 (fi) * 2004-06-14 2004-06-14 Nokia Corp Pakkausparametrien siirto matkaviestinjärjestelmässä
US7664057B1 (en) * 2004-07-13 2010-02-16 Cisco Technology, Inc. Audio-to-video synchronization system and method for packet-based network video conferencing
US20060062312A1 (en) * 2004-09-22 2006-03-23 Yen-Chi Lee Video demultiplexer and decoder with efficient data recovery
US7804850B2 (en) * 2004-10-01 2010-09-28 Nokia Corporation Slow MAC-e for autonomous transmission in high speed uplink packet access (HSUPA) along with service specific transmission time control
US8281356B2 (en) * 2004-11-17 2012-10-02 Sharp Kabushiki Kaisha Transmitter
US7675872B2 (en) * 2004-11-30 2010-03-09 Broadcom Corporation System, method, and apparatus for displaying pictures
CN101073237B (zh) * 2004-11-30 2012-02-01 艾利森电话股份有限公司 用于传送多媒体文件的方法
US7970345B2 (en) * 2005-06-22 2011-06-28 Atc Technologies, Llc Systems and methods of waveform and/or information splitting for wireless transmission of information to one or more radioterminals over a plurality of transmission paths and/or system elements
US7764713B2 (en) * 2005-09-28 2010-07-27 Avaya Inc. Synchronization watermarking in multimedia streams
US8102878B2 (en) * 2005-09-29 2012-01-24 Qualcomm Incorporated Video packet shaping for video telephony
US9692537B2 (en) * 2005-10-18 2017-06-27 Avago Technologies General Ip (Singapore) Pte. Ltd. System, method, and apparatus for jitter reduction in a video decoder system
US8842555B2 (en) * 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
US8994879B2 (en) * 2005-10-21 2015-03-31 Thomson Licensing Method and apparatus for audio and video synchronization timestamp rollover correction
US8548048B2 (en) * 2005-10-27 2013-10-01 Qualcomm Incorporated Video source rate control for video telephony
US8406309B2 (en) 2005-10-21 2013-03-26 Qualcomm Incorporated Video rate adaptation to reverse link conditions
US8514711B2 (en) * 2005-10-21 2013-08-20 Qualcomm Incorporated Reverse link lower layer assisted video error control
US7839948B2 (en) * 2005-12-02 2010-11-23 Qualcomm Incorporated Time slicing techniques for variable data rate encoding
JP4747816B2 (ja) * 2005-12-05 2011-08-17 日本電気株式会社 パケット相乗り方法、プログラム及び装置
US8014389B2 (en) * 2005-12-06 2011-09-06 Lippershy Celestial Llc Bidding network
RU2420909C2 (ru) * 2005-12-23 2011-06-10 Конинклейке Филипс Электроникс Н.В. Разделение потока данных
US20070169152A1 (en) * 2005-12-30 2007-07-19 Daniel Roodnick Data and wireless frame alignment for error reduction
US8953596B2 (en) * 2006-01-06 2015-02-10 Qualcomm Incorporated Conserving network capacity by releasing QoS resources
US8284713B2 (en) * 2006-02-10 2012-10-09 Cisco Technology, Inc. Wireless audio systems and related methods
KR100754736B1 (ko) * 2006-02-10 2007-09-03 삼성전자주식회사 영상 수신 시스템에서 영상 프레임의 재생 방법 및 그 장치
KR100728038B1 (ko) * 2006-03-03 2007-06-14 삼성전자주식회사 Ｐｌｃ 네트워크상에서 데이터를 묶어서 전송하는 방법 및장치
US7876695B2 (en) * 2006-03-07 2011-01-25 Telefonaktiebolaget Lm Ericsson (Publ) Communication station and method providing flexible compression of data packets
JP4659657B2 (ja) * 2006-03-28 2011-03-30 富士通株式会社 フレーム多重装置
WO2007114633A2 (en) * 2006-04-03 2007-10-11 Lg Electronics Inc. Method of performing scheduling in a wired or wireless communication system and network scheduler thereof
US7684816B2 (en) * 2006-04-06 2010-03-23 Motorola, Inc. Method and apparatus to facilitate communication resource allocation for supergroups
EP2022210A1 (en) * 2006-05-15 2009-02-11 Telefonaktiebolaget L.M. Ericsson Wireless multicast for layered media
CN1983905B (zh) * 2006-05-25 2011-05-11 华为技术有限公司 终端在1x网络下建立HRPD网络分组数据业务的方法
US7920469B2 (en) * 2006-06-15 2011-04-05 Alcatel-Lucent Usa Inc. Indicating a variable control channel structure for transmissions in a cellular system
US20070299983A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Apparatus for synchronizing multicast audio and video
US20070297454A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Systems and methods for multicasting audio
US7584495B2 (en) * 2006-06-30 2009-09-01 Nokia Corporation Redundant stream alignment in IP datacasting over DVB-H
US20080025249A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated 1xEVDO WIRELESS INTERFACE TO ENABLE COMMUNICATIONS VIA A SATELLITE RELAY
US20080025312A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated Zero-header compression for improved communications
US8060651B2 (en) * 2006-08-17 2011-11-15 Sharp Laboratories Of America, Inc. Systems and methods for adaptively packetizing data partitions for transport over a network
US8644314B2 (en) * 2006-09-07 2014-02-04 Kyocera Corporation Protocol and method of VIA field compression in session initiation protocol signaling for 3G wireless networks
US8379733B2 (en) * 2006-09-26 2013-02-19 Qualcomm Incorporated Efficient video packetization methods for packet-switched video telephony applications
US8069412B2 (en) * 2006-10-17 2011-11-29 At&T Intellectual Property I, L.P. Methods, systems, and products for mapping facilities data
US8484059B2 (en) 2006-10-17 2013-07-09 At&T Intellectual Property I, L.P. Methods, systems, and products for surveying facilities
US20080101476A1 (en) * 2006-11-01 2008-05-01 Qualcomm Incorporated Video coding rate adaptation to reduce packetization overhead
CN101179484A (zh) * 2006-11-09 2008-05-14 华为技术有限公司 一种不同媒体流间的同步方法及系统
CN100450163C (zh) * 2006-11-30 2009-01-07 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法
US7889191B2 (en) * 2006-12-01 2011-02-15 Semiconductor Components Industries, Llc Method and apparatus for providing a synchronized video presentation without video tearing
US7953118B2 (en) * 2006-12-08 2011-05-31 Microsoft Corporation Synchronizing media streams across multiple devices
TWI360980B (en) 2006-12-19 2012-03-21 Innovative Sonic Ltd Method of enhancing continuous packet connectivity
KR100946893B1 (ko) * 2007-01-03 2010-03-09 삼성전자주식회사 이동 통신 시스템에서 순방향 패킷 스케줄링 방법 및 그장치
WO2008086243A1 (en) 2007-01-04 2008-07-17 Qualcomm Incorporated Method and apparatus for distributed spectrum sensing for wireless communication
KR101370478B1 (ko) * 2007-01-10 2014-03-06 퀄컴 인코포레이티드 멀티미디어 전화 통신을 위한 컨텐트- 및 링크-의존 코딩 적응 구조
KR101369838B1 (ko) * 2007-04-20 2014-03-06 삼성전자주식회사 전송 스트림 생성장치, 송신 장치, 수신 장치, 이들이포함된 디지털 방송 시스템 및 그 방법
KR100861594B1 (ko) * 2007-04-23 2008-10-07 주식회사 케이티프리텔 멀티미디어 데이터 전송률 제어 장치 및 그 방법
US8667318B2 (en) * 2007-05-14 2014-03-04 Picongen Wireless, Inc. Method and apparatus for wireless clock regeneration
US8873453B2 (en) 2007-05-14 2014-10-28 Sigma Group, Inc. Method and apparatus for wireless transmission of high data rate streams
CN100574283C (zh) * 2007-06-12 2009-12-23 华为技术有限公司 上、下行传输方法及汇聚节点
EP2023521A1 (en) * 2007-07-17 2009-02-11 Alcatel Lucent System and method for improving the use of radio spectrum in transmission of data
CN101094406B (zh) * 2007-07-23 2010-09-29 北京中星微电子有限公司 一种视频数据流的传输方法及装置
GB0715281D0 (en) * 2007-08-07 2007-09-12 Nokia Siemens Networks Oy Reduced transmission time interval
US7826360B1 (en) 2007-08-27 2010-11-02 Marvell International Ltd. Adjusting transmission rates during packet expansion using in band signaling
JP4410277B2 (ja) * 2007-08-28 2010-02-03 富士通株式会社 半導体装置、および半導体装置の制御方法
KR100916469B1 (ko) 2007-08-29 2009-09-08 엘지이노텍 주식회사 미디어 장치 및 그 제어방법
US9521186B2 (en) * 2007-09-13 2016-12-13 International Business Machines Corporation Method and system for file transfer over a messaging infrastructure
US20100329161A1 (en) * 2007-10-02 2010-12-30 Nokia Corporation IP MTU Control Based on Multiradio Schedule
CN101816206B (zh) * 2007-10-04 2014-10-08 Lm爱立信电话有限公司 针对服务gprs支持节点使用电路交换承载的系统间切换
KR100918961B1 (ko) 2007-10-09 2009-09-25 강릉원주대학교산학협력단 무선 통신망에서 동적 영역 압축 및 ｎｃｂ 결정방법
KR101422012B1 (ko) * 2007-10-19 2014-07-23 엘지전자 주식회사 제어채널 생성 방법, 제어채널 복호화 방법, 이를 구현하는기지국 및 단말
US8797850B2 (en) * 2008-01-10 2014-08-05 Qualcomm Incorporated System and method to adapt to network congestion
US9705935B2 (en) * 2008-01-14 2017-07-11 Qualcomm Incorporated Efficient interworking between circuit-switched and packet-switched multimedia services
US20090185534A1 (en) * 2008-01-18 2009-07-23 Futurewei Technologies, Inc. Method and Apparatus for Transmitting a Packet Header
US9357233B2 (en) * 2008-02-26 2016-05-31 Qualcomm Incorporated Video decoder error handling
JP5115802B2 (ja) * 2008-03-11 2013-01-09 富士通株式会社 スケジューリング装置、スケジューリング方法、およびプログラム
CN101257366B (zh) * 2008-03-27 2010-09-22 华为技术有限公司 编解码方法、通讯系统及设备
US20090268732A1 (en) * 2008-04-29 2009-10-29 Thomson Licencing Channel change tracking metric in multicast groups
MX2010012117A (es) * 2008-05-07 2010-12-01 Digital Fountain Inc Manipulacion de canal rapida y proteccion de corriente de alta calidad sobre un canal de difusion.
WO2009150578A2 (en) * 2008-06-11 2009-12-17 Koninklijke Philips Electronics N.V. Synchronization of media stream components
US20100003928A1 (en) * 2008-07-01 2010-01-07 Motorola, Inc. Method and apparatus for header compression for cdma evdo systems
US20100027524A1 (en) * 2008-07-31 2010-02-04 Nokia Corporation Radio layer emulation of real time protocol sequence number and timestamp
JP2010081212A (ja) * 2008-09-25 2010-04-08 Mitsubishi Electric Corp 音声伝送装置
US8966543B2 (en) * 2008-09-29 2015-02-24 Nokia Corporation Method and system to enable adaptation between physical bearers and OMA-BCAST
JP5135147B2 (ja) * 2008-09-29 2013-01-30 富士フイルム株式会社 動画ファイル送信サーバおよびその動作制御方法
JP5363588B2 (ja) * 2008-12-08 2013-12-11 テレフオンアクチーボラゲット エル エム エリクソン（パブル） 受信オーディオデータをビデオデータと同期させるための装置及び方法
US8204038B2 (en) * 2009-01-13 2012-06-19 Mediatek Inc. Method for efficient utilization of radio resources in wireless communications system
JP4650573B2 (ja) 2009-01-22 2011-03-16 ソニー株式会社 通信装置、通信システム、プログラム、および通信方法
US8560718B2 (en) 2009-03-03 2013-10-15 Ronald R. Davenport, JR. Wired Internet network system for the Internet video streams of radio stations
US8902995B2 (en) * 2009-07-02 2014-12-02 Qualcomm Incorporated Transmitter quieting and reduced rate encoding
US9112618B2 (en) * 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
US8958475B2 (en) * 2009-07-02 2015-02-17 Qualcomm Incorporated Transmitter quieting and null data encoding
KR101669533B1 (ko) * 2009-07-06 2016-10-26 삼성전자주식회사 무선통신 시스템에서 매체 접속 제어 계층 패킷을 구성하는 방법 및 시스템
US9218349B2 (en) 2009-07-27 2015-12-22 International Business Machines Corporation Method and system for transformation of logical data objects for storage
CN101998508B (zh) * 2009-08-14 2013-08-28 华为技术有限公司 数据封装方法及装置
WO2011027936A1 (ko) * 2009-09-03 2011-03-10 에스케이 텔레콤주식회사 근거리 무선통신 기반 프로토콜의 상위에 탑재되는 전송계층의 헤더정보를 압축 및 해제하기 위한 시스템 및 방법, 그리고 이에 적용되는 장치
EP2302845B1 (en) 2009-09-23 2012-06-20 Google, Inc. Method and device for determining a jitter buffer level
KR101757771B1 (ko) * 2009-12-01 2017-07-17 삼성전자주식회사 상호 계층 최적화를 이용한 멀티미디어 데이터 패킷을 송신하는 방법 및 장치
US8780720B2 (en) 2010-01-11 2014-07-15 Venturi Ip Llc Radio access network load and condition aware traffic shaping control
US20110182257A1 (en) * 2010-01-26 2011-07-28 Qualcomm Incorporated White space spectrum commmunciation device with multiplexing capabilties
KR20110090596A (ko) * 2010-02-04 2011-08-10 삼성전자주식회사 지터 보정 방법 및 장치
EP2362653A1 (en) * 2010-02-26 2011-08-31 Panasonic Corporation Transport stream packet header compression
CN101877643B (zh) * 2010-06-29 2014-12-10 中兴通讯股份有限公司 多点混音远景呈现方法、装置及系统
US8630412B2 (en) 2010-08-25 2014-01-14 Motorola Mobility Llc Transport of partially encrypted media
US8477050B1 (en) 2010-09-16 2013-07-02 Google Inc. Apparatus and method for encoding using signal fragments for redundant transmission of data
US20120243602A1 (en) * 2010-09-23 2012-09-27 Qualcomm Incorporated Method and apparatus for pipelined slicing for wireless display
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
US8595374B2 (en) 2010-12-08 2013-11-26 At&T Intellectual Property I, L.P. Method and apparatus for capacity dimensioning in a communication network
CN103262639B (zh) * 2010-12-20 2016-08-10 雅马哈株式会社 无线音频传输方法
US8964783B2 (en) * 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
JP5847846B2 (ja) * 2011-01-21 2016-01-27 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ ワイヤレスディスプレイのためのユーザ入力バックチャネル
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US20130022032A1 (en) * 2011-01-26 2013-01-24 Qualcomm Incorporated Systems and methods for communicating in a network
US8856212B1 (en) 2011-02-08 2014-10-07 Google Inc. Web-based configurable pipeline for media processing
EP2490447A1 (en) * 2011-02-16 2012-08-22 British Telecommunications Public Limited Company Compact cumulative bit curves
JP2012222530A (ja) * 2011-04-06 2012-11-12 Sony Corp 受信装置及び方法、並びにプログラム
US8831108B2 (en) * 2011-05-04 2014-09-09 Cavium, Inc. Low latency rate control system and method
EP2547062B1 (en) 2011-07-14 2016-03-16 Nxp B.V. Media streaming with adaptation
CN102325261A (zh) * 2011-09-14 2012-01-18 上海交通大学 立体视频采集合成系统的视间视频数据消抖同步方法
CN102521294A (zh) * 2011-11-30 2012-06-27 苏州奇可思信息科技有限公司 基于音频触发式课件的远程教育授课方法
US20130155918A1 (en) * 2011-12-20 2013-06-20 Nokia Siemens Networks Oy Techniques To Enhance Header Compression Efficiency And Enhance Mobile Node Security
CN103179094B (zh) * 2011-12-22 2019-10-01 南京中兴软件有限责任公司 Ip报文头的发送、接收方法、发送装置以及接收装置
CN103179449B (zh) * 2011-12-23 2016-03-02 联想(北京)有限公司 媒体文件的播放方法、电子设备和虚拟机架构
US8687654B1 (en) * 2012-01-05 2014-04-01 Google Inc. Method to packetize an encoded video frame
GB2498992B (en) * 2012-02-02 2015-08-26 Canon Kk Method and system for transmitting video frame data to reduce slice error rate
US20130223412A1 (en) * 2012-02-24 2013-08-29 Qualcomm Incorporated Method and system to improve frame early termination success rate
EP2648418A1 (en) * 2012-04-05 2013-10-09 Thomson Licensing Synchronization of multimedia streams
US9098596B2 (en) * 2012-04-10 2015-08-04 Cable Television Laboratories, Inc. Redirecting web content
US9204095B2 (en) * 2012-05-04 2015-12-01 Hong Jiang Instant communications system having established communication channels between communication devices
CN102665140B (zh) * 2012-05-16 2014-04-09 哈尔滨工业大学深圳研究生院 一种avs视频帧的rtp封装方法
CN103428523B (zh) * 2012-05-22 2015-07-08 华为技术有限公司 评估视频质量的方法和装置
US11089247B2 (en) 2012-05-31 2021-08-10 Apple Inc. Systems and method for reducing fixed pattern noise in image data
US9014504B2 (en) 2012-05-31 2015-04-21 Apple Inc. Systems and methods for highlight recovery in an image signal processor
US8917336B2 (en) 2012-05-31 2014-12-23 Apple Inc. Image signal processing involving geometric distortion correction
US9743057B2 (en) 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
US8872946B2 (en) 2012-05-31 2014-10-28 Apple Inc. Systems and methods for raw image processing
US9077943B2 (en) 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US9105078B2 (en) 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping
US8817120B2 (en) 2012-05-31 2014-08-26 Apple Inc. Systems and methods for collecting fixed pattern noise statistics of image data
US9025867B2 (en) 2012-05-31 2015-05-05 Apple Inc. Systems and methods for YCC image processing
US9142012B2 (en) 2012-05-31 2015-09-22 Apple Inc. Systems and methods for chroma noise reduction
US8953882B2 (en) 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
US9031319B2 (en) 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US9332239B2 (en) 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
US8863307B2 (en) * 2012-06-05 2014-10-14 Broadcom Corporation Authenticating users based upon an identity footprint
TWI513320B (zh) * 2012-06-25 2015-12-11 Hon Hai Prec Ind Co Ltd 視訊會議裝置及其唇形同步的方法
US9236053B2 (en) * 2012-07-05 2016-01-12 Panasonic Intellectual Property Management Co., Ltd. Encoding and decoding system, decoding apparatus, encoding apparatus, encoding and decoding method
US9668161B2 (en) * 2012-07-09 2017-05-30 Cisco Technology, Inc. System and method associated with a service flow router
KR101947000B1 (ko) 2012-07-17 2019-02-13 삼성전자주식회사 방송 시스템에서 멀티미디어 데이터의 전송 특징 정보 전달 방법 및 장치
US20140142955A1 (en) * 2012-11-19 2014-05-22 Apple Inc. Encoding Digital Media for Fast Start on Digital Media Players
US20140192200A1 (en) * 2013-01-08 2014-07-10 Hii Media Llc Media streams synchronization
US20140310735A1 (en) * 2013-04-12 2014-10-16 Codemate A/S Flat rate billing of content distribution
US9532043B2 (en) * 2013-08-02 2016-12-27 Blackberry Limited Wireless transmission of real-time media
FR3011155A1 (fr) * 2013-09-26 2015-03-27 Orange Procedes de synchronisation, de generation d'un flux, programmes d'ordinateur, media de stockage, dispositifs de restitution, d'execution et de generation correspondants.
US20150195326A1 (en) * 2014-01-03 2015-07-09 Qualcomm Incorporated Detecting whether header compression is being used for a first stream based upon a delay disparity between the first stream and a second stream
US9282171B2 (en) * 2014-03-06 2016-03-08 Qualcomm Incorporated Context establishment in marginal grant conditions
US9369724B2 (en) * 2014-03-31 2016-06-14 Microsoft Technology Licensing, Llc Decoding and synthesizing frames for incomplete video data
US9801198B2 (en) * 2014-05-22 2017-10-24 Kyocera Corporation Unlicensed frequency band with licensed frequency band timing
CN103986941A (zh) * 2014-05-28 2014-08-13 深圳市智英实业发展有限公司 一种无线音视频传输系统
EP3016432B1 (en) * 2014-10-30 2018-07-04 Vodafone IP Licensing limited Content compression in mobile network
US10129839B2 (en) * 2014-12-05 2018-11-13 Qualcomm Incorporated Techniques for synchronizing timing of wireless streaming transmissions to multiple sink devices
KR102349450B1 (ko) * 2014-12-08 2022-01-10 삼성전자주식회사 무결성 검사 데이터 제공 방법 및 장치
US9692709B2 (en) 2015-06-04 2017-06-27 Oracle International Corporation Playout buffering of encapsulated media
KR102402881B1 (ko) 2015-06-05 2022-05-27 한화테크윈 주식회사 감시 시스템
US9929879B2 (en) 2015-06-09 2018-03-27 Oracle International Corporation Multipath support of real-time communications
CN104980955A (zh) * 2015-06-19 2015-10-14 重庆市音乐一号科技有限公司 一种改善Wi-Fi Display传输速度的方法
WO2017008263A1 (en) * 2015-07-15 2017-01-19 Mediatek Singapore Pte. Ltd. Conditional binary tree block partitioning structure
CN105245273B (zh) * 2015-08-27 2017-12-12 桂林理工大学 一种照度均衡的rs232与vlc通信协议转换方法
US10523536B2 (en) * 2015-10-26 2019-12-31 Telefonaktiebolaget Lm Ericsson (Publ) Length control for packet header sampling
GB201519090D0 (en) 2015-10-28 2015-12-09 Microsoft Technology Licensing Llc Multiplexing data
WO2017074811A1 (en) * 2015-10-28 2017-05-04 Microsoft Technology Licensing, Llc Multiplexing data
CN106817350A (zh) * 2015-11-30 2017-06-09 中兴通讯股份有限公司 报文处理方法及装置
US11924826B2 (en) 2015-12-10 2024-03-05 Qualcomm Incorporated Flexible transmission unit and acknowledgment feedback timeline for efficient low latency communication
US10332534B2 (en) * 2016-01-07 2019-06-25 Microsoft Technology Licensing, Llc Encoding an audio stream
KR101700370B1 (ko) * 2016-06-08 2017-01-26 삼성전자주식회사 지터 보정 방법 및 장치
KR102497216B1 (ko) * 2017-05-10 2023-02-07 삼성전자 주식회사 슬라이스 기반의 압축을 수행하는 영상 처리 장치 및 영상 처리 방법
US10367750B2 (en) * 2017-06-15 2019-07-30 Mellanox Technologies, Ltd. Transmission and reception of raw video using scalable frame rate
GB2564644B (en) * 2017-07-12 2020-12-16 Canon Kk Method and system of encoding a data stream according to a variable bitrate mode
EP3643074A1 (en) * 2017-08-25 2020-04-29 SZ DJI Technology Co., Ltd. Systems and methods for synchronizing frame timing between physical layer frame and video frame
EP3493535B1 (en) * 2017-11-29 2020-09-09 Mitsubishi Electric R & D Centre Europe B.V. Method for controlling a video encoder of a video camera installed on a moving conveyance
WO2019114911A1 (es) 2017-12-13 2019-06-20 Fiorentino Ramon Sistema interconectado para la transmisión inalámbrica de audio y vídeo de alta calidad entre dispositivos de electrónica de consumo
US10437745B2 (en) * 2018-01-05 2019-10-08 Denso International America, Inc. Mobile de-whitening
US10608947B2 (en) * 2018-02-26 2020-03-31 Qualcomm Incorporated Per-flow jumbo MTU in NR systems
KR102011806B1 (ko) * 2018-04-12 2019-08-19 주식회사 넷커스터마이즈 Udt 기반 트래픽 가속 방법
DE102018212655A1 (de) * 2018-07-30 2020-01-30 Conti Temic Microelectronic Gmbh Erkennung der Bewegungsabsicht eines Fußgängers aus Kamerabildern
US10834296B2 (en) * 2018-09-12 2020-11-10 Roku, Inc. Dynamically adjusting video to improve synchronization with audio
CN109618240A (zh) * 2018-10-26 2019-04-12 安徽清新互联信息科技有限公司 用于实时音视频传输的无线多信道自适应均衡方法
AU2020344540A1 (en) * 2019-09-10 2022-04-28 Sonos, Inc. Synchronizing playback of audio information received from other networks
CN111064541B (zh) * 2019-12-18 2021-05-11 中国南方电网有限责任公司超高压输电公司 一种高低速数据传输通道复用的方法
CN111131917B (zh) * 2019-12-26 2021-12-28 国微集团(深圳)有限公司 音频频谱实时同步方法、播放装置
CN111866753B (zh) * 2020-06-02 2021-06-29 中山大学 一种数字传输广播通信方法及系统
US11956158B2 (en) * 2020-06-08 2024-04-09 Sky Peak Technologies, Inc. Content shaping and routing in a network
KR102408433B1 (ko) * 2021-07-27 2022-06-10 한국항공우주연구원 다중 데이터 전송 방법 및 시스템
CN115484239B (zh) * 2022-09-15 2023-10-27 北京百度网讯科技有限公司 多媒体数据流的处理方法、装置、电子设备及存储介质

Family Cites Families (129)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4948019A (en) 1989-03-31 1990-08-14 Rodum Roland K Collapsible clothes hanger
JP2712656B2 (ja) 1989-10-25 1998-02-16 日本電気ホームエレクトロニクス株式会社 Ｃｄ―ｒｏｍ記録方法
AU2908492A (en) 1991-10-22 1993-05-21 Cae, Inc. Synchronous parallel electronic timing generator
AU5632394A (en) 1993-03-05 1994-09-08 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
JP3364281B2 (ja) * 1993-07-16 2003-01-08 パイオニア株式会社 時分割ビデオ及びオーディオ信号の同期方式
JP3003839B2 (ja) * 1993-11-08 2000-01-31 エヌ・ティ・ティ移動通信網株式会社 Ｃｄｍａ通信方法および装置
US5541852A (en) * 1994-04-14 1996-07-30 Motorola, Inc. Device, method and system for variable bit-rate packet video communications
US5583652A (en) * 1994-04-28 1996-12-10 International Business Machines Corporation Synchronized, variable-speed playback of digitally recorded audio and video
US5510842A (en) 1994-05-04 1996-04-23 Matsushita Electric Corporation Of America Parallel architecture for a high definition television video decoder having multiple independent frame memories
US5646693A (en) 1994-11-04 1997-07-08 Cismas; Sorin Memory utilization for video decoding and display with 3:2 pull-down
KR0137701B1 (ko) * 1994-12-13 1998-05-15 양승택 엠피이지-2(mpeg-2) 시스템의 피이에스(pes) 패킷화 장치
FI114178B (fi) * 1995-01-09 2004-08-31 Nokia Corp Radiokapasiteetin dynaaminen jakaminen TDMA-järjestelmässä
DE69631393T2 (de) * 1995-03-29 2004-10-21 Hitachi Ltd Dekoder für komprimierte und multiplexierte Bild- und Audiodaten
US5914717A (en) 1995-07-21 1999-06-22 Microsoft Methods and system for providing fly out menus
KR0164184B1 (ko) 1995-08-31 1999-01-15 배순훈 동영상 압축디스크의 엔코딩제어장치
US5844600A (en) 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
KR970012585U (ko) 1995-09-21 1997-04-25 자동차용 선바이저
US6058141A (en) * 1995-09-28 2000-05-02 Digital Bitcasting Corporation Varied frame rate video
IT1281001B1 (it) * 1995-10-27 1998-02-11 Cselt Centro Studi Lab Telecom Procedimento e apparecchiatura per codificare, manipolare e decodificare segnali audio.
US5570372A (en) * 1995-11-08 1996-10-29 Siemens Rolm Communications Inc. Multimedia communications with system-dependent adaptive delays
US5717464A (en) 1995-12-18 1998-02-10 Divicom, Inc. Rate control for a video encoder
IL117133A (en) * 1996-02-14 1999-07-14 Olivr Corp Ltd Method and system for providing on-line virtual reality movies
JPH09312656A (ja) * 1996-03-21 1997-12-02 Sony Corp 伝送装置およびその方法
US5867230A (en) * 1996-09-06 1999-02-02 Motorola Inc. System, device, and method for streaming a multimedia file encoded at a variable bitrate
US6041067A (en) * 1996-10-04 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device for synchronizing data processing
US6473404B1 (en) 1998-11-24 2002-10-29 Connect One, Inc. Multi-protocol telecommunications routing optimization
KR100204043B1 (ko) * 1996-11-28 1999-06-15 정선종 분산처리환경 상에서 오디오/비디오 데이타 전송을 위한 스트림 채널 형성방법
DE19652708C2 (de) * 1996-12-18 1999-08-12 Schott Glas Verfahren zum Herstellen eines befüllten Kunststoff-Spritzenkorpus für medizinische Zwecke
US6154780A (en) * 1996-12-18 2000-11-28 Intel Corporation Method and apparatus for transmission of a flexible and error resilient video bitstream
EP0861001B1 (en) * 1997-02-07 2012-05-23 Texas Instruments Incorporated Error resilient video encoding
KR100223298B1 (ko) * 1997-02-12 1999-10-15 서평원 광대역 종합 정보 통신망의 터미널 정합 장치
US6542481B2 (en) * 1998-06-01 2003-04-01 Tantivy Communications, Inc. Dynamic bandwidth allocation for multiple access communication using session queues
US6181711B1 (en) 1997-06-26 2001-01-30 Cisco Systems, Inc. System and method for transporting a compressed video and data bit stream over a communication channel
US6577610B1 (en) 1997-06-30 2003-06-10 Spacenet, Inc. Flex slotted Aloha transmission system and method
US5913190A (en) 1997-10-17 1999-06-15 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by audio sample rate conversion
US6124895A (en) 1997-10-17 2000-09-26 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by dynamic audio frame alignment
JP3407287B2 (ja) * 1997-12-22 2003-05-19 日本電気株式会社 符号化復号システム
US7043749B1 (en) * 1998-02-27 2006-05-09 Tandberg Telecom As Audio-video packet synchronization at network gateway
US6192257B1 (en) 1998-03-31 2001-02-20 Lucent Technologies Inc. Wireless communication terminal having video image capability
JPH11298878A (ja) 1998-04-08 1999-10-29 Nec Corp 画像スクランブル方法およびそれを実施する装置
US6215789B1 (en) 1998-06-10 2001-04-10 Merlot Communications Local area network for the transmission and control of audio, video, and computer data
FI106832B (fi) * 1998-06-10 2001-04-12 Nokia Networks Oy Suurinopeuksinen datasiirto matkaviestinjärjestelmässä
US6085270A (en) 1998-06-17 2000-07-04 Advanced Micro Devices, Inc. Multi-channel, multi-rate isochronous data bus
US6496504B1 (en) * 1998-08-06 2002-12-17 Ricoh Company, Ltd. Smart allocation of bandwidth for multiple independent calls on a digital network
US6728263B2 (en) * 1998-08-18 2004-04-27 Microsoft Corporation Dynamic sizing of data packets
US6295453B1 (en) 1998-10-07 2001-09-25 Telefonaktiebolaget Lm Ericsson (Publ) Multi-full rate channel assignment for a cellular telephone system
JP2000175189A (ja) * 1998-12-07 2000-06-23 Univ Tokyo 動画符号化方法およびそれに用いる動画符号化装置
JP3454175B2 (ja) 1998-12-24 2003-10-06 日本ビクター株式会社 画像情報送出装置
FI106998B (fi) * 1999-01-15 2001-05-15 Nokia Mobile Phones Ltd Bittinopeuden ohjaus multimedialaitteessa
US7016337B1 (en) 1999-03-02 2006-03-21 Cisco Technology, Inc. System and method for multiple channel statistical re-multiplexing
US6473442B1 (en) 1999-04-12 2002-10-29 Telefonaktiebolaget Lm Ericsson (Publ) Communications system and method for matching and balancing the bit rates of transport channels to the bit rate of a physical channel
KR100335441B1 (ko) 1999-05-01 2002-05-04 윤종용 다중 비디오 디코딩 장치 및 그 방법
KR100352981B1 (ko) 1999-05-21 2002-09-18 유혁 엠펙-1 데이터 전송 장치 및 그 방법
KR100608042B1 (ko) * 1999-06-12 2006-08-02 삼성전자주식회사 멀티 미디어 데이터의 무선 송수신을 위한 인코딩 방법 및그 장치
US6262829B1 (en) 1999-07-29 2001-07-17 Hewlett-Packard Co. Method of digital grayscale control using modulation of a slow-acting light source
US6680955B1 (en) 1999-08-20 2004-01-20 Nokia Networks Oy Technique for compressing a header field in a data packet
FI107680B (fi) * 1999-12-22 2001-09-14 Nokia Oyj Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite
BR0107785B1 (pt) 2000-01-14 2014-12-23 Interdigital Tech Corp Sistema de comunicação sem fio com blocos de transporte de dados seletivamente dimensionados
GB0000873D0 (en) * 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Interconnection of audio/video devices
US6996069B2 (en) 2000-02-22 2006-02-07 Qualcomm, Incorporated Method and apparatus for controlling transmit power of multiple channels in a CDMA communication system
JP2001245268A (ja) 2000-02-29 2001-09-07 Toshiba Corp コンテンツ伝送システム及びコンテンツ処理装置
US7061936B2 (en) * 2000-03-03 2006-06-13 Ntt Docomo, Inc. Method and apparatus for packet transmission with header compression
US6993009B2 (en) * 2000-03-10 2006-01-31 Hughes Electronics Corporation Method and apparatus for deriving uplink timing from asynchronous traffic across multiple transport streams
WO2001080567A1 (en) 2000-04-14 2001-10-25 Sony Corporation Decoder and decoding method, recorded medium, and program
US7680912B1 (en) 2000-05-18 2010-03-16 thePlatform, Inc. System and method for managing and provisioning streamed data
US6535043B2 (en) 2000-05-26 2003-03-18 Lattice Semiconductor Corp Clock signal selection system, method of generating a clock signal and programmable clock manager including same
US7292772B2 (en) 2000-05-29 2007-11-06 Sony Corporation Method and apparatus for decoding and recording medium for a coded video stream
US7274679B2 (en) 2000-06-22 2007-09-25 Mati Amit Scalable virtual channel
US7149549B1 (en) 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
US6529527B1 (en) * 2000-07-07 2003-03-04 Qualcomm, Inc. Method and apparatus for carrying packetized voice and data in wireless communication networks
JP4337244B2 (ja) 2000-07-25 2009-09-30 ソニー株式会社 Ｍｐｅｇ画像ストリームのデコード装置およびデコード方法
EP1312206A1 (en) * 2000-08-16 2003-05-21 Koninklijke Philips Electronics N.V. Method of playing multimedia applications
WO2002015591A1 (en) 2000-08-16 2002-02-21 Koninklijke Philips Electronics N.V. Method of playing multimedia data
ES2272541T3 (es) 2000-08-23 2007-05-01 Koninklijke Philips Electronics N.V. Sistema y dispositivo de comunicaciones.
SE517245C2 (sv) 2000-09-14 2002-05-14 Ericsson Telefon Ab L M Synkronisering av audio- och videosignaler
US6747964B1 (en) * 2000-09-15 2004-06-08 Qualcomm Incorporated Method and apparatus for high data rate transmission in a wireless communication system
KR20020043139A (ko) 2000-12-01 2002-06-08 윤종용 이동통신시스템에서 고속 데이터 서비스를 위한 스케쥴링방법
US6920118B2 (en) * 2000-12-20 2005-07-19 Lucent Technologies Inc. Method and apparatus for communicating heterogeneous data traffic
US6904059B1 (en) 2001-03-06 2005-06-07 Microsoft Corporation Adaptive queuing
US6859500B2 (en) * 2001-03-20 2005-02-22 Telefonaktiebolaget Lm Ericsson Run-length coding of non-coded macroblocks
US20030016702A1 (en) 2001-03-30 2003-01-23 Bender Paul E. Method and system for maximizing standby time in monitoring a control channel
US20020150123A1 (en) * 2001-04-11 2002-10-17 Cyber Operations, Llc System and method for network delivery of low bit rate multimedia content
EP1380159A4 (en) * 2001-04-20 2008-01-09 France Telecom Res And Dev L L SYSTEMS TO ASSIGN THE STORED VIDEO IMAGES SELECTIVELY TO MARKERS, AND METHOD FOR OPERATING THEM
US7230941B2 (en) 2001-04-26 2007-06-12 Qualcomm Incorporated Preamble channel decoding
US20020194606A1 (en) * 2001-06-14 2002-12-19 Michael Tucker System and method of communication between videoconferencing systems and computer systems
JP2003046949A (ja) 2001-07-30 2003-02-14 Hitachi Ltd データ多重化方法、データ記録媒体、データ記録装置及びデータ記録プログラム
US7327789B2 (en) 2001-08-06 2008-02-05 Matsushita Electric Industrial Co., Ltd. Decoding apparatus, decoding method, decoding program, and decoding program storage medium
JP4647149B2 (ja) * 2001-08-06 2011-03-09 独立行政法人情報通信研究機構 トランスポートストリームの送信装置および受信装置
US6847006B2 (en) * 2001-08-10 2005-01-25 Semiconductor Energy Laboratory Co., Ltd. Laser annealing apparatus and semiconductor device manufacturing method
US20080002669A1 (en) 2001-09-14 2008-01-03 O'brien Ray Packet voice gateway
US6968091B2 (en) * 2001-09-18 2005-11-22 Emc Corporation Insertion of noise for reduction in the number of bits for variable-length coding of (run, level) pairs
US7336680B2 (en) * 2001-09-18 2008-02-26 Scientific-Atlanta, Inc. Multi-carrier frequency-division multiplexing (FDM) architecture for high speed digital service
US7075946B2 (en) 2001-10-02 2006-07-11 Xm Satellite Radio, Inc. Method and apparatus for audio output combining
US20040190609A1 (en) * 2001-11-09 2004-09-30 Yasuhiko Watanabe Moving picture coding method and apparatus
US7453843B2 (en) * 2001-12-11 2008-11-18 Texas Instruments Incorporated Wireless bandwidth aggregator
US7292690B2 (en) 2002-01-02 2007-11-06 Sony Corporation Video scene change detection
DE10300048B4 (de) 2002-01-05 2005-05-12 Samsung Electronics Co., Ltd., Suwon Verfahren und Vorrichtung zur Bildcodierung und -decodierung
US7130313B2 (en) 2002-02-14 2006-10-31 Nokia Corporation Time-slice signaling for broadband digital broadcasting
US7596179B2 (en) 2002-02-27 2009-09-29 Hewlett-Packard Development Company, L.P. Reducing the resolution of media data
FI114679B (fi) 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
FR2839407B1 (fr) * 2002-05-02 2004-12-17 Canon Kk Procede et dispositif d'ajustement de la taille maximale des sequences d'information transmises dans un reseau de telecommunications
US8699505B2 (en) * 2002-05-31 2014-04-15 Qualcomm Incorporated Dynamic channelization code allocation
US20030224806A1 (en) 2002-06-03 2003-12-04 Igal Hebron System and method for network data quality measurement
US6956875B2 (en) 2002-06-19 2005-10-18 Atlinks Usa, Inc. Technique for communicating variable bit rate data over a constant bit rate link
US7486678B1 (en) 2002-07-03 2009-02-03 Greenfield Networks Multi-slice network processor
RU2332705C2 (ru) * 2002-07-16 2008-08-27 Нокиа Корпорейшн Способ предоставления возможности компенсации задержки передачи пакетов при потоковой передаче мультимедийных данных
CN1221132C (zh) * 2002-07-30 2005-09-28 华为技术有限公司 实现多种视音频流格式转换的装置和方法
US7567509B2 (en) 2002-09-13 2009-07-28 Dialogic Corporation Methods and systems for jitter minimization in streaming media
TW569556B (en) 2002-10-04 2004-01-01 Avid Electronics Corp Adaptive differential pulse-code modulation compression encoding/decoding method capable of fast recovery and apparatus thereof
US7191384B2 (en) * 2002-10-17 2007-03-13 Qualcomm Incorporated Method and apparatus for transmitting and receiving a block of data in a communication system
US7068708B2 (en) * 2002-12-13 2006-06-27 Motorola, Inc. Method and receiving unit for demodulating a multi-path signal
JP2004226272A (ja) 2003-01-23 2004-08-12 Seiko Epson Corp シミ欠陥の検出方法及び装置
US8483189B2 (en) 2003-03-10 2013-07-09 Panasonic Corporation OFDM signal transmission method, transmission apparatus, and reception apparatus
US7400889B2 (en) 2003-04-01 2008-07-15 Telefonaktiebolaget Lm Ericsson (Publ) Scalable quality broadcast service in a mobile wireless communication network
US7535876B2 (en) 2003-04-01 2009-05-19 Alcatel-Lucent Usa Inc. Method of flow control for HSDPA and HSUPA
EP1616272A1 (en) * 2003-04-14 2006-01-18 Koninklijke Philips Electronics N.V. System and method for performing automatic dubbing on an audio-visual stream
US7391717B2 (en) 2003-06-30 2008-06-24 Microsoft Corporation Streaming of variable bit rate multimedia content
KR100651566B1 (ko) * 2003-08-26 2006-11-28 삼성전자주식회사 이동통신 단말기에서 출력 버퍼링을 이용한 멀티미디어재생 장치 및 그 제어 방법
WO2005025224A1 (ja) * 2003-09-02 2005-03-17 Sony Corporation コンテンツ受信装置、ビデオオーディオ出力タイミング制御方法及びコンテンツ提供システム
US9351013B2 (en) 2003-11-13 2016-05-24 Qualcomm Incorporated Selective and/or scalable complexity control for video codecs
US20050138251A1 (en) 2003-12-18 2005-06-23 Fanning Blaise B. Arbitration of asynchronous and isochronous requests
CA2554757A1 (en) * 2004-01-29 2005-08-11 Chaoticom, Inc. Systems and methods for providing digital content and caller alerts to wireless network-enabled devices
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7558221B2 (en) 2004-02-13 2009-07-07 Seiko Epson Corporation Method and system for recording videoconference data
US7586882B2 (en) * 2004-03-19 2009-09-08 Telefonaktiebolaget Lm Ericsson (Publ) Higher layer packet framing using RLP
US7530089B1 (en) 2004-03-29 2009-05-05 Nortel Networks Limited System and method for improving video quality using a constant bit rate data stream
US7865255B2 (en) * 2004-03-31 2011-01-04 Mstar Semiconductor, Inc. Audio buffering system and method of buffering audio in a multimedia receiver
CN100576820C (zh) * 2004-05-07 2009-12-30 艾格瑞系统有限公司 与帧集合一起使用的mac报头压缩
ATE484157T1 (de) 2004-05-13 2010-10-15 Qualcomm Inc Synchronisierung von audio und video daten in einem drahtlosen nachrichtenübertragungssystem

Also Published As

Publication number Publication date
ATE426988T1 (de) 2009-04-15
MXPA06013193A (es) 2007-02-14
US20050259623A1 (en) 2005-11-24
EP2214412A3 (en) 2012-11-14
DE602005027837D1 (de) 2011-06-16
ES2366192T3 (es) 2011-10-18
JP2007537683A (ja) 2007-12-20
EP2214412A2 (en) 2010-08-04
EP1751987B1 (en) 2010-10-06
CA2566125A1 (en) 2005-12-01
EP1751987A1 (en) 2007-02-14
CN1973515A (zh) 2007-05-30
BRPI0510952A (pt) 2007-11-20
CA2566125C (en) 2012-01-24
KR20070014200A (ko) 2007-01-31
ATE484157T1 (de) 2010-10-15
MY142161A (en) 2010-10-15
EP1757027B1 (en) 2008-12-10
TWI394407B (zh) 2013-04-21
KR20080084866A (ko) 2008-09-19
JP2011142616A (ja) 2011-07-21
CN1985477B (zh) 2012-11-07
CA2566126A1 (en) 2005-12-01
CA2565977A1 (en) 2005-12-01
KR100918596B1 (ko) 2009-09-25
ATE417436T1 (de) 2008-12-15
KR20090039809A (ko) 2009-04-22
US20140362740A1 (en) 2014-12-11
ES2354079T3 (es) 2011-03-09
TW201145943A (en) 2011-12-16
KR100871305B1 (ko) 2008-12-01
EP2182734A1 (en) 2010-05-05
CA2566124A1 (en) 2005-12-01
US8855059B2 (en) 2014-10-07
US20050259690A1 (en) 2005-11-24
ATE508567T1 (de) 2011-05-15
JP2007537681A (ja) 2007-12-20
WO2005114943A2 (en) 2005-12-01
BRPI0510961A (pt) 2007-11-20
BRPI0510953A (pt) 2007-11-20
JP2007537682A (ja) 2007-12-20
CN1969562B (zh) 2011-08-03
US20150016427A1 (en) 2015-01-15
ES2318495T3 (es) 2009-05-01
EP2262304B1 (en) 2012-08-22
ES2323011T3 (es) 2009-07-03
WO2005115009A1 (en) 2005-12-01
WO2005114919A1 (en) 2005-12-01
DE602005013517D1 (de) 2009-05-07
CN1969562A (zh) 2007-05-23
EP1751956A2 (en) 2007-02-14
EP1751956B1 (en) 2011-05-04
CN1973515B (zh) 2013-01-09
EP1751955A1 (en) 2007-02-14
KR20070014201A (ko) 2007-01-31
EP2262304A1 (en) 2010-12-15
CN102984133A (zh) 2013-03-20
WO2005114943A3 (en) 2006-01-19
MXPA06013210A (es) 2007-02-28
EP1751955B1 (en) 2009-03-25
US20050259613A1 (en) 2005-11-24
BRPI0510962A (pt) 2007-11-20
CA2565977C (en) 2013-06-11
KR20070013330A (ko) 2007-01-30
MY139431A (en) 2009-09-30
US20050259694A1 (en) 2005-11-24
JP2007537684A (ja) 2007-12-20
KR100906586B1 (ko) 2009-07-09
WO2005114950A1 (en) 2005-12-01
TWI353759B (en) 2011-12-01
US9674732B2 (en) 2017-06-06
CA2771943A1 (en) 2005-12-01
EP2182734B1 (en) 2013-12-18
US8089948B2 (en) 2012-01-03
MY141497A (en) 2010-04-30
TW200618564A (en) 2006-06-01
CN1977516B (zh) 2010-12-01
CA2811040A1 (en) 2005-12-01
DE602005023983D1 (de) 2010-11-18
CA2771943C (en) 2015-02-03
MXPA06013186A (es) 2007-02-14
JP4448171B2 (ja) 2010-04-07
US9717018B2 (en) 2017-07-25
EP2592836A1 (en) 2013-05-15
JP4554680B2 (ja) 2010-09-29
TWI381681B (zh) 2013-01-01
EP3331246A1 (en) 2018-06-06
CA2566124C (en) 2014-09-30
TW200618544A (en) 2006-06-01
KR100870215B1 (ko) 2008-11-24
CN1985477A (zh) 2007-06-20
KR101068055B1 (ko) 2011-09-28
US10034198B2 (en) 2018-07-24
TW200623737A (en) 2006-07-01
EP1757027A1 (en) 2007-02-28
JP4361585B2 (ja) 2009-11-11
DE602005011611D1 (de) 2009-01-22
CN102984133B (zh) 2016-11-23
JP5356360B2 (ja) 2013-12-04
BRPI0510952B1 (pt) 2019-09-03
MXPA06013211A (es) 2007-03-01
KR101049701B1 (ko) 2011-07-15
CN1977516A (zh) 2007-06-06

Similar Documents

Publication Publication Date Title
KR100906586B1 (ko) 무선 통신 시스템에서 오디오 데이터와 비디오 데이터의동기화
TWI416900B (zh) 用以配置資訊至一通信系統之通道之方法及裝置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130628

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140627

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160629

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20170629

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee